LLMs-from-scratch, PyTorch로 직접 짓는 GPT 학습 저장소
LLMs-from-scratch는 PyTorch만으로 ChatGPT와 유사한 GPT형 대규모언어모델(LLM)을 처음부터 구현하도록 돕는 오픈소스 저장소다. 머신러닝 연구자 세바스찬 라슈카(Sebastian Raschka)가 동명 도서의 공식 코드로 공개했으며, 스타 10만 7천여 개를 넘긴 가운데 GitHub 트렌딩 일간 Jupyter 부문 4위에 올랐다. 최근에는 Qwen3.5, Gemma 4 등 최신 모델 구현이 계속 추가되고 있다.