스탠퍼드 "LLM 연구 결과 44%, 이미 유효기간 지났다"
스탠퍼드대(Stanford) 연구진이 대규모 언어모델(LLM)에 관해 널리 인용된 주장 50건을 최신 모델 20종으로 재검증한 결과, 44%가 이미 효력을 잃은 것으로 나타났다. 유효기간을 추정할 수 있는 22건의 평균 수명은 15.7개월에 그쳤다. 연구진은 LLM 관련 실증 결과를 특정 모델·시점의 관찰로 제시해야 한다고 제안했다.
#Stanford
diy-llm, 스탠퍼드 CS336을 중국어로 재구성한 LLM 전주기 학습 과정
중국 오픈소스 교육 커뮤니티 데이터웨일(Datawhale)이 스탠퍼드 CS336 강의를 중국어권 학습자용으로 재구성한 diy-llm 저장소가 GitHub 트렌딩 Jupyter 일간 9위에 올랐다. 토크나이저, 트랜스포머, MoE, 분산 학습, 스케일링 법칙, 추론, 정렬까지 LLM 전 과정을 16개 장과 6개 과제로 다룬다.