foundations-of-llms

《대규모 모델 기초》는 대규모 언어 모델 학습자를 위한 오픈소스 교재로, 저장대학 팀이 집필하고 지속적으로 유지 관리하고 있습니다. 이 책의 제1판은 전통적 언어 모델, 대규모 언어 모델 아키텍처 진화, Prompt 엔지니어링, 파라미터 효율적 미세 조정, 모델 편집, 검색 증강 생성 등 6개 장으로 구성됩니다. 각 장은 동물을 배경으로 예시를 들어 가독성을 높이고자 했습니다. 저장소는 완전판 PDF와 장별 PDF를 제공하며, 각 장과 관련된 논문 목록을 함께 제공하여 최신 기술 동향을 추적할 수 있도록 합니다. 저자 팀은 매월 업데이트를 약속했으며, 향후 대규모 모델 추론 가속화, 대규모 모델 에이전트 등의 방향을 추가할 계획입니다. 독자는 GitHub issue를 통해 제안이나 오류 수정을 요청할 수 있으며, 이메일로 저자에게 연락할 수도 있습니다.