planckgptnguyenphuminh
NUEVOProyecto educativo para entrenar un modelo GPT (≈540M parámetros) desde cero en laptop de consumidor, con preentrenamiento en Fineweb-edu y ajuste de chat.
Descubre proyectos de código abierto de calidad, envía proyectos de forma anónima y reclama y edita tu propio proyecto.
Un poco de curiosidad. Un mundo de código abierto.
THE FIRST COLLECTIONProyecto educativo para entrenar un modelo GPT (≈540M parámetros) desde cero en laptop de consumidor, con preentrenamiento en Fineweb-edu y ajuste de chat.
Repositorio oficial de código para 'Build a Large Language Model (From Scratch)': implementación paso a paso en PyTorch de modelos tipo GPT, cubriendo preentrenamiento y ajuste fino con notebooks y ejercicios.