视频选集

在构建大型语言模型(从头开始)中,您将通过从头开始逐步编写大型语言模型 (LLM) 来学习和理解它们如何从内到外工作。在这本书中,我将指导您创建自己的 LLM,用清晰的文本、图表和示例解释每个阶段。

本书中描述的用于训练和开发您自己的小型但功能强大的模型以用于教育目的的方法反映了用于创建大规模基础模型(例如 ChatGPT 背后的模型)的方法。此外,本书还包括用于加载大型预训练模型的权重以进行微调的代码。