从零开始构建LLM：深入探讨分词器和数据管道

该文章系列针对LLM开发的关键方面，超越预构建模型，理解其底层机制。第一卷重点关注分词和数据管道是一个明智的选择，因为它们是模型性能和理解的基础。作者声明使用PyTorch原始代码，表明对实际实现的深入研究。

• •该文章系列旨在用PyTorch从头开始构建LLM。
• •第一卷侧重于分词和数据管道，这是LLM的核心组件。
• •该系列强调理解LLM功能的“为什么”和“如何”。