• 2024-07-14从头构建和训练 GPT-2 |实战
    引言该项目将引导您完成构建简单GPT-2模型的所有步骤,并使用TaylorSwift和EdSheeran的一堆歌曲进行训练。本文的数据集和源代码将在Github上提供。构建GPT-2架构我们将逐步推进这个项目,不断优化一个基础的模型框架,并在其基础上增加新的层次,这些层次都是基于GPT-2