nanoGPT-mup:专注于训练和微调中等大小 GPT 模型的最简仓库,是 karpathy/nanoGPT 的一个分支,并提供了最大更新参数化(muP)的最小实现

  • 爱可可-爱生活
  • 2024-10-01 23:02:16
【nanoGPT-mup:专注于训练和微调中等大小 GPT 模型的最简仓库,是 karpathy/nanoGPT 的一个分支,并提供了最大更新参数化(muP)的最小实现】'EleutherAI/nanoGPT-mup - The simplest, fastest repository for training/finetuning medium-sized GPTs.' GitHub: github.com/EleutherAI/nanoGPT-mup GPT 机器学习 深度学习 开源AI
nanoGPT-mup:专注于训练和微调中等大小 GPT 模型的最简仓库,是 karpathy/nanoGPT 的一个分支,并提供了最大更新参数化(muP)的最小实现