Hacker News:AI 热帖· simonpure·· 12 天前AI 评分59
Coop 志愿者预训练小语言模型项目进入 Stage 2
Coop: A small language model pretrained by volunteers
AI 导读
Coop 正在由志愿者利用捐赠的消费级硬件、Hugging Face 免费层和 GitHub Actions 从零预训练约 145M 参数模型,当前 Stage 2 使用 FineWeb-Edu。
来源:Hacker News:AI 热帖 · github.com