预训练 – 量子位

预训练

Ilya宣判后GPT-5被曝屡训屡败，一次训数月，数据要人工从头构建

OpenAI已经在调整战略了

明敏 2024-12-22

GPT-5 OpenAI Scaling Law 预训练

用暂停token重新训练大模型，AI学会三思而后行

只需增加1024个参数

鱼羊 2023-10-14

大模型预训练

650亿参数大模型预训练方案开源可商用！LLaMA训练加速38%，来自明星开源项目

开箱即用四步搞定

明敏 2023-07-18

免费开源预训练

谷歌开源预训练新范式BiT，准确率提高近25%！网友评价：CV界BERT

大规模预训练+简单迁移策略

鱼羊 2020-05-22

计算机视觉谷歌预训练

加载更多

热门文章

6天烧光2000多万，拿下开源第一！小米史无前例「炼丹直播」收官

AI算力之争不靠堆卡！浪潮信息捅破智算「能力天花板」，还瓦解了「产能焦虑」

阿里公布全模态模型新进展，Qwen4和下代视频模型均在训练中

GPT-6 Astra搓3D刷屏后，3D生成的竞争规则变了

PCIe显卡被低估了！内核补齐+通信重构，DeepSeek推理吞吐翻近7倍