- 上云资讯 -
2025-01-19 20:43:23 117人关注
马斯克:训练Grok-3用了10万块NVIDIA H100 会很特别
马斯克近日宣布其人工智能初创公司xAI即将在八月推出其革新性大语言模型——Grok-2,预示着更加先进的人工智能功能即将面世。尽管Grok-2尚未揭开神秘面纱,但马斯克已迫不及待地为后续力作Grok-3预热。
Musk训练Grok 3 100k Nvidia H100 Grok 3训练细节 Nvidia H100应用 AI大模型训练技术
2025-01-14 16:34:22 293人关注
Llama 4启动训练 Meta科学家揭秘Llama 3.1训练背后的故事
Meta的科学家Thomas Scialom在播客节目Latent Space中,为我们揭开了Llama3.1的研发秘籍,并提前透露了Llama4的神秘面纱。
2025-01-11 18:41:35 151人关注
解决Llama3训练困境!豆包大模型携手港大团队推全新检查点系统 优化训练效率
在一个由数据和算法主导的数字世界里,人工智能的每一步成长都离不开一个关键元素——检查点(Checkpoint)。想象一下,当你正在训练一个能读懂人心、对答如流的大型语言模型时,这个模型聪明绝顶,但也是个"大胃王",需要海量计算资源来"喂饱"它。在训练过程中,如果突然断电或硬件故障,损失将是巨大的。这时,检查点就像一台"时光机",能让一切回到上一个安全状态,继续未完成的任务。