🤖 谷歌透露 Gemini 4 为迄今最雄心预训练，预计年底发布 谷歌 CEO Sundar
🤖 谷歌透露 Gemini 4 为迄今最雄心预训练，预计年底发布 谷歌 CEO Sundar Pichai 在 Alphabet 2026 年第二季度财报会上透露，下一代大模型 Gemini 4 已投入训练，这是该公司迄今为止最具雄心的预训练项目。
TechFoco
预训练 专题
共 5 篇文章，按时间倒序展示。
LLM的幻觉根源：不到0.1%的神经元在作祟 | 帖子 中国研究者发现，LLM中不到0.1%的特
LLM的幻觉根源：不到0.1%的神经元在作祟 | 帖子 中国研究者发现，LLM中不到0.1%的特定神经元可以可靠预测幻觉的发生，这些神经元早在预训练阶段就已形成，并与模型的“过度顺从”行为直接相关。
TechFoco
从0到1构建一个MiniLLM 本项目旨在构建一个小参数量的llm，走完预训练 -> 指令微调
从0到1构建一个MiniLLM 本项目旨在构建一个小参数量的llm，走完预训练 -> 指令微调 -> 奖励模型 -> 强化学习 四个阶段，以可控的成本完成一个可以完成简单聊天任务的chat模型，目前完成前两个阶段。
TechFoco
