MoE on Text Matrixhttps://0f9f3b1c.text-matrix.pages.dev/tags/moe/Recent content in MoE on Text MatrixHugozh-cnWed, 08 Apr 2026 11:10:11 +0800MiniMind：从零开始用3块钱训练64M参数的大语言模型https://0f9f3b1c.text-matrix.pages.dev/posts/tech/llm/minimind-llm-training-from-scratch/Sun, 29 Mar 2026 15:51:00 +0800https://0f9f3b1c.text-matrix.pages.dev/posts/tech/llm/minimind-llm-training-from-scratch/<h1 id="minimind从零开始用3块钱训练64m参数的大语言模型">MiniMind：从零开始用3块钱训练64M参数的大语言模型</h1> <h2 id="一项目概览">一、项目概览</h2> <p><strong>MiniMind</strong> 是由 jingyaogong 开发的开源大语言模型训练项目，其核心理念是&quot;大道至简&quot;——让每个人都能从零开始，仅用约 3 元钱成本与 2 小时训练时间，即可训练出规模约为 64M 参数的超小型语言模型 MiniMind。</p>