本文基于笔者于 2024年 6月 在 AI 架构理论方面实验，大部分文字汉化自 8月中旬给 Llama 团队做的 Talk。恰好 OpenAI 最近发布的 o1 指向了相似的方向，于是将内容科普化之后和大家讨论。