Перейти к содержимому

十分钟讲清推理模型(Reasoning)到底多做了什么?

李出戏

0:00 / 0:00

十分钟讲清推理模型(Reasoning)到底多做了什么?

27 просмотров · 7 дн. назад
李出戏
170 подписчиков
27 просмотров · 7 дн. назад
AI多想几十秒,真的会更聪明吗?我们用猫、鱼和三只箱子,拆开推理模型(Reasoning):训练时学会解题,使用时再把计算花在草稿、候选和验证上。 先“想”不等于后台重新训练;写得长,也不等于答案正确。这期把思维链(Chain of Thought)、推理时计算(Test-time Compute)和验证器(Verifier)串起来,看看模型什么时候该拆分问题、检查答案、换一条路。 片中还运行了一个三箱找鱼的小程序:同一道题,可以逐个验证,也可以先发现条件之间的关系,用更短的推理找到答案。 【章节】 00:00 AI回答前,到底在想什么? 00:48 三箱找鱼:草稿和思维链有什么用? 02:51 训练时:学会更有效地解题 04:44 使用时:展开步骤、比较候选、验证结果 06:46 为什么多算、多数票都不保证正确? 07:54 思考过程,是内部活动的完整记录吗? 08:47 哪些任务值得多想? 09:36 总结:学会方法,再把计算用对 10:20 OpenAI原声:检查、换路、拆分问题 【示例说明】 三箱程序是本地规则验证器,不是新训练的Reasoning模型;多数票示例是机制示意,不是商业模型采样成绩。 【系列前篇】 大语言模型是怎么训练的?    • 十分钟讲清大语言模型是怎么训练的?从 Token 到参数更新   【参考资料与原声来源】 OpenAI — Learning to reason with LLMs https://openai.com/index/learning-to-... DeepSeek-R1 原始论文 https://arxiv.org/html/2501.12948v1 Scaling LLM Test-Time Compute Optimally https://arxiv.org/html/2408.03314v1 Anthropic — Reasoning models don't always say what they think https://www.anthropic.com/research/re... OpenAI Forum — Learning to Reason with LLMs(2024-10-04) https://forum.openai.com/public/video... OpenAI Reasoning models guide https://platform.openai.com/docs/guid... 【音乐署名】 许可链接(CC BY 3.0):https://creativecommons.org/licenses/... Music: Awaken by Alex-Productions   / alexproductionsmusic   License: Creative Commons — Attribution 3.0 Unported — CC BY 3.0 Free Download / Stream: https://links.al/YL1 Music promoted by Audio Library: https://links.al/youtube Music: chill days by Snoozy Beats   / snoozybeats   License: Creative Commons — Attribution 3.0 Unported — CC BY 3.0 Free Download / Stream: https://links.al/oaC Music promoted by Audio Library: https://links.al/youtube Music: Puzzle by Roa   / roa_music1031   License: Creative Commons — Attribution 3.0 Unported — CC BY 3.0 Free Download / Stream: https://links.al/mur Music promoted by Audio Library: https://links.al/youtube 我是李出戏。把AI拆开讲清楚,越听越出戏。 #推理模型 #Reasoning #大语言模型