筛选结果
4 篇排序
1:50:48EN → 简体中文为什么推理比训练重要 12 倍François Chaubard, Dan Fu, Jeff Morgan, Joe Fioti, Liangsheng Yin · Y CombinatorYC Paper Club 从一次 API 请求一路讲到 GPU kernel。Together AI、Ollama、Luminal 和 SGLang 的四场演讲认为:现在算力和钱大多压在推理服务质量上,而不只是训练 FLOPs。
0:22EN → 简体中文DeepSeek 的内存使用:一段关于 KV 缓存的短评Matthew Berman · Forward FutureMatthew Berman 将较低的缓存内存使用量与服务更多 token 联系起来,但片段没有说明这些数字的比较基准。
31:30EN → 简体中文为什么有些 AI 模型完成任务所用的 Token 更少TheoTheo 解释输入、输出、缓存与推理 Token,并探讨简短内部推理可能带来的效率。
1:22:52EN → 简体中文Richmond Alake 谈智能体记忆、上下文工程与信息回忆的成本Matthew Berman, Richmond Alake · Forward Future在与 Matthew Berman 的直播中,Oracle 的 Richmond Alake 解释智能体如何存储、检索和整理信息,以及记忆设计与缓存、延迟之间的取舍。









