晚点聊第144期：“大而强”到“小而强”——与刘知远、肖朝军聊密度法则、RL 的 Scaling Law 和智能的分布式未来

晚点聊第144期邀请清华刘知远、肖朝军解读《自然》机器学习子刊封面文章《Densing Law of LLMs》：大模型能力密度每 3.5 个月翻一番，可用更少算力和数据获得相当乃至更多智能。提升密度要从架构、数据治理、算法、软硬协同四环节着手，而 RL 的 Scaling Law 尚未清晰展现。两人预计 5 年内手机可跑 GPT-4~5 级别模型，未来入口或是随身携带的个人计算设备。