Yann LeCun 在推上点评LLM，说了下面几个点：

1.自回归 LLM 可能很有用，尤其是对于写作和编码帮助
2.大模型通常会产生幻觉或产生并非基于事实信息的内容
3.大模型对物理世界的理解有限，这可以通过他们在某些谜题上的表现来观察得到
4.大模型的计划能力相当原始
5.大模型的工作记忆有限
6.大模型对每个生成的token执行固定数量的计算步骤，从而限制了它们更具动态性的潜力
7.大模型远非图灵完备，这意味着它们无法模拟通用计算机
8.自回归生成过程呈指数发散且难以控制

他前两天的talk：drive.google.com