为此，Titans 团队打算将过去信息编码到神经网络的参数中，训练了一个 在线元模型 （Online meta-model），该模型学习如何在测试时记住/忘记特定数据。 在另一项需要对分布在极长文档中的事实做推理的任务中，Titans 表现超过了 ...

想挑战 Transformer 的新架构有很多，来自谷歌的“正统”继承者 Titan 架构更受关注。 英伟达把测试时间计算（Test-time Computing）称为大模型的第三个 Scaling Law。 Titans 比 ...