
Titans – 谷歌推出的新型神经记忆架构
Titans是谷歌推出的新型神经网络架构,能突破Transformer在处理长序列数据时的记忆瓶颈。Titans引入神经长期记忆模块,模拟人脑记忆机制,特别强化对意外事件的记忆能力。Titans架构包含三种变体:MAC(记忆作为上下文)、MAG(记忆作为门)和MAL(记忆作为层),分别用不同的方式整合记忆模块。
17
0
2025-08-31