关于ALICE PROJECT的构思
这两天在闲暇之余看了几集刀剑神域,一个我高中时看的动漫。Underworld中关于Alice的设定深深地打动了我。与此同时,我想起了Joon Sung Park的多Agent实验。两者的碰撞激发了我的兴趣,于是我构思了一个叫做"ALICE PROJECT"的计划。
Joon的实验中有几个关键点:
- 记忆与经验:通过Memory Stream来让agent记录下生命中的瞬间
- 成长与反思:通过Retrieve机制,让智能体从琐碎的记忆中提炼
- 自下而上(Bottom-up)的设计:各个智能体不被中央大脑所控制
这个实验最大的亮点是,作者Joon只在一个个体中植入了开派对的想法,但这个想法通过社交传播,最终形成了一个非常成功的集体活动。这是一个非常令人惊讶的"涌现"(Emergence)。
当下的LLM多角色实验存在以下问题:
- LLM作为已经训练好的模型,输入Prompt后该LLM模型只会进行推理(Inference),而不会根据压力调整权重
- LLM是一次性训练好的,无法持续学习
Alice作为一个动漫角色,其很多特征都是想实现AGI必须实现的问题:
- 神经网络非冻结态——"成长能力"
- 是否选择覆盖旧的权重——"理解能力"
- 解决对齐问题:如何建立核心价值观
- 内在动机的涌现
- 世界模型
- 稳定性:不会被轻易污染或崩溃
刀剑神域在概念上启发了我,而Joon的作品则在技术上启发了我。我想结合两者,制作一个包含巨大地图、诸多角色,以及人类可以潜入的一个"真实"的世界。