跳到正文
公众号:上海人工智能实验室· 上海人工智能实验室·· 12 小时前精选AI 评分67

上海AI实验室推出科学多模态框架书生·元征,以RSI让模型自主设计感知架构

大模型自主设计“科学感官”,多模态框架书生·元征以RSI拓展大模型能力边界

AI 导读

上海AI实验室推出科学多模态框架书生·元征(Sage SciPerception),通过可训练投影模块把谱图、序列、晶体结构和时序信号等科学特征转换为语言大模型可识别的表征,并引入递归式自我改进(RSI)模式,让模型参与分析任务表现、提出新的投影模块方案并迭代验证。框架采用冻结底座、只训练转换接口的轻量化方案,ncRNA读出映射实验仅更新约0.0005B参数。在书生-S2上,非编码RNA家族分类准确率从90.04%经分阶段读出提升至94.65%,再融入编码器适配与独立投影侧路后达96.73%。

阅读原文

来源:公众号:上海人工智能实验室 · mp.weixin.qq.com

推荐理由

框架用冻结语言底座加轻量投影接入多类科学数据,并让模型自主迭代感知架构,可看多模态科学模型的新做法。