中科院发布全球首个全模态AI大模型紫东太初2.0
最近,中国科学院自动化研究所推出全新的千亿参数全模态大模型“紫东太初2.0”。与现有的大模型不同,它不仅能处理文字、图像和音视频,还加入了3D点云和更丰富的传感器信号。
紫东太初2.0不仅能理解和推理多模态数据,还能在多轮交互中与用户产生对话。这使得AI离理解现实世界中的复杂信息又近了一步。它不仅能处理单一模态的数据,而且能融合不同模态的数据,进行联合分析和理解。例如,它可以找到两个视频(车内和车外视角)的共同特征,也能分析图书馆照片和汽车鸣笛声音频,找出其中的异常并给出解释。?
除了认知和推理,紫东太初2.0还可以进行多模态生成。它可以融合图像、音频和视频,讲一个完整...
点击查看剩余70%
{{collectdata}}
网友评论