AI框架生态峰会将于明日上海开幕，全球首个全模态大模型紫东太初2.0正式登场。该模型基于华为全栈国产化软硬件平台昇腾AI与昇思MindSpore，由中国科学院自动化研究所和武汉人工智能研究院联合打造。

在文本、图片、音频的基础上，“紫东太初”2.0可融入3D、视频、传感信号等更多模态数据，并优化语音、视频和文本的融合认知以及常识计算等功能，进一步突破感知、认知和决策的交互屏障。业内人士表示，紫东太初2.0这样的全模态大模型是通向通用人工智能道路上必不可少的一步。

值得一提的是，此前华为昇腾AI开发者峰会上，“紫东太初”大模型还开放了基于昇腾和昇思的3.8B图像-文本-语音多模态模型，并推出了紫东太初大模型服务平台。该模型已在多个行业场景领域显示出落地潜力，包括手语教学、法律咨询、交通出行、广电、医疗机器人和医学影像判读等。

民生证券吕伟分析指出，自4月11日《生成式人工智能服务管理方法》征求意见稿发布，短短2个月内，顶层及各地纷纷出台相关AI大模型推动政策，在产业发展早期获得政策如此重视几乎是空前的。而在技术与政策逐步明朗的格局下，新一轮AI大模型产品升级上线与产品应用发布大幕也随之拉开。在经历二月至三月的大模型集中发布期、四月至五月的产品研发期之后，六月起AI大模型产品和应用有望迎来集中发布。

二级市场上，联合华为在AI领域合作的拓维信息年内股价累计最大涨幅达221.57%；深度参与华为鲲鹏生态建设的华宇软件6月8日迄今股价累计最大涨幅达39.15%。

根据模态，可以将AI大模型分为单模态、多模态、全模态等不同类型，比如GPT-3就属单模态大模型，紫东.太初1.0和GPT-4属于多模态大模型，紫东.太初2.0是全球首个全模态大模型。全模态大模型，指可以利用文本、图片、音频、视频、3D等不同模态的数据进行跨模态的统一表征和学习，更接近人类的学习方式。

华安证券马远方4月13日研报指出，多模态数据（听觉、触觉、动作等）已经带来AI全新应用场景。2020年中国多模态内容市场规模达2020亿元，2018-20年CAGR达126.2%，预计2021-25年商业定制类需求增速最大，规模将达164亿元，CAGR达55%。

国信证券熊莉等人6月13日研报表示，在当前时点，AI 大模型呈现边缘侧、降低模型参数量以及多模态的三大发展趋势。具体到多模态领域，谷歌在其5月10日开发者大会上披露，目前其在研发下一代多模态大模型Gemini（双子星）；OpenAI CEO Sam Altman在5月闭门会议上提出，OpenAI正在研发多模态大模型，预计24年将发布其新一代多模态大模型。

据财联社不完全统计，与紫东太初AI大模型有所合作的A股上市公司包括中科曙光、新大陆、汉王科技和拓维信息等，具体如下：

编辑/范辉