内修昇思MindSporeAI框架，外重行业汇聚，华为大模型的不平凡之路(3)

鹏程.盘古大模型专注于文本模态，多模态则是 AI 世界的常态。推及到预训练大模型，业界广泛认为由单模态扩展至多模态是必由之路。中科院自动化所基于昇思 MindSpore 打造了全球首个千亿参数三模态大模型紫东.太初，通过跨模态语义关联达成了视觉-文本-语音三模态的统一表达和高效协同。
紫东.太初多模态大模型具有超强的图文音跨模态理解与生成能力，与单模态相比，只需要一个大模型就能支撑图文音全场景 AI 应用。紫东.太初大幅提升文本、语音、图像和视频等领域的基础任务性能，在多模态内容的理解、搜索、推荐和问答、语音识别和合成、人机交互和无人驾驶等商业应用中具有巨大的市场价值。紫东.太初同样坚持基础模型开源的开源开放，通过开源的形式将模型分享业界使用，让伙伴们基于紫东.太初孵化更多的行业应用，同时开源协作还将有利于模型进一步升级，开发者可以在紫东.太初模型代码的基础上持续创新。

在华为全联接 2021 上，自动化所所长徐波演示了紫东.太初训练出来的虚拟人小初的语音生成视频能力。
无论是鹏程.盘古，还是紫东.太初，都属于基础大模型。接下来要说的是行业大模型，当被输入丰富的行业知识时，更专的大模型也就出现了。
同样在华为全联接 2021 上，鹏城实验室基于昇思 MindSpore AI 框架打造的鹏程.神农大模型正式发布，它是面向生物医学领域的 AI 平台，包含蛋白质结构预测、小分子生成、靶点与小分子相互作用预测以及新抗菌多肽设计与效果评价等模块，深度赋能生物制药。借助鹏程.神农的能力，制药企业和医学研究机构将大大加速新型药物的筛选与创制。
在抗菌肽（下一代抗菌素）的探索中，借助鹏程.神农大模型强大的氨基酸序列生成能力，并结合现有抗菌肽数据集，人们可以在很短时间内产生数万种候选肽的氨基酸序列。传统方法在长达四十年的时间里仅仅生成 4000 多种候选多肽，而鹏程.神农 抗菌肽分类器的组合在数月内产生 30 万种候选多肽。前后效果对比可见一斑，这也正是大模型的魔力。