9月2日，阿里巴巴达摩院主办了世界人工智能大会“大规模预训练模型”主题论坛。会上，达摩院副院长周发布了阿里巴巴最新的“依桐”大模型系列，并宣布相关核心模型向全球开发者开放。面对大模型通用性和易用性尚有欠缺的问题，依桐建设了业内首个AI统一基地，构建了大小模型协同工作的分层人工智能体系，将为AI从感知智能到知识驱动的认知智能提供先进的基础设施。近年来，大型模型表现出了前所未有的理解能力和创造力，它们打破了传统AI只能处理单一任务的限制，从而使人类离通用人工智能的目标更近了一步。但要实现大模型全模式全任务的通用性，同时由于计算资源的限制，其训练和落地还有很多技术难点。
应用相当有挑战性。
2021年，阿里巴巴达摩院陆续发布多个版本的多模态、语言大模型，在超大模型、低碳训练技术、平台服务、落地应用等方面实现突破，引领中国大模型发展。特别是达摩院团队利用512卡V100GPU实现了10万亿参数大模型M6，相同参数规模的能耗仅为之前行业基准的1%，大大降低了大模型的训练门槛。今年，阿里巴巴继续努力解决大模型的通用性和可用性问题。达摩院副院长周介绍，为了让大模型更加“一体化”，达摩院在国内率先建设了AI统一基地，在业界首次实现了模态表示、任务表示、模型结构的统一。作为单一模型，依桐统一基地的M6-OFA模型可以处理10多种单峰和跨峰任务，如图像描述、视觉定位、文学形象、视觉暗示、文档摘要等。没有引入新的结构，效果达到国际领先水平。这一突破最大程度的打开了AI的感官，受到了学术界和产业界的广泛关注。最近，M6-OFA已经升级，可以处理30多种多式联运任务。“大模型模仿了人类认知的过程，这是我们目前的重要机遇。通过整合AI在语言、语音、视觉等不同模式和领域的知识体系。我们期待多模态大模型可以成为下一代人工智能算法的基石，可以让AI只用‘单一感官’到‘全五感’，可以调用拥有丰富知识的大脑去理解世界和思考，最终实现接近人类水平的认知智能。”周对说道。同时，基于统一的基础，达摩院构建了分层模型体系，其中通用模型层涵盖自然语言处理、多模态、计算机视觉，专业模型层深入到电商、医疗、法律、金融、娱乐等行业。配合一般专业领域尺寸机型，依桐大机型系列可以兼顾性能优化和低成本落地。为了加快大模型的规模化应用，达摩院还开发了S4框架，这是大模型落地的关键技术。在压缩率达到99%的情况下，数百亿参数的大型模型的多任务精度可以接近无损。通过部署超大型模型和轻量级版本，阿里巴巴依桐模型系列已在超过200个场景中提供服务，实现了2% ~ 10%的应用效果提升。典型的使用场景包括电子商务跨模态搜索、AI辅助设计、开放领域人机对话、法律文档学习、医学文本理解等。与此次发布同步，依桐大模型系列的核心模型和能力，如AliceMind-PLUG、AliceMind-mPLUG、多模态理解与生成统一模型、M6-OFA、S4框架，这是落地超级模型的关键技术，已经面向全球开发者开源，最新的文圣图大模型将于近期开放体验。
除已声明原创作品外，本站作品均由网友自主投稿、编辑整理发布，目的在于传递更多信息及用于网络分享，并不代表本站赞同其观点和对其真实性负责，不为其版权负责。如果您发现网站上有侵犯您的知识产权的作品，请与我们取得联系，我们会及时修改或删除。
微信扫一扫
