中科院自动化所:正在打造“紫东太初”2.0全模态大模型
【环球网科技综合报道】近日,中国科学院自动化研究所“紫东太初”大模型研究中心常务副主任、武汉人工智能
(资料图片仅供参考)
【环球网科技综合报道】近日,中国科学院自动化研究所“紫东太初”大模型研究中心常务副主任、武汉人工智能研究院院长王金桥研究员介绍,基于华为全栈国产化软硬件平台昇腾AI与开源AI框架昇思MindSpore,中国科学院自动化研究所和武汉人工智能研究院正在联合打造 “紫东太初”2.0全模态大模型,可实现文本、图片、语音、视频、3D点云、传感信号等不同模态的统一表征和学习,助推通用人工智能时代加速到来。
据悉,2019年开始,自动化所在语音、文本、图像等单模态大模型研究和应用基础上,瞄准多模态大模型领域开始联合攻关,并于2021年7月正式发布了全球首个千亿参数多模态大模型“紫东太初”,以多模态技术探索通用人工智能发展道路。
区别于当前以文本为主的大部分语言大模型,“紫东太初”大模型在研发之初即坚持以多模态技术为核心,利用图-音-文等更多类型数据进行跨模态的统一表征和学习,实现了图像、文本、语音三模态数据间的“统一表示”与“相互生成”,使人工智能大模型的理解和生成能力更加接近人类,为贯通多模态人工智能行业应用提供了创新基础,向通用人工智能迈出关键一步。
在“紫东太初”1.0应用推广过程中,除了需要处理海量语音、图像和文本等互联网信息外,更需要处理多种传感器、3D点云及视频等物联网海量数据,才能满足现实生产力的提高。针对数字物联时代的新需求与新趋势,中科院自动化研究所研究探索全模态大模型体系架构和基础算法,持续推动“紫东太初”技术和应用发展。
在文本、图片、音频、视频的基础上,“紫东太初” 2.0可融入3D、视频、传感信号等更多模态数据,并优化语音、视频和文本的融合认知以及常识计算等功能,进一步突破感知、认知和决策的交互屏障,让人工智能从感知世界进化为认知世界。
关键词:
[ 相关文章 ]
【环球网科技综合报道】近日,中国科学院自动化研究所“紫东太初”大模型研究中心常务副主任、武汉人工智能
扫码阅读《给连队官兵一张安静的书桌》本版于4月24日刊发稿件《给连队官兵一张安静的书桌》,介绍了一位基
1、创维酷开是由深圳创维-RGB电子有限公司出资成立的高新技术企业。2、可以说酷开属于创维,但创维不属于酷
5月8日北向资金减持34 24万股奥普光电。近5个交易日中,获北向资金增持的有3天,累计净增持1 18万股。近20
视频加载中 落实省委“四化同步、城乡融合、五区共兴”战略部署,今天(8日),成都·广安生物医药产业协
资料图:上海兴起后备箱集市樊中华摄 今年以来,北京、上海、兰州等城市也在探索外摆经营的相关政策。盘
想坐火车去香港,只能乘坐广九直通车。办好港澳通行证和入境签证后,搭乘1路、32路、83路、100路、211路、2
1、我是在校生,你是本科还是专科?1 本科和专科老师有一部分是共用的,就专科来说师资很好,本科就很一般2
成都为明学校又双叒叕得奖啦!学校街舞队出战2023年四川省全民健身操舞大赛暨四川省健美操冠军赛荣获四川省
1、光阴如梭,一年的工作转瞬又将成为历史。2、新的一年意味着新的起点新的机遇新的挑战、“决心再接再厉
据路透社报道,俄罗斯控制的扎波罗热地区的一名莫斯科任命的官员当地时间5月7日晚些时候称,大约1679人,包
1、neil向顾里隐瞒了他是同性恋。本文就为大家分享到这里,希望小伙伴们会喜欢。
中信保诚「信守未来」终身寿险是中信保诚人寿承保的一款有效保额以每年3 5%增长率逐年保证递增的人寿产品,
推出高压报装“四早”服务、上线“绿电交易”电费账单、新能源并网外线投资全免费、完成150个城中村供用电
随着《数字中国建设整体布局规划》的出炉,数字中国建设蓝图徐徐展开,带动更多传统产业加速数字化转型,应
【大河财立方消息】今天(5月8日)下午,国务院联防联控机制召开新闻发布会,国家疾控局传染病防控司副司长
1、工具 原料大米,水步骤 方法怎样用米饭自制胶水2、把大米和水放在锅中烧开。2、3、怎样用米饭自制胶水4
转自:千龙网据美国福克斯新闻网站5月7日报道,美国得克萨斯州一所高中长期受到浣熊侵扰,相关部门已联系野
自然资源部:全国海洋原油、海洋天然气产量同比分别增长3 8%、6 5%,今年一季度,海洋经济稳中有进,实现良
将不会采用固态按键!iPhone15Pro正面玻璃曝光:苹果手机最窄边框
[ 相关新闻 ]
Copyright 2015-2022 时代医院网 版权所有 备案号: 联系邮箱: 514 676 113@qq.com