马修军谈视觉语言通用模型与具身智能
马修军作主旨演讲。 范宇斌 摄
中新网上海7月8日电(记者 范宇斌)2023世界人工智能大会“科技与人文——共筑无障碍智能社会”论坛8日在上海世博中心召开。
北京大学智能学院、跨媒体通用人工智能全国重点实验室研究员,超级自动化联合实验室主任马修军博士在论坛上作题为《跨越AIGC大模型的鸿沟:视觉语言大模型推动泛在的具身智能》的主旨演讲,从多模态通用模型角度,洞观AIGC(生成式人工智能)的下一热点——具身智能的发展以及大模型创新链与产业链深度融合。
人工智能已经迈入AIGC时代,全球产业界都在竞争具有泛化能力的语言大模型,大模型产业链与生态链日益完善,国际巨头不断推高大语音模型能力,国内百度、华为,腾讯、阿里等也在加速布局语言大模型。
马修军介绍道,当前,基于语言大模型的工具链和生态不断涌现,大模型应用重点转向行动导向,调用和操作外部系统和工具,即大模型从知识、推理转向行动驱动。“但语言大模型的普及仍存在三大鸿沟:一是幻觉问题,二是记忆和个性化问题,三是多模态与物理世界交互问题。”他认为,AIGC大模型下一个热点是多模态和具身智能。
所谓“具身智能”,是指能够理解、推理并与物理世界交互的通用智能体,具有多模态感知认知能力和自主多任务机制。视觉语言大模型是多模态通用模型的核心。
视觉也是一种语言,语言的载体是文字。“中国象形文字天然具有多模态表征和明文通信的编码能力,看一个字就知道什么意思。借助象形文字的编码思想,我们可以为人工智能表征世界设计一种多模态特征编码,进而发展多模态通用语言大模型。”马修军说。
据介绍,视觉语言大模型基于对现实世界表征预测的类象形文字的特征编码,使得人工智能拥有了自己的文字,可以理解像素、听懂语音序列并感知世界,真正拥有具身智能的核心能力,并且这种多模态文字编码可用于具身智能之间的通讯交互,构建一个泛在的机器智能社会。
马修军认为,多模态通用模型与具身智能是未来产业发展的基石,需要贯通学研产用全链条,推动大模型创新链与产业链深度融合。通信运营商算网融合,需要为多模态具身智能的通信重塑再造一种新型基础设施,包括面向机器通信的编码、消息格式及网元算力等。例如,面向机器的视觉编码VCM与5G消息以及大模型的融合创新。
“在AIGC时代,全球产业界都在竞争通用人工智能的基础模型,这是人工智能产业的皇冠,是未来智能社会的底座,并且它的演进速度非常快。”马修军表示,以大模型为基座的人工智能通用能力不会昙花一现,多模态通用模型与具身智能将重塑未来社会的产业链和产业生态,产生像互联网一样的影响力。
据悉,本次论坛由世界人工智能大会组委会办公室指导,中国新闻社上海分社、上海市杨浦区人民政府联合主办,上海中新传媒文化咨询有限公司、上海市杨浦区科委承办,上海市现代服务业联合会、上海市海外经济技术促进会、上海市长宁区北新泾街道办事处、上海新之海数据信息有限公司协办,中新社国际传播集团上海分公司、上海市人工智能行业协会支持。(完)
- 最近发表
-
- 随机阅读
-
- 两岸昆曲人相聚《牡丹亭》诞生地 曲艺为媒邂逅知音
- 在中国西南边境小学,重温中非友谊
- 呼伦贝尔黑土地奏响耕作交响曲:播下“金豆子” 守好“粮袋子”
- 共谋卫生健康新篇章,同绘健康中国宏伟蓝图——2024健康中国促进大会成功举办
- 英国首相基尔·斯塔默访问爱尔兰
- 总台记者专访丨IMF官员:创新已成为中国经济发展重要驱动力
- 部分理财产品调低申购“门槛” 最低至一分钱起投
- 湖南浏阳持续擦亮“中国花木之乡”名片做强“美丽经济”
- 宁夏开展安全生产工作专项督查 聚焦人员密集场所安全
- 突发!美国阿肯色州一武器工厂发生爆炸 至少2伤1失踪
- 越南诗人阮氏梅娟:用诗歌架设越中文化交流桥梁
- 上海举办俄罗斯插画师作品展 展现别样“北国的风景”
- 印度北方邦发生踩踏事件 已致20余人死亡
- “广州第一诞”郑仙诞开锣 非遗项目融入新潮元素
- 国家铁路创新研究院在重庆永川揭牌
- 国产高端智能手机崛起
- 送别95岁战地记者张崇岫 上千张照片记录“最可爱的人”
- 中国话剧优秀剧目展演闭幕:赓续传统 冀“圈粉”年轻一代
- 2024年湖南省百万职工劳动竞赛启动
- 北京交通部门4000余人投入公路防汛应急抢险 保障道路通行安全
- 热门推荐
-
- 河北发布暴雨蓝色预警信号 中南部有暴雨个别地点大暴雨
- 用微波炉加热或烹饪 会影响营养吗?
- 中国黄河流域在建装机最大水电站首台机组成功吊装
- 北京:执行“认房不认贷”政策措施
- 美国30年期贷款利率降至6.69% 连续两周下降
- 走进老字号 天津千年盐场传世求新
- 国际原子能机构总干事访问伊朗
- 我国珍稀濒危物种数量实现稳中有升
- 声音何以“疗伤”?科学家首次建立声音镇痛的小鼠模型
- 危险!美国华盛顿特区发生枪击事件 3名警察受伤
- 风暴潮蓝色警报发布:江苏中南部沿海将出现30到50厘米的风暴增水
- “无糖饮料”真不含糖吗?看看41款饮料配料表给出的答案
- 今年前2月中国工业生产加快 行业增长面超九成
- 中外康养企业和金融机构与天津旅游集团签约共同开发养老项目
- 广交会观察:用技术锁鲜 让“中国味”香飘四海
- 菲律宾一客车坠谷已致17死11伤
- 美国10月新增就业人数1.2万人 远低于过去一年月均水平
- 美国当选总统特朗普宣布白宫幕僚长拟任人选
- 日本千叶出现禽流感疫情 3.8万只鸡将被扑杀
- 中国(新疆)自由贸易试验区霍尔果斯片区外贸动能足