马修军谈视觉语言通用模型与具身智能
马修军作主旨演讲。 范宇斌 摄
中新网上海7月8日电(记者 范宇斌)2023世界人工智能大会“科技与人文——共筑无障碍智能社会”论坛8日在上海世博中心召开。
北京大学智能学院、跨媒体通用人工智能全国重点实验室研究员,超级自动化联合实验室主任马修军博士在论坛上作题为《跨越AIGC大模型的鸿沟:视觉语言大模型推动泛在的具身智能》的主旨演讲,从多模态通用模型角度,洞观AIGC(生成式人工智能)的下一热点——具身智能的发展以及大模型创新链与产业链深度融合。
人工智能已经迈入AIGC时代,全球产业界都在竞争具有泛化能力的语言大模型,大模型产业链与生态链日益完善,国际巨头不断推高大语音模型能力,国内百度、华为,腾讯、阿里等也在加速布局语言大模型。
马修军介绍道,当前,基于语言大模型的工具链和生态不断涌现,大模型应用重点转向行动导向,调用和操作外部系统和工具,即大模型从知识、推理转向行动驱动。“但语言大模型的普及仍存在三大鸿沟:一是幻觉问题,二是记忆和个性化问题,三是多模态与物理世界交互问题。”他认为,AIGC大模型下一个热点是多模态和具身智能。
所谓“具身智能”,是指能够理解、推理并与物理世界交互的通用智能体,具有多模态感知认知能力和自主多任务机制。视觉语言大模型是多模态通用模型的核心。
视觉也是一种语言,语言的载体是文字。“中国象形文字天然具有多模态表征和明文通信的编码能力,看一个字就知道什么意思。借助象形文字的编码思想,我们可以为人工智能表征世界设计一种多模态特征编码,进而发展多模态通用语言大模型。”马修军说。
据介绍,视觉语言大模型基于对现实世界表征预测的类象形文字的特征编码,使得人工智能拥有了自己的文字,可以理解像素、听懂语音序列并感知世界,真正拥有具身智能的核心能力,并且这种多模态文字编码可用于具身智能之间的通讯交互,构建一个泛在的机器智能社会。
马修军认为,多模态通用模型与具身智能是未来产业发展的基石,需要贯通学研产用全链条,推动大模型创新链与产业链深度融合。通信运营商算网融合,需要为多模态具身智能的通信重塑再造一种新型基础设施,包括面向机器通信的编码、消息格式及网元算力等。例如,面向机器的视觉编码VCM与5G消息以及大模型的融合创新。
“在AIGC时代,全球产业界都在竞争通用人工智能的基础模型,这是人工智能产业的皇冠,是未来智能社会的底座,并且它的演进速度非常快。”马修军表示,以大模型为基座的人工智能通用能力不会昙花一现,多模态通用模型与具身智能将重塑未来社会的产业链和产业生态,产生像互联网一样的影响力。
据悉,本次论坛由世界人工智能大会组委会办公室指导,中国新闻社上海分社、上海市杨浦区人民政府联合主办,上海中新传媒文化咨询有限公司、上海市杨浦区科委承办,上海市现代服务业联合会、上海市海外经济技术促进会、上海市长宁区北新泾街道办事处、上海新之海数据信息有限公司协办,中新社国际传播集团上海分公司、上海市人工智能行业协会支持。(完)
- 最近发表
-
- 随机阅读
-
- 新递送系统改善Ⅰ型糖尿病青少年认知
- 南海西北陆坡一号沉船考古新发现(考古进行时)
- 2024年11月份居民消费价格同比上涨0.2%
- 东莞仲裁委员会何以成为服贸会唯一受邀地级市仲裁机构
- 定了!特朗普和哈里斯同意于9月10日进行电视辩论
- 中秋国庆假期铁路跨省客流增势强劲 北京各车站开辟夜间休息专区
- 浙江省消防救援局正式挂牌
- 俄媒:俄称库尔斯克州遭乌军袭击 普京发声
- 2023海峡两岸(集美)龙舟文化节厦门启幕
- 北美票房:杰森·斯坦森《养蜂人》登榜首
- 一季度中国电力供需总体平衡
- 【世界说】美媒:美国商业地产危机四伏 或致新一轮银行破产潮
- 尚赫:三十而立,再踏新征程
- 年内第二次!国内油价调整大概率搁浅
- 外媒:德国总统宣布解散联邦议院
- 北京:明天强冷空气过程近尾声
- 一名旅客藏匿6只活体龟进境 被皇岗海关查获
- 菲律宾中国了解协会成立50周年庆典在马尼拉举行
- 第十六届西藏珠穆朗玛摄影大展在拉萨林周县开幕
- 重庆企业代表团拜访马中总商会 签下逾亿元订单
- 热门推荐
-
- 地下“绿色空调” 温暖千家万户
- 乌苏里江海青段预计今晚出现洪峰
- 理想新车陷造型风波损失惨重 P图者要负责吗?
- 怒批华盛顿挥霍无度!美议员报告称政府过去一年滥用9000亿美元
- 湖北举行“百城千校万企”促就业行动专场招聘会
- 开辟青少年近视防控体验区 业内人士建言防治“小眼镜”
- 古风国潮“漫”华夏 传统文化唱“新声”
- “团结颂歌”文艺成果展演展现首都统一战线团结力量
- 报告:二季度中国重点城市商贷平均贷款成数升至61.2%
- 壳牌计划从南非撤资引发关注
- 外媒:孟加拉国总理谢赫·哈西娜辞职
- 高温再度“上线” 华北地区将再现大范围40℃以上高温
- 北京发布规范学生用品及相关服务市场价格和竞争行为提示
- 多家国际机构报告看好中国经济:亚洲增长的“最强驱动力”|世界观
- 8月份全国共销售彩票529.57亿元 同比增长53.6%
- 中蒙珠恩嘎达布其口岸恢复客运常态化通关
- 北外滩百年香水厂“变身”公共文化空间
- 重庆警方破获特大非法经营成品油案 涉案金额逾千万元
- 40余位中外诗人和学者南宁以诗“对话”
- 重庆新增一条直飞新加坡客运航线