大模型赋能机器狗 西工大离线具身智能研究取得新突破
中新网西安3月20日电(记者 阿琳娜)一只机器狗在街上迈着规律的步伐,拉着牵引绳的盲人在它的带领下越过沿路障碍,平稳地行走着。电子导盲犬能否取代传统导盲犬,解决视障人士一犬难求的困境?记者20日从西北工业大学获悉,该校团队在此方面开展研究攻关并取得了新的突破。
据了解,西北工业大学光电与智能研究院联合中国电信人工智能研究院在探索离线具身智能应用方面取得阶段性进展。具身智能,即具有物理实体,能够通过传感器和执行器与环境进行实时互动,执行相应指令或进行决策的智能机器。
李学龙教授团队将机器狗搭载离线大模型,应用在智能导盲场景,开发出大模型离线具身智能导盲犬,并实现了其智能人机交互、智能乘梯引导、智能过街引导、智能室内引导等功能。
该成果进一步展示了使用离线具身智能导盲犬代替传统导盲犬的可能性,同时验证了离线具身智能范式的可行性,使大模型具身智能机器人可以脱离互联网环境,应用在无网或网络信号不佳的工况环境,进一步拓展了临地安防的应用场景。
近年来,随着机器人技术和SLAM导航技术的快速发展,针对电子导盲犬的探索也层出不穷。然而受制于自然语言处理技术的限制,上一代电子导盲犬仍然欠缺和人类“自由对话”的能力,也难以为视障人士提供情感陪伴。
大模型及具身智能技术的出现使电子导盲犬实现这种高级能力成为可能。但机器狗的低算力计算平台难以支撑大模型运行所需的海量计算资源,通常只能通过请求云服务的“在线具身智能”范式获得大模型的高级能力,这严重限制了电子导盲犬的场景应用范围。
为此,李学龙教授团队结合目前最新的大模型量化压缩和加速推理技术,成功将大模型部署至机器狗的低算力计算平台,验证了“离线具身智能”范式的可行性。
目前通过实验,团队开发的离线具身智能导盲犬已能够与视障人士流畅沟通指令,并带领其通过马路、楼梯、电梯等多样复杂环境,验证了离线具身智能导盲犬的智能人机交互能力、电梯弱网络环境下的智能乘梯引导能力、实时性要求较高的智能过街引导能力和智能室内引导能力等。
该成果证明了离线具身智能导盲犬代替传统导盲犬的可能性,同时验证了离线具身智能范式的可行性,使大模型具身智能机器人可以脱离互联网,应用在无网或网络信号不佳的工况环境,提供更加实时的智能响应以及更好的人机交互体验。
未来,团队将进一步优化具身智能导盲犬技术方案,与电信星辰大模型相结合,探索在线与离线相融合的分布式异构具身智能方案,进一步拓宽离线具身智能导盲犬及更多智能机器人平台的应用场景,有效赋能工业生产智能化,加快形成新质生产力。(完)
相关推荐
黑龙江饶河再现野生东北虎足迹
四川内江市市中区发生3.2级地震 震源深度10千米
海南将迎来春节前出岛车客高峰 各港口出岛秩序总体平稳
(新春走基层)“喜迎全运会 瑞蛇贺新春”新春庙会在广州举行
羊角把、牛角、十字扣,春运涨知识→小设计大用途
岁暮冰嬉 寒尽春生 这些“速度与激情”谁看了不想玩一把?
“家门口能挣钱,好日子有盼头”(新春走基层)
国家中医药局:九成以上三级妇幼保健院设置中医类临床科室
湖南零陵腊肉飘香年味浓 供销两旺助增收
春节临近 你的家乡举办哪些活动?一起来寻找年味儿→
新春走基层丨让每一盏车灯都安然明亮 他们是“魔鬼风口”的风雪护路人
中国将386.7万家固定污染源纳入排污许可管理
- 最近发表
-
- 随机阅读
-
- 中新健康丨国家卫健委:工业企业40%劳动者接触各类职业病危害
- 央行:将开展2024年第十期央行票据互换(CBS)操作
- 日媒:袭击日首相官邸的嫌犯或因不满选举保证金制度
- 普京:特别军事行动形势正在发生巨大变化
- 北美票房:《阿凡达:水之道》总票房破21亿美元
- 美方军事人员被曝参与袭击俄罗斯库尔斯克州
- 浙江:社会资本助力水土流失治理 好生态亦有“好价钱”
- 学生与醉汉冲突被刑拘,几大细节或影响责任判定
- 新能源汽车动力电池领域人才汇聚长春展示新技能
- 法国前总统萨科齐被判刑
- (乡村行·看振兴)“中国薯都”乌兰察布:用一颗土豆连通世界
- 一片茶叶的“丝路”之旅:从贵州大山“飘香”世界各地
- 侨乡泉州“影视+文旅”融合发展 多部微短剧集中开机
- 日媒:日本一公立高中首次开设漫画学科
- 平台商家“隐形套路”易造成浪费
- 越南归侨的“侨味”传承:一盘白切鸡,两碗蘸料
- 央行:优化合格投资者境内证券期货投资资金管理
- 第三届中国(宁夏)国际葡萄酒文化旅游博览会签约逾300亿元
- 市场监管总局部署提升大型游乐设施质量安全水平
- 西藏林芝:无畏风雪 救援先锋展担当
- 热门推荐
-
- 约旦河西岸枪击事件致4名以色列人死亡
- 俄战机在黑海上空紧急升空 拦截一架美军无人侦察机
- 女医生遭前夫投毒案追踪:多名卫健人员拟被警告、通报批评
- 哈马斯下属武装派别卡桑旅释放第三批被扣押人员
- 主打“年轻不设限”,北京喜剧院焕新重张
- 暑期迎来“摘镜”热,手术能治愈近视吗?
- 青春化探索为戏曲传承提供新思路
- 推动新时代农村题材文学创作座谈会召开
- 南珠中城际(中山段)全线首块顶板封顶
- 文化中国行丨打卡友谊关、东兴口岸逛吃 来这体验“一步跨两国”
- 新疆克孜勒苏州阿合奇县发生3.4级地震 震源深度10千米
- 天涯共此时!《中央广播电视总台2024年中秋晚会》明晚8点向全球播出
- 全球首例5G眼科机器人跨海微米级手术
- (第六届进博会)从志愿者到参展商,哈萨克斯坦姑娘与进博“共成长”
- 西部计划实施20周年:他们的青春因这个选择“更有意义”
- 品牌方消费者与“百亿补贴”能否共赢
- 引江济淮安置区K地块项目全部封顶
- (高质量发展调研行)中国“医疗特区”博鳌乐城使用特许药械人群快速增长
- 中新健康|广东援疆医生送诊下乡 一天惠及千余名民众
- 大熊博士布鲁姆为中国小读者带来德式经典幽默