“啪嗒啪嗒......”一只机器狗在街上迈着规律的步伐,拉着牵引绳的盲人,在它的带领下越过沿路障碍,平稳地行走着,电子导盲犬能否取代传统导盲犬,解决视障人士一犬难求的困境?西工大团队在这方面开展研究攻关并取得了新的突破。
近日,西北工业大学光电与智能研究院联合中国电信人工智能研究院在探索离线具身智能应用方面取得阶段性进展。具身智能,即具有物理实体,能够通过传感器和执行器与环境进行实时互动,执行相应指令或进行决策的智能机器。
李学龙教授团队将机器狗搭载离线大模型,应用在智能导盲场景,开发出大模型离线具身智能导盲犬,并实现了其智能人机交互、智能乘梯引导、智能过街引导、智能室内引导等功能。
该成果进一步展示了使用离线具身智能导盲犬代替传统导盲犬的可能性,同时验证了离线具身智能范式的可行性,使大模型具身智能机器人可以脱离互联网环境,应用在无网或网络信号不佳的工况环境,进一步拓展了临地安防的应用场景。
近年来,随着机器人技术和SLAM导航技术的快速发展,针对电子导盲犬的探索也层出不穷。然而受制于自然语言处理技术的限制,上一代电子导盲犬仍然欠缺和人类“自由对话”的能力,也难以为视障人士提供情感陪伴。
大模型及具身智能技术的出现使电子导盲犬实现这种高级能力成为可能。但机器狗的低算力计算平台难以支撑大模型运行所需的海量计算资源,通常只能通过请求云服务的“在线具身智能”范式获得大模型的高级能力,这严重限制了电子导盲犬的场景应用范围。
电子导盲犬
为此,李学龙教授团队结合目前最新的大模型量化压缩和加速推理技术,成功将大模型部署至机器狗的低算力计算平台,验证了“离线具身智能”范式的可行性。
目前通过实验,团队开发的离线具身智能导盲犬已能够与视障人士流畅沟通指令,并带领其通过马路、楼梯、电梯等多样复杂环境,验证了离线具身智能导盲犬的智能人机交互能力、电梯弱网络环境下的智能乘梯引导能力、实时性要求较高的智能过街引导能力和智能室内引导能力等。
离线具身智能导盲犬指引视障人士进电梯
离线具身智能导盲犬指引视障人士过马路
该成果证明了离线具身智能导盲犬代替传统导盲犬的可能性,同时验证了离线具身智能范式的可行性,使大模型具身智能机器人可以脱离互联网,应用在无网或网络信号不佳的工况环境,提供更加实时的智能响应以及更好的人机交互体验。
未来,团队将进一步优化具身智能导盲犬技术方案,与电信星辰大模型相结合,探索在线与离线相融合的分布式异构具身智能方案,进一步拓宽离线具身智能导盲犬及更多智能机器人平台的应用场景,有效赋能工业生产智能化,加快形成新质生产力。
“啪嗒啪嗒......”一只机器狗在街上迈着规律的步伐,拉着牵引绳的盲人,在它的带领下越过沿路障碍,平稳地行走着,电子导盲犬能否取代传统导盲犬,解决视障人士一犬难求的困境?西工大团队在这方面开展研究攻关并取得了新的突破。
近日,西北工业大学光电与智能研究院联合中国电信人工智能研究院在探索离线具身智能应用方面取得阶段性进展。具身智能,即具有物理实体,能够通过传感器和执行器与环境进行实时互动,执行相应指令或进行决策的智能机器。
李学龙教授团队将机器狗搭载离线大模型,应用在智能导盲场景,开发出大模型离线具身智能导盲犬,并实现了其智能人机交互、智能乘梯引导、智能过街引导、智能室内引导等功能。
该成果进一步展示了使用离线具身智能导盲犬代替传统导盲犬的可能性,同时验证了离线具身智能范式的可行性,使大模型具身智能机器人可以脱离互联网环境,应用在无网或网络信号不佳的工况环境,进一步拓展了临地安防的应用场景。
近年来,随着机器人技术和SLAM导航技术的快速发展,针对电子导盲犬的探索也层出不穷。然而受制于自然语言处理技术的限制,上一代电子导盲犬仍然欠缺和人类“自由对话”的能力,也难以为视障人士提供情感陪伴。
大模型及具身智能技术的出现使电子导盲犬实现这种高级能力成为可能。但机器狗的低算力计算平台难以支撑大模型运行所需的海量计算资源,通常只能通过请求云服务的“在线具身智能”范式获得大模型的高级能力,这严重限制了电子导盲犬的场景应用范围。
电子导盲犬
为此,李学龙教授团队结合目前最新的大模型量化压缩和加速推理技术,成功将大模型部署至机器狗的低算力计算平台,验证了“离线具身智能”范式的可行性。
目前通过实验,团队开发的离线具身智能导盲犬已能够与视障人士流畅沟通指令,并带领其通过马路、楼梯、电梯等多样复杂环境,验证了离线具身智能导盲犬的智能人机交互能力、电梯弱网络环境下的智能乘梯引导能力、实时性要求较高的智能过街引导能力和智能室内引导能力等。
离线具身智能导盲犬指引视障人士进电梯
离线具身智能导盲犬指引视障人士过马路
该成果证明了离线具身智能导盲犬代替传统导盲犬的可能性,同时验证了离线具身智能范式的可行性,使大模型具身智能机器人可以脱离互联网,应用在无网或网络信号不佳的工况环境,提供更加实时的智能响应以及更好的人机交互体验。
未来,团队将进一步优化具身智能导盲犬技术方案,与电信星辰大模型相结合,探索在线与离线相融合的分布式异构具身智能方案,进一步拓宽离线具身智能导盲犬及更多智能机器人平台的应用场景,有效赋能工业生产智能化,加快形成新质生产力。
竹类植物是竹亚科植物的总称,与水稻、小麦、大麦和燕麦同属于禾本科BOP分支,具有重要的经济、生态和文化价值。为更好地服务竹类植物的系统进化和功能研究,有效整理归纳盘活海量的竹类组学和分 3月20日对于我国抗衰老研究是个特殊的日子,经过近3年的不懈努力,八子补肾胶囊抗衰老取得又一重大突破。挑战人类生命极限是摆在全球科学家面前的重大课题,抗衰老研究已成为世界生命科学领域关注 记者3月19日从天津大学获悉,该校环境学院刘庆岭教授团队与吉林大学于吉红院士团队以及天津工业大学梅东海教授团队合作,证明了无有机模板剂合成的具有OFF和ERI拓扑共生结构的Cu-T催化剂具有优 21世纪经济报道记者 石恩泽 深圳报道操作系统似乎对地理入迷。鸿蒙和深圳,就像Windows和西雅图,也似Linux和赫尔辛基。这是地理与技术的紧密交融。深圳,可以说是鸿蒙的诞生之地,在全球科 “人工智能作为数字新基建重点建设方向,前景广阔,大有作为。今年的政府工作报告更首次提出开展‘人工智能+’行动,无疑将为人工智能技术在国内各行各业的广泛应用开启新篇章。”3月22 美国佐治亚理工学院机械工程师开发了一种控制机器人外骨骼的通用方法。无需专门训练、特别校准,对复杂算法进行调整后,用户穿上外骨骼就可以直接行走。研究成果3月20日发表在《科学·机 。本文链接:电子导盲犬可能要来了!相关研究在我国取得新突破http://www.sushuapos.com/show-2-4147-0.html
声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。
下一篇: “捕风捉光”,气象服务助力新能源发电