大模型赋能机器狗 西工大离线具身智能研究取得新突破

来源: 学习网
2024-06-13 08:54:33

  中新网西安3月20日电(记者 阿琳娜)一只机器狗在街上迈着规律的步伐,拉着牵引绳的盲人在它的带领下越过沿路障碍,平稳地行走着。电子导盲犬能否取代传统导盲犬,解决视障人士一犬难求的困境?记者20日从西北工业大学获悉,该校团队在此方面开展研究攻关并取得了新的突破。

  据了解,西北工业大学光电与智能研究院联合中国电信人工智能研究院在探索离线具身智能应用方面取得阶段性进展。具身智能,即具有物理实体,能够通过传感器和执行器与环境进行实时互动,执行相应指令或进行决策的智能机器。

  李学龙教授团队将机器狗搭载离线大模型,应用在智能导盲场景,开发出大模型离线具身智能导盲犬,并实现了其智能人机交互、智能乘梯引导、智能过街引导、智能室内引导等功能。

  该成果进一步展示了使用离线具身智能导盲犬代替传统导盲犬的可能性,同时验证了离线具身智能范式的可行性,使大模型具身智能机器人可以脱离互联网环境,应用在无网或网络信号不佳的工况环境,进一步拓展了临地安防的应用场景。

  近年来,随着机器人技术和SLAM导航技术的快速发展,针对电子导盲犬的探索也层出不穷。然而受制于自然语言处理技术的限制,上一代电子导盲犬仍然欠缺和人类“自由对话”的能力,也难以为视障人士提供情感陪伴。

  大模型及具身智能技术的出现使电子导盲犬实现这种高级能力成为可能。但机器狗的低算力计算平台难以支撑大模型运行所需的海量计算资源,通常只能通过请求云服务的“在线具身智能”范式获得大模型的高级能力,这严重限制了电子导盲犬的场景应用范围。

  为此,李学龙教授团队结合目前最新的大模型量化压缩和加速推理技术,成功将大模型部署至机器狗的低算力计算平台,验证了“离线具身智能”范式的可行性。

  目前通过实验,团队开发的离线具身智能导盲犬已能够与视障人士流畅沟通指令,并带领其通过马路、楼梯、电梯等多样复杂环境,验证了离线具身智能导盲犬的智能人机交互能力、电梯弱网络环境下的智能乘梯引导能力、实时性要求较高的智能过街引导能力和智能室内引导能力等。

  该成果证明了离线具身智能导盲犬代替传统导盲犬的可能性,同时验证了离线具身智能范式的可行性,使大模型具身智能机器人可以脱离互联网,应用在无网或网络信号不佳的工况环境,提供更加实时的智能响应以及更好的人机交 互体验。

  未来,团队将进一步优化具身智能导盲犬技术方案,与电信星辰大模型相结合,探索在线与离线相融合的分布式异构具身智能方案,进一步拓宽离线具身智能导盲犬及更多智能机器人平台的应用场景,有效赋能工业生产智能化,加快形成新质生产力。(完)

在世界杯的现场,你会感受到每个国家的文化不一样:比如阿根廷球迷,他们就是乌泱乌泱地一群人到里约热内卢,然后在地铁上疯狂地拍打东西、唱歌;而巴西球迷自己一个人也能嗨;整体来说,拉美球迷比欧洲球迷更疯狂一些,你看上一届俄罗斯世界杯,拉美球迷比欧洲球迷还多,就知道了。

世界杯小组赛,阿根廷vs沙特,比赛上半场第8分钟,帕雷德斯禁区摔倒,主裁查看VAR后判罚点球,梅西一蹴而就,但是这个点球的判罚,引发巨大争议!众多名记表示质疑!

此外,这场比赛的上下半场补时分别达到了惊人的9分钟和14分钟。我猜第四官员是在这样计算补时时间的吧。

在世界杯,感受不同的文化。/丰臻

今年是vivo与FIFA合作的第六年。而这份长期的合作关系,也侧面反映了vivo一直坚持的“长期主义”。对于“长期主义”的坚持,让vivo不断提升着自身的核心竞争力,并且在手机市场取得了一系列亮眼成果。根据权威数据机构?Counterpoint?Research?的调研,vivo在2022年第二季度拿下了中国市场销量第一的成绩,而高端智能手机市场占比则跃居第二,这些成绩反映了vivo坚持“长期主义”的正确性。

在智能手机时代,用手机看球赛逐渐取代了电视。而手机品牌也开始逐渐涉足到球赛赞助商的行业。

吴雅婷

声明:该文观点仅代表作者本人,搜狐号系信息发布平台,搜狐仅提供信息存储空间服务。
用户反馈 合作

Copyright © 2023 Sohu All Rights Reserved

搜狐公司 版权所有