开云www.kaiyun.com-视觉-语言大模型助力机器人导航升级更加智能高效！

2025-02-03

　　【KAIYUN.COM科技消息】据《中国经济网》报道，近日，香港科技大学（广州）李昊昂教授团队在机器人导航技术领域取得了重要突破，成功研发出视觉-语言导航技术，为机器人提供了更加自然、智能、高效的导航与交互能力。

视觉-语言大模型助力机器人导航升级更加智能高效！

　　传统的机器人导航技术主要依赖纯视觉信息，如图像或视频，来理解周围环境并规划路径。然而，在复杂多变的环境中，这种导航方式往往存在局限性，导致机器人导航能力不足。为了克服这一难题，李昊昂教授团队研究出了视觉-语言导航技术，该技术能够整合视觉信息及语言指令，实现高效的人机交互。

　　在服务机器人的应用中，该技术使得机器人能够理解人类的语言指令，如“走到客厅，把餐桌上的苹果拿给我”，并通过视觉数据识别关键信息，如“客厅”、“餐桌”、“苹果”等，从而准确地完成任务。这一技术的实现，不仅拓展了机器人的应用场景，还提高了机器人的工作效率和安全性。

　　此外，针对现有视觉-语言大模型在信息保障方面存在的问题，如对数据质量和训练场景的敏感性、难以理解模糊语言指令等，李昊昂教授团队提出了面向视觉-语言导航应用的大模型调优策略。通过在机器人室内外导航数据上进行视觉数据抽取和语言指令标注，并对模型进行拟合，机器人可以根据提取的环境视觉特征和人类语言指令来决定其导航路径。

视觉-语言大模型助力机器人导航升级更加智能高效！

　　在数据基础方面，团队还通过仿真数据合成的方式解决了现有导航训练数据存在的问题。他们设计了新颖的生成式扩散模型，可以合成大量、多样化、高质量的视觉数据和相关的语言描述，从而有效增加训练数据的多样性，提高模型在处理复杂、未见场景时的鲁棒性。

-开云www.kaiyun.com-

热门资讯

企业数字化智能体：打造企业数智化AI底座

2024-04-02

TitanIDE（社区版）重磅免费开放使用！

2023-09-26

CloudOS：落地平台工程，实现真正的DevOps

2023-08-16

热门标签

企业数字化智能体 Agent AI 智能体企业智能体数智化AI底座 TitanIDE（社区版）免费在线代码编辑器 CloudIDE免费 TitanIDE免费云端IDE 平台工程 DevOps CloudOS 云原生开发平台落地平台工程云原生物联网开发平台云原生物联网物联网容器云 cloudos 微服务容器编排边端交付 TITANIDE 在线IDE 云原生开发远程研发 IDE TitanIDE 云端开发环境模板 K8s 不懂K8s也能用K8s