将大模型集成到机器人系统

[复制链接]
 楼主| keer_zu 发表于 2024-4-7 13:37 | 显示全部楼层 |阅读模式
本帖最后由 keer_zu 于 2024-4-7 13:40 编辑

系统构成:

49337661231b83a57a.png
 楼主| keer_zu 发表于 2024-4-7 13:39 | 显示全部楼层

多模态交互系统的实现:

459606612317c1e234.png
 楼主| keer_zu 发表于 2024-4-7 13:41 | 显示全部楼层
整合语音指令和VR控制器的输入:
803866123214cc6af.png
 楼主| keer_zu 发表于 2024-4-7 13:43 | 显示全部楼层



rhino和Grasshopper工作区中的BIM数据:
3828366123287c3682.png
 楼主| keer_zu 发表于 2024-4-7 13:44 | 显示全部楼层
会话系统中指令批准的流程图:
37656661232cb81917.png
 楼主| keer_zu 发表于 2024-4-7 13:45 | 显示全部楼层
信息提示在GPT管理通信场景用实例说明:
270586612330a92b10.png
 楼主| keer_zu 发表于 2024-4-7 13:46 | 显示全部楼层
统一环境中的VR:
945876612334aeab4f.png
 楼主| keer_zu 发表于 2024-4-7 13:47 | 显示全部楼层
VR界面中HRC的例子:(a)口头交互(b)多模态交互:

924136612337871ab7.png
 楼主| keer_zu 发表于 2024-4-7 13:55 | 显示全部楼层
Integrating Large Language Models with Multimodal Virtual Reality Interfaces to Support Collaborative Human-Robot Construction Work
您需要登录后才可以回帖 登录 | 注册

本版积分规则

个人签名:qq群:49734243 Email:zukeqiang@gmail.com

1478

主题

12912

帖子

55

粉丝
快速回复 在线客服 返回列表 返回顶部
个人签名:qq群:49734243 Email:zukeqiang@gmail.com

1478

主题

12912

帖子

55

粉丝
快速回复 在线客服 返回列表 返回顶部