Document
拖动滑块完成拼图
首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种基于目标物体数字孪生的机械臂遥操作交互方法 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:长春理工大学

摘要:本发明涉及一种基于目标物体数字孪生的机械臂遥操作交互方法,通过物体识别和定位,使用预制三维模型在虚拟场景的对应位置生成真实物体的数字孪生,而且可以将新的预制三维模型放入模型库中用于重建场景,同时将机械臂的操作结合在场景中;用户通过直接与待抓取物体的数字孪生交互,来操作机械臂。本发明的基于目标物体数字孪生的机械臂遥操作交互方法,是一种直接对目标物体的交互操作方式,减少由于用户的操作失误而发生的不必要的碰撞,同时降低使用时的工作量和使用难度;使用预制三维模型代替点云模型,极大减少了需要传输的数据量,保证了实时性,提高了用户体验。

主权项:1.一种基于目标物体数字孪生的机械臂遥操作交互方法,其特征在于,包括以下步骤:所述的机械臂遥操作交互方法适用的系统包括:机械臂、服务器、RGB相机、深度相机和HoloLens设备;所述深度相机、RGB相机、机械臂、HoloLens设备分别与所述服务器连接,所述深度相机和RGB相机固定在所述机械臂上;步骤1:通过RGB相机和深度相机获得机械臂周围环境物体的RGB图像和深度图像,服务器读取获取到的RGB图像和深度图像,并利用获取的图像对场景中的物体进行识别和定位;步骤2:在步骤1获取物体的类别和位置后,服务器将相关信息发送给HoloLens设备,HoloLens设备便会在虚拟场景的对应位置生成真实物体的数字孪生;步骤3:用户通过HoloLens设备的手势识别,抓取虚拟物体,并移动到想要的位置,在用户按下虚拟的确认按钮后,HoloLens设备便会检测所有虚拟物体,判断出已移动的虚拟物体,并将这些虚拟物体的类别和目标位置发送到服务器,服务器自主控制机械臂将对应的真实物体从当前位置移动到目标位置。

全文数据:

权利要求:

百度查询: 长春理工大学 一种基于目标物体数字孪生的机械臂遥操作交互方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。