买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

摘要：本发明涉及一种虚拟诊疗系统和方法，属于心理诊疗装置技术领域，解决现有诊疗装置不能获取贴合用户虚拟人物、幻听语言对患者进行心理疏导的问题。虚拟诊疗系统包括：人物画像生成模块，根据患者描述的虚拟人物形象，从多个五官库中选择对应五官以组拼成一幅完整的人物画像；三维人物模型建立模块，基于虚拟画像，制作Blendshape表情控制器、transform动作控制器并生成模拟虚拟人物的三维人物模型；情景诊疗模块，通过加载虚拟场景模块、面部捕捉模块、全身动作捕捉模块和变声器模块，在心理治疗师、患者和虚拟人物模型之间进行人机互动。能够获得贴合用户虚拟人物形象的三维人物模型并将虚拟人物的幻听声音和表情动作同时展示给患者，实现心理疏导与治疗。

主权项：1.一种虚拟诊疗系统，其特征在于，包括：五官库构建模块、五官调整模块、人物画像生成模块、三维人物模型建立模块、情景诊疗模块、同步模块、输出模块和量表评估模块；所述人物画像生成模块，用于根据患者描述的虚拟人物形象，从多个五官库中选择对应五官以组拼成一幅完整的人物画像；所述三维人物模型建立模块，用于基于虚拟画像，制作Blendshape表情控制器、transform动作控制器并生成模拟所述虚拟人物的三维人物模型，其中，所述虚拟画像为符合患者幻听形象的人物画像；所述情景诊疗模块，用于通过加载虚拟场景模块、面部捕捉模块、全身动作捕捉模块和变声器模块，在心理治疗师、所述患者和虚拟人物模型之间进行人机互动，其中，虚拟场景模块，用于根据所述患者需求提供不同虚拟场景；面部捕捉模块，用于根据由人脸视频获取的面部捕捉数值，所述心理治疗师通过所述Blendshape表情控制器实时控制所述三维人物模型的面部表情；全身动作捕捉模块，用于根据多个传感器所获得的骨骼运动四元数数据，所述心理治疗师通过所述transform动作控制器实时控制所述三维人物模型的全身动作，其中，所述全身动作捕捉模块进一步配置为：将所述多个传感器分别设置于所述心理治疗师的不同位置处，所述不同位置包括手部、小臂、大臂、肩部、头部、背部、胸部、脚部、小腿和大腿处；在所述心理治疗师运动时，所述多个传感器分别实时感测所述不同位置的骨骼运动数据并转换为骨骼运动四元数数据；以及根据所述骨骼运动四元数数据，通过所述transform动作控制器实时控制所述三维人物模块的手部、小臂、大臂、肩部、头部、背部、胸部、脚部、小腿和大腿动作，以模拟所述心理治疗师的动作；变声器模块，用于对原始声音进行音调基频变声控制，以转换为模拟所述虚拟人物声音的幻听声音；所述同步模块，用于将所述三维人物模型的幻听声音与面部表情进行同步；所述输出模块，用于将所述三维人物模型的幻听声音和全身动作同时展示给所述患者；所述五官库构建模块，用于构建多个五官库，所述五官库构建模块包括脸型库构建子模块、头发库构建子模块、眉毛库构建子模块、眼睛库构建子模块、鼻子库构建子模块和嘴巴库构建子模块，其中，所述脸型库构建子模块，用于基于具有不同脸型特征的多张人物形象照片，以抠图的方式去掉其他五官而保存脸型，以及利用保存的脸型构建具有所述不同脸型特征的脸型库；以及所述头发库构建子模块、所述眉毛库构建子模块、所述眼睛库构建子模块、所述鼻子库构建子模块和所述嘴巴库构建子模块，用于基于具有不同五官特征的多张人物形象照片，以抠图的方式分别构建具有不同的对应特征的头发库、眉毛库、眼睛库、鼻子库和嘴巴库；所述五官调整模块，用于通过对所述人物画像中的五官进行调整，以获得符合所述虚拟人物形象的虚拟画像，所述五官调整模块包括：X轴移动模块、Y轴移动模块、X轴缩放模块和Y轴缩放模块，其中，所述X轴移动模块，用于根据所述虚拟人物形象，对所述人物画像中的脸型、头发、眉毛、眼睛、鼻子和嘴巴在X轴方向上进行移动调整；所述Y轴移动模块，用于根据所述虚拟人物形象，对所述人物画像中的脸型、头发、眉毛、眼睛、鼻子和嘴巴在Y轴方向上进行移动调整；所述X轴缩放模块，用于根据所述虚拟人物形象，对所述人物画像中的脸型、头发、眉毛、眼睛、鼻子和嘴巴分别在所述X轴方向上进行缩放调整；以及所述Y轴缩放模块，用于根据所述虚拟人物形象，对所述人物画像中的脸型、头发、眉毛、眼睛、鼻子和嘴巴分别在所述Y轴方向上进行缩放调整；所述三维人物模型建立模块，进一步包括：生成三维人物的基础模型并制作所述Blendshape表情控制器和transform动作控制器；基于人脸面部识别算法，分析所述虚拟画像中的人脸区域；根据人脸区域转换成人脸的基本衡量参数，同时将所述人脸区域的图像进行抠图并对所述基础模型进行头部贴图；所述Blendshape表情控制器接收所述人脸的基本衡量参数，并根据所述人脸的基本衡量参数动态控制所述基础模型的头部形状，以最大匹配所述虚拟画像中的头部特征；以及根据患者描述的虚拟人物，通过所述transform动作控制器控制所述基础模型的身高和身躯、四肢的形状。

全文数据：

权利要求：

百度查询： 新智心(河南)医学科技有限公司 一种虚拟诊疗系统和方法