买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:南京信息工程大学
摘要:本发明公开了生物行为识别领域的一种基于面部和体态行为感知的渐进性放松训练方法,包括,播放预先设计的用于渐进性放松训练的音频;在音频播放过程中,执行以下训练操作:获取被训练人的图像数据;其中图像数据包括面部图像和躯体图像;基于面部图像,通过BlazeFace算法获取面部关键点信息,面部关键点信息包括双眼关键点信息和嘴巴关键点信息;根据双眼关键点信息计算双眼开合比,根据嘴巴关键点信息计算嘴巴开合比;基于躯体图像,通过BlazePose算法获取身体关键点信息,计算头‑肩夹角;根据双眼开合比、嘴巴开合比和头‑肩夹角,确定眼部特征值、嘴巴特征值和体态特征值;根据眼部特征值、嘴巴特征值和体态特征值,控制训练音频的播放。
主权项:1.一种基于面部和体态行为感知的渐进性放松训练方法,其特征是,包括:播放预先设计的用于渐进性放松训练的音频;在音频播放过程中,执行以下训练操作:获取被训练人的图像数据;其中所述图像数据包括面部图像和躯体图像;基于所述面部图像,通过BlazeFace算法获取被训练人的面部关键点信息,所述面部关键点信息包括双眼关键点信息和嘴巴关键点信息;根据所述双眼关键点信息计算双眼开合比,根据所述嘴巴关键点信息计算嘴巴开合比;基于所述躯体图像,通过BlazePose算法获取被训练人的身体关键点信息,根据所述身体关键点信息计算头-肩夹角;根据双眼开合比、嘴巴开合比和头-肩夹角,确定眼部特征值、嘴巴特征值和体态特征值;根据所述眼部特征值、嘴巴特征值和体态特征值,控制训练音频的播放;其中,基于所述面部图像,通过BlazeFace算法获取被训练人的面部关键点信息,包括:通过BlazeFace算法对被训练人的面部图像进行检测,得到左眼和右眼的12个关键点信息和嘴巴的4个关键点信息;其中左眼和右眼的12个关键点包括沿第一只眼的眼周依次等距均匀分布的关键点e1-e6,和沿第二只眼的眼周依次等距均匀分布的关键点e7-e12,其中,关键点e1和e4分别位于第一只眼的两个眼角部位,关键点e7和e10分别位于第二只眼的两个眼角部位,记为: ;其中,e1-e12分别代表双眼的12个关键点信息,xi,yi表示图像中对应点的横坐标和纵坐标的值,i取值为1-12,嘴巴的4个关键点信息分别位于两个嘴角和上下嘴唇的中间位置,记为: ;其中,m1-m4分别代表嘴巴的4个关键点信息,xi,yi表示图像中对应点的横坐标和纵坐标的值,i取值为21-24;根据所述双眼关键点信息计算双眼开合比,包括: ,式中,函数表示计算两个坐标之间的欧几里得距离;根据所述嘴巴关键点信息计算嘴巴开合比,包括: ,基于所述躯体图像,通过BlazePose算法获取被训练人的身体关键点信息,包括:通过BlazePose算法对被训练人的躯体图像进行检测,得到躯体的4个关键点信息;4个关键点信息分别位于两个嘴角以及对称分布在双肩的两处,记为: ,其中,b1-b4分别代表躯体的4个关键点信息,xi,yi表示图像中对应点的横坐标和纵坐标的值,i取值为31-34;根据所述身体关键点信息计算头-肩夹角,包括: ;根据双眼开合比、嘴巴开合比和头-肩夹角,确定眼部特征值、嘴巴特征值和体态特征值,包括:眼部特征值,为双眼开合比;嘴巴特征值,为嘴巴开合比;体态特征值,为头-肩夹角;所述播放预先设计的用于渐进性放松训练的音频,包括:按照顺序预先设计有个音频,表示第i个音频,表示第i个音频的播放次数;播放音频,并使当前音频的播放次数的数值加一,判断当前音频的播放次数是否符合设定的频率范围要求,若符合继续播放并执行所述训练操作,若不符合停止播放音频;根据所述眼部特征值、嘴巴特征值和体态特征值,控制训练音频的播放,包括:判断所述眼部特征值、嘴巴特征值和体态特征值是否满足Fe=Fm=Fb=1,若满足且还有音频未播放,则播放下一个音频;如果不满足则重新播放当前音频,并使当前音频的播放次数的数值加一。
全文数据:
权利要求:
百度查询: 南京信息工程大学 一种基于面部和体态行为感知的渐进性放松训练方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。