买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：常州星宇车灯股份有限公司

摘要：本发明公开一种基于TOF手势识别的多功能方向盘人车交互系统，涉及人车交互接口领域。它包括近红外照明光源单元、TOF成像阵列传感器单元、透镜模组单元、TOP控制单元、三维点云图像处理单元和汽车方向盘，近红外照明光源单元对手势识别区域进行照明；TOP控制单元对近红外照明光源单元进行调制，同时控制TOF成像阵列传感器单元测量手势照明和反射之间的相移并转换为手势识别的距离深度信息，经由三维点云图像处理单元完成解析，通过CANLIN总线输出对应的方向盘多功能控制信号至车身控制器。本发明有效提高手势操作在车内应用的灵活性，可进行远距离、非接触的控制，使人车交互方式更自然、便捷。

主权项：1.一种基于TOF手势识别的多功能方向盘人车交互系统，其特征在于：所述多功能方向盘人车交互系统包括近红外照明光源单元1、TOF成像阵列传感器单元2、TOP控制单元4、三维点云图像处理单元5和汽车方向盘6，所述近红外照明光源单元1和所述TOF成像阵列传感器单元2分别设置在所述汽车方向盘6的两侧；所述近红外照明光源单元1对手势识别区域进行照明；所述TOP控制单元4对所述近红外照明光源单元1进行调制，同时控制所述TOF成像阵列传感器单元2测量手势照明和反射之间的相移，并将其转换成为手势识别的距离深度信息，经由所述三维点云图像处理单元5完成解析，通过CAN总线或LIN总线输出对应的方向盘多功能控制信号至车身控制器；所述近红外照明光源单元1包含多个照明单体；所述TOF成像阵列传感器单元2一次同时测量多个照明单体，每个照明单体之间间隔与照明单体数对应的相位，利用照明和反射之间的相位差异来计算手势识别的距离深度信息；所述TOP控制单元4采用多频技术对所述近红外照明光源单元1进行调制；所述多频技术通过添加一个或多个调制频率来工作，每个调制频率都将计算得到一个对应的测量距离，实际手势深度位置是由这些调制频率所测得多个距离共同决定；所述多功能方向盘人车交互系统还包括透镜模组单元3，所述透镜模组单元3调节所述TOF成像阵列传感器单元2拾取手势图像的焦距；所述三维点云图像处理单元5根据所述TOF成像阵列传感器单元2获得的距离深度信息，将手势部位与图像的其他背景分割开。

全文数据：一种基于TOF手势识别的多功能方向盘人车交互系统技术领域[0001]本发明涉及人车交互接口领域，尤其是一种基于TOF手势识别的多功能方向盘人车交互系统。背景技术[0002]目前多功能方向盘上的人车交互方式以机械按键、拨杆以及旋钮为主。这些输入设备都存在一定的不足，输入习惯和人本身的自然交流习惯存在差异。发明内容[0003]为解决多功能方向盘上传统的机械按键、拨杆以及旋钮存在的不足，本发明提供一种基于TOF手势识别的多功能方向盘人车交互系统，采用非接触手势方式有效提高了手势操作在汽车内部应用的灵活性，可以对车身相关功能进行远距离、非接触的控制，使得人车交互方式更自然更便捷，符合未来智能汽车人车交互的发展趋势。[0004]为实现上述目的，本发明采用下述技术方案：[0005]—种基于TOF手势识别的多功能方向盘人车交互系统，该多功能方向盘人车交互系统包括近红外照明光源单元、TOF成像阵列传感器单元、TOP控制单元、三维点云图像处理单元和汽车方向盘，近红外照明光源单元和TOF成像阵列传感器单元分别设置在汽车方向盘的两侧;近红外照明光源单元对手势识别区域进行照明；TOP控制单元对近红外照明光源单元进行调制，同时控制TOF成像阵列传感器单元测量手势照明和反射之间的相移，并将其转换成为手势识别的距离深度信息，经由三维点云图像处理单元完成解析，通过CAN总线或LIN总线输出对应的方向盘多功能控制信号至车身控制器。[0006]进一步地，近红外照明光源单元发出的近红外光经过识别手势反射后，通过TOF成像阵列传感器单元对反射的近红外光进行接收。[0007]进一步地，近红外照明光源单元包含多个照明单体;TOF成像阵列传感器单元一次同时测量多个照明单体，每个照明单体之间间隔与照明单体数对应的相位，利用照明和反射之间的相位差异来计算手势识别的距离深度信息。[0008]进一步地，TOP控制单元采用多频技术对近红外照明光源单元进行调制，兼顾了测量精度和测量距离问题，即添加一个或多个调制频率来工作，使得在足够的测量距离条件下获得最佳的检测精度。每个调制频率都将计算得到一个对应的测量距离，实际手势深度位置由这些调制频率所测得多个距离共同决定。[0009]进一步地，TOP控制单元对近红外照明光源单元进行调制，同时控制TOF成像阵列传感器单元接收反射回来的近红外光，生成三维点云图像，可以提供每个像素点距离深度信息，并以灰度形式进行展现，灰度值越高，手势越接近TOF成像阵列传感器单元。[0010]进一步地，三维点云图像处理单元根据TOF成像阵列传感器单元获得的距离深度信息作为手势识别的一个重要特征），将手势部位与图像的其他背景分割开。[0011]进一步地，多功能方向盘人车交互系统还包括透镜模组单元，透镜模组单元调节TOF成像阵列传感器单元拾取手势图像的焦距，使得手势识别区域范围符合实际应用场景的需要。[0012]有益效果：[0013]1.本发明通过手势控制方式替代多功能方向盘上传统的机械按键、拨杆以及旋钮，实现灯光功能控制、音频功能控制、影音功能控制、雨刮器功能控制、仪表盘功能控制以及定速巡航和电话功能控制。[00M]2.本发明采用视频输入的形式可以进行远距离和非接触的控制，实现手势控制车身相关功能;与传统方式相比，手势识别在弱光和强光环境下都能实现较高的正确率，使人车之间的交互更加自然便捷。[0015]3.本发明的TOF手势识别集成度高、结构紧凑，由识别算法所带来的计算强度可以在嵌入式系统中实现，同时在车内环境下兼顾检测距离和测量精度两个要求，响应时间也是视觉系统中最快的，符合未来智能汽车人车交互的发展趋势。附图说明[0016]图1是本发明一实施例的基于TOF手势识别的多功能方向盘人车交互系统的正视图；[0017]图2是本发明一实施例的基于TOF手势识别的多功能方向盘人车交互系统的左视图；[0018]图3是本发明一实施例的透镜模组单元的示意图；[0019]图4是本发明一实施例的照明和反射之间的相位差测量波形图；[0020]图5是本发明一实施例的三维点云图；[0021]图6是本发明一实施例的手势部位与图像其他背景的分割示意图；[0022]图中：1-红外照明光源单元，2-T0F成像阵列传感器单元，3-透镜模组单元，4-T0P控制单元，5-三维点云图像处理单元，6-汽车方向盘。具体实施方式[0023]下面结合附图和实施例对本发明进一步说明。[0024]本实施例提出一种基于TOF手势识别的多功能方向盘人车交互系统，如图1-2所示，它包括近红外照明光源单元1、T0F成像阵列传感器单元2、透镜模组单元3、T0P控制单元4、三维点云图像处理单元5和汽车方向盘6,近红外照明光源单元1和TOF成像阵列传感器单元2分别设置在汽车方向盘6的两侧;近红外照明光源单元1对手势识别区域进行照明；透镜模组单元3图3调节TOF成像阵列传感器单元2拾取手势图像的焦距，使得手势识别区域范围符合实际应用场景的需要；TOP控制单元4对近红外照明光源单元1进行调制，同时控制TOF成像阵列传感器单元2测量手势照明和反射之间的相移，并将其转换成为手势识别的距离深度信息，经由三维点云图像处理单元5完成解析，通过CAN总线或LIN总线输出对应的方向盘多功能控制信号至车身控制器。[0025]在本实施例中，近红外照明光源单元1型号：Lumentum350mW，854nmT0-56PackagedLaserDiode22045504发出的近红外光经过识别手势反射后，通过TOF成像阵列传感器单元2型号:320X240Array0PT8241对反射的近红外光进行接收。[0026]在本实施例中，近红外照明光源单元1包含多个照明单体;TOF成像阵列传感器单元2—次同时测量多个照明单体，每个照明单体之间间隔与照明单体数对应的相位，利用照明和反射之间的相位差异来计算手势识别的距离深度信息。具体地:如图4所示，利用照明和反射之间的相位角Φ下式⑴）计算手势识别的距离深度d下式2。[0029]其中，c为光速;Ql、Q2、Q3和Q4为TOF成像阵列传感器单元2采样得到的电荷量。[0030]在本实施例中，TOP控制单元4采用多频技术对近红外照明光源单元1进行调制，兼顾了测量精度和测量距离问题，即添加一个或多个调制频率来工作，使得在足够的测量距离条件下获得最佳的检测精度。每个调制频率都将计算得到一个对应的测量距离，实际手势深度位置是由这些调制频率所测得多个距离共同决定。具体地:连续方波光源调制检测手势识别的距离测量方差可以表示为下式3:[0032]其中，Cd为调制对比度，描述了TOF成像阵列传感器单元2分离和收集光电子的能力。[0033]其中，反射光亮度L是光功率的函数，可以表示为下式⑷：[0035]其中，偏移量S是环境光和系统偏移量的函数，可以表示为下式⑸：[0037]从式3中可以推断出反射光亮度，调制频率和调制对比度是影响距离测量精度三大因素。[0038]在本实施例中，TOP控制单元4型号:3DToFController0PT9221对近红外照明光源单元1进行调制，同时控制TOF成像阵列传感器单元2接收反射回来的近红外光，生成三维点云图像，可以提供每个像素点距离深度信息，如图5所示，并以灰度形式进行展现，灰度值越高，手势越接近TOF成像阵列传感器单元2。[0039]在本实施例中，三维点云图像处理单元5型号：高性能ARMCortex®-A9AM437X根据TOF成像阵列传感器单元2获得的距离深度信息作为手势识别的一个重要特征），将手势部位与图像的其他背景分割开，如图6所示。[0040]对本发明保护范围的限制，所属领域技术人员应该明白，在本发明的技术方案的基础上，本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本发明的保护范围以内。

权利要求：1.一种基于TOF手势识别的多功能方向盘人车交互系统，其特征在于:所述多功能方向盘人车交互系统包括近红外照明光源单元（I、T0F成像阵列传感器单元2、Τ0Ρ控制单元⑷、三维点云图像处理单元⑸和汽车方向盘6，所述近红外照明光源单元⑴和所述TOF成像阵列传感器单元⑵分别设置在所述汽车方向盘⑹的两侧;所述近红外照明光源单元⑴对手势识别区域进行照明；所述TOP控制单元⑷对所述近红外照明光源单元⑴进行调制，同时控制所述TOF成像阵列传感器单元2测量手势照明和反射之间的相移，并将其转换成为手势识别的距离深度信息，经由所述三维点云图像处理单元5完成解析，通过CAN总线或LIN总线输出对应的方向盘多功能控制信号至车身控制器。2.根据权利要求1所述的基于TOF手势识别的多功能方向盘人车交互系统，其特征在于:所述近红外照明光源单元（1发出的近红外光经过识别手势反射后，通过所述TOF成像阵列传感器单元⑵对反射的近红外光进行接收。3.根据权利要求1所述的基于TOF手势识别的多功能方向盘人车交互系统，其特征在于:所述近红外照明光源单元⑴包含多个照明单体;所述TOF成像阵列传感器单元2—次同时测量多个照明单体，每个照明单体之间间隔与照明单体数对应的相位，利用照明和反射之间的相位差异来计算手势识别的距离深度信息。4.根据权利要求1所述的基于TOF手势识别的多功能方向盘人车交互系统，其特征在于:所述TOP控制单元4采用多频技术对所述近红外照明光源单元⑴进行调制。5.根据权利要求1所述的基于TOF手势识别的多功能方向盘人车交互系统，其特征在于:所述TOP控制单元4对所述近红外照明光源单元⑴进行调制，同时控制所述TOF成像阵列传感器单元2接收反射回来的近红外光，生成三维点云图像。6.根据权利要求1所述的基于TOF手势识别的多功能方向盘人车交互系统，其特征在于:所述三维点云图像处理单元5根据所述TOF成像阵列传感器单元2获得的距离深度信息，将手势部位与图像的其他背景分割开。7.根据权利要求1-6中任一项所述的基于TOF手势识别的多功能方向盘人车交互系统，其特征在于:所述多功能方向盘人车交互系统还包括透镜模组单元3，所述透镜模组单元3调节所述TOF成像阵列传感器单元2拾取手势图像的焦距。

百度查询： 常州星宇车灯股份有限公司 一种基于TOF手势识别的多功能方向盘人车交互系统