详情

原文传递车载投射处理方法、装置、车载设备及存储介质

专利名称：	车载投射处理方法、装置、车载设备及存储介质
摘要：	本发明实施例公开了一种车载投射处理方法、装置、车载设备及存储介质。所述方法包括：根据车载图像采集器采集的驾驶员面部图像，所述车载图像采集器的参数，以及挡风玻璃的位置，确定驾驶员的凝视点位置；将投射区域中位于所述凝视点位置处的控件作为目标控件；若监测到确认操作事件，则执行所述目标控件关联的操作。采用本发明实施例的技术方案可以将凝视点位置所对应的控件作为受控控件进行控制，解决了驾驶员只能作为观众观看HUD投影设备的投影内容，而无法直接对投影的内容做出反馈和控制的问题，实现了驾驶员可以通过驾驶员的凝视点对HUD投影设备进行交互控制效果，增加了HUD投影设备的交互方式。
专利类型：	发明专利
国家地区组织代码：	北京;11
申请人：	百度在线网络技术(北京)有限公司
发明人：	刘毅;周志鹏;张丙林;邓苏南;罗志平;李冰
专利状态：	有效
申请日期：	2019-03-14T00:00:00+0800
发布日期：	2019-07-05T00:00:00+0800
申请号：	CN201910194709.2
公开号：	CN109968979A
代理机构：	北京品源专利代理有限公司
代理人：	孟金喆
分类号：	B60K35/00(2006.01);B;B60;B60K;B60K35
申请人地址：	100085 北京市海淀区上地十街10号百度大厦三层
主权项：	1.一种车载投射处理方法，其特征在于，应用于设置有投射设备的车辆，所述投射设备的投射区域中设置有至少一个控件，所述方法包括：根据车载图像采集器采集的驾驶员面部图像，所述车载图像采集器的参数，以及挡风玻璃的位置，确定驾驶员的凝视点位置；将所述投射区域中位于所述凝视点位置处的控件作为目标控件；若监测到确认操作事件，则执行所述目标控件关联的操作。 2.根据权利要求1所述的方法，其特征在于，在将所述投射区域中位于所述凝视点位置处的控件作为目标控件之后，还包括：若检测到在所述目标控件上的凝视时长大于时间阈值，则确定监测到确认操作事件；或者，若接收到用户输入的确认语音信息，则确定监测到确认操作事件。 3.根据权利要求1所述的方法，其特征在于，所述投射区域中设置有音乐控件、收音机控件和地图导航控件中的至少一种控件。 4.根据权利要求1所述的方法，其特征在于，根据车载图像采集器采集的驾驶员面部图像，所述车载图像采集器的参数，以及挡风玻璃的位置，确定驾驶员的凝视点位置，包括：根据车载图像采集器采集的驾驶员面部图像以及所述车载图像采集器的参数，确定驾驶员的视角线方向；根据所述驾驶员的视角线方向和挡风玻璃位置，确定驾驶员的凝视点位置。 5.根据权利要求4所述的方法，其特征在于，根据车载图像采集器采集的驾驶员面部图像以及所述车载图像采集器的参数，确定驾驶员的视角线方向，包括：根据车载图像采集器采集的驾驶员面部图像，确定驾驶员面部特征点的图像坐标；根据驾驶员面部特征点的图像坐标和所述车载图像采集器的参数，确定驾驶员的眼球三维方向向量和头部姿态的三维方向向量；根据驾驶员的眼球三维方向向量和头部姿态的三维方向向量，确定驾驶员的视角线方向。 6.一种车载投射处理装置，其特征在于，应用于设置有投射设备的车辆，所述投射设备的投射区域中设置有至少一个控件，所述装置包括：凝视点确定模块，用于根据车载图像采集器采集的驾驶员面部图像，所述车载图像采集器的参数，以及挡风玻璃的位置，确定驾驶员的凝视点位置；目标确定模块，用于将所述投射区域中位于所述凝视点位置处的控件作为目标控件；目标操作模块，用于若监测到确认操作事件，则执行所述目标控件关联的操作。 7.根据权利要求6所述的装置，其特征在于，所述装置还包括：凝视时间检测模块，用于若检测到在所述目标控件上的凝视时长大于时间阈值，则确定监测到确认操作事件；或者，语音检测模块，用于若接收到用户输入的确认语音信息，则确定监测到确认操作事件。 8.根据权利要求6所述的装置，其特征在于，所述投射区域中设置有音乐控件、收音机控件和地图导航控件中的至少一种控件。 9.根据权利要求6所述的装置，其特征在于，所述凝视点确定模块包括：视角线确定单元，用于根据车载图像采集器采集的驾驶员面部图像以及所述车载图像采集器的参数，确定驾驶员的视角线方向；凝视点确定单元，用于根据所述驾驶员的视角线方向和挡风玻璃位置，确定驾驶员的凝视点位置。 10.根据权利要求9所述的装置，其特征在于，所述视角线确定单元包括：面部特征点确定子单元，用于根据车载图像采集器采集的驾驶员面部图像，确定驾驶员面部特征点的图像坐标；眼球和头部姿态确定子单元，用于根据驾驶员面部特征点的图像坐标和所述车载图像采集器的参数，确定驾驶员的眼球三维方向向量和头部姿态的三维方向向量；视角线方向确定子单元，用于根据驾驶员的眼球三维方向向量和头部姿态的三维方向向量，确定驾驶员的视角线方向。 11.一种车载设备，其特征在于，所述车载设备包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现权利要求1-5中任一所述的车载投射处理方法。 12.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现权利要求1-5中任一所述的车载投射处理方法。
所属类别：	发明专利