详情

原文传递操作判定装置以及操作判定方法

专利名称：	操作判定装置以及操作判定方法
摘要：	本发明涉及操作判定装置以及操作判定方法。一种操作判定装置，判定用户针对显示图像以非接触进行的操作，所述操作判定装置具有：图像取得部，取得拍摄了用户后的拍摄图像；以及图像处理部，对拍摄图像进行图像处理，判定用户的视线的位置、指尖的位置和指尖针对显示图像的工作。图像处理部包含：第一处理部，对在拍摄图像内的用户的眼和指尖的位置进行检测；以及第二处理部，基于检测出的在拍摄图像内的用户的眼和指尖的位置，计算相对于显示面的、用户的视线和指尖的位置，判定用户的指尖的工作。第一处理部由执行特定的检测处理的硬件构成。第二处理部由执行与第一处理部的输出对应的处理的软件构成。
专利类型：	发明专利
国家地区组织代码：	日本;JP
申请人：	拉碧斯半导体株式会社
发明人：	赤堀博次
专利状态：	有效
申请日期：	2019-01-04T00:00:00+0800
发布日期：	2019-07-12T00:00:00+0800
申请号：	CN201910007925.1
公开号：	CN110001401A
代理机构：	中国专利代理(香港)有限公司
代理人：	王岳;闫小龙
分类号：	B60K35/00(2006.01);B;B60;B60K;B60K35
申请人地址：	日本神奈川县横滨市
主权项：	1.一种操作判定装置，判定用户针对显示图像以非接触进行的操作，其特征在于，具有：图像取得部，取得拍摄了所述用户后的拍摄图像；以及图像处理部，对所述拍摄图像进行图像处理，判定所述用户的视线的位置、所述用户的指尖的位置和所述用户的指尖针对所述显示图像的工作，所述图像处理部包含：第一处理部，对在所述拍摄图像内的所述用户的眼和指尖的位置进行检测；以及第二处理部，基于检测出的在所述拍摄图像内的所述用户的眼和指尖的位置，计算相对于对所述显示图像进行显示的显示面的、所述用户的视线和指尖的位置，判定所述用户的指尖的工作，所述第一处理部由执行特定的检测处理的硬件构成，所述第二处理部由执行与所述第一处理部的输出对应的处理的软件构成。 2.根据权利要求1所述的操作判定装置，其特征在于，所述第一处理部将在所述拍摄图像内的所述用户的眼的位置和指尖的位置变换为二维的坐标平面上的位置坐标，所述第二处理部基于所述位置坐标来计算相对于所述显示面的、所述用户的视线和指尖的位置。 3.根据权利要求1或2所述的操作判定装置，其特征在于，所述第一处理部包含对所述拍摄图像依次执行矩阵运算的多个逻辑电路，基于利用所述多个逻辑电路的所述矩阵运算的运算结果来检测在所述拍摄图像内的所述用户的眼和指尖的位置。 4.根据权利要求3所述的操作判定装置，其特征在于，所述第一处理部包含多个存储器，所述多个存储器分别储存所述多个逻辑电路的所述矩阵运算的运算结果，所述多个逻辑电路的各个基于从所述多个存储器之中的对应的存储器读出的数据来执行所述矩阵运算。 5.根据权利要求1至4的任一项所述的操作判定装置，其特征在于，所述图像取得部取得从一个方向拍摄了所述用户后的第一拍摄图像和从另一个方向拍摄了所述用户后的第二拍摄图像，所述第一处理部分别检测在所述第一拍摄图像内的所述用户的眼和指尖的位置和在所述第二拍摄图像内的所述用户的眼和指尖的位置，所述第二处理部基于在所述第一拍摄图像内的所述用户的眼的位置和在所述第二拍摄图像内的所述用户的眼的位置来计算相对于所述显示面的、所述用户的视线，基于在所述第一拍摄图像内的所述用户的指尖的位置和在所述第二拍摄图像内的所述用户的指尖的位置来计算相对于所述显示面的、所述用户的指尖的位置。 6.根据权利要求1至4的任一项所述的操作判定装置，其特征在于，所述图像取得部取得拍摄了所述用户的眼后的第一拍摄图像和拍摄了所述用户的手后的第二拍摄图像，所述第一处理部分别检测在所述第一拍摄图像内的所述用户的眼的位置和在所述第二拍摄图像内的所述用户的指尖的位置，所述第二处理部基于在所述第一拍摄图像内的所述用户的眼的位置来计算相对于所述显示面的、所述用户的视线，基于在所述第二拍摄图像内的所述用户的指尖的位置来计算相对于所述显示面的、所述用户的指尖的位置。 7.一种操作判定方法，所述操作判定方法是动作操作装置中的操作判定方法，所述动作操作装置接受针对显示图像的用户的非接触下的操作，所述操作判定方法的特征在于，包含：取得拍摄了所述用户后的拍摄图像的步骤；利用执行特定的检测处理的硬件来对在所述拍摄图像内的所述用户的视线和指尖的位置进行检测的步骤；利用软件计算相对于对所述显示图像进行显示的显示面的、所述用户的视线和指尖的位置的步骤；以及利用软件判定针对所述显示图像的、所述用户的指尖的工作。 8.根据权利要求7所述的操作判定方法，其特征在于，对在所述拍摄图像内的所述用户的视线和指尖的位置进行检测的步骤包含：利用所述硬件所包含的多个逻辑电路来对所述拍摄图像依次执行矩阵运算的步骤；以及将在所述拍摄图像内的所述用户的眼和指尖的位置变换为二维的坐标平面上的位置坐标的步骤。
所属类别：	发明专利