详情

原文传递一种基于人脸识别与语音指示的电梯智能控制方法及系统

专利名称：	一种基于人脸识别与语音指示的电梯智能控制方法及系统
摘要：	本发明公开了一种基于人脸识别与语音指示的电梯智能控制方法及系统，属于升降机领域，本发明通过提供零接触智能电梯解决方案，可通过人脸识别获取电梯运行权限，再利用语音识别的方式完成楼层选取基础乘梯动作，避免选择楼层时发生交叉感染，同时提高了楼层选择的智能化和自动化水平，将历史前往楼层和前往楼层的时间进行提取并导入楼层预测策略中预测该时间该人员期望前往的楼层，提取该人员的语音数据中关于楼层的词语表示，与该人员期望前往的楼层数进行对比，判断楼层的词语表示是否在期望前往的楼层数中，提高了楼层选择的准确性，进一步避免用户选错楼层。
专利类型：	发明专利
国家地区组织代码：	江苏;32
申请人：	南京瑞永城市更新研究院有限公司
发明人：	万一;雷晓云;韦伟
专利状态：	有效
申请日期：	2023-10-13T00:00:00+0800
发布日期：	2023-11-17T00:00:00+0800
申请号：	CN202311321821.0
公开号：	CN117068896A
代理机构：	南京权盟知识产权代理事务所(普通合伙)
代理人：	左泽辅
分类号：	B66B1/46;B66B1/34;G06V40/16;G10L15/22;G10L21/0272;B;G;B66;G06;G10;B66B;G06V;G10L;B66B1;G06V40;G10L15;G10L21;B66B1/46;B66B1/34;G06V40/16;G10L15/22;G10L21/0272
申请人地址：	210007 江苏省南京市秦淮区瑞金路街道
主权项：	1.一种基于人脸识别与语音指示的电梯智能控制方法，其特征在于，其包括以下具体步骤：S1、人员进入电梯，电梯中的图像采集终端对人员面部图像进行采集； S2、将人员面部图像导入面部核对策略中进行人员身份的核对，并对该人员的历史前往电梯楼层数据进行提取； S3、电梯中的语言采集终端对电梯内语音进行采集，且导入语音提取策略中对核对人员的语音数据进行分离，得到该人员的语音数据； S4、将历史前往楼层和前往楼层的时间进行提取并导入楼层预测策略中预测该时间该人员期望前往的楼层； S5、提取该人员的语音数据中关于楼层的词语表示，与该人员期望前往的楼层数进行对比； S6、判断楼层的词语表示是否在期望前往的楼层数中； S7、若楼层的词语表示在期望前往的楼层数中，则前往词语表示的楼层，若楼层的词语表示不在期望前往的楼层数中，则向该人员发布楼层核对命令，请求人员核对该楼层信息，核对完成后再前往核对后的楼层。 2.如权利要求1所述的一种基于人脸识别与语音指示的电梯智能控制方法，其特征在于，所述S2的面部核对策略包括以下具体步骤： S21、对进入电梯内部的人员面部图像进行提取，提取人员眼部图像，取双眼中心处的连线，测量其延长线与图像的上下边框所成的角度，设为基准角度； S22、使面部图像在边框中转动基准角度，与储存的工作人员标准图像位置对应，提取面部图像的特征序列和储存的工作人员标准图像特征序列，将标准图像的特征序列和面部图像特征序列导入相似度检测网络中进行相似度检测，以相似度最大的工作人员标准图像对应的身份作为核对人员的身份； S23、确定人员身份后，提取该人员的历史前往电梯楼层数据，历史前往电梯楼层数据包括近一周该时间段前往各个楼层的次数和当天前往各个楼层的次数。 3.如权利要求2所述的一种基于人脸识别与语音指示的电梯智能控制方法，其特征在于，所述S3中的语音提取策略包括以下具体步骤： S31、对采集的电梯内的语音导入自适应滤波器进行降噪处理，从降噪后的语音信号中提取符合核对人员身份的声纹特征向量； S32、从语音信号中获取核对人员的语音信息，将人员的语音信息导入语音识别引擎转化为文字信号，获取文字信号中的数字楼层信息，作为楼层的词语表示。 4.如权利要求3所述的一种基于人脸识别与语音指示的电梯智能控制方法，其特征在于，所述S4中的楼层预测策略包括以下具体步骤： S41、提取该人员的近一周该时间段前往各个楼层的次数，计算其近一周该时间段前往各个楼层的期望，，其中，/>为该人员的近一周该时间段前往k楼层的期望，/>为该人员的近一周该时间段前往k楼层的次数，/>为该人员的近一周该时间段前往i楼层的次数，n为电梯总楼层数； S42、提取该人员当天前往各个楼层的次数，计算其当天前往各个楼层的期望，，其中，/>为该人员的当天前往k楼层的期望，/>为该人员的当天前往k楼层的次数，/>为该人员的当天前往j楼层的次数； S43、将其近一周该时间段前往k楼层的概率和当天前往各个楼层的概率代入该人员前往k楼层期望值公式中计算该人员前往k楼层期望值，该人员前往k楼层期望值公式为：，其中/>为当天前往k楼层的期望的占比系数，/>为近一周该时间段前往k楼层的期望的占比系数，其中，/>，/>； S44、提取设定的期望阈值，将各楼层的期望值与期望阈值进行对比，将期望值大于等于期望阈值的楼层设为该时间该人员期望前往的楼层。 5.如权利要求4所述的一种基于人脸识别与语音指示的电梯智能控制方法，其特征在于，所述S5包括以下具体步骤： S51、提取该人员的语音数据中关于楼层的词语表示，同时提取该时间该人员期望前往的楼层； S52、将语音数据中关于楼层的词语表示与该时间该人员期望前往的楼层进行核对。 6.如权利要求5所述的一种基于人脸识别与语音指示的电梯智能控制方法，其特征在于，所述S4还包括以下具体步骤： S45、对于识别不清楚的文字信号中的数字楼层信息，将识别不清楚的文字信号中的数字楼层的楼层期望值进行降序排列，判断是否有楼层期望值大于等于期望阈值，若有，则选择其中楼层期望值大的对应楼层作为楼层的词语表示，若没有，则将识别不清楚的文字信号中的数字楼层任一项作为楼层的词语表示。 7.一种基于人脸识别与语音指示的电梯智能控制系统，其基于如权利要求1-6任一项所述的一种基于人脸识别与语音指示的电梯智能控制方法实现，其特征在于，包括面部采集模块、身份核对模块、储存模块、语音识别模块、楼层预测模块、楼层核对模块、控制模块和核对命令发布模块，所述控制模块用于控制面部采集模块、身份核对模块、储存模块、语音识别模块、楼层预测模块、楼层核对模块和核对命令发布模块的运行，所述面部采集模块用于通过图像采集终端对人员面部图像进行采集，所述身份核对模块用于将人员面部图像导入面部核对策略中进行人员身份的核对，所述储存模块用于对人员的历史前往电梯楼层数据进行储存，所述语音识别模块用于通过电梯中的语言采集终端对电梯内语音进行采集，且导入语音提取策略中对核对人员的语音数据进行分离，得到该人员的语音数据。 8.如权利要求7所述的一种基于人脸识别与语音指示的电梯智能控制系统，其特征在于，所述楼层预测模块用于将历史前往楼层和前往楼层的时间进行提取并导入楼层预测策略中预测该时间该人员期望前往的楼层，所述楼层核对模块用于提取该人员的语音数据中关于楼层的词语表示，与该人员期望前往的楼层数进行对比，判断楼层的词语表示是否在期望前往的楼层数中，所述核对命令发布模块用于向该人员发布楼层核对命令，请求人员核对该楼层信息，核对完成后再前往核对后的楼层。 9.如权利要求8所述的一种基于人脸识别与语音指示的电梯智能控制系统，其特征在于，所述身份核对模块包括基准角度测量单元和人员身份核对单元，所述基准角度测量单元用于对进入电梯内部的人员面部图像进行提取，提取人员眼部图像，取双眼中心处的连线，测量其延长线与图像的上下边框所成的角度，设为基准角度，所述人员身份核对单元用于提取面部图像的特征序列和储存的工作人员标准图像特征序列，将标准图像的特征序列和面部图像特征序列导入相似度检测网络中进行相似度检测，以相似度最大的工作人员标准图像对应的身份作为核对人员的身份。 10.如权利要求9所述的一种基于人脸识别与语音指示的电梯智能控制系统，其特征在于，所述楼层预测模块包括一周楼层期望计算单元和当天楼层期望计算单元，所述一周楼层期望计算单元用于提取该人员的近一周该时间段前往各个楼层的次数，计算其近一周该时间段前往各个楼层的期望，所述当天楼层期望计算单元用于提取该人员当天前往各个楼层的次数，计算其当天前往各个楼层的期望。 11.一种电子设备，其特征在于，包括：处理器和存储器，其中，所述存储器中存储有可供处理器调用的计算机程序；所述处理器通过调用所述存储器中存储的计算机程序，执行权利要求1-6任一项所述的一种基于人脸识别与语音指示的电梯智能控制方法。 12.一种计算机可读存储介质，其特征在于：储存有指令，当所述指令在计算机上运行时，使得计算机执行如权利要求1-6任意一项所述的一种基于人脸识别与语音指示的电梯智能控制方法。
所属类别：	发明专利