(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111562302.4 (22)申请日 2021.12.20 (71)申请人 中国农业银行股份有限公司 地址 100005 北京市东城区建国门内大街 69号 (72)发明人 王腾炜　南东洋　沈德星　 (74)专利代理 机构 北京同立钧成知识产权代理 有限公司 1 1205 代理人 杜叶蕊　刘芳 (51)Int.Cl. G06V 40/16(2022.01) G06V 10/40(2022.01) G06V 10/764(2022.01) G06Q 10/10(2012.01) G06Q 40/00(2012.01) (54)发明名称 面审辅助方法、 装置、 电子设备及存 储介质 (57)摘要 本申请实施例提供面审辅助方法、 装置、 电 子设备及存储介质， 通过对获取用户的基准视频 数据进行面部特征识别处理， 得到基准面部特征 识别结果； 对获取的用户的面审 视频数据进行面 部特征识别处理， 得到面审面部特征识别结果； 根据基准面部特征识别结果和面审面部特征识 别结果确定用户在面审过程中的面部特征变化； 根据所述用户在面审过程中的面部特征变化， 生 成用户的面审预警信息， 从而可根据用户在面审 时的面部特征变化， 生成相应的预警信息， 进而 为面审人员提供有效的面审辅助信息， 降低面审 风险。 权利要求书2页 说明书9页 附图3页 CN 114255499 A 2022.03.29 CN 114255499 A 1.一种面审辅助方法， 其特 征在于， 包括： 对获取用户的基准视频 数据进行面部特 征识别处 理， 得到基准 面部特征识别结果； 对获取的用户的面审视频 数据进行面部特 征识别处 理， 得到面审面部特 征识别结果； 根据基准面部特征识别结果和面审面部特征识别结果确定用户在面审过程中的面部 特征变化； 根据所述用户在面审过程中的面部特 征变化， 生成用户的面审预警信息 。 2.根据权利要求1所述的面审辅助方法， 其特征在于， 所述对获取用户的基准视频数据 进行面部特 征识别处 理， 得到基准 面部特征识别结果， 包括： 对所述基准视频数据进行面部特征识别处理， 确定所述基准视频数据中用户的基准眼 部形态特 征、 基准嘴部形态特 征以及基准 面部颜色特 征值； 所述对获取的用户的面审视频数据进行面部特征识别处理， 得到面审面部特征识别结 果， 包括： 对所述面审视频数据进行面部特征识别处理， 确定所述面审视频数据中用户的面审眼 部形态特 征、 面审嘴部形态特 征以及面审面部颜色特 征值。 3.根据权利要求2所述的面审辅助方法， 其特征在于， 所述对所述基准视频数据进行面 部特征识别处 理， 还包括： 对所述基准视频数据进行人脸关键点检测处理， 确定用户的面部在所述基准视频数据 中的图像位置； 所述面审视频 数据进行面部特 征识别处 理， 还包括： 对所述面审视频数据进行人脸关键点检测处理， 确定用户的面部在所述面审视频数据 中的图像位置 。 4.根据权利要求2所述的面审辅助方法， 其特征在于， 所述根据基准面部特征识别结果 和面审面部特 征识别结果确定用户在面审过程中的面部特 征变化， 包括： 根据所述基准眼部形态特征和所述面审眼部形态特征， 确定用户在面审过程中的眨眼 频率， 并确定所述眨眼频率与预设的眨眼频率均值之间的眨眼频率差值； 根据所述基准嘴部形态特征和所述面审嘴部形态特征， 确定用户在面审过程中的咧 嘴 频率； 根据所述基准面部颜色特征值和所述面审面部颜色特征值， 确定用户在面审过程中的 面部颜色变化次数； 根据所述基准 面部颜色特 征值和预设的基准 面部颜色特 征均值之间的颜色差值； 所述根据所述用户在面审过程中的面部特 征变化， 生成用户的面审预警信息， 包括： 根据所述用户在面审过程中的眨眼频率、 眨眼频率差值、 咧嘴频率、 面部颜色变化次数 以及颜色差值， 生成用户的面审预警信息 。 5.根据权利要求4所述的面审辅助方法， 其特征在于， 所述根据 所述用户在面审过程中 的眨眼频率、 眨眼频率差值、 咧嘴频率、 面部颜色变化次数以及颜色差值， 生成用户的面审 预警信息， 包括： 利用预设的全连接网络模型， 对所述用户在面审过程中的眨眼频率、 眨眼频率差值、 咧 嘴频率、 面部颜色变化次数以及颜色差值进行处 理， 得到用户的面审风险概 率； 根据所述 面审风险概 率生成用户的面审预警信息 。权　利　要　求　书 1/2 页 2 CN 114255499 A 26.一种面审辅助装置， 其特 征在于， 包括： 识别单元， 用于对获取用户的基准视频数据进行面部特征识别处理， 得到基准面部特 征识别结果； 还用于对获取 的用户的面审视频数据进行面部特征识别处理， 得到面审面部 特征识别结果； 处理单元， 用于根据基准面部特征识别结果和面审面部特征识别结果确定用户在面审 过程中的面部特 征变化； 预警判定单元， 用于根据所述用户在面审过程中的面部特征变化， 生成用户的面审预 警信息。 7.根据权利要求6所述的面审辅助装置， 其特 征在于， 所述识别单 元具体用于： 对所述基准视频数据进行面部特征识别处理， 确定所述基准视频数据中用户的基准眼 部形态特 征、 基准嘴部形态特 征以及基准 面部颜色特 征值； 对所述面审视频数据进行面部特征识别处理， 确定所述面审视频数据中用户的面审眼 部形态特 征、 面审嘴部形态特 征以及面审面部颜色特 征值。 8.根据权利要求7 所述的面审辅助装置， 其特 征在于， 所述识别单 元， 还用于： 对所述基准视频数据进行人脸关键点检测处理， 确定用户的面部在所述基准视频数据 中的图像位置； 对所述面审视频数据进行人脸关键点检测处理， 确定用户的面部在所述面审视频数据 中的图像位置 。 9.一种电子设备， 其特 征在于， 包括： 至少一个处 理器和存 储器； 所述存储器存储计算机执 行指令； 所述至少一个处理器执行所述存储器存储的计算机执行指令， 使得所述至少一个处理 器执行如权利要求1 ‑5任一项所述的方法。 10.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质中存储有计算机 执行指令， 当处 理器执行所述计算机执 行指令时， 实现如权利要求1 ‑5任一项所述的方法。 11.一种计算机程序产品， 包括计算机程序， 其特征在于， 该计算机程序被处理器执行 时实现如权利要求1 ‑5任一项所述的方法。权　利　要　求　书 2/2 页 3 CN 114255499 A 3