(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111665973.3 (22)申请日 2021.12.3 0 (71)申请人 浙江大华 技术股份有限公司 地址 310051 浙江省杭州市滨江区滨安路 1187号 (72)发明人 朱婷　郝敬松　 (74)专利代理 机构 杭州华进联浙知识产权代理 有限公司 3 3250 专利代理师 金无量 (51)Int.Cl. G06V 40/20(2022.01) G06V 40/10(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 一种手势识别的方法、 装置、 电子装置和存 储介质 (57)摘要 本申请涉及一种手势识别的方法、 装置、 电 子装置和存储介质， 其中， 该手势识别的方法包 括： 获取目标对象的第一手势图像； 将第一手势 图像输入训练后的静态手势识别模 型中， 得到 静 态手势类别； 当静态手势类别为目标手势类别 时， 获取目标对象当前的手势图像序列， 手势图 像序列基于针对目标对象采集的多帧第二手势 图像确定； 根据手势图像序列以及训练后的动态 手势识别模型， 得到动态手势类别。 本申请通过 静态手势识别与动态手势识别相结合的方式对 手势进行识别， 降低了手势识别系统的运行功 耗， 提高了 手势识别的效率。 权利要求书2页 说明书14页 附图4页 CN 114463839 A 2022.05.10 CN 114463839 A 1.一种手势 识别的方法， 其特 征在于， 包括： 获取目标对象的第一手势图像； 将所述第一手势图像输入训练后的静态手势 识别模型中， 得到静态手势类别； 当所述静态手势类别为目标手势类别时， 获取所述目标对象的手势图像序列， 所述手 势图像序列基于针对所述目标对象采集的多帧第二手势图像确定； 根据所述手势图像序列以及训练后的动态手势 识别模型， 得到动态手势类别。 2.根据权利要求1所述的手势识别的方法， 其特征在于， 在所述将所述第 一手势图像输 入训练后的静态手势 识别模型中， 得到静态手势类别之前， 还 包括： 获取第一训练样本图像； 将所述第一训练样本 图像输入初始静态手势识别模型中， 得到预测手势位置， 以及预 测静态手势类别； 获取所述第一训练样本图像对应的标签 手势位置和标签 手势类别； 根据手势位置损失函数确定所述预测手势位置与所述标签手势位置之间的位置损失 值， 根据类别损失函数确定所述预测静态手势类别与所述标签手势类别之间的类别损失 值； 根据所述位置损失值和所述类别损失值调整所述初始静态手势识别模型的参数， 得到 所述训练后的静态手势 识别模型。 3.根据权利要求2所述的手势识别的方法， 其特征在于， 所述将所述第 一训练样本图像 输入初始静态手势 识别模型中， 得到预测静态手势类别， 包括： 将所述第一训练样本图像输入初始静态手势识别模型中， 得到所述第 一训练样本图像 为多个手势类别中每一手势类别的概 率； 根据多个 手势类别的概 率确定预测静态手势类别。 4.根据权利要求2所述的手势识别的方法， 其特征在于， 所述将所述第 一训练样本图像 输入初始静态手势 识别模型中， 得到预测手势位置， 包括： 将所述第一训练样本 图像输入初始静态手势识别模型中， 得到多种尺寸的特征图， 其 中， 每种尺寸的特 征图包括对应的手势位置； 根据多种尺寸的特 征图中的所述手势位置确定预测手势位置 。 5.根据权利要求1 ‑4中任一项所述的手势识别的方法， 其特征在于， 在所述获取目标对 象的第一手势图像之前， 还 包括： 接收目标对象输入的操作指令， 所述操作指令用于开启图像采集设备， 所述图像采集 设备用于采集目标对象的手势图像。 6.根据权利要求1 ‑4中任一项所述的手势识别的方法， 其特征在于， 获取所述目标对象 的手势图像序列， 包括： 以所述第一手势图像作为首帧手势图像， 获取所述首帧手势图像之后的连续多帧手势 图像； 从连续多帧所述手势图像中， 至少选取部分的所述手势图像作为第二手势图像， 得到 所述手势图像序列。 7.根据权利要求6所述的手势识别的方法， 其特征在于， 所述从连续多帧所述手势图像 中， 至少选取部分的所述手势图像作为第二手势图像， 包括：权　利　要　求　书 1/2 页 2 CN 114463839 A 2将连续多帧所述手势图像划分为N个手势图像集， 其中， 每一手势图像集中包括至少一 帧手势图像， N 为大于等于1的整数； 从每一手势图像集中随机抽取至少一帧手势图像， 作为所述第二手势图像。 8.一种手势 识别的装置， 其特 征在于， 包括： 第一获取模块， 用于获取目标对象的第一手势图像； 静态识别模块， 用于将所述第一手势图像输入训练后的静态手势识别模型中， 得到静 态手势类别； 第二获取模块， 用于当所述静态手势类别为目标手势类别时， 获取所述目标对象的手 势图像序列， 所述手势图像序列基于针对所述目标对象采集的多帧第二手势图像确定； 动态识别模块， 用于根据所述手势图像序列以及训练后的动态手势识别模型， 得到动 态手势类别。 9.一种电子装置， 包括存储器和处理器， 其特征在于， 所述存储器中存储有计算机程 序， 所述处理器被设置为运行所述计算机程序以执行权利要求1至7中任一项 所述的手势识 别的方法。 10.一种计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 所述计算机程序 被处理器执行时实现权利要求1至7中任一项所述的手势 识别的方法的步骤。权　利　要　求　书 2/2 页 3 CN 114463839 A 3