首页  专利技术  电子电路装置的制造及其应用技术

手势识别迭代方法、装置和头戴式电子设备与流程

505次浏览

技术特征:

1.一种手势识别迭代方法,其特征在于,应用于头戴式电子设备,所述头戴式电子设备搭载有手势识别系统以及手势识别优化系统,所述手势识别优化系统包括:真值标注模型、数据采集模块以及finetune模型;

2.根据权利要求1所述的方法,其特征在于,

3.根据权利要求1所述的方法,其特征在于,

4.根据权利要求3所述的方法,其特征在于,所述将目标图像输入至真值标注模型以输出手势2d真值、手势3d真值的步骤中,

5.根据权利要求3所述的方法,其特征在于,所述检测单元包括:手部检测子单元和大模型2d检测子单元;

6.根据权利要求5所述的方法,其特征在于,所述方法还包括:依据所述目标图像的手势真值对所述手部检测子单元以及所述大模型2d检测子单元利用所述finetine模块进行finetune训练。

7.根据权利要求4所述的方法,其特征在于,所述多相机融合算法单元包括:随机三角化子单元、加权密度聚类子单元、卡尔曼滤波子单元以及多目重投影子单元;

8.根据权利要求5所述的方法,其特征在于,所述随机三角化子单元采用如下公式计算手部3d关键点深度z轴坐标:

9.根据权利要求6所述的方法,其特征在于,所述将k组手部所述3d关键点及对应的关键点置信度输入至所述加权密度聚类子单元进行加权融合输出最优3d关键点的步骤包括:

10.根据权利要求9所述的方法,其特征在于,所述从若干个簇中选取手部3d关键点最多的组别m,并对m组中所有手部3d关键点进行置信度加权平均以输出所述最优3d关键点的步骤中,采用如下公式计算最优3d关键点:

11.根据权利要求1所述的方法,其特征在于,所述将所述手势3d真值输入至多目重投影子单元,对所述3d真值在每个角度进行坐标转换及投影以生成所述手势2d真值的步骤中,

12.根据权利要求1至11任一项所述的方法,其特征在于,所述目标图像还包括云端图像,所述方法还包括,将采集的第一手势图像上传至云端,所述目标标签为存在于所述手势识别系统中的任一标签。

13.根据权利要求1至11任一项所述的方法,其特征在于,所述目标标签为用户自定义标签或存在于所述手势识别系统中的任一标签;

14.一种手势识别迭代装置,其特征在于,应用于头戴式电子设备,所述头戴式电子设备搭载有手势识别系统以及手势识别优化系统,所述手势识别优化系统包括:真值标注模型、数据采集模块以及手势识别系统以及finetune模型;

15.一种头戴式电子设备,其特征在于,包括:

16.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储计算机指令,所述计算机指令使所述计算机执行如权利要求1至13任一所述的方法。


技术总结
本申请提供了一种手势识别迭代方法、装置和头戴式电子设备,应用于头戴式电子设备,所述头戴式电子设备搭载有手势识别系统以及手势识别优化系统,所述手势识别优化系统包括:真值标注模型、数据采集模块以及Finetune模型;响应于优化指令,确定目标标签,采集与所述目标标签对应的第一手势图像;将所述数据采集模块采集的第一手势图像输入至真值标注模型以输出手势2D真值、手势3D真值,并利用所述手势2D真值生成手部预测框,所述目标图像包括第一手势图像;依据所述目标标签、所述目标图像的手势真值利用Finetune模型对手势识别系统进行Finetune训练,通过本申请使得用户可以根据自身需求对手势识别系统进行设置,提升用户体验感。

技术研发人员:吴伟鑫,柴鑫,高圣杰,张凯
受保护的技术使用者:华为技术有限公司
技术研发日:
技术公布日:2024/11/14
文档序号 : 【 40001242 】

技术研发人员:吴伟鑫,柴鑫,高圣杰,张凯
技术所有人:华为技术有限公司

备 注:该技术已申请专利,仅供学习研究,如用于商业用途,请联系技术所有人。
声 明此信息收集于网络,如果你是此专利的发明人不想本网站收录此信息请联系我们,我们会在第一时间删除
吴伟鑫柴鑫高圣杰张凯华为技术有限公司
数据处理方法、装置、电子设备及存储介质与流程 去嵌入方法和装置与流程
相关内容