(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111637743.6 (22)申请日 2021.12.2 9 (71)申请人 北京奥鹏远程教育中心有限公司 地址 100081 北京市海淀区西三环北路甲2 号院中关村国防科技园2号楼13层 (72)发明人 王秀鹏　李国斌　玉双明　陈浩　 肖富贵　 (74)专利代理 机构 北京集智东方知识产权代理 有限公司 1 1578 代理人 陈攀 (51)Int.Cl. G06V 40/16(2022.01) G06V 40/20(2022.01) G06T 13/20(2011.01) G06T 19/00(2011.01)G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 一种人体动作展示的方法、 装置、 设备及可 读存储介质 (57)摘要 本发明提供了一种人体动作展示的方法、 装 置、 设备及可读存储介质， 所述方法包括： 获取图 像采集设备所采集的人体图像信息； 根据人体图 像信息， 得到人体关节点信息； 根据人体图像信 息， 提取人脸信息， 并根据提取的人脸信息进行 性别检测， 得到性别信息； 将人体关节点信息和 性别信息发送至客户端， 人体关节 点信息和性别 信息用于触发客户端依次执行根据性别信息选 定对应的模 型的命令， 根据选定的模 型和人体关 节点信息进行MR或AR动画播放， 并跟踪和展示所 述图像采集 设备前的人体的动作的命令。 本发明 不需要外部服务器资源， 速度快， 节省资源， 可以 满足实时采集并处理的要求， 本发明通过AR环境 或MR环境进行展示， 教学过程更贴近真实场景。 权利要求书2页 说明书7页 附图3页 CN 114299581 A 2022.04.08 CN 114299581 A 1.一种人体动作展示的方法， 其特 征在于， 包括： 获取图像采集设备 所采集的人体图像信息； 根据所述人体图像信息， 得到人体关节点信息； 根据所述人体图像信 息， 提取人脸信 息， 并根据提取的所述人脸信 息进行性别检测， 得 到性别信息； 将所述人体关节点信 息和所述性别信 息发送至客户端， 所述人体关节点信 息和所述性 别信息用于触发所述客户端执行第一命令和 第二命令， 所述第一命令包括根据所述性别信 息选定对应的模型的命令， 所述第二命令包括根据选定的所述模型和所述人体关节点信息 进行MR或AR动画播 放， 并跟踪和展示所述图像采集设备 前的人体的动作的命令 。 2.根据权利要求1所述的人体动作展示的方法， 其特征在于， 所述获取图像采集设备所 采集的人体图像信息， 包括： 获取所述图像采集设备采集的3D深度图像； 采用Mask R‑CNN思想对所述3D深度图像进行 人物检测， 得到人物框； 利用全卷积神经网络的Mask层对所述人物框进行预测， 得到第一结果， 对所述第一结 果逐像素进行回归， 得到所述图像采集设备 前的人体图像和背景图像。 3.根据权利要求1所述的人体动作展示的方法， 其特征在于， 所述根据 所述人体图像信 息， 得到人体关节点信息， 包括： 对所述人体图像信 息进行预测， 通过所述人体图像信 息中的人体图像识别出所述人体 图像中的人体的不同部位， 得到所述人体关节点信息 。 4.根据权利要求1所述的人体动作展示的方法， 其特征在于， 所述根据 所述人体图像信 息， 提取人脸信息， 并根据提取的所述人脸信息进行性别检测， 得到性别 信息， 包括： 截取所述人体图像信息中的人体图像的人脸， 得到人脸框； 对所述人脸框进行检测， 得到性别 信息。 5.一种人体动作展示的装置， 其特 征在于， 包括： 获取模块， 用于获取图像采集设备 所采集的人体图像信息； 人体关节点识别模块， 用于根据所述人体图像信息， 得到人体关节点信息； 性别检测模块， 根据 所述人体图像信 息， 提取人脸信息， 并根据提取的所述人脸信 息进 行性别检测， 得到性别 信息； 发送模块， 用于将所述人体关节点信息和所述性别信息发送至客户端， 所述人体关节 点信息和所述性别信息用于触发所述客户端 执行第一命令和 第二命令， 所述第一命令包括 根据所述性别信息选定对应的模型的命令， 所述第二命令包括根据选定的所述模型和所述 人体关节点信息进 行MR或AR动画 播放， 并跟踪和展示所述图像采集设备前的人体的动作的 命令。 6.根据权利要求5所述的人体动作展示的装置， 其特 征在于， 所述获取模块包括： 获取单元， 用于获取 所述图像采集设备采集的3D深度图像； 第一检测单元， 用于采用Mask  R‑CNN思想对所述3D深度图像进行人物检测， 得到人物 框； 预测单元， 用于利用全卷积神经网络的Mask层对所述人物框进行预测， 得到第一结果， 对所述第一结果逐像素进行回归， 得到所述图像采集设备 前的人体图像和背景图像。权　利　要　求　书 1/2 页 2 CN 114299581 A 27.根据权利要求5所述的人体动作展示的装置， 其特征在于， 所述人体关节点识别模块 包括： 识别单元， 用于对所述人体图像信息进行预测， 通过所述人体图像信息中的人体图像 识别出所述人体图像中的人体的不同部位， 得到所述人体关节点信息 。 8.根据权利要求5所述的人体动作展示的装置， 其特 征在于， 所述 性别检测模块包括： 截取单元， 用于截取 所述人体图像信息中的人体图像的人脸， 得到人脸框； 第二检测单 元， 用于对所述人脸框进行检测， 得到性别 信息。 9.一种人体动作展示的设备， 其特 征在于， 包括： 存储器， 用于存 储计算机程序； 处理器， 用于执行所述计算机程序时实现如权利要求1至4任一项所述人体动作展示的 方法的步骤。 10.一种可读存储介质， 其特征在于： 所述可读存储介质上存储有计算机程序， 所述计 算机程序被处 理器执行时实现如权利要求1至4任一项所述人体动作展示的方法的步骤。权　利　要　求　书 2/2 页 3 CN 114299581 A 3