交互控制方法、装置、存储介质以及电子设备.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN112287767A(43)申请公布日2021.01.29(21)申请号202011069232.4(22)申请日2020.09.30(71)申请人北京大米科技有限公司地址100025北京市朝阳区姚家园南路1号惠通时代广场6号楼(72)发明人程驰周佳包英泽(74)专利代理机构北京恒博知识产权代理有限公司11528代理人张晓芳(51)Int.Cl.G06K9/00(2006.01)G06F3/01(2006.01)G06Q50/20(2012.01)权利要求书2页说明书13页附图4页(54)发明名称交互控制方法、装置、存储介质以及电子设备(57)摘要本申请实施例公开了一种交互控制方法、装置、存储介质以及电子设备。所述方法包括：获取来自一个或多个第一终端的一个或多个图像，对所述一个或多个图像进行人体姿态估计，识别各个图像中是否存在肢体交互动作，基于识别结果，将所述存在肢体交互动作的图像作为备选图像，从所述备选图像中选择符合预设条件的图像作为目标图像，向所述目标图像对应的第一终端发送交互响应指令。本申请通过上述方法，识别用户的肢体交互动作，比如举手、站立等动作，在一对多的线上平台的交互过程中实现抢答等功能，丰富了线上平台中的交互方式，也增加了交互的乐趣。CN112287767ACN112287767A权利要求书1/2页1.一种交互控制方法，其特征在于，所述方法包括：获取来自一个或多个第一终端的一个或多个图像；对所述一个或多个图像进行人体姿态估计，识别各个图像中是否存在肢体交互动作；基于识别结果，将所述存在肢体交互动作的图像作为备选图像；从所述备选图像中选择符合预设条件的图像作为目标图像；向所述目标图像对应的第一终端发送交互响应指令。2.根据权利要求1所述的方法，其特征在于，所述一个或多个图像的分别包括一个用户；所述对所述至少一个图像进行人体姿态估计，识别各个图像中是否存在肢体交互动作包括：基于预先训练的神经网络确定各个图像中的用户肢体关键点的三维坐标；基于所述用户肢体关键点的三维坐标确定用户是否发起肢体交互动作。3.根据权利要求2所述的方法，其特征在于，所述肢体交互动作为举手动作；所述基于所述用户肢体关键点的三维坐标确定用户是否发起肢体交互动作包括：基于用户左、右手腕和左、右手肘的三维坐标，计算用户左、右手小臂抬起的第一角度；在所述第一角度大于第一角度阈值时，确定所述图像中的用户发起所述举手动作。4.根据权利要求2所述的方法，其特征在于，所述肢体交互动作为站立动作；所述基于所述用户肢体关键点的三维坐标确定用户是否发起肢体交互动作包括：基于用户躯干、脊柱中心、以及左、右膝盖的三维坐标，计算用户的躯干和腿部在竖直平面的第二角度；在所述第二角度大于第二角度阈值时，确定所述图像中的用户发起所述站立动作。5.根据权利要求1所述的方法，其特征在于，所述从所述备选图像中选择符合预设条件的图像作为目标图像包括：基于各个备选图像中的用户发起肢体交互动作的时间选择符合预设条件的图像作为目标图像；或基于各个备选图像中的用户在预设时间段内发起肢体交互动作的次数选择符合预设条件的图像作为目标图像。6.根据权利要求5所述的方法，其特征在于，所述基于各个备选图像中的用户发起肢体交互动作的时间选择符合预设条件的图像作为目标图像包括：将所述各个备选图像中的用户发起肢体交互动作时间最早的图像作为目标图像；或将所述各个备选图像中的用户发起肢体交互动作时间最晚的图像作为目标图像。7.根据权利要求5所述的方法，其特征在于，所述基于各个备选图像中的用户在预设时间段内发起肢体交互动作的次数选择符合预设条件的图像作为目标图像包括：将所述各个备选图像中的用户在预设时间段内发起肢体交互动作的次数最少的图像作为目标图像；或将所述各个备选图像中的用户在预设时间段内发起肢体交互动作的次数最多的图像作为目标图像。8.根据权利要求5所述的方法，其特征在于，所述向所述目标图像对应的第一终端发送交互响应指令包括：2CN112287767A权利要求书2/2页获取各个图像对应的第一终端的设备标识；基于所述设备标识向所述目标图像对应的第一终端发送交互成功响应指令，向其他图像对应的第一终端发送交互失败响应指令。9.根据权利要求1所述的方法，所述方法由所述服务器执行，其特征在于，所述获取来自一个或多个第一终端的一个或多个图像之前，还包括：接收来自第二终端的图像获取指令；所述获取来自一个或多个第一终端的一个或多个图像，包括：响应于所述图像获取指令，获取来自一个或多个第一终端的一个或多个图像。10.根据权利要求1所述的方法，所述方法由所述第二终端执行，其特征在于，所述获取来自一个或多个第一终端的一个或多个图像之前，还包括：接收用户基于