交互方法、装置、电子设备以及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113900620A(43)申请公布日2022.01.07(21)申请号202111319935.2(22)申请日2021.11.09(71)申请人杭州逗酷软件科技有限公司地址311100浙江省杭州市余杭区五常街道西溪八方城9幢1001室(72)发明人陈明张晓帆(74)专利代理机构深圳市智圈知识产权代理事务所(普通合伙)44351代理人吕静(51)Int.Cl.G06F3/16(2006.01)G06F3/0481(2022.01)G06F3/0482(2013.01)G06F3/0484(2022.01)权利要求书4页说明书23页附图12页(54)发明名称交互方法、装置、电子设备以及存储介质(57)摘要本申请公开了一种交互方法、装置、电子设备以及存储介质，涉及语音控制技术领域。该方法包括：显示图形界面，响应于输入的语音交互指令，从N1个界面控件元素中筛选出可交互的N2个界面控件元素，以及满足指定控件尺寸的N3个界面控件元素，从N2个界面控件元素中，筛选出位于N3个界面控件元素中的N4个界面控件元素，当N4个界面控件元素满足预设排列规则时，对N4个界面控件元素进行索引编号，获得N4个界面控件元素各自对应的目标索引编号，根据该目标索引编号从N4个界面控件元素中确定对应的界面控件元素，从而可以无需被控制应用对语音控制进行适配，就能实现用户通过语音控制对界面进行交互，节省语音识别的时长，并提升语音交互的准确率。CN113900620ACN113900620A权利要求书1/4页1.一种交互方法，其特征在于，所述方法包括：显示图形界面，其中，所述图形界面包括N1个界面控件元素；响应于输入的语音交互指令，从所述N1个界面控件元素中筛选出可交互的N2个界面控件元素，并从所述N1个界面控件元素中筛选出满足指定控件尺寸的N3个界面控件元素，其中，N1＞N2，N1＞N3，N2为大于1的整数，N3为大于0的整数；从所述N2个界面控件元素中，筛选出位于所述N3个界面控件元素中的N4个界面控件元素，其中，N2≥N4，N4为大于1的整数；当所述N4个界面控件元素满足预设排列规则时，对所述N4个界面控件元素进行索引编号，获得所述N4个界面控件元素各自对应的目标索引编号；基于所述N4个界面控件元素各自对应的目标索引编号，从所述N4个界面控件元素中确定与所述语音交互指令对应的界面控件元素。2.根据权利要求1所述的方法，其特征在于，在所述从所述N1个界面控件元素中筛选出满足指定控件尺寸的N3个界面控件元素之前，还包括：对所述语音交互指令进行解析，获得所述语音交互指令所包含的语音信息；基于所述语音信息，确定指定控件尺寸。3.根据权利要求2所述的方法，其特征在于，所述基于所述语音信息，确定指定控件尺寸，包括：当所述语音信息同时包括文本描述和索引编号时，确定所述指定控件尺寸为第一控件尺寸，所述图形界面包括至少两个部分，所述至少两个部分中的每个部分包括关键词和多个界面控件元素，所述关键词与所述文本描述关联；或者当所述语音信息只包括索引编码时，确定所述指定控件尺寸为第二控件尺寸，其中，所述第二控件尺寸大于所述第一控件尺寸。4.根据权利要求1‑3任一项所述的方法，其特征在于，所述从所述N1个界面控件元素中筛选出满足指定控件尺寸的N3个界面控件元素，包括：获取所述N1个界面控件元素各自对应的控件尺寸；基于所述N1个界面控件元素各自对应的控件尺寸，从所述N1个界面控件元素中筛选出控件尺寸大于所述指定控件尺寸的N3个界面控件元素。5.根据权利要求1‑3任一项所述的方法，其特征在于，所述从所述N2个界面控件元素中，筛选出位于所述N3个界面控件元素中的N4个界面控件元素之后，还包括：从所述N2个界面控件元素中，筛选出位于所述N3个界面控件元素中的N5个界面控件元素；当所述N5个界面控件元素中包括重叠的界面控件元素时，对所述重叠的界面控件元素进行去重，获得所述N4个界面控件元素。6.根据权利要求5所述的方法，其特征在于，所述当所述N5个界面控件元素中包括重叠的界面控件元素时，对所述重叠的界面控件元素进行去重，获得所述N4个界面控件元素，包括：当所述N5个界面控件元素中包括重叠的界面控件元素时，获取重叠的界面控件元素之间的重叠区域比例作为第一比例；当所述第一比例大于或等于第一比例阈值时，从重叠的界面控件元素中删除控件尺寸2CN113900620A权利要求书2/4页最大的界面控件元素，获得所述N4个界面控件元素。7.根据权利要求6所述的方法，其特征在于，所述从重叠的界面控件元素中删除控件尺寸最大的界面控件元素，获得所述N4个界面控件元素，包括：从所述重叠的界面控件元素中删除控件尺寸最大的界面控件元素，获得N6个界