一种系统延时确定方法、装置、设备和存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN112843677A(43)申请公布日2021.05.28(21)申请号202110172567.7(22)申请日2021.02.08(71)申请人脸萌有限公司地址开曼群岛申请人北京大学(72)发明人施澍黎吉国张莉马思伟王悦(74)专利代理机构北京远智汇知识产权代理有限公司11659代理人范坤坤(51)Int.Cl.A63F13/358(2014.01)G06K9/46(2006.01)G06K9/62(2006.01)权利要求书2页说明书14页附图5页(54)发明名称一种系统延时确定方法、装置、设备和存储介质(57)摘要本公开实施例提供一种系统延时确定方法、装置、设备和存储介质，包括：响应于作用在背景窗口的多媒体信号上的用户操作指令，获取用户操作指令的输入时刻；检测背景窗口和前景窗口中的多媒体信号，其中，背景窗口是输入时刻之前的第一时间窗口，前景窗口是输入时刻之后的第二时间窗口；基于前景窗口中的多媒体信号相对于背景窗口中的多媒体信号的突变情况，确定用户操作指令的响应时刻；根据输入时刻和响应时刻确定系统的系统延时。本公开实施例通过获取用户操作指令的输入时刻以及用户操作指令对应的响应时刻确定系统延时，该方案不需要昂贵的硬件设备，也不需要过多的人工参与，可以方便快捷地测量远程渲染系统的交互延时。CN112843677ACN112843677A权利要求书1/2页1.一种系统延时确定方法，其特征在于，包括：响应于作用在背景窗口的多媒体信号上的用户操作指令，获取所述用户操作指令的输入时刻；检测所述背景窗口和前景窗口中的多媒体信号，其中，所述背景窗口是所述输入时刻之前的第一时间窗口，所述前景窗口是所述输入时刻之后的第二时间窗口；基于所述前景窗口中的所述多媒体信号相对于所述背景窗口中的所述多媒体信号的突变情况，确定所述用户操作指令的响应时刻；根据所述输入时刻和所述响应时刻确定系统的系统延时。2.根据权利要求1所述的方法，其特征在于，基于所述前景窗口中的所述多媒体信号相对于所述背景窗口中的所述多媒体信号的突变情况，确定系统响应所述用户操作指令的响应时刻，包括：若所述前景窗口中的所述多媒体信号相对于所述背景窗口中的所述多媒体信号发生突变，则将所述前景窗口中的多媒体信号发生突变的时刻确定为响应所述操作指令的所述响应时刻。3.根据权利要求1或2所述的方法，其特征在于，在基于所述前景窗口中的所述多媒体信号相对于所述背景窗口中的所述多媒体信号的突变情况，确定系统响应所述用户操作指令的响应时刻之前，还包括：确定所述前景窗口中的所述多媒体信号发生突变是否是所述用户操作指令引起的；若所述前景窗口中的所述多媒体信号发生突变是所述用户操作指令引起的，则执行基于所述前景窗口中的所述多媒体信号相对于所述背景窗口中的所述多媒体信号的突变情况，确定系统响应所述用户操作指令的响应时刻的操作。4.根据权利要求3所述的方法，其特征在于，确定所述前景窗口中的所述多媒体信号发生突变是否是所述用户操作指令引起的，包括：将所述前景窗口中的所述多媒体信号的突变信号和所述用户操作指令输入至预先训练的一致性分类器中；基于所述一致性分类器的输出结果确定所述前景窗口中的所述多媒体信号发生突变是否是所述用户操作指令引起的。5.根据权利要求4所述的方法，其特征在于，所述一致性分类器的训练过程，包括：获取训练样本集，所述训练样本集包括：多个历史操作指令和多个历史多媒体信号的突变信号；提取各个所述历史多媒体信号的突变信号的特征；统计第一特征出现的次数，所述第一特征是指与历史操作指令对应的历史多媒体信号的突变信号的特征；将所述第一特征出现的次数确定为历史操作指令对应的标准化值；将所述历史操作指令和所述历史操作指令对应标准化值输入至预设分类器中进行训练，得到一致性分类器。6.根据权利要求5所述的方法，其特征在于，所述预设分类器包括如下一种或多种：支撑向量机SVM分类器，最近邻分类器，朴素贝叶斯分类器，随机森林分类器，线性判别分类器。2CN112843677A权利要求书2/2页7.根据权利要求1‑5中任一项所述的方法，其特征在于，所述多媒体信号包括以下模态中的一种或多种：视频信号，音频信号，体感信号。8.根据权利要求7所述的方法，其特征在于，提取各个所述历史多媒体信号的突变信号的特征，包括：在所述多媒体信号包括视频信号时，提取各个视频信号的突变信号对应的尺度不变特征变换SIFT特征。9.根据权利要求7所述的方法，其特征在于，提取各个所述历史多媒体信号的突变信号的特征，包括：在所述多媒体信号包括音频信号时，提取各个音频信号的突变信号对应的梅尔倒频谱系数。10.根据权利要求7至9中任一种所述的方法，其特征在于，根据所述输入时刻和所述响