一种展示手语的播放方法、装置、智能电视及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN114157920A(43)申请公布日2022.03.08(21)申请号202111509904.3(22)申请日2021.12.10(71)申请人深圳TCL新技术有限公司地址518052广东省深圳市南山区西丽街道中山园路1001号国际E城D4栋9楼(72)发明人钟伟健(74)专利代理机构深圳紫藤知识产权代理有限公司44570代理人陈楚芳(51)Int.Cl.H04N21/81(2011.01)H04N21/262(2011.01)权利要求书2页说明书8页附图2页(54)发明名称一种展示手语的播放方法、装置、智能电视及存储介质(57)摘要本发明实施例公开了一种展示手语的播放方法、装置、智能电视及存储介质，其中，该方法应用于智能电视，包括：获取所述智能电视的当前播放节目的原始音频信息，将所述原始音频信息转换为目标手语文本；基于所述目标手语文本，获取若干个手语数据，从若干个所述手语数据中选取目标手语数据；根据所述目标手语数据，获取若干帧手势图像及嘴型图像；根据若干帧所述手势图像及所述嘴型图像生成虚拟人，所述虚拟人展示与所述手势图像对应的手势，以及与所述嘴型图像对应的嘴型。通过上述方式，听力障碍人士在观看智能电视节目或直播时，可以通过虚拟人的展示理解其中内容，实现听力障碍人士正常观看的目的。CN114157920ACN114157920A权利要求书1/2页1.一种展示手语的播放方法，应用于智能电视，其特征在于，所述方法包括：获取所述智能电视的当前播放节目的原始音频信息，将所述原始音频信息转换为目标手语文本；基于所述目标手语文本，获取若干个手语数据，从若干个所述手语数据中选取目标手语数据；根据所述目标手语数据，获取若干帧手势图像及嘴型图像；根据若干帧所述手势图像及所述嘴型图像生成虚拟人，所述虚拟人展示与所述手势图像对应的手势，以及与所述嘴型图像对应的嘴型。2.根据权利要求1所述的展示手语的播放方法，其特征在于，在所述获取所述智能电视的当前播放节目的原始音频信息之前，所述方法还包括：判断所述智能电视的手语展示按键是否启动；当所述手语展示按键未启动，结束；当所述手语展示按键启动，获取所述智能电视的当前播放节目的原始音频信息。3.根据权利要求1所述的展示手语的播放方法，其特征在于，在所述获取所述智能电视的当前播放节目的原始音频信息之前，所述方法还包括：判断所述智能电视的手语展示按键是否启动；当所述手语展示按键未启动，结束；当所述手语展示按键启动，获取所述智能电视的当前播放音量，判断所述当前播放音量是否大于预设音量；当所述当前播放音量大于所述预设音量，所述智能电视显示音量提醒信息；当所述当前播放音量小于所述预设音量，获取所述智能电视的当前播放节目的原始音频信息，将所述原始音频信息转换为目标手语文本。4.根据权利要求1所述的展示手语的播放方法，其特征在于，所述获取所述智能电视的当前播放节目的原始音频信息，将所述原始音频信息转换为目标手语文本的具体实施过程为：获取所述智能电视的当前播放节目的原始音频信息；将所述原始音频信息进行特征提取，获得人声音频信息；基于所述人声音频信息，获得人声音频数据；对所述人声音频数据进行语义识别及逐字翻译，得到目标手语文本。5.根据权利要求1所述的展示手语的播放方法，其特征在于，所述基于所述目标手语文本，获取若干个手语数据，从若干个目标手语数据中选取目标手语数据的具体实施过程为：提取所述目标手语文本的若干个目标手语数据；将若干个所述目标手语数据进行重组得到若干组模型参数；将若干组所述模型参数依次输入预设模型进行计算，得到若干个手语数据；从若干个所述手语数据中选取目标手语数据。6.根据权利要求1所述的展示手语的播放方法，其特征在于，所述根据所述目标手语数据，获取若干帧手势图像及嘴型图像的具体实施过程为：将所述目标手语数据根据语义进行拆分，得到若干个手语词语；从预设手语库中选取与每一所述手语词语对应的手势图像及嘴型图像。2CN114157920A权利要求书2/2页7.根据权利要求1所述的展示手语的播放方法，其特征在于，在所述根据所述目标手语数据，获取若干帧手势图像及嘴型图像之后，所述方法还包括：设定同步开始标签；将若干帧所述手势图像及所述嘴型图像均添加入所述同步开始标签；设定同步结束标签；将若干帧所述手势图像及所述嘴型图像均添加入所述同步结束标签。8.一种展示手语的播放装置，应用于智能电视，其特征在于，所述装置包括：获取及转换单元，用于获取所述智能电视的当前播放节目的原始音频信息，将所述原始音频信息转换为目标手语文本；选取单元，用于基于所述目标手语文本，获取若干个手语数据，从若干个所述手语数据中选取目标手语数据；图像获取单元，用于根据所述目标手语