场景渲染方法及装置、存储介质及电子设备.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113850898A(43)申请公布日2021.12.28(21)申请号202111212378.4(22)申请日2021.10.18(71)申请人深圳追一科技有限公司地址518000广东省深圳市南山区粤海街道科技园社区科苑路8号讯美科技广场3号楼23A、23B(72)发明人常向月王雨辰穆少垒(74)专利代理机构北京集佳知识产权代理有限公司11227代理人李慧慧(51)Int.Cl.G06T15/00(2011.01)G06F16/332(2019.01)G06F16/33(2019.01)G06F40/30(2020.01)权利要求书2页说明书11页附图5页(54)发明名称场景渲染方法及装置、存储介质及电子设备(57)摘要本发明提供一种场景渲染方法及装置、存储介质及电子设备，该方法包括：接收用户通过客户端发送的渲染指令，获取与渲染指令对应的问题文本和应答文本；对问题文本和应答文本进行语义场景分析，确定与渲染指令对应的语义场景；获取与语义场景对应的场景图片序列，并基于场景图片序列生成场景渲染数据流，将场景渲染数据流发送至客户端，使得客户端应用场景渲染数据流渲染应答数据。通过对问题文本和应答文本进行分析，确定语义场景，并基于与语义场景对应的场景图片序列生成场景渲染数据流，使得客户端基于场景渲染数据流渲染应答场景，该过程无需为每个场景训练神经网络，可以减少时间和成本的投入，降低渲染场景的成本。CN113850898ACN113850898A权利要求书1/2页1.一种场景渲染方法，其特征在于，包括：接收用户通过客户端发送的渲染指令，获取与所述渲染指令对应的问题文本和应答文本；对所述问题文本和所述应答文本进行语义场景分析，确定与所述渲染指令对应的语义场景；获取与所述语义场景对应的场景图片序列，并基于所述场景图片序列生成场景渲染数据流；将所述场景渲染数据流发送至所述客户端，使得所述客户端应用所述场景渲染数据流渲染应答场景。2.根据权利1所述的方法，其特征在于，所述获取与所述渲染指令对应的问题文本和应答文本，包括：对所述渲染指令进行解析，获取所述渲染指令中的问题数据，并基于所述问题数据确定问题文本；对所述问题文本进行处理，得到与所述问题文本对应的应答音频数据和应答文本。3.根据权利要求2所述的方法，其特征在于，所述基于所述问题数据确定问题文本，包括：确定所述问题数据的数据格式；依据所述数据格式对所述问题数据进行处理，获得问题文本。4.根据权利要求1所述的方法，其特征在于，所述对所述问题文本和所述应答文本进行语义场景分析，确定与所述渲染指令对应的语义场景，包括：从所述问题文本和所述应答文本中提取语义场景关键字，并基于所述语义场景关键字确定是否存在场景个性化需求；若确定存在场景个性化需求，则确定与所述语义场景关键字对应的个性化场景，并将所述个性化场景确定为与所述渲染指令对应的语义场景；若确定不存在场景个性化需求，则将预设的默认场景作为与所述渲染指令对应的语义场景。5.根据权利要求2所述的方法，其特征在于，所述基于所述场景图片序列生成场景渲染数据流，包括：基于所述应答文本确定数字人渲染图片序列；应用预设的静默视频生成服务器，对所述场景图片序列、所述应答音频数据和所述数字人渲染图片序列进行数据合成处理，得到场景渲染数据流。6.根据权利要求4所述的方法，其特征在于，所述获取与所述语义场景对应的场景图片序列，包括：在将所述个性化场景确定为与所述渲染指令对应的语义场景时，确定场景背景图片存储服务器中是否存在与所述个性化场景对应的个性化图片序列；若确定场景背景图片存储服务器中存在与所述个性化场景对应的个性化图片序列，则将与所述个性化场景对应的预设的个性化图片序列作为与所述语义场景对应的场景图片序列；若确定场景背景图片存储服务器中不存在与所述个性化场景对应的预设图片序列，则2CN113850898A权利要求书2/2页将预设的默认图片序列作为与所述语义场景对应的场景图片序列；在将预设的默认场景作为与所述渲染指令对应的语义场景时，将所述默认图片序列作为与所述语义场景对应的场景图片序列。7.根据权利要求1所述的方法，其特征在于，所述将所述场景渲染数据流发送至所述客户端，包括：应用预设的流媒体服务器将所述场景渲染数据流发送至所述客户端。8.一种场景渲染装置，其特征在于，包括：获取单元，用于接收用户通过客户端发送的渲染指令，获取与所述渲染指令对应的问题文本和应答文本；语义场景分析单元，用于对所述问题文本和所述应答文本进行语义场景分析，确定与所述渲染指令对应的语义场景；生成单元，用于获取与所述语义场景对应的场景图片序列，并基于所述场景图片序列，生成场景渲染数据流；渲染单元，用于将所述场景渲染