场景渲染方法、装置、电子设备和存储介质.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN116017051A(43)申请公布日2023.04.25(21)申请号202211731567.7(22)申请日2022.12.30(71)申请人科大讯飞股份有限公司地址230088安徽省合肥市高新开发区望江西路666号(72)发明人李珍松刘坤龙明康(74)专利代理机构北京路浩知识产权代理有限公司11002专利代理师白冬梅(51)Int.Cl.H04N21/44(2011.01)H04N21/43(2011.01)权利要求书2页说明书11页附图3页(54)发明名称场景渲染方法、装置、电子设备和存储介质(57)摘要本发明提供一种场景渲染方法、装置、电子设备和存储介质，其中方法包括：确定渲染场景，并对渲染场景进行分区得到若干待渲染区域；接收输入的控制指令数据，确定待渲染区域对应的流媒体数据，其中流媒体数据包括音频数据、视频数据、文本数据以及图片数据中的至少一种；接收输入的文本驱动数据，根据控制指令数据将流媒体数据与文本驱动数据进行对齐规整；将对齐规整后的文本驱动数据和流媒体数据进行通道数据合并，得到场景渲染视频。实现实时对各通道的数据进行对齐规整，使得渲染后的场景中不同展示元素的内容一致性。CN116017051ACN116017051A权利要求书1/2页1.一种场景渲染方法，其特征在于，包括：确定渲染场景，并对所述渲染场景进行分区得到若干待渲染区域；接收输入的控制指令数据，确定所述待渲染区域对应的流媒体数据，其中所述流媒体数据包括音频数据、视频数据、文本数据以及图片数据中的至少一种；接收输入的文本驱动数据，根据所述控制指令数据将所述流媒体数据与所述文本驱动数据进行对齐规整；将对齐规整后的所述文本驱动数据和所述流媒体数据进行通道数据合并，得到场景渲染视频。2.根据权利要求1所述的场景渲染方法，其特征在于，接收输入的控制指令数据，确定所述待渲染区域对应的流媒体数据，包括：对所述待渲染区域进行标识，得到所述待渲染区域对应的区域标识，并接收输入的控制指令数据；根据所述控制指令数据、所述渲染场景和所述区域标识，确定与所述待渲染区域对应的流媒体数据。3.根据权利要求2所述的场景渲染方法，其特征在于，所述根据所述控制指令数据、所述渲染场景和所述区域标识，确定与所述待渲染区域对应的流媒体数据，包括：获取与所述渲染场景关联的流媒体数据，并识别所述流媒体数据对应的数据标识；根据所述控制指令数据包含的关联关系和所述区域标识，确定所述待渲染区域对应的流媒体数据。4.根据权利要求3所述的场景渲染方法，其特征在于，所述根据所述控制指令数据，将所述流媒体数据与所述文本驱动数据进行对齐规整，包括：获取所述控制指令数据中包含的第一数据标识、第一区域标识和起始偏移；根据所述起始偏移，将所述第一数据标识对应的第一流媒体数据与所述文本驱动数据进行对齐规整。5.根据权利要求4所述的场景渲染方法，其特征在于，所述根据所述起始偏移，将所述第一数据标识对应的第一流媒体数据与所述文本驱动数据进行对齐规整，包括：确定所述第一数据标识对应的第一流媒体数据，以及确定所述第一流媒体数据的数据类型；确定所述数据类型对应的对齐规则；根据所述对齐规则和所述起始偏移，将所述第一流媒体数据与所述文本驱动数据进行对齐规整。6.根据权利要求1所述的场景渲染方法，其特征在于，所述接收输入的文本驱动数据和控制指令数据，根据所述控制指令数据，将所述流媒体数据与所述文本驱动数据进行对齐规整之后，还包括：根据所述文本驱动数据得到合成音，并将所述合成音作为音频参照，对所述流媒体数据中的音频数据和视频数据进行降噪处理；确定所述待渲染区域中进行文本展示的第二区域，并根据所述第二区域的区域特征对与所述第二区域对应的流媒体数据进行文本切分，得到在所述第二区域内进行展示的文本作为所述第二区域对应的流媒体数据。2CN116017051A权利要求书2/2页7.根据权利要求1所述的场景渲染方法，其特征在于，所述将对齐规整后的所述文本驱动数据和所述流媒体数据进行通道数据合并，得到场景渲染视频，包括：确定所述待渲染区域中各区域的数据属性，并根据所述数据属性对进行对齐规整后的所述流媒体数据进行调节；将调节后的所述流媒体数据与所述文本驱动数据进行通道数据合并，得到场景渲染视频。8.一种场景渲染装置，其特征在于，包括：分区处理模块，用于确定渲染场景，并对所述渲染场景进行分区得到若干待渲染区域；数据确定模块，用于接收输入的控制指令数据，确定所述待渲染区域对应的流媒体数据，其中所述流媒体数据包括音频数据、视频数据、文本数据以及图片数据中的至少一种；对齐规整模块，用于接收输入的文本驱动数据，根据所述控制指令数据将所述流媒体数据与所述文本驱动数据进行对齐规整；数据合并模块，用于将