画面合成方法、装置、电子设备及可读存储介质.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN114640838A(43)申请公布日2022.06.17(21)申请号202210255128.7G06T7/70(2017.01)(22)申请日2022.03.15(71)申请人北京奇艺世纪科技有限公司地址100080北京市海淀区海淀北一街2号10层、11层(72)发明人王视鎏(74)专利代理机构北京润泽恒知识产权代理有限公司11319专利代理师吕俊秀(51)Int.Cl.H04N13/327(2018.01)H04N13/332(2018.01)H04N13/363(2018.01)H04N13/366(2018.01)G06T5/50(2006.01)权利要求书2页说明书11页附图3页(54)发明名称画面合成方法、装置、电子设备及可读存储介质(57)摘要本发明实施例提供了画面合成方法、装置、电子设备及可读存储介质，所述方法包括：获取相机在第一合成画面的渲染时刻的定位信息，根据相机在渲染时刻的定位信息重投影第一合成画面；获取相机在第一合成画面的实际拍摄时刻的定位信息，根据相机在实际拍摄时刻的定位信息，从重投影的第一合成画面中重新捕获用于合成的虚拟画面；将所捕获的虚拟画面和相机在渲染时刻的实际拍摄画面合成得到第二合成画面。使得相机在重捕获虚拟画面的拍摄时刻与用于合成的实际拍摄画面的渲染时刻具有相同的固定延时，解决渲染和拍摄时相机处于不同位置，即不同机位所导致的直接合成无法对齐的问题，进而实现在显示延时的情况下将所需合成的画面内容和位置同时对齐。CN114640838ACN114640838A权利要求书1/2页1.一种画面合成方法，其特征在于，所述方法包括：获取第一合成画面，以及相机在所述第一合成画面的渲染时刻的定位信息，根据所述相机在渲染时刻的定位信息重投影所述第一合成画面；获取所述相机在所述第一合成画面的实际拍摄时刻的定位信息，根据所述相机在实际拍摄时刻的定位信息，从重投影的第一合成画面中重新捕获用于合成的虚拟画面；将所捕获的虚拟画面和所述相机在所述渲染时刻的实际拍摄画面合成得到第二合成画面。2.根据权利要求1所述的方法，其特征在于，所述第一合成画面包括与不同渲染时刻相应的合成结果，所述根据所述相机在渲染时刻的定位信息重投影所述第一合成画面，包括：获取任一渲染时刻的合成结果，以及相机在此渲染时刻的定位信息；所述合成结果包括实际拍摄画面和虚拟画面；采用所述相机在此渲染时刻的定位信息，将与此渲染时刻相应的实际拍摄画面和虚拟画面在预设虚拟屏幕上进行重投影操作。3.根据权利要求2所述的方法，其特征在于，所述相机在渲染时刻的定位信息包括相机的位置信息与投影位置变化信息，所述采用所述相机在此渲染时刻的定位信息，将与此渲染时刻相应的实际拍摄画面和虚拟画面在预设虚拟屏幕上进行重投影操作，包括：将与此渲染时刻相应的实际拍摄画面和虚拟画面，按照所述相机在此渲染时刻的位置信息与投影位置变化信息投影至预设虚拟屏幕上。4.根据权利要求1所述的方法，其特征在于，所述重投影的第一合成画面包括实际拍摄画面和虚拟画面；所述根据所述相机在实际拍摄时刻的定位信息，从重投影的第一合成画面中重新捕获用于合成的虚拟画面，包括：获取在所述重投影的第一合成画面中与所述相机在所述渲染时刻的实际拍摄画面的同一帧画面被实际拍摄时相机的定位信息；采用在所述实际拍摄画面被实际拍摄时相机的定位信息，从所述重投影的第一合成画面中对虚拟画面进行捕获。5.根据权利要求4所述的方法，其特征在于，所述相机在渲染时刻的定位信息包括相机的位置信息与投影位置变化信息，所述采用在所述实际拍摄画面被实际拍摄时相机的定位信息，从所述重投影的第一合成画面中对虚拟画面进行捕获，包括：从所述重投影的第一合成画面中，捕获符合所述实际拍摄画面被实际拍摄时的位置信息与投影位置变化信息的虚拟画面。6.根据权利要求3所述的方法，其特征在于，所述将所捕获的虚拟画面和所述相机在所述渲染时刻的实际拍摄画面合成得到第二合成画面，包括：获取所述相机在所述渲染时刻时所述第一合成画面所包含的实际拍摄画面，将所捕获的虚拟画面和在所述重投影的第一合成画面中与所述相机在所述渲染时刻所述第一合成画面所包含的实际拍摄画面的同一帧画面进行合成，得到重新合成的第二合成画面。7.根据权利要求1或6所述的方法，其特征在于，所述相机的渲染时刻相对合成画面的合成时刻存在显示延时，所述相机的实际拍摄时刻相对合成画面的合成时刻存在定位延时；所述相机的渲染时刻相对所述相机的实际拍摄时刻存在固定延时，所述将所捕获的虚2CN114640838A权利要求书2/2页拟画面和所述相机在所述渲染时刻的实际拍摄画面合成得到第二合成画面，包括：将所捕获的虚拟画面，和在所述重投影的第一合成画面中与所捕获的虚拟画面