信息再现装置、信息再现方法、信息记录装置和信息记录方法.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN106165402A(43)申请公布日2016.11.23(21)申请号201580019644.8(74)专利代理机构北京康信知识产权代理有限责任公司1(22)申请日2015.01.191240代理人田喜庆吴孟秋(30)优先权数据2014-0878482014.04.22JP(51)Int.Cl.H04N5/64(2006.01)(85)PCT国际申请进入国家阶段日H04N5/91(2006.01)2016.10.13H04S5/02(2006.01)(86)PCT国际申请的申请数据PCT/JP2015/0512872015.01.19(87)PCT国际申请的公布数据WO2015/162947JA2015.10.29(71)申请人索尼公司地址日本东京(72)发明人今誉长谷川雄一权利要求书2页说明书17页附图21页(54)发明名称信息再现装置、信息再现方法、信息记录装置和信息记录方法(57)摘要本发明提供非常具有娱乐性并且还非常令人激动的内容，以及以这种方式记录并再现声音和图片信息，以给出现场的感觉。在记录期间，将由多个摄像机拍摄的图片信息与关于摄像机中的每一个的位置信息和姿势信息一起记录，并且将来自多个声源的声音信息与关于声源中的每一个的位置信息一起记录。在再现期间，在观看者位置(注视方向)处的图片被再现并且声音图像被定位到观看者位置，从而提供非常具有娱乐性并且还非常令人激动的内容，并且给出具有现场的感觉的声音。CN106165402ACN106165402A权利要求书1/2页1.一种信息再现装置，包括：位置信息计算单元，被配置为计算在提供了图像和声音的空间中的观看者的位置；图像处理单元，被配置为基于记录有摄像机的位置信息和姿势信息的图像信息在所述观看者的位置处处理图像；以及声音处理单元，被配置为基于记录有声源的位置信息的声音信息在所述观看者的位置处定位声音图像。2.根据权利要求1所述的信息再现装置，其中，所述位置信息计算单元基于用于拍摄的所述摄像机的所述位置信息和所述姿势信息计算所述观看者的位置。3.根据权利要求1所述的信息再现装置，其中，所述位置信息计算单元基于所述观看者的实际运动或者实际位置计算所述观看者的位置。4.根据权利要求1所述的信息再现装置，其中，所述位置信息计算单元基于多个所述摄像机之间的重心位置计算所述观看者的位置。5.根据权利要求1所述的信息再现装置，其中，所述位置信息计算单元基于多个所述摄像机之间的重心位置计算所述观看者的位置，基于对摇摄和切换的频率进行加权而得到所述重心位置。6.根据权利要求1所述的信息再现装置，其中，所述图像处理单元基于由在所述观看者的位置处的所述摄像机拍摄的所述摄像机的图像在所述观看者的位置处生成图像。7.根据权利要求1所述的信息再现装置，其中，所述图像处理单元使用由多个所述摄像机拍摄的图像在所述观看者的位置处生成视点插入图像。8.根据权利要求7所述的信息再现装置，其中，所述声音处理单元在插入视点的位置处定位所述声音图像。9.根据权利要求7所述的信息再现装置，其中，所述声音处理单元基于插入了从所述观看者收集的语音信息的视点的位置定位所述声音图像。10.根据权利要求7所述的信息再现装置，其中，所述图像处理单元在所述视点插入图像中对应于所述观看者的位置处显示所述观看者的头像或者位置信息。11.根据权利要求1所述的信息再现装置，其中，所述声音处理单元将包含在来自所述观看者的位置的视点图像中的声源的绝对位置信息转换为相对于所述观看者的位置的相对位置，以定位在所述视点图像中的声音图像。12.一种信息再现方法，包括：位置信息计算步骤，计算在提供了图像和声音的空间中的观看者的位置；图像处理步骤，基于记录有摄像机的位置信息和姿势信息的图像信息在所述观看者的2CN106165402A权利要求书2/2页位置处处理图像；以及声音处理步骤，基于记录有声源的位置信息的声音信息在所述观看者的位置处定位声音图像。13.一种信息记录装置，包括：图像信息记录单元，被配置为记录由摄像机拍摄的图像以及所述摄像机的位置信息和姿势信息；以及声音信息记录单元，被配置为记录声源的位置信息。14.根据权利要求13所述的信息记录装置，其中，所述图像信息记录单元以用于图像的数据包形式记录由所述摄像机拍摄的图像以及所述摄像机的位置信息和姿势信息，并且所述声音信息记录单元以用于声音的数据包形式记录所述声源的位置信息。15.根据权利要求13所述的信息记录装置，其中，所述图像信息记录单元在用于图像的轨道中记录由所述摄像机拍摄的图像以及所述摄像机的位置信息和姿势信息，并且所述声音信息记录单元在用于声音的轨道中记录所述声源的位置信息。16.根据权利要求13所述的信息记