TW201717614A - 資訊處理裝置及方法、以及程式 - Google Patents

資訊處理裝置及方法、以及程式 Download PDF

Info

Publication number
TW201717614A
TW201717614A TW105121562A TW105121562A TW201717614A TW 201717614 A TW201717614 A TW 201717614A TW 105121562 A TW105121562 A TW 105121562A TW 105121562 A TW105121562 A TW 105121562A TW 201717614 A TW201717614 A TW 201717614A
Authority
TW
Taiwan
Prior art keywords
screen
information
angle
remapping
corrected
Prior art date
Application number
TW105121562A
Other languages
English (en)
Other versions
TWI618395B (zh
Inventor
Minoru Tsuji
Toru Chinen
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of TW201717614A publication Critical patent/TW201717614A/zh
Application granted granted Critical
Publication of TWI618395B publication Critical patent/TWI618395B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/40—Visual indication of stereophonic sound image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00—Monitoring arrangements; Testing arrangements
    • H04R29/008—Visual indication of individual signal levels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303—Tracking of listener position or orientation
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S5/00—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation 
    • H04S5/02—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation  of the pseudo four-channel type, e.g. in which rear channel signals are derived from two-channel stereo signals

Abstract

本技術係有關於，能夠進行適切的重新映射的資訊處理裝置及方法、以及程式。偏置角算出部，係算出從使用者的正面方向之基準位置起算的參考螢幕之位置的偏置量；位置資訊補正部，係基於偏置量，而將以基準位置為基準的音訊物件之位置，配合於參考螢幕之位置而予以補正。又，物件重新映射部，係基於已被補正之音訊物件之位置，配合於再生螢幕之位置而將音訊物件之位置予以重新映射。本技術係可適用於資訊處理裝置。

Description

資訊處理裝置及方法、以及程式
本技術係有關於資訊處理裝置及方法、以及程式，尤其是有關於，能夠進行適切的重新映射的資訊處理裝置及方法、以及程式。
先前，於ISO/IEC 23008-3“3D Audio”規格中，Screen-Related Object Element Remapping技術係被採用(例如參照非專利文獻1)。
在該技術中，於物件音訊之渲染再生時，隨應於表示基準之參考螢幕之位置及大小的參考螢幕資訊、和表示實際再生之再生螢幕之位置及大小的再生螢幕資訊，而將音訊物件之位置予以重新映射(重新配置)。藉此，例如參考螢幕上的物件是以相同位置關係而被顯示在再生螢幕上的映像再生進行時，在與再生螢幕上之物件相同的位置，可使這些之物件的音像被定位。
〔先前技術文獻〕 〔非專利文獻〕
[非專利文獻1] ISO/IEC DIS 23008-3 “Information technology-High efficiency coding and media delivery in heterogeneous environments-Part 3: 3D audio”
可是，上述的技術中，是以參考螢幕之中心位置是位於再生空間之使用者之正面為前提。然而，例如顯示360°之全方位之影像的全天球影像的再生時，或將影像全體之一部分予以縮放再生等時候，隨著情況不同，參考螢幕之中心位置並不一定會是使用者之正面的位置。
在如此情況下，若藉由上述技術而將音訊物件之位置予以重新映射，則重新映射後的位置會發生失真。亦即，位於再生螢幕外的音訊物件之位置關係會發生失真，導致無法實現適切的重新映射。
本技術係有鑑於此種狀況而研發，目的在於能夠進行適切的重新映射。
本技術之一側面的資訊處理裝置，係具備：偏置算出部，係算出從使用者的正面方向之基準位置起算的參考螢幕之位置的偏置量；和位置補正部，係基於前記偏置量，而將以前記基準位置為基準的音訊物件之位置，配合於前記參考螢幕之位置而予以補正；和重新映射部， 係基於已被補正之前記音訊物件之位置，配合於再生螢幕之位置而將前記音訊物件之位置予以重新映射。
可令前記偏置算出部，在前記參考螢幕是位於前記使用者的背面方向的情況下，以所定之補正值將前記偏置量予以補正。
可令前記位置補正部，在表示前記音訊物件之位置的資訊之值域是被定為所定範圍之值域的情況下，調整前記音訊物件之位置之補正時的補正值。
可令前記位置補正部，基於前記偏置量，來補正前記參考螢幕之位置；可令前記重新映射部，基於已被補正之前記參考螢幕之位置、及已被補正之前記音訊物件之位置，而將前記音訊物件之位置予以重新映射。
本技術之一側面的資訊處理方法或程式，係含有以下步驟：算出從使用者的正面方向之基準位置起算的參考螢幕之位置的偏置量；基於前記偏置量，而將以前記基準位置為基準的音訊物件之位置，配合於前記參考螢幕之位置而予以補正；基於已被補正之前記音訊物件之位置，配合於再生螢幕之位置而將前記音訊物件之位置予以重新映射。
於本技術之一側面中，從使用者的正面方向之基準位置起算的參考螢幕之位置的偏置量係被算出；基於前記偏置量，以前記基準位置為基準的音訊物件之位置，係配合於前記參考螢幕之位置而被補正；基於已被補正之前記音訊物件之位置，前記音訊物件之位置係被配合 於再生螢幕之位置而被重新映射。
若依據本技術之一側面，則可進行適切的重新映射。
此外，並非一定限定於這裡所記載的效果，亦可為本揭露中所記載之任一效果。
11‧‧‧資訊處理裝置
21‧‧‧偏置角算出部
22‧‧‧位置資訊補正部
23‧‧‧物件重新映射部
501‧‧‧CPU
502‧‧‧ROM
503‧‧‧RAM
504‧‧‧匯流排
505‧‧‧輸出入介面
506‧‧‧輸入部
507‧‧‧輸出部
508‧‧‧記錄部
509‧‧‧通訊部
510‧‧‧驅動機
511‧‧‧可移除式記錄媒體
O‧‧‧原點
OBJ1~OBJ6‧‧‧物件
PSC11‧‧‧再生螢幕
RSC11‧‧‧參考螢幕
U11‧‧‧虛擬使用者
[圖1]重新映射前後的物件之位置關係的圖示。
[圖2]參考螢幕資訊、物件位置資訊、及再生螢幕資訊之例子的圖示。
[圖3]重新映射所致之水平方向位置之變化的說明圖。
[圖4]重新映射後的物件位置資訊之例子的圖示。
[圖5]參考螢幕資訊、物件位置資訊、及再生螢幕資訊之例子的圖示。
[圖6]重新映射後的物件位置資訊之例子的圖示。
[圖7]重新映射前後的物件之位置關係的圖示。
[圖8]資訊處理裝置之構成例的圖示。
[圖9]重新映射後的物件位置資訊之例子的圖示。
[圖10]重新映射前後的物件之位置關係的圖示。
[圖11]說明重新映射處理的流程圖。
[圖12]參考螢幕資訊、物件位置資訊、及再生螢幕資訊之例子的圖示。
[圖13]重新映射後的物件位置資訊之例子的圖示。
[圖14]重新映射前後的物件之位置關係的圖示。
[圖15]參考螢幕資訊、物件位置資訊、及再生螢幕資訊之例子的圖示。
[圖16]重新映射後的物件位置資訊之例子的圖示。
[圖17]重新映射前後的物件之位置關係的圖示。
[圖18]資訊處理裝置之構成例的圖示。
[圖19]說明重新映射處理的流程圖。
[圖20]電腦之構成例的圖示。
以下，參照圖面，說明適用了本技術的實施形態。
〈第1實施形態〉 〈關於重新映射〉
本技術，係在取得音訊物件之音訊訊號、和表示該音訊物件之位置的物件位置資訊等之後設資料而進行音訊再生時，可進行適切的重新映射。此外，以下也將音訊物件簡稱為物件。
例如在內容再生時，在內容再生側係被輸入，用來再生動態影像、和該動態影像所附隨之聲音所成 之內容所需之位元串流。該位元串流，係將例如：用來再生動態影像所需之視訊訊號、和用來再生各物件之聲音所需之音訊訊號、和各物件之後設資料、或表示基準之參考螢幕之位置及大小的參考螢幕資訊等之各種資訊，進行多工化所得。又，後設資料中係至少包含有，表示物件於再生空間中之位置的物件位置資訊。
然後，對內容再生側係會給予，表示實際用於內容再生的螢幕也就是再生螢幕(顯示畫面)位於再生空間中之位置及大小的再生螢幕資訊。然後，在內容再生時，係基於參考螢幕資訊和再生螢幕資訊，進行物件位置資訊所示之物件之位置的重新映射。
具體而言，例如圖1所示般地進行物件位置之重新映射。
如箭頭A11所示，假設以圍繞著位於再生空間之原點O的虛擬使用者U11的方式，配置6個物件OBJ1乃至物件OBJ6。此處，物件OBJ1乃至物件OBJ6係被配置在，後設資料中所含之物件位置資訊所示之再生空間上的位置。
又，參考螢幕RSC11係作為基準之螢幕而被參考螢幕資訊所定義，在此例中，參考螢幕RSC11，係位於使用者U11的正面方向。此外，假設使用者U11係朝向參考螢幕RSC11所處的方向，亦即正面方向。
這些物件OBJ1乃至物件OBJ6、或參考螢幕RSC11的配置位置，係在箭頭A11所示的圖的圖中，若 從上往下方向觀看，則是箭頭A12所示的配置。
在此例中，尤其是物件OBJ1與物件OBJ2是位於參考螢幕RSC11內。又，從使用者U11來看，物件OBJ1、物件OBJ3、及物件OBJ5，和物件OBJ2、物件OBJ4、及物件OBJ6，係在水平方向上被配置成左右對稱。
因此，即使在參考螢幕RSC11上將構成內容的動態影像予以再生時，在參考螢幕RSC11上，在6個物件之中，只有物件OBJ1和物件OBJ2會被顯示。
現在假設，在箭頭A12所示的圖中，將從使用者U11來看的正面方向，亦即圖中的上方向，設成x軸的正方向，將從使用者U11來看的右方向設成y軸的正方向，將從使用者U11來看的正上方向，亦即圖中的面前側之方向，設成z軸的正方向。
又，以原點O為原點，將這些x軸、y軸、及z軸所成之3維座標系，視為xyz座標系。甚至，假設以原點O為中心，以從原點O起算之所定之距離r(以下亦稱為半徑r)為半徑的單位球面上，配置有各物件或參考螢幕RSC11。此處，例如假設半徑r係為1等。
在如此情況下，物件位置資訊或參考螢幕資訊所示之位置，係藉由xy平面上的與x軸所夾之角度也就是水平方向角度Azimuth，及xz平面上的與x軸所夾之角度也就是垂直方向角度Elevation來表示。此外，更詳細來說，垂直方向角度Elevation，係將物件等之對象 位置及原點O所連結的直線與xy平面所夾之角度。又，假設再生螢幕資訊所示之位置，也是藉由水平方向角度Azimuth、及垂直方向角度Elevation來表示。
此處，水平方向角度Azimuth，係x軸的正方向是被設成水平方向角度Azimuth=0°，箭頭A12所示的圖中順時鐘方向是被設成水平方向角度Azimuth的負方向，反時鐘方向係被設成水平方向角度Azimuth的正方向。又，-180°≦Azimuth≦180°。
因此，例如y軸的正方向係為水平方向角度Azimuth=-90°，x軸的負方向係為水平方向角度Azimuth=-180°=180°。
垂直方向角度Elevation，係x軸之方向，亦即xy平面之位置是被設成垂直方向角度Elevation=0°，從xy平面往z軸的正方向的旋轉方向係被設成垂直方向角度Elevation的正方向，往z軸的負方向的旋轉方向係被設成垂直方向角度Elevation的負方向。又，-90°≦Elevation≦90°。
因此，例如z軸的正方向係為垂直方向角度Elevation=90°，z軸的負方向係為垂直方向角度Elevation=-90°。
再者，以下係將x軸的正方向側上的單位球與x軸之交點位置，稱為再生空間中的基準位置。亦即，基準位置係為水平方向角度Azimuth=0°、垂直方向角度Elevation=0°、及半徑r=1的位置，係為位於再生空間的 使用者U11之正前面之方向的位置。
如此，物件位置資訊、參考螢幕資訊、及再生螢幕資訊，係可藉由水平方向角度Azimuth及垂直方向角度Elevation來描述。此情況下，若基於這些物件位置資訊、參考螢幕資訊、及再生螢幕資訊來進行重新映射，則例如箭頭A13及箭頭A14所示般地，再生空間中的各物件之配置位置會被變更。
在此例中，物件OBJ1乃至物件OBJ6，係配合於實際再生時所被使用的再生螢幕PSC11而被重新配置。
亦即，在再生螢幕PSC11上，係有位於參考螢幕RSC11上的物件OBJ1和物件OBJ2，是與和參考螢幕RSC11上時相同的位置關係，而被配置。
此外，在此例中，參考螢幕RSC11及再生螢幕PSC11之中心位置，係都是位於基準位置。
又，各物件係以與重新映射前相對上略相同的位置關係而被配置，從使用者U11來看，物件OBJ1、物件OBJ3、及物件OBJ5，和物件OBJ2、物件OBJ4、及物件OBJ6，是於水平方向上被配置成左右對稱。
若依據如此的重新映射，則可將配合於參考螢幕RSC11而被配置的各物件，重新配置在配合於實際再生時所使用之再生螢幕PSC11的位置。其結果為，例如在內容再生時，從再生螢幕PSC11上所被顯示的物件之方向，可以聽見該物件之聲音。又，至於未被顯示在再 生螢幕PSC11上的物件也是，可從適切的方向聽見該物件之聲音。藉此，可實現適切的音訊再生。
此處，關於藉由一般的Screen-Related Object Element Remapping技術而被進行的重新映射，以圖1所示的6個物件為例而更詳細說明。
例如作為參考螢幕RSC11的參考螢幕資訊、物件OBJ1乃至物件OBJ6的物件位置資訊、及再生螢幕PSC11的再生螢幕資訊，假設是給予了圖2所示的資訊。
在圖2中，箭頭Q11所示的部分，係表示參考螢幕資訊及物件位置資訊，箭頭Q12所示的部分，係表示再生螢幕資訊。又，各資訊的圖中，在右側的欄係記載了，水平方向角度Azimuth或垂直方向角度Elevation之數值。
在此例中，參考螢幕資訊，係為表示參考螢幕RSC11之位置及大小、亦即參考螢幕RSC11之上下左右之端部之位置的資訊。
具體而言，參考螢幕資訊之欄中的文字「Azimuth左端」及「Azimuth右端」，係分別表示參考螢幕RSC11在圖1中的左側之端部及右側之端部的位置，表示這些位置的水平方向角度Azimuth係被設成「29.0」及「-29.0」。以下，將參考螢幕RSC11在圖1中的左側之端部及右側之端部，稱為參考螢幕RSC11的左端及右端。
又言，參考螢幕資訊之欄中的文字 「Elevation上端」及「Elevation下端」，係分別表示參考螢幕RSC11在圖1中的上側之端部及下側之端部的位置，表示這些位置的垂直方向角度Elevation係被設成「17.5」及「-17.5」。以下，將參考螢幕RSC11在圖1中的上側之端部及下側之端部，稱為參考螢幕RSC11的上端及下端。
又，箭頭Q11所示部分係表示，物件OBJ1乃至物件OBJ6之各物件的物件位置資訊。具體而言，「OBJ1」乃至「OBJ6」之每一欄中係記載，物件OBJ1乃至物件OBJ6之每一者的位置。
例如文字「OBJ1」所被記載的物件OBJ1之欄中，文字「Azimuth」及「Elevation」係表示各個物件OBJ1的水平方向及垂直方向之位置，表示這些位置的水平方向角度Azimuth及垂直方向角度Elevation，係分別被設成「20.0」及「10.0」。
然後，箭頭Q12所示部分，係表示再生螢幕資訊。
在此例中，再生螢幕資訊係為表示再生螢幕PSC11之位置及大小，亦即再生螢幕PSC11之上下左右之端部之位置的資訊。
具體而言，再生螢幕資訊之欄中的文字「Azimuth左端」及「Azimuth右端」，係分別表示再生螢幕PSC11在圖1中的左側之端部及右側之端部的位置，表示這些位置的水平方向角度Azimuth係被設成 「14.5」及「-14.5」。以下，將再生螢幕PSC11在圖1中的左側之端部及右側之端部，稱為再生螢幕PSC11的左端及右端。
又言，再生螢幕資訊之欄中的文字「Elevation上端」及「Elevation下端」，係分別表示再生螢幕PSC11在圖1中的上側之端部及下側之端部的位置，表示這些位置的垂直方向角度Elevation係被設成「8.5」及「-8.5」。以下，將再生螢幕PSC11在圖1中的上側之端部及下側之端部，稱為再生螢幕PSC11的上端及下端。
從箭頭Q12所示的再生螢幕資訊，可知再生螢幕PSC11係為參考螢幕RSC11的大略一半之大小的螢幕(顯示畫面)。
一旦如此的參考螢幕資訊、物件位置資訊、及再生螢幕資訊被給予，則在一般的Screen-Related Object Element Remapping技術中，係進行下式(1)及式(2)之計算，而算出重新映射後的各物件之位置。
此外，於式(1)中，係表示物件之重新映 射前之水平方向位置，亦即物件位置資訊中所含之水平方向角度Azimuth；係表示物件之重新映射後的表示水平方向位置的水平方向角度Azimuth。
又，於式(1)中及係表示，參考螢幕RSC11之左端及右端的表示水平方向位置之水平方向角度Azimuth，及係表示，再生螢幕PSC11之左端及右端的表示水平方向位置之水平方向角度Azimuth。
於式(2)中，θ係表示物件之重新映射前之垂直方向位置，亦即物件位置資訊中所含之垂直方向角度Elevation；θ’係表示物件之重新映射後的表示垂直方向位置的垂直方向角度Elevation。
又，於式(2)中θtop nominal及θbottom nominal係表示，參考螢幕RSC11之上端及下端的表示垂直方向位置之垂直方向角度Elevation；θtop repro及θbottom repro係表示，再生螢幕PSC11之上端及下端的表示垂直方向位置之垂直方向角度Elevation。
藉由上記的式(1)，物件之重新映射後的表示水平方向位置之水平方向角度Azimuth係被算出，藉由式(2)，物件之重新映射後的表示垂直方向位置之垂直方向角度Elevation係被算出。
在式(1)及式(2)之計算所致之重新映射中，參考螢幕RSC11內的物件，係保持這些物件的位置關係不變，而剛好使這些物件會被收納於再生螢幕PSC11 內的方式，而被重新映射。又，參考螢幕RSC11外之物件，係隨應於參考螢幕RSC11與再生螢幕PSC11之端部的位置關係，而被重新映射。
例如在式(1)的計算中，如圖3所示般地，水平方向位置會被重新映射。此外，於圖3中，橫軸係表示物件之重新映射前的水平方向角度，縱軸係表示物件之重新映射後的水平方向角度。
在此例中，水平方向角度之位置係被重新映射至水平方向角度之位置。又，水平方向角度之位置係被重新映射至水平方向角度之位置，位於這些水平方向角度之位置、和水平方向角度之位置之間的位置，係被線性地重新映射。
水平方向角度=-180°之位置，係即使重新映射後仍為水平方向角度=-180°之位置不變，水平方向角度=-180°之位置、和水平方向角度之位置之間的位置係被線性地重新映射。
同樣地，水平方向角度=180°之位置，係即使重新映射後仍為水平方向角度=180°之位置不變，水平方向角度之位置與水平方向角度=180°之位置之間的位置係被線性地重新映射。
因此，若基於圖2中所示的參考螢幕資訊、物件位置資訊、及再生螢幕資訊來進行式(1)及式(2)的計算，則重新映射後的各物件之位置，係可獲得圖4所 示的位置。換言之，藉由重新映射，可獲得圖4所示的物件位置資訊。
在圖4中係圖示，物件OBJ1乃至物件OBJ6之重新映射後的物件位置資訊。具體而言，「OBJ1」乃至「OBJ6」之每一欄中係記載，物件OBJ1乃至物件OBJ6之每一者的位置。
例如文字「OBJ1」所被記載的物件OBJ1之欄中，文字「Azimuth」及「Elevation」係表示各個重新映射後的物件OBJ1的水平方向及垂直方向之位置，表示這些位置的水平方向角度Azimuth及垂直方向角度Elevation，係分別被設成「10.0」及「4.9」。
該物件OBJ1的水平方向角度Azimuth「10.0」及垂直方向角度Elevation「4.9」，係分別表示重新映射後的物件OBJ1的水平方向角度及垂直方向角度θ’。
由圖4所示的各物件之位置可知，即使在重新映射後，從使用者U11來看的物件OBJ1、物件OBJ3、及物件OBJ5，和物件OBJ2、物件OBJ4、及物件OBJ6，係於水平方向上被配置成左右對稱。亦即，可知係被適切地進行重新映射。
順便一提，在一般的Screen-Related Object Element Remapping技術中，是以參考螢幕RSC11係位於使用者U11之正面、亦即參考螢幕RSC11的中心位置係位於基準位置為前提。換言之，並未想定參考螢幕RSC11 的中心位置是位於基準位置以外之位置的情形。
因此，參考螢幕RSC11的中心位置是位於基準位置以外之位置的情況下，若和通常一樣進行重新映射，則參考螢幕RSC11外之物件的位置關係就會產生失真。
具體而言，例如圖5所示的參考螢幕資訊、物件位置資訊、及再生螢幕資訊被給予的情況下，一旦藉由式(1)及式(2)的計算而進行重新映射，則重新映射後的各物件的物件位置資訊係變成如圖6所示。此外，圖5及圖6，係對應於圖2及圖4，於圖5及圖6中和圖2或圖4相同的部分係適宜省略說明。
在圖5中，箭頭Q21所示的部分，係表示參考螢幕RSC11之參考螢幕資訊、及物件OBJ1乃至物件OBJ6的物件位置資訊。
在此例中，參考螢幕資訊所示之參考螢幕RSC11之位置，係變成了將圖2的例子中所示的位置，往水平方向角度Azimuth的正方向旋轉了30°的位置。亦即，在圖2的例子中，參考螢幕RSC11的中心位置係為基準位置，相對於此，在圖5所示的例中，參考螢幕RSC11的中心位置係變成了水平方向角度Azimuth=30°及垂直方向角度Elevation=0°之位置。
同樣地，在圖5所示的例子中，物件位置資訊所示之各物件之位置也是，變成了將圖2的例子所示的相同物件之位置，往水平方向角度Azimuth的正方向旋轉 了30°的位置。
因此，在圖2所示的例子和圖5所示的例子中，參考螢幕RSC11及各物件的相對性位置關係都變成相同。
又，箭頭Q22所示的部分係表示再生螢幕資訊，該再生螢幕資訊係和圖2所示的再生螢幕資訊相同。
藉由基於如此的參考螢幕資訊、物件位置資訊、及再生螢幕資訊進行重新映射，會獲得圖6所示的物件位置資訊，但從該物件位置資訊可知，物件的位置關係係變成非對稱。
此外，在圖6中「OBJ1」乃至「OBJ6」之每一欄中係記載，物件OBJ1乃至物件OBJ6之每一者的位置。
在重新映射前，相對於原點O與參考螢幕RSC11的中心位置所連結的線段，物件OBJ1、物件OBJ3、及物件OBJ5，和物件OBJ2、物件OBJ4、及物件OBJ6係在水平方向上被配置成左右對稱。
另一方面，在圖6所示的例子中，關於參考螢幕RSC11內所被配置的物件OBJ1和物件OBJ2，係從水平方向角度Azimuth可知，即使在重新映射後，這些物件係相對於原點O與再生螢幕PSC11的中心位置所連結的線段，在水平方向上是左右對稱。
可是，關於被配置在參考螢幕RSC11外的物件OBJ3和物件OBJ4、及物件OBJ5和物件OBJ6，可知 這些物件係相對於原點O與再生螢幕PSC11的中心位置所連結的線段，在水平方向上變成不是左右對稱。亦即，可知重新映射後的物件之位置並不是適切的位置，物件的位置關係發生失真。
此例中的重新映射前與重新映射後的各物件的位置關係若以模式圖來表示，則如圖7所示。此外，圖7中，和圖1對應的部份，係標示同一符號，並適宜地省略其說明。
在圖7中，箭頭A21及箭頭A22所示的部分，係表示參考螢幕RSC11和重新映射前的物件OBJ1乃至物件OBJ6。相對於此，箭頭A23及箭頭A24所示的部分，係表示再生螢幕PSC11和重新映射後的物件OBJ1乃至物件OBJ6。
於重新映射中，是期待從再生螢幕PSC11來看的各物件的位置關係，會變成與從參考螢幕RSC11來看的重新映射前的各物件的位置關係大略相同之位置關係的方式，而將各物件做重新映射。
在此例中，重新映射前的物件OBJ1乃至物件OBJ6的相對性位置關係，係和圖1所示的例子相同，再生螢幕PSC11之位置也是位於和圖1所示的例子相同的位置。因此，重新映射後的物件OBJ1乃至物件OBJ6之位置，係被期待是被重新配置成與圖1所示的這些物件相同的位置。
可是，由圖7可知，關於在重新映射前位於 參考螢幕RSC11外的物件OBJ3乃至物件OBJ6，係在重新映射前與重新映射後，相對性的位置關係會產生很大的變化。尤其是，關於物件OBJ5和物件OBJ6，係物件位置會有很大的偏移。
因此，若基於重新映射所得到的物件位置資訊，來進行各物件之音訊訊號的渲染，則關於再生螢幕PSC11外之物件，係會導致音像被定位在與聲音再生時原本物件應處位置不同的位置上。
於是，在本技術中，是藉由將物件位置資訊和參考螢幕資訊做適切地補正，使得即使參考螢幕RSC11的中心位置是與基準位置不同的情況下，仍可進行適切的重新映射。
〈資訊處理裝置之構成例〉
圖8係適用了本技術之資訊處理裝置的一實施形態之構成例的圖。
圖8所示的資訊處理裝置11係具有：偏置角算出部21、位置資訊補正部22、及物件重新映射部23。
對該資訊處理裝置11係從外部供給：參考螢幕資訊、各物件的物件位置資訊、及再生螢幕資訊。
此處係假設，例如參考螢幕資訊，係由：表示參考螢幕RSC11之左端及右端之各位置的水平方向角度之每一者、和表示參考螢幕RSC11之上端及下端之各位置的垂直方向角度之每一者所成。參考螢幕資訊係為， 以位於使用者U11的正面方向的基準位置為基準的表示參考螢幕RSC11之位置及大小的資訊。
同樣地，再生螢幕資訊，係由：表示再生螢幕PSC11之左端及右端之各位置的水平方向角度之每一者、和表示再生螢幕PSC11之上端及下端之各位置的垂直方向角度之每一者所成。此再生螢幕資訊也是，以基準位置為基準的表示再生螢幕PSC11之位置及大小的資訊。
又，假設各物件的物件位置資訊，係由表示物件之位置的水平方向角度和垂直方向角度所成。物件位置資訊，係以位於使用者U11的正面方向的基準位置為基準的表示物件之位置的資訊。
偏置角算出部21，係基於所被供給的參考螢幕資訊，將位於再生空間的使用者U11的正面方向，亦即從原點O朝向基準位置的方向、和從原點O朝向參考螢幕RSC11之中心位置的方向所夾的水平方向之角度，以偏置角方式加以算出，供給至位置資訊補正部22。
參考螢幕RSC11的偏置角，係為表示水平方向角度Azimuth方向上的，從基準位置起算的參考螢幕RSC11之中心位置的偏移量的水平方向角度Azimuth。亦即，偏置角，係為表示，從位於使用者U11之正面方向的基準位置起算的參考螢幕RSC11之偏置量的資訊。此外，這裡作為表示偏置量之資訊的例子，是說明了水平方向角度的偏置角，但表示偏置量的資訊，係亦可為其他的 任何資訊。
位置資訊補正部22，係基於從偏置角算出部21所供給的偏置角，而將從外部供給的參考螢幕資訊及物件位置資訊予以補正，將其結果所得的補正參考螢幕資訊及補正物件位置資訊，供給至物件重新映射部23。
物件重新映射部23，係基於從外部所供給的再生螢幕資訊、和從位置資訊補正部22所供給的補正參考螢幕資訊及補正物件位置資訊，進行物件位置資訊、亦即物件位置之重新映射，將其結果所得的物件位置資訊予以輸出。
〈關於各部之處理〉
此處，關於構成資訊處理裝置11的各部之處理，更具體地加以說明。
首先，偏置角算出部21，係基於所被供給之參考螢幕資訊，來計算例如下式(3)，以算出偏置角。
此外，於式(3)中，及係表示，參考螢幕RSC11之左端之位置及右端之位置的水平方向角度Azimuth。這些及 係為參考螢幕資訊中所含之資訊。
又，在位置資訊補正部22中，係基於偏置角，以使得參考螢幕RSC11的中心位置會變成基準位置的方式，將參考螢幕資訊予以補正。亦即，藉由下式(4)及式(5)的計算，補正參考螢幕資訊係被算出。
此外，於式(4)中，係表示參考螢幕RSC11之左端之位置的水平方向角度Azimuth，係表示水平方向角度之偏置角所致之補正後的水平方向角度Azimuth。亦即，係表示補正後之參考螢幕RSC11之左端之位置的水平方向角度Azimuth。
又，於式(5)中，係表示參考螢幕RSC11之右端之位置的水平方向角度Azimuth，係表示，水平方向角度之偏置角所致之補正後的水平方向角度Azimuth。亦即，係表示補正後之參考螢幕RSC11之右端之位置的水平方向角度Azimuth。
因此，藉由式(4)的計算，參考螢幕資訊中所含的水平方向角度係被補正，藉由式(5)的計算，參考螢幕資訊中所含的水平方向角度係被補正。
在參考螢幕資訊的補正時，只有這些水平方向角度及水平方向角度會被補正，表示參考螢幕RSC11之上端及下端之各位置的垂直方向角度之補正係不會進行。
如此的算出補正參考螢幕資訊的處理，係為使參考螢幕RSC11旋轉了偏置角的量，亦即參考螢幕RSC11的中心位置相對於基準位置之偏移量的處理。藉此，參考螢幕資訊係被補正，以使得參考螢幕RSC11的中心位置會變成基準位置。
再者，在位置資訊補正部22中，係基於偏置角，而配合於參考螢幕RSC11之位置的補正(移動)，亦即參考螢幕資訊之補正，而以使得各物件之位置也被補正(移動)的方式，來補正物件位置資訊。亦即，藉由下式(6)的計算，補正物件位置資訊係被算出。
此外，於式(6)中，係表示物件位置資訊中所含之物件的水平方向角度Azimuth，係表示水 平方向角度之偏置角所致之補正後的水平方向角度Azimuth。亦即，係表示補正後的物件位置的水平方向角度Azimuth。
因此，藉由式(6)的計算，物件位置資訊中所含的水平方向角度就會被補正。在物件位置資訊的補正時，係只有水平方向角度會被補正，物件的表示垂直方向位置之垂直方向角度之補正係不會進行。
如此的算出補正物件位置資訊的處理，係為使物件之位置旋轉偏置角的量的處理。
藉此，會配合於參考螢幕RSC11之位置而將各物件之位置予以補正。更詳細來說，配合於參考螢幕RSC11的中心位置之補正，各物件之位置也被補正。因此，在參考螢幕資訊及物件位置資訊之補正的前後，對參考螢幕RSC11的各物件的相對性位置係無變化。
如以上所述，一旦獲得補正參考螢幕資訊及補正物件位置資訊，則於物件重新映射部23中會進行重新映射。亦即，配合於再生螢幕PSC11之位置，各物件之位置會被重新映射。
此時點上表示參考螢幕RSC11與各物件的位置關係的補正參考螢幕資訊和補正物件位置資訊，係為表示以基準位置為參考螢幕RSC11的中心位置時的位置關係的資訊。
因此，若使用補正參考螢幕資訊及補正物件位置資訊，則即使藉由和上述一般的Screen-Related Object Element Remapping技術相同的計算而進行物件位置之重新映射，物件位置仍不會失真。亦即，可實現適切的重新映射。
具體而言，物件重新映射部23，係藉由基於補正參考螢幕資訊、再生螢幕資訊、及補正物件位置資訊來計算下式(7)，以算出重新映射後的物件位置資訊。
此外，於式(7)中，係表示物件之重新映射後的表示水平方向位置的水平方向角度Azimuth，係表示物件之重新映射前的水平方向位置，亦即補正物件位置資訊中所含的水平方向角度Azimuth。
又，於式(7)中及 係表示，已被補正之參考螢幕RSC11之左端及右端之表示水平方向位置的水平方向角度Azimuth。亦即，及係表示補正參考螢幕資訊中所含之，參考螢幕RSC11之左端及右端的水平方向角度Azimuth。
甚至，於式(7)中及係表示，再生螢幕PSC11之左端及右端之表示水平方向位置的水平方向角度Azimuth。
又，更詳細來說，在求出已被重新映射之物件的物件位置資訊時，物件重新映射部23，係也基於補正參考螢幕資訊、再生螢幕資訊、及補正物件位置資訊來進行上述式(2)的計算。藉此，重新映射後的物件位置資訊中所含之，已被重新映射之物件的表示垂直方向位置之垂直方向角度θ’，會被獲得。
藉由進行如以上的處理，在資訊處理裝置11係可進行適切的重新映射。
具體而言，例如圖5所示的參考螢幕資訊、物件位置資訊、及再生螢幕資訊被給予的情況下，一旦以資訊處理裝置11進行重新映射，則作為重新映射後的物件位置資訊，會獲得圖9所示的物件位置資訊。
此外，在圖9中，「OBJ1」乃至「OBJ6」之每一者的欄係表示，物件OBJ1乃至物件OBJ6之每一者的已被重新映射之物件位置資訊，亦即各物件之重新映射後的位置的水平方向角度Azimuth及垂直方向角度 Elevation。
例如文字「OBJ1」所被記載的物件OBJ1之欄中，文字「Azimuth」及「Elevation」係表示各個重新映射後的物件OBJ1的水平方向及垂直方向之位置，表示這些位置的水平方向角度Azimuth及垂直方向角度Elevation，係分別被設成「10.0」及「4.9」。這些水平方向角度Azimuth「10.0」及垂直方向角度Elevation「4.9」，係為藉由式(7)而被算出的水平方向角度、及藉由式(2)而被算出的垂直方向角度θ’。
圖9所示的例子中，所有物件OBJ1乃至物件OBJ6的相對性位置關係，在重新映射前與重新映射後是大略相同。
亦即，關於參考螢幕RSC11內所被配置的物件OBJ1和物件OBJ2，可知即使在重新映射後，這些物件係相對於原點O與再生螢幕PSC11的中心位置所連結的線段，在水平方向上是左右對稱。
又，關於被配置在參考螢幕RSC11外的物件OBJ3和物件OBJ4、及物件OBJ5和物件OBJ6也是，可知這些物件係相對於原點O與再生螢幕PSC11的中心位置所連結的線段，在水平方向上係為左右對稱。亦即，可知重新映射後的所有物件之位置都是在適切的位置。
此例中的重新映射前與重新映射後的各物件的位置關係若以模式圖來表示，則如圖10所示。此外，圖10中，和圖1對應的部份，係標示同一符號，並適宜 地省略其說明。
在圖10中，箭頭A31及箭頭A32所示的部分，係表示參考螢幕RSC11和重新映射前的物件OBJ1乃至物件OBJ6。更詳細來說，參考螢幕RSC11係被配置在補正前之參考螢幕資訊所示之位置，物件OBJ1乃至物件OBJ6，係被配置在補正前的物件位置資訊所示之位置。
相對於此，箭頭A33及箭頭A34所示的部分，係表示再生螢幕PSC11和重新映射後的物件OBJ1乃至物件OBJ6。
在此例中，箭頭A31及箭頭A32所示的參考螢幕RSC11和重新映射前的物件OBJ1乃至物件OBJ6之位置，係為和圖7所示的例子相同的配置。
又，在箭頭A33及箭頭A34所示的部分中，可知重新映射後的物件OBJ1、物件OBJ3、及物件OBJ5，和物件OBJ2、物件OBJ4、及物件OBJ6，係相對於原點O與再生螢幕PSC11的中心位置所連結的線段，在水平方向上係為左右對稱。亦即，在重新映射前後，從螢幕的中心位置來看，各物件的位置關係係大略相同，得知有被適切地進行重新映射。
〈重新映射處理之說明〉
接著，參照圖11的流程圖，說明被資訊處理裝置11所進行的重新映射處理。
於步驟S11中，偏置角算出部21係基於所被 供給之參考螢幕資訊而算出偏置角，供給至位置資訊補正部22。
具體而言，偏置角算出部21係藉由計算式(3)，而算出偏置角。
於步驟S12中，位置資訊補正部22，係基於從偏置角算出部21所被供給之偏置角，而將從外部所供給的參考螢幕資訊及物件位置資訊予以補正。
例如位置資訊補正部22，係藉由根據偏置角和參考螢幕資訊而進行式(4)及式(5)的計算以將參考螢幕資訊予以補正，將其結果所得到的補正參考螢幕資訊，供給至物件重新映射部23。
又，位置資訊補正部22，係根據偏置角和物件位置資訊而進行式(6)的計算以將物件位置資訊予以補正，將其結果所得之補正物件位置資訊，供給至物件重新映射部23。
於步驟S13中，物件重新映射部23，係基於從外部所供給的再生螢幕資訊、和從位置資訊補正部22所供給的補正參考螢幕資訊及補正物件位置資訊，來進行物件位置之重新映射。
例如物件重新映射部23，係基於補正參考螢幕資訊、再生螢幕資訊、及補正物件位置資訊而計算式(2)及式(7)，以算出表示已被重新映射之物件之位置的物件位置資訊。然後，物件重新映射部23，係將如此所得到的物件位置資訊輸出至後段，重新映射處理係結 束。
如以上，資訊處理裝置11係將參考螢幕資訊及物件位置資訊進行補正然後才進行重新映射。藉由如此設計，就可不論參考螢幕RSC11之配置位置如何，都可進行適切的重新映射。
〈第1實施形態的變形例1〉 〈關於重新映射〉
順便一提，像是ISO/IEC 23008-3“3D Audio”規格中也有規定，參考螢幕RSC11之左端的水平方向角度或右端的水平方向角度、物件的水平方向角度之各角度之值域，是-180°以上、180°以下。
在如此情況下，在補正參考螢幕資訊及補正物件位置資訊的算出時，必須要以使得水平方向角度會變成預先訂定的值域內之值，亦即-180°以上、180°以下之值的方式，進行適宜補正。
又，在已被規定為，水平方向角度或水平方向角度、水平方向角度之各角度之值域為-180°以上、180°以下的情況下，參考螢幕RSC11是被配置在上述的使用者U11的背面方向，亦即從使用者U11來看的x軸的負方向時，有時候會變成水平方向角度<水平方向角度。在如此情況下，在偏置角的算出時，必須要以適切的補正值而適 宜地進行補正。
此外，以下係在沒有特別聲明的情況下，假設當參考螢幕RSC11位於使用者U11的背面方向時，係為水平方向角度<水平方向角度狀態。
在已被預先決定會變成水平方向角度或水平方向角度、水平方向角度之各角度之值域是-180°以上、180°以下之範圍的值域的情況下，則只要如下般地進行重新映射即可。
此外，以下，具體地以圖12所示的參考螢幕資訊、物件位置資訊、及再生螢幕資訊被給予的情況下為例而繼續說明。又，圖12係對應於圖2，於圖12中和圖2相同之部分係適宜省略說明。
在圖12中，箭頭Q31所示的部分，係表示參考螢幕RSC11之參考螢幕資訊、及物件OBJ1乃至物件OBJ6的物件位置資訊。
在此例中，參考螢幕資訊所示之參考螢幕RSC11之位置，係變成了將圖2的例子中所示的位置，往水平方向角度Azimuth的方向旋轉了180°的位置。亦即，在圖2的例子中，參考螢幕RSC11的中心位置係為基準位置，相對於此，在圖12所示的例中，參考螢幕RSC11的中心位置係變成了水平方向角度Azimuth=180°及垂直方向角度Elevation=0°之位置。
同樣地，在圖12所示的例子中，物件位置資 訊所示之各物件之位置也是，變成了將圖2的例子所示的相同物件之位置，往水平方向角度Azimuth的方向旋轉了180°的位置。
因此，在圖2所示的例子和圖12所示的例子中，參考螢幕RSC11及各物件的相對性位置關係都變成相同。
又，箭頭Q32所示的部分係表示再生螢幕資訊，該再生螢幕資訊係和圖2所示的再生螢幕資訊相同。
在如此的參考螢幕資訊、物件位置資訊、及再生螢幕資訊可被給予的情況下，在偏置角算出部21中係亦可取代上述的式(3)改以下式(8)來算出偏置角。
此外，於式(8)中，及係表示，參考螢幕RSC11之左端之位置及右端之位置的水平方向角度Azimuth。
在式(8)中，水平方向角度<水平方向角度的情況下，亦即參考螢幕RSC11是位於背面方向的情況下，則對式(3)所求出的角度加算180°作為補正值，作為最終的偏置角。
這是因為，參考螢幕RSC11是位於背面方向的情況下，若以式(3)來算出偏置角，則與參考螢幕RSC11是位於正面方向時相同的角度會被當作偏置角而獲得，因此必須要加算180°來作為補正值以將偏置角正確地補正。
又，在式(8)中，並非水平方向角度<水平方向角度的情況下，亦即參考螢幕RSC11不是位於背面方向時，則和上述的式(3)同樣地算出偏置角。
一旦以式(8)算出偏置角，則在位置資訊補正部22中，係取代式(4)及式(5)，改用下式(9)及式(10)來算出補正參考螢幕資訊即可。同樣地，於位置資訊補正部22中，係取代式(6)改用式(11)來算出補正物件位置資訊即可。
此外，於式(9)乃至式(11)中，係表示偏置角。又，於式(9)中，係表示參考螢幕RSC11之左端之位置的水平方向角度Azimuth，係表示水平方向角度之偏置角所致之補正後的水平方向角度Azimuth。
於式(10)中，係表示參考螢幕RSC11之右端之位置的水平方向角度Azimuth，係表示，水平方向角度之偏置角所致之補正後的水平方向角度Azimuth。
再者，於式(11)中，係表示物件位置資訊中所含之物件的水平方向位置的水平方向角度Azimuth，係表示水平方向角度之偏置角所致之補正後的水平方向角度Azimuth。
例如在式(9)中，<- 180°的情況下，亦即-<-180°的情況下，對以上述的式(4)所求出的水平方向角度加算360°，作為最終的水平方向角度。
在如此的狀況下，若以式(4)來求出水平方向角度，則原本應該是-180°以上108°以下的水平方向角度之值會變成未滿-180°。於是，在式(9)的計算中，<-180°的情況下，則對以式(4)所求出的水平方向角度加算360°來作為補正值而將水平方向角度正確地補正。
又，在式(9)中，-180°≦≦+180°的情況下，亦即-180°≦-≦180°的情況下，係進行和式(4)相同之計算。然後在式(9)中，+180°<的情況下，亦即->180°的情況下，係由於水平方向角度之值會變成大於180°，因此和<-180°的情況同樣地，加算-360°來作為補正值而將水平方向角度正確地補正。
再者，不只在式(9)就連在式(10)或式(11)中也是和式(9)的情形同樣地，因應需要而進行補正。
如此，在參考螢幕資訊或物件位置資訊的補正時，隨著-等、各資訊之偏置角 所致之補正後的水平方向角度，亦即因應需要而加算360°或-360°來作為補正值，則參考螢幕RSC11或物件之位置的補正時就可進行調整補正值的處理。
如以上一旦算出補正參考螢幕資訊及補正物件位置資訊，則在物件重新映射部23中，係藉由式(2)及式(7)，而算出重新映射後的物件位置資訊。
例如圖12所示的參考螢幕資訊、物件位置資訊、及再生螢幕資訊被給予的情況下，一旦進行如以上說明的重新映射，則作為重新映射後的物件位置資訊，會獲得圖13所示的物件位置資訊。
此外，在圖13中，「OBJ1」乃至「OBJ6」之每一者的欄係表示，物件OBJ1乃至物件OBJ6之每一者的已被重新映射之物件位置資訊，亦即各物件之重新映射後的位置的水平方向角度Azimuth及垂直方向角度Elevation。
例如文字「OBJ1」所被記載的物件OBJ1之欄中，文字「Azimuth」及「Elevation」係表示各個重新映射後的物件OBJ1的水平方向及垂直方向之位置，表示這些位置的水平方向角度Azimuth及垂直方向角度Elevation，係分別被設成「10.0」及「4.9」。這些水平方向角度Azimuth「10.0」及垂直方向角度Elevation「4.9」，係為藉由式(7)而被算出的水平方向角度、及藉由式(2)而被算出的垂直方向角度θ’。
圖13所示的例子中，所有物件OBJ1乃至物 件OBJ6的相對性位置關係，在重新映射前與重新映射後是大略相同。
亦即，可以得知，物件OBJ1和物件OBJ2、物件OBJ3和物件OBJ4、及物件OBJ5和物件OBJ6，係即使重新映射後，這些物件係相對於原點O與再生螢幕PSC11的中心位置所連結的線段，在水平方向上係為左右對稱。
此例中的重新映射前與重新映射後的各物件的位置關係若以模式圖來表示，則如圖14所示。此外，圖14中，和圖1對應的部份，係標示同一符號，並適宜地省略其說明。
在圖14中，箭頭A41及箭頭A42所示的部分，係表示參考螢幕RSC11和重新映射前的物件OBJ1乃至物件OBJ6。更詳細來說，參考螢幕RSC11係被配置在補正前之參考螢幕資訊所示之位置，物件OBJ1乃至物件OBJ6，係被配置在補正前的物件位置資訊所示之位置。
相對於此，箭頭A43及箭頭A44所示的部分，係表示再生螢幕PSC11和重新映射後的物件OBJ1乃至物件OBJ6。
在此例中，箭頭A41及箭頭A42所示的參考螢幕RSC11之位置，係位於使用者U11的背面方向。
又，在箭頭A43及箭頭A44所示的部分中，可知重新映射後的物件OBJ1、物件OBJ3、及物件OBJ5，和物件OBJ2、物件OBJ4、及物件OBJ6，係相對 於原點O與再生螢幕PSC11的中心位置所連結的線段，在水平方向上係為左右對稱。亦即，在重新映射前後，從螢幕的中心位置來看，各物件的位置關係係大略相同，得知有被適切地進行重新映射。
如以上，水平方向角度或水平方向角度、水平方向角度之各角度之值域是被規定成-180°以上180°以下的情況下，則在參照圖11所說明的重新映射處理之步驟S11中，偏置角算出部21係藉由計算式(8)而算出偏置角。
又，在步驟S12中，位置資訊補正部22，係藉由進行式(9)及式(10)的計算而將參考螢幕資訊予以補正，藉由進行式(11)的計算而將物件位置資訊予以補正。然後在步驟S13中，物件重新映射部23，係藉由計算式(2)及式(7)，算出表示已被重新映射之物件之位置的物件位置資訊。
若如此依據資訊處理裝置11，則即使水平方向角度或水平方向角度、水平方向角度之各角度之值域是被規定成-180°以上、180°以下的情況下，仍可進行適切的重新映射。
〈第1實施形態的變形例2〉 〈關於重新映射〉
此外，以上是作為具體的例子，說明了再生螢幕PSC11的中心位置是位於基準位置的例子，但再生螢幕 PSC11的中心位置不是位於基準位置的情況下，仍可藉由加入如以下般地使用再生螢幕之偏置角的補正，而進行適切的重新映射。
此外，以下，具體地以圖15所示的參考螢幕資訊、物件位置資訊、及再生螢幕資訊被給予的情況下為例而繼續說明。又，圖15係對應於圖5，於圖15中和圖5相同之部分係適宜省略說明。
在圖15中，箭頭Q41所示的部分，係表示參考螢幕RSC11之參考螢幕資訊、及物件OBJ1乃至物件OBJ6的物件位置資訊，該參考螢幕資訊、及物件OBJ1乃至物件OBJ6的物件位置資訊，係和圖5所示的參考螢幕資訊、及物件OBJ1乃至物件OBJ6的物件位置資訊相同。
又，箭頭Q42所示部分，係表示再生螢幕資訊。
在此例中，再生螢幕資訊所示之再生螢幕PSC11之位置，係變成了將圖2的例子中所示的位置，往水平方向角度Azimuth的方向旋轉了180°的位置。亦即，在圖2的例子中，再生螢幕PSC11的中心位置係為基準位置，相對於此，在圖15所示的例中，再生螢幕PSC11的中心位置係變成了水平方向角度Azimuth=180°及垂直方向角度Elevation=0°之位置。
在如此的參考螢幕資訊、物件位置資訊、及再生螢幕資訊可被給予的情況下，於偏置角算出部21中 係連同偏置角，藉由計算例如下式(12)，而一併算出再生螢幕偏置角。
此外，於式(12)中，及係表示再生螢幕PSC11之左端之位置及右端之位置的水平方向角度Azimuth。這些和係為再生螢幕資訊中所含之資訊。
又，於位置資訊補正部22中，除了上述的參考螢幕資訊之補正和物件位置資訊之補正，還基於再生螢幕偏置角，以使得再生螢幕PSC11的中心位置會變成基準位置的方式，將再生螢幕資訊予以補正。亦即，藉由下式(13)及式(14)的計算，補正再生螢幕資訊係被算出。
此外，於式(13)中，係表示再生 螢幕PSC11之左端之位置的水平方向角度Azimuth，係表示水平方向角度之再生螢幕偏置角所致之補正後的水平方向角度Azimuth。亦即，係表示補正後的再生螢幕PSC11之左端之位置的水平方向角度Azimuth。
又，於式(14)中，係表示再生螢幕PSC11之右端之位置的水平方向角度Azimuth，係表示水平方向角度之再生螢幕偏置角所致之補正後的水平方向角度Azimuth。亦即，係表示補正後的再生螢幕PSC11之右端之位置的水平方向角度Azimuth。
因此，藉由式(13)的計算，再生螢幕資訊中所含的水平方向角度係被補正，藉由式(14)的計算，再生螢幕資訊中所含的水平方向角度係被補正。
如此的補正再生螢幕資訊算出處理，係為使再生螢幕PSC11旋轉了再生螢幕偏置角的量，亦即再生螢幕PSC11的中心位置相對於基準位置的偏移量的處理。藉此，再生螢幕資訊係被補正，以使得再生螢幕PSC11的中心位置會變成基準位置。
此外，以下係將位置已被補正以使得中心位置變成基準位置的再生螢幕PSC11，特別稱為補正再生螢幕PSC11’。
如以上，一旦獲得補正參考螢幕資訊及補正 物件位置資訊、含有補正再生螢幕資訊，則於物件重新映射部23中會進行重新映射。亦即，配合於補正再生螢幕PSC11’之位置，各物件之位置會被重新映射。
具體而言，物件重新映射部23，係藉由基於補正參考螢幕資訊、補正再生螢幕資訊、及補正物件位置資訊來計算下式(15)，以算出重新映射後的物件位置資訊。
此外，於式(15)中，係表示物件之重新映射後的表示水平方向位置的水平方向角度Azimuth，係表示物件之重新映射前的水平方向位置，亦即補正物件位置資訊中所含的水平方向角度Azimuth。
又，於式(15)中，及係表示，已被補正之參考螢幕RSC11之左端及右端之表示水平方向位置的水平方向角度Azimuth。亦即，及係表示，補正參考螢幕資訊中所含之，參考螢幕RSC11之左端及右端的水平方向角度Azimuth。
然後，於式(15)中，及係表示，補正再生螢幕PSC11’之左端及右端之表示水平方向位置的水平方向角度Azimuth。
此處所得到的重新映射後的物件位置資訊，係為針對補正再生螢幕PSC11’的資訊。亦即，是將再生螢幕PSC11的中心位置設成基準位置時的物件位置資訊。可是，實際上，再生螢幕PSC11係位於再生螢幕資訊中所含之及所示的位置，且旋轉了再生螢幕偏置角。於是，進行下式(16)的計算，將重新映射後的物件位置資訊，被補正成針對實際之再生螢幕PSC11。
此外，於式(16)中，係表示對補正再生螢幕PSC11’所被算出的物件之重新映射後的物件位置資訊中所含的水平方向角度Azimuth，係表示水平方向角度之再生螢幕偏置角所致之補正後 的水平方向角度Azimuth。亦即，係表示補正後的重新映射後的物件位置資訊中所含的水平方向角度Azimuth。
藉此，重新映射後的物件位置就會配合於再生螢幕PSC11之位置而被補正。
例如圖15所示的參考螢幕資訊、物件位置資訊、及再生螢幕資訊被給予的情況下，一旦進行如以上說明的重新映射，則作為重新映射後的物件位置資訊，會獲得圖16所示的物件位置資訊。
此外，在圖16中，「OBJ1」乃至「OBJ6」之每一者的欄係表示，物件OBJ1乃至物件OBJ6之每一者的已被重新映射之物件位置資訊，亦即各物件之重新映射後的位置的水平方向角度Azimuth及垂直方向角度Elevation。
例如文字「OBJ1」所被記載的物件OBJ1之欄中，文字「Azimuth」及「Elevation」係表示各個重新映射後的物件OBJ1的水平方向及垂直方向之位置，表示這些位置的水平方向角度Azimuth及垂直方向角度Elevation，係分別被設成「-170.0」及「4.9」。這些水平方向角度Azimuth「-170.0」及垂直方向角度Elevation「4.9」，係為藉由式(16)而被算出的水平方向角度、及藉由式(2)而被算出的垂直方向角度θ’。
圖16所示的例子中，所有物件OBJ1乃至物件OBJ6的相對性位置關係，在重新映射前與重新映射後 是大略相同。
亦即，可以得知，物件OBJ1和物件OBJ2、物件OBJ3和物件OBJ4、及物件OBJ5和物件OBJ6，係即使重新映射後，這些物件係相對於原點O與再生螢幕PSC11的中心位置所連結的線段，在水平方向上係為左右對稱。
此例中的重新映射前與重新映射後的各物件的位置關係若以模式圖來表示，則如圖17所示。此外，圖17中，和圖1對應的部份，係標示同一符號，並適宜地省略其說明。
在圖17中，箭頭A51及箭頭A52所示的部分，係表示參考螢幕RSC11和重新映射前的物件OBJ1乃至物件OBJ6。更詳細來說，參考螢幕RSC11係被配置在補正前之參考螢幕資訊所示之位置，物件OBJ1乃至物件OBJ6，係被配置在補正前的物件位置資訊所示之位置。
相對於此，箭頭A53及箭頭A54所示的部分，係表示再生螢幕PSC11和重新映射後的物件OBJ1乃至物件OBJ6。
在此例中，箭頭A51及箭頭A52所示的參考螢幕RSC11和重新映射前的物件OBJ1乃至物件OBJ6之位置，係為和圖7所示的例子相同的配置。
又，在箭頭A53及箭頭A54所示的部分中，可知重新映射後的物件OBJ1、物件OBJ3、及物件OBJ5，和物件OBJ2、物件OBJ4、及物件OBJ6，係相對 於原點O與再生螢幕PSC11的中心位置所連結的線段，在水平方向上係為左右對稱。亦即，在重新映射前後，從螢幕的中心位置來看，各物件的位置關係係大略相同，得知有被適切地進行重新映射。
〈資訊處理裝置之構成例〉
進行如以上之處理時，資訊處理裝置11，係為例如圖18所示的構成。此外，圖18中，和圖8對應的部份，係標示同一符號，並適宜地省略其說明。
圖18所示的資訊處理裝置11係具有：偏置角算出部21、位置資訊補正部22、及物件重新映射部23。
在此例中，再生螢幕資訊係被供給至偏置角算出部21及位置資訊補正部22。
偏置角算出部21，係算出偏置角以外，還基於所被供給之再生螢幕資訊，將位於再生空間中的使用者U11的正面方向，亦即從原點O朝向基準位置的方向、和從原點O朝向再生螢幕PSC11的中心位置的方向所夾的水平方向之角度，當作再生螢幕偏置角而予以算出。從偏置角算出部21往位置資訊補正部22係供給這些偏置角及再生螢幕偏置角。
再生螢幕偏置角，係為表示水平方向角度Azimuth方向上的，從基準位置起算之再生螢 幕PSC11的中心位置之偏移量的水平方向角度Azimuth。亦即，再生螢幕偏置角係為表示，從位於使用者U11的正面方向的基準位置起算之再生螢幕PSC11之偏置量的資訊。此外，表示再生螢幕PSC11之偏置量的資訊，係不限於再生螢幕偏置角，亦可為任意資訊。
位置資訊補正部22，係藉由補正而求出補正參考螢幕資訊及補正物件位置資訊以外，還求出補正再生螢幕資訊，將補正參考螢幕資訊、補正物件位置資訊、補正再生螢幕資訊、及再生螢幕偏置角，供給至物件重新映射部23。
亦即，位置資訊補正部22，係基於從偏置角算出部21所被供給的再生螢幕偏置角，而將從外部所供給的再生螢幕資訊予以補正，獲得補正再生螢幕資訊。
物件重新映射部23，係基於從位置資訊補正部22所供給的補正參考螢幕資訊、補正物件位置資訊、補正再生螢幕資訊、及再生螢幕偏置角，進行物件位置資訊，亦即物件位置之重新映射，將其結果所得之物件位置資訊予以輸出。
〈重新映射處理之說明〉
接著，參照圖19的流程圖，說明被圖18所示的資訊處理裝置11所進行的重新映射處理。
於步驟S41中，偏置角算出部21，係基於所被供給之參考螢幕資訊及再生螢幕資訊而算出偏置角及再生螢幕偏置角，供給至位置資訊補正部22。
具體而言，偏置角算出部21係藉由計算式(3)，而算出偏置角。又，偏置角算出部21係藉由計算式(12)，而算出再生螢幕偏置角。
於步驟S42中，位置資訊補正部22，係基於從偏置角算出部21所被供給之偏置角及再生螢幕偏置角，而將從外部所供給的參考螢幕資訊、物件位置資訊、及再生螢幕資訊予以補正。
例如位置資訊補正部22，係進行和圖11之步驟S12之處理相同之處理以將參考螢幕資訊及物件位置資訊予以補正，獲得補正參考螢幕資訊及補正物件位置資訊。
又，例如位置資訊補正部22，係藉由基於再生螢幕偏置角而進行式(13)及式(14)的計算以將再生螢幕資訊予以補正，獲得補正再生螢幕資訊。
位置資訊補正部22，係將如此所得的補正參考螢幕資訊、補正物件位置資訊、及補正再生螢幕資訊、和再生螢幕偏置角，供給至物件重新映射部23。
於步驟S43中，物件重新映射部23，係基於從位置資訊補正部22所供給的補正參考螢幕資訊、補正物件位置資訊、補正再生螢幕資訊、及再生螢幕偏置角，來進行物件位置之重新映射。
例如物件重新映射部23，係藉由計算式(2)、式(15)、及式(16)，而算出表示已被重新映射之物件之位置的物件位置資訊。然後，物件重新映射部23，係將如此所得到的物件位置資訊輸出至後段，重新映射處理係結束。
如以上所述，資訊處理裝置11係將參考螢幕資訊、物件位置資訊、及再生螢幕資訊予以補正然後進行重新映射之後，以再生螢幕資訊之補正量而將物件位置資訊予以補正。藉由如此設計，就可不論參考螢幕RSC11或再生螢幕PSC11之配置位置如何，都可進行適切的重新映射。
此外，在第1實施形態和第1實施形態的變形例1中是說明了，針對水平方向角度而算出偏置角，基於該偏置角而將參考螢幕資訊及物件位置資訊之各資訊的水平方向角度予以補正的例子。可是，亦可不只有水平方向角度，就連垂直方向角度也進行同樣的處理，將參考螢幕資訊及物件位置資訊之各資訊之垂直方向角度予以補正。
在如此情況下，係和水平方向角度同樣地針對垂直方向角度也算出偏置角，基於所被算出的偏置角， 將參考螢幕資訊及物件位置資訊之垂直方向角度予以補正之後，進行重新映射。
又，於第1實施形態的變形例2中也可同樣地，將參考螢幕資訊或物件位置資訊、再生螢幕資訊之各資訊之垂直方向角度予以補正。甚至亦可將第1實施形態的變形例2和第1實施形態的變形例1加以組合。
再者，以上是說明了，配合於參考螢幕RSC11而將參考螢幕資訊及物件位置資訊予以補正之後，使用該補正所得之補正參考螢幕資訊及補正物件位置資訊來算出表示重新映射後的物件之位置的物件位置資訊。可是，亦可配合參考螢幕RSC11而只將物件位置資訊，亦即物件之位置，予以補正。
在如此情況下，在偏置角被算出後，基於該偏置角而算出物件位置資訊，當作補正物件位置資訊。然後，其後，基於補正物件位置資訊、和參考螢幕資訊、和再生螢幕資訊，來型物件位置之重新映射。亦即，表示重新映射後的物件之位置的物件位置資訊係被算出。
順便一提，上述一連串處理，係可藉由硬體來執行，也可藉由軟體來執行。在以軟體來執行一連串之處理時，構成該軟體的程式，係可安裝至電腦。此處，電腦係包含：被組裝在專用硬體中的電腦、或藉由安裝各種程式而可執行各種機能的例如通用之個人電腦等。
圖20係以程式來執行上述一連串處理的電腦的硬體之構成例的區塊圖。
於電腦中，CPU(Central Processing Unit)501、ROM(Read Only Memory)502、RAM(Random Access Memory)503，係藉由匯流排504而被彼此連接。
在匯流排504上係還連接有輸出入介面505。輸出入介面505上係連接有：輸入部506、輸出部507、記錄部508、通訊部509、及驅動機510。
輸入部506，係由鍵盤、滑鼠、麥克風、攝像元件等所成。輸出部507係由顯示器、揚聲器等所成。記錄部508，係由硬碟或非揮發性記憶體等所成。通訊部509係由網路介面等所成。驅動機510係驅動：磁碟、光碟、光磁碟、或半導體記憶體等之可移除式記錄媒體511。
在如以上構成的電腦中，藉由CPU501而例如將記錄部508中所記錄之程式透過輸出入介面505及匯流排504，而載入至RAM503裡並加以執行，就可進行上述一連串處理。
電腦(CPU501)所執行的程式，係可記錄在例如封裝媒體等之可移除式記錄媒體511中而提供。又，程式係可透過區域網路、網際網路、數位衛星播送這類有線或無線的傳輸媒體而提供。
在電腦中，程式係藉由將可移除式記錄媒體511裝著至驅動機510，就可透過輸出入介面505，安裝至記錄部508。又，程式係可透過有線或無線之傳輸媒體，以通訊部509接收之，安裝至記錄部508。除此以 外，程式係可事前安裝在ROM502或記錄部508中。
此外，電腦所執行的程式，係可為依照本說明書所說明之順序而在時間序列上進行處理的程式，也可平行地，或呼叫進行時等必要之時序上進行處理的程式。
又，本技術的實施形態係不限定於上述實施形態，在不脫離本技術主旨的範圍內可做各種變更。
例如，本技術係亦可將1個機能透過網路而分擔給複數台裝置，採取共通進行處理的雲端運算之構成。
又，上述的流程圖中所說明的各步驟，係可由1台裝置來執行以外，亦可由複數台裝置來分擔執行。
甚至，若1個步驟中含有複數處理的情況下，該1個步驟中所含之複數處理，係可由1台裝置來執行以外，也可由複數台裝置來分擔執行。
甚至，本技術係亦可採取以下構成。
(1)
一種資訊處理裝置，係具備：偏置算出部，係算出從使用者的正面方向之基準位置起算的參考螢幕之位置的偏置量；和位置補正部，係基於前記偏置量，而將以前記基準位置為基準的音訊物件之位置，配合於前記參考螢幕之位置而予以補正；和重新映射部，係基於已被補正之前記音訊物件之位 置，配合於再生螢幕之位置而將前記音訊物件之位置予以重新映射。
(2)
如(1)所記載之資訊處理裝置，其中，前記偏置算出部，係在前記參考螢幕是位於前記使用者的背面方向的情況下，以所定之補正值將前記偏置量予以補正。
(3)
如(1)或(2)所記載之資訊處理裝置，其中，前記位置補正部，係在表示前記音訊物件之位置的資訊之值域是被定為所定範圍之值域的情況下，調整前記音訊物件之位置之補正時的補正值。
(4)
如(1)乃至(3)之任一項所記載之資訊處理裝置，其中，前記位置補正部，係基於前記偏置量，來補正前記參考螢幕之位置；前記重新映射部，係基於已被補正之前記參考螢幕之位置、及已被補正之前記音訊物件之位置，而將前記音訊物件之位置予以重新映射。
(5)
一種資訊處理方法，係含有以下步驟：算出從使用者的正面方向之基準位置起算的參考螢幕之位置的偏置量； 基於前記偏置量，而將以前記基準位置為基準的音訊物件之位置，配合於前記參考螢幕之位置而予以補正；基於已被補正之前記音訊物件之位置，配合於再生螢幕之位置而將前記音訊物件之位置予以重新映射。
(6)
一種程式，係令電腦執行包含以下步驟之處理：算出從使用者的正面方向之基準位置起算的參考螢幕之位置的偏置量；基於前記偏置量，而將以前記基準位置為基準的音訊物件之位置，配合於前記參考螢幕之位置而予以補正；基於已被補正之前記音訊物件之位置，配合於再生螢幕之位置而將前記音訊物件之位置予以重新映射。
O‧‧‧原點
OBJ1~OBJ6‧‧‧物件
PSC11‧‧‧再生螢幕
RSC11‧‧‧參考螢幕
U11‧‧‧虛擬使用者

Claims (6)

  1. 一種資訊處理裝置，係具備：偏置算出部，係算出從使用者的正面方向之基準位置起算的參考螢幕之位置的偏置量；和位置補正部，係基於前記偏置量，而將以前記基準位置為基準的音訊物件之位置，配合於前記參考螢幕之位置而予以補正；和重新映射部，係基於已被補正之前記音訊物件之位置，配合於再生螢幕之位置而將前記音訊物件之位置予以重新映射。
  2. 如請求項1所記載之資訊處理裝置，其中，前記偏置算出部，係在前記參考螢幕是位於前記使用者的背面方向的情況下，以所定之補正值將前記偏置量予以補正。
  3. 如請求項1所記載之資訊處理裝置，其中，前記位置補正部，係在表示前記音訊物件之位置的資訊之值域是被定為所定範圍之值域的情況下，調整前記音訊物件之位置之補正時的補正值。
  4. 如請求項1所記載之資訊處理裝置，其中，前記位置補正部，係基於前記偏置量，來補正前記參考螢幕之位置；前記重新映射部，係基於已被補正之前記參考螢幕之位置、及已被補正之前記音訊物件之位置，而將前記音訊物件之位置予以重新映射。
  5. 一種資訊處理方法，係含有以下步驟：算出從使用者的正面方向之基準位置起算的參考螢幕之位置的偏置量；基於前記偏置量，而將以前記基準位置為基準的音訊物件之位置，配合於前記參考螢幕之位置而予以補正；基於已被補正之前記音訊物件之位置，配合於再生螢幕之位置而將前記音訊物件之位置予以重新映射。
  6. 一種程式，係令電腦執行包含以下步驟之處理：算出從使用者的正面方向之基準位置起算的參考螢幕之位置的偏置量；基於前記偏置量，而將以前記基準位置為基準的音訊物件之位置，配合於前記參考螢幕之位置而予以補正；基於已被補正之前記音訊物件之位置，配合於再生螢幕之位置而將前記音訊物件之位置予以重新映射。
TW105121562A 2015-07-16 2016-07-07 資訊處理裝置及方法、以及程式 TWI618395B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2015142253 2015-07-16
JP2015-142253 2015-07-16
JP2015-198582 2015-10-06
JP2015198582 2015-10-06

Publications (2)

Publication Number Publication Date
TW201717614A true TW201717614A (zh) 2017-05-16
TWI618395B TWI618395B (zh) 2018-03-11

Family

ID=57757900

Family Applications (1)

Application Number Title Priority Date Filing Date
TW105121562A TWI618395B (zh) 2015-07-16 2016-07-07 資訊處理裝置及方法、以及程式

Country Status (12)

Country Link
US (3) US10356547B2 (zh)
EP (3) EP3324653B1 (zh)
JP (3) JP6729585B2 (zh)
KR (3) KR101902158B1 (zh)
CN (4) CN113055803B (zh)
AU (2) AU2016292271A1 (zh)
BR (1) BR112018000489B1 (zh)
MY (1) MY198158A (zh)
RU (1) RU2721750C2 (zh)
SG (1) SG11201710889UA (zh)
TW (1) TWI618395B (zh)
WO (1) WO2017010313A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2721750C2 (ru) 2015-07-16 2020-05-21 Сони Корпорейшн Устройство обработки информации, способ обработки информации и программа
EP3922658B1 (en) * 2019-02-08 2022-11-30 Mitsubishi Gas Chemical Company, Inc. Polycarbonate resin composition and optical lens using this
BR112022013238A2 (pt) * 2020-01-09 2022-09-06 Sony Group Corp Aparelho e método de processamento de informações, e, programa fazendo com que um computador execute processamento
GB2592610A (en) * 2020-03-03 2021-09-08 Nokia Technologies Oy Apparatus, methods and computer programs for enabling reproduction of spatial audio signals

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002171460A (ja) * 2000-11-30 2002-06-14 Sony Corp 再生装置
AU2003298146B2 (en) * 2002-12-02 2009-04-09 Interdigital Ce Patent Holdings Method for describing the composition of audio signals
JP2006292900A (ja) * 2005-04-08 2006-10-26 Hitachi Ltd 投写光学ユニット及びそれを用いた投写型映像表示装置
US7903176B2 (en) * 2005-08-05 2011-03-08 Samsung Electronics Co., Ltd. Apparatus for providing multiple screens and method of dynamically configuring multiple screens
WO2007063922A1 (ja) * 2005-11-29 2007-06-07 Kyocera Corporation 通信端末および通信システム、並びに通信端末の表示方法
KR100833241B1 (ko) * 2006-04-28 2008-05-28 삼성전자주식회사 슬라이딩-틸트장치 및 이를 채용한 모바일 기기
MY145497A (en) * 2006-10-16 2012-02-29 Dolby Sweden Ab Enhanced coding and parameter representation of multichannel downmixed object coding
JP5455420B2 (ja) * 2009-04-22 2014-03-26 キヤノン株式会社 映像音声再生装置及び映像音声再生方法
US9197736B2 (en) * 2009-12-31 2015-11-24 Digimarc Corporation Intuitive computing methods and systems
US20110123030A1 (en) 2009-11-24 2011-05-26 Sharp Laboratories Of America, Inc. Dynamic spatial audio zones configuration
US20110123055A1 (en) * 2009-11-24 2011-05-26 Sharp Laboratories Of America, Inc. Multi-channel on-display spatial audio system
GB2477793A (en) * 2010-02-15 2011-08-17 Sony Corp A method of creating a stereoscopic image in a client device
JP5387478B2 (ja) * 2010-03-29 2014-01-15 ソニー株式会社 音声再生装置及び音声再生方法
CN102421054A (zh) 2010-09-27 2012-04-18 夏普株式会社 多声道显示器上空间音频配置的方法和设备
WO2012145176A1 (en) * 2011-04-18 2012-10-26 Dolby Laboratories Licensing Corporation Method and system for upmixing audio to generate 3d audio
AU2012279349B2 (en) * 2011-07-01 2016-02-18 Dolby Laboratories Licensing Corporation System and tools for enhanced 3D audio authoring and rendering
EP2637427A1 (en) * 2012-03-06 2013-09-11 Thomson Licensing Method and apparatus for playback of a higher-order ambisonics audio signal
EP2891339B1 (en) * 2012-08-31 2017-08-16 Dolby Laboratories Licensing Corporation Bi-directional interconnect for communication between a renderer and an array of individually addressable drivers
EP2733964A1 (en) * 2012-11-15 2014-05-21 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Segment-wise adjustment of spatial audio signal to different playback loudspeaker setup
JP6226301B2 (ja) * 2012-12-21 2017-11-08 パナソニックＩｐマネジメント株式会社 指向性マイクロホン装置、音響信号処理方法およびプログラム
WO2014175668A1 (ko) * 2013-04-27 2014-10-30 인텔렉추얼디스커버리 주식회사 오디오 신호 처리 방법
US20160205492A1 (en) * 2013-08-21 2016-07-14 Thomson Licensing Video display having audio controlled by viewing direction
JP6299124B2 (ja) * 2013-09-13 2018-03-28 株式会社リコー 投影システム、画像処理装置、投影方法およびプログラム
EP2928216A1 (en) * 2014-03-26 2015-10-07 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for screen related audio object remapping
RU2721750C2 (ru) 2015-07-16 2020-05-21 Сони Корпорейшн Устройство обработки информации, способ обработки информации и программа

Also Published As

Publication number Publication date
CN113055803A (zh) 2021-06-29
CN113055802A (zh) 2021-06-29
CN113055801A (zh) 2021-06-29
AU2019204504B2 (en) 2019-07-25
EP3668122A1 (en) 2020-06-17
WO2017010313A1 (ja) 2017-01-19
EP4207756A1 (en) 2023-07-05
EP3324653A4 (en) 2019-03-13
JP7136283B2 (ja) 2022-09-13
KR20230080512A (ko) 2023-06-07
KR102539973B1 (ko) 2023-06-05
RU2721750C2 (ru) 2020-05-21
JP6904466B2 (ja) 2021-07-14
CN107852561B (zh) 2021-04-13
US10356547B2 (en) 2019-07-16
BR112018000489B1 (pt) 2022-12-27
EP3324653B1 (en) 2020-02-12
US20180234786A1 (en) 2018-08-16
CN113055802B (zh) 2022-11-08
JP2020171047A (ja) 2020-10-15
KR20180107308A (ko) 2018-10-01
CN113055803B (zh) 2022-10-28
US10645523B2 (en) 2020-05-05
JP2021158688A (ja) 2021-10-07
CN113055801B (zh) 2023-04-07
US20190166449A1 (en) 2019-05-30
EP3668122B1 (en) 2023-08-30
MY198158A (en) 2023-08-08
TWI618395B (zh) 2018-03-11
KR20180008871A (ko) 2018-01-24
BR112018000489A2 (pt) 2018-09-11
US10623884B2 (en) 2020-04-14
RU2018100009A3 (zh) 2019-11-27
AU2019204504A1 (en) 2019-07-18
EP3324653A1 (en) 2018-05-23
CN107852561A (zh) 2018-03-27
SG11201710889UA (en) 2018-02-27
US20190306653A1 (en) 2019-10-03
RU2018100009A (ru) 2019-07-10
JP6729585B2 (ja) 2020-07-22
AU2016292271A1 (en) 2018-02-08
KR101902158B1 (ko) 2018-09-27
JPWO2017010313A1 (ja) 2018-04-26

Similar Documents

Publication Publication Date Title
JP7136283B2 (ja) 情報処理装置および方法
US20220247984A1 (en) System and method for interactive projection
CN107646126B (zh) 用于移动设备的相机姿态估计
US20190311459A1 (en) Method and device for performing mapping on spherical panoramic image
KR20160030203A (ko) 3-차원 페이스 모델을 생성하기 위한 시스템들 및 방법들
US20170178290A1 (en) Display device, display system, and recording medium
US11074669B2 (en) Method for deriving additional and further pictures from an original picture, and device applying the method
CN110490825B (zh) 一种编码图片的矫正方法、装置、设备和存储介质
US20220201271A1 (en) Temporal foveated rendering
KR101926459B1 (ko) 가상현실 이미지 처리방법 및 그 장치