TW202332243A - 資訊處理方法、資訊處理系統、及程式 - Google Patents

資訊處理方法、資訊處理系統、及程式 Download PDF

Info

Publication number
TW202332243A
TW202332243A TW111143151A TW111143151A TW202332243A TW 202332243 A TW202332243 A TW 202332243A TW 111143151 A TW111143151 A TW 111143151A TW 111143151 A TW111143151 A TW 111143151A TW 202332243 A TW202332243 A TW 202332243A
Authority
TW
Taiwan
Prior art keywords
display
light
image
information processing
processing method
Prior art date
Application number
TW111143151A
Other languages
English (en)
Inventor
千葉信胤
Original Assignee
日商索尼集團公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商索尼集團公司 filed Critical 日商索尼集團公司
Publication of TW202332243A publication Critical patent/TW202332243A/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/194Segmentation; Edge detection involving foreground-background segmentation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects

Abstract

[課題]能夠抑制身為被攝體之物件的輪廓部分看似發光。 [解決手段]本技術之一側面的資訊處理方法,係對於顯示作為物件之背景的映像的顯示器,令其顯示出,在拍攝顯示器的顯示面之至少一部分之範圍的攝影機的攝影映像上物件所重疊之領域的光量已被降低的顯示映像。本技術係可適用於,使用大型LED顯示器的虛擬製片攝影。

Description

資訊處理方法、資訊處理系統、及程式
本技術係有關於資訊處理方法、資訊處理系統、及程式,特別是有關於,能夠抑制身為被攝體之物件的輪廓部分看似發光的資訊處理方法、資訊處理系統、及程式。
最近,於電影或電視劇的攝影中,使用到大型LED(Light Emitting Diode)顯示器的攝影手法也就是虛擬製片(Virtual Production),已經廣泛運用。虛擬製片所致之攝影,係將在顯示有作為背景之映像的LED顯示器之前進行表演的演員予以拍攝,而被進行。
藉此,攝影者或演員無法來到攝影現場的狀況下,仍可進行電影等之攝影。 [先前技術文獻] [專利文獻]
[專利文獻1]國際公開第2018/164105號
[發明所欲解決之課題]
由於LED顯示器係為自發光之裝置,因此在虛擬製片所致之攝影時,LED顯示器所發出的光,會從攝影對象也就是演員的背面進行照射。
正被來自背面側的光照到的演員若從正面側來看的情況下,則演員的輪廓部分有時候會看似發光。如此狀態下所被拍攝的映像,會變成非攝影者所意圖的映像。
本技術係有鑑於此種狀況而研發,目的在於能夠抑制身為被攝體之物件的輪廓部分看似發光。 [用以解決課題之手段]
本技術之一側面的資訊處理方法,係對於顯示作為物件之背景的映像的顯示器,令其顯示出,在拍攝前記顯示器的顯示面之至少一部分之範圍的攝影機的攝影映像上前記物件所重疊之領域的光量已被降低的顯示映像。
於本技術之一側面中,對於顯示作為物件之背景的映像的顯示器,在拍攝前記顯示器的顯示面之至少一部分之範圍的攝影機的攝影映像上前記物件所重疊之領域的光量已被降低的顯示映像,會被顯示。
以下,說明用以實施本技術的形態。說明是按照以下順序進行。 1.關於虛擬製片攝影 2.關於LED顯示器之顯示中所被使用的映像 3.PC的構成 4.PC的動作 5.關於光量降低領域之光量的調整 6.關於LED顯示器 7.其他
<1.關於虛擬製片攝影> ・攝影系統之構成例 圖1係為使用到本技術之一實施形態所述之攝影系統1的攝影之樣子的圖示。
圖1的攝影系統1,係主要是由PC11、LED顯示器12、及攝影用攝影機13所構成。攝影系統1中係還設有映像檢查用之監視器、攝影用攝影機13以外之攝影機等之其他機器。
攝影系統1,係被準備在攝影棚等之寬廣的空間中。藉由攝影系統1,電影或電視劇等之攝影,就可藉由所謂的虛擬製片攝影而被進行。
攝影棚中,係被設置有牆面狀的大型之LED顯示器12。如後述,LED顯示器12,係藉由將複數個顯示單元組合成瓷磚狀,而被構成。藉由複數個顯示單元所顯示的各個映像,LED顯示器12的顯示面之全體中就會顯示出巨大的映像。於圖1的例子中,係顯示出沿著道路而有建築物之風景的映像。
如圖1所示,演員H,係站在LED顯示器12的前方,以LED顯示器12中所被顯示之映像作為背景而進行表演。LED顯示器12中所被顯示之映像,係成為演員H的背景之映像(背景映像)。
虛擬製片攝影,係將演員H與背景映像,以攝影用攝影機13進行攝影而被進行。於圖1的例子中,攝影範圍是朝向演員H之方向的攝影用攝影機13,係被安裝在懸臂的尖端。
在攝影用攝影機13的攝影映像中,係隨應於攝影用攝影機13的攝影範圍(攝角),而會包含有演員H與背景映像之各者的至少一部分之範圍。隨著演員H之移動或攝影用攝影機13之移動等來改變背景映像,藉此就可拍攝出,看起來彷彿演員H是存在於LED顯示器12所映出之空間中的映像。
PC11,係為LED顯示器12之顯示或攝影用攝影機13所致之攝影之控制中所被使用的電腦。藉由PC11而構成了資訊處理系統。PC11的機能係亦可藉由1台電腦來加以實現,亦可藉由複數台電腦來加以實現。又,PC11的機能之中的至少一部分亦可藉由網際網路上的伺服器來加以實現。
・關於攝影時的光環境 圖2係為虛擬製片攝影時的光源之例子的圖示。
攝影用攝影機13,係朝向演員H與LED顯示器12之顯示面而被設置。圖2的中空箭頭,係表示攝影用攝影機13的攝影範圍之方向。
如圖2的箭頭#1乃至#3所示,在虛擬製片攝影時照射到演員H的光,係有:LED顯示器12所發出之來自背面側的光、照明機器14所發出之來自上方的光、以及照明機器15所發出之來自正面側的光之3種類的光。照明機器14係為例如,被設置在攝影棚之天花板等的照明機器。照明機器15係為例如,在攝影用攝影機13之附近所被準備的直立型的照明機器。亦可將與LED顯示器12不同之LED顯示器當作照明用途之機器而設置在天花板或攝影用攝影機13之附近,藉由照明用途之LED顯示器所發出的光,而將演員H從上方或正面側予以照射。
另一方面,在非虛擬製片攝影的通常的戶外的攝影時,照射到演員H的光,如圖3所示,係為:太陽光等之自然光、和被準備在攝影機之附近的照明機器所發出的光之2種類的光。若假設被設置在天花板等的照明機器14的光是相當於通常攝影時的自然光,則在虛擬製片攝影時,除了通常攝影時的光以外,還會有LED顯示器12所發出的光,會照射到演員H。
圖4係為LED顯示器12所致之光的照射之樣子從上方觀看圖。
由於LED顯示器12係為自發光裝置,因此如圖4中模式性圖示,LED顯示器12所發出的光,係從背面側照射到演員H。照射到演員H的來自LED顯示器12的光之一部分,係如圖5的A所示,會沿著演員H的身體,而往正面側(攝影用攝影機13側)繞行。
從正面側觀看此狀態的情況下,如圖5的B所示,會因為來自背面側的光,導致演員H的輪廓部分看似發光。於圖5的B中,演員H的輪廓之周圍圖示了薄薄的網點,係表示輪廓部分正在發光。
除了像是逆光的場景這類刻意將光源設在LED顯示器側的情況以外,在如此狀態下所被拍攝的映像,係會因為演員的輪廓部分看似發光,而導致變成非攝影者所意圖的映像。
於本技術的一實施形態所述的攝影系統1中,用來抑制演員H的輪廓部分看似發光所需之映像,係於PC11中被生成,並被使用於LED顯示器12之顯示。
<2.關於LED顯示器之顯示中所被使用的映像> 圖6係為LED顯示器12之顯示映像之例子的圖示。
圖6的上段的框框F,係表示攝影用攝影機13的攝影範圍。於攝影用攝影機13的攝影映像中,係在以中心為基準而若干偏右側的位置上,映照了演員H的大略全身。
此情況下,如圖6的下段所示,在背景映像全體之中的,於攝影映像中演員H所重疊之一部分的領域,是被決定成為光量降低領域A1,光量降低領域A1之光量已被降低的映像,係作為顯示映像而被顯示於LED顯示器12。於圖6的下段中,位於攝影範圍內的若干偏右側的位置上的光量降低領域A1是以黑色來圖示,其係表示這是光量比周圍之領域還少的領域。
如此,基於攝影用攝影機13與演員H的位置關係等來決定光量降低領域A1,背景映像全體之中的光量降低領域A1之光量已被降低的映像,係作為顯示映像而被顯示於LED顯示器12。於圖6的例子中,雖然光量降低領域A1之形狀是被設成縱長長方形之領域,但亦可設成其他形狀。例如亦可為,沿著演員H之輪廓而被決定的,與演員H之輪廓之形狀相同之形狀的領域,是被決定成為光量降低領域A1。
圖7係為顯示映像的生成之例子的圖示。
如參照圖6所說明般地進行攝影的情況下,圖7的上段所示的映像會被拍攝。基於如此的攝影用攝影機13的攝影映像,身為被攝體之演員H的辨識會被進行,如圖7的中段所示,演員H在攝影映像上的位置係被辨識。於圖7的中段中,塗滿斜線所示的範圍,係表示演員H所映出的範圍。
演員H所映出的範圍已被辨識出來的情況下,對應於該範圍的背景映像上之領域係如圖7的下段所示般地被決定成為光量降低領域A1。於PC11中,背景映像全體之中的光量降低領域A1之光量已降低的映像,係被當作顯示映像而被生成,被使用於LED顯示器12之顯示。例如,藉由將光量降低領域A1之顏色改成黑色,光量降低領域A1之光量就會被抑制。
圖8係為光量降低領域A1之光量已被降低的映像當作顯示映像來使用之情況的光的照射之樣子的圖示。
光量降低領域A1之光量已被降低的映像正被顯示於LED顯示器12的情況下,如圖8的A所示,從背面側直接照射至演員H的光就會被抑制。藉此,就可抑制LED顯示器12所發出的光沿著演員H的身體而繞行至正面側。
從正面側觀看此狀態的情況下,由於來自背面側的光係被抑制,因此如圖8的B所示,可抑制演員H的輪廓部分看似發光。於圖8的B中,演員H的輪廓之周圍沒有上色係表示輪廓部分沒有發光。如此狀態下所被拍攝的映像,係為輪廓部分沒有發光之狀態的演員H所映出的映像。
如此,藉由將演員H所映出之領域所對應之領域之光量已被降低的映像使用於LED顯示器12之顯示,就可抑制演員H的輪廓部分看似發光。攝影者係可拍攝演員H的輪廓部分沒有發光的自己所意圖的映像。
關於如以上般地控制LED顯示器12之顯示的PC11之動作,係參照流程圖而於後述。
<3.PC的構成> 圖9係為圖1的PC11的硬體之構成例的區塊圖。
於圖9的PC11中,CPU(Central Processing Unit)31、ROM(Read Only Memory)32、RAM(Random Access Memory)33,係藉由匯流排34而被相互連接。
在匯流排34上係連接有輸出入介面35。輸出入介面35上則連接著,由鍵盤、滑鼠等所成之輸入部36、和由顯示器、揚聲器等所成之輸出部37。
又,在輸出入介面35上係連接有,由硬碟或非揮發性記憶體等所成之記憶部38、由網路介面等所成之通訊部39、驅動可移除式媒體41用的驅動機40。
通訊部39,係與控制LED顯示器12之顯示的控制器或攝影用攝影機13之間,進行通訊。例如,通訊部39,係將藉由攝影用攝影機13而被拍攝的攝影映像、或包含有攝影用攝影機13之位置、攝影範圍等之攝影參數的攝影機資訊,予以接收。這些資訊係例如,從攝影用攝影機13、或控制攝影用攝影機13之動作的裝置,而被發送過來。
圖10係為PC11之機能構成例的區塊圖。
如圖10所示,於PC11中係被實現有資訊處理部51。資訊處理部51係由:映像取得部61、辨識部62、光量降低領域決定部63、顯示映像生成部64、及顯示控制部65所構成。圖10所示的機能部之中的至少一部分,係藉由構成PC11的圖9的CPU31執行所定之程式,來加以實現。
映像取得部61,係將LED顯示器12中所被顯示之背景映像,加以取得。例如,藉由從PC11的記憶部38讀出映像資料而取得背景映像。又,映像取得部61,係控制通訊部39,而將從攝影用攝影機13等所被發送過來的攝影映像,加以取得。已被映像取得部61所取得之背景映像和攝影映像係被輸出至辨識部62。又,背景映像係被輸出至顯示映像生成部64。
辨識部62,係基於從映像取得部61所被供給之映像等,來辨識位於LED顯示器12之前方的演員H、或被設置在LED顯示器12之前方的物體等之物件。攝影時,攝影佈景等之物體,有時會被放在演員H之附近。
・物件的辨識方法1 辨識部62,係將攝影映像進行解析,並進行人物辨識或物體辨識,而辨識出物件。亦可藉由求取攝影映像、與對應於攝影範圍的背景映像之部分的差分,而辨識出物件。
・物件的辨識方法2 圖11係為LED顯示器12的顯示面之構成的圖示。
如圖11所示,亦可在LED顯示器12的顯示面之略全體,排列設置有紅外線感測器等之複數個感測器。圖11所示的塗黑的小圓點係分別表示感測器。
辨識部62,係將各個感測器所致之計測結果加以取得,並辨識位於LED顯示器12之前方的物件。例如,圖12所示演員H與物體O是作為物件而位於LED顯示器12之前方的情況下,基於感測器所致之計測結果,而辨識出各個物件。
・物件的辨識方法3 圖13係為物件的辨識之另一例的圖示。
如圖13的A所示,與攝影用攝影機13不同之攝影機也就是辨識用攝影機81-1、81-2,係亦可以使其攝影範圍朝向LED顯示器12之前方的方式而被設置。於圖13的A的例子中,係在LED顯示器12的上方,設置有辨識用攝影機81-1、81-2。
辨識部62,係藉由將辨識用攝影機81-1、81-2所拍攝到的映像進行解析,以如圖13的B所示般地辨識出位於LED顯示器12之前方的演員H或物體O等之物件。
如此所被辨識出來的物件之資訊,係被輸出至圖10的光量降低領域決定部63。對光量降低領域決定部63係供給了例如:物件的位置、大小等之資訊。
光量降低領域決定部63,係基於從辨識部62所被供給之物件的資訊,來決定光量降低領域。光量降低領域之決定時,係適宜地使用藉由攝影機資訊而被特定的攝影用攝影機13之位置或攝影範圍。對光量降低領域決定部63係會供給,於通訊部39中所被接收到的攝影機資訊。
圖14係為光量降低領域決定部63所致之光量降低領域的決定之例子的圖示。
光量降低領域決定部63係例如,基於攝影用攝影機13與演員H的位置關係而進行光線追隨,並決定光量降低領域A1。
光線追隨係例如如圖14所示,設定將攝影用攝影機13之位置P1與演員H之輪廓上之位置P2做連結的直線L,並偵測與直線L交叉的LED顯示器12之顯示面上的位置P3,而被進行。藉由以演員H之輪廓上之各位置為對象來進行同樣的處理,於攝影映像上對應於演員H所映出之領域的,LED顯示器12之顯示面上的領域,就被特定。光量降低領域A1,係以包含有如此所被特定出來的LED顯示器12之顯示面上之領域之中的至少一部分的方式,而被決定。
亦可將攝影映像上與演員H所映出之領域相同的形狀之領域決定成為光量降低領域,亦可將矩形等之預先決定之形狀的領域,決定成為光量降低領域。
又,光量降低領域決定部63,係亦可基於攝影者所指定的資訊,來決定光量降低領域。
圖15係為光量降低領域決定部63所致之光量降低領域的決定之另一例的圖示。
在攝影系統1中所被設置的平板終端(未圖示)或PC11的顯示部中,顯示出圖15所示的顯示畫面S。顯示畫面S,係為光量降低領域之指定時所被使用的畫面。如圖15所示,顯示畫面S中,作為畫面的構成要素而被設有:領域指定部E1、亮度指定部E2、及偵測物件顯示部E3。
攝影者,係藉由操作觸控面板或滑鼠、鍵盤等,就可對顯示畫面S之各要素進行指示。平板終端或PC11,係將基於攝影者對於顯示畫面S之各要素的操作而生成的各指定資訊,發送至光量降低領域決定部63。對光量降低領域決定部63所被發送的指定資訊,係為表示攝影者之操作內容的資訊。光量降低領域決定部63,係基於從平板終端或PC11所被發送過來的各指定資訊,來決定光量降低領域之位置與範圍或光量降低領域之亮度。
顯示畫面S之左側的領域指定部E1,係為用來指定光量降低領域A1之位置與範圍而被設置的顯示畫面S之要素。隨應於攝影者對領域指定部E1所指定的光量降低領域A1之位置與範圍,用來指定光量降低領域A1之位置與範圍所需之指定資訊就被生成。已被生成之指定資訊,係被發送至光量降低領域決定部63。亦可不是光量降低領域之位置與範圍之雙方,而是只有位置與範圍之其中任一方之指定,是使用領域指定部E1之顯示而被進行。
如圖15所示,亦可在領域指定部E1中,顯示出格線。亦可基於格線,來對領域指定部E1進行指定。
又,基於辨識部62的辨識結果而由光量降低領域決定部63所決定的光量降低領域A1之位置與範圍,亦可作為初期值而被提示於領域指定部E1。此情況下,攝影者係將光量降低領域決定部63所決定的光量降低領域A1之位置與範圍,因應需要而進行變更的操作。
顯示畫面S之上方的亮度指定部E2,係為用來指定光量降低領域A1之亮度而被設置的顯示畫面S之要素。隨應於攝影者使用亮度指定部E2來指定光量降低領域A1之亮度,用來指定光量降低領域A1之亮度所需之指定資訊就被生成。已被生成之指定資訊,係被發送至光量降低領域決定部63。
如圖15所示,亦可藉由進行滑動調整所需之滑桿,來構成亮度指定部E2。亦可藉由操作滑桿,來進行光量降低領域A1之亮度的指定。
又,基於辨識部62的辨識結果而由光量降低領域決定部63所設定的光量降低領域A1之亮度,亦可作為初期值而被提示於亮度指定部E2。此情況下,攝影者係將光量降低領域決定部63所決定的光量降低領域A1之亮度,因應需要而進行變更的操作。
顯示畫面S之右側的偵測物件顯示部E3,係為用來提示光量降低領域A1中所包含之物件而被設置的顯示畫面S之要素。於圖15的例子中,演員H係作為物件而被提示。
基於辨識部62的辨識結果,在偵測物件顯示部E3會提示出物件。攝影者係藉由對偵測物件顯示部E3的操作,而可在已被辨識部62所辨識出來的複數個物件之中,選擇要對哪個物件來指定光量降低領域A1。
又,亦可藉由操作偵測物件顯示部E3,就可基於辨識部62的辨識結果來修正物件的範圍(輪廓)。
辨識部62所致之物件之辨識與光量降低領域決定部63所致之光量降低領域之決定係例如,以攝影影像與背景映像之各畫格為對象來進行。光量降低領域之位置與範圍之中的至少任一者,係會追隨於演員H之移動或攝影用攝影機13的攝影範圍之變化而變化。藉由光量降低領域決定部63而被決定的光量降低領域之資訊,係被輸出至顯示映像生成部64。
顯示映像生成部64,係在從映像取得部61所被供給之背景映像全體之中,將已被光量降低領域決定部63所決定之光量降低領域之光量予以降低,藉此而生成顯示映像。
例如,顯示映像生成部64,係將光量降低領域之顏色設成黑色的背景映像,當作顯示映像而予以生成。光量降低領域之亮度已降低的背景映像亦可作為顯示映像而被生成,亦可從構成光量降低領域的各像素之像素資訊中消除掉亮度之資訊,而把只剩下色彩資訊的背景映像當作顯示映像而加以生成。已被顯示映像生成部64所生成的顯示映像,係被輸出至顯示控制部65。
顯示控制部65,係令物件所重疊之領域也就是光量降低領域之光量已被降低的顯示映像被顯示出來。顯示控制部65,係控制通訊部39,將從顯示映像生成部64所被供給之顯示映像,發送至LED顯示器12的未圖示之控制器,而令LED顯示器12做顯示。
<4.PC的動作> 此處,參照圖16的流程圖,說明PC11的動作。
於步驟S1中,映像取得部61係將LED顯示器12中所正被顯示的背景映像、和藉由攝影用攝影機13而被拍攝的攝影映像,加以取得。
於步驟S2中,辨識部62,係將位於LED顯示器12之前方的物件,加以辨識。
於步驟S3中,辨識部62,係判定位於LED顯示器12之前方的物件在攝影用攝影機13的攝影映像中是否有映出,並等待直到判定為物件在攝影用攝影機13的攝影映像中有映出。位於LED顯示器12之前方的物件在攝影用攝影機13的攝影映像中未映出的情況下,沒有被設定光量降低領域的背景映像就直接當作LED顯示器12之顯示映像而被使用。
於步驟S3中判定為,位於LED顯示器12之前方的物件在攝影用攝影機13的攝影映像有映出的情況下,則於步驟S4中,光量降低領域決定部63係如上述般地決定光量降低領域。
於步驟S5中,顯示映像生成部64,係將背景映像全體之中的光量降低領域之光量已被降低的映像,當作顯示映像而予以生成。
於步驟S6中,顯示控制部65係令已被顯示映像生成部64所生成之顯示映像,被顯示於LED顯示器12。光量降低領域之光量已被降低的顯示映像之顯示,係例如在攝影用攝影機13所做的攝影正被進行的期間,會持續進行。
藉由以上的處理,光量降低領域之光量已被降低的映像係被使用於LED顯示器12之顯示。PC11,係可抑制演員H的輪廓部分看似發光的映像,被進行攝影。
<5.關於光量降低領域之光量的調整> 亦可不是將光量降低領域設成全暗之領域(黑色之領域),而是隨著各種條件來調整光量。光量的調整,係在顯示映像之生成時,藉由顯示映像生成部64而被進行。
・調整例1 圖17係為光量降低領域之光量的調整之例子的圖示。
亦可隨應於物件與LED顯示器12的位置關係,來調整光量降低領域之光量。
例如,演員H與LED顯示器12的距離是如圖17的A所示般地較近的情況下,則相較於如圖17的B所示般地較遠的情況,可以使得降低量為較多的方式,來調整光量降低領域之光量。將圖17的A的光量降低領域A1-1以黑色表示,將圖17的B的光量降低領域A1-2以較淡的顏色來表示的這件事情,係表示相較於光量降低領域A1-2,光量降低領域A1-1是較暗(光量之降低量較多)。
通常,物件與LED顯示器12的距離越近,照射至物件的來自背面側的光的量就會越多,物件的輪廓部分之發光就越容易變得醒目。藉由以物件越靠近LED顯示器12則降低量就越多的方式來調整光量降低領域之光量,就可一面顯示出異樣感較少的背景映像,一面抑制輪廓部分的發光量。
・調整例2 亦可隨應於攝影場景,來調整光量降低領域之光量。此情況下,關於攝影場景的資訊,係對顯示映像生成部64進行供給。
例如,像是逆光之場景等,演員的輪廓部分看似發光是很自然的場景之攝影的情況下,就將光量降低領域之光量之降低量,設定成較少的量。藉此,可以重現演員的輪廓部分看似發光的樣子。
・調整例3 亦可隨應於照射至物件的打光之強度,來調整光量降低領域之光量。此情況下,關於打光強度的資訊,係對顯示映像生成部64進行供給。
例如,照射至演員的打光較強的情況下,相較於照射至演員的打光較弱的情況,將光量降低領域之光量的降低量設定成較少的量。
通常,照射至物件的打光較強的情況下,相較於較弱的情況,輪廓部分之發光會變得比較不醒目。藉由打光越強則降低量越少的方式來調整光量降低領域之光量,也可一面顯示出異樣感較少的背景映像,一面抑制輪廓部分的發光量。
・調整例4 亦可隨應於攝影用攝影機13的焦點位置,來調整光量降低領域之光量。此情況下,對顯示映像生成部64所被供給的攝影機資訊中,係會包含有關於焦點位置的資訊。
例如,以使得攝影用攝影機13的焦點越是對準於演員,降低量就會變得越多的方式,來調整光量降低領域之光量。
通常,焦點對得越準,輪廓部分之發光就越容易變得醒目。藉由以焦點對得越準則降低量越多的方式來調整光量降低領域之光量,也可一面顯示出異樣感較少的背景映像,一面抑制輪廓部分的發光量。
<6.關於LED顯示器> 圖18係為LED顯示器12之構成例的圖示。
LED顯示器12,係藉由將複數個顯示單元也就是顯示單元(架櫃)91-1乃至91-n配置成瓷磚狀,而被構成。以下在沒有必要一一區別顯示單元91-1乃至91-n的情況下,則適宜地總稱為顯示單元91。
各個顯示單元91,係如放大框所示,是藉由將對應於各像素的LED是被配置成矩陣狀(2維陣列狀)的模組也就是LED陣列101配置成瓷磚狀,而被構成。於圖18的例子中,係藉由4×3個LED陣列101,而構成了1個顯示單元91。以下在沒有必要一一區別LED陣列101-1乃至101-m的情況下,則適宜地總稱為LED陣列101。
例如,參照圖11所說明的物件偵測用之感測器,係分別被設在LED陣列101。
如圖18所示,LED顯示器12的各顯示單元91,係被連接至外部的裝置也就是LED顯示器用控制器111。LED顯示器用控制器111之機能係亦可被搭載於上述的PC11中,如此就可以PC11之外部之裝置的方式來構成LED顯示器用控制器111。上述的顯示映像之生成,亦可在有別於PC11的另外的裝置也就是LED顯示器用控制器111中來進行。
LED顯示器12,係基於從LED顯示器用控制器111所被供給的畫格單位之映像訊號,而將對應於該映像訊號的映像,以畫格單位進行顯示。具體而言,被供給至各顯示單元91的映像訊號,係為對應於該顯示單元91在LED顯示器12上之位置的映像訊號。各顯示單元91係顯示基於該映像訊號的映像,藉此,LED顯示器12全體就會顯示出1畫格的映像。
LED顯示器用控制器111,對從外部機器所被供給之畫格單位的映像訊號,施行所定之訊號處理。LED顯示器用控制器111,係將其結果所得之畫格單位的映像訊號,隨應於各顯示單元91之位置而分割成n個,並發送至各顯示單元91。
圖19係為顯示單元91之構成例的區塊圖。
如圖19所示,顯示單元91,係由驅動器控制部121和LED區塊122所構成。
驅動器控制部121,係由:訊號輸入IF131、訊號處理部132、訊號輸出IF133-1乃至133-m所構成。
訊號輸入IF131係將從LED顯示器用控制器111所被發送過來的畫格單位的映像訊號予以接收,並供給至訊號處理部132。
訊號處理部132,係對從訊號輸入IF131所被供給的畫格單位之映像訊號,施行色彩之補正或亮度之補正等,進行對自己的顯示單元91而言為個別必須的訊號處理。訊號處理部132,係將訊號處理後的畫格單位的映像訊號,隨應於自己的顯示單元91上的各LED陣列101之位置而分割成m個。訊號處理部132,係將用來設定構成各個LED陣列101的各LED之發光強度所需之顯示訊號,基於訊號處理後的畫格單位之映像訊號而加以生成。
訊號處理部132上係被連接有,LED陣列101-1乃至101-m之各者所對應之訊號輸出IF133-1乃至133-m。訊號處理部132,係將各個LED陣列101的顯示訊號,供給至對應於該LED陣列101的訊號輸出IF133-1乃至133-m。
訊號輸出IF133-1乃至133-m,係分別將從訊號處理部132所被供給之顯示訊號,發送至LED區塊122。
LED區塊122,係由LED驅動器141-1乃至141-m和LED陣列101-1乃至101-m所構成。對LED驅動器141-1乃至141-m,係分別連接有LED陣列101-1乃至101-m。
LED驅動器141-1乃至141-m,係分別基於從訊號輸出IF133-1乃至133-m所被發送過來的顯示訊號,而將構成LED陣列101-1乃至101-m的各LED予以驅動,並控制發光。
<7.其他> 雖然具有如以上之構成的LED顯示器12是以立於地面的狀態(將顯示面設成垂直面的狀態)而被設置,但LED顯示器12亦可被設置於地面。此情況下,LED顯示器12係為,顯示面是朝向上方而被設置。
與LED顯示器12是以立於地面的狀態而被設置的情況同樣地,即使在被設置於地面的狀態下,仍會適宜地生成攝影映像上物件所重疊之領域之光量已被降低的顯示映像,而被使用於被設置在地面的LED顯示器12之顯示。
LED顯示器12亦可被設置在天花板面,亦可被設置在圍繞演員H的複數個面。
・關於程式 上述一連串處理,係可藉由硬體來執行,也可藉由軟體來執行。以軟體來執行一連串處理時,構成該軟體的程式,是被安裝至內嵌有專用硬體的電腦,或是泛用之個人電腦等。
電腦所執行的程式,係可為依照本說明書所說明之順序而在時間序列上進行處理的程式,也可平行地,或呼叫進行時等必要之時序上進行處理的程式。
本說明書中所記載之效果僅為例示並非限定,亦可還有其他效果。
本技術的實施形態係不限定於上述實施形態,在不脫離本技術主旨的範圍內可做各種變更。
例如,本技術係亦可將1個機能透過網路而分擔給複數台裝置,採取共通進行處理的雲端運算之構成。
又,上述的流程圖中所說明的各步驟,係可由1台裝置來執行以外,亦可由複數台裝置來分擔執行。
甚至,若1個步驟中含有複數處理的情況下,該1個步驟中所含之複數處理,係可由1台裝置來執行以外,也可由複數台裝置來分擔執行。
於本說明書中,所謂的系統,係意味著複數構成要素(裝置、模組(零件)等)的集合,所有構成要素是否位於同一框體內則在所不問。因此,被收納在個別的框體中,透過網路而連接的複數台裝置、及在1個框體中收納有複數模組的1台裝置,均為系統。
・構成的組合例 本技術係亦可採取如以下之構成。
(1) 一種資訊處理方法,係 對於顯示作為物件之背景的映像的顯示器,令其顯示出,在拍攝前記顯示器的顯示面之至少一部分之範圍的攝影機的攝影映像上前記物件所重疊之領域的光量已被降低的顯示映像。 (2) 如前記(1)所記載之資訊處理方法,其中, 令前記物件所重疊之領域的光量已被降低的前記顯示映像,在前記攝影機所致之攝影中被顯示。 (3) 如前記(1)或(2)所記載之資訊處理方法,其中, 將前記物件所重疊之領域之中的至少一部分之領域,決定成為要降低光量之領域也就是光量降低領域; 生成前記光量降低領域之光量已被降低的前記顯示映像。 (4) 如前記(3)所記載之資訊處理方法,其中, 前記光量降低領域之位置、範圍、及亮度之中的至少任一者,是基於藉由對操作畫面之操作而被生成的指定資訊而決定。 (5) 如前記(4)所記載之資訊處理方法,其中, 前記指定資訊,係藉由對前記作為物件之背景的映像而在前記操作畫面上進行指定的操作,而被生成。 (6) 如前記(3)至(5)之任一項所記載之資訊處理方法,其中, 將前記光量降低領域之顏色設成黑色的映像,當作前記顯示映像而予以生成。 (7) 如前記(3)至(5)之任一項所記載之資訊處理方法,其中, 將降低了前記光量降低領域之亮度的映像,當作前記顯示映像而予以生成。 (8) 如前記(3)至(5)之任一項所記載之資訊處理方法,其中, 將從構成前記光量降低領域的各像素之像素資訊中消除了亮度資訊的映像,當作前記顯示映像而予以生成。 (9) 如前記(1)至(8)之任一項所記載之資訊處理方法,其中, 將前記物件進行辨識。 (10) 如前記(9)所記載之資訊處理方法,其中, 基於藉由前記攝影機而被拍攝到的前記攝影映像來辨識前記物件。 (11) 如前記(9)所記載之資訊處理方法,其中, 基於被排列設在前記顯示器之顯示面的複數個感測器所致之計測結果來辨識前記物件。 (12) 如前記(9)所記載之資訊處理方法,其中, 基於藉由與拍攝前記攝影映像之前記攝影機不同之其他攝影機而被拍攝到的映像,來辨識前記物件。 (13) 如前記(9)至(12)之任一項所記載之資訊處理方法,其中, 基於前記物件之辨識結果,而將前記光量降低領域之位置、範圍、及亮度之中的至少任一者,基於藉由對操作畫面之操作而被生成的指定資訊而予以變更。 (14) 如前記(3)至(8)之任一項所記載之資訊處理方法,其中, 隨應於前記物件與前記顯示器的位置關係,來調整前記光量降低領域之光量。 (15) 如前記(3)至(8)之任一項所記載之資訊處理方法,其中, 隨應於攝影場景,來調整前記光量降低領域之光量。 (16) 如前記(3)至(8)之任一項所記載之資訊處理方法,其中, 隨應於前記攝影機的焦點位置,來調整前記光量降低領域之光量。 (17) 如前記(3)至(8)之任一項所記載之資訊處理方法,其中, 隨應於照射至前記物件的打光之強度,來調整前記光量降低領域之光量。 (18) 如前記(3)至(8)之任一項所記載之資訊處理方法,其中, 令前記光量降低領域之位置與範圍之中的至少任一者,追隨於前記物件之移動而變化。 (19) 一種資訊處理系統,係具備: 顯示控制部,係對於顯示作為物件之背景的映像的顯示器,令其顯示出,在拍攝前記顯示器的顯示面之至少一部分之範圍的攝影機的攝影映像上前記物件所重疊之領域的光量已被降低的顯示映像。 (20) 一種程式,係用以令電腦執行以下處理: 對於顯示作為物件之背景的映像的顯示器,令其顯示出,在拍攝前記顯示器的顯示面之至少一部分之範圍的攝影機的攝影映像上前記物件所重疊之領域的光量已被降低的顯示映像。
1:攝影系統 11:PC 12:LED顯示器 13:攝影用攝影機 H:演員 14:照明機器 15:照明機器 A1:光量降低領域 31:CPU 32:ROM 33:RAM 34:匯流排 35:輸出入介面 36:輸入部 37:輸出部 38:記憶部 39:通訊部 40:驅動機 41:可移除式媒體 51:資訊處理部 61:映像取得部 62:辨識部 63:光量降低領域決定部 64:顯示映像生成部 65:顯示控制部 O:物體 81-1,81-2:辨識用攝影機 P1:位置 P2:位置 P3:位置 E1:領域指定部 E2:亮度指定部 E3:偵測物件顯示部 S:顯示畫面 A1-1:光量降低領域 A1-2:光量降低領域 91-1~91-n:顯示單元 101-1~101-m:LED陣列 111:LED顯示器用控制器 121:驅動器控制部 122:LED區塊 131:訊號輸入IF 132:訊號處理部 133-1~133-m:訊號輸出IF 141-1~141-m:LED驅動器
[圖1]使用到本技術之一實施形態所述之攝影系統的攝影之樣子的圖示。 [圖2]虛擬製片攝影時的光源之例子的圖示。 [圖3]通常攝影時的光源之例子的圖示。 [圖4]LED顯示器所致之光的照射之樣子從上方觀看圖。 [圖5]LED顯示器所致之光的照射之樣子從正面觀看圖。 [圖6]LED顯示器之顯示映像之例子的圖示。 [圖7]顯示映像的生成之例子的圖示。 [圖8]光量降低領域之光量已被降低的映像當作顯示映像來使用之情況的光的照射之樣子的圖示。 [圖9]圖1的PC的硬體之構成例的區塊圖。 [圖10]PC之機能構成例的區塊圖。 [圖11]LED顯示器的顯示面之構成的圖示。 [圖12]物件的辨識之例子的圖示。 [圖13]物件的辨識之另一例的圖示。 [圖14]光量降低領域的決定之例子的圖示。 [圖15]光量降低領域的決定之另一例的圖示。 [圖16]說明PC之處理的流程圖。 [圖17]光量降低領域之光量的調整之例子的圖示。 [圖18]LED顯示器之構成例的圖示。 [圖19]顯示單元之構成例的區塊圖。
1:攝影系統
11:PC
12:LED顯示器
13:攝影用攝影機
H:演員

Claims (20)

  1. 一種資訊處理方法,係 對於顯示作為物件之背景的映像的顯示器,令其顯示出,在拍攝前記顯示器的顯示面之至少一部分之範圍的攝影機的攝影映像上前記物件所重疊之領域的光量已被降低的顯示映像。
  2. 如請求項1所記載之資訊處理方法,其中, 令前記物件所重疊之領域的光量已被降低的前記顯示映像,在前記攝影機所致之攝影中被顯示。
  3. 如請求項1所記載之資訊處理方法,其中, 將前記物件所重疊之領域之中的至少一部分之領域,決定成為要降低光量之領域也就是光量降低領域; 生成前記光量降低領域之光量已被降低的前記顯示映像。
  4. 如請求項3所記載之資訊處理方法,其中, 前記光量降低領域之位置、範圍、及亮度之中的至少任一者,是基於藉由對操作畫面之操作而被生成的指定資訊而決定。
  5. 如請求項4所記載之資訊處理方法,其中, 前記指定資訊,係藉由對前記作為物件之背景的映像而在前記操作畫面上進行指定的操作,而被生成。
  6. 如請求項3所記載之資訊處理方法,其中, 將前記光量降低領域之顏色設成黑色的映像,當作前記顯示映像而予以生成。
  7. 如請求項3所記載之資訊處理方法,其中, 將降低了前記光量降低領域之亮度的映像,當作前記顯示映像而予以生成。
  8. 如請求項3所記載之資訊處理方法,其中, 將從構成前記光量降低領域的各像素之像素資訊中消除了亮度資訊的映像,當作前記顯示映像而予以生成。
  9. 如請求項1所記載之資訊處理方法,其中, 將前記物件進行辨識。
  10. 如請求項9所記載之資訊處理方法,其中, 基於藉由前記攝影機而被拍攝到的前記攝影映像來辨識前記物件。
  11. 如請求項9所記載之資訊處理方法,其中, 基於被排列設在前記顯示器之顯示面的複數個感測器所致之計測結果來辨識前記物件。
  12. 如請求項9所記載之資訊處理方法,其中, 基於藉由與拍攝前記攝影映像之前記攝影機不同之其他攝影機而被拍攝到的映像,來辨識前記物件。
  13. 如請求項9所記載之資訊處理方法,其中, 基於前記物件之辨識結果,而將前記光量降低領域之位置、範圍、及亮度之中的至少任一者,基於藉由對操作畫面之操作而被生成的指定資訊而予以變更。
  14. 如請求項3所記載之資訊處理方法,其中, 隨應於前記物件與前記顯示器的位置關係,來調整前記光量降低領域之光量。
  15. 如請求項3所記載之資訊處理方法,其中, 隨應於攝影場景,來調整前記光量降低領域之光量。
  16. 如請求項3所記載之資訊處理方法,其中, 隨應於前記攝影機的焦點位置,來調整前記光量降低領域之光量。
  17. 如請求項3所記載之資訊處理方法,其中, 隨應於照射至前記物件的打光之強度,來調整前記光量降低領域之光量。
  18. 如請求項3所記載之資訊處理方法,其中, 令前記光量降低領域之位置與範圍之中的至少任一者,追隨於前記物件之移動而變化。
  19. 一種資訊處理系統,係具備: 顯示控制部,係對於顯示作為物件之背景的映像的顯示器,令其顯示出,在拍攝前記顯示器的顯示面之至少一部分之範圍的攝影機的攝影映像上前記物件所重疊之領域的光量已被降低的顯示映像。
  20. 一種程式,係用以令電腦執行以下處理: 對於顯示作為物件之背景的映像的顯示器,令其顯示出,在拍攝前記顯示器的顯示面之至少一部分之範圍的攝影機的攝影映像上前記物件所重疊之領域的光量已被降低的顯示映像。
TW111143151A 2021-12-10 2022-11-11 資訊處理方法、資訊處理系統、及程式 TW202332243A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021-201147 2021-12-10
JP2021201147 2021-12-10

Publications (1)

Publication Number Publication Date
TW202332243A true TW202332243A (zh) 2023-08-01

Family

ID=86730439

Family Applications (1)

Application Number Title Priority Date Filing Date
TW111143151A TW202332243A (zh) 2021-12-10 2022-11-11 資訊處理方法、資訊處理系統、及程式

Country Status (3)

Country Link
CA (1) CA3235231A1 (zh)
TW (1) TW202332243A (zh)
WO (1) WO2023106114A1 (zh)

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3608715B2 (ja) * 1998-08-31 2005-01-12 日立ソフトウエアエンジニアリング株式会社 画像合成装置および画像合成方法
JP3630015B2 (ja) * 1999-04-21 2005-03-16 セイコーエプソン株式会社 投写型表示装置及び情報記憶媒体
TW582015B (en) * 2000-06-30 2004-04-01 Nichia Corp Display unit communication system, communication method, display unit, communication circuit and terminal adapter
JP3993444B2 (ja) * 2002-02-22 2007-10-17 オリンパス株式会社 Ndフィルタの製造方法
JP2008097191A (ja) * 2006-10-10 2008-04-24 Fujifilm Corp 画像合成システム
JP2011259047A (ja) * 2010-06-07 2011-12-22 For-A Co Ltd 色補正装置と色補正方法とビデオカメラシステム
JP6794092B2 (ja) * 2015-03-03 2020-12-02 キヤノン株式会社 表示装置
JP2017098691A (ja) * 2015-11-20 2017-06-01 キヤノン株式会社 情報処理装置

Also Published As

Publication number Publication date
WO2023106114A1 (ja) 2023-06-15
CA3235231A1 (en) 2023-06-15

Similar Documents

Publication Publication Date Title
US11115633B2 (en) Method and system for projector calibration
US10708577B2 (en) Range-gated depth camera assembly
US9852339B2 (en) Method for recognizing iris and electronic device thereof
CN108648225B (zh) 目标图像获取系统与方法
CN108683902B (zh) 目标图像获取系统与方法
WO2019184183A1 (zh) 目标图像获取系统与方法
KR20110106317A (ko) 3d 감각과 함께 주변 광을 제공하기 위한 디스플레이 시스템, 제어 유닛, 방법, 및 컴퓨터 프로그램 제품
US20130162518A1 (en) Interactive Video System
US20100165000A1 (en) Visualizing objects of a video signal
US10321107B2 (en) Methods, systems, and computer readable media for improved illumination of spatial augmented reality objects
JP2022529417A (ja) 画像取得投影システム、該システムの使用及び画像取得投影挿入方法
TW202332243A (zh) 資訊處理方法、資訊處理系統、及程式
US20180095347A1 (en) Information processing device, method of information processing, program, and image display system
US20230386082A1 (en) Unified calibration between dvs and camera
JP2013026656A (ja) 撮影装置、撮影方法、および撮影プログラム
KR102495234B1 (ko) 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체
KR101292272B1 (ko) 컨텐츠의 지각 크기를 확장하는 장치 및 방법
US20180275774A1 (en) Display control device, display control system, display control method, and storage medium having stored thereon display control program
US20120044421A1 (en) Projector apparatus and method for dynamically masking objects
US11483470B2 (en) Control apparatus, control method, and recording medium
US20210144288A1 (en) Display system and display system control method
CN110286548B (zh) 一种舞台系统
US20230306613A1 (en) Image processing method and apparatus
US20230306611A1 (en) Image processing method and apparatus
US20230306612A1 (en) Image processing method and apparatus