JP2019050593A5 - Image processing apparatus, control method, and program - Google Patents

Image processing apparatus, control method, and program Download PDF

Info

Publication number
JP2019050593A5
JP2019050593A5 JP2018205144A JP2018205144A JP2019050593A5 JP 2019050593 A5 JP2019050593 A5 JP 2019050593A5 JP 2018205144 A JP2018205144 A JP 2018205144A JP 2018205144 A JP2018205144 A JP 2018205144A JP 2019050593 A5 JP2019050593 A5 JP 2019050593A5
Authority
JP
Japan
Prior art keywords
object area
image data
image
imaging
extraction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018205144A
Other languages
Japanese (ja)
Other versions
JP2019050593A (en
JP6827996B2 (en
Filing date
Publication date
Application filed filed Critical
Priority to JP2018205144A priority Critical patent/JP6827996B2/en
Priority claimed from JP2018205144A external-priority patent/JP6827996B2/en
Publication of JP2019050593A publication Critical patent/JP2019050593A/en
Publication of JP2019050593A5 publication Critical patent/JP2019050593A5/en
Application granted granted Critical
Publication of JP6827996B2 publication Critical patent/JP6827996B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

上記課題を解決するため、本発明に係る画像処理装置は、例えば以下の構成を有する。すなわち、デイジーチェーン接続された複数の画像処理装置を有するシステムにおける画像処理装置であって、第１の撮影装置による撮影により得られる画像からオブジェクト領域を抽出する抽出手段と、第２の撮影装置による撮影により得られた画像から他の画像処理装置により抽出されたオブジェクト領域に応じた画像データを取得する取得手段と、前記抽出手段による前記オブジェクト領域の抽出結果に応じた画像データと、前記取得手段により前記他の画像処理装置から取得された画像データとを送信する送信手段と、を有し、前記抽出手段による前記オブジェクト領域の抽出結果に応じた画像データと前記取得手段により取得された取得された画像データは、前記デイジーチェーン接続に従って、仮想視点画像を生成する装置に送信されることを特徴とする。 In order to solve the above-mentioned subject, an image processing device concerning the present invention has the following composition, for example. That is, an image processing apparatus in a system having a plurality of image processing apparatuses connected in a daisy chain, the extraction unit extracting an object area from an image obtained by the imaging by the first imaging apparatus , and the second imaging apparatus Acquisition means for acquiring image data according to an object area extracted by another image processing apparatus from an image obtained by photographing , image data according to the extraction result of the object area by the extraction means, and the acquisition means the other transmitting means for transmitting the image data obtained from the image processing apparatus, have a, the object region is acquired is acquired by the image data and the acquisition unit in accordance with the extraction result of by the extraction means by Image data is sent to a device for generating a virtual viewpoint image according to the daisy chain connection. Is the fact characterized.

Claims (15)

デイジーチェーン接続された複数の画像処理装置を有するシステムにおける画像処理装置であって、
第１の撮影装置による撮影により得られる画像からオブジェクト領域を抽出する抽出手段と、
第２の撮影装置による撮影により得られた画像から他の画像処理装置により抽出されたオブジェクト領域に応じた画像データを取得する取得手段と、
前記抽出手段による前記オブジェクト領域の抽出結果に応じた画像データと、前記取得手段により取得された画像データとを送信する送信手段と、を有し、
前記抽出手段による前記オブジェクト領域の抽出結果に応じた画像データと前記取得手段により取得された取得された画像データは、前記デイジーチェーン接続に従って、仮想視点画像を生成する装置に送信されることを特徴とする画像処理装置。 An image processing apparatus in a system having a plurality of image processing apparatuses connected in a daisy chain, comprising:
An extraction unit that extracts an object region from an image obtained by imaging by the first imaging device ;
An acquisition unit configured to acquire image data corresponding to an object area extracted by another image processing apparatus from an image obtained by imaging by the second imaging apparatus ;
Possess the image data corresponding to by the extraction result of the object area the extraction means, and transmission means for transmitting the acquired image data by the acquisition unit,
The image data according to the extraction result of the object area by the extraction unit and the acquired image data acquired by the acquisition unit are transmitted to a device for generating a virtual viewpoint image according to the daisy chain connection. the image processing apparatus according to. 仮想視点画像を生成するために複数の方向から撮影する複数の撮影装置に含まれる撮影装置による撮影により得られる画像からオブジェクト領域を抽出するオブジェクト抽出手段と、Object extraction means for extracting an object area from an image obtained by imaging with an imaging device included in a plurality of imaging devices for imaging from a plurality of directions in order to generate a virtual viewpoint image;
前記撮影装置による撮影により得られる画像から、少なくともオブジェクト領域とは異なる非オブジェクト領域を抽出する非オブジェクト抽出手段と、Non-object extraction means for extracting a non-object area different from at least an object area from an image obtained by imaging by the imaging apparatus;
前記オブジェクト領域の抽出結果に応じた画像データを圧縮して送信し、かつ前記オブジェクト領域の抽出結果に応じた画像データよりも圧縮強度が高い圧縮方式で、前記非オブジェクト領域の抽出結果に応じた画像データを圧縮して送信する送信手段と、を有することを特徴とする画像処理装置。Image data according to the extraction result of the object area is compressed and transmitted, and the compression method has a higher compression strength than the image data according to the extraction result of the object area according to the extraction result of the non-object area An image processing apparatus comprising: transmission means for compressing and transmitting image data. 仮想視点画像を生成するために複数の方向から撮影する複数の撮影装置に含まれる撮影装置による撮影により得られる画像からオブジェクト領域を抽出するオブジェクト抽出手段と、Object extraction means for extracting an object area from an image obtained by imaging with an imaging device included in a plurality of imaging devices for imaging from a plurality of directions in order to generate a virtual viewpoint image;
前記撮影装置による撮影により得られる画像から、少なくともオブジェクト領域とは異なる非オブジェクト領域を抽出する非オブジェクト抽出手段と、Non-object extraction means for extracting a non-object area different from at least an object area from an image obtained by imaging by the imaging apparatus;
前記オブジェクト領域の抽出結果に応じた画像データは圧縮せずに送信し、前記非オブジェクト領域の抽出結果に応じた画像データを圧縮して送信する送信手段と、を有することを特徴とする画像処理装置。And transmitting means for transmitting image data according to the extraction result of the object area without compression and compressing and transmitting the image data according to the extraction result of the non-object area. apparatus. 仮想視点画像を生成するために複数の方向から撮影する複数の撮影装置に含まれる撮影装置による撮影により得られる画像からオブジェクト領域を抽出するオブジェクト抽出手段と、Object extraction means for extracting an object area from an image obtained by imaging with an imaging device included in a plurality of imaging devices for imaging from a plurality of directions in order to generate a virtual viewpoint image;
前記撮影装置による撮影により得られる画像から、少なくともオブジェクト領域とは異なる非オブジェクト領域を抽出する非オブジェクト抽出手段と、Non-object extraction means for extracting a non-object area different from at least an object area from an image obtained by imaging by the imaging apparatus;
前記オブジェクト領域の抽出結果に応じた画像データよりも、前記非オブジェクト領域の抽出結果に応じた画像データの送信頻度が低くなるように、前記オブジェクト領域の抽出結果に応じた画像データと、前記非オブジェクト領域の抽出結果に応じた画像データとを送信する送信手段と、を有することを特徴とする画像処理装置。The image data according to the extraction result of the object area so that the transmission frequency of the image data according to the extraction result of the non-object area is lower than the image data according to the extraction result of the object area An image processing apparatus comprising: transmission means for transmitting image data according to an extraction result of an object area. 前記オブジェクト領域の抽出結果に応じた画像データと前記非オブジェクト領域の抽出結果に応じた画像データは、前記画像処理装置とは異なる他の画像処理装置、又は仮想視点画像を生成する装置に送信されることを特徴とする請求項２乃至４の何れか１項に記載の画像処理装置。The image data according to the extraction result of the object area and the image data according to the extraction result of the non-object area are transmitted to another image processing apparatus different from the image processing apparatus or an apparatus for generating a virtual viewpoint image The image processing apparatus according to any one of claims 2 to 4, characterized in that: 前記非オブジェクト領域の抽出結果に応じた画像データは、前記非オブジェクト領域の画像データであることを特徴とする請求項２乃至５の何れか１項に記載の画像処理装置。The image processing apparatus according to any one of claims 2 to 5, wherein the image data corresponding to the extraction result of the non-object area is image data of the non-object area. 前記複数の撮影装置の撮影タイミングを同期させるための同期手段をさらに有することを特徴とする請求項１乃至６のうち何れか１項に記載の画像処理装置。 The image processing apparatus according to what Re one wherein Chi sac claims 1 to 6, characterized in that it further comprises synchronizing means for synchronizing the photographing timing of the plurality of imaging devices. 前記オブジェクト領域の抽出結果に応じた画像データは、前記オブジェクト領域の画像データであることを特徴とする請求項１乃至７のうち何れか１項に記載の画像処理装置。The image processing apparatus according to any one of claims 1 to 7, wherein the image data corresponding to the extraction result of the object area is image data of the object area. 前記オブジェクト領域は、動体の領域を含むことを特徴とする請求項１乃至８のうち何れか１項に記載の画像処理装置。The image processing apparatus according to any one of claims 1 to 8, wherein the object area includes an area of a moving body. 人物とボールのうち少なくとも一方の領域は、前記オブジェクト領域に含まれることを特徴とする請求項１乃至９のうち何れか１項に記載の画像処理装置。The image processing apparatus according to any one of claims 1 to 9, wherein at least one of a person and a ball is included in the object region. デイジーチェーン接続された複数の画像処理装置を有するシステムにおける画像処理装置の制御方法であって、
第１の撮影装置による撮影により得られる画像からオブジェクト領域を抽出する抽出ステップと、
第２の撮影装置による撮影により得られた画像から他の画像処理装置により抽出されたオブジェクト領域に応じた画像データを取得する取得ステップと、
前記抽出ステップによる前記オブジェクト領域の抽出結果に応じた画像データを送信する第１の送信ステップと、
前記取得ステップにより取得された画像データを送信する第２の送信ステップと、を有し、
前記抽出ステップによる前記オブジェクト領域の抽出結果に応じた画像データと前記取得ステップにより取得された画像データは、前記デイジーチェーン接続に従って、仮想視点画像を生成する装置に送信されることを特徴とする制御方法。 A control method of an image processing apparatus in a system having a plurality of image processing apparatuses connected in a daisy chain , comprising:
An extraction step of extracting an object area from an image obtained by photographing by the first photographing device ;
An acquisition step acquire image data corresponding to the object area extracted by another image processing apparatus from an image obtained by photographing by the second imaging device,
A first transmission step of transmitting image data according to the extraction result of the object area by the extraction step;
Have a, a second transmission step of transmitting the retriever obtained been images data by said acquisition step,
The image data according to the extraction result of the object area in the extraction step and the image data acquired in the acquisition step are transmitted to a device that generates a virtual viewpoint image according to the daisy chain connection. Method. 画像処理装置の制御方法であって、A control method of the image processing apparatus,
仮想視点画像を生成するために複数の方向から撮影する複数の撮影装置に含まれる撮影装置による撮影により得られる画像からオブジェクト領域を抽出するオブジェクト抽出ステップと、An object extraction step of extracting an object area from an image obtained by photographing by a photographing device included in a plurality of photographing devices photographing from a plurality of directions in order to generate a virtual viewpoint image;
前記撮影装置による撮影により得られる画像から、少なくともオブジェクト領域とは異なる非オブジェクト領域を抽出する非オブジェクト抽出ステップと、A non-object extracting step of extracting a non-object area different from at least an object area from an image obtained by imaging by the imaging apparatus;
前記オブジェクト領域の抽出結果に応じた画像データを圧縮して送信する第１の送信ステップと、A first transmission step of compressing and transmitting image data according to the extraction result of the object area;
前記オブジェクト領域の抽出結果に応じた画像データよりも圧縮強度が高い圧縮方式にで、前記非オブジェクト領域の抽出結果に応じた画像データを圧縮して送信する第２の送信ステップと、を有することを特徴とする制御方法。And a second transmitting step of compressing and transmitting the image data according to the extraction result of the non-object area by a compression method having a compression strength higher than that of the image data according to the extraction result of the object area. Control method characterized by 画像処理装置の制御方法であって、A control method of the image processing apparatus,
仮想視点画像を生成するために複数の方向から撮影する複数の撮影装置に含まれる撮影装置による撮影により得られる画像からオブジェクト領域を抽出するオブジェクト抽出ステップと、An object extraction step of extracting an object area from an image obtained by photographing by a photographing device included in a plurality of photographing devices photographing from a plurality of directions in order to generate a virtual viewpoint image;
前記撮影装置による撮影により得られる画像から、少なくともオブジェクト領域とは異なる非オブジェクト領域を抽出する非オブジェクト抽出ステップと、A non-object extracting step of extracting a non-object area different from at least an object area from an image obtained by imaging by the imaging apparatus;
前記オブジェクト領域の抽出結果に応じた画像データを圧縮せずに送信する第１の送信ステップと、A first transmission step of transmitting image data according to the extraction result of the object area without compression;
前記非オブジェクト領域の抽出結果に応じた画像データを圧縮して送信する第２の送信ステップと、を有することを特徴とする制御方法。And D. a second transmission step of compressing and transmitting image data according to the extraction result of the non-object area. 画像処理装置の制御方法であって、A control method of the image processing apparatus,
仮想視点画像を生成するために複数の方向から撮影する複数の撮影装置に含まれる撮影装置による撮影により得られる画像からオブジェクト領域を抽出するオブジェクト抽出ステップと、An object extraction step of extracting an object area from an image obtained by photographing by a photographing device included in a plurality of photographing devices photographing from a plurality of directions in order to generate a virtual viewpoint image;
前記撮影装置による撮影により得られる画像から、少なくともオブジェクト領域とは異なる非オブジェクト領域を抽出する非オブジェクト抽出ステップと、A non-object extracting step of extracting a non-object area different from at least an object area from an image obtained by imaging by the imaging apparatus;
前記オブジェクト領域の抽出結果に応じた画像データを送信する第１の送信ステップと、A first transmission step of transmitting image data according to the extraction result of the object area;
前記オブジェクト領域の抽出結果に応じた画像データの送信頻度よりも低い送信頻度で、前記非オブジェクト領域の抽出結果に応じた画像データを送信する第２の送信ステップと、を有することを特徴とする制御方法。And transmitting the image data according to the extraction result of the non-object area at a transmission frequency lower than that of the image data according to the extraction result of the object area. Control method. コンピュータを、請求項１乃至１０のうち何れか１項に記載の画像処理装置として動作させるためのプログラム。 The computer program for operating with the image processing equipment according to what Re one wherein Chi 1 to 10 sac claims.
JP2018205144A 2018-10-31 2018-10-31 Image processing device, control method, and program Active JP6827996B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018205144A JP6827996B2 (en) 2018-10-31 2018-10-31 Image processing device, control method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018205144A JP6827996B2 (en) 2018-10-31 2018-10-31 Image processing device, control method, and program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2016104435A Division JP6429829B2 (en) 2016-05-25 2016-05-25 Image processing system, image processing apparatus, control method, and program

Publications (3)

Publication Number Publication Date
JP2019050593A JP2019050593A (en) 2019-03-28
JP2019050593A5 true JP2019050593A5 (en) 2019-06-20
JP6827996B2 JP6827996B2 (en) 2021-02-10

Family

ID=65905836

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018205144A Active JP6827996B2 (en) 2018-10-31 2018-10-31 Image processing device, control method, and program

Country Status (1)

Country Link
JP (1) JP6827996B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021149513A (en) 2020-03-19 2021-09-27 キヤノン株式会社 Image processing apparatus, image processing method, and program
JP7476160B2 (en) 2021-11-29 2024-04-30 キヤノン株式会社 Information processing device, information processing system, and program

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6573912B1 (en) * 2000-11-07 2003-06-03 Zaxel Systems, Inc. Internet system for virtual telepresence
JP2004246667A (en) * 2003-02-14 2004-09-02 Keiogijuku Method for generating free visual point moving image data and program for making computer perform the same processing
JP3731589B2 (en) * 2003-07-18 2006-01-05 ソニー株式会社 Imaging device and synchronization signal generator
JP2008077430A (en) * 2006-09-21 2008-04-03 Oki Electric Ind Co Ltd Mobile body counting device and mobile body counting method
JP2012023558A (en) * 2010-07-14 2012-02-02 Denso Corp Image display system
JP6246508B2 (en) * 2013-06-25 2017-12-13 グローリー株式会社 Moving body image extraction method and moving body image extraction apparatus
JP6156163B2 (en) * 2013-06-28 2017-07-05 株式会社Ｊｖｃケンウッド Image processing apparatus and image processing method
JP6194819B2 (en) * 2014-03-03 2017-09-13 Smk株式会社 Image processing system

Similar Documents

Publication Publication Date Title
JP2017211828A5 (en)
JP2017212593A5 (en) INFORMATION PROCESSING APPARATUS, IMAGE PROCESSING SYSTEM, CONTROL METHOD OF INFORMATION PROCESSING APPARATUS, GENERATION METHOD OF VIRTUAL VIEWPOINT IMAGE, AND PROGRAM
CN109313484B (en) Virtual reality interaction system, method and computer storage medium
JP2017212591A5 (en)
JP2019045995A5 (en)
EP2491989A3 (en) Information processing system, information processing method, information processing device and information processing program
JP2020086983A5 (en)
CN109525771B (en) Video distribution device, video distribution system, and video distribution method
JP2019050593A5 (en) Image processing apparatus, control method, and program
EP3361724A3 (en) System and method for generating a virtual viewpoint
JP2019114842A5 (en)
JP2019036790A5 (en)
JP2016503618A5 (en)
JP2019036791A5 (en) Image processing device and its control method, program
KR20210064113A (en) Image processing method and apparatus, image processing apparatus and storage medium
JP2018042237A5 (en)
CN108074219B (en) Image correction method and device and medical equipment
JP2020167472A5 (en)
WO2015089944A1 (en) Method and device for processing picture of video conference, and conference terminal
JP2020178305A (en) Information process system, information processor, information process method, and program
JP2019159593A5 (en) Information processing equipment, information processing methods, and programs
JP2016086245A (en) Image processing device, image processing system, image processing device control method, and program
JP2018088604A5 (en)
JP5864371B2 (en) Still image automatic generation system, worker information processing terminal, instructor information processing terminal, and determination device in still image automatic generation system
US11477370B2 (en) Method for reconstructing an output image and/or a sequence of output images from raw image data, image recording device, image recording system, and overall system