JP6358847B2 - 表示処理装置および撮像装置 - Google Patents

表示処理装置および撮像装置 Download PDF

Info

Publication number
JP6358847B2
JP6358847B2 JP2014100684A JP2014100684A JP6358847B2 JP 6358847 B2 JP6358847 B2 JP 6358847B2 JP 2014100684 A JP2014100684 A JP 2014100684A JP 2014100684 A JP2014100684 A JP 2014100684A JP 6358847 B2 JP6358847 B2 JP 6358847B2
Authority
JP
Japan
Prior art keywords
display
image data
display processing
image
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014100684A
Other languages
English (en)
Other versions
JP2015220498A (ja
Inventor
隆輔 土田
隆輔 土田
上野 晃
晃 上野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2014100684A priority Critical patent/JP6358847B2/ja
Priority to US14/683,459 priority patent/US9569160B2/en
Publication of JP2015220498A publication Critical patent/JP2015220498A/ja
Application granted granted Critical
Publication of JP6358847B2 publication Critical patent/JP6358847B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/04Synchronising
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1431Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using a single graphics controller
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/60Memory management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/18Timing circuits for raster scan displays
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39Control of the bit-mapped memory
    • G09G5/393Arrangements for updating the contents of the bit-mapped memory
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas
    • G09G2340/0414Vertical resolution change

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Studio Devices (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Description

本発明は、表示処理装置および撮像装置に関する。
静止画用カメラや動画用カメラなどの撮像装置は、一般的に、撮影した画像を表示デバイスに表示させる機能を備えている。ここで、表示デバイスには、例えば、TFT(薄膜トランジスター:Thin Film Transistor)液晶ディスプレイ(LCD:Liquid Crystal Display)や、EVF(Electronic View Finder:電子ビューファインダ)など、撮像装置に搭載される表示デバイスがある。また、その他にも、テレビ(TV:TeleVision)、TFTモニタ、有機EL(Electro Luminescence)ディスプレイなど、撮像装置に接続される外部の表示デバイス(外部ディスプレイ)もある。このように、撮像装置が撮影した画像を表示させる表示デバイスには、フレームレートや解像度が異なる様々な形式のものがある。このため、撮像装置に備えられ、表示デバイスに表示する画像信号を出力する表示処理装置には、様々な形式の表示デバイスに画像信号を出力することができるように対応することが求められている。また、表示処理装置の中には、同時に複数の表示デバイスに画像信号を出力することができるようにするため、複数の表示処理部を備えた構成を採用しているものもある。
また、近年、表示デバイスの高精細化が進み、例えば、テレビでは、従来のVGA(640×480)サイズのテレビに対して高精細化したフルHD(1920×1080)サイズのテレビ(HDTV:High Definition TeleVision)が主流になっている。また、最近では、さらに高精細化した4K2K(3840×2160)サイズのテレビ(UHDTV:Ultra High Definition TeleVision)も実用化されてきている。このため、撮像装置に備えられる表示処理装置には、さらなる高性能化が求められている。
ここで、例えば、フルHDサイズで60フレーム/秒(fps)の画像信号を出力する表示処理装置を、フレームレートをそのまま(つまり、60fps)で、4K2Kサイズの画像信号を出力することができるように対応させる場合を考える。この場合、フルHDサイズと4K2Kサイズとでは、表示する画素数が4倍であるため、表示処理装置が動作するクロック(動作クロック)の周波数も、4倍の周波数が必要になってしまう。すると、表示処理装置は、動作クロックの周波数が高くなったことによって、消費電力が増大してしまうことになる。また、表示処理装置の開発においては、高くなった動作クロックの周波数に対応するため、表示処理装置内のそれぞれの構成要素、つまり、表示処理装置の機能を実現するための回路の動作タイミングを最適化することが難しくなり、容易に表示処理装置を開発することが困難になってしまう。
そこで、例えば、特許文献1のように、1フレームの画像の全体の領域を複数に分けて並列に処理する表示処理装置の技術が開示されている。特許文献1で開示された技術では、表示処理装置内に2つの表示処理部を備え、表示する1フレームの画像の領域を左右の2つに分けて、それぞれの表示処理部が、左側半分の画像と右側半分の画像とのそれぞれを並列に処理する。そして、特許文献1で開示された技術では、2つの画像信号を並列に入力することができる表示デバイスに、それぞれの表示処理部が処理した画像信号を並列に入力することによって、1フレームの画像の全体を表示させている。
このように、特許文献1で開示された技術では、1フレームの画像の領域を複数に分けることによって、それぞれの表示処理部が処理を行う画像の領域の増大を抑え、それぞれの領域に対応する複数の表示処理部が、対応するそれぞれの画像の領域に対する処理を並列に行うことによって、高精細化した画像を表示デバイスに表示させている。
この特許文献1で開示された技術の考え方を利用することによって、フルHDサイズの画像信号を出力する表示処理装置を、4K2Kサイズの画像信号を出力することができるように対応させることができる。より具体的には、表示処理装置内に、2つのフルHDサイズに対応する表示処理部を備え、4K2Kサイズの画像を左右に2つに分けて、それぞれの表示処理部が、左側半分の画像と右側半分の画像とのそれぞれを並列に処理する。これにより、それぞれの表示処理部が処理を行う画像の領域を1/2にすることができ、それぞれの表示処理部の動作クロックの周波数を2倍の周波数にするのみで、4K2Kサイズの画像信号を出力する表示処理装置を実現することができる。
特開2006−053527号公報
しかしながら、特許文献1で開示された技術は、2つ画像信号を並列に入力することができる表示デバイス、つまり、画像信号の入力系統を2系統備えている表示デバイスが前提となっている技術である。つまり、特許文献1で開示された技術の考え方を利用することができるシステムは、画像信号を出力する撮像装置と、画像信号に応じた画像を表示する表示デバイスとのそれぞれが、2系統に対応している必要がある。
ところが、ほとんどの一般的な表示デバイスには、入力系統を1系統しか備えていない。このため、特許文献1で開示された技術の考え方を利用した4K2Kサイズの画像への対応は、入力系統を1系統しか備えていない一般的な表示デバイスで構成されたシステムに対して容易に適用することができない。つまり、特許文献1に開示された技術は、4K2Kサイズの画像に対応する全てのシステムに対して必ずしも有効であるとはいえない。
本発明は、上記の課題認識に基づいてなされたものであり、高精細な画像の画像信号を出力する場合でも、表示デバイスが備える画像信号の入力系統に依存せず、動作クロックの周波数を抑えることができる表示処理装置および撮像装置を提供することを目的としている。
上記の課題を解決するため、本発明の表示処理装置は、入力された予め定めた第1の大きさの表示画像の画像データに対して予め定めた表示処理を施す表示処理装置であって、前記第1の大きさよりも大きい第2の大きさの表示画像が入力されると、該表示画像の奇数列の表示画像データに対して前記表示処理を施した第1の出力画像の画像データを出力する第1の表示処理部と、前記第2の大きさの表示画像の偶数列の表示画像データに対して前記表示処理を施した第2の出力画像の画像データを出力する第2の表示処理部と、前記第1の出力画像の画像データまたは前記第2の出力画像の画像データを選択し、該選択した画像データを、前記第2の大きさの表示画像を表示する第1の表示デバイスに出力する出力選択部と、前記第1の表示処理部および前記第2の表示処理部が動作するための動作クロックを生成して供給するクロック制御部と、を備え、前記第1の表示処理部は、前記奇数列の表示画像データを同期信号に同期して取得すると共に、前記偶数列の表示画像データを同期信号に同期して取得を開始するタイミングを前記第2の表示処理部に通知し、前記第1の表示処理部は、前記クロック制御部から供給された前記動作クロックに基づいて、前記第1の表示デバイスが前記出力選択部から出力された画像データに応じた画像を表示するための同期信号を生成して出力すると共に、前記奇数列の表示画像データのDMAによる取得を開始する第1のタイミングを表す第1のトリガ信号、および前記偶数列の表示画像データのDMAによる取得を開始する第2のタイミングを表す第2のトリガ信号を生成して出力する第1の同期信号生成ブロックと、前記第1のトリガ信号に応じて、前記奇数列の表示画像データをDMAによって取得する第1の入力制御ブロックと、前記第1の入力制御ブロックが取得した前記奇数列の表示画像データに対して前記表示処理を施した前記第1の出力画像の画像データを出力する第1の表示処理ブロックと、を備え、前記第2の表示処理部は、前記クロック制御部から供給された前記動作クロックに基づいて、当該第2の表示処理部が単独で対応する第2の表示デバイスが、当該第2の表示処理部が出力した画像データに応じた画像を表示するための同期信号を生成すると共に、当該第2の表示処理部が単独で対応する前記第1の大きさの表示画像の画像データのDMAによる取得を開始する第3のタイミングを表す第3のトリガ信号を生成して出力する第2の同期信号生成ブロックと、前記第2のトリガ信号または前記第3のトリガ信号のいずれか一方のトリガ信号を選択し、該選択したトリガ信号を第4のトリガ信号として出力する同期信号選択ブロックと、前記第4のトリガ信号に応じて、前記偶数列の表示画像データまたは当該第2の表示処理部が単独で対応する前記第1の大きさの表示画像の画像データをDMAによって取得する第2の入力制御ブロックと、前記第2の入力制御ブロックが取得した前記偶数列の表示画像データまたは当該第2の表示処理部が単独で対応する前記第1の大きさの表示画像の画像データに対して前記表示処理を施した前記第2の出力画像の画像データを出力する第2の表示処理ブロックと、を備える、ことを特徴とする。
また、本発明の撮像装置は、上記本発明の表示処理装置、を備える、ことを特徴とする。
本発明によれば、高精細な画像の画像信号を出力する場合でも、表示デバイスが備える画像信号の入力系統に依存せず、動作クロックの周波数を抑えることができるという効果が得られる。
本発明の実施形態における表示処理装置を搭載したシステムの構成の一例を示したブロック図である。 本実施形態の表示処理装置の概略構成を示したブロック図である。 本実施形態の表示処理装置において画像を分割して処理する場合の一例を模式的に示した図である。 本実施形態の表示処理装置において画像を処理する第1の動作の一例を示した図である。 本実施形態の表示処理装置において画像を処理する第2の動作の一例を示した図である。
以下、本発明の実施形態について、図面を参照して説明する。図1は、本実施形態における表示処理装置を搭載したシステムの構成の一例を示したブロック図である。なお、本実施形態の表示処理装置を適用するシステムの構成に関しては、何ら限定しない。図1には、撮像装置のシステムに本実施形態の表示処理装置を適用した構成を示している。
図1に示した撮像装置1のシステムは、撮像センサ10と、画像処理装置20と、テレビ(TV)31と、EVF32と、TFT液晶ディスプレイ(TFT−LCD)33とから構成される。撮像装置1は、撮像センサ10によって撮影した画像を、接続された表示デバイス(テレビ31、EVF32、TFT液晶ディスプレイ33)のそれぞれに表示させる。
撮像センサ10は、図示しないレンズによって結像された被写体の光学像を光電変換するCCD(Charge Coupled Device:電荷結合素子)イメージセンサや、CMOS(Complementary Metal−Oxide Semiconductor:相補型金属酸化膜半導体)イメージセンサに代表されるイメージセンサである。撮像センサ10は、被写体光に応じた画素信号を画像処理装置20に出力する。
画像処理装置20は、撮像センサ10から入力された画素信号に対して、予め定めた画像処理を行う。そして、画像処理装置20は、画像処理を行った後の画像に対して、接続されたテレビ31、EVF32、TFT液晶ディスプレイ33のそれぞれに合わせた表示処理を行って表示させる。画像処理装置20は、撮像処理部21、画像処理部22、および表示処理装置23を備えている。また、画像処理装置20内では、撮像処理部21、画像処理部22、および表示処理装置23のそれぞれが、DMA(Direct Memory Access)バス25を介してそれぞれ接続されている。そして、撮像処理部21、画像処理部22、および表示処理装置23のそれぞれは、画像処理装置20の外部に備えられ、DMAバス25に接続されたDRAM(Dynamic Random Access Memory)(不図示)などの一時記憶用のメモリへのデータの書き込みやデータの読み出しを、DMAによって行う。つまり、画像処理装置20内の撮像処理部21、画像処理部22、および表示処理装置23のそれぞれは、DMAバス25に接続された外部のDRAM(不図示)を介して、処理を行う画像データをそれぞれの構成要素の間でやり取りする。
撮像処理部21は、撮像センサ10から入力された画素信号に応じた画像に対して、キズ補正やシェーディング補正などの前処理を施し、前処理した結果の画像データ(以下、「前処理画像データ」という)を、DMAによってDRAM(不図示)に転送する(書き込む)。
画像処理部22は、DRAM(不図示)に記録されている前処理画像データをDMAによって取得し(読み出し)、ノイズ除去、YC変換処理、リサイズ処理などの各種の画像処理を施して、表示用の画像データ(以下、「表示画像データ」という)を生成する。そして、画像処理部22は、生成した表示画像データを、DMAによってDRAM(不図示)に転送する(書き込む)。
なお、撮像装置1では、画像処理部22が、前処理画像データに対して、JPEG圧縮処理、およびMPEG圧縮処理やH.264圧縮処理等の動画圧縮処理などの各種の画像処理を施すことによって記録用の画像データを生成し、撮像装置1に着脱可能な構成の記録媒体(例えば、SDメモリカード(SD Memory Card)やコンパクトフラッシュ(CompactFlash:CF(登録商標))など)に、生成した記録用の画像データを記録させることもできる。このときも、画像処理部22が生成した記録用の画像データは、DRAM(不図示)を介して、記録媒体に記録される。このため、撮像装置1では、記録媒体に記録された記録用の画像データが読み出されて、DRAM(不図示)に転送されている(書き込みされている)場合もある。この場合、画像処理部22は、DRAM(不図示)に記録されている記録用の画像データをDMAによって取得し(読み出し)、JPEG伸張処理、MPEG伸張処理やH.264伸張処理等の動画伸張処理などの各種の画像処理を施すことによって表示画像データを生成し、生成した表示画像データを、再びDMAによってDRAM(不図示)に転送する(書き込む)こともできる。
表示処理装置23は、DRAM(不図示)に記録されている表示画像データをDMAによって取得し(読み出し)、取得した表示画像データに、OSD(On−Screen Display)表示用のデータを重畳する処理、接続された表示デバイスに対応する色変換処理などの表示処理を施す。そして、表示処理装置23は、表示処理後の表示画像データ(以下、「出力画像データ」という)を、テレビ31、EVF32、TFT液晶ディスプレイ33などの表示デバイスに出力する。
なお、本実施形態の表示処理装置23は、図1に示したように、撮像装置1に搭載した画像処理装置20に内蔵される構成であってもよいが、例えば、撮像装置1に単独で搭載される構成であってもよい。
表示処理装置23は、3つの表示処理部231〜表示処理部233を備えている。なお、以下の説明においては、表示処理部231〜表示処理部233のそれぞれを区別しない場合には、「表示処理部230」という。
表示処理部231〜表示処理部233のそれぞれは、接続されている表示デバイスに表示させる表示画像データを、DMAによってDRAM(不図示)から取得し(読み出し)、取得した表示画像データに対して表示処理を施す。そして、表示処理部231〜表示処理部233のそれぞれは、表示処理後の出力画像データを、接続された表示デバイスに出力する。図1に示した撮像装置1のシステムでは、表示処理部231にテレビが接続され、表示処理部232にEVF32が接続され、表示処理部233にTFT液晶ディスプレイ33が接続されている構成を示している。なお、表示処理部231〜表示処理部233のそれぞれは、同じ構成を備えている。つまり、表示処理部231〜表示処理部233のそれぞれは、いずれの表示処理部230であっても、接続されたいずれの表示デバイスに画像を表示させることができる。
なお、本実施形態の表示処理装置23および表示処理部230のそれぞれの構成および動作に関する詳細な説明は、後述する。
テレビ31は、フルHD(1920×1080)の大きさ(サイズ)の画像を表示するテレビ(HDTV:High Definition TeleVision)である。テレビ31は、表示処理部231から出力された表示処理後の出力画像データに応じた画像を表示する。なお、図1においては、テレビ31も撮像装置1の構成要素としているが、テレビ31は、撮像装置1に着脱可能な構成である。
EVF32は、例えば、TFT液晶ディスプレイTFT(薄膜トランジスター:Thin Film Transistor)液晶ディスプレイ(LCD:Liquid Crystal Display)や有機EL(Electro Luminescence)ディスプレイなどの小型の表示デバイスである。EVF32は、表示処理部232から出力された表示処理後の出力画像データに応じた画像を表示する。EVF32は、撮像センサ10によって撮影している画像を確認するために撮像装置1に搭載されたビューファインダとして動作する。
TFT液晶ディスプレイ33は、中型の表示デバイスである。TFT液晶ディスプレイ33は、表示処理部233から出力された表示処理後の出力画像データに応じた画像を表示する。なお、図1においては、TFT液晶ディスプレイ33も撮像装置1の構成要素としているが、TFT液晶ディスプレイ33は、撮像装置1に着脱可能な構成であってもよい。
このような構成によって、撮像装置1は、撮像センサ10によって撮影した画像を、複数の表示デバイスに表示させることができる。つまり、撮像装置1は、画像処理装置20に備えた表示処理装置23内の表示処理部230の数と同じ数の表示デバイスに、同時に表示処理後の出力画像データに応じた画像を表示させることができる。
また、撮像装置1には、例えば、4K2K(3840×2160)の大きさ(サイズ)の画像を表示するテレビ(UHDTV:Ultra High Definition TeleVision)のように、表示する画素数が多い表示デバイスを接続することもできる。つまり、撮像装置1には、表示処理装置23内のそれぞれの表示処理部230が対応する画素数よりも多い画素数の表示デバイスを接続することができる。この場合、撮像装置1は、複数の表示処理部230が連携して並列に動作することによって、画素数の多い画像を表示する表示デバイスに、表示処理後の出力画像データに応じた画像を表示させる。ただし、複数の表示処理部230が連携して並列に動作する場合、それぞれの表示処理部230に接続され、それぞれの表示処理部230が単独で画像を表示させることができる表示デバイスへの表示処理後の出力画像データの出力と、連携して並列に動作することによって画像を表示させることができる表示デバイスへの表示処理後の出力画像データの出力とは、排他的となる。
次に、本実施形態の表示処理装置23の構成および動作について説明する。図2は、本実施形態の表示処理装置23の概略構成を示したブロック図である。以下の説明においては、画像処理装置20に備えた表示処理装置23内に、フルHD(1920×1080)の大きさ(サイズ)の画像を表示する表示デバイスに対応した2つの表示処理部231および表示処理部232を備え、表示処理部231と表示処理部232とが連携して、4K2K(3840×2160)の大きさ(サイズ)の画像を表示する表示デバイスに、出力画像データを出力する構成および動作について説明する。
図2に示した表示処理装置23は、表示処理部231と、表示処理部232と、クロック制御部234と、出力選択部235とを備えている。表示処理装置23には、表示処理部231と表示処理部232とが連携して画像を表示させる4K2K(3840×2160)サイズの画像を表示する4Kテレビ(4K−TV)310と、表示処理部232が単独で画像を表示させるEVF32とが接続されている。
4Kテレビ310は、4K2K(3840×2160)サイズの画像を表示するテレビである。4Kテレビ310は、表示処理装置23から出力された表示処理後の出力画像データに応じた画像を表示する。なお、4Kテレビ310は、撮像装置1に着脱可能な構成である。
表示処理部231および表示処理部232は、接続されている表示デバイスに表示させるそれぞれのフレームの表示画像データを、DMAによってDMAバス25に接続されたDRAM(不図示)から順次取得する(読み出す)。そして、表示処理部231および表示処理部232は、順次取得した表示画像データに対して表示処理を施した出力画像データを、接続された表示デバイスに順次出力する。このとき、表示処理部231と表示処理部232とのそれぞれは、表示デバイスに表示させるそれぞれのフレームの表示画像データを、DMAによってDRAM(不図示)から1行(ライン)毎に順次取得し(読み出し)、取得したそれぞれのライン毎に表示処理を施した出力画像データを、接続された表示デバイスに順次出力する。
図2に示した表示処理装置23では、上述したように、4Kテレビ310に表示させる表示画像データに対する表示処理を、表示処理部231と表示処理部232とが連携して並列に行う。より具体的には、4Kテレビ310に表示させる表示画像データを列毎に2つに分割し、分割した一方の表示画像データに対する表示処理を表示処理部231が行い、分割した他方の表示画像データに対する表示処理を表示処理部232が行う。さらに詳細には、4Kテレビ310に表示させる1フレームの表示画像データを奇数列の画素のデータで構成される表示画像データと偶数列の画素のデータで構成される表示画像データとの2つに分割し、奇数列の画素のデータで構成される表示画像データに対する表示処理を表示処理部231が行い、偶数列の画素のデータで構成される表示画像データに対する表示処理を表示処理部232が行う。
表示処理部231は、同期信号生成ブロック2311と、入力制御ブロック2312と、表示処理ブロック2313とを備えている。また、表示処理部232は、同期信号生成ブロック2321と、入力制御ブロック2322と、表示処理ブロック2323と、同期信号選択ブロック2324とを備えている。
同期信号生成ブロック2311は、クロック制御部234から供給された動作クロックに基づいて、表示処理部231に接続された表示デバイスに、出力画像データに応じた画像を表示させるタイミングを表す、例えば、垂直同期信号Vや水平同期信号Hなどの同期信号を生成する。そして、同期信号生成ブロック2311は、生成した同期信号を、表示処理部231に接続された表示デバイスに出力する。また、同期信号生成ブロック2311は、生成した同期信号を、出力選択部235に出力する。
また、同期信号生成ブロック2311は、生成した同期信号に基づいて、表示処理部231に接続された表示デバイスに表示させる1フレームの表示画像データをDRAM(不図示)から取得して表示処理を開始するタイミング、すなわち、DMAを開始するタイミングを表すトリガ信号TG1を生成し、生成したトリガ信号TG1を入力制御ブロック2312に出力する。このトリガ信号TG1は、1フレームの表示画像データにおける最初の画素、つまり、画像の左上の画素に対応する表示画像データのDRAM(不図示)からの取得を開始するタイミングを表す。
また、同期信号生成ブロック2311は、生成した同期信号に基づいて、連携して動作する他の表示処理部230が、対応する表示画像データをDRAM(不図示)から取得して表示処理を開始するタイミング、すなわち、DMAを開始するタイミングを表すトリガ信号TG1aを生成し、生成したトリガ信号TG1aを他の表示処理部230内の同期信号選択ブロックに出力する。図2に示した構成では、同期信号生成ブロック2311は、表示処理部232が対応する表示画像データを取得するためのトリガ信号TG1aを、表示処理部232内の同期信号選択ブロック2324に出力する。このトリガ信号TG1aを出力するタイミングは、連携して動作する他の表示処理部230が対応する列の画素のデータで構成される表示画像データにおける最初の画素に対応する表示画像データのDRAM(不図示)からの取得を開始するタイミングを表す。
なお、表示処理部231と表示処理部232とが連携して並列に動作する場合、表示処理を行う対象の表示画像データを、表示処理部231と表示処理部232とのそれぞれが同期して取得する。このため、同期信号生成ブロック2311が生成するトリガ信号TG1とトリガ信号TG1aとは、同じタイミングを表すトリガ信号であってもよい。
入力制御ブロック2312は、同期信号生成ブロック2311から入力されたトリガ信号TG1に応じて、表示処理部231が表示処理を行う表示画像データを取得するためのDMAを開始する。そして、入力制御ブロック2312は、DMAによってDRAM(不図示)から取得した(読み出した)表示画像データを、予め定めたタイミングから、表示処理ブロック2313に出力する。
なお、表示処理部231と表示処理部232とが連携して4Kテレビ310に表示させる表示画像データに対して表示処理を行う場合には、入力制御ブロック2312は、4Kテレビ310に表示させる表示画像データの内、奇数列の画素のデータで構成される表示画像データ(以下、「奇数列表示画像データ」という)をDRAM(不図示)から取得して(読み出して)、表示処理ブロック2313に出力する。なお、入力制御ブロック2312が取得した表示画像データを予め定めたタイミングから表示処理ブロック2313に出力するために行うタイミングの調整は、例えば、入力制御ブロック2312内に備えたバッファ部によって行う。
表示処理ブロック2313は、入力制御ブロック2312から入力された表示画像データに対して表示処理を施した出力画像データを、出力選択部235に出力する。なお、表示処理部231と表示処理部232とが連携して4Kテレビ310に表示させる表示画像データの表示処理を行う場合には、表示処理ブロック2313は、入力制御ブロック2312から入力された奇数列表示画像データに対して表示処理を施した後の出力画像データを、出力選択部235に出力する。
同期信号生成ブロック2321は、表示処理部231内の同期信号生成ブロック2311と同様に、クロック制御部234から供給された動作クロックに基づいて、表示処理部232に接続された表示デバイスに、出力画像データに応じた画像を表示させるタイミングを表す同期信号(例えば、垂直同期信号Vや水平同期信号Hなど)を生成する。そして、同期信号生成ブロック2321は、生成した同期信号を、表示処理部232に接続された表示デバイスに出力する。
また、同期信号生成ブロック2321は、表示処理部231内の同期信号生成ブロック2311と同様に、生成した同期信号に基づいて、表示処理部232に接続された表示デバイスに表示させる1フレームの表示画像データをDRAM(不図示)から取得して表示処理を開始するタイミング、すなわち、DMAを開始するタイミングを表すトリガ信号TG2を生成し、生成したトリガ信号TG2を同期信号選択ブロック2324に出力する。このトリガ信号TG2は、例えば、表示処理部232に接続されたEVF32に出力する1フレームの表示画像データにおける最初の画素、つまり、画像の左上の画素に対応する表示画像データのDRAM(不図示)からの取得を開始するタイミングを表す。
同期信号選択ブロック2324は、同期信号生成ブロック2321から入力されたトリガ信号TG2と、表示処理部231内の同期信号生成ブロック2311から入力されたトリガ信号TG1aとのいずれか一方のトリガ信号を選択し、選択したトリガ信号TGを、入力制御ブロック2322に出力する。
なお、同期信号選択ブロック2324は、表示処理部232が単独で、接続されたEVF32に画像を表示させる場合には、同期信号生成ブロック2321から入力されたトリガ信号TG2をトリガ信号TGとして入力制御ブロック2322に出力する。また、同期信号選択ブロック2324は、表示処理部231と表示処理部232とが連携して4Kテレビ310に画像を表示させる場合には、表示処理部231内の同期信号生成ブロック2311から入力されたトリガ信号TG1aをトリガ信号TGとして入力制御ブロック2322に出力する。
入力制御ブロック2322は、表示処理部231内の入力制御ブロック2312と同様に、同期信号選択ブロック2324から入力されたトリガ信号TGに応じて、表示処理部232が表示処理を行う表示画像データを取得するためのDMAを開始する。そして、入力制御ブロック2322は、DMAによってDRAM(不図示)から取得した(読み出した)表示画像データを、予め定めたタイミングから、表示処理ブロック2323に出力する。
なお、表示処理部232が単独でEVF32に表示させる表示画像データに対して表示処理を行う場合には、入力制御ブロック2322は、EVF32に表示させる表示画像データ(以下、「EVF表示画像データ」という)をDRAM(不図示)から取得して(読み出して)、表示処理ブロック2323に出力する。また、表示処理部231と表示処理部232とが連携して4Kテレビ310に表示させる表示画像データに対して表示処理を行う場合には、入力制御ブロック2322は、4Kテレビ310に表示させる表示画像データの内、偶数列の画素のデータで構成される表示画像データ(以下、「偶数列表示画像データ」という)をDRAM(不図示)から取得して(読み出して)、表示処理ブロック2323に出力する。
なお、入力制御ブロック2322が取得した表示画像データを予め定めたタイミングから表示処理ブロック2323に出力するために行うタイミングの調整も、表示処理部231内の入力制御ブロック2312と同様に、例えば、入力制御ブロック2322内に備えたバッファ部によって行う。ここで、入力制御ブロック2312が取得した表示画像データの表示処理ブロック2313への出力を開始するタイミングと、入力制御ブロック2322が取得した表示画像データの表示処理ブロック2323への出力を開始するタイミングとは、同じタイミングである。このため、表示処理部231と表示処理部232とが連携して4Kテレビ310に表示させる表示画像データに対して表示処理を行う場合において、表示処理ブロック2313が表示処理を開始するタイミングと、表示処理ブロック2323が表示処理を開始するタイミングとが同じタイミングになる。これにより、表示処理部231と表示処理部232とのそれぞれは、入力された表示画像データに対する表示処理を同時に行い、出力画像データを同じタイミングから出力することができる。つまり、表示処理部231と表示処理部232とのそれぞれは、奇数列表示画像データに対して表示処理を施した後の出力画像データと、偶数列表示画像データに対して表示処理を施した後の出力画像データとを、同じタイミングで出力することができる。
表示処理ブロック2323は、表示処理部231内の表示処理ブロック2313と同様に、入力制御ブロック2322から入力された表示画像データに対して表示処理を施した出力画像データを出力する。このとき、表示処理部232が単独でEVF32に表示させるEVF表示画像データに対して表示処理を行う場合には、表示処理ブロック2323は、入力制御ブロック2322から入力されたEVF表示画像データに対して表示処理を施した後の出力画像データを、EVF32に出力する。また、表示処理部231と表示処理部232とが連携して4Kテレビ310に表示させる表示画像データの表示処理を行う場合には、表示処理ブロック2323は、入力制御ブロック2322から入力された偶数列表示画像データに対して表示処理を施した後の出力画像データを、出力選択部235に出力する。
出力選択部235は、同期信号生成ブロック2311から入力された同期信号(例えば、垂直同期信号Vや水平同期信号Hなど)に基づいて、表示処理部231内の表示処理ブロック2313から出力された奇数列表示画像データに対して表示処理を施した後の出力画像データ、または表示処理部232内の表示処理ブロック2323から出力された偶数列表示画像データに対して表示処理を施した後の出力画像データを選択する。そして、出力選択部235は、選択した画像データを、接続された表示デバイスに出力する。
なお、出力選択部235は、表示処理部231と表示処理部232とが連携して4Kテレビ310に画像を表示させる場合に、同期信号生成ブロック2311が出力した同期信号(例えば、垂直同期信号Vや水平同期信号Hなど)に基づいて、4Kテレビ310が画像を表示する期間を判定する。そして、出力選択部235は、4Kテレビ310に画像を表示させる期間中にクロック制御部234が出力する、4Kテレビ310が画像内のそれぞれの画素を表示するクロックのタイミング毎に、奇数列表示画像データに対して表示処理を施した後の出力画像データ、または偶数列表示画像データに対して表示処理を施した後の出力画像データを順次選択する。そして、出力選択部235は、4Kテレビ310が画像内のそれぞれの画素を表示するクロックのそれぞれのタイミング毎に、選択した画像データを4Kテレビ310に順次出力する。このように、出力選択部235は、奇数列表示画像データに対して表示処理を施した後の出力画像データ、または偶数列表示画像データに対して表示処理を施した後の出力画像データのいずれか一方の画像データを順次選択して、4Kテレビ310に表示させる画像のそれぞれのラインの画像データを4Kテレビ310に順次出力する。これにより、4Kテレビ310に、奇数列表示画像データに対応する表示処理後の出力画像データと、偶数列表示画像データに対応する表示処理後の出力画像データとが合わさった出力画像データ、すなわち、4Kテレビ310に表示させる表示画像データに対して表示処理を行った後の出力画像データに応じた1つの画像が表示される。
また、出力選択部235は、表示処理装置23に表示処理部231が単独で画像を表示させるテレビ31が接続されている場合など、表示処理部231と表示処理部232とが連携して動作しない場合には、出力画像データの選択を行わず、表示処理部231内の表示処理ブロック2313が表示処理した後の出力画像データをそのまま、接続されたテレビ31に出力する。これにより、テレビ31に、表示処理部231内の表示処理ブロック2313から出力された表示処理後の出力画像データに応じた画像が表示される。
クロック制御部234は、表示処理装置23の備えたそれぞれの構成要素(表示処理部231、表示処理部232、および出力選択部235)が動作するのに適した周波数のクロックを生成し、生成したクロックをそれぞれの構成要素に供給する。
より具体的には、表示処理装置23に接続された表示デバイスが表示処理後の出力画像データに応じた画像を表示する際のクロック(以下、「表示デバイスクロック」という)を生成する。ここで、クロック制御部234が生成する表示デバイスクロックの周波数は、例えば、表示処理装置23に接続された表示デバイスが1画素分の画像を表示させるために必要な周期(周波数)のクロックである。表示デバイスクロックは、いわゆる、画素クロックに相当する。
例えば、表示処理装置23にフルHD(1920×1080)サイズの画像を表示するテレビ31が接続されている場合、クロック制御部234は、テレビ31が表示する画像内のそれぞれの画素を表示させるために必要な周波数の表示デバイスクロックを生成する。また、表示処理装置23にEVF32が接続されている場合、クロック制御部234は、EVF32がEVF表示画像データに応じた画像内のそれぞれの画素を表示させるために必要な周波数の表示デバイスクロックを生成する。また、表示処理装置23に4K2K(3840×2160)サイズの画像を表示する4Kテレビ310が接続されている場合、クロック制御部234は、4Kテレビ310が表示する画像内のそれぞれの画素を表示させるために必要な周波数の表示デバイスクロック、つまり、テレビ31が表示処理装置23に接続されている場合に生成する表示デバイスクロックの4倍の周波数の表示デバイスクロックを生成する。
そして、クロック制御部234は、生成した表示デバイスクロックに基づいて、それぞれの構成要素が動作するための動作クロックを生成し、生成した動作クロックを、それぞれの構成要素に供給する。ここで、クロック制御部234がそれぞれの構成要素に供給する動作クロックは、表示デバイスクロックと同じ位相のクロックである。例えば、表示処理部231が単独でテレビ31に画像を表示させ、表示処理部232が単独でEVF32に画像を表示させる場合には、クロック制御部234は、テレビ31に対応する表示デバイスクロックと、EVF32に対応する表示デバイスクロックとを生成する。そして、クロック制御部234は、テレビ31に対応する表示デバイスクロックに基づいて生成した同じ位相の動作クロックを表示処理部231に、EVF32に対応する表示デバイスクロックに基づいて生成した同じ位相の動作クロックを表示処理部232に、それぞれ供給する。なお、それぞれの表示デバイスクロックを、それぞれの動作クロックとしてもよい。
なお、表示処理装置23に4Kテレビ310が接続されている場合には、上述したように、クロック制御部234は、テレビ31に対応する表示デバイスクロックの4倍の周波数の表示デバイスクロックを生成する。しかし、表示処理装置23では、表示処理部231と表示処理部232とが連携して、4Kテレビ310に表示させる表示画像データに対する表示処理を行う。つまり、上述したように、表示処理装置23では、表示処理部231と表示処理部232とのそれぞれは、4Kテレビ310に表示させる表示画像データを列毎に2つに分割したいずれか一方の表示画像データに対する表示処理を行う。すなわち、表示処理部231と表示処理部232とのそれぞれが表示処理を行う表示画像データの数は1/2である。このため、表示処理部231と表示処理部232とのそれぞれは、テレビ31に対応する表示デバイスクロックの4倍の周波数の表示デバイスクロックの1/2の周波数の動作クロック、すなわち、テレビ31に対応する表示デバイスクロックの2倍の周波数の動作クロックであっても、同じ周期で動作を完了することができる。従って、クロック制御部234は、テレビ31に対応する表示デバイスクロックの2倍の周波数の動作クロックを、表示処理部231と表示処理部232とのそれぞれに供給する。
このような構成によって、本実施形態の表示処理装置23では、表示処理装置23内に備えた表示処理部230が対応しているサイズの画像よりも高精細な画像を表示する表示デバイスが接続された場合でも、複数の表示処理部230が連携して並列に動作することによって、それぞれの表示処理部230が動作する動作クロックの周波数を抑えた状態で、高精細な画像を表示する表示デバイスに対応することができる。そして、本実施形態の表示処理装置23では、それぞれの表示処理部230が動作する動作クロックの周波数を抑えることによって、本実施形態の表示処理装置23自体の消費電力の増大も抑えることができる。
次に、本実施形態の表示処理装置23が画像を列毎に分割して処理する動作について説明する。以下の説明においては、表示処理装置23が表示画像データを列毎に2つに分割し、分割したそれぞれの表示画像データに対して、2つの表示処理部230が連携して並列に表示処理を行う動作の一例について説明する。
まず、本実施形態の表示処理装置23が画像を分割して処理する動作の全体の流れについて説明する。図3は、本実施形態の表示処理装置23において画像を分割して処理する場合の一例を模式的に示した図である。
上述したように、表示処理装置23が表示画像データを列毎に2つに分割して表示処理を行う場合、表示処理部231と表示処理部232とが連携し、表示処理部231が奇数列の画素のデータで構成される奇数列表示画像データに対する表示処理を行い、表示処理を表示処理部232が偶数列の画素のデータで構成される偶数列表示画像データに対する表示処理を行う。図3の左側上段には、奇数列表示画像データに対する処理を示し、図3の左側下段には、偶数列表示画像データに対する処理を示している。
図3の左側上段に示したように、表示処理部231は、まず、入力制御ブロック2312がDMAによって奇数列表示画像データをDRAM(不図示)から取得し(読み出し)、表示処理ブロック2313に出力する。そして、表示処理ブロック2313は、入力制御ブロック2312から入力された奇数列表示画像データに対して表示処理を行い、表示処理後の出力画像データを出力選択部235に出力する。
また、図3の左側下段に示したように、表示処理部232は、まず、入力制御ブロック2322がDMAによって偶数列表示画像データをDRAM(不図示)から取得し(読み出し)、表示処理ブロック2323に出力する。そして、表示処理ブロック2323は、入力制御ブロック2322から入力された偶数列表示画像データに対して表示処理を行い、表示処理後の出力画像データを出力選択部235に出力する。
そして、出力選択部235は、表示処理部231から出力された奇数列表示画像データに対応する出力画像データと、表示処理部232から出力された偶数列表示画像データに対応する出力画像データとのそれぞれを、表示デバイスクロックのタイミングで順次選択し、表示処理装置23に接続された表示デバイスに順次出力する。
このように、表示処理装置23では、2つの表示処理部230が連携して並列に表示処理を行うことによって、それぞれの表示処理部230が単独では表示処理を行うことができないサイズの画像に対しても表示処理を行うことができる。このとき、表示処理装置23では、連携して動作する2つの表示処理部230のそれぞれが、表示画像データを列毎に2つに分割したいずれか一方の表示画像データに対して表示処理を行うため、それぞれの表示処理部230が動作する動作クロックの周波数を抑えた状態で表示処理を行うことができる。
次に、本実施形態の表示処理装置23が画像を列毎に分割して処理する場合において、表示処理装置23に接続された表示デバイスに備えた画像信号の入力系統の数に応じたそれぞれの構成要素の動作について説明する。なお、以下の説明においては、図2に示した、フルHD(1920×1080)サイズの画像を表示するテレビ31に対応した2つの表示処理部231および表示処理部232を備えた表示処理装置23に、4K2K(3840×2160)サイズの画像を表示する4Kテレビ310が接続され、表示処理部231と表示処理部232とが連携して、4Kテレビ310に表示処理後の出力画像データを出力する場合の動作について説明する。
<第1の動作>
図4は、本実施形態の表示処理装置23において画像を処理する第1の動作の一例を示した図である。図4に示した動作の一例は、画像信号の入力系統を1系統備えている4Kテレビ310に、表示処理部231と表示処理部232とが連携して表示処理を行った4K2K(3840×2160)サイズの表示処理後の出力画像データを出力する場合の動作である。図4には、表示処理装置23のブロック図上に、第1の動作におけるそれぞれの画像データの経路を示している。
第1の動作では、クロック制御部234が、表示処理装置23に接続された4Kテレビ310に画像を表示するための表示デバイスクロックを生成する。ここで、クロック制御部234が生成する表示デバイスクロックの周波数は、テレビ31が表示処理装置23に接続されている場合に生成する表示デバイスクロックの4倍の周波数のクロックである。そして、クロック制御部234は、生成した表示デバイスクロックを、出力選択部235に供給する。
また、クロック制御部234は、生成した表示デバイスクロックに基づいて、表示デバイスクロックの1/2の周波数の動作クロックを生成する。そして、クロック制御部234は、生成した動作クロックを、表示処理部231および表示処理部232に供給する。
そして、表示処理部231内の同期信号生成ブロック2311は、クロック制御部234から供給された動作クロックに基づいて、4Kテレビ310に表示処理後の出力画像データに応じた画像を表示させるための垂直同期信号Vおよび水平同期信号Hを生成する。そして、同期信号生成ブロック2311は、生成した垂直同期信号Vおよび水平同期信号Hを、出力選択部235および4Kテレビ310に出力する。
その後、同期信号生成ブロック2311は、垂直同期信号Vが、4Kテレビ310に1つのフレームの画像を表示するタイミングを表した後、水平同期信号Hが、出力画像データを出力する水平期間の開始を表すタイミング、つまり、4Kテレビ310に表示する1フレームの画像の1ライン目の開始を表すタイミングで、トリガ信号TG1を入力制御ブロック2312に出力する。これにより、入力制御ブロック2312は、同期信号生成ブロック2311から入力されたトリガ信号TG1に応じて、表示処理部231が表示処理を行う、1フレームの表示画像データの1ライン目から、奇数列表示画像データのそれぞれの画素のデータを取得するDMAを開始する(画像データ経路C1参照)。
また、同期信号生成ブロック2311は、トリガ信号TG1と同じタイミングのトリガ信号TG1aを、表示処理部232内の同期信号選択ブロック2324に出力する。そして、同期信号選択ブロック2324は、表示処理部231内の同期信号生成ブロック2311から入力されたトリガ信号TG1aを、トリガ信号TGとして入力制御ブロック2322に出力する。これにより、入力制御ブロック2322は、同期信号選択ブロック2324から入力されたトリガ信号TGに応じて、表示処理部232が表示処理を行う、1フレームの表示画像データの1ライン目から、偶数列表示画像データのそれぞれの画素のデータを取得するDMAを開始する(画像データ経路C2参照)。
このように、表示処理部231内の入力制御ブロック2312と、表示処理部232内の入力制御ブロック2322とのそれぞれが同期して、対応する列の表示画像データのそれぞれを、DMAによってDRAM(不図示)から取得する。
そして、入力制御ブロック2312は、DRAM(不図示)からDMAによって取得した奇数列表示画像データのそれぞれの画素のデータを、表示処理ブロック2313に出力する(画像データ経路C1参照)。これにより、表示処理ブロック2313は、入力制御ブロック2312から入力された奇数列表示画像データのそれぞれの画素のデータに対して表示処理を施した出力画像データを、出力選択部235に出力する(画像データ経路C1参照)。また、入力制御ブロック2322は、DRAM(不図示)からDMAによって取得した偶数列表示画像データのそれぞれの画素のデータを、表示処理ブロック2323に出力する(画像データ経路C2参照)。これにより、表示処理ブロック2323は、入力制御ブロック2322から入力された偶数列表示画像データのそれぞれの画素のデータに対して表示処理を施した出力画像データを、出力選択部235に出力する(画像データ経路C2参照)。
そして、出力選択部235は、表示処理部231内の同期信号生成ブロック2311から入力された垂直同期信号Vが、4Kテレビ310に1つのフレームの画像を表示するタイミングを表し、水平同期信号Hが、出力画像データを出力する水平期間の開始を表すタイミング、つまり、4Kテレビ310に表示する1フレームの画像の1ライン目のタイミングを表した後、最初の画素の画像データを出力するタイミングから、表示処理後のそれぞれの出力画像データの出力を開始する。このとき、出力選択部235は、表示処理部231内の同期信号生成ブロック2311から入力された表示デバイスクロックのタイミング、つまり、4Kテレビ310が画像を表示するタイミングで、それぞれの出力画像データを順次、4Kテレビ310に出力する。
出力選択部235における出力画像データの出力では、まず、4Kテレビ310に出力する1フレームの1ライン目における最初の画素のタイミングで、入力制御ブロック2312から入力された奇数列表示画像データに対する出力画像データを選択し、表示デバイスクロックのタイミングで4Kテレビ310に出力する(画像データ経路C1参照)。続いて、4Kテレビ310に出力する1フレームの1ライン目における次(2番目)の画素のタイミングで、入力制御ブロック2322から入力された偶数列表示画像データに対する出力画像データを選択し、表示デバイスクロックのタイミングで4Kテレビ310に出力する(画像データ経路C2参照)。さらに、4Kテレビ310に出力する1フレームの1ライン目におけるその次(3番目)の画素のタイミングで、入力制御ブロック2312から次に入力された奇数列表示画像データに対する出力画像データを選択し、表示デバイスクロックのタイミングで4Kテレビ310に出力する(画像データ経路C1参照)。このように、出力選択部235による出力画像データの出力では、入力制御ブロック2312から入力された奇数列表示画像データに対する出力画像データと、入力制御ブロック2322から入力された偶数列表示画像データに対する出力画像データとを、表示デバイスクロックのタイミング毎に交互に選択し、選択した画像データを、表示デバイスクロックのタイミングで4Kテレビ310に出力する。
これにより、出力選択部235から出力された1フレームの1ライン目の出力画像データに応じた画像が、4Kテレビ310に表示される。
また、入力制御ブロック2312は、1フレームの表示画像データの1ライン目の奇数列表示画像データのDMAによる取得が終了した後、引き続き、1フレームの表示画像データの2ライン目の奇数列表示画像データを取得するためのDMAを開始する(画像データ経路C1参照)。そして、入力制御ブロック2312は、DRAM(不図示)からDMAによって取得した奇数列表示画像データのそれぞれの画素のデータを、表示処理ブロック2313に出力する(画像データ経路C1参照)。また、入力制御ブロック2322は、1フレームの表示画像データの1ライン目の偶数列表示画像データのDMAによる取得が終了した後、引き続き、1フレームの表示画像データの2ライン目の偶数列表示画像データを取得するためのDMAを開始する(画像データ経路C2参照)。そして、入力制御ブロック2322は、DRAM(不図示)からDMAによって取得した偶数列表示画像データのそれぞれの画素のデータを、表示処理ブロック2323に出力する(画像データ経路C2参照)。
このように、入力制御ブロック2312と入力制御ブロック2322とのそれぞれは、対応する列の表示画像データを、ライン毎に順次、DMAによってDRAM(不図示)から取得し、取得した表示画像データを、ライン毎に順次、対応する入力制御ブロック2312または入力制御ブロック2322に出力する。これにより、表示処理ブロック2313と表示処理ブロック2323とのそれぞれは、対応する入力制御ブロック2312または入力制御ブロック2322から入力された、対応する列の表示画像データに対して表示処理を施し、表示処理後の出力画像データのそれぞれを、表示画像データのライン毎に順次、出力選択部235に出力する。
そして、出力選択部235は、表示処理部231内の同期信号生成ブロック2311から入力された水平同期信号Hが、出力画像データを出力する次の水平期間の開始を表すタイミング、つまり、4Kテレビ310に表示する1フレームの画像の2ライン目のタイミングを表した後、2ライン目の最初の画素の画像データを出力するタイミングから、表示処理後のそれぞれの出力画像データの出力を開始する。このとき、出力選択部235は、入力制御ブロック2312から入力された奇数列表示画像データに対する出力画像データと、入力制御ブロック2322から入力された偶数列表示画像データに対する出力画像データとのそれぞれを交互に選択し、4Kテレビ310が画像を表示するタイミング、つまり、表示デバイスクロックのタイミングで、4Kテレビ310に順次出力する。
これにより、出力選択部235から、1フレームの1ライン目以降の出力画像データが、4Kテレビ310に順次出力され、4Kテレビ310に、出力選択部235から出力された1フレームの1ライン目以降の出力画像データに応じた画像が表示される。
このように、第1の動作では、表示処理装置23に備えた、フルHD(1920×1080)サイズの表示画像データに対応した2つの表示処理部231および表示処理部232が連携して、奇数列表示画像データに対する表示処理と偶数列表示画像データに対する表示処理とを並列に行うことによって、4K2K(3840×2160)サイズの表示画像データに対する表示処理を行う。そして、表示処理装置23に備えた出力選択部235が、4K2K(3840×2160)サイズの画像を表示する表示デバイスクロックのタイミングで、表示処理装置23に接続された4Kテレビ310に、4K2K(3840×2160)サイズの表示処理後の出力画像データを出力する。このように、第1の動作では、表示処理部231と表示処理部232とが同期して、表示画像データに対する表示処理をリアルタイムに行い、表示処理装置23に接続された4Kテレビ310に、4K2K(3840×2160)サイズの表示処理後の出力画像データを出力する。
このとき、表示処理部231と表示処理部232とのそれぞれは、4K2K(3840×2160)サイズの画像を表示するための表示デバイスクロックの1/2の周波数の動作クロックで動作する。また、出力選択部235は、4K2K(3840×2160)サイズの画像を表示するための表示デバイスクロックで動作する。これにより、表示処理装置23では、4Kテレビ310に出力画像データを出力するための表示デバイスクロックの周波数が、接続された4Kテレビ310が1画素分の画像を表示させるために必要なクロックの周波数に応じて、フルHD(1920×1080)サイズの画像を表示するテレビ31の表示デバイスクロックの4倍の周波数になるが、4K2K(3840×2160)サイズの表示画像データに対する表示処理は、4Kテレビ310の表示デバイスクロックの1/2の周波数にすることができる。つまり、表示処理装置23に備えた表示処理部231および表示処理部232は、表示デバイスクロックの1/2の周波数で動作することができる。このことにより、表示処理装置23では、第1の動作によって、動作クロックの周波数を抑えた状態で、表示処理装置23内に備えた表示処理部231と表示処理部232とのそれぞれが対応するサイズの画像よりも高精細な画像に対する表示処理を行うことができる。
<第2の動作>
図5は、本実施形態の表示処理装置23において画像を処理する第2の動作の一例を示した図である。図5に示した動作の一例は、画像信号の入力系統を2系統備えている4Kテレビ310に、表示処理部231と表示処理部232とが連携して表示処理を行った4K2K(3840×2160)サイズの表示処理後の出力画像データを出力する場合の動作である。図5には、表示処理装置23のブロック図上に、第2の動作におけるそれぞれの画像データの経路を示している。
第2の動作でも、第1の動作と同様に、クロック制御部234が、表示処理装置23に接続された4Kテレビ310に画像を表示するための表示デバイスクロック、つまり、テレビ31が表示処理装置23に接続されている場合に生成する表示デバイスクロックの4倍の周波数のクロックを生成する。
また、クロック制御部234は、第1の動作と同様に、生成した表示デバイスクロックに基づいて、表示デバイスクロックの1/2の周波数の動作クロックを生成し、生成した動作クロックを、表示処理部231および表示処理部232に供給する。そして、第2の動作では、クロック制御部234は、生成した動作クロックを、出力選択部235にも供給する。
そして、表示処理部231内の同期信号生成ブロック2311は、第1の動作と同様に、クロック制御部234から供給された動作クロックに基づいて、4Kテレビ310に表示処理後の出力画像データを表示させるための垂直同期信号Vおよび水平同期信号Hを生成し、生成した垂直同期信号Vおよび水平同期信号Hを、出力選択部235および4Kテレビ310に出力する。
その後、同期信号生成ブロック2311は、第1の動作と同様のタイミングで、トリガ信号TG1を入力制御ブロック2312に出力する。これにより、入力制御ブロック2312は、第1の動作と同様に、同期信号生成ブロック2311から入力されたトリガ信号TG1に応じて、表示処理部231が表示処理を行う、1フレームの表示画像データの1ライン目から、奇数列表示画像データのそれぞれの画素のデータを取得するDMAを開始する(画像データ経路C3参照)。
また、同期信号生成ブロック2311は、第1の動作と同様に、トリガ信号TG1と同じタイミングのトリガ信号TG1aを、表示処理部232内の同期信号選択ブロック2324に出力し、同期信号選択ブロック2324は、表示処理部231内の同期信号生成ブロック2311から入力されたトリガ信号TG1aを、トリガ信号TGとして入力制御ブロック2322に出力する。これにより、入力制御ブロック2322は、第1の動作と同様に、同期信号選択ブロック2324から入力されたトリガ信号TGに応じて、表示処理部232が表示処理を行う、1フレームの表示画像データの1ライン目から、偶数列表示画像データのそれぞれの画素のデータを取得するDMAを開始する(画像データ経路C4参照)。
このように、第2の動作においても、第1の動作と同様に、表示処理部231内の入力制御ブロック2312と、表示処理部232内の入力制御ブロック2322とのそれぞれが同期して、対応する列の表示画像データのそれぞれを、DMAによってDRAM(不図示)から取得する。
そして、入力制御ブロック2312は、第1の動作と同様に、DRAM(不図示)からDMAによって取得した奇数列表示画像データのそれぞれの画素のデータを、表示処理ブロック2313に出力し、表示処理ブロック2313は、入力制御ブロック2312から入力された奇数列表示画像データのそれぞれの画素のデータに対して表示処理を施した出力画像データを、出力選択部235に出力する(画像データ経路C3参照)。また、入力制御ブロック2322は、第1の動作と同様に、DRAM(不図示)からDMAによって取得した偶数列表示画像データのそれぞれの画素のデータを、表示処理ブロック2323に出力し、表示処理ブロック2323は、入力制御ブロック2322から入力された偶数列表示画像データのそれぞれの画素のデータに対して表示処理を施した出力画像データを、出力選択部235に出力する(画像データ経路C4参照)。
そして、出力選択部235は、第1の動作と同様のタイミングから、表示処理後のそれぞれの出力画像データの出力を開始する。このとき、出力選択部235は、表示処理部231内の同期信号生成ブロック2311から入力された動作クロックのタイミング、つまり、4Kテレビ310が画像を表示する表示デバイスクロックの1/2の周波数のタイミングで、奇数列表示画像データに対する表示処理後の出力画像データと、偶数列表示画像データに対する表示処理後の出力画像データとを同時に、4Kテレビ310に順次出力する。
出力選択部235における出力画像データの出力では、4Kテレビ310に出力する1フレームの1ライン目における最初の画素のタイミングから、入力制御ブロック2312から入力された奇数列表示画像データに対する出力画像データのそれぞれを、動作クロックのタイミングで、4Kテレビ310に順次出力する(画像データ経路C3参照)。また、出力選択部235は、4Kテレビ310に出力する1フレームの1ライン目における最初の画素のタイミング、つまり、4Kテレビ310に奇数列表示画像データに対する出力画像データを出力するタイミングと同じタイミングから、入力制御ブロック2322から入力された偶数列表示画像データに対する出力画像データのそれぞれを、動作クロックのタイミングで、4Kテレビ310に順次出力する(画像データ経路C4参照)。
これにより、出力選択部235から、4Kテレビ310に表示する1フレームの画像の1ライン目における奇数列に対応した出力画像データが、4Kテレビ310に備えた画像信号の一方の入力系統に(画像データ経路C3参照)、4Kテレビ310に表示する同じ1フレームの画像の1ライン目における偶数列に対応した出力画像データが、4Kテレビ310に備えた画像信号の他方の入力系統に(画像データ経路C4参照)、それぞれ同時に出力される。そして、出力選択部235からそれぞれの入力系統に出力された1フレームの1ライン目の出力画像データに応じた画像が、4Kテレビ310に表示される。
また、入力制御ブロック2312は、第1の動作と同様に、1フレームの表示画像データの1ライン目の奇数列表示画像データのDMAによる取得が終了した後、引き続き、1フレームの表示画像データの2ライン目の奇数列表示画像データを取得するためのDMAを開始し、DRAM(不図示)からDMAによって取得した奇数列表示画像データのそれぞれの画素のデータを、表示処理ブロック2313に出力する(画像データ経路C3参照)。また、入力制御ブロック2322は、第1の動作と同様に、1フレームの表示画像データの1ライン目の偶数列表示画像データのDMAによる取得が終了した後、引き続き、1フレームの表示画像データの2ライン目の偶数列表示画像データを取得するためのDMAを開始し、DRAM(不図示)からDMAによって取得した偶数列表示画像データのそれぞれの画素のデータを、表示処理ブロック2323に出力する(画像データ経路C4参照)。
このように、第2の動作においても、第1の動作と同様に、入力制御ブロック2312と入力制御ブロック2322とのそれぞれは、対応する列の表示画像データを、ライン毎に順次、DMAによってDRAM(不図示)から取得し、取得した表示画像データを、ライン毎に順次、対応する入力制御ブロック2312または入力制御ブロック2322に出力する。これにより、表示処理ブロック2313と表示処理ブロック2323とのそれぞれは、第1の動作と同様に、対応する入力制御ブロック2312または入力制御ブロック2322から入力された、対応する列の表示画像データに対して表示処理を施し、表示処理後の出力画像データのそれぞれを、表示画像データのライン毎に順次、出力選択部235に出力する。
そして、出力選択部235は、第1の動作と同様のタイミングから、入力制御ブロック2312から入力された奇数列表示画像データに対する表示処理後の出力画像データと、入力制御ブロック2322から入力された偶数列表示画像データに対する表示処理後の出力画像データとを同時に、4Kテレビ310が画像を表示する表示デバイスクロックの1/2の周波数のタイミング、つまり、動作クロックのタイミングで順次、4Kテレビ310に出力する。
これにより、出力選択部235から、4Kテレビ310に表示する1フレームの画像の1ライン目以降における奇数列に対応した出力画像データと、偶数列に対応した出力画像データとが、4Kテレビ310に備えた画像信号の対応するそれぞれの入力系統に同時に順次出力される。そして、4Kテレビ310に、出力選択部235からそれぞれの入力系統に出力された1フレームの1ライン目以降の出力画像データに応じた画像が表示される。
このように、第2の動作でも、第1の動作と同様に、表示処理装置23に備えた、フルHD(1920×1080)サイズの表示画像データに対応した2つの表示処理部231および表示処理部232が連携して、奇数列表示画像データに対する表示処理と偶数列表示画像データに対する表示処理とを並列に行うことによって、4K2K(3840×2160)サイズの表示画像データに対する表示処理を行う。そして、第2の動作では、表示処理装置23に備えた出力選択部235が、4K2K(3840×2160)サイズの画像を表示する表示デバイスクロックの1/2の周波数のタイミングで、奇数列に対応した表示処理後の出力画像データと、偶数列に対応した表示処理後の出力画像データとを同時に、表示処理装置23に接続された4Kテレビ310に備えた画像信号の対応するそれぞれの入力系統に出力する。このように、第2の動作でも、第1の動作と同様に、表示処理部231と表示処理部232とが同期して、表示画像データに対する表示処理をリアルタイムに行い、表示処理装置23に接続された4Kテレビ310に、4K2K(3840×2160)サイズの表示処理後の出力画像データを、それぞれの入力系統に出力する。
このとき、表示処理部231と表示処理部232とのそれぞれは、4K2K(3840×2160)サイズの画像を表示するための表示デバイスクロックの1/2の周波数の動作クロックで動作する。また、出力選択部235も、4K2K(3840×2160)サイズの画像を表示するための表示デバイスクロックの1/2の周波数の動作クロックで動作する。つまり、表示処理装置23における第2の動作では、それぞれの構成要素が、表示処理装置23に接続された4Kテレビ310が1画素分の画像を表示させるために必要な表示デバイスクロックの1/2の周波数の動作クロックで動作することができる。言い換えれば、表示処理装置23における第2の動作では、それぞれの構成要素の動作クロックを、フルHD(1920×1080)サイズの画像を表示するテレビ31の表示デバイスクロックの2倍の周波数にするのみで、4K2K(3840×2160)サイズの表示画像データに対する表示処理と、表示処理後の出力画像データの出力とを行うことができる。このことにより、表示処理装置23では、第2の動作によって、動作クロックの周波数を抑えた状態で、表示処理装置23内に備えた表示処理部231と表示処理部232とのそれぞれが対応するサイズの画像よりも高精細な画像に対する表示処理を行うことができる。
なお、第2の動作では、出力選択部235が動作する動作クロックが、4Kテレビ310に画像を表示するための表示デバイスクロックの1/2の周波数の動作クロックである場合について説明した。しかし、第2の動作においては、出力選択部235の動作クロックを、第1の動作と同様に、4Kテレビ310に画像を表示するための表示デバイスクロックにしてもよい。
本実施形態によれば、入力された予め定めた第1の大きさ(例えば、フルHD(1920×1080)の大きさ(サイズ))の表示画像の画像データ(表示画像データ)に対して予め定めた表示処理を施す表示処理装置(表示処理装置23)であって、例えば、フルHD(1920×1080)の大きさ(サイズ)よりも大きい第2の大きさ(例えば、4K2K(3840×2160)の大きさ(サイズ))の表示画像が入力されると、この表示画像の奇数列の表示画像データ(奇数列表示画像データ)に対して表示処理を施した第1の出力画像の画像データ(奇数列表示画像データに対して表示処理を施した後の出力画像データ)を出力する第1の表示処理部(表示処理部231)と、例えば、4K2K(3840×2160)の大きさ(サイズ)の表示画像の偶数列の表示画像データ(偶数列表示画像データ)に対して表示処理を施した第2の出力画像の画像データ(偶数列表示画像データに対して表示処理を施した後の出力画像データ)を出力する第2の表示処理部(表示処理部232)と、奇数列表示画像データに対して表示処理を施した後の出力画像データまたは偶数列表示画像データに対して表示処理を施した後の出力画像データを選択し、ここで選択した画像データを、例えば、4K2K(3840×2160)の大きさ(サイズ)の表示画像を表示する第1の表示デバイス(例えば、4Kテレビ310)に出力する出力選択部(出力選択部235)と、表示処理部231および表示処理部232が動作するための動作クロックを生成して供給するクロック制御部(クロック制御部234)とを備える表示処理装置(表示処理装置23)が構成される。
また、本実施形態によれば、表示処理部231は、奇数列表示画像データをDMAによって取得すると共に、偶数列表示画像データをDMAによって取得するタイミングを表示処理部232に通知する表示処理装置23が構成される。
また、本実施形態によれば、表示処理部231は、クロック制御部234から供給された動作クロックに基づいて、例えば、4Kテレビ310が出力選択部235から出力された出力画像データに応じた画像を表示するための同期信号(例えば、垂直同期信号Vや水平同期信号Hなど)を生成して出力すると共に、奇数列表示画像データのDMAによる取得を開始する第1のタイミングを表す第1のトリガ信号(トリガ信号TG1)、および偶数列表示画像データのDMAによる取得を開始する第2のタイミングを表す第2のトリガ信号(トリガ信号TG1a)を生成して出力する第1の同期信号生成ブロック(同期信号生成ブロック2311)と、トリガ信号TG1に応じて、奇数列表示画像データをDMAによって取得する第1の入力制御ブロック(入力制御ブロック2312)と、入力制御ブロック2312が取得した奇数列表示画像データに対して表示処理を施した第1の出力画像の画像データ(奇数列表示画像データに対して表示処理を施した後の出力画像データ)を出力する第1の表示処理ブロック(表示処理ブロック2313)と、を備え、表示処理部232は、クロック制御部234から供給された動作クロックに基づいて、この表示処理部232が単独で対応する第2の表示デバイス(例えば、テレビ31,EVF32,TFT液晶ディスプレイ33など)が、この表示処理部232が出力した出力画像データに応じた画像を表示するための同期信号を生成すると共に、この表示処理部232が単独で対応する、例えば、フルHD(1920×1080)の大きさ(サイズ)の表示画像の画像データ(表示画像データ)のDMAによる取得を開始する第3のタイミングを表す第3のトリガ信号(トリガ信号TG2)を生成して出力する第2の同期信号生成ブロック(同期信号生成ブロック2321)と、トリガ信号TG1aまたはトリガ信号TG2のいずれか一方のトリガ信号を選択し、ここで選択したトリガ信号を第4のトリガ信号(トリガ信号TG)として出力する同期信号選択ブロック(同期信号選択ブロック2324)と、トリガ信号TGに応じて、偶数列表示画像データまたはこの表示処理部232が単独で対応する、例えば、フルHD(1920×1080)の大きさ(サイズ)の表示画像の画像データ(表示画像データ)をDMAによって取得する第2の入力制御ブロック(入力制御ブロック2322)と、入力制御ブロック2322が取得した偶数列表示画像データまたはこの表示処理部232が単独で対応する、例えば、フルHD(1920×1080)の大きさ(サイズ)の表示画像の画像データ(表示画像データ)に対して表示処理を施した第2の出力画像の画像データ(出力画像データ)を出力する第2の表示処理ブロック(表示処理ブロック2323)とを備える表示処理装置23が構成される。
また、本実施形態によれば、クロック制御部234は、例えば、4Kテレビ310が1画素分の画像を表示させるために必要な周波数の表示デバイスクロック(いわゆる、画素クロック)を生成し、ここで生成した表示デバイスクロックと同じ位相の動作クロックを生成する表示処理装置23が構成される。
また、本実施形態によれば、出力選択部235は、表示処理部231が出力した、例えば、4Kテレビ310に対応する同期信号に基づいて、この4Kテレビ310が画像を表示する期間を判定し、ここで判定した画像を表示する期間中に、奇数列表示画像データに対して表示処理を施した後の出力画像データと偶数列表示画像データに対して表示処理を施した後の出力画像データとを表示デバイスクロックのタイミング毎に交互に選択し、ここで選択した画像データを、表示デバイスクロックのタイミングで4Kテレビ310に出力する表示処理装置23が構成される。
また、本実施形態によれば、出力選択部235は、表示処理部231が出力した、例えば、4Kテレビ310に対応する同期信号に基づいて、この4Kテレビ310が画像を表示する期間を判定し、ここで判定した画像を表示する期間中に、奇数列表示画像データに対して表示処理を施した後の出力画像データと偶数列表示画像データに対して表示処理を施した後の出力画像データとを動作クロックのタイミングで同時に選択し、ここで選択した画像データを、動作クロックのタイミングで4Kテレビ310に備えた対応する入力系統のそれぞれに出力する表示処理装置23が構成される。
また、本実施形態によれば、表示処理装置(表示処理装置23)を備える撮像装置(撮像装置1、または撮像装置1のシステム)が構成される。
上記に述べたとおり、本発明を実施するための形態によれば、表示処理装置に備えた表示処理部が対応しているサイズの画像よりも高精細な画像を表示する表示デバイスが接続された場合に、表示処理装置に備えた複数の表示処理部が連携して並列に動作する。これにより、本発明を実施するための形態では、表示処理装置に備えたそれぞれの表示処理部が単独では表示処理を行うことができない高精細な画像に対しても表示処理を行うことができる。そして、本発明を実施するための形態では、接続された表示デバイスが備える画像信号の入力系統に依存せずに、表示処理後の出力画像データを出力することができる。
また、本発明を実施するための形態では、表示処理装置に備えたそれぞれの表示処理部が動作する動作クロックの周波数を、接続された高精細な画像を表示する表示デバイスが画像を表示する際のクロック(実施形態においては、表示デバイスクロック、いわゆる、画素クロック)の周波数よりも抑えることができる。このことにより、本発明を実施するための形態では、高精細な画像を表示する表示デバイスが接続された場合でも、表示処理装置の消費電力の増大を抑えることができる。
なお、本実施形態においては、表示処理装置23に備えた2つの表示処理部230(表示処理部231と表示処理部232)が連携して並列に動作する。このとき、表示処理部230のそれぞれは、4K2K(3840×2160)サイズの画像を表示する4Kテレビ310に表示させる表示画像データを列毎に2つに分割したそれぞれの表示画像データをDMAによってDRAM(不図示)から取得する。このため、DMAにおけるバースト転送を考慮すると、4Kテレビ310に表示させる1フレームの表示画像データにおいて、奇数列の画素の表示画像データおよび偶数列の画素の表示画像データは、それぞれ連続していることが望ましい。このため、撮像装置1に備えた画像処理装置20内の画像処理部22は、表示画像データを生成する際に、奇数列表示画像データおよび偶数列表示画像データのそれぞれをまとめた形式の表示画像データを生成する、つまり、1フレームの表示画像データを2つの表示画像データで構成する形式の表示画像データを生成することが望ましい。なお、この形式の表示画像データを生成する方法として、画像処理部22が生成した表示画像データをDRAM(不図示)に転送する(書き込む)際に、奇数列表示画像データに含まれるそれぞれの表示画像データが記憶されるDRAMのアドレスが連続し、偶数列表示画像データに含まれるそれぞれの表示画像データが記憶されるDRAMのアドレスが連続するように、それぞれの表示画像データを転送してもよい。
また、本実施形態においては、表示処理装置23に備えた2つの表示処理部230(表示処理部231と表示処理部232)が連携して並列に動作する場合について説明した。このため、本実施形態においては、4K2K(3840×2160)サイズの画像を表示する4Kテレビ310に表示させる表示画像データを列毎に2つに分割し、奇数列の画素のデータで構成される表示画像データに対する表示処理を表示処理部231が行い、偶数列の画素のデータで構成される表示画像データに対する表示処理を表示処理部232が行う場合について説明した。このことから、本実施形態においては、表示処理装置23に備えた表示処理部231および表示処理部232のそれぞれが動作する動作クロックが、4Kテレビ310に画像を表示するための表示デバイスクロックの1/2の周波数のクロックであると説明した。しかし、連携して並列に動作する表示処理部230の数は、本発明を実施するための形態に限定されるものではなく、さらに多くの表示処理部230が連携して並列に動作する構成にすることもできる。
例えば、表示処理装置に備えた4つの表示処理部230が連携して並列に動作する構成にすることもできる。この構成において4K2K(3840×2160)サイズの画像を4Kテレビ310に表示させる場合には、4K2K(3840×2160)サイズの表示画像データを列毎に4つに分割し、分割したそれぞれの表示画像データに対する表示処理を、連携して並列に動作する4つの表示処理部230のそれぞれが表示処理部を行うことができる。より具体的には、4K2K(3840×2160)サイズの表示画像データをそれぞれの列を第1〜第4の列に分類し、第1列の画素のデータで構成される表示画像データと、第2列の画素のデータで構成される表示画像データと、第3列の画素のデータで構成される表示画像データと、第4列の画素のデータで構成される表示画像データとの4つに分割する。そして、4つに分類したそれぞれの列に対応する表示処理部が連携して、対応する列の画素のデータで構成される表示画像データに対する表示処理を並列に行う。この場合には、表示処理装置23に備えた表示処理部230が動作する動作クロックの周波数を、4Kテレビ310に画像を表示するための表示デバイスクロックの1/4の周波数にすることができる。すなわち、本発明を実施するための形態では、連携して並列に動作する表示処理部の数に応じて、表示処理を行う表示画像データの列毎の分割数を多くすることによって、表示処理装置に備えた構成要素が動作するクロックの周波数を抑える、つまり、(1/表示処理部の数)の周波数に抑えることができる。
なお、この場合は、4つの表示処理部230の内、1つの表示処理部230が上述した表示処理部231と同様に、DMAを開始するタイミングを表すトリガ信号TG1aを出力し、他の3つの表示処理部230が上述した表示処理部232と同様に、トリガ信号TG1aに応じて対応する表示画像データを取得する構成になる。また、表示処理装置に備えた出力選択部は、表示処理装置に接続された表示デバイスが備える画像信号の入力系統の数に応じて、それぞれの表示処理部230が出力した表示処理後の出力画像データを出力する構成になる。
また、本実施形態においては、4K2K(3840×2160)サイズの画像を表示する4Kテレビ310に表示させる表示画像データを奇数列と偶数列との2つに分割し、表示処理装置23に備えた2つの表示処理部230(表示処理部231と表示処理部232)が連携して並列に動作する場合について説明した。しかし、表示画像データを分割する方法は、本発明を実施するための形態に限定されるものではない。例えば、4Kテレビ310に表示させる表示画像データの複数列を1つの単位とした短冊状にまとめ、ここでまとめた短冊状の単位毎に、奇数番目の短冊状の単位で構成される表示画像データと、偶数番目の短冊状の単位で構成される表示画像データとの2つに分割することもできる。この場合にも、本実施形態と同様に、奇数番目の短冊状の単位で構成される表示画像データに対する表示処理を表示処理部231が行い、偶数番目の短冊状の単位で構成される表示画像データに対する表示処理を表示処理部232が行うことができる。
なお、この場合、表示処理装置に備えた出力選択部は、短冊状にまとめた単位内に含まれるそれぞれの列の出力画像データを、表示デバイスクロックのタイミングで出力するまで保持しておく構成が必要になると考えられる。そして、出力選択部は、保持した出力画像データを表示デバイスクロックのタイミングで順次選択して、接続された表示デバイスに出力する構成になることが考えられる。このとき、それぞれの列の出力画像データを保持しておく構成としては、例えば、奇数番目の短冊状の単位に含まれる各列の出力画像データと、偶数番目の短冊状の単位に含まれる各列の出力画像データとのそれぞれを一旦保持するラッチ回路を、出力選択部235内に備える構成が考えられる。この構成にすることによって、例えば、表示処理部231と表示処理部232とのそれぞれが表示処理をした後の出力画像データを出力するタイミングを完全に同期させる必要がなくなり、それぞれの表示処理部230が表示処理を行うタイミングのずれを、それぞれの短冊状の単位内に含まれる列数分だけ許容することができる。このことにより、本実施形態においては、表示処理装置23に備えたそれぞれの表示処理部230が表示処理後の出力画像データを出力するタイミングを、それぞれの表示処理部230内の入力制御ブロックが調整する構成について説明したが、表示画像データの複数列を短冊状にまとめることによって許容することができるタイミングができたため、出力画像データを出力するタイミングを調整する構成を、より簡単にすることができる。また、表示処理部231内の同期信号生成ブロック2311が行っていた、連携して動作する表示処理部232にDMAを開始させるためのトリガ信号TG1aを出力するタイミングの制御も、より簡単にすることができる。
なお、複数列の表示画像データをまとめた単位毎に表示処理を行う場合には、それぞれの列の表示画像データを単純にまとめるのみではなく、例えば、単位毎にまとめるそれぞれの列の境界部分が互いに重複する、いわゆる、オーバーラップする列を設けることもできる。このオーバーラップする列を設けることによって、それぞれの単位の表示画像データに対して別々に表示処理を行った場合でも、表示デバイスに表示される表示処理後の出力画像データに応じた画像において、まとめた分割したそれぞれの単位の繋ぎ目を目立たなくすることができる。
また、本実施形態においては、表示処理装置23に備えた2つの表示処理部230(表示処理部231と表示処理部232)が連携して並列に動作することによって、それぞれの表示処理部230が対応するフルHD(1920×1080)の大きさ(サイズ)の画像よりも大きい(高精細な)、4K2K(3840×2160)の大きさ(サイズ)の画像を表示する表示デバイスに対応する場合について説明した。しかし、表示処理装置に備えた複数の表示処理部230が連携して並列に動作することによって対応することができる画像の大きさ(サイズ)は、本発明を実施するための形態に限定されるものではない。すなわち、表示処理装置に備えた表示処理部230の構成に応じて、本発明の考え方を適用することによって、4K2K(3840×2160)の大きさ(サイズ)の画像よりもさらに高精細な、つまり、さらに大きなサイズの画像に対する表示処理を行う構成を構築することができる。
また、本実施形態においては、表示処理装置23における第1の動作と第2の動作とを切り替える構成に関しては、特に規定していない。この表示処理装置23における第1の動作と第2の動作とを切り替えは、例えば、本実施形態の表示処理装置23を適用した撮像装置1の全体を制御する不図示の制御部、または撮像装置1に搭載された、本実施形態の表示処理装置23を備えた画像処理装置20の全体を制御する不図示の制御部によって行われる構成であってもよい。
以上、本発明の実施形態について、図面を参照して説明してきたが、具体的な構成はこの実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲においての種々の変更も含まれる。
1・・・撮像装置
10・・・撮像センサ
20・・・画像処理装置
21・・・撮像処理部
22・・・画像処理部
23・・・表示処理装置
231・・・表示処理部(第1の表示処理部)
232,233・・・表示処理部(第2の表示処理部)
234・・・クロック制御部(クロック制御部)
235・・・出力選択部(出力選択部)
2311・・・同期信号生成ブロック(第1の同期信号生成ブロック)
2312・・・入力制御ブロック(第1の入力制御ブロック)
2313・・・表示処理ブロック(第1の表示処理ブロック)
2321・・・同期信号生成ブロック(第2の同期信号生成ブロック)
2322・・・入力制御ブロック(第2の入力制御ブロック)
2323・・・表示処理ブロック(第2の表示処理ブロック)
2324・・・同期信号選択ブロック(同期信号選択ブロック)
25・・・DMAバス
31・・・テレビ(TV)(第2の表示デバイス)
310・・・4Kテレビ(4K−TV)(第1の表示デバイス)
32・・・EVF(第2の表示デバイス)
33・・・TFT液晶ディスプレイ(TFT−LCD)(第2の表示デバイス)

Claims (5)

  1. 入力された予め定めた第1の大きさの表示画像の画像データに対して予め定めた表示処理を施す表示処理装置であって、
    前記第1の大きさよりも大きい第2の大きさの表示画像が入力されると、該表示画像の奇数列の表示画像データに対して前記表示処理を施した第1の出力画像の画像データを出力する第1の表示処理部と、
    前記第2の大きさの表示画像の偶数列の表示画像データに対して前記表示処理を施した第2の出力画像の画像データを出力する第2の表示処理部と、
    前記第1の出力画像の画像データまたは前記第2の出力画像の画像データを選択し、該選択した画像データを、前記第2の大きさの表示画像を表示する第1の表示デバイスに出力する出力選択部と、
    前記第1の表示処理部および前記第2の表示処理部が動作するための動作クロックを生成して供給するクロック制御部と、
    を備え、
    前記第1の表示処理部は、
    前記奇数列の表示画像データを同期信号に同期して取得すると共に、前記偶数列の表示画像データを同期信号に同期して取得を開始するタイミングを前記第2の表示処理部に通知し、
    前記第1の表示処理部は、
    前記クロック制御部から供給された前記動作クロックに基づいて、前記第1の表示デバイスが前記出力選択部から出力された画像データに応じた画像を表示するための同期信号を生成して出力すると共に、前記奇数列の表示画像データのDMAによる取得を開始する第1のタイミングを表す第1のトリガ信号、および前記偶数列の表示画像データのDMAによる取得を開始する第2のタイミングを表す第2のトリガ信号を生成して出力する第1の同期信号生成ブロックと、
    前記第1のトリガ信号に応じて、前記奇数列の表示画像データをDMAによって取得する第1の入力制御ブロックと、
    前記第1の入力制御ブロックが取得した前記奇数列の表示画像データに対して前記表示処理を施した前記第1の出力画像の画像データを出力する第1の表示処理ブロックと、
    を備え、
    前記第2の表示処理部は、
    前記クロック制御部から供給された前記動作クロックに基づいて、当該第2の表示処理部が単独で対応する第2の表示デバイスが、当該第2の表示処理部が出力した画像データに応じた画像を表示するための同期信号を生成すると共に、当該第2の表示処理部が単独で対応する前記第1の大きさの表示画像の画像データのDMAによる取得を開始する第3のタイミングを表す第3のトリガ信号を生成して出力する第2の同期信号生成ブロックと、
    前記第2のトリガ信号または前記第3のトリガ信号のいずれか一方のトリガ信号を選択し、該選択したトリガ信号を第4のトリガ信号として出力する同期信号選択ブロックと、
    前記第4のトリガ信号に応じて、前記偶数列の表示画像データまたは当該第2の表示処理部が単独で対応する前記第1の大きさの表示画像の画像データをDMAによって取得する第2の入力制御ブロックと、
    前記第2の入力制御ブロックが取得した前記偶数列の表示画像データまたは当該第2の表示処理部が単独で対応する前記第1の大きさの表示画像の画像データに対して前記表示処理を施した前記第2の出力画像の画像データを出力する第2の表示処理ブロックと、
    を備える、
    とを特徴とする表示処理装置。
  2. 前記クロック制御部は、
    前記第1の表示デバイスが1画素分の画像を表示させるために必要な周波数の表示デバイスクロックを生成し、該生成した表示デバイスクロックと同じ位相の前記動作クロックを生成する、
    ことを特徴とする請求項に記載の表示処理装置。
  3. 前記出力選択部は、
    前記第1の表示処理部が出力した、前記第1の表示デバイスに対応する前記同期信号に基づいて、該第1の表示デバイスが画像を表示する期間を判定し、該判定した画像を表示する期間中に、前記第1の出力画像の画像データと前記第2の出力画像の画像データとを前記表示デバイスクロックのタイミング毎に交互に選択し、該選択した画像データを、該表示デバイスクロックのタイミングで前記第1の表示デバイスに出力する、
    ことを特徴とする請求項に記載の表示処理装置。
  4. 前記出力選択部は、
    前記第1の表示処理部が出力した、前記第1の表示デバイスに対応する前記同期信号に基づいて、該第1の表示デバイスが画像を表示する期間を判定し、該判定した画像を表示する期間中に、前記第1の出力画像の画像データと前記第2の出力画像の画像データとを前記動作クロックのタイミングで同時に選択し、該選択した画像データを、該動作クロックのタイミングで前記第1の表示デバイスに備えた対応する入力系統のそれぞれに出力する、
    ことを特徴とする請求項に記載の表示処理装置。
  5. 請求項1から請求項のいずれか1の項に記載の表示処理装置、
    を備える、
    ことを特徴とする撮像装置。
JP2014100684A 2014-05-14 2014-05-14 表示処理装置および撮像装置 Active JP6358847B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2014100684A JP6358847B2 (ja) 2014-05-14 2014-05-14 表示処理装置および撮像装置
US14/683,459 US9569160B2 (en) 2014-05-14 2015-04-10 Display processing device and imaging apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014100684A JP6358847B2 (ja) 2014-05-14 2014-05-14 表示処理装置および撮像装置

Publications (2)

Publication Number Publication Date
JP2015220498A JP2015220498A (ja) 2015-12-07
JP6358847B2 true JP6358847B2 (ja) 2018-07-18

Family

ID=54538939

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014100684A Active JP6358847B2 (ja) 2014-05-14 2014-05-14 表示処理装置および撮像装置

Country Status (2)

Country Link
US (1) US9569160B2 (ja)
JP (1) JP6358847B2 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104778022B (zh) * 2014-01-09 2019-07-26 联想(北京)有限公司 一种数据处理方法及电子设备
CN107210025B (zh) * 2015-01-21 2019-12-20 Nec显示器解决方案株式会社 显示系统、显示设备、电子装置和图像信号传输方法
US11227511B2 (en) 2016-08-05 2022-01-18 R. R. Donnelley & Sons Company Pop-up display and pop-up display locking mechanism therefore
US10332523B2 (en) * 2016-11-18 2019-06-25 Google Llc Virtual assistant identification of nearby computing devices
US10741109B2 (en) 2017-08-29 2020-08-11 R.R. Donnelley & Sons Company Quadrilateral display and method for forming the same
US10706747B2 (en) 2018-11-27 2020-07-07 R.R. Donnelley & Sons Company Pyramidical displays and methods for forming the same

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR970002384B1 (ko) * 1994-10-26 1997-03-03 엘지전자 주식회사 휴대형 단말기의 사운드 발생 및 디스플레이 제어장치
KR100330036B1 (ko) * 2000-06-29 2002-03-27 구본준, 론 위라하디락사 액정표시장치 및 그 구동방법
KR100825103B1 (ko) * 2002-05-16 2008-04-25 삼성전자주식회사 액정 표시 장치 및 그 구동 방법
JP4468238B2 (ja) * 2004-07-12 2010-05-26 シャープ株式会社 表示装置及びその駆動方法
JPWO2007066710A1 (ja) * 2005-12-07 2009-05-21 ソニー株式会社 符号化装置、符号化方法および符号化プログラム、ならびに、復号装置、復号方法および復号プログラム
US8665943B2 (en) * 2005-12-07 2014-03-04 Sony Corporation Encoding device, encoding method, encoding program, decoding device, decoding method, and decoding program
JP2007274661A (ja) * 2006-03-09 2007-10-18 Nikon Corp 撮像装置、画像再生装置およびプログラム
TWI380269B (en) * 2007-10-05 2012-12-21 Au Optronics Corp Display and method of transmitting image data therein
US8060560B2 (en) * 2009-08-27 2011-11-15 Net Power And Light, Inc. System and method for pervasive computing
EP2605514B1 (en) * 2010-08-09 2017-07-12 Panasonic Corporation Image encoding method, image decoding method, image encoding device, and image decoding device
JP6019285B2 (ja) * 2010-11-25 2016-11-02 ソニー株式会社 電子書籍再生装置、履歴取得装置、電子書籍生成装置、電子書籍提供システム、電子書籍再生方法、履歴取得方法、電子書籍生成方法、電子書籍再生プログラム、履歴取得プログラム、電子書籍生成プログラム
JP5299529B2 (ja) * 2011-03-29 2013-09-25 株式会社ニコン 撮像装置
JP5846887B2 (ja) * 2011-12-13 2016-01-20 京セラ株式会社 携帯端末、編集制御プログラムおよび編集制御方法
US9111174B2 (en) * 2012-02-24 2015-08-18 Riverain Technologies, LLC Machine learnng techniques for pectoral muscle equalization and segmentation in digital mammograms
JP5962328B2 (ja) * 2012-08-21 2016-08-03 株式会社ソシオネクスト データ転送装置、データ転送方法、及び半導体装置
US20140138520A1 (en) * 2012-11-21 2014-05-22 Taiwan Semiconductor Manufacturing Company, Ltd. Dual-Side Illumination Image Sensor Chips and Methods for Forming the Same
JP6325886B2 (ja) * 2014-05-14 2018-05-16 オリンパス株式会社 表示処理装置および撮像装置

Also Published As

Publication number Publication date
US20150332431A1 (en) 2015-11-19
JP2015220498A (ja) 2015-12-07
US9569160B2 (en) 2017-02-14

Similar Documents

Publication Publication Date Title
JP6358847B2 (ja) 表示処理装置および撮像装置
JP6325886B2 (ja) 表示処理装置および撮像装置
JP6601020B2 (ja) 撮像表示装置
JP2015053644A (ja) 撮像装置
JP6006083B2 (ja) 撮像装置および撮像方法
JP2015053643A (ja) 撮像装置
JP5820720B2 (ja) 撮像装置
US8970766B2 (en) Imaging device
JP6300651B2 (ja) 動画記録再生装置
WO2017187508A1 (ja) 表示処理装置および撮像装置
JP5972016B2 (ja) 撮像装置
JP4697094B2 (ja) 画像信号出力装置及びその制御方法
JP2014099714A (ja) 画像処理装置、撮像装置、画像処理方法及びプログラム
JP5965173B2 (ja) 動画像処理システム、画像処理装置、および動画像処理システムの動作方法
TWI689204B (zh) 影像擷取裝置以及用於影像放大的影像擷取方法
JP2008244800A (ja) 撮像装置及び撮像方法
JP6021556B2 (ja) 画像処理装置
JP7129219B2 (ja) 撮像装置
JP2017208674A (ja) 映像処理装置及び映像処理方法
JP2007243819A (ja) 画像処理装置
JP5572940B2 (ja) 撮像装置
JP2015053645A (ja) 撮像装置
JP2006005596A (ja) 半導体集積回路装置及び撮像装置
JP2014132709A (ja) 画像信号処理装置及びその制御方法、並びに撮像装置及びその制御方法
JP2015115877A (ja) 撮像装置、その制御方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170125

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170912

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171024

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171214

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20171215

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180605

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180619

R151 Written notification of patent or utility model registration

Ref document number: 6358847

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250