JP2017068207A - Image processing device, image processing method, and program - Google Patents

Image processing device, image processing method, and program Download PDF

Info

Publication number
JP2017068207A
JP2017068207A JP2015196942A JP2015196942A JP2017068207A JP 2017068207 A JP2017068207 A JP 2017068207A JP 2015196942 A JP2015196942 A JP 2015196942A JP 2015196942 A JP2015196942 A JP 2015196942A JP 2017068207 A JP2017068207 A JP 2017068207A
Authority
JP
Japan
Prior art keywords
display
image signal
unit
display mode
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2015196942A
Other languages
Japanese (ja)
Inventor
米田 茂
Shigeru Yoneda
茂 米田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2015196942A priority Critical patent/JP2017068207A/en
Publication of JP2017068207A publication Critical patent/JP2017068207A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Controls And Circuits For Display Device (AREA)
  • Liquid Crystal Display Device Control (AREA)
  • Picture Signal Circuits (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an image processing device with which it is possible to display an image of high dynamic range, and to reduce power consumption and lighten eye fatigue.SOLUTION: The image processing device comprises: an image-capturing unit for generating a first image signal each pixel value of which is represented by the first number of bits; a display unit for displaying a first image signal each pixel value of which is represented by the first number of bits in a first display mode, and displaying a second image signal each pixel value of which is represented by the second number of bits smaller than the first number of bits in a second display mode; a switching unit for switching between the first display mode and the second display mode; and a control unit for controlling the display unit to the first display mode and making the display unit display the first image signal generated by the image-capturing unit in the first display mode, and controlling the display unit to the second display mode, converting the first image signal generated by the image-capturing unit to a second image signal, and making the display unit display the converted second image signal in the second display mode.SELECTED DRAWING: Figure 3

Description

本発明は、画像処理装置、画像処理方法及びプログラムに関する。   The present invention relates to an image processing apparatus, an image processing method, and a program.

デジタルカメラやデジタルビデオカメラ等の画像処理装置は、CMOSセンサやCCD等の撮像素子により、被写体像を、光の強度に応じた画像信号に変換し、画像信号処理を行う。近年、撮像素子は、性能が向上しており、高ダイナミックレンジの画像信号を生成できるようになりつつある。また、高ダイナミックレンジの画像信号を表示するため、表示装置の性能も向上しており、バックライトの高輝度化及びローカルデミングによる領域間での輝度差を拡大する手法を用いた表示装置が開示されている(特許文献1参照)。また、表示装置の消費電力を低減させる目的で、バックライトの発光を抑制する手法も開示されている(特許文献2参照)。   An image processing apparatus such as a digital camera or a digital video camera converts an object image into an image signal corresponding to the intensity of light by an image sensor such as a CMOS sensor or a CCD, and performs image signal processing. In recent years, the performance of an image sensor has been improved, and an image signal with a high dynamic range can be generated. In addition, a display device using a method of increasing the luminance difference between regions by increasing the luminance of the backlight and local dimming has been disclosed because the performance of the display device has been improved to display an image signal with a high dynamic range. (See Patent Document 1). In addition, for the purpose of reducing the power consumption of the display device, a technique for suppressing the light emission of the backlight is also disclosed (see Patent Document 2).

特開2012−194239号公報JP 2012-194239 A 特開2014−142480号公報JP 2014-142480 A

しかし、高ダイナミックレンジの画像信号を表示するために、ローカルデミングの手法を用いたとしても、基本的には、バックライトの出力を上げる必要があり、消費電力が増加するため、特にバッテリ駆動のカムコーダでは撮影時間が短くなってしまう。また、十分な電力供給が確保され、消費電力が問題とならない場合でも、極端に高輝度の領域を有する映像を長時間連続して見ると、ユーザの目の疲労を招いてしまう課題がある。   However, even if a local dimming method is used to display an image signal with a high dynamic range, basically, it is necessary to increase the output of the backlight, which increases power consumption. With a camcorder, the shooting time is shortened. Further, even when sufficient power supply is ensured and power consumption is not a problem, there is a problem in that when an image having an extremely high luminance region is viewed continuously for a long time, the eyes of the user are fatigued.

また、バックライトの発光を抑制する等して、高輝度領域の表示を抑制した場合は、消費電力的には有利になり、目の疲労という点でも軽減される方向であるが、高ダイナミックレンジの画像の、本来の階調を確認できないという課題がある。   In addition, if the display of a high-brightness area is suppressed by suppressing the light emission of the backlight, etc., it will be advantageous in terms of power consumption and will also be reduced in terms of eye fatigue, but it has a high dynamic range. There is a problem that the original gradation of the image cannot be confirmed.

本発明の目的は、高ダイナミックレンジの画像を表示でき、かつ消費電力を低減し、目の疲労を軽減することができる画像処理装置、画像処理方法及びプログラムを提供することである。   An object of the present invention is to provide an image processing apparatus, an image processing method, and a program capable of displaying an image with a high dynamic range, reducing power consumption, and reducing eye fatigue.

本発明の画像処理装置は、各画素値が第1のビット数で表現される第1の画像信号を生成する撮像部と、第1の表示モードでは、各画素値が第1のビット数で表現される第1の画像信号を表示し、第2の表示モードでは、各画素値が前記第1のビット数より少ない第2のビット数で表現される第2の画像信号を表示する表示部と、前記第1の表示モードと前記第2の表示モードを切り替える切り替え部と、前記第1の表示モードでは、前記表示部を前記第1の表示モードに制御し、前記撮像部により生成された前記第1の画像信号を前記表示部に表示させ、前記第2の表示モードでは、前記表示部を前記第2の表示モードに制御し、前記撮像部により生成された前記第1の画像信号を前記第2の画像信号に変換し、前記変換した前記第2の画像信号を前記表示部に表示させる制御部とを有することを特徴とする。   An image processing apparatus according to the present invention includes an imaging unit that generates a first image signal in which each pixel value is expressed by a first number of bits, and each pixel value has a first number of bits in the first display mode. A display unit that displays a first image signal to be expressed and displays a second image signal in which each pixel value is expressed by a second bit number smaller than the first bit number in the second display mode. A switching unit that switches between the first display mode and the second display mode; and in the first display mode, the display unit is controlled to the first display mode and is generated by the imaging unit. The first image signal is displayed on the display unit, and in the second display mode, the display unit is controlled to the second display mode, and the first image signal generated by the imaging unit is displayed. The second image signal is converted into the second image signal, and the converted second image is output. And having a control unit for displaying a signal to the display unit.

本発明によれば、必要な場合のみ第1の画像信号を表示させることができるので、消費電力を低減し、目の疲労を軽減することができる。   According to the present invention, since the first image signal can be displayed only when necessary, power consumption can be reduced and eye fatigue can be reduced.

画像処理装置の構成例を示すブロック図である。It is a block diagram which shows the structural example of an image processing apparatus. 標準ダイナミックレンジ指定のUI例を示す図である。It is a figure which shows UI example of standard dynamic range designation | designated. 撮影時の表示モード切り替え処理を示すフローチャートである。It is a flowchart which shows the display mode switching process at the time of imaging | photography. SDR階調変換のマッピングを示す図である。It is a figure which shows the mapping of SDR gradation conversion. 再生時のインデックス表示例を示す図である。It is a figure which shows the example of an index display at the time of reproduction | regeneration. 再生時のバックライト制御処理を示すフローチャートである。It is a flowchart which shows the backlight control processing at the time of reproduction | regeneration. 再生時に強制表示モードを設定した際の制御のフローチャートである。It is a flowchart of control at the time of setting a forced display mode during reproduction.

(第1の実施形態)
図1は、本発明の第1の実施形態による画像処理装置100の構成例を示すブロック図である。例えば、画像処理装置100は、デジタルカメラ又はデジタルビデオカメラ等である。画像処理装置100は、主制御部101、操作部106、表示部107、表示制御部108、撮像部109、レンズユニット110、信号処理部111、CODEC112、ROM113、RAM114、記録媒体制御部115、及び記録媒体116を有する。さらに、画像処理装置100は、バス117を有する。
(First embodiment)
FIG. 1 is a block diagram showing a configuration example of an image processing apparatus 100 according to the first embodiment of the present invention. For example, the image processing apparatus 100 is a digital camera or a digital video camera. The image processing apparatus 100 includes a main control unit 101, an operation unit 106, a display unit 107, a display control unit 108, an imaging unit 109, a lens unit 110, a signal processing unit 111, a CODEC 112, a ROM 113, a RAM 114, a recording medium control unit 115, and A recording medium 116 is included. Further, the image processing apparatus 100 includes a bus 117.

主制御部101は、CPU及びメモリ等を有し、画像処理装置100の全体の処理を制御する。主制御部101は、機能ブロックとして、露出制御部102、記録制御部103、管理情報解析部104、及び再生制御部105を有する。主制御部101は、ROM113に記憶されたプログラム、RAM114に記憶された情報、又は操作部106からの情報等に従って、画像処理装置100の各部を制御する。   The main control unit 101 includes a CPU, a memory, and the like, and controls the overall processing of the image processing apparatus 100. The main control unit 101 includes an exposure control unit 102, a recording control unit 103, a management information analysis unit 104, and a reproduction control unit 105 as functional blocks. The main control unit 101 controls each unit of the image processing apparatus 100 in accordance with a program stored in the ROM 113, information stored in the RAM 114, information from the operation unit 106, or the like.

操作部106は、例えば、電源ボタン、記録開始ボタン、停止ボタン、メニュー表示ボタン、モード切り替えスイッチ、決定ボタン等の各種操作を入力する操作子を有する。また、操作部106は、カーソルキー、ポインティングデバイス、タッチパネル、ダイヤル等の操作子を有していてもよい。操作部106は、ユーザにより、操作子が操作されると、主制御部101に操作信号を出力する。操作部106の各操作子は、表示部107に表示される種々の機能アイコンとして実現されることも可能である。ユーザは、これらの機能アイコンを選択又は操作することが可能である。表示部107は、例えば液晶表示デバイスを有し、表示制御部108の制御により、画像、メニュー画面、及びその他必要な情報を表示する。表示制御部108は、表示部107に対し、表示する画像を出力するとともに、バックライトの発光量を制御する。   The operation unit 106 includes operators for inputting various operations such as a power button, a recording start button, a stop button, a menu display button, a mode switch, and a determination button. The operation unit 106 may have operation elements such as a cursor key, a pointing device, a touch panel, and a dial. The operation unit 106 outputs an operation signal to the main control unit 101 when an operation element is operated by the user. Each operator of the operation unit 106 can be realized as various function icons displayed on the display unit 107. The user can select or operate these function icons. The display unit 107 includes, for example, a liquid crystal display device, and displays an image, a menu screen, and other necessary information under the control of the display control unit 108. The display control unit 108 outputs an image to be displayed to the display unit 107 and controls the light emission amount of the backlight.

レンズユニット110は、集光のための固定レンズ群、変倍レンズ群、絞り、変倍レンズ群の動きで移動した結像位置を補正する機能と焦点調節を行う機能とを兼ね備えた補正レンズ群を有し、被写体を撮像部109上に結像させる。撮像部109は、レンズユニット110により結像された光を電荷に変換し、動画像信号を出力する。信号処理部111は、画像処理部であり、撮像部109が出力する画像信号に適したホワイトバランスのゲイン値を算出し、撮像部109が出力する画像信号にゲイン値を乗算する。その後、信号処理部111は、画像信号をRGB信号から各12ビットのYCbCr信号に変換し、デジタル画像信号をRAM114に書き込む。CODEC112は、圧縮伸張回路であり、RAM114に記憶されているデジタル画像信号をMPEG圧縮した圧縮ビデオデータを生成(エンコード)し、RAM114に圧縮ビデオデータを書き込む。また、CODEC112は、MPEGの圧縮ビデオデータを入力し、これを伸張する機能(デコード)も兼ね備えている。   The lens unit 110 is a correction lens group that has both a function of correcting an imaging position moved by the movement of a fixed lens group, a variable power lens group, a stop, and a variable power lens group for focusing and a function of performing focus adjustment. And the subject is imaged on the imaging unit 109. The imaging unit 109 converts the light imaged by the lens unit 110 into an electric charge and outputs a moving image signal. The signal processing unit 111 is an image processing unit, calculates a white balance gain value suitable for the image signal output by the imaging unit 109, and multiplies the image signal output by the imaging unit 109 by the gain value. Thereafter, the signal processing unit 111 converts the image signal from the RGB signal to a 12-bit YCbCr signal, and writes the digital image signal in the RAM 114. The CODEC 112 is a compression / decompression circuit, generates (encodes) compressed video data obtained by MPEG compression of a digital image signal stored in the RAM 114, and writes the compressed video data in the RAM 114. The CODEC 112 also has a function (decode) for inputting and decompressing MPEG compressed video data.

ROM113は、フラッシュROMであり、主制御部101が実行するプログラム等が格納されている。また、ROM113の一部領域は、バックアップ用として、画像処理装置100の状態等を保持するために使用される。RAM114は、主制御部101、信号処理部111又はCODEC112等がワークメモリとして使用する揮発性メモリである。記録媒体制御部115は、例えばメモリカードコントローラである。記録媒体制御部115は、記録制御部103の制御の下、CODEC112で生成され、RAM114に書き込まれている圧縮ビデオデータ(動画像データ)をFATファイルシステム等のコンピュータに対応可能なフォーマットに従って、記録媒体116に記録する。記録媒体116は、例えばメモリカードであり、画像処理装置100から取り外し可能な着脱可能な記録媒体であり、画像処理装置100以外にもパーソナルコンピュータ等に装着することができる。上記の各ブロックは、バス117を介して、データのやり取りを行う。   A ROM 113 is a flash ROM, and stores a program executed by the main control unit 101. In addition, a partial area of the ROM 113 is used for backup and for holding the state of the image processing apparatus 100 and the like. The RAM 114 is a volatile memory used as a work memory by the main control unit 101, the signal processing unit 111, the CODEC 112, or the like. The recording medium control unit 115 is, for example, a memory card controller. The recording medium control unit 115 records the compressed video data (moving image data) generated by the CODEC 112 and written in the RAM 114 under the control of the recording control unit 103 according to a format compatible with a computer such as a FAT file system. Recording on the medium 116. The recording medium 116 is, for example, a memory card and is a detachable recording medium that can be detached from the image processing apparatus 100, and can be attached to a personal computer or the like in addition to the image processing apparatus 100. Each of the above blocks exchanges data via the bus 117.

図2は、高ダイナミックレンジ(HDR)の輝度範囲の中から、標準ダイナミックレンジ(SDR)の輝度範囲をユーザが指定する表示部107の画面の例である。画像信号には、高ダイナミックレンジの画像信号と標準ダイナミックレンジの画像信号の2種類の画像信号がある。高ダイナミックレンジの画像信号は、第1の画像信号であり、例えば、各12ビットのYCbCr信号である。標準ダイナミックレンジの画像信号は、第2の画像信号であり、例えば、各8ビットのYCbCr信号である。信号処理部111は、高ダイナミックレンジの画像信号を階調変換することにより、標準ダイナミックレンジの画像信号を生成し、標準ダイナミックレンジの画像信号を表示部107に表示させることができる。表示部107は、図2に示すように、標準ダイナミックレンジの動画像及び輝度範囲指定ウインドウ200を表示する。表示部107は、輝度範囲指定ウインドウ200内に、HDR輝度範囲201、SDR輝度範囲202、上限ポインタ203、及び下限ポインタ204を表示する。輝度は、YCbCr信号のうちのY信号である。HDR輝度範囲201は、高ダイナミックレンジの輝度範囲を示す。SDR輝度範囲202は、標準ダイナミックレンジの輝度範囲を示し、HDR輝度範囲201の中の一部の範囲である。上限ポインタ203は、ユーザがタッチパネルによりSDR輝度範囲202の上限を指定するためのポインタである。下限ポインタ204は、ユーザがタッチパネルによりSDR輝度範囲202の下限を指定するためのポインタである。ユーザは、上限ポインタ203及び下限ポインタ204により、HDR輝度範囲201に対するSDR輝度範囲202の比率を指定することができる。なお、図2では、グラフィックを用いたUIによりSDR輝度範囲202を指定しているが、数値入力によりSDR輝度範囲202の上限値及び下限値を、例えば、HDR輝度範囲201の100%に対する%指定値で指定することも可能である。   FIG. 2 is an example of the screen of the display unit 107 in which the user designates the luminance range of the standard dynamic range (SDR) from the luminance range of the high dynamic range (HDR). There are two types of image signals: a high dynamic range image signal and a standard dynamic range image signal. The high dynamic range image signal is the first image signal, for example, a 12-bit YCbCr signal. The standard dynamic range image signal is the second image signal, for example, an 8-bit YCbCr signal. The signal processing unit 111 can generate a standard dynamic range image signal by performing tone conversion on the high dynamic range image signal, and can display the standard dynamic range image signal on the display unit 107. As shown in FIG. 2, the display unit 107 displays a standard dynamic range moving image and a luminance range designation window 200. The display unit 107 displays an HDR luminance range 201, an SDR luminance range 202, an upper limit pointer 203, and a lower limit pointer 204 in the luminance range designation window 200. The luminance is a Y signal in the YCbCr signal. The HDR luminance range 201 indicates a luminance range with a high dynamic range. The SDR luminance range 202 indicates a luminance range of the standard dynamic range, and is a part of the HDR luminance range 201. The upper limit pointer 203 is a pointer for the user to specify the upper limit of the SDR luminance range 202 using the touch panel. The lower limit pointer 204 is a pointer for the user to specify the lower limit of the SDR luminance range 202 using the touch panel. The user can specify the ratio of the SDR luminance range 202 to the HDR luminance range 201 with the upper limit pointer 203 and the lower limit pointer 204. In FIG. 2, the SDR luminance range 202 is specified by a graphic UI, but the upper limit value and the lower limit value of the SDR luminance range 202 are specified by numerical input, for example,% specification for 100% of the HDR luminance range 201. It is also possible to specify by value.

図3は、画像処理装置100の画像処理方法を示すフローチャートであり、表示部107の表示モードを切り替える処理を示す。ステップS301では、主制御部101は、撮像部109が生成する高ダイナミックの画像信号を表示部107に表示するため、主表示モードの初期値をHDR表示モードに設定する。HDR表示モードは、第1の表示モードである。HDR表示モードでは、信号処理部111は、記録用に生成した各12ビットのYCbCr信号の画像信号と同様の画像信号を表示用として生成し、RAM114に書き込む。12ビットのY信号は、0から4095までの値をとることができる。表示制御部108は、表示部107のバックライトの発光をデバイスの最高輝度(HDR表示モードの最高輝度)まで許容し、Y信号が4095の場合に表示部107がHDR表示モードの最高輝度となるように、表示するYCbCr信号を表示部107に出力する。これにより、表示制御部108は、高ダイナミックレンジの画像信号を表示する。   FIG. 3 is a flowchart showing an image processing method of the image processing apparatus 100, and shows processing for switching the display mode of the display unit 107. In step S301, the main control unit 101 sets the initial value of the main display mode to the HDR display mode in order to display the high dynamic image signal generated by the imaging unit 109 on the display unit 107. The HDR display mode is the first display mode. In the HDR display mode, the signal processing unit 111 generates an image signal similar to the image signal of each 12-bit YCbCr signal generated for recording, and writes it in the RAM 114. The 12-bit Y signal can take values from 0 to 4095. The display control unit 108 allows the backlight of the display unit 107 to emit light up to the maximum luminance of the device (maximum luminance in the HDR display mode), and when the Y signal is 4095, the display unit 107 has the maximum luminance in the HDR display mode. Thus, the YCbCr signal to be displayed is output to the display unit 107. Thereby, the display control unit 108 displays an image signal with a high dynamic range.

次に、ステップS302では、主制御部101は、ユーザの操作部106の操作により、主表示モードをSDR表示モードとする指示を入力すると、標準ダイナミックの画像信号を表示部107に表示するため、主表示モードをSDR表示モードに設定する。SDR表示モードは、第2の表示モードである。次に、ステップS303では、主制御部101は、SDR表示モードの制御を開始する。すると、信号処理部111は、記録用に生成した各12ビットのYCbCr信号の画像信号をRAM114に書き込む。そして、信号処理部111は、各12ビットのYCbCr信号の高ダイナミックレンジ画像信号を各8ビットのYCbCr信号の標準ダイナミックレンジ画像信号に階調変換し、各8ビットのYCbCr信号の画像信号を表示用画像信号としてRAM114に書き込む。   Next, in step S302, when the main control unit 101 inputs an instruction to set the main display mode to the SDR display mode by operating the user operation unit 106, the main control unit 101 displays a standard dynamic image signal on the display unit 107. The main display mode is set to the SDR display mode. The SDR display mode is the second display mode. Next, in step S303, the main control unit 101 starts control of the SDR display mode. Then, the signal processing unit 111 writes the image signal of each 12-bit YCbCr signal generated for recording in the RAM 114. Then, the signal processing unit 111 performs gradation conversion of the high dynamic range image signal of each 12-bit YCbCr signal into the standard dynamic range image signal of each 8-bit YCbCr signal, and displays the image signal of each 8-bit YCbCr signal. The image signal is written in the RAM 114.

図4は、信号処理部111の階調変換テーブルを示す図である。信号処理部111は、図4の階調変換テーブルを参照し、階調変換前の高ダイナミックレンジの12ビット画素値を、階調変換後の標準ダイナミックレンジの8ビット画素値に変換する。高ダイナミックレンジの12ビット画素値は、0〜4095の値をとる。標準ダイナミックレンジの8ビット画素値は、0〜255の値をとる。具体的には、信号処理部111は、図4の階調変換テーブルを参照し、12ビットのY信号と12ビットのCb信号と12ビットのCr信号を、8ビットのY信号と8ビットのCb信号と8ビットのCr信号に変換する。12ビットのY信号の0〜4095のうちで、SDR下限値401は、図2の下限ポインタ204により指定されたSDR輝度範囲202の下限値であり、SDR上限値402は、図2の上限ポインタ203により指定されたSDR輝度範囲202の上限値である。信号処理部111は、各12ビットのYCbCr信号のSDR下限値401からSDR上限値402までの画素値を、各8ビットのYCbCr信号の0から255までの画素値にマッピングする。信号処理部111は、このマッピングにより、各12ビットのYCbCr信号の高ダイナミックレンジの中のユーザが指定した一部の範囲を、標準ダイナミックレンジとして取り出す。なお、信号処理部111は、各12ビットのYCbCr信号の「0」からSDR下限値401までの画素値を、各8ビットのYCbCr信号の「0」の画素値にマッピングする。また、信号処理部111は、各12ビットのYCbCr信号のSDR上限値402から「4095」までの画素値を、各8ビットのYCbCr信号の「255」の画素値にマッピングする。表示制御部108は、表示部107のバックライトの発光を、SDR表示モードの最高輝度以下に制御し、標準ダイナミックレンジのY信号が255の場合にSDR表示モードの最高輝度となるように、標準ダイナミックレンジの画像信号を表示部107に出力する。SDR表示モードの最高輝度は、HDR表示モードの最高輝度より低い。表示部107は、図2に示すように、標準ダイナミックレンジの動画像を表示する。   FIG. 4 is a diagram illustrating a gradation conversion table of the signal processing unit 111. The signal processing unit 111 refers to the gradation conversion table of FIG. 4 and converts the 12-bit pixel value of the high dynamic range before gradation conversion into the 8-bit pixel value of the standard dynamic range after gradation conversion. A 12-bit pixel value in a high dynamic range takes a value from 0 to 4095. The 8-bit pixel value of the standard dynamic range takes a value from 0 to 255. Specifically, the signal processing unit 111 refers to the gradation conversion table in FIG. 4, and converts the 12-bit Y signal, the 12-bit Cb signal, and the 12-bit Cr signal into the 8-bit Y signal and the 8-bit Y signal. Conversion to Cb signal and 8-bit Cr signal. Among 0 bits to 4095 of the 12-bit Y signal, the SDR lower limit value 401 is the lower limit value of the SDR luminance range 202 designated by the lower limit pointer 204 in FIG. 2, and the SDR upper limit value 402 is the upper limit pointer in FIG. This is the upper limit value of the SDR luminance range 202 specified by 203. The signal processing unit 111 maps the pixel values from the SDR lower limit value 401 to the SDR upper limit value 402 of each 12-bit YCbCr signal to the pixel values from 0 to 255 of each 8-bit YCbCr signal. Based on this mapping, the signal processing unit 111 extracts a part of the high dynamic range of each 12-bit YCbCr signal designated by the user as a standard dynamic range. The signal processing unit 111 maps the pixel values from “0” of each 12-bit YCbCr signal to the SDR lower limit value 401 to “0” pixel values of each 8-bit YCbCr signal. Further, the signal processing unit 111 maps the pixel values from the SDR upper limit value 402 to “4095” of each 12-bit YCbCr signal to the pixel value “255” of each 8-bit YCbCr signal. The display control unit 108 controls the light emission of the backlight of the display unit 107 to be equal to or lower than the maximum luminance in the SDR display mode, and the standard luminance range is set to the maximum luminance in the SDR display mode when the Y signal of the standard dynamic range is 255. The dynamic range image signal is output to the display unit 107. The maximum brightness in the SDR display mode is lower than the maximum brightness in the HDR display mode. As shown in FIG. 2, the display unit 107 displays a moving image having a standard dynamic range.

次に、図3のステップS304では、主制御部101内の露出制御部102は、ユーザの操作部106の操作により、露出調整開始の指示を入力すると、撮像部109により生成される画像の露出調整の制御を開始し、ステップS305に処理を進める。ステップS305では、主制御部101は、HDR表示モードの制御を開始する。すると、表示制御部108は、撮像部109が生成する高ダイナミックの画像信号を表示部107に表示させる。次に、ステップS306では、主制御部101は、ユーザが露出調整の指示中の間は、露出調整に必要な輝度情報を持つ高ダイナミックレンジの画像を表示部107に表示させ、高ダイナミックレンジの画像の表示を継続させる。ユーザは、高ダイナミックレンジの画像の表示を見ながら、露出調整を指示することができる。その後、ユーザの操作部106の操作による露出調整の指示が終わると、主制御部101は、露出調整の制御を終了し、ステップS303に処理を戻し、標準ダイナミックレンジの画像の表示を再開させる。表示部107は、SDR表示モードでは、HDR表示モードに比べて、最高輝度が低いので、消費電力を低減し、ユーザの目の疲労を軽減することができる。   Next, in step S304 in FIG. 3, when the exposure control unit 102 in the main control unit 101 inputs an instruction to start exposure adjustment by the operation of the user operation unit 106, the exposure of the image generated by the imaging unit 109 is exposed. Adjustment control is started, and the process proceeds to step S305. In step S305, the main control unit 101 starts control of the HDR display mode. Then, the display control unit 108 causes the display unit 107 to display a highly dynamic image signal generated by the imaging unit 109. In step S306, the main control unit 101 displays a high dynamic range image having luminance information necessary for exposure adjustment on the display unit 107 while the user is instructing exposure adjustment. Continue displaying. The user can instruct exposure adjustment while viewing the display of an image with a high dynamic range. After that, when the exposure adjustment instruction by the user's operation of the operation unit 106 is finished, the main control unit 101 ends the exposure adjustment control, returns the process to step S303, and resumes the display of the standard dynamic range image. The display unit 107 has lower maximum luminance in the SDR display mode than in the HDR display mode, so that power consumption can be reduced and fatigue of the user's eyes can be reduced.

なお、本実施形態では、図2に示すUIにより、ユーザがSDR輝度範囲202を指定しているが、あらかじめ定めた所定のSDR輝度範囲202を設定してもよい。また、本実施形態では、SDR表示モード時の表示部107のバックライトの最高輝度を所定の輝度としているが、これに限定されない。図2に示すようなUIにより、ユーザが指定したHDR輝度範囲201に対するSDR輝度範囲の202の割合に応じて、SDR表示モード時の最高輝度を変化させてもよい。   In the present embodiment, the user specifies the SDR luminance range 202 using the UI shown in FIG. 2, but a predetermined SDR luminance range 202 may be set in advance. In the present embodiment, the maximum luminance of the backlight of the display unit 107 in the SDR display mode is set to a predetermined luminance, but the present invention is not limited to this. The maximum luminance in the SDR display mode may be changed according to the ratio of the SDR luminance range 202 with respect to the HDR luminance range 201 specified by the user by using a UI as shown in FIG.

以上のように、表示部107は、HDR表示モードでは、各画素値が第1のビット数で表現される第1の画像信号を表示し、SDR表示モードでは、各画素値が第1のビット数より少ない第2のビット数で表現される第2の画像信号を表示する。第1の画像信号は、高ダイナミックレンジの画像信号であり、第2の画像信号は、標準ダイナミックレンジの画像信号である。例えば、第1のビット数は12ビットであり、第2のビット数は8ビットである。第1の画像信号と第2の画像信号は、それぞれ、YCbCr信号であり、動画像信号である。表示部107は、SDR表示モードの最高輝度がHDR表示モードの最高輝度より低い。   As described above, the display unit 107 displays the first image signal in which each pixel value is expressed by the first number of bits in the HDR display mode, and each pixel value has the first bit in the SDR display mode. A second image signal expressed by a second number of bits smaller than the number is displayed. The first image signal is an image signal with a high dynamic range, and the second image signal is an image signal with a standard dynamic range. For example, the first number of bits is 12 bits and the second number of bits is 8 bits. Each of the first image signal and the second image signal is a YCbCr signal, which is a moving image signal. The display unit 107 has the highest luminance in the SDR display mode lower than the highest luminance in the HDR display mode.

撮像部109は、各画素値が第1のビット数で表現される第1の画像信号を生成する。主制御部101は、切り替え部であり、露出調整等の操作部106の操作に応じて、HDR表示モードとSDR表示モードを切り替える。主制御部101は、ステップS305のHDR表示モードでは、表示部107をHDR表示モードに制御し、撮像部109により生成された第1の画像信号を表示部107に表示させる。また、主制御部101は、ステップS303のSDR表示モードでは、表示部107をSDR表示モードに制御し、撮像部109により生成された第1の画像信号を第2の画像信号に変換し、その変換した第2の画像信号を表示部107に表示させる。   The imaging unit 109 generates a first image signal in which each pixel value is expressed by a first number of bits. The main control unit 101 is a switching unit, and switches between the HDR display mode and the SDR display mode according to the operation of the operation unit 106 such as exposure adjustment. In the HDR display mode in step S305, the main control unit 101 controls the display unit 107 to the HDR display mode and causes the display unit 107 to display the first image signal generated by the imaging unit 109. Further, in the SDR display mode in step S303, the main control unit 101 controls the display unit 107 to the SDR display mode, converts the first image signal generated by the imaging unit 109 into the second image signal, and The converted second image signal is displayed on the display unit 107.

図2に示すように、主制御部101は、表示範囲設定部であり、第1の画像信号の各画素値の全範囲201の中で表示範囲202を設定する。図4に示すように、主制御部101及び信号処理部111は、SDR表示モードでは、上記で設定された表示範囲202の第1の画像信号の画素値を、第2のビット数のダイナミックレンジで、第2の画像信号の画素値に変換する。主制御部101は、第1の画像信号の各画素値の全範囲201の中で、上記で設定された表示範囲202より小さい画素値を、第2の画像信号の最小の画素値「0」に変換する。そして、主制御部101は、第1の画像信号の各画素値の全範囲201の中で、上記で設定された表示範囲202より大きい画素値を、第2の画像信号の最大の画素値「255」に変換する。図2に示すように、表示部107は、タッチパネルを有し、第1の画像信号の各画素値の全範囲201に対する表示範囲202を表示する。主制御部101は、表示部107に表示されている表示範囲202のタッチパネル操作に応じて、表示範囲202を設定する。   As shown in FIG. 2, the main control unit 101 is a display range setting unit, and sets the display range 202 in the entire range 201 of each pixel value of the first image signal. As shown in FIG. 4, in the SDR display mode, the main control unit 101 and the signal processing unit 111 convert the pixel value of the first image signal in the display range 202 set as described above to the dynamic range of the second number of bits. Thus, the pixel value of the second image signal is converted. The main control unit 101 sets a pixel value smaller than the display range 202 set above in the entire range 201 of each pixel value of the first image signal to a minimum pixel value “0” of the second image signal. Convert to Then, the main control unit 101 sets a pixel value larger than the display range 202 set above in the entire range 201 of each pixel value of the first image signal to the maximum pixel value “2” of the second image signal. 255 ". As illustrated in FIG. 2, the display unit 107 includes a touch panel and displays a display range 202 for the entire range 201 of each pixel value of the first image signal. The main control unit 101 sets the display range 202 according to the touch panel operation of the display range 202 displayed on the display unit 107.

主制御部101は、露出調整等の操作部106が操作されている期間では、HDR表示モードに設定し、露出調整等の操作部106が操作されていない期間では、SDR表示モードに設定する。具体的には、主制御部101は、撮像部109により生成される第1の画像信号の露出調整制御を行っている期間では、HDR表示モードに設定し、撮像部109により生成される第1の画像信号の露出調整制御を行っていない期間では、SDR表示モードに設定する。なお、主制御部101は、操作部106が操作されている期間では、SDR表示モードに設定し、操作部106が操作されていない期間では、HDR表示モードに設定するようにしてもよい。   The main control unit 101 sets the HDR display mode when the operation unit 106 such as exposure adjustment is operated, and sets the SDR display mode when the operation unit 106 such as exposure adjustment is not operated. Specifically, the main control unit 101 sets the HDR display mode in the period during which exposure adjustment control of the first image signal generated by the imaging unit 109 is performed, and the first control unit 101 generates the first image generated by the imaging unit 109. In the period when the exposure adjustment control of the image signal is not performed, the SDR display mode is set. Note that the main control unit 101 may set the SDR display mode during the period in which the operation unit 106 is operated, and set the HDR display mode in the period during which the operation unit 106 is not operated.

本実施形態によれば、高ダイナミックレンジの動画の本来の階調を確認することができ、必要な場合のみ高ダイナミックレンジの高輝度の動画を表示させることができる。   According to the present embodiment, the original gradation of a high dynamic range moving image can be confirmed, and a high dynamic range high luminance moving image can be displayed only when necessary.

(第2の実施形態)
本発明の第2の実施形態による画像処理装置100は、図1の構成と同じ構成を有する。以下、本実施形態が第1の実施形態と異なる点を説明する。本実施形態では、画像処理装置100の再生処理について説明する。画像処理装置100は、記録媒体116に記録されたファイルを再生することができる。その際、記録媒体制御部115は、記録媒体116に記録されているファイルを読み出す。記録媒体116には、動画、音声、静止画、各種の情報を、FAT(File Allocation Table)等のファイルシステムに従い、ファイルとして記録されている。また、動画は、各クリップの情報、プレイリスト情報、メディア管理情報等の階層構造で管理情報ファイルも記録媒体116に記録されている。主制御部101は、記録媒体116の装着を認識した場合は、まず、記録媒体116の管理情報ファイルをRAM114に読み込む。主制御部101内の管理情報解析部104は、RAM114の管理情報を解析することにより、記録媒体116に記録されている動画を認識し、再生対象として管理する。
(Second Embodiment)
An image processing apparatus 100 according to the second embodiment of the present invention has the same configuration as that of FIG. Hereinafter, the points of the present embodiment different from the first embodiment will be described. In the present embodiment, a reproduction process of the image processing apparatus 100 will be described. The image processing apparatus 100 can reproduce a file recorded on the recording medium 116. At that time, the recording medium control unit 115 reads the file recorded on the recording medium 116. In the recording medium 116, moving images, audio, still images, and various types of information are recorded as files according to a file system such as FAT (File Allocation Table). In addition, the management information file is recorded on the recording medium 116 in a hierarchical structure such as information on each clip, playlist information, and media management information. When the main control unit 101 recognizes that the recording medium 116 is attached, the main control unit 101 first reads the management information file of the recording medium 116 into the RAM 114. The management information analysis unit 104 in the main control unit 101 recognizes the moving image recorded on the recording medium 116 by analyzing the management information in the RAM 114 and manages it as a reproduction target.

図5は、動画再生モードにて、記録媒体116に記録されている動画の一覧表示画面500の表示例を示す図である。一覧表示画面500は、表示部107の表示画面である。主制御部101は、管理情報解析部104により認識された各動画ストリームファイルを記録媒体116からRAM114に読み込み、各動画の先頭フレーム画像をデコードし、サムネイル501〜504等を生成して表示部107に表示する。ここで、例えば、AVC規格では、記録媒体116は、動画ストリーム内のtone_mapping_information SEIにて、ダイナミックレンジの特性情報を記録している。主制御部101は、先頭フレーム画像をデコードする際にダイナミックレンジの特性情報を解析することで、その動画が高ダイナミックレンジの動画及び標準ダイナミックレンジの動画のいずれであるのかの判定を行う。主制御部101は、例えば、一覧表示画面500内のサムネイル502とサムネイル504の動画が高ダイナミックレンジの動画であると判定されたので、サムネイル502及び504上に「HDR」を示すアイコンを表示して、ユーザに知らせる。   FIG. 5 is a diagram showing a display example of the moving image list display screen 500 recorded on the recording medium 116 in the moving image reproduction mode. A list display screen 500 is a display screen of the display unit 107. The main control unit 101 reads each moving image stream file recognized by the management information analysis unit 104 from the recording medium 116 to the RAM 114, decodes the first frame image of each moving image, generates thumbnails 501 to 504 and the like, and displays the display unit 107. To display. Here, for example, in the AVC standard, the recording medium 116 records dynamic range characteristic information using tone_mapping_information SEI in the moving image stream. The main control unit 101 determines whether the moving image is a high dynamic range moving image or a standard dynamic range moving image by analyzing the dynamic range characteristic information when decoding the first frame image. The main control unit 101 displays, for example, an icon indicating “HDR” on the thumbnails 502 and 504 because the videos of the thumbnail 502 and the thumbnail 504 in the list display screen 500 are determined to be high dynamic range videos. Inform the user.

図6は、画像処理装置100の画像処理方法を示すフローチャートであり、動画の再生時の表示部107のバックライト制御を示す。ステップS601では、再生制御部105は、ユーザの操作部106の操作により、例えばサムネイル501の再生開始が指示されると、サムネイル501の動画の再生を開始する。再生制御部105は、指示された動画ストリームファイルを記録媒体116からRAM114に順次読み込み、CODEC112を制御して、表示可能な画像信号に順次デコードし、表示制御部108を介して、表示部107に画像を表示する。   FIG. 6 is a flowchart illustrating an image processing method of the image processing apparatus 100, and illustrates backlight control of the display unit 107 during reproduction of a moving image. In step S <b> 601, when the playback control unit 105 is instructed to start playback of the thumbnail 501, for example, by the operation of the operation unit 106 by the user, the playback control unit 105 starts playback of the moving image of the thumbnail 501. The playback control unit 105 sequentially reads the instructed video stream file from the recording medium 116 to the RAM 114, controls the CODEC 112, sequentially decodes it into a displayable image signal, and sends it to the display unit 107 via the display control unit 108. Display an image.

次に、ステップS602では、主制御部101は、サムネイル501の動画ストリームをデコードする際にダイナミックレンジの特性情報を解析することで、その動画が高ダイナミックレンジの動画及び標準ダイナミックレンジの動画のいずれであるのかを判定する。主制御部101は、高ダイナミックレンジの動画であると判定した場合にはステップS603に処理を進め、標準ダイナミックレンジの動画であると判定した場合にはステップS604に処理を進める。例えば、主制御部101は、サムネイル501の動画が標準ダイナミックレンジの動画であると判定し、ステップS604に処理を進める。   Next, in step S602, the main control unit 101 analyzes dynamic range characteristic information when decoding the moving image stream of the thumbnail 501, so that the moving image is either a high dynamic range moving image or a standard dynamic range moving image. It is determined whether it is. If the main control unit 101 determines that the moving image has a high dynamic range, the main control unit 101 proceeds to step S603. If the main control unit 101 determines that the moving image has a standard dynamic range, the main control unit 101 proceeds to step S604. For example, the main control unit 101 determines that the moving image of the thumbnail 501 is a moving image having a standard dynamic range, and proceeds to step S604.

ステップS604では、再生制御部105は、表示モードをSDR表示モードに設定する。再生制御部105は、表示制御部108をSDR表示モードに制御し、表示部107のバックライトをSDR表示モードの最高輝度まで使用可能に制御し、サムネイル501の標準ダイナミックレンジの動画を表示部107に表示させる。SDR表示モードでは、最高輝度が低いので、消費電力を低減し、ユーザの目の疲労を軽減することができる。再生制御部105は、サムネイル501の動画再生が終了すると、その次のサムネイル502の動画を再生するために、ステップS601に処理を戻す。   In step S604, the playback control unit 105 sets the display mode to the SDR display mode. The playback control unit 105 controls the display control unit 108 to the SDR display mode, controls the backlight of the display unit 107 to be usable up to the maximum brightness of the SDR display mode, and displays the moving image of the standard dynamic range of the thumbnail 501 in the display unit 107. To display. In the SDR display mode, since the maximum luminance is low, power consumption can be reduced and fatigue of the user's eyes can be reduced. When the reproduction of the moving image of the thumbnail 501 is completed, the reproduction control unit 105 returns the process to step S601 to reproduce the moving image of the next thumbnail 502.

ステップS601では、再生制御部105は、サムネイル502の動画の再生を開始する。次に、ステップS602では、主制御部101は、サムネイル502の動画が高ダイナミックレンジの動画であると判定し、ステップS603に処理を進める。   In step S601, the playback control unit 105 starts playback of the moving image of the thumbnail 502. Next, in step S602, the main control unit 101 determines that the moving image of the thumbnail 502 is a high dynamic range moving image, and advances the process to step S603.

ステップS603では、再生制御部105は、表示モードをHDR表示モードに設定する。再生制御部105は、表示制御部108をHDR表示モードに制御し、表示部107のバックライトをHDR表示モードの最高輝度まで使用可能に制御し、サムネイル502の高ダイナミックレンジの動画を表示部107に表示させる。その後も同様に、主制御部101は、次のサムネイルの動画を再生するために、ステップS601に処理を進める。以上のように、主制御部101は、再生する動画が高ダイナミックレンジの動画及び標準ダイナミックレンジの動画のいずれであるかにより、表示部107のバックライトの最高輝度を変える。   In step S603, the playback control unit 105 sets the display mode to the HDR display mode. The playback control unit 105 controls the display control unit 108 to the HDR display mode, controls the backlight of the display unit 107 to be usable up to the maximum brightness of the HDR display mode, and displays the high dynamic range moving image of the thumbnail 502 on the display unit 107. To display. Similarly, after that, the main control unit 101 advances the processing to step S601 in order to reproduce the moving image of the next thumbnail. As described above, the main control unit 101 changes the maximum luminance of the backlight of the display unit 107 depending on whether the moving image to be reproduced is a moving image with a high dynamic range or a moving image with a standard dynamic range.

図7は、画像処理装置100の他の画像処理方法を示すフローチャートであり、動画の再生時の表示部107の他のバックライト制御を示す。主制御部101は、ユーザの操作部106の操作による指示に応じて、あらかじめ強制HDR表示モード(第1の表示固定モード)と、強制SDR表示モード(第2の表示固定モード)と、強制表示オフモードのいずれかを主表示モードとして設定する。   FIG. 7 is a flowchart showing another image processing method of the image processing apparatus 100, and shows another backlight control of the display unit 107 at the time of reproducing a moving image. The main control unit 101 performs a forced HDR display mode (first display fixed mode), a forced SDR display mode (second display fixed mode), and a forced display in advance according to an instruction by the operation of the operation unit 106 by the user. One of the off modes is set as the main display mode.

ステップS601では、再生制御部105は、図6と同様に、動画の再生を開始する。次に、ステップS602では、主制御部101は、図6と同様に、その動画が高ダイナミックレンジの動画及び標準ダイナミックレンジの動画のいずれであるのかを判定する。主制御部101は、高ダイナミックレンジの動画であると判定した場合にはステップS701に処理を進め、標準ダイナミックレンジの動画であると判定した場合にはステップS703に処理を進める。   In step S601, the playback control unit 105 starts playback of a moving image, as in FIG. Next, in step S602, the main control unit 101 determines whether the moving image is a high dynamic range moving image or a standard dynamic range moving image, as in FIG. If the main control unit 101 determines that the moving image has a high dynamic range, the main control unit 101 proceeds to step S701. If the main control unit 101 determines that the moving image has a standard dynamic range, the main control unit 101 proceeds to step S703.

ステップS701では、主制御部101は、主表示モードが強制SDR表示モードであるか否かを判定する。主制御部101は、主表示モードが強制SDR表示モードである場合にはステップS702に処理を進め、主表示モードが強制HDR表示モード又は強制表示オフモードである場合にはステップS603aに処理を進める。   In step S701, the main control unit 101 determines whether or not the main display mode is the forced SDR display mode. The main control unit 101 advances the process to step S702 when the main display mode is the forced SDR display mode, and advances the process to step S603a when the main display mode is the forced HDR display mode or the forced display off mode. .

ステップS702では、信号処理部111は、第1の実施形態と同様に、高ダイナミックレンジの動画を標準ダイナミックレンジの動画に変換する。例えば、信号処理部111は、動画の記録時に設定したSDR下限値401からSDR上限値402までの画素値を、8ビットの0から255までの画素値にマッピングする情報を記録しておき、その情報を基に変換する。次に、ステップS604aでは、再生制御部105は、表示制御部108をSDR表示モードに制御し、表示部107のバックライトをSDR表示モードの最高輝度まで使用可能に制御し、標準ダイナミックレンジの動画を表示部107に表示させる。このステップS604aの処理は、図6のステップS604の処理と同様である。その後、主制御部101は、その次のサムネイルの動画を再生するために、ステップS601に処理を戻す。   In step S702, the signal processing unit 111 converts a moving image with a high dynamic range into a moving image with a standard dynamic range, as in the first embodiment. For example, the signal processing unit 111 records information for mapping the pixel values from the SDR lower limit value 401 to the SDR upper limit value 402 set at the time of recording the moving image to the 8-bit pixel values from 0 to 255. Convert based on information. Next, in step S604a, the playback control unit 105 controls the display control unit 108 to the SDR display mode, controls the backlight of the display unit 107 to be usable up to the maximum brightness of the SDR display mode, and moves the moving image with the standard dynamic range. Is displayed on the display unit 107. The process in step S604a is the same as the process in step S604 in FIG. Thereafter, the main control unit 101 returns the process to step S601 in order to reproduce the moving image of the next thumbnail.

ステップS603aでは、再生制御部105は、表示制御部108をHDR表示モードに制御し、表示部107のバックライトをHDR表示モードの最高輝度まで使用可能に制御し、高ダイナミックレンジの動画を表示部107に表示させる。このステップS603aの処理は、図6のステップS603の処理と同様である。その後、主制御部101は、その次のサムネイルの動画を再生するために、ステップS601に処理を戻す。   In step S603a, the playback control unit 105 controls the display control unit 108 to the HDR display mode, controls the backlight of the display unit 107 to be usable up to the maximum brightness in the HDR display mode, and displays a moving image with a high dynamic range. 107 is displayed. The processing in step S603a is the same as the processing in step S603 in FIG. Thereafter, the main control unit 101 returns the process to step S601 in order to reproduce the moving image of the next thumbnail.

ステップS703では、主制御部101は、主表示モードが強制HDR表示モードであるか否かを判定する。主制御部101は、主表示モードが強制HDR表示モードである場合にはステップS704に処理を進め、主表示モードが強制SDR表示モード又は強制表示オフモードである場合にはステップS604aに処理を進める。   In step S703, the main control unit 101 determines whether or not the main display mode is the forced HDR display mode. The main control unit 101 advances the process to step S704 when the main display mode is the forced HDR display mode, and advances the process to step S604a when the main display mode is the forced SDR display mode or the forced display off mode. .

ステップS704では、信号処理部111は、標準ダイナミックレンジの動画を高ダイナミックレンジの動画に変換する。例えば、信号処理部111は、標準ダイナミックレンジの動画に高ダイナミックレンジの情報がないため、標準ダイナミックレンジの動画の各画素値を所定の倍率で拡張し、所定のガンマ補正をかける処理等で実現可能である。次に、ステップS603bでは、再生制御部105は、表示制御部108をHDR表示モードに制御し、表示部107のバックライトをHDR表示モードの最高輝度まで使用可能に制御し、高ダイナミックレンジの動画を表示部107に表示させる。このステップS603bの処理は、図6のステップS603の処理と同様である。その後、主制御部101は、その次のサムネイルの動画を再生するために、ステップS601に処理を戻す。   In step S704, the signal processing unit 111 converts a moving image with a standard dynamic range into a moving image with a high dynamic range. For example, the signal processing unit 111 does not have high dynamic range information in the standard dynamic range moving image, and therefore, it is realized by a process of expanding each pixel value of the standard dynamic range moving image by a predetermined magnification and applying a predetermined gamma correction. Is possible. Next, in step S603b, the playback control unit 105 controls the display control unit 108 to the HDR display mode, and controls the backlight of the display unit 107 to be usable up to the maximum brightness of the HDR display mode, thereby moving the moving image with a high dynamic range. Is displayed on the display unit 107. The process in step S603b is the same as the process in step S603 in FIG. Thereafter, the main control unit 101 returns the process to step S601 in order to reproduce the moving image of the next thumbnail.

ステップS604bでは、再生制御部105は、表示制御部108をSDR表示モードに制御し、表示部107のバックライトをSDR表示モードの最高輝度まで使用可能に制御し、標準ダイナミックレンジの動画を表示部107に表示させる。このステップS604bの処理は、図6のステップS604の処理と同様である。その後、主制御部101は、その次のサムネイルの動画を再生するために、ステップS601に処理を戻す。   In step S604b, the playback control unit 105 controls the display control unit 108 to the SDR display mode, controls the backlight of the display unit 107 to be usable up to the maximum brightness of the SDR display mode, and displays a moving image with a standard dynamic range. 107 is displayed. The process in step S604b is the same as the process in step S604 in FIG. Thereafter, the main control unit 101 returns the process to step S601 in order to reproduce the moving image of the next thumbnail.

以上のように、高ダイナミックレンジの画像信号は第1の画像信号であり、標準ダイナミックレンジの画像信号は第2の画像信号である。図6では、再生制御部105は、再生指示された画像を読み出し、その読み出した画像が第1の画像信号である場合には、表示部107をHDR表示モードに制御し、その読み出した第1の画像信号を表示部107に表示させる。また、再生制御部105は、その読み出した画像が第2の画像信号である場合には、表示部107をSDR表示モードに制御し、その読み出した第2の画像信号を表示部107に表示させる。   As described above, the high dynamic range image signal is the first image signal, and the standard dynamic range image signal is the second image signal. In FIG. 6, the reproduction control unit 105 reads an image instructed to reproduce, and when the read image is the first image signal, the reproduction control unit 105 controls the display unit 107 to the HDR display mode, and reads the read first image. Are displayed on the display unit 107. Further, when the read image is the second image signal, the reproduction control unit 105 controls the display unit 107 to the SDR display mode, and causes the display unit 107 to display the read second image signal. .

図7では、再生制御部105は、読み出した画像が第1の画像信号である場合において、強制SDR表示モードが設定されている場合には、読み出した第1の画像信号を第2の画像信号に変換し、その変換した第2の画像信号を表示部107に表示させる。その際、再生制御部105は、表示部107をSDR表示モードに制御する。また、再生制御部105は、読み出した画像が第1の画像信号である場合において、強制SDR表示モードが設定されていない場合には、表示部107をHDR表示モードに制御し、読み出した第1の画像信号を表示部107に表示させる。   In FIG. 7, when the read image is the first image signal and the forced SDR display mode is set, the reproduction control unit 105 converts the read first image signal to the second image signal. And the converted second image signal is displayed on the display unit 107. At that time, the reproduction control unit 105 controls the display unit 107 to the SDR display mode. Further, when the read image is the first image signal and the forced SDR display mode is not set, the reproduction control unit 105 controls the display unit 107 to the HDR display mode and reads the read first image. Are displayed on the display unit 107.

また、再生制御部105は、読み出した画像が第2の画像信号である場合において、強制HDR表示モードが設定されている場合には、読み出した第2の画像信号を第1の画像信号に変換し、その変換した第1の画像信号を表示部107に表示させる。その際、再生制御部105は、表示部107をHDR表示モードに制御する。また、再生制御部105は、読み出した画像が第2の画像信号である場合において、強制HDR表示モードが設定されていない場合には、表示部107をSDR表示モードに制御し、読み出した第2の画像信号を表示部107に表示させる。   In addition, when the read image is the second image signal and the forced HDR display mode is set, the reproduction control unit 105 converts the read second image signal into the first image signal. Then, the converted first image signal is displayed on the display unit 107. At that time, the reproduction control unit 105 controls the display unit 107 to the HDR display mode. Further, when the read image is the second image signal and the forced HDR display mode is not set, the reproduction control unit 105 controls the display unit 107 to the SDR display mode and reads the read second image. Are displayed on the display unit 107.

(その他の実施形態)
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサがプログラムを読み出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
(Other embodiments)
The present invention supplies a program that realizes one or more functions of the above-described embodiments to a system or apparatus via a network or a storage medium, and one or more processors in the computer of the system or apparatus read and execute the program This process can be realized. It can also be realized by a circuit (for example, ASIC) that realizes one or more functions.

なお、上記実施形態は、何れも本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。   The above-described embodiments are merely examples of implementation in carrying out the present invention, and the technical scope of the present invention should not be construed in a limited manner. That is, the present invention can be implemented in various forms without departing from the technical idea or the main features thereof.

100 画像処理装置、101 主制御部、106 操作部、107 表示部、108 表示制御部、109 撮像部、111 信号処理部、112 CODEC DESCRIPTION OF SYMBOLS 100 Image processing apparatus, 101 Main control part, 106 Operation part, 107 Display part, 108 Display control part, 109 Imaging part, 111 Signal processing part, 112 CODEC

Claims (14)

各画素値が第1のビット数で表現される第1の画像信号を生成する撮像部と、
第1の表示モードでは、各画素値が第1のビット数で表現される第1の画像信号を表示し、第2の表示モードでは、各画素値が前記第1のビット数より少ない第2のビット数で表現される第2の画像信号を表示する表示部と、
前記第1の表示モードと前記第2の表示モードを切り替える切り替え部と、
前記第1の表示モードでは、前記表示部を前記第1の表示モードに制御し、前記撮像部により生成された前記第1の画像信号を前記表示部に表示させ、前記第2の表示モードでは、前記表示部を前記第2の表示モードに制御し、前記撮像部により生成された前記第1の画像信号を前記第2の画像信号に変換し、前記変換した前記第2の画像信号を前記表示部に表示させる制御部と
を有することを特徴とする画像処理装置。
An imaging unit that generates a first image signal in which each pixel value is expressed by a first number of bits;
In the first display mode, a first image signal in which each pixel value is expressed by a first number of bits is displayed. In the second display mode, each pixel value is smaller than the first number of bits. A display unit for displaying a second image signal expressed by the number of bits of
A switching unit for switching between the first display mode and the second display mode;
In the first display mode, the display unit is controlled to the first display mode, the first image signal generated by the imaging unit is displayed on the display unit, and in the second display mode, , Controlling the display unit to the second display mode, converting the first image signal generated by the imaging unit into the second image signal, and converting the converted second image signal to the second image signal. An image processing apparatus comprising: a control unit to be displayed on the display unit.
さらに、前記第1の画像信号の各画素値の全範囲の中で表示範囲を設定する表示範囲設定部を有し、
前記制御部は、前記第2の表示モードでは、前記表示範囲設定部により設定された表示範囲の前記第1の画像信号の画素値を、前記第2のビット数のダイナミックレンジで、前記第2の画像信号の画素値に変換することを特徴とする請求項1記載の画像処理装置。
And a display range setting unit for setting a display range in the entire range of each pixel value of the first image signal,
In the second display mode, the control unit sets the pixel value of the first image signal in the display range set by the display range setting unit to the second bit number in the dynamic range of the second bit number. The image processing apparatus according to claim 1, wherein the pixel value is converted into a pixel value of the image signal.
前記制御部は、前記第1の画像信号の各画素値の全範囲の中で、前記表示範囲設定部により設定された表示範囲より小さい画素値を、前記第2の画像信号の最小の画素値に変換し、前記表示範囲設定部により設定された表示範囲より大きい画素値を、前記第2の画像信号の最大の画素値に変換することを特徴とする請求項2記載の画像処理装置。   The control unit sets a pixel value smaller than the display range set by the display range setting unit in the entire range of the pixel values of the first image signal to a minimum pixel value of the second image signal. The image processing apparatus according to claim 2, wherein a pixel value larger than the display range set by the display range setting unit is converted into a maximum pixel value of the second image signal. 前記表示部は、前記第1の画像信号の各画素値の全範囲に対する前記表示範囲設定部により設定された表示範囲を表示することを特徴とする請求項2又は3記載の画像処理装置。   The image processing apparatus according to claim 2, wherein the display unit displays the display range set by the display range setting unit for the entire range of each pixel value of the first image signal. 前記表示部は、タッチパネルを有し、
前記表示範囲設定部は、前記表示部に表示されている前記表示範囲のタッチパネル操作に応じて、前記表示範囲を設定することを特徴とする請求項4記載の画像処理装置。
The display unit has a touch panel,
The image processing apparatus according to claim 4, wherein the display range setting unit sets the display range in accordance with a touch panel operation of the display range displayed on the display unit.
前記切り替え部は、操作部が操作されている期間では、前記第1の表示モードに設定し、前記操作部が操作されていない期間では、前記第2の表示モードに設定することを特徴とする請求項1〜5のいずれか1項に記載の画像処理装置。   The switching unit is set to the first display mode during a period when the operation unit is operated, and is set to the second display mode during a period when the operation unit is not operated. The image processing apparatus according to claim 1. 第1の表示モードでは、各画素値が第1のビット数で表現される第1の画像信号を表示し、第2の表示モードでは、各画素値が前記第1のビット数より少ない第2のビット数で表現される第2の画像信号を表示する表示部と、
再生指示された画像を読み出し、前記読み出した画像が前記第1の画像信号である場合には、前記表示部を前記第1の表示モードに制御し、前記読み出した第1の画像信号を前記表示部に表示させ、前記読み出した画像が前記第2の画像信号である場合には、前記表示部を前記第2の表示モードに制御し、前記読み出した第2の画像信号を前記表示部に表示させる再生制御部と
を有することを特徴とする画像処理装置。
In the first display mode, a first image signal in which each pixel value is expressed by a first number of bits is displayed. In the second display mode, each pixel value is smaller than the first number of bits. A display unit for displaying a second image signal expressed by the number of bits of
When the reproduction-instructed image is read and the read image is the first image signal, the display unit is controlled to the first display mode, and the read first image signal is displayed on the display. When the read image is the second image signal, the display unit is controlled to the second display mode, and the read second image signal is displayed on the display unit. An image processing apparatus comprising: a reproduction control unit that causes
前記再生制御部は、前記読み出した画像が前記第2の画像信号である場合において、第1の表示固定モードが設定されている場合には、前記読み出した第2の画像信号を前記第1の画像信号に変換し、前記表示部を前記第1の表示モードに制御し、前記変換した前記第1の画像信号を前記表示部に表示させることを特徴とする請求項7記載の画像処理装置。   In the case where the read image is the second image signal and the first display fixing mode is set, the reproduction control unit outputs the read second image signal to the first image signal. The image processing apparatus according to claim 7, wherein the image processing apparatus converts to an image signal, controls the display unit to the first display mode, and causes the display unit to display the converted first image signal. 前記再生制御部は、前記読み出した画像が前記第2の画像信号である場合において、前記第1の表示固定モードが設定されていない場合には、前記表示部を前記第2の表示モードに制御し、前記読み出した第2の画像信号を前記表示部に表示させることを特徴とする請求項8記載の画像処理装置。   The reproduction control unit controls the display unit to the second display mode when the read image is the second image signal and the first display fixing mode is not set. The image processing apparatus according to claim 8, wherein the read second image signal is displayed on the display unit. 前記表示部は、前記第2の表示モードの最高輝度が前記第1の表示モードの最高輝度より低いことを特徴とする請求項1〜9のいずれか1項に記載の画像処理装置。   The image processing apparatus according to claim 1, wherein the display unit has a maximum luminance in the second display mode lower than a maximum luminance in the first display mode. 各画素値が第1のビット数で表現される第1の画像信号を生成する撮像部と、第1の表示モードでは、各画素値が第1のビット数で表現される第1の画像信号を表示し、第2の表示モードでは、各画素値が前記第1のビット数より少ない第2のビット数で表現される第2の画像信号を表示する表示部とを有する画像処理装置の画像処理方法であって、
切り替え部により、前記第1の表示モードと前記第2の表示モードを切り替える切り替えステップと、
制御部により、前記第1の表示モードでは、前記表示部を前記第1の表示モードに制御し、前記撮像部により生成された前記第1の画像信号を前記表示部に表示させ、前記第2の表示モードでは、前記表示部を前記第2の表示モードに制御し、前記撮像部により生成された前記第1の画像信号を前記第2の画像信号に変換し、前記変換した前記第2の画像信号を前記表示部に表示させる制御ステップと
を有することを特徴とする画像処理方法。
An imaging unit that generates a first image signal in which each pixel value is represented by a first number of bits, and a first image signal in which each pixel value is represented by a first number of bits in the first display mode. And in the second display mode, an image of an image processing apparatus having a display unit for displaying a second image signal in which each pixel value is expressed by a second bit number smaller than the first bit number A processing method,
A switching step of switching between the first display mode and the second display mode by a switching unit;
In the first display mode, the control unit controls the display unit to the first display mode, causes the display unit to display the first image signal generated by the imaging unit, and the second display mode. In the display mode, the display unit is controlled to the second display mode, the first image signal generated by the imaging unit is converted into the second image signal, and the converted second image signal is converted into the second image signal. And a control step of displaying an image signal on the display unit.
第1の表示モードでは、各画素値が第1のビット数で表現される第1の画像信号を表示し、第2の表示モードでは、各画素値が前記第1のビット数より少ない第2のビット数で表現される第2の画像信号を表示する表示部を有する画像処理装置の画像処理方法であって、
再生制御部により、再生指示された画像を読み出し、前記読み出した画像が前記第1の画像信号である場合には、前記表示部を前記第1の表示モードに制御し、前記読み出した第1の画像信号を前記表示部に表示させ、前記読み出した画像が前記第2の画像信号である場合には、前記表示部を前記第2の表示モードに制御し、前記読み出した第2の画像信号を前記表示部に表示させる再生制御ステップを有することを特徴とする画像処理方法。
In the first display mode, a first image signal in which each pixel value is expressed by a first number of bits is displayed. In the second display mode, each pixel value is smaller than the first number of bits. An image processing method of an image processing apparatus having a display unit that displays a second image signal expressed by the number of bits of
The reproduction control unit reads an image instructed to be reproduced, and when the read image is the first image signal, the display unit is controlled to the first display mode, and the read first image is read out. When the image signal is displayed on the display unit and the read image is the second image signal, the display unit is controlled to the second display mode, and the read second image signal is An image processing method comprising a reproduction control step of displaying on the display unit.
各画素値が第1のビット数で表現される第1の画像信号を生成する撮像部と、第1の表示モードでは、各画素値が第1のビット数で表現される第1の画像信号を表示し、第2の表示モードでは、各画素値が前記第1のビット数より少ない第2のビット数で表現される第2の画像信号を表示する表示部とを有する画像処理装置を制御するプログラムであって、
前記第1の表示モードと前記第2の表示モードを切り替える切り替えステップと、
前記第1の表示モードでは、前記表示部を前記第1の表示モードに制御し、前記撮像部により生成された前記第1の画像信号を前記表示部に表示させ、前記第2の表示モードでは、前記表示部を前記第2の表示モードに制御し、前記撮像部により生成された前記第1の画像信号を前記第2の画像信号に変換し、前記変換した前記第2の画像信号を前記表示部に表示させる制御ステップと
をコンピュータに実行させるためのプログラム。
An imaging unit that generates a first image signal in which each pixel value is represented by a first number of bits, and a first image signal in which each pixel value is represented by a first number of bits in the first display mode. And in the second display mode, the image processing apparatus having a display unit for displaying a second image signal in which each pixel value is expressed by a second bit number smaller than the first bit number is controlled. A program to
A switching step of switching between the first display mode and the second display mode;
In the first display mode, the display unit is controlled to the first display mode, the first image signal generated by the imaging unit is displayed on the display unit, and in the second display mode, , Controlling the display unit to the second display mode, converting the first image signal generated by the imaging unit into the second image signal, and converting the converted second image signal to the second image signal. A program for causing a computer to execute control steps to be displayed on a display unit.
第1の表示モードでは、各画素値が第1のビット数で表現される第1の画像信号を表示し、第2の表示モードでは、各画素値が前記第1のビット数より少ない第2のビット数で表現される第2の画像信号を表示する表示部を有する画像処理装置を制御するプログラムであって、
再生指示された画像を読み出し、前記読み出した画像が前記第1の画像信号である場合には、前記表示部を前記第1の表示モードに制御し、前記読み出した第1の画像信号を前記表示部に表示させ、前記読み出した画像が前記第2の画像信号である場合には、前記表示部を前記第2の表示モードに制御し、前記読み出した第2の画像信号を前記表示部に表示させる再生制御ステップをコンピュータに実行させるためのプログラム。
In the first display mode, a first image signal in which each pixel value is expressed by a first number of bits is displayed. In the second display mode, each pixel value is smaller than the first number of bits. A program for controlling an image processing apparatus having a display unit for displaying a second image signal expressed by the number of bits of
When the reproduction-instructed image is read and the read image is the first image signal, the display unit is controlled to the first display mode, and the read first image signal is displayed on the display. When the read image is the second image signal, the display unit is controlled to the second display mode, and the read second image signal is displayed on the display unit. A program for causing a computer to execute a playback control step.
JP2015196942A 2015-10-02 2015-10-02 Image processing device, image processing method, and program Pending JP2017068207A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015196942A JP2017068207A (en) 2015-10-02 2015-10-02 Image processing device, image processing method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015196942A JP2017068207A (en) 2015-10-02 2015-10-02 Image processing device, image processing method, and program

Publications (1)

Publication Number Publication Date
JP2017068207A true JP2017068207A (en) 2017-04-06

Family

ID=58494799

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015196942A Pending JP2017068207A (en) 2015-10-02 2015-10-02 Image processing device, image processing method, and program

Country Status (1)

Country Link
JP (1) JP2017068207A (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019205062A (en) * 2018-05-23 2019-11-28 キヤノン株式会社 Image processing apparatus, control method of the same, and program
JP2020025176A (en) * 2018-08-07 2020-02-13 キヤノン株式会社 Display control device, display control device control method, and program
JP2020067629A (en) * 2018-10-26 2020-04-30 キヤノン株式会社 Image processing device and image processing method
JP2020086395A (en) * 2018-11-30 2020-06-04 キヤノン株式会社 Imaging apparatus, control method and program for the same
US10911684B2 (en) 2018-04-24 2021-02-02 Canon Kabushiki Kaisha Image processing apparatus and control method thereof
US10986280B2 (en) * 2017-12-27 2021-04-20 Canon Kabushiki Kaisha Electronic apparatus
US11122234B2 (en) 2019-03-26 2021-09-14 Canon Kabushiki Kaisha Image output apparatus, control method thereof and computer-readable storage medium
US11165970B2 (en) 2019-06-21 2021-11-02 Canon Kabushiki Kaisha Image processing apparatus, imaging apparatus, image processing method, and non-transitory computer readable medium

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10986280B2 (en) * 2017-12-27 2021-04-20 Canon Kabushiki Kaisha Electronic apparatus
US11050943B2 (en) * 2017-12-27 2021-06-29 Canon Kabushiki Kaisha Electronic apparatus
US10911684B2 (en) 2018-04-24 2021-02-02 Canon Kabushiki Kaisha Image processing apparatus and control method thereof
JP2019205062A (en) * 2018-05-23 2019-11-28 キヤノン株式会社 Image processing apparatus, control method of the same, and program
JP7199158B2 (en) 2018-05-23 2023-01-05 キヤノン株式会社 Image processing device, its control method, and program
JP2020025176A (en) * 2018-08-07 2020-02-13 キヤノン株式会社 Display control device, display control device control method, and program
JP2020067629A (en) * 2018-10-26 2020-04-30 キヤノン株式会社 Image processing device and image processing method
JP7254477B2 (en) 2018-10-26 2023-04-10 キヤノン株式会社 Display device and its control method
JP2020086395A (en) * 2018-11-30 2020-06-04 キヤノン株式会社 Imaging apparatus, control method and program for the same
JP7159024B2 (en) 2018-11-30 2022-10-24 キヤノン株式会社 IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, AND PROGRAM
US11122234B2 (en) 2019-03-26 2021-09-14 Canon Kabushiki Kaisha Image output apparatus, control method thereof and computer-readable storage medium
US11165970B2 (en) 2019-06-21 2021-11-02 Canon Kabushiki Kaisha Image processing apparatus, imaging apparatus, image processing method, and non-transitory computer readable medium

Similar Documents

Publication Publication Date Title
JP2017068207A (en) Image processing device, image processing method, and program
JP2018042198A (en) Imaging apparatus and imaging method
JP6071242B2 (en) Imaging apparatus and display control method
KR20100095232A (en) Method for controlling white balance of an image, medium of recording the method and apparatus applying the method
JP2017139613A (en) Image processing apparatus, image processing method, and program
JP2017139618A (en) Image data generating apparatus, image data generating method, and program
JP4734679B2 (en) Image processing apparatus, method, and program
JP2015195582A (en) Image processing device, control method thereof, imaging apparatus, control method thereof, and recording medium
JP7020832B2 (en) Digital video camera, video output device, video output method, program
JP6742789B2 (en) Display control device, control method thereof, program, and storage medium
JP2010049317A (en) Display device
US11122234B2 (en) Image output apparatus, control method thereof and computer-readable storage medium
JP2006094031A (en) Imaging apparatus, image processing method, and program
JP2017069914A (en) Image processing apparatus
US10542207B2 (en) Image processing apparatus and image processing method
JP2018074523A (en) Imaging device, control method thereof, program, and recording medium
JP5828251B2 (en) Image processing apparatus and digital camera
JP4956283B2 (en) IMAGING DEVICE, IMAGE PROCESSING DEVICE, IMAGING DEVICE CONTROL METHOD, IMAGE PROCESSING DEVICE CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM
JP6198428B2 (en) Imaging device
US11375106B2 (en) Image capture apparatus and control method therefor
WO2019003850A1 (en) Image processing device and method
JP2014142466A (en) Projection device and control method of the same, program, and storage medium
JP6207203B2 (en) Display control device, display control device control method, program, and recording medium
JP6104017B2 (en) Imaging device
JP2006005952A (en) Electronic camera, image recording apparatus, image recording method and program