JP2018139387A - Image processing device, method of controlling the same, display device comprising image processing device, program, and storage medium - Google Patents

Image processing device, method of controlling the same, display device comprising image processing device, program, and storage medium Download PDF

Info

Publication number
JP2018139387A
JP2018139387A JP2017033849A JP2017033849A JP2018139387A JP 2018139387 A JP2018139387 A JP 2018139387A JP 2017033849 A JP2017033849 A JP 2017033849A JP 2017033849 A JP2017033849 A JP 2017033849A JP 2018139387 A JP2018139387 A JP 2018139387A
Authority
JP
Japan
Prior art keywords
image
processing
signals
image processing
specific
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017033849A
Other languages
Japanese (ja)
Other versions
JP2018139387A5 (en
JP6866181B2 (en
Inventor
宗亮 加々谷
Muneaki Kagaya
宗亮 加々谷
弘文 占部
Hirofumi Urabe
弘文 占部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2017033849A priority Critical patent/JP6866181B2/en
Publication of JP2018139387A publication Critical patent/JP2018139387A/en
Publication of JP2018139387A5 publication Critical patent/JP2018139387A5/ja
Application granted granted Critical
Publication of JP6866181B2 publication Critical patent/JP6866181B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Television Receiver Circuits (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an image processing device capable of appropriately generating an image for confirming an effect of image processing while reducing a load to a circuit of a processing device, and to provide a display device comprising the same, a method of controlling the image processing device, a program, and a storage medium.SOLUTION: An image processing device comprises: a plurality of input means 101a-101d that acquire a plurality of image signals based on an original image; and an output processing unit 100 that generates an output image on the basis of the plurality of image signals. The output processing unit 100 can generate a specific image for confirming an effect of image processing. In a case where the plurality of image signals correspond to a thinned-out image obtained by thinning out pixels of the original image, the output processing unit 100 generates the specific image by placing an image A obtained by performing image processing on an image based on an image signal a among the plurality of image signals, and an image D obtained by performing image processing different from the image processing performed on the image A on an image based on an image signal d, side by side.SELECTED DRAWING: Figure 2

Description

本発明は、複数の映像信号に基づいて表示画像を生成する画像処理装置及びその制御方法、表示装置、プログラムおよび記憶媒体に関する。   The present invention relates to an image processing device that generates a display image based on a plurality of video signals, a control method thereof, a display device, a program, and a storage medium.

近年、画像信号の高解像度化により画像のデータ量が増大することがある。このような画像(原画像)を伝送する場合、原画像を、複数の画像信号に分割して複数の伝送路を用いて伝送することがある。これにより、データ量の大きい画像を、高速に伝送することが可能となる。複数の画像信号として伝送された画像信号を受信した処理装置は、画像を表示するために、複数の画像信号を合成して、原画像に対応する画像を生成する。   In recent years, the amount of image data may increase as the resolution of image signals increases. When transmitting such an image (original image), the original image may be divided into a plurality of image signals and transmitted using a plurality of transmission paths. As a result, an image with a large amount of data can be transmitted at high speed. The processing apparatus that has received the image signals transmitted as a plurality of image signals combines the plurality of image signals to generate an image corresponding to the original image in order to display the image.

また、映像制作の現場では、カメラで撮影した高解像度の画像に対して、エッジ強調処理や白黒表示処理等の画像処理を施して、画質を確認する場合がある。   Also, at the video production site, image processing such as edge enhancement processing and black-and-white display processing may be performed on a high-resolution image captured by a camera to check the image quality.

特許文献1の画質調整装置は、画像に縮小処理を施した縮小画像に、所定の画像処理を施した画像と、所定の画像処理を施していない画像とを並べて表示することが開示されている。これによって、画像処理の効果を確認することが容易となる。   The image quality adjustment apparatus disclosed in Patent Document 1 discloses that a reduced image obtained by performing reduction processing on an image displays an image subjected to predetermined image processing and an image not subjected to predetermined image processing arranged side by side. . This makes it easy to confirm the effect of image processing.

特開2006‐13618号公報JP 2006-13618 A

しかしながら、特許文献1に開示された技術では、画像が複数の画像信号として伝送された場合、一度複数の画像信号を合成した合成画像を生成し、さらに合成画像を縮小する処理をする必要があり、処理装置の回路への負荷が大きくなることがあった。   However, in the technique disclosed in Patent Document 1, when an image is transmitted as a plurality of image signals, it is necessary to generate a combined image obtained by combining a plurality of image signals once and further reduce the combined image. In some cases, the load on the circuit of the processing apparatus increases.

そこで、本発明は、処理装置の回路への負荷を低減しつつ、好適に画像処理の効果を確認するための画像を生成することが可能な画像処理装置、その制御方法、表示装置、プログラム、および記憶媒体を提供することを目的とする。   Therefore, the present invention provides an image processing apparatus capable of suitably generating an image for confirming the effect of image processing while reducing the load on the circuit of the processing apparatus, a control method thereof, a display apparatus, a program, And a storage medium.

上述した課題を解決するために、本発明の一実施形態に係る画像処理装置は、原画像に基づく互いに異なる複数の画像信号を取得するための複数の入力手段と、前記複数の画像信号に基づいて、出力画像を生成する処理手段と、を備え、前記処理手段は、画像処理の効果を確認するための特定画像を生成することが可能であって、前記複数の画像信号が、前記原画像の画素を間引いた間引き画像に対応する複数の間引き画像信号である場合、前記処理手段は、前記複数の画像信号のうち第1画像信号に基づく画像に第1の画像処理を施した第1画像と、前記複数の画像信号のうち第2画像信号に基づく画像に前記第1の画像処理と異なる第2の画像処理を施した第2画像と、を並べて配置して前記特定画像を生成することを特徴とする。   In order to solve the above-described problem, an image processing apparatus according to an embodiment of the present invention is based on a plurality of input means for acquiring a plurality of different image signals based on an original image, and the plurality of image signals. And processing means for generating an output image, wherein the processing means is capable of generating a specific image for confirming an effect of image processing, wherein the plurality of image signals are the original image. In the case of a plurality of thinned image signals corresponding to the thinned image obtained by thinning out the pixels, the processing means performs a first image processing on an image based on the first image signal among the plurality of image signals. And arranging the second image obtained by performing second image processing different from the first image processing on the image based on the second image signal among the plurality of image signals to generate the specific image. It is characterized by.

本発明によれば、入力された複数の画像信号が、それぞれ単独で原画像に対応する画像を表示可能な画像信号である場合に、複数の画像信号を合成する処理を実行せずに、画像処理の効果を確認可能な画像を生成することが可能となる。   According to the present invention, when the plurality of input image signals are image signals that can individually display an image corresponding to the original image, the image is synthesized without executing the process of combining the plurality of image signals. It is possible to generate an image that can confirm the effect of the processing.

したがって、処理装置の回路への負荷を低減しつつ、好適に画像処理の効果を確認することが可能な画像を生成することが可能となる。   Therefore, it is possible to generate an image that can favorably confirm the effect of the image processing while reducing the load on the circuit of the processing device.

撮像装置、表示装置、および画像処理装置を示す装置構成図である。It is an apparatus block diagram which shows an imaging device, a display apparatus, and an image processing apparatus. 画像処理装置の装置構成図である。It is a device block diagram of an image processing device. 原画像と、画像の画素を所定の間隔で間引いて生成された複数の画像とを示す模式図である。It is a schematic diagram which shows an original image and the several image produced | generated by thinning out the pixel of an image at predetermined intervals. 原画像と、原画像を分割して生成された複数の分割画像とを示す模式図である。It is a schematic diagram which shows an original image and the some divided image produced | generated by dividing | segmenting an original image. 出力処理部の機能ブロックを示すブロック図である。It is a block diagram which shows the functional block of an output process part. 映像信号フォーマット情報の一例を示す図である。It is a figure which shows an example of video signal format information. 出力処理部の表示画像の生成処理を示す第1のフローチャートである。It is a 1st flowchart which shows the production | generation process of the display image of an output process part. 特定画像に基づいて表示装置に表示された画像を示す第1の模式図である。It is a 1st schematic diagram which shows the image displayed on the display apparatus based on the specific image. 特定画像に基づいて表示装置に表示された画像を示す第2の模式図である。It is a 2nd schematic diagram which shows the image displayed on the display apparatus based on the specific image. 出力処理部の表示画像の生成処理を示す第2のフローチャートである。It is a 2nd flowchart which shows the production | generation process of the display image of an output process part. 出力処理部の表示画像の生成処理を示す第3のフローチャートである。It is a 3rd flowchart which shows the production | generation process of the display image of an output process part. 一部の領域に画像処理を施された合成画像の模式図である。It is a schematic diagram of the synthesized image obtained by performing image processing on a part of the area.

以下、図面を用いて本発明の実施の形態について説明する。なお、本発明の技術的範囲は、特許請求の範囲によって確定され、以下に例示する実施形態によって限定されるものではない。また、実施形態の中で説明されている特徴の組み合わせすべてが本発明に必須とは限らない。本明細書および図面に記載の内容は例示であって、本発明を制限するものと見なすべきではない。本発明の趣旨に基づき種々の変形が可能であり、それらを本発明の範囲から除外するものではない。即ち、各実施形態及びその変形例を組み合わせた構成も全て本発明に含まれるものである。   Hereinafter, embodiments of the present invention will be described with reference to the drawings. The technical scope of the present invention is determined by the claims, and is not limited by the embodiments exemplified below. In addition, not all combinations of features described in the embodiments are essential to the present invention. The contents described in this specification and drawings are illustrative and should not be construed as limiting the present invention. Various modifications are possible based on the spirit of the present invention, and they are not excluded from the scope of the present invention. That is, all configurations in which the embodiments and their modifications are combined are also included in the present invention.

(実施例1)
図1は、撮像装置1、表示装置2、および画像処理装置100を示す装置構成図である。
Example 1
FIG. 1 is a device configuration diagram showing an imaging device 1, a display device 2, and an image processing device 100.

撮像装置1は、被写体を撮影して原画像を取得し、原画像に基づいて生成した複数の画像信号を出力可能なデジタルビデオカメラである。撮像装置1が取得する原画像は、4K(4096×2160)の解像度の画像であるとする。なお、原画像は4Kの解像度の画像に限らない。原画像は2Kや8Kの画像であってもよい。撮像装置1は、原画像に基づいて4つの画像信号を生成して、それぞれ異なる出力端子から出力するものとする。撮像装置1は、Serial Digital Interface(SDI)規格に準ずるSDI信号で画像信号を出力するとする。撮像装置1が原画像から生成する複数の画像信号の形式は後述する。   The imaging device 1 is a digital video camera that captures a subject, acquires an original image, and outputs a plurality of image signals generated based on the original image. It is assumed that the original image acquired by the imaging apparatus 1 is an image having a resolution of 4K (4096 × 2160). The original image is not limited to an image with 4K resolution. The original image may be a 2K or 8K image. The imaging device 1 generates four image signals based on the original image and outputs them from different output terminals. Assume that the imaging apparatus 1 outputs an image signal with an SDI signal conforming to the Serial Digital Interface (SDI) standard. The format of the plurality of image signals generated from the original image by the imaging apparatus 1 will be described later.

表示装置2は、画像処理装置100から取得した画像信号に基づいて、画面に画像を表示する表示装置である。例えば、表示装置2は、液晶ディスプレイであるとする。なお、表示装置2は、有機ELディスプレイであってもよい。また、表示装置2は、スクリーンに画像を投影して表示するプロジェクタであってもよい。また、画像処理装置100と表示装置2との間の伝送路は、図1において1本の伝送路で記述されているが、撮像装置1と画像処理装置100との間と同様に複数の伝送路であってもよい。   The display device 2 is a display device that displays an image on a screen based on an image signal acquired from the image processing device 100. For example, it is assumed that the display device 2 is a liquid crystal display. The display device 2 may be an organic EL display. The display device 2 may be a projector that projects and displays an image on a screen. In addition, the transmission path between the image processing apparatus 100 and the display apparatus 2 is described as a single transmission path in FIG. 1, but a plurality of transmissions are performed in the same manner as between the imaging apparatus 1 and the image processing apparatus 100. It may be a road.

画像処理装置100は、撮像装置1から取得した複数の画像信号に基づいて、表示装置2に表示するための画像を生成して出力する画像処理装置である。画像処理装置100は、例えば、Personal Computer(PC)であるとする。なお、画像処理装置100は、表示装置2の内部に設けられ、一体の表示装置を構成するものであってもよい。   The image processing device 100 is an image processing device that generates and outputs an image to be displayed on the display device 2 based on a plurality of image signals acquired from the imaging device 1. The image processing apparatus 100 is assumed to be, for example, a personal computer (PC). Note that the image processing device 100 may be provided inside the display device 2 and constitute an integral display device.

画像処理装置100は、画像処理が施された画像を表示装置2に出力することが可能である。ここで、画像処理は、エッジ強調処理、白黒表示処理、フォルスカラー表示処理、およびブルーオンリー表示処理等であるとする。エッジ強調処理は、画像の輪郭部分にあたる領域を着色表示する処理である。白黒表示処理は、画像をモノクロ表示する処理である。フォルスカラー処理は、映像の輝度レベル毎に異なる色で着色する処理である。ブルーオンリー表示処理は、画像の赤色成分及び緑色成分を除去し、青色成分のみをモノクロ表示する処理である。なお、画像処理は、上述の処理以外の画像処理であってもよい。   The image processing apparatus 100 can output an image subjected to image processing to the display device 2. Here, the image processing is assumed to be edge enhancement processing, monochrome display processing, false color display processing, blue-only display processing, and the like. The edge enhancement process is a process for coloring and displaying an area corresponding to the contour portion of an image. The monochrome display process is a process for displaying an image in monochrome. The false color process is a process of coloring with a different color for each luminance level of an image. The blue-only display process is a process that removes the red and green components of the image and displays only the blue component in monochrome. Note that the image processing may be image processing other than the processing described above.

また、画像処理装置100は、入力された画像に対して画像処理を施した場合の効果を確認するための特定画像を生成して、表示装置2に出力することが可能である。画像処理装置100は、非図示の入力インターフェースを介して、ユーザが特定画像を出力するか否かの指示を取得し、特定画像を出力する指示を取得した場合に、特定画像を生成して出力する処理を実行する。なお、画像処理装置100は、画像処理を実行する指示を取得したことに応じて、特定画像を生成して出力するものであってもよい。   Further, the image processing apparatus 100 can generate a specific image for confirming the effect when image processing is performed on the input image and output the specific image to the display apparatus 2. The image processing apparatus 100 acquires an instruction as to whether or not a user outputs a specific image via an input interface (not shown), and generates and outputs a specific image when an instruction to output the specific image is acquired. Execute the process. Note that the image processing apparatus 100 may generate and output a specific image in response to obtaining an instruction to execute image processing.

図2は、画像処理装置100の装置構成図である。画像処理装置100は、入力端子101a〜101d、画像信号判定部102、指示入力部103、および出力処理部110を備える。入力端子101a〜101dは、撮像装置1からそれぞれ異なる画像信号を取得するための入力端子である。例えば、入力端子101a〜101dは、Serial Digital Interface規格(SDI規格)に準じた入力端子であるとする。なお、入力端子101a〜101eは、HDMI(登録商標)規格に準じた入力端子であってもよい。入力端子101a〜101dは、入力された画像信号を画像信号判定部102と出力処理部110とにそれぞれ出力する。   FIG. 2 is an apparatus configuration diagram of the image processing apparatus 100. The image processing apparatus 100 includes input terminals 101a to 101d, an image signal determination unit 102, an instruction input unit 103, and an output processing unit 110. The input terminals 101a to 101d are input terminals for acquiring different image signals from the imaging device 1, respectively. For example, it is assumed that the input terminals 101a to 101d are input terminals conforming to the Serial Digital Interface standard (SDI standard). The input terminals 101a to 101e may be input terminals conforming to the HDMI (registered trademark) standard. The input terminals 101a to 101d output the input image signals to the image signal determination unit 102 and the output processing unit 110, respectively.

画像信号判定部102は、入力端子101a〜101dに入力された画像信号のデータ形式を判定する判定回路である。また、画像信号判定部102は、入力端子101a〜101dにそれぞれ正常に画像信号が入力されたか否かを判定する判定回路である。   The image signal determination unit 102 is a determination circuit that determines the data format of the image signal input to the input terminals 101a to 101d. The image signal determination unit 102 is a determination circuit that determines whether or not an image signal is normally input to the input terminals 101a to 101d.

ここで、原画像と、撮像装置1が出力する複数の画像信号との関係を説明する。図3は、原画像と、原画像の画素を所定の間隔で間引いて生成された複数の間引き画像とを示す模式図である。原画像から生成された複数の画像信号は、原画像の左上に示すように、原画像を構成する画素のうち2画素ごとに、水平方向に2画素、垂直方向に1画素(1ライン)の間隔をあけて抽出された画像A〜Dにそれぞれ対応する。このような方式が、2−Sample Inter leave方式(2SI方式)である。2SI方式で生成された複数の画像信号は、それぞれ、原画像に対応する画像を形成することが可能である。   Here, the relationship between an original image and a plurality of image signals output from the imaging device 1 will be described. FIG. 3 is a schematic diagram illustrating an original image and a plurality of thinned images generated by thinning pixels of the original image at a predetermined interval. As shown in the upper left of the original image, a plurality of image signals generated from the original image include two pixels in the horizontal direction and one pixel (one line) in the vertical direction for every two pixels constituting the original image. It corresponds to each of the images A to D extracted at intervals. Such a method is the 2-Sample Interleave method (2SI method). Each of the plurality of image signals generated by the 2SI method can form an image corresponding to the original image.

なお、間引き画像に対応する画像信号は、上述の例に限らない。複数の間引き画像信号は、それぞれ原画像において異なる画素の画像信号からなり、かつ、原画像の解像度を低減した画像に対応する画像信号であれば、間引きの間隔や画像信号の数は問わない。例えば、原画像の画素を1つおきに抜き出した2つの画像信号であってもよい。また、複数の間引き画像は、重ね合わせることで原画像を得ることが可能な画像であるともいえる。   The image signal corresponding to the thinned image is not limited to the above example. The plurality of thinned-out image signals are image signals of different pixels in the original image, and any image signal corresponding to an image with a reduced resolution of the original image may have any thinning interval or number of image signals. For example, two image signals obtained by extracting every other pixel of the original image may be used. Further, it can be said that the plurality of thinned images are images from which an original image can be obtained by superimposing.

図4は、原画像と、原画像を分割して生成された複数の分割画像とを示す模式図である。この場合、複数の画像信号は、原画像を水平方向に2つ、垂直方向に2つに分割した4つの分割画像A〜Dにそれぞれ対応する。このような方式が、Square Division方式(SqDiv方式)である。SqDiv方式で生成された複数の画像信号は、それぞれ、原画像の左上、左下、右下、右上に対応する画像を形成することから、原画像に対応する画像を表示するためには、複数の画像信号から合成画像を生成することが必要となる。   FIG. 4 is a schematic diagram illustrating an original image and a plurality of divided images generated by dividing the original image. In this case, the plurality of image signals respectively correspond to four divided images A to D obtained by dividing the original image into two in the horizontal direction and two in the vertical direction. Such a method is the Square Division method (SqDiv method). The plurality of image signals generated by the SqDiv method form images corresponding to the upper left, lower left, lower right, and upper right of the original image, respectively, in order to display an image corresponding to the original image, It is necessary to generate a composite image from the image signal.

撮像装置1は、複数の画像信号をどのような方式で生成したかを示す映像信号フォーマット情報を、各画像信号にメタデータとして付加して出力する。図6は、映像信号フォーマット情報の一例を示す図である。映像信号フォーマット情報は、解像度、フレームレート、I/P変換種別、カラーフォーマット、色深度、分割方式及びリンク符号(各画像信号の原画像における配置)に関する情報を含む。ここで、分割方式は2SI方式あるいはSqDiv方式の2種類のうちいずれかであるとする。SqDiv方式の画像信号である場合、リンク符号にはそれぞれ、分割時の左上の画像に対応する画像信号であれば「A」、右上が「B」、左下が「C」、右下が「D」という情報が入るものとする。また、2SI方式の画像信号である場合、リンク符号にはそれぞれ、原画像の所定の領域において、左上の2画素からなる画像信号であれば「A」、右上が「B」、左下が「C」、右下が「D」という情報が入るものとする。   The imaging apparatus 1 adds video signal format information indicating how a plurality of image signals are generated as metadata to each image signal and outputs the metadata. FIG. 6 is a diagram illustrating an example of video signal format information. The video signal format information includes information on resolution, frame rate, I / P conversion type, color format, color depth, division method, and link code (arrangement of each image signal in the original image). Here, it is assumed that the division method is one of two types of 2SI method and SqDiv method. In the case of an SqDiv image signal, the link code includes “A”, “B” in the upper right, “C” in the lower left, “D” in the lower right, and “D” in the upper left image at the time of division. "Is entered. In the case of a 2SI image signal, the link code includes “A”, “B” in the upper right, and “C” in the upper left if the image signal is composed of two pixels at the upper left in a predetermined area of the original image. ", And the information on the lower right is" D ".

画像信号判定部102は、入力端子101a〜101dに入力された画像信号のうち、有効な画像信号を検出する。画像信号判定部102は、有効な画像信号のうちいずれか1つの画像信号に付加された映像信号フォーマット情報から、入力された複数の画像信号が、2SI方式で生成された画像信号であるか否かを判定する。   The image signal determination unit 102 detects a valid image signal among the image signals input to the input terminals 101a to 101d. The image signal determination unit 102 determines whether or not a plurality of input image signals are image signals generated by the 2SI method from the video signal format information added to any one of the valid image signals. Determine whether.

なお、画像信号判定部102は、各入力端子から取得した全ての画像信号に付加された映像信号フォーマット情報から、入力された複数の画像信号が、2SI方式で生成された画像信号であるか否かを判定してもよい。また、画像信号判定部102は、原画像から生成された複数の画像信号が全て正常に入力されているか否かを判定する。画像信号判定部102は、判定結果を出力処理部110に出力する。   Note that the image signal determination unit 102 determines whether or not the plurality of input image signals are image signals generated by the 2SI method from the video signal format information added to all the image signals acquired from each input terminal. It may be determined. Further, the image signal determination unit 102 determines whether or not all of the plurality of image signals generated from the original image are normally input. The image signal determination unit 102 outputs the determination result to the output processing unit 110.

指示入力部103は、ユーザの操作に応じて、特定画像を出力するか否かの指示を出力処理部110に出力する。また、指示入力部103は、ユーザの操作に応じて、画像処理を実行する指示を取得したことに応じて、特定画像を生成して出力するものであってもよい。   The instruction input unit 103 outputs an instruction as to whether or not to output a specific image to the output processing unit 110 in accordance with a user operation. The instruction input unit 103 may generate and output a specific image in response to obtaining an instruction to execute image processing in response to a user operation.

出力処理部110は、取得した複数の画像信号から、表示装置2が表示するための画像(出力画像)を生成して出力するための処理回路である。出力処理部110は、ユーザからの指示に応じて、入力された画像信号に基づく画像に所定の画像処理を施すことによる効果を確認するための特定画像を生成して出力することが可能である。図5は、出力処理部110の機能ブロックを示すブロック図である。出力処理部110は、入力部111、合成処理部112、画像処理部113、縮小処理部114、表示画像生成部115、制御部116、およびメモリ117を備える。   The output processing unit 110 is a processing circuit for generating and outputting an image (output image) to be displayed by the display device 2 from a plurality of acquired image signals. The output processing unit 110 can generate and output a specific image for confirming the effect of performing predetermined image processing on the image based on the input image signal in accordance with an instruction from the user. . FIG. 5 is a block diagram illustrating functional blocks of the output processing unit 110. The output processing unit 110 includes an input unit 111, a composition processing unit 112, an image processing unit 113, a reduction processing unit 114, a display image generation unit 115, a control unit 116, and a memory 117.

入力部111は、画像信号a〜dを入力端子101a〜101dから取得する入力インターフェースである。入力部111は、画像信号a〜dを出力する。   The input unit 111 is an input interface that acquires the image signals a to d from the input terminals 101 a to 101 d. The input unit 111 outputs image signals a to d.

合成処理部112は、画像信号a〜dに基づいて、原画像に対応する合成画像を生成する合成処理回路である。   The composition processing unit 112 is a composition processing circuit that generates a composite image corresponding to the original image based on the image signals a to d.

画像処理部113は、入力された画像信号に基づく画像に指定された画像処理を施して出力する画像処理回路である。画像処理部113が実行可能な画像処理は、上述した画像処理であり、例えば、白黒表示処理である。   The image processing unit 113 is an image processing circuit that performs specified image processing on an image based on an input image signal and outputs the image. The image processing that can be executed by the image processing unit 113 is the above-described image processing, for example, monochrome display processing.

縮小処理部114は、縮小処理を実行するスケーリング回路である。例えば、縮小処理部114は、4K解像度の画像を2K解像度の画像に縮小することが可能である。   The reduction processing unit 114 is a scaling circuit that executes reduction processing. For example, the reduction processing unit 114 can reduce a 4K resolution image to a 2K resolution image.

表示画像生成部115は、画像処理の効果を比較して確認するための特定画像を生成する生成手段である。表示画像生成部115は、画像処理部113が実行する画像処理の効果を確認するために、画像処理を施した処理画像Aと、処理画像Aとは異なる画像処理を施した処理画像Bと、を並べて配置した特定画像を生成する。例えば、表示画像生成部115は、白黒画像処理を含む画像処理を施した処理画像Aと、白黒画像処理を施さない処理画像Bとを並べて配置した特定画像を生成するとする。   The display image generation unit 115 is a generation unit that generates a specific image for comparing and confirming the effects of image processing. The display image generation unit 115 is configured to check the effect of the image processing executed by the image processing unit 113, the processed image A subjected to image processing, the processed image B subjected to image processing different from the processed image A, To generate a specific image arranged side by side. For example, it is assumed that the display image generation unit 115 generates a specific image in which a processed image A subjected to image processing including black and white image processing and a processed image B not subjected to black and white image processing are arranged side by side.

なお、表示画像生成部115は、それぞれ異なる画像処理を施された複数の画像を並べて配置して特定画像を生成するものであってもよい。例えば、ある強度で画像処理が施された処理画像Cと、処理画像Cとは異なる強度で画像処理が施された処理画像Dとを並べて配置して、特定画像を生成してもよい。この場合、処理画像Cと処理画像Dとに施される画像処理は、同種の画像処理である。   Note that the display image generation unit 115 may generate a specific image by arranging a plurality of images that have been subjected to different image processing. For example, the specific image may be generated by arranging the processed image C that has been subjected to image processing at a certain intensity and the processed image D that has been subjected to image processing at a different intensity from the processed image C. In this case, the image processing performed on the processed image C and the processed image D is the same type of image processing.

制御部116は、出力処理部110の各機能ブロックの動作を制御するための制御回路である。制御部116は、メモリ117に記憶されたプログラムおよびパラメータを読出して実行することにより、各機能ブロックの動作を制御するCPU等の演算処理回路であるとする。   The control unit 116 is a control circuit for controlling the operation of each functional block of the output processing unit 110. The control unit 116 is assumed to be an arithmetic processing circuit such as a CPU that controls the operation of each functional block by reading and executing the program and parameters stored in the memory 117.

メモリ117は、制御部116が本願実施例を実行するためのプログラムを記憶し、制御部116が読取可能な記憶媒体である。メモリ117は、不揮発性の記憶媒体であるとする。なお、メモリ117は複数の記憶媒体の組み合わせで構成されていてもよく、揮発性の記憶媒体と、不揮発性の記憶媒体とを含むものであってもよい。   The memory 117 is a storage medium in which the control unit 116 stores a program for executing the embodiment of the present application and can be read by the control unit 116. The memory 117 is assumed to be a nonvolatile storage medium. Note that the memory 117 may be configured by a combination of a plurality of storage media, and may include a volatile storage medium and a nonvolatile storage medium.

出力部118は、表示装置2が画像を表示するための表示画像を出力する出力インターフェースである。   The output unit 118 is an output interface that outputs a display image for the display device 2 to display an image.

図7は、出力処理部110の表示画像の生成処理を示すフローチャートである。出力処理部110は、画像処理装置100が動作中において、図7に示す表示画像の生成処理を繰り返し実行するものとする。   FIG. 7 is a flowchart showing display image generation processing of the output processing unit 110. The output processing unit 110 repeatedly executes the display image generation process shown in FIG. 7 while the image processing apparatus 100 is in operation.

S701で、制御部116は、ユーザが画像処理の実行を指示したか否かを判定する。具体的には、制御部116は、指示入力部103から、ユーザが画像処理の実行を指示した信号を取得した場合に、ユーザが画像処理の実行を指示したと判定する。制御部116が、ユーザが画像処理の実行を指示していないと判定した場合、処理は、S712に進む。制御部116が、ユーザが画像処理の実行を指示したと判定した場合、処理は、S702に進む。ここでは、画像処理として、白黒変換処理(モノクロ処理)を実行すると指示したとして説明する。   In step S701, the control unit 116 determines whether the user has instructed execution of image processing. Specifically, the control unit 116 determines that the user has instructed execution of image processing when the instruction input unit 103 acquires a signal instructing execution of image processing by the user. If the control unit 116 determines that the user has not instructed execution of image processing, the process proceeds to S712. If the control unit 116 determines that the user has instructed execution of image processing, the process proceeds to S702. Here, a description will be given assuming that a monochrome conversion process (monochrome process) is instructed as the image process.

S702で、制御部116は、ユーザが比較表示の実行を指示したか否かを判定する。具体的には、制御部116は、指示入力部103から、ユーザが比較表示の実行を指示する信号を取得した場合に、ユーザが比較表示の実行を指示したと判定する。制御部116が、ユーザが比較表示の実行を指示していないと判定した場合、処理は、S710に進む。制御部116が、ユーザが比較表示の実行を指示したと判定した場合、処理は、S703に進む。   In step S702, the control unit 116 determines whether the user has instructed execution of comparison display. Specifically, the control unit 116 determines that the user has instructed execution of comparison display when the user obtains a signal instructing execution of comparison display from the instruction input unit 103. If the control unit 116 determines that the user has not instructed execution of the comparison display, the process proceeds to S710. When the control unit 116 determines that the user has instructed execution of comparison display, the process proceeds to S703.

S703で、制御部116は、入力された複数の画像信号が、2SI方式で生成されたか否かを判定する。具体的には、制御部116は、画像信号判定部102から取得した判定結果に基づいて、入力された複数の画像信号が、2SI方式で生成されたか否かを判定する。制御部116が、入力された複数の画像信号が、2SI方式で生成されていないと判定した場合、処理は、S706に進む。制御部116が、入力された複数の画像信号が、2SI方式で生成されていると判定した場合、処理は、S704に進む。   In step S <b> 703, the control unit 116 determines whether the plurality of input image signals are generated by the 2SI method. Specifically, based on the determination result acquired from the image signal determination unit 102, the control unit 116 determines whether or not a plurality of input image signals are generated by the 2SI method. If the control unit 116 determines that the plurality of input image signals are not generated by the 2SI method, the process proceeds to S706. When the control unit 116 determines that the plurality of input image signals are generated by the 2SI method, the process proceeds to S704.

S704で、制御部116は、入力された複数の画像信号のうち、いずれか1つの画像信号に基づく画像に画像処理を施すように、画像処理部113を制御する。例えば、画像処理部113は、画像信号dに基づく画像Dに白黒表示処理を施すとする。画像処理部113は、白黒表示処理を施された画像D´を表示画像生成部115に出力する。処理は、S705に進む。   In step S <b> 704, the control unit 116 controls the image processing unit 113 to perform image processing on an image based on any one of the input image signals. For example, it is assumed that the image processing unit 113 performs monochrome display processing on the image D based on the image signal d. The image processing unit 113 outputs the image D ′ subjected to the monochrome display process to the display image generation unit 115. The process proceeds to S705.

S705で、表示画像生成部115は、画像信号aに基づく画像Aと、画像D´とを並べた特定画像を生成して出力部118に出力する。なお、制御部116は、特定画像を構成する2つの画像として、原画像において互いに画素が隣接しない2つの画像信号を選択する。例えば、画像信号bに基づく画像Bと画像信号cに基づく画像Cに画像処理を施した画像C´を用いて特定画像を生成してもよい。処理は、S713に進む。   In step S <b> 705, the display image generation unit 115 generates a specific image in which the image A based on the image signal a and the image D ′ are arranged and outputs the specific image to the output unit 118. Note that the control unit 116 selects two image signals whose pixels are not adjacent to each other in the original image as two images constituting the specific image. For example, a specific image may be generated using an image C ′ obtained by performing image processing on an image B based on the image signal b and an image C based on the image signal c. The process proceeds to S713.

S713で、出力部118は、取得した画像を表示画像として、表示装置2に出力する。   In S713, the output unit 118 outputs the acquired image as a display image to the display device 2.

図8は、生成された特定画像に基づいて、表示装置2に表示された画像を示す模式図である。例えば、表示画像生成部115は、画像Aを左側に配置し、画像D´を右側に配置するとする。原画像に対応する画像に対して、画像処理を施した画像と、そうでない画像とを並べて表示することにより、画像処理の効果をユーザが容易に確認することが可能となる。   FIG. 8 is a schematic diagram showing an image displayed on the display device 2 based on the generated specific image. For example, the display image generation unit 115 arranges the image A on the left side and the image D ′ on the right side. By displaying an image that has been subjected to image processing and an image that is not the image side by side with respect to the image corresponding to the original image, the user can easily confirm the effect of the image processing.

上述の一連の処理により、2SI方式で生成された複数の画像信号に対して、画像処理の効果を確認するための比較表示を行う場合に、合成処理を行わずに特定画像を生成して出力することが可能となる。したがって、画像処理装置100の負荷を低減しつつ、好適に画像処理の効果を確認することが可能な特定画像を生成することが可能となる。   When a comparison display for confirming the effect of image processing is performed on a plurality of image signals generated by the 2SI method by the above-described series of processing, a specific image is generated and output without performing synthesis processing. It becomes possible to do. Therefore, it is possible to generate a specific image that can suitably check the effect of image processing while reducing the load on the image processing apparatus 100.

また、S703で制御部116が、入力された複数の画像信号が、2SI方式で生成されていないと判定した場合、S706で、制御部116が合成処理部112に複数の画像信号を合成した合成画像を生成するように、合成処理部112を制御する。複数の画像信号が、例えば伝送過程でエラーが発生する等が起こらない場合、合成画像は、原画像と同一の画像である。処理はS707に進む。   If the control unit 116 determines in step S703 that the plurality of input image signals are not generated by the 2SI method, the control unit 116 combines the plurality of image signals with the combination processing unit 112 in step S706. The composition processing unit 112 is controlled to generate an image. When an error does not occur in a plurality of image signals, for example, in the transmission process, the composite image is the same image as the original image. The process proceeds to S707.

S707で、制御部116は、合成画像を縮小して縮小画像を生成するように、縮小処理部114を制御する。縮小処理部114は、生成した縮小画像を表示画像生成部115(画像E)と、画像処理部113(画像F)とに出力する。処理はS708に進む。   In step S707, the control unit 116 controls the reduction processing unit 114 so as to generate a reduced image by reducing the composite image. The reduction processing unit 114 outputs the generated reduced image to the display image generation unit 115 (image E) and the image processing unit 113 (image F). The process proceeds to S708.

S708で、制御部116は、画像Fに対して画像処理を実行するように、画像処理部113を制御する。画像処理部113は、画像Fに対して、白黒表示処理を施すとする。画像処理部113は、白黒表示処理を施された画像F´を表示画像生成部115に出力する。処理は、S709に進む。   In step S <b> 708, the control unit 116 controls the image processing unit 113 to execute image processing on the image F. Assume that the image processing unit 113 performs monochrome display processing on the image F. The image processing unit 113 outputs the image F ′ subjected to the monochrome display process to the display image generation unit 115. The process proceeds to S709.

S709で、表示画像生成部115は、画像Eと、画像F´とを並べた特定画像を生成して出力部118に出力する。処理は、S713に進む。   In step S <b> 709, the display image generation unit 115 generates a specific image in which the image E and the image F ′ are arranged and outputs the specific image to the output unit 118. The process proceeds to S713.

S706〜S709の処理により、入力された複数の画像信号が、2SI方式で生成された画像信号でない場合に、複数の画像信号から生成された原画像に対応する合成画像を用いて特定画像を生成して出力することが可能となる。   When the plurality of input image signals are not image signals generated by the 2SI method, the specific image is generated by using the synthesized image corresponding to the original image generated from the plurality of image signals by the processing of S706 to S709. Can be output.

また、S702で、制御部116が、ユーザが比較表示の実行を指示していないと判定した場合、S710で、制御部116が合成処理部112に複数の画像信号を合成した合成画像を生成するように、合成処理部112を制御する。合成処理部112は、合成画像を画像処理部113に出力する。処理は、S711に進む。   If the control unit 116 determines in step S702 that the user has not instructed execution of comparison display, the control unit 116 generates a composite image in which a plurality of image signals are combined in the combination processing unit 112 in step S710. In this manner, the synthesis processing unit 112 is controlled. The composition processing unit 112 outputs the composite image to the image processing unit 113. The process proceeds to S711.

S711で、制御部116は、合成画像に画像処理を実行するように画像処理部113を制御する。例えば、画像処理部113は、白黒表示処理を合成画像に施すとする。画像処理部113は、白黒表示処理を施された合成画像を、出力部118に出力する。処理は、S713に進む。   In step S711, the control unit 116 controls the image processing unit 113 to perform image processing on the composite image. For example, it is assumed that the image processing unit 113 performs monochrome display processing on the composite image. The image processing unit 113 outputs the composite image that has been subjected to the monochrome display process to the output unit 118. The process proceeds to S713.

また、S701で、制御部116が、ユーザが画像処理の実行を指示していないと判定した場合、S712で、制御部116は、制御部116が合成処理部112に複数の画像信号を合成した合成画像を生成するように、合成処理部112を制御する。合成処理部112は、合成画像を出力部118に出力する。処理は、S713に進む。   If the control unit 116 determines in step S701 that the user has not instructed execution of image processing, the control unit 116 combines the plurality of image signals in the combination processing unit 112 in step S712. The synthesis processing unit 112 is controlled so as to generate a synthesized image. The composition processing unit 112 outputs the composite image to the output unit 118. The process proceeds to S713.

以上のように、画像処理部113は、原画像の画素を間引いた間引き画像に対応する複数の画像信号のうち、いずれか1つの画像信号に基づく画像に画像処理を施した画像と他の画像信号に基づく画像とを並べて配置した特定画像を生成する。したがって、入力された複数の画像信号が、それぞれ単独で原画像に対応する画像を表示可能な画像信号である場合に、複数の画像信号を合成する処理を実行せずに、画像処理の効果を確認可能な画像を生成することが可能となる。これにより、処理装置の回路への負荷を低減しつつ、好適に画像処理の効果を確認することが可能な画像を生成することが可能となる。   As described above, the image processing unit 113 performs the image processing on the image based on any one of the plurality of image signals corresponding to the thinned image obtained by thinning the pixels of the original image and the other image. A specific image in which images based on signals are arranged side by side is generated. Therefore, when the plurality of input image signals are image signals that can individually display an image corresponding to the original image, the effect of the image processing can be obtained without executing the process of combining the plurality of image signals. An image that can be confirmed can be generated. As a result, it is possible to generate an image capable of suitably confirming the effect of the image processing while reducing the load on the circuit of the processing device.

なお、特定画像に配置する画像は、3以上の画像であってもよい。例えば、画像信号aに基づく画像と、画像信号bに基づく画像であって、白黒表示処理を施された画像と、画像信号cに基づく画像であって、エッジ強調処理を施された画像と、を並べて配置した特定画像を生成することも可能である。   Note that three or more images may be arranged in the specific image. For example, an image based on the image signal a, an image based on the image signal b, which has been subjected to monochrome display processing, an image based on the image signal c, which has been subjected to edge enhancement processing, It is also possible to generate a specific image in which the images are arranged side by side.

なお、複数の画像信号が2SI方式で生成された画像信号である場合に、画像信号aに基づく画像と画像信号dとに基づく画像とから、特定画像を生成したが、他の画像信号に基づく画像を用いてもよい。制御部116は、入力された画像信号のうち、任意の画像信号に基づく画像を用いて、特定画像を生成することが可能である。   In the case where the plurality of image signals are image signals generated by the 2SI method, the specific image is generated from the image based on the image signal a and the image based on the image signal d. An image may be used. The control unit 116 can generate a specific image using an image based on an arbitrary image signal among the input image signals.

なお、表示画像生成部115が生成する特定画像は、処理画像と未処理画像とを並べて配置した画像に限らない。表示画像生成部115、適用する画像処理の、処理の強度が異なる画像を並べて配置して特定画像を生成することが可能である。例えば、表示画像生成部115は、エッジ強調処理の効果を確認する特定画像を生成する場合、一方の画像のエッジの検出感度よりも、もう一方の画像のエッジの検出感度よりも高くし、検出感度の差を確認するための特定画像を生成してもよい。また、特定画像を構成する画像に対して、異なる種類の画像処理を同時に適用して、それぞれの画像処理を施した画像を同時にユーザが容易に確認することを可能にするものであってもよい。   Note that the specific image generated by the display image generation unit 115 is not limited to an image in which a processed image and an unprocessed image are arranged side by side. The display image generation unit 115 can generate a specific image by arranging and arranging images having different processing intensities of applied image processing. For example, when generating the specific image for confirming the effect of the edge enhancement processing, the display image generation unit 115 sets the detection sensitivity of the edge of one image to be higher than the detection sensitivity of the edge of the other image. A specific image for confirming the difference in sensitivity may be generated. Further, different types of image processing may be simultaneously applied to the images constituting the specific image so that the user can easily confirm the images subjected to the respective image processing simultaneously. .

また、表示画像生成部115は、それぞれ異なる画像処理を施した3以上の複数の画像を並べて配置して、特定画像を生成することも可能である。例えば、入力端子101a〜101dに入力された画像信号が、それぞれ原画像の画素を間引いた画像信号である場合、表示画像生成部115は、各画像信号に基づく画像に異なる画像処理を施した複数の画像を並べて配置して特定画像を生成してもよい。   The display image generation unit 115 can also generate a specific image by arranging a plurality of three or more images that have been subjected to different image processing. For example, when the image signals input to the input terminals 101a to 101d are image signals obtained by thinning out the pixels of the original image, the display image generation unit 115 performs multiple image processing on images based on the image signals. These images may be arranged side by side to generate a specific image.

図9は、2SI方式で生成された4つの画像信号a〜dそれぞれに基づく画像に、それぞれ異なる画像処理を施した処理画像からなる特定画像を示す模式図である。図8に示すように、4つの画像信号からなる4つの画像を並べて、特定画像を生成してもよい。また、3つの画像信号を選択して、3つの画像を並べて、特定画像を生成してもよい。   FIG. 9 is a schematic diagram illustrating a specific image including processed images obtained by performing different image processing on images based on the four image signals a to d generated by the 2SI method. As illustrated in FIG. 8, a specific image may be generated by arranging four images including four image signals. Alternatively, a specific image may be generated by selecting three image signals and arranging the three images.

(実施例2)
実施例2の画像処理装置100は、入力端子101a〜101dのうち、いずれか1つの入力端子に正常に画像信号が入力されていないと判定した場合、他の入力端子に入力された画像信号が、2SI方式で生成された画像信号であっても、合成画像を生成する。
(Example 2)
When the image processing apparatus 100 according to the second embodiment determines that an image signal is not normally input to any one of the input terminals 101a to 101d, the image signal input to the other input terminal is A composite image is generated even for an image signal generated by the 2SI method.

実施例2の画像処理装置100、および出力処理部110の構成は実施例1と同様であるので、説明を省略する。   Since the configurations of the image processing apparatus 100 and the output processing unit 110 according to the second embodiment are the same as those according to the first embodiment, description thereof is omitted.

図10は、実施例2における表示画像の出力処理を示すフローチャートである。実施例1の図6と同符号を付した工程は、実施例1と同様の処理であるので説明を省略する。実施例2において、S703で、制御部116が、入力された複数の画像信号が、2SI方式で生成されていると判定した場合、処理は、S801に進む。   FIG. 10 is a flowchart illustrating display image output processing according to the second embodiment. Steps denoted by the same reference numerals as those in FIG. 6 in the first embodiment are the same as those in the first embodiment, and thus description thereof is omitted. In the second embodiment, when the control unit 116 determines in S703 that the plurality of input image signals are generated by the 2SI method, the process proceeds to S801.

S801で、制御部116は、入力端子101a〜101dに有効な画像信号が入力されたか否かを判定する。具体的には、画像信号判定部102が、入力端子101a〜101dに正常に画像信号が入力されたか否かを判定した結果に基づいて、制御部116が、入力端子101a〜101dに正常に画像信号が入力されたか否かを判定する。画像信号判定部102は、入力端子101a〜101dのうち少なくとも1つの入力端子に有効な画像信号が入力されていないことを検出した場合、入力端子101a〜101dに有効な画像信号が入力されていないと判定する。   In step S801, the control unit 116 determines whether a valid image signal is input to the input terminals 101a to 101d. Specifically, based on the result of the image signal determination unit 102 determining whether or not the image signal is normally input to the input terminals 101a to 101d, the control unit 116 normally outputs the image to the input terminals 101a to 101d. It is determined whether or not a signal is input. When the image signal determination unit 102 detects that a valid image signal is not input to at least one of the input terminals 101a to 101d, no valid image signal is input to the input terminals 101a to 101d. Is determined.

S801で、制御部116が、入力端子101a〜101dに有効な画像信号が入力されていると判定した場合、処理は、S704に進む。制御部116が、入力端子101a〜101dに有効な画像信号が入力されていないと判定した場合、処理は、S706に進む。   In S801, when the control unit 116 determines that a valid image signal is input to the input terminals 101a to 101d, the process proceeds to S704. When the control unit 116 determines that a valid image signal is not input to the input terminals 101a to 101d, the process proceeds to S706.

画像信号が不足した状態で生成された合成画像をさらに縮小した画像に画像処理を施した場合、本来得られる画像処理の効果の確認が困難となることがある。上述の処理により、原画像から生成された複数の画像信号が正常に入力されていない場合に、複数の入力手段のうち、有効に入力された画像信号を用いて、特定画像を生成することが可能となる。したがって、有効でない画像信号の影響を抑制して、好適に画像処理の効果を確認することが可能となる。   When image processing is performed on an image obtained by further reducing a composite image generated with a lack of image signals, it may be difficult to confirm the effect of the image processing originally obtained. By the above-described processing, when a plurality of image signals generated from an original image are not normally input, a specific image can be generated using an image signal that is input effectively among a plurality of input means. It becomes possible. Therefore, it is possible to suppress the influence of an ineffective image signal and appropriately check the effect of image processing.

(実施例3)
実施例3の画像処理装置100の出力処理部110は、入力された画像信号が、原画像を分割した画像に対応する画像信号である場合、合成した画像のうち一部の領域に画像処理を施して、特定画像を生成する。
(Example 3)
When the input image signal is an image signal corresponding to an image obtained by dividing the original image, the output processing unit 110 of the image processing apparatus 100 according to the third embodiment performs image processing on a part of the synthesized image. To generate a specific image.

実施例3の出力処理部110は、実施例1に対して、縮小処理部114を持たない。そのほかの構成は、実施例1と同様である。   The output processing unit 110 according to the third embodiment does not include the reduction processing unit 114 as compared with the first embodiment. Other configurations are the same as those of the first embodiment.

図11は、実施例3における表示画像の出力処理を示すフローチャートである。実施例1の図6と同符号を付した工程は、実施例1と同様の処理であるので説明を省略する。実施例3において、S703で、制御部116が、入力された複数の画像信号が、2SI方式で生成されていないと判定した場合、処理は、S706に進む。   FIG. 11 is a flowchart illustrating display image output processing according to the third embodiment. Steps denoted by the same reference numerals as those in FIG. 6 in the first embodiment are the same as those in the first embodiment, and thus description thereof is omitted. In the third embodiment, when the control unit 116 determines in S703 that the plurality of input image signals are not generated by the 2SI method, the process proceeds to S706.

S706で、制御部116が合成処理部112に複数の画像信号を合成した合成画像を生成するように、合成処理部112を制御する。合成処理部112は、合成画像を画像処理部113に出力する。処理は、S901に進む。   In step S <b> 706, the control unit 116 controls the composition processing unit 112 so as to generate a composite image by combining the plurality of image signals with the composition processing unit 112. The composition processing unit 112 outputs the composite image to the image processing unit 113. The process proceeds to S901.

S901で、制御部116は、合成画像の一部に画像処理を施すように、画像処理部113を制御する。例えば、画像処理部113は、合成画像の右半分に白黒表示処理を施すとする。図12は、右半分に白黒表示処理を施された合成画像の模式図である。   In step S901, the control unit 116 controls the image processing unit 113 to perform image processing on a part of the composite image. For example, the image processing unit 113 performs black and white display processing on the right half of the composite image. FIG. 12 is a schematic diagram of a composite image that has been subjected to black and white display processing on the right half.

制御部116は、指示入力部103から取得したユーザの指示に応じて、合成画像のうち、画像処理を施す領域を制御することが可能である。例えば、ユーザは、合成画像のうち、画像処理を施す領域と、画像処理を施さない領域との境界Rの位置を動的に制御することが可能であるとする。   The control unit 116 can control a region to be subjected to image processing in the composite image in accordance with a user instruction acquired from the instruction input unit 103. For example, it is assumed that the user can dynamically control the position of the boundary R between the region where image processing is performed and the region where image processing is not performed in the composite image.

ユーザが、境界Rを動的に制御することにより、ユーザは、注目領域に対して、画像処理を施した場合とそうでない場合とを比較して確認することが可能となる。   When the user dynamically controls the boundary R, the user can confirm the comparison between the case where the image processing is performed on the attention area and the case where the image processing is not performed.

上述の処理を行うことにより、縮小処理を行わなくとも、ユーザが画像処理の効果を確認することが可能となる。したがって、縮小処理部114が不要となり、回路規模を削減することが可能となる。   By performing the above processing, the user can confirm the effect of the image processing without performing the reduction processing. Therefore, the reduction processing unit 114 is not necessary, and the circuit scale can be reduced.

なお、ユーザが指示する画像処理を施す領域は、合成画像中の任意の領域を指定するものであれば、種々の方式をとることが可能である。例えば、合成画像中の円形の領域を指定するものであってもよい。また、合成画像中の不定形の領域を指定するものであってもよい。   It should be noted that various areas can be used as the area to be subjected to image processing instructed by the user as long as an arbitrary area in the composite image is designated. For example, a circular area in the composite image may be designated. Alternatively, an indefinite area in the composite image may be designated.

(その他の実施例)
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
(Other examples)
The present invention supplies a program that realizes one or more functions of the above-described embodiments to a system or apparatus via a network or a storage medium, and one or more processors in a computer of the system or apparatus read and execute the program This process can be realized. It can also be realized by a circuit (for example, ASIC) that realizes one or more functions.

100 画像処理装置
101 入力端子
102 画像信号判定部
103 指示入力部
110 出力処理部
111 入力部
112 合成部
113 画像処理部
114 縮小処理部
115 表示画像生成部
116 制御部
117 メモリ
118 出力部
DESCRIPTION OF SYMBOLS 100 Image processing apparatus 101 Input terminal 102 Image signal determination part 103 Instruction input part 110 Output processing part 111 Input part 112 Composition part 113 Image processing part 114 Reduction processing part 115 Display image generation part 116 Control part 117 Memory 118 Output part

Claims (24)

原画像に基づく互いに異なる複数の画像信号を取得するための複数の入力手段と、
前記複数の画像信号に基づいて、出力画像を生成する処理手段と、
を備え、
前記処理手段は、画像処理の効果を確認するための特定画像を生成することが可能であって、
前記複数の画像信号が、前記原画像の画素を間引いた間引き画像に対応する複数の間引き画像信号である場合、前記処理手段は、前記複数の画像信号のうち第1画像信号に基づく画像に第1の画像処理を施した第1画像と、前記複数の画像信号のうち第2画像信号に基づく画像に前記第1の画像処理と異なる第2の画像処理を施した第2画像と、を並べて配置して前記特定画像を生成することを特徴とする画像処理装置。
A plurality of input means for acquiring a plurality of different image signals based on the original image;
Processing means for generating an output image based on the plurality of image signals;
With
The processing means can generate a specific image for confirming the effect of image processing,
When the plurality of image signals are a plurality of thinned image signals corresponding to a thinned image obtained by thinning out pixels of the original image, the processing unit adds a first image signal to the image based on the first image signal. A first image subjected to one image processing, and a second image obtained by performing second image processing different from the first image processing on an image based on a second image signal among the plurality of image signals. An image processing apparatus arranged to generate the specific image.
前記複数の画像信号が、前記複数の間引き画像信号でない場合、前記処理手段は、前記複数の画像信号に基づいて前記原画像に対応する画像を生成し、生成した画像を縮小して縮小画像を生成し、前記縮小画像に対して前記第1の画像処理を施した画像と、前記縮小画像に対して前記第2の画像処理を施した画像とを並べて配置して前記特定画像を生成することを特徴とする請求項1に記載の画像処理装置。   When the plurality of image signals are not the plurality of thinned image signals, the processing unit generates an image corresponding to the original image based on the plurality of image signals, and reduces the generated image to reduce the reduced image. Generating the specific image by arranging and arranging an image obtained by performing the first image processing on the reduced image and an image obtained by performing the second image processing on the reduced image. The image processing apparatus according to claim 1. 前記複数の入力手段がそれぞれ対応する画像信号を取得したか否かを判定する判定手段を備え、
前記複数の画像信号が、前記複数の間引き画像信号であり、かつ、前記判定手段が、前記複数の入力手段のうち、少なくとも1つの入力手段が対応する画像信号を取得できていないと判定した場合、前記処理手段は、前記第1画像と前記第2画像とを用いて前記特定画像を生成することを特徴とする請求項1または請求項2に記載の画像処理装置。
Determination means for determining whether or not each of the plurality of input means has acquired a corresponding image signal;
When the plurality of image signals are the plurality of thinned-out image signals, and the determination unit determines that at least one input unit among the plurality of input units cannot acquire the corresponding image signal. The image processing apparatus according to claim 1, wherein the processing unit generates the specific image using the first image and the second image.
ユーザが前記特定画像を出力するか否かを指示するための指示入力手段を備え、
前記処理手段は、前記ユーザが前記特定画像を出力すると指示した場合、前記特定画像を出力することを特徴とする請求項1乃至請求項3のいずれか1項に記載の画像処理装置。
Comprising an instruction input means for instructing whether or not the user outputs the specific image;
The image processing apparatus according to claim 1, wherein the processing unit outputs the specific image when the user instructs to output the specific image.
前記複数の間引き画像信号は、それぞれ前記原画像において異なる画素の画像信号からなり、かつ、各間引き画像信号に基づく画像は、前記原画像の解像度を低減した画像に対応する画像となることを特徴とする請求項1乃至請求項4のいずれか1項に記載の画像処理装置。   The plurality of thinned image signals are image signals of different pixels in the original image, respectively, and an image based on each thinned image signal is an image corresponding to an image in which the resolution of the original image is reduced. The image processing apparatus according to any one of claims 1 to 4. 前記原画像の画素を間引いた間引き画像に対応する画像信号は、前記原画像に基づいて、2−Sample Inter leave方式で生成された画像信号であることを特徴とする請求項5に記載の画像処理装置。   6. The image according to claim 5, wherein the image signal corresponding to the thinned image obtained by thinning out pixels of the original image is an image signal generated by a 2-Sample Interleave method based on the original image. Processing equipment. 前記第1の画像処理と前記第2の画像処理とは、同じ種類の画像処理であって、それぞれ画像処理の強度が異なることを特徴とする請求項1乃至請求項6のいずれか1項に記載の画像処理装置。   7. The method according to claim 1, wherein the first image processing and the second image processing are the same type of image processing, and the intensity of the image processing is different from each other. The image processing apparatus described. 前記第1画像は、所定の画像処理が施された画像であって、前記第2画像は、前記所定の画像処理が施されない画像であることを特徴とする請求項1乃至請求項7のいずれか1項に記載の画像処理装置。   8. The first image according to claim 1, wherein the first image is an image that has undergone predetermined image processing, and the second image is an image that has not been subjected to the predetermined image processing. The image processing apparatus according to claim 1. 前記処理手段は、前記第1画像と、前記第2画像と、前記複数の画像信号のうち第3画像信号に基づく第3画像と、前記複数の画像信号のうち第4画像信号に基づく第4画像と、を並べて配置して前記特定画像を生成することを特徴とする請求項1乃至請求項8のいずれか1項に記載の画像処理装置。   The processing means includes the first image, the second image, a third image based on a third image signal among the plurality of image signals, and a fourth based on a fourth image signal among the plurality of image signals. The image processing apparatus according to claim 1, wherein the specific image is generated by arranging the images side by side. 前記複数の画像信号が、前記複数の間引き画像信号でない場合、前記処理手段は、前記複数の画像信号を合成した合成画像の一部の領域に前記第1の画像処理を施し、かつ前記合成画像の他の一部の領域に前記第2の画像処理を施して前記特定画像を生成することを特徴とする請求項1乃至請求項9のいずれか1項に記載の画像処理装置。   When the plurality of image signals are not the plurality of thinned-out image signals, the processing unit performs the first image processing on a partial area of the combined image obtained by combining the plurality of image signals, and the combined image The image processing apparatus according to claim 1, wherein the specific image is generated by performing the second image processing on another partial region. 前記複数の入力手段は、Serial Digital Interface規格に対応した複数の入力端子であることを特徴とする請求項1乃至請求項10のいずれか1項に記載の画像処理装置。   11. The image processing apparatus according to claim 1, wherein the plurality of input units are a plurality of input terminals corresponding to the Serial Digital Interface standard. 請求項1乃至請求項11のいずれか1項に記載の画像処理装置と、
前記画像処理装置が出力した前記特定画像に基づいて画像を表示する表示手段と、
を備えることを特徴とする表示装置。
An image processing apparatus according to any one of claims 1 to 11,
Display means for displaying an image based on the specific image output by the image processing apparatus;
A display device comprising:
原画像に基づく互いに異なる複数の画像信号を取得するための複数の入力手段を備える画像処理装置の制御方法であって、
前記複数の画像信号に基づいて出力画像を生成する処理工程を備え、
前記処理工程は、画像処理の効果を確認するための特定画像を生成することが可能であって、
前記複数の画像信号が、前記原画像の画素を間引いた間引き画像に対応する複数の間引き画像信号である場合、前記処理工程は、前記複数の画像信号のうち第1画像信号に基づく画像に第1の画像処理を施した第1画像と、前記複数の画像信号のうち第2画像信号に基づく画像に前記第1の画像処理と異なる第2の画像処理を施した第2画像と、を並べて配置して前記特定画像を生成することを特徴とする画像処理装置の制御方法。
A control method for an image processing apparatus comprising a plurality of input means for acquiring a plurality of different image signals based on an original image,
A processing step of generating an output image based on the plurality of image signals;
The processing step can generate a specific image for confirming the effect of image processing,
When the plurality of image signals are a plurality of thinned image signals corresponding to a thinned image obtained by thinning out pixels of the original image, the processing step adds a first image signal to the image based on the first image signal. A first image subjected to one image processing, and a second image obtained by performing second image processing different from the first image processing on an image based on a second image signal among the plurality of image signals. A control method for an image processing apparatus, characterized by arranging and generating the specific image.
前記複数の画像信号が、前記複数の間引き画像信号でない場合、前記処理工程は、前記複数の画像信号に基づいて前記原画像に対応する画像を生成し、生成した画像を縮小して縮小画像を生成し、前記縮小画像に対して前記第1の画像処理を施した画像と、前記縮小画像に対して前記第2の画像処理を施した画像とを並べて配置して前記特定画像を生成することを特徴とする請求項13に記載の画像処理装置の制御方法。   When the plurality of image signals are not the plurality of thinned image signals, the processing step generates an image corresponding to the original image based on the plurality of image signals, and reduces the generated image to reduce a reduced image. Generating the specific image by arranging and arranging an image obtained by performing the first image processing on the reduced image and an image obtained by performing the second image processing on the reduced image. The method of controlling an image processing apparatus according to claim 13. 前記複数の入力手段がそれぞれ対応する画像信号を取得したか否かを判定する判定工程を備え、
前記複数の画像信号が、前記複数の間引き画像信号であり、かつ、前記判定工程で、前記複数の入力手段のうち、少なくとも1つの入力手段が対応する画像信号を取得できていないと判定された場合、前記処理工程は、前記第1画像と前記第2画像とを用いて前記特定画像を生成することを特徴とする請求項13または請求項14に記載の画像処理装置の制御方法。
A determination step of determining whether or not each of the plurality of input means has acquired a corresponding image signal;
The plurality of image signals are the plurality of thinned-out image signals, and it is determined in the determination step that at least one input unit among the plurality of input units cannot acquire a corresponding image signal. 15. The method according to claim 13, wherein the specific image is generated using the first image and the second image in the processing step.
ユーザが前記特定画像を出力するか否かを指示するための指示入力工程を備え、
前記処理工程は、前記ユーザが前記特定画像を出力すると指示した場合、前記特定画像を出力することを特徴とする請求項13乃至請求項15のいずれか1項に記載の画像処理装置の制御方法。
Comprising an instruction input step for instructing whether or not the user outputs the specific image;
16. The method of controlling an image processing apparatus according to claim 13, wherein the processing step outputs the specific image when the user instructs to output the specific image. .
前記複数の間引き画像信号は、それぞれ前記原画像において異なる画素の画像信号からなり、かつ、各間引き画像信号に基づく画像は、前記原画像の解像度を低減した画像に対応する画像となることを特徴とする請求項13乃至請求項16のいずれか1項に記載の画像処理装置の制御方法。   The plurality of thinned image signals are image signals of different pixels in the original image, respectively, and an image based on each thinned image signal is an image corresponding to an image in which the resolution of the original image is reduced. The method for controlling an image processing apparatus according to any one of claims 13 to 16. 前記原画像の画素を間引いた間引き画像に対応する画像信号は、前記原画像に基づいて、2−Sample Inter leave方式で生成された画像信号であることを特徴とする請求項17のいずれか1項に記載の画像処理装置の制御方法。   The image signal corresponding to the thinned image obtained by thinning out pixels of the original image is an image signal generated by a 2-Sample Interleave method based on the original image. A control method for an image processing apparatus according to the item. 前記第1の画像処理と前記第2の画像処理とは、同じ種類の画像処理であって、それぞれ画像処理の強度が異なることを特徴とする請求項13乃至請求項18のいずれか1項に記載の画像処理装置の制御方法。   19. The method according to claim 13, wherein the first image processing and the second image processing are the same type of image processing, and each has different image processing intensity. A control method of the image processing apparatus described. 前記第1画像は、所定の画像処理が施された画像であって、前記第2画像は、前記所定の画像処理が施されない画像であることを特徴とする請求項13乃至請求項18のいずれか1項に記載の画像処理装置の制御方法。   The first image is an image that has been subjected to predetermined image processing, and the second image is an image that has not been subjected to the predetermined image processing. A method for controlling the image processing apparatus according to claim 1. 前記処理工程は、前記第1画像と、前記第2画像と、前記複数の画像信号のうち第3画像信号に基づく第3画像と、前記複数の画像信号のうち第4画像信号に基づく第4画像と、を並べて配置して前記特定画像を生成することを特徴とする請求項1乃至請求項20のいずれか1項に記載の画像処理装置の制御方法。   The processing step includes the first image, the second image, a third image based on a third image signal among the plurality of image signals, and a fourth image based on a fourth image signal among the plurality of image signals. 21. The control method for an image processing apparatus according to claim 1, wherein the specific image is generated by arranging the images side by side. 前記複数の画像信号が、前記複数の間引き画像信号でない場合、前記処理工程は、前記複数の画像信号を合成した合成画像の一部の領域に前記第1の画像処理を施し、かつ前記合成画像の他の一部の領域に前記第2の画像処理を施して前記特定画像を生成することを特徴とする請求項13乃至請求項21のいずれか1項に記載の画像処理装置の制御方法。   When the plurality of image signals are not the plurality of thinned-out image signals, the processing step performs the first image processing on a partial area of the combined image obtained by combining the plurality of image signals, and the combined image The method for controlling an image processing apparatus according to any one of claims 13 to 21, wherein the second image processing is performed on another partial region to generate the specific image. 請求項13から請求項22までのいずれか1項に記載の制御方法の各工程を演算処理装置に実行させるためのプログラム。   A program for causing an arithmetic processing unit to execute each step of the control method according to any one of claims 13 to 22. 請求項23に記載のプログラムを記憶する、演算処理装置が読出し可能な記憶媒体。   A storage medium storing the program according to claim 23 and readable by an arithmetic processing unit.
JP2017033849A 2017-02-24 2017-02-24 An image processing device, a control method thereof, a display device including the image processing device, a program, and a storage medium. Active JP6866181B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017033849A JP6866181B2 (en) 2017-02-24 2017-02-24 An image processing device, a control method thereof, a display device including the image processing device, a program, and a storage medium.

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017033849A JP6866181B2 (en) 2017-02-24 2017-02-24 An image processing device, a control method thereof, a display device including the image processing device, a program, and a storage medium.

Publications (3)

Publication Number Publication Date
JP2018139387A true JP2018139387A (en) 2018-09-06
JP2018139387A5 JP2018139387A5 (en) 2020-03-19
JP6866181B2 JP6866181B2 (en) 2021-04-28

Family

ID=63451479

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017033849A Active JP6866181B2 (en) 2017-02-24 2017-02-24 An image processing device, a control method thereof, a display device including the image processing device, a program, and a storage medium.

Country Status (1)

Country Link
JP (1) JP6866181B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020145584A (en) * 2019-03-06 2020-09-10 日本放送協会 Transmitting apparatus, receiving apparatus and program

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020145584A (en) * 2019-03-06 2020-09-10 日本放送協会 Transmitting apparatus, receiving apparatus and program
JP7338992B2 (en) 2019-03-06 2023-09-05 日本放送協会 Transmitting device, receiving device, and program

Also Published As

Publication number Publication date
JP6866181B2 (en) 2021-04-28

Similar Documents

Publication Publication Date Title
US9454794B2 (en) Image processing apparatus, image processing method, and program
JP5325267B2 (en) Object display device, object display method, and object display program
JP2016208307A (en) Image processing apparatus, control method therefor, and program
US11194993B2 (en) Display apparatus and display control method for displaying images
JP2012244337A (en) Image processing apparatus, image processing method, program, and imaging apparatus
US10096077B2 (en) Information embedding device, information embedding method, and recording medium storing program
CN113905219B (en) Image processing apparatus and method, image processing system, control method, and medium
CN114040246A (en) Image format conversion method, device, equipment and storage medium of graphic processor
JP2007041196A (en) Device and method for processing image, and computer program
JP2022002376A5 (en)
JP2013016973A (en) Image processor and image processing method
JP6866181B2 (en) An image processing device, a control method thereof, a display device including the image processing device, a program, and a storage medium.
JP6739257B2 (en) Image processing apparatus, control method thereof, and program
US10896344B2 (en) Information processing apparatus, information processing method, and computer program
US11494934B2 (en) Image processing device, image processing method, and monitoring system
US20160203617A1 (en) Image generation device and display device
JP2020005084A (en) Image processing apparatus, image processing method, and program
JP6531275B2 (en) Image display device
KR20180056268A (en) Image processing apparatus and controlling method thereof
JP2016130936A (en) Image processing apparatus, image processing method, and image display device
CN114830626A (en) Imaging device, method for operating imaging device, program, and imaging system
JP2019158968A (en) Display control device, imaging apparatus, display system, display control method, and program
CN115861096B (en) Image processing method and device and computer equipment
JP2013168902A (en) Image processing device, display device, and image processing method
WO2021210399A1 (en) Image processing device and method, and program

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200203

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200203

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201008

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201020

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201214

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210309

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210407

R151 Written notification of patent or utility model registration

Ref document number: 6866181

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151