JP2007325056A - Inspection apparatus and inspection method - Google Patents

Inspection apparatus and inspection method Download PDF

Info

Publication number
JP2007325056A
JP2007325056A JP2006154320A JP2006154320A JP2007325056A JP 2007325056 A JP2007325056 A JP 2007325056A JP 2006154320 A JP2006154320 A JP 2006154320A JP 2006154320 A JP2006154320 A JP 2006154320A JP 2007325056 A JP2007325056 A JP 2007325056A
Authority
JP
Japan
Prior art keywords
inspection
display screen
control signal
mask
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2006154320A
Other languages
Japanese (ja)
Inventor
Takuya Ogawa
琢也 小川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2006154320A priority Critical patent/JP2007325056A/en
Publication of JP2007325056A publication Critical patent/JP2007325056A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide an inspection apparatus and inspection method in which whether or not a remote controller or the like is normally operated, without performing high-level image processing in a display device of a television or the like. <P>SOLUTION: An inspection apparatus 21 for inspecting an operation function on a display screen of a display 12 of a liquid crystal television 11 is characterized in comprising: a scenario holding unit 41 for storing a procedure of inspection; a scenario processing unit 31 for generating, outputting a control signal for executing the inspection; a mask processing unit 33 for generating, outputting a mask control signal; a camera 23 in which the inspection is execution in accordance with an inspection control signal and a display picture of which light transmission is controlled by the mask control signal, is picked up; an expectation image holding unit 44 for generating and storing an expectation display picture to be displayed by inspection and mask control; and a determination processing unit 35 for comparing the picked-up display picture and the expectation display picture to determine whether or not an object to be inspected is being operated normally. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、検査装置及び検査方法に関し、特に表示装置、リモートコントロール装置その他の電子機器を検査する検査装置及び検査方法に関する。   The present invention relates to an inspection device and an inspection method, and more particularly to an inspection device and an inspection method for inspecting a display device, a remote control device, and other electronic devices.

近年、デジタルテレビ等に代表される表示装置には、入力切替機能、電子番組ガイド機能、画質調整機能その他の様々な機能が搭載されるようになっている。これらの機能を実行するための操作は、主に表示装置に付随するリモートコントロール装置(略してリモコン)を使用してなされている。   In recent years, various functions such as an input switching function, an electronic program guide function, an image quality adjustment function, and the like have been installed in display devices typified by digital televisions. Operations for executing these functions are mainly performed using a remote control device (abbreviated as a remote controller) attached to the display device.

そのため、表示装置の機能を検査する際には、リモコンを操作することにより、表示装置本体の機能が正常に動作するか否かの検査が重要となっているが、前述したように、表示装置の多機能化によって、リモコン操作に関する検査項目も多くなり、更に検査内容も複雑化している。   Therefore, when inspecting the function of the display device, it is important to operate the remote controller to check whether the function of the display device body operates normally. With the increase in functionality, the number of inspection items related to remote control operations has increased, and the inspection details have become more complicated.

しかし、従来、リモコン操作に限らず機能を実行するための操作が正常であるか否かの検査は、手作業によってなされていることが多く、検査時間及び信頼性等の観点から問題があり、検査の自動化が急務となっていた。   However, in the past, the inspection of whether or not the operation for executing the function is normal, not limited to the remote control operation, is often done manually, and there is a problem from the viewpoint of inspection time and reliability, There was an urgent need to automate the inspection.

そこで、携帯電話の操作ボタンによる種々の設定動作が設計通りに行えるようになっているかどうかを簡単かつ自動的に判定できるようにしたものが開示されている。
この従来技術は、予め撮像しておいた携帯電話の全体像を表示部に表示させるとともに、表示した携帯電話の全体画像の表示位置に撮像手段で得た前記表示部の画像を表示し、携帯電話の全体画像の操作ボタンの画像に対して複数の押下手段の一つを割り当て、この割り当てられた操作ボタンの画像部に対する指示操作によって上記押下手段を動作させ、この動作によって変化する携帯電話の表示部の表示内容から、該携帯電話の操作ボタンの押下と上記携帯電話の表示との一致性を確認可能としたものである(特許文献1を参照)。
特開2001−268202号公報
In view of this, there is disclosed a device that can easily and automatically determine whether various setting operations using operation buttons of a mobile phone can be performed as designed.
In this conventional technique, an entire image of a mobile phone that has been imaged in advance is displayed on the display unit, and the image of the display unit obtained by the imaging unit is displayed at the display position of the displayed entire image of the mobile phone. One of a plurality of pressing means is assigned to the image of the operation button of the entire image of the telephone, and the pressing means is operated by an instruction operation on the image portion of the assigned operation button. From the display content of the display unit, it is possible to confirm the coincidence between the pressing of the operation button of the mobile phone and the display of the mobile phone (see Patent Document 1).
JP 2001-268202 A

しかしながら、デジタルテレビ等の表示装置の検査においては、以下に示す理由により、上述したような従来の技術をそのまま適用することは困難である。
すなわち、携帯電話の表示部が主に静止画を表示するのに対して、テレビに代表される表示装置の表示部は主に放送番組等の動画を表示する点で状況が異なっている。
However, in the inspection of a display device such as a digital television, it is difficult to apply the conventional technique as described above as it is for the following reasons.
That is, the situation is different in that the display unit of the mobile phone mainly displays still images, whereas the display unit of a display device represented by a television mainly displays moving images such as broadcast programs.

具体的には、テレビのリモコンによって、何らかの機能を実行するような操作を行った場合には、実行された機能に応じて、動画である放送番組の上に別の表示内容が表示される。別の表示内容とは、例えば、画質調整を行うためのメニュー表示、現在視聴している放送番組のチャンネル表示、EPG(Electronic Program Guide:電子番組ガイド)表示等である。   Specifically, when an operation for executing a certain function is performed by a television remote controller, different display contents are displayed on a broadcast program that is a moving image according to the executed function. Other display contents include, for example, a menu display for adjusting image quality, a channel display of a broadcast program currently being viewed, and an EPG (Electronic Program Guide) display.

それゆえ、撮像された表示部の画像は、静止画の場合とは異なり、撮像されたタイミングにより変化するので、表示画面全体としては同一の表示となることは極めて稀である。   Therefore, unlike the case of a still image, the captured image of the display unit changes depending on the timing at which the image is captured. Therefore, it is extremely rare that the entire display screen has the same display.

また、テレビの画像表示は、リモコンによりEPG表示等の機能を実行すると、EPG等が表示されている矩形領域の中で、放送番組等の動画をアルファブレンディングにより透過させて見せる場合がある。ここで、アルファブレンディングとは、2枚の画像に対して係数(アルファ値)を使って半透明合成を行うことである。   In addition, when a function such as EPG display is executed by a remote controller, the television image display may show a moving image such as a broadcast program through alpha blending in a rectangular area where the EPG is displayed. Here, alpha blending is to perform translucent synthesis using a coefficient (alpha value) for two images.

このような場合に、従来の技術を適用するには、テレビの表示内容からアルファブレンディングによる合成がされていない静止画像部分のみを抽出して、あらかじめ撮像した画像と比較する必要がある。しかし、このような静止画像の抽出には、高度な画像処理の手法が必要であり、実現するにはかなりの困難がある。   In such a case, in order to apply the conventional technique, it is necessary to extract only a still image portion that has not been synthesized by alpha blending from the display content of the television and to compare it with an image captured in advance. However, such a still image extraction requires an advanced image processing technique, which is quite difficult to realize.

本発明は、上記従来の問題点に鑑みてなされたものであって、テレビ等の動画を表示可能な表示装置において、高度な画像処理を行なうことなく、リモコン等の操作が正常に実行されたか否かを自動的に検査できる検査装置及び検査方法を提供することを目的とする。   The present invention has been made in view of the above-described conventional problems, and in a display device capable of displaying a moving image such as a television, has the operation of the remote control or the like been normally performed without performing advanced image processing? It is an object of the present invention to provide an inspection apparatus and an inspection method capable of automatically inspecting whether or not.

上述した課題を解決するための本発明に係る検査装置及び検査方法は、次の通りである。
請求項1に記載した検査装置は、動画を表示可能な表示装置における表示画面による操作機能を検査する検査装置において、検査に関する手順を記憶する検査手順記憶手段と、前記記憶された検査手順に基づいて検査を実行するための制御信号を生成し出力する検査制御信号生成出力手段と、前記記憶された検査手順に基づいて表示画面から発する光の透過を調整するマスクを制御するマスク制御信号を生成し出力するマスク制御信号生成出力手段と、前記記憶された検査手順に基づいて前記検査制御信号により検査が実行され、かつ前記マスク制御信号により光の透過が調整された検査対象の表示画面を撮像する表示画面撮像手段と、前記検査手順に基づく検査及び前記マスクの制御により表示が期待される期待表示画面を生成し記憶する期待表示画面生成記憶手段と、前記撮像された表示画面と前記期待表示画面とを比較して検査対象が正常に動作しているか否かを判定する検査判定手段と、を備えたことを特徴とするものである。
An inspection apparatus and an inspection method according to the present invention for solving the above-described problems are as follows.
The inspection apparatus according to claim 1 is an inspection apparatus that inspects an operation function by a display screen in a display device capable of displaying a moving image, and is based on an inspection procedure storage unit that stores a procedure related to inspection, and the stored inspection procedure Generating a control signal for generating and outputting a control signal for executing inspection, and generating a mask control signal for controlling a mask for adjusting transmission of light emitted from the display screen based on the stored inspection procedure And a mask control signal generating / outputting means for outputting and imaging a display screen of an inspection object in which inspection is executed by the inspection control signal based on the stored inspection procedure and light transmission is adjusted by the mask control signal Display screen imaging means for generating and storing an expected display screen expected to be displayed by inspection based on the inspection procedure and control of the mask A standby display screen generation storage unit; and a test determination unit that compares the captured display screen with the expected display screen to determine whether or not the test target is operating normally. To do.

この検査装置を用いて、それぞれ機能する前記手段をコンピュータの制御により次の手順で検査を行う。
まず、検査実行前にリモコンの操作、カメラによる撮像、画像判定を行うタイミング、リモコンの操作に対応するマスクデータと結果として期待される画像を記録しておいたテストシナリオを用意し、検査装置に保存しておく。次に、検査開始命令を受けると検査手順に従い、リモコン操作命令の場合はリモコンの操作を行い、判定操作の場合はマスクの制御、カメラによる撮像、画像の判定の順に処理を行う。このようにして本発明に係る検査装置により自動的にリモコン機能の検査を行うことが可能となる。
Using this inspection apparatus, the above-mentioned means that function respectively are inspected in the following procedure under the control of a computer.
First, prepare a test scenario that records the remote control operation, imaging with the camera, image determination timing, mask data corresponding to the remote control operation and the expected image before the inspection is performed. Save it. Next, when an inspection start command is received, according to the inspection procedure, in the case of a remote control operation command, the remote control is operated. In this way, the inspection apparatus according to the present invention can automatically inspect the remote control function.

請求項2に記載の検査装置は、請求項1に記載した発明の構成に加えて、前記マスク制御信号を、前記検査対象の表示画面と前記表示画面撮像手段との間に設けられた液晶シャッターを制御する信号とすることを特徴とするものである。   According to a second aspect of the present invention, in addition to the configuration of the first aspect of the invention, the mask control signal is supplied to the liquid crystal shutter provided between the display screen to be inspected and the display screen imaging means. This is characterized in that it is a signal for controlling.

請求項3に記載の検査装置は、請求項1に記載した発明の構成に加えて、前記マスク制御信号を、前記検査対象の表示画面の明るさを調整するバックライトを制御する信号とすることを特徴とするものである。   According to a third aspect of the present invention, in addition to the configuration of the first aspect of the present invention, the mask control signal is a signal for controlling a backlight for adjusting the brightness of the display screen to be inspected. It is characterized by.

請求項4に記載の検査装置は、請求項1に記載した発明の構成に加えて、前記マスク制御信号を、前記検査対象の表示画面を表示するためのドライバを制御する信号とすることを特徴とするものである。   According to a fourth aspect of the invention, in addition to the configuration of the first aspect of the invention, the mask control signal is a signal for controlling a driver for displaying the display screen to be inspected. It is what.

また、請求項5に記載の検査方法は、動画を表示可能な表示装置における表示画面による操作機能を検査する検査方法において、検査に関する手順を記憶する工程と、前記記憶された検査手順に基づいて検査を実行するための制御信号を生成し出力する工程と、前記記憶された検査手順に基づいて表示画面から発する光の透過を調整するマスクを制御するマスク制御信号を生成し出力する工程と、前記記憶された検査手順に基づいて前記検査制御信号により検査が実行され、かつ前記マスク制御信号により光の透過が調整された検査対象の表示画面を撮像する工程と、前記検査手順に基づく検査及び前記マスクの制御により表示が期待される期待表示画面を生成し記憶する工程と、前記撮像された表示画面と前記期待表示画面とを比較して検査対象が正常に動作しているか否かを判定する工程と、を備えることを特徴とするものである。   The inspection method according to claim 5 is an inspection method for inspecting an operation function by a display screen in a display device capable of displaying a moving image, based on the step of storing a procedure related to the inspection and the stored inspection procedure. Generating and outputting a control signal for performing inspection, generating and outputting a mask control signal for controlling a mask for adjusting transmission of light emitted from the display screen based on the stored inspection procedure, and Inspecting a display screen of an inspection object in which inspection is performed by the inspection control signal based on the stored inspection procedure and light transmission is adjusted by the mask control signal, inspection based on the inspection procedure, and A process of generating and storing an expected display screen expected to be displayed by controlling the mask is compared with the captured display screen and the expected display screen. Target is characterized in that and a step of determining whether operating normally.

請求項1に記載した発明によれば、動画を表示可能な表示装置における表示画面による操作機能を検査する検査装置において、検査に関する手順を記憶する検査手順記憶手段と、前記記憶された検査手順に基づいて検査を実行するための制御信号を生成し出力する検査制御信号生成出力手段と、前記記憶された検査手順に基づいて表示画面から発する光の透過を調整するマスクを制御するマスク制御信号を生成し出力するマスク制御信号生成出力手段と、前記記憶された検査手順に基づいて前記検査制御信号により検査が実行され、かつ前記マスク制御信号により光の透過が調整された検査対象の表示画面を撮像する表示画面撮像手段と、前記検査手順に基づく検査及び前記マスクの制御により表示が期待される期待表示画面を生成し記憶する期待表示画面生成記憶手段と、前記撮像された表示画面と前記期待表示画面とを比較して検査対象が正常に動作しているか否かを判定する検査判定手段と、を備えることにより、それぞれ機能する前記手段をコンピュータにより制御して、検査実行前にリモコンの操作、カメラによる撮像、画像判定を行うタイミング、リモコンの操作に対応するマスクデータと結果として期待される画像を記録しておいたテストシナリオを用意し、検査装置に保存し、検査開始命令を受けると検査手順に従い、リモコン操作命令の場合はリモコンの操作を行い、判定操作の場合はマスクの制御、カメラによる撮像、画像の判定の順に処理を行うことで、テレビ等の動画を表示可能な表示装置において、高度な画像処理を行なうことなく、リモコン等の操作が正常に実行されたか否かを自動的に検査できる検査装置を実現できる。   According to the first aspect of the present invention, in the inspection device for inspecting the operation function by the display screen in the display device capable of displaying a moving image, the inspection procedure storage means for storing the procedure relating to the inspection, and the stored inspection procedure An inspection control signal generating / outputting means for generating and outputting a control signal for executing an inspection based on the mask; and a mask control signal for controlling a mask for adjusting transmission of light emitted from the display screen based on the stored inspection procedure. A mask control signal generating / outputting means for generating and outputting; and a display screen of an inspection object in which inspection is executed by the inspection control signal based on the stored inspection procedure and light transmission is adjusted by the mask control signal Display screen imaging means for imaging, and an expected display screen expected to be displayed by inspection based on the inspection procedure and control of the mask is generated and stored An expected display screen generation storage unit, and an inspection determination unit that compares the captured display screen and the expected display screen to determine whether or not the inspection target is operating normally. A test in which the above-mentioned means is controlled by a computer to record the operation of the remote controller, the image taken by the camera, the timing of image determination, the mask data corresponding to the operation of the remote controller and the expected image before execution of the inspection. Prepare a scenario, save it in the inspection device, follow the inspection procedure when receiving an inspection start command, operate the remote control in the case of a remote control operation command, control the mask in the case of a determination operation, capture with a camera, and determine the image By performing processing in sequence, a display device capable of displaying a moving image such as a television can be operated with a remote control or the like without performing advanced image processing. It can be realized an inspection apparatus capable of automatically checks whether successful.

また、請求項2〜4に記載の発明によれば、請求項1に記載の発明で得られる上記共通の効果に加え、次の効果を得ることができる。   Moreover, according to invention of Claims 2-4, in addition to the said common effect obtained by the invention of Claim 1, the following effect can be acquired.

すなわち、請求項2に記載した発明によれば、請求項1に記載の発明で得られる効果に加えて、前記マスク制御信号を、前記検査対象の表示画面と前記表示画面撮像手段との間に設けられた液晶シャッターを制御する信号とすることで、液晶シャッターを制御して容易に自動検査を行うことができる。   That is, according to the invention described in claim 2, in addition to the effect obtained by the invention described in claim 1, the mask control signal is transmitted between the display screen to be inspected and the display screen imaging means. By using a signal for controlling the provided liquid crystal shutter, the liquid crystal shutter can be controlled to easily perform automatic inspection.

請求項3に記載した発明によれば、請求項1に記載の発明で得られる効果に加えて、前記マスク制御信号を、前記検査対象の表示画面の明るさを調整するバックライトを制御する信号とすることで、バックライトを制御して容易に自動検査を行うことができる。   According to the invention described in claim 3, in addition to the effect obtained by the invention described in claim 1, the mask control signal is a signal for controlling a backlight for adjusting the brightness of the display screen to be inspected. By doing so, it is possible to easily perform automatic inspection by controlling the backlight.

請求項4に記載した発明によれば、請求項1に記載の発明で得られる効果に加えて、前記マスク制御信号を、前記検査対象の表示画面を表示するためのドライバを制御する信号とすることで、表示画面を制御して容易に自動検査を行うことができる。   According to the invention described in claim 4, in addition to the effect obtained by the invention described in claim 1, the mask control signal is a signal for controlling a driver for displaying the display screen of the inspection object. Thus, the automatic inspection can be easily performed by controlling the display screen.

また、請求項5に記載した発明によれば、動画を表示可能な表示装置における表示画面による操作機能を検査する検査方法において、検査に関する手順を記憶する工程と、前記記憶された検査手順に基づいて検査を実行するための制御信号を生成し出力する工程と、前記記憶された検査手順に基づいて表示画面から発する光の透過を調整するマスクを制御するマスク制御信号を生成し出力する工程と、前記記憶された検査手順に基づいて前記検査制御信号により検査が実行され、かつ前記マスク制御信号により光の透過が調整された検査対象の表示画面を撮像する工程と、前記検査手順に基づく検査及び前記マスクの制御により表示が期待される期待表示画面を生成し記憶する工程と、前記撮像された表示画面と前記期待表示画面とを比較して検査対象が正常に動作しているか否かを判定する工程と、を備えることにより、それぞれ機能する前記手段をコンピュータにより制御して、検査実行前にリモコンの操作、カメラによる撮像、画像判定を行うタイミング、リモコンの操作に対応するマスクデータと結果として期待される画像を記録しておいたテストシナリオを用意し、検査装置に保存し、検査開始命令を受けると検査手順に従い、リモコン操作命令の場合はリモコンの操作を行い、判定操作の場合はマスクの制御、カメラによる撮像、画像の判定の順に処理を行うことで、テレビ等の動画を表示可能な表示装置において、高度な画像処理を行なうことなく、リモコン等の操作が正常に実行されたか否かを自動的に検査できる検査方法を実現できる。   According to the fifth aspect of the present invention, in the inspection method for inspecting the operation function by the display screen in the display device capable of displaying a moving image, based on the step of storing the procedure relating to the inspection and the stored inspection procedure Generating and outputting a control signal for executing inspection, and generating and outputting a mask control signal for controlling a mask for adjusting transmission of light emitted from the display screen based on the stored inspection procedure, and Imaging a display screen of an inspection object in which inspection is executed by the inspection control signal based on the stored inspection procedure and light transmission is adjusted by the mask control signal; and inspection based on the inspection procedure And a step of generating and storing an expected display screen expected to be displayed by controlling the mask, and comparing the captured display screen and the expected display screen. And determining whether or not the inspection object is operating normally, by controlling each of the functioning means by a computer to perform operation of the remote controller, imaging by the camera, and image determination before executing the inspection. Prepare a test scenario that records timing, mask data corresponding to the remote control operation and the expected image as a result, save it in the inspection device, and follow the inspection procedure when receiving the inspection start command. Performs advanced image processing on a display device that can display a moving image, such as a television, by performing operations in the order of mask control, camera imaging, and image determination in the case of a determination operation. In addition, it is possible to realize an inspection method capable of automatically inspecting whether or not the operation of the remote controller or the like has been normally executed.

(第1実施形態)
以下、本発明の実施の形態について添付図面を参照して説明する。
図1〜図2は発明を実施する形態の一例であって、図1は本発明の実施形態に係る検査装置の全体の構成を示す説明図、図2は前記検査装置を構成するコンピュータの構成を示すブロック図である。
(First embodiment)
Embodiments of the present invention will be described below with reference to the accompanying drawings.
1 to 2 are examples of embodiments of the present invention. FIG. 1 is an explanatory diagram showing the overall configuration of an inspection apparatus according to an embodiment of the present invention. FIG. 2 is a configuration of a computer constituting the inspection apparatus. FIG.

本実施形態に係る検査装置21は、図1に示すように、主に、リモコン24、液晶シャッター25、カメラ23、およびこれらを制御するコンピュータ22から構成され、動画表示が可能な液晶テレビ11のディスプレイ(表示装置)12の表示画面による操作機能を検査するものである。   As shown in FIG. 1, the inspection apparatus 21 according to the present embodiment mainly includes a remote controller 24, a liquid crystal shutter 25, a camera 23, and a computer 22 that controls these, and the liquid crystal television 11 capable of displaying a moving image. The operation function by the display screen of the display (display device) 12 is inspected.

カメラ23は、ディスプレイ12の撮像を行うための表示画面撮像手段である。
液晶シャッター25は、ディスプレイ12の前方に配置され、このディスプレイ12の液晶パネルにマスクをかけるためのマスク制御手段である。
ここで、マスクとはディスプレイ12からの光を遮ることにより、表示される映像の任意の部分を隠すことである。
The camera 23 is a display screen imaging unit for imaging the display 12.
The liquid crystal shutter 25 is a mask control unit that is disposed in front of the display 12 and applies a mask to the liquid crystal panel of the display 12.
Here, the mask is to hide an arbitrary portion of the displayed image by blocking light from the display 12.

検査対象となる液晶テレビ11は、ディスプレイ12とリモコン受信部13を備えている。リモコン24は赤外線信号出力手段である。リモコン24から出力された信号を液晶テレビ11がリモコン受信部13で受け取ったときに、ディスプレイ12に動画表示さている放送番組の上に、リモコン24の操作内容に従って別の表示内容が表示されるようになっている。   The liquid crystal television 11 to be inspected includes a display 12 and a remote control receiver 13. The remote controller 24 is an infrared signal output means. When the liquid crystal television 11 receives the signal output from the remote control 24 by the remote control receiving unit 13, another display content is displayed on the broadcast program displayed as a moving image on the display 12 according to the operation content of the remote control 24. It has become.

検査装置21は、ディスプレイ12の表示内容の変化をカメラ23によって撮像し、撮像した画像と検査開始前にコンピュータ22に記憶しておいた期待表示画像とをコンピュータ22が比較することにより、液晶テレビ11が正常に動作しているかを判定する。   The inspection device 21 captures a change in the display content of the display 12 by the camera 23, and the computer 22 compares the captured image with an expected display image stored in the computer 22 before the inspection is started. It is determined whether 11 is operating normally.

次に、検査装置21を構成するコンピュータ22について説明する。
コンピュータ22は、図2に示すように、シナリオ処理部31、リモコン信号制御部32、マスク処理部33、撮像処理部34、判定処理部35、シナリオ保持部41、マスクデータ保持部42、撮像画像保持部43、期待画像保持部44、編集画像保持部45、および入力装置51、結果表示・保存部52で構成される。
Next, the computer 22 constituting the inspection apparatus 21 will be described.
As illustrated in FIG. 2, the computer 22 includes a scenario processing unit 31, a remote control signal control unit 32, a mask processing unit 33, an imaging processing unit 34, a determination processing unit 35, a scenario holding unit 41, a mask data holding unit 42, and a captured image. A holding unit 43, an expected image holding unit 44, an edited image holding unit 45, an input device 51, and a result display / storage unit 52 are configured.

シナリオ保持部41は、検査対象に対して検査する手順を記録したシナリオを記憶させる検査手順記憶手段である。   The scenario holding unit 41 is an inspection procedure storage unit that stores a scenario in which a procedure for inspecting an inspection target is recorded.

マスクデータ保持部42は、検査手順の中でリモコン操作に対応した表示画面へかけるマスクの画像をマスクデータファイルとして記憶させるマスク制御情報記憶手段である。   The mask data holding unit 42 is a mask control information storage unit that stores, as a mask data file, an image of a mask to be applied to a display screen corresponding to a remote control operation during an inspection procedure.

入力装置51は、ユーザがシナリオ保持部41に記憶されたシナリオから検査する手順のシナリオを選び検査開始命令を出すための入力手段である。   The input device 51 is an input means for the user to select a scenario of the procedure to be inspected from the scenarios stored in the scenario holding unit 41 and to issue an inspection start command.

撮像画像保持部43は、カメラ23が撮像した画像を記憶する撮像画像記憶手段である。   The captured image holding unit 43 is a captured image storage unit that stores an image captured by the camera 23.

期待画像保持部44は、シナリオ中のリモコン操作に対応した表示結果である期待表示画面を生成し検査開始前に記憶する期待表示画面生成記憶手段である。   The expected image holding unit 44 is an expected display screen generation storage unit that generates an expected display screen, which is a display result corresponding to the remote control operation in the scenario, and stores the expected display screen before starting the examination.

シナリオ処理部31は、シナリオ保持部41から取り出したシナリオの内容、実行時間に従って、リモコン信号制御部32に、マスク処理部33、撮像処理部34、および判定処理部35へ検査制御信号を出力する検査制御信号生成出力手段である。   The scenario processing unit 31 outputs an inspection control signal to the remote control signal control unit 32 to the mask processing unit 33, the imaging processing unit 34, and the determination processing unit 35 according to the contents of the scenario extracted from the scenario holding unit 41 and the execution time. Inspection control signal generation output means.

ここで、リモコン信号制御部32に対する検査制御信号とは、リモコン24に対してどのように赤外線出力させるかのキーコードおよび、実行命令である。
マスク処理部33に対する検査制御信号とは、マスクデータ内容を液晶シャッター25に出力させるかのマスクデータファイル名および、実行命令である。
撮像処理部34に対する検査制御信号とは、カメラ23に対してディスプレイ12の撮像を行い撮像画像保持部43に撮像画像を保存させる実行命令である。
判定処理部35に対する検査制御信号とは、撮像画像保持部43から撮像画像を取り出させる実行命令、期待画像保持部44からどの期待表示画像を取り出させるかのファイル名、および判定実行命令である。
Here, the inspection control signal for the remote control signal control unit 32 is a key code indicating how the remote control 24 outputs infrared rays and an execution command.
The inspection control signal for the mask processing unit 33 is a mask data file name for executing the mask data contents to the liquid crystal shutter 25 and an execution command.
The inspection control signal for the imaging processing unit 34 is an execution command that causes the camera 23 to capture an image of the display 12 and cause the captured image holding unit 43 to store the captured image.
The inspection control signal for the determination processing unit 35 is an execution command for extracting a captured image from the captured image holding unit 43, a file name indicating which expected display image is to be extracted from the expected image holding unit 44, and a determination execution command.

リモコン信号制御部32は、シナリオ処理部31から検査制御信号が送られてきたときに、指定されたキーコードに対応した赤外線制御信号をリモコン24へ出力する赤外線信号生成手段である。   The remote control signal control unit 32 is an infrared signal generation unit that outputs an infrared control signal corresponding to a designated key code to the remote control 24 when an inspection control signal is sent from the scenario processing unit 31.

マスク処理部33は、シナリオ処理部31から検査制御信号が送られてきたときに、マスクデータ保持部42から取り出すマスクデータファイルをマスク制御信号として出力し、液晶シャッター25が取り出したマスクデータに従った光の調整を行うように命令するマスク制御信号生成出力手段である。   When the inspection control signal is sent from the scenario processing unit 31, the mask processing unit 33 outputs a mask data file extracted from the mask data holding unit 42 as a mask control signal, and follows the mask data extracted by the liquid crystal shutter 25. And a mask control signal generating / outputting means for instructing to adjust the light.

撮像処理部34は、シナリオ処理部31から検査制御信号が送られてきたときに、液晶シャッター25によってマスクのかけられた表示画面を撮像し、撮像した画像を撮像画像保持部43に保存するようにカメラ23に命令するものである。   When the inspection control signal is sent from the scenario processing unit 31, the imaging processing unit 34 captures the display screen masked by the liquid crystal shutter 25 and stores the captured image in the captured image holding unit 43. The camera 23 is instructed.

判定処理部35は、シナリオ処理部31から検査制御信号が送られてきたときに、期待画像保持部44から指定された期待画像ファイルを取り出し、この期待画像と撮像画像保持部43から取り出した撮像画像とを重ね合わせることにより差分画像を作成し、これら2つの画像が一致するか否かの判定を行う検査判定手段であり、その判定結果を結果表示・保存部52へ送るものである。   When the inspection control signal is sent from the scenario processing unit 31, the determination processing unit 35 takes out the expected image file designated from the expected image holding unit 44, and picks up the expected image and the captured image taken out from the captured image holding unit 43. This is a test determination unit that creates a difference image by superimposing the images and determines whether or not these two images match. The determination result is sent to the result display / storage unit 52.

結果表示・保存部52は、判定処理部35より送られたシナリオの判定結果をコンピュータ22のディスプレイに表示するものである。   The result display / save unit 52 displays the scenario determination result sent from the determination processing unit 35 on the display of the computer 22.

次に、コンピュータ22を構成するシナリオ処理部31について図面を参照して説明する。
図3は本実施形態に係るシナリオ処理部の構成を示すブロック図である。
シナリオ処理部31は、図3に示すように、入力処理部311、シナリオ読み出し部312、シナリオ解釈部313、シナリオ実行部314、およびタイマー315を備える。
Next, the scenario processing unit 31 constituting the computer 22 will be described with reference to the drawings.
FIG. 3 is a block diagram showing the configuration of the scenario processing unit according to this embodiment.
As illustrated in FIG. 3, the scenario processing unit 31 includes an input processing unit 311, a scenario reading unit 312, a scenario interpretation unit 313, a scenario execution unit 314, and a timer 315.

入力処理部311は、入力装置51から検査開始命令を受け取り、シナリオ読み出し部312にシナリオの読み出しを指示するものである。   The input processing unit 311 receives an inspection start command from the input device 51 and instructs the scenario reading unit 312 to read a scenario.

シナリオ読み出し部312は、入力処理部311から命令を受けたときに、シナリオ保持部41からテストシナリオを取り出し、テストシナリオを1行読み出し、シナリオ解釈部313に渡すものである。   When receiving a command from the input processing unit 311, the scenario reading unit 312 takes out a test scenario from the scenario holding unit 41, reads one line of the test scenario, and passes it to the scenario interpretation unit 313.

シナリオ解釈部313は、シナリオ読み出し部312が読み出した命令から、操作実行時間、操作分類、操作内容を解釈し、タイマー315に操作実行時間、シナリオ実行部314操作分類と操作内容を渡すものである。   The scenario interpretation unit 313 interprets the operation execution time, operation classification, and operation content from the instruction read by the scenario reading unit 312 and passes the operation execution time, scenario execution unit 314 operation classification, and operation content to the timer 315. .

タイマー315は、シナリオ解釈部313から渡された操作実行時間を計測しシナリオ実行部314に通知するものである。   The timer 315 measures the operation execution time passed from the scenario interpretation unit 313 and notifies the scenario execution unit 314 of it.

シナリオ実行部314は、シナリオ解釈部313が解釈した命令を受け取り、タイマー315から操作実行時間が通知されると、操作分類、操作内容に従って各制御部へ検査制御信号を出力するものである。ここで、操作分類とは、シナリオに書かれた操作がリモコン操作であるか判定操作であるかを指す。また、操作内容とは、シナリオに書かれた操作分類がリモコン操作である場合にはリモコンのキーコードを指す。   The scenario execution unit 314 receives the command interpreted by the scenario interpretation unit 313, and outputs an inspection control signal to each control unit according to the operation classification and operation content when the operation execution time is notified from the timer 315. Here, the operation classification indicates whether the operation written in the scenario is a remote control operation or a determination operation. The operation content indicates a key code of the remote control when the operation classification written in the scenario is a remote control operation.

操作分類がリモコン操作である場合には、シナリオ実行部314は、リモコン信号制御部32へ操作内容に書かれた検査制御信号を出力する。   When the operation classification is remote control operation, the scenario execution unit 314 outputs the inspection control signal written in the operation content to the remote control signal control unit 32.

一方、操作分類が判定操作である場合には、シナリオ実行部314は、マスク処理部33、撮像処理部34、判定処理部35の順に操作内容に書かれた検査制御信号を出力する。   On the other hand, when the operation classification is a determination operation, the scenario execution unit 314 outputs the inspection control signal written in the operation content in the order of the mask processing unit 33, the imaging processing unit 34, and the determination processing unit 35.

次に、本実施形態に係る検査装置21により表示画面による操作機能を検査する処理工程についてフローチャートに基づき説明する。
図4は本実施形態に係る検査装置により検査を行なう際の処理フローを示すフローチャートである。
Next, processing steps for inspecting an operation function on the display screen by the inspection apparatus 21 according to the present embodiment will be described based on a flowchart.
FIG. 4 is a flowchart showing a processing flow when an inspection is performed by the inspection apparatus according to the present embodiment.

まず、検査開始前に検査を実行するためのシナリオファイルをシナリオ保持部41に保存し、マスクデータをマスクデータ保持部42に保存し、及び期待画像を期待画像保持部44に保存する。   First, a scenario file for executing an inspection before starting the inspection is stored in the scenario holding unit 41, the mask data is stored in the mask data holding unit 42, and the expected image is stored in the expected image holding unit 44.

検査開始の命令がキーボード入力部よりシナリオ処理部へ渡されると、ステップS11において、シナリオ処理部31がシナリオ保持部41より検査開始時に指定されたシナリオファイルを取り出し、ステップS12へ進む。   When the inspection start command is passed from the keyboard input unit to the scenario processing unit, in step S11, the scenario processing unit 31 retrieves the scenario file designated at the start of the inspection from the scenario holding unit 41, and proceeds to step S12.

ステップS12において、シナリオ処理部31がシナリオを一行読み出し、ステップS13へ進む。   In step S12, the scenario processing unit 31 reads one line of the scenario, and proceeds to step S13.

ステップS13において、シナリオ処理部31が読み出したシナリオがあるか(Y)否か(N)を判定し、シナリオが存在しない場合はテスト終了となる。一方、シナリオが存在する場合はステップS14へ進む。   In step S13, it is determined whether there is a scenario read by the scenario processing unit 31 (Y) or not (N). If no scenario exists, the test ends. On the other hand, if a scenario exists, the process proceeds to step S14.

ステップS14において、シナリオ処理部31がテスト開始からの時間が命令実行時間に一致するか(Y)否か(N)を判定し、一致する場合はステップS15へ進み、一致しない場合は再びステップS14に戻り、命令実行時間まで繰り返す。   In step S14, the scenario processing unit 31 determines whether the time from the start of the test matches the instruction execution time (Y) or not (N). If they match, the process proceeds to step S15. Return to and repeat until the instruction execution time.

ステップS15において、シナリオ処理部31が読み出したシナリオの実行命令がリモコン操作であるか(Y)否か(N)を判断し、リモコン操作である場合はステップS16へ進み、リモコン操作でない場合はステップS17へ進む。   In step S15, it is determined whether the execution instruction of the scenario read by the scenario processing unit 31 is a remote control operation (Y) or not (N). If the remote control operation is performed, the process proceeds to step S16. Proceed to S17.

ステップS16において、シナリオ処理部31がリモコン信号制御部32へ検査制御信号を送り、対応する赤外線信号の出力を行い、終了後にステップS12へ戻る。   In step S16, the scenario processing unit 31 sends an inspection control signal to the remote control signal control unit 32, outputs a corresponding infrared signal, and returns to step S12 after completion.

ステップS17において、シナリオ処理部31がシナリオの実行命令が判定操作であるか(Y)否か(N)を判断し、判定操作である場合はステップS18へ進み、判定操作でない場合はステップS12へ戻る。   In step S17, the scenario processing unit 31 determines whether the execution instruction of the scenario is a determination operation (Y) or not (N). If it is a determination operation, the process proceeds to step S18, and if not, the process proceeds to step S12. Return.

ステップS18において、シナリオ処理部31がマスク処理部33へ検査制御信号を送り、マスクデータ保持部42からシナリオの判定操作の中で指定されたマスクデータを取り出し、液晶シャッター25を制御してディスプレイ12にマスクをかける制御を行い、終了後ステップS19に進む。   In step S18, the scenario processing unit 31 sends an inspection control signal to the mask processing unit 33, takes out the mask data designated in the scenario determination operation from the mask data holding unit 42, and controls the liquid crystal shutter 25 to display the display 12. Then, the control for applying a mask is performed, and the process proceeds to step S19 after completion.

ステップS19において、シナリオ処理部31が撮像処理部34へ検査制御信号を送り、マスクのかけられたディスプレイ12をカメラ23で撮像し、撮像した画像を撮像画像保持部43に保存することを行い、終了後ステップS20に進む。   In step S19, the scenario processing unit 31 sends an inspection control signal to the imaging processing unit 34, images the masked display 12 with the camera 23, and stores the captured image in the captured image holding unit 43. After completion, the process proceeds to step S20.

ステップS20において、シナリオ処理部31が判定処理部35へ検査制御信号を送り、撮像画像保持部43に保存されている撮像画像と、期待画像保持部44に保存されているシナリオの判定の中で指定された期待画像を取り出し、操作終了後ステップS21に進む。   In step S <b> 20, the scenario processing unit 31 sends an inspection control signal to the determination processing unit 35, and in the determination of the captured image stored in the captured image holding unit 43 and the scenario stored in the expected image holding unit 44. The designated expected image is taken out, and the process proceeds to step S21 after the operation is completed.

ステップS21において、判定処理部35が取り出した2つの画像を重ね合わせて、差分画像を作り、画像のずれを考慮して閾値によるフィルタをかけ、終了後ステップS22に進む。   In step S21, the two images taken out by the determination processing unit 35 are superimposed to create a difference image, and a filter based on a threshold value is applied in consideration of image shift, and the process proceeds to step S22 after completion.

ステップS22において、判定処理部35が画像全体に対するフィルタをかけた後の差分の割合がシナリオで指定した範囲内におさまる場合は2つの画像が一致していると判定し、範囲を超える場合は不一致と判定し、終了後ステップS23へ進む。   In step S22, it is determined that the two images match if the ratio of the difference after the determination processing unit 35 applies the filter to the entire image falls within the range specified by the scenario. It progresses to step S23 after completion | finish.

ステップS23において、結果表示・保存部52が判定処理部35の出した判定結果をディスプレイに表示し、ファイルを作成して保存することを行い、終了後ステップS12に戻る。   In step S23, the result display / storage unit 52 displays the determination result output by the determination processing unit 35 on the display, creates and stores a file, and returns to step S12 after the end.

ここで、本実施形態におけるマスク制御について図面を参照して説明する。
図5は本実施形態に係る液晶テレビにおけるマスク制御の一例を示す説明図であって、(a)は前記液晶テレビのディスプレイの映像画面に現れる表示画像の一例を示す簡略化した説明図、(b)は前記表示画像を評価するための期待画像を示す説明図、(c)は前記映像画面にマスクをかけるためのマスクデータを示す説明図、(d)は前記マスクデータの一部を拡大したマスク拡大図を示す部分詳細図、(e)は前記映像画面にマスクデータを重ね合わせた状態を示す説明図である。
Here, mask control in the present embodiment will be described with reference to the drawings.
FIG. 5 is an explanatory view showing an example of mask control in the liquid crystal television according to the present embodiment, and (a) is a simplified explanatory view showing an example of a display image appearing on the video screen of the display of the liquid crystal television. b) is an explanatory diagram showing an expected image for evaluating the display image, (c) is an explanatory diagram showing mask data for masking the video screen, and (d) is an enlarged view of a part of the mask data. FIG. 9E is a partial detail view showing the enlarged mask view, and FIG. 8E is an explanatory view showing a state in which the mask data is superimposed on the video screen.

本実施形態に係る液晶テレビ11は、リモコン24の操作により機能実行を行うと、ディスプレイ12の表示画面上で放送番組等の動画の上に別の表示内容が表示されるようになっている。   When the liquid crystal television 11 according to the present embodiment executes a function by operating the remote controller 24, another display content is displayed on a moving image such as a broadcast program on the display screen of the display 12.

例えば、リモコン24のチャンネルボタンを押すとチャンネル番号が表示されたり、メニューボタンを押すとメニューバーが表示されたり、番組表ボタンを押すとEPG画面が表示されたりする。   For example, the channel number is displayed when the channel button on the remote controller 24 is pressed, the menu bar is displayed when the menu button is pressed, and the EPG screen is displayed when the program guide button is pressed.

ディスプレイ12に表示される映像画面61は、図5(a)に示すように、例えば、リモコン24のいずれかのボタンが操作された際に、放送番組の表示画面上に、前記操作により出現する表示画像61aが表示される。   As shown in FIG. 5A, the video screen 61 displayed on the display 12 appears on the broadcast program display screen by the above operation when any button of the remote controller 24 is operated, for example. A display image 61a is displayed.

この表示状態の時に、リモコン操作後に期待された画面が表示されたかどうかを評価するために、新たに表示された図形(表示画像61a)が正しく表示されているかをチェックすることが好ましい。   In this display state, it is preferable to check whether the newly displayed figure (display image 61a) is correctly displayed in order to evaluate whether the expected screen is displayed after the remote control operation.

従って、期待表示画像としては、図5(b)に示すように、図形のみを評価対象として、図形以外の部分全体を取り除いた期待画像62を用意する。
なお、文字を対象とする場合でも、文字を図形とみなすことによって同様に扱うことができる。
Therefore, as an expected display image, as shown in FIG. 5B, an expected image 62 is prepared by removing only the graphic as an evaluation target and removing the entire portion other than the graphic.
Even when a character is targeted, it can be handled in the same manner by regarding the character as a figure.

マスクデータ63は、図5(c)に示すように、映像画面61にマスクをかけるための画像である。このマスクデータ63は、検査実行前に期待画像62を基にしてドット単位で光を透過させる部分を白、光を透過させない部分を黒と表現するように作成されている。
そして、図5(d)に示すマスクデータ63の一部を拡大した一例としてマスク拡大図64のように、光を透過させないか否かを1画素ずつ指定することにより、全体としてマスクデータ63となるように構成されている。
The mask data 63 is an image for masking the video screen 61 as shown in FIG. The mask data 63 is created so that a portion that transmits light in dot units is expressed as white and a portion that does not transmit light is expressed as black based on the expected image 62 before the inspection is executed.
Then, as an example in which a part of the mask data 63 shown in FIG. 5D is enlarged, the mask data 63 as a whole is specified by designating whether or not to transmit light one pixel at a time, as shown in the mask enlarged view 64. It is comprised so that it may become.

以上のように構成されたマスクデータ63を映像画面61の上に配置して撮像することにより、図5(e)に示す重ね合わせ図65のように、評価に必要のない部分に対してマスクをかけた画像を得ることができる。   By arranging the mask data 63 configured as described above on the video screen 61 and capturing an image, a mask that is not necessary for evaluation is masked as shown in the overlay diagram 65 shown in FIG. Can be obtained.

以上のように、マスクデータ63は、その光を透過させる部分を評価に必要な図形部分だけに絞り込むことが可能なため、表示画面の他の部分の影響を極力排除した撮像画像を得ることが可能となる。これにより、放送番組の動画の上に図形を含む表示内容がアルファブレンディングで半透明合成されている場合でも、半透明の放送番組の動画の影響を極力少なくすることが可能である。   As described above, since the mask data 63 can narrow the portion that transmits the light to only the graphic portion necessary for the evaluation, it is possible to obtain a captured image that eliminates the influence of other portions of the display screen as much as possible. It becomes possible. As a result, even when the display content including graphics is semi-transparently combined with alpha blending on the moving picture of the broadcast program, the influence of the moving picture of the semi-transparent broadcast program can be reduced as much as possible.

次に、本実施形態に係る検査装置21によるリモコン操作機能の検査について図面を参照して説明する。
図6は本実施形態に係る液晶テレビにおける表示画像の一例を示す説明図であって、(a)はリモコン操作機能が正常に機能した時の前記液晶テレビのディスプレイに表示された映像画面にマスクデータを重ね合わせた撮像画像の一例を示す説明図、(b)は前記撮像画像と期待画像から作成した差分画像の一例を示す説明図、(c)はリモコン操作機能が正常に機能しなかった時の前記液晶テレビのディスプレイに表示された映像画面にマスクデータを重ね合わせた撮像画像の別の例を示す説明図、(d)は前記撮像画像と期待画像から作成した差分画像の一例を示す説明図である。
Next, the inspection of the remote control operation function by the inspection apparatus 21 according to the present embodiment will be described with reference to the drawings.
FIG. 6 is an explanatory view showing an example of a display image on the liquid crystal television according to the present embodiment, wherein (a) is a mask on the video screen displayed on the display of the liquid crystal television when the remote control operation function is functioning normally. An explanatory diagram showing an example of a captured image in which data is superimposed, (b) is an explanatory diagram showing an example of a difference image created from the captured image and an expected image, and (c) is a remote control operation function not functioning normally Explanatory drawing which shows another example of the captured image which overlapped mask data on the video screen displayed on the display of the said liquid crystal television at the time, (d) shows an example of the difference image produced from the said captured image and an expected image It is explanatory drawing.

リモコン操作機能が正常に機能した場合、マスクデータ63を映像画面61の上に配置して撮像された撮像画像(成功)66は、図6(a)に示すように、表示画像61aとこの表示画像61aの部分全体を取り除いた期待画像62とを重ねた通りの画像となる。   When the remote control operation function functions normally, the captured image (success) 66 obtained by arranging the mask data 63 on the video screen 61 is displayed as a display image 61a and this display as shown in FIG. An image is obtained by superimposing the expected image 62 from which the entire portion of the image 61a is removed.

この時の期待画像62と撮像画像66を重ね合わせたときの差分を取ることによって得られた差分画像(成功)67は、図6(b)に示すように、真っ白な差分画像となる。
これにより、期待画像62とまったく同じ画像が撮像されたことを意味し、リモコン操作が正常に機能したと判定することができる。
The difference image (success) 67 obtained by taking the difference when the expected image 62 and the captured image 66 are superimposed at this time becomes a pure white difference image as shown in FIG.
This means that the exact same image as the expected image 62 has been captured, and it can be determined that the remote control operation has functioned normally.

一方、リモコン操作機能が正常に機能していない場合の撮像画像(失敗)68は、図6(c)に示すように、表示画像61aとこの表示画像61aの部分全体を取り除いた期待画像62とを重ねたものとは異なる画像となる。本実施形態では、表示画像61aに相当する部分が白く抜けた状態となり、その中央部が丸くマスクがかかった状態となっている。   On the other hand, as shown in FIG. 6C, the captured image (failure) 68 when the remote control operation function is not functioning normally is a display image 61a and an expected image 62 obtained by removing the entire portion of the display image 61a. The image will be different from the one that is overlaid. In the present embodiment, a portion corresponding to the display image 61a is in a state of being whitened, and a central portion thereof is rounded and masked.

この時の期待画像62と撮像画像66を重ね合わせたときの差分を取ることによって得られた差分画像(失敗)69は、図6(d)に示すように、真っ白な差分画像とは成らずに、表示画像61aに相当する部分に差分領域が存在して、上記差分画像67とは異なる差分画像となる。すなわち、リモコン操作が正常に機能していないと判定することができる。   The difference image (failure) 69 obtained by taking the difference when the expected image 62 and the captured image 66 are superimposed at this time is not a pure white difference image, as shown in FIG. In addition, a difference area exists in a portion corresponding to the display image 61 a, and the difference image is different from the difference image 67. That is, it can be determined that the remote control operation is not functioning normally.

以上のように構成したので、本実施形態によれば、マスクデータ63を映像画面61の上に配置して撮像画像を得るとともに、とその撮像画像に対応する期待画像とを重ね合わせて得られる差分画像に基づき、容易にリモコン操作が正常に機能したか否かを判定することができる。   Since it comprised as mentioned above, according to this embodiment, while arrange | positioning the mask data 63 on the video screen 61 and obtaining a picked-up image, it superimposes and the expected image corresponding to the picked-up image. Based on the difference image, it can be easily determined whether or not the remote control operation functions normally.

尚、一般的にはカメラによる撮像を行った場合には、本実施形態に示すように全く同じ画像を得られるとは限らず、従って、正常にリモコン操作が機能した場合でも真っ白な差分画像が得られるとは限らない。   In general, when an image is taken by a camera, the exact same image is not always obtained as shown in the present embodiment. Therefore, even if the remote control operation functions normally, a white differential image is obtained. It is not necessarily obtained.

そこで、差分画像内に現れた差分領域が全体に占める割合にあらかじめ上限を設定し、その範囲内(上限の値内)に収まっている場合は正常に機能したと判定するようにしたものであっても良い。   Therefore, an upper limit is set in advance for the ratio of the difference area that appears in the difference image to the whole, and if it falls within that range (within the upper limit value), it is determined that it has functioned normally. May be.

以下に、本実施形態に係る検査装置21における検査手順のシナリオについて図面を参照して説明する。
図7は本実施形態に係る検査装置における検査手順のシナリオの内容を示す説明図である。
Hereinafter, an inspection procedure scenario in the inspection apparatus 21 according to the present embodiment will be described with reference to the drawings.
FIG. 7 is an explanatory diagram showing the contents of a scenario of an inspection procedure in the inspection apparatus according to the present embodiment.

検査装置21における検査手順のシナリオにおける一つの実行命令は、例えば、図7に示すように、実行時間71、操作分類72、及び操作内容73で構成される。
実行時間71は、検査開始からの経過時間を表すものである。
操作分類72は、操作がリモコン操作であるか判定操作であるかを示すものである。
操作内容73は、操作分類72に対して具体的な操作を行うための情報である。
One execution command in the scenario of the inspection procedure in the inspection apparatus 21 includes, for example, an execution time 71, an operation classification 72, and an operation content 73 as shown in FIG.
The execution time 71 represents the elapsed time from the start of inspection.
The operation classification 72 indicates whether the operation is a remote control operation or a determination operation.
The operation content 73 is information for performing a specific operation on the operation classification 72.

例えば、操作分類72がリモコン操作である場合は、操作内容73にはリモコン操作を行うためにキーコードを書いておく。   For example, when the operation classification 72 is a remote control operation, a key code is written in the operation content 73 in order to perform the remote control operation.

操作分類72が判定操作の場合は、操作内容73には判定に用いるためのマスクデータファイル名、期待表示画像ファイル名、および判定値を書いておく。   When the operation classification 72 is a determination operation, the operation content 73 includes a mask data file name, an expected display image file name, and a determination value to be used for determination.

ここで、判定値とは、撮像画像と期待画像の2つの画像が一致しているかどうかを判定する際に、差分領域が画像全体に占める割合を許可する上限の値とする。   Here, the determination value is an upper limit value that permits the ratio of the difference area to the entire image when determining whether or not the two images of the captured image and the expected image match.

以上のようなシナリオにすることで、差分画像内に現れた差分領域が設定の範囲内(上限の値内)に収まっている場合は正常に機能したと判定することができる。   By setting it as the above scenarios, when the difference area which appeared in the difference image is settled in the setting range (within the upper limit value), it can be determined that it has functioned normally.

(第2実施形態)
次に、本発明の第2実施形態について図面を参照して説明する。
図8は本発明の第2実施形態に係る検査装置の全体の構成を示す説明図である。
尚、図8において、図1に示す第1実施形態に係る検査装置と同一の構成要素には同一符号を付することで説明を省略する。
(Second Embodiment)
Next, a second embodiment of the present invention will be described with reference to the drawings.
FIG. 8 is an explanatory diagram showing the overall configuration of the inspection apparatus according to the second embodiment of the present invention.
In FIG. 8, the same components as those in the inspection apparatus according to the first embodiment shown in FIG.

本実施形態に係る検査装置121は、1画素ずつ発光することが可能なディスプレイを検査対象とするものである。
例えば、有機EL(electro−luminescence)ディスプレイや、表面電界ディスプレイ(SED;Surface−conduction Electron−emitter Display)、プラズマディスプレイ、LEDバックライトを使用した液晶ディスプレイなどである。
The inspection apparatus 121 according to the present embodiment uses a display that can emit light pixel by pixel as an inspection target.
For example, there are an organic EL (electro-luminescence) display, a surface electric field display (SED), a plasma display, and a liquid crystal display using an LED backlight.

検査装置121は、図8に示すように、ディスプレイ12の表示画面にマスクをかけるためのマスク制御手段として、発光制御部26用いて発光部(バックライト)14を制御することによって表示画面の光の調整を行うようにしたものである。   As shown in FIG. 8, the inspection device 121 uses a light emission control unit 26 to control the light emitting unit (backlight) 14 as a mask control unit for masking the display screen of the display 12, thereby displaying the light on the display screen. The adjustment is performed.

検査装置121を構成するコンピュータ22の構成および作用は、上述した第1実施形態の検査装置21と同様な構成を有し、同様な作用を実現するものである。   The configuration and operation of the computer 22 constituting the inspection device 121 have the same configuration as the inspection device 21 of the first embodiment described above, and realize the same operation.

コンピュータ22内のマスク処理部33は、発光制御部26へマスク制御信号を送る機能と、発光部14における発光させる部分と発光させない部分を調整する機能とを有している。
このように構成することで、ディスプレイ12の表示画面上で光る場所と光らない場所を作成することが可能となる。
The mask processing unit 33 in the computer 22 has a function of sending a mask control signal to the light emission control unit 26 and a function of adjusting a portion of the light emitting unit 14 that emits light and a portion that does not emit light.
With this configuration, it is possible to create a place that shines on a display screen of the display 12 and a place that does not shine.

以上のように構成したので、本実施形態によれば上述した第1実施形態と同様に、カメラ23により撮像された撮像画像に対応する期待画像とを重ね合わせた得られる差分画像に基づき、容易にリモコン操作が正常に機能したか否かを判定することができる。   Since it comprised as mentioned above, according to this embodiment, based on the difference image obtained by superimposing the expected image corresponding to the captured image imaged with the camera 23 similarly to 1st Embodiment mentioned above, it is easy. It is possible to determine whether the remote control operation functions normally.

(第3実施形態)
次に、本発明の第3実施形態について図面を参照して説明する。
図9は本発明の第3実施形態に係る検査装置の全体の構成を示す説明図である。
尚、図9において、図1に示す第1実施形態に係る検査装置と同一の構成要素には同一符号を付することで説明を省略する。
(Third embodiment)
Next, a third embodiment of the present invention will be described with reference to the drawings.
FIG. 9 is an explanatory diagram showing the overall configuration of the inspection apparatus according to the third embodiment of the present invention.
In FIG. 9, the same components as those in the inspection apparatus according to the first embodiment shown in FIG.

本実施形態に係る検査装置221は、ディスプレイ12に表示する画面情報を記録してあるフレームバッファ(記憶手段)とは別に、フレームバッファ内の情報をコピー可能なメモリ領域(記憶手段)を備え、また、メモリ領域にコピーされた画像情報に基づきディスプレイ12に画像を表示するためのドライバ15を備えている。   The inspection apparatus 221 according to the present embodiment includes a memory area (storage means) capable of copying information in the frame buffer separately from the frame buffer (storage means) in which screen information to be displayed on the display 12 is recorded. Further, a driver 15 for displaying an image on the display 12 based on the image information copied to the memory area is provided.

検査装置221を構成するコンピュータ22の構成および作用は、上述した第1実施形態の検査装置21と同様な構成を有し、同様な作用を実現するものである。   The configuration and operation of the computer 22 constituting the inspection device 221 has the same configuration as the inspection device 21 of the first embodiment described above, and realizes the same operation.

コンピュータ22内のマスク処理部33は、ドライバ15へマスク制御信号を送る機能と、前記メモリ領域にコピーしたメモリの上に直接マスクデータを埋めることによりディスプレイ12に表示させる内容を書き換えて、そのメモリをドライバ15に参照させる機能とを備えている。
このように構成することで、ディスプレイ12の表示画面上で光る場所と光らない場所を作成することが可能となる。
The mask processing unit 33 in the computer 22 rewrites the function to send a mask control signal to the driver 15 and the contents to be displayed on the display 12 by directly embedding the mask data on the memory copied in the memory area. And a function of making the driver 15 refer to
With this configuration, it is possible to create a place that shines on a display screen of the display 12 and a place that does not shine.

以上のように構成したので、本実施形態によれば上述した第1実施形態と同様に、カメラ23により撮像された撮像画像に対応する期待画像とを重ね合わせた得られる差分画像に基づき、容易にリモコン操作が正常に機能したか否かを判定することができる。   Since it comprised as mentioned above, according to this embodiment, based on the difference image obtained by superimposing the expected image corresponding to the captured image imaged with the camera 23 similarly to 1st Embodiment mentioned above, it is easy. It is possible to determine whether the remote control operation functions normally.

尚、本発明の検査装置及び検査方法は、上記した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。   Note that the inspection apparatus and the inspection method of the present invention are not limited to the above-described embodiments, and it is needless to say that various modifications can be made without departing from the gist of the present invention.

本発明の第1実施形態に係る検査装置の全体の構成を示す説明図である。It is explanatory drawing which shows the whole structure of the test | inspection apparatus which concerns on 1st Embodiment of this invention. 前記検査装置を構成するコンピュータの構成を示すブロック図である。It is a block diagram which shows the structure of the computer which comprises the said inspection apparatus. 前記検査装置のシナリオ処理部の構成を示すブロック図である。It is a block diagram which shows the structure of the scenario process part of the said inspection apparatus. 前記検査装置により検査を行なう際の処理フローを示すフローチャートである。It is a flowchart which shows the processing flow at the time of test | inspecting with the said inspection apparatus. (a)は本実施形態に係る液晶テレビのディスプレイの映像画面に現れる表示画像の一例を示す簡略化した説明図、(b)は前記表示画像を評価するための期待画像を示す説明図、(c)は前記映像画面にマスクをかけるためのマスクデータを示す説明図、(d)は前記マスクデータの一部を拡大したマスク拡大図を示す部分詳細図、(e)は前記映像画面にマスクデータを重ね合わせた状態を示す説明図である。(A) is a simplified explanatory view showing an example of a display image appearing on the video screen of the liquid crystal television display according to the present embodiment, (b) is an explanatory view showing an expected image for evaluating the display image, (c) is an explanatory view showing mask data for applying a mask to the video screen, (d) is a partial detail view showing an enlarged mask view in which a part of the mask data is enlarged, and (e) is a mask on the video screen. It is explanatory drawing which shows the state which accumulated the data. (a)はリモコン操作機能が正常に機能した時の前記液晶テレビのディスプレイに表示された映像画面にマスクデータを重ね合わせた撮像画像の一例を示す説明図、(b)は前記撮像画像と期待画像から作成した差分画像の一例を示す説明図、(c)はリモコン操作機能が正常に機能しなかった時の前記液晶テレビのディスプレイに表示された映像画面にマスクデータを重ね合わせた撮像画像の別の例を示す説明図、(d)は前記撮像画像と期待画像から作成した差分画像の一例を示す説明図である。(A) is explanatory drawing which shows an example of the captured image which superimposed the mask data on the video screen displayed on the display of the said liquid crystal television when a remote control operation function functions normally, (b) is the said captured image and expectation An explanatory view showing an example of a difference image created from an image, (c) is an image of a captured image obtained by overlaying mask data on a video screen displayed on the display of the liquid crystal television when a remote control operation function does not function normally An explanatory view showing another example, (d) is an explanatory view showing an example of a difference image created from the captured image and the expected image. 前記検査装置における検査手順のシナリオの内容を示す説明図である。It is explanatory drawing which shows the content of the scenario of the test procedure in the said test | inspection apparatus. 本発明の第2実施形態に係る検査装置の全体の構成を示す説明図である。It is explanatory drawing which shows the structure of the whole inspection apparatus which concerns on 2nd Embodiment of this invention. 本発明の第3実施形態に係る検査装置の全体の構成を示す説明図である。It is explanatory drawing which shows the whole structure of the inspection apparatus which concerns on 3rd Embodiment of this invention.

符号の説明Explanation of symbols

11 液晶テレビ
12 ディスプレイ(表示装置)
13 リモコン受信部
15 ドライバ
21,121,221 検査装置
22 コンピュータ
23 カメラ(表示画面撮像手段)
24 リモコン
25 液晶シャッター
31 シナリオ処理部(検査制御信号生成出力手段)
32 リモコン信号制御部
33 マスク処理部(マスク制御信号生成出力手段)
34 撮像処理部
35 判定処理部(検査判定手段)
311 入力処理部
312 シナリオ読み出し部
313 シナリオ解釈部
314 シナリオ実行部
315 タイマー
41 シナリオ保持部(検査手順記憶手段)
42 マスクデータ保持部
43 撮像画像保持部
44 期待画像保持部(期待表示画面生成記憶手段)
45 編集画像保持部
51 入力装置
52 結果表示・保存部
61 映像画面
61a 表示画像
62 期待画像
63 マスクデータ
66 撮像画像(成功)
67 差分画像(成功)
68 撮像画像(失敗)
69 差分画像(失敗)
71 実行時間
72 操作分類
73 操作内容
11 LCD TV 12 Display (display device)
13 Remote Control Receiver 15 Driver 21, 121, 221 Inspection Device 22 Computer 23 Camera (Display Screen Imaging Means)
24 remote control 25 liquid crystal shutter 31 scenario processing section (inspection control signal generation output means)
32 Remote control signal control unit 33 Mask processing unit (mask control signal generation / output means)
34 Imaging Processing Unit 35 Determination Processing Unit (Inspection Determination Unit)
311 Input Processing Unit 312 Scenario Reading Unit 313 Scenario Interpreting Unit 314 Scenario Executing Unit 315 Timer 41 Scenario Holding Unit (Inspection Procedure Storage Unit)
42 Mask Data Holding Unit 43 Captured Image Holding Unit 44 Expected Image Holding Unit (Expectation Display Screen Generation Storage Unit)
45 Edited Image Holding Unit 51 Input Device 52 Result Display / Save Unit 61 Video Screen 61a Displayed Image 62 Expected Image 63 Mask Data 66 Captured Image (Success)
67 Difference image (success)
68 Captured image (failure)
69 Difference image (failure)
71 Execution time 72 Operation classification 73 Operation content

Claims (5)

動画を表示可能な表示装置における表示画面による操作機能を検査する検査装置において、
検査に関する手順を記憶する検査手順記憶手段と、
前記記憶された検査手順に基づいて検査を実行するための制御信号を生成し出力する検査制御信号生成出力手段と、
前記記憶された検査手順に基づいて表示画面から発する光の透過を調整するマスクを制御するマスク制御信号を生成し出力するマスク制御信号生成出力手段と、
前記記憶された検査手順に基づいて前記検査制御信号により検査が実行され、かつ前記マスク制御信号により光の透過が調整された検査対象の表示画面を撮像する表示画面撮像手段と、
前記検査手順に基づく検査及び前記マスクの制御により表示が期待される期待表示画面を生成し記憶する期待表示画面生成記憶手段と、
前記撮像された表示画面と前記期待表示画面とを比較して検査対象が正常に動作しているか否かを判定する検査判定手段と、
を備えることを特徴とする検査装置。
In an inspection device that inspects an operation function by a display screen in a display device capable of displaying a moving image,
Inspection procedure storage means for storing procedures relating to the inspection;
Inspection control signal generation output means for generating and outputting a control signal for executing an inspection based on the stored inspection procedure;
Mask control signal generation output means for generating and outputting a mask control signal for controlling a mask for adjusting transmission of light emitted from the display screen based on the stored inspection procedure;
Display screen imaging means for imaging a display screen of an inspection target in which an inspection is executed by the inspection control signal based on the stored inspection procedure and light transmission is adjusted by the mask control signal;
An expected display screen generation storage means for generating and storing an expected display screen expected to be displayed by the inspection based on the inspection procedure and the control of the mask;
Inspection determination means for comparing the imaged display screen with the expected display screen to determine whether or not the inspection target is operating normally;
An inspection apparatus comprising:
前記マスク制御信号は、前記検査対象の表示画面と前記表示画面撮像手段との間に設けられた液晶シャッターを制御する信号であることを特徴とする請求項1に記載の検査装置。   The inspection apparatus according to claim 1, wherein the mask control signal is a signal for controlling a liquid crystal shutter provided between the display screen to be inspected and the display screen imaging unit. 前記マスク制御信号は、前記検査対象の表示画面の明るさを調整するバックライトを制御する信号であることを特徴とする請求項1に記載の検査装置。   The inspection apparatus according to claim 1, wherein the mask control signal is a signal for controlling a backlight that adjusts brightness of a display screen to be inspected. 前記マスク制御信号は、前記検査対象の表示画面を表示するためのドライバを制御する信号であることを特徴とする請求項1に記載の検査装置。   The inspection apparatus according to claim 1, wherein the mask control signal is a signal for controlling a driver for displaying the display screen to be inspected. 動画を表示可能な表示装置における表示画面による操作機能を検査する検査方法において、
検査に関する手順を記憶する工程と、
前記記憶された検査手順に基づいて検査を実行するための制御信号を生成し出力する工程と、
前記記憶された検査手順に基づいて表示画面から発する光の透過を調整するマスクを制御するマスク制御信号を生成し出力する工程と、
前記記憶された検査手順に基づいて前記検査制御信号により検査が実行され、かつ前記マスク制御信号により光の透過が調整された検査対象の表示画面を撮像する工程と、
前記検査手順に基づく検査及び前記マスクの制御により表示が期待される期待表示画面を生成し記憶する工程と、
前記撮像された表示画面と前記期待表示画面とを比較して検査対象が正常に動作しているか否かを判定する工程と、
を備えることを特徴とする検査方法。
In an inspection method for inspecting an operation function by a display screen in a display device capable of displaying a moving image,
Memorizing a procedure related to the inspection;
Generating and outputting a control signal for performing an inspection based on the stored inspection procedure;
Generating and outputting a mask control signal for controlling a mask for adjusting transmission of light emitted from the display screen based on the stored inspection procedure;
Imaging a display screen of an inspection object in which inspection is performed by the inspection control signal based on the stored inspection procedure and light transmission is adjusted by the mask control signal;
Generating and storing an expected display screen expected to be displayed by inspection based on the inspection procedure and control of the mask;
Comparing the imaged display screen with the expected display screen to determine whether the inspection target is operating normally;
An inspection method comprising:
JP2006154320A 2006-06-02 2006-06-02 Inspection apparatus and inspection method Pending JP2007325056A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006154320A JP2007325056A (en) 2006-06-02 2006-06-02 Inspection apparatus and inspection method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006154320A JP2007325056A (en) 2006-06-02 2006-06-02 Inspection apparatus and inspection method

Publications (1)

Publication Number Publication Date
JP2007325056A true JP2007325056A (en) 2007-12-13

Family

ID=38857443

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006154320A Pending JP2007325056A (en) 2006-06-02 2006-06-02 Inspection apparatus and inspection method

Country Status (1)

Country Link
JP (1) JP2007325056A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009278457A (en) * 2008-05-15 2009-11-26 Sharp Corp Test apparatus, test method and program
JP2012234121A (en) * 2011-05-09 2012-11-29 Mitsubishi Electric Corp Led display device having screen test function
CN104091557A (en) * 2014-07-29 2014-10-08 中国航空无线电电子研究所 Display screen test device and method based on image recognition technology
JP2018506213A (en) * 2014-12-30 2018-03-01 スポティファイ アーベー System and method for testing and authenticating media equipment for use in a connected media environment
CN113542734A (en) * 2020-04-16 2021-10-22 中国移动通信集团陕西有限公司 Method, system and probe device for positioning faults of television set top box

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009278457A (en) * 2008-05-15 2009-11-26 Sharp Corp Test apparatus, test method and program
JP2012234121A (en) * 2011-05-09 2012-11-29 Mitsubishi Electric Corp Led display device having screen test function
CN104091557A (en) * 2014-07-29 2014-10-08 中国航空无线电电子研究所 Display screen test device and method based on image recognition technology
JP2018506213A (en) * 2014-12-30 2018-03-01 スポティファイ アーベー System and method for testing and authenticating media equipment for use in a connected media environment
CN113542734A (en) * 2020-04-16 2021-10-22 中国移动通信集团陕西有限公司 Method, system and probe device for positioning faults of television set top box

Similar Documents

Publication Publication Date Title
CN105549797B (en) Display device and projection display device
US7843494B2 (en) Image taking apparatus and control method therefor
KR100723958B1 (en) Image correction device and control method thereof
CN102722289B (en) Image supply device, image display system, method of controlling image supply device
US20130235248A1 (en) Image display apparatus, imaging apparatus, image display method, and program
JP4770197B2 (en) Presentation control apparatus and program
JP2007325056A (en) Inspection apparatus and inspection method
JP2011064777A (en) Image projection system, image projection method and image projection program
JP2005284874A (en) Projector and command extraction method
KR100558198B1 (en) Display apparatus and control method thereof
JP4588366B2 (en) Image display device
CN102810307B (en) Display device, method of controlling display device, and recording medium
CN108632553B (en) Image processing device, projector, image processing method, and storage medium
US8149317B2 (en) Display device, photographing apparatus, and display method
JP5152317B2 (en) Presentation control apparatus and program
TWI411291B (en) Image pickup device, projector including the image pickup device, and image pickup method
JP2010038938A (en) Projection display device, image projection display method, and computer program
JP2005204109A (en) Image pickup apparatus and mode switching operation program
CN115834846A (en) Image display method and projector
JP5119642B2 (en) Automatic photo creation device and automatic photo creation method
CN108629726A (en) Information processing unit, method for displaying image, display system and recording medium
JP2007251420A (en) Image display unit
JP5162855B2 (en) Image processing apparatus, remote image processing system, and image processing method
JP2005071192A (en) Projection type display device, program and recording medium
CN102999233B (en) The noise spot automatic shield method and device of electronic whiteboard based on imageing sensor