JP6369268B2 - Display unit state determination method, display unit state determination program, display unit state determination device, and display system - Google Patents

Display unit state determination method, display unit state determination program, display unit state determination device, and display system Download PDF

Info

Publication number
JP6369268B2
JP6369268B2 JP2014202323A JP2014202323A JP6369268B2 JP 6369268 B2 JP6369268 B2 JP 6369268B2 JP 2014202323 A JP2014202323 A JP 2014202323A JP 2014202323 A JP2014202323 A JP 2014202323A JP 6369268 B2 JP6369268 B2 JP 6369268B2
Authority
JP
Japan
Prior art keywords
value
display unit
character
rgb
color
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014202323A
Other languages
Japanese (ja)
Other versions
JP2016071747A (en
Inventor
孝浩 鈴木
孝浩 鈴木
仁史 小林
仁史 小林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2014202323A priority Critical patent/JP6369268B2/en
Publication of JP2016071747A publication Critical patent/JP2016071747A/en
Application granted granted Critical
Publication of JP6369268B2 publication Critical patent/JP6369268B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Controls And Circuits For Display Device (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)
  • Road Signs Or Road Markings (AREA)
  • Image Processing (AREA)

Description

本発明は、表示部状態判定方法、表示部状態判定プログラム及び表示部状態判定装置、並びに表示システムに関する。   The present invention relates to a display unit state determination method, a display unit state determination program, a display unit state determination device, and a display system.

渋滞情報や工事情報などの道路に関する各種情報は、道路上に設置された情報掲示板への表示により、車両の運転者に報知されることが多い。近年では、情報掲示板には、発光ダイオード(LED:Light Emitting Diode)を利用した電光掲示板が主に用いられている。ここで、情報掲示板に文字等を表示する場合、重要な情報ほど運転者が認識しやすい色で表示することが好ましい。このため、通常は、重要度の低い情報は緑や橙の文字色で表示し、重要度の高い通行止めや事故情報は赤の文字色で表示することとしている。   Various information about roads such as traffic jam information and construction information is often notified to the driver of the vehicle by display on an information bulletin board installed on the road. In recent years, an electronic bulletin board using a light emitting diode (LED) is mainly used as an information bulletin board. Here, when characters or the like are displayed on the information bulletin board, it is preferable that important information is displayed in a color that the driver can easily recognize. For this reason, normally, information with low importance is displayed in green or orange characters, and road closure or accident information with high importance is displayed in red characters.

なお、画像表示装置において視認性劣化を補正するための種々方法が知られている(例えば、特許文献1,2等参照)   Various methods for correcting visibility deterioration in an image display device are known (see, for example, Patent Documents 1 and 2).

特開2003−228330号公報JP 2003-228330 A 特開2008−107715号公報JP 2008-107715 A

例えば、高速道路の情報掲示板の場合、屋外で24時間365日稼働するような過酷な環境に設置されていることから、太陽光、天候、排気ガスのスモッグ、黄砂などの影響によって視認性が低下し易い。   For example, in the case of an information bulletin board on an expressway, visibility is reduced due to the influence of sunlight, weather, exhaust gas smog, yellow sand, etc., because it is installed in a harsh environment that operates 24 hours 365 days outdoors. Easy to do.

しかしながら、従来は、情報掲示板の視認性の低下の原因、すなわち情報掲示板の状態、を正しく特定することができなかった。   However, conventionally, it has not been possible to correctly identify the cause of the deterioration of the visibility of the information bulletin board, that is, the state of the information bulletin board.

1つの側面では、本発明は、情報掲示板の表示部の状態を正しく判定することが可能な表示部状態判定方法、表示部状態判定プログラム及び表示部状態判定装置、並びに表示システムを提供することを目的とする。   In one aspect, the present invention provides a display unit state determination method, a display unit state determination program, a display unit state determination device, and a display system that can correctly determine the state of a display unit of an information bulletin board. Objective.

一つの態様では、表示部状態判定方法は、情報掲示板の表示部に表示させる文字又は図形の色を示すRGB値である第1のRGB値から、文字又は図形の色のCr値及びCb値である第1のCr値及び第1のCb値を算出し、前記第1のRGB値に基づいて前記表示部に前記文字又は図形を表示させ、撮像装置で前記表示部を撮像した画像中の前記文字又は図形の色を示すRGB値である第2のRGB値から、前記画像中の前記文字又は図形のY値である第1のY値を算出し、前記第1のY値と、前記第1のCr値と、前記第1のCb値とから、前記文字又は図形の色を示すRGB値である第3のRGB値を算出し、前記第3のRGB値に基づいて前記表示部に前記文字又は図形を表示させ、前記撮像装置で前記表示部を撮像した画像中の前記文字又は図形の色を示すRGB値である第4のRGB値から、前記画像中の前記文字又は図形のCr値及びCb値である第2のCr値及び第2のCb値を算出し、前記第2のCr値及び前記第2のCb値と、前記第1のCr値及び前記第1のCb値との比較結果に基づいて、前記表示部が汚れているかどうかを判定する、処理をコンピュータが実行する表示部状態判定方法である。   In one aspect, the display state determination method uses a Cr value and a Cb value of the character or graphic color from the first RGB value that is the RGB value indicating the color of the character or graphic displayed on the display unit of the information bulletin board. The first Cr value and the first Cb value are calculated, the character or the figure is displayed on the display unit based on the first RGB value, and the display unit captures the display unit with the imaging device. A first Y value that is a Y value of the character or graphic in the image is calculated from a second RGB value that is an RGB value indicating the color of the character or graphic, and the first Y value and the first From the Cr value of 1 and the first Cb value, a third RGB value, which is an RGB value indicating the color of the character or figure, is calculated, and the display unit is configured to calculate the third RGB value based on the third RGB value. In front of an image in which characters or figures are displayed and the display unit is imaged by the imaging device A second Cr value and a second Cb value, which are Cr and Cb values of the character or graphic in the image, are calculated from a fourth RGB value that is an RGB value indicating the color of the character or graphic. A process for determining whether or not the display unit is dirty based on a comparison result between the second Cr value and the second Cb value and the first Cr value and the first Cb value. Is a display unit state determination method executed by.

1つの側面として、情報掲示板の表示部の状態を正しく判定することができるという効果を有する。   As one aspect, there is an effect that the state of the display unit of the information bulletin board can be correctly determined.

一実施形態に係る表示システムの構成を概略的に示す図である。1 is a diagram schematically illustrating a configuration of a display system according to an embodiment. システム設定情報の一例を示す図である。It is a figure which shows an example of system setting information. 情報掲示板の一例を示す図である。It is a figure which shows an example of an information bulletin board. 制御装置の処理を示すフローチャート(その1)である。It is a flowchart (the 1) which shows the process of a control apparatus. 制御装置の処理を示すフローチャート(その2)である。It is a flowchart (the 2) which shows the process of a control apparatus. 表示部が汚れている場合を説明するための表である。It is a table | surface for demonstrating the case where a display part is dirty. 表示部のLEDが劣化している場合を説明するための表である。It is a table | surface for demonstrating the case where LED of a display part has degraded.

以下、表示システムの一実施形態について、図1〜図7に基づいて、詳細に説明する。図1には、一実施形態に係る表示システム1の構成が概略的に示されている。   Hereinafter, an embodiment of a display system will be described in detail with reference to FIGS. FIG. 1 schematically shows a configuration of a display system 1 according to an embodiment.

図1に示すように、表示システム1は、複数の高速道路情報掲示板(以下、情報掲示板という)2と、情報掲示板2の画像を取得する撮像装置3と、情報掲示板2の表示を制御したり、情報掲示板2の状態(正常、汚れ、劣化など)を判定する処理を実行する表示部状態判定装置としての制御装置4と、情報掲示板2に表示させるシステム設定情報を管理する情報管理装置5と、を備える。情報掲示板2、撮像装置3、制御装置4、及び情報管理装置5のそれぞれは、インターネットなどのネットワーク6に接続されている。   As shown in FIG. 1, the display system 1 controls a plurality of expressway information bulletin boards (hereinafter referred to as information bulletin boards) 2, an imaging device 3 that acquires images of the information bulletin boards 2, and display of the information bulletin boards 2. , A control device 4 as a display unit state determination device for executing processing for determining the state (normal, dirty, deteriorated, etc.) of the information bulletin board 2, and an information management device 5 for managing system setting information to be displayed on the information bulletin board 2. . Each of the information bulletin board 2, the imaging device 3, the control device 4, and the information management device 5 is connected to a network 6 such as the Internet.

情報掲示板2は、高速道路上の所定位置に設置されており、制御装置4からの制御情報に基づいて、渋滞情報や工事情報、事故情報などのシステム設定情報を文字や図形により表示する。情報掲示板2は、図1に示すように、通信部17と、表示制御部18と、表示部50と、を有する。通信部17は、制御装置4から送信されるシステム設定情報を受信する処理や、システム設定情報を正しく受信したことを制御装置4に通知する処理等を実行する。表示制御部18は、システム設定情報に基づく情報を表示部50に表示させる処理を実行する。表示部50は、LED等を含み、表示制御部18の指示の下、文字等を自動車の運転者に目視可能に表示させる。   The information bulletin board 2 is installed at a predetermined position on the expressway, and displays system setting information such as traffic jam information, construction information, and accident information in characters and figures based on control information from the control device 4. As shown in FIG. 1, the information bulletin board 2 includes a communication unit 17, a display control unit 18, and a display unit 50. The communication unit 17 executes processing for receiving system setting information transmitted from the control device 4, processing for notifying the control device 4 that the system setting information has been correctly received, and the like. The display control unit 18 executes processing for causing the display unit 50 to display information based on the system setting information. The display unit 50 includes LEDs and the like, and displays characters and the like so as to be visible to the driver of the automobile under the instruction of the display control unit 18.

撮像装置3は、例えば、情報掲示板2と同数用意され、1つの撮像装置3が1つの情報掲示板2の表示部50全体を撮像可能な位置に設置されている。撮像装置3の設置場所としては、運転者が情報掲示板2に表示されるシステム設定情報を目視するときの視線や視野に近い状態で画像が取得できる位置(例えば、高速道路の中央分離帯など)を採用することができる。撮像装置3は、図1に示すように、通信部19と、撮像部20と、を有する。通信部19は、制御装置4から画像の送信を要求する信号を受け取ったり、情報掲示板2を撮像した画像を制御装置4に送信したりする。撮像部20は、レンズや撮像素子等を含み、情報掲示板2の画像を取得する処理を実行する。   For example, the same number of imaging devices 3 as the information bulletin boards 2 are prepared, and one imaging device 3 is installed at a position where the entire display unit 50 of one information bulletin board 2 can be imaged. The installation location of the imaging device 3 is a position where an image can be acquired in a state close to the line of sight or field of view when the driver views the system setting information displayed on the information bulletin board 2 (for example, a median strip on a highway) Can be adopted. As illustrated in FIG. 1, the imaging device 3 includes a communication unit 19 and an imaging unit 20. The communication unit 19 receives a signal requesting transmission of an image from the control device 4 or transmits an image obtained by capturing the information bulletin board 2 to the control device 4. The imaging unit 20 includes a lens, an imaging element, and the like, and executes processing for acquiring an image on the information bulletin board 2.

制御装置4は、CPU(Central Processing Unit)11、RAM(Random Access Memory)12、HDD(Hard Disk Drive)などの記憶装置13、マウスやキーボードなどの入力装置14、ディスプレイなどの出力装置15、情報掲示板2などと通信する通信装置16と、を備える。   The control device 4 includes a CPU (Central Processing Unit) 11, a RAM (Random Access Memory) 12, a storage device 13 such as an HDD (Hard Disk Drive), an input device 14 such as a mouse and a keyboard, an output device 15 such as a display, and information. And a communication device 16 that communicates with the bulletin board 2 and the like.

さらに、制御装置4は、コンピュータに掲示板の表示制御プログラムや表示状態判定プログラムを実行させることによって、本実施形態の特徴的な機能を実現することが可能である。具体的には、制御装置4は、表示制御部21、表示状態取得部22、文字色補正部23、補正値判定部24、を有する。   Furthermore, the control device 4 can realize the characteristic functions of the present embodiment by causing a computer to execute a display control program for a bulletin board and a display state determination program. Specifically, the control device 4 includes a display control unit 21, a display state acquisition unit 22, a character color correction unit 23, and a correction value determination unit 24.

表示制御部21は、文字や図形を特定する制御文字列情報と、制御文字列情報を情報掲示板2に表示させるときの色を特定する制御文字色情報とを含むシステム設定情報を作成する。システム設定情報に含まれる色の情報としては、RGB値が使用される。また、情報掲示板2が複数あるときには、文字等を表示させる情報掲示板2を特定する情報が付加される。なお、システム設定情報は、情報管理装置5から送信されたデータをそのまま使用することも可能である。   The display control unit 21 creates system setting information including control character string information for specifying characters and graphics and control character color information for specifying a color when the control character string information is displayed on the information bulletin board 2. As the color information included in the system setting information, RGB values are used. When there are a plurality of information bulletin boards 2, information for specifying the information bulletin board 2 for displaying characters and the like is added. The system setting information can use the data transmitted from the information management apparatus 5 as it is.

表示状態取得部22は、撮像装置3で撮像された情報掲示板2の撮像画像の取得に関する処理を実行する。   The display state acquisition unit 22 executes processing related to acquisition of a captured image of the information bulletin board 2 captured by the imaging device 3.

文字色補正部23は、表示状態取得部22で取得した撮像画像に含まれる情報に基づいて、情報掲示板2で表示させる文字等の色の情報を補正する。   The character color correction unit 23 corrects color information such as characters displayed on the information bulletin board 2 based on information included in the captured image acquired by the display state acquisition unit 22.

補正値判定部24は、表示状態取得部22において得られる色情報と、表示制御部21が制御に用いる色情報(システム設定情報)と、に基づいて、情報掲示板2の表示部50の状態(正常、汚れ、LEDの劣化など)を判定する。また、補正値判定部24は、判定結果を出力装置15に出力(表示等)させる。   The correction value determination unit 24 is based on the color information obtained by the display state acquisition unit 22 and the color information (system setting information) used by the display control unit 21 for control (state of the display unit 50 of the information bulletin board 2 ( Normal, dirt, LED deterioration, etc.). The correction value determination unit 24 causes the output device 15 to output (display, etc.) the determination result.

ここで、図2に基づいて、情報掲示板2で表示させる情報であるシステム設定情報の一例について説明する。システム設定情報は、情報掲示板2毎に付与された「掲示板ID」と、情報掲示板2上で情報を表示させる領域を特定する「ブロック番号」と、表示させる文や図形を特定するための「制御文字列」と、表示させる文字列や図形の色を指定する「制御文字色」の各フィールドを有する。なお、図2においては、1つのシステム設定情報で1つの情報掲示板2の表示が管理されているものとする。   Here, an example of system setting information, which is information displayed on the information bulletin board 2, will be described with reference to FIG. The system setting information includes a “bulletin board ID” assigned to each information bulletin board 2, a “block number” for specifying an area for displaying information on the information bulletin board 2, and a “control” for specifying a sentence or figure to be displayed. Each field includes a “character string” field and a “control character color” field for designating the color of the character string and graphic to be displayed. In FIG. 2, it is assumed that the display of one information bulletin board 2 is managed by one system setting information.

例えば、図2のシステム設定情報の1行目では、掲示板IDが「1」に設定された情報掲示板2の表示部50のブロック番号「1」の領域に制御文字列「この先」が、制御文字色「R:255、G:255、B:255」で表示されることが示されている。また、システム設定情報の2行目には、同じ情報掲示板2の表示部50のブロック番号「2」の領域に制御文字列「工事渋滞3km」が、制御文字色「R:200、G:200、B:100」で表示されることが示されている。さらに、3行目には、ブロック番号「3」の領域に制御文字列「雨走行注意」が、制御文字色「R:200、G:200、B:100」で表示されることが示されている。制御文字色情報は、RGB値で表示され、ここに格納される値がシステム設定情報(第1のRGB値)になる。   For example, in the first line of the system setting information in FIG. 2, the control character string “Previous” is displayed in the area of the block number “1” of the display unit 50 of the information bulletin board 2 in which the bulletin board ID is set to “1”. It is shown that the color “R: 255, G: 255, B: 255” is displayed. In the second line of the system setting information, the control character string “construction traffic jam 3 km” is displayed in the area of the block number “2” of the display unit 50 of the same information bulletin board 2 and the control character color “R: 200, G: 200”. , B: 100 ”. Furthermore, the third line shows that the control character string “Caution for raining” is displayed in the control character color “R: 200, G: 200, B: 100” in the area of the block number “3”. ing. The control character color information is displayed as an RGB value, and the value stored here becomes the system setting information (first RGB value).

図3には、情報掲示板2の一例が示されている。図3に示すように、情報掲示板2の表示部50には、例えば、LEDにより任意の文字や図形を複数の色を用いて表示することが可能な領域として、ブロック51〜54が設けられている。ブロック51〜54は、具体的には、運転者から見て上側かつ左側の第1のブロック51と、上側かつ右側で第1のブロック51と隣り合う第2のブロック52と、第1及び第2のブロックの下側に配置される第3のブロック53と、最も左側に位置する第4のブロック54とを含む。各ブロック51〜54は、図3に示すシステム設定情報のブロック番号情報で特定される番号に1つずつ対応している。例えば、ブロック番号情報の「1」が、第1のブロック51に対応する。   FIG. 3 shows an example of the information bulletin board 2. As shown in FIG. 3, the display unit 50 of the information bulletin board 2 is provided with blocks 51 to 54 as an area in which an arbitrary character or figure can be displayed using a plurality of colors by LEDs, for example. Yes. Specifically, the blocks 51 to 54 are, as viewed from the driver, the first block 51 on the upper side and the left side, the second block 52 adjacent to the first block 51 on the upper side and the right side, and the first and first blocks. 3 includes a third block 53 disposed below the second block and a fourth block 54 located on the leftmost side. Each of the blocks 51 to 54 corresponds to the number specified by the block number information of the system setting information shown in FIG. For example, “1” in the block number information corresponds to the first block 51.

図3の例では、第1のブロック51に「この先」、第2のブロック52に「工事渋滞3km」、第3のブロック53に「雨走行注意」と表示されている。これにより、情報掲示板2の表示部50には、全体として「この先 工事渋滞3km 雨走行注意」という情報が2行に分けて表示されている。この場合において、「この先」が制御文字色「R:255、G:255、B:255」、すなわち白色で表示される。一方、「工事渋滞3km」と「雨走行注意」は、制御文字色「R:200、G:200、B:100」、すなわち緑色で表示される。   In the example of FIG. 3, “the future” is displayed in the first block 51, “construction traffic jam 3 km” is displayed in the second block 52, and “rainy driving attention” is displayed in the third block 53. As a result, the display section 50 of the information bulletin board 2 displays the information “This pre-construction traffic jam 3 km rain caution” divided into two lines. In this case, “beyond” is displayed in the control character color “R: 255, G: 255, B: 255”, that is, white. On the other hand, “construction traffic jam 3 km” and “rain driving attention” are displayed in control character colors “R: 200, G: 200, B: 100”, that is, green.

図1に戻り、情報管理装置5には、例えば、サーバ装置が用いられている。情報管理装置5には、不図示の外部の装置から道路交通情報が入力され、情報掲示板2毎にシステム設定情報を作成し、制御装置4にシステム設定情報を送信する。   Returning to FIG. 1, for example, a server device is used as the information management device 5. The information management device 5 receives road traffic information from an external device (not shown), creates system setting information for each information bulletin board 2, and transmits the system setting information to the control device 4.

次に、図4、図5のフローチャートに沿って、表示システム1の処理について説明する。   Next, processing of the display system 1 will be described with reference to the flowcharts of FIGS. 4 and 5.

図4のフローチャートでは、まず、ステップS10において、制御装置4(表示制御部21)が、システム設定情報に含まれる掲示板IDで特定される情報掲示板2に対してシステム設定情報(第1のRGB値)を送信する。   In the flowchart of FIG. 4, first, in step S <b> 10, the control device 4 (display control unit 21) performs system setting information (first RGB value) for the information bulletin board 2 identified by the bulletin board ID included in the system setting information. ).

次いで、ステップS12では、表示状態取得部22は、情報掲示板2の通信部17がシステム設定情報を受け取り、通信部17から発信された、受け取ったことを通知する受信信号を受け取るまで待機する。表示状態取得部22は、受信信号を受け取ると、ステップS14に移行する。なお、情報掲示板2においては、通信部17がシステム設定情報を受け取った後、表示制御部18は、システム設定情報に基づいて文字等を表示部50に表示させる。情報掲示板2は、システム設定情報に含まれるブロック番号で特定される表示領域に、制御文字列で特定される文字列を、制御文字色のRGB値で特定される色で表示する。これにより、情報掲示板2には、例えば図3に示すような情報が表示される。   Next, in step S <b> 12, the display state acquisition unit 22 waits until the communication unit 17 of the information bulletin board 2 receives the system setting information and receives a reception signal transmitted from the communication unit 17 and notifying that it has been received. When receiving the reception signal, the display state acquisition unit 22 proceeds to step S14. In the information bulletin board 2, after the communication unit 17 receives the system setting information, the display control unit 18 causes the display unit 50 to display characters and the like based on the system setting information. The information bulletin board 2 displays the character string specified by the control character string in the color specified by the RGB value of the control character color in the display area specified by the block number included in the system setting information. Thereby, for example, information as shown in FIG. 3 is displayed on the information bulletin board 2.

ステップS14に移行すると、表示状態取得部22は、撮像装置3に対して画像の取得命令を送信する。この場合、撮像装置3の撮像部20は、取得命令を受信すると、該取得命令に基づいて情報掲示板2の表示部50の画像(図3参照)を取得し、この画像を通信部17から制御装置4(表示状態取得部22)に出力する。   In step S <b> 14, the display state acquisition unit 22 transmits an image acquisition command to the imaging device 3. In this case, when receiving the acquisition command, the imaging unit 20 of the imaging device 3 acquires an image (see FIG. 3) of the display unit 50 of the information bulletin board 2 based on the acquisition command, and controls this image from the communication unit 17. It outputs to the apparatus 4 (display state acquisition part 22).

次いで、ステップS16では、表示状態取得部22は、撮像装置3から出力された画像を取得する。なお、以下においては、ステップS16において表示状態取得部22が取得した画像を「制御前画像」とも呼ぶものとする。表示状態取得部22は、取得した制御前画像を文字色補正部23に受け渡す。   Next, in step S <b> 16, the display state acquisition unit 22 acquires the image output from the imaging device 3. In the following, the image acquired by the display state acquisition unit 22 in step S16 is also referred to as a “pre-control image”. The display state acquisition unit 22 delivers the acquired pre-control image to the character color correction unit 23.

次いで、ステップS18では、文字色補正部23は、表示制御部21から情報掲示板2に出力したシステム設定情報に含まれる各ブロック51〜54の文字の画素の代表的な1点を抽出する。そして、文字色補正部23は、抽出した画素の第1のRGB値を取得し、YCrCb値に変換する。なお、ここで得られるCrCb値を、第1のCr値、第1のCb値と呼ぶものとする。   Next, in step S <b> 18, the character color correction unit 23 extracts one representative point of the pixel of the character of each block 51 to 54 included in the system setting information output from the display control unit 21 to the information bulletin board 2. Then, the character color correction unit 23 acquires the first RGB value of the extracted pixel and converts it into a YCrCb value. The CrCb value obtained here is referred to as a first Cr value and a first Cb value.

ここで、明度を示すY値、色差を示すCr値、Cb値は、RGB値を用いて、次式(1)〜(3)により算出することができる。
Y=0.299×R+0.58×G+0.114×B …(1)
Cr=0.500×R−0.419×G−0.081×B …(2)
Cb=−0.169×R−0.332×G+0.500×B …(3)
Here, the Y value indicating brightness, the Cr value indicating color difference, and the Cb value can be calculated by the following equations (1) to (3) using RGB values.
Y = 0.299 × R + 0.58 × G + 0.114 × B (1)
Cr = 0.500 × R−0.419 × G−0.081 × B (2)
Cb = −0.169 × R−0.332 × G + 0.500 × B (3)

例えば、システム設定情報で出力した第2のブロック52の文字色についての計算結果(RGB値を変換したYCrCb値)の一例を図6の一行目に示す。図6の一行目に示すように、システム設定情報の第2のブロック52の文字色のY値は、188.60であり、Cr値(第1のCr値)は、8.10であり、Cb値(第1のCb値)は、−50.20であったものとする。   For example, an example of a calculation result (YCrCb value obtained by converting RGB values) of the character color of the second block 52 output as the system setting information is shown in the first line of FIG. As shown in the first line of FIG. 6, the Y value of the character color of the second block 52 of the system setting information is 188.60, the Cr value (first Cr value) is 8.10, The Cb value (first Cb value) is assumed to be −50.20.

次いで、ステップS20では、文字色補正部23が、撮像装置3から取得した画像(制御前画像)中の文字の画素の代表的な1点を各ブロック51〜54のそれぞれから抽出する。そして、文字色補正部23は、抽出した画素のRGB値を第2のRGB値として取得し、上記の式(1)〜(3)を用いてYCrCb値に変換する。なお、ステップS20で得られるY値を、以下においては「第1のY値」とも呼ぶものとする。   Next, in step S <b> 20, the character color correction unit 23 extracts one representative point of character pixels in the image (pre-control image) acquired from the imaging device 3 from each of the blocks 51 to 54. Then, the character color correction unit 23 acquires the RGB value of the extracted pixel as the second RGB value, and converts it into a YCrCb value using the above equations (1) to (3). Note that the Y value obtained in step S20 is hereinafter also referred to as a “first Y value”.

ここで、システム設定情報に基づいて文字を出力したときの制御前画像のうち、第2のブロック52の文字色についてのYCrCb値の一例を図6の二行目に示している。例えば、制御前画像から抽出した第2のブロック52の文字の第2のRGB値が、R:230、G:200、B:100であったとする。この場合、第2のRGB値を上記の式(1)〜(3)を用いてYCrCb値に変換した結果、Y値(第1のY値)は、197.57であり、Cr値は、23.10であり、Cb値は、−55.27であったものとする。   Here, an example of the YCrCb value for the character color of the second block 52 in the pre-control image when the character is output based on the system setting information is shown in the second line of FIG. For example, it is assumed that the second RGB values of the characters of the second block 52 extracted from the pre-control image are R: 230, G: 200, and B: 100. In this case, as a result of converting the second RGB value to the YCrCb value using the above formulas (1) to (3), the Y value (first Y value) is 197.57, and the Cr value is It is assumed that the Cb value was −55.27.

図6の一行目と二行目を比較すると、本来であれば、一行目の情報掲示板2で表示する文字色(第1RGB)と、二行目の制御前画像の文字色(第2RGB)、すなわち運転者が視認する文字色とは、一致するはずである。しかしながら、図6では、両者は一致していない。これは、太陽光などの外部の要因によって、情報掲示板2の文字色が本来と異なる色として撮像されているためである。そして、このことは、高速道路を走行中の運転者にも、本来の文字色と異なる色として認識されていることを示唆している。   When comparing the first line and the second line in FIG. 6, the character color (first RGB) displayed on the information bulletin board 2 on the first line and the character color (second RGB) of the pre-control image on the second line, That is, the character color visually recognized by the driver should match. However, in FIG. 6, they do not match. This is because the character color of the information bulletin board 2 is captured as a color different from the original color due to external factors such as sunlight. This suggests that a driver traveling on a highway is recognized as a color different from the original character color.

そこで、次のステップS22では、制御前画像の第2のRGB値を変換して得られた明度Y(第1のY値)と、システム設定情報の第1のRGB値を変換して得られたCr値、Cb値(第1のCr値、Cb値)を用いて文字等の補正データ(第3のRGB値)を作成する。ここで、R、G、Bはそれぞれ次式(4)〜(6)に基づいて算出することができるので、第1のY値、第1のCr値、第1のCb値を次式(4)〜(6)に代入することで、第3のRGB値を求める。
R=Y+1.402×Cr …(4)
G=Y−0.714×Cr−0.344×Cb …(5)
B=Y+1.772×Cb …(6)
Therefore, in the next step S22, the brightness Y (first Y value) obtained by converting the second RGB value of the pre-control image and the first RGB value of the system setting information are obtained. Correction data (third RGB value) such as characters is created using the Cr value and Cb value (first Cr value, Cb value). Here, since R, G, and B can be calculated based on the following equations (4) to (6), the first Y value, the first Cr value, and the first Cb value are expressed by the following equations ( By substituting in 4) to (6), the third RGB value is obtained.
R = Y + 1.402 × Cr (4)
G = Y−0.714 × Cr−0.344 × Cb (5)
B = Y + 1.772 × Cb (6)

例えば、図6の例の場合、3行目に示すように、Y:197.57、Cr:8.10、Cb:−50.20を用いて式(4)〜(6)を計算する。その結果、補正データ(第3のRGB値)として、R:209、G:209、B:109が得られる。当初の第2のブロック52の文字の第1のRGB値(システム設定情報)が、R:200、G:200、B:100であったのに対し、ステップS22の処理によって、得られた補正データ(第3のRGB値)は、R:209、G:209、B:109になる。   For example, in the example of FIG. 6, as shown in the third row, equations (4) to (6) are calculated using Y: 197.57, Cr: 8.10, and Cb: -50.20. As a result, R: 209, G: 209, and B: 109 are obtained as correction data (third RGB values). The first RGB values (system setting information) of the characters in the initial second block 52 were R: 200, G: 200, and B: 100, but the correction obtained by the process of step S22. The data (third RGB value) is R: 209, G: 209, and B: 109.

なお、情報掲示板2の表示部50の背景色は、通常は黒であるが、ステップS18〜S22の処理においては、情報掲示板2の表示部50の背景色のRGB値をブロック51〜54毎に取得し、文字色に加えて背景色も補正しても良い。この場合には、ステップS18でシステム設定情報の背景色のRGB値(第1のRGB値)を取得し、CrCb値(第1のCr値及び第1のCb値)に変換する。さらに、制御前画像から第2のブロック52の背景色のRGB値(第2のRGB値)を取得し、YCrCb値に変換する。そして、制御前画像のY値(第1のY値)と、本来の文字色のCr値及びCb値(第1のCr,Cb値)を用いて背景色のRGB値(第3のRGB値)を算出し、補正データとする。   The background color of the display unit 50 of the information bulletin board 2 is normally black. However, in the processing of steps S18 to S22, the RGB value of the background color of the display unit 50 of the information bulletin board 2 is set for each of the blocks 51 to 54. The background color may be corrected in addition to the character color. In this case, the RGB value (first RGB value) of the background color of the system setting information is acquired in step S18, and converted to a CrCb value (first Cr value and first Cb value). Further, the RGB value (second RGB value) of the background color of the second block 52 is acquired from the pre-control image, and converted into a YCrCb value. Then, the RGB value (third RGB value) of the background color using the Y value (first Y value) of the pre-control image and the Cr value and Cb value (first Cr, Cb value) of the original character color ) To obtain correction data.

次いで、ステップS24では、表示制御部21が、ステップS22で得られた補正データを情報掲示板2の通信部17に向けて送信する。この場合、情報掲示板2の表示制御部18では、補正データに基づいて表示部50に文字等を表示させる。これにより、表示部50が正常(汚れや劣化がない)であれば、システム設定情報に従った表示を行うことができると考えられる。なお、通信部17は、補正データを受け取った場合に、補正データを受け取ったことを通知する受信信号を制御装置4の表示状態取得部22に向けて送信する。   Next, in step S24, the display control unit 21 transmits the correction data obtained in step S22 toward the communication unit 17 of the information bulletin board 2. In this case, the display control unit 18 of the information bulletin board 2 displays characters and the like on the display unit 50 based on the correction data. Thus, if the display unit 50 is normal (no dirt or deterioration), it is considered that display according to the system setting information can be performed. When receiving the correction data, the communication unit 17 transmits a reception signal notifying that the correction data has been received to the display state acquisition unit 22 of the control device 4.

次いで、ステップS26では、表示状態取得部22が、情報掲示板2の通信部17から受信信号を受け取るまで待機し、受け取った段階で、図5のステップS30に移行する。   Next, in step S26, the display state acquisition unit 22 waits until it receives a reception signal from the communication unit 17 of the information bulletin board 2, and when it is received, the process proceeds to step S30 in FIG.

ステップS30に移行すると、ステップS14と同様、表示状態取得部22は、撮像装置3に対して画像の取得命令を送信する。この場合、撮像装置3の撮像部20は、取得命令を受信すると、該取得命令に基づいて情報掲示板2の表示部50の画像(図3参照)を取得し、この画像を通信部17から制御装置4(表示状態取得部22)に出力する。   When the process proceeds to step S <b> 30, the display state acquisition unit 22 transmits an image acquisition command to the imaging device 3 as in step S <b> 14. In this case, when receiving the acquisition command, the imaging unit 20 of the imaging device 3 acquires an image (see FIG. 3) of the display unit 50 of the information bulletin board 2 based on the acquisition command, and controls this image from the communication unit 17. It outputs to the apparatus 4 (display state acquisition part 22).

次いで、ステップS32では、ステップS16と同様、表示状態取得部22は、撮像装置3から出力された画像を取得する。なお、以下においては、ステップS16で表示状態取得部22が取得した画像を「制御後画像」とも呼ぶものとする。表示状態取得部22は、取得した画像を補正値判定部24に受け渡す。   Next, in step S32, as in step S16, the display state acquisition unit 22 acquires an image output from the imaging device 3. In the following, the image acquired by the display state acquisition unit 22 in step S16 is also referred to as a “post-control image”. The display state acquisition unit 22 passes the acquired image to the correction value determination unit 24.

次いで、ステップS34では、補正値判定部24は、制御後画像の各ブロック51〜54のそれぞれから文字の画素の代表的な1点を抽出し、その画素のRGB値を第4のRGB値として取得する。   Next, in step S34, the correction value determination unit 24 extracts one representative point of the character pixel from each of the blocks 51 to 54 of the post-control image, and uses the RGB value of the pixel as the fourth RGB value. get.

次いで、ステップS36では、第4のRGB値と、同一ブロックの代表的な1点の第3のRGB値とを比較し、第4のRGB値が異常であるか否かを判断する。この場合、例えば、第4のRGB値と第3のRGB値において、R値の差の絶対値、G値の差の絶対値、B値の差の絶対値を算出し、これらの合計値が所定の閾値mを超えているか否かにより、第4のRGB値が異常であるか否かを判断する。閾値mは例えば5とすることができる。なお、本ステップは、表示部50が正常であるか、異常(汚れやLEDの劣化が生じている)であるかを判定する処理であるといえる。   Next, in step S36, the fourth RGB value is compared with one representative third RGB value of the same block to determine whether or not the fourth RGB value is abnormal. In this case, for example, in the fourth RGB value and the third RGB value, the absolute value of the difference between the R values, the absolute value of the difference between the G values, and the absolute value of the difference between the B values are calculated. It is determined whether or not the fourth RGB value is abnormal depending on whether or not the predetermined threshold value m is exceeded. The threshold value m can be set to 5, for example. In addition, it can be said that this step is a process for determining whether the display unit 50 is normal or abnormal (dirt or LED deterioration occurs).

ステップS36の判断が否定された場合、すなわち、第4のRGB値が正常であった場合には、ステップS46に移行し、補正値判定部24は、表示部50が正常である旨を出力装置15を介して出力(表示等)する。   If the determination in step S36 is negative, that is, if the fourth RGB value is normal, the process proceeds to step S46, and the correction value determination unit 24 indicates that the display unit 50 is normal. 15 for output (display, etc.).

一方、ステップS36の判断が肯定された場合、すなわち、第4のRGB値が異常であった場合には、ステップS38に移行する。ステップS38に移行すると、補正値判定部24は、各ブロックの代表的な1点の第4のRGB値を、上記の式(1)〜(3)を用いてYCrCb値に変換する。なお、このステップS38において得られたCr値及びCb値を、「第2のCr値」及び「第2のCb値」と呼ぶものとする。   On the other hand, if the determination in step S36 is affirmative, that is, if the fourth RGB value is abnormal, the process proceeds to step S38. In step S38, the correction value determination unit 24 converts the representative fourth RGB value of each point of each block into a YCrCb value using the above equations (1) to (3). The Cr value and the Cb value obtained in step S38 are referred to as “second Cr value” and “second Cb value”.

次いで、ステップS40では、各ブロックの代表的な1点の第4のRGB値に基づくCrCb値(第2のCr値、Cb値)と、同一点の第1のRGB値に基づくCrCb値(第1のCr値、Cb値)の差の絶対値が閾値nよりも大きいか否かを判断する。なお、閾値nとしては、類似色に分類されるための条件として、例えばn=5を採用することができる。ここで、第4のRGB値として、図6の4行目のRGB値が得られ、第2のCr値、Cb値として、35.91、−46.82が得られたとする。   Next, in step S40, a CrCb value (second Cr value, Cb value) based on the fourth RGB value of one representative point of each block and a CrCb value (first value) based on the first RGB value of the same point. It is determined whether the absolute value of the difference between the Cr value and the Cb value of 1 is greater than the threshold value n. As the threshold value n, for example, n = 5 can be adopted as a condition for classification into similar colors. Here, it is assumed that the RGB value of the fourth row in FIG. 6 is obtained as the fourth RGB value, and 35.91 and −46.82 are obtained as the second Cr value and Cb value.

この場合、
|第1のCr値−第2のCr値|=|8.10−35.91|
=27.81 …(7)
|第1のCb値−第2のCb値|=|−50.20−(−46.82)|
=3.38 …(8)
となる。従って、上式(7)の結果、Cr値の差の絶対値が閾値n=5を超えているので、ステップS40の判断は肯定されることになる。ステップS40の判断が肯定されると、ステップS42に移行し、補正値判定部24は、表示部50が汚れていると判定する。そして、次のステップS46では、補正値判定部24は、判定結果(表示部50の汚れ)を出力装置15を介して出力(表示等)する。
in this case,
| First Cr Value−Second Cr Value | = | 8.10−35.91 |
= 27.81 (7)
| First Cb value−Second Cb value | = | −50.20 − (− 46.82) |
= 3.38 (8)
It becomes. Accordingly, as a result of the above equation (7), since the absolute value of the difference in Cr value exceeds the threshold value n = 5, the determination in step S40 is affirmed. When the determination in step S40 is affirmed, the process proceeds to step S42, and the correction value determination unit 24 determines that the display unit 50 is dirty. In the next step S46, the correction value determination unit 24 outputs (displays, etc.) the determination result (dirt of the display unit 50) via the output device 15.

一方、ステップS40の判断が否定された場合、ステップS44に移行し、補正値判定部24は、表示部50は汚れていないため、表示部50が有するLEDが劣化(故障)していると判定する。そして、次のステップS46では、補正値判定部24は、判定結果(表示部50の劣化)を出力装置15を介して出力(表示等)する。なお、ステップS46の処理が行われた後は、図4、図5の全処理を終了する。   On the other hand, if the determination in step S40 is negative, the process proceeds to step S44, and the correction value determination unit 24 determines that the LED included in the display unit 50 has deteriorated (failed) because the display unit 50 is not dirty. To do. In the next step S46, the correction value determination unit 24 outputs (displays, etc.) the determination result (deterioration of the display unit 50) via the output device 15. In addition, after the process of step S46 is performed, the whole process of FIG. 4, FIG. 5 is complete | finished.

ここで、図7には、LEDが劣化した場合のRGB値、YCrCb値に関する表(図6に対応する表)が示されている。図7に示すように、LEDが劣化した場合には、第4のRGB値が第3のRGB値と比べて異常である(閾値m=5を超えている)(ステップS36:肯定)が、第2のCr値、Cb値と、第1のCr値、Cb値との差の絶対値は閾値nより小さい(ステップS40:否定)。従って、図7の場合には、ステップS44において、LEDの劣化と判定されることになる。   Here, FIG. 7 shows a table regarding RGB values and YCrCb values when the LED deteriorates (a table corresponding to FIG. 6). As shown in FIG. 7, when the LED is deteriorated, the fourth RGB value is abnormal compared to the third RGB value (threshold value m = 5 is exceeded) (step S36: affirmative) The absolute value of the difference between the second Cr value and Cb value and the first Cr value and Cb value is smaller than the threshold value n (No at Step S40). Therefore, in the case of FIG. 7, it is determined in step S44 that the LED is deteriorated.

なお、本実施形態では、ブロック51〜54ごとに代表的な画素を抽出して処理をしているので、各ブロック51〜54ごとに、正常か、汚れているか、LEDが劣化しているかを判定することができる。   In the present embodiment, since representative pixels are extracted and processed for each of the blocks 51 to 54, whether each block 51 to 54 is normal, dirty, or the LED is deteriorated. Can be determined.

なお、図4、図5の処理は、情報管理装置5に対して外部の装置から新しいシステム設定情報が入力されるごとに実行するものとする。ただし、太陽光による影響を受けやすい情報掲示板2については、新しいシステム設定情報が入力されなくても、所定時間ごと(例えば数十分ごと)に図4、図5の処理を実行するようにしても良い。   4 and 5 are executed each time new system setting information is input to the information management apparatus 5 from an external apparatus. However, with respect to the information bulletin board 2 that is easily affected by sunlight, even if new system setting information is not input, the processes of FIGS. 4 and 5 are executed at predetermined time intervals (for example, every few tens of minutes). Also good.

なお、これまでの説明から分かるように、本実施形態の文字色補正部23は、第1算出部、第2算出部及び第3算出部の一例として挙げられる。また、補正値判定部24は、第4算出部、第1判定部、検知部及び第2判定部の一例として挙げられる。   As can be seen from the above description, the character color correction unit 23 of the present embodiment is an example of a first calculation unit, a second calculation unit, and a third calculation unit. The correction value determination unit 24 is an example of a fourth calculation unit, a first determination unit, a detection unit, and a second determination unit.

以上、詳細に説明したように、本実施形態によると、文字色補正部23は、情報掲示板2の表示部50に表示させる文字又は図形の色を示すRGB値(第1のRGB値)を、文字又は図形の色のCr値及びCb値(第1のCr値、Cb値)に変換し(S18)、第1のRGB値に基づいて表示部50に文字又は図形を表示させ(S10)、撮像装置3で表示部50を撮像した画像(制御前画像)中の文字又は図形の色を示すRGB値である第2のRGB値を、Y値(第1のY値)に変換し(S20)、第1のY値と、第1のCr値、Cb値とから、文字又は図形の色を示すRGB値である第3のRGB値(補正データ)を作成する(S22)。そして、補正値判定部24は、第3のRGB値に基づいて表示部50に文字又は図形を表示させ(S24)、撮像装置3で表示部50を撮像した画像中の文字又は図形の色を示すRGB値(第4のRGB値)を、画像中の文字又は図形のCr値、Cb値(第2のCr値、Cb値)に変換し(S38)、第2のCr値、Cb値と、第1のCr値、Cb値との比較結果に基づいて、表示部50が汚れているかどうかを判定する(S40)。このように、本実施形態では、表示部50において第1のRGB値で文字や図形が表示されるように表示部50を制御した後の第2のCr値、Cb値を、第1のRGB値を変換して得られる第1のCr、Cb値と比較し、表示部50が汚れているかどうかを判定するので、表示部50が太陽光や照明などの影響を受けている状況下においても、表示部50の視認性が悪化した原因を正しく特定することができる。また、表示部50が正常の場合であっても、表示部50の周囲の環境の明るさに合わせて表示色を調整するので、本来意図していた色、又は意図していた色に近い色で、文字や図形を運転者に認識させることが可能になる。この結果、情報の重要度を運転者に確実に伝達することが可能になる。   As described above in detail, according to the present embodiment, the character color correction unit 23 determines the RGB value (first RGB value) indicating the color of the character or graphic displayed on the display unit 50 of the information bulletin board 2 as follows. It converts into the Cr value and Cb value (1st Cr value, Cb value) of the color of a character or a figure (S18), a character or a figure is displayed on the display part 50 based on a 1st RGB value (S10), A second RGB value, which is an RGB value indicating the color of a character or a figure in an image (pre-control image) obtained by imaging the display unit 50 with the imaging device 3, is converted into a Y value (first Y value) (S20). ), A third RGB value (correction data), which is an RGB value indicating the color of the character or figure, is created from the first Y value, the first Cr value, and the Cb value (S22). Then, the correction value determination unit 24 displays characters or figures on the display unit 50 based on the third RGB values (S24), and changes the color of the characters or figures in the image obtained by imaging the display unit 50 with the imaging device 3. The indicated RGB value (fourth RGB value) is converted into the Cr value and Cb value (second Cr value, Cb value) of the character or figure in the image (S38), and the second Cr value, Cb value and Based on the comparison result with the first Cr value and the Cb value, it is determined whether or not the display unit 50 is dirty (S40). As described above, in the present embodiment, the second Cr value and the Cb value after the display unit 50 is controlled so that characters and figures are displayed with the first RGB value on the display unit 50 are used as the first RGB value. Since the display unit 50 is compared with the first Cr and Cb values obtained by converting the values to determine whether or not the display unit 50 is dirty, the display unit 50 is also affected by sunlight or lighting. The cause of the deterioration in the visibility of the display unit 50 can be correctly specified. Even when the display unit 50 is normal, the display color is adjusted according to the brightness of the environment around the display unit 50, so that the color originally intended or a color close to the intended color is used. Thus, it becomes possible to make the driver recognize characters and figures. As a result, the importance of information can be reliably transmitted to the driver.

また、本実施形態では、補正値判定部24が、第3のRGB値と、第4のRGB値との比較結果に基づいて、表示部50の異常を検知する処理(S36)を実行し、表示部50が異常であり、かつ表示部50が汚れていないと判定した場合に、表示部50のLEDの劣化と判定する。これにより、表示部50が太陽光や照明などの影響を受けている状況下においても、表示部50のLEDの劣化が生じているかどうかを精度良く判定することができる。このように、本実施形態の表示システムを用いることで、高速道路を管理する管理者は、判定結果に基づいて、適切なタイミングで、情報掲示板2を清掃したり、メンテナンスを行うことが可能となる。また、情報掲示板2の清掃や、メンテナンスにより、運転者による情報掲示板2の視認性を向上することができる。   In the present embodiment, the correction value determination unit 24 executes a process (S36) of detecting an abnormality of the display unit 50 based on the comparison result between the third RGB value and the fourth RGB value. When it is determined that the display unit 50 is abnormal and the display unit 50 is not dirty, it is determined that the LED of the display unit 50 has deteriorated. Thereby, even in a situation where the display unit 50 is affected by sunlight or illumination, it can be accurately determined whether or not the LED of the display unit 50 has deteriorated. Thus, by using the display system of the present embodiment, an administrator who manages the expressway can clean the information bulletin board 2 and perform maintenance at an appropriate timing based on the determination result. Become. Further, the visibility of the information bulletin board 2 by the driver can be improved by cleaning and maintenance of the information bulletin board 2.

なお、上記実施形態では、ステップS36の処理をステップS40が否定された後に行うこととしても良い。この場合、ステップS36の判断が肯定された場合に、ステップS44に移行し、否定された場合にステップS46に移行するようにすればよい。   In the above embodiment, the process of step S36 may be performed after step S40 is denied. In this case, when the determination in step S36 is affirmed, the process proceeds to step S44, and when the determination is negative, the process proceeds to step S46.

なお、上記実施形態では、情報掲示板2の表示部50でブロック51〜54毎に文字色を補正し、表示部50が汚れているかどうかを判定する場合について説明したが、これに限られるものではない。例えば、画素毎に文字色を補正し、表示部50が汚れているかどうかを判定することとしてもよい。   In the above-described embodiment, the case where the display unit 50 of the information bulletin board 2 corrects the character color for each of the blocks 51 to 54 and determines whether or not the display unit 50 is dirty has been described. However, the present invention is not limited to this. Absent. For example, it is good also as correcting the character color for every pixel and determining whether the display part 50 is dirty.

なお、上記実施形態の表示システム1の制御対象は、高速道路に設置された情報掲示板2に限定されるものではない。例えば、一般道の情報掲示板であっても良いし、その他の屋外に設置される情報掲示板でもよい。   Note that the control target of the display system 1 of the above embodiment is not limited to the information bulletin board 2 installed on the expressway. For example, it may be an information bulletin board on a general road, or other information bulletin board installed outdoors.

なお、上記の処理機能は、コンピュータによって実現することができる。その場合、処理装置が有すべき機能の処理内容を記述したプログラムが提供される。そのプログラムをコンピュータで実行することにより、上記処理機能がコンピュータ上で実現される。処理内容を記述したプログラムは、コンピュータで読み取り可能な記録媒体(ただし、搬送波は除く)に記録しておくことができる。   The above processing functions can be realized by a computer. In that case, a program describing the processing contents of the functions that the processing apparatus should have is provided. By executing the program on a computer, the above processing functions are realized on the computer. The program describing the processing contents can be recorded on a computer-readable recording medium (except for a carrier wave).

プログラムを流通させる場合には、例えば、そのプログラムが記録されたDVD(Digital Versatile Disc)、CD−ROM(Compact Disc Read Only Memory)などの可搬型記録媒体の形態で販売される。また、プログラムをサーバコンピュータの記憶装置に格納しておき、ネットワークを介して、サーバコンピュータから他のコンピュータにそのプログラムを転送することもできる。   When the program is distributed, for example, it is sold in the form of a portable recording medium such as a DVD (Digital Versatile Disc) or a CD-ROM (Compact Disc Read Only Memory) on which the program is recorded. It is also possible to store the program in a storage device of a server computer and transfer the program from the server computer to another computer via a network.

プログラムを実行するコンピュータは、例えば、可搬型記録媒体に記録されたプログラムもしくはサーバコンピュータから転送されたプログラムを、自己の記憶装置に格納する。そして、コンピュータは、自己の記憶装置からプログラムを読み取り、プログラムに従った処理を実行する。なお、コンピュータは、可搬型記録媒体から直接プログラムを読み取り、そのプログラムに従った処理を実行することもできる。また、コンピュータは、サーバコンピュータからプログラムが転送されるごとに、逐次、受け取ったプログラムに従った処理を実行することもできる。   The computer that executes the program stores, for example, the program recorded on the portable recording medium or the program transferred from the server computer in its own storage device. Then, the computer reads the program from its own storage device and executes processing according to the program. The computer can also read the program directly from the portable recording medium and execute processing according to the program. Further, each time the program is transferred from the server computer, the computer can sequentially execute processing according to the received program.

上述した実施形態は本発明の好適な実施の例である。但し、これに限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変形実施可能である。   The above-described embodiment is an example of a preferred embodiment of the present invention. However, the present invention is not limited to this, and various modifications can be made without departing from the scope of the present invention.

なお、以上の実施形態の説明に関して、更に以下の付記を開示する。
(付記1) 情報掲示板の表示部に表示させる文字又は図形の色を示すRGB値である第1のRGB値から、文字又は図形の色のCr値及びCb値である第1のCr値及び第1のCb値を算出し、
前記第1のRGB値に基づいて前記表示部に前記文字又は図形を表示させ、撮像装置で前記表示部を撮像した画像中の前記文字又は図形の色を示すRGB値である第2のRGB値から、前記画像中の前記文字又は図形のY値である第1のY値を算出し、
前記第1のY値と、前記第1のCr値と、前記第1のCb値とから、前記文字又は図形の色を示すRGB値である第3のRGB値を算出し、
前記第3のRGB値に基づいて前記表示部に前記文字又は図形を表示させ、前記撮像装置で前記表示部を撮像した画像中の前記文字又は図形の色を示すRGB値である第4のRGB値から、前記画像中の前記文字又は図形のCr値及びCb値である第2のCr値及び第2のCb値を算出し、
前記第2のCr値及び前記第2のCb値と、前記第1のCr値及び前記第1のCb値との比較結果に基づいて、前記表示部が汚れているかどうかを判定する、
処理をコンピュータが実行することを特徴とする表示部状態判定方法。
(付記2) 前記第3のRGB値と、前記第4のRGB値との比較結果に基づいて、前記表示部の異常を検知する処理と、
前記表示部の異常を検知し、かつ前記判定する処理で前記表示部が汚れていないと判定された場合に、前記表示部の故障と判定する処理を前記コンピュータが実行することを特徴とする付記1に記載の表示部状態判定方法。
(付記3) 情報掲示板の表示部に表示させる文字又は図形の色を示すRGB値である第1のRGB値から、文字又は図形の色のCr値及びCb値である第1のCr値及び第1のCb値を算出し、
前記第1のRGB値に基づいて前記表示部に前記文字又は図形を表示させ、撮像装置で前記表示部を撮像した画像中の前記文字又は図形の色を示すRGB値である第2のRGB値から、前記画像中の前記文字又は図形のY値である第1のY値を算出し、
前記第1のY値と、前記第1のCr値と、前記第1のCb値とから、前記文字又は図形の色を示すRGB値である第3のRGB値を算出し、
前記第3のRGB値に基づいて前記表示部に前記文字又は図形を表示させ、前記撮像装置で前記表示部を撮像した画像中の前記文字又は図形の色を示すRGB値である第4のRGB値から、前記画像中の前記文字又は図形のCr値及びCb値である第2のCr値及び第2のCb値を算出し、
前記第2のCr値及び前記第2のCb値と、前記第1のCr値及び前記第1のCb値との比較結果に基づいて、前記表示部が汚れているかどうかを判定する、
処理をコンピュータに実行させることを特徴とする表示部状態判定プログラム。
(付記4) 前記第3のRGB値と、前記第4のRGB値との比較結果に基づいて、前記表示部の異常を検知する処理と、
前記表示部の異常を検知し、かつ前記判定する処理で前記表示部が汚れていないと判定された場合に、前記表示部の故障と判定する処理を前記コンピュータに実行させることを特徴とする付記3に記載の表示部状態判定プログラム。
(付記5) 情報掲示板の表示部に表示させる文字又は図形の色を示すRGB値である第1のRGB値から、文字又は図形の色のCr値及びCb値である第1のCr値及び第1のCb値を算出する第1算出部と、
前記第1のRGB値に基づいて前記表示部に前記文字又は図形を表示させ、撮像装置で前記表示部を撮像した画像中の前記文字又は図形の色を示すRGB値である第2のRGB値から、前記画像中の前記文字又は図形のY値である第1のY値を算出する第2算出部と、
前記第1のY値と、前記第1のCr値と、前記第1のCb値とから、前記文字又は図形の色を示すRGB値である第3のRGB値を算出する第3算出部と、
前記第3のRGB値に基づいて前記表示部に前記文字又は図形を表示させ、前記撮像装置で前記表示部を撮像した画像中の前記文字又は図形の色を示すRGB値である第4のRGB値から、前記画像中の前記文字又は図形のCr値及びCb値である第2のCr値及び第2のCb値を算出する第4算出部、
前記第2のCr値及び前記第2のCb値と、前記第1のCr値及び前記第1のCb値との比較結果に基づいて、前記表示部が汚れているかどうかを判定する第1判定部と、
を備える表示部状態判定装置。
(付記6) 前記第3のRGB値と、前記第4のRGB値との比較結果に基づいて、前記表示部の異常を検知する検知部と、
前記検知部において前記表示部の異常が検知され、かつ前記第1判定部において前記表示部が汚れていないと判定された場合に、前記表示部の故障と判定する第2判定部と、
を備える付記5に記載の表示部状態判定装置。
(付記7) 表示部を有する情報掲示板と、
前記表示部を撮像する撮像装置と、
付記5又は6に記載の表示部状態判定装置と、を備える表示システム。
In addition, the following additional remarks are disclosed regarding description of the above embodiment.
(Supplementary Note 1) From the first RGB value, which is the RGB value indicating the color of the character or graphic displayed on the display section of the information bulletin board, the first Cr value, which is the Cr value and Cb value of the character or graphic color, and the first 1 Cb value is calculated,
A second RGB value that is an RGB value indicating the color of the character or figure in an image obtained by displaying the character or figure on the display unit based on the first RGB value and picking up the display unit with an imaging device To calculate a first Y value that is a Y value of the character or graphic in the image,
From the first Y value, the first Cr value, and the first Cb value, a third RGB value that is an RGB value indicating the color of the character or figure is calculated.
The fourth RGB which is an RGB value indicating the color of the character or figure in the image obtained by displaying the character or figure on the display unit based on the third RGB value and imaging the display unit by the imaging device From the value, a second Cr value and a second Cb value, which are the Cr value and Cb value of the character or graphic in the image, are calculated,
Determining whether the display section is dirty based on a comparison result between the second Cr value and the second Cb value and the first Cr value and the first Cb value;
A display unit state determination method, wherein a computer executes a process.
(Additional remark 2) The process which detects abnormality of the said display part based on the comparison result of the said 3rd RGB value and the said 4th RGB value,
The computer executes a process of determining that the display unit is faulty when an abnormality of the display unit is detected and the determination unit determines that the display unit is not dirty. The display unit state determination method according to claim 1.
(Supplementary Note 3) From the first RGB value that is the RGB value indicating the color of the character or graphic displayed on the display unit of the information bulletin board, the first Cr value and the first Cr value that are the Cr value and Cb value of the character or graphic color 1 Cb value is calculated,
A second RGB value that is an RGB value indicating the color of the character or figure in an image obtained by displaying the character or figure on the display unit based on the first RGB value and picking up the display unit with an imaging device To calculate a first Y value that is a Y value of the character or graphic in the image,
From the first Y value, the first Cr value, and the first Cb value, a third RGB value that is an RGB value indicating the color of the character or figure is calculated.
The fourth RGB which is an RGB value indicating the color of the character or figure in the image obtained by displaying the character or figure on the display unit based on the third RGB value and imaging the display unit by the imaging device From the value, a second Cr value and a second Cb value, which are the Cr value and Cb value of the character or graphic in the image, are calculated,
Determining whether the display section is dirty based on a comparison result between the second Cr value and the second Cb value and the first Cr value and the first Cb value;
A display unit state determination program which causes a computer to execute processing.
(Additional remark 4) The process which detects abnormality of the said display part based on the comparison result of the said 3rd RGB value and the said 4th RGB value,
An additional note that causes the computer to execute a process of determining that the display unit is faulty when an abnormality of the display unit is detected and the determination unit determines that the display unit is not dirty. The display unit state determination program according to 3.
(Additional remark 5) From the 1st RGB value which is the RGB value which shows the color of the character or the figure which is displayed on the display section of the information bulletin board, the 1st Cr value which is the Cr value and the Cb value of the color of the character or the figure A first calculation unit for calculating a Cb value of 1;
A second RGB value that is an RGB value indicating the color of the character or figure in an image obtained by displaying the character or figure on the display unit based on the first RGB value and picking up the display unit with an imaging device A second calculation unit that calculates a first Y value that is a Y value of the character or graphic in the image;
A third calculator that calculates a third RGB value, which is an RGB value indicating the color of the character or graphic, from the first Y value, the first Cr value, and the first Cb value; ,
The fourth RGB which is an RGB value indicating the color of the character or figure in the image obtained by displaying the character or figure on the display unit based on the third RGB value and imaging the display unit by the imaging device A fourth calculation unit for calculating a second Cr value and a second Cb value, which are the Cr value and Cb value of the character or graphic in the image, from the value;
A first determination for determining whether or not the display unit is dirty based on a comparison result between the second Cr value and the second Cb value and the first Cr value and the first Cb value. And
A display unit state determination device.
(Supplementary Note 6) Based on a comparison result between the third RGB value and the fourth RGB value, a detection unit that detects an abnormality in the display unit;
A second determination unit that determines that the display unit is defective when the detection unit detects an abnormality of the display unit and the first determination unit determines that the display unit is not soiled;
The display part state determination apparatus of Additional remark 5 provided with these.
(Appendix 7) An information bulletin board having a display unit;
An imaging device for imaging the display unit;
A display system comprising the display unit state determination device according to appendix 5 or 6.

1 表示システム
2 情報掲示板
3 撮像装置
4 制御装置(表示部状態判定装置)
23 文字色補正部(第1算出部、第2算出部、第3算出部)
24 補正値判定部(第4算出部、第1判定部、検知部、第2判定部)
50 表示部
DESCRIPTION OF SYMBOLS 1 Display system 2 Information bulletin board 3 Imaging device 4 Control apparatus (display part state determination apparatus)
23 character color correction unit (first calculation unit, second calculation unit, third calculation unit)
24 correction value determination unit (fourth calculation unit, first determination unit, detection unit, second determination unit)
50 display section

Claims (5)

情報掲示板の表示部に表示させる文字又は図形の色を示すRGB値である第1のRGB値から、文字又は図形の色のCr値及びCb値である第1のCr値及び第1のCb値を算出し、
前記第1のRGB値に基づいて前記表示部に前記文字又は図形を表示させ、撮像装置で前記表示部を撮像した画像中の前記文字又は図形の色を示すRGB値である第2のRGB値から、前記画像中の前記文字又は図形のY値である第1のY値を算出し、
前記第1のY値と、前記第1のCr値と、前記第1のCb値とから、前記文字又は図形の色を示すRGB値である第3のRGB値を算出し、
前記第3のRGB値に基づいて前記表示部に前記文字又は図形を表示させ、前記撮像装置で前記表示部を撮像した画像中の前記文字又は図形の色を示すRGB値である第4のRGB値から、前記画像中の前記文字又は図形のCr値及びCb値である第2のCr値及び第2のCb値を算出し、
前記第2のCr値及び前記第2のCb値と、前記第1のCr値及び前記第1のCb値との比較結果に基づいて、前記表示部が汚れているかどうかを判定する、
処理をコンピュータが実行することを特徴とする表示部状態判定方法。
From the first RGB value that is the RGB value indicating the color of the character or graphic displayed on the display unit of the information bulletin board, the first Cr value and the first Cb value that are the Cr value and Cb value of the character or graphic color To calculate
A second RGB value that is an RGB value indicating the color of the character or figure in an image obtained by displaying the character or figure on the display unit based on the first RGB value and picking up the display unit with an imaging device To calculate a first Y value that is a Y value of the character or graphic in the image,
From the first Y value, the first Cr value, and the first Cb value, a third RGB value that is an RGB value indicating the color of the character or figure is calculated.
The fourth RGB which is an RGB value indicating the color of the character or figure in the image obtained by displaying the character or figure on the display unit based on the third RGB value and imaging the display unit by the imaging device From the value, a second Cr value and a second Cb value, which are the Cr value and Cb value of the character or graphic in the image, are calculated,
Determining whether the display section is dirty based on a comparison result between the second Cr value and the second Cb value and the first Cr value and the first Cb value;
A display unit state determination method, wherein a computer executes a process.
前記第3のRGB値と、前記第4のRGB値との比較結果に基づいて、前記表示部の異常を検知する処理と、
前記表示部の異常を検知し、かつ前記判定する処理で前記表示部が汚れていないと判定された場合に、前記表示部の故障と判定する処理を前記コンピュータが実行することを特徴とする請求項1に記載の表示部状態判定方法。
A process of detecting an abnormality in the display unit based on a comparison result between the third RGB value and the fourth RGB value;
The computer executes a process of determining that the display unit is faulty when an abnormality of the display unit is detected and the determination unit determines that the display unit is not dirty. Item 4. The display unit state determination method according to Item 1.
情報掲示板の表示部に表示させる文字又は図形の色を示すRGB値である第1のRGB値から、文字又は図形の色のCr値及びCb値である第1のCr値及び第1のCb値を算出し、
前記第1のRGB値に基づいて前記表示部に前記文字又は図形を表示させ、撮像装置で前記表示部を撮像した画像中の前記文字又は図形の色を示すRGB値である第2のRGB値から、前記画像中の前記文字又は図形のY値である第1のY値を算出し、
前記第1のY値と、前記第1のCr値と、前記第1のCb値とから、前記文字又は図形の色を示すRGB値である第3のRGB値を算出し、
前記第3のRGB値に基づいて前記表示部に前記文字又は図形を表示させ、前記撮像装置で前記表示部を撮像した画像中の前記文字又は図形の色を示すRGB値である第4のRGB値から、前記画像中の前記文字又は図形のCr値及びCb値である第2のCr値及び第2のCb値を算出し、
前記第2のCr値及び前記第2のCb値と、前記第1のCr値及び前記第1のCb値との比較結果に基づいて、前記表示部が汚れているかどうかを判定する、
処理をコンピュータに実行させることを特徴とする表示部状態判定プログラム。
From the first RGB value that is the RGB value indicating the color of the character or graphic displayed on the display unit of the information bulletin board, the first Cr value and the first Cb value that are the Cr value and Cb value of the character or graphic color To calculate
A second RGB value that is an RGB value indicating the color of the character or figure in an image obtained by displaying the character or figure on the display unit based on the first RGB value and picking up the display unit with an imaging device To calculate a first Y value that is a Y value of the character or graphic in the image,
From the first Y value, the first Cr value, and the first Cb value, a third RGB value that is an RGB value indicating the color of the character or figure is calculated.
The fourth RGB which is an RGB value indicating the color of the character or figure in the image obtained by displaying the character or figure on the display unit based on the third RGB value and imaging the display unit by the imaging device From the value, a second Cr value and a second Cb value, which are the Cr value and Cb value of the character or graphic in the image, are calculated,
Determining whether the display section is dirty based on a comparison result between the second Cr value and the second Cb value and the first Cr value and the first Cb value;
A display unit state determination program which causes a computer to execute processing.
情報掲示板の表示部に表示させる文字又は図形の色を示すRGB値である第1のRGB値から、文字又は図形の色のCr値及びCb値である第1のCr値及び第1のCb値を算出する第1算出部と、
前記第1のRGB値に基づいて前記表示部に前記文字又は図形を表示させ、撮像装置で前記表示部を撮像した画像中の前記文字又は図形の色を示すRGB値である第2のRGB値から、前記画像中の前記文字又は図形のY値である第1のY値を算出する第2算出部と、
前記第1のY値と、前記第1のCr値と、前記第1のCb値とから、前記文字又は図形の色を示すRGB値である第3のRGB値を算出する第3算出部と、
前記第3のRGB値に基づいて前記表示部に前記文字又は図形を表示させ、前記撮像装置で前記表示部を撮像した画像中の前記文字又は図形の色を示すRGB値である第4のRGB値から、前記画像中の前記文字又は図形のCr値及びCb値である第2のCr値及び第2のCb値を算出する第4算出部と、
前記第2のCr値及び前記第2のCb値と、前記第1のCr値及び前記第1のCb値との比較結果に基づいて、前記表示部が汚れているかどうかを判定する第1判定部と、
を備える表示部状態判定装置。
From the first RGB value that is the RGB value indicating the color of the character or graphic displayed on the display unit of the information bulletin board, the first Cr value and the first Cb value that are the Cr value and Cb value of the character or graphic color A first calculation unit for calculating
A second RGB value that is an RGB value indicating the color of the character or figure in an image obtained by displaying the character or figure on the display unit based on the first RGB value and picking up the display unit with an imaging device A second calculation unit that calculates a first Y value that is a Y value of the character or graphic in the image;
A third calculator that calculates a third RGB value, which is an RGB value indicating the color of the character or graphic, from the first Y value, the first Cr value, and the first Cb value; ,
The fourth RGB which is an RGB value indicating the color of the character or figure in the image obtained by displaying the character or figure on the display unit based on the third RGB value and imaging the display unit by the imaging device A fourth calculation unit that calculates a second Cr value and a second Cb value that are the Cr value and the Cb value of the character or graphic in the image from the value;
A first determination for determining whether or not the display unit is dirty based on a comparison result between the second Cr value and the second Cb value and the first Cr value and the first Cb value. And
A display unit state determination device.
表示部を有する情報掲示板と、
前記表示部を撮像する撮像装置と、
請求項4に記載の表示部状態判定装置と、を備える表示システム。
An information bulletin board having a display unit;
An imaging device for imaging the display unit;
A display system comprising: the display unit state determination device according to claim 4.
JP2014202323A 2014-09-30 2014-09-30 Display unit state determination method, display unit state determination program, display unit state determination device, and display system Active JP6369268B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014202323A JP6369268B2 (en) 2014-09-30 2014-09-30 Display unit state determination method, display unit state determination program, display unit state determination device, and display system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014202323A JP6369268B2 (en) 2014-09-30 2014-09-30 Display unit state determination method, display unit state determination program, display unit state determination device, and display system

Publications (2)

Publication Number Publication Date
JP2016071747A JP2016071747A (en) 2016-05-09
JP6369268B2 true JP6369268B2 (en) 2018-08-08

Family

ID=55864734

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014202323A Active JP6369268B2 (en) 2014-09-30 2014-09-30 Display unit state determination method, display unit state determination program, display unit state determination device, and display system

Country Status (1)

Country Link
JP (1) JP6369268B2 (en)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005107546A (en) * 1998-07-27 2005-04-21 Ricoh Co Ltd Interactive display apparatus
JP5482817B2 (en) * 2012-02-28 2014-05-07 フリュー株式会社 Photo sticker making apparatus and photo sticker making method
JP6004187B2 (en) * 2013-03-22 2016-10-05 富士通株式会社 Information bulletin board control method, information bulletin board display control apparatus, information bulletin board display control system, and information bulletin board control program

Also Published As

Publication number Publication date
JP2016071747A (en) 2016-05-09

Similar Documents

Publication Publication Date Title
US10255804B2 (en) Method for generating a digital record and roadside unit of a road toll system implementing the method
US9723282B2 (en) In-vehicle imaging device
US20150363668A1 (en) Traffic lane boundary line extraction apparatus and method of extracting traffic lane boundary line
JP4797049B2 (en) Road sign recognition device
JP6243956B2 (en) Information processing system, information processing apparatus, and information processing method
CN111144301A (en) Road pavement defect quick early warning device based on degree of depth learning
WO2020261567A1 (en) Road surface inspection device, road surface inspection method, and program
Mertz et al. City-wide road distress monitoring with smartphones
JP6364565B1 (en) Analysis device, crack detection processing device, and analysis program
US20140125794A1 (en) Vehicle environment monitoring device
US8547430B2 (en) System and method for marking discrepancies in image of object
JP5780979B2 (en) Vehicle state detection device, vehicle behavior detection device, and vehicle state detection method
JP5562473B1 (en) Aircraft failure light failure detection system and failure detection method
EP2945138B1 (en) Method and apparatus for providing information data about entities along a route taken by a vehicle
JP6369268B2 (en) Display unit state determination method, display unit state determination program, display unit state determination device, and display system
JP6004187B2 (en) Information bulletin board control method, information bulletin board display control apparatus, information bulletin board display control system, and information bulletin board control program
JP2019121356A (en) Interference region detection apparatus and method, and electronic apparatus
JP2010286995A (en) Image processing system for vehicle
CN116681652A (en) Bolt loosening detection method and device, electronic equipment and storage medium
US20130039576A1 (en) Method and device for analyzing an image of an image recording device for a vehicle
CN110688979A (en) Illegal vehicle tracking method and device
CN102722724B (en) Vehicle-mounted night view system having target identification function and target identification method thereof
KR100846167B1 (en) Apparatus and method for displaying output information of variable message sign board
KR102178202B1 (en) Method and apparatus for detecting traffic light
JP4987819B2 (en) Traffic monitoring device and traffic monitoring method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170605

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180528

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180612

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180625

R150 Certificate of patent or registration of utility model

Ref document number: 6369268

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150