JP2020177058A - Display device and method for determining fault of icon - Google Patents

Display device and method for determining fault of icon Download PDF

Info

Publication number
JP2020177058A
JP2020177058A JP2019077498A JP2019077498A JP2020177058A JP 2020177058 A JP2020177058 A JP 2020177058A JP 2019077498 A JP2019077498 A JP 2019077498A JP 2019077498 A JP2019077498 A JP 2019077498A JP 2020177058 A JP2020177058 A JP 2020177058A
Authority
JP
Japan
Prior art keywords
image data
icon
display device
background
failure
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019077498A
Other languages
Japanese (ja)
Other versions
JP7317442B2 (en
Inventor
小幡　喜重郎
Kijuro Obata
喜重郎 小幡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alpine Electronics Inc
Original Assignee
Alpine Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alpine Electronics Inc filed Critical Alpine Electronics Inc
Priority to JP2019077498A priority Critical patent/JP7317442B2/en
Publication of JP2020177058A publication Critical patent/JP2020177058A/en
Application granted granted Critical
Publication of JP7317442B2 publication Critical patent/JP7317442B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Controls And Circuits For Display Device (AREA)
  • Instrument Panels (AREA)

Abstract

To provide a display device and a method for determining fault of an icon each of which enables fault of an icon of an alarm lamp etc. to be accurately diagnosed.SOLUTION: An in-car display device 100 according to the present invention comprises: a background image generation unit 110 generating a background image; an icon image generation unit 120 generating the image data of an icon; a synthesis unit 130 synthesizing the generated icon image data and background data; a correct-answer icon data storage unit 170 storing correct-answer icon image data for reference; an icon image cutout unit 140 cutting out icon image data from the synthesized image data; a correlation calculation unit 180 calculating a correlation between the cut-out icon image data and the correct-answer icon image data for reference; and a comparison unit 190 determining a fault of the cut-out icon image data on the basis of the calculated correlation output value.SELECTED DRAWING: Figure 3

Description

本発明は、アイコンの故障判定に関し、特に、車両のインスツルメンツパネル等に表示される警告灯のアイコンの故障判定に関する。 The present invention relates to a failure determination of an icon, and more particularly to a failure determination of a warning light icon displayed on an instrument panel or the like of a vehicle.

インスツルメンツパネル内に配置された速度計、タコメータ、燃料計などの針式メータを、液晶パネルに置き換える車両が増えつつある。このようなメータパネル内の警告灯表示に関する画像データは、機能安全対象となり、つまり、間違った表示は許されず、アイコンの画像データには故障診断が求められる。画像データの診断に関し、例えば、特許文献１は、入力画像と出力画像とを比較することで異常画像を迅速に検知する方法を開示している。また、特許文献２は、印刷用の画像処理が施された画像データと、この画像データを印刷したときの画像の読取りデータとを比較することで印刷された画像の良否を判定する方法を開示している。 An increasing number of vehicles are replacing needle-type meters such as speedometers, tachometers, and fuel gauges located inside the instruments panel with liquid crystal panels. The image data related to the warning light display in such a meter panel is subject to functional safety, that is, erroneous display is not allowed, and failure diagnosis is required for the image data of the icon. Regarding the diagnosis of image data, for example, Patent Document 1 discloses a method of quickly detecting an abnormal image by comparing an input image and an output image. Further, Patent Document 2 discloses a method of determining the quality of a printed image by comparing the image data subjected to image processing for printing with the read data of the image when the image data is printed. doing.

特開２００４−３４５０９１号公報Japanese Unexamined Patent Publication No. 2004-345991 特開２０１３−４６０９２号公報Japanese Unexamined Patent Publication No. 2013-46092

図１に示すように、車両のインスツルメンツパネルＰには、車両の走行や運転操作等に関する異常や故障（例えば、シートベルト着用、ガソリン残量、半ドアなど）を警告するための警告灯が表示される。インスツルメンツパネルＰを液晶パネルで構成する場合、警告灯は、法令や規格で決められた固定のアイコンの画像データを液晶ドットパターンで表示することにより行われる。警告灯の故障判定は、警告灯のアイコンが液晶パネルに正しく表示されているか否かを検査することが一般的であり、例えば、チェックサムやＣＲＣなどの検査符号を用いて、アイコンの画像データのビット誤りの有無を判定している。正しいアイコンの画像データから生成されたＣＲＣと、描画処理後のアイコンの画像データから生成されたＣＲＣとを比較し、両者が異なる場合にはビット誤りがあると判定する。ビット誤りがあると判定された場合には、例えば、液晶パネル全体を黒画面にする等により、運転者にその故障の存在を明確に伝えるような実装が行われる。 As shown in FIG. 1, on the instrument panel P of the vehicle, a warning light for warning of an abnormality or failure (for example, wearing a seatbelt, remaining gasoline, half-door, etc.) related to the running or driving operation of the vehicle is displayed. Will be done. When the instruments panel P is composed of a liquid crystal panel, the warning light is performed by displaying the image data of a fixed icon determined by a law or a standard in a liquid crystal dot pattern. In the failure judgment of the warning light, it is common to inspect whether or not the warning light icon is correctly displayed on the liquid crystal panel. For example, the image data of the icon is used by using an inspection code such as a checksum or CRC. It is judged whether or not there is a bit error in. The CRC generated from the image data of the correct icon is compared with the CRC generated from the image data of the icon after the drawing process, and if they are different, it is determined that there is a bit error. When it is determined that there is a bit error, the implementation is performed so as to clearly inform the driver of the existence of the failure, for example, by making the entire liquid crystal panel a black screen.

ところが、最近のメータ類のパネル表示では、柔軟なデザインが求められ、警告灯の背面に、デザインが描画されるケースが出てきた。図２（Ａ）は、黒画面の背景に警告灯のアイコンが合成された一般的な警告灯表示１０であるが、このような黒画面の背景に、図２（Ｂ）に示すように、模様やグラデーションが描画される警告灯表示２０が使用されることがあり、しかもこの背景画像は、動作モード、例えば昼間または夜間で変更される場合もある。このような場合、背景データが変化すると、背景データに合成される警告灯のアイコンの画像データが影響を受け、ＣＲＣによるビット単位の誤り検出では、アイコンの正しい故障判定をすることができなくなる、という課題がある。 However, in recent panel displays of meters, a flexible design is required, and there are cases where the design is drawn on the back of the warning light. FIG. 2A is a general warning light display 10 in which a warning light icon is synthesized on a black screen background. As shown in FIG. 2B, a warning light display 10 is formed on such a black screen background. A warning light display 20 on which a pattern or gradation is drawn may be used, and the background image may be changed in an operation mode, for example, daytime or nighttime. In such a case, if the background data changes, the image data of the warning light icon combined with the background data will be affected, and it will not be possible to correctly determine the failure of the icon by bit-wise error detection by CRC. There is a problem.

本発明は、上記従来の課題を解決し、警告灯などのアイコンの故障判定を正確に行うことができる表示装置およびアイコンの故障判定方法を提供することを目的とする。 An object of the present invention is to solve the above-mentioned conventional problems and to provide a display device and an icon failure determination method capable of accurately determining a failure of an icon such as a warning light.

本発明に係る表示装置は、アイコンを表示する機能を備えたものであって、アイコンの画像データを生成する生成手段と、生成されたアイコンの画像データを背景データと合成する合成手段と、前記合成手段によって合成された画像データを表示する表示手段と、アイコンの基準画像データを記憶する記憶手段と、前記合成手段により合成された画像データから切り出されたアイコンの画像データと前記記憶手段から読み出されたアイコンの基準画像データとの相関値を計算する計算手段と、前記相関値に基づき前記合成手段で合成されたアイコンの画像データの故障を判定する判定手段とを有する。 The display device according to the present invention has a function of displaying an icon, and includes a generation means for generating icon image data, a synthesis means for synthesizing the generated icon image data with background data, and the above. A display means for displaying image data synthesized by the synthesis means, a storage means for storing reference image data of an icon, an image data of an icon cut out from the image data synthesized by the synthesis means, and reading from the storage means. It has a calculation means for calculating a correlation value with the reference image data of the icon, and a determination means for determining a failure of the image data of the icon synthesized by the synthesis means based on the correlation value.

ある実施態様では、表示装置はさらに、前記判定手段の判定結果に基づき前記表示手段に故障を表示させる表示制御手段とを含む。ある実施態様では、前記記生成手段は、車両の警告灯に関するアイコンの画像データを生成し、前記背景データは、車両のインスツルメンツパネルのメータ類を表す画像データを含む。ある実施態様では、前記アイコンの基準用画像データは、背景が黒画面である。 In certain embodiments, the display device further includes a display control means that causes the display means to display a failure based on the determination result of the determination means. In one embodiment, the generation means generates image data of an icon relating to a warning light of a vehicle, and the background data includes image data representing meters of an instrument panel of the vehicle. In some embodiments, the reference image data for the icon has a black background.

本発明に係る表示装置に表示されるアイコンの故障判定方法は、アイコンの画像データを生成するステップと、前記生成されたアイコンの画像データを背景データと合成するステップと、前記合成された画像データから切り出されたアイコンの画像データとアイコンの基準画像データとの相関値を計算するステップと、前記相関値に基づき前記合成されたアイコンの画像データの故障を判定するステップとを含む。 The method for determining the failure of an icon displayed on the display device according to the present invention includes a step of generating icon image data, a step of synthesizing the generated icon image data with background data, and the combined image data. The step includes calculating the correlation value between the image data of the icon cut out from the icon and the reference image data of the icon, and the step of determining the failure of the image data of the synthesized icon based on the correlation value.

本発明によれば、合成された画像データから切り出されたアイコンの画像データとアイコンの基準画像データとの相関値に基づき合成されたアイコンの画像データの故障を判定するようにしたので、アイコンの画像データの背景部分の画像が多少変わったとしても、それを許容してアイコンの画像データが正しいものと判定することができる。 According to the present invention, the failure of the synthesized icon image data is determined based on the correlation value between the icon image data cut out from the synthesized image data and the icon reference image data. Even if the image of the background portion of the image data changes slightly, it can be tolerated and it can be determined that the image data of the icon is correct.

車両のインスツルメンツパネルの例を示す示である。It is a figure which shows an example of the instrument panel of a vehicle. 図２（Ａ）は、背景が黒画面の警告灯のアイコンの例を示し、図２（Ｂ）は、背景がデザイン化された警告灯のアイコンの例を示す図である。FIG. 2A shows an example of a warning light icon with a black background, and FIG. 2B is a diagram showing an example of a warning light icon with a designed background. 本発明の実施例に係る車載用表示装置の構成を示すブロック図である。It is a block diagram which shows the structure of the vehicle-mounted display device which concerns on embodiment of this invention. 図４（Ａ）は、背景画像データＤ１の例示、図４（Ｂ）は、描画用のアイコン画像データＤ２の例示、図４（Ｃ）は、合成された画像データＤ３の例示、図４（Ｅ）は、切り出されたアイコン画像データＤ４の例示、図４（Ｅ）は、基準用の正解アイコン画像データＤ５の例示である。4 (A) is an example of the background image data D1, FIG. 4 (B) is an example of the icon image data D2 for drawing, and FIG. 4 (C) is an example of the synthesized image data D3. E) is an example of the cut-out icon image data D4, and FIG. 4 (E) is an example of the correct answer icon image data D5 for reference.

次に、本発明の実施の形態について説明する。本発明に係る表示装置は、液晶等のディスプレイにアイコン等の画像データを表示する機能を備えた電子装置、コンピュータ装置、車載装置、多機能型携帯端末装置、タブレット端末などであることができる。表示媒体は、特に限定されないが、例えば、液晶パネル、有機ＥＬパネル、プロジェクタなどである。 Next, an embodiment of the present invention will be described. The display device according to the present invention can be an electronic device, a computer device, an in-vehicle device, a multifunctional mobile terminal device, a tablet terminal, or the like having a function of displaying image data such as an icon on a display such as a liquid crystal display. The display medium is not particularly limited, and is, for example, a liquid crystal panel, an organic EL panel, a projector, or the like.

以下の実施例では、インスツルメンツパネルを液晶パネルで構成し、そこにメータ類や警告灯などを表示する機能を備えた車載用表示装置を例示する。図３は、本発明の実施例に係る車載用表示装置１００の概略構成を示すブロック図である。同図に示すように、車載用表示装置１００は、背景画像生成部１１０、アイコン画像生成部１２０、合成部１３０、アイコン画像切出し部１４０、表示制御部１５０、液晶パネル１６０、正解アイコンデータ記憶部１７０、相関計算部１８０および比較部１９０を含んで構成される。液晶パネル１６０は、インスツルメンツパネルＰ（図１を参照）を構成し、液晶パネル１６０には、スピードメーター、タコメータ、燃料計、ラジエータ温度計などのメータ類に加えて、車両の走行や運転操作の異常や警告を表す警告灯などが表示される。また、図３に示す各部の構成は、メモリ、プロセッサ、マイクロコントローラ、ＡＳＩＣ、ロジック等のハードウエアや、ハードウエアに実装されるファームウエアやプログラム等のソフトウエアにより実施される。 In the following embodiment, an in-vehicle display device having an instrument panel composed of a liquid crystal panel and a function of displaying meters, warning lights, and the like on the liquid crystal panel will be illustrated. FIG. 3 is a block diagram showing a schematic configuration of an in-vehicle display device 100 according to an embodiment of the present invention. As shown in the figure, the in-vehicle display device 100 includes a background image generation unit 110, an icon image generation unit 120, a composition unit 130, an icon image cutout unit 140, a display control unit 150, a liquid crystal panel 160, and a correct icon data storage unit. It includes 170, a correlation calculation unit 180, and a comparison unit 190. The liquid crystal panel 160 constitutes an instruments panel P (see FIG. 1), and the liquid crystal panel 160 includes meters such as a speedometer, a tachometer, a fuel gauge, and a radiator thermometer, as well as driving and driving operations of a vehicle. A warning light indicating an abnormality or warning is displayed. Further, the configuration of each part shown in FIG. 3 is implemented by hardware such as a memory, a processor, a microcontroller, an ASIC, and logic, and software such as firmware and a program mounted on the hardware.

背景画像生成部１１０は、インスツルメンツパネルＰに表示するメータ類の背景画像データＤ１を生成する。ここでは、メータ類の画像上に警告灯のアイコンを合成するため、メータ類の画像を背景画像と称している。背景画像生成部１１０は、ここには図示しないＥＣＵ（Electronic Control Unit）またはＥＣＭ（Engine Control Module）からの指示Ｓ１に応答して、例えば図４（Ａ）に示すように、車速やエンジンの回転数などの車両の状態を表す背景画像データＤ１を生成する。背景画像データＤ１は、例えば、ＲＧＢの三原色の階調を８ビットで規定する２４ビットの画像データから構成される。背景画像生成部１１０によって生成された背景画像データＤ１は合成部１３０へ提供される。 The background image generation unit 110 generates background image data D1 of meters to be displayed on the instruments panel P. Here, the image of the meters is referred to as a background image in order to synthesize the warning light icon on the image of the meters. The background image generation unit 110 responds to an instruction S1 from an ECU (Electronic Control Unit) or an ECM (Engine Control Module) (not shown here), and as shown in FIG. 4A, for example, the vehicle speed and the rotation of the engine. The background image data D1 representing the state of the vehicle such as the number is generated. The background image data D1 is composed of, for example, 24-bit image data in which the gradations of the three primary colors of RGB are defined by 8 bits. The background image data D1 generated by the background image generation unit 110 is provided to the synthesis unit 130.

アイコン画像生成部１２０は、インスツルメンツパネルＰに表示する警告灯に関するアイコンの画像データＤ２を生成する。アイコン画像生成部１２０は、ＥＣＵやＥＣＭからの指示Ｓ２に応答して、例えば図４（Ｂ）に示すように、警告灯を表すアイコンの画像データＤ２を生成する。アイコンの画像データＤ２は、法令や規格に則った異常や警告を表す画像を含み、決められたフォーマットで構成される。例えば、アイコンの画像データＤ２は、ＲＧＢの三原色の階調を８ビットで規定する２４ビットの画像データから構成され、ｎ×ｍの画素サイズを有する。アイコン画像生成部１２０によって生成されるアイコンの画像データＤ２には、図２（Ａ）に示すように背景が黒画面のものや、図２（Ｂ）に示すように背景に模様やグラデーションが施されたものが含まれる。アイコン画像生成部１２０によって生成されたアイコンの画像データＤ２は合成部１３０へ提供される。 The icon image generation unit 120 generates the image data D2 of the icon related to the warning light to be displayed on the instruments panel P. The icon image generation unit 120 generates image data D2 of an icon representing a warning light in response to an instruction S2 from the ECU or ECM, for example, as shown in FIG. 4B. The icon image data D2 includes an image showing an abnormality or warning in accordance with laws and standards, and is configured in a predetermined format. For example, the icon image data D2 is composed of 24-bit image data in which the gradations of the three primary colors of RGB are defined by 8 bits, and has a pixel size of n × m. The icon image data D2 generated by the icon image generation unit 120 has a black background as shown in FIG. 2 (A) and a pattern or gradation is applied to the background as shown in FIG. 2 (B). Includes what has been done. The icon image data D2 generated by the icon image generation unit 120 is provided to the synthesis unit 130.

合成部１３０は、背景画像データＤ１とアイコンの画像データＤ２とを受け取り、両者を合成し、液晶パネル１６０で描画するための画像データＤ３を作成する。図４（Ｃ）に、合成された画像データＤ３を例示する。この画像データＤ３は、液晶パネル１６０で描画される表示データである。 The compositing unit 130 receives the background image data D1 and the icon image data D2, synthesizes the two, and creates the image data D3 for drawing on the liquid crystal panel 160. FIG. 4C exemplifies the synthesized image data D3. The image data D3 is display data drawn on the liquid crystal panel 160.

アイコン画像切出し部１４０は、合成された画像データＤ３からアイコンの画像データＤ４の切り出しを行う。切り出すサイズは、合成前のアイコンの画像データの画素サイズと同じである。図４（Ｄ）に、切り出されたアイコンの画像データを例示する。切り出されたアイコンの画像データＤ４は、背景画像データＤ１と合成されているため、合成前のアイコンの画像データＤ２と必ずしも同一とは限らない。例えば、図２（Ａ）に示すように、アイコンの画像データの背景が黒画面であれば、その黒画面は、背景画像による影響を受けないため合成によって変化しないが、アイコンの背景が黒画面以外の背景画像であって、背景画像データＤ１を透過する色であったり、あるいは、背景画像データＤ１と混合する色に変化されたり、あるいは昼夜モードによって輝度が変化されれば、アイコンの警告や異常を表す画像に変化が無くてもその背景が変わる可能性がある。 The icon image cutting unit 140 cuts out the icon image data D4 from the combined image data D3. The size to be cut out is the same as the pixel size of the image data of the icon before composition. FIG. 4D exemplifies the image data of the cut out icon. Since the image data D4 of the cut out icon is combined with the background image data D1, it is not necessarily the same as the image data D2 of the icon before composition. For example, as shown in FIG. 2A, if the background of the image data of the icon is a black screen, the black screen is not affected by the background image and does not change due to composition, but the background of the icon is a black screen. If the background image is a background image other than the one that is transparent to the background image data D1, or is changed to a color that is mixed with the background image data D1, or if the brightness is changed depending on the day / night mode, an icon warning or Even if there is no change in the image showing the abnormality, the background may change.

合成部１３０で合成された画像データＤ３は、表示制御部１５０に提供され、表示制御部１５０は、画像データＤ３により液晶パネル１６０を駆動する。これにより、運転者は、インスツルメンツパネルＰに表示されたメータ類や警告灯などを視認する。 The image data D3 synthesized by the compositing unit 130 is provided to the display control unit 150, and the display control unit 150 drives the liquid crystal panel 160 by the image data D3. As a result, the driver visually recognizes the meters and warning lights displayed on the instruments panel P.

正解アイコンデータ記憶部１７０は、基準用の正解アイコン画像データを格納する。基準用の正解アイコン画像データは、アイコン画像生成部１２０で生成されるアイコンの画像データと同じフォーマットで構成される。正解アイコン画像データは、合成されてもその背景が変化しないように、図２（Ａ）に示すように背景が黒画面の画像データである。アイコン画像生成部１２０が複数種の警告灯に関するアイコンの画像データを生成する場合には、正解アイコンデータ記憶部１７０は、それに対応して複数種の警告灯に関する正解アイコン画像データを記憶する。正解アイコンデータ記憶部１７０は、ＥＣＵ／ＥＣＭからの指示Ｓ２によってアイコン画像生成部１２０がアイコンの画像を生成するとき、これに対応する基準用の正解アイコン画像データを読出し、これを相関計算部１８０に提供する。図４（Ｅ）に、読み出された正解アイコン画像データを例示する。 The correct answer icon data storage unit 170 stores the correct answer icon image data for reference. The correct icon image data for the reference is configured in the same format as the icon image data generated by the icon image generation unit 120. The correct icon image data is image data having a black background as shown in FIG. 2A so that the background does not change even if they are combined. When the icon image generation unit 120 generates icon image data related to a plurality of types of warning lights, the correct answer icon data storage unit 170 stores correct answer icon image data related to the plurality of types of warning lights correspondingly. When the icon image generation unit 120 generates an icon image according to the instruction S2 from the ECU / ECM, the correct answer icon data storage unit 170 reads out the correct answer icon image data for the reference corresponding to the icon image generation unit 120, and reads the correct answer icon image data for the corresponding reference, and reads this into the correlation calculation unit 180. To provide. FIG. 4 (E) illustrates the read correct icon image data.

相関計算部１８０は、アイコン画像切出し部１４０で切り出されたアイコンの画像データＤ４と、正解アイコンデータ記憶部１７０から読み出された正解アイコン画像データＤ５を受け取り、両者の相関値または相関係数を計算する。２つの画像データの相関（類似度）は、例えば、２次元の内積計算（正規化相互相関係数の算出）を使うことができ、２つの画像データの各画素の輝度値が類似するほど相関値が大きくなり、画像が完全一致した場合には「１」、全く異なる場合は「０」の相関値を出力し、その出力値の範囲は、最小値０〜最大値１までの範囲の連続値となる。 The correlation calculation unit 180 receives the image data D4 of the icon cut out by the icon image cutting unit 140 and the correct answer icon image data D5 read from the correct answer icon data storage unit 170, and determines the correlation value or the correlation coefficient between the two. calculate. For the correlation (similarity) of the two image data, for example, a two-dimensional inner product calculation (calculation of the normalized mutual correlation coefficient) can be used, and the correlation is such that the brightness value of each pixel of the two image data is similar. When the value becomes large and the images match perfectly, a correlation value of "1" is output, and when the images are completely different, a correlation value of "0" is output, and the range of the output value is a continuous range from the minimum value to the maximum value 1. It becomes a value.

比較部１９０は、相関計算部１８０からの出力値と判定閾値とを比較し、相関計算の出力値が閾値以上であれば、切り出されたアイコンの画像データは正しいと判定する。他方、出力値が閾値未満であれば、切り出されたアイコンの画像データは故障していると判定する。判定結果は、例えば、表示制御部１５０へ提供され、表示制御部１５０は、液晶パネル全体を黒画面にして運転者にアイコンの故障を通知する。 The comparison unit 190 compares the output value from the correlation calculation unit 180 with the determination threshold value, and if the output value of the correlation calculation is equal to or greater than the threshold value, determines that the image data of the cut out icon is correct. On the other hand, if the output value is less than the threshold value, it is determined that the image data of the cut out icon is out of order. The determination result is provided to, for example, the display control unit 150, and the display control unit 150 notifies the driver of the failure of the icon by making the entire liquid crystal panel a black screen.

このように本実施例によれば、従来のビット単位でアイコンの画像データの誤りを検出する方法とは異なり、対比するアイコンの画像データの相関値または相関係数を計算することで両者の類似度を求めるようにしたので、アイコンの画像データの背景部分が描画処理によって多少変わったとしても、警告灯のアイコンを運転者が見た際に、警告灯表示として判別可能な程度の変化であれば、判定閾値の調整によりそれを許容してアイコンの画像データが正しいと判定することが可能になる。また、合成部１３０とアイコン画像切出し部１４０との間に、不可逆圧縮／伸張のアルゴリズムが挿入されたとしても、両者の類似度からアイコンの画像データが正しいと判定することができる。さらに、アイコン画像生成部１２０によって生成されたアイコン画像データそのものに故障があった場合には、切り出されたアイコンの画像データＤ４にも生成の故障が反映されるため、アイコン画像生成部１２０によるアイコンの故障も検出することができる。 As described above, according to the present embodiment, unlike the conventional method of detecting an error in the icon image data in bit units, the two are similar by calculating the correlation value or the correlation coefficient of the icon image data to be compared. Since the degree is calculated, even if the background part of the image data of the icon changes slightly due to the drawing process, the change can be discerned as a warning light display when the driver sees the warning light icon. For example, by adjusting the determination threshold, it is possible to allow it and determine that the image data of the icon is correct. Further, even if the lossy compression / decompression algorithm is inserted between the compositing unit 130 and the icon image cutting unit 140, it can be determined that the icon image data is correct from the similarity between the two. Further, if the icon image data itself generated by the icon image generation unit 120 has a failure, the generation failure is reflected in the image data D4 of the cut out icon, so that the icon by the icon image generation unit 120 Failure can also be detected.

なお、上記の例では、相関計算部１８０は、正規化相互相関係数を用いて２つの画像の類似度（相関）を算出したが、類似度の算出方法は、これ以外にも、例えば、画素値の差分の二乗和（ＳＳＤ）、画素値の差分の絶対値の和（ＳＡＤ）などの方法を用いることも可能である。 In the above example, the correlation calculation unit 180 calculated the similarity (correlation) of the two images using the normalized mutual correlation coefficient, but the calculation method of the similarity is other than this, for example. It is also possible to use methods such as the sum of squares of pixel value differences (SSD) and the sum of absolute values of pixel value differences (SAD).

さらに上記実施例では、インスツルメンツパネル内に警告灯のアイコンを表示する例を示したが、本発明は、これに限定されることなく、他の情報に関するアイコンの故障判定にも適用することができる。さらに上記実施例は、アイコンをインスツルメンツパネルに表示する例を示したが、本発明は、これに限定されることなく、インスツルメンツパネル以外の場所に設置されたディスプレイにアイコンを表示する表示装置にも適用することができる。 Further, in the above embodiment, an example of displaying a warning light icon in the instruments panel has been shown, but the present invention is not limited to this, and can be applied to failure determination of an icon related to other information. .. Further, the above-described embodiment shows an example in which an icon is displayed on an instrument panel, but the present invention is not limited to this, and the present invention is also limited to a display device for displaying an icon on a display installed in a place other than the instrument panel. Can be applied.

以上、本発明の好ましい実施の形態について詳述したが、本発明は、特定の実施形態に限定されるものではなく、特許請求の範囲に記載された発明の要旨の範囲において、種々の変形、変更が可能である。 Although the preferred embodiments of the present invention have been described in detail above, the present invention is not limited to the specific embodiments, and various modifications and modifications are made within the scope of the gist of the invention described in the claims. It can be changed.

１００：車載用表示装置 １１０；背景画像生成部
１２０：アイコン画像生成部 １３０：合成部
１４０：アイコン画像切出し部 １５０：表示制御部
１６０：液晶パネル １７０正解アイコンデータ記憶部
１８０：層間計算部 １９０：比較部 100: In-vehicle display device 110; background image generation unit 120: icon image generation unit 130: composition unit 140: icon image cutout unit 150: display control unit 160: liquid crystal panel 170 correct icon data storage unit 180: interlayer calculation unit 190: Comparison section

Claims (6)

アイコンを表示する機能を備えた表示装置であって、
アイコンの画像データを生成する生成手段と、
生成されたアイコンの画像データを背景データと合成する合成手段と、
前記合成手段によって合成された画像データを表示する表示手段と、
アイコンの基準画像データを記憶する記憶手段と、
前記合成手段により合成された画像データから切り出されたアイコンの画像データと前記記憶手段から読み出されたアイコンの基準画像データとの相関値を計算する計算手段と、
前記相関値に基づき前記合成手段で合成されたアイコンの画像データの故障を判定する判定手段と、
を有する表示装置。 A display device that has a function to display icons.
A generation method for generating icon image data,
A compositing means that synthesizes the generated icon image data with the background data,
A display means for displaying image data synthesized by the synthesis means, and
A storage means for storing the reference image data of the icon,
A calculation means for calculating the correlation value between the icon image data cut out from the image data synthesized by the synthesis means and the reference image data of the icon read from the storage means, and
A determination means for determining a failure of the image data of the icon synthesized by the synthesis means based on the correlation value, and
Display device with. 表示装置はさらに、前記判定手段の判定結果に基づき前記表示手段に故障を表示させる表示制御手段とを含む、請求項１に記載の表示装置。 The display device according to claim 1, wherein the display device further includes a display control means for causing the display means to display a failure based on a determination result of the determination means. 前記記生成手段は、車両の警告灯に関するアイコンの画像データを生成し、前記背景データは、車両のインスツルメンツパネルのメータ類を表す画像データを含む、請求項１または２に記載の表示装置。 The display device according to claim 1 or 2, wherein the generation means generates image data of an icon relating to a warning light of a vehicle, and the background data includes image data representing meters of an instrument panel of the vehicle. 前記アイコンの基準用画像データは、背景が黒画面である、請求項１に記載の表示装置。 The display device according to claim 1, wherein the reference image data of the icon has a black screen as a background. 表示装置に表示されるアイコンの故障判定方法であって、
アイコンの画像データを生成するステップと、
前記生成されたアイコンの画像データを背景データと合成するステップと、
前記合成された画像データから切り出されたアイコンの画像データとアイコンの基準画像データとの相関値を計算するステップと、
前記相関値に基づき前記合成されたアイコンの画像データの故障を判定するステップと、
を含む故障判定方法。 It is a failure judgment method of the icon displayed on the display device.
Steps to generate icon image data and
The step of synthesizing the image data of the generated icon with the background data,
A step of calculating the correlation value between the icon image data cut out from the synthesized image data and the icon reference image data, and
A step of determining a failure of the image data of the synthesized icon based on the correlation value, and
Failure determination method including. 前記生成するステップは、車両の警告灯に関するアイコンの画像データを生成し、前記背景データは、車両のインスツルメンツパネルのメータ類を表す画像データを含む、請求項５に記載の故障判定方法。 The failure determination method according to claim 5, wherein the generation step generates image data of an icon relating to a warning light of a vehicle, and the background data includes image data representing meters of an instrument panel of the vehicle.
JP2019077498A 2019-04-16 2019-04-16 Display device and icon failure determination method Active JP7317442B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019077498A JP7317442B2 (en) 2019-04-16 2019-04-16 Display device and icon failure determination method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019077498A JP7317442B2 (en) 2019-04-16 2019-04-16 Display device and icon failure determination method

Publications (2)

Publication Number Publication Date
JP2020177058A true JP2020177058A (en) 2020-10-29
JP7317442B2 JP7317442B2 (en) 2023-07-31

Family

ID=72937230

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019077498A Active JP7317442B2 (en) 2019-04-16 2019-04-16 Display device and icon failure determination method

Country Status (1)

Country Link
JP (1) JP7317442B2 (en)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11110547A (en) * 1997-09-30 1999-04-23 Mitsubishi Electric Corp Image processor
JP2012175183A (en) * 2011-02-17 2012-09-10 Denso Corp Display state evaluation system for display device
JP2013232091A (en) * 2012-04-27 2013-11-14 Fujitsu Ltd Approaching object detection device, approaching object detection method and approaching object detection computer program
WO2015097855A1 (en) * 2013-12-27 2015-07-02 三菱電機株式会社 Video monitoring device, video monitoring method, and video monitoring program
JP2016516212A (en) * 2013-03-11 2016-06-02 ルネサス・エレクトロニクス・ヨーロッパ・リミテッドＲｅｎｅｓａｓ Ｅｌｅｃｔｒｏｎｉｃｓ Ｅｕｒｏｐｅ Ｌｉｍｉｔｅｄ Video output checker
DE102015012889A1 (en) * 2015-10-06 2017-04-06 Audi Ag Display device and method for checking display contents
WO2018003669A1 (en) * 2016-06-27 2018-01-04 ローム株式会社 Timing controller, electronic device using same, vehicle-mounted display device, medical display device
WO2018034214A1 (en) * 2016-08-15 2018-02-22 セイコーエプソン株式会社 Circuit device, electronic instrument, and error detection method

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11110547A (en) * 1997-09-30 1999-04-23 Mitsubishi Electric Corp Image processor
JP2012175183A (en) * 2011-02-17 2012-09-10 Denso Corp Display state evaluation system for display device
JP2013232091A (en) * 2012-04-27 2013-11-14 Fujitsu Ltd Approaching object detection device, approaching object detection method and approaching object detection computer program
JP2016516212A (en) * 2013-03-11 2016-06-02 ルネサス・エレクトロニクス・ヨーロッパ・リミテッドＲｅｎｅｓａｓ Ｅｌｅｃｔｒｏｎｉｃｓ Ｅｕｒｏｐｅ Ｌｉｍｉｔｅｄ Video output checker
WO2015097855A1 (en) * 2013-12-27 2015-07-02 三菱電機株式会社 Video monitoring device, video monitoring method, and video monitoring program
DE102015012889A1 (en) * 2015-10-06 2017-04-06 Audi Ag Display device and method for checking display contents
WO2018003669A1 (en) * 2016-06-27 2018-01-04 ローム株式会社 Timing controller, electronic device using same, vehicle-mounted display device, medical display device
WO2018034214A1 (en) * 2016-08-15 2018-02-22 セイコーエプソン株式会社 Circuit device, electronic instrument, and error detection method

Also Published As

Publication number Publication date
JP7317442B2 (en) 2023-07-31

Similar Documents

Publication Publication Date Title
US10521321B2 (en) Diverse redundancy approach for safety critical applications
EP3082127B1 (en) Display controller, heads-up image display system and method thereof
US20180165814A1 (en) Data content integrity in display subsystem for safety critical use cases
JP6451550B2 (en) In-vehicle display system, control device, display device
CN110211518B (en) Circuit arrangement and electronic device
JP3789917B2 (en) Improved aircraft flat panel display system
US20100283858A1 (en) Test device, display device, and method for checking a validity of display signals
US11348495B2 (en) Image display system for vehicle
JP7011783B2 (en) Display device for vehicles
KR20180057683A (en) Testing of display subsystems
CN110164341B (en) Circuit device, electronic apparatus, and error detection method
JP2011508901A (en) Diagnostic method for electronic display device
JP2007278709A (en) Instrument device
EP3590752B1 (en) Head-up display device and onboard display system
JP7149058B2 (en) In-vehicle timing controller and automobile using it
WO2019090254A1 (en) Memory address flipping to determine data content integrity in gpu sub-system
US20200117412A1 (en) Method for checking a validity of image data
JP7317442B2 (en) Display device and icon failure determination method
CN113479136A (en) Display control method and device for digital rearview mirror system
CN115148169A (en) Image processing device and display device
JP2022189714A (en) Display device for vehicle
JP6664548B2 (en) Abnormality detection device and abnormality detection method
JP7229646B2 (en) image display device
KR20220077823A (en) Vehicle digital cluster apparatus for providing telltale image replacing cluster image and method thereof
JP7036592B2 (en) Detection of normal or malfunction of display panel

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220329

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221109

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230119

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230314

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230427

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230718

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230718

R150 Certificate of patent or registration of utility model

Ref document number: 7317442

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150