JP2021131400A - 表示装置、表示システム及びコード付き印刷物 - Google Patents

Abstract

【課題】印刷物を画面越しに透かして見ることができ印刷物を電気的に検出することにより印刷物に付随した画像を画面に表示することができる表示装置、表示装置を備える表示システム、及び表示装置によって検出可能なコード付き印刷物を提供する。【解決手段】表示装置ＤＳは、複数の画素電極、共通電極、及び表示機能層を有する表示パネルと、複数の検出電極を有するセンサと、制御部と、を備える。制御部は、表示パネルの表示領域ＤＡの少なくとも一部を透明状態とすることが可能である。制御部は、センサにて検出した情報に対応付けられた第１画像ＣＨ１，ＣＨ２を表示領域ＤＡに表示させる。【選択図】図１１

Description

本発明の実施形態は、表示装置、表示システム及びコード付き印刷物に関する。

表示装置として、カメラを備える表示装置が知られている。表示装置のカメラで印刷物を撮影することにより、表示装置の画面に印刷物に関する情報を表示したり、表示装置の画面に印刷物に関する動画を表したりする技術が知られている。表示装置は、例えば、撮影した印刷物が動き出すように表示することが可能である。

特開２００６−７２４２８号公報

本実施形態は、印刷物を画面越しに透かして見ることができ上記印刷物を電気的に検出することにより上記印刷物に付随した画像を上記画面に表示することができる表示装置、上記表示装置を備える表示システム、及び上記表示装置によって検出可能なコード付き印刷物を提供する。

一実施形態に係る表示装置は、
表示領域に位置した複数の画素電極と、前記表示領域に位置した共通電極と、前記表示領域に位置した表示機能層と、を有する表示パネルと、
少なくとも前記表示領域に配置された複数の検出電極を有するセンサと、
前記複数の画素電極、前記共通電極、及び前記複数の検出電極のそれぞれの駆動を制御する制御部と、を備え、
前記制御部は、
前記表示パネルの前記表示領域の少なくとも一部を透明状態とすることが可能であり、
前記センサにて検出した情報に対応付けられた第１画像を前記表示領域に表示させる。

また、一実施形態に係る表示システムは、
表示領域に位置した複数の画素電極と前記表示領域に位置した共通電極と前記表示領域に位置した表示機能層とを有する表示パネルと、少なくとも前記表示領域に配置された複数の検出電極を有するセンサと、前記複数の画素電極、前記共通電極、及び前記複数の検出電極のそれぞれの駆動を制御する制御部と、を具備する表示装置と、
主面を有する被印刷物と、前記主面に表示される第２画像と、前記主面に位置し前記第２画像に関する情報を持ち前記センサにて検出可能である透明な第１コードと、を有するコード付き印刷物と、を備え、
前記制御部は、
前記表示パネルの前記表示領域の少なくとも一部を透明状態とすることが可能であり、
前記センサにて検出した前記印刷物の前記第１コードの情報に基づいて、前記第２画像に付随する第１画像を前記表示領域に表示させる。

また、一実施形態に係るコード付き印刷物は、
主面を有する被印刷物と、
前記主面に表示される第２画像と、
前記主面に位置し前記第２画像に関する情報を持ち導電性を有する透明な第１コードと、を備える。

また、一実施形態に係るコード付き印刷物は、
主面を有する被印刷物と、
前記主面に表示される第２画像と、
前記主面に位置し前記第２画像に関する情報を持ち誘電体で形成され３次元のパターンを有する透明な第１コードと、を備える。

図１は、一実施形態に係る表示システムを示すブロック図である。 図２は、図１に示した表示装置を示す斜視図である。 図３は、上記表示装置の一部の構成例を示す平面図である。 図４は、上記表示装置の一部を示す断面図である。 図５は、上記表示装置の一部の構成要素を示す図である。 図６Ａは、液晶層が透明状態である場合の表示パネルを示す断面図である。 図６Ｂは、液晶層が散乱状態である場合の表示パネルを示す断面図である。 図７は、図１及び図４のセンサの構成を示す平面図である。 図８は、図１のコード付き印刷物を示す平面図である。 図９は、図８の線ＩＸ−ＩＸに沿った印刷物を示す断面図である。 図１０は、上記印刷物及び上記表示装置の一部を示す断面図であり、表示装置を印刷物の上に置いた状態を示す図である。 図１１は、上記印刷物及び上記表示装置を示す平面図であり、上記印刷物が画面越しに透かして表示され、上記印刷物に付随した第１画像を上記画面に表示している状態を示す図である。 図１２は、写真と動画とを撮影し、写真と動画とを関連付けた情報を上記表示装置の記憶部に記憶する手法を説明するためのフロー図である。 図１３は、上記印刷物を画面越しに透かして表示させ、上記印刷物に付随した動画を上記画面に表示させる手法を説明するためのフロー図である。 図１４は、上記印刷物及び上記表示装置を示す平面図であり、識別可能に調整された第１画像を表示領域に表示させ、上記第１画像を上記印刷物に重畳させている状態を示す図である。 図１５は、上記印刷物を画面越しに透かして表示させ、第１画像を表示領域に表示させ、上記第１画像を上記印刷物に重畳させる際、第１画像を識別可能に調整する手法を説明するためのフロー図である。 図１６は、上記印刷物及び上記表示装置を示す平面図であり、位置及び向きが調整された第１画像を上記表示領域に表示させている状態を示す図である。 図１７は、上記印刷物を画面越しに透かして表示させ、第１画像を表示領域に表示させる際、上記第１画像の位置及び向きを調整する手法を説明するためのフロー図である。 図１８は、別の印刷物及び上記表示装置を示す平面図であり、上記印刷物の複数のコードのうち１つのコードを検出可能に上記表示装置が上記印刷物の上に置かれ、上記印刷物が画面越しに透かして表示され、上記印刷物に付随した第１画像を上記画面に表示している状態を示す図である。

以下に、本発明の一実施形態について、図面を参照しつつ説明する。なお、開示はあくまで一例にすぎず、当業者において、発明の主旨を保っての適宜変更について容易に想到し得るものについては、当然に本発明の範囲に含有されるものである。また、図面は説明をより明確にするため、実際の態様に比べ、各部の幅、厚さ、形状等について模式的に表される場合があるが、あくまで一例であって、本発明の解釈を限定するものではない。また、本明細書と各図において、既出の図に関して前述したものと同様の要素には、同一の符号を付して、詳細な説明を適宜省略することがある。

本実施形態においては、表示装置、コード付き印刷物などを備える表示システムの構成、及び表示システムの使用方法について説明する。表示装置には、液晶表示装置、有機エレクトロルミネッセンス（ＥＬ：Electro-Luminescent）表示装置などの各種の表示装置を適用可能である。本実施形態では、表示装置として、高分子分散型液晶（Polymer Dispersed Liquid Crystal：PDLC）を適用した表示装置を例に説明する。

図１は、本実施形態における表示システムＳＹの構成例を示す平面図である。
図１に示すように、表示システムＳＹは、表示装置ＤＳと、コード付き印刷物ＰＲと、サーバＳＶと、で構成されている。サーバＳＶには、各種のコンテンツ（データ）が格納されている。サーバＳＶに格納されているデータとしては、印刷物ＰＲに紐付けられたコンテンツ（例えば、印刷物に付随した画像データ）と、印刷物とコンテンツとを相互に関連付けたデータと、を挙げることができる。

印刷物ＰＲには、写真などの画像が印刷され、コードＣＤなどが設けられている。印刷物ＰＲは、表示装置ＤＳによって検出可能であり、詳しくは表示装置ＤＳによって検出可能なコードを備えている。表示装置ＤＳは、表示パネルＰＮＬと、センサＳＥと、光源ユニットＬＵと、記憶部ＭＥと、スピーカＳＰと、通信部ＣＯＭと、制御部ＣＯＮと、を備えている。制御部ＣＯＮは、表示パネルＰＮＬ、センサＳＥ、光源ユニットＬＵ、記憶部ＭＥ、スピーカＳＰ、及び通信部ＣＯＭのそれぞれの駆動を制御している。

センサＳＥは、少なくとも印刷物ＰＲのコードＣＤを電気的に検出する。表示パネルＰＮＬは、画像（静止画）や動画を表示する。また、表示パネルＰＮＬは、センサＳＥを透過した印刷物ＰＲをさらに透過させる透明状態に切り替えることができる。表示パネルＰＮＬを透明状態に切り替えることにより、ユーザは、印刷物ＰＲを表示装置ＤＳの画面ＳＣ越しに透かして見ることができる。表示パネルＰＮＬは、表示領域ＤＡの少なくとも一部あるいは表示領域ＤＡ全体を透明状態に切り替えることができる。

スピーカＳＰは、音声などの可聴音を出力する。記憶部ＭＥは、表示パネルＰＮＬに表示させる画像データや動画データ、スピーカＳＰから出力させる可聴音データなどの各種のコンテンツや、印刷物とコンテンツとを相互に関連付けたデータなどを記憶する。通信部ＣＯＭは、サーバＳＶと通信可能である。記憶部ＭＥにデータを取り込む場合、通信部ＣＯＭにてサーバＳＶからデータを取り込み、取り込んだデータを記憶部ＭＥに記憶する。

センサＳＥが検出した印刷物ＰＲのコードＣＤの情報に基づいて、制御部ＣＯＮは、印刷物に付随したコンテンツを選択し、実行することができる。
例えば、制御部ＣＯＮは、センサＳＥにて検出した情報に基づいて後述する第１画像ＣＨを表示するための第１画像データが記憶部ＭＥに存在しているのかどうか判断する。第１画像データが記憶部ＭＥに存在している場合、制御部ＣＯＮは、記憶部ＭＥに記憶された第１画像データを使用して第１画像ＣＨを画面ＳＣ（表示領域）に表示させる。その際、制御部ＣＯＮは、上記第１画像だけではなく、上記第１画像を含みセンサＳＥにて検出した情報に対応付けられた動画を画面ＳＣ（表示領域）に表示させてもよい。

図２は、図１に示した表示装置ＤＳを示す斜視図である。図１及び図２に示すように、制御部ＣＯＮは、印刷物に付随した「ＡＢＣ」の文字列の第１画像ＣＨ１を、表示装置ＤＳの画面ＳＣ（表示領域ＤＡ）に表示することができる。又は、制御部ＣＯＮは、印刷物に付随した可聴音をスピーカＳＰから出力させることができる。そして、制御部ＣＯＮは、センサＳＥにて検出した情報に対応付けられた可聴音をスピーカＳＰから出力させることができる。

又は、制御部ＣＯＮは、静止画又は複数の静止画からなる動画を画面ＳＣに表示させつつ、可聴音をスピーカＳＰから出力させることができる。
その際、制御部ＣＯＮは、センサＳＥにて検出した情報に基づいて動画を表示するための動画データと可聴音を出力するための可聴音データとが記憶部ＭＥに存在しているのかどうか判断する。動画データと可聴音データとが記憶部ＭＥに存在している場合、制御部ＣＯＮは、記憶部ＭＥに記憶された動画データを使用して動画を表示領域ＤＡに表示させ、記憶部ＭＥに記憶された可聴音データを使用して可聴音をスピーカＳＰに出力させる。

表示装置ＤＳは、ベゼルＢＥと、ベゼルＢＥと一体に形成された筐体ＨＳと、をさらに備えている。ベゼルＢＥは、表示パネルＰＮＬ及びセンサＳＥを収容し、画面ＳＣと画面ＳＣとは反対側の検出面ＳＳと、を露出させている。筐体ＨＳは、光源ユニットＬＵ、記憶部ＭＥ、スピーカＳＰ、通信部ＣＯＭ、及び制御部ＣＯＮを収容し、スピーカＳＰの出力部を露出させている。筐体ＨＳの内部には、例えば、図示しないバッテリも収容されている。なお、表示装置ＤＳは、必要に応じてスピーカＳＰを備えていればよい。

図３は、表示装置ＤＳの一部の構成例を示す平面図である。ここでは、表示装置ＤＳの一部の構成を例示的に示すものであり、表示装置ＤＳの構成に関しては、図３に示す例に限定されるものではない。
図３に示すように、第１方向Ｘ及び第２方向Ｙは互いに交差する方向であり、第３方向Ｚは第１方向Ｘ及び第２方向Ｙと交差する方向である。第１方向Ｘは、行方向に相当し、第２方向Ｙは、列方向に相当している。一例では、第１方向Ｘ、第２方向Ｙ、及び第３方向Ｚは、互いに直交しているが、互いに９０度以外の角度で交差していてもよい。

表示装置ＤＳは、表示パネルＰＮＬなどを備え、配線基板Ｆ１，Ｆ２，Ｆ４，Ｆ５などをさらに備えている。表示パネルＰＮＬは、画像を表示する表示領域ＤＡ、及び表示領域ＤＡを囲む額縁状の非表示領域ＮＤＡを備えている。表示領域ＤＡは、ｎ本のゲート線Ｇ（Ｇ１〜Ｇｎ）、ｍ本のソース線Ｓ（Ｓ１〜Ｓｍ）などを備えている。なお、ｎ及びｍはいずれも正の整数であり、ｎがｍと等しくてもよいし、ｎがｍとは異なっていてもよい。複数のゲート線Ｇは、それぞれ第１方向Ｘに延在し、第２方向Ｙに間隔をおいて並んでいる。言い換えると、複数のゲート線Ｇは、行方向に延在している。複数のソース線Ｓは、それぞれ第２方向Ｙに延在し、第１方向Ｘに間隔をおいて並んでいる。

配線基板Ｆ１は、ゲートドライバＧＤを備えている。ゲートドライバＧＤには複数のゲート線Ｇが接続されている。配線基板Ｆ２は、ソースドライバＳＤを備えている。ソースドライバＳＤには複数のソース線Ｓが接続されている。配線基板Ｆ１及びＦ２は、それぞれ表示パネルＰＮＬ及び配線基板Ｆ４に接続されている。配線基板Ｆ５は、タイミングコントローラＴＣなどを備えている。

配線基板Ｆ４は、配線基板Ｆ５のコネクタＣＴに接続されている。なお、配線基板Ｆ１及びＦ２は、単一の配線基板に置換されてもよい。また、配線基板Ｆ１，Ｆ２，Ｆ４は、単一の配線基板に置換されてもよい。上述したゲートドライバＧＤ、ソースドライバＳＤ、及びタイミングコントローラＴＣは上述した制御部ＣＯＮの一部を構成している。なお、上記制御部ＣＯＮは、複数のゲート線Ｇ、複数のソース線Ｓ、後述する複数の画素電極、後述する共通電極などのそれぞれの駆動を制御するように構成されている。

図４は、表示装置ＤＳの一部を示す断面図である。ここでは、第２方向Ｙ及び第３方向Ｚによって規定されるＹ−Ｚ平面における表示装置ＤＳの断面において、主要部のみを説明する。図４に示すように、表示パネルＰＮＬは、透明な第１基板ＳＵＢ１、透明な第２基板ＳＵＢ２、表示機能層としての液晶層３０などを備えている。
第１基板ＳＵＢ１は、透明基板１０、画素電極１１、配向膜１２などを備えている。第２基板ＳＵＢ２は、透明基板２０、共通電極２１、配向膜２２などを備えている。画素電極１１及び共通電極２１は、例えばインジウム錫酸化物（ＩＴＯ）やインジウム亜鉛酸化物（ＩＺＯ）などの透明導電材料によって形成されている。

液晶層３０は、少なくとも表示領域ＤＡに位置している。液晶層３０は、高分子分散液晶を含み、配向膜１２と配向膜２２との間に位置している。本実施形態の液晶層３０は、リバース型高分子分散液晶（R-PDLC：reverse mode polymer dispersed liquid crystal）を利用している。なお、本実施形態と異なり、液晶層３０はノーマル型高分子分散液晶を利用してもよい。液晶層３０は、印加される電圧に応じて、入射される光の平行度を維持したり、入射される光を散乱させたりする。第１基板ＳＵＢ１及び第２基板ＳＵＢ２は、シール材４０によって接着されている。

配線基板Ｆ１及びＦ２は、第１基板ＳＵＢ１の延出部ＥＸに接続されている。
光源ユニットＬＵは、表示領域ＤＡの外側の非表示領域ＮＤＡに位置している。光源ユニットＬＵは、表示パネルＰＮＬの側面に位置している。光源ユニットＬＵは、発光素子ＬＳ、配線基板Ｆ６などを備えている。発光素子ＬＳは、配線基板Ｆ６に接続され、延出部ＥＸの上に位置している。発光素子ＬＳは、透明基板２０の端部Ｅ５と対向する発光部（発光面）ＥＭを有している。発光部ＥＭから出射された照明光は、後述するように、端部Ｅ５に入射し、表示パネルＰＮＬを伝播する。但し、表示装置ＤＳは、配線基板Ｆ６無しに構成されていてもよい。この場合、発光素子ＬＳは、配線基板Ｆ１又は配線基板Ｆ２を介して制御部ＣＯＮにより駆動が制御される。
センサＳＥは、少なくとも表示パネルＰＮＬの表示領域ＤＡと対向している。センサＳＥは、配線基板Ｆ７に接続され、配線基板Ｆ７を介して上述した制御部ＣＯＮに接続されている。

図５は、表示装置ＤＳの一部の構成要素を示す図である。
図５に示すように、表示装置ＤＳ（制御部ＣＯＮ）は、図中に破線で示すコントローラＣＮＴを備えている。コントローラＣＮＴは、タイミングコントローラＴＣ、ゲートドライバＧＤ、ソースドライバＳＤ、Ｖｃｏｍ回路ＶＣ、光源ドライバＬＳＤなどを含んでいる。

タイミングコントローラＴＣは、上述した記憶部ＭＥから読み込んだ画像データや同期信号などに基づいて各種信号を生成する。一例では、タイミングコントローラＴＣは、画像データに基づき、所定の信号処理を行う補正部ＣＯＲを有している。これにより、補正部ＣＯＲにて補正した映像信号をソースドライバＳＤに出力したり、補正部ＣＯＲにて補正した制御信号を光源ドライバＬＳＤに出力したり、することができる。一例では、補正部ＣＯＲは、ガンマ補正することにより、表示パネルＰＮＬに表示する画像の階調を補正する。また、タイミングコントローラＴＣは、同期信号に基づいて生成した制御信号を、ゲートドライバＧＤ、ソースドライバＳＤ、Ｖｃｏｍ回路ＶＣ、光源ドライバＬＳＤにそれぞれ出力する。

図中に二点鎖線で示す表示領域ＤＡは、複数の画素ＰＸを備えている。各画素ＰＸは、スイッチング素子ＳＷ及び画素電極１１を備えている。スイッチング素子ＳＷは、例えば薄膜トランジスタで形成されている。スイッチング素子ＳＷは、ゲート線Ｇ及びソース線Ｓと電気的に接続されている。複数の画素電極１１は、表示領域ＤＡに位置し、マトリクス状に設けられている。このため、例えば、複数の画素電極１１は、複数行に設けられている。画素電極１１は、スイッチング素子ＳＷを介してソース線Ｓに接続されている。共通電極２１は表示領域ＤＡに位置している。共通電極２１は、複数の画素電極１１と対向している。なお、本実施形態と異なり、共通電極２１は、少なくとも１つの画素ＰＸ毎に区切られ、各々共通線に接続され、共通のコモン電圧が印加される構成でもよい。

ゲート線Ｇの各々には、ゲートドライバＧＤからゲート信号が供給される。ソース線Ｓの各々には、ソースドライバＳＤから映像信号（画像信号）が供給される。共通電極２１には、Ｖｃｏｍ回路ＶＣからコモン電圧Ｖｃｏｍが供給される。ソース線Ｓに供給された映像信号は、ゲート線Ｇに供給されたゲート信号に基づいてスイッチング素子ＳＷが導通状態となった期間に、当該スイッチング素子ＳＷに接続された画素電極１１に印加される。これにより、画素電極１１と共通電極２１とを同電位に設定したり、画素電極１１と共通電極２１との間に電位差を生じさせたり、することができる。

光源ユニットＬＵは、液晶層３０に光を照射するように構成されている。本実施形態において、光源ユニットＬＵは、複数色の発光素子ＬＳを備えている。例えば、光源ユニットＬＵは、液晶層３０に第１色の光を照射する発光素子（第１発光素子）ＬＳＲと、液晶層３０に第２色の光を照射する発光素子（第２発光素子）ＬＳＧと、液晶層３０に第３色の光を照射する発光素子（第３発光素子）ＬＳＢと、を備えている。例えば、第１色は赤色、第２色は緑色、第３色は青色である。但し、光源ユニットＬＵが備える発光素子は、白色の光を照射する発光素子のみであってもよい。光源ドライバＬＳＤは、これらの発光素子ＬＳＲ、ＬＳＧ、ＬＳＢの点灯期間を制御する。

次に、上記制御部ＣＯＮにより、液晶層３０を透明状態及び散乱状態の少なくとも一方に切替える手法について説明する。
図６Ａは、液晶層３０が透明状態である場合の表示パネルＰＮＬを示す断面図である。なお、透明状態では、液晶層３０は、入射した光をほとんど散乱させることはないため、高い透明性を得ることができる。例えば、液晶層３０を透明状態とすることにより、印刷物ＰＲを表示装置ＤＳの画面ＳＣ越しに透かして見ることができる。

図６Ａに示すように、発光素子ＬＳから出射された照明光Ｌ１１は、端部Ｅ５から表示パネルＰＮＬに入射し、透明基板２０、液晶層３０、透明基板１０などを伝播する。液晶層３０が透明状態である場合、照明光Ｌ１１は、液晶層３０でほとんど散乱されないため、透明基板１０の下面１０Ｂ及び透明基板２０の上面２０Ｔからほとんど漏れ出すことはない。

表示パネルＰＮＬに入射する外部光Ｌ１２は、液晶層３０でほとんど散乱されることなく透過する。つまり、下面１０Ｂから表示パネルＰＮＬに入射した外部光は上面２０Ｔに透過され、上面２０Ｔから入射した外部光は下面１０Ｂに透過される。このため、表示パネルＰＮＬを上面２０Ｔ側から見た場合には、ユーザは、表示パネルＰＮＬを透かして下面１０Ｂ側（背面側）を視認することができる。

図６Ｂは、液晶層３０が散乱状態である場合の表示パネルＰＮＬを示す断面図である。なお、散乱状態では、液晶層３０は、入射した光を散乱させる。例えば、液晶層３０を散乱状態とすることにより、表示装置ＤＳの画面ＳＣに画像を表示させることができる。

図６Ｂに示すように、発光素子ＬＳから出射された照明光Ｌ２１は、端部Ｅ５から表示パネルＰＮＬに入射し、透明基板２０、液晶層３０、透明基板１０などを伝播する。図示した例では、画素電極１１Ａと共通電極２１との間の液晶層３０（画素電極１１Ａと共通電極２１との間に印加される電圧が印加される液晶層）は透明状態であるため、照明光Ｌ２１は、液晶層３０のうち画素電極１１Ａと対向する領域でほとんど散乱されない。一方、画素電極１１Ｂと共通電極２１との間の液晶層３０（画素電極１１Ｂと共通電極２１との間に印加される電圧が印加される液晶層）は散乱状態であるため、照明光Ｌ２１は、液晶層３０のうち画素電極１１Ｂと対向する領域で散乱される。照明光Ｌ２１のうち、一部の散乱光Ｌ２１１は上面２０Ｔから外部に放出され、また、一部の散乱光Ｌ２１２は下面１０Ｂから外部に放出される。

画素電極１１Ａと重なる位置では、表示パネルＰＮＬに入射する外部光Ｌ２２は、図６Ａに示した外部光Ｌ１２と同様に、液晶層３０でほとんど散乱されることなく透過する。画素電極１１Ｂと重なる位置では、下面１０Ｂから入射した外部光Ｌ２３は、その一部の光Ｌ２３１が液晶層３０で散乱された後に上面２０Ｔから透過される。また、上面２０Ｔから入射した外部光Ｌ２４は、その一部の光Ｌ２４１が液晶層３０で散乱された後に下面１０Ｂから透過される。

このため、表示パネルＰＮＬを上面２０Ｔ側から見た場合には、画素電極１１Ｂと重なる位置で照明光Ｌ２１の色を視認することができる。加えて、一部の外部光Ｌ２３１が表示パネルＰＮＬを透過するため、表示パネルＰＮＬを透かして下面１０Ｂ側（例えば、印刷物ＰＲ）を視認することもできる。なお、表示パネルＰＮＬを下面１０Ｂ側から見た場合には、画素電極１１Ｂと重なる位置で照明光Ｌ２１の色を視認することができる。加えて、一部の外部光Ｌ２４１が表示パネルＰＮＬを透過する。

図７は、図１及び図４のセンサＳＥの構成を示す平面図である。センサＳＥは、電気的に印刷物ＰＲを検出するものであればよく、例えば静電容量型のセンサである。図７に示すように、センサＳＥは、透明な第３基板ＳＵＢ３と、複数の検出電極Ｓｘと、複数の配線ＬＮと、を有している。複数の検出電極Ｓｘ及び複数の配線ＬＮは、第３基板ＳＵＢ３の上に設けられている。本実施形態において、第３基板ＳＵＢ３と表示パネルＰＮＬとの間に検出電極Ｓｘ及び配線ＬＮのグループが位置している。なお、複数の画素電極１１及び共通電極２１は、複数の検出電極Ｓｘ及び複数の配線ＬＮのグループと、上記画面ＳＣとの間に位置している。
但し、本実施形態と異なり、検出電極Ｓｘ及び配線ＬＮのグループと表示パネルＰＮＬとの間に第３基板ＳＵＢ３が位置していてもよい。又は、センサＳＥは第３基板ＳＵＢ３無しに構成され、検出電極Ｓｘ及び配線ＬＮのグループは下面１０Ｂなど表示パネルＰＮＬに設けてもよい。

複数の検出電極Ｓｘは、互いに電気的に独立して第１方向Ｘ及び第２方向Ｙにマトリクス状に設けられている。この実施形態において、各検出電極Ｓｘは、透明電極ＲＥで形成されている。透明電極ＲＥは、ＩＴＯやＩＺＯなどの透明な導電材料によって形成されている。この実施形態において、複数の透明電極ＲＥのサイズは均一である。検出電極Ｓｘは、静電容量の変化を検出する。但し、検出電極Ｓｘは、金属で形成されそれぞれ細線である複数の検出線で形成されていてもよい。又は、検出電極Ｓｘは、透明電極ＲＥと複数の検出線との集合体で形成されていてもよい。
配線ＬＮは、検出電極Ｓｘに一対一で接続されている。配線ＬＮは、金属で形成されている。複数の配線ＬＮは、互いに間隔を置いて位置し、互いに電気的に絶縁されている。図示しないが、検出電極Ｓｘ及び配線ＬＮの上に、絶縁層が設けられている。

表示パネルＰＮＬの表示領域ＤＡと対向していない領域において、第３基板ＳＵＢ３の上に、アウタリードボンディング（Outer Lead Bonding）のパッド群（ＯＬＢパッド群）ＰＧが形成されている。ＯＬＢパッド群ＰＧのパッドには、配線ＬＮが一対一で接続されている。また、ＯＬＢパッド群ＰＧのパッドに、上記配線基板Ｆ７が接続されている。複数の検出電極Ｓｘは、制御部ＣＯＮにより駆動が制御される。

次に、コード付き印刷物ＰＲについて説明する。図８は、図１のコード付き印刷物ＰＲを示す平面図である。図９は、図８の線ＩＸ−ＩＸに沿った印刷物ＰＲを示す断面図である。
図８及び図９に示すように、印刷物ＰＲは、被印刷物１と、第２画像２と、第１層３と、第２層４と、を備えている。被印刷物１は、印刷可能な媒体であり、第２画像２を印刷したり、第１層３及び第２層４を設けたりすることのできる材料で形成されている。被印刷物１は、主面１Ａを有している。第２画像２は、主面１Ａに印刷されている。そのため、第２画像２は、主面１Ａに表示される。

第２画像２が印刷された主面１Ａの上に、第１層３が設けられている。主面１Ａ及び第１層３の上に、第２層４が設けられている。第２層４は、透明な絶縁材料として、例えば透明絶縁樹脂で形成されている。印刷物ＰＲが第２層４を備えることにより、例えば、第１層３を保護することができる。

本実施形態において、第１層３は、主面１Ａの全体に設けられている。第１層３にパターニングが施されることにより、第１層３は、第１コードを含む一以上のコードＣＤを含んでいる。本実施形態において、第１層３は、第１乃至第４コードを含む４個のコードＣＤを含んでいる。４個のコードＣＤは、互いに距離を置いて位置している。なお、第１層３はコードＣＤを形成することができればよく、主面１Ａの全体に設けられていなくともよい。

コードＣＤは、第２画像２に関する情報を持っている。第２画像２に関する情報としては、第２画像２の位置及び向きを示す情報を含んでいる。また、第２画像２に関する情報としては、第２画像２のサイズを示す情報を含んでいてもよい。第２画像２のサイズの異なる複数種類の印刷物が存在していても、センサＳＥにより、第２画像２のサイズを示す情報を検出することができる。その場合、印刷物ＰＲ自体のサイズが異なっている場合があり得る。

コードＣＤは、透明である。また、コードＣＤは、センサＳＥにて検出可能である。本実施形態において、コードＣＤは、導電性を有している。コードＣＤは、透明導電材料として、例えば透明導電樹脂で形成されている。また、本実施形態において、コードＣＤは、３次元のパターンを有している。図９に示すように、コードＣＤが凹凸面を有することにより、コードＣＤが凹凸面を有していない２次元のパターンを有している場合と比較して、より多くの情報をコードＣＤに持たせることができる。なお、本実施形態のコードＣＤと異なるが、コードＣＤは、２次元のパターンを有していてもよい。
又は、コードＣＤは、誘電体で形成され、３次元のパターンを有していてもよい。この場合、コードＣＤ（第１層３）の誘電率は、第２層４の誘電率と異なっている。

次に、センサＳＥにて印刷物ＰＲ（コードＣＤ）を検出する方法について説明する。図１０は、印刷物ＰＲ及び表示装置ＤＳの一部を示す断面図であり、表示装置ＤＳを印刷物ＰＲの上に置いた状態を示す図である。図中、センサＳＥは、接着層ＡＤにより表示パネルＰＮＬに接着されているが、これに限らず、センサＳＥと表示パネルＰＮＬとの間に空気の層が介在していてもよい。

図１０に示すように、まず、表示装置ＤＳを印刷物ＰＲの上に置く。その後、制御部ＣＯＮは、検出電極Ｓｘに書込み信号（センサ駆動信号）を書込み、検出電極Ｓｘと印刷物ＰＲとの間にセンサ信号を発生させる。次いで、制御部ＣＯＮは、検出電極Ｓｘからセンサ信号（例えば、検出電極Ｓｘに生じる静電容量）の変化を示す読取り信号を読取る。センサ信号は、検出電極Ｓｘと第１層３との間の距離に応じて変化する。制御部ＣＯＮは、上記読取り信号を読取ることで、コードＣＤ（第１層３）のパターンの情報を検出することができる。例えば、センサＳＥにて印刷物ＰＲのコードＣＤを検出する際、表示装置ＤＳは、印刷物ＰＲの主面１Ａ側に接している。

ここでは、センサＳＥが検出電極Ｓｘを備え、自己容量（Self-Capacitive Sensing）モードにてコードＣＤを検出する方法について説明した。検出電極Ｓｘを駆動し、検出電極Ｓｘに生じる静電容量の変化を制御部ＣＯＮにて読取ることで、外部近接物の有無を検出することができる。但し、センサＳＥの構成やセンサＳＥの検出モードについては、本実施形態に限定されるものではなく、種々変形可能である。例えば、センサＳＥが検出電極Ｓｘの替わりに複数の駆動電極Ｔｘ及び複数の検出電極Ｒｘを備え、相互容量（Mutual-Capacitive Sensing）モードにてコードＣＤを検出する方法を採用してもよい。例えば、駆動電極Ｔｘと検出電極Ｒｘは、交差している。制御部ＣＯＮは、駆動電極Ｔｘを駆動し、駆動電極Ｔｘと検出電極Ｒｘとの間に生じる静電容量の変化を検出電極Ｒｘから読取ることができる。

次に、コード付き印刷物ＰＲを画面ＳＣ越しに透かして見つつ、印刷物ＰＲに付随した第１画像ＣＨ１，ＣＨ２を表示装置ＤＳの表示領域ＤＡに表示する方法について説明する。図１１は、印刷物ＰＲ及び表示装置ＤＳを示す平面図であり、印刷物ＰＲが画面ＳＣ越しに透かして表示され、印刷物ＰＲに付随した第１画像ＣＨ１，ＣＨ２を画面ＳＣに表示している状態を示す図である。

図１及び図１１に示すように、表示装置ＤＳは、印刷物ＰＲの上に置かれている。制御部ＣＯＮによる制御の下、表示パネルＰＮＬは、表示領域ＤＡを透明状態とすることが可能である。例えば、表示パネルＰＮＬは、表示領域ＤＡの全体を透明状態にしている。この例では、印刷物ＰＲの全体が表示領域ＤＡ内に位置し、印刷物ＰＲの全てのコードＣＤの全体が複数の検出電極Ｓｘと対向し、センサＳＥは印刷物ＰＲの全てのコードＣＤを電気的に検出することができる。センサＳＥにて複数のコードＣＤを検出することにより、第２画像２に関する情報を取得することができる。制御部ＣＯＮは、センサＳＥで検出したコードＣＤの情報に基づいて記憶部ＭＥを検索し、第２画像２に付随したコンテンツとして第１画像ＣＨ１，ＣＨ２のデータを選択する。

制御部ＣＯＮによる制御の下、表示パネルＰＮＬは、記憶部ＭＥに記憶された第１画像ＣＨ１，ＣＨ２のデータを使用して、第１画像ＣＨ１，ＣＨ２を表示領域ＤＡに表示する。第１画像ＣＨ１，ＣＨ２を表示させる位置は、第１画像の種類に応じて表示領域ＤＡのどこに表示させるのか予め決められている。表示パネルＰＮＬは、表示領域ＤＡを部分的に散乱状態に切り替えることにより、第１画像ＣＨ１，ＣＨ２を表示領域ＤＡに表示することができる。ここでは、第１画像ＣＨ１は、表示領域ＤＡにて印刷物ＰＲに重畳する領域のうち第２画像２からズレた位置（第２画像２の外側）に表示されている。第１画像ＣＨ２は、「１２３」の文字列であり、第２画像２に重畳する位置に表示されている。上記のことから、制御部ＣＯＮは、センサＳＥで検出した情報に対応付けられた第１画像ＣＨ１，ＣＨ２を表示領域ＤＡに表示させることができる。

次に、印刷物ＰＲと、印刷物ＰＲに付随したコンテンツと、を関連付ける方法について説明する。ここでは、写真と動画とを関連付ける方法について例示的に説明する。但し、ここで述べる方法は、動画を静止画に置き換えることにより、写真と静止画とを関連付ける方法に適用することも可能である。図１２は、写真と動画とを撮影し、写真と動画とを関連付けた情報を表示装置ＤＳの記憶部ＭＥに記憶する手法を説明するためのフロー図である。

図１２、図１、及び図８に示すように、写真と動画とを関連付ける方法が開始されると、まず、ステップＳ１ａにおいて、ユーザは写真を撮影する。次いで、ステップＳ２ａに移行し、ユーザは、写真が印刷され、コードＣＤが設けられた印刷物ＰＲを取得する。印刷物ＰＲには、第２画像２として写真が表示されている。

続いて、ステップＳ３ａにおいて、ユーザは動画を撮影する。その際、録音が行われてもよい。その後、ステップＳ４ａに移行し、動画のデータを表示装置ＤＳの記憶部ＭＥに転送する。録音が行われている場合、録音した可聴音のデータに関しても記憶部ＭＥに転送される。なお、ステップＳ３ａに関しては、上記ステップＳ１ａと並行して行ってもよく、上記ステップＳ１ａに先行して行ってもよい。その後、ステップＳ５ａにおいて、写真と動画の情報を相互に関連付け、上記関連付けの情報を記憶部ＭＥに記憶する。これにより、写真と動画とを関連付ける方法は終了する。
なお、動画のデータ及び可聴音のデータの転送先に関しては、記憶部ＭＥに記憶するのではなく、一端、サーバＳＶに格納してもよい。
また、写真と動画とを関連付ける処理は、表示装置ＤＳ以外の処理装置（パーソナルコンピュータなど）で行ってもよい。この場合、写真のデータや動画のデータを、一旦、処理装置に転送し、処理装置で処理した写真と動画とを関連付けた情報を、表示装置ＤＳやサーバＳＶに転送すればよい。

次に、印刷物ＰＲを画面ＳＣ越しに透かして表示させつつ、動画を画面ＳＣに表示させる方法について説明する。図１３は、印刷物ＰＲを画面ＳＣ越しに透かして表示させ、印刷物ＰＲに付随した動画を画面ＳＣに表示させる手法を説明するためのフロー図である。

図１３、図１、及び図８に示すように、印刷物ＰＲを画面ＳＣ越しに透かして表示させつつ、動画を画面ＳＣに表示させる方法が開始されると、まず、ステップＳ１ｂにおいて、ユーザは、表示装置ＤＳを印刷物ＰＲの上に置く。表示パネルＰＮＬは表示領域ＤＡの全体を透明状態にしているため、表示装置ＤＳは、印刷物ＰＲを画面ＳＣ越しに透かしてユーザに表示させることができる。

その後、ステップＳ２ｂに移行し、ステップＳ２ｂにおいて、表示装置ＤＳのセンサＳＥにて印刷物ＰＲのコードＣＤを検出し、検出したコードの情報から印刷物ＰＲに関する情報を取得する。次いで、ステップＳ３ｂにおいて、制御部ＣＯＮは、記憶部ＭＥに、印刷物ＰＲの写真（第２画像２）に関連付けられた動画のデータ（コンテンツ）が存在しているのかどうか判断する。動画のデータ（コンテンツ）が存在している場合、ステップＳ５ｂに移行する。動画のデータ（コンテンツ）が存在していない場合、ステップＳ４ｂに移行し、表示装置ＤＳをサーバＳＶに接続し、動画のデータ（コンテンツ）をサーバＳＶから記憶部ＭＥに取り込む。

次いで、ステップＳ５ｂにおいて、制御部ＣＯＮは、写真（第２画像２）に付随した動画のデータを記憶部ＭＥから選択する。ステップＳ６ｂにおいて、制御部ＣＯＮは、選択した動画を自動で再生する設定になっているのかどうか判断する。動画を自動で再生する設定になっている場合、ステップＳ８ｂに移行する。動画を自動で再生する設定になっていない場合、ステップＳ７ｂに移行し、ステップＳ７ｂにて、制御部ＣＯＮは、動画を再生するようにユーザによって表示装置ＤＳが操作されたのかどうか判断する。上記操作が行われた場合、ステップＳ８ｂに移行する。上記操作が行われていない場合、制御部ＣＯＮは、ステップＳ７ｂの判断を繰り返す。

そして、ステップＳ８ｂに移行すると、表示装置ＤＳは、表示領域ＤＡに動画を表示させる。その際、動画が、写真（第２画像２）に重畳するように表示されたり、写真の余白に表示されたりする。動画を表示させる位置は、写真（第２画像２）に応じて動画が見やすくなる位置、或いは写真と動画の情報を関連付けやすい位置などに予め設定されている。これにより、印刷物ＰＲを画面ＳＣ越しに透かして表示させつつ、動画を画面ＳＣに表示させる方法は終了する。なお、写真に付随したデータ（コンテンツ）が動画のデータだけではなく可聴音のデータも含まれている場合、制御部ＣＯＮは、表示領域ＤＡに動画を表示させつつ、可聴音をスピーカＳＰから出力させることができる。

上記のことから、例えば、制御部ＣＯＮは、第１画像ＣＨのような静止画だけを表示領域ＤＡに表示させるのではなく、静止画を含む動画であってコードＣＤの情報に基づいて第２画像２に付随する動画を、表示領域ＤＡに表示させることができる。また、制御部ＣＯＮは、コードＣＤの情報に基づいて第２画像２に付随する可聴音をスピーカＳＰから出力させることができる。

次に、図１３を用いて説明した方法に関連する方法について説明する。例えば、動画を静止画に置き換えることで、図１３に示した動画を表示する方法を、静止画を表示する方法に適用することも可能である。
図１及び図１１に示すように、制御部ＣＯＮは、コードＣＤの情報に基づいて第１画像ＣＨ１，ＣＨ２（静止画）を表示するための第１画像データが記憶部ＭＥに存在しているのかどうか判断してもよい。第１画像データが記憶部ＭＥに存在していない場合、制御部ＣＯＮは、サーバＳＶから通信部ＣＯＭを介して記憶部ＭＥに第１画像データを取り込み、記憶部ＭＥに記憶された第１画像データを使用して第１画像ＣＨ１，ＣＨ２を表示領域ＤＡに表示させることができる。

次に、第１画像ＣＨ１，ＣＨ２を印刷物ＰＲに重畳させても、識別可能に調整された第１画像ＣＨ２を表示領域ＤＡに表示させることのできる手法について説明する。図１４は、印刷物ＰＲ及び表示装置ＤＳを示す平面図であり、識別可能に調整された第１画像ＣＨ２を表示領域ＤＡに表示させ、第１画像ＣＨ１，ＣＨ２を印刷物ＰＲに重畳させている状態を示す図である。

図１４に示すように、第１画像ＣＨ１，ＣＨ２を表示領域ＤＡに表示する際、制御部ＣＯＮは、第１画像ＣＨ１と、コードＣＤの情報に基づいて識別可能に調整された第１画像ＣＨ２とを表示領域ＤＡに表示させ、第１画像ＣＨ１，ＣＨ２を印刷物ＰＲに重畳させている。なお、制御部ＣＯＮ（補正部ＣＯＲ）は、例えば、第１画像ＣＨ２に関して輝度レベルが高くなるように調整（例えば、ガンマ補正）しているが、第１画像ＣＨ１に関しては調整していない。
上記のように、表示装置ＤＳの表示領域ＤＡに表示する第１画像ＣＨについて、適宜、識別可能に調整することにより、表示装置ＤＳは、ユーザに第１画像ＣＨを識別させ易くすることができる。例えば、第１画像ＣＨの色を変更しても不都合が無い場合、第２画像２の色を考慮し、表示領域ＤＡに表示する第１画像ＣＨの色を調整し、ユーザに第１画像ＣＨを識別させ易くしてもよい。

次に、ユーザに第１画像ＣＨを識別させ易くする手法について説明する。図１５は、印刷物ＰＲを画面越しに透かして表示させ、第１画像ＣＨを表示領域ＤＡに表示させ、第１画像ＣＨを印刷物ＰＲに重畳させる際、第１画像ＣＨを識別可能に調整する手法を説明するためのフロー図である。

図１５、図１、及び図１４に示すように、第１画像ＣＨを識別可能に調整する方法が開始されると、まず、ステップＳ１ｃにおいて、ユーザは、表示装置ＤＳを印刷物ＰＲの上に置く。表示パネルＰＮＬは表示領域ＤＡの全体を透明状態にしているため、表示装置ＤＳは、印刷物ＰＲを画面ＳＣ越しに透かしてユーザに表示させることができる。

その後、ステップＳ２ｃにおいて、表示装置ＤＳのセンサＳＥにて印刷物ＰＲのコードＣＤを検出し、検出したコードの情報から印刷物ＰＲに関する情報を取得する。ここでは、コードＣＤは、第２画像２の明るさに関する情報を含んでいる。これにより、表示装置ＤＳは、第２画像２の明るさの情報を取得することができる。なお、表示装置ＤＳは、検出したコードの情報に基づいて、印刷物ＰＲの余白の明るさの情報を取得するものであってもよい。これにより、印刷物ＰＲの余白に重畳するように表示させる第１画像ＣＨ１に関しても、適宜、識別可能に調整することが可能となる。
また、コードＣＤは、印刷物ＰＲの各場所の明るさや色の情報を含んでいてもよい。この場合、第１画像ＣＨ１は、表示させる位置に応じて輝度レベルや色を適宜変えることができる。

次いで、ステップＳ３ｃにおいて、制御部ＣＯＮは、コードＣＤの情報に基づいて、印刷物ＰＲの第２画像２の明るさが標準の範囲内であるのかどうか判断する。第２画像２の明るさが標準の範囲内である場合、ステップＳ４ｃにおいて、制御部ＣＯＮは、第１画像ＣＨ２のコントラスト値を調整せずに標準値のままとし、かつ、第１画像ＣＨ２の輝度レベルを調整せずに標準レベルのままとし、ステップＳ８ｃに移行する。

第２画像２の明るさが標準の範囲内である場合（Ｓ３ｃ，ＮＯ）、ステップＳ５ｃにおいて、制御部ＣＯＮは、印刷物ＰＲの第２画像２の明るさが標準の範囲より明るいのかどうか判断する。第２画像２の明るさが標準の範囲より明るい場合、ステップＳ６ｃにおいて、第１画像ＣＨ２のコントラスト値を上記標準値より高くし、ステップＳ８ｃに移行する。第２画像２と重畳する第１画像ＣＨ２の輝度レベルが全体的に向上するため、ガンマ値を下げる補正を行うことで、第１画像ＣＨ２のコントラスト値を高くすることができる。

第２画像２の明るさが標準の範囲より暗い場合（Ｓ５ｃ，ＮＯ）、ステップＳ７ｃにおいて、制御部ＣＯＮは、第１画像Ｃ２の輝度レベルを上記標準レベルより高くし、ステップＳ８ｃに移行する。第２画像２と重畳する第１画像ＣＨ２のコントラスト値が全体的に向上するため、ガンマ値を上げる補正を行うことで、第１画像ＣＨ２のコントラスト値を高くすることができる。

これにより、ステップＳ８ｃにおいて、制御部ＣＯＮは、識別可能な第１画像ＣＨを表示装置ＤＳの表示領域ＤＡに表示させ、第１画像ＣＨを印刷物ＰＲに重畳させることができ、第１画像ＣＨを識別可能に調整する方法が終了する。例えば、制御部ＣＯＮは、調整することにより識別可能となった第１画像ＣＨ２を表示領域ＤＡに表示させ、第１画像ＣＨ２を第２画像２に重畳させることができる。また、制御部ＣＯＮは、調整することなしに識別可能な第１画像ＣＨ１を表示領域ＤＡに表示させ、第１画像ＣＨ２を印刷物ＰＲの余白に重畳させることができる。

次に、位置及び向きが調整された第１画像ＣＨ１，ＣＨ２を表示領域ＤＡに表示させている表示装置ＤＳについて説明する。図１６は、印刷物ＰＲ及び表示装置ＤＳを示す平面図であり、位置及び向きが調整された第１画像ＣＨ１，ＣＨ２を表示領域ＤＡに表示させている状態を示す図である。

図１６及び図１に示すように、印刷物ＰＲに対する表示装置ＤＳの重ねズレが生じる場合があり得る。表示装置ＤＳは、印刷物ＰＲの上に置かれている。表示パネルＰＮＬは、例えば、表示領域ＤＡの全体を透明状態にしている。この例では、印刷物ＰＲの一部が表示領域ＤＡ内に位置し、印刷物ＰＲの２つのコードＣＤの全体が複数の検出電極Ｓｘと対向し、センサＳＥは印刷物ＰＲの２つのコードＣＤを電気的に検出することができる。コードＣＤは、第２画像２の位置及び向きに関する情報を含んでいる。制御部ＣＯＮは、センサＳＥで検出したコードＣＤの情報に基づいて、第２画像２の位置及び向きを判断する。例えば、制御部ＣＯＮは、センサＳＥで検出したコードＣＤの位置及びコードＣＤの傾き具合に基づいて、第２画像２の位置及び向きを判断することができる。そして、制御部ＣＯＮは、第２画像２の位置及び向きに対応するように、位置及び向きが調整された第１画像ＣＨ１，ＣＨ２を表示領域ＤＡに表示させる。

上記のように、印刷物ＰＲの第２画像２に追従するように第１画像ＣＨ１，ＣＨ２を表示させることができるため、例えば、第１画像ＣＨ１，ＣＨ２を第２画像２に、一層、関連付けて表示することがでる。又は、ユーザに第２画像２と第１画像ＣＨ１，ＣＨ２との両方を同時に見易くすることができる。

次に、第１画像ＣＨの位置及び向きを調整する手法について説明する。図１７は、印刷物ＰＲを画面ＳＣ越しに透かして表示させ、第１画像ＣＨを表示領域ＤＡに表示させる際、第１画像ＣＨの位置及び向きを調整する手法を説明するためのフロー図である。
図１７、図１、及び図１６に示すように、第１画像ＣＨの位置及び向きの調整を開始する際、まず、ステップＳ１ｄにおいて、ユーザは、表示装置ＤＳを印刷物ＰＲの上に置く。表示パネルＰＮＬは表示領域ＤＡの全体を透明状態にしているため、表示装置ＤＳは、印刷物ＰＲを画面ＳＣ越しに透かしてユーザに表示させることができる。

その後、ステップＳ２ｄにおいて、表示装置ＤＳのセンサＳＥにて印刷物ＰＲのコードＣＤを検出し、検出したコードの情報から印刷物ＰＲに関する情報を取得する。ここでは、コードＣＤは、第２画像２（写真）の位置及び向きに関する情報を含んでいる。これにより、コードＣＤの向きやコードＣＤを検出した場所の情報に基づいて、制御部ＣＯＮは、第２画像２の位置及び向きの情報を取得することができる。

次いで、ステップＳ３ｄに移行すると、制御部ＣＯＮは、センサＳＥで検出したコードＣＤの情報に基づいて、印刷物ＰＲの第２画像２（写真）の位置及び向きを判断する。ステップＳ４ｄにおいて、制御部ＣＯＮは、印刷物ＰＲの第２画像２（写真）の位置及び向きに対応するように、位置及び向きが調整された第１画像ＣＨ１，ＣＨ２を表示領域ＤＡに表示させる。これにより、第１画像ＣＨの位置及び向きの調整が終了する。

次に、表示システムＳＹに第２画像２のサイズが異なる複数の印刷物ＰＲが含まれている場合について説明する。図１８は、コード付き印刷物ＰＲ及び表示装置ＤＳを示す平面図であり、印刷物ＰＲの複数のコードＣＤのうち１つのコードＣＤを検出可能に表示装置ＤＳが印刷物ＰＲの上に置かれ、印刷物ＰＲが画面ＳＣ越しに透かして表示され、印刷物ＰＲに付随した第１画像ＣＨ１、ＣＨ２を画面ＳＣに表示している状態を示す図である。図１８に示す印刷物ＰＲにおいて、第２画像２のサイズが図１１に示した第２画像２のサイズよりも大きく、さらに、印刷物ＰＲ自体のサイズが図１１に示した印刷物ＰＲのサイズよりも大きい。

図１８及び図１に示すように、例えば、第２画像２のサイズは、表示領域ＤＡのサイズより大きい。表示装置ＤＳが、第２画像２のサイズの異なる複数種類の印刷物ＰＲを対象に処理する場合、第２画像２のサイズに関する情報は重量である。そこで、図１８に示すコードＣＤは、第２画像２の位置及び向きを示す情報の他に、第２画像２のサイズを示す情報をさらに含んでいる。

表示装置ＤＳは、印刷物ＰＲの上に置かれている。制御部ＣＯＮによる制御の下、表示パネルＰＮＬは、例えば、表示領域ＤＡの全体を透明状態にしている。この例では、印刷物ＰＲの一部が表示領域ＤＡ内に位置し、印刷物ＰＲの１つのコードＣＤの全体が複数の検出電極Ｓｘと対向し、センサＳＥは印刷物ＰＲの１つのコードＣＤを電気的に検出することができる。なお、制御部ＣＯＮは、センサＳＥにて検出した印刷物ＰＲの少なくとも１つのコードＣＤの情報に基づいて、第２画像２に付随する第１画像ＣＨ１，ＣＨ２を表示領域ＤＡに表示させることができる。

センサＳＥにて１つのコードＣＤを検出することにより、制御部ＣＯＮは、第２画像２の、位置、向き、及びサイズに関する情報を取得することができる。また、１つのコードＣＤを検出することにより、制御部ＣＯＮは、印刷物ＰＲのどの部分が表示領域ＤＡと重畳しているのかも判断することができる。そして、制御部ＣＯＮは、印刷物ＰＲの第２画像２の位置、向き、及びサイズに対応するように、位置及び向きが調整された第１画像ＣＨ１，ＣＨ２を表示領域ＤＡに表示させる。上記のように、表示装置ＤＳは、第２画像２の位置、向き、及びサイズを考慮して第１画像ＣＨ１，ＣＨ２の位置及び向きを調整してもよい。

以上のように構成された表示システムＳＹ、及び表示システムＳＹの使用方法によれば、表示装置ＤＳの表示領域ＤＡを透明状態に切り替えることができる。画面ＳＣ越しにコード付き印刷物ＰＲの第２画像２そのものを透かして見ることができるため、画面ＳＣに第２画像２を撮影した画像を表示する場合と比較して、印刷物ＰＲの価値を損なわれ難くすることができる。

表示装置ＤＳは、画面ＳＣ側に第２画像２を透過させつつ画面ＳＣに第１画像ＣＨを表示することができるため、ユーザに多様な情報を提供することができる。
また、印刷物ＰＲのコードＣＤは透明である。そのため、コードＣＤの色が黒色である場合など、視認できるようなコードＣＤを有する印刷物ＰＲと比較して、印刷物ＰＲそのものの品位を損なわれ難くすることができる。

上記のことから、印刷物ＰＲを画面ＳＣ越しに透かして見ることができ印刷物ＰＲを電気的に検出することにより印刷物ＰＲに付随した第２画像２を画面ＳＣに表示することができる表示装置ＤＳ、上記表示装置ＤＳを備える表示システムＳＹ、及び上記表示装置ＤＳによって検出可能なコード付き印刷物ＰＲを得ることができる。

本発明の実施形態を説明したが、上記の実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。上記の新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。上記の実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

例えば、コード付き印刷物ＰＲは、少なくとも１つのコードＣＤを備えていればよい。コード付き印刷物ＰＲが複数のコードＣＤを含んでいる場合、少なくとも１つのコードＣＤが、第２画像２の位置及び向きに関する情報を持っていればよい。又は、コード付き印刷物ＰＲが複数のコードＣＤを含んでいる場合、第２画像２の位置及び向きに関する情報を、複数のコードＣＤに分散させて持たせてもよい。

ＳＹ…表示システム、ＳＶ…サーバ、ＰＲ…コード付き印刷物、１…被印刷物、
１Ａ…主面、２…第２画像、ＣＤ…コード、ＤＳ…表示装置、ＰＮＬ…表示パネル、
１１…画素電極、２１…共通電極、３０…液晶層、ＳＣ…画面、ＤＡ…表示領域、
ＳＥ…センサ、Ｓｘ…検出電極、ＬＵ…光源ユニット、ＭＥ…記憶部、ＳＰ…スピーカ、
ＣＯＭ…通信部、ＣＯＮ…制御部、ＣＨ１，ＣＨ２…第１画像。

Claims (23)

1. 表示領域に位置した複数の画素電極と、前記表示領域に位置した共通電極と、前記表示領域に位置した表示機能層と、を有する表示パネルと、
   少なくとも前記表示領域に配置された複数の検出電極を有するセンサと、
   前記複数の画素電極、前記共通電極、及び前記複数の検出電極のそれぞれの駆動を制御する制御部と、を備え、
   前記制御部は、
   前記表示パネルの前記表示領域の少なくとも一部を透明状態とすることが可能であり、
   前記センサにて検出した情報に対応付けられた第１画像を前記表示領域に表示させる、
   表示装置。
2. 記憶部をさらに備え、
   前記制御部は、
   前記センサにて検出した情報に基づいて前記第１画像を表示するための第１画像データが前記記憶部に存在しているのかどうか判断し、
   前記第１画像データが前記記憶部に存在している場合、前記記憶部に記憶された前記第１画像データを使用して前記第１画像を前記表示領域に表示させる、
   請求項１に記載の表示装置。
3. 前記表示パネルの側面に位置し、前記制御部により駆動が制御され、前記表示機能層に光を照射する光源ユニットをさらに備え、
   前記第１画像を前記表示領域に表示する際、前記制御部は、前記センサにて検出した情報に基づいて、
   識別可能に調整された前記第１画像を前記表示領域に表示させる、
   請求項１に記載の表示装置。
4. 前記第１画像を前記表示領域に表示する際、前記制御部は、
   前記センサにて検出した情報に基づいて、位置及び向きが調整された前記第１画像を前記表示領域に表示させる、
   請求項１に記載の表示装置。
5. 前記表示パネルは、前記第１画像を表示する画面を有し、
   前記複数の画素電極、及び前記共通電極は、前記複数の検出電極のグループと前記画面との間に位置している、
   請求項１に記載の表示装置。
6. 前記第１画像を前記表示領域に表示する際、前記制御部は、
   前記第１画像を含み前記センサにて検出した情報に対応付けられた動画を前記表示領域に表示させる、
   請求項１に記載の表示装置。
7. 前記制御部により駆動が制御されるスピーカをさらに備え、
   前記制御部は、
   前記センサにて検出した情報に対応付けられた可聴音を前記スピーカから出力させる、
   請求項１又は６に記載の表示装置。
8. 前記制御部により駆動が制御されるスピーカと、
   記憶部と、をさらに備え、
   前記制御部は、
   前記センサにて検出した情報に基づいて前記動画を表示するための動画データと可聴音を出力するための可聴音データとが前記記憶部に存在しているのかどうか判断し、
   前記動画データと前記可聴音データとが前記記憶部に存在している場合、前記記憶部に記憶された前記動画データを使用して前記動画を前記表示領域に表示させ、前記記憶部に記憶された前記可聴音データを使用して前記可聴音を前記スピーカに出力させる、
   請求項６に記載の表示装置。
9. 表示領域に位置した複数の画素電極と前記表示領域に位置した共通電極と前記表示領域に位置した表示機能層とを有する表示パネルと、少なくとも前記表示領域に配置された複数の検出電極を有するセンサと、前記複数の画素電極、前記共通電極、及び前記複数の検出電極のそれぞれの駆動を制御する制御部と、を具備する表示装置と、
   主面を有する被印刷物と、前記主面に表示される第２画像と、前記主面に位置し前記第２画像に関する情報を持ち前記センサにて検出可能である透明な第１コードと、を有するコード付き印刷物と、を備え、
   前記制御部は、
   前記表示パネルの前記表示領域の少なくとも一部を透明状態とすることが可能であり、
   前記センサにて検出した前記印刷物の前記第１コードの情報に基づいて、前記第２画像に付随する第１画像を前記表示領域に表示させる、
   表示システム。
10. 前記表示装置は、記憶部をさらに具備し、
    前記制御部は、
    前記第１コードの前記情報に基づいて前記第１画像を表示するための第１画像データが前記記憶部に存在しているのかどうか判断し、
    前記第１画像データが前記記憶部に存在している場合、前記記憶部に記憶された前記第１画像データを使用して前記第１画像を前記表示領域に表示させる、
    請求項９に記載の表示システム。
11. データが格納されているサーバをさらに備え、
    前記表示装置は、記憶部と、前記制御部により駆動が制御され前記サーバと通信可能な通信部と、をさらに具備し、
    前記制御部は、
    前記第１コードの前記情報に基づいて前記第１画像を表示するための第１画像データが前記記憶部に存在しているのかどうか判断し、
    前記第１画像データが前記記憶部に存在していない場合、前記サーバから前記通信部を介して前記記憶部に前記第１画像データを取り込み、前記記憶部に記憶された前記第１画像データを使用して前記第１画像を前記表示領域に表示させる、
    請求項９に記載の表示システム。
12. 前記第１画像を前記表示領域に表示させる際、前記制御部は、
    前記第１画像を前記第２画像に重畳して表示する、
    請求項９に記載の表示システム。
13. 前記表示装置は、前記表示パネルの側面に位置し前記制御部により駆動が制御され前記表示機能層に光を照射する光源ユニットをさらに具備し、
    前記第１画像を前記表示領域に表示する際、前記制御部は、前記第１コードの前記情報に基づいて、
    識別可能に調整された前記第１画像を前記表示領域に表示させ、前記第１画像を前記印刷物に重畳させる、
    請求項１２に記載の表示システム。
14. 前記第１コードは、前記第２画像の位置及び向きに関する情報を含み、
    前記第１画像を前記表示領域に表示する際、前記制御部は、
    前記第１コードの前記情報に基づいて前記第２画像の前記位置及び前記向きを判断し、前記第２画像の前記位置及び前記向きに対応するように位置及び向きが調整された前記第１画像を前記表示領域に表示させる、
    請求項９に記載の表示システム。
15. 前記第１画像を前記表示領域に表示する際、前記制御部は、
    前記第１画像だけではなく、前記第１画像を含み前記第１コードの前記情報に基づいて前記第２画像に付随する動画を前記表示領域に表示させる、
    請求項９に記載の表示システム。
16. 前記表示装置は、前記制御部により駆動が制御されるスピーカをさらに具備し、
    前記制御部は、
    前記第１コードの前記情報に基づいて、前記第２画像に付随する可聴音を前記スピーカから出力させる、
    請求項９又は１５に記載の表示システム。
17. 前記表示装置は、
    前記制御部により駆動が制御されるスピーカと、
    データを記憶する記憶部と、をさらに具備し、
    前記制御部は、
    前記第１コードの前記情報に基づいて前記動画を表示するための動画データと可聴音を出力するための可聴音データとが前記記憶部に存在しているのかどうか判断し、
    前記動画データと前記可聴音データとが前記記憶部に存在している場合、前記記憶部に記憶された前記動画データを使用して前記動画を前記表示領域に表示させ、前記記憶部に記憶された前記可聴音データを使用して前記可聴音を前記スピーカに出力させる、
    請求項１５に記載の表示システム。
18. 前記印刷物は、前記主面に位置し前記第１コードと距離を置いて位置し前記第２画像に関する情報を持ち前記センサにて検出可能である透明な第２コードをさらに有し、
    前記制御部は、
    前記センサにて検出した前記印刷物の前記第１コード及び前記第２コードの少なくとも一方の情報に基づいて、前記第２画像に付随する第１画像を前記表示領域に表示させる、
    請求項９に記載の表示システム。
19. 前記センサにて前記印刷物の前記第１コードを検出する際、前記表示装置は、前記印刷物の前記主面側に接している、
    請求項９に記載の表示システム。
20. 主面を有する被印刷物と、
    前記主面に表示される第２画像と、
    前記主面に位置し前記第２画像に関する情報を持ち導電性を有する透明な第１コードと、を備える、
    コード付き印刷物。
21. 前記第１コードは、３次元のパターンを有する、
    請求項２０に記載のコード付き印刷物。
22. 前記第１コードは、透明導電樹脂で形成されている、
    請求項２０に記載のコード付き印刷物。
23. 主面を有する被印刷物と、
    前記主面に表示される第２画像と、
    前記主面に位置し前記第２画像に関する情報を持ち誘電体で形成され３次元のパターンを有する透明な第１コードと、を備える、
    コード付き印刷物。

Images