JP6579069B2 - 光通信装置、光通信方法、及び、プログラム - Google Patents

光通信装置、光通信方法、及び、プログラム Download PDF

Info

Publication number
JP6579069B2
JP6579069B2 JP2016183064A JP2016183064A JP6579069B2 JP 6579069 B2 JP6579069 B2 JP 6579069B2 JP 2016183064 A JP2016183064 A JP 2016183064A JP 2016183064 A JP2016183064 A JP 2016183064A JP 6579069 B2 JP6579069 B2 JP 6579069B2
Authority
JP
Japan
Prior art keywords
color
images
predetermined
predetermined image
optical communication
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016183064A
Other languages
English (en)
Other versions
JP2018050116A (ja
Inventor
正哲 菊地
正哲 菊地
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2016183064A priority Critical patent/JP6579069B2/ja
Priority to US15/684,003 priority patent/US10218439B2/en
Priority to CN201710831255.6A priority patent/CN107846251B/zh
Publication of JP2018050116A publication Critical patent/JP2018050116A/ja
Application granted granted Critical
Publication of JP6579069B2 publication Critical patent/JP6579069B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B10/00Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/11Arrangements specific to free-space transmission, i.e. transmission through air or vacuum
    • H04B10/114Indoor or close-range type systems
    • H04B10/116Visible light communication
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/643Hue control means, e.g. flesh tone control
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L7/00Arrangements for synchronising receiver with transmitter
    • H04L7/0075Arrangements for synchronising receiver with transmitter with photonic or optical means

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Optical Communication System (AREA)

Description

本発明は、光通信装置、光通信方法、及び、プログラムに関する。
光を用いた情報伝送(光通信)においては、送信装置における光源が光を発し、受信装置が撮像した画像に含まれる光の変化に応じた情報を取得する技術が存在する(例えば、特許文献1参照)。このような光通信では、光源の非点灯期間が同期タイミングとして用いられることがある。
特開2016−38809号公報
しかしながら、光源が発光ダイオード(LED:Light Emitting Diode)等である場合、非点灯であっても光源の周囲に配置された反射板によって受信装置側では明るく見えたり、環境によっては受信装置側で非点灯に見えない場合がある。すなわち、受信装置側では、光源の発光態様の判別が適切に行うことができないことがある。
本願発明はこのような問題点に鑑みてなされたもので、光通信における光源の発光態様の適切な判別を可能とすることを目的とする。
上記目的を達成するために、本発明に係る光通信装置は、
所定の周期で変化する光信号のフォーマットに対応する期間分の複数の画像を取得する取得手段と、
前記取得手段により取得された複数の画像における所定の画像領域について、所定の可視光通信システムで定義される可視光情報が含まれる第1の色と前記可視光情報が含まれていない第2の色との何れか一方を含むか否かを、所定周期で判定する判定手段と、
を備えることを特徴とする。
本発明によれば、光通信における光源の発光態様の適切な判別が可能となる。
本発明の実施形態に係る光通信システムの構成を示す図である。 図1に示す送信装置の構成を示す図である。 図1に示す受信装置の構成を示す図である。 受信装置の動作を示す第1のフローチャートである。 受信装置の動作を示す第2のフローチャートである。 受信装置の動作を示す第3のフローチャートである。 光信号のフォーマットの一例を示す図である。 色空間の一例を示す図である。 色平面の一例を示す図である。 色平面における色境界の一例を示す図である。 光信号フォーマットの他の例を示す図である。
以下、本発明の実施の形態に係る光通信システムについて説明する。本発明の実施形態に係る光通信システム1は、図1に示すように、送信装置100と受信装置200とを含んで構成されている。
光通信システム1では、送信装置100と受信装置200とは、光を通信媒体として送信装置100から受信装置200への通信を行うことができる。
送信装置100は、受信装置200への通信対象の情報を、変調により赤(R)、緑(G)、青(B)の時系列で変化するとともに消灯期間であるヘッダ部分の黒(Bk)を含む光信号に変換して出力する。
受信装置200は、例えばスマートフォンであり、撮像範囲に含む送信装置100を撮像することにより、送信装置100からの光信号を受光する。また、受信装置200は、撮像により得られた画像を表示する。また、受信装置200は、受光した光信号から通信対象の情報を復号し、表示する。
次に、送信装置100について説明する。送信装置100は、図2に示すように、制御部102、メモリ104、送信部114を含んで構成される。
制御部102は、CPU(Central Processing Unit)を備え、メモリ104に格納されているプログラムに従ってソフトウェア処理を実行し、送信装置100が具備する各種機能を実現するために機能する。
メモリ104は、例えばワークエリアとなるRAM(Random Access Memory)、基本動作プログラムを記憶するROM(Read Only Memory)である。メモリ104は、送信装置100における制御等に用いられる各種情報(プログラム等)を記憶する。
制御部102内の符号化・変調部110は、通信対象である情報をビットデータ列に符号化する。更に、符号化・変調部110は、ビットデータ列に基づくデジタル変調を行う。変調方式として例えば周波数を28.8(kHz)とする搬送波を用いた4PPM(Pulse Position Modulation)が採用される。制御部102内の駆動部112は、符号化・変調部110が生成した信号と、予め定められた光信号のフォーマットとに基づいて、送信部114に対して、波長の異なる光である赤(R)、緑(G)、青(B)の光を同一の輝度で、変化周期t1で時間的に変化しながら点灯させるとともに、ヘッダに対応する消灯期間において消灯させる制御を行う。
送信部114は、例えば発光ダイオードである。送信部114は、駆動部112の制御により、点灯期間において赤(R)、緑(G)、青(B)の各波長の光を同一の輝度で、変化周期t1で時間的に変化させながら出力するともに、ヘッダに対応する消灯期間において消灯する。
次に、受信装置200について説明する。受信装置200は、撮像画像を表示するとともに、送信装置100と情報を受信するための通信装置として機能する。受信装置200は、図3に示すように、制御部202、メモリ204、操作部206、表示部207、無線通信部208、アンテナ210、撮像部214を含んで構成される。
制御部202は、CPUによって構成される。制御部202は、メモリ204に記憶されたプログラムに従ってソフトウェア処理を実行することにより、受信装置200が具備する各種機能を実現するために機能する。
メモリ204は、例えばRAMやROMである。メモリ204は、受信装置200における制御等に用いられる各種情報(プログラム等)を記憶する。
操作部206は、表示部207の表示領域の上面に配置されるタッチパネルであり、ユーザの操作内容を入力するために用いられるインタフェースである。表示部207は、例えば、LCD(Liquid Crystal Display)、PDP(Plasma Display Panel)、EL(Electro Luminescence)ディスプレイ等によって構成され、画像を表示する。
無線通信部208は、例えば無線周波数(RF:Radio Frequency)回路やベースバンド(BB:Base Band)回路等を用いて構成される。無線通信部208は、アンテナ210を介して、無線信号の送信及び受信を行う。また、無線通信部208は、送信信号の変調と、受信信号の復調とを行う。
撮像部214は、受信装置200の筐体において、表示部207が設置された面とは反対側の面に配置される。撮像部214は、レンズと受光素子により構成される。レンズは、ズームレンズ等により構成され、制御部202によるズーム制御及び合焦制御により移動する。撮像部214の撮像画角、光学像は、レンズの移動によって制御される。受光素子は、受光面に規則的に二次元配列された複数の受光素子により構成される。受光素子は、例えば、フォトダイオード、ベイヤー配列のカラーフィルターを実装する撮像デバイス、あるいは三板式のCCD(Charge Coupled Device)、CMOS(Complementary Metal Oxide Semiconductor)等の撮像デバイスである。
撮像部214は、送信装置100内の送信部114における光の変化周期t1と同一の撮像周期t2で、且つ、一度の撮像に要する期間(露光期間)t3で撮像を行う。撮像部214は、入光された光学像を、制御部202からの制御信号に基づいて所定範囲の撮像画角で撮像(受光)し、その撮像画角内の画像信号を逐次、制御部202へ出力する。
制御部202内の画像取得部232は、撮像部214からの画像信号を取得する毎に、当該画像信号をデジタルデータに変換してフレームを生成する。上述したように、撮像部214の撮像周期はt2であることに対応して、画像取得部232は、時間t2毎にフレームを生成する。
制御部202内の判定部233は、時系列的に連続して取得される、光信号のフォーマットに対応する期間分の複数のフレームにおいて、色相(H:Hue)が赤(R)、緑(G)、青(B)の何れかに逐次切り替わる画素の領域を色変化領域として検出する。なお、複数のフレームにおいて、色変化領域の位置が変化する場合、判定部233は、位置の変化に追随して色変化領域を検出することができる。次に、判定部233は、光信号のフォーマットに対応する期間分の複数のフレームにおいて、色変化領域の色相、明度(V:Value)、彩度(S:Saturation)の各値を取得する。更に、判定部233は、取得した色相、明度、彩度に基づいて、光信号のフォーマットに対応する期間分の複数のフレームにおいて、色変化領域の色が第1の色としての赤(R)、緑(G)、青(B)の何れかと、消灯期間であるヘッダに対応する第2の色としての黒(Bk)とを含むか否かを判定する。
光信号のフォーマットに対応する期間分の複数のフレームにおいて、色変化領域が赤(R)、緑(G)、青(B)の何れかと、黒(Bk)とを含む場合、判定部233は、色変化領域が黒(Bk)となるフレームのタイミングの情報を光信号のヘッダのタイミングの情報としてメモリ204に記憶する。また、判定部233は、黒(Bk)である色変化領域の色相、明度、彩度の各値をヘッダの色の値としてメモリ204に記憶する。
制御部202内の決定部234は、光信号のフォーマットに対応する期間分の複数のフレームにおいて、点灯期間に対応するフレームの色変化領域の色相値を赤(R)、緑(G)、青(B)に区分する。次に、決定部234は、赤(R)の色相値の平均値、緑(G)の色相値の平均値、青(B)の色相値の平均値を算出する。更に、決定部234は、赤(R)の色相値の平均値と緑(G)の色相値の平均値との中間値を赤(R)と緑(G)の境界値として算出し、緑(G)の色相値の平均値と青(B)の色相値の平均値との中間値を緑(G)と青(B)の境界値として算出し、青(B)の色相値の平均値と赤(R)の色相値の平均値との中間値を青(B)と赤(R)の境界値として算出し、それぞれメモリ204に記憶する。
制御部202内の取得制御部235は、メモリ204に記憶されているヘッダのタイミングの情報に基づいて、画像取得部232がフレームを生成する際に、光信号のフォーマットに対応する期間分の複数のフレームのうちの先頭(ヘッダ)のフレームから生成を開始するように、画像取得部232を制御する。
制御部202内の復号部236は、光信号のフォーマットに対応する期間分の複数のフレームにおいて、色変化領域が赤(R)、緑(G)、青(B)の何れかと、ヘッダに対応する消灯期間の黒(Bk)とを含む場合、赤(R)、緑(G)、青(B)の各色に対応するビットデータ列を復号するよう制御し、通信対象の情報を取得する。
制御部202内の表示制御部237は、フレームの画像と、通信対象の情報の画像とを表示部207に表示させる制御を行う。
次に、受信装置200の動作を説明する。図4〜図6は、受信装置200の動作を示すフローチャートである。
送信装置100は、送信装置100と受信装置200との間で予め定められた光信号のフォーマットに対応する光信号を出力する。図7は、光信号のフォーマットの一例を示す図である。図7に示す光信号のフォーマットに対応する光信号は、12個の時間t1(変化周期t1)の発光パターンからなる。具体的には、図7に示す光信号のフォーマットに対応する光信号は、ヘッダに対応する消灯期間の2個の黒(Bk)の発光パターン、タイプに対応する1個の赤(R)の発光パターン、データに対応する7個の赤(R)、緑(G)、青(B)の何れかの発光パターン、及び、パリティに対応する2個の赤(R)、緑(G)、青(B)の何れかの発光パターンを含む。
まず、受信装置200内の制御部202は、メモリ204に記憶されている色相、明度、彩度の各値を初期化する(ステップS101)。その後、撮像部214は、送信装置100の方向の撮像を開始し、画像信号を制御部202へ出力する。制御部202内の画像取得部232は、撮像部214からの画像信号を取得する毎に、当該画像信号をデジタルデータに変換してフレームを生成する。制御部202内の表示制御部237は、生成されたフレームの画像を表示部207に表示させる制御を行う(ステップS102)。
次に、制御部202内の判定部233は、受信装置200の利用者の操作によってフレーム内の色変化領域が指定されたか否かを判定する(ステップS103)。例えば、利用者は、表示部207にフレームの画像が表示されているときに、表示部207の表示領域の上面に配置されたタッチパネルである操作部206に触れることによって色変化領域を指定することができる。判定部233は、操作部206からの操作信号に基づいて、フレームの画像において、利用者が指定した位置を検出し、その位置を色変化領域として特定する。
受信装置200の利用者の操作によってフレーム内の色変化領域が指定されていない場合(ステップS103;NO)、判定部233は、光信号のフォーマットに対応する期間分の複数のフレームに基づいて、色変化領域を探索する(ステップS104)。
具体的には、判定部233は、画像取得部232から光信号のフォーマットに対応する期間分の複数のフレームを取得する。本実施形態では、上述したように、光信号の変化周期はt1であり、撮像周期およびフレームの生成周期t2とは同一である。また、図7に示す光信号のフォーマットに対応する光信号は、12個の時間t1(変化周期t1)の発光パターンを含む。従って、光信号のフォーマットに対応する期間分の複数のフレームの数は12個となる。更に、判定部233は、光信号のフォーマットに対応する期間分の複数のフレームにおいて、色が赤(R)、緑(G)、青(B)の何れかに逐次切り替わる画素の領域を色変化領域として検出する。
次に、判定部233は、ステップS104の処理の結果、色変化領域が存在するか否かを判定する(ステップS105)。色変化領域が存在しない場合(ステップS105;NO)、再び、ステップS103以降の動作が繰り返される。
一方、色変化領域が存在する場合(ステップS105;YES)、又は、操作により色変化領域が指定された場合(ステップS103;YES)、次に、判定部233は、フレームにおける色変化領域の情報(例えば座標)をメモリ204に記憶させる(ステップS106)。
次に、判定部233は、光信号のフォーマットに対応する期間分の複数のフレームのそれぞれにおける、色変化領域の色相、明度、彩度の各値をメモリ204に記憶させる(ステップS107)。
図8は、色空間の一例を示す図であり、図9は、色平面の一例を示す図である。色は、色相、明度、彩度によって特定され、図8に示すような円柱の色空間上の位置で特定される。図8の色空間においては、円周方向が色相(H)を示し、高さ方向(垂直方向)が明度(V)を示し、半径方向が彩度(S)を示す。また、図8を上方向から見た平面(色平面)は図9に示すものとなる。赤(R)、緑(G)、青(B)は色相値によって区分され、初期状態においては、赤(R)と緑(G)の色相の境界値は境界値521で示され、緑(G)と青(B)の色相の境界値は境界値522で示され、青(B)と赤(R)の色相の境界値は境界値523で示される。
図4のステップS107の処理の後、図5に示す動作に移行し、判定部233は、光信号のフォーマットに対応する期間分の複数のフレームのうち、消灯期間に対応する数のフレーム内の色変化領域においてのみ、明度値が予め定められた規定値未満であるか否かを判定する(ステップS111)。本実施形態では、上述したように、図7に示す光信号のフォーマットに対応する光信号は、消灯期間であるヘッダに対応する黒(Bk)は、2個の時間t1(変化周期t1)の発光パターンを含んでおり、時間t1と撮像周期およびフレームの生成周期t2とは同一である。従って、消灯期間に対応する数のフレームとは2個のフレームを示す。
また、図8に示すように、赤(R)501、緑(G)502、青(B)503は、明度値が大きいのに対して、黒(Bk)504は、明度値が小さい。このため、消灯期間に対応する数のフレーム内の色変化領域においてのみ、明度値が予め定められた規定値未満である場合には、明度値が規定値未満の色変化領域を含むフレームのタイミングは、色変化領域が黒(Bk)と認識されるタイミングであり、当該タイミングはヘッダのタイミングであるとみなすことができる。
消灯期間に対応する数のフレーム内の色変化領域においてのみ、明度値が予め定められた規定値未満であることを満たさない場合(ステップS111;NO)、判定部233は、光信号のフォーマットに対応する期間分の複数のフレームのうち、色変化領域が最小の明度となるフレーム(最小明度フレーム)を選択する(ステップS112)。
次に、判定部233は、ステップS112において選択した最小明度フレームの数が消灯期間に対応するフレームの数と一致するか否かを判定する(ステップS113)。最小明度フレームの数が消灯期間に対応するフレームの数と一致する場合には、最小明度フレームのタイミングは、色変化領域が黒(Bk)と認識されるタイミングであり、当該タイミングはヘッダのタイミングであるとみなすことができる。
最小明度フレームの数が消灯期間に対応するフレームの数と一致しない場合(ステップS113;NO)、判定部233は、最小明度フレームのうち、色変化領域が最小の彩度となるフレーム(最小彩度フレーム)を選択する(ステップS114)。
次に、判定部233は、ステップS114において選択した最小彩度フレームの数が消灯期間に対応するフレームの数と一致するか否かを判定する(ステップS115)。図8に示すように、赤(R)501、緑(G)502、青(B)503は、彩度値が大きいのに対して、黒(Bk)は、彩度値が小さい。このため、最小彩度フレームの数が消灯期間に対応するフレームの数と一致する場合には、最小彩度フレームのタイミングは、色変化領域が黒(Bk)と認識されるタイミングであり、当該タイミングはヘッダのタイミングであるとみなすことができる。
最小彩度フレームの数が消灯期間に対応するフレームの数と一致しない場合(ステップS115;NO)、図4のステップS103以降の動作が繰り返される。
一方、消灯期間に対応する数のフレーム内の色変化領域においてのみ、明度値が予め定められた規定値未満である場合(ステップS111;YES)、判定部233は、明度値が規定値未満の色変化領域を含むフレームのタイミングを、色変化領域が黒(Bk)と認識されるヘッダのタイミングであるとみなして、当該ヘッダのタイミングの情報をメモリ104に記憶させる。また、判定部233は、黒(Bk)と認識される色変化領域の色の色相、明度、彩度の各値をヘッダの色としてメモリ204に記憶させる(ステップS116)。
また、最小明度フレームの数が消灯期間に対応するフレームの数と一致する場合(ステップS113;YES)、判定部233は、最小明度フレームのタイミングを、色変化領域が黒(Bk)と認識されるヘッダのタイミングであるとみなして、当該ヘッダのタイミングの情報をメモリ104に記憶させる。また、判定部233は、黒(Bk)と認識される色変化領域の色の色相、明度、彩度の各値をヘッダの色としてメモリ204に記憶させる(ステップS116)。
また、最小彩度フレームの数が消灯期間に対応するフレームの数と一致する場合(ステップS115;YES)、判定部233は、最小彩度フレームのタイミングを、色変化領域が黒(Bk)と認識されるヘッダのタイミングであるとみなして、当該ヘッダのタイミングの情報をメモリ104に記憶させる。また、判定部233は、黒(Bk)と認識される色変化領域の色の色相、明度、彩度の各値をヘッダの色としてメモリ204に記憶させる(ステップS116)。
図5のステップS116の処理の後、図6の動作に移行し、制御部202内の決定部234は、光信号のフォーマットに対応する期間分の複数のフレームにおいて、点灯期間に対応するフレームの色変化領域の色相値を赤(R)、緑(G)、青(B)に区分する(ステップS121)。例えば、図9において、色511a、511b、511cの色相値は、赤判定領域に含まれるため、赤(R)と判定される。また、色512a、512b、512cの色相値は、緑判定領域に含まれるため、緑(G)と判定される。また、色513a、513b、513cの色相値は、青判定領域に含まれるため、青(B)と判定される。
次に、決定部234は、赤(R)、緑(G)、青(B)のそれぞれについて、色相値の平均値を算出する(ステップS122)。例えば、決定部234は、図9において、赤(R)511a、511b、511cの色相値の平均値と、緑(G)512a、512b、512cの色相値の平均値と、青(B)513a、513b、513cの平均値とを算出する。
次に、決定部234は、赤(R)の色相値の平均値と緑(G)の色相値の平均値との中間値を赤(R)と緑(G)の色相の境界値として算出し、緑(G)の色相値の平均値と青(B)の色相値の平均値との中間値を緑(G)と青(B)の色相の境界値として算出し、青(B)の色相値の平均値と赤(R)の色相値の平均値との中間値を青(B)と赤(R)の色相の境界値として算出し、それぞれメモリ204に記憶させる(ステップS123)。これにより、例えば、図10に示すように、赤(R)と緑(G)の色相の境界値は、初期状態の境界値521から新たな境界値531となり、緑(G)と青(B)の色相の境界値は、初期状態の境界値522から新たな境界値532となり、青(B)と赤(R)の色相の境界値は、初期状態の境界値523から新たな境界値533となる。
図4〜図6の動作が行われた後、制御部202内の取得制御部235は、メモリ204に記憶されているヘッダのタイミングの情報に基づいて、画像取得部232がフレームを生成する際に、光信号のフォーマットに対応する期間分の複数のフレームのうちの先頭のフレームから生成を開始するように、画像取得部232を制御する。
また、制御部202内の復号部236は、メモリ204に記憶されている色変化領域の情報からフレーム内の色変化領域の位置を特定する。更に、復号部236は、メモリ204に記憶されている黒(Bk)と認識される色変化領域の色の色相、明度、彩度の各値と、赤(R)と緑(G)の境界値、緑(G)と青(B)の境界値、青(B)と赤(R)の境界値とに基づいて、光信号のフォーマットに対応する期間分の複数のフレームにおいて、色変化領域が赤(R)、緑(G)、青(B)、黒(Bk)の何れかであるかを判定し、赤(R)、緑(G)、青(B)の各色に対応するビットデータ列を復号するよう制御して、通信対象の情報を取得する。
以上説明したように、本実施形態に係る光通信システム1では、受信装置200は、光信号のフォーマットに対応する期間分の複数のフレームを取得し、これらのフレーム内の色変化領域が第1の色である赤(R)、緑(G)、青(B)の何れかと第2の色であるヘッダに対応する消灯期間の黒(Bk)とを含むか否かを判定する。これにより、光信号のフォーマットに基づいて行われる光通信における色(発行態様)の適切な判別が可能となる。
また、受信装置200は、光信号のフォーマットに対応する期間分の複数のフレーム内の色変化領域が赤(R)、緑(G)、青(B)の何れかと黒(Bk)とを含む場合には、色変化領域における赤(R)、緑(G)、青(B)の各色に対応するビットデータ列を復号するよう制御して、通信対象の情報を取得する。これにより、光通信において、適切に判別された色に応じた情報の取得が可能となる。
また、受信装置200は、色変化領域の色相、明度、彩度に基づいて、色変化領域が赤(R)、緑(G)、青(B)の何れかと黒(Bk)とを含むか否かを判定する。これにより、光通信における色の適切な判別が可能となる。
また、受信装置200は、色変化領域の明度が規定値未満である場合、色変化領域が黒(Bk)であると判定する。このように明度に基づいて黒(Bk)の判別を行うことにより、赤(R)、緑(G)、青(B)と、黒(Bk)との区別を適切に行うことができる。
また、受信装置200は、消灯期間に対応する数のフレーム内の色変化領域においてのみ、明度値が予め定められた規定値未満であることを満たさない場合、光信号のフォーマットに対応する期間分の複数のフレーム内の色変化領域のうち、最小の明度である色をヘッダに対応する消灯期間の黒(Bk)であると判定する。このように、最小の明度の色を黒(Bk)であると判定することにより、赤(R)、緑(G)、青(B)と、黒(Bk)との区別を適切に行うことができる。
また、受信装置200は、消灯期間に対応する数のフレーム内の色変化領域においてのみ、明度値が予め定められた規定値未満であることを満たさない場合、光信号のフォーマットに対応する期間分の複数のフレーム内の色変化領域のうち、最小の彩度である色をヘッダに対応する消灯期間の黒(Bk)であると判定する。このように、最小の明度の色を黒(Bk)であると判定することにより、赤(R)、緑(G)、青(B)と、黒(Bk)との区別を適切に行うことができる。
また、受信装置200は、光信号のフォーマットに対応する期間分の複数のフレーム内の色変化領域が赤(R)、緑(G)、青(B)の何れかと黒(Bk)とを含む場合には、フレームを生成する際に、光信号のフォーマットに対応する期間分の複数のフレームのうちの先頭のフレームから生成を開始するように制御する。これにより、光信号のフォーマットに応じてヘッダの部分からのフレームの取得が可能となり、復号による情報取得を容易に行うことができる。
また、受信装置200は、取得した赤(R)、緑(G)、青(B)の色相値に応じて、赤(R)と緑(G)の色相の境界値、緑(G)と青(B)の色相の境界値、青(B)と赤(R)の色相の境界値を算出して記憶する。これにより、赤(R)、緑(G)、青(B)の判別を実際の環境に応じて適切に行うことができる。
なお、本発明は、上記実施形態に限定されず、様々な変形及び応用が可能である。例えば、上述した実施形態では、赤(R)、緑(G)、青(B)と黒(Bk)とを光通信に用いる場合について説明したが、他の色が用いられてもよい。例えば、図11に示す光信号のフォーマットのように点灯期間に対応する白(W)と消灯期間に対応する(Bk)とが光通信に用いられるようにしてもよい。この場合、受信装置200は、光信号のフォーマットに対応する期間分の複数のフレーム内の色変化領域が白(W)と黒(Bk)とを含むか否かを判定する。
また、図11においては、ヘッダのみならず、データにも黒(Bk)を含んでいるが、ヘッダにおいてのみ、黒(Bk)が2個連続する。このため、受信装置200は、2個の連続する黒(Bk)を判別することにより、ヘッダを特定することができる。
また、上述した実施形態では、第1の色が赤(R)、緑(G)、青(B)であり、第2の色が黒(Bk)である場合について説明したが、第1の色及び第2の色はこれら以外の色であってもよい。例えば、第1の色が赤(R)、第2の色が緑(G)である場合、受信装置200は、色相値の相違によって、第1の色である赤(R)と、第2の色である緑(G)とを判別することができる。
また、上述した実施形態では、送信装置100が発する光の変化周期t1と、受信装置200における撮像周期およびフレームの生成周期t2とは同一であるようにしたが、t2はt1以下であればよい。例えば、受信装置200における撮像周期およびフレームの生成周期t2が、送信装置100が発する光の変化周期t1の1/2である場合、光信号のフォーマットに対応する期間分の複数のフレームとは、上述した実施形態の2倍の数のフレームとなる。
更には、受信装置200は、光信号のフォーマットに対応する期間分以上の複数のフレームを取得すれば、フレーム内の色変化領域が第1の色である赤(R)、緑(G)、青(B)の何れかと第2の色であるヘッダに対応する消灯期間の黒(Bk)とを含むか否かの判定等の各種処理を行うことができる。
また、上述した実施形態では、受信装置200は、記憶しているヘッダのタイミングの情報に基づいて、フレームを生成する際に、光信号のフォーマットに対応する期間分の複数のフレームのうちの先頭のフレームから生成を開始するように制御した。しかしこれに限定されず、例えば、受信装置200は、ヘッダのタイミングの情報に基づいて、撮像の開始タイミングが光信号におけるヘッダのタイミングと一致するように制御してもよいし、復号が光信号におけるヘッダから開始されるように制御してもよい。
また、送信装置100内の送信部114は、例えば、表示部の一部に構成されていてもよい。
また、受信装置200は、撮像が可能であれば、どのような装置でもよい。例えば、PHS(Personal Handy-phone System)、PDA(Personal Digital Assistant又はPersonal Data Assistance)、タブレットPC(Personal Computer)、ゲーム機器、携帯型音楽再生装置等であってもよい。
また、受信装置200の機能と送信装置100の機能とを両方備える装置を用意し、場面に応じて、両機能を使い分けることができるようにしてもよい。
また、上記各実施形態において、実行されるプログラムは、フレキシブルディスク、CD−ROM(Compact Disc Read - Only Memory)、DVD(Digital Versatile Disc)、MO(Magneto - Opticaldisc)等のコンピュータ読み取り可能な記録媒体に格納して配布し、そのプログラムをインストールすることにより、上述の処理を実行するシステムを構成することとしてもよい。
また、プログラムをインターネット等のネットワーク上の所定のサーバが有するディスク装置等に格納しておき、例えば、搬送波に重畳させて、ダウンロード等するようにしてもよい。
なお、上述の機能を、OS(Operating System)が分担して実現する場合又はOSとアプリケーションとの協働により実現する場合等には、OS以外の部分のみを媒体に格納して配布してもよく、また、ダウンロード等してもよい。
以上、本発明の好ましい実施形態について説明したが、本発明は係る特定の実施形態に限定されるものではなく、本発明には、特許請求の範囲に記載された発明とその均等の範囲が含まれる。以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
(付記1)
所定時間連続して画像を取得する取得手段と、
前記取得手段により取得された複数の画像における所定の画像領域について、所定の可視光通信システムで定義される可視光情報が含まれる第1の色と前記可視光情報が含まれていない第2の色との何れか一方を含むか否かを、所定周期で判定する判定手段と、
を備えることを特徴とする光通信装置。
(付記2)
前記判定手段により前記複数の画像における所定の画像領域について、前記第1の色と前記第2の色との何れか一方を含むと判定された場合に、前記複数の画像における所定の画像領域の色の変化に応じた情報を復号する復号手段を更に備えることを特徴とする付記1に記載の光通信装置。
(付記3)
前記判定手段は、前記複数の画像における所定の画像領域の色相、明度及び彩度に基づいて、前記複数の画像における所定の画像領域について、前記第1の色と前記第2の色との何れか一方を含むか否かを判定することを特徴とする付記1又は2に記載の光通信装置。
(付記4)
前記判定手段は、前記所定の画像領域の色の明度が所定値未満である場合、前記所定の画像領域に前記第2の色が含まれると判定することを特徴とする付記3に記載の光通信装置。
(付記5)
前記判定手段は、前記複数の画像における所定の画像領域について、最小の明度の色により前記第2の色が含まれると判定することを特徴とする付記3又は4に記載の光通信装置。
(付記6)
前記判定手段は、前記複数の画像における所定の画像領域について、最小の彩度の色により前記第2の色が含まれると判定することを特徴とする付記5に記載の光通信装置。
(付記7)
前記判定手段により前記複数の画像における所定の画像領域について、前記第1の色と前記第2の色との何れか一方を含むと判定された場合に、前記取得手段による前記画像の取得を制御する取得制御手段を更に備えることを特徴とする付記1から6の何れか1つに記載の光通信装置。
(付記8)
前記取得制御手段は、前記第2の色の出現タイミングが光信号の所定のタイミングとなるように、前記取得手段を制御することを特徴とする付記7に記載の光通信装置。
(付記9)
前記第1の色の色相に基づいて、前記第1の色を区別する際の色相の境界を決定する決定手段を備えることを特徴とする付記1から8の何れか1つに記載の光通信装置。
(付記10)
所定時間連続して画像を取得する取得ステップと、
前記取得ステップにおいて取得された複数の画像における所定の画像領域について、所定の可視光通信システムで定義される可視光情報が含まれる第1の色と前記可視光情報が含まれていない第2の色との何れか一方を含むか否かを、所定周期で判定する判定ステップと、
を含むことを特徴とする光通信方法。
(付記11)
前記判定ステップにおいて前記複数の画像における所定の画像領域について、前記第1の色と前記第2の色との何れか一方を含むと判定された場合に、前記複数の画像における所定の画像領域の色の変化に応じた情報を復号する復号ステップを含むことを特徴とする付記10に記載の光通信方法。
(付記12)
コンピュータを、
所定時間連続して画像を複数取得する取得手段、
前記取得手段により取得された複数の画像における所定の画像領域について、所定の可視光通信システムで定義される可視光情報が含まれる第1の色と前記可視光情報が含まれていない第2の色との何れか一方を含むか否かを、所定周期で判定する判定手段、
として機能させることを特徴とするプログラム。
(付記13)
コンピュータを、
前記判定手段により前記複数の画像における所定の画像領域について、前記第1の色と前記第2の色との何れか一方を含むと判定された場合に、前記複数の画像における所定の画像領域の色の変化に応じた情報を復号する復号手段、
として機能させることを特徴とする付記12に記載のプログラム。
1…光通信システム、100…送信装置、102、202…制御部、104、204…メモリ、110…符号化・変調部、112…駆動部、114…送信部、200…受信装置、206…操作部、207…表示部、208…無線通信部、210…アンテナ、214…撮像部、232…画像取得部、233…判定部、234…決定部、235…取得制御部、236…復号部、237…表示制御部、501、511a、511b、511c…赤、502、512a、512b、512c…緑、503、513a、513b、513c…青、504…黒、521、531…赤と緑の色相の境界値、522、532…緑と青の色相の境界値、523、533…青と赤の色相の境界値

Claims (13)

  1. 所定の周期で変化する光信号のフォーマットに対応する期間分の複数の画像を取得する取得手段と、
    前記取得手段により取得された複数の画像における所定の画像領域について、所定の可視光通信システムで定義される可視光情報が含まれる第1の色と前記可視光情報が含まれていない第2の色との何れか一方を含むか否かを、所定周期で判定する判定手段と、
    を備えることを特徴とする光通信装置。
  2. 前記判定手段により前記複数の画像における所定の画像領域について、前記第1の色と前記第2の色との何れか一方を含むと判定された場合に、前記複数の画像における所定の画像領域の色の変化に応じた情報を復号する復号手段を更に備えることを特徴とする請求項1に記載の光通信装置。
  3. 前記判定手段は、前記複数の画像における所定の画像領域の色相、明度及び彩度に基づいて、前記複数の画像における所定の画像領域について、前記第1の色と前記第2の色との何れか一方を含むか否かを判定することを特徴とする請求項1又は2に記載の光通信装置。
  4. 前記判定手段は、前記所定の画像領域の色の明度が所定値未満である場合、前記所定の画像領域に前記第2の色が含まれると判定することを特徴とする請求項3に記載の光通信装置。
  5. 前記判定手段は、前記複数の画像における所定の画像領域について、最小の明度の色により前記第2の色が含まれると判定することを特徴とする請求項3又は4に記載の光通信装置。
  6. 前記判定手段は、前記複数の画像における所定の画像領域について、最小の彩度の色により前記第2の色が含まれると判定することを特徴とする請求項5に記載の光通信装置。
  7. 前記判定手段により前記複数の画像における所定の画像領域について、前記第1の色と前記第2の色との何れか一方を含むと判定された場合に、前記取得手段による前記画像の取得を制御する取得制御手段を更に備えることを特徴とする請求項1から6の何れか1項に記載の光通信装置。
  8. 前記取得制御手段は、前記第2の色の出現タイミングが光信号の所定のタイミングとなるように、前記取得手段を制御することを特徴とする請求項7に記載の光通信装置。
  9. 前記第1の色の色相に基づいて、前記第1の色を区別する際の色相の境界を決定する決定手段を備えることを特徴とする請求項1から8の何れか1項に記載の光通信装置。
  10. 所定の周期で変化する光信号のフォーマットに対応する期間分の複数の画像を取得する取得ステップと、
    前記取得ステップにおいて取得された複数の画像における所定の画像領域について、所定の可視光通信システムで定義される可視光情報が含まれる第1の色と前記可視光情報が含まれていない第2の色との何れか一方を含むか否かを、所定周期で判定する判定ステップと、
    を含むことを特徴とする光通信方法。
  11. 前記判定ステップにおいて前記複数の画像における所定の画像領域について、前記第1の色と前記第2の色との何れか一方を含むと判定された場合に、前記複数の画像における所定の画像領域の色の変化に応じた情報を復号する復号ステップを含むことを特徴とする請求項10に記載の光通信方法。
  12. コンピュータを、
    所定の周期で変化する光信号のフォーマットに対応する期間分の複数の画像を取得する取得手段、
    前記取得手段により取得された複数の画像における所定の画像領域について、所定の可視光通信システムで定義される可視光情報が含まれる第1の色と前記可視光情報が含まれていない第2の色との何れか一方を含むか否かを、所定周期で判定する判定手段、
    として機能させることを特徴とするプログラム。
  13. コンピュータを、
    前記判定手段により前記複数の画像における所定の画像領域について、前記第1の色と前記第2の色との何れか一方を含むと判定された場合に、前記複数の画像における所定の画像領域の色の変化に応じた情報を復号する復号手段、
    として機能させることを特徴とする請求項12に記載のプログラム。
JP2016183064A 2016-09-20 2016-09-20 光通信装置、光通信方法、及び、プログラム Active JP6579069B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2016183064A JP6579069B2 (ja) 2016-09-20 2016-09-20 光通信装置、光通信方法、及び、プログラム
US15/684,003 US10218439B2 (en) 2016-09-20 2017-08-23 Optical communication device, optical communication method, and non-transitory recording medium
CN201710831255.6A CN107846251B (zh) 2016-09-20 2017-09-14 光通信装置、光通信方法以及记录介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016183064A JP6579069B2 (ja) 2016-09-20 2016-09-20 光通信装置、光通信方法、及び、プログラム

Publications (2)

Publication Number Publication Date
JP2018050116A JP2018050116A (ja) 2018-03-29
JP6579069B2 true JP6579069B2 (ja) 2019-09-25

Family

ID=61621422

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016183064A Active JP6579069B2 (ja) 2016-09-20 2016-09-20 光通信装置、光通信方法、及び、プログラム

Country Status (3)

Country Link
US (1) US10218439B2 (ja)
JP (1) JP6579069B2 (ja)
CN (1) CN107846251B (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12154298B2 (en) * 2019-07-29 2024-11-26 Casio Computer Co., Ltd. Color estimation device, color estimation method, and program
JP7165376B2 (ja) * 2019-09-05 2022-11-04 株式会社ユニバーサルエンターテインメント 光受信装置
CN112468714B (zh) * 2019-09-09 2022-06-28 北京外号信息技术有限公司 用于确定光通信装置的成像区域的方法和电子设备
JP7070530B2 (ja) 2019-11-01 2022-05-18 カシオ計算機株式会社 情報取得装置、情報取得方法及びプログラム
CN112272050B (zh) * 2020-09-21 2021-08-10 南京驭逡通信科技有限公司 一种基于图像采集的mimo光无线通信系统及其通信处理方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004054645A (ja) * 2002-07-19 2004-02-19 Keyence Corp 二次元コード読取装置、二次元コード読取方法、二次元コード読取プログラムおよびコンピュータ読取可能な記録媒体
JP4303087B2 (ja) * 2003-10-30 2009-07-29 日本電信電話株式会社 データ信号の送信方法と受信方法及びその装置、システム、プログラム並びに記録媒体
JP2006270808A (ja) * 2005-03-25 2006-10-05 Nec Corp 移動体通信ネットワークシステム、携帯通信端末、認証装置及びこれらの駆動方法、駆動プログラム
JP5031427B2 (ja) * 2007-03-30 2012-09-19 三星電子株式会社 可視光送信装置、可視光受信装置、可視光通信システム、及び可視光通信方法
US20090226185A1 (en) * 2008-03-06 2009-09-10 International Business Machines Corporation Fiber optic communications using hue based encoding
JP4653828B2 (ja) * 2008-09-12 2011-03-16 株式会社東芝 可視光通信システム及び可視光通信装置
JP5325526B2 (ja) * 2008-10-17 2013-10-23 三星電子株式会社 可視光通信システム、及び可視光通信方法
CN102422322B (zh) * 2009-05-11 2015-01-21 杜比实验室特许公司 用于在目标环境下在装置处再现来自源环境的图像的色貌的方法和设备
US8391720B2 (en) * 2009-08-04 2013-03-05 Electronics And Telecommunications Research Institute Apparatus for visible light communication providing intuitive information and method using the same
JP5294096B2 (ja) * 2011-06-23 2013-09-18 カシオ計算機株式会社 情報伝送システム、受光装置、情報伝送方法、及び、プログラム
EP2538584B1 (en) * 2011-06-23 2018-12-05 Casio Computer Co., Ltd. Information Transmission System, and Information Transmission Method
US9591234B2 (en) * 2013-08-20 2017-03-07 At&T Intellectual Property I, L.P. Facilitating detection, processing and display of combination of visible and near non-visible light
CN103701527A (zh) * 2013-12-31 2014-04-02 深圳天珑无线科技有限公司 可见光信息接收方法和装置
JP6390257B2 (ja) 2014-08-08 2018-09-19 カシオ計算機株式会社 情報処理システム、表示装置、表示制御方法、及び、プログラム
JP6183386B2 (ja) * 2015-01-28 2017-08-23 カシオ計算機株式会社 光通信装置、光推定装置、光通信方法、及び、プログラム
CN105450300B (zh) * 2015-11-19 2018-01-02 广东顺德中山大学卡内基梅隆大学国际联合研究院 一种基于cmos图像传感器传输并检测led信息的方法

Also Published As

Publication number Publication date
US20180083702A1 (en) 2018-03-22
JP2018050116A (ja) 2018-03-29
CN107846251A (zh) 2018-03-27
CN107846251B (zh) 2020-06-19
US10218439B2 (en) 2019-02-26

Similar Documents

Publication Publication Date Title
JP6579069B2 (ja) 光通信装置、光通信方法、及び、プログラム
JP7550467B2 (ja) 可視光通信システム
US9705596B2 (en) Optical communication apparatus, wavelength band estimating apparatus, optical communication method and storage medium
KR20150056841A (ko) 인터랙티브 시스템, 인터랙티브 시스템의 제어 방법 및, 프로젝터
US10264228B2 (en) Decoding apparatus, decoding method, and non-transitory recording medium
EP3435557B1 (en) Discrimination method and communication system
US10326534B2 (en) Light-emitting apparatus, imaging apparatus, information transmission system and information transmission method
US9843387B2 (en) Decoding apparatus, decoding method, and non-transitory recording medium
JP2016143960A (ja) 情報通信システム、情報送信装置、情報送信方法、及び、プログラム
JP7124840B2 (ja) 情報処理装置、情報処理システム、情報処理方法及びプログラム
US10951312B2 (en) Transmitting device, transmission control device, and transmission method
JP2018121169A (ja) 発光装置、受光装置、情報処理システム、情報処理方法及びプログラム
US9729794B2 (en) Display device, display control method, and non-transitory recording medium
JP2016171476A (ja) 復号装置、復号方法、及び、プログラム
JP5630853B2 (ja) 投射型表示装置、調整処理装置、受信機、表示システムおよび表示方法
CN112788311B (zh) 信息获取方法、信息获取装置
JP2020096365A (ja) 復号装置、復号方法、及び、プログラム
JP2017011591A (ja) 情報復号装置、情報復号方法及びプログラム
WO2018073870A1 (ja) 送信装置、受信装置、通信システム、送信方法、受信方法および送信用コンピュータプログラムならびに受信用コンピュータプログラム
JP2013121068A (ja) 投写型映像表示装置
JP2018117302A (ja) 表示装置、情報処理システム、情報処理方法及びプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180529

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190424

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190514

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190712

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190730

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190812

R150 Certificate of patent or registration of utility model

Ref document number: 6579069

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150