JP6747120B2 - Receiving device and its program, and visible light communication system - Google Patents

Receiving device and its program, and visible light communication system Download PDF

Info

Publication number
JP6747120B2
JP6747120B2 JP2016137043A JP2016137043A JP6747120B2 JP 6747120 B2 JP6747120 B2 JP 6747120B2 JP 2016137043 A JP2016137043 A JP 2016137043A JP 2016137043 A JP2016137043 A JP 2016137043A JP 6747120 B2 JP6747120 B2 JP 6747120B2
Authority
JP
Japan
Prior art keywords
data
frame period
extracted
processor
image sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2016137043A
Other languages
Japanese (ja)
Other versions
JP2018011133A (en
Inventor
圭亮 前田
圭亮 前田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Lighting and Technology Corp
Original Assignee
Toshiba Lighting and Technology Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Lighting and Technology Corp filed Critical Toshiba Lighting and Technology Corp
Priority to JP2016137043A priority Critical patent/JP6747120B2/en
Publication of JP2018011133A publication Critical patent/JP2018011133A/en
Application granted granted Critical
Publication of JP6747120B2 publication Critical patent/JP6747120B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Optical Communication System (AREA)

Description

本発明の実施形態は、受信装置及びそのプログラムと、可視光通信システムに関する。 Embodiments of the present invention relate to a receiving device and its program, and a visible light communication system.

可視光を用いたデータ通信技術は、例えば特許文献1などにより知られている。
また、可視光通信を利用した可視光ビーコンシステムが、一般社団法人 電子情報技術産業協会規格 JEITA CP-1223として規定されている。
この可視光ビーコンシステムでは、送信機が、固有のID(identification)情報をペイロードとして含んだ光通信データを、可視光の点滅として送信する。
A data communication technique using visible light is known, for example, from Patent Document 1 and the like.
In addition, a visible light beacon system using visible light communication is specified as the Japan Electronics and Information Technology Industries Association Standard JEITA CP-1223.
In this visible light beacon system, a transmitter transmits optical communication data including unique ID (identification) information as a payload as blinking visible light.

このような可視光ビーコンシステムの受信機としては、スマートフォンなどの既製の情報端末装置を用いることが想定されている。そしてこのような情報端末装置を受信機として使用する場合には、写真撮影及び動画撮影のために設けられたカメラを受光デバイスとして用いると便利である。 As a receiver of such a visible light beacon system, it is assumed that a ready-made information terminal device such as a smartphone is used. When such an information terminal device is used as a receiver, it is convenient to use a camera provided for taking pictures and shooting moving pictures as a light receiving device.

しかしながら、この種のデータ通信のための受光デバイスとして、情報端末装置に備えられた汎用のカメラを用いることとすると、当該カメラの1フレーム期間が光通信データの送信周期よりも短い場合がある。そしてこの場合は、1フレーム分のイメージデータからペイロードの全てを抽出できず、ペイロードが示すデータを再構成できない恐れがある。 However, if a general-purpose camera provided in the information terminal device is used as a light-receiving device for this type of data communication, one frame period of the camera may be shorter than the transmission cycle of optical communication data. In this case, there is a possibility that the entire payload cannot be extracted from the image data for one frame and the data indicated by the payload cannot be reconstructed.

特開2013−223047号公報JP, 2013-223047, A

本発明が解決しようとする課題は、光通信データの送信とは非同期にカメラにより撮影して得られたイメージデータからペイロードが示すデータを再構成できる受信装置及びそのプログラムと、可視光通信システムを提供することである。 The problem to be solved by the present invention is to provide a receiving device and its program capable of reconstructing data indicated by a payload from image data obtained by photographing with a camera asynchronously with transmission of optical communication data, and a visible light communication system. Is to provide.

実施形態の受信装置は、可視光の点滅として送信装置から繰り返し送信された光通信データを受信するものであって、イメージセンサ、第1の抽出手段、第2の抽出手段及び再構成手段を備える。イメージセンサは、複数の光検出素子を備え、予め定められたフレーム期間内に複数の光検出素子が順次に受光してイメージデータを得る。第1の抽出手段は、第1のフレーム期間にイメージセンサにより得られたイメージデータから光通信データに含まれたペイロードの先頭側の一部のデータと末尾側の一部のデータとをそれぞれを抽出する。第2の抽出手段は、第1のフレーム期間とは異なる第2のフレーム期間にイメージセンサにより得られたイメージデータから、光通信データに含まれたペイロードのうちで第1の抽出手段により抽出されていない中央の一部のデータを抽出する。再構成手段は、第1の抽出手段により抽出されたデータと第2の抽出手段により抽出されたデータとからペイロードで伝送されるデータを再構成する。 The receiving device of the embodiment receives optical communication data repeatedly transmitted from the transmitting device as blinking of visible light, and includes an image sensor, a first extracting unit, a second extracting unit, and a reconstructing unit. .. The image sensor includes a plurality of photodetector elements, and the plurality of photodetector elements sequentially receive light within a predetermined frame period to obtain image data. The first extracting means extracts, from the image data obtained by the image sensor during the first frame period, partial data on the leading side and partial data on the trailing side of the payload included in the optical communication data. Extract. The second extracting means extracts from the image data obtained by the image sensor during the second frame period different from the first frame period by the first extracting means from the payload included in the optical communication data. Not extract some data in the middle . The reconstructing unit reconstructs the data transmitted by the payload from the data extracted by the first extracting unit and the data extracted by the second extracting unit.

本発明によれば、光通信データの送信とは非同期にカメラにより撮影して得られたイメージデータからペイロードが示すデータを再構成することが可能な受信装置及びそのプログラムと、可視光通信システムを提供できる。 According to the present invention, a visible light communication system and a receiving device and its program capable of reconstructing data indicated by a payload from image data obtained by shooting with a camera asynchronously with transmission of optical communication data are provided. Can be provided.

実施形態に係る可視光通信システムの構成を示すブロック図。1 is a block diagram showing a configuration of a visible light communication system according to an embodiment. 照明光に重畳される伝送データのフォーマットを示す図。The figure which shows the format of the transmission data superimposed on illumination light. 図1中のプロセッサによる制御処理のフローチャート。3 is a flowchart of control processing by the processor in FIG. 1. 図1中のプロセッサによる制御処理のフローチャート。3 is a flowchart of control processing by the processor in FIG. 1. 図1中のプロセッサによる制御処理のフローチャート。3 is a flowchart of control processing by the processor in FIG. 1. 伝送データとフレームイメージとの関係の一例を示す図。The figure which shows an example of the relationship between transmission data and a frame image. ID情報が再構成される様子の一例を模式的に示す図。The figure which shows an example of a mode that ID information is reconfigured typically.

以下、実施の形態について図面を用いて説明する。
図1は可視光通信システム100の構成を示すブロック図である。
可視光通信システム100は、照明器具10及び情報端末装置20を含む。
Hereinafter, embodiments will be described with reference to the drawings.
FIG. 1 is a block diagram showing the configuration of a visible light communication system 100.
The visible light communication system 100 includes a lighting fixture 10 and an information terminal device 20.

照明器具10は、例えば施設の天井又は壁などに取り付けられ、照明光を放射する。情報端末装置20は、例えばスマートフォンであり、使用者によって所持されて、当該使用者の移動に伴って移動する。照明器具10は、記憶部11、電源回路12、光源制御部13及び光源14を含む。 The lighting fixture 10 is attached to, for example, a ceiling or a wall of a facility and emits illumination light. The information terminal device 20 is, for example, a smartphone, is carried by a user, and moves with the movement of the user. The lighting fixture 10 includes a storage unit 11, a power supply circuit 12, a light source control unit 13, and a light source 14.

記憶部11は、可視光通信システム100によりペイロードにて伝送すべきデータを記憶する。このデータは、任意であってよいが、本実施形態では、照明器具10に固有のID情報であることする。
電源回路12は、光源14を動作させるための電力を生成する。
光源制御部13は、記憶部11に記憶されたID情報を示したペイロードを含む光通信データが光源14から送信されるように、光源14を制御する。
光源14は、例えばLED(light emitting diode)などの、高周波で点滅することが可能な発光デバイスを備え、点灯時に照明光を放射する。
The storage unit 11 stores data to be transmitted in the payload by the visible light communication system 100. This data may be arbitrary, but in the present embodiment, it is assumed that the ID information is unique to the lighting fixture 10.
The power supply circuit 12 generates electric power for operating the light source 14.
The light source control unit 13 controls the light source 14 so that the optical communication data including the payload indicating the ID information stored in the storage unit 11 is transmitted from the light source 14.
The light source 14 includes a light emitting device capable of blinking at high frequency, such as an LED (light emitting diode), and emits illumination light when turned on.

情報端末装置20は、プロセッサ21、記憶部22、表示デバイス24、入力デバイス23、カメラ25、イメージメモリ26、通信部27及びバス28を含む。プロセッサ21、記憶部22、表示デバイス24、入力デバイス23、カメラ25、イメージメモリ26及び通信部27は、バス28によって接続されている。 The information terminal device 20 includes a processor 21, a storage unit 22, a display device 24, an input device 23, a camera 25, an image memory 26, a communication unit 27, and a bus 28. The processor 21, storage unit 22, display device 24, input device 23, camera 25, image memory 26, and communication unit 27 are connected by a bus 28.

情報端末装置20においては、プロセッサ21及び記憶部22がバス28によって接続されることにより、情報端末装置20を制御するコンピュータを構成する。
プロセッサ21は、上記コンピュータの中枢部分に相当する。プロセッサ21は、オペレーティングシステムやアプリケーションプログラムに従って、情報端末装置20としての各種の機能を実現するべく各部を制御する。
記憶部22は、上記コンピュータの主記憶部分及び補助記憶部分に相当する。記憶部22は、不揮発性のメモリ領域と揮発性のメモリ領域とを含む。記憶部22は、不揮発性のメモリ領域ではオペレーティングシステムやアプリケーションプログラムを記憶する。また記憶部22は、プロセッサ21が各部を制御するための処理を実行する上で必要なデータを不揮発性または揮発性のメモリ領域で記憶する場合もある。記憶部22は、揮発性のメモリ領域を、プロセッサ21によってデータが適宜書き換えられるワークエリアとして使用する。なお、アプリケーションプログラムの一部は、揮発性のメモリ領域で記憶される。
In the information terminal device 20, the processor 21 and the storage unit 22 are connected by the bus 28 to form a computer that controls the information terminal device 20.
The processor 21 corresponds to the central part of the computer. The processor 21 controls each unit to realize various functions as the information terminal device 20 according to an operating system and an application program.
The storage unit 22 corresponds to the main storage unit and the auxiliary storage unit of the computer. The storage unit 22 includes a non-volatile memory area and a volatile memory area. The storage unit 22 stores an operating system and application programs in a non-volatile memory area. Further, the storage unit 22 may store data necessary for the processor 21 to execute processing for controlling each unit in a nonvolatile or volatile memory area. The storage unit 22 uses the volatile memory area as a work area in which data is appropriately rewritten by the processor 21. A part of the application program is stored in the volatile memory area.

記憶部22が記憶するアプリケーションプログラムには、プロセッサ21が実行する後述の制御処理について記述したプログラムを含む。使用者への情報端末装置20の譲渡は一般的に、当該制御プログラムが記憶部22に記憶されない状態にて行われる。そしてプログラムは、磁気ディスク、光磁気ディスク、光ディスク、半導体メモリなどのようなリムーバブルな記録媒体に記録して使用者へと譲渡される。あるいはネットワークを介してプログラムが使用者へと譲渡される。そして、このプログラムが、上記の別途に譲渡された情報端末装置20の記憶部22に、使用者の指示の下に書き込まれる。しかし、プログラムが記憶部22に記憶された状態の情報端末装置20が、使用者に譲渡されてもよい。 The application program stored in the storage unit 22 includes a program that describes a control process (described later) executed by the processor 21. Transfer of the information terminal device 20 to the user is generally performed in a state where the control program is not stored in the storage unit 22. Then, the program is recorded on a removable recording medium such as a magnetic disk, a magneto-optical disk, an optical disk, a semiconductor memory, etc., and transferred to the user. Alternatively, the program is transferred to the user via the network. Then, this program is written in the storage unit 22 of the separately transferred information terminal device 20 under the instruction of the user. However, the information terminal device 20 in which the program is stored in the storage unit 22 may be transferred to the user.

入力デバイス23は、操作者による操作を受けて、その操作に応じた入力情報を出力する。入力デバイス23としては、例えばキーボード、マウス、あるいはタッチパネルなどが利用できる。
表示デバイス24は、操作者に対して提示すべき各種の情報を表した画像を表示する。表示デバイス24としては、例えばLCD(liquid crystal display)又はタッチパネルなどが利用できる。
カメラ25は、入射する光の像に応じたイメージデータを出力する。カメラ25は、複数の光検出素子を備え、予め定められたフレーム期間内に前記複数の光検出素子が順次に受光してイメージデータを得るイメージセンサを備える。イメージセンサとしては、例えばCCD(charge-coupled device)センサなどを用いることができる。
イメージメモリ26は、イメージデータを一時的に記憶する。
通信部27は、図示しない通信ネットワークを介したデータ通信を行う。
The input device 23 receives an operation by an operator and outputs input information according to the operation. As the input device 23, for example, a keyboard, a mouse, a touch panel, or the like can be used.
The display device 24 displays an image showing various information to be presented to the operator. As the display device 24, for example, an LCD (liquid crystal display) or a touch panel can be used.
The camera 25 outputs image data according to the image of the incident light. The camera 25 includes a plurality of photodetector elements, and an image sensor that sequentially receives light from the plurality of photodetector elements within a predetermined frame period to obtain image data. As the image sensor, for example, a CCD (charge-coupled device) sensor or the like can be used.
The image memory 26 temporarily stores image data.
The communication unit 27 performs data communication via a communication network (not shown).

次に以上のように構成された可視光通信システム100の動作について説明する。なお、ここでは、可視光通信をJEITA CP-1223に準じて行うこととして説明する。 Next, the operation of the visible light communication system 100 configured as above will be described. In addition, here, it is assumed that visible light communication is performed according to JEITA CP-1223.

照明器具10において光源制御部13は、電源回路12からの光源14への電力供給を断続することにより、光源14を点滅させる。これにより、照明光の明暗が変化することになるが、光源制御部13が電力供給を断続する周波数を例えば10kHz程度の高周波とすることにより、照明光の明暗の変化は人間には知覚されない。そして光源制御部13は、予め定められたフォーマットで照明光に伝送データを重畳するように、光源14の点滅を制御する。 In the lighting fixture 10, the light source control unit 13 causes the light source 14 to blink by intermittently supplying power to the light source 14 from the power supply circuit 12. As a result, the brightness of the illumination light changes, but the light source control unit 13 sets the frequency at which the power supply is interrupted to a high frequency of, for example, about 10 kHz, so that the change in the brightness of the illumination light is not perceived by humans. Then, the light source control unit 13 controls the blinking of the light source 14 so that the transmission data is superimposed on the illumination light in a predetermined format.

図2は照明光に重畳される伝送データのフォーマットを示す図である。
伝送データは、同じ内容の光通信データの繰り返しにより構成される。光通信データは、予め定められたパターンのプリアンブルと、ID情報を示したペイロードとからなる。伝送データにより照明光の明暗が変化する1周期は、スロットと称される。プリアンブルは、12スロット分であり、照明光の明暗を1,0でそれぞれ表す場合は、「000111111111」である。ペイロードは、4スロットでID情報の2ビット分を示す。具体的には、ID情報のうちの2ビットが「00」「01」「10」「11」である場合、ペイロードでは明=1、暗=0として表すと「0111」「1011」「1101」「1110」とそれぞれ示される。2ビットに相当する4スロットは、シンボルと称される。このため、ID情報の総ビット数をNtと表すならば、ペイロードのスロット数は2Ntとなる。
FIG. 2 is a diagram showing a format of transmission data to be superimposed on the illumination light.
The transmission data is formed by repeating optical communication data having the same content. The optical communication data consists of a preamble of a predetermined pattern and a payload showing ID information. One cycle in which the brightness of illumination light changes depending on the transmitted data is called a slot. The preamble is for 12 slots, and is “000111111111” when the brightness of illumination light is represented by 1 and 0, respectively. The payload has 4 slots and represents 2 bits of ID information. Specifically, if 2 bits of the ID information are “00”, “01”, “10”, and “11”, the payload is expressed as “bright=1” and “dark=0”, then “0111” “1011” “1101” Each is shown as "1110". The 4 slots corresponding to 2 bits are called symbols. Therefore, if the total number of bits of the ID information is represented by Nt, the number of slots in the payload will be 2Nt.

かくして、照明器具10は、可視光の点滅として光通信データを繰り返し送信するのであり、そのような送信装置としての機能を備える。 Thus, the lighting device 10 repeatedly transmits optical communication data as blinking visible light, and has a function as such a transmitting device.

情報端末装置20では、入力デバイス23での操作者の操作により指示された場合、あるいは上記アプリケーションを自動起動するための予め定められた条件が成立した場合などに、プロセッサ21は以下に説明する制御処理を開始する。プロセッサ21は、記憶部22に記憶されたアプリケーションプログラムに従ってこの制御処理を実行する。
なお、当該アプリケーションプログラムは、照明器具10のID情報を用いた機能を情報端末装置20の使用者に提供するアプリケーションを実現するものである。上記の機能は、どのようなものであってもよいが、例えば通信部27により通信可能なサーバなどから照明器具10のID情報に基づいて取得した情報を表示デバイス24で表示する機能などが想定される。ただし、以下においてはID情報を取得するための処理について説明し、取得したID情報を用いた機能に関わる処理についての説明は省略する。
In the information terminal device 20, the processor 21 performs the control described below when instructed by the operator's operation on the input device 23 or when a predetermined condition for automatically starting the application is satisfied. Start processing. The processor 21 executes this control process according to the application program stored in the storage unit 22.
The application program realizes an application that provides the user of the information terminal device 20 with the function using the ID information of the lighting fixture 10. The above function may be any function, but is assumed to be, for example, a function of displaying on the display device 24 the information acquired based on the ID information of the lighting fixture 10 from a server or the like that can communicate with the communication unit 27. To be done. However, in the following, the process for acquiring the ID information will be described, and the description of the process related to the function using the acquired ID information will be omitted.

図3、図4及び図5はプロセッサ21による制御処理のフローチャートである。図3〜図5は、プロセッサ21による一連の処理を3つに分けて示している。なお、この処理の手順は一例であり、同様な結果を得ることが可能であれば、各ステップの処理順序を適宜に入れ替えてもよいし、また他の処理が追加されてもよいし、一部の処理が他の処理に置き換えられてもよい。 3, 4, and 5 are flowcharts of control processing by the processor 21. 3 to 5 show a series of processes by the processor 21 divided into three. Note that the procedure of this processing is an example, and the processing order of each step may be appropriately changed, or other processing may be added, as long as the same result can be obtained. The processing of the unit may be replaced with other processing.

図3のステップSa1においてプロセッサ21は、各種変数を初期化する。具体的にはプロセッサ21は、変数N1,N2,N3,N4及び変数Mをいずれも「0」とする。
ステップSa2においてプロセッサ21は、カメラ25を起動する。カメラ25は、起動されると1フレーム分の撮影動作を開始し、イメージデータを出力し始める。カメラ25においては、複数の光検出素子がフレーム期間内に順次に受光してイメージデータを得るので、イメージデータは、伝送データにおける各スロットが上端から順に並んだフレームイメージを表すものとなる。
図6は伝送データとフレームイメージとの関係の一例を示す図である。
伝送データに対して図6の上側に示すようなタイミングでフレーム期間が設定された場合は、フレームイメージには図6の下側に示すように、ペイロードの末尾側、プリアンブル、ペイロードの先頭側の順で、各スロットの明暗が濃淡として表れる。ただし図6では、各スロットの明暗に応じた濃淡の図示はしていない。
ステップSa3においてプロセッサ21は、カメラ25から出力されるイメージデータのイメージメモリ26への保存を開始する。
In step Sa1 of FIG. 3, the processor 21 initializes various variables. Specifically, the processor 21 sets all the variables N1, N2, N3, N4 and the variable M to “0”.
In step Sa2, the processor 21 activates the camera 25. When activated, the camera 25 starts a shooting operation for one frame and starts outputting image data. In the camera 25, the plurality of photodetection elements sequentially receive light within the frame period to obtain image data, so the image data represents a frame image in which the slots in the transmission data are arranged in order from the upper end.
FIG. 6 is a diagram showing an example of the relationship between transmission data and frame images.
When the frame period is set for the transmission data at the timing as shown in the upper part of FIG. 6, the frame image includes the end of the payload, the preamble, and the beginning of the payload as shown in the lower part of FIG. The lightness and darkness of each slot appears as light and shade in order. However, in FIG. 6, the shades corresponding to the lightness and darkness of each slot are not shown.
In step Sa3, the processor 21 starts saving the image data output from the camera 25 in the image memory 26.

ステップSa4においてプロセッサ21は、イメージメモリ26に格納済みのイメージデータを対象として、プリアンブルの検出を開始する。
ステップSa5においてプロセッサ21は、プリアンブルが検出されるのを待ち受ける。そしてプリアンブルが到達し、そのパターンに応じた濃淡模様がイメージデータに表れると、プロセッサ21はプリアンブルを検出したと判定し、ステップSa6へと進む。なお、1フレーム分のイメージデータ中からプリアンブルを検出できなかった場合についての図示は省略している。この場合にプロセッサ21は例えば、図3〜図5に示す制御処理を一端終了し、当該制御処理を最初からやり直す。あるいはこの場合にプロセッサ21は例えば、図4のステップSa18へと進む。
ステップSa6においてプロセッサ21は、プリアンブルの検索を終了する。
In step Sa4, the processor 21 starts preamble detection for the image data stored in the image memory 26.
In step Sa5, the processor 21 waits for the preamble to be detected. When the preamble arrives and a shade pattern corresponding to the pattern appears in the image data, the processor 21 determines that the preamble has been detected, and proceeds to step Sa6. The illustration of the case where the preamble cannot be detected from the image data of one frame is omitted. In this case, the processor 21, for example, once ends the control processing shown in FIGS. 3 to 5 and restarts the control processing from the beginning. Alternatively, in this case, the processor 21 proceeds to step Sa18 in FIG. 4, for example.
In step Sa6, the processor 21 ends the search for the preamble.

ステップSa7においてプロセッサ21は、イメージメモリ26に格納済みのイメージデータを対象として、プリアンブルの1つ前のシンボルの抽出を試行する。
ステップSa8においてプロセッサ21は、上記の抽出に成功したか否かを確認する。そしてプロセッサ21は、該当するシンボルの4スロットがイメージデータ中に揃っているならばYesと判定し、ステップSa9へと進む。
ステップSa9においてプロセッサ21は、上記の抽出に成功したシンボルが表す2ビットのデータを、Nt−N2−1ビット目及びNt−N2ビット目のデータとして記憶部22に保存する。
ステップSa10においてプロセッサ21は、変数N2を2つ増加させる。すなわち変数N2は、プリアンブルの前側について抽出済みのデータのビット数を表す。つまり変数N2は、ペイロードの末尾側について、プリアンブルの前のどの位置までのデータを抽出済みであるかを示す。そしてこののちにプロセッサ21は、ステップSa7以降の処理を繰り返す。なおプロセッサ21は、ステップSa7を二度目以降に処理する場合は、抽出済みのシンボルよりも1つ前のシンボルの抽出を試行する。これによりプロセッサ21は、シンボルが抽出できなくなるまで、抽出できたシンボルが表すデータを記憶部22に保存して行く。なお、以降においては、この処理ループにより記憶部22に記憶されるデータ群を、末尾側データ群と称する。
In step Sa7, the processor 21 attempts to extract the symbol immediately preceding the preamble for the image data stored in the image memory 26.
In step Sa8, the processor 21 confirms whether or not the above extraction has succeeded. Then, the processor 21 determines Yes if the four slots of the corresponding symbol are aligned in the image data, and proceeds to step Sa9.
In step Sa9, the processor 21 saves the 2-bit data represented by the above-described successfully extracted symbol in the storage unit 22 as Nt-N2-1 bit and Nt-N2 bit data.
In step Sa10, the processor 21 increases the variable N2 by 2. That is, the variable N2 represents the number of bits of the extracted data for the front side of the preamble. That is, the variable N2 indicates up to which position before the preamble the data on the tail side of the payload has been extracted. After that, the processor 21 repeats the processing from step Sa7. It should be noted that the processor 21 tries to extract the symbol one before the already extracted symbol when processing the step Sa7 for the second time and thereafter. As a result, the processor 21 stores the data represented by the extracted symbol in the storage unit 22 until the symbol cannot be extracted. Note that, hereinafter, the data group stored in the storage unit 22 by this processing loop will be referred to as the tail side data group.

そして、プロセッサ21がフレームデータの先頭付近までシンボルの抽出を終えると、次のシンボルの抽出ができなくなる。そしてこのような状態となると、プロセッサ21はステップSa8にてNoと判定し、ステップSa11へと進む。
ステップSa11においてプロセッサ21は、1フレーム分の撮影が終了するのを待ち受ける。そしてプロセッサ21は、カメラ25が1フレーム分の撮影を終えたならばYesと判定し、ステップSa12へと進む。
When the processor 21 completes the symbol extraction up to the beginning of the frame data, the next symbol cannot be extracted. Then, in such a state, the processor 21 determines No in step Sa8, and proceeds to step Sa11.
In step Sa11, the processor 21 waits for the end of shooting one frame. Then, the processor 21 determines Yes if the camera 25 has finished shooting one frame, and proceeds to step Sa12.

ステップSa12においてプロセッサ21は、イメージメモリ26に格納済みのイメージデータを対象として、プリアンブルの1つ後ろのシンボルの抽出を試行する。
ステップSa13においてプロセッサ21は、上記の抽出に成功したか否かを確認する。そしてプロセッサ21は、該当するシンボルの4スロットがイメージデータ中に揃っているならばYesと判定し、ステップSa14へと進む。
ステップSa14においてプロセッサ21は、上記の抽出に成功したシンボルが表す2ビットのデータを、N1+1ビット目及びN1+2ビット目のデータとして記憶部22に保存する。
ステップSa15においてプロセッサ21は、変数N1を2つ増加させる。すなわち変数N1は、プリアンブルの後側について抽出済みのデータのビット数を表す。つまり変数N1は、ペイロードの先頭側について、プリアンブル後のどの位置までのデータを抽出済みであるかを示す。そしてこののちにプロセッサ21は、ステップSa12以降の処理を繰り返す。なおプロセッサ21は、ステップSa12を二度目以降に処理する場合は、抽出済みのシンボルよりも1つ後のシンボルの抽出を試行する。これによりプロセッサ21は、シンボルが抽出できなくなるまで、抽出できたシンボルが表すデータを記憶部22に保存して行く。なお、以降においては、この処理ループにより記憶部22に記憶されるデータ群を、先頭側データ群と称する。
In step Sa12, the processor 21 attempts to extract the symbol immediately after the preamble for the image data stored in the image memory 26.
In step Sa13, the processor 21 confirms whether or not the above extraction has succeeded. Then, the processor 21 determines Yes if the four slots of the corresponding symbol are aligned in the image data, and proceeds to step Sa14.
In step Sa14, the processor 21 saves the 2-bit data represented by the above-described successfully extracted symbol in the storage unit 22 as N1+1-th bit data and N1+2-bit data.
In step Sa15, the processor 21 increases the variable N1 by 2. That is, the variable N1 represents the number of bits of the extracted data on the rear side of the preamble. That is, the variable N1 indicates up to which position after the preamble the data on the head side of the payload has been extracted. After that, the processor 21 repeats the processing from step Sa12. It should be noted that the processor 21 attempts to extract a symbol that is one behind the already-extracted symbol, when processing the step Sa12 for the second time and thereafter. As a result, the processor 21 stores the data represented by the extracted symbol in the storage unit 22 until the symbol cannot be extracted. Note that, hereinafter, the data group stored in the storage unit 22 by this processing loop will be referred to as a head side data group.

そして、プロセッサ21がフレームデータの末尾付近までシンボルの抽出を終えると、次のシンボルの抽出ができなくなる。またプロセッサ21がステップSa4の検索により検出したのとは別のプリアンブルの直前のシンボルの抽出を終えると、次のシンボルの抽出ができなくなる。そしてこれらの状態となると、プロセッサ21はステップSa13にてNoと判定し、ステップSa16へと進む。 Then, when the processor 21 finishes extracting the symbols up to near the end of the frame data, the next symbol cannot be extracted. Further, when the processor 21 finishes extracting the symbol immediately before the preamble different from the one detected by the search in step Sa4, the next symbol cannot be extracted. Then, in these states, the processor 21 determines No in step Sa13, and proceeds to step Sa16.

以上のステップSa4〜ステップSa15の処理により1フレーム分のイメージデータから光通信データに含まれたペイロードの少なくとも一部に相当するデータが抽出される。従って、アプリケーションプログラムに基づいてプロセッサ21が当該処理を実行することによって、プロセッサ21を中枢部分とするコンピュータは第1の抽出手段として機能する。 Through the processing in steps Sa4 to Sa15 described above, data corresponding to at least a part of the payload included in the optical communication data is extracted from the image data for one frame. Therefore, when the processor 21 executes the processing based on the application program, the computer having the processor 21 as a central part functions as the first extracting unit.

ステップSa16においてプロセッサ21は、変数N1,N2のそれぞれの値の和がペイロードの総ビット数Nt以上か否かを確認する。つまりプロセッサ21は、1フレームのイメージデータから、ペイロード1つ分のデータの全てを抽出できたか否かを確認する。そしてプロセッサ21は、上記の和が総ビット数Nt以上であればYesと判定し、ステップSa17へと進む。
ステップSa17においてプロセッサ21は、記憶部22に記憶された末尾側データ群及び先頭側データ群を、末尾側データ群を先頭側データ群の後に位置するものとして結合することにより、ID情報を再構成する。例えば、変数N1,N2のそれぞれの値の和が総ビット数Ntよりも大きな値となる場合には、ステップSa17において、N1+N2−Ntビット分のデータを捨てて、ID情報を再構築することができる。そしてプロセッサ21は、この制御処理を終了する。
In step Sa16, the processor 21 confirms whether the sum of the values of the variables N1 and N2 is equal to or more than the total number of payload bits Nt. That is, the processor 21 confirms whether or not all the data for one payload can be extracted from the image data of one frame. Then, the processor 21 determines Yes if the above sum is greater than or equal to the total number of bits Nt, and proceeds to step Sa17.
In step Sa17, the processor 21 reconstructs the ID information by combining the tail-side data group and the head-side data group stored in the storage unit 22 with the tail-side data group positioned after the head-side data group. To do. For example, when the sum of the respective values of the variables N1 and N2 becomes a value larger than the total number of bits Nt, it is possible to discard the data of N1+N2-Nt bits and reconstruct the ID information in step Sa17. it can. Then, the processor 21 ends this control processing.

一方、プロセッサ21は、変数N1,N2のそれぞれの値の和が総ビット数Nt未満の場合は、ステップSa16でNoと判定し、図4中のステップSa18へと進む。
ステップSa18においてプロセッサ21は、次のフレームに関してイメージメモリ26に格納済みのイメージデータを対象として、プリアンブルの検出を開始する。なお、カメラ25は、設定されたフレームレートでイメージデータを生成するように、前述した撮影動作を繰り返し、これにより生成されたイメージデータは記憶部22へと書き込まれる。
ステップSa19においてプロセッサ21は、プリアンブルが検出されるのを待ち受ける。そしてプリアンブルを検出すると、Yesと判定し、ステップSa20へと進む。なお、1フレーム分のイメージデータ中からプリアンブルを検出できなかった場合についての図示は省略している。この場合にプロセッサ21は例えば、次のフレームのイメージデータを対象として、ステップSa18から処理をやり直す。
ステップSa20においてプロセッサ21は、プリアンブルの検索を終了する。
On the other hand, if the sum of the values of the variables N1 and N2 is less than the total number of bits Nt, the processor 21 determines No in step Sa16, and proceeds to step Sa18 in FIG.
In step Sa18, the processor 21 starts preamble detection for the image data stored in the image memory 26 for the next frame. The camera 25 repeats the above-described shooting operation so as to generate image data at the set frame rate, and the image data thus generated is written in the storage unit 22.
In step Sa19, the processor 21 waits for detection of the preamble. When the preamble is detected, it is determined to be Yes, and the process proceeds to step Sa20. The illustration of the case where the preamble cannot be detected from the image data of one frame is omitted. In this case, the processor 21 performs the process again from step Sa18 on the image data of the next frame, for example.
In step Sa20, the processor 21 ends the search for the preamble.

ステップSa21においてプロセッサ21は、イメージメモリ26に格納済みのイメージデータを対象として、プリアンブルの1つ前のシンボルの抽出を試行する。
ステップSa22においてプロセッサ21は、上記の抽出に成功したか否かを確認する。そしてプロセッサ21は、該当するシンボルを抽出できたならばYesと判定し、ステップSa23へと進む。
ステップSa23においてプロセッサ21は、変数N4を2つ増加させる。すなわち変数N4は、プリアンブルの前側について抽出済みのデータのビット数を表す。つまり変数N4は、ペイロードの末尾側について、プリアンブルの前のどの位置までのデータを抽出済みであるかを示す。
ステップSa24においてプロセッサ21は、変数N4が変数N2以下であるか否かを確認する。そしてプロセッサ21は、変数N4が変数N2以下であるならばYesと判定し、ステップSa21へと戻る。変数N4が変数N2以下であるならば、ステップSa21で抽出されたシンボルは他のフレームのイメージデータから既に抽出済みである。そこでプロセッサ21は、ここで抽出されたシンボルについては何らの処理も行わない。しかしながら、変数N4が変数N2よりも大きいならば、ステップSa21で抽出されたシンボルは、末尾側データ群としてまだ記憶されていないデータを表す。そこでプロセッサ21は、変数N4が変数N2よりも大きくなったならばNoと判定し、ステップSa25へと進む。
ステップSa25においてプロセッサ21は、上記の抽出に成功したシンボルが表す2ビットのデータを、Nt−N4−1ビット目及びNt−N4ビット目のデータとして記憶部22に保存する。
ステップSa26においてプロセッサ21は、変数N4が総ビット数Ntから変数N1を減じた値と一致するか否かを確認する。そしてプロセッサ21は、上記の両値が一致しないならばNoと判定し、ステップSa21へと戻り、それ以降の処理を繰り返す。これによりプロセッサ21は、シンボルが抽出できなくなるか、あるいは変数N4が総ビット数Ntから変数N1を減じた値と一致するまで、新たに得られたデータを記憶部22の末尾側データ群に追加保存して行く。
In step Sa21, the processor 21 tries to extract the symbol immediately preceding the preamble for the image data stored in the image memory 26.
In step Sa22, the processor 21 confirms whether or not the above extraction has succeeded. Then, the processor 21 determines Yes if the corresponding symbol can be extracted, and proceeds to step Sa23.
In step Sa23, the processor 21 increases the variable N4 by 2. That is, the variable N4 represents the number of bits of the extracted data for the front side of the preamble. That is, the variable N4 indicates up to which position before the preamble the data on the tail side of the payload has been extracted.
In step Sa24, the processor 21 confirms whether the variable N4 is equal to or less than the variable N2. Then, the processor 21 determines Yes if the variable N4 is equal to or less than the variable N2, and returns to step Sa21. If the variable N4 is less than or equal to the variable N2, the symbol extracted in step Sa21 has already been extracted from the image data of another frame. Therefore, the processor 21 does not perform any processing on the symbols extracted here. However, if the variable N4 is larger than the variable N2, the symbol extracted in step Sa21 represents data that has not yet been stored as the tail side data group. Therefore, if the variable N4 becomes larger than the variable N2, the processor 21 determines No, and proceeds to step Sa25.
In step Sa25, the processor 21 saves the 2-bit data represented by the above-described successfully extracted symbol in the storage unit 22 as Nt-N4-1 bit and Nt-N4 bit data.
In step Sa26, the processor 21 confirms whether or not the variable N4 matches the value obtained by subtracting the variable N1 from the total number of bits Nt. Then, if the above two values do not match, the processor 21 determines No, returns to step Sa21, and repeats the subsequent processing. As a result, the processor 21 adds the newly obtained data to the tail side data group of the storage unit 22 until the symbol cannot be extracted or the variable N4 matches the value obtained by subtracting the variable N1 from the total number of bits Nt. Save and go.

変数N4が総ビット数Ntから変数N1を減じた値に等しくなると、末尾側データ群のビット数と先頭側データ群のビット数との和が総ビット数Ntに等しくなる。つまり、末尾側データ群と先頭側データ群とで、ID情報の全てのビットが揃ったこととなる。そこでプロセッサ21は、変数N4が総ビット数Ntから変数N1を減じた値に等しくなったならばステップSa26にてYesと判定し、ステップSa27へと進む。
ステップSa27においてプロセッサ21は、記憶部22に記憶された末尾側データ群及び先頭側データ群を、末尾側データ群を先頭側データ群の後に位置するものとして結合することにより、ID情報を再構成する。そしてプロセッサ21は、この制御処理を終了する。
When the variable N4 becomes equal to the value obtained by subtracting the variable N1 from the total number of bits Nt, the sum of the number of bits of the end side data group and the number of bits of the beginning side data group becomes equal to the total number of bits Nt. That is, all the bits of the ID information are aligned in the tail side data group and the head side data group. Therefore, if the variable N4 becomes equal to the value obtained by subtracting the variable N1 from the total number of bits Nt, the processor 21 determines Yes in step Sa26, and proceeds to step Sa27.
In step Sa27, the processor 21 reconstructs the ID information by combining the tail-side data group and the head-side data group stored in the storage unit 22 with the tail-side data group positioned after the head-side data group. To do. Then, the processor 21 ends this control processing.

ところでステップSa21〜ステップSa26の処理ループの実行に伴って、プロセッサ21がフレームデータの先頭付近までシンボルの抽出を終えると、次のシンボルの抽出ができなくなる。そしてこのような状態となると、プロセッサ21はステップSa22にてNoと判定し、図5中のステップSa28へと進む。
ステップSa28においてプロセッサ21は、変数N2の値を、変数N2及び変数N4の大きい方の値として更新する。プロセッサ21はつまり、変数N4が変数N2よりも大きいならば、変数N4の値を変数N2にセットする。これにより変数N2は、この時点における末尾側データ群のビット数を表すこととなる。
By the way, when the processor 21 completes the extraction of symbols up to the vicinity of the beginning of the frame data as the processing loop of steps Sa21 to Sa26 is executed, the next symbol cannot be extracted. Then, in such a state, the processor 21 determines No in step Sa22, and proceeds to step Sa28 in FIG.
In step Sa28, the processor 21 updates the value of the variable N2 as the larger value of the variables N2 and N4. That is, the processor 21 sets the value of the variable N4 in the variable N2 if the variable N4 is larger than the variable N2. Thus, the variable N2 represents the number of bits of the tail side data group at this point.

ステップSa29においてプロセッサ21は、1フレーム分の撮影が終了するのを待ち受ける。そしてプロセッサ21は、カメラ25が1フレーム分の撮影を終えたならばYesと判定し、ステップSa30へと進む。
ステップSa30においてプロセッサ21は、イメージメモリ26に格納済みのイメージデータを対象として、プリアンブルの1つ後ろのシンボルの抽出を試行する。
ステップSa31においてプロセッサ21は、上記の抽出に成功したか否かを確認する。そしてプロセッサ21は、該当するシンボルの4スロットがイメージデータ中に揃っているならばYesと判定し、ステップSa32へと進む。
ステップSa32においてプロセッサ21は、変数N3を2つ増加させる。すなわち変数N3は、プリアンブルの後側について抽出済みのデータのビット数を表す。つまり変数N3は、ペイロードの先頭側について、プリアンブル後のどの位置までのデータを抽出済みであるかを示す。
ステップSa33においてプロセッサ21は、変数N3が変数N1以下であるか否かを確認する。そしてプロセッサ21は、変数N3が変数N1以下であるならばYesと判定し、ステップSa30へと戻る。変数N3が変数N1以下であるならば、ステップSa30で抽出されたシンボルは他のフレームのイメージデータから既に抽出済みである。そこでプロセッサ21は、ここで抽出されたシンボルについては何らの処理も行わない。しかしながら、変数N3が変数N1よりも大きいならば、ステップSa30で抽出されたシンボルは、先頭側データ群としてまだ記憶されていないデータを表す。そこでプロセッサ21は、変数N3が変数N1よりも大きくなったならばNoと判定し、ステップSa34へと進む。
In step Sa29, the processor 21 waits for the end of shooting one frame. Then, the processor 21 determines Yes if the camera 25 has finished shooting one frame, and proceeds to step Sa30.
In step Sa30, the processor 21 attempts to extract the symbol immediately after the preamble for the image data stored in the image memory 26.
In step Sa31, the processor 21 confirms whether or not the above extraction has succeeded. Then, the processor 21 determines Yes if the four slots of the corresponding symbol are aligned in the image data, and proceeds to step Sa32.
In step Sa32, the processor 21 increases the variable N3 by 2. That is, the variable N3 represents the number of bits of the extracted data for the rear side of the preamble. That is, the variable N3 indicates up to which position after the preamble the data on the head side of the payload has been extracted.
In step Sa33, the processor 21 confirms whether the variable N3 is less than or equal to the variable N1. Then, the processor 21 determines Yes if the variable N3 is equal to or less than the variable N1, and returns to step Sa30. If the variable N3 is less than or equal to the variable N1, the symbol extracted in step Sa30 has already been extracted from the image data of another frame. Therefore, the processor 21 does not perform any processing on the symbols extracted here. However, if the variable N3 is larger than the variable N1, the symbol extracted in step Sa30 represents data that has not been stored as the head side data group. Therefore, if the variable N3 becomes larger than the variable N1, the processor 21 determines No, and proceeds to step Sa34.

ステップSa34においてプロセッサ21は、上記の抽出に成功したシンボルが表す2ビットのデータを、N3+1ビット目及びN3+2ビット目のデータとして記憶部22に保存する。
ステップSa35においてプロセッサ21は、変数N3が総ビット数Ntから変数N2を減じた値と一致するか否かを確認する。そしてプロセッサ21は、上記の両値が一致しないならばNoと判定し、ステップSa30へと戻り、それ以降の処理を繰り返す。これによりプロセッサ21は、シンボルが抽出できなくなるか、あるいは変数N3が総ビット数Ntから変数N2を減じた値と一致するまで、新たに得られたデータを記憶部22の先頭側データ群に追加保存して行く。
In step Sa34, the processor 21 stores the 2-bit data represented by the symbol that has been successfully extracted in the storage unit 22 as N3+1-th bit data and N3+2-bit data.
In step Sa35, the processor 21 confirms whether or not the variable N3 matches the value obtained by subtracting the variable N2 from the total number of bits Nt. If the above two values do not match, the processor 21 determines No, returns to step Sa30, and repeats the subsequent processing. As a result, the processor 21 adds the newly obtained data to the head side data group of the storage unit 22 until the symbol cannot be extracted or the variable N3 matches the value obtained by subtracting the variable N2 from the total number of bits Nt. Save and go.

以上のステップSa18〜ステップSa35の処理により、ステップSa4〜ステップSa15の処理の対象となっているのとは別のフレームのイメージデータから、ステップSa4〜ステップSa15の処理では抽出されていないデータが抽出される。従って、アプリケーションプログラムに基づいてプロセッサ21が当該処理を実行することによって、プロセッサ21を中枢部分とするコンピュータは第2の抽出手段として機能する。 By the above processing of steps Sa18 to Sa35, data that has not been extracted by the processing of steps Sa4 to Sa15 is extracted from the image data of a frame different from the target of the processing of steps Sa4 to Sa15. To be done. Therefore, when the processor 21 executes the processing based on the application program, the computer having the processor 21 as a central part functions as the second extracting unit.

変数N3が総ビット数Ntから変数N2を減じた値に等しくなると、先頭側データ群のビット数と末尾側データ群のビット数との和が総ビット数Ntに等しくなる。つまり、先頭側データ群と末尾側データ群とで、ID情報の全てのビットが揃ったこととなる。そこでプロセッサ21は、変数N3が総ビット数Ntから変数N2を減じた値に等しくなったならばステップSa35にてYesと判定し、ステップSa36へと進む。
ステップSa36においてプロセッサ21は、記憶部22に記憶された先頭側データ群及び末尾側データ群を、末尾側データ群を先頭側データ群の後に位置するものとして結合することにより、ID情報を再構成する。これにより、ステップSa4〜Sa15において1フレームのイメージデータから抽出されたデータと、ステップSa18〜Sa35において別のフレームのイメージデータから抽出されたデータとから、ペイロードで伝送されたID情報が再構成される。従ってアプリケーションプログラムに基づいてプロセッサ21が当該処理を実行することによって、プロセッサ21を中枢部分とするコンピュータは再構成手段として機能する。そしてプロセッサ21は、この制御処理を終了する。
When the variable N3 becomes equal to the value obtained by subtracting the variable N2 from the total number of bits Nt, the sum of the number of bits of the head side data group and the number of bits of the end side data group becomes equal to the total number of bits Nt. That is, all the bits of the ID information are aligned in the head side data group and the tail side data group. Therefore, if the variable N3 becomes equal to the value obtained by subtracting the variable N2 from the total number of bits Nt, the processor 21 determines Yes in step Sa35, and proceeds to step Sa36.
In step Sa36, the processor 21 reconstructs the ID information by combining the head-side data group and the tail-side data group stored in the storage unit 22 with the tail-side data group positioned after the head-side data group. To do. As a result, the ID information transmitted in the payload is reconstructed from the data extracted from the image data of one frame in steps Sa4 to Sa15 and the data extracted from the image data of another frame in steps Sa18 to Sa35. It Therefore, when the processor 21 executes the processing based on the application program, the computer having the processor 21 as a central part functions as a reconfiguring unit. Then, the processor 21 ends this control processing.

ところでステップSa30〜ステップSa35の処理ループの実行に伴って、プロセッサ21がフレームデータの末尾付近までシンボルの抽出を終えると、次のシンボルの抽出ができなくなる。そしてこのような状態となると、プロセッサ21はステップSa31にてNoと判定し、ステップSa37へと進む。
ステップSa37においてプロセッサ21は、変数N1の値を、変数N1及び変数N3の大きい方の値として更新する。プロセッサ21はつまり、変数N3が変数N1よりも大きいならば、変数N3の値を変数N1にセットする。これにより変数N1は、この時点における先頭側データ群のビット数を表すこととなる。
By the way, when the processor 21 completes the extraction of symbols up to the vicinity of the end of the frame data in accordance with the execution of the processing loop of steps Sa30 to Sa35, it becomes impossible to extract the next symbol. Then, in such a state, the processor 21 determines No in step Sa31, and proceeds to step Sa37.
In step Sa37, the processor 21 updates the value of the variable N1 as the larger value of the variables N1 and N3. That is, the processor 21 sets the value of the variable N3 to the variable N1 if the variable N3 is larger than the variable N1. As a result, the variable N1 represents the number of bits of the head side data group at this point.

ステップSa38においてプロセッサ21は、変数Mを1つ増加する。これにより変数Mは、次のシンボルの抽出ができないとステップSa31にて判定した回数を表すこととなる。
ステップSa39においてプロセッサ21は、変数Mが予め定められたしきい値Mth以上であるか否かを確認する。しきい値Mthは任意の値であってよく、例えば当該制御処理のアプリケーションプログラムの設計者又は情報端末装置20の使用者などにより定められる。そしてプロセッサ21は、変数Mがしきい値Mth以上であるならばYesと判定し、ステップSa40へと進む。
ステップSa40においてプロセッサ21は、カメラ25のフレームレートの設定を変更する。なお、変更前及び変更後でそれぞれフレームレートをどのような値とするかは任意である。例えば、ステップSa40を一度実行するまでのフレームレートは、この制御処理により設定されるものではなく、情報端末装置20における基本設定などが適用される。
そしてプロセッサ21はステップSa40では、それまでに設定されていたフレームレートを予め定められた割合で増加又は減少する。
プロセッサ21は、こののちに図4中のステップSa18に戻り、それ以降の処理を前述と同様に実行する。なお、プロセッサ21は、変数Mが予め定められたしきい値Mth未満であるならば、ステップSa39にてNoと判定し、ステップSa40をパスして図4中のステップSa18へと戻る。つまりプロセッサ21は、ステップSa18〜ステップSa36の処理をMth回に渡り繰り返してもID情報の全てのビットを得ることができない場合に、フレームレートを変更する。さて、例えば伝送データにおける光通信データの繰り返し周期とカメラ25のフレーム期間の繰り返し周期とが一致すると、ペイロード中の一部の同じ領域のシンボルだけが繰り返し取得されるような状況となる。そしてこの場合には、ステップSa18〜ステップSa36の処理を繰り返しても、ID情報の全てのビットを得ることができないことがある。しかしながら、上記のようにフレームレートを変更することにより、両周期の関係が変化するので、取得できていないビットを取得できるようになる確率が高まる。
In step Sa38, the processor 21 increments the variable M by one. As a result, the variable M represents the number of times it is determined in step Sa31 that the next symbol cannot be extracted.
In step Sa39, the processor 21 confirms whether or not the variable M is equal to or larger than a predetermined threshold value Mth. The threshold value Mth may be any value, and is set by, for example, the designer of the application program of the control process or the user of the information terminal device 20. Then, the processor 21 determines Yes if the variable M is greater than or equal to the threshold value Mth, and proceeds to step Sa40.
In step Sa40, the processor 21 changes the frame rate setting of the camera 25. Note that the values of the frame rate before and after the change are arbitrary. For example, the frame rate until step Sa40 is once executed is not set by this control processing, but the basic setting or the like in the information terminal device 20 is applied.
Then, in step Sa40, the processor 21 increases or decreases the frame rate set up to that point at a predetermined rate.
After this, the processor 21 returns to step Sa18 in FIG. 4 and executes the subsequent processing in the same manner as described above. If the variable M is less than the predetermined threshold value Mth, the processor 21 determines No in step Sa39, passes step Sa40, and returns to step Sa18 in FIG. That is, the processor 21 changes the frame rate when it is not possible to obtain all the bits of the ID information even if the processing of steps Sa18 to Sa36 is repeated Mth times. Now, for example, when the repetition cycle of the optical communication data in the transmission data and the repetition cycle of the frame period of the camera 25 match, only a part of the symbols in the same area in the payload is repeatedly acquired. In this case, even if the processes of steps Sa18 to Sa36 are repeated, it may not be possible to obtain all the bits of the ID information. However, by changing the frame rate as described above, the relationship between the two cycles changes, so the probability that a bit that has not been acquired can be acquired increases.

図7は、以上の制御処理によりID情報が再構成される様子の一例を模式的に示す図である。
可視光通信システム100は、図7に示すように、1フレームのイメージデータからではID情報の全てのビットを得ることができない場合には、不足するビットをその後の別のフレームから取得し、それらをつなぎ合わせてID情報を再構成する。したがって、光通信データの送信とは非同期にカメラ25により撮影して得られたイメージデータからペイロードが示すデータを再構成できる。
また可視光通信システム100によれば、2フレームのイメージデータからペイロードを構成する全てのビットを取得しているので、3フレーム以上のイメージデータを処理する場合に比べて短時間のうちに、ペイロードが示すデータを再構成できる。
また可視光通信システム100ではさらに、連続する2フレームのイメージデータからペイロードを構成する全てのビットを取得している。これとは別に、時間的に離れた2フレームのイメージデータを処理の対象とするように変形実施することも可能である。しかしながら可視光通信システム100では、上記の変形例に比べて効率的に処理可能である。
また可視光通信システム100ではさらに、2フレームのうちの前のフレームからペイロードの先頭側の一部のデータと末尾側の一部のデータとをそれぞれ抽出し、後のフレームからペイロードの中央の一部のデータを抽出する。これとは逆に、前のフレームを保存しておき、後のフレームからペイロードの先頭側の一部のデータと末尾側の一部のデータとをそれぞれ抽出したのち、前のフレームからペイロードの中央の一部のデータを抽出するように変形実施することも可能である。しかしながら可視光通信システム100では、2フレームを到来する順番で処理すれば良く、上記の変形例に比べて効率的に処理可能である。
FIG. 7 is a diagram schematically showing an example of how the ID information is reconstructed by the above control processing.
As shown in FIG. 7, when the visible light communication system 100 cannot obtain all the bits of the ID information from the image data of one frame, the visible light communication system 100 acquires the insufficient bits from another frame after that and To reconstruct the ID information. Therefore, the data indicated by the payload can be reconstructed from the image data obtained by shooting with the camera 25 asynchronously with the transmission of the optical communication data.
Further, according to the visible light communication system 100, since all the bits constituting the payload are acquired from the image data of 2 frames, the payload can be loaded in a shorter time than in the case of processing the image data of 3 frames or more. The data indicated by can be reconstructed.
In addition, the visible light communication system 100 further acquires all the bits forming the payload from the image data of two consecutive frames. Apart from this, it is also possible to carry out a modification so that image data of two frames that are temporally distant is targeted for processing. However, the visible light communication system 100 can perform processing more efficiently than the above modification.
Further, in the visible light communication system 100, a part of the data on the leading side and a part of the data on the trailing side of the payload are respectively extracted from the previous frame of the two frames, and the data is extracted from the subsequent frame to the center of the payload. Extract the data of the department. On the contrary, the previous frame is saved, part of the data at the beginning of the payload and part of the data at the end of the payload are respectively extracted from the latter frame, and then the center of the payload is extracted from the previous frame. It is also possible to carry out a modification so as to extract a part of the data. However, in the visible light communication system 100, it is sufficient to process two frames in the order in which they arrive, which is more efficient than the above modification.

この実施形態は、次のような種々の変形実施が可能である。
送信装置は、照明器具10とは異なり、照明光以外の光に伝送データを重畳して発するものや、伝送データを送信するためだけの光を発する装置として実現してもよい。
送信装置は、同じ内容の光通信データを繰り返し送信するものであれば、光通信データの構成や、どのような形態でデータを表すかなどは任意でよい。
This embodiment can be variously modified as follows.
Unlike the luminaire 10, the transmission device may be realized as a device that emits light by superposing transmission data on light other than the illumination light, or a device that emits light only for transmitting the transmission data.
As long as the transmitting device repeatedly transmits the optical communication data having the same content, the configuration of the optical communication data and the form in which the data is represented may be arbitrary.

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
以下に、本願の当初の特許請求の範囲に記載された発明を付記する。
[付記1] 可視光の点滅として送信装置から繰り返し送信された光通信データを受信する受信装置であって、
複数の光検出素子を備え、予め定められたフレーム期間内に前記複数の光検出素子が順次に受光してイメージデータを得るイメージセンサと;
第1のフレーム期間に前記イメージセンサにより得られた前記イメージデータから前記光通信データに含まれたペイロードの少なくとも一部に相当するデータを抽出する第1の抽出手段と;
前記第1のフレーム期間とは異なるフレーム期間に前記イメージセンサにより得られた前記イメージデータから、前記光通信データに含まれたペイロードのうちで前記第1の抽出手段により抽出されていないデータを抽出する第2の抽出手段と;
前記第1の抽出手段により抽出されたデータと前記第2の抽出手段により抽出されたデータとから前記ペイロードで伝送されるデータを再構成する再構成手段と;を具備した受信装置。
[付記2] 前記第1の抽出手段は、2つのフレーム期間の一方のフレーム期間を前記第1のフレーム期間とし、当該第1のフレーム期間に前記イメージセンサにより得られた前記イメージデータから前記ペイロードの先頭側の一部のデータと末尾側の一部のデータとをそれぞれ抽出し;
前記第2の抽出手段は、前記2つのフレーム期間のうちの他方のフレーム期間に前記イメージセンサにより得られた前記イメージデータから、前記ペイロードの中央の一部のデータを抽出する;
付記1に記載の受信装置。
[付記3] 前記第1の抽出手段は、連続する2つのフレーム期間のうちの前のフレーム期間を前記第1のフレーム期間とし;
前記第2の抽出手段は、前記連続する2つのフレーム期間のうちの後のフレーム期間に前記イメージセンサにより得られた前記イメージデータから、前記ペイロードの中央の一部のデータを抽出する;
付記2に記載の受信装置。
[付記4] 前記イメージセンサは、一定の時間間隔で繰り返し開始されるフレーム期間毎に前記イメージデータを得て;
前記第1の抽出手段は、前記フレーム期間の1つを前記第1のフレーム期間とし;
前記第2の抽出手段は、前記第1のフレーム期間の後のフレーム期間に前記イメージセンサにより得られたイメージデータから前記第1の抽出手段により抽出されていないデータの抽出を試み;
さらに、予め定められた数のフレーム期間に前記イメージセンサにより得られたイメージデータから前記第1の抽出手段により抽出されていないデータの全てが前記第2の抽出手段によって抽出できなかった場合には、前記フレーム期間を開始する時間間隔を変更するように前記イメージセンサを制御する制御手段を備える;
付記1に記載の受信装置。
[付記5] 可視光の点滅として送信装置から繰り返し送信された光通信データを受信するものであり、複数の光検出素子を含み、予め定められたフレーム期間内に前記複数の光検出素子が順次に受光してイメージデータを得るイメージセンサを備えた受信装置を制御するコンピュータを、
第1のフレーム期間に前記イメージセンサにより得られた前記イメージデータから前記光通信データに含まれたペイロードの少なくとも一部に相当するデータを抽出する第1の抽出手段と;
前記第1のフレーム期間とは異なるフレーム期間に前記イメージセンサにより得られた前記イメージデータから、前記光通信データに含まれたペイロードのうちで前記第1の抽出手段により抽出されていないデータを抽出する第2の抽出手段と;
前記第1の抽出手段により抽出されたデータと前記第2の抽出手段により抽出されたデータとから前記ペイロードで伝送されるデータを再構成する再構成手段と;して機能させるためのプログラム。
[付記6] 可視光の点滅として光通信データを繰り返し送信する送信装置と;
前記光通信データを受信する受信装置と;を具備し、
前記受信装置はさらに、
複数の光検出素子を備え、予め定められたフレーム期間内に前記複数の光検出素子が順次に受光してイメージデータを得るイメージセンサと;
第1のフレーム期間に前記イメージセンサにより得られた前記イメージデータから前記光通信データに含まれたペイロードの少なくとも一部に相当するデータを抽出する第1の抽出手段と;
前記第1のフレーム期間とは異なるフレーム期間に前記イメージセンサにより得られた前記イメージデータから、前記光通信データに含まれたペイロードのうちで前記第1の抽出手段により抽出されていないデータを抽出する第2の抽出手段と;
前記第1の抽出手段により抽出されたデータと前記第2の抽出手段により抽出されたデータとから前記ペイロードで伝送されるデータを再構成する再構成手段と;を具備した可視光通信システム。
While some embodiments of the present invention have been described, these embodiments are presented as examples and are not intended to limit the scope of the invention. These novel embodiments can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the spirit of the invention. These embodiments and their modifications are included in the scope and gist of the invention, and are also included in the invention described in the claims and the scope of equivalents thereof.
The inventions described in the initial claims of the present application will be additionally described below.
[Supplementary Note 1] A receiving device that receives optical communication data repeatedly transmitted from the transmitting device as blinking of visible light,
An image sensor comprising a plurality of photo-detecting elements, wherein the plurality of photo-detecting elements sequentially receive light within a predetermined frame period to obtain image data;
First extracting means for extracting data corresponding to at least a part of the payload included in the optical communication data from the image data obtained by the image sensor during the first frame period;
From the image data obtained by the image sensor in a frame period different from the first frame period, data that has not been extracted by the first extracting means from the payload included in the optical communication data is extracted. Second extraction means for:
Reconstruction means for reconstructing data transmitted by the payload from the data extracted by the first extraction means and the data extracted by the second extraction means.
[Supplementary Note 2] The first extracting unit sets one frame period of two frame periods as the first frame period, and extracts the payload from the image data obtained by the image sensor in the first frame period. Extract some data on the leading side and some data on the trailing side of;
The second extracting means extracts a part of data in the center of the payload from the image data obtained by the image sensor in the other frame period of the two frame periods;
The receiving device according to attachment 1.
[Supplementary Note 3] The first extracting unit sets a previous frame period of two consecutive frame periods as the first frame period;
The second extracting means extracts a part of data in the center of the payload from the image data obtained by the image sensor in a frame period subsequent to the two continuous frame periods;
The receiving device according to attachment 2.
[Supplementary Note 4] The image sensor obtains the image data for each frame period that is repeatedly started at regular time intervals;
The first extracting means sets one of the frame periods as the first frame period;
The second extracting unit attempts to extract data that has not been extracted by the first extracting unit from the image data obtained by the image sensor in a frame period after the first frame period;
Furthermore, if all the data that has not been extracted by the first extracting means from the image data obtained by the image sensor during a predetermined number of frame periods cannot be extracted by the second extracting means, A control means for controlling the image sensor to change a time interval for starting the frame period;
The receiving device according to attachment 1.
[Supplementary Note 5] Optical communication data repeatedly transmitted from a transmitting device as blinking of visible light is received. The optical communication data includes a plurality of photodetector elements, and the plurality of photodetector elements are sequentially arranged within a predetermined frame period. A computer that controls a receiving device equipped with an image sensor that receives image light to obtain image data,
First extracting means for extracting data corresponding to at least a part of the payload included in the optical communication data from the image data obtained by the image sensor during the first frame period;
From the image data obtained by the image sensor in a frame period different from the first frame period, data that has not been extracted by the first extracting means from the payload included in the optical communication data is extracted. Second extraction means for:
A reconfiguring unit that reconfigures the data transmitted by the payload from the data extracted by the first extracting unit and the data extracted by the second extracting unit;
[Supplementary Note 6] A transmitting device that repeatedly transmits optical communication data as blinking visible light;
A receiver for receiving the optical communication data;
The receiving device further comprises
An image sensor comprising a plurality of photo-detecting elements, wherein the plurality of photo-detecting elements sequentially receive light within a predetermined frame period to obtain image data;
First extracting means for extracting data corresponding to at least a part of the payload included in the optical communication data from the image data obtained by the image sensor during the first frame period;
From the image data obtained by the image sensor in a frame period different from the first frame period, data that has not been extracted by the first extracting means from the payload included in the optical communication data is extracted. Second extraction means for:
A visible light communication system comprising: a reconfiguring unit configured to reconfigure data transmitted in the payload from the data extracted by the first extracting unit and the data extracted by the second extracting unit.

100…可視光通信システム、10…照明器具、11…記憶部、12…電源回路、13…光源制御部、14…光源、20…情報端末装置、21…プロセッサ、22…記憶部、23…入力デバイス、24…表示デバイス、25…カメラ、26…イメージメモリ、27…通信部。 100... Visible light communication system, 10... Lighting equipment, 11... Storage unit, 12... Power supply circuit, 13... Light source control unit, 14... Light source, 20... Information terminal device, 21... Processor, 22... Storage unit, 23... Input Device, 24... Display device, 25... Camera, 26... Image memory, 27... Communication unit.

Claims (5)

可視光の点滅として送信装置から繰り返し送信された光通信データを受信する受信装置であって、
複数の光検出素子を備え、予め定められたフレーム期間内に前記複数の光検出素子が順次に受光してイメージデータを得るイメージセンサと;
第1のフレーム期間に前記イメージセンサにより得られた前記イメージデータから前記光通信データに含まれたペイロードの先頭側の一部のデータと末尾側の一部のデータとをそれぞれ抽出する第1の抽出手段と;
前記第1のフレーム期間とは異なる第2のフレーム期間に前記イメージセンサにより得られた前記イメージデータから、前記光通信データに含まれた前記ペイロードのうちで前記第1の抽出手段により抽出されていない中央の一部のデータを抽出する第2の抽出手段と;
前記第1の抽出手段により抽出されたデータと前記第2の抽出手段により抽出されたデータとから前記ペイロードで伝送されるデータを再構成する再構成手段と;を具備した受信装置。
A receiving device for receiving optical communication data repeatedly transmitted from a transmitting device as blinking of visible light,
An image sensor comprising a plurality of photo-detecting elements, wherein the plurality of photo-detecting elements sequentially receive light within a predetermined frame period to obtain image data;
A first part of data on the leading side and a part of the tail side of the payload included in the optical communication data are extracted from the image data obtained by the image sensor in the first frame period. Extraction means;
Wherein the image data obtained by the first of the second said image sensor to a frame period different from the frame period, are extracted by the first extracting means of the payloads said included in the optical communication data A second extraction means for extracting a partial central data;
Reconstruction means for reconstructing data transmitted by the payload from the data extracted by the first extraction means and the data extracted by the second extraction means.
前記第2の抽出手段は、前記第1のフレーム期間の後ろに連続するフレーム期間を前記第2のフレーム期間とする
請求項1に記載の受信装置。
The second extracting means sets a frame period subsequent to the first frame period as the second frame period ;
The receiving device according to claim 1 .
前記イメージセンサは、一定の時間間隔で繰り返し開始されるフレーム期間毎に前記イメージデータを得て;
前記第1の抽出手段は、前記フレーム期間の1つを前記第1のフレーム期間とし;
前記第2の抽出手段は、前記第1のフレーム期間の後のフレーム期間に前記イメージセンサにより得られた前記イメージデータから前記第1の抽出手段により抽出されていないデータの抽出を試み;
さらに、予め定められた数の前記フレーム期間に前記イメージセンサにより得られた前記イメージデータから前記第1の抽出手段により抽出されていないデータの全てが前記第2の抽出手段によって抽出できなかった場合には、前記フレーム期間を開始する時間間隔を変更するように前記イメージセンサを制御する制御手段を備える;
請求項1に記載の受信装置。
The image sensor obtains the image data for each frame period that is repeatedly started at regular time intervals;
The first extracting means sets one of the frame periods as the first frame period;
It said second extraction means, attempt to extract the data that has not been extracted by said first extracting means from the image data obtained by the image sensor frame period after the first frame period;
Furthermore, if all of the data that has not been extracted by said first extracting means from the image data obtained by the image sensor to the frame period of a predetermined number can not be extracted by said second extraction means Further comprises control means for controlling the image sensor to change a time interval for starting the frame period;
The receiving device according to claim 1.
可視光の点滅として送信装置から繰り返し送信された光通信データを受信するものであり、複数の光検出素子を含み、予め定められたフレーム期間内に前記複数の光検出素子が順次に受光してイメージデータを得るイメージセンサを備えた受信装置を制御するコンピュータを、
第1のフレーム期間に前記イメージセンサにより得られた前記イメージデータから前記光通信データに含まれたペイロードの先頭側の一部のデータと末尾側の一部のデータとをそれぞれ抽出する第1の抽出手段と;
前記第1のフレーム期間とは異なる第2のフレーム期間に前記イメージセンサにより得られた前記イメージデータから、前記光通信データに含まれた前記ペイロードのうちで前記第1の抽出手段により抽出されていない中央の一部のデータを抽出する第2の抽出手段と;
前記第1の抽出手段により抽出されたデータと前記第2の抽出手段により抽出されたデータとから前記ペイロードで伝送されるデータを再構成する再構成手段と;して機能させるためのプログラム。
Receiving optical communication data repeatedly transmitted from the transmitting device as blinking of visible light, including a plurality of photodetector elements, the plurality of photodetector elements sequentially receive light within a predetermined frame period. A computer for controlling a receiving device equipped with an image sensor for obtaining image data,
A first part of data on the leading side and a part of the tail side of the payload included in the optical communication data are extracted from the image data obtained by the image sensor in the first frame period. Extraction means;
Wherein the image data obtained by the first of the second said image sensor to a frame period different from the frame period, are extracted by the first extracting means of the payloads said included in the optical communication data A second extraction means for extracting a partial central data;
A reconfiguring unit that reconfigures the data transmitted by the payload from the data extracted by the first extracting unit and the data extracted by the second extracting unit;
可視光の点滅として光通信データを繰り返し送信する送信装置と;
前記光通信データを受信する受信装置と;を具備し、
前記受信装置はさらに、
複数の光検出素子を備え、予め定められたフレーム期間内に前記複数の光検出素子が順次に受光してイメージデータを得るイメージセンサと;
第1のフレーム期間に前記イメージセンサにより得られた前記イメージデータから前記光通信データに含まれたペイロードの先頭側の一部のデータと末尾側の一部のデータとをそれぞれ抽出する第1の抽出手段と;
前記第1のフレーム期間とは異なる第2のフレーム期間に前記イメージセンサにより得られた前記イメージデータから、前記光通信データに含まれた前記ペイロードのうちで前記第1の抽出手段により抽出されていない中央の一部のデータを抽出する第2の抽出手段と;
前記第1の抽出手段により抽出されたデータと前記第2の抽出手段により抽出されたデータとから前記ペイロードで伝送されるデータを再構成する再構成手段と;を具備した可視光通信システム。
A transmitting device that repeatedly transmits optical communication data as blinking visible light;
A receiver for receiving the optical communication data;
The receiving device further comprises
An image sensor comprising a plurality of photo-detecting elements, wherein the plurality of photo-detecting elements sequentially receive light within a predetermined frame period to obtain image data;
A first part of data on the leading side and a part of the tail side of the payload included in the optical communication data are extracted from the image data obtained by the image sensor in the first frame period. Extraction means;
Wherein the image data obtained by the first of the second said image sensor to a frame period different from the frame period, are extracted by the first extracting means of the payloads said included in the optical communication data A second extraction means for extracting a partial central data;
A visible light communication system comprising: a reconfiguring unit configured to reconfigure data transmitted in the payload from the data extracted by the first extracting unit and the data extracted by the second extracting unit.
JP2016137043A 2016-07-11 2016-07-11 Receiving device and its program, and visible light communication system Expired - Fee Related JP6747120B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016137043A JP6747120B2 (en) 2016-07-11 2016-07-11 Receiving device and its program, and visible light communication system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016137043A JP6747120B2 (en) 2016-07-11 2016-07-11 Receiving device and its program, and visible light communication system

Publications (2)

Publication Number Publication Date
JP2018011133A JP2018011133A (en) 2018-01-18
JP6747120B2 true JP6747120B2 (en) 2020-08-26

Family

ID=60993532

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016137043A Expired - Fee Related JP6747120B2 (en) 2016-07-11 2016-07-11 Receiving device and its program, and visible light communication system

Country Status (1)

Country Link
JP (1) JP6747120B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7228889B2 (en) * 2019-04-11 2023-02-27 学校法人加計学園 Visible light communication device and visible light communication method

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5936902B2 (en) * 2012-04-13 2016-06-22 株式会社東芝 Transmission system, transmission device and reception device
JP2015103858A (en) * 2013-11-21 2015-06-04 パナソニックIpマネジメント株式会社 Visible light communication device and visible light communication system
EP3105867B1 (en) * 2014-02-14 2017-10-11 Philips Lighting Holding B.V. Noise filtering with a wiener filter in a coded light transmission system

Also Published As

Publication number Publication date
JP2018011133A (en) 2018-01-18

Similar Documents

Publication Publication Date Title
US9452705B2 (en) LED lamp provided with a variable-geometry beam device
JP6482464B2 (en) Electronic device, communication system, and control method of electronic device
KR101472583B1 (en) Camera communication system, camera communication method and camera device therefor
US8614766B1 (en) Systems and methods for controlling a power state of a remote device using camera body backlighting control signaling
JP2011250231A (en) Information transmission system and information transmission method
CA2939002C (en) System and method for maintaining synchronization with low power endpoints in a time synchronized channel hopping network
JP6747120B2 (en) Receiving device and its program, and visible light communication system
CN109121267A (en) Lamp light control method, equipment and storage medium
JP2007013485A (en) Equipment and system for visible light communication and apparent brightness changing method
US20160065829A1 (en) Imaging apparatus capable of interval photographing
KR20170017077A (en) Apparatus and method for visible light communication
CN110169042A (en) Method and apparatus for making camera flash Yu sensor banking sync
CN110460749A (en) Picture pick-up device and luminaire and its control method
KR20160137342A (en) Optical camera communication method using LED and rolling shutter camera
US9564966B1 (en) Reconstructing light-based communication signals using an alias frequency
US9929809B2 (en) Reconstructing light-based communication signals captured with a rolling shutter image capture device
CN107204807A (en) The matching method and system of bluetooth equipment
CN106101523A (en) Picture pick-up device and control method thereof
KR102324911B1 (en) Apparatus and method for supporting multi communication based on visible light communication
KR102071795B1 (en) Electronic watch allowing data to be received
EP4066600B1 (en) A lighting unit for executing multiple lighting control commands and a method thereof
KR102076393B1 (en) Method and apparatus for lighting control using optical camera communication
JP2016225926A (en) Modulation device, light-emitting device, and light-emitting system
KR102136497B1 (en) Method and apparatus for modulating and demodulating optical camera communication signal
JP6135397B2 (en) camera

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190307

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20191217

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200114

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200311

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200707

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200720

R151 Written notification of patent or utility model registration

Ref document number: 6747120

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees