JP5747889B2 - Visible light communication system, light emitting unit, imaging device, and visible light communication method - Google Patents

Visible light communication system, light emitting unit, imaging device, and visible light communication method Download PDF

Info

Publication number
JP5747889B2
JP5747889B2 JP2012217004A JP2012217004A JP5747889B2 JP 5747889 B2 JP5747889 B2 JP 5747889B2 JP 2012217004 A JP2012217004 A JP 2012217004A JP 2012217004 A JP2012217004 A JP 2012217004A JP 5747889 B2 JP5747889 B2 JP 5747889B2
Authority
JP
Japan
Prior art keywords
visible light
unit
image
information
superimposed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012217004A
Other languages
Japanese (ja)
Other versions
JP2014072687A (en
Inventor
大輔 大谷
大輔 大谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2012217004A priority Critical patent/JP5747889B2/en
Priority to US14/017,162 priority patent/US9380198B2/en
Priority to CN201310451307.9A priority patent/CN103716531B/en
Publication of JP2014072687A publication Critical patent/JP2014072687A/en
Application granted granted Critical
Publication of JP5747889B2 publication Critical patent/JP5747889B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)

Description

本発明は、例えば撮像装置を用いて特定の瞬間を撮影する場合などに好適な可視光通信システム、発光ユニット、撮像装置、及び、可視光通信方法に関する。   The present invention relates to a visible light communication system, a light emitting unit, an imaging device, and a visible light communication method suitable for photographing a specific moment using an imaging device, for example.

従来より、カメラでの撮影時に生じるレリーズタイムラグを抑え、撮影者の意図通りのタイミングで撮影を実行するために各種の技術が考案され、あるいは製品化されてきた。例えば、カメラ専用のリモートコントローラを用いたリモコン撮影において、レリーズタイムラグを極力抑えるようにした技術が考えられている。(例えば、特許文献1)   Conventionally, various techniques have been devised or commercialized in order to suppress the release time lag that occurs when shooting with a camera and to execute shooting at the timing as intended by the photographer. For example, in remote control photography using a camera-dedicated remote controller, a technique that suppresses the release time lag as much as possible has been considered. (For example, Patent Document 1)

特開2003−195409号公報JP 2003-195409 A

上述した種類のカメラを用い、被写体が特徴的な動きをする瞬間、例えば野球でバッターのスイングするバットが、ピッチャーの投球にミートする瞬間などを撮影したい場合、上記特許技術を含めて実用的なものはなく、撮影者自身がその種の撮影技術に習熟するか、あるいは高速連写が可能なカメラ機材を用いて意図する瞬間を含む、時間的に連続した多数の画像を撮影するしかない。   If you want to capture the moment when the subject moves characteristically, such as the moment when the batter swinging in baseball meets the pitcher's pitch using the camera of the type described above, There is nothing, but the photographer himself must be proficient in that kind of shooting technique, or can take a number of images that are continuous in time, including the intended moment using camera equipment capable of high-speed continuous shooting.

本発明は上記のような実情に鑑みてなされたもので、その目的とするところは、撮影者が意図した瞬間の画像を撮影することを可能とすることにある。   The present invention has been made in view of the above circumstances, and an object of the present invention is to make it possible to take an image of a moment intended by a photographer.

本発明の一態様は、任意の情報を重畳した可視光を発信する発光ユニットと、当該発光ユニットからの可視光を受信し、受信した可視光に重畳された情報を取得して、取得した情報に対応する動作を実行する受光ユニットとを有する可視光通信システムにおいて、上記発光ユニットは、当該発光ユニットが受ける衝撃を検出する検出手段と、上記検出手段で検出した衝撃の大きさが予め設定したしきい値以上であるか否かを判定する判定手段と、上記判定手段での判定結果に応じた情報を重畳した可視光を発信させる発信制御手段とを具備し、上記受光ユニットは、被写体の画像を撮影する撮像手段と、上記撮像手段で撮影する画像を、更新しながら所定枚数分保持し続ける保持手段と、上記撮像手段で撮影する画像中から可視光に重畳された情報を復調して取得する可視光情報取得手段と、上記可視光情報取得手段で得た情報に基づき、上記保持手段で保持する画像の記録を制御する記録制御手段とを具備することを特徴とする。   One embodiment of the present invention is a light-emitting unit that emits visible light on which arbitrary information is superimposed, and information obtained by receiving visible light from the light-emitting unit and acquiring information superimposed on the received visible light. In the visible light communication system having a light receiving unit that performs an operation corresponding to the light emitting unit, the light emitting unit has a detection unit that detects an impact received by the light emitting unit, and a magnitude of the shock detected by the detection unit is preset. Determination means for determining whether or not the threshold value is exceeded, and transmission control means for transmitting visible light superimposed with information according to the determination result of the determination means. An imaging unit that captures an image, a holding unit that continues to hold a predetermined number of images captured by the imaging unit, and an image that is captured by the imaging unit are superimposed on visible light. A visible light information acquisition unit that demodulates and acquires information; and a recording control unit that controls recording of an image held by the holding unit based on information obtained by the visible light information acquisition unit. To do.

本発明によれば、撮影者が意図した瞬間の画像を撮影することが可能となる。   According to the present invention, it is possible to take an image of a moment intended by a photographer.

本発明の一実施形態に係る受光ユニットとしてのデジタルカメラの機能回路構成を示すブロック図。1 is a block diagram showing a functional circuit configuration of a digital camera as a light receiving unit according to an embodiment of the present invention. 同実施形態に係る可視光通信システムの発光ユニットの回路構成を示すブロック図。The block diagram which shows the circuit structure of the light emission unit of the visible light communication system which concerns on the same embodiment. 同実施形態に係る発光ユニット側での処理内容を示すフローチャート。The flowchart which shows the processing content by the light emission unit side which concerns on the same embodiment. 同実施形態に係るデジタルカメラ側での可視光自動撮影モードの処理内容を示すフローチャート。5 is a flowchart showing the processing content of a visible light automatic photographing mode on the digital camera side according to the embodiment. 同実施形態に係るリストバンドを装着した人物がテニスをしている情景を時間的に連続した画像として示す図。The figure which shows the scene where the person wearing the wristband which concerns on the embodiment is playing tennis as a temporally continuous image. 同実施形態に係る画像バッファに保持した画像に対するトリミング範囲を例示する図。6 is a diagram illustrating a trimming range for an image held in the image buffer according to the embodiment. FIG.

以下、本発明をスポーツ撮影用の発光ユニットと受光ユニットからなる可視光通信システムに適用した場合の一実施形態について図面を参照して詳細に説明する。   Hereinafter, an embodiment in which the present invention is applied to a visible light communication system including a light emitting unit and a light receiving unit for sports photography will be described in detail with reference to the drawings.

図1は、上記受光ユニットとなるデジタルカメラ10(撮像装置)の機能構成を示すブロック図である。同図で、カメラ筐体前面に配設される光学レンズ部11により、固体撮像素子であるCMOSイメージセンサ12の撮像面上に被写体の光像が結像される。   FIG. 1 is a block diagram showing a functional configuration of a digital camera 10 (imaging device) serving as the light receiving unit. In the same figure, an optical image of a subject is formed on the imaging surface of a CMOS image sensor 12 that is a solid-state imaging device by an optical lens unit 11 disposed on the front surface of the camera casing.

スルー画像表示、あるいはライブビュー画像表示とも称されるモニタ状態では、このCMOSイメージセンサ12での撮像により得た画像信号を画像処理部13に送り、相関二乗サンプリングや自動ゲイン調整、A/D変換処理を実行してデジタル化する。画像処理部13はさらに、このデジタル値の画像データに画素補間処理、γ補正処理を含むカラープロセス処理を施した後、システムバスSB1を介して画像バッファ14に一時的に保持させる。   In the monitor state, also referred to as through image display or live view image display, an image signal obtained by imaging with the CMOS image sensor 12 is sent to the image processing unit 13 to perform correlation square sampling, automatic gain adjustment, A / D conversion. Execute the process and digitize it. The image processing unit 13 further performs color process processing including pixel interpolation processing and γ correction processing on the digital image data, and then temporarily stores the digital data in the image buffer 14 via the system bus SB1.

画像バッファ14に保持された画像データをシステムバスSB1を介して画像処理部13に読出し、画像サイズを大幅に縮小した上で再びシステムバスSB1を介して表示部15へ送り、モニタ画像として表示させる。   The image data held in the image buffer 14 is read out to the image processing unit 13 via the system bus SB1, and the image size is greatly reduced and then sent to the display unit 15 via the system bus SB1 again to be displayed as a monitor image. .

以上の過程を制御部16が統括制御する。制御部16はCPUで構成され、メインメモリ17、プログラムメモリ18と直接接続される。メインメモリ17は、SDRAM(シンクロナスDRAM)で構成され、ワークメモリとして機能する。プログラムメモリ18は、電気的に書換可能な不揮発性メモリで構成され、後述するスポーツ撮影モードでの記録を含む動作プログラムや各種データ等を固定的に記憶する。   The control unit 16 performs overall control of the above process. The control unit 16 includes a CPU and is directly connected to the main memory 17 and the program memory 18. The main memory 17 is composed of SDRAM (synchronous DRAM) and functions as a work memory. The program memory 18 is composed of an electrically rewritable non-volatile memory, and fixedly stores an operation program including recording in a sport shooting mode, which will be described later, various data, and the like.

制御部16は、プログラムメモリ18から必要なプログラムやデータ等を読出し、メインメモリ17に適宜一時的に展開記憶させながら、このデジタルカメラ10全体の制御動作を実行する。   The control unit 16 reads out necessary programs, data, and the like from the program memory 18 and executes the control operation of the entire digital camera 10 while being temporarily expanded and stored in the main memory 17.

さらに上記制御部16は、キー入力部19から直接入力されるキー操作信号に対応して各種制御動作を実行する。制御部16は、システムバスSB1を介して上記画像処理部13、画像バッファ14、表示部15の他、さらにレンズ駆動部20、フラッシュ駆動部21、CMOS駆動部22、音声処理部23、デコード部24、メモリカード25、及びインジケータ部26とも接続される。   Further, the control unit 16 executes various control operations in response to key operation signals directly input from the key input unit 19. In addition to the image processing unit 13, the image buffer 14, and the display unit 15, the control unit 16 further includes a lens driving unit 20, a flash driving unit 21, a CMOS driving unit 22, an audio processing unit 23, and a decoding unit via the system bus SB1. 24, the memory card 25, and the indicator unit 26 are also connected.

キー入力部19は、例えば電源キー、シャッタキー、ズームキー、撮影モードキー、再生モードキー、メニューキー、カーソル(「↑」「→」「↓」「←」)キー、セットキー等を備える。   The key input unit 19 includes, for example, a power key, shutter key, zoom key, shooting mode key, playback mode key, menu key, cursor (“↑”, “→”, “↓”, “←”) key, set key, and the like.

レンズ駆動部20は、制御部16からの制御信号を受けてレンズ用ステッピングモータ(M)27の回動を制御し、上記光学レンズ部11を構成する複数のレンズ中の一部、具体的にはフォーカスレンズ及びズームレンズの位置をそれぞれ個別に光軸方向に沿って移動させる。   The lens driving unit 20 receives a control signal from the control unit 16 and controls the rotation of the lens stepping motor (M) 27, and a part of the plurality of lenses constituting the optical lens unit 11, specifically, Moves the position of the focus lens and the zoom lens individually along the optical axis direction.

フラッシュ駆動部21は、静止画像撮影時に制御部16からの制御信号を受けて複数の白色高輝度LEDで構成されるフラッシュ部28を撮影タイミングに同期して点灯駆動する。   The flash drive unit 21 receives a control signal from the control unit 16 during still image shooting, and drives the flash unit 28 including a plurality of white high-intensity LEDs to be lit in synchronization with the shooting timing.

CMOS駆動部22は、その時点で設定されている撮影条件等に応じて上記CMOSイメージセンサ12の走査駆動を行なう。   The CMOS drive unit 22 scans and drives the CMOS image sensor 12 according to the shooting conditions set at that time.

上記キー入力部19のシャッタキー操作に伴う静止画の撮影時に、画像処理部13は上記画像バッファ14に保持される画像データを所定のデータファイル形式、例えばJPEG(Joint Photographic Experts Group)であればDCT(離散コサイン変換)やハフマン符号化等のデータ圧縮処理を施してデータ量を大幅に削減した画像データファイルを作成する。作成した画像データファイルはシステムバスSB1を介してメモリカード25に記録される。   When shooting a still image associated with the shutter key operation of the key input unit 19, the image processing unit 13 converts the image data held in the image buffer 14 into a predetermined data file format, for example, JPEG (Joint Photographic Experts Group). Data compression processing such as DCT (Discrete Cosine Transform) or Huffman coding is performed to create an image data file with a greatly reduced data amount. The created image data file is recorded in the memory card 25 via the system bus SB1.

また上記画像処理部13は、再生モード時にメモリカード25から読出されてくる画像データをシステムバスSB1を介して受取り、記録時とは逆の手順で圧縮を解く伸長処理により元のサイズの画像データを得、これをシステムバスSB1を介して画像バッファ14に保持させる。そして、画像バッファ14に保持された画像データにより表示部15で再生のための表示を実行させる。   The image processing unit 13 receives the image data read from the memory card 25 in the reproduction mode via the system bus SB1, and the original size image data by the decompression process in which the compression is performed in the reverse procedure to the recording time. Is stored in the image buffer 14 via the system bus SB1. Then, display for reproduction is executed on the display unit 15 by the image data held in the image buffer 14.

なお、動画撮影時に画像処理部13は、画像バッファ14に時間的に連続して保持される複数の画像データを所定のデータファイル形式、例えばH.264/AVC(MPEG−4パート10/Advanced Video Coding)であればDCT(離散コサイン変換)や可変長符号化、及びGOP(Group Of Pictures)を単位とした動き補償フレーム間予測符号化等のデータ圧縮処理を施してデータ量を大幅に削減し、作成した画像データファイルを順次上記メモリカード25に記録させると共に、全ての画像データファイルの記録を終えた時点でメモリカード25に記録された一連の画像データファイルを1つのデータファイルとして纏めるべく設定する。   Note that the image processing unit 13 captures a plurality of pieces of image data held in the image buffer 14 in a predetermined data file format, for example, H.264, at the time of moving image shooting. For H.264 / AVC (MPEG-4 Part 10 / Advanced Video Coding), data such as DCT (Discrete Cosine Transform), variable length coding, and motion compensation inter-frame prediction coding using GOP (Group Of Pictures) as a unit. The amount of data is greatly reduced by performing compression processing, and the created image data files are sequentially recorded on the memory card 25, and a series of data recorded on the memory card 25 when all the image data files have been recorded. The image data files are set to be combined as one data file.

また画像処理部13は、動画データの再生モード時に上記メモリカード25から読出されてくる一連の画像データを記録時とは逆の手順で圧縮を解く伸長処理により順次元のサイズの画像データを得、これを画像バッファ14に時間的に連続して順次保持させるもので、画像バッファ14に保持された画像データにより表示部15で再生のための表示が連続して実行される。   In addition, the image processing unit 13 obtains image data of a normal dimension size by decompression processing that decompresses a series of image data read from the memory card 25 in the moving image data reproduction mode in the reverse procedure of recording. These are sequentially held in the image buffer 14 sequentially in time, and display for reproduction is continuously executed on the display unit 15 by the image data held in the image buffer 14.

音声処理部23は、上記光学レンズ部11と同じくカメラ筐体前面に配設されたマイクロホン29から入力される音声信号をデジタルデータ化し、所定のデータファイル形式、例えばAAC(moving picture experts group−4 Advanced Audio Coding)形式でデータ圧縮して音声データファイルを作成し、上記メモリカード25へ送出する。   The audio processing unit 23 converts the audio signal input from the microphone 29 disposed on the front surface of the camera housing in the same manner as the optical lens unit 11 into digital data, and a predetermined data file format such as AAC (moving picture experts group-4). An audio data file is created by compressing the data in the Advanced Audio Coding) format and sent to the memory card 25.

加えて音声処理部23は、PCM音源等の音源回路を備え、音声の再生時にメモリカード25から送られてくる音声データファイルの圧縮を解いてアナログ化し、このデジタルカメラ10の背面側に設けられるスピーカ30を駆動して、拡声放音させる。   In addition, the audio processing unit 23 includes a tone generator circuit such as a PCM tone generator, and is provided on the back side of the digital camera 10 by uncompressing and converting the audio data file sent from the memory card 25 during audio reproduction. The speaker 30 is driven to emit loud sounds.

上記デコード部24は、上記画像処理部13と協働し、画像バッファ14に保持される一連の画像中から可視光通信の発光部における色と符号化情報をデコードして、重畳されていた信号を復調する。
以上、画像処理部13とデコード部24とで発光ユニットからの情報を復調する復調系を構成する。
The decoding unit 24 cooperates with the image processing unit 13 to decode the color and encoding information in the light emitting unit of visible light communication from the series of images held in the image buffer 14 and superimpose the signal. Is demodulated.
As described above, the image processing unit 13 and the decoding unit 24 constitute a demodulation system that demodulates information from the light emitting unit.

上記メモリカード25は、このデジタルカメラ10に着脱自在に装着される。メモリカード25は、このデジタルカメラ10の記録媒体となる画像データ等の記録用メモリであり、内部にはブロック単位で電気的に書換え可能な不揮発性メモリであるフラッシュメモリと、そのコントローラ回路とが設けられる。   The memory card 25 is detachably attached to the digital camera 10. The memory card 25 is a memory for recording image data and the like serving as a recording medium of the digital camera 10, and internally includes a flash memory that is a non-volatile memory that can be electrically rewritten in units of blocks, and a controller circuit thereof. Provided.

インジケータ部26は、複数のLEDで構成され、このデジタルカメラ10の各種動作状態、例えば電源のオン/オフ、光学レンズ部11での合焦状態、フラッシュ部28の点灯の有無等を表示する。   The indicator unit 26 is composed of a plurality of LEDs, and displays various operating states of the digital camera 10, such as power on / off, in-focus state in the optical lens unit 11, whether or not the flash unit 28 is lit.

次に図2により、発光ユニットとなるリストバンドの回路構成についても説明する。同図で、リストバンド50は、外装上、高輝度LED発光部51が「光タグ」として露出するようにして設けられる。
この高輝度LED発光部51は、R(赤色),G(緑色),B(青色)3色の各高輝度LEDを選択的に発光駆動するもので、可視光通信システムにおける情報送信部として機能する。この高輝度LED発光部51の発信する情報の詳細については、例えば特開2003−179556号公報などに述べられているものとして、その説明を省略する。
Next, referring to FIG. 2, a circuit configuration of a wristband that is a light emitting unit will be described. In the figure, the wristband 50 is provided on the exterior so that the high-intensity LED light-emitting unit 51 is exposed as an “optical tag”.
The high-intensity LED light emitting unit 51 selectively drives each high-intensity LED of R (red), G (green), and B (blue) to emit light, and functions as an information transmission unit in a visible light communication system. To do. The details of the information transmitted by the high-intensity LED light emitting unit 51 are described in, for example, Japanese Patent Application Laid-Open No. 2003-179556, and the description thereof is omitted.

さらにこのリストバンド50には、3軸加速度センサ52が内装される。3軸加速度センサ52は、鉛直方向に作用する重力加速度を含めて、このリストバンド50に与えられる、互いに直交する3軸方向の各加速度を検出する。   Further, the wristband 50 includes a three-axis acceleration sensor 52. The triaxial acceleration sensor 52 detects accelerations in the triaxial directions orthogonal to each other, which are given to the wristband 50, including gravitational acceleration acting in the vertical direction.

これら高輝度LED発光部51、及び3軸加速度センサ52が、システムバスSB2を介して制御部53と接続される。制御部53は、CPUで構成され、メインメモリ54、プログラムメモリ55と直接接続される。メインメモリ54は、SRAMで構成され、ワークメモリとして機能する。プログラムメモリ55は、電気的に書換可能な不揮発性メモリで構成され、高輝度LED発光部51での発光色、及び発光パターンを状況に応じて変化させるための動作プログラムを固定的に記憶する。   The high-intensity LED light emitting unit 51 and the three-axis acceleration sensor 52 are connected to the control unit 53 via the system bus SB2. The control unit 53 includes a CPU and is directly connected to the main memory 54 and the program memory 55. The main memory 54 is composed of SRAM and functions as a work memory. The program memory 55 is composed of an electrically rewritable nonvolatile memory, and fixedly stores an operation program for changing the light emission color and light emission pattern of the high-intensity LED light emitting unit 51 according to the situation.

制御部53は、プログラムメモリ55から必要なプログラムやデータ等を読出し、メインメモリ54に適宜一時的に展開記憶させながら、このリストバンド50全体の制御動作を実行する。さらに上記制御部制御部53は、電源キー、感度切換スイッチを備えるキースイッチ(SW)部56からのキー操作信号に対応して各種制御動作を実行する。   The control unit 53 reads out necessary programs, data, and the like from the program memory 55, and executes the control operation of the entire wristband 50 while temporarily expanding and storing it in the main memory 54 as appropriate. Further, the control unit control unit 53 executes various control operations in response to key operation signals from a key switch (SW) unit 56 including a power key and a sensitivity changeover switch.

キースイッチ部56に備えられる感度切換スイッチは、例えば「テニス」「バッター(野球)」「バレーボール」など複数種類のスポーツで、このリストバンド50の装着者の腕にインパクトが加わる瞬間を検知するための感度を切換えるためのもので、上記電源キーを兼ねて設けるものとしても良い。   The sensitivity changeover switch provided in the key switch unit 56 detects a moment when an impact is applied to the wrist of the wearer of the wristband 50 in a plurality of types of sports such as “tennis”, “batter (baseball)”, and “volleyball”. It is also possible to provide the power key as well.

次に上記実施形態の動作について説明する。
ここでは、テニスを行なう人物を被写体として、当該被写体に上記図2で示した構成のリストバンド50を装着してもらい、その人物がテニスを行なっている間の模様を、受光ユニットとしてのデジタルカメラ10により撮像するものとする。
Next, the operation of the above embodiment will be described.
Here, a person who plays tennis is set as a subject, and the subject is wearing the wristband 50 having the configuration shown in FIG. 10 is used for imaging.

図3は、被写体となる人物が装着した、発光ユニットである上記リストバンド50側での動作を示す。同図に示すようにリストバンド50の制御部53は、所定周期、例えば1/60[秒]毎に3軸加速度センサ52で検出される、互いに直交する3軸方向の各加速度を所得する(ステップT01)。   FIG. 3 shows the operation on the wristband 50 side, which is a light emitting unit, worn by a person as a subject. As shown in the figure, the control unit 53 of the wristband 50 obtains each acceleration in the three-axis directions orthogonal to each other detected by the three-axis acceleration sensor 52 at a predetermined period, for example, 1/60 [second] ( Step T01).

この取得した3軸の加速度情報に基づいて制御部53は、それまでに取得した直前の同情報を用い、このリストバンド50に対して加わる衝撃度を算出する(ステップT02)。   Based on the acquired three-axis acceleration information, the control unit 53 calculates the degree of impact applied to the wristband 50 using the same information acquired immediately before (step T02).

次いで制御部53は、算出した衝撃度が、キースイッチ部56の感度切換スイッチでの切換状態に応じたしきい値に比して、より大きいか否かにより、その選択されたスポーツでのインパクトの瞬間、テニスであればボールをラケットで打った瞬間、であるか否かを判断する(ステップT03)。   Next, the control unit 53 determines the impact in the selected sport depending on whether or not the calculated degree of impact is larger than the threshold value corresponding to the switching state of the sensitivity switch of the key switch unit 56. In the case of tennis, it is determined whether or not it is the moment of hitting the ball with a racket (step T03).

ここで、算出した衝撃度がしきい値以下であり、その時点で選択されているスポーツでのインパクトの瞬間ではないと判断した場合、制御部53は、予め設定されているスタンバイパターン、「光タグ」である高輝度LED発光部51を例えばR(赤色)とG(緑色)とで一定時間毎に交互に色を切換ながら、スタンバイパターンとして設定されたコマンド情報のコードを重畳した明滅パターンで発信させるように高輝度LED発光部51を駆動させる(ステップT05)。   Here, when the calculated impact level is equal to or less than the threshold value and it is determined that it is not the moment of impact in the sport selected at that time, the control unit 53 sets the standby pattern “light” set in advance. For example, a high-brightness LED light-emitting unit 51 that is a “tag” is a blinking pattern in which a code of command information set as a standby pattern is superimposed while alternately switching colors at regular intervals between R (red) and G (green). The high-intensity LED light-emitting unit 51 is driven so as to transmit (step T05).

その後に制御部53は、再び上記ステップT01からの処理に戻る、という動作を繰返し実行する。   Thereafter, the control unit 53 repeatedly executes the operation of returning to the processing from step T01 again.

また、上記ステップT03において、算出した衝撃度がしきい値より大きく、その時点で選択されているスポーツでのインパクトの瞬間となったと判断した場合、制御部53は、それまでのスタンバイパターンでの発光に代えて、予め設定されているインパクトパターン、例えばB(青色)のみで「光タグ」である高輝度LED発光部51が発光するものとし、インパクトパターンとして設定されたコマンド情報のコードを重畳した明滅パターンで発信させるように高輝度LED発光部51を駆動させた上で(ステップT04)、上記ステップT01からの処理に戻る。   If it is determined in step T03 that the calculated impact level is greater than the threshold value and the moment of impact in the sport selected at that time is reached, the control unit 53 determines whether the standby pattern in the previous standby pattern has been reached. Instead of light emission, it is assumed that the high-intensity LED light emitting unit 51 that is a “light tag” emits light only with a preset impact pattern, for example, B (blue), and a command information code set as the impact pattern is superimposed. After driving the high-intensity LED light-emitting unit 51 so as to transmit with the blinking pattern (step T04), the process returns to step T01.

図5は、上記リストバンド50を装着した人物がテニスをしている情景を時間的に連続した画像として示す。同図中の画像(005)〜(019)では、インパクトの瞬間ではないものとして、画像中のリストバンド50の高輝度LED発光部51がR(赤色)とG(緑色)とで交互に色を切換ながら発光している状態を示している。   FIG. 5 shows a scene where a person wearing the wristband 50 is playing tennis as a temporally continuous image. In the images (005) to (019) in the figure, the high-intensity LED light-emitting portion 51 of the wristband 50 in the image is alternately colored in R (red) and G (green), assuming that it is not the moment of impact. The state where light is emitted while switching is shown.

一方、図5中の画像(020)〜(021)では、インパクトの瞬間として、画像中のリストバンド50の高輝度LED発光部51がB(青色)を維持して発光している状態を示している。   On the other hand, images (020) to (021) in FIG. 5 show a state in which the high-intensity LED light emitting portion 51 of the wristband 50 in the image maintains B (blue) and emits light as the moment of impact. ing.

次に図4を用いて、上記のような情景を撮影するデジタルカメラ10側の処理内容について説明する。   Next, processing contents on the digital camera 10 side that captures the scene as described above will be described with reference to FIG.

図4は、デジタルカメラ10を「可視光自動撮影モード」と称する撮影モードで動作させる場合の処理内容を示す。この図4の処理は、制御部16がプログラムメモリ18に記憶されている動作プログラムを読出してメインメモリ17に展開して実行する。   FIG. 4 shows the processing contents when the digital camera 10 is operated in a photographing mode called “visible light automatic photographing mode”. The processing of FIG. 4 is executed by the control unit 16 reading out the operation program stored in the program memory 18 and developing it in the main memory 17.

動作当初に制御部16は、画像バッファ14に常に直前の一定容量、例えば撮影時間にして2[秒]分、撮影枚数(フレーム数)にしてこの2[秒]に相当する分の撮影画像を保持し続ける、パスト撮影動作を設定する(ステップS01)。その後に制御部16は、AF(自動合焦)処理とAE(自動露出)処理とを実行して被写体に対する適切な合焦距離と絞り値、シャッタ速度を設定した上で画像を撮影し、得た画像データを画像バッファ14に保持させる(ステップS02)。   At the beginning of the operation, the control unit 16 always stores in the image buffer 14 a shot image corresponding to the immediately preceding fixed capacity, for example, 2 [seconds] as the shooting time and 2 [seconds] as the number of shots (number of frames). A past shooting operation is set to be held (step S01). Thereafter, the control unit 16 performs AF (automatic focusing) processing and AE (automatic exposure) processing to set an appropriate focusing distance, aperture value, and shutter speed for the subject, and then captures and obtains an image. The stored image data is held in the image buffer 14 (step S02).

その後、画像処理部13が画像バッファ14から入力される画像データ中の「光タグ」としてのリストバンド50の高輝度LED発光部51部分の位置を特定し(ステップS03)、特定した位置における明滅パターンからデコード部24により重畳されているコマンド情報のコードを復調する(ステップS04)。   Thereafter, the image processing unit 13 specifies the position of the high-intensity LED light emitting unit 51 portion of the wristband 50 as the “light tag” in the image data input from the image buffer 14 (step S03), and blinks at the specified position. The code of the command information superimposed by the decoding unit 24 is demodulated from the pattern (step S04).

制御部16は、このデコード部24で復調したコマンド情報のコードの内容が、インパクトパターンとして設定されたものであるか否かを判断する(ステップS05)。   The control unit 16 determines whether or not the content of the command information code demodulated by the decoding unit 24 is set as an impact pattern (step S05).

ここでインパクトパターンとして設定されたコマンド情報のコードではないと判断した場合、制御部16は、画像バッファ14に保持されている一定時間分の画像を含めて、画像中を移動する光タグの座標の軌跡パターンを抽出する(ステップS06)。   If it is determined that the code is not the command information code set as the impact pattern, the control unit 16 includes the coordinates of the optical tag that moves in the image including the image for a certain time held in the image buffer 14. Are extracted (step S06).

抽出する軌跡パターンに関しては、上述した如く画像バッファ14に保持する画像を含めて、その軌跡を例えば10周期乃至15周期程度蓄積してパターン抽出を行なうもので、時間的に新しく抽出したパターンの範囲ほど大きな重み付けを行なうものとして、撮影時の時間の経過に伴う、被写体とデジタルカメラ10との相対的な位置関係の変化などを考慮する。   As for the trace pattern to be extracted, the pattern is extracted by accumulating, for example, about 10 to 15 periods of the trace including the image held in the image buffer 14 as described above. As the weighting is increased, a change in the relative positional relationship between the subject and the digital camera 10 with the passage of time at the time of shooting is considered.

そして制御部16は、抽出した最も新しい軌跡パターンに基づき、後述する画像撮影時のトリミング範囲を更新設定した後(ステップS08)、再び上記ステップS02からの処理に戻る。   Then, the control unit 16 updates and sets a trimming range at the time of image capturing described later based on the extracted newest trajectory pattern (step S08), and then returns to the processing from step S02 again.

こうしてステップS02〜S05,S07,S08の処理を繰返し実行する過程で、画像中を移動する光タグの座標の軌跡パターンを随時抽出し、より新しいものに重み付けをした上でそのパターンに基づくトリミング範囲を更新設定していく。   Thus, in the process of repeatedly executing the processes of steps S02 to S05, S07, and S08, the locus pattern of the coordinates of the optical tag moving in the image is extracted as needed, and a newer one is weighted, and the trimming range based on the pattern Will be updated.

しかして上記ステップS05において、このデコード部24で復調したコマンド情報のコードの内容が、インパクトパターンとして設定されたものであると判断した場合、制御部16は画像バッファ14で保持している一連の画像データ中、予め設定された特定タイムラグ分、例えば「0.1[秒]」前に保持した画像を選択し、選択した画像データに対してその時点で設定されているトリミング範囲に基づいて切出し処理を実行し、処理により得た画像データに対する所定のデータ圧縮を施してデータファイル化した上でメモリカード25に記録させる(ステップS08)。   If it is determined in step S05 that the command information code demodulated by the decoding unit 24 is set as an impact pattern, the control unit 16 stores a series of data stored in the image buffer 14. Select an image held in advance for a specific time lag set in advance, for example, “0.1 [second]” from the image data, and cut out the selected image data based on the trimming range set at that time The processing is executed, and predetermined data compression is performed on the image data obtained by the processing to form a data file, which is then recorded on the memory card 25 (step S08).

以上で一連の可視光通信による自動撮影を終えたものとして、次の撮影に備えるべく上記ステップS02からの処理に戻る。   Assuming that a series of visible light communication has been completed, the process returns to step S02 to prepare for the next image.

図6は、このとき制御部16が実行する、画像バッファ14に保持した画像からのトリミング範囲を例示するものである。画像バッファ14に保持される画像データ全体の範囲、すなわちその時点で光学レンズ部11によりCMOSイメージセンサ12上に結像する画像の範囲を図中に符号A1で示す。   FIG. 6 illustrates the trimming range from the image held in the image buffer 14 executed by the control unit 16 at this time. A range of the entire image data held in the image buffer 14, that is, a range of an image formed on the CMOS image sensor 12 by the optical lens unit 11 at that time is indicated by reference numeral A1 in the drawing.

リストバンド50の高輝度LED発光部51で構成される光タグの軌跡TRが図中に矢印で示すようなパターンを描くものとして、その左右の幅Wの2倍以上を水平方向でのトリミング範囲、上下の幅Hの3倍以上を垂直方向でのトリミング範囲を含むように、その時点で設定されている画像サイズのアスペクト比から図中に示すようなトリミング範囲A2を得て、記録する画像に反映することができる。   Assuming that the trajectory TR of the optical tag constituted by the high-intensity LED light emitting unit 51 of the wristband 50 draws a pattern as indicated by an arrow in the figure, the horizontal trimming range is at least twice the left and right width W thereof. An image to be recorded by obtaining a trimming range A2 as shown in the figure from the aspect ratio of the image size set at that time so that the vertical trimming range is included at least three times the vertical width H Can be reflected.

なお、上述した光タグの軌跡TRに対する縦横各トリミング範囲の設定環境に関しては、一律に決定するのではなく、デジタルカメラ10のユーザが予めメニューモード等から任意に可変設定することが可能であるものとする。   It should be noted that the setting environment of the vertical and horizontal trimming ranges with respect to the optical tag trajectory TR described above is not determined uniformly but can be arbitrarily variably set in advance from the menu mode or the like by the user of the digital camera 10. And

従来技術のBluetooth(登録商標)や赤外等の無線システムを利用して撮像装置を外部制御する方式では、撮像装置にBluetooth(登録商標)や赤外等を受信するためのハードウェアを新たに設ける必要があるが、本発明による可視光通信を利用した撮像装置の外部制御方式では、撮像装置が元々備える撮像素子で情報が重畳された可視光を認識して外部から制御するので、撮像装置に一切のハードウェアを追加することなく外部制御が可能になるという大変優れた効果を有する。   In a method of externally controlling an imaging apparatus using a wireless system such as Bluetooth (registered trademark) or infrared of the prior art, hardware for receiving Bluetooth (registered trademark), infrared, or the like is newly added to the imaging apparatus. Although it is necessary to provide, in the external control system of the imaging device using visible light communication according to the present invention, the visible light on which information is superimposed is recognized and controlled from the outside by the imaging element originally provided in the imaging device, so the imaging device It has an excellent effect that external control is possible without adding any hardware.

以上詳述した如く本実施形態によれば、撮影者の習熟を問わず、また媒体資源を無駄に消費することなしに、意図した瞬間の画像を確実に撮影することが可能となる。   As described above in detail, according to the present embodiment, it is possible to surely capture an image at an intended moment regardless of the skill of the photographer and without wasting medium resources.

また上記実施形態では、撮影画像中で光タグが取り得る軌跡の範囲に基づいて、記録する画像のトリミング範囲を自動的に設定するものとしたので、撮影者に負担をかけることなく、正しいと思われる構図の画像を自動的に取得できる。   In the above embodiment, since the trimming range of the image to be recorded is automatically set based on the range of the trajectory that the optical tag can take in the captured image, it is correct without imposing a burden on the photographer. An image with the expected composition can be acquired automatically.

さらに上記実施形態では、リストバンド50のキースイッチ部56に感度切換スイッチを備え、例えば「テニス」「バッター(野球)」「バレーボール」など複数種類のスポーツで、このリストバンド50の装着者の腕にインパクトが加わる瞬間を検知するための感度を切換えられるものとしたので、1つのリストバンド50を複数種類のスポーツに対応して撮影補助用に使用することができる。   Further, in the above embodiment, the key switch unit 56 of the wristband 50 is provided with a sensitivity changeover switch, and the wristband 50 wearer's arm in a plurality of types of sports such as “tennis”, “batter (baseball)”, and “volleyball”, for example. Since the sensitivity for detecting the moment when an impact is applied can be switched, one wristband 50 can be used for photographing assistance corresponding to a plurality of types of sports.

なお上記実施形態は、スポーツ撮影用の発光ユニットと受光ユニットであるデジタルカメラとからなる可視光通信システムに適用した場合の一実施形態について説明したが、本発明はこれに限らず、例えばデジタルカメラ10に代えて、カメラ機能を有する携帯電話端末やスマートフォン、タブレット型コンピュータ等にも適用可能となる。   In addition, although the said embodiment demonstrated one Embodiment at the time of applying to the visible light communication system which consists of the light-emitting unit for sports photography, and the digital camera which is a light-receiving unit, this invention is not limited to this, For example, a digital camera Instead of 10, it can also be applied to a mobile phone terminal having a camera function, a smartphone, a tablet computer, or the like.

また発光ユニットとしては、リストバンド50に代えて、ゴルフで使用するボール(インパクトの瞬間が検出できる)、オートバイのモトクロス競技で使用するヘルメット(空中にジャンプした頂点位置での重力状態が検出できる)など、他のスポーツで使用する道具類にも適用することが考えられる。   As the light emitting unit, instead of the wristband 50, a ball used in golf (the moment of impact can be detected), a helmet used in a motorcycle motocross competition (the gravity state at the apex position jumping into the air can be detected) It can be applied to tools used in other sports.

また、上述した実施形態では、異なる色を時系列に配色した色パターンを発光するとしたが、これに限らず、単色光の輝度レベルを変えたり、点灯時間や点灯周期などを変えたりすることで、複数の光信号を生成してもよい。   In the above-described embodiment, a color pattern in which different colors are arranged in time series is emitted. However, the present invention is not limited to this. By changing the luminance level of monochromatic light, changing the lighting time, the lighting cycle, or the like. A plurality of optical signals may be generated.

その他、本発明は上述した実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、上述した実施形態で実行される機能は可能な限り適宜組み合わせて実施しても良い。上述した実施形態には種々の段階が含まれており、開示される複数の構成要件による適宜の組み合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、効果が得られるのであれば、この構成要件が削除された構成が発明として抽出され得る。   In addition, the present invention is not limited to the above-described embodiments, and various modifications can be made without departing from the scope of the invention in the implementation stage. Further, the functions executed in the above-described embodiments may be combined as appropriate as possible. The above-described embodiment includes various stages, and various inventions can be extracted by an appropriate combination of a plurality of disclosed constituent elements. For example, even if some constituent requirements are deleted from all the constituent requirements shown in the embodiment, if the effect is obtained, a configuration from which the constituent requirements are deleted can be extracted as an invention.

以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
請求項1記載の発明は、任意の情報を重畳した可視光を発信する発光ユニットと、当該発光ユニットからの可視光を受信し、受信した可視光に重畳された情報を取得して、取得した情報に対応する動作を実行する受光ユニットとを有する可視光通信システムにおいて、上記発光ユニットは、当該発光ユニットが受ける衝撃を検出する検出手段と、上記検出手段で検出した衝撃の大きさが予め設定したしきい値以上であるか否かを判定する判定手段と、上記判定手段での判定結果に応じた情報を重畳した可視光を発信させる発信制御手段とを具備し、上記受光ユニットは、被写体の画像を撮影する撮像手段と、上記撮像手段で撮影する画像を、更新しながら所定枚数分保持し続ける保持手段と、上記撮像手段で撮影する画像中から可視光に重畳された情報を復調して取得する可視光情報取得手段と、上記可視光情報取得手段で得た情報に基づき、上記保持手段で保持する画像の記録を制御する記録制御手段とを具備することを特徴とする。
Hereinafter, the invention described in the scope of claims of the present application will be appended.
The invention described in claim 1 is a light emitting unit that emits visible light on which arbitrary information is superimposed, and receives visible light from the light emitting unit, acquires information superimposed on the received visible light, and acquires the information. In a visible light communication system having a light receiving unit that performs an operation corresponding to information, the light emitting unit has a detection unit that detects an impact received by the light emitting unit, and a magnitude of the impact detected by the detection unit is preset. Determination means for determining whether or not the threshold value is greater than or equal to the threshold value, and transmission control means for transmitting visible light superimposed with information according to the determination result of the determination means. Imaging means for capturing the image, holding means for continuously holding a predetermined number of images captured by the imaging means, and superimposing on visible light from the images captured by the imaging means A visible light information acquisition means for demodulating and acquiring the received information, and a recording control means for controlling the recording of the image held by the holding means based on the information obtained by the visible light information acquisition means. Features.

請求項2記載の発明は、上記請求項1記載の発明において、上記記録制御手段は、上記保持手段で保持する画像の中から予め設定されたタイミングで保持した画像を選択して記録させるよう制御することを特徴とする。   According to a second aspect of the present invention, in the first aspect of the invention, the recording control means controls to select and record an image held at a preset timing from images held by the holding means. It is characterized by doing.

請求項3記載の発明は、上記請求項2記載の発明において、上記発光ユニットは、上記保持手段で保持する画像に基づき、上記情報を重畳した可視光が画像中で移動する範囲を抽出する範囲抽出手段をさらに具備し、上記記録制御手段は、上記範囲抽出手段で抽出した範囲に基づき、選択した画像に対するトリミングを行ない、トリミングした画像を記録させることを特徴とする。   According to a third aspect of the present invention, in the second aspect of the invention, the light emitting unit extracts a range in which visible light on which the information is superimposed moves based on an image held by the holding unit. The image processing apparatus further includes an extracting unit, wherein the recording control unit performs trimming on the selected image based on the range extracted by the range extracting unit, and records the trimmed image.

請求項4記載の発明は、上記請求項1乃至3の何れかに記載の発明において、上記発光ユニットは、上記判定手段での判定基準となるしきい値を可変設定するしきい値可変手段をさらに具備することを特徴とする。   According to a fourth aspect of the present invention, in the invention according to any one of the first to third aspects, the light emitting unit further includes a threshold variable unit that variably sets a threshold value that is a determination criterion in the determination unit. Furthermore, it is characterized by comprising.

請求項5記載の発明は、衝撃を検出する検出手段と、上記検出手段で検出した衝撃の大きさが予め設定したしきい値以上であるか否かを判定する判定手段と、上記判定手段での判定結果に応じた情報を重畳した可視光を発信させる発信制御手段とを具備することを特徴とする。   According to a fifth aspect of the present invention, there is provided: a detection unit that detects an impact; a determination unit that determines whether the magnitude of the impact detected by the detection unit is greater than or equal to a preset threshold value; and the determination unit. Transmission control means for transmitting visible light on which information according to the determination result is superimposed.

請求項6記載の発明は、被写体の画像を撮影する撮像手段と、上記撮像手段で撮影する画像を、更新しながら所定枚数分保持し続ける保持手段と、上記撮像手段で撮影する画像中から可視光に重畳された情報を復調して取得する可視光情報取得手段と、上記可視光情報取得手段で得た情報に基づき、上記保持手段で保持する画像の記録を制御する記録制御手段とを具備することを特徴とする。   According to a sixth aspect of the present invention, there is provided an imaging unit that captures an image of a subject, a holding unit that continuously holds a predetermined number of images captured by the imaging unit, and visible from among images captured by the imaging unit. Visible light information acquisition means for demodulating and acquiring information superimposed on light, and recording control means for controlling recording of images held by the holding means based on information obtained by the visible light information acquisition means It is characterized by doing.

請求項7記載の発明は、上記請求項6記載の発明において、上記記録制御手段は、上記保持手段で保持する画像の中から予め設定されたタイミングで保持した画像を選択して記録させるよう制御することを特徴とする。   The invention according to claim 7 is the invention according to claim 6, wherein the recording control means controls to select and record an image held at a preset timing from images held by the holding means. It is characterized by doing.

請求項8記載の発明は、任意の情報を重畳した可視光を発信する発光ユニットと、当該発光ユニットからの可視光を受信し、受信した可視光に重畳された情報を取得して、取得した情報に対応する動作を実行する受光ユニットとを含むシステムでの可視光通信方法であって、上記発光ユニットにおいて、上記発光ユニットが受ける衝撃を検出する検出工程と、上記検出工程で検出した衝撃の大きさが予め設定したしきい値以上であるか否かを判定する判定工程と、上記判定工程での判定結果に応じた情報を重畳した可視光を上記発光ユニットから発信させる発信制御工程とを有し、上記受光ユニットにおいて、被写体の画像を撮影する撮像工程と、上記撮像工程で撮影する画像を、更新しながら所定枚数分保持し続ける保持工程と、上記撮像工程で撮影する画像中から可視光に重畳された情報を復調して取得する可視光情報取得工程と、上記可視光情報取得工程で得た情報に基づき、上記保持工程で保持する画像の記録を制御する記録制御工程とを有することを特徴とする。   The invention described in claim 8 is a light emitting unit that emits visible light on which arbitrary information is superimposed, and receives visible light from the light emitting unit, acquires information superimposed on the received visible light, and acquires the information. A visible light communication method in a system including a light receiving unit that performs an operation corresponding to information, wherein the light emitting unit detects a shock received by the light emitting unit, and the shock detected in the detection step. A determination step of determining whether or not the size is greater than or equal to a preset threshold value, and a transmission control step of transmitting visible light superimposed with information according to the determination result in the determination step from the light emitting unit. An imaging process for capturing an image of a subject in the light receiving unit; a holding process for continuously maintaining a predetermined number of images captured in the imaging process; and the imaging Based on the information obtained in the visible light information acquisition step and the information obtained in the visible light information acquisition step, the image recorded in the holding step is recorded based on the information obtained by demodulating the information superimposed on the visible light from the image to be captured. And a recording control step for controlling.

10…デジタルカメラ、11…光学レンズ部、12…CMOSイメージセンサ、13…画像処理部、14…画像バッファ、15…表示部、16…制御部、17…メインメモリ、18…プログラムメモリ、19…キー入力部、20…レンズ駆動部、21…フラッシュ駆動部、22…CMOS駆動部、23…音声処理部、24…デコード部、25…メモリカード、26…インジケータ部、27…レンズ用ステッピングモータ(M)、28…フラッシュ部、29…マイクロホン、30…スピーカ、50…リストバンド、51…高輝度LED発光部、52…3軸加速度センサ、53…制御部、54…メインメモリ、55…プログラムメモリ、56…キースイッチ部、SB1,SB2…システムバス。   DESCRIPTION OF SYMBOLS 10 ... Digital camera, 11 ... Optical lens part, 12 ... CMOS image sensor, 13 ... Image processing part, 14 ... Image buffer, 15 ... Display part, 16 ... Control part, 17 ... Main memory, 18 ... Program memory, 19 ... Key input unit, 20 ... lens driving unit, 21 ... flash driving unit, 22 ... CMOS driving unit, 23 ... audio processing unit, 24 ... decoding unit, 25 ... memory card, 26 ... indicator unit, 27 ... lens stepping motor ( M), 28 ... Flash unit, 29 ... Microphone, 30 ... Speaker, 50 ... Wristband, 51 ... High brightness LED light emitting unit, 52 ... Triaxial acceleration sensor, 53 ... Control unit, 54 ... Main memory, 55 ... Program memory 56: Key switch part, SB1, SB2 ... System bus.

Claims (10)

任意の情報を重畳した可視光を発信する発光ユニットと、当該発光ユニットからの可視光を受信し、受信した可視光に重畳された情報を取得して、取得した情報に対応する動作を実行する受光ユニットとを有する可視光通信システムにおいて、
上記発光ユニットは、
当該発光ユニットが受ける衝撃を検出する検出手段と、
上記検出手段で検出した衝撃の大きさが予め設定したしきい値以上であるか否かを判定する判定手段と、
上記判定手段での判定結果に応じた情報を重畳した可視光を発信させる発信制御手段と
を具備し、
上記受光ユニットは、
被写体の画像を撮影する撮像手段と、
上記撮像手段で撮影する画像を、更新しながら所定枚数分保持し続ける保持手段と、
上記撮像手段で撮影する画像中から可視光に重畳された情報を復調して取得する可視光情報取得手段と、
上記可視光情報取得手段で得た情報に基づき、上記保持手段で保持する画像の記録を制御する記録制御手段と
を具備することを特徴とする可視光通信システム。
A light emitting unit that emits visible light on which arbitrary information is superimposed, and the visible light from the light emitting unit are received, information superimposed on the received visible light is acquired, and an operation corresponding to the acquired information is executed. In a visible light communication system having a light receiving unit,
The light emitting unit is
Detecting means for detecting an impact received by the light emitting unit;
Determination means for determining whether or not the magnitude of impact detected by the detection means is greater than or equal to a preset threshold value;
Transmission control means for transmitting visible light superimposed with information according to the determination result in the determination means,
The light receiving unit is
Imaging means for capturing an image of a subject;
Holding means for continuously holding a predetermined number of images while being updated by the image pickup means;
Visible light information acquisition means for demodulating and acquiring information superimposed on visible light from the image captured by the imaging means;
A visible light communication system comprising: a recording control unit that controls recording of an image held by the holding unit based on information obtained by the visible light information acquiring unit.
上記記録制御手段は、上記保持手段で保持する画像の中から予め設定されたタイミングで保持した画像を選択して記録させるよう制御することを特徴とする請求項1記載の可視光通信システム。   2. The visible light communication system according to claim 1, wherein the recording control means controls to select and record an image held at a preset timing from images held by the holding means. 上記受光ユニットは、
上記保持手段で保持する画像に基づき、上記情報を重畳した可視光が画像中で移動する範囲を抽出する範囲抽出手段をさらに具備し、
上記記録制御手段は、上記範囲抽出手段で抽出した範囲に基づき、選択した画像に対するトリミングを行ない、トリミングした画像を記録させる
ことを特徴とする請求項2記載の可視光通信システム。
The light receiving unit is
Based on the image held by the holding means, further comprising a range extracting means for extracting a range in which the visible light superimposed with the information moves in the image,
3. The visible light communication system according to claim 2, wherein the recording control unit performs trimming on the selected image based on the range extracted by the range extracting unit, and records the trimmed image.
上記発光ユニットは、上記判定手段での判定基準となるしきい値を可変設定するしきい値可変手段をさらに具備することを特徴とする請求項1乃至3の何れかに記載の可視光通信システム。   The visible light communication system according to any one of claims 1 to 3, wherein the light emitting unit further includes a threshold variable unit that variably sets a threshold serving as a determination criterion in the determination unit. . 任意の情報を重畳した可視光を発信する発光ユニットと、
被写体の画像を撮影する撮像手段と、上記撮像手段で撮影する画像を、更新しながら所定枚数分保持し続ける保持手段と、上記撮像手段で撮影する画像中から可視光に重畳された情報を復調して取得する可視光情報取得手段と、上記可視光情報取得手段で得た情報に基づき、上記保持手段で保持する画像の記録を制御する記録制御手段と、を具備した受光ユニットと、を有する可視光通信システムにおける上記発光ユニットであって、
当該発光ユニットは、
衝撃を検出する検出手段と、
上記検出手段で検出した衝撃の大きさが予め設定したしきい値以上であるか否かを判定する判定手段と、
上記判定手段での判定結果に応じた情報を重畳した可視光を発信させる発信制御手段と
を具備することを特徴とする発光ユニット。
A light emitting unit that emits visible light on which arbitrary information is superimposed;
An imaging unit that captures an image of a subject, a holding unit that continuously holds a predetermined number of images captured by the imaging unit, and information that is superimposed on visible light from the image captured by the imaging unit is demodulated It has a visible light information acquisition means for acquiring in, based on information obtained in the visible information acquiring unit, and a light receiving unit provided with the, and recording control means for controlling the recording of the image to be held by the holding means The light emitting unit in the visible light communication system,
The light emitting unit is
Detection means for detecting an impact;
Determination means for determining whether or not the magnitude of impact detected by the detection means is greater than or equal to a preset threshold value;
A light emitting unit comprising: transmission control means for transmitting visible light on which information according to a determination result by the determination means is superimposed.
衝撃を検出する検出手段と、上記検出手段で検出した衝撃の大きさが予め設定したしきい値以上であるか否かを判定する判定手段と、上記判定手段での判定結果に応じた情報を重畳した可視光を発信させる発信制御手段と、を具備した発光ユニットと、
上記発光ユニットからの可視光を受信し、受信した可視光に重畳された情報を取得して、取得した情報に対応する動作を実行する撮像装置と、を有する可視光通信システムにおける上記撮像装置であって、
当該撮像装置は、
被写体の画像を撮影する撮像手段と、
上記撮像手段で撮影する画像を、更新しながら所定枚数分保持し続ける保持手段と、
上記撮像手段で撮影する画像中から可視光に重畳された情報を復調して取得する可視光情報取得手段と、
上記可視光情報取得手段で得た情報に基づき、上記保持手段で保持する画像の記録を制御する記録制御手段と
を具備することを特徴とする撮像装置。
Detection means for detecting an impact, determination means for determining whether or not the magnitude of the impact detected by the detection means is greater than or equal to a preset threshold value, and information corresponding to the determination result by the determination means A light emitting unit comprising a transmission control means for transmitting superimposed visible light; and
An imaging apparatus that receives visible light from the light emitting unit, acquires information superimposed on the received visible light, and executes an operation corresponding to the acquired information; There,
The imaging device
Imaging means for capturing an image of a subject;
Holding means for continuously holding a predetermined number of images while being updated by the image pickup means;
Visible light information acquisition means for demodulating and acquiring information superimposed on visible light from the image captured by the imaging means;
An image pickup apparatus comprising: a recording control unit that controls recording of an image held by the holding unit based on information obtained by the visible light information acquisition unit.
上記記録制御手段は、上記保持手段で保持する画像の中から予め設定されたタイミングで保持した画像を選択して記録させるよう制御することを特徴とする請求項6記載の撮像装置。   7. The imaging apparatus according to claim 6, wherein the recording control unit performs control so that an image held at a preset timing is selected and recorded from images held by the holding unit. 任意の情報を重畳した可視光を発信する発光ユニットと、当該発光ユニットからの可視光を受信し、受信した可視光に重畳された情報を取得して、取得した情報に対応する動作を実行する受光ユニットとを含むシステムでの可視光通信方法であって、
上記発光ユニットにおいて、
上記発光ユニットが受ける衝撃を検出する検出工程と、
上記検出工程で検出した衝撃の大きさが予め設定したしきい値以上であるか否かを判定する判定工程と、
上記判定工程での判定結果に応じた情報を重畳した可視光を上記発光ユニットから発信させる発信制御工程と
を有し、
上記受光ユニットにおいて、
被写体の画像を撮影する撮像工程と、
上記撮像工程で撮影する画像を、更新しながら所定枚数分保持し続ける保持工程と、
上記撮像工程で撮影する画像中から可視光に重畳された情報を復調して取得する可視光情報取得工程と、
上記可視光情報取得工程で得た情報に基づき、上記保持工程で保持する画像の記録を制御する記録制御工程と
を有する
ことを特徴とする可視光通信方法。
A light emitting unit that emits visible light on which arbitrary information is superimposed, and the visible light from the light emitting unit are received, information superimposed on the received visible light is acquired, and an operation corresponding to the acquired information is executed. A visible light communication method in a system including a light receiving unit,
In the above light emitting unit,
A detection step of detecting an impact received by the light emitting unit;
A determination step of determining whether or not the magnitude of the impact detected in the detection step is greater than or equal to a preset threshold value;
A transmission control step for transmitting visible light from the light emitting unit on which information according to the determination result in the determination step is superimposed;
In the above light receiving unit,
An imaging process for capturing an image of the subject;
A holding step for continuously holding a predetermined number of images while updating the image taken in the imaging step;
A visible light information acquisition step of demodulating and acquiring information superimposed on visible light from the image captured in the imaging step;
A visible light communication method comprising: a recording control step of controlling recording of an image held in the holding step based on information obtained in the visible light information acquisition step.
衝撃を検出する検出手段と、
上記検出手段で検出した衝撃の大きさが予め設定したしきい値以上であるか否かを判定する判定手段と、
上記判定手段での判定基準となる上記しきい値を可変設定するしきい値可変手段と、
上記判定手段での判定結果に応じた情報を重畳した可視光を発信させる発信制御手段と
を具備することを特徴とする発光ユニット。
Detection means for detecting an impact;
Determination means for determining whether or not the magnitude of impact detected by the detection means is greater than or equal to a preset threshold value;
Threshold value variable means for variably setting the threshold value which is a determination criterion in the determination means;
A light emitting unit comprising: transmission control means for transmitting visible light on which information according to a determination result by the determination means is superimposed.
被写体の画像を撮影する撮像手段と、
上記撮像手段で撮影する画像を、更新しながら所定枚数分保持し続ける保持手段と、
上記撮像手段で撮影する画像中から可視光に重畳された情報を復調して取得する可視光情報取得手段と、
上記保持手段で保持する画像に基づき、上記情報を重畳した可視光が画像中で移動する範囲を抽出する範囲抽出手段と、
上記範囲抽出手段で抽出した範囲に基づき、選択した画像に対するトリミングを行ない、トリミングした画像を記録させる記録制御手段と
を具備することを特徴とする撮像装置。
Imaging means for capturing an image of a subject;
Holding means for continuously holding a predetermined number of images while being updated by the image pickup means;
Visible light information acquisition means for demodulating and acquiring information superimposed on visible light from the image captured by the imaging means;
Based on the image held by the holding means, a range extracting means for extracting a range in which the visible light superimposed with the information moves in the image;
An image pickup apparatus comprising: a recording control unit configured to perform trimming on a selected image based on the range extracted by the range extracting unit and record the trimmed image.
JP2012217004A 2012-09-28 2012-09-28 Visible light communication system, light emitting unit, imaging device, and visible light communication method Active JP5747889B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2012217004A JP5747889B2 (en) 2012-09-28 2012-09-28 Visible light communication system, light emitting unit, imaging device, and visible light communication method
US14/017,162 US9380198B2 (en) 2012-09-28 2013-09-03 Photographing system, photographing method, light emitting apparatus, photographing apparatus, and computer-readable storage medium
CN201310451307.9A CN103716531B (en) 2012-09-28 2013-09-27 Camera chain, method for imaging, light-emitting device, photographic attachment

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012217004A JP5747889B2 (en) 2012-09-28 2012-09-28 Visible light communication system, light emitting unit, imaging device, and visible light communication method

Publications (2)

Publication Number Publication Date
JP2014072687A JP2014072687A (en) 2014-04-21
JP5747889B2 true JP5747889B2 (en) 2015-07-15

Family

ID=50747519

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012217004A Active JP5747889B2 (en) 2012-09-28 2012-09-28 Visible light communication system, light emitting unit, imaging device, and visible light communication method

Country Status (1)

Country Link
JP (1) JP5747889B2 (en)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6397182A (en) * 1986-10-15 1988-04-27 井上 勉 Apparatus for measuring speed of hit ball
JPH04123674A (en) * 1990-09-14 1992-04-23 Kyocera Corp Remote control system for video camera device
JP4612866B2 (en) * 2005-05-20 2011-01-12 キヤノン株式会社 Imaging method and imaging system
JP2012157039A (en) * 2012-03-19 2012-08-16 M Soft:Kk Visible light communication device

Also Published As

Publication number Publication date
JP2014072687A (en) 2014-04-21

Similar Documents

Publication Publication Date Title
JP5234119B2 (en) Imaging apparatus, imaging processing method, and program
US8848097B2 (en) Image processing apparatus, and method, for providing special effect
US7948526B2 (en) Imaging apparatus, imaging method and program thereof
JP5246159B2 (en) Imaging device, image display device, program
US8675082B2 (en) Imaging device and imaging device control method
US8520120B2 (en) Imaging apparatus and display control method thereof
JP5648866B2 (en) Imaging system, imaging method, imaging apparatus, and program
JP5931464B2 (en) Imaging device
US9167171B2 (en) Imaging apparatus having a synchronous shooting function
JP2011071968A (en) Data structure of still image file, image file generating device, image reproducing unit, and electronic camera
CN101621617A (en) Image sensing apparatus and storage medium
JP2008028955A (en) Method and apparatus for automatic reproduction
CN103716531B (en) Camera chain, method for imaging, light-emitting device, photographic attachment
CN110771175A (en) Video playing speed control method and device and motion camera
JP5920264B2 (en) Image identification device, image identification system, image identification method, and program
JP4798506B2 (en) Imaging apparatus and program thereof
JP2016127377A (en) Image processing apparatus and image processing method, image reproducer and image reproducing method and program
JP5747889B2 (en) Visible light communication system, light emitting unit, imaging device, and visible light communication method
JP4487555B2 (en) Imaging apparatus, moving image shooting method, and shooting control program
JP2011151482A (en) Imaging apparatus and method for controlling the same
KR102346928B1 (en) Image processing apparatus, image processing method, and program
JP2012010133A (en) Image processing apparatus and image processing program
JP2009071717A (en) Image pickup apparatus and focusing condition displaying method
JP2014123853A (en) Imaging apparatus and image display device
JP2013211719A (en) Digital camera

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140708

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140819

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140922

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150317

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150325

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150414

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150427

R150 Certificate of patent or registration of utility model

Ref document number: 5747889

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150