JP2008258987A - 光情報処理システム、端末装置、光情報処理方法、プログラム及び記録媒体 - Google Patents

Abstract

【課題】コンテンツデータをキーにして広告情報取得場所の映像を再生したり、広告情報取得場所の映像をキーにして、コンテンツデータの内容を音や文字等によって再生できるようにすると共に、出先にて取得したコンテンツデータを自宅等で目と耳で同時に繰り返し視聴できるようにする。
【解決手段】コンテンツデータＤ１を光に変換して発する送信装置１００と、この光を受光して電気信号に変換し、変換後の電気信号からコンテンツデータＤ１を復元すると共に、当該送信装置１００が設けられた情報提供場所の映像を撮影して得られる画像データＤ２と、コンテンツデータＤ１とを対応付けて処理する可視光データ受信機能付きのデジタルカメラ２００とを備える。コンテンツデータＤ１をキーにして当該広告情報取得場所の映像を再生したり、広告情報取得場所の映像をキーにして、コンテンツデータＤ１の内容を音や文字に再生できるようになる。
【選択図】 図１

Description

本発明は、店舗、劇場、興行場、交通機関等に関連する有用情報が光に変換され、当該光を受光して有用情報を取得する可視光情報提供システムや、可視光通信機能を備えたデジタルカメラ、ビデオカメラ、携帯電話機等に適用可能な光情報処理システム、端末装置、光情報処理方法、プログラム及び記録媒体に関する。

詳しくは、上述の有用情報を光に変換し、変換後の光を受光する場合、光情報提供源と光情報受信機能付きの端末装置とを備え、光情報提供源から発せられる有用情報に基づく光を受光して電気信号に変換し、有用情報を復元すると共に、当該光情報提供源が設けられた情報提供場所の映像を撮影して得られる画像情報と有用情報とを対応付けて保存し、有用情報をキーにして当該有用情報を取得した場所の映像を再生したり、有用情報を取得した場所の映像をキーにして、有用情報の内容を音や文字に再生できるようにすると共に、出先にて取得した有用情報を自宅等で目と耳で同時に繰り返し視聴できるようにしたものである。

近年、携帯電話機や、ＰＤＡ（Personal Digital Assistants）の端末装置（携帯型の電子機器や電気機器等）が使用される場合が多くなってきた。一方、ＬＥＤ光源を高速に点滅させ、人間の目に見える可視光領域の光をデータ伝送の媒体として利用する可視光通信という技術が知られている。

可視光通信は、電波や赤外線を利用した無線通信と比べて人体への影響が少ない。また、情報源が目に見える光源であるためユーザは、通信可能な範囲を認識しやすく、照射範囲を限定することでセキュリティを高めることも可能となる。更に、電波法による制約がないため帯域を自由に利用でき、かつ、通信局は適合証明等の認定作業が不要であるというメリットがある。

このようなことから、可視光通信は無線通信の一方式として注目されている。可視光通信を行う場合、送信側では、送出したいデータに基づいて光源の発光を変調し、可視光を送出する。受信側では、受光した光からデータを復調することによってデータ伝送が行われる。

この種の可視光通信機能を備えた端末装置に関連して、特許文献１には位置情報通信装置が開示されている。この位置情報通信装置によれば、位置情報提供場所に設けられた光源が位置情報に基づいて変調された可視光を常時送出している。携帯電話機は、この可視光を受光して、位置情報を復調し、この位置情報を音声情報等に付加してデータ通信できるようにしたものである。このように装置を構成すると、携帯電話機が置かれた（存在する）場所を示す位置情報を音声等により正確に取得できるというものである。

また、特許文献２にはカメラ付きの端末装置が開示されている。この端末装置によれば、被写体を撮影する撮影部の他に可視光を受光する受光部を当該装置筐体の同一パネル面に備え、光情報提供場所の光源が情報に基づいて送出する可視光を当該端末装置の受光部で受光する。受光部から得られる受光信号を復調して可視光情報を得るようになされる。このように撮影部と受光部とが区分された受光系で端末装置を構成すると、可視光通信の情報を高速に受信できるようになるというものである。

図１０は、特許文献１や２に見られるような従来例に係る可視光通信システム１０の構成例を示すブロック図である。図１０に示す送信機３００は光情報提供場所に設けられ、通信制御部３０１、変調部３０２及び発光部３０３を備える。送信機３００によれば、通信制御部３０１で送信データＤoutが生成され、変調部３０２に伝達される。発光部３０３は蛍光灯、あるいは、ＬＥＤ（Light Emitting Diode）等の光源である。変調部３０２では送信データＤoutから変調信号Ｓoutを作成し、変調信号Ｓoutに基づいて発光部３０３の周波数をシフトする、あるいはＯＮ／ＯＦＦして光源を変調し、可視光（変調光）５００を送出する。

一方、受信機４００は情報利用者が所持し、受光部４０１、復調部４０２及び信号処理部４０３を備える。受信機４００によれば、可視光５００を受光部４０１で受光して電気信号Ｓinに変換し、復調部４０２で電気信号Ｓinから受信データＤinを復調し、信号処理部４０３で受信データＤinを信号処理する。なお、ユーザが撮影をしようと、カメラを向けた撮影範囲内で可視光通信によるデータを得ることができ、撮影画像とそのとき受信している可視光通信によるデータとは密接な関係が生じる。

特開２００５−２１８０６６号公報 特開２００５−２１８０６７号公報

ところで、特許文献１及び２に見られるような従来例に係る光通信システム１０によれば、光情報提供場所に設けられた送信機から受光して得た可視光通信によるデータを整理しようとしたとき、撮影した画像と可視光通信によって得たデータとが密接な関係を生じている場合があるにも関わらず、個別に保存し利用されていた。

したがって、ユーザは、後日、端末装置に保存された可視光通信によって得たデータを検索しようとしたとき、可視光通信によるデータが、どのようなシチュエーションで得られたデータであったのか否かを確認（認識）しづらく、また、保存された撮影画像に対して可視光通信によって得られたコンテンツデータ等の付加情報（以下有用情報という）が有ったのか、無かったのかを把握しづらいという問題があった。

そこで、この発明はこのような従来例の課題を解決したものであって、有用情報をキーにして当該有用情報を取得した場所の映像を再生したり、有用情報を取得した場所の映像をキーにして、有用情報の内容を音や文字等によって再生できるようにすると共に、出先にて取得した有用情報を自宅等で目と耳で同時に繰り返し視聴できるようにした光情報処理システム、端末装置、光情報処理方法、プログラム及び記録媒体を提供することを目的とする。

上述した課題は、光に変換された有用情報を処理する光情報処理システムであって、有用情報を光に変換して発する光情報提供源と、この光情報提供源から発せられる有用情報に基づく光を受光して電気信号に変換し、変換後の電気信号から有用情報を復元すると共に、当該光情報提供源が設けられた情報提供場所の映像を撮影して得られる画像情報と、受光及び復元により得られた有用情報とを対応付けるように処理する光情報受信機能付きの端末装置とを備えることを特徴とする光情報処理システムによって解決される。

本発明に係る光情報処理システムによれば、光に変換された有用情報を処理する場合、光情報提供源は、例えば、店舗、劇場、興行場、交通機関等の情報提供場所となる電光表示板に設けられ、安売り販売日、演目内容、興行日時、割引期間等の有用情報を光に変換して発する。光情報受信機能付きの端末装置は情報利用者が所持し、当該端末装置は光情報提供源から発せられる有用情報に基づく光を受光して電気信号に変換し、変換後の電気信号から有用情報を復元すると共に、当該光情報提供源が設けられた情報提供場所を再生する映像を撮影して得られる画像情報と受光及び復元により得られた有用情報とを対応付けるように処理する。

従って、店舗、劇場、興行場、交通機関等に関する有用情報をキーにして当該有用情報を取得した場所の映像を再生したり、有用情報を取得した場所の映像をキーにして、有用情報の内容を音や文字に再生できるようになる。

本発明に係る端末装置は、光情報提供源から光で提供される有用情報を処理する光情報受信機能付きの端末装置であって、光情報提供源から発せられる有用情報に基づく光を受光して電気信号に変換する受光部と、光情報提供源が設けられた情報提供場所の映像を撮影するように操作される撮影部と、この撮影部によって撮影された情報提供場所の映像を再生する画像情報と受光部によって変換された電気信号から復元される有用情報とを対応付けるように処理する信号処理部とを備えることを特徴とするものである。

本発明に係る光情報受信機能付きの端末装置によれば、光に変換された有用情報を処理する場合に、受光部は、光情報提供源から発せられる有用情報に基づく光を受光して電気信号に変換する。撮影部は、光情報提供源が設けられた情報提供場所の映像を撮影するように操作される。これらを前提にして、信号処理部は、撮影部によって撮影された情報提供場所の映像を再生する画像情報と受光部によって変換された電気信号から復元される有用情報とを対応付けるように処理する。

従って、店舗、劇場、興行場、交通機関等に関する有用情報をキーにして当該有用情報を取得した場所の映像を再生したり、有用情報を取得した場所の映像をキーにして、有用情報の内容を音や文字に再生できるようになる。これにより、出先にて取得した店舗、劇場、興行場、交通機関等に関連する有用情報を自宅等で目と耳で同時に繰り返し視聴できるようになる。

本発明に係る光情報処理方法は、光情報提供源から光で提供される有用情報を処理する光情報処理方法であって、光情報提供源から発せられる有用情報に基づく光を受光して電気信号に変換するステップと、変換後の電気信号から有用情報を復元するステップと、光情報提供源が設けられた情報提供場所の映像を撮影するステップと、撮影により得られた情報提供場所の映像を再生するための画像情報と受光及び復元により得られた有用情報とを対応付けて保存するステップとを有することを特徴とするものである。

本発明に係る光情報処理方法によれば、光に変換された有用情報を処理する場合に、店舗、劇場、興行場、交通機関等に関する有用情報をキーにして当該有用情報を取得した場所の映像を再生したり、有用情報を取得した場所の映像をキーにして、有用情報の内容を音や文字に再生できるようになる。

本発明に係るプログラムは、光情報提供源から光で提供される有用情報を処理するコンピュータが読取り可能なプログラムであって、光情報提供源から発せられる有用情報に基づく光を受光して電気信号に変換するステップと、変換後の電気信号から有用情報を復元するステップと、光情報提供源が設けられた情報提供場所の映像を撮影するステップと、撮影により得られた映像を再生するための画像情報と受光及び復元により得られた有用情報とを対応付けて保存するステップとを有することを特徴とするものである。

本発明に係るプログラムによれば、光に変換された有用情報を処理する場合に、当該プログラムを本発明の撮像装置に適用することで、店舗、劇場、興行場、交通機関等に関する有用情報をキーにして当該有用情報を取得した場所の映像を再現性良く再生したり、有用情報を取得した場所の映像をキーにして、有用情報の内容を再現性良く音や文字に再生できるようになる。

本発明に係る記録媒体は、光情報提供源から光で提供される有用情報を処理するコンピュータが読取り可能なプログラムを記述した記録媒体であって、光情報提供源から発せられる有用情報に基づく光を受光して電気信号に変換するステップと、変換後の電気信号から有用情報を復元するステップと、光情報提供源が設けられた情報提供場所の映像を撮影するステップと、撮影により得られた映像を再生するための画像情報と受光及び復元により得られた有用情報とを対応付けて保存するステップとを有するプログラムを記述したことを特徴とするものである。

本発明に係る記録媒体によれば、光に変換された有用情報を処理する場合に、上述のプログラムが本発明の撮像装置に適用されることで、店舗、劇場、興行場、交通機関等に関する有用情報をキーにして当該有用情報を取得した場所の映像を再現性良く再生したり、有用情報を取得した場所の映像をキーにして、有用情報の内容を再現性良く音や文字に再生できるようになる。

本発明に係る光情報処理システム及び光情報処理方法によれば、光に変換された有用情報を処理する場合、光情報受信機能付きの端末装置を備え、光情報提供源から発せられる有用情報に基づく光を受光して電気信号に変換し、変換後の電気信号から有用情報を復元すると共に、当該光情報提供源が設けられた情報提供場所の映像を撮影して得られた画像情報と受光及び復元により得られた有用情報とを対応付けて処理するようになされる。

この構成によって、例えば、店舗、劇場、興行場、交通機関等に関する有用情報をキーにして当該有用情報を取得した場所の映像を再生したり、有用情報を取得した場所の映像をキーにして、有用情報の内容を音や文字に再生できるようになる。これにより、出先にて取得した店舗、劇場、興行場、交通機関等に関連する有用情報を自宅等で目と耳で同時に繰り返し視聴できるようになる。

本発明に係る光情報受信機能付きの端末装置によれば、光に変換された有用情報を処理する信号処理部を備え、信号処理部は撮影部によって撮影された情報提供場所の映像を再生する画像情報と受光部によって変換された電気信号から復元される有用情報とを対応付けるように処理する。

この構成によって、例えば、店舗、劇場、興行場、交通機関等に関する有用情報をキーにして当該有用情報を取得した場所の映像を再生したり、有用情報を取得した場所の映像をキーにして、有用情報の内容を音や文字に再生できるようになる。これにより、出先にて取得した店舗、劇場、興行場、交通機関等に関連する有用情報を自宅等で目と耳で同時に繰り返し視聴できるようになる。

本発明に係るプログラム及び記録媒体によれば、光に変換された有用情報を処理する場合に、本発明に係る記録媒体に記述されたプログラムを本発明の撮像装置に適用することで、店舗、劇場、興行場、交通機関等に関する有用情報をキーにして当該有用情報を取得した場所の映像を再現性良く再生したり、有用情報を取得した場所の映像をキーにして、有用情報の内容を再現性良く音や文字に再生できるようになる。

続いて、この発明に係る光情報処理システム、端末装置、光情報処理方法、プログラム及び記録媒体の実施の形態について、図面を参照しながら説明をする。

図１は、本発明に係る実施形態としての可視光データ提供システム１の構成例を示す図である。

この実施形態では、有用情報を光に変換し、変換後の光を受光して情報処理する場合、光情報提供源と光情報受信機能付きの端末装置とを備え、光情報提供源から発せられる有用情報に基づく光を受光して電気信号に変換し、変換後の電気信号から有用情報を復元すると共に、当該光情報提供源が設けられた情報提供場所の映像を撮影して得られる画像情報と受光及び復元によって得られた有用情報とを対応付けて保存するようにしたものである。

図１に示す可視光データ提供システム１は光情報処理システムの一例を構成し、店舗、劇場、興行場、交通機関等に関連する有用情報が光に変換され、変換後の光を受光して有用情報を処理するシステムである。可視光データ提供システム１では、光情報提供用の送信装置１００と可視光データ受信機能付きのデジタルカメラ２００とが備えられる。

送信装置１００は光情報提供源の機能を構成し、例えば、情報提供場所の電光表示板に設けられ、有用情報を光に変換して発するように動作する。ここに有用情報とは、情報提供者にとって集客に有用となる電子情報内容や、情報利用者にとって情報収集に有用となる電子情報内容をいい、これらをコンテンツデータＤ１という。コンテンツデータＤ１には動画情報、静止画情報、文字情報、音情報が含まれる。以下の例では電子情報内容が宣伝広告内容で、これらの内容が宣伝広告用のコンテンツデータＤ１となる場合について説明をする。

この例で、宣伝広告用のコンテンツデータＤ１を送信する送信装置１００は、メモリ部１４を有してＬＥＤ看板を構成する。送信装置１００は、図１０に示した送信機３００に類似する装置である。メモリ部１４には送信装置１００が送信するコンテンツデータＤ１が格納され保存されている。

コンテンツデータＤ１は、対象が飲食店や百貨店等の店舗に関する情報である場合、安売り販売日や安売り商品、店名、割引期間等を内容とする商品販売データＤ１１である。また、対象が演芸場や、歌舞伎、定期演奏会、映画館等の劇場に関する情報である場合、実演者や、実演日、演目、場所等を内容とする劇場開催データＤ１２である。更に、対象が野球や、サッカー等の興行場に関する情報である場合、対戦カードや、興行日時、場所等を内容とする劇場開催データＤ１２である。また、対象が鉄道会社や、旅行会社等の交通機関である場合、旅行先目的地案内、募集人数、交通手段、催行日を内容とする旅行催行データＤ１３である。

なお、情報提供場所は、該当する店舗、劇場、興行場、交通機関等であっても、もちろん、これらから離れた駅、そのコンコースや、ビル、空港ロビー、市街地、地下道、歩行道路等であってもよい。好ましくは、人が多く出入りする場所が良い。

メモリ部１４にはＲＡＭ（揮発メモリ）や、ＥＥＰＲＯＭ、ハードディスク装置等の不揮発メモリが使用される。送信装置１００は、メモリ部１４の他に、通信制御部１１、変調部１２及び発光部１３を有して構成される。メモリ部１４には通信制御部１１が接続され、コンテンツデータＤ１から、所定の伝送方式のデータストリーム（以下送信データＤoutという）を生成して変調部１２に出力される。

通信制御部１１には変調部１２が接続され、送信データＤoutに基づいて発光部１３の周波数をシフトし、あるいは、発光部１３の光源の点滅周期を変調するための変調信号Ｓoutを送出する。変調部１２には発光部１３が接続され、変調信号Ｓoutに基づいて発光部１３の光源が目視では分からないような高速で、例えば、ＯＮ／ＯＦＦ点滅される。発光部１３の光源が高速にＯＮ／ＯＦＦ点滅されることで、コンテンツデータＤ１が可視光データとなって送信装置１００から発するようになる。発光部１３には蛍光灯あるいはＬＥＤ（Light Emitting Diode）素子等の可視光源が使用される。これにより、送信装置内蔵のＬＥＤ看板が構成される。

この例で、送信装置内蔵のＬＥＤ看板が被写体となされ、この被写体に向けて操作される可視光データ受信機能付きのデジタルカメラ２００は、光情報受信機能付きの端末装置の機能を構成し、送信装置１００から発せられる広告宣伝情報に基づく光を受光して電気信号に変換し、変換後の電気信号から可視光データ（以下コンテンツデータＤ１という）を復元すると共に、当該送信装置１００が設けられた情報提供場所の映像を撮影して得られる画像データＤ２と、受光及び復元によって得られたコンテンツデータＤ１とを対応付けて処理するように動作する。デジタルカメラ２００は情報利用者が所持し、端末装置にはデジタルカメラ２００の他に、携帯電話機内蔵の小型カメラや、ビデオカメラも含まれる。もちろん、光情報受信機能付きの端末装置を換言するカメラ機能付きの光通信装置であってもよい。

デジタルカメラ２００は、受光部２１ａ、撮影部２１ｂ、信号処理部２２、操作／表示部２３、ＵＳＢ・Ｉ／Ｏインターフェース部２４及びメモリ部２５を備えている。受光部２１ａは、情報提供場所の送信装置１００から発せられる宣伝広告情報に基づく光を受光して電気信号に変換する。受光部２１ａには、例えば、１画素を構成する一又は二以上のフォトダイオード（ＰＤ）が使用される。

受光部２１ａに隣接した所定の位置には、撮影部２１ｂが配置され、光情報提供用の送信装置１００が設けられた情報提供場所の映像を撮影するように操作される。受光部２１ａは、撮影部２１ｂが設けられた同一パネル面に備えられる。撮影部２１ｂにはＣＣＤ撮像素子アレイが使用される。ＣＣＤ撮像素子アレイは、マトリクス状に配置された複数の受光素子を有している。

上述の撮影部２１ｂの受光素子の一部又は全部が受光部２１ａの受光素子として兼用される。撮影部２１ｂの受光素子の全部を受光部２１ａの受光素子として使用する場合は、図中破線で示すように受光部２１が一体化される。この例では、可視光データ受信機能付きのデジタルカメラ２００の構成を分かりやすく説明するために、受光部２１ａと撮影部２１ｂとが区分され、個々に制御される場合について説明する。

受光部２１ａ及び撮影部２１ｂには信号処理部２２（図６参照）が接続され、受光部２１ａによって変換された電気信号から復元されたコンテンツデータＤ１と、撮影部２１ｂによって撮影された情報提供場所の映像を再生するための画像データＤ２とを対応付けるように処理する。この処理にはデータ加工処理やそのデータ保存処理が含まれる。例えば、有用情報が映画封切り予告等である場合、映画シーンの一部を示す動画情報の伸張処理や、データ格納時の圧縮処理等が含まれる。このような処理は、情報利用者が後日、撮影画像とコンテンツデータＤ１（付加情報）とを連動させて利用し易くするためである。

操作／表示部２３は設定部の機能を構成する。操作／表示部２３には、液晶表示パネルとタッチパネルとを組み合わせたものが使用される。この例で撮影部２１ｂに電源を供給して映像を撮影する動作を撮影モードとしたとき、操作／表示部２３は、撮影モードを設定及び解除するように操作される。制御部２０３は、操作／表示部２３が操作されて撮影モードが設定された場合に、撮影部２１ｂ、受光部２１ａ及びデータ復調部２０１に電源を供給する。操作／表示部２３が操作されて撮影モードが解除された場合は、撮影部２１ｂ、受光部２１ａ及びデータ復調部２０１への電源供給を停止する。

このような電源制御を実行することよって、撮影モードに設定されている間、可視光受信を行い、その他の処理モード（例えば、再生モード）には、可視光受信機能を停止できるようになる。従って、可視光受信処理にかかる消費電力を低減できるようになる。

信号処理部２２にはＵＳＢ・Ｉ／Ｏインターフェース部２４が接続される。ＵＳＢ・Ｉ／Ｏインターフェース部２４は、ＵＳＢ規格のインターフェース機能を有しており、外部機器からメモリ部２５に保存された各種データを読み書きできるようになっている。なお、ＵＳＢ・インターフェース２４は、それに代わる他のＩ／Ｏインターフェースでもよく、また、無線／有線方式を問わないものである。

信号処理部２２には接続されたメモリ部２５には、送信装置１００が設けられた情報提供場所の映像を撮影して得られる画像データＤ２と、受光及び復元によって得られたコンテンツデータＤ１とを対応付けて格納及び保存するようになされる。メモリ部２５には、ＥＥＰＲＯＭやハードディスク装置等の不揮発性メモリが使用される。このような光情報提供用の送信装置１００と、可視光データ受信機能付きのデジタルカメラ２００とで、可視光データ提供システム１を構成することにより、新しいコンテンツ配信サービスを提供できるようになった。

図２は、送信装置１００のメモリ部１４におけるメモリマップ例を示す構成図である。図２に示すメモリマップ例によれば、メモリ部１４を構成するメモリ領域が複数に分割され、その第１のメモリ領域４１にはコンテンツデータＤ１に係る先頭アドレスの記述領域が割り当てられ、先頭アドレスには、例えば、ファイルの番号が格納（記述）される。

第２のメモリ領域４２には、属性コードの記述領域が割り当てられ、当該ファイルの属性コードが格納（記述）される。メモリ領域４２に格納される属性コードについては、例えば、テキストファイルは「＃１」、ＭＰ３ファイルは「＃２」、というように定義され、送信装置１００とカメラ２００の間で一意に約束するように取り扱われる。

第３のメモリ領域４３には、ファイルの長さ（length）の記述領域が割り当てられ、当該ファイルのファイルの長さが格納（記述）される。第４のメモリ領域４４には、データ記述領域が割り当てられ、メモリ領域４３で明示されたファイルの長さと同じ長さのデータが格納（記述）される。メモリ部１４に複数のファイルが保存される場合は、以後、同様にしてファイル番号、属性コード、ファイル長さ、データが順次格納される。

この例で送信装置１００は、送信タイミングが到来すると、メモリ部１４からコンテンツデータＤ１（有用情報）を読み出し、通信制御部１１でフレーム化するようになされる。送信タイミングは時限管理される。例えば、ＬＥＤ看板が駅舎や、道路等の屋外に配置され、日照時間と関連する場合は、日没後から夜明けに至るまでの期間、定期的に送信フレームＦｘ（ｘ＝１，２，３，・・・）を作成するようになされる。ＬＥＤ看板が地下道や建物等の屋内に配置され、日照時間と関連しない場合は、人の出入り時間をタイマー設定して、定期的に送信フレームＦｘを作成するようにするとよい。

図３は、送信装置１００における送信フレームＦｘの構成例を示す図である。図４は、ヘッダ部５３の構成例を補足する図である。図３に示す送信フレームＦｘは通信制御装置１１によって作成され、その内容は、プリアンブル５１、ユニークワード５２、ヘッダ部５３、ヘッダ誤り検出符号５４、データ部５５及びデータ誤り検出符号５６から構成される。プリアンブル５１及びユニークワード５２は、受信装置２００が送信フレームＦｘの検出を行うために用いられる。データ部５５には可視光データとなるコンテンツデータＤ１が記述される。

ヘッダ部５３は、図４に示すように送信装置ＩＤ３１、送信シーケンス番号３２、フラグメントＯＮ／ＯＦＦビット３３、フラグメント番号３４、フラグメント終了フラグ３５、送信フレームＦｘ長３６、属性コード３７から構成される。送信装置ＩＤ３１は送信装置１００に割り当てられた固有のＩＤであり、送信シーケンス番号３２は送信装置１００がメモリ部１４に保有するファイル毎に付加されたファイル番号である。

フラグメントｏｎ／ｏｆｆビット３３は、１つのファイルを複数の送信フレームＦｘに断片的に分割して送信するか、又は、当該送信フレームＦｘを分割しないで送信するかを表すビットである。例えば、送信フレームＦｘを分割する場合は「１」、送信フレームＦｘを分割しない場合は「０」にセット（記述）する。フラグメント番号３４はフラグメント（fragmentation） を行う場合に使用され、フラグメント番号３４は送信フレームＦｘ毎にインクリメントするようになされる。

また、送信フレームＦｘがフラグメント（分割）されたコンテンツデータＤ１を格納した最後のフレームである場合には、フラグメントの終了を示すフラグメント終了フラグを「１」にセットするようになされる。送信フレーム長３６は図３に示した送信するデータ部５５の長さを表す。属性コード３７には図２に示したメモリ部１４の第２のメモリ領域４２に格納されている属性コードが使用される。

図５は、送信装置１００による送信フレームＦｘの送出例を示すタイムチャートである。図５に示す送信フレームＦｘの送出例によれば、その一例として、メモリ部１４に２つのファイル（１）、ファイル（２）が格納されている場合を挙げている。送信装置１００は最初の送信タイミング、この例では、時刻ｔ１からｔ２の期間で、メモリ部１４からファイル（１）を読み出し、前述のように送信フレームＦ１（ｘ＝１）を構成し、送信フレームＦ１に基づいて発光部１３の光源を変調して可視光データＤ１を送出する。

次の送信タイミング、この例では、時刻ｔ３からｔ４の期間で、メモリ部１４からファイル（２）を読み出す。時刻ｔ２からｔ３の期間はデータ処理のためのフレーム非送出期間である。このファイル（２）をフラグメントして、２つのフレーム（２−１）と、フレーム（２−２）とに分けて送信する場合、ファイル（２）の１つ目のフレーム（２−１）は、フラグメントｏｎ／ｏｆｆビットを「１」、フラグメント番号を「１」、フラグメント終了フラグを「０」として送信フレームＦ２１を構成し、光源を変調して可視光データを送出する。

ファイル（２）の２つ目のフレーム（２−２）は、フラグメントｏｎ／ｏｆｆビットを「１」、フラグメント番号を「２」、フラグメント終了フラグを「１」として送信フレームＦ２２を構成し、光源を変調して可視光データを送出する。以後、送信装置１００では、送信タイミングが到来すると、再度、ファイル（１）及びファイル（２）の送出処理を順次繰り返すようになされる。

図６は、可視光データ受信機能付きのデジタルカメラ２００の内部構成例を示すブロック図である。図６に示すデジタルカメラ２００は、可視光データを受信する機能を有しており、情報提供場所の送信装置１００から光で提供される可視光データ（コンテンツデータＤ１）を情報処理するものである。デジタルカメラ２００は信号処理部２２を有しており、受光部２１ａによって変換された電気信号Ｓinから復元された受信データＤinに含まれるコンテンツデータＤ１と、撮影部２１ｂによって撮影された情報提供場所の映像を再生するための画像データＤ２とを対応付けて保存するように処理する。

例えば、信号処理部２２は、データバス２０４、データ復調部２０１、画像処理部２０２、制御部２０３及びシステムバス２０４を有して構成される。システムバス２０４にはＵＳＢ・Ｉ／Ｏインターフェース２４、メモリ部２５、画像処理部２０２及び制御部２０３が接続される。ＵＳＢ・Ｉ／Ｏインターフェース２４には操作／表示部２３や、ＵＳＢ端子２６、スピーカー２４ａ等が接続される。

操作／表示部２３は、機能設定モード、撮影モード、再生モードを切り替えるように操作される。機能設定モードとはデジタルカメラ２００の機能を設定する動作をいい、設定を変更するモードも含まれる。撮影モードとは被写体を撮影する動作をいう。再生モードとは、メモリ部２５に格納されたコンテンツデータＤ１や画像データＤ２を再生する動作をいう。

画像処理部２０２は撮影部２１ｂに接続され、当該撮影部２１ｂの出力信号Ｐinを画像処理して情報提供場所の映像をモニタ又は再生するための画像データＤ２（画像ファイルとなる）を出力する。撮影部２１ｂから得られた映像は、操作／表示部２３にモニタ表示される。画像処理部２０２には図示しない画像バッファが設けられ、シャッター操作に基づく画像データＤ２を１画面（静止画）単位に一時格納するようになされる。

画像処理部２０２には、情報復元部の機能を構成するデータ復調部２０１が接続され、受光部２１ａによって変換された電気信号Ｓinから受信データＤin（コンテンツデータＤ１）を復元するようになされる。データ復調部２０１にはデコーダが使用される。データ復調部２０１には図示しないフレームバッファが設けられ、受信した受信データＤin＝コンテンツデータＤ１を１フレーム単位に一時格納するようになされる。また、データ復調部２０１は受信データＤinの中にコンテンツデータＤ１が有るか無いかを操作／表示部２３に表示する機能を有している。

この例で、データ復調部２０１のフレームバッファに一時的に格納されているコンテンツデータＤ１において、可視光受信ファイルとして成立しているものが複数ある場合は、その全てをメモリ部２５に保存するようになされる。例えば、図５に示した送信フレームＦ２２を受信した後、すなわち、データ復調部２０１にファイル（１）とファイル（２）とがバッファされた状態で、撮影ボタンの一例を構成するシャッターボタン２３ａが押下された場合が想定される。この場合、ファイル（１）の属性コード３７がテキスト、ファイル（２）の属性コード３７がＭＰ３であったとすると、「ＤＳＣ０００１−１．ｔｘｔ」、「ＤＳＣ０００１−２．ｍｐ３」というようにファイル名が決定される。

一方、図５に示した送信レームＦ２１を受信した後、すなわち、データ復調部２０１にファイル（１）とファイル（２）の途中までが、フレームバッファに格納された状態で、シャッターボタン２３ａが押下された場合が想定される。この場合は、ファイル（１）については、上述と同様の手順で命名されてメモリ部２５に保存されるが、ファイル（２）には未転送のデータがあり、ファイルとして不完全であるため、データ復調部２０１は、引き続き可視光受信を行う。そして、ユーザが受光部２１ａの向きを送信装置１００から、外さないように、操作／表示部２３を介して、あるいは、スピーカー２４ａを介して音声等で注意を喚起するようになされる。

制御部２０３は操作／表示部２３からモード設定の情報を受けて画像処理部２０２やデータ復調部２０１、撮像部２１ｂ、受光部２１ａの入出力を制御する機能を有する。例えば、制御部２０３は、画像処理部２０２から出力される画像データＤ２とデータ復調部２０１によって復元されたコンテンツデータＤ１とを対応付けるようにデータ復調部２０１及び画像処理部２０２を制御する。

制御部２０３には図示しないＣＰＵや、ＲＡＭ及びＲＯＭが使用される。撮影モードにおいて、制御部２０３は、操作／表示部２３のシャッターボタン２３ａが押下されると、ボタン押下時に撮影部２１ｂで取得されている画像データＤ２を画像処理部２０２に画像処理させ、画像ファイルとしてメモリ部２５に保存する。このとき、画像ファイルのファイル名は、例えば、「ＤＳＣ０００１．ｊｐｇ」となされ、以後、シャッターボタン２３ａの押下によって保存が行われる毎に「ＤＳＣ０００２．ｊｐｇ」、「ＤＳＣ０００３．ｊｐｇ」・・・というように、同一名称のファイルが生成されないようにファイル名が決定される。

また、撮影モード時に、制御部２０３は、受光部２１ａ及びデータ復調部２０１がコンテンツデータＤ１を１フレーム単位に取得する処理を完了したか否かを監視する。例えば、制御部２０３は、受光部２１ａがコンテンツデータＤ１を受信している状態か、受光部２１ａによる受信が完了した状態か否かを示すステータス情報を操作／表示部２３に通知するようになされる。

この例で、データ復調部２０１はコンテンツデータＤ１をフレーム単位に受信して処理する。データ復調部２０１は、受信したコンテンツデータＤ１を一時的にフレームバッファに格納し、また、受信データＤinの有無を操作／表示部２３に表示する機能を有している。例えば、データ復調部２０１が１フレーム分のコンテンツデータＤ１を取得したとき、制御部２０３は光情報取得完了に関する通知処理を実行する。

制御部２０３からステータス情報の通知を受けた操作／表示部２３は、コンテンツデータＤ１受信中、赤色点滅を表示したり、その完了後に緑色点灯に移行するような表示を実行する。このようにすると、カメラ操作者（ユーザ）に対して可視光受信におけるステータス情報を知らせることができ、この情報に基づいて、デジタルカメラ２００を対象物に向け続ける必要があるか否かをユーザに判断させることができる。

この例で、撮影モード時、ユーザが被写体を変えた場合、データ復調部２０１にバッファされている既に受信したコンテンツデータＤ１と、ユーザがこれから得ようとする画像データＤ２との関係性が無くなる。従って、この場合、制御部２０３はデータ復調部２０１にバッファされている既に受信したコンテンツデータＤ１をクリア（破棄）するようになされる。そして、被写体が変化したことによってコンテンツデータＤ１がクリアされたことを、操作／表示部２３を介してあるいは音声などの手段を用いてユーザに通知するようになされる。

この例で操作／表示部２３にはシャッターボタン２３ａ（撮影ボタン）が備えられ、所定の操作に基づいて制御部２０３に対して映像取り込み用のシャッター指示情報を出力するようになされる。例えば、撮影モード設定時に、シャッターボタン２３ａを操作してシャッター指示情報を制御部２０３に出力すると、制御部２０３は、送信装置１００が設けられた情報提供場所の映像を撮影して得られた画像データＤ２と、データ復調部２０１から得られたコンテンツデータＤ１とを対応付けてメモリ部２５に保存する。このようにすると、撮影画像とコンテンツデータＤ１とを同時に収集でき、後日、メモリ部２５に保存された電子情報内容を繰り返し視聴できるようになる。

制御部２０３にはＲＯＭ２１３が設けられ、情報提供場所の送信装置１００から光で提供されるコンテンツデータＤ１を処理するコンピュータが読取り可能なプログラムが記述されている。その記述内容は、情報提供場所の送信装置１００から発せられる宣伝広告情報に基づく光を受光して電気信号に変換するステップと、変換後の電気信号からコンテンツデータＤ１を復元するステップと、送信装置１００が設けられた情報提供場所の映像を撮影するステップと、撮影により得られた映像を再生するための画像データＤ２と、受光及び復元により得られたコンテンツデータＤ１とを対応付けて保存するステップとを有している。

この制御部２０３のＲＯＭ２１３に記述されたプログラムによれば、光に変換されたコンテンツデータＤ１を処理する場合に、当該プログラムを本発明に係る可視光データ受信機能付きのデジタルカメラ２００に適用することで、店舗、劇場、興行場、交通機関等に関するコンテンツデータＤ１をキーにして当該コンテンツデータＤ１を取得した場所の映像を再現性良く再生したり、コンテンツデータＤ１を取得した場所の映像をキーにして、コンテンツデータＤ１の内容を再現性良く音や文字に再生できるようになる。上述のプログラムはＲＯＭ２１３に限られることはなく、外部からメモリ部２５へインストールする形態であってもよい。このようにすると、プログラムの書き換えが自在にできるようになる。

なお、音声や音楽（音情報）は、ＵＳＢ・Ｉ／Ｏインターフェース２４に接続されたスピーカー２４ａから出力され、映像は操作／表示部２３に表示される。もちろん、ＵＳＢ端子に外部装置を接続して、外部装置でコンテンツデータＤ１及び画像データＤ２を再生するようにしてもよい。

図７は、デジタルカメラ２００におけるリストファイル例を示す概念図である。図７に示すメモリ部２５にはリストファイルが保存される。リストファイルは、受光部２１ａからデータ復調部２０１を介して得られたコンテンツデータＤ１と、撮影部２１ｂにより得られた映像を再生するための画像データＤ２とを対応付けたものである。

この例では、撮影モードにおいて、シャッターボタン２３ａが押下され、画像ファイルと、可視光受信ファイルとがメモリ部２５に保存されるタイミングで、画像ファイル名と可視光受信ファイル名がリストファイルに書き込まれる。これにより、画像ファイルとそれに関連する可視光受信ファイルとをリスト化したリストファイルを作成できるようになる。

再生モードでは、画像ファイルが操作／表示部２３に表示されると同時に、制御部２０３は、このリストファイルを参照し、表示中の画像ファイルに関連するファイルがあるかを検索され、関連ファイルの有無を操作／表示部２３に表示してユーザに知らせるようになされる。

メモリ部２５に表示中の画像ファイルに関連する可視光受信ファイルがあるか否かを検索する手段としては、例えば、再生モードがデジタルカメラ２００に設定されると、制御部２０３は、メモリ部２５に保存されている画像ファイルを読み出し、画像処理部２０２に画像処理させ、操作／表示部２３に画像データＤ２に基づく映像を表示するようになされる。

このとき、メモリ部２５に、表示中の画像ファイルに関連する可視光受信ファイル（コンテンツデータＤ１）があるか検索する。例えば、表示中の画像ファイルが「ＤＳＣ０００１．ｊｐｇ」である場合、「ＤＳＣ０００１＊．＊（＊はワイルドカード）」という名称の可視光受信ファイルがあるか否を検索し、可視光受信ファイルが存在する場合は、表示中の画像ファイルに関連するコンテンツデータＤ１が存在することを操作／表示部２３でユーザに知らせることができる。

続いて、本発明に係る光情報処理方法についてデジタルカメラ２００の動作例を説明する。図８及び図９は、デジタルカメラ２００の動作例（その１、２）を示すフローチャートである。

この例では、情報提供場所に設けられた送信装置１００から光で提供されるコンテンツデータＤ１を処理する場合を前提とし、機能設定モード及び再生モードは、撮影モード以外のモードに含まれ、撮影モードと撮影モード以外のモードを設定する場合について説明する。ステップＳＴ３〜ステップＳＴ７の受信処理に並行してステップＳＴ８で映像を取り込み、操作／表示部２３に送信装置１００が設けられた情報提供場所の映像を表示する。

万一、ユーザが撮影部２１ｂの向きを送信装置１００から外してしまい、可視光受信ファイルを正常に格納完了できなかった場合は、操作／表示部２３を介して、あるいは、音声などの手段を用いてコンテンツデータＤ１の受信処理に失敗した旨をユーザに知らせ、一時的にバッファしていた受信データＤinをクリアするようになされる。

これらを動作条件にして、図８に示すフローチャートのステップＳＴ１でモードを設定する。モードは操作／表示部２３を操作して設定される。例えば、操作／表示部２３を操作して、撮影モード又は撮影モード以外のモードを切り替えるように操作される。撮影モード以外のモードには、機能設定モードや再生モード等が含まれる。その後、ユーザは、デジタルカメラ２００を持って、送信装置１００が設けられた情報提供場所に向けて映像を撮影する。

ステップＳＴ２で制御部２０３はモード設定処理に基づいて制御を分岐する。先のステップＳＴ１で撮影モードが設定されている場合は、ステップＳＴ３に制御を分岐して可視光データの受信処理を実行する。このとき、制御部２０３は受光部２１ａ及び画像処理部２０２をアクティブにすると同時に、データ復調部２０１もアクティブにして可視光データ（受信データＤin→コンテンツデータＤ１）の受信を開始する。受光部２１ａでは情報提供場所に設けられた送信装置１００から発せられる宣伝広告情報に基づく可視光５００を受光して、可視光５００を電気信号Ｓinに変換する。変換後の電気信号Ｓinは、データ復調部２０１に出力される（可視光受信処理）。

この可視光受信処理に並行して、ステップＳＴ８で制御部２０３は撮影部２１ｂをアクティブにして画像データＤ２の取得を開始し、送信装置１００が設けられた情報提供場所の映像を取り込み、操作／表示部２３に情報提供場所の映像を表示する。このとき、マトリクス状の撮像素子アレイを有した撮影部２１ｂでは送信装置１００が設けられた情報提供場所の映像を撮影して、映像を再生するための画像信号Ｐinに変換する。変換後の出力信号Ｐinは画像処理部２０２に出力される。画像処理部２０２は撮影部２１ｂから出力される画像信号Ｐinを画像処理し、画像データＤ２を操作／表示部２３に転送する。

次に、ステップＳＴ４でデータ復調部２０１は受信データＤinの中からコンテンツデータＤ１を検出する。コンテンツデータＤ１が検出された場合は、操作／表示部２３でコンテンツデータＤ１の有無を表すマークを点灯する。コンテンツデータＤ１が検出されない場合は、ステップＳＴ３に戻って可視光受信処理を継続する。受光した光を電気信号Ｓinに変換してコンテンツデータＤ１を復元する。コンテンツデータＤ１が検出された場合は、ステップＳＴ５に移行して１フレーム分のコンテンツデータＤ１を受信するまで可視光受信処理を続ける。

次に、ステップＳＴ６に移行して、受信データＤin＝コンテンツデータＤ１のフレームが既に受信済みのフレームか、又は、新規フレームかを判定する。受信データＤin＝コンテンツデータＤ１のフレームが新規フレームでない場合は、その受信データＤin＝コンテンツデータＤ１のフレームを破棄する。その後、再び、ステップＳＴ３に戻って可視光受信処理を継続し、ステップＳＴ４で受信データＤinの中からコンテンツデータＤ１を検出する。

受信データＤin＝コンテンツデータＤ１のフレームが新規フレームである場合は、ステップＳＴ７に移行してデータ復調部２０１は、受信データＤin＝コンテンツデータＤ１の１フレームを可視光受信ファイルとしてフレームバッファに一時格納する。このとき、可視光受信ファイルが格納完了したことを操作／表示部２３を介して、あるいは、音声などをスピーカー２４ａに出力してユーザに知らせるようになされる。

その後、図９に示すステップＳＴ９で被写体に撮影する画枠が変化したかを判別する。このとき、ユーザが受光部２１ａの向きを変え、撮影対象を変化させた場合、データ復調部２０１は画枠変を検知して制御部２０３に通知する。この際のユーザが被写体を変えたかどうかを判断する手段としては、制御部２０３でΔｔ時刻前に撮影していた画像データＤ２と、現在撮影（受光）している画像データＤ２の相関性を演算したり、あるいは、ジャイロスコープを用いてデジタルカメラ２００の動きを計測するなどの手段を用いるとよい。

被写体を撮影する画枠が変化した場合は、ステップＳＴ１４に移行してデータ復調部２０１はフレームバッファ内に可視光受信ファイルとして一時格納していた受信データＤinをクリアする。その後、ステップＳＴ１５に移行してモード解除判別処理を実行する。モード設定が解除されていない場合は、ステップＳＴ３に戻って可視光受信処理を継続し、再び、ステップＳＴ４で受信データＤinの中からコンテンツデータＤ１を検出する。

ステップＳＴ９で画枠が変化しない場合は、ステップＳＴ１０に移行して操作／表示部２３のシャッターボタン２３ａを押下されたか否かを判別する。この際の判別は、シャッターボタン２３ａに係合されたスイッチのオン／オフによる電圧を検出することで行われる。シャッターボタン２３ａが押下された場合は、ステップＳＴ１１に移行して、送信装置１００が設けられた情報提供場所の映像を再生するための画像データＤ２を画像ファイルとして画像バッファに格納する。例えば、制御部２０３は、シャッターボタン２３ａ押下時に撮影部２１から出力されていた画像信号Ｐinを画像処理部２０２に画像処理させ、画像ファイルとして画像処理部２０２の図示しない画像バッファ内に、又は、画像バッファ領域として割り当てられたメモリ部２５のバッファ領域に保存する。

その後、ステップＳＴ１２に移行してデータ復調部２０１のフレームバッファに一時格納された受信データＤin＝コンテンツデータＤ１が有るか否かを判別する。この際の判別は、図３及び図４に示した送信フレームＦｘのヘッダ部５３の記述内容をチェックすることで行われる。

フレームバッファに受信データＤin＝コンテンツデータＤ１が有る場合は、ステップＳＴ１３に移行して、これらのコンテンツデータＤ１と画像データＤ２とを対応付けてメモリ部２５に転送し保存する。このとき、フレームバッファに一時的に格納されているコンテンツデータＤ１で、ファイルとして成立しているものがある場合は、これもメモリ部２５に保存するようになされる。

メモリ部２５に保存される可視光受信ファイルは、先の画像ファイルのファイル名の拡張子ｊｐｇを変更したもので、可視光受信フレームの属性コード３７からファイルの拡張子を決定するようになされる。例えば、シャッターボタン押下時に保存した画像ファイルのファイル名が「ＤＳＣ０００１．ｊｐｇ」で可視光受信ファイルの属性コード３７がテキストファイルを表す場合、可視光受信ファイルは「ＤＳＣ０００１．ｔｘｔ」となる（図７参照）。これにより、撮影部２１ｂにより得られた映像を再生するための画像データＤ２と受光部２１ａからデータ復調部２０１を介して得られたコンテンツデータＤ１とを対応付けてメモリ部２５に保存できるようになる。

そして、再び、上述のステップＳＴ１５のモード解除判別処理に移行して、モードが解除されない場合は、ステップＳＴ３に戻って、上述の可視光受信処理を継続し、再び、ステップＳＴ４で受信データＤinの中からコンテンツデータＤ１を検出する。

また、ステップＳＴ１２でフレームバッファに受信データＤin＝コンテンツデータＤ１が無い場合は、ステップＳＴ１６に移行して、画像バッファに一時格納されている撮影対象の画像データＤ２のみをメモリ部２５へ転送し保存する。その後、上述のステップＳＴ１５のモード解除判別処理に移行して、モードが解除されない場合は、ステップＳＴ３に戻って、上述の可視光受信処理を継続し、再び、ステップＳＴ４で受信データＤinの中からコンテンツデータＤ１を検出する処理を繰り返すようになされる。

なお、一時的にバッファしている受信データＤin＝コンテンツデータＤ１がある状態で、デジタルカメラ２００が撮影モードから当該撮影モード以外の他のモードへ切り替えられる場合が想定され、ステップＳＴ１０でシャッターボタン２３ａが押下されることなく、他のモードが設定される場合がある。

この場合は、ステップＳＴ１７に移行して他のモードが設定されたかを判別する。他のモードが設定されない場合は、ステップＳＴ１５に移行する。ステップＳＴ１７で他のモードが設定された場合は、ステップＳＴ１８に移行して、データ復調部２０１は一時的に記憶しているフレームバッファ内の受信データＤinをクリア（廃棄）する。そして、モード切り替えによって受信データＤinがクリアされたことを、操作／表示部２３を介して、あるいは、音声などの手段を用いてユーザに通知する。

また、上述のステップＳＴ１で他の処理モードが設定され、ステップＳＴ２で制御を他の処理モードに分岐した場合や、ステップＳＴ１８でデータ復調部２０１によってフレームバッファ内の受信データＤinがクリアされた後は、ステップＳＴ１９に移行して撮影モード以外の他の処理モードを実行する。例えば、再生モードが制御部２０３に設定された場合である。この場合、制御部２０３は、画像ファイルを操作／表示部２３に表示するように制御する。このとき、制御部２０３はメモリ部２５に保存されている画像ファイルを読み出し、画像処理部２０２に画像処理させ、操作／表示部２３に画像データＤ２を転送する。

これと同時に、このリストファイルを参照し、表示中の画像ファイルに関連するファイルがあるか否かを検索し、関連ファイルの有無を操作／表示部２３に表示する。ユーザはこの表示に基づいて関連ファイルの有無を確認できるようになる。なお、他の処理モードを実行するときは、制御部２０３は可視光受信機能を停止する。これは、可視光受信処理にかかる消費電力を低減するためである。その後、ステップＳＴ２０に移行する。

上述のステップＳＴ１５でモードが解除された場合や、他の処理モードを実行した後は、ステップＳＴ２０に移行して終了を判別する。例えば、制御部２０３は当該デジタルカメラ２００の電源オフ情報を検出する。電源オフ情報が検出された場合は、可視光受信処理を含む撮影処理を終了する。電源オフ情報が検出されない場合は、ステップＳＴ１に戻って上述した可視光受信処理を含む撮影処理を継続するようになされる。

このように実施形態としての可視光データ提供システム１及び光情報提供方法によれば、光に変換されたコンテンツデータＤ１を処理する場合、光情報提供用の送信装置１００及び可視光データ受信機能付きのデジタルカメラ２００を備え、当該デジタルカメラ２００は、情報提供場所の送信装置１００から発せられる宣伝広告情報に基づく光を受光して電気信号Ｓinに変換し、変換後の電気信号Ｓinから受信データＤin＝コンテンツデータＤ１を復元すると共に、当該送信装置１００が設けられた情報提供場所の映像を撮影して得られる画像データＤ２と受光及び復元によって得られたコンテンツデータＤ１とを対応付けてメモリ部２５に保存するようになされる。

従って、店舗、劇場、興行場、交通機関等に関するコンテンツデータＤ１をキーにして当該コンテンツデータＤ１を取得した情報提供場所の映像を再生したり、コンテンツデータＤ１を取得した情報提供場所の映像をキーにして、コンテンツデータＤ１の内容を音や文字に再生できるようになる。これにより、出先にて取得した店舗、劇場、興行場、交通機関等に関連するコンテンツデータＤ１を自宅等で目と耳で同時に繰り返し視聴できるようになる。

この例ではメモリ部２５に関して、カメラ内蔵形態について説明したが、これに限られることはなく、デジタルカメラ２００から着脱可能なメモリカード形式（形態）のものであってもよい。

更に、画像データＤ２とコンテンツデータＤ１とを対応付け処理に関しては、デジタルカメラ２００内に保存されたコンテンツデータＤ１と画像データＤ２とを所望のアプリケーションプログラムによって関連付けるデータ加工処理機能を付加しても良い。例えば、取得したコンテンツデータＤ１がＷＥＢアドレスｈｔｔｐ：／／ｗｗｗ．○○○であった場合である。この場合のアプリケーションプログラムには、ＨＴＭＬのハイパーリンクを利用して画像データＤ２のリンク先をｈｔｔｐ：／／ｗｗｗ．○○○に指定するようなデータを含めるとよい。

また、デジタルカメラ２００がインターネットへの接続機能を有するならば、ユーザが画像データＤ２をクリックしたことをきっかけにして、インターネットへ接続し、リンク先の付加情報を取得できるようにしてもよい。

なお、アプリケーションプログラムはパーソナルコンピュータ（ＰＣ）等の外部機器上で動作させてもよく、デジタルカメラ２００に保存されたコンテンツデータＤ１、画像データＤ２は、ＵＳＢ・Ｉ／Ｏインターフェース２４やＵＳＢ端子２６等を介してＰＣ等の外部機器へコピーあるいは移動するように使用してもよい。また、他の処理モードを実行するときは、制御部２０３が可視光受信機能を停止するようにしたので、可視光受信処理にかかる消費電力を低減できるようになった。

撮影モード時に、受信データＤin＝コンテンツデータＤ１の受信中か、又はＤin＝Ｄ１完了か否かを通知する機能を備えたので、ユーザに可視光受信処理のステータス情報を通知できるようになった。ユーザはこの通知に基づいてデジタルカメラ２００を対象物に向け続ける必要があるか否かを容易に判断できるようになった。更に、撮影モード時、シャッターボタン２３ａを押下すると、画像データＤ２と共にその前後で受信したコンテンツデータＤ１を保存する機能を備えたので、撮影映像とその付加情報を同時かつ容易に収集しメモリ部２５に保存できるようになった。

この発明は、店舗、劇場、興行場、交通機関等に関連する有用情報が光に変換され、当該光を受光して有用情報を取得する可視光情報提供システムや、可視光通信機能を備えたデジタルカメラ、ビデオカメラ、携帯電話機等に適用して極めて好適である。

本発明に係る実施形態としての可視光データ提供システム１の構成例を示す図である。 送信装置１００のメモリ部１４におけるメモリマップ例を示す構成図である。 送信装置１００における送信フレームＦｘの構成例を示す図である。 ヘッダ部５３の構成例を補足する図である。 送信装置１００による送信フレームＦｘの送出例を示すタイムチャートである。 可視光データ受信機能付きのデジタルカメラ２００の内部構成例を示すブロック図である。 デジタルカメラ２００におけるリストファイル例を示す概念図である。 デジタルカメラ２００の動作例（その１）を示すフローチャートである。 デジタルカメラ２００の動作例（その２）を示すフローチャートである。 従来例に係る可視光通信システム１０の構成例を示すブロック図である。

符号の説明

１・・・可視光データ提供システム（光情報処理システム）、１１・・・通信制御装置、１２・・・変調部、１３・・・発光部、１４，２５・・・メモリ部、２１，２１ａ・・・受光部、２１ｂ・・・撮影部、２２・・・信号処理部、２３・・・操作／表示部（設定部）、２３ａ・・・シャッターボタン、２４・・・ＵＳＢ・Ｉ／Ｏインターフェース、２６・・・ＵＳＢ端子、１００・・・送信装置（光情報提供源）、２００・・・デジタルカメラ（端末装置）、２０１・・・データ復調部（情報復元部）、２０２・・・画像処理部、２０３・・・制御部、２０４・・・システムバス、２１３・・・ＲＯＭ（記録媒体）

Claims (11)

1. 光に変換された有用情報を処理する光情報処理システムであって、
   前記有用情報を光に変換して発する光情報提供源と、
   前記光情報提供源から発せられる有用情報に基づく光を受光して電気信号に変換し、変換後の電気信号から前記有用情報を復元すると共に、当該光情報提供源が設けられた情報提供場所の映像を撮影して得られる画像情報と、前記受光及び復元により得られた有用情報とを対応付けるように処理する光情報受信機能付きの端末装置とを備えることを特徴とする光情報処理システム。
2. 前記光情報提供源は、
   情報提供場所の電光表示板に設けられることを特徴とする請求項１に記載の光情報処理システム。
3. 光情報提供源から光で提供される有用情報を処理する光情報受信機能付きの端末装置であって、
   前記光情報提供源から発せられる有用情報に基づく光を受光して電気信号に変換する受光部と、
   前記光情報提供源が設けられた情報提供場所の映像を撮影するように操作される撮影部と、
   前記撮影部によって撮影された前記映像を再生する画像情報と前記受光部によって変換された前記電気信号から復元される前記有用情報とを対応付けるように処理する信号処理部とを備えることを特徴とする端末装置。
4. 前記信号処理部は、
   前記受光部によって変換された前記電気信号から有用情報を復元する情報復元部と、
   前記撮影部の出力を画像処理して前記情報提供場所の映像を再生するための画像情報を出力する画像処理部と、
   前記画像処理部から出力される前記画像情報と前記情報復元部によって復元された前記有用情報とを対応付けるように前記情報復元部及び画像処理部を制御する制御部とを有することを特徴とする請求項３に記載の端末装置。
5. 前記受光部は１画素を構成する一又は二以上の受光素子を有しており、
   前記撮影部は、マトリクス状に配置された複数の受光素子を有しており、
   前記撮影部の受光素子の一部又は全部が前記受光部の受光素子として兼用されることを特徴とする請求項３に記載の端末装置。
6. 前記撮影部に電源を供給して映像を撮影する動作を撮影モードとしたとき、
   前記撮影モードを設定及び解除する設定部を備え、
   前記信号処理部の制御部は、
   前記設定部によって撮影モードが設定された場合に、前記撮影部、受光部及び情報復元部に電源を供給し、
   前記設定部によって撮影モードが解除された場合は、前記撮影部、受光部及び情報復元部への電源供給を停止することを特徴とする請求項３に記載の端末装置。
7. 前記撮影モード設定時に、
   前記信号処理部の制御部は、
   前記情報復元部が前記有用情報を取得する処理を完了したか否かを監視し、
   前記情報復元部は、有用情報を取得したとき、前記制御部へ有用情報取得完了に関する通知処理を実行することを特徴とする請求項６に記載の端末装置。
8. 所定の操作に基づいて前記信号処理部に対して映像取り込み用のシャッター指示情報を出力する撮影ボタンを備え、
   前記撮影モード設定時に、
   前記撮影ボタンを操作してシャッター指示情報を前記信号処理部に出力すると、
   前記信号処理部の制御部は、
   光情報提供源が設けられた情報提供場所の映像を撮影して得られた画像情報と、前記受光及び復元により得られた有用情報とを対応付けてメモリに保存することを特徴とする請求項６に記載の端末装置。
9. 光情報提供源から光で提供される有用情報を処理する光情報処理方法であって、
   前記光情報提供源から発せられる有用情報に基づく光を受光して電気信号に変換するステップと、
   変換後の前記電気信号から前記有用情報を復元するステップと、
   前記光情報提供源が設けられた情報提供場所の映像を撮影するステップと、
   撮影により得られた前記映像を再生するための画像情報と前記受光及び復元により得られた有用情報とを対応付けて保存するステップとを有することを特徴とする光情報処理方法。
10. 光情報提供源から光で提供される有用情報を処理するコンピュータが読取り可能なプログラムであって、
    前記光情報提供源から発せられる有用情報に基づく光を受光して電気信号に変換するステップと、
    変換後の前記電気信号から前記有用情報を復元するステップと、
    前記光情報提供源が設けられた情報提供場所の映像を撮影するステップと、
    撮影により得られた前記映像を再生するための画像情報と前記受光及び復元により得られた有用情報とを対応付けて保存するステップとを有することを特徴とするプログラム。
11. 光情報提供源から光で提供される有用情報を処理するコンピュータが読取り可能なプログラムを記述した記録媒体であって、
    前記光情報提供源から発せられる有用情報に基づく光を受光して電気信号に変換するステップと、
    変換後の前記電気信号から前記有用情報を復元するステップと、
    前記光情報提供源が設けられた情報提供場所の映像を撮影するステップと、
    撮影により得られた前記映像を再生するための画像情報と前記受光及び復元により得られた有用情報とを対応付けて保存するステップとを有するプログラムを記述したことを特徴とする記録媒体。

Images