JP5477399B2 - 情報処理装置、情報処理方法及びプログラム、並びに情報処理システム - Google Patents

情報処理装置、情報処理方法及びプログラム、並びに情報処理システム Download PDF

Info

Publication number
JP5477399B2
JP5477399B2 JP2012016721A JP2012016721A JP5477399B2 JP 5477399 B2 JP5477399 B2 JP 5477399B2 JP 2012016721 A JP2012016721 A JP 2012016721A JP 2012016721 A JP2012016721 A JP 2012016721A JP 5477399 B2 JP5477399 B2 JP 5477399B2
Authority
JP
Japan
Prior art keywords
information
imaging
real space
unit
timing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012016721A
Other languages
English (en)
Other versions
JP2013157795A5 (ja
JP2013157795A (ja
Inventor
一記 喜多
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2012016721A priority Critical patent/JP5477399B2/ja
Priority to US13/740,583 priority patent/US20130194421A1/en
Priority to KR1020130006977A priority patent/KR101503761B1/ko
Priority to CN2013100336516A priority patent/CN103312957A/zh
Publication of JP2013157795A publication Critical patent/JP2013157795A/ja
Publication of JP2013157795A5 publication Critical patent/JP2013157795A5/ja
Application granted granted Critical
Publication of JP5477399B2 publication Critical patent/JP5477399B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G06V20/53Recognition of crowd images, e.g. recognition of crowd congestion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/103Static body considered as a whole, e.g. static pedestrian or occupant recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Description

本発明は、複数の管理対象者の中から所定の管理対象者の状態を簡単に把握することができる情報処理装置、情報処理方法及びプログラム、並びに情報処理システムに関する。
スポーツクラブや団体競技等のマネージャ、コーチ、監督等は、選手、生徒、児童等多数の者を、管理下におき、トレーニングしたり指導したりする。なお、以下、マネージャ、コーチ、監督等の管理する側の者を、「管理者」と呼ぶ。また、選手、生徒、児童等の管理される側の者を、「管理対象者」と呼ぶ。
管理者は、管理対象者の各種状態、例えば、健康や体調の状態、体力や運動能力の状態、スポーツ技能の進歩状態等を観察して評価する。
管理者は、管理対象者の状態が異常の場合には、管理対象者の監視や保護救助等も行う。このため、管理者は、管理対象者の状態の異常をいち早く発見して、適切な対処を取る必要がある。しかしながら、従来、管理者は、複数の管理対象者の状態を目視によりそれぞれ判断していたため、管理対象者の状態の異常を発見することは困難であった。さらにいえば、スポーツをしている最中の管理対象者は常に一定の場所に留まっているわけでないため、管理者は、管理対象者を特定することすら困難な場合もある。
そこで、先ずは、目視によらない管理対象者の自動的な特定が要求されており、当該要求に応えることが可能な技術として、特許文献1に記載の技術が存在する。即ち、管理者が撮影した被写体に関する情報を抽出して表示するという技術がある。
この特許文献1に記載の技術を用いることで、管理対象者をカメラで撮影して、管理対象者の保持する機器と交信することにより、機器からの交信結果から、管理対象者を検出することができるようになる。その結果、管理者は、特定した管理対象者の状態を目視で確認して、管理対象者の状態を知る。
特開2008−160879号公報
しかしながら、上述の特許文献1に記載の技術では、管理対象者の特定は可能であるが、管理対象者の状態を把握するためには、管理者の目視による確認を行わなければならない。
本発明は、このような状況に鑑みてなされたものであり、複数の管理対象者の中から所定の管理対象者の状態を簡単に把握することができることを目的とする。
上記目的を達成するため、本発明の一態様の情報処理装置は、実空間内の任意の領域を任意のタイミングで指定する指定手段と、前記実空間内に存在するオブジェクトに関する情報を取得する取得手段と、前記実空間内に存在する複数のオブジェクトのうち、前記指定手段により指定されたタイミングで前記指定手段により指定された領域内に存在するオブジェクトを検出する検出手段と、前記取得手段により取得可能な複数の情報のうち、前記検出手段により検出されたオブジェクトに対応する情報を選択して表示する選択表示手段と、前記実空間内の任意の領域を任意のタイミングで撮像する撮像手段とを備え、前記指定手段は、前記撮像手段により撮像が行われる各タイミングで前記撮像手段の撮影方向に対応する実空間内の領域を変化させながら順次指定を行い、前記取得手段は、前記各タイミングにおいて前記指定手段により指定される領域の外に存在するオブジェクトを含めて前記実空間内に存在する複数のオブジェクトに関する情報を取得可能であり、前記検出手段は、前記撮像手段により撮像される画像データ内における各オブジェクトの画像上の特徴に基づいて、前記撮像手段の撮影画角内に存在するオブジェクトを検出し、前記選択表示手段は、前記各タイミングにおいて前記取得手段により取得可能な複数の情報のうち、前記検出手段により検出されたオブジェクトに対応する情報を選択して表示することを特徴とする。
本発明によれば、複数の管理対象者の中から所定の管理対象者の状態を簡単に把握することができる。
本発明の情報処理システムの一実施形態としての状態提示システムの概略構成を示す図である。 図1の状態提示システムの撮像装置の表示部に表示される画像の一例を示す図である。 本発明の情報処理システムの一実施形態としての状態提示システムの概略構成の他の例を示す図である。 図3の状態提示システムの撮像装置の表示部に表示される画像の一例を示す図である。 本発明の一実施形態に係る撮像装置のハードウェアの構成を示すブロック図である。 図5の撮像装置の機能的構成のうち、状態提示処理を実行するための機能的構成を示す機能ブロック図である。 図6の機能的構成を有する図5の撮像装置が実行する状態提示処理の流れを説明するフローチャートである。 第2実施形態における状態提示システムの撮像装置の表示部に表示される画像を示す図である。 第2実施形態における撮像装置が実行する状態提示処理の流れを説明するフローチャートである。 第3実施形態における情報処理システムの一実施形態としての状態提示システムの概略構成を示す図である。 図10の状態提示システムの撮像装置の表示部に表示される画像の一例を示す図である。 第3実施形態における撮像装置が実行する状態提示処理の流れを説明するフローチャートである。 第3実施形態におけるセンサ機器が実行する状態提示処理の流れを説明するフローチャートである。
以下、本発明の実施形態として、第1実施形態乃至第3実施形態について、図面を用いてその順番に個別に説明する。
[第1実施形態]
図1は、本発明の情報処理システムの一実施形態としての状態提示システムの概略構成を示す図である。
図1に示すように、状態提示システムは、スポーツクラブや団体競技等の練習や試合が行われる場所に構築され、管理者(図示せぬ)が保有する撮像装置1と、n人(nは1以上の任意の整数値)の管理対象者OB1〜OBnの各々が保有するセンサ機器2−1〜2−nと、を備えている。
撮像装置1は、被写体を撮像する撮像機能の他、センサ機器2−1〜2−nの各々と通信する通信機能と、通信結果を適宜用いて各種情報処理を実行する情報処理機能と、撮像画像や、情報処理の結果を示す画像を表示する表示機能を少なくとも有している。
具体的には、撮像装置1は、通信機能により、センサ機器2−1〜2−nの各検出結果をそれぞれ受信し、情報処理機能により、各検出結果に基づいて管理対象者OB1〜OBnの各種状態を推定又は特定し、表示機能により、各種状態を示す画像を表示する。
撮像装置1は、各種状態を示す画像を、レンズ鏡筒が配置された面(以下「表面」と呼ぶ)と対向する面1a(以下「背面1a」と呼ぶ)に設けられた表示部(後述する図5の出力部18の一構成要素)に表示させる。
撮像装置1は、推定又は特定した各種状態を全て表示部に表示させることもできるが、そのうちの一部を選択的に表示部に表示させることもできる。例えば、撮像装置1は、管理対象者OB1〜OBnの中から選択された1人の状態のみを表示部に表示させることもできる。
この場合、状態を表示させる管理対象者OBk(kは、1〜nのうちの任意の整数値)の選択手法は、特に限定されないが、本実施形態では、管理対象者OB1〜OBnのうち撮像画像に被写体として含まれた者を、状態を表示させる管理対象者OBkとして選択するという手法が採用されている。
即ち、図示せぬ管理者は、管理対象者OB1〜OBnのうち状態の表示を所望する者が画角内に入るように、撮像装置1を移動させて、撮像機能によりその者を被写体として撮像させる。これにより、その者が被写体として含まれる撮像画像のデータが得られるので、撮像装置1は、情報処理機能により、当該撮像画像のデータから、被写体として含まれる者を特定して、状態を表示させる管理対象者OBkとして選択する。
すると、撮像装置1は、情報処理機能により、管理対象者OBkに保有されるセンサ機器2kの検出結果に基づいて、管理対象者OBkの状態を推定又は特定する。
そして、撮像装置1は、表示機能により、管理対象者OBkの状態を示す画像を表示部に表示させる。この場合、撮像装置1は、当該管理対象者OBkの状態を示す画像を、管理対象者OBkを被写体に含む撮像画像(ライブビュー画像でもよい)に重畳して表示部に表示させてもよい。なお、ここで、「ライブビュー画像」とは、メモリに一時的に記録された各撮像画像のデータを順次読み出して、当該撮像画像を、表示部に順次表示されている撮像画像でありスルー画像ともいう。
具体的には、図1の例では、管理対象者OB1〜OBnの各々は、マラソン競技中のランナーであり、センサ機器2−1〜2−nの各々を腕等に装着している。
センサ機器2−1〜2−nの各々は、管理対象者OB1〜OBnの各々のコンテクスト自体又は、コンテクストを推定又は特定可能な物理量を検出し、その検出結果を示す情報、即ちコンテクストに関する情報(以下、「コンテクスト情報」と呼ぶ)を無線通信により撮像装置1に送信する。
なお、本明細書においては、コンテクスト(context)とは、管理対象者の内的状態及び外的状態の全てを指す。管理対象者の内的状態とは、管理対象者の体調(身体状態)や、情動(気分や心理状態)等を指す。また、管理対象者の外的状態とは、管理対象者の空間的又は時間的な存在位置(時間的な存在位置とは、例えば、現在時刻を指す)の他、管理対象者の周囲の空間方向若しくは時間方向に分布する(又は、何れの方向にも分布する)所定の状態も指す。
ここで、以下、センサ機器2−1〜2nを個々に区別する必要がない場合、これらをまとめて、「センサ機器2」と単に呼ぶ。また、センサ機器2と呼んでいる場合には、その構成要素の符号についても、1〜nを省略して説明する。
また、センサ機器2とは、1つのコンテクスト等を検出するセンサのみならず、2以上のコンテクスト等を検出する1つのセンサや、2つ以上のセンサ(検出可能なコンテクストの種類や数は限定されない)からなるセンサ群も指す。
具体的には、例えば、外的なコンテクストを検出するセンサとしては、管理対象者の現在位置情報を検出するGPS(Global Possitioning System)、現在時刻を計時(検出)する時計、管理対象者の周辺に位置する人や物体を検出する無線通信機器等が採用可能である。また、例えば、内的なコンテクストとしては、脈拍、呼吸数、発汗、瞳孔の開き、疲労度、運動量等を検出するセンサが採用可能である。
図1の例では、撮像装置1は、二点鎖線で示した領域内をセンサ機器2からのコンテクスト情報の受信範囲として、当該受信範囲内に存在するセンサ機器2−1,2−2,2−3の各々からコンテクスト情報を受信している。
ただし、撮像装置1は、鎖線で示された実空間を画角の範囲内(撮像範囲内)として撮像し、その結果得られる撮像画像のデータから、主要被写体の管理対象者OB1を認識し、コンテクストの表示対象者として選択する。
そして、撮像装置1は、管理対象者OB1のコンテクストを示す画像(以下、「コンテクスト画像」と呼ぶ)を表示部に表示させる。
図2は、このようにして表示部に表示されるコンテクスト画像の一例を示している。
図2に示すように、管理対象者OB1についてのコンテクスト画像は、当該管理対象者OB1が写る撮像画像(ライブビュー画像でもよい)に重畳されて表示される。
管理対象者OB1のコンテクスト画像には、管理対象者OB1を特定する情報として、名前を示す「Aさん」が含まれており、管理対象者OB1のコンテクストとして、脈拍「98(bpm)」、血圧「121(mmHg)」、体温「36.8℃」、及び速度「15km/h」が含まれる。
管理者は、撮像装置1の表示部に表示された、図2に示すようなコンテクスト画像を視認することで、管理対象者OB1が写る撮像画像と、管理対象者OB1のコンテクストを示す文字情報とを視認することができ、その視認の結果から、管理対象者OB1のコンテクストを適切に把握することができる。
図3は、本発明の情報処理システムの一実施形態としての状態提示システムの概略構成の他の例を示す図である。
具体的には、図3の例では、図1の例と同様に、センサ機器2−1〜2−nの各々は、コンテクスト情報を無線通信により撮像装置1に送信する。
撮像装置1は、撮像した結果得られる撮像画像のデータから、主要被写体の管理対象者OB1を認識し、コンテクストの表示対象者として選択する。
この際、撮像装置1は、撮像画像のデータから認識された主要被写体の管理対象者OB1の他に、異常なコンテクストの管理対象者OBを認識して、コンテクストの表示対象者として選択する。
そして、撮像装置1は、管理対象者OB1のコンテクスト画像を表示部に表示させる。
図4は、このようにして表示部に表示されるコンテクスト画像の一例を示している。
図4に示すように、管理対象者OB1についてのコンテクスト画像は、管理対象者OB1が写る撮像画像(ライブビュー画像でもよい)に重畳されて表示される。
管理対象者OB1のコンテクスト画像には、異常な管理対象者OB2を特定する情報として、名前を示す「Bさん」が含まれており、異常な管理対象者OB2のコンテクストとして、体温「38℃」が含まれ、さらに、注意を喚起するメッセージを示す「!熱中症アラーム!」が含まれている。
管理者は、撮像装置1の表示部に表示された、図4に示すようなコンテクスト画像を視認することで、管理対象者OB1が写る撮像画像と、異常な管理対象者OB2のコンテクストを示す文字情報とを視認することができ、その視認の結果から、異常な管理対象者OB2を適切に把握することができる。
以上のような概念で構成される状態提示システムは、複数の管理対象者の中から所定の管理対象者の状態を簡単に把握できることができる機能を有する。
上記機能を有する状態提示システムは、撮像装置1と、複数のセンサ機器2−1〜2−nと、を備える。
撮像装置1は、複数のセンサ機器2−1〜2−nからのコンテクスト情報を受信する。そして、撮像装置1は、受信したセンサ機器2−1〜2−nからのコンテクスト情報の中から、撮像範囲内に映り込んだ管理対象者OBのコンテクスト情報を表示部等により、ユーザに提示する機能を有する。
一方、センサ機器2は、状態を把握したい管理対象者OBに装着させてオブジェクトの状態をコンテクスト情報として検出する機器であり、検出したコンテクスト情報を撮像装置1に送信する機能を有する。
図5、本発明の一実施形態に係る撮像装置1のハードウェアの構成を示すブロック図である。
撮像装置1は、例えばデジタルカメラとして構成される。
撮像装置1は、CPU(Central Processing Unit)11と、ROM(Read Only Memory)12と、RAM(Random Access Memory)13と、バス14と、入出力インターフェース15と、撮像部16と、入力部17と、出力部18と、記憶部19と、通信部20と、ドライブ21と、を備えている。
CPU11は、ROM12に記録されているプログラム、又は、記憶部19からRAM13にロードされたプログラムに従って各種の処理を実行する。
RAM13には、CPU11が各種の処理を実行する上において必要なデータ等も適宜記憶される。
CPU11、ROM12及びRAM13は、バス14を介して相互に接続されている。このバス14にはまた、入出力インターフェース15も接続されている。入出力インターフェース15には、撮像部16、入力部17、出力部18、記憶部19、通信部20及びドライブ21が接続されている。
撮像部16は、図示はしないが、光学レンズ部と、イメージセンサと、を備えている。
光学レンズ部は、被写体を撮影するために、光を集光するレンズ、例えばフォーカスレンズやズームレンズ等で構成される。
フォーカスレンズは、イメージセンサの受光面に被写体像を結像させるレンズである。ズームレンズは、焦点距離を一定の範囲で自在に変化させるレンズである。
光学レンズ部にはまた、必要に応じて、焦点、露出、ホワイトバランス等の設定パラメータを調整する周辺回路が設けられる。
イメージセンサは、光電変換素子や、AFE(Analog Front End)等から構成される。
光電変換素子は、例えばCMOS(Complementary Metal Oxide Semiconductor)型の光電変換素子等から構成される。光電変換素子には、光学レンズ部から被写体像が入射される。そこで、光電変換素子は、被写体像を光電変換(撮像)して画像信号を一定時間蓄積し、蓄積した画像信号をアナログ信号としてAFEに順次供給する。
AFEは、このアナログの画像信号に対して、A/D(Analog/Digital)変換処理等の各種信号処理を実行する。各種信号処理によって、ディジタル信号が生成され、撮像部16の出力信号として出力される。
このような撮像部16の出力信号を、以下、「撮像画像のデータ」と呼ぶ。撮像画像のデータは、CPU11等に適宜供給される。
入力部17は、各種釦等で構成され、ユーザの指示操作に応じて各種情報を入力する。
出力部18は、表示部や音声出力部等で構成され、画像や音声を出力する。
記憶部19は、ハードディスク或いはDRAM(Dynamic Random Access Memory)等で構成され、各種画像のデータを記憶する。
通信部20は、無線LAN(Local Area Network)やインターネットを含むネットワークを介して他の装置(図示せず)との間で行う通信を制御する。
ドライブ21には、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリ等よりなる、リムーバブルメディア31が適宜装着される。ドライブ21によってリムーバブルメディア31から読み出されたプログラムは、必要に応じて記憶部19にインストールされる。また、リムーバブルメディア31は、記憶部19に記憶されている画像のデータ等の各種データも、記憶部19と同様に記憶することができる。
図6は、このような撮像装置1の機能的構成のうち、状態提示処理を実行するための機能的構成を示す機能ブロック図である。
状態提示処理とは、複数のセンサ機器2−nから取得したコンテクスト情報の中から、撮像画像内から検出されたオブジェクトである管理対象者OBに対応するコンテクスト情報を、状態提示のために表示出力する一連の処理をいう。
撮像装置1が状態提示処理を実行する場合には、図6に示すように、主制御部41と、撮像制御部42と、画像取得部43と、オブジェクト検出部44と、コンテクスト情報取得部45と、コンテクスト画像生成部46と、出力制御部47と、記憶制御部48と、が機能する。
記憶部19の一領域として、センサ機器情報記憶部61と、特徴情報記憶部62と、コンテクスト情報記憶部63と、画像記憶部64とが設けられている。なお、センサ機器情報記憶部61乃至画像記憶部64が記憶部19の一領域として設けられているように構成したが、その他例えばリムーバブルメディア31の一領域として設けられるようにしてもよい。
センサ機器情報記憶部61は、センサ機器情報を記憶する。センサ機器情報は、センサ機器2―nから送信されたコンテクスト情報からセンサ機器を特定可能な情報及びセンサ機器が装着されたステータス対象者の情報(具体的には、ステータス対象者の名前の情報)である。
特徴情報記憶部62は、特徴情報を記憶する。特徴情報とは、撮像画像のデータに含まれる管理対象者OBを特定し得る特徴的な情報をいう。具体的には本実施形態では、管理対象者のゼッケン番号を示す情報や、管理対象者の顔の情報(顔画像のデータ)が特徴情報として採用される。即ち、特徴情報記憶部62に記憶される特徴情報は、各センサ機器2−nに対応した管理対象者OBのゼッケン番号や顔画像のデータである。
コンテクスト情報記憶部63は、センサ機器2から取得したコンテクスト情報を記憶し、取得したコンテクスト情報から管理対象者のステータスの状態を判定するためのコンテクスト情報の比較対象となる情報(ステータスの判定を行うための閾値)を記憶する。
画像記憶部64は、撮像画像のデータや撮像画像とコンテクスト情報が合成されたコンテクスト画像等の各種画像のデータを記憶する。
主制御部41は、各種汎用的な機能を実現する処理を含む各種処理を実行する。
撮像制御部42は、ユーザからの入力部17への入力操作を受けて、撮像部16の撮像動作を制御する。
画像取得部43は、撮像部16により撮像された撮像画像のデータを取得する。
オブジェクト検出部44は、取得された撮像画像を解析して特徴情報を検出する。即ち、オブジェクト検出部44は、撮像画像内に映り込んでいる被写体から、人の顔やゼッケン番号等の特徴情報となる情報を検出する。
そして、オブジェクト検出部44は、検出した情報が特徴情報記憶部62に記憶されている特徴情報と一致するか否かを判定する。
最終的に、オブジェクト検出部44は、一致する特徴情報記憶部62に記憶されている特徴情報をもってオブジェクトとして管理対象者OBを検出する。
コンテクスト情報取得部45は、センサ機器2から送信されるコンテクスト情報を受信取得する。また、コンテクスト情報取得部45は、受信したコンテクスト情報をコンテクスト情報記憶部64に記憶させる。
また、コンテクスト情報取得部45は、オブジェクト検出部44により、特徴情報記憶部62に記憶されている特徴情報に対応するセンサ機器2のコンテクスト情報を選択的に取得する。
また、コンテクスト情報取得部45は、取得したコンテクスト情報の値の判定を行う。即ち、取得したコンテクスト情報の状態を判定する。判定に際して、コンテクスト情報取得部45は、各コンテクスト情報の上限値、下限値、通常範囲、異常範囲、警告範囲等の基準値と比較する。
コンテクスト画像生成部46は、コンテクスト情報及び対応するセンサ機器2の情報に基づいて、取得したコンテクスト情報を撮像画像のデータに透過表示可能なコンテクスト画像のデータを生成したり、撮像画像にコンテクスト情報に重畳して合成したコンテクスト画像のデータを生成したりする。
出力制御部47は、生成されたコンテクスト画像のデータを出力部18に表示出力する制御を実行する。
記憶制御部48は、生成されたコンテクスト画像のデータを画像記憶部64に記憶させる制御を実行する。
これに対して、センサ機器2は、少なくとも装着した管理対象者OBの状態をセンシングしてコンテクスト検出することが可能な機能を有し、検出したコンテクスト情報を撮像装置1に送信することが可能な機能を有する。
このようなセンサ機器2は、センサ部111と、通信部112と、緊急通報情報生成部113と、撮像部114と、処理部115とを備える。
また、センサ機器2は、管理対象者OBが携帯したり装着したりすることができるウェアラブル機器として構成したり、ゼッケン、バッジ、帽子等の服飾品に添付可能な機器として構成される。
センサ部111は、自機の位置を測位可能なGPS位置センサ、心拍・体温・疲労度・運動量等を測定可能な生体センサ、速度や移動方向を計測可能な3軸加速度センサ・角速度センサ(ジャイロセンサ)、歩数センサ、振動センサ、ドップラー速度センサ等の運動状態センサ等の各種センサにより構成されている。
通信部112は、無線LANやインターネットを含むネットワークを介して撮像装置1との間で行う通信を制御する。通信部112からは、間欠的又は定期的に検出されたコンテクスト情報が送信される。
緊急通報情報生成部113は、検出したコンテクストした結果が異常である場合にその旨を緊急通報として通報するための情報を生成する。なお、緊急通報情報生成部113については、[第2実施形態]において詳述する。
撮像部114は、全天周(パノラマ)の動画像を撮像可能に構成される。撮像部114については、[第3実施形態]において詳述する。
処理部115は、画像補正等の画像処理を行ったり、センサ機器2の各種汎用的な機能を実現する処理を含む各種処理を実行したりする。処理部115については、[第3実施形態]において詳述する。
次に、以上のように構成される撮像装置1が実行する状態提示処理の流れを説明する。図7は、図6の機能的構成を有する図5の撮像装置1が実行する状態提示処理の流れを説明するフローチャートである。
状態提示処理は、ユーザによる入力部17への状態提示処理開始の操作を契機に開始される。
ステップS1において、主制御部41は、管理対象となるセンサ機器2−nを登録する。詳細には、主制御部41は、ユーザによる入力部17へのセンサ機器2−nの登録操作に応じて、登録するセンサ機器2−nの情報をセンサ機器情報記憶部61に記憶させる制御を実行する。
ステップS2において、主制御部41は、各センサ機器2−nを保持する選手(管理対象者)の情報を登録する。詳細には、主制御部41は、ユーザによる入力部17への選手(管理対象者)の情報の登録操作に応じて、登録する選手(管理対象者)の情報を特徴情報記憶部62に記憶させる制御を実行する。
選手(管理対象者)の情報は、具体的には、画像上で選手(管理対象者)を識別可能な特徴情報である選手(管理対象者)の顔の画像データや選手(管理対象者)のゼッケン番号のデータを用いる。
ステップS3において、オブジェクト検出部44は、各センサ機器2−nに登録された特徴情報を撮影画角内にから検出する。具体的には、オブジェクト検出部44は、撮像画像から特徴情報となる人の顔やゼッケン番号を検出する。
ステップS4において、オブジェクト検出部44は、該当する特徴情報があるか否かを判定する。具体的には、オブジェクト検出部44は、取得した特徴情報となる情報と、特徴情報記憶部62に記憶される特徴情報とを比較して、該当する特徴情報があるか否かを判定する。
該当する特徴情報がない場合には、ステップS4においてNOと判定され、処理はステップS8に進む。ステップS8以降の処理については後述する。
該当する特徴情報がある場合には、ステップS4においてYESと判定され、処理はステップS5に進む。
ステップS5において、オブジェクト検出部44は、該当する特徴情報に対応するセンサ機器2を特定する。具体的には、オブジェクト検出部44は、判定された特徴情報に基づいて、センサ機器情報記憶部61に記憶されているセンサ機器情報からセンサ機器2を特定する。
ステップS6において、コンテクスト情報取得部45は、該当するセンサ機器2からの各種コンテクスト情報を受信する。具体的には、コンテクスト情報取得部45は、センサ機器2から送信されている該当するセンサ機器からのコンテクスト情報を選択的に受信する。
ステップS7において、出力部18は、受信した各種コンテクスト情報を、対応する選手情報と共に画面に透過表示する。詳細には、出力部18は、出力制御部47により、受信した各種コンテクスト情報から生成されたコンテクスト画像を透過させて、撮像画像に表示させるように制御される。
その際、透過させる各種コンテクスト画像のデータは、コンテクスト画像生成部46により、コンテクスト情報記憶部64に記憶されているコンテクスト情報に基づいて生成される。
結果として、出力部18には、例えば、図2のような撮像画像にコンテクスト画像が透過したような画像が表示出力される。
ステップS8において、コンテクスト情報取得部45は、受信した各種コンテクスト情報から、各選手(各管理対象者)の体調の悪化の有無を判定する。具体的には、コンテクスト情報取得部45は、受信した各種コンテクスト情報から、体調の悪化と判断される異常な値が抽出された場合には、各選手(各管理対象者)における体調の悪化の有として判定する。
ステップS9において、コンテクスト情報取得部45は、体調が悪化した選手があるか否かを判断する。詳細には、コンテクスト情報取得部45は、ステップS8において体調の悪化と判断される異常な値を抽出された場合には、体調が悪化した選手ありと判断する。
体調が悪化した選手なしと判断された場合には、ステップS9においてNOと判断されて、処理はステップS11に進む。ステップS11以降の処理については後述する。
体調が悪化した選手ありと判断された場合には、ステップS9においてYESと判断されて、処理はステップS10に進む。
ステップS10において、出力部18は、体調が悪化した選手の選手情報と、各種コンテクスト情報を画面に透過表示する。詳細には、出力部18は、出力制御部47により、体調が悪化した選手の選手情報と、各種コンテクスト情報を透過させて、撮像画像に表示させるように制御される。
結果として、出力部18には、例えば、図4のような画像データが表示出力される。
ステップS11において、主制御部41は、撮影指示があったか否かを判断する。
詳細には、主制御部41は、撮影指示としてユーザによる撮影指示操作がなされたか否かを判断する。
撮影指示がない場合には、ステップS11においてNOと判断されて、処理はステップS3に戻る。
撮影指示があった場合には、ステップS11においてYESと判断されて、処理はステップS12に進む。
ステップS12において、記憶制御部48は、選手及び各種コンテクスト情報を撮像画像に合成して記録する。詳細には、記憶制御部48は、選手及び各種コンテクスト情報が合成された撮像画像データを画像記憶部64に記憶させる制御を実行する。その際、コンテクスト画像生成部46は、選手及び各種コンテクスト情報を撮像画像データに合成して、コンテクスト画像データを生成する。結果として、記憶制御部48は、コンテクスト画像生成部46により生成されたコンテクスト画像データを画像記憶部64に記憶させる制御を実行する。
ステップS13において、主制御部41は、終了したか否かを判断する。詳細には、主制御部41は、ユーザによる終了操作があったか否かを判断する。
終了していない、即ち、終了操作がない場合には、ステップS13においてNOと判断されて、処理はステップS3に戻る。
終了した、即ち、終了操作があった場合には、ステップS13においてYESと判断されて、状態提示処理は終了する。
[第2実施形態]
コンテクスト画像は、第1実施形態では主に内的状態を表示出力したが、特に第1実施形態の例に限定されず、任意の表示形態での表示出力が可能である。
そこで、第2実施形態では、コンテクスト画像は、外的状態、特に、管理対象者の空間的な存在位置の外的状態を表示する。
撮像装置1は、受信したコンテクスト情報のうち、GPSの位置情報を用いて、地図上に管理対象者を配置した画像をコンテクスト画像として生成し、表示出力する。
図8は、図1の状態提示システムの撮像装置の表示部に表示される画像の他の例を示す図である。
図8の例では、コンテクスト画像は、受信したコンテクスト情報に対応して、所定の地図上に管理対象者OB1乃至OB3が配置された画像として構成されている。このコンテクスト画像は、受信されたコンテクスト情報に基づいて、逐次更新され、最新の位置を示す画像として表示出力される。即ち、管理対象者OBが移動することにより、表示するコンテクスト画像の表示が変更される。
なお、図8の例では、撮像装置1は、二点鎖線で示した領域内をセンサ機器2からのコンテクスト情報の受信範囲として、当該受信範囲内に存在するセンサ機器2−1,2−2,2−3の各々からコンテクスト情報を受信していることを表示している。また、図8の例においては、撮像範囲内の管理対象者OB1はハッチングが施してある丸で表示し、撮像範囲外の管理対象者OB2,OB3は、実線の丸で表示してある。便宜上、コンテクスト情報を受信していない管理対象者OBnを破線の丸で表示した。
具体的には、撮像装置1においては、主制御部41により、地図画像情報及び自機の位置情報を取得する。
また、センサ機器2においては、センサ部111により取得したGPS値を含むコンテクスト情報を取得して、通信部112により送信する。
コンテクスト情報を受信した撮像装置1は、自機の位置に基づいて、撮像範囲内か否か等の表示種別を付したコンテクスト情報を地図画像情報上に配置したコンテクスト画像のデータを生成して、その後表示出力する。その結果、撮像装置1においては、図8に示すようなコンテクスト画像が表示されることになる。
また、第1実施形態では、撮像装置1は、受信したコンテクスト情報を判定して、撮像範囲外の体調が悪化した選手(管理対象者)を表示出力したが、第2実施形態では、検出したコンテクストを判定し、異常なコンテクストが検出された場合には、センサ機器2から緊急通報を撮像装置1に送信する。
具体的には、センサ機器2は、図5に示すように、さらに、緊急通報情報生成部113を備える。
緊急通報情報生成部113は、センサ部111により取得されたコンテクスト情報を判定して、異常なコンテクスト情報であると判定した場合には、緊急である旨、コンテクスト情報及び対応する管理対象者OBの名前等の情報を含んだ緊急通報情報を生成する。緊急通報情報生成部113により生成された緊急通報情報は、通信部112により撮像装置1に送信される。
緊急通報情報を受信した撮像装置1は、自機の位置及び地図情報を取得してコンテクスト情報を対応する管理対象者OBの名前と共に表示出力する。
図9は、図6の機能的構成を有する図5の撮像装置が実行する状態提示処理の流れの他の例を説明するフローチャートである。
ステップS31において、主制御部41は、管理対象となるセンサ機器2−nを登録する。詳細には、主制御部41は、ユーザによる入力部17へのセンサ機器2−nの登録操作に応じて、登録するセンサ機器情報をセンサ機器情報記憶部61に記憶させる制御を実行する。
ステップS32において、主制御部41は、自機の現在位置及び撮影方向を取得する。
ステップS33において、コンテクスト情報取得部45は、各センサ機器2−nから管理対象者OBの名前となる選手(管理対象者)情報及び位置情報を取得する。詳細には、コンテクスト情報取得部45は、各センサ機器2−nのセンサ部111により取得されたGPS値を含むコンテクスト情報を受信する。
ステップS34において、オブジェクト検出部44は、自機の現在位置及び撮影方向から撮影方向に存在するセンサ機器2を特定する。
ステップS35において、オブジェクト検出部44は、該当するセンサ機器2があるか否かを判定する。詳細には、オブジェクト検出部44は、撮影方向に存在するセンサ機器2があるか否かを判定する。
該当するセンサ機器2がない場合には、ステップS35においてNOであり、処理はステップS38に進む。ステップS38以降の処理は後述する。
該当するセンサ機器2がある場合には、ステップS35においてYESであり、処理はステップS36に進む。
ステップS36において、コンテクスト情報取得部45は、該当するセンサ機器2からの各種コンテクスト情報を受信する。具体的には、コンテクスト情報取得部45は、送信されているセンサ機器から、該当するセンサ機器2からのコンテクスト情報を選択的に受信する。
ステップS37において、出力部18は、受信した各種コンテクスト情報を、対応する選手情報と共に画面に透過表示する。詳細には、出力部18は、出力制御部47により、受信した各種コンテクスト情報から生成されたコンテクスト画像を透過させて、撮像画像に表示させるように制御される。結果として、出力部18には、例えば、図2のような画像データが表示出力される。
ステップS38において、主制御部41は、「選手位置表示画面」への切替指示があったか否かを判断する。詳細には、主制御部41は、ユーザにより入力部17に対して、「選手位置表示画面」の切替操作があったか否かを判断する。「選手位置表示画面」とは、図8に示すような、選手(管理対象者)の位置を地図上に模式的に配置した表示した画面である。
「選手位置表示画面」への切替指示がなかった場合には、ステップS38においてNOと判断され、処理はステップS41に進む。なお、ステップS41以降の処理は、後述する。
「選手位置表示画面」への切替指示があった場合には、ステップS38においてYESと判断され、処理はステップS39に進む。
ステップS39において、主制御部41は、受信した全てのセンサ機器2−nの現在位置を含む地図画像を取得する。
ステップS40において、出力部18は、取得した地図画像上に各センサ機器2−nの現在位置を識別して表示する。詳細には、出力部18は、出力制御部47により、地図画像上の対応する位置に各センサ機器2の現在位置をプロットして表示出力するように制御される。その結果、出力部18においては、図8に示すような画像が表示出力される。
この際、撮像方向に位置する選手(管理対象者)は、強調表示等の他の選手と識別可能な表示を行う。なお、図9の例では、ハッチングを施した丸として表示されている。
ステップS41において、コンテクスト情報取得部45は、何れかのセンサ機器2から緊急通報があったか否かを判断する。詳細には、コンテクスト情報取得部45は、受信したコンテクスト情報の中に、緊急通報情報が含まれていたか否かを判断する。
何れかのセンサ機器2からも緊急通報がなかった場合には、ステップS41においてNOであり、処理はステップS43に進む。なお、ステップS43以降の処理は、後述する。
センサ機器2から緊急通報があった場合には、ステップS41においてYESであり、処理はステップS42に進む。
ステップS42において、出力部18は、受信した緊急通報を対応する選手(管理対象者)情報と共に画面に透過表示する。詳細には、出力部18は、出力制御部47により、受信した緊急通報情報を含むコンテクスト情報から生成されたコンテクスト画像を透過させて、撮像画像に表示させるように制御される。
ステップS43において、主制御部41は、撮影指示があったか否かを判断する。
詳細には、主制御部41は、撮影指示としてユーザによる撮影指示操作がなされたか否かを判断する。
撮影指示がない場合には、ステップS43においてNOと判断されて、処理はステップS32に戻る。
撮影指示があった場合には、ステップS43においてYESと判断されて、処理はステップS44に進む。
ステップS44において、記憶制御部48は、選手及び各種コンテクスト情報を撮像画像に合成して記録する。詳細には、記憶制御部48は、選手及び各種コンテクスト情報が合成された撮像画像データを画像記憶部64に記憶させる制御を実行する。その際、コンテクスト画像生成部46は、選手及び各種コンテクスト情報を撮像画像データに合成して、コンテクスト画像のデータを生成する。結果として、記憶制御部48は、コンテクスト画像生成部46により生成されたコンテクスト画像のデータを画像記憶部64に記憶させる制御を実行する。
ステップS45において、主制御部41は、終了したか否かを判断する。詳細には、主制御部41は、ユーザによる終了操作があったか否かを判断する。
終了していない、即ち、終了操作がない場合には、ステップS45においてNOと判断されて、処理はステップS32に戻る。
終了した、即ち、終了操作があった場合には、ステップS45においてYESと判断されて、状態提示処理は終了する。
[第3実施形態]
コンテクスト画像は、第1実施形態では主に内的状態を表示出力したが、特に第1実施形態の例に限定されず、任意の表示形態での表示出力が可能である。
そこで、第3実施形態では、コンテクスト画像は、外的状態、特に、管理対象者の周囲の状態の外的状態を表示する。即ち、第3実施形態のコンテクスト画像は、管理対象者の周囲の状態として、周囲の映像を表示する。
図10は、本発明の情報処理システムの一実施形態としての状態提示システムの概略構成の他の例を示す図である。
図10の例では、管理対象者は、腕に装着したセンサ部111に加えて、頭に装着した撮像部114により、管理対象者の周囲の状態を撮影した映像のデータを生成する。
具体的には、映像のデータの生成は、センサ機器2において、図6に示すように、撮像部114と、処理部115とが機能することにより行われる。
撮像部114は、パノラマ(全天周)動画像を撮影可能に構成され、管理対象者の頭部に装着される。
処理部115は、本例では、管理対象者が走っており、撮影されたデータは、走りの状態に合わせて補間する必要があるため、画角の変化から管理対象者の動作に対応する動きの成分だけをキャンセルする画振れ補正を行う。
また、処理部115は、上述した画振れによりキャンセルする周期を特定するために、センサ部111により検出された加速度を用いて、加速度の周期から管理対象者の動作の周期を特定する。
センサ部111は、加速度を検出すると共に、生成した画振れ補正がされた動画像から、管理対象者の目線の状態を表示させるために、管理対象者の視線方向を検出する。
以上のように構成されるセンサ機器2は、撮像部114により撮像された動画像のデータを、画振れ補正して、管理対象者の視線方向の情報と共に通信部112を介して、撮像装置1に送信する。
その結果、撮像装置1は、受信した動画像のデータを表示出力すると共に、任意の視点として、管理対象者の目線からの動画像のデータも表示出力する。
そして、撮像装置1は、管理対象者OB1の撮像画像を含んだコンテクスト画像を表示部に表示させる。
図11は、図10の状態提示システムの撮像装置1の表示部に表示される画像の例を示す図である。
図11の例に示すように、撮像装置1においては、管理対象者の前方の撮像画像を表示する。
図12は、図6の機能的構成を有するセンサ機器2が実行する状態提示処理(センサ機器側状態提示処理)の流れの他の例を説明するフローチャートである。
ステップS61において、センサ部111は、加速度に関するコンテクスト情報を取得して逐次記録・送信する。詳細には、センサ部111は、加速度の情報が逐次取得され、撮像部114に送信される。
ステップS62において、撮像部114は取得された加速度の周期から選手(管理対象者)のランニング(動作)によって生じる映像揺れの周期を特定する。
ステップS63において、撮像部114は、パノラマ(全天周)動画撮影により動画像を取得する。
ステップS64において、処理部115は、取得した映像の画角変化を検出する。
ステップS65において、処理部115は、検出された画角変化の動きの成分のうち、選手(管理対象者)のランニング(動作)の周期に対応する動きの成分だけをキャンセルするように画振れ補正を行う。
ステップS66において、通信部112は、画振れ補正後のパノラマ(全天周)動画像を逐次記録・送信する。
ステップS67において、通信部112は、センサ部111によって検出された選手(管理対象者)の視線方向を逐次記録・送信する。
ステップS68において、処理部115は、終了したか否かを判断する。詳細には、主制御部41は、ユーザによる終了操作があったか否かを判断する。
終了していない、即ち、終了操作がない場合には、ステップS68においてNOと判断されて、処理はステップS61に戻る。
終了した、即ち、終了操作があった場合には、ステップS45においてYESと判断されて、センサ機器側状態提示処理は終了する。
図13は、図6の機能的構成を有する図5の撮像装置1が実行する状態提示処理(撮像装置側状態提示処理)の流れの他の例を説明するフローチャートである。
ステップS81において、主制御部41は、表示対象となるセンサ機器2を選択する。詳細には、主制御部41は、ユーザの入力部17への選択操作により、取得したコンテクスト情報から、表示可能なセンサ機器2から所定のセンサ機器2を選択する。
ステップS82において、コンテクスト情報取得部45は、選択したセンサ機器2からのコンテクスト情報を受信する。詳細には、コンテクスト情報取得部45は、選択したセンサ機器2から画振れ補正後の動画像のデータ、視線方向の情報、その他コンテクスト情報を受信する。
ステップS83において、主制御部41は、選手視線か任意視線か否かを選択する。詳細には、主制御部41は、ユーザの選択操作により選手視線か任意視線かの表示画像の選択をする。
選手視線が選択された場合には、処理はステップS84に進む。
ステップS84において、主制御部41は、受信した視線方向を採用する。その後処理は、ステップS86に進む。
一方、任意視線が選択された場合には、処理はステップS84に進む。
ステップS85において、主制御部41は、任意の視点方向を入力する。具体的には、主制御部41は、ユーザの入力部17への視点方向の指定操作により任意の視点方向を決定する。
ステップS86において、出力部18は、受信したパノラマ(全天周)動画像内の該当視点方向に対応する領域を切り出して表示出力する。
ステップS87において、出力部18は、切り出した動画像内にコンテクスト情報を透過表示する。
ステップS88において、主制御部41は、終了したか否かを判断する。詳細には、主制御部41は、ユーザによる終了操作があったか否かを判断する。
終了していない、即ち、終了操作がない場合には、ステップS88においてNOと判断されて、処理はステップS81に戻る。
終了した、即ち、終了操作があった場合には、ステップS88においてYESと判断されて、撮像装置側状態提示処理は終了する。
従って、状態提示システムでは、複数の管理対象者の中から所定の管理対象者の状態を簡単に把握することができる。
以上のように構成される撮像装置1は、オブジェクト検出部44と、コンテクスト情報取得部45と、出力制御部47とを備える。
オブジェクト検出部44は、複数のオブジェクトのうち実空間内の所定の領域へ進入したオブジェクトを検出する。
コンテクスト情報取得部45は、複数のオブジェクトのコンテクストに関するコンテクスト情報を取得する。
また、出力制御部47は、取得可能な複数のコンテクスト情報のうち、オブジェクト検出部44により検出されたオブジェクトに対応するコンテクスト情報を出力対象として選択して表示出力する制御を実行する。
このため、撮像装置1では、取得された複数のコンテクスト情報のうち、オブジェクト検出部44により検出されたオブジェクトに対応するコンテクスト情報を出力対象として選択して、コンテクスト情報取得部45により出力対象として選択されたオブジェクトに対応するコンテクスト情報を出力する。
従って、複数のオブジェクト(本実施形態においては、管理対象者)の中から所定の管理対象者の状態を簡単に把握することができる。
また、コンテクスト情報取得部45は、複数のオブジェクトの各々に装着されたセンサから各オブジェクトのコンテクストに関するコンテクスト情報を取得する。
このため、撮像装置1では、特定した複数のオブジェクトのコンテクスト情報を取得することができる。
オブジェクト検出部44は、前記実空間内の所定の領域に進入した人物をオブジェクトとして検出する。
コンテクスト情報取得部45は、複数の人物の各々に装着されたセンサから各人物の内的状態に関するコンテクスト情報を取得する。
このため、撮像装置1では、検出した人物の内的状態に関するコンテクスト情報(例えば、脈拍等)を取得することができる。
また、撮像装置1は、撮像部16を備える。
撮像部16は、実空間内の任意の領域を撮像する。
出力部18は、撮像部16により撮像された画像データを表示出力する。
オブジェクト検出部44は、撮像部16の撮影方向に対応する実空間内の所定の領域に進入したオブジェクトを逐次検出する。
出力制御部47は、オブジェクト検出手段により逐次検出されるオブジェクトに対応するコンテクスト情報を逐次選択して前記表示手段に逐次表示出力する。
従って、撮像装置1では、オブジェクトを撮像するだけで、オブジェクトを選択対象に指定することができるために、簡単かつ直感的に複数のオブジェクト(本実施形態においては、管理対象者)の中から所定の管理対象者の状態を簡単に把握することができる。
また、出力制御部47は、逐次選択されるコンテクスト情報を撮像される画像データと合成して出力部18に逐次表示する。
従って撮像装置1では、オブジェクトの外観の情報と共に、コンテクスト情報を同時に確認することができる。
オブジェクト検出部44は、撮像部16により撮像される画像データ内における各オブジェクトの画像上の特徴に基づいて、撮像部16の撮影画角内に進入したオブジェクトを検出する。
従って、撮像装置1では、例えば、選手のゼッケン等の特徴的な形からオブジェクトを検出することができる。
また、コンテクスト情報取得部45は、複数のオブジェクトの各々の位置情報を取得する。
オブジェクト検出部44は、撮像部16により画像データを撮像した際の撮影位置及び撮影方向に基づいて特定される実空間内の所定の領域内に、コンテクスト情報取得部45により取得される各オブジェクトの位置が含まれているか否かによって、実空間内の所定の領域へ進入したオブジェクトを検出する。
従って、撮像装置1では、取得した位置情報からでも選択的にオブジェクトの選択を行うことができるために、選択性を高めると共に、複数のオブジェクト(本実施形態においては、管理対象者)の中から所定の管理対象者の状態を簡単に把握することができる。
また、コンテクスト情報取得部45は、複数のオブジェクトに関するコンテクスト情報のうち、オブジェクト検出部44により検出されたオブジェクトに対応するコンテクスト情報を選択的に取得する。
従って、撮像装置1では、選択的に必要なコンテクスト情報を取得することができる。
また、主制御部41は、コンテクスト情報取得部45により取得されたコンテクスト情報に基づいて、オブジェクトの状態を判定する。
また、出力部18は、主制御部41によるオブジェクトの状態の判定結果を報知する。
従って、撮像装置1では、選択対象となっていないオブジェクトを状態に応じて積極的に出力させるように構成することができる。
また、主制御部41は、出力制御部47により選択して表示されているコンテクスト情報に対応するオブジェクト以外のオブジェクトの状態を判定する。
出力部18は、主制御部41によりオブジェクトの状態が所定の状態であると判定した場合には、選択表示の有無に係わらず、該オブジェクトの状態に関する情報を表示する。
従って、撮像装置1では、選択対象となっていないオブジェクトの状態が異常(具体的には、調子が悪い)等の所定の状態であると判定した場合には、積極的に出力させるように構成させることができる。
また、撮像装置1は、記憶部19と、記憶制御部48とを備える。
記憶部19はコンテクスト情報及び撮像部16により撮像される画像データを記憶する。
記憶制御部48は、コンテクスト情報取得部45により取得されたコンテクスト情報及び撮像部16により撮像される画像データを記憶部19に記憶させる制御を実行する。
従って、撮像装置1では、例えば、取得したコンテクスト情報及び撮像部16により撮像される画像データを履歴として記憶させておくことができる。
出力制御部47は、コンテクスト情報取得部45により取得したコンテクスト情報を、通信部20等を介して、外部機器に送信出力する制御を実行する。
従って、撮像装置1では、取得したコンテクスト情報を、外部機器に送信出力できるために、外部の記憶装置等に、コンテクスト情報の履歴を記憶させておくことができる。
なお、本発明は、上述の実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。
また、上述の実施形態では、撮像装置1又はセンサ機器2において、コンテクスト情報を記憶するように構成したがこれに限られない。コンテクスト情報は、例えば、撮像装置1又はセンサ機器2の通信機能を介して、外部装置に記憶させるように構成してもよい。
撮像装置1の利用者(コーチ等の管理者)以外と共有可能な外部装置に記憶させた場合には、管理対象者のIDや記録日等と対応付けてコンテクスト情報を記憶して履歴を生成することで、管理者以外の例えば、医療スタッフ、トレーニングスタッフ等も利用可能になり、当該履歴に基づいて、指導計画や治療計画の作成に役立てることができる。
また、上述の実施形態では、コンテクスト情報は、主に文字情報(数値や文字テキスト)で表示するように構成したがこれに限られず、例えば、グラフやアイコン等により模式的に表示するように構成してもよい。
また、上述の実施形態では、警報情報や異常値検出の提示に際しては、警報の旨を表示したり、通常の場合と異なる表示形態(例えば、色の変更や点滅等のアラート表示、アラートアイコンの表示)を変更したりするように構成したがこれに限られない。警報情報や異常値検出の提示に関しては、例えば、振動バイブレーションやアラート音等の表示とは異なるアラート報知を行うように構成してもよい。
また、上述の実施形態では、管理対象者としたがこれに限られない。状態を把握・管理する対象であればよく、例えば、車両や建造物等の人工物や樹木等の動植物の人以外の物体であってもよい。この際、車両であれば、例えば、車速、燃費、タイヤの摩耗等の車体の状態の他、オンボードカメラのような運転手の視点の画像等をコンテクスト情報として取得するように構成することができる。また、建造物の場合には、例えば、築年数や資材の劣化具合をコンテクスト情報として取得する他、所定の窓からの景色の画像等をコンテクスト情報として取得するように構成することができる。また、植物の場合には、土壌の水分や栄養の状態や周囲の温度等の生育環境、寿命等をコンテクスト情報として取得する他、太陽の位置を示す画像等をコンテクスト情報として取得するように構成することができる。
また、上述の実施形態では、コンテクスト情報を、コンテクスト情報取得部45により、選択的に取得するように構成したがこれに限られない。例えば、コンテクスト情報を一旦取得した後に、出力制御部47により、表示するコンテクスト情報を選択して表示出力するように構成してもよい。
また、上述の実施形態では、本発明が適用される撮像装置1は、デジタルカメラを例として説明したが、特にこれに限定されない。
例えば、本発明は、状態提示処理機能を有する電子機器一般に適用することができる。具体的には、例えば、本発明は、ノート型のパーソナルコンピュータ、プリンタ、テレビジョン受像機、ビデオカメラ、携帯型ナビゲーション装置、スマートフォン、携帯電話機、ポータブルゲーム機等に適用可能である。
上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。
換言すると、図6の機能的構成は例示に過ぎず、特に限定されない。即ち、上述した一連の処理を全体として実行できる機能が撮像装置1に備えられていれば足り、この機能を実現するためにどのような機能ブロックを用いるのかは特に図6の例に限定されない。
また、1つの機能ブロックは、ハードウェア単体で構成してもよいし、ソフトウェア単体で構成してもよいし、それらの組み合わせで構成してもよい。
一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。
コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。
このようなプログラムを含む記録媒体は、ユーザにプログラムを提供するために装置本体とは別に配布される図5のリムーバブルメディア31により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体等で構成される。リムーバブルメディア31は、例えば、磁気ディスク(フロッピディスクを含む)、光ディスク、又は光磁気ディスク等により構成される。光ディスクは、例えば、CD−ROM(Compact Disk−Read Only Memory),DVD(Digital Versatile Disk)等により構成される。光磁気ディスクは、MD(Mini−Disk)等により構成される。また、装置本体に予め組み込まれた状態でユーザに提供される記録媒体は、例えば、プログラムが記録されている図5のROM12や、図1の記憶部19に含まれるハードディスク等で構成される。
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的或いは個別に実行される処理をも含むものである。
また、本明細書において、システムの用語は、複数の装置や複数の手段などより構成される全体的な装置を意味するものとする。
以上、本発明のいくつかの実施形態について説明したが、これらの実施形態は、例示に過ぎず、本発明の技術的範囲を限定するものではない。本発明はその他の様々な実施形態を取ることが可能であり、さらに、本発明の要旨を逸脱しない範囲で、省略や置換等種々の変更を行うことができる。これら実施形態やその変形は、本明細書等に記載された発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
以下に、本願の出願当初の特許請求の範囲に記載された発明を付記する。
[付記1]
複数のオブジェクトのうち実空間内の所定の領域へ進入したオブジェクトを検出するオブジェクト検出手段と、
前記複数のオブジェクトのコンテクストに関するコンテクスト情報を取得するコンテクスト情報取得手段と、
前記コンテクスト情報取得手段により取得可能な複数のコンテクスト情報のうち、前記オブジェクト検出手段により検出されたオブジェクトに対応するコンテクスト情報を選択して表示する選択表示手段と、
を備えることを特徴とする情報処理装置。
[付記2]
前記コンテクスト情報取得手段は、前記複数のオブジェクトの各々に装着されたセンサから各オブジェクトのコンテクストに関するコンテクスト情報を取得することを特徴とする付記1に記載の情報処理装置。
[付記3]
前記オブジェクトは人物であり、
前記オブジェクト検出手段は、前記実空間内の所定の領域に進入した人物を検出し、
前記コンテクスト情報取得手段は、前記複数の人物の各々に装着されたセンサから各人物の内的状態に関するコンテクスト情報を取得することを特徴とする付記2に記載の情報処理装置。
[付記4]
実空間内の任意の領域を撮像する撮像手段と、
前記撮像手段により撮像される画像データを表示する表示手段と、
を備え、
前記オブジェクト検出手段は、前記撮像手段の撮影方向に対応する実空間内の所定の領域に進入したオブジェクトを逐次検出し、
前記選択表示手段は、前記オブジェクト検出手段により逐次検出されるオブジェクトに対応するコンテクスト情報を逐次選択して前記表示手段に逐次表示することを特徴とする付記1乃至3のいずれか1つに記載の情報処理装置。
[付記5]
前記選択表示手段は、逐次選択されるコンテクスト情報を前記撮像される画像データと合成して前記表示手段に逐次表示することを特徴とする付記4に記載の情報処理装置。
[付記6]
前記オブジェクト検出手段は、前記撮像手段により撮像される画像データ内における各オブジェクトの画像上の特徴に基づいて、前記撮像手段の撮影画角内に進入したオブジェクトを検出することを特徴とする付記4または5に記載の情報処理装置。
[付記7]
前記複数のオブジェクトの各々の位置情報を取得する位置情報取得手段と、を備え、
前記オブジェクト検出手段は、前記撮像手段により画像データを撮像した際の撮影位置及び撮影方向に基づいて特定される前記実空間内の所定の領域内に、前記位置情報取得手段により取得される各オブジェクトの位置が含まれているか否かによって、前記実空間内の所定の領域へ進入したオブジェクトを検出することを特徴とする付記4または5に記載の情報処理装置。
[付記8]
前記コンテクスト情報取得手段は、前記複数のオブジェクトに関するコンテクスト情報のうち、前記オブジェクト検出手段により検出されたオブジェクトに対応するコンテクスト情報を選択的に取得することを特徴とする付記1乃至7のいずれか1つに記載の情報処理装置。
[付記9]
前記コンテクスト情報取得手段により取得された前記コンテクスト情報に基づいて、前記オブジェクトの状態を判定する状態判定手段と、
前記状態判定手段による前記オブジェクトの状態の判定結果を報知する報知手段と、を備えることを特徴とする付記1乃至8のいずれか1つに記載の情報処理装置。
[付記10]
前記状態判定手段は、前記選択表示手段により選択して表示されているコンテクスト情報に対応するオブジェクト以外のオブジェクトの状態を判定し、
前記報知手段は、前記状態判定手段により前記オブジェクトの状態が所定の状態であると判定した場合には、前記選択表示手段による選択表示の有無に係わらず、該オブジェクトの状態に関する情報を表示することを特徴とする付記9に記載の情報処理装置。
[付記11]
前記報知手段は、前記状態判定手段により前記オブジェクトの状態が異常であると判定した場合には、警告を報知することを特徴とする付記9または10に記載の情報処理装置。
[付記12]
前記コンテクスト情報を記憶する第1の記憶手段と、
ユーザが指示するタイミングで、前記コンテクスト情報取得手段により取得された前記コンテクスト情報を前記第1の記憶手段に記憶させる制御を実行する第1の記憶制御手段と、
を備えることを特徴とする付記1乃至11のいずれか1つに記載の情報処理装置。
[付記13]
前記撮像手段により撮像される画像データを記憶する第2の記憶手段と、
ユーザが指示する撮影タイミングで、前記撮像手段により撮像される画像データと前記コンテクスト情報取得手段により取得されるコンテクスト情報とを対応付けて前記第2の記憶手段に記憶させる制御を実行する第2の記憶制御手段と、
を備えること特徴とする付記4乃至7のいずれか1つに記載の情報処理装置。
[付記14]
前記コンテクスト情報取得手段により取得した前記コンテクスト情報を、外部機器に送信出力する制御を実行する出力制御手段を備えることを特徴とする付記1乃至13のいずれか1つに記載の情報処理装置。
[付記15]
複数のオブジェクトのうち実空間内の所定の領域へ進入したオブジェクトを検出するオブジェクト検出ステップと、
前記複数のオブジェクトのコンテクストに関するコンテクスト情報を取得するコンテクスト情報取得ステップと、
前記コンテクスト情報取得ステップにより取得可能な複数のコンテクスト情報のうち、前記オブジェクト検出ステップにより検出されたオブジェクトに対応するコンテクスト情報を選択して表示する選択表示ステップと、
を備えることを特徴とする情報処理方法。
[付記16]
コンピュータを、
複数のオブジェクトのうち実空間内の所定の領域へ進入したオブジェクトを検出するオブジェクト検出手段、
前記複数のオブジェクトのコンテクストに関するコンテクスト情報を取得するコンテクスト情報取得手段、
前記コンテクスト情報取得手段により取得可能な複数のコンテクスト情報のうち、前記オブジェクト検出手段により検出されたオブジェクトに対応するコンテクスト情報を選択して表示する選択表示手段、
として機能させることを特徴とするプログラム。
[付記17]
複数のオブジェクトの状態を検出してコンテクスト情報を生成する複数のセンサ機器と、
前記複数のオブジェクトのうち実空間内の所定の領域への進入したオブジェクトを検出するオブジェクト検出手段と、
前記複数のセンサ機器において生成された前記複数のコンテクスト情報を取得するコンテクスト情報取得手段と、
前記コンテクスト情報取得手段により取得可能な複数のコンテクスト情報のうち、前記オブジェクト検出手段により検出されたオブジェクトに対応するコンテクスト情報を選択して表示する選択表示手段と、
を有する情報処理装置と、
を備えることを特徴とする情報処理システム。
1・・・撮像装置,2・・・センサ機器,11・・・CPU,12・・・ROM,13・・・RAM,14・・・バス,15・・・入出力インターフェース,16・・・撮像部,17・・・入力部,18・・・出力部,19・・・記憶部,20・・・通信部,21・・・ドライブ,31・・・リムーバブルメディア,41・・・主制御部,42・・・撮像制御部,43・・・画像取得部,44・・・オブジェクト検出部,45・・・コンテクスト情報取得部,46・・・コンテクスト画像生成部,47・・・出力制御部,48・・・記憶制御部,61・・・センサ機器情報記憶部,62・・・特徴情報記憶部,63・・・コンテクスト情報記憶部,64・・・画像記憶部,111・・・センサ部,112・・・通信部,113・・・緊急通報情報生成部,114・・・撮像部,115・・・処理部

Claims (18)

  1. 実空間内の任意の領域を任意のタイミングで指定する指定手段と、
    前記実空間内に存在するオブジェクトに関する情報を取得する取得手段と、
    前記実空間内に存在する複数のオブジェクトのうち、前記指定手段により指定されたタイミングで前記指定手段により指定された領域内に存在するオブジェクトを検出する検出手段と、
    前記取得手段により取得可能な複数の情報のうち、前記検出手段により検出されたオブジェクトに対応する情報を選択して表示する選択表示手段と、
    前記実空間内の任意の領域を任意のタイミングで撮像する撮像手段と
    を備え、
    前記指定手段は、前記撮像手段により撮像が行われる各タイミングで前記撮像手段の撮影方向に対応する実空間内の領域を変化させながら順次指定を行い、
    前記取得手段は、前記各タイミングにおいて前記指定手段により指定される領域の外に存在するオブジェクトを含めて前記実空間内に存在する複数のオブジェクトに関する情報を取得可能であり、
    前記検出手段は、前記撮像手段により撮像される画像データ内における各オブジェクトの画像上の特徴に基づいて、前記撮像手段の撮影画角内に存在するオブジェクトを検出し、
    前記選択表示手段は、前記各タイミングにおいて前記取得手段により取得可能な複数の情報のうち、前記検出手段により検出されたオブジェクトに対応する情報を選択して表示する
    ことを特徴とする情報処理装置。
  2. 前記取得手段は、前記複数のオブジェクトの各々に装着されたセンサから、前記指定手段により指定される領域の外に存在するオブジェクトを含めて、前記実空間内に存在する複数のオブジェクトに関する情報を同時に取得可能であり、
    前記選択表示手段は、前記複数のセンサから同時に取得可能な複数の情報のうち、前記検出手段により検出されたオブジェクトに装着されたセンサから取得される情報を選択して表示することを特徴とする請求項1に記載の情報処理装置。
  3. 前記オブジェクトは人物であり、
    前記取得手段は、前記実空間内に存在する複数の人物の各々に装着されたセンサから各人物の内的状態に関する情報を取得可能であり、
    前記検出手段は、前記実空間内に存在する複数の人物のうち、前記指定手段により指定されたタイミングで前記指定手段により指定された領域内に存在する人物を検出することを特徴とする請求項2に記載の情報処理装置。
  4. 前記撮像手段により撮像される画像データを表示する表示手段を更に備え、
    前記選択表示手段は、前記選択した情報を、前記撮像手段により撮像される画像データと合成して前記表示手段に表示することを特徴とする請求項1に記載の情報処理装置。
  5. 前記撮像手段は、撮影方向を変化させながら、この撮影方向に対応する撮影領域を逐次撮像し、
    前記表示手段は、前記撮像手段により逐次撮像される画像データを逐次表示し、
    前記検出手段は、前記撮像手段の撮影方向に対応する実空間内の所定領域に存在するオブジェクトを逐次検出し、
    前記選択表示手段は、前記検出手段により逐次検出されるオブジェクトに関する情報を、前記撮像手段により逐次撮像される画像データと合成して前記表示手段に逐次表示することを特徴とする請求項4に記載の情報処理装置。
  6. 前記複数のオブジェクトの各々の位置情報を取得する位置情報取得手段と、を備え、
    前記検出手段は、前記撮像手段により画像データを撮像した際の撮影位置及び撮影方向に基づいて特定される前記実空間内の所定の領域内に、前記位置情報取得手段により取得される各オブジェクトの位置が含まれているか否かによって、前記撮像手段の撮影方向に対応する実空間内の指定領域に存在するオブジェクトを検出することを特徴とする請求項1に記載の情報処理装置。
  7. 前記選択表示手段は、前記取得手段が取得した複数の情報のうち、前記検出手段により検出されたオブジェクトに対応する情報を選択して前記表示手段に表示するか、あるいは、前記実空間内に存在する複数のオブジェクトに関する情報のうち、前記検出手段により検出されたオブジェクトに対応する情報を前記取得手段に選択的に取得させ、この取得手段が取得した情報を前記表示手段に表示することを特徴とする請求項4に記載の情報処理装置。
  8. 前記取得手段は、各々のオブジェクトに装着されたセンサから、各オブジェクトの内的状態または外的状態を表すコンテクストに関するコンテクスト情報を取得可能であることを特徴とする請求項2に記載の情報処理装置。
  9. 前記取得手段は、各々の人物に装着されたセンサから、各人物の体調(身体状態)または情動(気分や心理状態)を含む内的状態を表すコンテクストに関するコンテクスト情報を取得可能であることを特徴とする請求項3に記載の情報処理装置。
  10. 前記人物の内的状態を表すコンテクストは、人物の脈拍、呼吸数、発汗、瞳孔の開き、疲労度、運動量のうちの少なくとも1つを含むことを特徴とする請求項9に記載の情報処理装置。
  11. 前記取得手段により取得された情報に基づいて、前記オブジェクトの状態を判定する状態判定手段と、
    前記状態判定手段による前記オブジェクトの状態の判定結果を報知する報知手段と、を備えることを特徴とする請求項1に記載の情報処理装置。
  12. 前記状態判定手段は、前記検出手段により検出されたオブジェクト以外のオブジェクトの状態を判定し、
    前記報知手段は、前記状態判定手段により前記オブジェクトの状態が所定の状態であると判定した場合には、前記選択表示手段による選択表示の有無に係わらず、該オブジェクトの状態に関する情報を表示することを特徴とする請求項11に記載の情報処理装置。
  13. 前記報知手段は、前記状態判定手段により前記オブジェクトの状態が異常であると判定した場合には、警告を報知することを特徴とする請求項12に記載の情報処理装置。
  14. 前記取得手段により取得された複数の情報を記憶する第1の記憶手段と、
    ユーザが指示するタイミングで、前記取得手段により取得された情報を前記第1の記憶手段に追加して記憶させる制御を実行する第1の記憶制御手段と、
    を備えることを特徴とする請求項1に記載の情報処理装置。
  15. 前記撮像手段により撮像される画像データを記憶する第2の記憶手段と、
    ユーザが指示する撮影タイミングで、前記撮像手段により撮像される画像データと前記取得手段により取得される情報とを対応付けて前記第2の記憶手段に記憶させる制御を実行する第2の記憶制御手段と、
    を備えること特徴とする請求項1に記載の情報処理装置。
  16. 実空間内の任意の領域を任意のタイミングで指定する指定ステップと、
    前記実空間内に存在するオブジェクトに関する情報を取得する取得ステップと、
    前記実空間内に存在する複数のオブジェクトのうち、前記指定ステップにより指定されたタイミングで前記指定ステップにより指定された領域内に存在するオブジェクトを検出する検出ステップと、
    前記取得ステップにより取得可能な複数の情報のうち、前記検出ステップにより検出されたオブジェクトに対応する情報を選択して表示する選択表示ステップと、
    前記実空間内の任意の領域を任意のタイミングで撮像手段により撮像する撮像ステップと
    を含み、
    前記指定ステップは、前記撮像ステップにより撮像が行われる各タイミングで前記撮像手段の撮影方向に対応する実空間内の領域を変化させながら順次指定を行い、
    前記取得ステップは、前記各タイミングにおいて前記指定ステップにより指定される領域の外に存在するオブジェクトを含めて前記実空間内に存在する複数のオブジェクトに関する情報を取得可能であり、
    前記検出ステップは、前記撮像ステップにより撮像される画像データ内における各オブジェクトの画像上の特徴に基づいて、前記撮像手段の撮影画角内に存在するオブジェクトを検出し、
    前記選択表示ステップは、前記各タイミングにおいて前記取得ステップにより取得可能な複数の情報のうち、前記検出ステップにより検出されたオブジェクトに対応する情報を選択して表示する
    ことを特徴とする情報処理方法。
  17. コンピュータを、
    実空間内の任意の領域を任意のタイミングで指定する指定手段、
    前記実空間内に存在するオブジェクトに関する情報を取得する取得手段、
    前記実空間内に存在する複数のオブジェクトのうち、前記指定手段により指定されたタイミングで前記指定手段により指定された領域内に存在するオブジェクトを検出する検出手段、
    前記取得手段により取得可能な複数の情報のうち、前記検出手段により検出されたオブジェクトに対応する情報を選択して表示する選択表示手段、
    前記実空間内の任意の領域を任意のタイミングで撮像する撮像手段
    として機能させ、
    前記指定手段は、前記撮像手段により撮像が行われる各タイミングで前記撮像手段の撮影方向に対応する実空間内の領域を変化させながら順次指定を行い、
    前記取得手段は、前記各タイミングにおいて前記指定手段により指定される領域の外に存在するオブジェクトを含めて前記実空間内に存在する複数のオブジェクトに関する情報を取得可能であり、
    前記検出手段は、前記撮像手段により撮像される画像データ内における各オブジェクトの画像上の特徴に基づいて、前記撮像手段の撮影画角内に存在するオブジェクトを検出し、
    前記選択表示手段は、前記各タイミングにおいて前記取得手段により取得可能な複数の情報のうち、前記検出手段により検出されたオブジェクトに対応する情報を選択して表示する
    ことを特徴とするプログラム。
  18. 複数のセンサ機器と情報処理装置とを備える情報処理システムであって、
    前記センサ機器は、
    複数のオブジェクトの状態を検出してコンテクスト情報を生成し、
    前記情報処理装置は、
    実空間内の任意の領域を任意のタイミングで指定する指定手段と、
    前記実空間内に存在するオブジェクトに関する情報を取得する取得手段と、
    前記複数のオブジェクトのうち実空間内の所定の領域への進入したオブジェクトを検出する検出手段と、
    前記複数のセンサ機器において生成された前記複数のコンテクスト情報を取得する情報取得手段と、
    前記情報取得手段により取得可能な複数のコンテクスト情報のうち、前記検出手段により検出されたオブジェクトに対応するコンテクスト情報を選択して表示する選択表示手段と、
    前記実空間内の任意の領域を任意のタイミングで撮像する撮像手段と、
    を有し、
    前記指定手段は、前記撮像手段により撮像が行われる各タイミングで前記撮像手段の撮影方向に対応する実空間内の領域を変化させながら順次指定を行い、
    前記取得手段は、前記各タイミングにおいて前記指定手段により指定される領域の外に存在するオブジェクトを含めて前記実空間内に存在する複数のオブジェクトに関する情報を取得可能であり、
    前記検出手段は、前記撮像手段により撮像される画像データ内における各オブジェクトの画像上の特徴に基づいて、前記撮像手段の撮影画角内に存在するオブジェクトを検出し、
    前記選択表示手段は、前記各タイミングにおいて前記取得手段により取得可能な複数の情報のうち、前記検出手段により検出されたオブジェクトに対応する情報を選択して表示する
    ことを特徴とする情報処理システム。
JP2012016721A 2012-01-30 2012-01-30 情報処理装置、情報処理方法及びプログラム、並びに情報処理システム Active JP5477399B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2012016721A JP5477399B2 (ja) 2012-01-30 2012-01-30 情報処理装置、情報処理方法及びプログラム、並びに情報処理システム
US13/740,583 US20130194421A1 (en) 2012-01-30 2013-01-14 Information processing apparatus, information processing method, and recording medium, for displaying information of object
KR1020130006977A KR101503761B1 (ko) 2012-01-30 2013-01-22 오브젝트의 정보를 표시하는 정보 처리 장치, 정보 처리 방법 및 기록 매체
CN2013100336516A CN103312957A (zh) 2012-01-30 2013-01-29 显示对象的信息的信息处理设备、信息处理方法以及记录介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012016721A JP5477399B2 (ja) 2012-01-30 2012-01-30 情報処理装置、情報処理方法及びプログラム、並びに情報処理システム

Publications (3)

Publication Number Publication Date
JP2013157795A JP2013157795A (ja) 2013-08-15
JP2013157795A5 JP2013157795A5 (ja) 2013-11-07
JP5477399B2 true JP5477399B2 (ja) 2014-04-23

Family

ID=48869880

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012016721A Active JP5477399B2 (ja) 2012-01-30 2012-01-30 情報処理装置、情報処理方法及びプログラム、並びに情報処理システム

Country Status (4)

Country Link
US (1) US20130194421A1 (ja)
JP (1) JP5477399B2 (ja)
KR (1) KR101503761B1 (ja)
CN (1) CN103312957A (ja)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5994306B2 (ja) 2012-03-15 2016-09-21 ソニー株式会社 情報処理装置、情報処理システムおよびプログラム
JP5867432B2 (ja) * 2013-03-22 2016-02-24 ソニー株式会社 情報処理装置、記録媒体および情報処理システム
JP2015060257A (ja) * 2013-09-17 2015-03-30 コーデトーイズ株式会社 競技者の参加資格判定システム、及び競技者の参加資格判定サーバ装置
JP6255944B2 (ja) 2013-11-27 2018-01-10 株式会社リコー 画像解析装置、画像解析方法及び画像解析プログラム
JP6338437B2 (ja) * 2014-04-30 2018-06-06 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
US10074401B1 (en) * 2014-09-12 2018-09-11 Amazon Technologies, Inc. Adjusting playback of images using sensor data
JP2018022932A (ja) * 2014-12-08 2018-02-08 株式会社ジャパンディスプレイ 表示システム及び表示装置
US9473687B2 (en) 2014-12-23 2016-10-18 Ebay Inc. Modifying image parameters using wearable device input
JP2016135172A (ja) * 2015-01-23 2016-07-28 株式会社エイビット 生体情報の通信監視システム
US10142538B2 (en) * 2015-02-24 2018-11-27 Redrock Microsystems, Llc LIDAR assisted focusing device
KR102655625B1 (ko) * 2015-11-24 2024-04-09 삼성전자주식회사 피사체의 근접 여부에 따라 촬영 장치를 제어하는 방법 및 촬영 장치.
JP6393360B2 (ja) * 2016-05-11 2018-09-19 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 撮影制御方法、撮影制御システム及び撮影制御サーバ
EP3312762B1 (en) * 2016-10-18 2023-03-01 Axis AB Method and system for tracking an object in a defined area
JP6791082B2 (ja) * 2017-09-27 2020-11-25 株式会社ダイフク 監視システム
JP6870584B2 (ja) 2017-11-13 2021-05-12 トヨタ自動車株式会社 救援システムおよび救援方法、ならびにそれに使用されるサーバおよびプログラム
JP7000805B2 (ja) 2017-11-13 2022-01-19 トヨタ自動車株式会社 動物救援システムおよび動物救援方法、ならびにそれに使用されるサーバおよびプログラム
JP6977492B2 (ja) 2017-11-13 2021-12-08 トヨタ自動車株式会社 救援システムおよび救援方法、ならびにそれに使用されるサーバおよびプログラム
JP7052305B2 (ja) * 2017-11-13 2022-04-12 トヨタ自動車株式会社 救援システムおよび救援方法、ならびにそれに使用されるサーバおよびプログラム
WO2019176922A1 (ja) * 2018-03-13 2019-09-19 日本電気株式会社 視聴支援装置、視聴支援方法及びプログラム
JP7263791B2 (ja) * 2019-01-17 2023-04-25 大日本印刷株式会社 表示システム及び撮影画像表示方法
JP7212862B2 (ja) * 2019-03-20 2023-01-26 京セラドキュメントソリューションズ株式会社 画像処理装置、画像処理方法、画像提供システム及び画像処理プログラム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3146150B2 (ja) * 1996-04-01 2001-03-12 スター精密株式会社 監視カメラシステム
US7151454B2 (en) * 2003-01-02 2006-12-19 Covi Technologies Systems and methods for location of objects
US7362219B2 (en) * 2004-07-28 2008-04-22 Canon Kabushiki Kaisha Information acquisition apparatus
JP2006222825A (ja) * 2005-02-14 2006-08-24 Konica Minolta Photo Imaging Inc 撮像装置
JP2006238220A (ja) * 2005-02-25 2006-09-07 Fuji Photo Film Co Ltd 撮像装置、撮像方法、及びプログラム
JP2008167225A (ja) * 2006-12-28 2008-07-17 Nikon Corp 光学装置および情報配信/受信システム
JP2008289676A (ja) * 2007-05-24 2008-12-04 Sysmex Corp 患者異常通知システム
JP5429462B2 (ja) * 2009-06-19 2014-02-26 株式会社国際電気通信基礎技術研究所 コミュニケーションロボット
JP5499762B2 (ja) * 2010-02-24 2014-05-21 ソニー株式会社 画像処理装置、画像処理方法、プログラム及び画像処理システム

Also Published As

Publication number Publication date
US20130194421A1 (en) 2013-08-01
CN103312957A (zh) 2013-09-18
JP2013157795A (ja) 2013-08-15
KR20130088059A (ko) 2013-08-07
KR101503761B1 (ko) 2015-03-18

Similar Documents

Publication Publication Date Title
JP5477399B2 (ja) 情報処理装置、情報処理方法及びプログラム、並びに情報処理システム
US11250247B2 (en) Information processing device, information processing system, and program
EP3229459B1 (en) Information processing device, information processing method and program
US7183909B2 (en) Information recording device and information recording method
CN103869468B (zh) 信息处理设备
US9198611B2 (en) Information processing device, image output method, and program
CN103246543B (zh) 显示控制设备,显示控制方法和程序
JP2017200208A5 (ja) 撮像装置、情報取得システム、情報検索サーバ、及びプログラム
EP3060317B1 (en) Information processing device, recording medium, and information processing method
JP2009094725A5 (ja)
JP2013157795A5 (ja)
JP6379424B2 (ja) 画像記録装置
TW201509494A (zh) 運動圖像化系統與方法
JP2015028686A (ja) ソーシャルタイムラインを作成する方法、ソーシャル・ネットワーク・サービスシステム、サーバー、端末並びにプログラム
KR20180057543A (ko) 화상 처리 장치, 해석 시스템, 화상 처리 방법 및 프로그램
JP6375597B2 (ja) ネットワークシステム、サーバー、プログラム、並びにトレーニング支援方法
JP6241495B2 (ja) トレーニング支援装置、トレーニング支援方法、及びプログラム
JP6638772B2 (ja) 撮像装置、画像記録方法及びプログラム
JP6435595B2 (ja) トレーニング支援システム、サーバー、端末、カメラ、方法並びにプログラム
CN110998673A (zh) 信息处理装置、信息处理方法和计算机程序
JP2017221350A (ja) 支援情報提供装置、支援情報提供システム、支援情報提供方法及び支援情報提供プログラム
JP7287715B1 (ja) 補助システム、補助方法およびプログラム
JP6451110B2 (ja) 撮影装置、画像生成方法及びプログラム
JP2020099592A (ja) 端末装置、撮像システムおよびコンピュータプログラム
JP2018061106A (ja) 情報配信方法および情報配信システム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130917

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130917

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20130918

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20131003

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131015

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131216

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140114

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140127

R150 Certificate of patent or registration of utility model

Ref document number: 5477399

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150