JP2005198210A - データ処理装置 - Google Patents
データ処理装置 Download PDFInfo
- Publication number
- JP2005198210A JP2005198210A JP2004004823A JP2004004823A JP2005198210A JP 2005198210 A JP2005198210 A JP 2005198210A JP 2004004823 A JP2004004823 A JP 2004004823A JP 2004004823 A JP2004004823 A JP 2004004823A JP 2005198210 A JP2005198210 A JP 2005198210A
- Authority
- JP
- Japan
- Prior art keywords
- data
- moving body
- input
- unit
- output
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Traffic Control Systems (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
【課題】移動体内で画像や音声データ等のデータ通信を行い、移動体内の状態を容易に把握できるデータ処理装置を提供する。
【解決手段】移動体中の所定位置の座席毎に、少なくとも画像データおよび音声データのいずれかのデータを入力する入力手段としての操作入力装置300、撮影装置400、および音声録音装置700と、少なくとも画像データおよび音声データのいずれかのデータを出力する出力手段としての映像出力装置500、音声出力装置800とを設け、演算処理部100(制御部)が、入力手段から入力されたデータおよび予め登録された登録データに基づいて識別処理を行い、識別処理の結果および少なくとも移動体中の入力手段の位置を示す移動体中位置情報tとを関連付けて移動体中位置識別情報DAtを生成し、生成した移動体中位置識別情報DAtを出力手段に出力させる。
【選択図】図1
【解決手段】移動体中の所定位置の座席毎に、少なくとも画像データおよび音声データのいずれかのデータを入力する入力手段としての操作入力装置300、撮影装置400、および音声録音装置700と、少なくとも画像データおよび音声データのいずれかのデータを出力する出力手段としての映像出力装置500、音声出力装置800とを設け、演算処理部100(制御部)が、入力手段から入力されたデータおよび予め登録された登録データに基づいて識別処理を行い、識別処理の結果および少なくとも移動体中の入力手段の位置を示す移動体中位置情報tとを関連付けて移動体中位置識別情報DAtを生成し、生成した移動体中位置識別情報DAtを出力手段に出力させる。
【選択図】図1
Description
本発明は、例えば自動車、バス、電車、飛行機、船舶等の移動体に搭載され、画像データや音声データ等のデータ通信を行うデータ処理装置に関する。
例えば自動車内で、カメラ、マイク、モニタ、およびスピーカ等を用いて会話を行うことができる車載テレビ電話装置が知られている(例えば、特許文献1参照)。
特開2003−54323号公報
例えば自動車、バス、電車、飛行機、船舶等の移動体に複数のユーザが乗車や搭乗を行い、複数のユーザそれぞれが座席に着座した状態で他のユーザと画像や音声により会話を楽しみたいという要望がある。また、その際、ユーザが移動体内の他のユーザの座席位置を知りたい場合や、移動体の責任者等が各座席の状態を知りたいという要望がある。
本発明は、かかる事情に鑑みてなされたものであり、その目的は、移動体内で画像や音声データ等のデータ通信を行い、移動体内の状態を容易に把握できるデータ処理装置を提供することにある。
前記目的を達成するために、本発明のデータ処理装置は、移動体に搭載されるデータ処理装置であって、少なくとも画像データおよび音声データのいずれかのデータを入力する入力手段と、少なくとも画像データおよび音声データのいずれかのデータを出力する出力手段と、前記入力手段から入力されたデータおよび予め登録された登録データに基づいて識別処理を行い、前記識別処理の結果および少なくとも前記移動体中の入力手段の位置を示す移動体中位置情報とを関連付けて移動体中位置識別情報を生成し、前記生成した移動体中位置識別情報を前記出力手段に出力させる制御手段とを有する。
好適には、前記入力手段は、前記移動体の少なくとも速度および加速度のいずれかを示す移動体情報を取得する移動体情報取得手段を有し、前記制御手段は、前記移動体情報取得手段が取得した移動体情報に基づいて、前記移動体が移動時に前記識別処理の結果および少なくとも前記移動体中の入力手段の位置を示す移動体中位置情報とを関連付けて前記移動体中位置識別情報を生成する。
本発明のデータ処理装置によれば、制御手段は、移動体情報取得手段の移動体情報に基づいて移動体が移動中に、入力手段から入力されたデータおよび予め登録された登録データに基づいて識別処理を行い、識別処理の結果および少なくとも移動体中の入力手段の位置を示す移動体中位置情報とを関連付けて移動体中位置識別情報を生成し、生成した移動体中位置識別情報を出力手段に出力させる。
本発明によれば、移動体内で画像や音声データ等のデータ通信を行い、移動体内の状態を容易に把握できるデータ処理装置を提供することができる。
本発明の一実施形態に係る、移動体に搭載されたデータ処理装置を図面を参照しながら説明する。
本実施形態に係るデータ処理装置が搭載される移動体として、例えば自動車、バス、電車、飛行機、船舶等の複数のユーザが移動体中の所定位置に設けられた座席に着座可能で、各座席毎に入力手段および出力手段が設けられている移動体を例示する。
本実施形態に係るデータ処理装置が搭載される移動体として、例えば自動車、バス、電車、飛行機、船舶等の複数のユーザが移動体中の所定位置に設けられた座席に着座可能で、各座席毎に入力手段および出力手段が設けられている移動体を例示する。
図1は、本発明に係るデータ処理装置の一実施形態のハードウェアの構成図である。
本実施形態に係るデータ処理装置1は、演算処理部100、2次記憶装置(外部記憶装置)200、操作入力装置300、撮影装置(人物撮影装置)400、映像出力装置500、端末間通信装置600、音声録音装置700、音声出力装置800、および移動体情報取得装置(移動体情報装置)900を主構成要素として有する。
本実施形態に係るデータ処理装置1は、演算処理部100、2次記憶装置(外部記憶装置)200、操作入力装置300、撮影装置(人物撮影装置)400、映像出力装置500、端末間通信装置600、音声録音装置700、音声出力装置800、および移動体情報取得装置(移動体情報装置)900を主構成要素として有する。
操作入力装置300、撮影装置400、音声録音装置700、および移動体情報取得装置900は、本発明に係る、少なくとも画像データおよび音声データのいずれかのデータを入力する入力手段に相当する。
映像出力装置500および音声出力装置800は、本発明に係る、少なくとも画像データおよび音声データのいずれかのデータを出力する出力手段に相当する。
映像出力装置500および音声出力装置800は、本発明に係る、少なくとも画像データおよび音声データのいずれかのデータを出力する出力手段に相当する。
詳細には、移動体情報取得装置900は本発明に係る移動体情報取得手段に相当し、撮影装置400は本発明に係る撮影手段に相当し、音声録音装置700は、本発明に係る音声データ生成手段に相当し、端末間通信装置600は本発明に係る通信手段に相当する。
また、演算処理部100は本発明に係る制御手段に相当する。
また、演算処理部100は本発明に係る制御手段に相当する。
演算処理部100は、データ処理装置1の各構成要素を制御する。
演算処理部100は、ハードウェア的には例えば図1に示すように、CPU(Central Processing Unit )101、RAM(Random Access Memory)102、ROM(Read Only Memory)103、不揮発性メモリ104、およびインタフェース部105を有する。
演算処理部100は、ハードウェア的には例えば図1に示すように、CPU(Central Processing Unit )101、RAM(Random Access Memory)102、ROM(Read Only Memory)103、不揮発性メモリ104、およびインタフェース部105を有する。
CPU101は、例えばROM103等に記憶されたプログラムを、RAM102をワークエリアとして実行することによりデータ処理、およびシステムの制御を行う。
不揮発性メモリ104は、例えば書き換え可能かつ、データ処理装置1の電源供給が途絶えた場合であっても、データを保持可能なメモリである。不揮発性メモリ104は、例えば電池により保持データをバックアップするSRAMやフラッシュメモリにより構成される。
不揮発性メモリ104は、例えば書き換え可能かつ、データ処理装置1の電源供給が途絶えた場合であっても、データを保持可能なメモリである。不揮発性メモリ104は、例えば電池により保持データをバックアップするSRAMやフラッシュメモリにより構成される。
インタフェース部105は、CPU101の制御により周辺装置、例えば2次記憶装置(外部記憶装置)200、操作入力装置300、撮影装置400、映像出力装置500、端末間通信装置600、音声録音装置700、音声出力装置800、および移動体情報装置900等とデータ通信を行うインタフェースである。
2次記憶装置(外部記憶装置)200は、例えば、移動体中のユーザの着座表(移動体中位置識別情報DAt)に関するデータや、ユーザの識別情報(登録データ)DA、地図データや、観光地や各種施設に関する情報を示すPOI(Point of Interest )情報、検索情報、音楽/映像コンテンツデータ等のデータを保持する記憶装置であり、演算処理部100の制御によりデータの読み出しや書き込みを行う。
2次記憶装置200は、例えば具体的にはCD−ROM(Compact Disc−Read Only Memory)やDVD−ROM(Digital Versatile Disc-ROM)、DVD−RAM等の光ディスク装置やハードディスクドライブ等の磁気記録装置等である。
2次記憶装置200は、例えば具体的にはCD−ROM(Compact Disc−Read Only Memory)やDVD−ROM(Digital Versatile Disc-ROM)、DVD−RAM等の光ディスク装置やハードディスクドライブ等の磁気記録装置等である。
操作入力装置300は、例えばユーザの操作に応じた信号を演算処理部100に出力する。本実施形態では操作入力装置300は、例えばいわゆるタッチパネル装置であり、ユーザによる操作に応じた信号を演算処理部100に出力する。また、操作入力装置300に、例えば操作スイッチやリモコン等を設けてもよい。
撮影装置(人物撮影装置)400は、演算処理部100の制御により、被写界深度を設定可能で撮影結果を基に画像データを生成し、例えばユーザを撮影して画像データを生成し、演算処理部100に出力する。また、移動体が移動時には被写界深度が所定値より小さくなるように設定される。
撮影装置(人物撮影装置)400は、演算処理部100の制御により、被写界深度を設定可能で撮影結果を基に画像データを生成し、例えばユーザを撮影して画像データを生成し、演算処理部100に出力する。また、移動体が移動時には被写界深度が所定値より小さくなるように設定される。
図2は、図1に示したデータ処理装置の撮影装置の制御を説明するための図である。
撮影装置400は、例えば図2に示すように、光学系401、光学系駆動部402、アイリス403、アイリス駆動部404、撮像素子405、センサ部406、および発光部407を主構成要素として有する。
アイリス403およびアイリス駆動部404は本発明に係る絞りを調節する絞り調節手段に相当する。センサ部406は本発明に係る光検出手段に相当する。発光部407は本発明に係る発光手段に相当する。
撮影装置400は、例えば図2に示すように、光学系401、光学系駆動部402、アイリス403、アイリス駆動部404、撮像素子405、センサ部406、および発光部407を主構成要素として有する。
アイリス403およびアイリス駆動部404は本発明に係る絞りを調節する絞り調節手段に相当する。センサ部406は本発明に係る光検出手段に相当する。発光部407は本発明に係る発光手段に相当する。
光学系401は、例えば単数および複数の光学レンズにより構成され、ユーザからの光を撮像素子405上に結像する。
光学系駆動部402は、例えば演算処理部100からの光学系401のレンズ位置を制御させる制御信号CTL402に基づいて、光学系401を制御する。
光学系駆動部402は、例えば演算処理部100からの光学系401のレンズ位置を制御させる制御信号CTL402に基づいて、光学系401を制御する。
アイリス403は、光学系401を介して撮像素子405に入射する光量を調整する機能、つまり絞り機能を有し、詳細にはアイリス駆動部404により駆動される。
アイリス駆動部404は、演算処理部100からのアイリス403の絞りを調整させる制御信号CTL404に基づいて、アイリス403を駆動制御する。
例えば、演算処理部100は、移動体情報取得装置900が取得した移動体情報に基づいて、少なくとも移動体が移動時には被写界深度が所定値より小さくなるように設定させる制御信号CTL404を出力する。
アイリス駆動部404は、演算処理部100からのアイリス403の絞りを調整させる制御信号CTL404に基づいて、アイリス403を駆動制御する。
例えば、演算処理部100は、移動体情報取得装置900が取得した移動体情報に基づいて、少なくとも移動体が移動時には被写界深度が所定値より小さくなるように設定させる制御信号CTL404を出力する。
撮像素子405は、例えば、光を電気信号に変換する撮像素子であり、撮像結果を信号S400として演算処理部100に出力する。
具体的には、撮像素子405は、電荷結合素子(CCD:Charge Coupled Device )や、CMOS(Complementary Metal-Oxide Semiconductor )等のイメージセンサである。
具体的には、撮像素子405は、電荷結合素子(CCD:Charge Coupled Device )や、CMOS(Complementary Metal-Oxide Semiconductor )等のイメージセンサである。
センサ部406は、例えば移動体による撮影装置400の振動を検出する振動センサや、移動体中の光量を検出して暗状態や明状態を特定する光センサ等であり、検出結果に応じた信号S406を演算処理部100に出力する。
発光部407は、例えばフラッシュや電灯等の発光装置であり、演算処理部100が信号S406に基づいて出力した制御信号CTL407に応じた発光を行う。例えば暗状態が検出された場合に発光するように制御される。
発光部407は、例えばフラッシュや電灯等の発光装置であり、演算処理部100が信号S406に基づいて出力した制御信号CTL407に応じた発光を行う。例えば暗状態が検出された場合に発光するように制御される。
上記構成の撮影装置400において、例えば演算処理部100は、移動体の移動状態およびセンサ部406の検出結果に基づいて光学系401やアイリス403を制御する。
具体的には、例えば演算処理部100は、振動センサによる検出結果と、撮像素子405からの信号S400に基づいて、その振動を除去するように光学系401を制御駆動させる制御信号CTL402を光学系駆動部402に出力する。光学系駆動部402は、制御信号CTL402に基づいて、その振動を除去するように光学系401を制御駆動する。
具体的には、例えば演算処理部100は、振動センサによる検出結果と、撮像素子405からの信号S400に基づいて、その振動を除去するように光学系401を制御駆動させる制御信号CTL402を光学系駆動部402に出力する。光学系駆動部402は、制御信号CTL402に基づいて、その振動を除去するように光学系401を制御駆動する。
また、上述したように演算処理部100は、移動体情報取得装置900が取得した移動体情報に基づいて、移動体の移動状態に基づいて撮影装置400被写界深度を制御する。具体的には、例えば演算処理部100は、移動体が移動時には、被写界深度が所定値よりも小さく(浅く)なるように、アイリス403を制御させる制御信号CTL404を、アイリス駆動部404に出力する。
被写界深度は、例えば図2に示すように、ピントを被写体(ユーザ)hに正確に合わせた場合に、所定の誤差範囲内でピントの合っている距離範囲のことであり、絞り値、被写体までの距離、および焦点距離等により変化する。例えば絞り値が小さくなればなるほど、被写界深度が浅くなる。
具体的には、図2に示すように、アイリス403により絞りがap1の状態では被写界深度がdp1であり、絞りがap2の状態、つまりap1よりも絞り値が小さいap2の場合には、被写界深度はdp1よりも小さいdp2となる。つまり被写界深度が浅くなる。
演算処理部100は、例えば移動体の所定位置の座席に着座したユーザ(被写体)hのみにピントを合わせたい場合には、被写界深度が浅くなるように、制御信号CTL404をアイリス駆動部404に出力して、アイリス403を駆動制御させる。
具体的には、図2に示すように、アイリス403により絞りがap1の状態では被写界深度がdp1であり、絞りがap2の状態、つまりap1よりも絞り値が小さいap2の場合には、被写界深度はdp1よりも小さいdp2となる。つまり被写界深度が浅くなる。
演算処理部100は、例えば移動体の所定位置の座席に着座したユーザ(被写体)hのみにピントを合わせたい場合には、被写界深度が浅くなるように、制御信号CTL404をアイリス駆動部404に出力して、アイリス403を駆動制御させる。
また、演算処理部100は、上述した振動センサによる振動の検出結果に基づいて被写界深度を制御してもよい。例えば演算処理部100は、振動センサが、所定値よりも大きい振動を検出した場合には、被写界深度がdp1となるように制御し、振動が少ない場合には、被写界深度をdp1よりも小さいdp2となるように制御する。
また、演算処理部100は、光センサによる検出結果に基づいて、例えば暗状態が検出されると、絞り値を小さくさせる制御信号CTL404をアイリス駆動部404に出力し、明状態が検出されると絞り値を大きくさせる制御信号CTL404をアイリス駆動部404に出力して、アイリス駆動部404にアイリス403を駆動制御させる。
映像出力装置500は、演算処理部100による制御により、例えば撮影装置400で撮影された画像データや、地図情報、映像コンテンツや、他のユーザを撮影した画像データ等を表示する。例えば映像出力装置500は、液晶ディスプレイ(LCD:Liquid Crystal Display)や、有機EL(Electroluminescence )等の表示装置である。
図3は、図1に示したデータ処理装置の全体図の一具体例を示す図である。
例えば移動体中の各座席には、例えば図3に示すように、筐体部10が設けられている。
筐体部10の正面上部の中央部には撮影装置400の光学系401等が設けられ、その左部には、センサ部406が設けられ、撮影装置400の右部には発光部407が設けられている。
例えば移動体中の各座席には、例えば図3に示すように、筐体部10が設けられている。
筐体部10の正面上部の中央部には撮影装置400の光学系401等が設けられ、その左部には、センサ部406が設けられ、撮影装置400の右部には発光部407が設けられている。
筐体部10の正面下部の中央部には音声録音装置700が設けられ、その左部には、音声出力装置800、例えばスピーカが設けられている。筐体部10の中央部には、映像出力装置500が設けられている。また、本実施形態では、映像出力装置500の前面には操作入力装置300としてタッチパネルが設けられている。
映像出力装置500は、例えば図3に示すように、第1領域511、第2領域512、および第3領域513の画像表示領域を有する。
映像出力装置500は、例えば演算処理部100の制御により、第1領域511には、撮影装置400が生成した画像データや、他の撮影装置で撮影された画像データを表示する。また、第2領域512には、移動体に関する情報、例えば地図情報や移動体の速度等の情報や、移動体中位置識別情報DAt(着座表)等の情報を表示する。また、第3域513には、例えば操作パネルを示す画像を表示する。
映像出力装置500は、例えば演算処理部100の制御により、第1領域511には、撮影装置400が生成した画像データや、他の撮影装置で撮影された画像データを表示する。また、第2領域512には、移動体に関する情報、例えば地図情報や移動体の速度等の情報や、移動体中位置識別情報DAt(着座表)等の情報を表示する。また、第3域513には、例えば操作パネルを示す画像を表示する。
端末間通信装置600は、例えば、他のデータ処理装置とデータ通信を行う通信装置であり、例えば無線方式や有線方式により他のデータ処理装置とデータ通信を行う。
また、端末間通信装置600は、例えば移動体中の所定位置、例えば座席毎にデータ処理装置を設けた場合には、各データ処理装置とデータ通信を行う。
また、端末間通信装置600は、例えば他の移動体中のデータ処理装置ともデータ通信を行う。
音声録音装置700は、例えば音波を電気信号に変換する装置であり、所定方向に感度が最大となる、具体的には、感度が移動体中の所定位置の話者の方向に感度が最大となる指向性を有し、所定方向からの音声を基に音声データを生成する。具体的には音声録音装置700は指向性の高いマイクロフォン等で構成される。
また、端末間通信装置600は、例えば移動体中の所定位置、例えば座席毎にデータ処理装置を設けた場合には、各データ処理装置とデータ通信を行う。
また、端末間通信装置600は、例えば他の移動体中のデータ処理装置ともデータ通信を行う。
音声録音装置700は、例えば音波を電気信号に変換する装置であり、所定方向に感度が最大となる、具体的には、感度が移動体中の所定位置の話者の方向に感度が最大となる指向性を有し、所定方向からの音声を基に音声データを生成する。具体的には音声録音装置700は指向性の高いマイクロフォン等で構成される。
図4は、図1に示したデータ処理装置の音声録音装置700の指向性を説明するための図である。
本実施形態に係る音声録音装置700としてのマイクロフォンは、例えば図3,4に示すように、筐体部10の正面下部の中央部に設けられており、マイクロフォンの位置Bから所定方向、例えばユーザhの方向(0°)が最大感度となり、それ以外の方向では感度が低下するように指向性が設定されている。例えば図4に示す指向特性図の単位は、度(角度)とdB(感度)である。
こうすることにより、移動体中の限られたスペース内で複数のユーザが同時に話したとしても、音声録音装置700は、最大の感度方向から発せられるユーザの音声のみを採音して、音声データを生成することで、話者以外の余計なノイズ等が低減した音声データを生成することができる。
本実施形態に係る音声録音装置700としてのマイクロフォンは、例えば図3,4に示すように、筐体部10の正面下部の中央部に設けられており、マイクロフォンの位置Bから所定方向、例えばユーザhの方向(0°)が最大感度となり、それ以外の方向では感度が低下するように指向性が設定されている。例えば図4に示す指向特性図の単位は、度(角度)とdB(感度)である。
こうすることにより、移動体中の限られたスペース内で複数のユーザが同時に話したとしても、音声録音装置700は、最大の感度方向から発せられるユーザの音声のみを採音して、音声データを生成することで、話者以外の余計なノイズ等が低減した音声データを生成することができる。
音声出力装置800は、例えば演算処理部100の制御により、音声データに応じた発音を行う。詳細には音声出力装置800は、増幅装置およびスピーカ等により構成される。
移動体情報取得装置(移動体情報装置)900は、移動体に関する情報、例えば移動体の少なくとも速度および加速度のいずれかを示す移動体情報を取得し、取得した結果を示すデータを演算処理部100に出力する。
詳細には移動体情報取得装置900は、移動体の速度を検出する速度センサ、移動体の加速度を検出する加速度センサや、移動体の位置情報を検出するGPS(Global Positioning System )装置、移動体の各速度を検出する角速度センサ、温度センサ、地磁気センサ等を有し、検出結果を示す信号を演算処理部100に出力する。
詳細には移動体情報取得装置900は、移動体の速度を検出する速度センサ、移動体の加速度を検出する加速度センサや、移動体の位置情報を検出するGPS(Global Positioning System )装置、移動体の各速度を検出する角速度センサ、温度センサ、地磁気センサ等を有し、検出結果を示す信号を演算処理部100に出力する。
例えば図3に示すように、操作入力装置300、撮影装置400、映像出力装置500、端末間通信装置600、音声録音装置700、および音声出力装置800等それぞれは、移動体中の所定の位置、例えば座席それぞれの位置に設置され、その移動体中の位置を示す移動体中位置情報t、具体的には座席位置情報が設定されている。
演算処理部100は、入力手段から入力されたデータおよび予め登録された登録データに基づいて識別処理を行い、識別処理の結果および少なくとも移動体中の入力手段の位置を示す移動体中位置情報tとを関連付けて移動体中位置識別情報DAtを生成し、生成した移動体中位置識別情報DAtを出力手段に出力させる。
また、演算処理部100は、移動体情報取得装置900が取得した移動体情報に基づいて、移動体が移動時に識別処理の結果および少なくとも移動体中の入力手段の位置を示す移動体中位置情報tとを関連付けて移動体中位置識別情報DAtを生成する。
また、演算処理部100は、入力手段から入力されたデータおよび予め登録された登録データに基づいて識別処理を行い、識別処理の結果ならびに移動体中の入力手段および出力手段の位置を示す移動体中位置情報tとを関連付けて移動体中位置識別情報DAtを生成し、生成した移動体中位置識別情報DAtに基づいて、移動体中の第1の位置の入力手段から入力されたデータを第1の位置と異なる第2の位置の出力手段に出力する。
演算処理部100は、入力手段から入力された音声データ、登録データDA、および移動体中位置識別情報DAtに基づいて音声データに対応する移動体中の位置に設けられた出力手段を特定し、特定した出力手段に、入力手段から入力された音声データおよび画像データのいずれかを出力させる。
また、演算処理部100は、端末間通信装置600を介して入力されたデータを出力手段に出力させ、入力手段から入力されたデータを端末間通信装置600を介して通信させる。
以下、演算処理部100の機能を図面を参照しながら詳細に説明する。
以下、演算処理部100の機能を図面を参照しながら詳細に説明する。
図5は、図1に示したデータ処理装置のソフトウェア的な機能ブロック図である。
演算処理部100は、例えばCPUが101がプログラムPRGを実行することにより、図5に示すように、操作入力処理部111、音声入力処理部112、映像入力処理部113、音声再生処理部114、画面描画処理部115、情報通信処理部116、および制御部117の機能を実現する。
記憶部201は、少なくともRAM102、ROM103、不揮発性メモリ104、および2次記憶装置200のいずれかの記憶装置、およびその複数の記憶装置が組み合わされた記憶装置に相当する。
演算処理部100は、例えばCPUが101がプログラムPRGを実行することにより、図5に示すように、操作入力処理部111、音声入力処理部112、映像入力処理部113、音声再生処理部114、画面描画処理部115、情報通信処理部116、および制御部117の機能を実現する。
記憶部201は、少なくともRAM102、ROM103、不揮発性メモリ104、および2次記憶装置200のいずれかの記憶装置、およびその複数の記憶装置が組み合わされた記憶装置に相当する。
操作入力処理部111は、少なくとも操作入力装置400から入力された信号に基づいて、例えばユーザによる操作を解析し、所定のデータを生成して所望の構成要素に出力する。
音声入力処理部112は、音声録音装置700から入力された信号に基づいて、例えばユーザによる音声に応じた音声データを基に増幅処理や音声認識処理を行い、処理結果を音声再生処理部114および制御部117等に出力する。
映像入力処理部113は、例えば撮影装置400から入力された画像データに応じた処理、例えばブレ除去処理やノイズ除去処理、および画像認識処理等を行い処理結果を画面描画処理部115および制御部117等に出力する。
映像入力処理部113は、例えば撮影装置400から入力された画像データに応じた処理、例えばブレ除去処理やノイズ除去処理、および画像認識処理等を行い処理結果を画面描画処理部115および制御部117等に出力する。
音声再生処理部114は、音声録音装置700から音声信号が入力されると、その音声信号に応じた処理、例えば音声信号の増幅処理やノイズ除去処理、音声認識処理等を行い、処理結果を音声再生処理部114および制御部117等に出力する。
画面描画処理部115は、例えば映像入力処理部113や制御部117から入力された画像データに応じた画像表示を、映像出力装置500に表示させる。
情報通信処理部116は、撮影装置400により撮影された画像や、音声録音装置700により生成された音声データを、端末間通信装置600を介して他のデータ処理装置とデータ通信を行う。また、情報通信処理部116は、他のデータ通信装置から入力された画像データや音声データを制御部117に入力し、制御部117はその画像データを画面描画処理部115を介して映像出力装置500に表示させ、また制御部117はその音声データを音声再生処理部114を介して音声出力装置800に発音させる。
画面描画処理部115は、例えば映像入力処理部113や制御部117から入力された画像データに応じた画像表示を、映像出力装置500に表示させる。
情報通信処理部116は、撮影装置400により撮影された画像や、音声録音装置700により生成された音声データを、端末間通信装置600を介して他のデータ処理装置とデータ通信を行う。また、情報通信処理部116は、他のデータ通信装置から入力された画像データや音声データを制御部117に入力し、制御部117はその画像データを画面描画処理部115を介して映像出力装置500に表示させ、また制御部117はその音声データを音声再生処理部114を介して音声出力装置800に発音させる。
制御部117は、例えば音声入力処理部112、操作入力処理部111、音声入力処理部112、映像入力処理部113、情報通信処理部116、および移動体情報取得装置900、2次記憶装置200等の構成要素の少なくとも一つから入力された信号に基づいて本発明に係る処理を行い、処理結果を例えば音声再生処理部114、画面描画処理部115、2次記憶装置(外部記憶装置)200、情報通信処理部116に出力する。
例えば、制御部117は、音声入力処理部112からの信号を基に音声認識処理等を行い映像入力処理部113から入力された信号に基づいて画像認識処理を行う。この音声認識処理や画像認識処理は音声入力処理部112や映像入力処理部113で行ってもよいし、情報通信処理部116および端末間通信装置600を介して、外部のデータ処理装置と分散処理により行ってもよい。
また、制御部117は、操作入力装置300、撮影装置400、映像出力装置500、端末間通信装置600、音声録音装置700、および音声出力装置800等それぞれに設定された移動体中の所定の位置、例えば座席それぞれの位置に設置され、その移動体中の位置に関する移動体中位置情報t、および音声認識処理や画像認識処理結果等の識別処理の結果に基づいて、移動体中の入力手段および出力手段の位置と、ユーザを示す識別情報とを関連付けた移動体中位置識別情報DAtを生成する。
移動体中位置識別情報DAtは、識別処理の結果、ユーザの移動体中の位置を示すデータである。
移動体中位置識別情報DAtは、識別処理の結果、ユーザの移動体中の位置を示すデータである。
また、制御部117は、あるユーザが特定のユーザと会話を行いたい旨を示す指示が入力手段から入力された場合には、それぞれのユーザを示す識別情報、および移動体中位置識別情報DAtに基づいて、移動体中のユーザそれぞれに対応付けられた操作入力装置300、撮影装置400、映像出力装置500、端末間通信装置600、音声録音装置700、音声出力装置800等を特定し、特定した装置間でデータ通信、例えば画像や音声データ等のデータ通信を行わせる。
上記構成の具体的な作用は、例えば操作入力装置300から利用者(ユーザ)の操作に応じた信号が操作入力処理部111に入力されると、操作入力処理部111は、その信号に応じた処理を行う。例えば音声録音装置700から利用者(ユーザ)の発音に応じた信号が音声入力処理部112に入力されると、音声入力処理部112は、その信号に応じた処理、例えば音声信号の増幅処理やノイズ除去処理、音声認識処理等を行い、処理結果を音声再生処理部114および制御部117等に出力する。音声再生処理部114は音声入力処理部112から入力された信号に応じた処理、例えば増幅処理等を行い音声出力装置800に発音させる。
例えば人物撮影装置400から画像データが映像入力処理部113に入力されると、映像入力処理部113はその画像データに応じた処理、例えばブレ除去処理やノイズ除去処理、および画像認識処理等を行い処理結果を、画面描画処理部115および制御部117等に出力する。画面描画処理部115は、画像入力処理部から入力された信号に応じた画像を映像出力装置500に表示させる。
また、例えば人物撮影装置400により利用者(ユーザ)の顔が撮影された画像データが映像入力処理部113に入力されると、映像入力処理部113および制御部117は、例えば2次記憶装置200に記憶された登録データと照合を行い、ユーザの識別処理を行う。制御部117は、識別処理の結果、適合する登録データがない場合には、その画像データに基づいて、撮影されたユーザを新規のユーザとして登録処理処理を行う。
情報通信処理部116は、撮影装置400により撮影された画像や、音声録音装置700により生成された音声データを、端末間通信装置600を介して他のデータ処理装置とデータ通信を行う。また、情報通信処理部116は、他のデータ通信装置から入力された画像データや音声データを制御部117に入力し、制御部117はその画像データを画面描画処理部115を介して映像出力装置500に表示させ、また制御部117はその音声データを音声再生処理部114を介して音声出力装置800に発音させる。
図6は、図1に示したデータ処理装置の登録データの一具体例を示す図である。
登録データ(識別データ)DAは、ユーザそれぞれを識別するために必要な識別データデータ、例えば図6に示すように、ユーザの顔を多方向から撮影された画像データDAF、氏名データDAN、個人データDAD、および音声データ等を有する。
例えば画像データDAFは、識別精度を高めるために、多方向それぞれから撮影した画像データ、具体的には、正面画像データDAF1、右側面画像データDAF2、および左側面画像データDAF3を有する。
氏名データDANは、ユーザの氏名を示すデータである。この氏名データDANは、例えば制御部117が、特定のユーザの氏名を示す音声データを音声認識処理して、特定のユーザの移動体中の位置を特定する際に用いられる。
登録データ(識別データ)DAは、ユーザそれぞれを識別するために必要な識別データデータ、例えば図6に示すように、ユーザの顔を多方向から撮影された画像データDAF、氏名データDAN、個人データDAD、および音声データ等を有する。
例えば画像データDAFは、識別精度を高めるために、多方向それぞれから撮影した画像データ、具体的には、正面画像データDAF1、右側面画像データDAF2、および左側面画像データDAF3を有する。
氏名データDANは、ユーザの氏名を示すデータである。この氏名データDANは、例えば制御部117が、特定のユーザの氏名を示す音声データを音声認識処理して、特定のユーザの移動体中の位置を特定する際に用いられる。
個人データDADは、ユーザに関するデータであり、例えば生年月日データDAD1、住所データDAD2、運転免許データDAD3、乗車回数データDAD4等を有する。
生年月日データDAD1はユーザの生年月日を示すデータである。住所データDAD2はユーザの住所を示すデータである。運転免許データDAD3は、例えば運転免許の取得や保有等を示すデータである。乗車回数データDAD4はユーザが移動体に乗車した回数を示すデータである。
生年月日データDAD1はユーザの生年月日を示すデータである。住所データDAD2はユーザの住所を示すデータである。運転免許データDAD3は、例えば運転免許の取得や保有等を示すデータである。乗車回数データDAD4はユーザが移動体に乗車した回数を示すデータである。
図7は、図1に示したデータ処理装置を移動体中に設けた一具体例を示す図である。
データ処理装置1は、例えば図7に示すように、移動体1000中の所定の位置、例えば各座席t11〜t25に1つずつ設置されている。
本実施形態では、例えば図3に示すような入力手段および出力手段を有する筐体部10が移動体1000中の所定位置、例えば座席毎に設置され、この筐体部10それぞれには演算処理部100が設けられている。
各筐体部10に設けられた演算処理部100、2次記憶装置(外部記憶装置)200、操作入力装置300、撮影装置(人物撮影装置)400、映像出力装置500、端末間通信装置600、音声録音装置700、音声出力装置800、および移動体情報取得装置(移動体情報装置)900等は、端末間通信装置600により、それぞれのデータ通信装置と通信路1001を介してデータ通信を行う。
データ処理装置1は、例えば図7に示すように、移動体1000中の所定の位置、例えば各座席t11〜t25に1つずつ設置されている。
本実施形態では、例えば図3に示すような入力手段および出力手段を有する筐体部10が移動体1000中の所定位置、例えば座席毎に設置され、この筐体部10それぞれには演算処理部100が設けられている。
各筐体部10に設けられた演算処理部100、2次記憶装置(外部記憶装置)200、操作入力装置300、撮影装置(人物撮影装置)400、映像出力装置500、端末間通信装置600、音声録音装置700、音声出力装置800、および移動体情報取得装置(移動体情報装置)900等は、端末間通信装置600により、それぞれのデータ通信装置と通信路1001を介してデータ通信を行う。
データ処理装置1は、この形態に限られるものではない。例えば一つの演算処理部100が、各座席に設けられた筐体部10それぞれに設けれた、操作入力装置300、撮影装置(人物撮影装置)400、映像出力装置500、音声録音装置700、音声出力装置800等を統括して制御してもよい。
図8は、図1に示したデータ処理装置の移動体中位置識別情報DAtを説明するための図である。
上述したように、制御部117は、操作入力装置300、撮影装置400、映像出力装置500、端末間通信装置600、音声録音装置700、および音声出力装置800等それぞれに設定された移動体中の所定の位置、例えば座席それぞれの位置に設置され、その移動体中の位置に関する移動体中位置情報t、および音声認識処理や画像認識処理の結果、その移動体中の位置にいるユーザの識別情報DAに基づいて、移動体中位置情報tと、ユーザを示す識別情報DAとを関連付けた移動体中位置識別情報DAtを生成する。
上述したように、制御部117は、操作入力装置300、撮影装置400、映像出力装置500、端末間通信装置600、音声録音装置700、および音声出力装置800等それぞれに設定された移動体中の所定の位置、例えば座席それぞれの位置に設置され、その移動体中の位置に関する移動体中位置情報t、および音声認識処理や画像認識処理の結果、その移動体中の位置にいるユーザの識別情報DAに基づいて、移動体中位置情報tと、ユーザを示す識別情報DAとを関連付けた移動体中位置識別情報DAtを生成する。
具体的には、例えば図8に示すように、移動体中位置情報t11〜t25それぞれと、識別情報DAとを関連付けた移動体中位置識別情報DAt(着座表)を生成する。
例えば、演算処理部100は、移動体中位置識別情報DAtを逐次更新し、映像出力装置500に表示させる。
また、演算処理部100は、映像出力装置500に移動体中位置識別情報DAtを表示させる場合には、その映像出力装置500に対応する座席のユーザを示す識別情報DAを、ハイライト表示等の強調表示を行う。
例えば、演算処理部100は、移動体中位置識別情報DAtを逐次更新し、映像出力装置500に表示させる。
また、演算処理部100は、映像出力装置500に移動体中位置識別情報DAtを表示させる場合には、その映像出力装置500に対応する座席のユーザを示す識別情報DAを、ハイライト表示等の強調表示を行う。
図9は、図1に示したデータ処理装置の動作、特に移動体中位置識別情報DAtを生成する動作を説明するためのフローチャートである。
図9を参照しながら、データ処理装置の動作を、演算処理部100の動作を中心に説明する。
ステップST101において、例えばユーザが座席に着座した場合、その座席に設置された筐体部10に設けられた撮影装置400が、そのユーザを撮影して画像データを生成して演算処理部100に出力する。
演算処理部100の映像入力処理部113および制御部117は、その画像データの画像認識処理を行う。具体的には、例えば画像認識処理は、パターンマッチング処理や、特徴抽出処理等により画像認識処理を行う。
図9を参照しながら、データ処理装置の動作を、演算処理部100の動作を中心に説明する。
ステップST101において、例えばユーザが座席に着座した場合、その座席に設置された筐体部10に設けられた撮影装置400が、そのユーザを撮影して画像データを生成して演算処理部100に出力する。
演算処理部100の映像入力処理部113および制御部117は、その画像データの画像認識処理を行う。具体的には、例えば画像認識処理は、パターンマッチング処理や、特徴抽出処理等により画像認識処理を行う。
ステップST102において、演算処理部100は、記憶部201に記憶する登録データDAと、画像認識処理の結果に基づいて、着座したユーザが登録されているか否かを判別する。具体的には演算処理部100は、記憶部201に登録されている顔のリストから検索し、適合するものがあるか否かを判別する。
ステップST102において、着座したユーザが登録されている場合、具体的には記憶部201に登録されている顔のリストに適合するものがあると判別したば場合には、演算処理部100の制御部117は、その画像データを生成した撮影装置400の移動体中の位置を示す移動体中位置情報tと、画像認識処理の結果、その移動体中の位置にいるユーザの識別情報DAに基づいて、移動体中位置情報tと、ユーザを示す識別情報DAとを関連付けた移動体中位置識別情報DAt(着座表)を更新する。
具体的には、制御部117は、ユーザ(人物)に関する情報DA、例えば氏名データDAN等と、移動体中位置情報tとを関連付けて移動体中位置識別情報DAtを更新する。
ステップST102において、着座したユーザが登録されている場合、具体的には記憶部201に登録されている顔のリストに適合するものがあると判別したば場合には、演算処理部100の制御部117は、その画像データを生成した撮影装置400の移動体中の位置を示す移動体中位置情報tと、画像認識処理の結果、その移動体中の位置にいるユーザの識別情報DAに基づいて、移動体中位置情報tと、ユーザを示す識別情報DAとを関連付けた移動体中位置識別情報DAt(着座表)を更新する。
具体的には、制御部117は、ユーザ(人物)に関する情報DA、例えば氏名データDAN等と、移動体中位置情報tとを関連付けて移動体中位置識別情報DAtを更新する。
一方、ステップST102において、着座したユーザが登録されていない場合、具体的には記憶部201に登録されている顔のリストに適合するものがない場合には、そのユーザに関する識別情報DAを新規に作成する。
具体的には、例えば制御部117は、個人情報を入力させる画面を映像出力装置500に表示させ(ST104)、例えば撮影装置400、音声録音装置700、および入力装置300から入力されたデータに基づいて、図6に示すように、新たなユーザを識別するための識別情報DAを新規に生成し(ST105)、ステップST103の処理に進む。
具体的には、例えば制御部117は、個人情報を入力させる画面を映像出力装置500に表示させ(ST104)、例えば撮影装置400、音声録音装置700、および入力装置300から入力されたデータに基づいて、図6に示すように、新たなユーザを識別するための識別情報DAを新規に生成し(ST105)、ステップST103の処理に進む。
図10は、図1に示したデータ処理装置の動作、特に他のユーザと通信を行う際の動作を説明するためのフローチャートである。
ステップST301において、例えば、音声録音装置700から音声データが入力されると、音声入力処理部112および制御部117は、複数の音声録音装置700から音声データが入力されたか否かを判別する。
ステップST301において、例えば、音声録音装置700から音声データが入力されると、音声入力処理部112および制御部117は、複数の音声録音装置700から音声データが入力されたか否かを判別する。
ステップST201において、一つの音声録音装置700から音声データが入力されたと判別した場合には、例えば、制御部117は、音声を発した人物(ユーザ)に対応する撮影装置400が生成した画像データを取得し(ST202)、他の座席に設置された映像出力装置500に、その画像データを表示させ、また他の座席に設置された音声出力装置800に音声にその音声データを発音させる(ST203)。
一方、ステップST201において、複数の音声録音装置700から音声データが入力されたと判別した場合には、例えば、制御部117は、音声を発した人物(ユーザ)に対応する撮影装置400が生成した複数の画像データを取得し(ST204)、他の座席に設置された、映像出力装置500に、画面を分割して、各人物を示す画像データを表示させ、また他の座席に設置された音声出力装置800に、複数の音声データをミキシングした音声データを発音させる(ST205)。
図11は、図1に示したデータ処理装置の動作、特に特定のユーザと通信を行う場合の動作を説明するためのフローチャートである。
例えば移動体中位置情報t13に対応する座席に着座している佐々木が、移動体中位置情報t3に対応する座席に着座している山本とデータ通信、会話を行う場合の動作を説明する。
例えば移動体中位置情報t13に対応する座席に着座している佐々木が、移動体中位置情報t3に対応する座席に着座している山本とデータ通信、会話を行う場合の動作を説明する。
ステップST301において、例えば佐々木が会話を行いたいユーザの名前「山本」を発音すると、演算処理部100の音声入力処理部112および制御部117は、音声録音装置700から入力された音声データに基づいて音声認識処理を行い、音声データが「山本」を示すデータであると認識する。
ステップST302において、演算処理部100の制御部117は、記憶部201に記憶された移動体中位置識別情報(着座表)DAtと、その認識された人名に基づいて、移動体中位置識別情報(着座表)DAtに、その認識された人名が登録されているか否かを判別する。
ステップST302において、制御部117は、移動体中位置識別情報(着座表)DAtに、その認識された人名が登録されていると判別した場合には、該当ユーザ(人物)の識別情報DAおよび移動体中位置識別情報(着座表)DAtに基づいて、該当ユーザ(人物)に対応する映像出力装置500および音声出力装置800を特定し、佐々木の前に設置された撮影装置400により撮影された画像データ特定した映像出力装置500に表示させ、佐々木の前に設置された音声録音装置700により生成された音声データを特定した音声出力装置800に発音させる。
また、逆に山本の前に設置された撮影装置400により撮影された画像データと、音声録音装置700により生成された音声データとを、佐々木の前に設置された撮影装置400に表示させ、音声録音装置700により発音させる。
ステップST302において、演算処理部100の制御部117は、記憶部201に記憶された移動体中位置識別情報(着座表)DAtと、その認識された人名に基づいて、移動体中位置識別情報(着座表)DAtに、その認識された人名が登録されているか否かを判別する。
ステップST302において、制御部117は、移動体中位置識別情報(着座表)DAtに、その認識された人名が登録されていると判別した場合には、該当ユーザ(人物)の識別情報DAおよび移動体中位置識別情報(着座表)DAtに基づいて、該当ユーザ(人物)に対応する映像出力装置500および音声出力装置800を特定し、佐々木の前に設置された撮影装置400により撮影された画像データ特定した映像出力装置500に表示させ、佐々木の前に設置された音声録音装置700により生成された音声データを特定した音声出力装置800に発音させる。
また、逆に山本の前に設置された撮影装置400により撮影された画像データと、音声録音装置700により生成された音声データとを、佐々木の前に設置された撮影装置400に表示させ、音声録音装置700により発音させる。
つまり、制御部117は、音声録音装置から入力された音データと識別情報DAに基づいてユーザを特定し、特定したユーザの識別情報DAと移動体中位置識別情報DAtに基づいて、ユーザが着座する移動体中位置情報tを特定し、特定された移動体中位置情報tに対応する音声出力装置800を特定し、音声録音装置700から入力された音データを特定した音声出力装置800から出力する。
また、制御部117は、移動体中位置識別情報DAtに基づいて、特定された移動体中位置情報tに対応する筐体部10に設置された音声録音装置700および撮影装置400と、音声出力装置800および映像出力装置500間でデータ通信を行わせる(ST303)。
また、制御部117は、移動体中位置識別情報DAtに基づいて、特定された移動体中位置情報tに対応する筐体部10に設置された音声録音装置700および撮影装置400と、音声出力装置800および映像出力装置500間でデータ通信を行わせる(ST303)。
ステップST302において、演算処理部100の制御部117は、記憶部201に記憶された移動体中位置識別情報(着座表)DAtと、その認識された人名に基づいて、移動体中位置識別情報(着座表)DAtに、その認識された人名が登録されていないと判別した場合には、登録されていない旨を示す表示、例えば「該当人物はありません」と映像出力部500に出力させ、ステップST301の処理に戻る。
以上、説明したように、移動体中の所定位置の座席毎に、少なくとも画像データおよび音声データのいずれかのデータを入力する入力手段と、少なくとも画像データおよび音声データのいずれかのデータを出力する出力手段とを設け、制御部117が、入力手段から入力されたデータおよび予め登録された登録データに基づいて識別処理を行い、識別処理の結果および少なくとも移動体中の入力手段の位置を示す移動体中位置情報tとを関連付けて移動体中位置識別情報DAtを生成し、生成した移動体中位置識別情報DAtを出力手段に出力させるので、移動体内で画像データや音声データ等のデータ通信を行い、移動体内の状態を容易に把握することができる。
つまり、移動体中の各座席に、入力手段として操作入力装置300、撮影装置400、および音声録音装置700を設け、出力手段として映像出力装置500および音声出力装置800を設け、制御部117が、入力手段から入力されたデータおよび予め登録された登録データに基づいて識別処理を行い、識別処理の結果および少なくとも移動体中の入力手段の位置を示す移動体中位置情報tとを関連付けて移動体中位置識別情報DAtを生成し、生成した移動体中位置識別情報DAtを出力手段に出力させるので、移動体内で画像データや音声データ等のデータ通信を行い、移動体内の状態を容易に把握することができる。
また、制御部117は、生成した移動体中位置識別情報(着座表)DAt、ならびに、所定の座席に設置された音声録音装置700と撮影装置400から入力された音声データおよび画像データに基づいて、他の座席に設置された音声出力装置800と、映像出力装置500と音声データおよび画像データを出力させるので、複数のユーザで、画像データと音声データのデータ通信を行うことができる。
また、制御部117は、生成した移動体中位置識別情報(着座表)DAt、ならびに、所定の座席に設置された音声録音装置700と撮影装置400から入力された音声データおよび画像データ、および移動体中の位置を特定させる位置特定情報に基づいて、その位置特定情報により特定された座席に設置された音声出力装置800と映像出力装置500に音声データおよび画像データを出力させるので、特定のユーザと会話を行うことができる。
指向性の高いマイクロフォンを設けたので、自動車等の移動体中において、前後の座席に着座するユーザ同士が会話を行う場合であっても、移動体(自動車)によるノイズを除去して、明確な音声データを生成することができる。
バスなどの大型車両では、遠く離れた移動体中の位置に着座したユーザと会話を行うことが容易に可能である。
つまり、着座したユーザの方向に感度が高く、それ以外の方向には感度が低下する指向性の音声録音装置700を設けたので、ユーザが発音した音声のみに応じた音声データを生成することができる。
バスなどの大型車両では、遠く離れた移動体中の位置に着座したユーザと会話を行うことが容易に可能である。
つまり、着座したユーザの方向に感度が高く、それ以外の方向には感度が低下する指向性の音声録音装置700を設けたので、ユーザが発音した音声のみに応じた音声データを生成することができる。
本実施形態に係るデータ処理装置では、移動体の走行状態に応じて撮影装置400の被写界深度を制御し、例えば少なくとも移動体が移動時には、被写界震度を小さく(浅く)設定するので、ユーザのみを明確に撮影することができる。
また、光センサを設けたので、夜間の場合には撮影装置400のアイリス403の絞りを開き、また発光部により発光してユーザを照らすために、昼間と同等の環境中で画像データを生成することができる。
また、本実施形態に係るデータ処理装置をバス等の大型車両に設けた場合には、映像出力装置500に表示された移動体中位置識別情報DAt(着座表)を見ることにより、乗務員が車内に全員着座したかどうかを容易に確認することができる。
また、制御部117は、移動体中位置識別情報DAt(着座表)を逐次更新することにより、例えば移動体が移動中に、ユーザ同士で席を交換した場合であっても、常に車内のユーザの着座に関する状況を把握することができる。
また、制御部117は、特定の席の状況を監視するために、特定の座席、例えば運転席に設置された撮影装置400から入力された画像データを他の座席に設置された映像出力装置500に表示させ、制御部117がその画像データの内の目に相当する領域を画像認識処理することにより目が閉じられたことを検知すると、アラーム等を音声出力装置800に発音させて警告を行ってもよい。
また、例えば後部座席に子供を着座させ、その座席に設置された撮影装置400から入力された画像データを、運転席に設置された映像出力装置500に表示させておくことで、運転手は後部座席の子供を監視することができる。
他の移動体に設置されたデータ処理装置とデータ通信を行う端末間通信装置600を設けたので、ユーザは座席に着席した状態で、他の移動体内のデータ処理装置を介して、他の移動体中のユーザとデータ通信を行うことができる。
なお、本発明は本実施形態に限られるものではなく、任意好適な改変が可能である。
上述したように、移動体として、例えば自動車、バス、電車、飛行機、船舶を例示したがこの形態に限られるものではない。また、ユーザが座席に着座する形態でなくともよい。また、移動体中の所定位置の座席毎に入力手段および出力手段を設けたが、この形態に限られるものではない。
上述したように、移動体として、例えば自動車、バス、電車、飛行機、船舶を例示したがこの形態に限られるものではない。また、ユーザが座席に着座する形態でなくともよい。また、移動体中の所定位置の座席毎に入力手段および出力手段を設けたが、この形態に限られるものではない。
また、各座席毎に筐体部10は上述した形態に限られるものではない。入力手段および出力手段が分離できる形態であってもよい。
また、上述したように、例えば一つの演算処理部100が、移動体中の所定位置の座席毎に設けられた入力手段および出力手段を統括して制御してもよい。こうすることで本発明に係る処理を一つの演算処理部100で処理することができる。
また、上述したように、例えば一つの演算処理部100が、移動体中の所定位置の座席毎に設けられた入力手段および出力手段を統括して制御してもよい。こうすることで本発明に係る処理を一つの演算処理部100で処理することができる。
1…データ処理装置、10…筐体部、100…演算処理部、101…CPU(Central Processing Unit )、102…RAM(Random Access Memory)、103…ROM(Read Only Memory)、104…不揮発性メモリ、105…インタフェース部、111…操作入力処理部、112…音声入力処理部、113…映像入力処理部、114…音声再生処理部、115…画面描画処理部、116…情報通信処理部、117…制御部、200…2次記憶装置(外部記憶装置)、201…記憶部、300…操作入力装置、400…撮影装置(人物撮影装置)、401…光学系、402…光学系駆動部、403…アイリス、404…アイリス駆動部、405…撮像素子、406…センサ部、407…発光部、500…映像出力装置、600…端末間通信装置、700…音声録音装置、800…音声出力装置、900…移動体情報取得装置(移動体情報装置)。
Claims (10)
- 移動体に搭載されるデータ処理装置であって、
少なくとも画像データおよび音声データのいずれかのデータを入力する入力手段と、
少なくとも画像データおよび音声データのいずれかのデータを出力する出力手段と、
前記入力手段から入力されたデータおよび予め登録された登録データに基づいて識別処理を行い、前記識別処理の結果および少なくとも前記移動体中の入力手段の位置を示す移動体中位置情報とを関連付けて移動体中位置識別情報を生成し、前記生成した移動体中位置識別情報を前記出力手段に出力させる制御手段と
を有するデータ処理装置。 - 前記入力手段は、前記移動体の少なくとも速度および加速度のいずれかを示す移動体情報を取得する移動体情報取得手段を含み、
前記制御手段は、前記移動体情報取得手段が取得した移動体情報に基づいて、前記移動体が移動時に前記識別処理の結果および少なくとも前記移動体中の入力手段の位置を示す移動体中位置情報とを関連付けて前記移動体中位置識別情報を生成する
請求項1に記載のデータ処理装置。 - 前記入力手段は、被写界深度を設定可能で、撮影結果を基に前記画像データを生成する撮影手段を含む
請求項1に記載のデータ処理装置。 - 前記入力手段は、前記移動体の少なくとも速度および加速度のいずれかを示す移動体情報を取得する移動体情報取得手段を含み、
前記制御手段は、前記移動体情報取得手段が取得した移動体情報に基づいて、少なくとも前記移動体が移動時に前記撮影手段の被写界深度が所定値より小さくなるように設定する
請求項3に記載のデータ処理装置。 - 前記入力手段は、前記移動体中の光量を検出する検出する光検出手段と、
前記撮影手段の絞りを調節する絞り調節手段を含み、
前記制御手段は、前記光検出手段の検出結果に基づいて前記絞り調節手段に前記絞りを調整させる
請求項3に記載のデータ処理装置。 - 前記入力手段は、前記移動体中の光量を検出する光検出手段と、
制御に応じて発光する発光手段とを含み、
前記制御手段は、前記光検出手段の検出結果に基づいて前記発光手段の発光を制御する
請求項3に記載のデータ処理装置。 - 前記入力手段は、所定方向に感度が最大となる指向性を有し、前記所定方向からの音声を基に前記音声データを生成する音声データ生成手段を含む
請求項1に記載のデータ処理装置。 - 前記入力手段および前記出力手段それぞれは、前記移動体中の第1および第2の位置に設けられ、
前記制御手段は、前記入力手段から入力されたデータおよび予め登録された登録データに基づいて識別処理を行い、前記識別処理の結果ならびに前記移動体中の入力手段および出力手段の位置を示す移動体中位置情報とを関連付けて移動体中位置識別情報を生成し、前記生成した移動体中位置識別情報に基づいて、前記移動体中の第1の位置の入力手段から入力されたデータを前記第1の位置と異なる第2の位置の前記出力手段に出力する
請求項1に記載のデータ処理装置。 - 前記制御手段は、前記入力手段から入力された音声データ、前記登録データ、および前記移動体中位置識別情報に基づいて前記音声データに対応する前記移動体中の位置に設けられた出力手段を特定し、前記特定した出力手段に、前記入力手段から入力された音声データおよび画像データのいずれかを出力させる
請求項1に記載のデータ処理装置。 - 他の移動体中のデータ処理装置とデータ通信を行う通信手段を有し、
前記制御手段は、前記通信手段を介して入力されたデータを前記出力手段に出力させ、前記入力手段から入力されたデータを通信手段を介して通信させる
請求項1に記載のデータ処理装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004004823A JP2005198210A (ja) | 2004-01-09 | 2004-01-09 | データ処理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004004823A JP2005198210A (ja) | 2004-01-09 | 2004-01-09 | データ処理装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2005198210A true JP2005198210A (ja) | 2005-07-21 |
Family
ID=34819325
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004004823A Pending JP2005198210A (ja) | 2004-01-09 | 2004-01-09 | データ処理装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2005198210A (ja) |
-
2004
- 2004-01-09 JP JP2004004823A patent/JP2005198210A/ja active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4419758B2 (ja) | 自動車用ユーザもてなしシステム | |
US11348581B2 (en) | Multi-modal user interface | |
US11574504B2 (en) | Information processing apparatus, information processing method, and program | |
CN108327667A (zh) | 车辆语音控制方法及装置 | |
KR20170137636A (ko) | 탑승자 모니터링에 기초한 정보 획득 시스템 | |
JP2020518844A (ja) | 口の画像を入力コマンドと相互に関連付けるシステム及び方法 | |
US11568566B2 (en) | Aligning vision-assist device cameras based on physical characteristics of a user | |
JP5395716B2 (ja) | 車外音提供装置、車外音提供方法およびプログラム | |
JP2010076602A (ja) | 車載機器制御装置および車載機器制御方法 | |
CN110194181B (zh) | 驾驶支持方法、车辆和驾驶支持系统 | |
US11061236B2 (en) | Head-mounted display and control method thereof | |
CN110597477A (zh) | 定向声音修改 | |
ES2795016T3 (es) | Procedimiento de asistencia en el seguimiento de una conversación para una persona con problemas de audición | |
JP4347743B2 (ja) | 発音装置、その方法、そのプログラム、および、そのプログラムを記録した記録媒体 | |
JP2004354930A (ja) | 音声認識システム | |
JP4666202B2 (ja) | 自動車設備遠隔制御システム | |
TWI637361B (zh) | 事件檢測方法、具有事件檢測機制的電子系統以及配件 | |
ES2692828T3 (es) | Procedimiento de asistencia en el seguimiento de una conversación para una persona con problemas de audición | |
JP2005198210A (ja) | データ処理装置 | |
CN112997474A (zh) | 图像处理设备、图像处理方法和程序 | |
JP4325410B2 (ja) | 車載装置 | |
WO2022064774A1 (ja) | 画像処理装置、及び画像処理プログラム | |
US20230186651A1 (en) | Control device, projection system, control method, and program | |
JP6766403B2 (ja) | 頭部装着型表示装置、頭部装着型表示装置の制御方法、コンピュータープログラム | |
JP4326437B2 (ja) | ロボットの制御装置 |