この発明は、飛行機、船舶、列車、自動車等(以下、これらを「移動体」と記載)で携帯電話、スマートフォン、タブレット端末、パーソナルコンピュータ、ゲーム機器等(以下、これらの機器を「電子機器」と記載)を使用している場合において、GPS等の位置検出装置によって移動速度を算出し、カメラで使用者の顔や眼球等を撮影してその映像を画像処理して解析することで使用者の注視点を検出し、それらの情報により電子機器の使用者が移動体を操縦、操船、運転(以下、これらの行為を「運転」と記載)している当事者(以下、移動体を操縦、操船または運転している者を「運転者」と記載)であるかを判別することができ、使用者が運転者かつ運転中と確定した場合には電子機器の強制的な機能制限や動作停止等の事故防止対策が実行されて重大な事故を未然に防ぐことができる電子機器の使用者の注視点検出および位置検出を利用した事故防止機能である。
従来技術では、GPS等の位置検出装置は主に現在地を検出し地図上に現在地を表示して位置確認をするもの、目的地までの誘導を行うナビゲーションシステムに利用されている。その中には位置情報を利用して移動速度を算出するものもあることから、この仕組みを図2により説明する。位置検出装置21で検出された位置情報は移動速度算出手段22に読み込まれ、移動速度算出手段22は計算機23を制御し移動速度を算出して表示器24に結果を表示する。一般的に移動速度は、移動速度(km/h)=移動距離(km)÷移動時間(h)の計算式で算出される。この様に従来技術による装置では、GPS等の位置検出装置より得た位置情報より移動速度を算出して、1つの情報として表示するだけの方法である。
現在、移動体の運転時において特に自動車の走行中に運転者が電子機器を使用してのメール作成や送受信、通話や通信、電子機器の操作、アプリの使用などの行為による余所見や脇見が原因で重大な交通事故が増加しており大きな社会問題となっている。従来の方法では、GPS等の位置検出装置で使用者の持っている電子機器の移動速度を算出することができることから使用者が移動体で移動していることは識別できるが、電子機器の使用者が移動体の運転者であることを判別することが不可能なことから、電子機器の強制的な機能制限や動作停止等の事故防止対策を実行することができず重大な事故を未然に防ぐことができなかった。
この発明は、従来の方法と同様にGPS等の位置検出装置4で電子機器の移動速度を算出することで歩行中または何かの移動体での移動であるかを識別し、注視点検出手段2で使用者の注視点を検出して使用者判別手段3によって使用者が運転者であることを判別することができるため、使用者が運転者かつ運転中と確定した場合には電子機器の強制的な機能制限や動作停止等の事故防止対策が実行されて重大な事故を未然に防ぐことができることを目的とする。
この目的を達成するために、電子機器の使用者の注視点検出および位置検出を利用した事故防止機能を携帯電話、スマートフォン、タブレット端末、パーソナルコンピュータ、ゲーム機器等の電子機器に組み込むことによって、飛行機、船舶、列車、自動車等の移動体の操縦者、操船者、運転者等が停止中以外の状態の時に、前記電子機器を使用した場合には、前記電子機器の事故防止対策を実行することで、運転者の電子機器使用による余所見や脇見が原因で発生している重大な事故を未然に防ぐことができる。
電子機器の使用者の注視点検出および位置検出を利用した事故防止機能を前記電子機器に組み込むことによって、GPS等の位置検出装置で現在地を検出し、その現在地の位置情報に基づいて移動速度を算出することができる。
電子機器の使用者の注視点検出および位置検出を利用した事故防止機能を前記電子機器に組み込むことによって、算出された移動速度の情報を解析して前記電子機器の使用者が歩行中または移動体での移動中であるかを識別できる。
電子機器の使用者の注視点検出および位置検出を利用した事故防止機能を前記電子機器に組み込むことによって、カメラで撮影した使用者の顔や眼球等の映像を画像処理して解析することで、使用者の注視点検出ができる。
電子機器の使用者の注視点検出および位置検出を利用した事故防止機能を前記電子機器に組み込むことによって、検出された注視点を解析することで、使用者が前記移動体の操縦者、操船者または運転者であることを判別できる。
電子機器の使用者の注視点検出および位置検出を利用した事故防止機能を前記電子機器に組み込むことによって、前記電子機器が算出された移動速度の情報によって歩行中ではなく移動体で移動していることが識別され、かつ前記電子機器の使用者が前記移動体の操縦者、操船者または運転者であることを判別された場合には、前記電子機器の強制的な機能制限や動作停止等の事故防止対策を実行することができる。
この発明によれば、移動中の移動体の中で電子機器を使用する場合において、使用者の顔や眼球等を撮影するカメラ1、カメラ1によって撮影された使用者の顔や眼球等の映像を画像処理して解析することで使用者の注視点を検出する注視点検出手段2、GPS等の現在地を検出する位置検出装置4、位置検出装置4によって検出された現在地の情報によって移動速度を算出する移動速度算出手段5、注視点検出手段2によって検出された使用者の注視点および移動速度算出手段5によって算出された移動速度によって電子機器の使用者が運転者または運転者以外であるかを判別する使用者判別手段3、電子機器のハードウェア7を制御する設定ポートI/O6を備えることによって、使用者判別手段3が電子機器の使用者が運転者かつ運転中と確定した場合には電子機器の強制的な機能制限や動作停止等の事故防止対策が実行されて重大な事故を未然に防ぐことができる。
この発明による電子機器の使用者の注視点検出および位置検出を利用した事故防止機能を動作させる電子機器の構成図である。
従来技術によるGPS等の位置検出装置を利用した電子機器の構成図である。
この発明による電子機器の使用者の注視点検出および位置検出を利用した事故防止機能を動作させる電子機器の移動速度算出手段5の動作手順を説明するフローチャートである。
この発明による電子機器の使用者の注視点検出および位置検出を利用した事故防止機能を動作させる電子機器の注視点検出手段2の動作手順を説明するフローチャートである。
この発明による電子機器の使用者の注視点検出および位置検出を利用した事故防止機能を動作させる電子機器の使用者判別手段3の動作手順を説明するフローチャートである。
この発明による電子機器の使用者の注視点検出および位置検出を利用した事故防止機能を動作させる電子機器の使用者判別手段3の使用者の判別を行う基準となる運転者の注視点測定を行った際の測定状態を表す説明図である。
この発明による電子機器の使用者の注視点検出および位置検出を利用した事故防止機能を動作させる電子機器の使用者判別手段3の使用者の判別を行う基準となる走行中および停車中における運転者の注視点サンプルデータである。
この発明による電子機器の使用者の注視点検出および位置検出を利用した事故防止機能を動作させる電子機器の装置構成および動作手順を図1、図3、図4、図5、図6、図7により説明する。図1はこの発明による電子機器の使用者の注視点検出および位置検出を利用した事故防止機能を動作させる電子機器の構成図であり、図3は移動速度算出手段5の動作手順を説明するフローチャートであり、図4は注視点検出手段2の動作手順を説明するフローチャートであり、図5は使用者判別手段3の動作手順を説明するフローチャートであり、図6は使用者判別手段3の使用者の判別を行う基準となる運転者の注視点測定を行った際の測定状態を表す説明図であり、図7は使用者判別手段3の使用者の判別を行う基準となる走行中および停止中における運転手の注視点サンプルデータである。
図3の31ではハードウェア7の内部タイマーに設定した時間経過後に割り込み処理が発生して、32で移動速度算出手段5の処理が開始する。33で位置検出装置4から現在地の位置情報を読み込み、34で移動速度の算出を行う。一般的には移動速度(km/h)=移動距離(km)÷移動時間(h)で算出されるが、精度や誤差などの問題で不適切な位置情報のデータが多い場合には移動平均処理等の手法によって不適切な位置情報のデータの影響を受けない様に工夫して移動速度を算出する。35では算出した移動速度情報を使用者判別手段3に出力し、36で移動速度算出手段5の処理を終了する。
図4の41ではハードウェア7の内部タイマー装置に設定した時間経過後に割り込み処理が発生して、42で注視点検出手段2の処理が開始する。図4の注視点検出手段2でも図3の移動速度算出手段5の処理と同様にハードウェア7の内部タイマー装置を利用して割り込み処理を行っているが、注視点検出手段2および移動速度算出手段5の処理を行う専用のハードウェアやチップを有せずソフトウェアのプログラムで処理を実現する場合には、処理時間を占有されることを避けるためにハードウェア7の内部タイマー装置を利用して割り込み発生時に処理を行う方法が適している。次に43ではカメラ1で撮影した使用者の顔や眼球等の映像データを入力して、44で画像処理を行い、45では従来技術による画像解析を利用して顔検出や眼球検出等を行って使用者の注視点を検出する。但し、この場合には電子機器の画面上の注視点を正確に検出する精度や分解能は求められず、使用者が電子機器の画面内と画面外のどちらを見ているかを見分けられるくらいの精度で注視点を検出できる従来技術を利用すれば十分である。45で検出された注視点情報は46で使用者判別手段3に出力し、47で注視点検出手段2の処理が終了する。
図5の51で使用者判別手段3の処理を開始すると、52で移動速度算出手段5より移動速度情報を入力し、53で予め決めてある設定速度未満での移動は歩行中と見なして57で処理を終了するが、設定速度以上で移動している場合は移動体での移動中と判断して、54で注視点検出手段2より注視点情報を入力する。55で電子機器の使用者が運転者または運転者以外かを判別するが、この判別の手法については下記に詳細を記載する。運転者以外と判別された場合は57で処理を終了するが、運転者と判別された場合には、56で電子機器の強制的な機能制限や動作停止等の事故防止対策を実行するため、ハードウェア7の設定ポートであるI/O6に制御情報を出力してハードウェア7を制御する。
図6は使用者判別手段3の使用者の判別を行う基準となる運転者の注視点測定を行った際の測定状態を表す説明図であり、電子機器の使用者が自動車の運転席に座った時の前方の図である。スマートフォンはステアリング64の上部手前のスマートフォンの設置位置63に配置し、前方にフロントカラス62を介して車外が見える状態である。使用者の注視点を検出した場合の注視点はスマートフォンの画面左上の基準座標65を(X、Y)=(0,0)としてX座標とY座標のデータとして取得する。測定に利用したスマートフォンは、1334(Y)×750(X)ピクセルであることから、画面外のY座標66の位置に注視点がある場合は注視点のY座標<0、画面外のX座標(1)67の位置に注視点がある場合は注視点のX座標<0または画面外のX座標(2)68の位置に注視点がある場合は注視点のX座標>750となる。走行中に電子機器を使用している運転手の注視点が画面外に外れる場合は必フロントガラス62の先の前方の確認することは必至であることから、注視点のY座標<0となる状態を解析することによって電子機器の使用者が運転者または運転者以外であると判断ができる。
図7の(A)停車中の運転者の注視点サンプルデータでは、図6の運転席に座った運転者が停車してスマートフォンを操作している時に測定した注視点データである。停車中の運転者の注視点Y座標71と停車中の運転者の注視点X座標72を確認すると運転者は使用しているスマートフォンの画面を殆どの時間注視していることがわかる。しかし、(B)走行中の運転者の注視点サンプルデータでは、走行中の運転者の注視点Y座標73からわかる様にスマートフォンを使用しながら頻繁に進行方向の前方を見ていることから、図6の画面外のY座標66の位置に注視点が移動しているため、注視点のY座標<0となっている部分が非常に多く、数秒間内に短時間で何回もスマートフォンの画面と図6の画面外のY座標66の位置である進行方向の前方を注視点が常に往復している状態であることがわかる。この結果より、注視点検出手段2により検出した注視点情報の注視点Y座標に着目し、数秒間内での画面内と画面外の注視点の滞留比率、数秒間内での各画面内滞留時間および各画面外滞留時間、数秒間内の画面内と画面外の注視点の移動回数などのデータを分析することによってスマートフォンの使用者が運転者または運転者以外であるかを容易に判別することができる。
これによって、この発明による電子機器の使用者の注視点検出および位置検出を利用した事故防止機能では、従来の方法と同様にGPS等の位置検出装置4で電子機器の移動速度を算出することで歩行中または何かの移動体での移動中であるかを識別し、注視点検出手段2で使用者の注視点を検出して使用者判別手段3によって使用者が運転者または運転者以外であるかを判別することができるため、使用者が運転者かつ運転中と確定した場合には電子機器の強制的な機能制限や動作停止等の事故防止対策を実行することで重大な事故を未然に防ぐことができることは明らかである。
1 カメラ
2 注視点検出手段
3 使用者判別手段
4 位置検出装置
5 移動速度算出手段
6 I/O
7 ハードウェア
この発明は、飛行機、船舶、列車、自動車、自動二輪車、自転車等(以下、これらを「移動体」と記載)で携帯電話、スマートフォン、タブレット端末、パーソナルコンピュータ、ゲーム機器等(以下、これらの機器を「電子機器」と記載)を使用している場合において、GPS等の位置検出装置から出力される位置情報を利用して移動速度を算出し、カメラで使用者の顔や眼球等を撮影してその映像を画像処理して解析することで使用者の注視点を検出し、それらの情報により電子機器の使用者が移動体を操縦、操船、運転(以下、これらの行為を「運転」と記載)している当事者(以下、移動体を操縦、操船または運転している者を「運転者」と記載)であるかを判別することができ、使用者が運転者かつ移動速度が設定速度以上であると確定した場合には電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して重大な事故を未然に防ぐことができる使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器である。
従来技術では、GPS等の位置検出装置は主に現在地を検出し地図上に現在地を表示して位置確認をするもの、目的地までの誘導を行うナビゲーションシステムに利用されている。その中には位置情報を利用して移動速度を算出するものもあることから、この仕組みを図2により説明する。位置検出装置21で検出された位置情報は移動速度算出手段22に読み込まれ、移動速度算出手段22は計算機23を制御し移動速度を算出して表示器24に結果を表示する。一般的に移動速度は、移動速度=移動距離÷移動時間の計算式で算出される。
算出された移動速度を利用して、移動速度が一定速度以上の場合には電子機器の使用を行わない様に注意喚起するアプリケーションソフトや電子機器等も存在しているが、移動体の同乗者や乗客等の運転者以外であれば電子機器の使用は法律上かつ安全上は何ら問題がないため、使用者が運転者か運転者以外かの判別ができない以上は、事故防止のための強制的な機能制限や動作停止等の事故防止対策を実行することができず、注意喚起や移動速度の表示のみにとどまっている。この様に従来技術による装置では、GPS等の位置検出装置から出力される位置情報を利用して移動速度を算出し、1つの情報として表示するだけの方法である。
特開2009−198391
特表2013−506209
現在、移動体の運転時において特に自動車の走行中に運転者が電子機器を使用してのメール作成や送受信、通話やデータ通信、電子機器の操作、アプリの使用などの行為による余所見や脇見が原因で重大な交通事故が増加しており大きな社会問題となっている。従来の方法では、GPS等の位置検出装置から出力される位置情報で使用者の移動速度を算出することができることから使用者が移動体で移動していることは識別できるが、電子機器の使用者が移動体の運転者であることを判別することが不可能なことから、電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行することができず重大な事故を未然に防ぐことができなかった。
この発明は、従来の方法と同様にGPS等の位置検出装置4から出力される位置情報を利用して電子機器の移動速度を算出することで移動速度が設定速度未満または設定速度以上であることを判定し、注視点検出手段2で使用者の注視点を検出して使用者判別手段3によって使用者が運転者であることを判別することができるため、使用者が運転者かつ移動速度が設定速度以上であると確定した場合には電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して重大な事故を未然に防ぐことを目的とする。
この目的を達成するために、飛行機、船舶、列車、自動車、自動二輪車、自転車等の移動体において、その操縦者、操船者、運転者等が停止中以外の状態の時に、携帯電話、スマートフォン、タブレット端末、パーソナルコンピュータ、ゲーム機器等の電子機器を使用した場合には、電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行することで、電子機器使用による余所見や脇見が原因となる重大な事故を未然に防ぐことができる。
GPS等の位置検出装置によって現在地を検出し、その現在地の位置情報に基づいて移動速度を算出できることができる。
算出された前記電子機器の使用者の移動速度が予め設定された設定速度未満または設定速度以上であることを判定できる。
カメラで撮影した使用者の顔や眼球等の映像を画像処理して解析することで、使用者の注視点検出ができる。
検出された使用者の注視点を解析することで、使用者が前記移動体の操縦者、操船者または運転者またはそれ以外であることを判別できる。
算出された移動速度が設定速度以上であると判定され、かつ前記電子機器の使用者が前記移動体の操縦者、操船者または運転者であることを判別された場合には、前記電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行することができる。
この発明によれば、電子機器が使用されている場合において、使用者の顔や眼球等を撮影するカメラ1、カメラ1によって撮影された使用者の顔や眼球等の映像を画像処理して解析することで使用者の注視点を検出する注視点検出手段2、GPS等の現在地を検出する位置検出装置4、位置検出装置4によって検出された現在地の位置情報によって移動速度を算出する移動速度算出手段5、注視点検出手段2によって検出された使用者の注視点および移動速度算出手段5によって算出された移動速度によって電子機器の使用者が運転者または運転者以外であるかを判別する使用者判別手段3、電子機器のハードウェア7を制御する設定ポートI/O6を備えることによって、使用者判別手段3が電子機器の使用者が運転者かつ移動速度が設定速度以上であると確定した場合には電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して重大な事故を未然に防ぐことができる。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の構成図である。
従来技術によるGPS等の位置検出装置を利用して移動速度を算出する電子機器の構成図である。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の移動速度算出手段5の動作手順を説明するフローチャートである。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の注視点検出手段2の動作手順を説明するフローチャートである。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の使用者判別手段3の動作手順を説明するフローチャートである。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の使用者判別手段3の使用者の判別を行う基準となる運転者の注視点測定を行った際の測定状態を表す説明図である。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の使用者判別手段3の使用者の判別を行う基準となる走行中および停車中における運転者の注視点サンプルデータである。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の装置構成および動作手順を図1、図3、図4、図5、図6、図7により説明する。図1はこの発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の構成図であり、図3は移動速度算出手段5の動作手順を説明するフローチャートであり、図4は注視点検出手段2の動作手順を説明するフローチャートであり、図5は使用者判別手段3の動作手順を説明するフローチャートであり、図6は使用者判別手段3の使用者の判別を行う基準となる運転者の注視点測定を行った際の測定状態を表す説明図であり、図7は使用者判別手段3の使用者の判別を行う基準となる走行中および停止中における運転手の注視点サンプルデータである。
図3の31ではハードウェア7の内部タイマーに設定した時間経過後に割り込み処理が発生して、32で移動速度算出手段5の処理が開始する。33で位置検出装置4から現在地の位置情報を読み込み、34で移動速度の算出を行う。移動速度は従来技術と同様の方法で算出でき、移動速度=移動距離÷移動時間の計算式で算出される。35では算出した移動速度情報を使用者判別手段3に出力し、36で移動速度算出手段5の処理を終了する。
図4の41ではハードウェア7の内部タイマー装置に設定した時間経過後に割り込み処理が発生して、42で注視点検出手段2の処理が開始する。図4の注視点検出手段2でも図3の移動速度算出手段5の処理と同様に実施の一例としてハードウェア7の内部タイマー装置を利用してソフトウェアで割り込み処理を行っているが、注視点検出手段2および移動速度算出手段5の各処理を行う専用の電子回路や専用のICチップを有せずソフトウェアで各処理を実現する場合には、ハードウェア7のMPU部の処理時間を占有することを避けるためにハードウェア7の内部タイマー装置を利用して割り込み発生時に各処理を行う方法が適している。次に43ではカメラ1で撮影した使用者の顔や眼球等の映像データを入力して、44で画像処理を行い、45では従来技術のアルゴリズムにより画像処理を使用して使用者の注視点を検出する。但し、この場合では、検出した電子機器の画面上の注視点は、極端に高い検出精度や分解能を必要としないことから、電子機器に付属しているカメラで撮影した使用者の顔や眼球等の映像を画像処理して解析することで使用者の注視点を検出する従来技術を利用することができる。45で検出された注視点情報は46で使用者判別手段3に出力し、47で注視点検出手段2の処理が終了する。
図5の51で使用者判別手段3の処理を開始すると、52で移動速度算出手段5より移動速度情報を入力し、53で予め設定してある設定速度未満で移動していると判定された場合は問題なしとして57で処理を終了するが、設定速度以上で移動していると判定された場合は、54で注視点検出手段2より注視点情報を入力する。55で電子機器の使用者が運転者または運転者以外かを判別するが、この判別の手法については下記に詳細を記載する。運転者以外と判別された場合は57で処理を終了するが、運転者と判別された場合には、56で電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行するため、ハードウェア7の設定ポートであるI/O6に制御情報を出力してハードウェア7を制御する。但し、イヤフォン等を利用しての通話等の法律上かつ安全上は何ら問題のない使用方法または機能については、56では処理の対象外として何も行わない。57で使用者判別手段3の処理を終了する。また、図3の移動速度算出手段5、図4の注視点検出手段2および図5の使用者判別手段3については、電子機器内部の専用の電子回路や専用のICチップ、ハードウェア7のMPU部等の計算機で動作している内部ソフトウェアまたはOSもしくはアプリケーションソフト等によって実現する。
図6は使用者判別手段3の使用者の判別を行う基準となる運転者の注視点測定を行った際の測定状態を表す説明図であり、電子機器の使用者が自動車の運転席に座った時の前方の図である。スマートフォンはステアリング64の上部手前のスマートフォンの設置位置63に配置し、前方にフロントカラス62を介して車外が見える状態である。使用者の注視点を検出した場合の注視点はスマートフォンの画面左上の基準座標65を(X、Y)=(0,0)としてX座標とY座標のデータとして取得する。測定に利用したスマートフォンは、1334(Y)×750(X)ピクセルであることから、画面外のY座標66の位置に注視点がある場合は注視点のY座標<0、画面外のX座標(1)67の位置に注視点がある場合は注視点のX座標<0または画面外のX座標(2)68の位置に注視点がある場合は注視点のX座標>750となる。走行中に電子機器を使用している運転手の注視点が画面外に外れる場合はフロントガラス62の先の前方の確認することは必至であることから、注視点は画面外のY座標66の位置にあり即ち注視点のY座標<0となる状態を解析することによって電子機器の使用者が運転者または運転者以外であると判別することができる。
図7の(A)停車中の運転者の注視点サンプルデータでは、図6の運転席に座った運転者が停車してスマートフォンを操作している時に測定した注視点データである。停車中の運転者の注視点Y座標71と停車中の運転者の注視点X座標72を確認すると運転者は使用しているスマートフォンの画面を殆どの時間注視していることがわかる。しかし、(B)走行中の運転者の注視点サンプルデータでは、走行中の運転者の注視点Y座標73からわかる様にスマートフォンを使用しながら頻繁に進行方向の前方を見ていることから、図6の画面外のY座標66の位置に注視点が移動しているため、注視点のY座標<0となっている部分が非常に多く、数秒間内に短時間で何回もスマートフォンの画面と図6の画面外のY座標66の位置である進行方向の前方を注視点が常に往復している状態であることがわかる。この結果より、注視点検出手段2により検出した注視点情報の注視点Y座標に着目し、数秒間内での画面内と画面外の注視点の滞留比率、数秒間内での各画面内滞留時間および各画面外滞留時間、数秒間内の画面内と画面外の注視点の移動回数などのデータを分析することによってスマートフォンの使用者が運転者または運転者以外であるかを容易に判別することができる。
これによって、この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器では、従来の方法と同様にGPS等の位置検出装置4から出力される位置情報を利用して電子機器の移動速度を算出することで基準となる設定速度未満または設定速度以上であることを判定し、注視点検出手段2で使用者の注視点を検出して使用者判別手段3によって使用者が運転者または運転者以外であるかを判別することができるため、使用者が運転者かつ移動速度が設定速度以上であると確定した場合には電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して重大な事故を未然に防ぐことができることは明らかである。
1 カメラ
2 注視点検出手段
3 使用者判別手段
4 位置検出装置
5 移動速度算出手段
6 I/O
7 ハードウェア
この発明は、飛行機、船舶、列車、自動車等(以下、これらを「移動体」と記載)で携帯電話、スマートフォン、タブレット端末、パーソナルコンピュータ、ゲーム機器等(以下、これらの機器を「電子機器」と記載)を使用している場合において、GPS等の位置検出装置から出力される位置情報を利用して移動速度を算出し、カメラで使用者の顔や眼球等を撮影してその映像を画像処理して解析することで使用者の注視点を検出し、それらの情報により電子機器の使用者が移動体を操縦、操船、運転(以下、これらの行為を「運転」と記載)している当事者(以下、移動体を操縦、操船または運転している者を「運転者」と記載)であるかを判別することができ、使用者が運転者かつ移動速度が設定速度以上であると確定した場合には電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して重大な事故を未然に防ぐことができる使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器である。
従来技術では、GPS等の位置検出装置は主に現在地を検出し地図上に現在地を表示して位置確認をするもの、目的地までの誘導を行うナビゲーションシステムに利用されている。その中には位置情報を利用して移動速度を算出するものもあることから、この仕組みを図2により説明する。位置検出装置21で検出された位置情報は移動速度算出手段22に読み込まれ、移動速度算出手段22は計算機23を制御し移動速度を算出して表示器24に結果を表示する。一般的に移動速度は、移動速度=移動距離÷移動時間の計算式で算出される。この様に従来技術による装置では、GPS等の位置検出装置から出力される位置情報を利用して移動速度を算出し、1つの情報として表示するだけの方法である。
特開2009−198391
特表2013−506209
現在、移動体の運転時において特に自動車の走行中に運転者が電子機器を使用してのメール作成や送受信、通話やデータ通信、電子機器の操作、アプリの使用などの行為による余所見や脇見が原因で重大な交通事故が増加しており大きな社会問題となっている。従来の方法では、GPS等の位置検出装置から出力される位置情報で使用者の移動速度を算出することができることから使用者が移動体で移動していることは識別できるが、電子機器の使用者が移動体の運転者であることを判別することが不可能なことから、電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行することができず重大な事故を未然に防ぐことができなかった。
この発明は、従来の方法と同様にGPS等の位置検出装置4から出力される位置情報を利用して電子機器の移動速度を算出することで移動速度が設定速度未満または設定速度以上であることを判定し、注視点検出手段2で使用者の注視点を検出して使用者判別手段3によって使用者が運転者であることを判別することができるため、使用者が運転者かつ移動速度が設定速度以上であると確定した場合には電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して重大な事故を未然に防ぐことを目的とする。
この目的を達成するために、飛行機、船舶、列車、自動車等の移動体において、携帯電話、スマートフォン、タブレット端末、パーソナルコンピュータ、ゲーム機器等の携帯型の電子機器に注視点検出手段と使用者判別手段を備え、前記使用者判別手段は前記注視点検出手段によって検出された使用者の注視点情報から前記電子機器においての数秒間内での画面内と画面外の注視点の滞留比率、数秒間内での各画面内滞留時間および各画面外滞留時間、数秒間内の画面内と画面外の注視点の移動回数などを分析することによって前記電子機器の使用者が前記移動体の操縦、操船または運転している当事者であるかの判別を行うことで、前記電子機器の使用者が前記移動体を運転している前記当事者である場合は前記電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して電子機器使用による余所見や脇見が原因となる重大な事故を未然に防ぐことができる。
前記注視点検出手段は、カメラで撮影した使用者の顔や眼球等の映像を画像処理そして解析して前記電子機器の使用者の注視点検出を行うことで、前記使用者判別手段は前記電子機器の使用者が前記移動体を運転している前記当事者であることを判別ができることから、前記電子機器の使用者が前記移動体を運転している前記当事者である場合は前記電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して電子機器使用による余所見や脇見が原因となる重大な事故を未然に防ぐことができる。
前記使用者判別手段は、移動速度算出手段によって算出された前記電子機器の使用者の移動速度情報に基づいて、予め設定された設定速度以上で移動しているかの判定を行うことで、前記使用者判別手段は前記電子機器の使用者が移動中であることを判定することができることから、前記電子機器の使用者が前記移動体を運転している前記当事者である場合は前記電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して電子機器使用による余所見や脇見が原因となる重大な事故を未然に防ぐことができる。
前記移動速度算出手段は、GPS等の位置検出装置によって現在地を検出し、その現在地の位置情報に基づいて前記移動体の移動速度を算出することで、前記使用者判別手段は前記電子機器の使用者が予め設定された設定速度以上で移動していることを判定することができることから、前記電子機器の使用者が前記移動体を運転している前記当事者である場合は前記電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して電子機器使用による余所見や脇見が原因となる重大な事故を未然に防ぐことができる。
前記電子機器は、前記カメラ、前記位置検出装置、前記注視点検出手段、前記移動速度算出手段、前記使用者判別手段を前記電子機器自身に備えていることで、前記電子機器単体のみで前記電子機器の使用者が予め設定された設定速度以上で移動していることを判定および前記電子機器の使用者が前記移動体を運転している前記当事者であることを判別ができることから、前記電子機器の使用者が前記移動体を運転している前記当事者である場合は前記電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して電子機器使用による余所見や脇見が原因となる重大な事故を未然に防ぐことができる。
前記使用者判別手段は、前記移動速度算出手段によって算出された前記電子機器の使用者の移動速度が予め設定された設定速度以上であると判定し、かつ前記注視点検出手段によって検出された注視点情報の分析により前記当事者であることを判別した場合には前記電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行することで、前記電子機器の使用者が前記移動体を運転している前記当事者である場合は前記電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して電子機器使用による余所見や脇見が原因となる重大な事故を未然に防ぐことができる。
この発明によれば、電子機器が使用されている場合において、使用者の顔や眼球等を撮影するカメラ1、カメラ1によって撮影された使用者の顔や眼球等の映像を画像処理して解析することで使用者の注視点を検出する注視点検出手段2、GPS等の現在地を検出する位置検出装置4、位置検出装置4によって検出された現在地の位置情報によって移動速度を算出する移動速度算出手段5、注視点検出手段2によって検出された使用者の注視点および移動速度算出手段5によって算出された移動速度によって電子機器の使用者が運転者または運転者以外であるかを判別する使用者判別手段3、電子機器のハードウェア7を制御する設定ポートI/O6を備えることによって、使用者判別手段3が電子機器の使用者が運転者かつ移動速度が設定速度以上であると確定した場合には電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して重大な事故を未然に防ぐことができる。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の構成図である。
従来技術によるGPS等の位置検出装置を利用して移動速度を算出する電子機器の構成図である。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の移動速度算出手段5の動作手順を説明するフローチャートである。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の注視点検出手段2の動作手順を説明するフローチャートである。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の使用者判別手段3の動作手順を説明するフローチャートである。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の使用者判別手段3の使用者の判別を行う基準となる運転者の注視点測定を行った際の測定状態を表す説明図である。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の使用者判別手段3の使用者の判別を行う基準となる走行中および停車中における運転者の注視点サンプルデータである。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の装置構成および動作手順を図1、図3、図4、図5、図6、図7により説明する。図1はこの発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の構成図であり、図3は移動速度算出手段5の動作手順を説明するフローチャートであり、図4は注視点検出手段2の動作手順を説明するフローチャートであり、図5は使用者判別手段3の動作手順を説明するフローチャートであり、図6は使用者判別手段3の使用者の判別を行う基準となる運転者の注視点測定を行った際の測定状態を表す説明図であり、図7は使用者判別手段3の使用者の判別を行う基準となる走行中および停止中における運転手の注視点サンプルデータである。
図3の31ではハードウェア7の内部タイマーに設定した時間経過後に割り込み処理が発生して、32で移動速度算出手段5の処理が開始する。33で位置検出装置4から現在地の位置情報を読み込み、34で移動速度の算出を行う。移動速度は従来技術と同様の方法で算出でき、移動速度=移動距離÷移動時間の計算式で算出される。35では算出した移動速度情報を使用者判別手段3に出力し、36で移動速度算出手段5の処理を終了する。
図4の41ではハードウェア7の内部タイマー装置に設定した時間経過後に割り込み処理が発生して、42で注視点検出手段2の処理が開始する。図4の注視点検出手段2でも図3の移動速度算出手段5の処理と同様に実施の一例としてハードウェア7の内部タイマー装置を利用してソフトウェアで割り込み処理を行っているが、注視点検出手段2および移動速度算出手段5の各処理を行う専用の電子回路や専用のICチップを有せずソフトウェアで各処理を実現する場合には、ハードウェア7のMPU部の処理時間を占有することを避けるためにハードウェア7の内部タイマー装置を利用して割り込み発生時に各処理を行う方法が適している。次に43ではカメラ1で撮影した使用者の顔や眼球等の映像データを入力して、44で画像処理を行い、45では従来技術のアルゴリズムにより画像処理を使用して使用者の注視点を検出する。但し、この場合では、検出した電子機器の画面上の注視点は、極端に高い検出精度や分解能を必要としないことから、電子機器に付属しているカメラで撮影した使用者の顔や眼球等の映像を画像処理して解析することで使用者の注視点を検出する従来技術を利用することができる。45で検出された注視点情報は46で使用者判別手段3に出力し、47で注視点検出手段2の処理が終了する。
図5の51で使用者判別手段3の処理を開始すると、52で移動速度算出手段5より移動速度情報を入力し、53で予め設定してある設定速度未満で移動していると判定された場合は問題なしとして57で処理を終了するが、設定速度以上で移動していると判定された場合は、54で注視点検出手段2より注視点情報を入力する。55で電子機器の使用者が運転者または運転者以外かを判別するが、この判別の手法については下記に詳細を記載する。運転者以外と判別された場合は57で処理を終了するが、運転者と判別された場合には、56で電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行するため、ハードウェア7の設定ポートであるI/O6に制御情報を出力してハードウェア7を制御する。
図6は使用者判別手段3の使用者の判別を行う基準となる運転者の注視点測定を行った際の測定状態を表す説明図であり、電子機器の使用者が自動車の運転席に座った時の前方の図である。スマートフォンはステアリング64の上部手前のスマートフォンの設置位置63に配置し、前方にフロントカラス62を介して車外が見える状態である。使用者の注視点を検出した場合の注視点はスマートフォンの画面左上の基準座標65を(X、Y)=(0,0)としてX座標とY座標のデータとして取得する。測定に利用したスマートフォンは、1334(Y)×750(X)ピクセルであることから、画面外のY座標66の位置に注視点がある場合は注視点のY座標<0、画面外のX座標(1)67の位置に注視点がある場合は注視点のX座標<0または画面外のX座標(2)68の位置に注視点がある場合は注視点のX座標>750となる。走行中に電子機器を使用している運転手の注視点が画面外に外れる場合はフロントガラス62の先の前方の確認することは必至であることから、注視点は画面外のY座標66の位置にあり即ち注視点のY座標<0となる状態を解析することによって電子機器の使用者が運転者または運転者以外であると判別することができる。
図7の(A)停車中の運転者の注視点サンプルデータでは、図6の運転席に座った運転者が停車してスマートフォンを操作している時に測定した注視点データである。停車中の運転者の注視点Y座標71と停車中の運転者の注視点X座標72を確認すると運転者は使用しているスマートフォンの画面を殆どの時間注視していることがわかる。しかし、(B)走行中の運転者の注視点サンプルデータでは、走行中の運転者の注視点Y座標73からわかる様にスマートフォンを使用しながら頻繁に進行方向の前方を見ていることから、図6の画面外のY座標66の位置に注視点が移動しているため、注視点のY座標<0となっている部分が非常に多く、数秒間内に短時間で何回もスマートフォンの画面と図6の画面外のY座標66の位置である進行方向の前方を注視点が常に往復している状態であることがわかる。この結果より、注視点検出手段2により検出した注視点情報の注視点Y座標に着目し、数秒間内での画面内と画面外の注視点の滞留比率、数秒間内での各画面内滞留時間および各画面外滞留時間、数秒間内の画面内と画面外の注視点の移動回数などのデータを分析することによってスマートフォンの使用者が運転者または運転者以外であるかを容易に判別することができる。
これによって、この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器では、従来の方法と同様にGPS等の位置検出装置4から出力される位置情報を利用して電子機器の移動速度を算出することで基準となる設定速度未満または設定速度以上であることを判定し、注視点検出手段2で使用者の注視点を検出して使用者判別手段3によって使用者が運転者または運転者以外であるかを判別することができるため、使用者が運転者かつ移動速度が設定速度以上であると確定した場合には電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して重大な事故を未然に防ぐことができることは明らかである。
1 カメラ
2 注視点検出手段
3 使用者判別手段
4 位置検出装置
5 移動速度算出手段
6 I/O
7 ハードウェア
この発明は、飛行機、船舶、列車、自動車等(以下、これらを「移動体」と記載)で携帯電話、スマートフォン、タブレット端末、パーソナルコンピュータ、ゲーム機器等(以下、これらの機器を「電子機器」と記載)を使用している場合において、GPS等の位置検出装置から出力される位置情報を利用して移動速度を算出し、カメラで使用者の顔や眼球等を撮影してその映像を画像処理して解析することで使用者の注視点を検出し、それらの情報により電子機器の使用者が移動体を操縦、操船、運転(以下、これらの行為を「運転」と記載)している当事者(以下、移動体を操縦、操船または運転している者を「運転者」と記載)であるかを判別することができ、使用者が運転者かつ移動速度が設定速度以上であると確定した場合には電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して重大な事故を未然に防ぐことができる使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器である。
従来技術では、GPS等の位置検出装置は主に現在地を検出し地図上に現在地を表示して位置確認をするもの、目的地までの誘導を行うナビゲーションシステムに利用されている。その中には位置情報を利用して移動速度を算出するものもあることから、この仕組みを図2により説明する。位置検出装置21で検出された位置情報は移動速度算出手段22に読み込まれ、移動速度算出手段22は計算機23を制御し移動速度を算出して表示器24に結果を表示する。一般的に移動速度は、移動速度=移動距離÷移動時間の計算式で算出される。この様に従来技術による装置では、GPS等の位置検出装置から出力される位置情報を利用して移動速度を算出し、1つの情報として表示するだけの方法である。
特開2009−198391
特表2013−506209
現在、移動体の運転時において特に自動車の走行中に運転者が電子機器を使用してのメール作成や送受信、通話やデータ通信、電子機器の操作、アプリの使用などの行為による余所見や脇見が原因で重大な交通事故が増加しており大きな社会問題となっている。従来の方法では、GPS等の位置検出装置から出力される位置情報で使用者の移動速度を算出することができることから使用者が移動体で移動していることは識別できるが、電子機器の使用者が移動体の運転者であることを判別することが不可能なことから、電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行することができず重大な事故を未然に防ぐことができなかった。
この発明は、従来の方法と同様にGPS等の位置検出装置4から出力される位置情報を利用して電子機器の移動速度を算出することで移動速度が設定速度未満または設定速度以上であることを判定し、注視点検出手段2で使用者の注視点を検出して使用者判別手段3によって使用者が運転者であることを判別することができるため、使用者が運転者かつ移動速度が設定速度以上であると確定した場合には電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して重大な事故を未然に防ぐことを目的とする。
この目的を達成するために、飛行機、船舶、列車、自動車等の移動体において、携帯電話、スマートフォン、タブレット端末、パーソナルコンピュータ、ゲーム機器等の携帯型の電子機器に注視点検出手段と使用者判別手段を備え、前記使用者判別手段は前記注視点検出手段によって検出された使用者の注視点情報から前記電子機器においての数秒間内での画面内と画面外の注視点の滞留比率、数秒間内での各画面内滞留時間および各画面外滞留時間、数秒間内の画面内と画面外の注視点の移動回数などを分析することによって前記電子機器の使用者が前記移動体の操縦、操船または運転している当事者であるかの判別を行うことで、前記電子機器の使用者が前記移動体を運転している前記当事者である場合は前記電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して電子機器使用による余所見や脇見が原因となる重大な事故を未然に防ぐことができる。
前記注視点検出手段は、カメラで撮影した使用者の顔や眼球等の映像を画像処理そして解析して前記電子機器の使用者の注視点検出を行うことで、前記使用者判別手段は前記電子機器の使用者が前記移動体を運転している前記当事者であることを判別ができることから、前記電子機器の使用者が前記移動体を運転している前記当事者である場合は前記電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して電子機器使用による余所見や脇見が原因となる重大な事故を未然に防ぐことができる。
前記使用者判別手段は、移動速度算出手段によって算出された前記電子機器の使用者の移動速度情報に基づいて、予め設定された設定速度以上で移動しているかの判定を行うことで、前記使用者判別手段は前記電子機器の使用者が移動中であることを判定することができることから、前記電子機器の使用者が前記移動体を運転している前記当事者である場合は前記電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して電子機器使用による余所見や脇見が原因となる重大な事故を未然に防ぐことができる。
前記移動速度算出手段は、GPS等の位置検出装置によって現在地を検出し、その現在地の位置情報に基づいて前記移動体の移動速度を算出することで、前記使用者判別手段は前記電子機器の使用者が予め設定された設定速度以上で移動していることを判定することができることから、前記電子機器の使用者が前記移動体を運転している前記当事者である場合は前記電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して電子機器使用による余所見や脇見が原因となる重大な事故を未然に防ぐことができる。
前記使用者判別手段は、前記移動速度算出手段によって算出された前記電子機器の使用者の移動速度が予め設定された設定速度以上であると判定し、かつ前記注視点検出手段によって検出された注視点情報の分析により前記当事者であることを判別した場合には前記電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行することで、前記電子機器の使用者が前記移動体を運転している前記当事者である場合は前記電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して電子機器使用による余所見や脇見が原因となる重大な事故を未然に防ぐことができる。
この発明によれば、電子機器が使用されている場合において、使用者の顔や眼球等を撮影するカメラ1、カメラ1によって撮影された使用者の顔や眼球等の映像を画像処理して解析することで使用者の注視点を検出する注視点検出手段2、GPS等の現在地を検出する位置検出装置4、位置検出装置4によって検出された現在地の位置情報によって移動速度を算出する移動速度算出手段5、注視点検出手段2によって検出された使用者の注視点および移動速度算出手段5によって算出された移動速度によって電子機器の使用者が運転者または運転者以外であるかを判別する使用者判別手段3、電子機器のハードウェア7を制御する設定ポートI/O6を備えることによって、使用者判別手段3が電子機器の使用者が運転者かつ移動速度が設定速度以上であると確定した場合には電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して重大な事故を未然に防ぐことができる。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の構成図である。
従来技術によるGPS等の位置検出装置を利用して移動速度を算出する電子機器の構成図である。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の移動速度算出手段5の動作手順を説明するフローチャートである。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の注視点検出手段2の動作手順を説明するフローチャートである。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の使用者判別手段3の動作手順を説明するフローチャートである。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の使用者判別手段3の使用者の判別を行う基準となる運転者の注視点測定を行った際の測定状態を表す説明図である。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の使用者判別手段3の使用者の判別を行う基準となる走行中および停車中における運転者の注視点サンプルデータである。
この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の装置構成および動作手順を図1、図3、図4、図5、図6、図7により説明する。図1はこの発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器の構成図であり、図3は移動速度算出手段5の動作手順を説明するフローチャートであり、図4は注視点検出手段2の動作手順を説明するフローチャートであり、図5は使用者判別手段3の動作手順を説明するフローチャートであり、図6は使用者判別手段3の使用者の判別を行う基準となる運転者の注視点測定を行った際の測定状態を表す説明図であり、図7は使用者判別手段3の使用者の判別を行う基準となる走行中および停止中における運転手の注視点サンプルデータである。
図3の31ではハードウェア7の内部タイマーに設定した時間経過後に割り込み処理が発生して、32で移動速度算出手段5の処理が開始する。33で位置検出装置4から現在地の位置情報を読み込み、34で移動速度の算出を行う。移動速度は従来技術と同様の方法で算出でき、移動速度=移動距離÷移動時間の計算式で算出される。35では算出した移動速度情報を使用者判別手段3に出力し、36で移動速度算出手段5の処理を終了する。
図4の41ではハードウェア7の内部タイマー装置に設定した時間経過後に割り込み処理が発生して、42で注視点検出手段2の処理が開始する。図4の注視点検出手段2でも図3の移動速度算出手段5の処理と同様に実施の一例としてハードウェア7の内部タイマー装置を利用してソフトウェアで割り込み処理を行っているが、注視点検出手段2および移動速度算出手段5の各処理を行う専用の電子回路や専用のICチップを有せずソフトウェアで各処理を実現する場合には、ハードウェア7のMPU部の処理時間を占有することを避けるためにハードウェア7の内部タイマー装置を利用して割り込み発生時に各処理を行う方法が適している。次に43ではカメラ1で撮影した使用者の顔や眼球等の映像データを入力して、44で画像処理を行い、45では従来技術のアルゴリズムにより画像処理を使用して使用者の注視点を検出する。但し、この場合では、検出した電子機器の画面上の注視点は、極端に高い検出精度や分解能を必要としないことから、電子機器に付属しているカメラで撮影した使用者の顔や眼球等の映像を画像処理して解析することで使用者の注視点を検出する従来技術を利用することができる。45で検出された注視点情報は46で使用者判別手段3に出力し、47で注視点検出手段2の処理が終了する。
図5の51で使用者判別手段3の処理を開始すると、52で移動速度算出手段5より移動速度情報を入力し、53で予め設定してある設定速度未満で移動していると判定された場合は問題なしとして57で処理を終了するが、設定速度以上で移動していると判定された場合は、54で注視点検出手段2より注視点情報を入力する。55で電子機器の使用者が運転者または運転者以外かを判別するが、この判別の手法については下記に詳細を記載する。運転者以外と判別された場合は57で処理を終了するが、運転者と判別された場合には、56で電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行するため、ハードウェア7の設定ポートであるI/O6に制御情報を出力してハードウェア7を制御する。
図6は使用者判別手段3の使用者の判別を行う基準となる運転者の注視点測定を行った際の測定状態を表す説明図であり、電子機器の使用者が自動車の運転席に座った時の前方の図である。スマートフォンはステアリング64の上部手前のスマートフォンの設置位置63に配置し、前方にフロントカラス62を介して車外が見える状態である。使用者の注視点を検出した場合の注視点はスマートフォンの画面左上の基準座標65を(X、Y)=(0,0)としてX座標とY座標のデータとして取得する。測定に利用したスマートフォンは、1334(Y)×750(X)ピクセルであることから、画面外のY座標66の位置に注視点がある場合は注視点のY座標<0、画面外のX座標(1)67の位置に注視点がある場合は注視点のX座標<0または画面外のX座標(2)68の位置に注視点がある場合は注視点のX座標>750となる。走行中に電子機器を使用している運転手の注視点が画面外に外れる場合はフロントガラス62の先の前方の確認することは必至であることから、注視点は画面外のY座標66の位置にあり即ち注視点のY座標<0となる状態を解析することによって電子機器の使用者が運転者または運転者以外であると判別することができる。
図7の(A)停車中の運転者の注視点サンプルデータでは、図6の運転席に座った運転者が停車してスマートフォンを操作している時に測定した注視点データである。停車中の運転者の注視点Y座標71と停車中の運転者の注視点X座標72を確認すると運転者は使用しているスマートフォンの画面を殆どの時間注視していることがわかる。しかし、(B)走行中の運転者の注視点サンプルデータでは、走行中の運転者の注視点Y座標73からわかる様にスマートフォンを使用しながら頻繁に進行方向の前方を見ていることから、図6の画面外のY座標66の位置に注視点が移動しているため、注視点のY座標<0となっている部分が非常に多く、数秒間内に短時間で何回もスマートフォンの画面と図6の画面外のY座標66の位置である進行方向の前方を注視点が常に往復している状態であることがわかる。この結果より、注視点検出手段2により検出した注視点情報の注視点Y座標に着目し、数秒間内での画面内と画面外の注視点の滞留比率、数秒間内での各画面内滞留時間および各画面外滞留時間、数秒間内の画面内と画面外の注視点の移動回数などのデータを分析することによってスマートフォンの使用者が運転者または運転者以外であるかを容易に判別することができる。
これによって、この発明による使用者の注視点および移動速度を利用した事故防止対策機能を備えた電子機器では、従来の方法と同様にGPS等の位置検出装置4から出力される位置情報を利用して電子機器の移動速度を算出することで基準となる設定速度未満または設定速度以上であることを判定し、注視点検出手段2で使用者の注視点を検出して使用者判別手段3によって使用者が運転者または運転者以外であるかを判別することができるため、使用者が運転者かつ移動速度が設定速度以上であると確定した場合には電子機器が自身の強制的な機能制限や動作停止等の事故防止対策を実行して重大な事故を未然に防ぐことができることは明らかである。
1 カメラ
2 注視点検出手段
3 使用者判別手段
4 位置検出装置
5 移動速度算出手段
6 I/O
7 ハードウェア