JP6978247B2

JP6978247B2 - Operation monitoring system

Info

Publication number: JP6978247B2
Application number: JP2017150889A
Authority: JP
Inventors: 景介石川
Original assignee: Yazaki Energy System Corp
Current assignee: Yazaki Energy System Corp
Priority date: 2017-08-03
Filing date: 2017-08-03
Publication date: 2021-12-08
Anticipated expiration: 2037-08-03
Also published as: JP2019026211A

Description

本発明は、車両の運転操作に影響を及ぼす運転者による運転中の携帯端末操作などを監視するために利用可能な操作監視システムに関する。 The present invention relates to an operation monitoring system that can be used to monitor the operation of a mobile terminal while driving by a driver that affects the driving operation of a vehicle.

例えば、特許文献１に示された事故防止システムは、車両運転中に運転者が携帯電話機を使用しようとしているとき、または使用している状態で、運転者に注意を出して慎重な運転を行わせるための技術を示している。すなわち、運転者が携帯電話機を使用しながら運転を行っている状態で、車両の走行状態が不安定になっているとき、あるいはウインカを出して車両の速度、進行方向を大きく変えようとしているとき、通話検知装置、走行状態検知装置でこれを検知し、メッセージを作成して警報の音声を出させ、運転者に注意を与える。また、特許文献１の図１に示された通話検知装置は、携帯電話傍受、電波強度検知、画像処理の各機能を有している。 For example, the accident prevention system shown in Patent Document 1 pays attention to the driver and drives carefully when the driver is trying to use or is using the mobile phone while driving the vehicle. It shows the technology to make it. That is, when the driver is driving while using a mobile phone and the running state of the vehicle is unstable, or when the driver is trying to change the speed and the traveling direction of the vehicle significantly by putting out a blinker. , The call detection device and the driving state detection device detect this, create a message, make an alarm sound, and give attention to the driver. Further, the call detection device shown in FIG. 1 of Patent Document 1 has each function of mobile phone interception, radio wave intensity detection, and image processing.

また、特許文献２の電話使用検出方法は、ドライバ自身の携帯電話、ＰＨＳ等による通話だけを検知でき、それを検知した場合に積極的に運転中電話対策を採るための技術を示している。すなわち、車輌の運転席に着座しているドライバをカメラで撮影しその撮影画像を取り込む。画像処理ユニットは、撮影した画像の中からドライバの顔領域を探索するとともに、顔領域の周辺でドライバの手領域を探索する。車輌コントローラユニットは、画像処理ユニット側でドライバの手領域が継続して検出された場合に通話中と判定し、車輌制御の実行指令を出力する。 Further, the telephone use detection method of Patent Document 2 shows a technique for detecting only a call by the driver's own mobile phone, PHS, or the like, and actively taking measures against the telephone while driving when the call is detected. That is, the driver sitting in the driver's seat of the vehicle is photographed by the camera and the photographed image is captured. The image processing unit searches for the driver's face area from the captured image and also searches for the driver's hand area around the face area. The vehicle controller unit determines that a call is in progress when the driver's hand area is continuously detected on the image processing unit side, and outputs a vehicle control execution command.

特許文献３には、撮像対象者の画像情報を解析して、携帯電話の通話中であるか否かを判定するための通話判定装置が開示されている。すなわち、カメラで撮像された情報から操作者の顔を検出する顔検出部と、検出した顔の位置に基づいて、携帯電話の通話状態における手の撮像領域を特定する手領域特定部と、手の領域における画素値の変化量に基づいて、操作者が携帯電話の通話中であるか否かを判定する通話判定部とを備える。 Patent Document 3 discloses a call determination device for analyzing image information of a person to be imaged to determine whether or not a mobile phone is in a call. That is, a face detection unit that detects the operator's face from the information captured by the camera, a hand region identification unit that specifies the imaging region of the hand in the call state of the mobile phone based on the detected face position, and a hand. It is provided with a call determination unit for determining whether or not the operator is in a call on a mobile phone based on the amount of change in the pixel value in the region of.

また、特許文献４には、車両用に特化されていない携帯端末が、運転者により運転中に操作されることを制限するための技術が開示されている。すなわち、赤外線信号を受信可能な携帯端末と、車両の各座席に設置され、携帯端末が受信可能な赤外線の許可信号を送信する赤外線送受信部と、車両の走行中に、運転席に設置された赤外線送受信部による前記許可信号の送信を停止させる信号処理装置とを備え、携帯端末は、自端末が車両内にあり、且つ許可信号を受信していないと判定した場合に自端末の操作を制限する。 Further, Patent Document 4 discloses a technique for limiting a mobile terminal not specialized for a vehicle from being operated by a driver while driving. That is, a mobile terminal capable of receiving an infrared signal, an infrared transmitter / receiver installed in each seat of the vehicle and transmitting an infrared permission signal that the mobile terminal can receive, and an infrared transmitter / receiver installed in the driver's seat while the vehicle is running. It is equipped with a signal processing device that stops the transmission of the permission signal by the infrared transmitter / receiver, and the mobile terminal limits the operation of the own terminal when it is determined that the own terminal is in the vehicle and the permission signal is not received. do.

特開２０００−１９８３７０号公報Japanese Unexamined Patent Publication No. 2000-198370 特開２００５−２０５９４３号公報Japanese Unexamined Patent Publication No. 2005-205943 特開２０１０−２１８３９２号公報Japanese Unexamined Patent Publication No. 2010-218392 特開２０１４−４３１２６号公報Japanese Unexamined Patent Publication No. 2014-43126

特許文献１〜特許文献４のいずれにおいても、運転者が携帯電話等の携帯端末を操作する状態を、カメラで撮影した映像などの情報に基づいて間接的に検出している。したがって、実際に運転者が携帯端末を操作している状態であってもそれを検知できない場合がある。例えば、カメラで撮影できない位置にあるスマートフォンなどの携帯端末を、顔を動かさずに運転者が操作している場合や、電波の送信を伴わないアプリケーションソフトウェアを操作しているような場合には、この操作を監視システムが検出できない。 In all of Patent Documents 1 to 4, the state in which the driver operates a mobile terminal such as a mobile phone is indirectly detected based on information such as an image taken by a camera. Therefore, even if the driver is actually operating the mobile terminal, it may not be detected. For example, if the driver is operating a mobile terminal such as a smartphone that cannot be photographed by the camera without moving his face, or if he is operating application software that does not transmit radio waves. The monitoring system cannot detect this operation.

一方、デジタルタコグラフやドライブレコーダのような車載器を搭載した車両においては、車室内の運転者等の運転状況を撮影した画像データを自動的に記録する機能を利用できる場合がある。このような車載器の記録データを車両の運行後に解析すれば、車両の運行中に運転者が携帯端末を操作しながら運転したか否かをある程度は把握できる。しかし、手間のかかる解析作業が必要になる。しかも、リアルタイムの検出が不可能であるため、車両の運行中に警報を出力して携帯端末の操作を中止させることはできない。 On the other hand, in a vehicle equipped with an on-board unit such as a digital tachograph or a drive recorder, a function of automatically recording image data of a driver or the like in the vehicle interior may be available. By analyzing the recorded data of such an in-vehicle device after the vehicle is operated, it is possible to grasp to some extent whether or not the driver has driven while operating the mobile terminal while the vehicle is operating. However, laborious analysis work is required. Moreover, since real-time detection is not possible, it is not possible to output an alarm and stop the operation of the mobile terminal while the vehicle is in operation.

本発明は、上述した事情に鑑みてなされたものであり、その目的は、車両の運転操作に影響を及ぼす運転者による運転中の携帯端末操作を確実に検出することが可能な操作監視システムを提供することにある。 The present invention has been made in view of the above circumstances, and an object of the present invention is to provide an operation monitoring system capable of reliably detecting a mobile terminal operation during driving by a driver that affects the driving operation of a vehicle. To provide.

前述した目的を達成するために、本発明に係る操作監視システムは、下記（１）〜（４）を特徴としている。
（１）携帯端末上で動作する監視機能部と、
車両に搭載され無線通信により前記監視機能部と連携して動作可能な車載器、および前記車両外に配置される監視サーバの少なくとも一方と、
を備え、
前記車載器、又は前記監視サーバは、前記監視機能部が送信する情報に基づいて、前記車両が運行状態のときに前記携帯端末が所定の操作状態であることを認識した場合には、
所定の警報イベントを表す信号を前記携帯端末に送信し、
前記車載器は、前記警報イベントが発生した場合に、前記監視サーバの指示に従って、又は自発的に、前記車両上で撮影された映像の少なくとも一定時間に亘る情報を前記監視サーバに送信し、
前記監視サーバは、前記車載器から送信された前記映像の情報を出力する、
ことを特徴とする操作監視システム。 In order to achieve the above-mentioned object, the operation monitoring system according to the present invention is characterized by the following (1) to (4).
(1) The monitoring function unit that operates on the mobile terminal,
An on-board unit mounted on the vehicle and capable of operating in cooperation with the monitoring function unit by wireless communication, and at least one of the monitoring servers arranged outside the vehicle.
Equipped with
When the on-board unit or the monitoring server recognizes that the mobile terminal is in a predetermined operating state when the vehicle is in an operating state based on the information transmitted by the monitoring function unit, the vehicle-mounted device or the monitoring server is in a predetermined operating state.
A signal representing a predetermined alarm event is transmitted to the mobile terminal, and the signal is transmitted to the mobile terminal.
When the alarm event occurs, the on-board unit transmits information to the monitoring server for at least a certain period of time of the video captured on the vehicle according to the instruction of the monitoring server or voluntarily.
The monitoring server outputs the information of the video transmitted from the vehicle-mounted device.
An operation monitoring system characterized by this.

上記（１）の構成の操作監視システムによれば、監視機能部は携帯端末上で動作するので、携帯端末に対する運転者の操作を確実に検出できる。また、車載器又は監視サーバは、監視機能部の検出した操作状態に応じて適切な警報イベントを生成できる。この警報イベントにより、運転者が携帯端末の操作を中止して車両運行の安全を確保するように注意喚起できる。
更に、運転者が前記携帯端末の操作を行う際に、車両上で撮影された映像の情報を監視サーバ側で再生できる。したがって、監視サーバにアクセス可能な管理者は、再生される映像に基づいて運転者の運転状況を正しく把握できる。 According to the operation monitoring system having the configuration of (1) above, since the monitoring function unit operates on the mobile terminal, the driver's operation on the mobile terminal can be reliably detected. Further, the on-board unit or the monitoring server can generate an appropriate alarm event according to the operation state detected by the monitoring function unit. By this warning event, the driver can be alerted to stop the operation of the mobile terminal and ensure the safety of the vehicle operation.
Further, when the driver operates the mobile terminal, the information of the image taken on the vehicle can be reproduced on the monitoring server side. Therefore, the administrator who can access the monitoring server can correctly grasp the driving situation of the driver based on the reproduced video.

（２）前記監視機能部は、少なくとも前記携帯端末に対するユーザ操作の有無を周期的に監視し、前記ユーザ操作を検知した場合に、検知した状態を表す情報を自発的に前記監視サーバに対して無線通信により送信する、
上記（１）に記載の操作監視システム。 (2) The monitoring function unit periodically monitors at least the presence or absence of a user operation on the mobile terminal, and when the user operation is detected, voluntarily sends information indicating the detected state to the monitoring server. Send by wireless communication,
The operation monitoring system according to (1) above.

上記（２）の構成の操作監視システムによれば、車両上に携帯端末との間で通信可能な車載器が存在しない場合であっても、携帯端末に対するユーザ（運転者）の操作状態を監視サーバに知らせることができる。 According to the operation monitoring system having the configuration of (2) above, the operation state of the user (driver) with respect to the mobile terminal is monitored even when there is no on-board unit capable of communicating with the mobile terminal on the vehicle. You can tell the server.

（３）前記車載器は、前記監視機能部との間で通信する機能を有し、
前記車載器は、少なくとも前記車両が運行状態のときに、所定の監視指示を周期的に前記監視機能部に送信し、
前記監視機能部は、前記車載器から受信した前記監視指示に従って、前記携帯端末の操作状態に関する情報を前記車載器に送信する、
上記（１）に記載の操作監視システム。 (3) The on-board unit has a function of communicating with the monitoring function unit, and has a function of communicating with the monitoring function unit.
The on-board unit periodically transmits a predetermined monitoring instruction to the monitoring function unit at least when the vehicle is in an operating state.
The monitoring function unit transmits information regarding the operation state of the mobile terminal to the vehicle-mounted device according to the monitoring instruction received from the vehicle-mounted device.
The operation monitoring system according to (1) above.

上記（３）の構成の操作監視システムによれば、監視機能部は、車載器からの指示に従って携帯端末の操作状態に関する情報を送信するので、例えば監視機能部がスリープ状態であったとしても、必要なタイミングで通常の動作を再開して必要な情報を車載器に送ることができる。 According to the operation monitoring system having the configuration of (3) above, the monitoring function unit transmits information on the operation state of the mobile terminal according to the instruction from the on-board unit, so that even if the monitoring function unit is in the sleep state, for example. Normal operation can be resumed at the required timing and the required information can be sent to the in-vehicle device.

（４）前記監視機能部は、前記携帯端末上で動作可能なアプリケーションソフトウェアである、
上記（１）乃至（３）のいずれかに記載の操作監視システム。 ( 4 ) The monitoring function unit is application software that can operate on the mobile terminal.
The operation monitoring system according to any one of (1) to ( 3) above.

上記（４）の構成の操作監視システムによれば、監視機能部がアプリケーションソフトウェアであるので、様々な種類の携帯端末に必要に応じて組み込み、動作させることができる。また、これ以外のアプリケーションソフトウェアに特別な変更を加えなくても、携帯端末に備わっている基本ソフト（オペレーティングシステム）の機能を利用することにより、運転者の入力操作を検知できる。 According to the operation monitoring system having the configuration of ( 4 ) above, since the monitoring function unit is application software, it can be incorporated into various types of mobile terminals as needed and operated. In addition, the input operation of the driver can be detected by using the function of the basic software (operating system) provided in the mobile terminal without making any special change to the application software other than this.

本発明の操作監視システムによれば、車両の運転操作に影響を及ぼす運転者による運転中の携帯端末操作を確実に検出することが可能である。すなわち、携帯端末上で動作する監視機能部が携帯端末に対する運転者の入力操作を直接的に検出するので、確実な動作が期待できる。 According to the operation monitoring system of the present invention, it is possible to reliably detect the operation of the mobile terminal during driving by the driver, which affects the driving operation of the vehicle. That is, since the monitoring function unit operating on the mobile terminal directly detects the input operation of the driver to the mobile terminal, reliable operation can be expected.

以上、本発明について簡潔に説明した。更に、以下に説明される発明を実施するための形態（以下、「実施形態」という。）を添付の図面を参照して通読することにより、本発明の詳細は更に明確化されるであろう。 The present invention has been briefly described above. Further, the details of the present invention will be further clarified by reading through the embodiments described below (hereinafter referred to as "embodiments") with reference to the accompanying drawings. ..

図１は、本発明の第１実施形態における操作監視システムの構成および通信状況の例を示すブロック図である。FIG. 1 is a block diagram showing an example of the configuration and communication status of the operation monitoring system according to the first embodiment of the present invention. 図２は、本発明の第１実施形態における操作監視システムの通信動作の概要を示すシーケンス図である。FIG. 2 is a sequence diagram showing an outline of the communication operation of the operation monitoring system according to the first embodiment of the present invention. 図３は、操作監視システムが備える車載器の構成例を示すブロック図である。FIG. 3 is a block diagram showing a configuration example of an on-board unit included in the operation monitoring system. 図４は、本発明の第１実施形態におけるスマートフォン上の監視アプリの動作例を示すフローチャートである。FIG. 4 is a flowchart showing an operation example of the monitoring application on the smartphone according to the first embodiment of the present invention. 図５は、本発明の第１実施形態における監視サーバの動作例を示すフローチャートである。FIG. 5 is a flowchart showing an operation example of the monitoring server according to the first embodiment of the present invention. 図６は、本発明の第２実施形態における操作監視システムの構成および通信状況の例を示すブロック図である。FIG. 6 is a block diagram showing an example of the configuration and communication status of the operation monitoring system according to the second embodiment of the present invention. 図７は、本発明の第２実施形態における操作監視システムの通信動作の概要を示すシーケンス図である。FIG. 7 is a sequence diagram showing an outline of the communication operation of the operation monitoring system according to the second embodiment of the present invention. 図８は、本発明の第２実施形態におけるスマートフォン上の監視アプリの動作例を示すフローチャートである。FIG. 8 is a flowchart showing an operation example of the monitoring application on the smartphone according to the second embodiment of the present invention. 図９は、本発明の第２実施形態における車載器の動作例を示すフローチャートである。FIG. 9 is a flowchart showing an operation example of the vehicle-mounted device according to the second embodiment of the present invention.

本発明に関する具体的な実施形態について、各図を参照しながら以下に説明する。 Specific embodiments of the present invention will be described below with reference to the respective figures.

［第１実施形態］
＜操作監視システムの構成例＞
本発明の第１実施形態における操作監視システムの構成および通信状況の例を図１に示す。 [First Embodiment]
<Configuration example of operation monitoring system>
FIG. 1 shows an example of the configuration and communication status of the operation monitoring system according to the first embodiment of the present invention.

図１に示した操作監視システム１００は、スマートフォン１０、車載器２０、監視サーバ３０、および管理者端末４０を備えている。なお、スマートフォン１０の代わりに一般的な携帯電話端末や、その他の携帯端末を利用してもよい。なお、図１に示した操作監視システム１００においては、車載器２０とスマートフォン１０との間で直接通信を行うことができない状況を想定している。 The operation monitoring system 100 shown in FIG. 1 includes a smartphone 10, an on-board unit 20, a monitoring server 30, and an administrator terminal 40. A general mobile phone terminal or another mobile terminal may be used instead of the smartphone 10. In the operation monitoring system 100 shown in FIG. 1, it is assumed that the vehicle-mounted device 20 and the smartphone 10 cannot directly communicate with each other.

図１に示したスマートフォン１０は、例えばトラック等の業務用車両を運転する乗務員（運転者）個人の所有物であってもよいし、当該車両の運行時に乗務員が使用できるように乗務員に与える企業所有の端末であってもよい。 The smartphone 10 shown in FIG. 1 may be the property of an individual crew member (driver) who drives a commercial vehicle such as a truck, or is a company that gives the crew member the ability to use the smartphone 10 when the vehicle is in operation. It may be a owned terminal.

また、詳細については後述するが、スマートフォン１０は一般的なアプリケーションソフトウェアの他に、本発明を実施するために必要な監視用のアプリケーションソフトウェア（後述する監視アプリ１４）を装備している。スマートフォン１０のそれ以外の構成については一般的なスマートフォンと同様である。本発明を実施する場合には、例えば車両の運行を管理している企業が各車両を運行する乗務員に対して、車両運行時の安全確保のために、監視アプリ１４を予めスマートフォン１０に組み込んだ状態で使用することを義務付けることとする。 Further, although the details will be described later, the smartphone 10 is equipped with application software for monitoring (monitoring application 14 described later) necessary for carrying out the present invention, in addition to general application software. Other configurations of the smartphone 10 are the same as those of a general smartphone. When implementing the present invention, for example, a company that manages the operation of a vehicle incorporates a monitoring application 14 into a smartphone 10 in advance for the crew members who operate each vehicle in order to ensure safety during the operation of the vehicle. It shall be obligatory to use it in the state.

図１に示した車載器２０は、乗務員が運行するトラック等の業務用車両の各々に搭載した状態で使用される。車載器２０は、例えばドライブレコーダや、ドライブレコーダの機能を有するデジタルタコグラフのように、車両の運行管理や乗務員の安全運転管理などに役立つ機能を提供するものである。また、操作監視システム１００に含まれる車載器２０は、本発明を実施するために更に特別な機能を搭載している。これについては後で説明する。 The on-board unit 20 shown in FIG. 1 is used in a state of being mounted on each of commercial vehicles such as trucks operated by crew members. The on-board unit 20 provides functions useful for vehicle operation management and safe driving management of crew members, such as a drive recorder and a digital tachograph having a drive recorder function. Further, the on-board unit 20 included in the operation monitoring system 100 is equipped with a further special function for carrying out the present invention. This will be explained later.

監視サーバ３０は、各乗務員の車両運行中のスマートフォン１０の状態や管理対象の各車両に搭載された車載器２０を監視すると共に必要に応じて適切な指示を与える機能を有している。監視サーバ３０は、例えば各車両を管理する企業の事務所内、あるいは所定のデータセンタ内に設置される。 The monitoring server 30 has a function of monitoring the state of the smartphone 10 during vehicle operation of each crew member and the on-board unit 20 mounted on each vehicle to be managed, and giving appropriate instructions as necessary. The monitoring server 30 is installed, for example, in the office of a company that manages each vehicle, or in a predetermined data center.

図１に示した操作監視システム１００の構成においては、監視サーバ３０と各乗務員のスマートフォン１０との間では、広域無線通信を利用することにより、通信Ｓ０１、Ｓ０２ができるようになっている。また、監視サーバ３０と各車両に搭載された車載器２０との間では、広域無線通信を利用することにより、通信Ｓ０３、Ｓ０４ができるようになっている。 In the configuration of the operation monitoring system 100 shown in FIG. 1, communication S01 and S02 can be performed between the monitoring server 30 and the smartphone 10 of each crew member by using wide area wireless communication. Further, communication S03 and S04 can be performed between the monitoring server 30 and the on-board unit 20 mounted on each vehicle by using wide area wireless communication.

また、各車両を管理している企業の事務所内に、管理者端末４０が設置されている。この管理者端末４０は、企業内の運行管理者により操作される。管理者端末４０は、監視サーバ３０との間で通信Ｓ０５が可能であり、各車両の運行状態をコンピュータの画面上に表示する機能を有している。 In addition, an administrator terminal 40 is installed in the office of the company that manages each vehicle. The manager terminal 40 is operated by an operation manager in the company. The administrator terminal 40 is capable of communication S05 with the monitoring server 30, and has a function of displaying the operating status of each vehicle on the screen of the computer.

図１に示したように、通信Ｓ０１は、スマートフォン１０の操作情報をスマートフォン１０が監視サーバ３０に送るための通信である。また、通信Ｓ０２は、警報イベント情報を監視サーバ３０がスマートフォン１０に送るための通信である。通信Ｓ０３は、ドライブレコーダ（ドラレコ）映像送信を、監視サーバ３０が車載器２０に要求するための通信である。通信Ｓ０４は、要求されたドライブレコーダ映像のデータを車載器２０が監視サーバ３０に送るための通信である。通信Ｓ０５は、警報イベント情報およびドライブレコーダ映像のデータを、監視サーバ３０が管理者端末４０に送るための通信である。 As shown in FIG. 1, the communication S01 is a communication for the smartphone 10 to send the operation information of the smartphone 10 to the monitoring server 30. Further, the communication S02 is a communication for the monitoring server 30 to send the alarm event information to the smartphone 10. The communication S03 is a communication for the monitoring server 30 to request the vehicle-mounted device 20 to transmit the drive recorder (dorareco) video. Communication S04 is communication for the vehicle-mounted device 20 to send the requested drive recorder video data to the monitoring server 30. The communication S05 is a communication for the monitoring server 30 to send the alarm event information and the drive recorder video data to the administrator terminal 40.

＜通信動作の概要＞
図１に示した操作監視システム１００の通信動作の概要を図２に示す。
図２に示したように、スマートフォン１０は通信Ｓ０１により、スマートフォン１０における操作情報を監視サーバ３０に送る。監視サーバ３０は、スマートフォン１０から受信した操作情報に基づいて警報イベント情報を生成し、これを通信Ｓ０２によりスマートフォン１０に送る。後述するように、実際には、車両が運行状態であって且つスマートフォン１０の操作が行われた場合に、警報イベント情報が発生する。 <Overview of communication operation>
FIG. 2 shows an outline of the communication operation of the operation monitoring system 100 shown in FIG.
As shown in FIG. 2, the smartphone 10 sends the operation information of the smartphone 10 to the monitoring server 30 by the communication S01. The monitoring server 30 generates alarm event information based on the operation information received from the smartphone 10, and sends this to the smartphone 10 by communication S02. As will be described later, in reality, the alarm event information is generated when the vehicle is in the operating state and the smartphone 10 is operated.

また、監視サーバ３０は、通信Ｓ０３により、車載器２０に対して、ドライブレコーダ映像の送信を要求する。車載器２０は、監視サーバ３０からの要求に従い、通信Ｓ０４で、ドライブレコーダ映像のデータを監視サーバ３０に送る。監視サーバ３０は、通信Ｓ０５により、警報イベント情報およびドライブレコーダ映像のデータを管理者端末４０に送る。 Further, the monitoring server 30 requests the vehicle-mounted device 20 to transmit the drive recorder image by the communication S03. The on-board unit 20 sends the drive recorder video data to the monitoring server 30 by communication S04 in accordance with the request from the monitoring server 30. The monitoring server 30 sends alarm event information and drive recorder video data to the administrator terminal 40 by communication S05.

スマートフォン１０においては、通信Ｓ０２として受信する警報イベント情報により警報が出力されるので、スマートフォン１０のユーザである運転者は、運転中のスマートフォン１０の操作を中止して運行の安全を確保するように促される。 In the smartphone 10, an alarm is output based on the alarm event information received as communication S02, so that the driver who is the user of the smartphone 10 stops the operation of the smartphone 10 while driving to ensure the safety of operation. Prompted.

また、管理者端末４０を操作する運行管理者は、スマートフォン１０のユーザが車両の運行中にスマートフォン１０を操作したことを、管理者端末４０上で表示される警報イベント情報により把握できる。更に、当該車両における運転者の状況を、管理者端末４０上で表示されるドライブレコーダ映像により把握できる。したがって、これらの情報に基づいて運行管理者は、該当する乗務員が安全運転をするように指導することができる。 Further, the operation manager who operates the manager terminal 40 can grasp that the user of the smartphone 10 has operated the smartphone 10 while the vehicle is in operation by the alarm event information displayed on the manager terminal 40. Further, the situation of the driver in the vehicle can be grasped by the drive recorder image displayed on the administrator terminal 40. Therefore, based on this information, the operation manager can instruct the relevant crew members to drive safely.

＜車載器の構成例＞
図１に示した操作監視システム１００に含まれる車載器２０の構成例を図３に示す。
図１に示すように、この車載器２０はマイクロコンピュータ（ＣＰＵ）２１、カメラインタフェース（Ｉ／Ｆ）２２、通信モジュール２３、ＧＰＳ受信機２４、ＲＡＭ２５、不揮発メモリ２６、スピーカ２７、およびマイク２８を備えている。 <Configuration example of in-vehicle device>
FIG. 3 shows a configuration example of the on-board unit 20 included in the operation monitoring system 100 shown in FIG.
As shown in FIG. 1, the on-board unit 20 includes a microcomputer (CPU) 21, a camera interface (I / F) 22, a communication module 23, a GPS receiver 24, a RAM 25, a non-volatile memory 26, a speaker 27, and a microphone 28. I have.

また、カメラインタフェース２２の入力に車載カメラ２９が接続されている。この車載カメラ２９は、自車両の車室内に固定した状態で設置され、自車両を運転する運転者の顔などの状況を撮影できるように撮影方向や視野角が予め調整されている。なお、運転者を撮影する車載カメラ２９の他に、車両外側の道路等の情景を撮影する車載カメラをカメラインタフェース２２に接続してもよい。 Further, the vehicle-mounted camera 29 is connected to the input of the camera interface 22. The in-vehicle camera 29 is installed in a fixed state in the vehicle interior of the own vehicle, and the shooting direction and the viewing angle are adjusted in advance so that the situation such as the face of the driver driving the own vehicle can be photographed. In addition to the vehicle-mounted camera 29 that captures the driver, an vehicle-mounted camera that captures a scene such as a road outside the vehicle may be connected to the camera interface 22.

マイクロコンピュータ２１は、予め組み込まれているプログラムを実行することにより、車載器２０に必要とされる機能を実現するための処理を行う。例えば、特定のイベントが発生した場合に、車載カメラ２９が撮影した映像の画像データを一定時間だけ取得して記録するドライブレコーダの制御をマイクロコンピュータ２１が実行する。また、車載器２０と監視サーバ３０との間で図１に示した通信Ｓ０３、Ｓ０４を実現するための制御をマイクロコンピュータ２１が実行する。 The microcomputer 21 performs processing for realizing the functions required for the vehicle-mounted device 20 by executing a program built in in advance. For example, when a specific event occurs, the microcomputer 21 controls the drive recorder that acquires and records the image data of the image taken by the vehicle-mounted camera 29 for a certain period of time. Further, the microcomputer 21 executes control for realizing the communication S03 and S04 shown in FIG. 1 between the vehicle-mounted device 20 and the monitoring server 30.

カメラインタフェース２２は、車載カメラ２９が出力する映像等の信号を取り込んで、マイクロコンピュータ２１が処理可能な画像データを生成するための信号処理を実行できる。 The camera interface 22 can capture signals such as images output by the vehicle-mounted camera 29 and execute signal processing for generating image data that can be processed by the microcomputer 21.

通信モジュール２３は、例えば移動体通信事業者が提供する携帯電話等の広域無線通信サービスの無線基地局との間で広域無線通信を行い、車載器２０が必要とする無線通信回線を確保するための機能を有している。 The communication module 23 performs wide-area wireless communication with a wireless base station of a wide-area wireless communication service such as a mobile phone provided by a mobile communication operator, and secures a wireless communication line required by the in-vehicle device 20. Has the function of.

ＧＰＳ受信機２４は、複数のＧＰＳ（Global Positioning System）衛星からの電波を受信し、受信信号の時間に基づいて現在位置を算出する機能を有している。なお、現在位置を算出する機能はマイクロコンピュータ２１側で実現してもよい。 The GPS receiver 24 has a function of receiving radio waves from a plurality of GPS (Global Positioning System) satellites and calculating the current position based on the time of the received signal. The function of calculating the current position may be realized on the microcomputer 21 side.

ＲＡＭ２５は、マイクロコンピュータ２１のアクセスによりデータの書き込み及び読み出しが自在な半導体メモリである。ＲＡＭ２５は、マイクロコンピュータ２１等が生成した様々な一時データを必要に応じて保持するために利用される。 The RAM 25 is a semiconductor memory that can freely write and read data by the access of the microcomputer 21. The RAM 25 is used to hold various temporary data generated by the microcomputer 21 and the like as needed.

不揮発メモリ２６は、マイクロコンピュータ２１のアクセスによりデータの読み出しおよび書き換えが可能なメモリである。不揮発メモリ２６は、例えば事前に定めたプログラム、定数データ、テーブルなどの固定データを保持するために利用される。 The non-volatile memory 26 is a memory in which data can be read and rewritten by the access of the microcomputer 21. The non-volatile memory 26 is used to hold fixed data such as predetermined programs, constant data, and tables.

スピーカ２７は、自車両の運転者等が認識可能な警報や案内用の音響を、音声や音として出力するために利用される。マイク２８は、自車両を運転中の運転者の音声や、運転中に発生する様々な音響を車室内で集音するために利用される。 The speaker 27 is used to output alarms and guidance sounds that can be recognized by the driver of the own vehicle as voices and sounds. The microphone 28 is used to collect the voice of the driver who is driving the own vehicle and various sounds generated during the driving in the vehicle interior.

＜スマートフォン１０の構成および動作＞
＜構成＞
本発明の第１実施形態におけるスマートフォン上の監視アプリ１４の動作例を図４に示す。 <Configuration and operation of smartphone 10>
<Structure>
FIG. 4 shows an operation example of the monitoring application 14 on the smartphone according to the first embodiment of the present invention.

一般的なスマートフォンと同様に、スマートフォン１０の内部には、ハードウェア１１として様々な電子部品が組み込まれている（図４参照）。すなわち、マイクロコンピュータ、ＲＡＭ、ＲＯＭ、通信デバイス、表示デバイス、タッチパネル、スピーカ、マイク、電源などの回路や部品がハードウェア１１に含まれている。 Similar to a general smartphone, various electronic components are incorporated as hardware 11 inside the smartphone 10 (see FIG. 4). That is, the hardware 11 includes circuits and parts such as a microcomputer, RAM, ROM, communication device, display device, touch panel, speaker, microphone, and power supply.

また、ハードウェア１１内のマイクロコンピュータが標準化された機能としてハードウェア１１の他の各要素を制御できるように、オペレーティングシステム（ＯＳ：基本ソフト）１２がハードウェア１１の記憶装置上に予め組み込まれている。 In addition, an operating system (OS: basic software) 12 is pre-installed on the storage device of the hardware 11 so that the microcomputer in the hardware 11 can control each other element of the hardware 11 as a standardized function. ing.

スマートフォン１０のユーザが使用する様々なアプリケーションソフトウェア（アプリ）１３は、オペレーティングシステム１２を介して、ハードウェア１１の各要素を管理することができる。例えば、ハードウェア１１に含まれているタッチパネルに対してユーザ操作１５の入力が行われた場合には、この操作をオペレーティングシステム１２が検出する。各アプリケーションソフトウェア１３は、オペレーティングシステム１２の機能を利用することにより、ユーザ操作１５の内容を把握できる。 Various application software (applications) 13 used by the user of the smartphone 10 can manage each element of the hardware 11 via the operating system 12. For example, when the user operation 15 is input to the touch panel included in the hardware 11, the operating system 12 detects this operation. Each application software 13 can grasp the contents of the user operation 15 by using the function of the operating system 12.

また、スマートフォン１０は一般的なアプリケーションソフトウェア１３の他に、本発明を実施するために特別に組み込まれた監視アプリ１４を備えている。この監視アプリ１４は、オペレーティングシステム１２上で動作し、車両運行中のスマートフォン１０のユーザ操作１５を検知して警報を出力するために利用される。 Further, in addition to the general application software 13, the smartphone 10 includes a monitoring application 14 specially incorporated for carrying out the present invention. The monitoring application 14 operates on the operating system 12 and is used to detect the user operation 15 of the smartphone 10 while the vehicle is operating and output an alarm.

＜監視アプリ１４の動作例＞
図４に示した監視アプリ１４の動作は、ハードウェア１１に含まれるマイクロコンピュータにより実行される。図４に示した監視アプリ１４の動作について以下に説明する。なお、本実施形態では監視アプリ１４がスマートフォン１０上に常駐し、図４に示す監視動作を常時繰り返し実行する場合を想定している。 <Operation example of monitoring application 14>
The operation of the monitoring application 14 shown in FIG. 4 is executed by the microcomputer included in the hardware 11. The operation of the monitoring application 14 shown in FIG. 4 will be described below. In this embodiment, it is assumed that the monitoring application 14 resides on the smartphone 10 and the monitoring operation shown in FIG. 4 is constantly and repeatedly executed.

ステップＳ１１では、スマートフォン１０を制御するマイクロコンピュータが、タッチパネル等に対するユーザ操作１５に相当する操作情報を、自端末のオペレーティングシステム１２から取得する。 In step S11, the microcomputer controlling the smartphone 10 acquires the operation information corresponding to the user operation 15 for the touch panel or the like from the operating system 12 of the own terminal.

ステップＳ１２では、スマートフォン１０を制御するマイクロコンピュータが、Ｓ１１で取得した操作情報を、スマートフォン１０内部の無線通信機能を利用して、監視サーバ３０宛てに送信する。なお、送信先の監視サーバ３０を表す情報は事前にスマートフォン１０に登録しておくこととする。 In step S12, the microcomputer controlling the smartphone 10 transmits the operation information acquired in S11 to the monitoring server 30 by using the wireless communication function inside the smartphone 10. Information representing the destination monitoring server 30 is registered in the smartphone 10 in advance.

ステップＳ１３では、スマートフォン１０を制御するマイクロコンピュータは、監視サーバ３０からの警報イベント情報を受信したか否かを識別する。警報イベント情報を受信した場合に次のＳ１４を実行する。 In step S13, the microcomputer controlling the smartphone 10 identifies whether or not the alarm event information from the monitoring server 30 has been received. When the alarm event information is received, the next S14 is executed.

ステップＳ１４では、スマートフォン１０を制御するマイクロコンピュータは、自車両を運行しながらのスマートフォン１０のユーザ操作１５を中止させるために、スマートフォン１０上で警報を出力する。例えば、画面上に文字でメッセージを出力したり、スピーカからの音声出力により警告したり、スマートフォン１０の機械振動を利用して警報を出力する。 In step S14, the microcomputer that controls the smartphone 10 outputs an alarm on the smartphone 10 in order to stop the user operation 15 of the smartphone 10 while operating the own vehicle. For example, a message is output in characters on the screen, a warning is given by voice output from a speaker, or an alarm is output by using the mechanical vibration of the smartphone 10.

＜監視サーバの動作例＞
本発明の第１実施形態における監視サーバ３０の動作例を図５に示す。すなわち、監視サーバ３０内のコンピュータが図５に示した処理を繰り返し実行する。図５に示した動作について以下に説明する。 <Operation example of monitoring server>
FIG. 5 shows an operation example of the monitoring server 30 according to the first embodiment of the present invention. That is, the computer in the monitoring server 30 repeatedly executes the process shown in FIG. The operation shown in FIG. 5 will be described below.

ステップＳ２１では、監視サーバ３０が監視対象としている各スマートフォン１０について、ユーザ操作１５の有無を監視サーバ３０内のコンピュータが識別する。すなわち、図１、図２に示した通信Ｓ０１で監視サーバ３０に入力される操作情報（操作の有無）に基づき、監視サーバ３０内のコンピュータが操作ありを検知した場合に、次のＳ２２の処理に進む。 In step S21, the computer in the monitoring server 30 identifies the presence or absence of the user operation 15 for each smartphone 10 monitored by the monitoring server 30. That is, when the computer in the monitoring server 30 detects that there is an operation based on the operation information (whether or not there is an operation) input to the monitoring server 30 in the communication S01 shown in FIGS. 1 and 2, the next processing of S22 is performed. Proceed to.

ステップＳ２２では、監視サーバ３０内のコンピュータは、Ｓ２１で操作ありを検知したスマートフォン１０に対応する運転者が運転している車両が現在走行中か否かを識別し、走行中であれば次のＳ２３の処理に進む。監視サーバ３０内のコンピュータは、例えば、予め定めた運行スケジュールと現在時刻とを比較することにより、該当する車両が走行中（運行中）か否かを識別できる。あるいは、監視サーバ３０が車載器２０等に対して問い合わせを行うことにより、該当する車両が実際に走行しているか否かを表す情報（車速など）を取得できる。 In step S22, the computer in the monitoring server 30 identifies whether or not the vehicle driven by the driver corresponding to the smartphone 10 that has detected the operation in S21 is currently running, and if it is running, the next Proceed to the process of S23. The computer in the monitoring server 30 can identify whether or not the corresponding vehicle is running (running) by, for example, comparing a predetermined operation schedule with the current time. Alternatively, by making an inquiry to the on-board unit 20 or the like, the monitoring server 30 can acquire information (vehicle speed, etc.) indicating whether or not the corresponding vehicle is actually traveling.

ステップＳ２３では、監視サーバ３０内のコンピュータは、予め定めた警報イベント情報を、広域無線通信を利用して、Ｓ２１で検出したスマートフォン１０に対して通信Ｓ０２として送信する。 In step S23, the computer in the monitoring server 30 transmits the predetermined alarm event information to the smartphone 10 detected in S21 as communication S02 by using wide area wireless communication.

ステップＳ２４では、監視サーバ３０内のコンピュータは、ドライブレコーダの映像に関する送信要求（通信Ｓ０３）を、広域無線通信を利用して、該当する車両に搭載された車載器２０に対して送信する。なお、スマートフォン１０のユーザ（運転者）、車両、および車両に搭載された車載器２０の関係は、例えば所定のデータベースに事前に登録しておくことにより監視サーバ３０が把握できる。 In step S24, the computer in the monitoring server 30 transmits a transmission request (communication S03) regarding the video of the drive recorder to the vehicle-mounted device 20 mounted on the corresponding vehicle by using wide area wireless communication. The relationship between the user (driver) of the smartphone 10 and the vehicle, and the vehicle-mounted device 20 mounted on the vehicle can be grasped by the monitoring server 30 by registering them in a predetermined database in advance, for example.

監視サーバ３０内のコンピュータは、車載器２０からドライブレコーダの映像のデータを受信（通信Ｓ０４）すると、Ｓ２５からＳ２６の処理に進む。そして、管理者端末４０に対して警報イベント情報と、ドライブレコーダの映像とを監視サーバ３０がＳ２６で通信Ｓ０５として送信する。 When the computer in the monitoring server 30 receives the video data of the drive recorder from the vehicle-mounted device 20 (communication S04), the computer proceeds from S25 to S26. Then, the monitoring server 30 transmits the alarm event information and the video of the drive recorder to the administrator terminal 40 as communication S05 in S26.

［第２実施形態］
＜操作監視システムの構成例＞
本発明の第２実施形態における操作監視システム１００Ｂの構成および通信状況の例を図６に示す。 [Second Embodiment]
<Configuration example of operation monitoring system>
FIG. 6 shows an example of the configuration and communication status of the operation monitoring system 100B according to the second embodiment of the present invention.

図６に示した操作監視システム１００Ｂは、スマートフォン１０、車載器２０、監視サーバ３０、および管理者端末４０を備えている。なお、スマートフォン１０の代わりに一般的な携帯電話端末や、その他の携帯端末を利用してもよい。 The operation monitoring system 100B shown in FIG. 6 includes a smartphone 10, an on-board unit 20, a monitoring server 30, and an administrator terminal 40. A general mobile phone terminal or another mobile terminal may be used instead of the smartphone 10.

図６に示した操作監視システム１００Ｂに含まれているスマートフォン１０、車載器２０、監視サーバ３０、および管理者端末４０の基本的な構成は、図１の操作監視システム１００と同様である。但し、図６の操作監視システム１００Ｂにおいては、車載器２０とスマートフォン１０との間で、例えばブルートゥース（登録商標）やＷｉＦｉ（登録商標）のような標準的な無線通信手段を利用して直接通信できる状況を想定している。 The basic configurations of the smartphone 10, the on-board unit 20, the monitoring server 30, and the administrator terminal 40 included in the operation monitoring system 100B shown in FIG. 6 are the same as those of the operation monitoring system 100 of FIG. However, in the operation monitoring system 100B of FIG. 6, direct communication is performed between the on-board unit 20 and the smartphone 10 by using a standard wireless communication means such as Bluetooth (registered trademark) or WiFi (registered trademark). I am assuming a situation where I can do it.

図６において、通信Ｓ０１は、スマートフォン１０の監視動作を開始するために車載器２０が送信する指示（命令）である。また、通信Ｓ０２は、スマートフォン１０の操作情報をスマートフォン１０が車載器２０に送るための動作である。また、通信Ｓ０３は、警報イベント情報を車載器２０がスマートフォン１０に送るための動作である。通信Ｓ０４は、警報イベント情報およびドライブレコーダの映像を車載器２０が監視サーバ３０に送るための動作である。通信Ｓ０５は、警報イベント情報およびドライブレコーダ映像のデータを、監視サーバ３０が管理者端末４０に送るための通信である。 In FIG. 6, the communication S01 is an instruction (command) transmitted by the vehicle-mounted device 20 in order to start the monitoring operation of the smartphone 10. Further, the communication S02 is an operation for the smartphone 10 to send the operation information of the smartphone 10 to the vehicle-mounted device 20. Further, the communication S03 is an operation for the vehicle-mounted device 20 to send the alarm event information to the smartphone 10. Communication S04 is an operation for the vehicle-mounted device 20 to send the alarm event information and the video of the drive recorder to the monitoring server 30. The communication S05 is a communication for the monitoring server 30 to send the alarm event information and the drive recorder video data to the administrator terminal 40.

＜通信動作の概要＞
図６に示した操作監視システム１００Ｂの通信動作の概要を図７に示す。
図７に示したように、車載器２０は、スマートフォン１０がユーザ操作の監視動作を開始するように、通信Ｓ０１により監視指示を送信する。この通信Ｓ０１は繰り返し行われる。 <Overview of communication operation>
FIG. 7 shows an outline of the communication operation of the operation monitoring system 100B shown in FIG.
As shown in FIG. 7, the on-board unit 20 transmits a monitoring instruction by communication S01 so that the smartphone 10 starts the monitoring operation of the user operation. This communication S01 is repeated.

後述するスマートフォン１０上の監視アプリ１４Ｂは、通信Ｓ０１の監視指示に従い、スマートフォン１０上のユーザ操作を監視して、その結果を通信Ｓ０２ａ、又はＳ０２ｂとして車載器２０に通知する。 The monitoring application 14B on the smartphone 10, which will be described later, monitors the user operation on the smartphone 10 according to the monitoring instruction of the communication S01, and notifies the vehicle-mounted device 20 of the result as the communication S02a or S02b.

車載器２０は、通信Ｓ０２ｂによりスマートフォン１０の操作ありを検知し、且つ自車両が運行状態であることを検知した場合には、警報イベント情報を生成し、これを通信Ｓ０３によりスマートフォン１０に送信する。 When the on-board unit 20 detects that the smartphone 10 is operated by the communication S02b and detects that the own vehicle is in the operating state, the on-board unit 20 generates alarm event information and transmits this to the smartphone 10 by the communication S03. ..

スマートフォン１０においては、通信Ｓ０３として受信する警報イベント情報により警報が出力されるので、スマートフォン１０のユーザである運転者は、運転中のスマートフォン１０の操作を中止して運行の安全を確保するように促される。 In the smartphone 10, an alarm is output by the alarm event information received as communication S03, so that the driver who is a user of the smartphone 10 stops the operation of the smartphone 10 while driving to ensure the safety of operation. Prompted.

また、車載器２０は、前記警報イベント情報と、車載カメラ２９の撮影により得られたドライブレコーダ映像のデータとを、通信Ｓ０４により監視サーバ３０に送信する。また、監視サーバ３０は、車載器２０から受信した警報イベント情報、およびドライブレコーダ映像のデータを、通信Ｓ０５により管理者端末４０に送る。 Further, the on-board unit 20 transmits the alarm event information and the data of the drive recorder image obtained by the shooting of the on-board camera 29 to the monitoring server 30 by the communication S04. Further, the monitoring server 30 sends the alarm event information received from the vehicle-mounted device 20 and the data of the drive recorder video to the administrator terminal 40 by the communication S05.

したがって、管理者端末４０を操作する運行管理者は、スマートフォン１０のユーザが車両の運行中にスマートフォン１０を操作したことを、管理者端末４０上で表示される警報イベント情報により把握できる。更に、当該車両における運転者の状況を、管理者端末４０上で表示されるドライブレコーダ映像により把握できる。したがって、これらの情報に基づいて運行管理者は、該当する乗務員が安全運転をするように指導することができる。 Therefore, the operation manager who operates the manager terminal 40 can grasp that the user of the smartphone 10 has operated the smartphone 10 while the vehicle is in operation by the alarm event information displayed on the manager terminal 40. Further, the situation of the driver in the vehicle can be grasped by the drive recorder image displayed on the administrator terminal 40. Therefore, based on this information, the operation manager can instruct the relevant crew members to drive safely.

＜監視アプリ１４Ｂの動作例＞
本発明の第２実施形態におけるスマートフォン上の監視アプリ１４Ｂの動作例を図８に示す。
図８に示した監視アプリ１４Ｂの動作は、ハードウェア１１に含まれるマイクロコンピュータにより処理される。図８に示した監視アプリ１４Ｂの動作について以下に説明する。なお、本実施形態では監視アプリ１４Ｂがスマートフォン１０上に常駐し、図８に示す監視動作を車載器２０からの指示に従って実行する場合を想定している。 <Operation example of monitoring application 14B>
FIG. 8 shows an operation example of the monitoring application 14B on the smartphone according to the second embodiment of the present invention.
The operation of the monitoring application 14B shown in FIG. 8 is processed by the microcomputer included in the hardware 11. The operation of the monitoring application 14B shown in FIG. 8 will be described below. In this embodiment, it is assumed that the monitoring application 14B resides on the smartphone 10 and executes the monitoring operation shown in FIG. 8 according to the instruction from the vehicle-mounted device 20.

車載器２０が送出する操作監視指示を通信Ｓ０１によりスマートフォン１０が受信すると、スマートフォン１０を制御するマイクロコンピュータの処理はＳ３１からＳ３２に進む。 When the smartphone 10 receives the operation monitoring instruction sent by the vehicle-mounted device 20 by the communication S01, the processing of the microcomputer controlling the smartphone 10 proceeds from S31 to S32.

ステップＳ３２では、スマートフォン１０のマイクロコンピュータは、スマートフォン１０のタッチパネル等に対するユーザ操作１５を表す操作情報を、自端末のオペレーティングシステム１２から取得する。 In step S32, the microcomputer of the smartphone 10 acquires the operation information representing the user operation 15 for the touch panel or the like of the smartphone 10 from the operating system 12 of the own terminal.

ステップＳ３３では、スマートフォン１０のマイクロコンピュータは、Ｓ３２で取得した操作情報を、通信Ｓ０２により車載器２０に送信する。すなわち、スマートフォン１０上でユーザ操作１５が発生したか否かを車載器２０に知らせる。 In step S33, the microcomputer of the smartphone 10 transmits the operation information acquired in S32 to the vehicle-mounted device 20 by communication S02. That is, the vehicle-mounted device 20 is notified whether or not the user operation 15 has occurred on the smartphone 10.

また、車載器２０が送出する警報イベント情報を通信Ｓ０３によりスマートフォン１０が受信した場合には、スマートフォン１０のマイクロコンピュータは、Ｓ３４からＳ３５の処理に進む。 Further, when the smartphone 10 receives the alarm event information transmitted by the vehicle-mounted device 20 by the communication S03, the microcomputer of the smartphone 10 proceeds from S34 to S35.

ステップＳ３５では、スマートフォン１０を制御するマイクロコンピュータは、自車両を運行しながらのスマートフォン１０のユーザ操作１５を中止させるために、スマートフォン１０上で警報を出力する。例えば、画面上に文字でメッセージを出力したり、スピーカからの音声出力により警告したり、スマートフォン１０の機械振動を利用して警報を出力する。 In step S35, the microcomputer controlling the smartphone 10 outputs an alarm on the smartphone 10 in order to stop the user operation 15 of the smartphone 10 while operating the own vehicle. For example, a message is output in characters on the screen, a warning is given by voice output from a speaker, or an alarm is output by using the mechanical vibration of the smartphone 10.

＜車載器２０の動作例＞
本発明の第２実施形態における車載器２０の動作例を図９に示す。すなわち、車載器２０に内蔵されているマイクロコンピュータ（図示せず）が、図９に示す動作を実行する。 <Operation example of in-vehicle device 20>
FIG. 9 shows an operation example of the vehicle-mounted device 20 according to the second embodiment of the present invention. That is, the microcomputer (not shown) built in the vehicle-mounted device 20 executes the operation shown in FIG.

ステップＳ４１では、車載器２０のマイクロコンピュータは、例えば自車両の現在の走行速度を事前に定めた閾値と比較することにより、自車両が走行中か否かを識別する。走行中であれば次のＳ４２に進む。 In step S41, the microcomputer of the vehicle-mounted device 20 identifies whether or not the own vehicle is running, for example, by comparing the current running speed of the own vehicle with a predetermined threshold value. If the vehicle is running, the process proceeds to the next S42.

ステップＳ４２では、車載器２０のマイクロコンピュータは、ユーザ操作１５を監視するための事前に定めた指示（命令）を、通信Ｓ０１によりスマートフォン（スマホ）１０に送信する。 In step S42, the microcomputer of the vehicle-mounted device 20 transmits a predetermined instruction (command) for monitoring the user operation 15 to the smartphone (smartphone) 10 by communication S01.

また、スマートフォン１０が送信した操作情報を通信Ｓ０２により車載器２０が受信した場合には、受信した情報の内容に基づいて、スマートフォン１０におけるユーザ操作１５の有無を、車載器２０のマイクロコンピュータがＳ４３で識別する。そして、ユーザ操作１５ありの場合は次のＳ４４に進む。 When the vehicle-mounted device 20 receives the operation information transmitted by the smartphone 10 by the communication S02, the microcomputer of the vehicle-mounted device 20 determines whether or not the user operation 15 is performed on the smartphone 10 based on the content of the received information. Identify with. Then, if there is a user operation 15, the process proceeds to the next S44.

ステップＳ４４では、車載器２０のマイクロコンピュータは、警報イベント情報を生成し、これを通信Ｓ０３によりスマートフォン１０へ送信する。すなわち、運転しながらのスマートフォン１０の操作を中止させるために、車載器２０がスマートフォン１０に対して警報の出力を指示する。 In step S44, the microcomputer of the vehicle-mounted device 20 generates alarm event information and transmits this to the smartphone 10 by communication S03. That is, in order to stop the operation of the smartphone 10 while driving, the on-board unit 20 instructs the smartphone 10 to output an alarm.

ステップＳ４５では、車載器２０のマイクロコンピュータは、警報イベント情報を生成してから一定時間（例えば１分間）以内の車載カメラ２９の映像をドライブレコーダの映像データとして取得する。 In step S45, the microcomputer of the vehicle-mounted device 20 acquires the video of the vehicle-mounted camera 29 within a certain period of time (for example, 1 minute) after generating the alarm event information as the video data of the drive recorder.

ステップＳ４６では、車載器２０のマイクロコンピュータは、Ｓ４４で生成した警報イベント情報およびＳ４５で取得したドライブレコーダの映像データを、通信Ｓ０４により監視サーバ３０へ送信する。 In step S46, the microcomputer of the vehicle-mounted device 20 transmits the alarm event information generated in S44 and the video data of the drive recorder acquired in S45 to the monitoring server 30 by communication S04.

＜操作監視システムの利点＞
上述の操作監視システム１００、１００Ｂにおいては、スマートフォン１０上の監視アプリ１４、１４Ｂを利用してユーザ操作１５を直接監視するので、ユーザ操作１５を確実に検出できる。また、監視サーバ３０又は車載器２０は、運転しながらのユーザ操作１５のような危険な状況を検知した場合には、スマートフォン１０に対して警報の出力を指示して安全を確保できる。また、生成された警報イベント情報やドライブレコーダの映像を監視サーバ３０から管理者端末４０へ送信するので、運行管理者は、安全運転の指導が必要な乗務員の情報を管理者端末４０から容易に取得できる。 <Advantages of operation monitoring system>
In the above-mentioned operation monitoring systems 100 and 100B, the user operation 15 is directly monitored by using the monitoring applications 14 and 14B on the smartphone 10, so that the user operation 15 can be reliably detected. Further, when the monitoring server 30 or the on-board unit 20 detects a dangerous situation such as the user operation 15 while driving, the monitoring server 30 can instruct the smartphone 10 to output an alarm to ensure safety. Further, since the generated alarm event information and the video of the drive recorder are transmitted from the monitoring server 30 to the administrator terminal 40, the operation manager can easily obtain the information of the crew members who need guidance for safe driving from the administrator terminal 40. You can get it.

また、スマートフォン１０のオペレーティングシステム上で動作する１つのアプリケーションソフトウェアとして監視アプリ１４、１４Ｂを構成することにより、他のアプリケーションソフトウェアに変更を加えることなく、一般的なスマートフォンをそのまま利用して本発明を実施できる。また、例えば図９に示したように車載器２０がＳ４２でスマートフォン１０に対する操作監視指示を繰り返し送信する場合には、例えば監視アプリ１４Ｂが一時的スリープ状態であったとしても、それを必要な時に起動してユーザ操作１５を確実に監視することが可能になる。 Further, by configuring the monitoring applications 14 and 14B as one application software that operates on the operating system of the smartphone 10, the present invention can be used as it is without changing other application software. Can be implemented. Further, for example, when the on-board unit 20 repeatedly transmits an operation monitoring instruction to the smartphone 10 in S42 as shown in FIG. 9, for example, even if the monitoring application 14B is in a temporary sleep state, it is required when necessary. It becomes possible to start and reliably monitor the user operation 15.

ここで、上述した本発明の実施形態に係る操作監視システムの特徴をそれぞれ以下［１］〜［５］に簡潔に纏めて列記する。
［１］携帯端末（スマートフォン１０）上で動作する監視機能部（監視アプリ１４）と、
車両に搭載され無線通信により前記監視機能部と連携して動作可能な車載器（２０）、および前記車両外に配置される監視サーバ（３０）の少なくとも一方と、
を備え、
前記車載器、又は前記監視サーバは、前記監視機能部が送信する情報（図１中の通信Ｓ０１又は図６中の通信Ｓ０２）に基づいて、前記車両が運行状態のときに前記携帯端末が所定の操作状態であることを認識した場合には、所定の警報イベントを表す信号（図１中の通信Ｓ０２又は図６中の通信Ｓ０３）を前記携帯端末に送信する、
ことを特徴とする操作監視システム（１００、１００Ｂ）。 Here, the features of the operation monitoring system according to the above-described embodiment of the present invention are briefly summarized and listed below in [1] to [5], respectively.
[1] A monitoring function unit (monitoring application 14) that operates on a mobile terminal (smartphone 10),
An on-board unit (20) mounted on a vehicle and capable of operating in cooperation with the monitoring function unit by wireless communication, and at least one of a monitoring server (30) arranged outside the vehicle.
Equipped with
The on-board unit or the monitoring server is determined by the mobile terminal when the vehicle is in operation based on the information transmitted by the monitoring function unit (communication S01 in FIG. 1 or communication S02 in FIG. 6). When it is recognized that the operation state is the same, a signal representing a predetermined alarm event (communication S02 in FIG. 1 or communication S03 in FIG. 6) is transmitted to the mobile terminal.
An operation monitoring system (100, 100B) characterized by the above.

［２］前記監視機能部（監視アプリ１４）は、少なくとも前記携帯端末に対するユーザ操作（１５）の有無を周期的に監視し（Ｓ１１）、前記ユーザ操作を検知した場合に、検知した状態を表す情報を自発的に前記監視サーバに対して無線通信により送信する（Ｓ１２）、
ことを特徴とする上記［１］に記載の操作監視システム。 [2] The monitoring function unit (monitoring application 14) periodically monitors the presence or absence of a user operation (15) on the mobile terminal (S11), and represents a detected state when the user operation is detected. Information is spontaneously transmitted to the monitoring server by wireless communication (S12).
The operation monitoring system according to the above [1].

［３］前記車載器（２０）は、前記監視機能部との間で通信する機能を有し、
前記車載器は、少なくとも前記車両が運行状態のときに、所定の監視指示を周期的に前記監視機能部に送信し（Ｓ４１、Ｓ４２）、
前記監視機能部（監視アプリ１４Ｂ）は、前記車載器から受信した前記監視指示に従って、前記携帯端末の操作状態に関する情報を前記車載器に送信する（Ｓ３３）、
ことを特徴とする上記［１］に記載の操作監視システム（１００Ｂ）。 [3] The on-board unit (20) has a function of communicating with the monitoring function unit.
The on-board unit periodically transmits a predetermined monitoring instruction to the monitoring function unit (S41, S42) at least when the vehicle is in an operating state.
The monitoring function unit (monitoring application 14B) transmits information regarding the operation state of the mobile terminal to the vehicle-mounted device according to the monitoring instruction received from the vehicle-mounted device (S33).
The operation monitoring system (100B) according to the above [1].

［４］前記車載器は、前記警報イベントが発生した場合に、前記監視サーバの指示に従って、又は自発的に、前記車両上で撮影された映像の少なくとも一定時間に亘る情報を前記監視サーバに送信し（Ｓ４５、Ｓ４６）、
前記監視サーバは、前記車載器から送信された前記映像の情報を出力する（通信Ｓ０５）、
ことを特徴とする上記［１］乃至［３］のいずれかに記載の操作監視システム。 [4] When the alarm event occurs, the on-board unit transmits information to the monitoring server for at least a certain period of time of the image taken on the vehicle according to the instruction of the monitoring server or voluntarily. (S45, S46),
The monitoring server outputs the information of the video transmitted from the vehicle-mounted device (communication S05).
The operation monitoring system according to any one of the above [1] to [3].

［５］前記監視機能部（監視アプリ１４、１４Ｂ）は、前記携帯端末上で動作可能なアプリケーションソフトウェアである、
ことを特徴とする上記［１］乃至［４］のいずれかに記載の操作監視システム。 [5] The monitoring function unit (monitoring applications 14, 14B) is application software that can operate on the mobile terminal.
The operation monitoring system according to any one of the above [1] to [4].

１０スマートフォン
１１ハードウェア
１２オペレーティングシステム
１３アプリケーションソフトウェア
１４，１４Ｂ監視アプリ
１５ユーザ操作
２０車載器
２１マイクロコンピュータ
２２カメラインタフェース
２３通信モジュール
２４ＧＰＳ受信機
２５ＲＡＭ
２６不揮発メモリ
２７スピーカ
２８マイク
２９車載カメラ
３０監視サーバ
４０管理者端末
１００，１００Ｂ操作監視システム
Ｓ０１，Ｓ０２，Ｓ０３，Ｓ０４，Ｓ０５通信 10 Smartphone 11 Hardware 12 Operating system 13 Application software 14, 14B Monitoring application 15 User operation 20 On-board unit 21 Microcomputer 22 Camera interface 23 Communication module 24 GPS receiver 25 RAM
26 Non-volatile memory 27 Speaker 28 Microphone 29 In-vehicle camera 30 Monitoring server 40 Administrator terminal 100, 100B Operation monitoring system S01, S02, S03, S04, S05 Communication

Claims

The monitoring function unit that operates on the mobile terminal and
An on-board unit mounted on the vehicle and capable of operating in cooperation with the monitoring function unit by wireless communication, and at least one of the monitoring servers arranged outside the vehicle.
Equipped with
When the on-board unit or the monitoring server recognizes that the mobile terminal is in a predetermined operating state when the vehicle is in an operating state based on the information transmitted by the monitoring function unit, it is determined. A signal representing an alarm event is transmitted to the mobile terminal,
When the alarm event occurs, the on-board unit transmits information to the monitoring server for at least a certain period of time of the video captured on the vehicle according to the instruction of the monitoring server or voluntarily.
The monitoring server outputs the information of the video transmitted from the vehicle-mounted device.
An operation monitoring system characterized by this.

The monitoring function unit periodically monitors at least the presence or absence of a user operation on the mobile terminal, and when the user operation is detected, the monitoring function unit voluntarily transmits information indicating the detected state to the monitoring server by wireless communication. Send,
The operation monitoring system according to claim 1.

The on-board unit has a function of communicating with the monitoring function unit, and has a function of communicating with the monitoring function unit.
The on-board unit periodically transmits a predetermined monitoring instruction to the monitoring function unit at least when the vehicle is in an operating state.
The monitoring function unit transmits information regarding the operation state of the mobile terminal to the vehicle-mounted device according to the monitoring instruction received from the vehicle-mounted device.
The operation monitoring system according to claim 1.

The monitoring function unit is application software that can operate on the mobile terminal.
The operation monitoring system according to any one of claims 1 to 3 , wherein the operation monitoring system is characterized in that.