JP2018166268A - Control program and portable device - Google Patents

Control program and portable device Download PDF

Info

Publication number
JP2018166268A
JP2018166268A JP2017062821A JP2017062821A JP2018166268A JP 2018166268 A JP2018166268 A JP 2018166268A JP 2017062821 A JP2017062821 A JP 2017062821A JP 2017062821 A JP2017062821 A JP 2017062821A JP 2018166268 A JP2018166268 A JP 2018166268A
Authority
JP
Japan
Prior art keywords
user
portable device
mobile device
driver
determination unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017062821A
Other languages
Japanese (ja)
Other versions
JP6846707B2 (en
Inventor
加藤 博司
Hiroshi Kato
博司 加藤
徹 藤澤
Toru Fujisawa
徹 藤澤
亮雄 古田
Akio Furuta
亮雄 古田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to JP2017062821A priority Critical patent/JP6846707B2/en
Publication of JP2018166268A publication Critical patent/JP2018166268A/en
Application granted granted Critical
Publication of JP6846707B2 publication Critical patent/JP6846707B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a technique for improving safety and convenience when using a portable device.SOLUTION: A portable device 10 includes an application execution unit 51 executing an application for providing a user of the portable device 10 with a function, a display device 40 for displaying an image of the application, an operation unit 13 for inputting an instruction of the user for the application, and a function control unit 20 for limiting at least a part of the function under prescribed conditions. The function control part 20 includes an operator determination part 24 for determining whether or not the user of the portable device 10 is an operator of a vehicle, a gripping state determination part 25 for determining whether or not the user is gripping the portable device 10 with a hand, and an operation mode UI control part 26 of limiting at least the part of the function provided by the portable device 10, when the user is the operator of the vehicle, and determination is made that the user is gripping the portable device 10 with the hand.SELECTED DRAWING: Figure 2

Description

本発明は、携帯機器を制御するための制御プログラム、及びその携帯機器に関する。   The present invention relates to a control program for controlling a portable device and the portable device.

携帯電話端末やスマートフォンなどの携帯機器の普及により、利用者の利便性は格段に向上しているが、一方で、車両の運転中に携帯機器を操作することに起因する交通事故及び交通法規違反の発生が増加しており、社会的な問題になっている。   Although the convenience of users has improved significantly due to the widespread use of mobile devices such as mobile phone terminals and smartphones, on the other hand, traffic accidents and violations of traffic laws and regulations resulting from operating mobile devices while driving a vehicle Incidence is increasing and it has become a social problem.

このような状況に対処するために、車両を運転中の運転者による携帯機器の操作を制限する技術が提案されている(例えば、特許文献1参照)。特許文献1には、携帯機器が乗り物の運転位置にある場合に、携帯機器を運転モードに設定することが開示されている。   In order to cope with such a situation, a technique for restricting the operation of the portable device by the driver who is driving the vehicle has been proposed (see, for example, Patent Document 1). Patent Document 1 discloses that a mobile device is set to an operation mode when the mobile device is at a driving position of a vehicle.

特開2015−213305号公報Japanese Patent Laid-Open No. 2015-213305

特許文献1に開示された技術において、車両の助手席又は後部座席に乗車している同乗者や、電車やバスの乗客などが使用する携帯機器が、運転位置にあると誤判定されて運転モードに設定されると、同乗者や乗客などにとっては不便である。また、携帯機器が乗り物の運転位置にある場合であっても、安全な場所に駐車して運転者が使用しているときに運転モードに設定されると、運転者にとっても不便である。携帯機器の使用が危険を誘発するような状況においては適切に使用を制限しつつ、使用者の利便性を高めることが可能な技術が求められる。   In the technique disclosed in Patent Literature 1, a portable device used by a passenger in a passenger seat or a rear seat of a vehicle or a passenger of a train or a bus is erroneously determined to be in the driving position and is in a driving mode. It is inconvenient for passengers and passengers. Even when the mobile device is in the driving position of the vehicle, it is inconvenient for the driver if the driving mode is set when the driver is parked in a safe place and the driver is using it. In a situation where the use of a mobile device poses a danger, there is a need for a technology that can enhance the convenience for the user while appropriately restricting the use.

本発明はこうした状況に鑑みてなされたものであり、その目的は、携帯機器を使用する際の安全性と利便性を向上させる技術を提供することにある。   This invention is made | formed in view of such a condition, The objective is to provide the technique which improves the safety | security and convenience at the time of using a portable apparatus.

上記課題を解決するために、本発明のある態様の制御プログラムは、コンピュータを、携帯機器の使用者が車両の運転者であるか否かを判定する運転者判定部、使用者が携帯機器を手で把持しているか否かを判定する把持状態判定部、使用者が車両の運転者であり、かつ、使用者が携帯機器を手で把持していると判定された場合、携帯機器により提供される機能のうちの少なくとも一部を制限する制御部、として機能させる。   In order to solve the above problems, a control program according to an aspect of the present invention includes a computer, a driver determination unit that determines whether the user of the portable device is a driver of the vehicle, and the user A gripping state determination unit that determines whether or not the user is gripping by hand, provided by the mobile device when it is determined that the user is a driver of the vehicle and the user is gripping the mobile device by hand Function as a control unit that restricts at least a part of the functions to be performed.

なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。   It should be noted that any combination of the above-described constituent elements and a conversion of the expression of the present invention between a method, an apparatus, a system, a recording medium, a computer program, etc. are also effective as an aspect of the present invention.

本発明によれば、携帯機器を使用する際の安全性と利便性を向上させる技術を提供することができる。   ADVANTAGE OF THE INVENTION According to this invention, the technique which improves the safety | security and convenience at the time of using a portable apparatus can be provided.

携帯機器の状態と使用制限の関係について説明するための図である。It is a figure for demonstrating the relationship between the state of a portable apparatus, and use restrictions. 実施例に係る携帯機器の構成を示す図である。It is a figure which shows the structure of the portable apparatus which concerns on an Example. カメラにより撮像された使用者の画像の例を示す図である。It is a figure which shows the example of the user's image imaged with the camera. 携帯機器の把持状態と、センサにより検知された情報、カメラにより撮像された画像、操作部に対する操作の状況との対応関係を示す図である。It is a figure which shows the correspondence of the holding | grip state of a portable apparatus, the information detected by the sensor, the image imaged with the camera, and the condition of operation with respect to an operation part. 実施例に係る携帯機器の制御方法の手順を示すフローチャートである。It is a flowchart which shows the procedure of the control method of the portable device which concerns on an Example. 実施例に係る携帯機器の制御方法の手順を示すフローチャートである。It is a flowchart which shows the procedure of the control method of the portable device which concerns on an Example.

本発明の実施例は、携帯電話端末やスマートフォンなどの携帯機器の使用者が車両を運転しているときに、操作が容易で、携帯機器が提供する機能のうちの少なくとも一部が制限された運転者向けのユーザインタフェースを提供することにより、携帯機器を使用する際の安全性と使用者の利便性の双方を向上させる技術を提案する。携帯機器は、使用者が車両の運転中であるか否かを、複数の判定基準に基づいて判定する。とくに、使用者が車両の運転者であるか否かを判定するとともに、携帯機器を手に把持して使用しているか否かを判定する。これにより、危険な使用状況であるか否かをより精確に判定することができるので、機能を制限する必要がないときにまで機能を制限してしまう事態を低減させることができ、使用者の利便性を向上させることができる。また、車両を運転中には適切にユーザインタフェースを切り替え、携帯機器の使用を制限することができるので、携帯機器を使用する際の安全性を高め、携帯機器の使用に起因する交通事故や交通法規違反の発生頻度を低減させることができる。   The embodiment of the present invention is easy to operate when a user of a mobile device such as a mobile phone terminal or a smartphone is driving a vehicle, and at least some of the functions provided by the mobile device are limited. We propose a technology that improves both the safety and the convenience of the user when using a portable device by providing a user interface for the driver. The portable device determines whether or not the user is driving the vehicle based on a plurality of determination criteria. In particular, it is determined whether or not the user is a driver of the vehicle and whether or not the user is using the portable device by holding it. As a result, it is possible to more accurately determine whether or not it is a dangerous use situation, so it is possible to reduce the situation where the function is restricted until it is not necessary to restrict the function. Convenience can be improved. In addition, since the user interface can be switched appropriately and the use of mobile devices can be restricted while driving the vehicle, safety when using the mobile device is improved, and traffic accidents and traffic caused by the use of the mobile device are improved. The frequency of legal violations can be reduced.

図1は、携帯機器の状態と使用制限の関係について説明するための図である。本実施例の携帯機器は、運転モードと通常モードの間で動作モードを切り替え可能である。運転モードにおいては、車両の運転者向けの簡易なユーザインターフェースを提供し、携帯機器が提供する機能のうちの少なくとも一部の使用を制限する。通常モードにおいては、通常のユーザインタフェースを提供し、機能を制限しない。携帯機器は、携帯機器の表示装置がオンになっており、携帯機器が移動中であり、携帯機器の現在位置が道路上であり、かつ、携帯機器の使用者が車両の運転者であると判定された場合、携帯機器の動作モードを通常モードから運転モードに切り替える。   FIG. 1 is a diagram for explaining the relationship between the state of a mobile device and usage restrictions. The portable device of the present embodiment can switch the operation mode between the operation mode and the normal mode. In the driving mode, a simple user interface for the driver of the vehicle is provided, and use of at least some of the functions provided by the portable device is restricted. In the normal mode, a normal user interface is provided and functions are not limited. The portable device has a display device of the portable device turned on, the portable device is moving, the current position of the portable device is on the road, and the user of the portable device is a vehicle driver. If determined, the operation mode of the portable device is switched from the normal mode to the operation mode.

携帯機器の表示装置がオフになっている場合は、携帯機器は操作されていないと考えられるので、機能を制限する必要はない。携帯機器の表示装置がオンになっていても、携帯機器が移動していない場合は、携帯機器の使用者は運転中ではないと考えられるので、機能を制限しない。携帯機器の表示装置がオンになっており、携帯機器が移動中であっても、携帯機器の現在位置が道路上ではない場合は、携帯機器の使用者は車両以外の手段、例えば電車などで移動していると考えられるので、機能を制限しない。また、携帯機器の表示装置がオンになっており、携帯機器が道路上を移動中である場合であっても、携帯機器を使用しているのが車両の運転者ではない場合は、車両の同乗者や乗客などが携帯機器を使用していると考えられるので、機能を制限しない。   When the display device of the portable device is turned off, it is considered that the portable device has not been operated, and thus there is no need to limit the function. Even if the display device of the portable device is turned on, if the portable device is not moving, the user of the portable device is considered not to be driving, so the function is not limited. Even if the mobile device display device is on and the mobile device is moving, if the current position of the mobile device is not on the road, the user of the mobile device can use a means other than a vehicle, such as a train. Since it is considered moving, it does not limit the functions. In addition, even when the display device of the mobile device is on and the mobile device is moving on the road, if the mobile device is not used by the driver of the vehicle, Since passengers and passengers are thought to be using mobile devices, the functions are not limited.

運転モードにおいて、携帯機器がダッシュボードなどに固定されていると判定される場合は、携帯機器の使用者は、運転中ではあるが、手に把持した携帯機器を注視しながら操作しているわけではないと考えられるので、簡易なユーザインタフェースを介した操作を許しても、危険性はさほど増加しない。しかし、運転モードにおいて、携帯機器が使用者に手に把持されていると判定される場合は、運転者が手に把持した携帯機器を注視しながら操作している可能性があり、事故を誘発する可能性があるので、携帯機器の操作をやめさせる必要がある。したがって、本実施例では、このような場合には、携帯機器の操作をやめるよう警告を発し、携帯機器が座席に置かれたりダッシュボードに固定されたりして、手に把持されていないと判定されるまでは、携帯機器の表示装置をオフにして携帯機器を操作できないようにする。   When it is determined that the mobile device is fixed to the dashboard or the like in the driving mode, the user of the mobile device is operating while watching the mobile device held by the hand. Therefore, even if operation through a simple user interface is allowed, the risk does not increase so much. However, if it is determined that the mobile device is held by the user's hand in the driving mode, the driver may be operating while gazing at the mobile device held by the hand, causing an accident. It is necessary to stop the operation of the portable device. Therefore, in this embodiment, in such a case, a warning is issued to stop the operation of the mobile device, and it is determined that the mobile device is not held by the hand, such as being placed on the seat or fixed to the dashboard. Until this is done, the display device of the portable device is turned off so that the portable device cannot be operated.

これにより、車両の運転者が携帯機器を手に把持して操作している危険な状態をより精確に検知し、操作をやめさせることができるので、携帯機器を使用する際の安全性を高めることができる。また、同乗者や乗客などが使用する携帯機器の機能を制限してしまう事態を低減することができるので、携帯機器の使用者の利便性を向上させることができる。また、携帯機器がダッシュボードなどに固定されている場合は、簡易な運転者向けのユーザインタフェースを提供するので、例えば、ゲームなどの、使用者が携帯機器の表示を注視するようなアプリケーションの実行は制限しつつ、目的地までの経路を案内するためのナビゲーションなどの、運転中にも実行することが望まれるアプリケーションの実行は可能とすることができる。これにより、使用者の利便性を向上させることができる。   As a result, it is possible to more accurately detect a dangerous state in which the driver of the vehicle is holding and operating the portable device, and to stop the operation, thereby improving safety when using the portable device. be able to. Moreover, since the situation which restrict | limits the function of the portable apparatus which a passenger, a passenger, etc. use can be reduced, the convenience of the user of a portable apparatus can be improved. In addition, when the mobile device is fixed to a dashboard, etc., a simple user interface for the driver is provided. For example, an application such as a game in which the user watches the display of the mobile device is executed. The application that is desired to be executed during driving, such as navigation for guiding the route to the destination, can be executed. Thereby, a user's convenience can be improved.

なお、運転モードを解除して通常モードに切り替えるための条件については後述する。   The conditions for canceling the operation mode and switching to the normal mode will be described later.

図2は、実施例に係る携帯機器の構成を示す。携帯機器10は、携帯機器10の周囲の画像を撮像するためのカメラ11と、携帯機器10の周囲の状況又は携帯機器10の状態を検知するためのセンサ12と、使用者からの操作入力を受け付けるためのタッチパネルやボタンなどの操作部13と、ユーザインタフェースの画面や携帯機器10により実行されるアプリケーションの画面などを表示する表示装置40と、携帯機器10の各構成の動作を制御する制御部50と、制御部50が使用するプログラムやデータなどを格納するための記憶装置41とを備える。   FIG. 2 shows a configuration of the portable device according to the embodiment. The portable device 10 receives a camera 11 for capturing an image around the portable device 10, a sensor 12 for detecting a situation around the portable device 10 or a state of the portable device 10, and an operation input from a user. An operation unit 13 such as a touch panel or a button for receiving, a display device 40 that displays a screen of a user interface or an application executed by the mobile device 10, and a control unit that controls the operation of each component of the mobile device 10. 50 and a storage device 41 for storing programs and data used by the control unit 50.

制御部50は、各種の機能を使用者に提供するためのアプリケーションを実行するアプリケーション実行部51と、所定の条件下においては、アプリケーション実行部51により提供される機能のうちの少なくとも一部を制限する機能制御部20とを備える。機能制御部20は、表示ON/OFF判定部21、移動状態判定部22、位置判定部23、運転者判定部24、把持状態判定部25、運転モードUI制御部26、アプリケーション起動部27、運転モードUI開始判定部28、運転モードUI終了判定部29、及び運転者判定解除判定部30を備える。これらの機能は、CPU、メモリ、メモリにロードされたプログラムなどによって実現され、ここではそれらの連携によって実現される構成を描いている。プログラムは、携帯機器10に内蔵されていてもよく、また記録媒体に格納された形態で外部から供給されるものであってもよい。したがってこれらの機能ブロックがハードウェアのみ、ソフトウェアのみ、またはそれらの組合せによっていろいろな形で実現できることは、当業者に理解されるところである。   The control unit 50 limits an application execution unit 51 that executes an application for providing various functions to the user, and at least a part of the functions provided by the application execution unit 51 under a predetermined condition. And a function control unit 20. The function control unit 20 includes a display ON / OFF determination unit 21, a movement state determination unit 22, a position determination unit 23, a driver determination unit 24, a gripping state determination unit 25, an operation mode UI control unit 26, an application activation unit 27, and an operation. A mode UI start determination unit 28, an operation mode UI end determination unit 29, and a driver determination release determination unit 30 are provided. These functions are realized by a CPU, a memory, a program loaded in the memory, and the like, and here, a configuration realized by their cooperation is illustrated. The program may be built in the mobile device 10 or may be supplied from the outside in a form stored in a recording medium. Accordingly, those skilled in the art will understand that these functional blocks can be realized in various forms by hardware only, software only, or a combination thereof.

表示ON/OFF判定部21は、表示装置40のON/OFFを判定する。表示装置40は、所定時間以上、操作部13が使用者による操作入力を受け付けなかった場合に、自動的にOFFにされ、操作部13が使用者による操作入力を受け付けると、自動的にONにされる。表示ON/OFF判定部21は、表示装置40が現在ONであるかOFFであるかを判定する。   The display ON / OFF determination unit 21 determines ON / OFF of the display device 40. The display device 40 is automatically turned off when the operation unit 13 does not accept an operation input by the user for a predetermined time or more, and is automatically turned on when the operation unit 13 accepts an operation input by the user. Is done. The display ON / OFF determination unit 21 determines whether the display device 40 is currently ON or OFF.

移動状態判定部22は、携帯機器10の移動状態を判定する。携帯機器10の移動状態は、携帯機器10に搭載されたGNSS(Global Navigation Satellite System(s))受信機が受信した信号に基づいて推定される現在位置に基づいて判定されてもよいし、携帯機器10に搭載されたカメラ、加速度センサ、ジャイロセンサなどのセンサ12による検知結果に基づいて判定されてもよい。移動状態判定部22は、所定の時間(T1)以上移動し続けているときに、携帯機器10が移動していると判定する。移動状態判定部22は、携帯機器10が所定の速度以上の速度で移動しているとき、又は、所定の距離以上の距離を移動したときに、携帯機器10が移動していると判定してもよい。   The movement state determination unit 22 determines the movement state of the mobile device 10. The movement state of the mobile device 10 may be determined based on a current position estimated based on a signal received by a GNSS (Global Navigation Satellite System (s)) receiver mounted on the mobile device 10, or mobile The determination may be made based on a detection result by a sensor 12 such as a camera, an acceleration sensor, or a gyro sensor mounted on the device 10. The movement state determination unit 22 determines that the mobile device 10 is moving when it continues to move for a predetermined time (T1) or longer. The movement state determination unit 22 determines that the mobile device 10 is moving when the mobile device 10 is moving at a speed greater than or equal to a predetermined speed, or when the mobile device 10 has moved a distance greater than or equal to a predetermined distance. Also good.

位置判定部23は、携帯機器10の現在位置を判定する。前述したように、携帯機器の現在位置は、GNSS受信機が受信した信号や、各種センサのセンサ値などに基づいて推定される。位置判定部23は、推定された現在位置と、記憶装置41に格納された地図情報を参照して、携帯機器10の現在位置が道路上であるか否かを判定する。位置判定部23は、携帯機器10の現在位置が所定の距離又は所定の時間以上、道路上であると判定された場合に、携帯機器10が道路上にあると判定してもよい。   The position determination unit 23 determines the current position of the mobile device 10. As described above, the current position of the mobile device is estimated based on signals received by the GNSS receiver, sensor values of various sensors, and the like. The position determination unit 23 refers to the estimated current position and the map information stored in the storage device 41 to determine whether or not the current position of the mobile device 10 is on the road. The position determination unit 23 may determine that the mobile device 10 is on the road when the current position of the mobile device 10 is determined to be on the road for a predetermined distance or a predetermined time or more.

運転者判定部24は、携帯機器10の使用者が車両の運転者であるか否かを判定する。運転者判定部24は、カメラ11により撮像された画像を解析することにより、携帯機器10の使用者が車両の運転者であるか否かを判定する。   The driver determination unit 24 determines whether the user of the mobile device 10 is a vehicle driver. The driver determination unit 24 determines whether or not the user of the portable device 10 is a vehicle driver by analyzing an image captured by the camera 11.

図3は、カメラ11により撮像された使用者の画像の例を示す。図3(a)は、携帯機器10が車両のダッシュボードに固定されているときに、携帯機器10の表示装置40と同じ側、すなわち使用の際に使用者に面する側に設けられたカメラ11により撮像された画像の例を示す。撮像画像には、使用者である運転者と、後部座席に乗車している同乗者が写っている。図3(b)は、携帯機器10が使用者の手に把持されているときに、携帯機器10の表示装置40と同じ側に設けられたカメラ11により撮像された画像の例を示す。撮像画像には、使用者である運転者が写っている。図3(b)の場合は、図3(a)の場合よりも、カメラ11と使用者の頭部との間の距離が近いので、使用者の頭部がより大きく写っている。図3(c)は、使用者の視線の向きの例を示す。使用者が表示装置40を注視しているときには、使用者の視線は、ほぼカメラ11の方向に向いているが、使用者が表示装置40ではなく前方や後写鏡を見ているときには、使用者の視線は、カメラ11の方向とずれる。   FIG. 3 shows an example of a user image taken by the camera 11. FIG. 3A shows a camera provided on the same side as the display device 40 of the portable device 10, that is, the side facing the user when used when the portable device 10 is fixed to the dashboard of the vehicle. 11 shows an example of an image picked up by No. 11. The captured image shows a driver who is a user and a passenger who is in the rear seat. FIG. 3B shows an example of an image captured by the camera 11 provided on the same side as the display device 40 of the mobile device 10 when the mobile device 10 is held by the user's hand. The captured image shows the driver who is the user. In the case of FIG. 3B, since the distance between the camera 11 and the user's head is closer than in the case of FIG. 3A, the user's head is shown larger. FIG.3 (c) shows the example of direction of a user's eyes | visual_axis. When the user is gazing at the display device 40, the user's line of sight is almost directed toward the camera 11, but when the user is looking at the front or rearview mirror instead of the display device 40, The person's line of sight deviates from the direction of the camera 11.

以上の考察を踏まえて、運転者判定部24は、携帯機器10が移動状態においてカメラ11により撮像された使用者の視線の方向を、顔認識技術などを利用して検出し、視線方向に基づいて、携帯機器10の使用者が車両の運転者であるか否かを判定する。運転者判定部24は、所定の期間の視線方向の検出結果に基づいて、視線を特定方向、例えば使用者から見て前方に向けている時間が長く、所定時間以上継続してカメラ11の方向に視線を向けない場合には、使用者は運転者であると判定し、視線が特定方向に偏らず、所定時間以上継続してカメラ11の方向に視線を向けている場合には、使用者は運転者ではないと判定する。これにより、使用者が運転者であるか否かをより精確に判定することができるので、使用者の利便性を向上させることができる。運転者判定部24は、所定期間の視線方向の検出結果により、使用者が運転者であるか否かを判定できなかった場合は、更に所定期間の視線方向の検出結果を取得してから再判定してもよい。これにより、誤判定を低減させることができる。   Based on the above considerations, the driver determination unit 24 detects the direction of the user's line of sight captured by the camera 11 while the mobile device 10 is in a moving state, using face recognition technology or the like, and based on the line of sight direction. Thus, it is determined whether or not the user of the mobile device 10 is a vehicle driver. Based on the result of detection of the line-of-sight direction for a predetermined period, the driver determination unit 24 takes a long time to direct the line of sight toward the front as viewed from the user, for example, the direction of the camera 11 continuously for a predetermined time or more. If the user does not turn the line of sight, the user is determined to be a driver. If the line of sight does not deviate in a specific direction and continues for a predetermined time or more, the user is directed toward the camera 11. Is determined not to be a driver. Thereby, since it can determine more accurately whether a user is a driver | operator, the convenience of a user can be improved. If the driver determination unit 24 cannot determine whether or not the user is a driver based on the detection result of the gaze direction for a predetermined period, the driver determination unit 24 obtains the detection result of the gaze direction for a predetermined period and then repeats the acquisition. You may judge. Thereby, erroneous determination can be reduced.

把持状態判定部25は、携帯機器10の把持状態を判定する。把持状態判定部25は、携帯機器10のカメラ11により撮像された画像、センサ12により検知された情報、操作部13に対する操作の状況などに基づいて、携帯機器10が使用者の手に把持されているか否かを判定する。   The gripping state determination unit 25 determines the gripping state of the mobile device 10. The gripping state determination unit 25 grips the mobile device 10 by the user's hand based on the image captured by the camera 11 of the mobile device 10, the information detected by the sensor 12, the operation status of the operation unit 13, and the like. It is determined whether or not.

図4は、携帯機器の把持状態と、センサ12により検知された情報、カメラ11により撮像された画像、操作部13に対する操作の状況との対応関係を示す。携帯機器10が使用者の手に把持されている場合、携帯機器10は手ぶれの影響を大きく受けるので、ジャイロセンサにより検知される携帯機器10の角度の変動幅は大きく、角度の変動周期は長くなり、カメラ11により撮像される画像に写る使用者の位置の変動は大きくなる。また、携帯機器10が使用者の手に把持されている場合は、使用者が他方の手で携帯機器10を操作していることが多いので、操作部13に対する操作の頻度は多くなる。   FIG. 4 shows a correspondence relationship between the gripping state of the mobile device, the information detected by the sensor 12, the image captured by the camera 11, and the operation status of the operation unit 13. When the mobile device 10 is gripped by the user's hand, the mobile device 10 is greatly affected by camera shake, so the angle fluctuation range of the mobile device 10 detected by the gyro sensor is large, and the angle fluctuation cycle is long. Thus, the variation in the position of the user in the image captured by the camera 11 becomes large. Further, when the mobile device 10 is held by the user's hand, since the user often operates the mobile device 10 with the other hand, the frequency of operation on the operation unit 13 increases.

それに対して、携帯機器10がダッシュボードなどに固定されている場合、携帯機器10は手ぶれの影響を受けないが、車両の振動の影響を受けるので、ジャイロセンサにより検知される携帯機器10の角度の変動幅は小さく、角度の変動周期は短くなり、カメラ11により撮像される画像に写る使用者の位置の変動は小さくなる。また、携帯機器10がダッシュボードなどに固定されている場合は、使用者が手を伸ばして携帯機器10を操作することは少ないので、操作部13に対する操作の頻度は少なくなる。   On the other hand, when the mobile device 10 is fixed to a dashboard or the like, the mobile device 10 is not affected by camera shake, but is affected by the vibration of the vehicle, so the angle of the mobile device 10 detected by the gyro sensor. The fluctuation range is small, the angle fluctuation period is short, and the fluctuation in the position of the user in the image captured by the camera 11 is small. Further, when the mobile device 10 is fixed to a dashboard or the like, since the user rarely operates the mobile device 10 by reaching out, the frequency of operation on the operation unit 13 is reduced.

携帯機器10が座席等に置かれている場合も、携帯機器10は手ぶれの影響を受けず、車両の振動の影響を受けるが、ダッシュボードに直接固定される場合に比べるとエンジンの振動などの影響が小さいので、ジャイロセンサにより検知される携帯機器10の角度の変動幅は小さく、角度の変動周期は長い、又は中程度となる。カメラ11により撮像される画像には、通常、使用者は写らない。また、通常、使用者は携帯機器10を操作しないので、操作部13に対する操作はなされない。   Even when the mobile device 10 is placed on a seat or the like, the mobile device 10 is not affected by camera shake and is affected by the vibration of the vehicle. Since the influence is small, the angle fluctuation range of the portable device 10 detected by the gyro sensor is small, and the angle fluctuation period is long or medium. Usually, the user is not shown in the image captured by the camera 11. Further, since the user does not normally operate the portable device 10, the operation unit 13 is not operated.

以上の考察を踏まえて、把持状態判定部25は、所定期間のカメラ11による撮像画像、センサ12の検出結果、又は操作部13に対する操作状況に基づいて、携帯機器10の角度の変動幅が所定値より大きく、角度の変動周期が所定値より長く、撮像画像に写る使用者の位置の変動が所定値より大きく、操作部13に対する操作の頻度が所定値より多い場合に、携帯機器10が使用者に手に把持されていると判定する。以上の判定基準のうち、少なくとも1つが満たされた場合に、携帯機器10が手に把持されていると判定してもよいし、複数の条件が満たされた場合に、携帯機器10が手に把持されていると判定してもよい。前者によれば、手に把持されているのに手に把持されていると判定しない誤判定を低減させることができ、より安全に携帯機器10を使用させることができる。後者によれば、手に把持されていないのに手に把持されていると判定する誤判定を低減させることができ、使用者の利便性を高めることができる。それぞれの判定基準に重みを付けてスコアを算出し、算出されたスコアと閾値を比較することにより、手に把持されているか否かを判定してもよい。   Based on the above considerations, the gripping state determination unit 25 has a predetermined variation range of the angle of the mobile device 10 based on an image captured by the camera 11 for a predetermined period, a detection result of the sensor 12, or an operation state with respect to the operation unit 13. Larger than the value, the angle fluctuation period is longer than the predetermined value, the change in the position of the user shown in the captured image is larger than the predetermined value, and the frequency of operation with respect to the operation unit 13 is higher than the predetermined value. It is determined that the person holds the hand. If at least one of the above criteria is satisfied, it may be determined that the mobile device 10 is being held by the hand, and if a plurality of conditions are satisfied, the mobile device 10 may be It may be determined that it is gripped. According to the former, it is possible to reduce erroneous determinations that are not determined as being held by the hand but being held by the hand, and the portable device 10 can be used more safely. According to the latter, it is possible to reduce misjudgment that determines that the hand is held but not held by the hand, and the convenience of the user can be improved. A score may be calculated by weighting each determination criterion, and it may be determined whether or not the hand is held by comparing the calculated score with a threshold value.

運転モードUI制御部26は、運転モードのインタフェースを提供する。運転モードのユーザインタフェースは、携帯機器10が実行可能な複数の機能又はアプリケーションのうち、所定の一部の機能又はアプリケーションのみを簡易に起動することを可能とするランチャーを提供する。運転モードUI制御部26は、通常モードにおいて表示装置40に表示される画面よりも視認性の高いユーザインタフェース画面を表示装置40に表示してもよいし、視認性の高い画面を表示装置40に表示させるようアプリケーションやオペレーティングシステムなどを制御してもよい。例えば、表示される情報の量を低減し、文字情報などの表示サイズを大きくし、表示色の彩度やコントラストを上げ、表示装置40の画面を明るくしてもよい。運転モードUI制御部26は、運転モードにおいて、音声又はジェスチャーなど、車両を運転中の運転者が、携帯機器10の方を注視することなく、又は、手を使用することなく行うことが可能な入力を受け付けてもよい。   The operation mode UI control unit 26 provides an operation mode interface. The user interface in the operation mode provides a launcher that can easily start only a predetermined part of functions or applications among a plurality of functions or applications that can be executed by the mobile device 10. The operation mode UI control unit 26 may display a user interface screen having higher visibility than the screen displayed on the display device 40 in the normal mode on the display device 40, or display a screen with high visibility on the display device 40. You may control an application, an operating system, etc. to display. For example, the amount of information to be displayed may be reduced, the display size of character information and the like may be increased, the saturation and contrast of display colors may be increased, and the screen of the display device 40 may be brightened. The driving mode UI control unit 26 can be performed in the driving mode, such as voice or gesture, without the driver driving the vehicle gazing at the portable device 10 or using the hand. Input may be accepted.

運転モードUI制御部26は、運転モードにおいても実行可能なアプリケーションの起動を使用者から要求された場合は、アプリケーション起動部27によりアプリケーションを起動する一方、運転モードにおいては実行が制限されるアプリケーションの起動を使用者から要求された場合は、アプリケーションを起動しない。これにより、車両の運転中であっても実行可能とされるアプリケーションの実行は許容しつつ、車両の運転中には実行を制限すべきアプリケーションの実行は適切に制限することができるので、携帯機器10を使用する際の安全性を高めることができる。   The operation mode UI control unit 26 activates an application by the application activation unit 27 when requested by the user to activate an application that can be executed even in the operation mode, while the operation mode UI control unit 26 restricts execution of the application. The application is not started when the start is requested by the user. As a result, it is possible to appropriately limit the execution of an application that should be restricted during execution of the vehicle while allowing the execution of an application that can be executed even while the vehicle is operating. Safety at the time of using 10 can be improved.

運転モードUI開始判定部28は、通常モードのユーザインタフェースが提供されているときに、運転モードを開始して通常モードから切り替えるか否かを判定する。運転モードUI開始判定部28は、表示ON/OFF判定部21により表示装置40がONであると判定され、移動状態判定部22により携帯機器10が移動中であると判定され、位置判定部23により携帯機器10が道路上にあると判定され、運転者判定部24により携帯機器10の使用者が車両の運転者であると判定された場合に、ユーザインタフェースを通常モードから運転モードのユーザインタフェースに切り替えるよう運転モードUI制御部26に指示する。これにより、携帯機器10の使用を制限すべき状況をより精確に判定することができる。   The operation mode UI start determination unit 28 determines whether or not to start the operation mode and switch from the normal mode when the normal mode user interface is provided. The operation mode UI start determination unit 28 determines that the display device 40 is ON by the display ON / OFF determination unit 21, determines that the mobile device 10 is moving by the movement state determination unit 22, and determines the position determination unit 23. When the mobile device 10 is determined to be on the road by the driver, and the driver determination unit 24 determines that the user of the mobile device 10 is the driver of the vehicle, the user interface is changed from the normal mode to the user interface in the driving mode. To the operation mode UI control unit 26. Thereby, the situation which should restrict | limit the use of the portable apparatus 10 can be determined more correctly.

運転モードUI終了判定部29は、運転モードのユーザインタフェースが提供されているときに、運転モードを終了して通常モードに戻すか否かを判定する。運転モードUI終了判定部29は、移動状態判定部22により、携帯機器10が所定時間(T2)以上移動していないと判定された場合、車両が路肩や駐車場などに停車され、携帯機器10を安全に使用することが可能な状況にあると考えられるので、運転モードを終了して通常モードに戻すよう運転モードUI制御部26に指示する。以降、携帯機器10の機能の制限は解除され、使用者は携帯機器10を通常通りに使用することができる。運転モードUI終了判定部29は、携帯機器10の使用者から運転モードUIの終了を要求する旨の操作入力を受け付けた場合は、運転モードを終了して通常モードに切り替える。これにより、車両の運転者が車両を停車させた後、時間T2が経過して自動的に通常モードに切り替わる前に通常モードで携帯機器10を使用したい場合には、運転モードを手動で終了させて通常モードに切り替えることができるので、使用者の利便性を向上させることができる。   The operation mode UI end determination unit 29 determines whether to end the operation mode and return to the normal mode when the user interface for the operation mode is provided. When the movement state determination unit 22 determines that the mobile device 10 has not moved for a predetermined time (T2) or longer, the driving mode UI end determination unit 29 stops the vehicle on a road shoulder or a parking lot, and the mobile device 10 Therefore, the operation mode UI control unit 26 is instructed to end the operation mode and return to the normal mode. Thereafter, the restriction on the function of the mobile device 10 is released, and the user can use the mobile device 10 as usual. When the operation mode UI end determination unit 29 receives an operation input requesting the end of the operation mode UI from the user of the mobile device 10, the operation mode UI end determination unit 29 ends the operation mode and switches to the normal mode. As a result, after the driver of the vehicle stops the vehicle, if the user wants to use the portable device 10 in the normal mode before the time T2 has elapsed and automatically switched to the normal mode, the operation mode is manually ended. Therefore, it is possible to improve the convenience for the user.

運転者判定解除判定部30は、運転者判定部24により携帯機器10の使用者が車両の運転者であると判定された後、その判定結果を解除するか否かを判定する。運転者判定解除判定部30は、移動状態判定部22により、所定時間(T3)以上移動していないと判定されるか、又は、位置判定部23により、携帯機器10が所定時間以上道路上から離れたと判定された場合に、携帯機器10の使用者が車両の運転者であるという判定結果を解除する。運転者判定解除判定部30は、使用者から運転者であるという判定の解除を要求する旨の操作入力を受け付けた場合は、判定結果を解除する。これにより、例えば、車両の運転者が車両を降車した後、時間T3が経過して自動的に機能制限が解除される前に通常モードで携帯機器10を使用したい場合には、手動で解除させることができる。使用者が手動で判定結果を解除することを可能とするため、運転者判定解除判定部30が自動的に判定結果を解除するまでの時間T3は、T1及びT2より長くてもよい。   The driver determination cancellation determination unit 30 determines whether or not to cancel the determination result after the driver determination unit 24 determines that the user of the mobile device 10 is a driver of the vehicle. The driver determination cancellation determination unit 30 determines that the moving state determination unit 22 has not moved for a predetermined time (T3) or more, or the position determination unit 23 causes the mobile device 10 to remain on the road for a predetermined time or more. If it is determined that the user is away, the determination result that the user of the mobile device 10 is the driver of the vehicle is canceled. The driver determination cancellation determination unit 30 cancels the determination result when an operation input requesting cancellation of determination that the driver is a driver is received from the user. Thereby, for example, when the driver of the vehicle wants to use the mobile device 10 in the normal mode after the time T3 has elapsed and before the function restriction is automatically released after the vehicle gets off the vehicle, it is manually released. be able to. In order to allow the user to manually cancel the determination result, the time T3 until the driver determination cancellation determination unit 30 automatically cancels the determination result may be longer than T1 and T2.

このように、運転者判定部24により、携帯機器10の使用者が車両の運転者であると判定されると、その判定結果を解除するための条件が成就するまでは、その判定結果は維持される。したがって、運転モードに切り替えられていたユーザインタフェースが、運転モードUI終了判定部29の指示により終了され、通常モードのユーザインタフェースに戻ったとしても、その後、移動状態判定部22により、携帯機器10が所定時間(T1)以上移動していると判定されると、運転モードUI開始判定部28は、再度運転モードに切り替えるよう運転モードUI制御部26に指示する。この場合、運転者判定部24による判定は省略される。   As described above, when the driver determination unit 24 determines that the user of the mobile device 10 is the driver of the vehicle, the determination result is maintained until a condition for canceling the determination result is satisfied. Is done. Therefore, even if the user interface that has been switched to the operation mode is terminated by an instruction from the operation mode UI end determination unit 29 and returned to the user interface in the normal mode, the mobile state 10 is subsequently moved by the movement state determination unit 22. If it is determined that the vehicle has moved for a predetermined time (T1) or longer, the operation mode UI start determination unit 28 instructs the operation mode UI control unit 26 to switch to the operation mode again. In this case, the determination by the driver determination unit 24 is omitted.

運転者判定解除判定部30により判定結果が解除された後は、携帯機器10がT1以上移動しているだけでは運転モードに切り替えられないが、携帯機器10の使用者が車両の運転を再開すると、運転者判定部24により再び携帯機器10の使用者が車両の運転者であると判定され、運転モードに切り替えられる。   After the determination result is canceled by the driver determination cancellation determination unit 30, the mobile device 10 cannot be switched to the operation mode only by moving the mobile device 10 by T1 or more. However, when the user of the mobile device 10 resumes driving the vehicle. The driver determination unit 24 again determines that the user of the portable device 10 is the driver of the vehicle, and switches to the driving mode.

図5は、実施例に係る携帯機器の制御方法の手順を示すフローチャートである。携帯機器10において、運転モードUI開始判定部28は、表示ON/OFF判定部21により表示装置40がONであると判定されたか(S10)、移動状態判定部22により携帯機器10が移動中であると判定されたか(S12)、位置判定部23により携帯機器10が道路上にあると判定されたか(S14)、運転者判定部24により携帯機器10の使用者が車両の運転者であると判定されたか(S16)を確認し、全ての判定結果が肯定的であった場合は(S10のY、S12のY、S14のY、かつS16のY)、運転者判定フラグをONにし(S18)、ユーザインタフェースを通常モードから運転モードのユーザインタフェースに切り替えるよう運転モードUI制御部26に指示する(S20)。いずれかの判定結果が否定的であった場合は(S10のN、S12のN、S14のN、又はS16のN)、S10に戻って判定を続ける。   FIG. 5 is a flowchart illustrating the procedure of the method for controlling the mobile device according to the embodiment. In the mobile device 10, the operation mode UI start determination unit 28 determines that the display device 40 is ON by the display ON / OFF determination unit 21 (S <b> 10), or the mobile state 10 is moving by the movement state determination unit 22. Whether the mobile device 10 is determined to be present (S12), whether the mobile device 10 is determined to be on the road by the position determination unit 23 (S14), or whether the user of the mobile device 10 is a driver of the vehicle by the driver determination unit 24 If it is determined (S16) and all the determination results are affirmative (Y of S10, Y of S12, Y of S14, and Y of S16), the driver determination flag is turned ON (S18). ), The operation mode UI control unit 26 is instructed to switch the user interface from the normal mode to the user interface in the operation mode (S20). If any of the determination results is negative (N in S10, N in S12, N in S14, or N in S16), the process returns to S10 and the determination is continued.

このように、複数の判定基準を適切な順序で適用して判定を実行することにより、判定の実行頻度を低減させることができるので、処理負荷及び消費電力を低減させることができる。例えば、表示装置40がOFFになっているときは、移動中であるか否か、道路上にいるか否か、運転者であるか否かにかかわらず、使用者は携帯機器10を使用していないと考えられるので、それらの判定を実行するまでもなく、携帯機器10の使用者が車両を運転している状況ではないと判定することができる。   As described above, the determination execution frequency can be reduced by applying the plurality of determination criteria in an appropriate order, so that the processing load and power consumption can be reduced. For example, when the display device 40 is OFF, the user is using the mobile device 10 regardless of whether the display device 40 is moving, on the road, or a driver. Therefore, it is possible to determine that the user of the mobile device 10 is not driving the vehicle, without performing these determinations.

図6は、実施例に係る携帯機器の制御方法の手順を示すフローチャートである。図5は、携帯機器10の使用者が車両の運転者であると判定されるまでの手順を示したが、図6は、携帯機器10の使用者が車両の運転者であると判定されてから、その判定結果が解除されるまでの手順を示す。   FIG. 6 is a flowchart illustrating the procedure of the method for controlling the portable device according to the embodiment. FIG. 5 shows a procedure until it is determined that the user of the mobile device 10 is a driver of the vehicle, but FIG. 6 shows that the user of the mobile device 10 is determined to be a driver of the vehicle. To the procedure until the determination result is canceled.

運転モードのユーザインタフェースが起動されている場合は(S40のY)、把持状態判定部25が、使用者が携帯機器10を手で把持しているか否かを判定し(S42)、手で把持していると判定された場合は(S42のY)、運転中に携帯機器10を操作しないよう警告し(S44)、手で把持していると判定されなくなるまで、携帯機器10を操作できないようにするために表示装置40をOFFにする(S46)。手で把持していると判定されなかった場合は(S42のN)、運転モードUI終了判定部29が、運転モードを終了するか否かを判定する(S48)。車両がT2以上移動していないと判定された場合は(S48のY)、運転モードUI制御部26は、運転モードを終了して通常のユーザインタフェースに戻す(S50)、車両がT2以上移動していないと判定されなかった場合は(S48のN)、運転モードが継続される。   When the user interface in the operation mode is activated (Y in S40), the gripping state determination unit 25 determines whether or not the user is gripping the mobile device 10 by hand (S42) and grips it by hand. If it is determined that the mobile device 10 is being operated (Y in S42), a warning is given not to operate the mobile device 10 during driving (S44), and the mobile device 10 cannot be operated until it is determined that the hand is not being held. Therefore, the display device 40 is turned off (S46). When it is not determined that the hand is held (N in S42), the operation mode UI end determination unit 29 determines whether or not to end the operation mode (S48). When it is determined that the vehicle has not moved more than T2 (Y in S48), the operation mode UI control unit 26 ends the operation mode and returns to the normal user interface (S50), and the vehicle moves more than T2. If it is not determined that it is not (N in S48), the operation mode is continued.

S40において、運転モードUIが起動中でない場合は(S40のN)、運転モードUI開始判定部28は、運転モードを開始するか否かを判定する(S52)。車両がT1以上道路上を移動していると判定された場合は(S52のY)、運転モードUI制御部26は、運転モードを開始して運転モードのユーザインタフェースに切り替える(S54)。車両がT1以上道路上を移動していると判定されなかった場合は(S52のN)、通常モードが継続される。   In S40, when the operation mode UI is not activated (N in S40), the operation mode UI start determination unit 28 determines whether to start the operation mode (S52). When it is determined that the vehicle is moving on the road for T1 or more (Y in S52), the operation mode UI control unit 26 starts the operation mode and switches to the user interface of the operation mode (S54). When it is not determined that the vehicle is moving on the road for T1 or more (N in S52), the normal mode is continued.

つづいて、運転者判定解除判定部30は、携帯機器10の使用者が車両の運転者であるという判定結果を解除するか否かを判定する(S56)。携帯機器10がT3以上移動していない、又は、携帯機器10が道路上にないと判定された場合(S56のY)、運転者判定フラグをOFFにして、処理を終了する。携帯機器10がT3以上移動していない、又は、携帯機器10が道路上にないと判定されなかった場合(S56のN)、S40に戻り、運転者判定フラグがOFFにされるまで上記の手順を繰り返す。   Subsequently, the driver determination cancellation determination unit 30 determines whether or not to cancel the determination result that the user of the mobile device 10 is the driver of the vehicle (S56). When it is determined that the mobile device 10 has not moved by T3 or more, or the mobile device 10 is not on the road (Y in S56), the driver determination flag is turned OFF, and the process ends. When it is not determined that the mobile device 10 has not moved more than T3 or the mobile device 10 is not on the road (N in S56), the process returns to S40 and the above procedure is performed until the driver determination flag is turned off. repeat.

本発明の実施例によれば、危険な使用状況であるか否かをより精確に判定することができるので、機能を制限する必要がないときにまで機能を制限してしまう事態を低減させることができ、使用者の利便性を向上させることができる。また、車両を運転中には適切にユーザインタフェースを切り替え、携帯機器の使用を制限することができるので、携帯機器を使用する際の安全性を高め、携帯機器の使用に起因する交通事故や交通法規違反の発生頻度を低減させることができる。   According to the embodiment of the present invention, since it is possible to more accurately determine whether or not it is a dangerous use situation, it is possible to reduce the situation where the function is restricted until it is not necessary to restrict the function. It is possible to improve user convenience. In addition, since the user interface can be switched appropriately and the use of mobile devices can be restricted while driving the vehicle, safety when using the mobile device is improved, and traffic accidents and traffic caused by the use of the mobile device are improved. The frequency of legal violations can be reduced.

本発明の一態様の概要は、次の通りである。本発明のある態様の制御プログラムは、コンピュータを、携帯機器の使用者が車両の運転者であるか否かを判定する運転者判定部、使用者が携帯機器を手で把持しているか否かを判定する把持状態判定部、使用者が車両の運転者であり、かつ、使用者が携帯機器を手で把持していると判定された場合、携帯機器により提供される機能のうちの少なくとも一部を制限する制御部、として機能させる。   The outline of one embodiment of the present invention is as follows. A control program according to an aspect of the present invention includes a computer, a driver determination unit that determines whether or not the user of the mobile device is a vehicle driver, and whether or not the user is holding the mobile device by hand. A gripping state determination unit that determines whether the user is a driver of the vehicle and the user is holding the mobile device by hand, at least one of the functions provided by the mobile device Function as a control unit that restricts the unit.

この態様によると、危険な使用状況であるか否かをより精確に判定することができるので、携帯機器を使用する際の安全性を高めつつ、使用者の利便性を向上させることができる。   According to this aspect, since it is possible to more accurately determine whether or not it is a dangerous use situation, it is possible to improve the convenience for the user while improving the safety when using the mobile device.

制御部は、携帯機器が使用者に提供するユーザインタフェースを、携帯機器により実行される機能のうちの少なくとも一部が制限されたユーザインタフェースに切り替えてもよい。これにより、危険を誘発する可能性のある使用態様を適切に制限し、安全性を高めることができる。   The control unit may switch the user interface provided to the user by the mobile device to a user interface in which at least a part of functions executed by the mobile device is limited. As a result, it is possible to appropriately limit usage modes that may induce danger and to enhance safety.

運転者判定部は、携帯機器に設けられたカメラにより撮像された使用者の画像を取得し、画像を解析することにより使用者の視線の方向を検出し、検出された視線の方向に基づいて、携帯機器の使用者が車両の運転者であるか否かを判定してもよい。これにより、携帯機器の使用者が車両の運転者であるか否かをより精確に判定することができる。   The driver determination unit acquires a user image captured by a camera provided in the mobile device, detects the user's line of sight by analyzing the image, and based on the detected line of sight It may be determined whether the user of the portable device is a vehicle driver. Thereby, it can be determined more accurately whether or not the user of the portable device is a driver of the vehicle.

把持状態判定部は、携帯機器に設けられたカメラにより撮像された使用者の位置の変動、携帯機器に設けられた携帯機器の姿勢を検出するためのセンサにより検出された携帯機器の角度の変動幅又は変動周期、又は携帯機器を操作するための操作部に対する使用者の操作の頻度に基づいて、使用者が携帯機器を手で把持しているか否かを判定してもよい。これにより、使用者が携帯機器を手で把持しているか否かをより精確に判定することができる。   The gripping state determination unit includes a change in the position of the user imaged by a camera provided in the mobile device, and a change in the angle of the mobile device detected by a sensor for detecting the attitude of the mobile device provided in the mobile device. Whether or not the user is holding the portable device by hand may be determined based on the width or the fluctuation cycle or the frequency of the user's operation on the operation unit for operating the portable device. Thereby, it can be determined more accurately whether the user is holding the portable device by hand.

本発明の別の態様は、携帯機器である。この携帯機器は、携帯可能な携帯機器であって、携帯機器の使用者に機能を提供するアプリケーションを実行する実行部と、アプリケーションの画像を表示するための表示装置と、アプリケーションに対する使用者の指示を入力するための操作部と、所定の条件下において機能のうちの少なくとも一部を制限する機能制御部と、を備える。機能制御部は、携帯機器の使用者が車両の運転者であるか否かを判定する運転者判定部と、使用者が携帯機器を手で把持しているか否かを判定する把持状態判定部と、使用者が車両の運転者であり、かつ、使用者が携帯機器を手で把持していると判定された場合、携帯機器により提供される機能のうちの少なくとも一部を制限する制御部と、を備える。   Another embodiment of the present invention is a portable device. The portable device is a portable device, and includes an execution unit that executes an application that provides a function to the user of the portable device, a display device that displays an image of the application, and a user instruction for the application. And a function control unit that restricts at least a part of the functions under a predetermined condition. The function control unit includes a driver determination unit that determines whether or not the user of the mobile device is a vehicle driver, and a gripping state determination unit that determines whether or not the user is holding the mobile device by hand. And a control unit that restricts at least some of the functions provided by the portable device when it is determined that the user is a driver of the vehicle and the user is holding the portable device by hand. And comprising.

この態様によると、この態様によると、危険な使用状況であるか否かをより精確に判定することができるので、携帯機器を使用する際の安全性を高めつつ、使用者の利便性を向上させることができる。   According to this aspect, according to this aspect, it is possible to more accurately determine whether or not it is a dangerous use situation, thus improving the convenience for the user while improving the safety when using the mobile device. Can be made.

以上、本発明を実施例をもとに説明した。この実施例は例示であり、それらの各構成要素あるいは各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。   In the above, this invention was demonstrated based on the Example. This embodiment is an exemplification, and it will be understood by those skilled in the art that various modifications can be made to each of those constituent elements or combinations of processing processes, and such modifications are also within the scope of the present invention. .

実施例においては、携帯機器の使用者が、車両の一例として自動車を運転する場合を主に想定したが、自動二輪車などの車両や、自転車などの軽車両を運転する場合にも実施例の技術を適用可能である。   In the embodiment, it is mainly assumed that the user of the portable device drives an automobile as an example of the vehicle. However, the technique of the embodiment is also applicable to a case where a vehicle such as a motorcycle or a light vehicle such as a bicycle is driven. Is applicable.

10 携帯機器、11 カメラ、12 センサ、13 操作部、20 機能制御部、21 表示ON/OFF判定部、22 移動状態判定部、23 位置判定部、24 運転者判定部、25 把持状態判定部、26 運転モードUI制御部、27 アプリケーション起動部、28 運転モードUI開始判定部、29 運転モードUI終了判定部、30 運転者判定解除判定部、40 表示装置、41 記憶装置、50 制御部、51 アプリケーション実行部。   DESCRIPTION OF SYMBOLS 10 Mobile device, 11 Camera, 12 Sensor, 13 Operation part, 20 Function control part, 21 Display ON / OFF determination part, 22 Movement state determination part, 23 Position determination part, 24 Driver determination part, 25 Grasping state determination part, 26 operation mode UI control unit, 27 application activation unit, 28 operation mode UI start determination unit, 29 operation mode UI end determination unit, 30 driver determination release determination unit, 40 display device, 41 storage device, 50 control unit, 51 application Execution part.

Claims (5)

コンピュータを、
携帯機器の使用者が車両の運転者であるか否かを判定する運転者判定部、
前記使用者が前記携帯機器を手で把持しているか否かを判定する把持状態判定部、
前記使用者が車両の運転者であり、かつ、前記使用者が前記携帯機器を手で把持していると判定された場合、前記携帯機器により提供される機能のうちの少なくとも一部を制限する制御部、
として機能させるための制御プログラム。
Computer
A driver determination unit that determines whether the user of the mobile device is a driver of the vehicle;
A gripping state determination unit for determining whether or not the user is gripping the portable device by hand,
When it is determined that the user is a vehicle driver and the user is holding the portable device by hand, at least a part of the functions provided by the portable device is restricted. Control unit,
Control program to function as.
前記制御部は、前記携帯機器が使用者に提供するユーザインタフェースを、前記携帯機器により実行される機能のうちの少なくとも一部が制限されたユーザインタフェースに切り替えることを特徴とする請求項1に記載の制御プログラム。   The said control part switches the user interface which the said portable apparatus provides to a user to the user interface with which at least one part of the function performed by the said portable apparatus was restrict | limited. Control program. 前記運転者判定部は、前記携帯機器に設けられたカメラにより撮像された使用者の画像を取得し、前記画像を解析することにより使用者の視線の方向を検出し、検出された視線の方向に基づいて、前記携帯機器の使用者が車両の運転者であるか否かを判定することを特徴とする請求項1又は2に記載の制御プログラム。   The driver determination unit acquires a user image captured by a camera provided in the portable device, detects the user's line of sight by analyzing the image, and detects the detected line of sight 3. The control program according to claim 1, wherein it is determined whether or not a user of the portable device is a driver of a vehicle based on the above. 前記把持状態判定部は、前記携帯機器に設けられたカメラにより撮像された使用者の位置の変動、前記携帯機器に設けられた前記携帯機器の姿勢を検出するためのセンサにより検出された前記携帯機器の角度の変動幅又は変動周期、又は前記携帯機器を操作するための操作部に対する使用者の操作の頻度に基づいて、前記使用者が前記携帯機器を手で把持しているか否かを判定することを特徴とする請求項1から3のいずれかに記載の制御プログラム。   The gripping state determination unit is configured to detect the change in the position of a user imaged by a camera provided in the portable device and the portable device detected by a sensor for detecting the posture of the portable device provided in the portable device. It is determined whether or not the user is holding the mobile device by hand based on the fluctuation range or cycle of the angle of the device or the frequency of the user's operation on the operation unit for operating the mobile device. The control program according to any one of claims 1 to 3, wherein: 携帯可能な携帯機器であって、
前記携帯機器の使用者に機能を提供するアプリケーションを実行する実行部と、
前記アプリケーションの画像を表示するための表示装置と、
前記アプリケーションに対する使用者の指示を入力するための操作部と、
所定の条件下において前記機能のうちの少なくとも一部を制限する機能制御部と、
を備え、
前記機能制御部は、
携帯機器の使用者が車両の運転者であるか否かを判定する運転者判定部と、
前記使用者が前記携帯機器を手で把持しているか否かを判定する把持状態判定部と、
前記使用者が車両の運転者であり、かつ、前記使用者が前記携帯機器を手で把持していると判定された場合、前記携帯機器により提供される機能のうちの少なくとも一部を制限する制御部と、
を備えることを特徴とする携帯機器。
A portable portable device,
An execution unit that executes an application that provides a function to a user of the mobile device;
A display device for displaying an image of the application;
An operation unit for inputting a user instruction for the application;
A function control unit that restricts at least a part of the functions under a predetermined condition;
With
The function controller is
A driver determination unit that determines whether the user of the mobile device is a driver of the vehicle;
A gripping state determination unit that determines whether or not the user is gripping the portable device by hand;
When it is determined that the user is a vehicle driver and the user is holding the portable device by hand, at least a part of the functions provided by the portable device is restricted. A control unit;
A portable device comprising:
JP2017062821A 2017-03-28 2017-03-28 Control programs and mobile devices Active JP6846707B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017062821A JP6846707B2 (en) 2017-03-28 2017-03-28 Control programs and mobile devices

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017062821A JP6846707B2 (en) 2017-03-28 2017-03-28 Control programs and mobile devices

Publications (2)

Publication Number Publication Date
JP2018166268A true JP2018166268A (en) 2018-10-25
JP6846707B2 JP6846707B2 (en) 2021-03-24

Family

ID=63923011

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017062821A Active JP6846707B2 (en) 2017-03-28 2017-03-28 Control programs and mobile devices

Country Status (1)

Country Link
JP (1) JP6846707B2 (en)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003160002A (en) * 2001-11-27 2003-06-03 Nec Corp On-vehicle device, portable telephone device with calling suppressing function, and calling suppressing method for portable telephone
JP2010081319A (en) * 2008-09-26 2010-04-08 Kyocera Corp Portable electronic device
JP2010130649A (en) * 2008-12-01 2010-06-10 Nec Saitama Ltd Portable communication terminal device, unreceived incoming call notice method and program
JP2011087140A (en) * 2009-10-15 2011-04-28 Mitsubishi Electric Corp Remote control system, and remote control apparatus
JP2011172195A (en) * 2010-02-22 2011-09-01 Fujitsu Ltd Onboard machine, portable device, and control program
JP2014106573A (en) * 2012-11-26 2014-06-09 Denso Corp Potable terminal control device
WO2014185009A1 (en) * 2013-05-15 2014-11-20 旭化成株式会社 Offset estimation device, method, and program
WO2015163475A1 (en) * 2014-04-25 2015-10-29 京セラ株式会社 Portable electronic device, control method and program
JP2015220638A (en) * 2014-05-19 2015-12-07 オリンパス株式会社 Imaging display device and imaging display method
JP2016032221A (en) * 2014-07-29 2016-03-07 Kddi株式会社 Mobile terminal capable of limiting notification in accordance with user situation, system, and notification control method
US20160094707A1 (en) * 2014-09-26 2016-03-31 Airwatch Llc Restrictions on mobile device usage when driving a vehicle

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003160002A (en) * 2001-11-27 2003-06-03 Nec Corp On-vehicle device, portable telephone device with calling suppressing function, and calling suppressing method for portable telephone
JP2010081319A (en) * 2008-09-26 2010-04-08 Kyocera Corp Portable electronic device
JP2010130649A (en) * 2008-12-01 2010-06-10 Nec Saitama Ltd Portable communication terminal device, unreceived incoming call notice method and program
JP2011087140A (en) * 2009-10-15 2011-04-28 Mitsubishi Electric Corp Remote control system, and remote control apparatus
JP2011172195A (en) * 2010-02-22 2011-09-01 Fujitsu Ltd Onboard machine, portable device, and control program
JP2014106573A (en) * 2012-11-26 2014-06-09 Denso Corp Potable terminal control device
WO2014185009A1 (en) * 2013-05-15 2014-11-20 旭化成株式会社 Offset estimation device, method, and program
WO2015163475A1 (en) * 2014-04-25 2015-10-29 京セラ株式会社 Portable electronic device, control method and program
JP2015220638A (en) * 2014-05-19 2015-12-07 オリンパス株式会社 Imaging display device and imaging display method
JP2016032221A (en) * 2014-07-29 2016-03-07 Kddi株式会社 Mobile terminal capable of limiting notification in accordance with user situation, system, and notification control method
US20160094707A1 (en) * 2014-09-26 2016-03-31 Airwatch Llc Restrictions on mobile device usage when driving a vehicle

Also Published As

Publication number Publication date
JP6846707B2 (en) 2021-03-24

Similar Documents

Publication Publication Date Title
JP6682574B2 (en) Method of using a communication terminal in a motor vehicle with an autopilot operating and motor vehicle
JP5018926B2 (en) Driving assistance device and program
JP5905691B2 (en) Vehicle operation input device
EP3521124A1 (en) Vehicle-mounted device, control method, and program
JP2018188028A (en) Driver monitoring device and driver monitoring method
JP2018163112A (en) Automatic parking control method and automatic parking control device and program using the same
WO2018084273A1 (en) Portable electronic device equipped with accident prevention countermeasure function
JP4848997B2 (en) Incorrect operation prevention device and operation error prevention method for in-vehicle equipment
JP2014149640A (en) Gesture operation device and gesture operation program
JP2006205938A (en) On-vehicle display device
WO2014020889A1 (en) Operation control device and operation control program
JP2021502918A (en) How to control the vehicle parking process
JP6612424B2 (en) Portable terminal, portable terminal operation control system, and portable terminal control method
US20190202291A1 (en) Vehicle operation system and non-transitory tangible computer readable storage medium
JP4875002B2 (en) Direction indicator control device
JP6846707B2 (en) Control programs and mobile devices
JP6816915B2 (en) Information processing device
US20200384929A1 (en) On-vehicle display control system and display control method
US20210053440A1 (en) Operation control device, operation control method, and storage medium
JP6390380B2 (en) Display operation device
JP6252729B2 (en) Vehicle input support device
JP4962387B2 (en) Pointer display / movement device and program for pointer display / movement device
KR20130076214A (en) Device for driving vehicle using pointing jesture of driver and method thereof
JP3948017B2 (en) Route guidance device, route guidance method, and route guidance program
CN114312817B (en) Vehicle driving right switching method, device, equipment and medium

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20180417

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200131

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201006

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201130

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210209

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210216

R151 Written notification of patent or utility model registration

Ref document number: 6846707

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

SZ03 Written request for cancellation of trust registration

Free format text: JAPANESE INTERMEDIATE CODE: R313Z03