JP2014241553A - Information terminal device, automatic adjustment method, and automatic adjustment program - Google Patents

Information terminal device, automatic adjustment method, and automatic adjustment program Download PDF

Info

Publication number
JP2014241553A
JP2014241553A JP2013124012A JP2013124012A JP2014241553A JP 2014241553 A JP2014241553 A JP 2014241553A JP 2013124012 A JP2013124012 A JP 2013124012A JP 2013124012 A JP2013124012 A JP 2013124012A JP 2014241553 A JP2014241553 A JP 2014241553A
Authority
JP
Japan
Prior art keywords
unit
user
height
distance
terminal device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013124012A
Other languages
Japanese (ja)
Other versions
JP5993349B2 (en
Inventor
正 大久保
Tadashi Okubo
正 大久保
哲彦 児平
Tetsuhiko Kodaira
哲彦 児平
翔 西田
Sho Nishida
翔 西田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
PFU Ltd
Original Assignee
PFU Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by PFU Ltd filed Critical PFU Ltd
Priority to JP2013124012A priority Critical patent/JP5993349B2/en
Publication of JP2014241553A publication Critical patent/JP2014241553A/en
Application granted granted Critical
Publication of JP5993349B2 publication Critical patent/JP5993349B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an information terminal device capable of improving operability for any individual user.SOLUTION: An information terminal device 1 comprises: an operation display part 4 installed with a predetermined inclination θ1; a lifting unit 5 which changes the height position H1 of the operation display part 4; a camera 8 which is installed at the operation display part 4 to photograph a user at a position in front of the operation display part 4; a distance sensor 9 which acquires distance information L1 on the distance between the user and the information terminal device 1; and a controller 10 which estimates the height of the user on the basis of the distance information L1 acquired by the distance sensor 9, the tilt angle of the camera 8 derived from the inclination θ1 of the operation display part 4, and information A1 on a user face position within a camera image photographed with the camera 8, controls the lifting unit 5 in accordance with the estimated height, and changes the height position H1 of the operation display part 4.

Description

本発明は、情報端末装置、自動調整方法及び自動調整プログラムに関する。   The present invention relates to an information terminal device, an automatic adjustment method, and an automatic adjustment program.

近年、カメラ画像より人の顔を認識し、この顔認識を利用した、カメラのピント調整に使用する、笑顔を検知してシャッターを切る、テレビの向きを変える、操作パネルの角度を調整する、などの機能が家電製品を中心に採用されている（例えば特許文献１を参照）。   In recent years, human faces are recognized from camera images, and this face recognition is used to adjust the focus of the camera. When a smile is detected, the shutter is released, the TV is turned, the angle of the operation panel is adjusted, Such functions are employed mainly for home appliances (see, for example, Patent Document 1).

特開２０１０−１４９４１４号公報JP 2010-149414 A

ところで、近年、公共機関や交通機関、店舗などにおいて、不特定多数の人が、タッチパネル操作などのマンマシンインタフェースを通じて、必要な情報にアクセスしたり、さまざまなサービスを利用するための情報端末装置が多く利用されている。このような情報端末装置では、操作パネルの高さや角度などの各種寸法は一般ユーザが問題なく操作できる寸法となっている。しかし、例えば車椅子のユーザが利用する場合には、ユーザにとって操作パネルの位置が高すぎたり、角度が寝すぎて操作しづらいなど、一般ユーザに合わせた寸法では、ユーザによっては操作性が悪くなる場合があった。   By the way, in recent years, in public institutions, transportation facilities, stores, etc., there are information terminal devices that allow an unspecified number of people to access necessary information and use various services through a man-machine interface such as touch panel operation. Many are used. In such an information terminal device, various dimensions such as the height and angle of the operation panel are dimensions that can be operated by general users without problems. However, for example, when used by a wheelchair user, the size of the operation panel is too high for the user or the angle is too sluggish to be operated, so that the operability may deteriorate depending on the user. There was a case.

このような問題の解決策として、カメラ画像の顔認識を利用して操作パネルの位置を調整する手法が考えられるが、カメラ画像に基づく手法では、ユーザに応じて適切な操作位置を提供し、個々のユーザによらず操作性を良好とする点で改善の余地があった。   As a solution to such a problem, a method of adjusting the position of the operation panel using face recognition of the camera image can be considered, but the method based on the camera image provides an appropriate operation position according to the user, There was room for improvement in terms of improving operability regardless of individual users.

本発明は、上記に鑑みてなされたものであって、個々のユーザによらず操作性を良好にできる情報端末装置を提供することを目的とする。   The present invention has been made in view of the above, and an object of the present invention is to provide an information terminal device capable of improving operability regardless of individual users.

上記課題を解決するために、本発明に係る情報端末装置は、所定の傾斜角で設置される操作部と、前記操作部の高さ位置を変更する高さ位置変更部と、前記操作部に設置され、前記操作部の前方に位置するユーザを撮像する撮像部と、前記ユーザと当該情報端末装置との間の距離に関する距離情報を取得する距離情報取得部と、前記距離情報取得部により取得される前記距離情報、前記操作部の前記傾斜角から導出される前記撮像部のチルト角、及び前記撮像部により撮像される画像内における前記ユーザの顔位置情報に基づいて、前記ユーザの身長を推定し、前記推定された身長に応じて、前記高さ位置変更部を制御して前記操作部の前記高さ位置を変更する制御部と、を備える。   In order to solve the above problems, an information terminal device according to the present invention includes an operation unit installed at a predetermined inclination angle, a height position change unit that changes a height position of the operation unit, and the operation unit. Acquired by an imaging unit that is installed and images a user located in front of the operation unit, a distance information acquisition unit that acquires distance information regarding a distance between the user and the information terminal device, and the distance information acquisition unit Based on the distance information, the tilt angle of the imaging unit derived from the tilt angle of the operation unit, and the face position information of the user in the image captured by the imaging unit. And a control unit that controls the height position changing unit to change the height position of the operation unit according to the estimated height.

本発明によれば、ユーザの身長を精度良く推定でき、この精度良く推定した身長に基づいて操作部の高さ位置をユーザの身長に応じた適切な位置に調整することができ、この結果、個々のユーザによらず操作性を良好にできる。   According to the present invention, the user's height can be accurately estimated, and the height position of the operation unit can be adjusted to an appropriate position according to the user's height based on the accurately estimated height. The operability can be improved regardless of individual users.

図１は、本発明の第一実施形態に係る情報端末装置のハードウェア構成図である。FIG. 1 is a hardware configuration diagram of the information terminal device according to the first embodiment of the present invention. 図２は、図１の情報端末装置の操作表示部の位置の一例を示す斜視図である。FIG. 2 is a perspective view showing an example of the position of the operation display unit of the information terminal device of FIG. 図３は、図１中のチルトユニットの構成の詳細を示す背面斜視図である。FIG. 3 is a rear perspective view showing details of the configuration of the tilt unit in FIG. 図４は、図１の情報端末装置の機能ブロック図である。FIG. 4 is a functional block diagram of the information terminal device of FIG. 図５は、本発明の第一実施形態に係る情報端末装置による操作表示部の位置の自動調整処理を示すフローチャートである。FIG. 5 is a flowchart showing an automatic adjustment process of the position of the operation display unit by the information terminal device according to the first embodiment of the present invention. 図６は、図５のフローチャートのステップＳ１１０における身長推定に用いる各パラメータを説明する模式図である。FIG. 6 is a schematic diagram illustrating parameters used for height estimation in step S110 of the flowchart of FIG. 図７は、図５のフローチャートのステップＳ１１０における身長推定に用いる各パラメータを説明する模式図である。FIG. 7 is a schematic diagram illustrating parameters used for height estimation in step S110 of the flowchart of FIG. 図８は、本発明の第二実施形態に係る情報端末装置の機能ブロック図である。FIG. 8 is a functional block diagram of an information terminal device according to the second embodiment of the present invention. 図９は、本発明の第二実施形態に係る情報端末装置による操作表示部の位置の自動調整処理を示すフローチャートである。FIG. 9 is a flowchart showing an automatic adjustment process of the position of the operation display unit by the information terminal device according to the second embodiment of the present invention. 図１０は、本発明の第三実施形態に係る情報端末装置の機能ブロック図である。FIG. 10 is a functional block diagram of an information terminal device according to the third embodiment of the present invention. 図１１は、本発明の第三実施形態に係る情報端末装置による操作表示部の位置の自動調整処理を示すフローチャートである。FIG. 11 is a flowchart showing an automatic adjustment process of the position of the operation display unit by the information terminal device according to the third embodiment of the present invention.

以下に、本発明に係る情報端末装置の実施形態を図面に基づいて説明する。なお、以下の図面において、同一または相当する部分には同一の参照番号を付し、その説明は繰り返さない。   Embodiments of an information terminal device according to the present invention will be described below with reference to the drawings. In the following drawings, the same or corresponding parts are denoted by the same reference numerals, and the description thereof will not be repeated.

［第一実施形態］
図１〜７を参照して第一実施形態を説明する。まず図１〜４を参照して、第一実施形態に係る情報端末装置１の構成を説明する。図１は、本発明の第一実施形態に係る情報端末装置のハードウェア構成図であり、図２は、図１の情報端末装置の操作表示部の位置の一例を示す斜視図であり、図３は、図１中のチルトユニットの構成の詳細を示す背面斜視図であり、図４は、図１の情報端末装置の機能ブロック図である。なお、以下の説明では、図１の上下方向、すなわち情報端末装置１を設置した状態の上下方向を「上下方向」として記載する。また、情報端末装置１を設置した状態の水平方向を「水平方向」として記載する。また、ユーザが情報端末装置１を操作するときに情報端末装置１から見てユーザが存在する方向を前方向、その反対方向を後方向とし、両者を纏めて「前後方向」と記載する。 [First embodiment]
The first embodiment will be described with reference to FIGS. First, with reference to FIGS. 1-4, the structure of the information terminal device 1 which concerns on 1st embodiment is demonstrated. FIG. 1 is a hardware configuration diagram of the information terminal device according to the first embodiment of the present invention, and FIG. 2 is a perspective view illustrating an example of a position of an operation display unit of the information terminal device of FIG. 3 is a rear perspective view showing details of the configuration of the tilt unit in FIG. 1, and FIG. 4 is a functional block diagram of the information terminal device in FIG. In the following description, the vertical direction in FIG. 1, that is, the vertical direction in a state where the information terminal device 1 is installed is described as “vertical direction”. Further, the horizontal direction in which the information terminal device 1 is installed is described as “horizontal direction”. In addition, when the user operates the information terminal device 1, the direction in which the user is present when viewed from the information terminal device 1 is referred to as a forward direction, and the opposite direction is referred to as a backward direction.

図１に示すように、情報端末装置１は、基部２、可動部３、操作表示部４（操作部）、昇降ユニット５（高さ位置変更部）、チルトユニット６（傾斜角変更部）、タッチパネル７、カメラ８（撮像部）、距離センサ９（距離情報取得部、距離計測部）、及び制御装置１０（制御部）を備える。   As shown in FIG. 1, the information terminal device 1 includes a base unit 2, a movable unit 3, an operation display unit 4 (operation unit), an elevating unit 5 (height position changing unit), a tilt unit 6 (tilt angle changing unit), A touch panel 7, a camera 8 (imaging unit), a distance sensor 9 (distance information acquisition unit, distance measurement unit), and a control device 10 (control unit) are provided.

基部２は、床面上に設置される。可動部３は、上方から基部２に連結され、上下方向に昇降移動可能に設置されている。昇降ユニット５は、可動部３の昇降移動の駆動源であり、図１では配置の一例として情報端末装置１の内部に配置されている。昇降ユニット５は、例えばモータ及びギヤトレーンを含み、ギヤトレーンを介してモータの駆動力を可動部３に昇降方向の推力として伝達することで可動部３を昇降させる。   The base 2 is installed on the floor surface. The movable portion 3 is connected to the base portion 2 from above and is installed so as to be movable up and down in the vertical direction. The lifting / lowering unit 5 is a driving source for the lifting / lowering movement of the movable part 3, and is arranged inside the information terminal device 1 as an example of the arrangement in FIG. 1. The elevating unit 5 includes, for example, a motor and a gear train, and moves the movable unit 3 up and down by transmitting the driving force of the motor to the movable unit 3 as a thrust in the elevating direction via the gear train.

操作表示部４は、可動部３の上部に、前後方向に回動可能に連結されている。より詳細には、図３に示すように、操作表示部４は、下端の水平方向の回転支点１６にて可動部３の上部に連結され、回転支点１６を中心として回動可能とされている。   The operation display unit 4 is connected to the upper part of the movable unit 3 so as to be rotatable in the front-rear direction. More specifically, as shown in FIG. 3, the operation display unit 4 is connected to the upper portion of the movable unit 3 by a horizontal rotation fulcrum 16 at the lower end, and is rotatable about the rotation fulcrum 16. .

図１に戻り、操作表示部４の前面にはタッチパネル７が設けられており、情報端末装置１のユーザがタッチパネル７の画面に触れることで情報の入力操作や命令の選択操作を行なうことができるよう構成されている。また、タッチパネル７上に情報を表示してユーザに情報を提示することもできる。さらに、操作表示部４の前面には、タッチパネル７の上方中央にカメラ８が設置されており、操作表示部４及びタッチパネル７の前方を撮像できるよう構成されている。言い換えると、カメラ８は、情報端末装置１のユーザがタッチパネル７を操作可能な位置に存在する場合に、ユーザの顔を撮像できるよう配置されている。   Returning to FIG. 1, a touch panel 7 is provided on the front surface of the operation display unit 4, and a user of the information terminal device 1 can perform an information input operation and a command selection operation by touching the screen of the touch panel 7. It is configured as follows. In addition, information can be displayed on the touch panel 7 and presented to the user. Further, a camera 8 is installed on the front surface of the operation display unit 4 in the upper center of the touch panel 7 so that the front of the operation display unit 4 and the touch panel 7 can be imaged. In other words, the camera 8 is arranged so that the user's face can be imaged when the user of the information terminal device 1 is present at a position where the touch panel 7 can be operated.

チルトユニット６は、操作表示部４の回動の駆動源である。チルトユニット６は、例えば図３に示すように、リニアアクチュエータ６ａの一端を、水平方向に回動自在の回転ジョイント６ｂを介して操作表示部４の背面に連結し、他端を、回転ジョイント６ｃを介して可動部３の上面に連結する構成をとり、リニアアクチュエータ６ａの伸縮動作によって、操作表示部４の回動を行い、また、所定角度で保持することができる。すなわち、チルトユニット６は、操作表示部４の前後方向の傾きを任意の角度に調整できる。なお、チルトユニット６は、操作表示部４の回動を実現できればよく、リニアアクチュエータ６ａ以外の構成でもよい。   The tilt unit 6 is a drive source for turning the operation display unit 4. For example, as shown in FIG. 3, the tilt unit 6 has one end of a linear actuator 6a connected to the back surface of the operation display unit 4 via a rotary joint 6b that is rotatable in the horizontal direction, and the other end connected to the rotary joint 6c. The operation display unit 4 can be rotated and held at a predetermined angle by an expansion / contraction operation of the linear actuator 6a. That is, the tilt unit 6 can adjust the tilt of the operation display unit 4 in the front-rear direction to an arbitrary angle. The tilt unit 6 only needs to realize the rotation of the operation display unit 4, and may have a configuration other than the linear actuator 6a.

つまり、情報端末装置１は、昇降ユニット５及びチルトユニット６を駆動させることによって、操作表示部４の高さ位置Ｈ１と、水平面に対する傾斜角θ１とを（図６，７参照）、自在に変更することができる。図２は、情報端末装置１の操作表示部４の位置の一例として、可動部３が昇降移動の下限に位置し、操作表示部４の高さ位置Ｈ１が最小の状態であり、かつ、操作表示部４の傾斜角θ１が最大の状態（θ１＝９０°）を示している。   That is, the information terminal device 1 freely changes the height position H1 of the operation display unit 4 and the inclination angle θ1 with respect to the horizontal plane by driving the elevating unit 5 and the tilt unit 6 (see FIGS. 6 and 7). can do. FIG. 2 shows, as an example of the position of the operation display unit 4 of the information terminal device 1, the movable unit 3 is positioned at the lower limit of the up-and-down movement, the height position H1 of the operation display unit 4 is in the minimum state, and the operation This shows a state where the inclination angle θ1 of the display unit 4 is maximum (θ1 = 90 °).

距離センサ９は、可動部３の前方に設置され、情報端末装置１の前方に存在する利用者との間の水平距離Ｌ１（図６参照）を計測する。   The distance sensor 9 is installed in front of the movable part 3 and measures a horizontal distance L1 (see FIG. 6) between the user and the user existing in front of the information terminal device 1.

制御装置１０は、情報端末装置１の各部を制御するものである。制御装置１０は、図４に示すように、昇降ユニット５、チルトユニット６、タッチパネル７、カメラ８、距離センサ９と電気的に接続されている。制御装置１０は、タッチパネル７、カメラ８及び距離センサ９などから情報を受け取り、これらの情報に基づいて、昇降ユニット５及びチルトユニット６を駆動させたり、タッチパネル７に情報提示を行なう。   The control device 10 controls each part of the information terminal device 1. As shown in FIG. 4, the control device 10 is electrically connected to the lift unit 5, the tilt unit 6, the touch panel 7, the camera 8, and the distance sensor 9. The control device 10 receives information from the touch panel 7, the camera 8, the distance sensor 9, and the like, and drives the elevating unit 5 and the tilt unit 6 or presents information to the touch panel 7 based on these information.

制御装置１０は、物理的には、図１に示すように、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０ａ、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１０ｂ、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０ｃ、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ ａｎｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｏｍｏｒｙ）やＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）等の記憶装置１０ｄ、装置内外の各部との通信を行なうインタフェース１０ｅ、等のハードウェアを有するマイクロコンピュータである。後述する制御装置１０の各機能の全部または一部は、ＣＰＵ１０ａ、ＲＡＭ１０ｂ、ＲＯＭ１０ｃ等のハードウェア上に所定のアプリケーションプログラムを読み込ませることにより、ＣＰＵ１０ａの制御の元で情報端末装置１の各部を動作させると共に、ＲＡＭ１０ｂ、ＲＯＭ１０ｃ、記憶装置１０ｄにおけるデータの読み出し及び書き込みを行なうことで実現される。   As shown in FIG. 1, the control device 10 physically includes a central processing unit (CPU) 10 a, a random access memory (RAM) 10 b, a read only memory (ROM) 10 c, and an electrically erasable and programmable EEPROM (EEPROM). ) And HDD (Hard Disk Drive) and the like, and a microcomputer having hardware such as an interface 10e that communicates with each unit inside and outside the device. All or a part of each function of the control device 10 described later operates each part of the information terminal device 1 under the control of the CPU 10a by reading a predetermined application program on the hardware such as the CPU 10a, the RAM 10b, and the ROM 10c. In addition, it is realized by reading and writing data in the RAM 10b, the ROM 10c, and the storage device 10d.

なお、制御装置１０は、情報端末装置１に内蔵され、情報端末装置１と一体的に構成されてもよいし、例えばパーソナルコンピュータ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ：ＰＣ）など情報端末装置１と別体として構成され、情報端末装置１の外部から接続する構成としてもよい。   The control device 10 may be built in the information terminal device 1 and may be configured integrally with the information terminal device 1 or may be configured separately from the information terminal device 1 such as a personal computer (PC). The information terminal device 1 may be connected from the outside.

本実施形態の制御装置１０は、カメラ８及び距離センサ９から取得した情報、具体的には情報端末装置１とユーザとの間の水平距離Ｌ１、カメラ８のチルト角、カメラ８の撮像する画像内のユーザの顔位置情報に基づき、情報端末装置１の利用者の身長を推定する。そして、推定した身長に基づいて昇降ユニット５及びチルトユニット６を制御して、操作表示部４の高さ位置Ｈ１及び傾斜角θ１を利用者にとって操作しやすい位置に変更することができる。制御装置１０は、これらの機能に関して、図４に示すように、進入検知部１１、顔検出部１２、身長推定部１３、昇降ユニット制御部１４、及びチルトユニット制御部１５の各機能を実現するよう構成されている。   The control device 10 of the present embodiment is information acquired from the camera 8 and the distance sensor 9, specifically, the horizontal distance L1 between the information terminal device 1 and the user, the tilt angle of the camera 8, and the image captured by the camera 8. The height of the user of the information terminal device 1 is estimated based on the user's face position information. Then, the elevation unit 5 and the tilt unit 6 are controlled based on the estimated height, and the height position H1 and the inclination angle θ1 of the operation display unit 4 can be changed to positions that are easy for the user to operate. As shown in FIG. 4, the control device 10 realizes the functions of the approach detection unit 11, the face detection unit 12, the height estimation unit 13, the lifting unit control unit 14, and the tilt unit control unit 15 regarding these functions. It is configured as follows.

進入検知部１１は、距離センサ９により計測される、情報端末装置１の前方に存在するユーザとの水平距離Ｌ１に基づいて、情報端末装置１のユーザが、情報端末装置１の前方の所定領域に進入したことを検知する。   Based on the horizontal distance L1 measured by the distance sensor 9 and the user existing in front of the information terminal device 1, the entry detection unit 11 allows the user of the information terminal device 1 to perform a predetermined area in front of the information terminal device 1. Detect that you have entered.

顔検出部１２は、カメラ８が撮像した操作表示部４の前方の画像（以下では「カメラ画像」とも表記する）を解析して、カメラ画像中のユーザの顔を検出する。   The face detection unit 12 analyzes an image in front of the operation display unit 4 captured by the camera 8 (hereinafter also referred to as “camera image”), and detects a user's face in the camera image.

身長推定部１３は、距離センサ９により計測された情報端末装置１のユーザとの水平距離Ｌ１と、カメラ画像中のユーザの顔位置と、カメラ８のチルト角などの情報に基づいて、現在、情報端末装置１の前にいるユーザの身長を推定する。なお、身長推定の詳細については図６，７を参照して後述する。   Based on information such as the horizontal distance L1 from the user of the information terminal device 1 measured by the distance sensor 9, the face position of the user in the camera image, and the tilt angle of the camera 8, the height estimation unit 13 The height of the user in front of the information terminal device 1 is estimated. Details of the height estimation will be described later with reference to FIGS.

昇降ユニット制御部１４は、身長推定部１３により推定されたユーザの身長に応じて、操作表示部４の適切な高さ位置Ｈ１を設定し、この設定した高さ位置Ｈ１を実現すべく昇降ユニット４を制御する。   The elevating unit control unit 14 sets an appropriate height position H1 of the operation display unit 4 according to the height of the user estimated by the height estimating unit 13, and the elevating unit control unit 14 realizes the set height position H1. 4 is controlled.

チルトユニット制御部１５は、身長推定部１３により推定された利用者の身長に応じて、操作表示部４の適切な傾斜角θ１を設定し、この設定した傾斜角θ１を実現すべくチルトユニット６を制御する。また、チルトユニット制御部１５は、顔検出部１２によるユーザの顔検出処理を行なうときに、カメラ８が撮像するカメラ画像中にユーザの顔が入る方向にカメラ８が向くように、チルトユニット６の傾斜角θ１を制御して、カメラ８のチルト角を調整する。ここで、カメラ８のチルト角とは、水平方向を基準としてカメラ８の撮像方向を上下に回動させた角度である。   The tilt unit control unit 15 sets an appropriate inclination angle θ1 of the operation display unit 4 according to the height of the user estimated by the height estimation unit 13, and the tilt unit 6 to realize the set inclination angle θ1. To control. In addition, the tilt unit control unit 15 causes the tilt unit 6 so that the camera 8 faces in a direction in which the user's face enters a camera image captured by the camera 8 when the face detection unit 12 performs the user's face detection process. The tilt angle of the camera 8 is adjusted by controlling the tilt angle θ1. Here, the tilt angle of the camera 8 is an angle obtained by rotating the imaging direction of the camera 8 up and down with respect to the horizontal direction.

また、上記の制御装置１０のアプリケーションプログラム（進入検知部１１、顔検出部１２、身長推定部１３、昇降ユニット制御部１４、及びチルトユニット制御部１５の各機能。特に身長推定部１３による身長推定機能、並びに、昇降ユニット制御部１４及びチルトユニット制御部１５による位置変更機能）を、コンピュータ読み取り可能な記録媒体に格納してもよく、また、プログラム製品として構成することもできる。ここで、この「記録媒体」とは、メモリーカード、ＵＳＢメモリ、ＳＤカード、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤ、及び、Ｂｌｕ−ｒａｙ Ｄｉｓｃ（登録商標）等の任意の「可搬用の物理媒体」を含むものとする。また、アプリケーションプログラムは、情報端末装置１に対して任意のネットワークを介して接続されたアプリケーションプログラムサーバに記憶されていてもよく、必要に応じてその全部または一部をダウンロードすることも可能である。   The application program of the control device 10 (the functions of the entry detection unit 11, the face detection unit 12, the height estimation unit 13, the lifting unit control unit 14, and the tilt unit control unit 15. In particular, the height estimation by the height estimation unit 13 is performed. The function and the position changing function by the lifting unit control unit 14 and the tilt unit control unit 15) may be stored in a computer-readable recording medium, or may be configured as a program product. Here, the “recording medium” means a memory card, USB memory, SD card, flexible disk, magneto-optical disk, ROM, EPROM, EEPROM, CD-ROM, MO, DVD, and Blu-ray Disc (registered trademark). ) And any other “portable physical medium”. The application program may be stored in an application program server connected to the information terminal device 1 via an arbitrary network, and may be downloaded in whole or in part as necessary. .

次に図５〜７を参照して、第一実施形態に係る情報端末装置１の動作を説明する。図５は、本発明の第一実施形態に係る情報端末装置１による操作表示部４の位置の自動調整処理を示すフローチャートであり、図６及び図７は、図５のフローチャートのステップＳ１１０における身長計算に用いる各パラメータを説明する模式図である。   Next, with reference to FIGS. 5-7, operation | movement of the information terminal device 1 which concerns on 1st embodiment is demonstrated. FIG. 5 is a flowchart showing an automatic adjustment process of the position of the operation display unit 4 by the information terminal device 1 according to the first embodiment of the present invention, and FIGS. 6 and 7 are heights in step S110 of the flowchart of FIG. It is a schematic diagram explaining each parameter used for calculation.

図５に示すフローチャートの処理は、情報端末装置１の電源が入るごとに、情報端末装置１の制御装置１０により実施され、また、情報端末装置１の電源が落とされると終了する。   The processing of the flowchart shown in FIG. 5 is performed by the control device 10 of the information terminal device 1 every time the information terminal device 1 is turned on, and ends when the information terminal device 1 is turned off.

まず、情報端末装置１の電源がＯＮ状態となると（ステップＳ１０１）、昇降ユニット制御部１４及びチルトユニット制御部１５により、昇降ユニット５及びチルトユニット６が駆動され、操作表示部４の高さ位置Ｈ１及び傾斜角θ１が装置初期位置に移動される（ステップＳ１０２）。なお、本実施形態では、操作表示部４の高さ位置Ｈ１及び傾斜角θ１は、ユーザの身長を高、中、低の３つのレベルに区分し、各身長レベルに応じてそれぞれ３段階が設定されている。そして、装置初期位置として、中身長の場合の高さ位置（例えば昇降範囲の中間点）及び傾斜角（例えば７０°）が設定されている。   First, when the power of the information terminal device 1 is turned on (step S101), the elevation unit 5 and the tilt unit 6 are driven by the elevation unit controller 14 and the tilt unit controller 15, and the height position of the operation display unit 4 is set. H1 and the inclination angle θ1 are moved to the initial position of the apparatus (step S102). In the present embodiment, the height position H1 and the inclination angle θ1 of the operation display unit 4 divide the user's height into three levels of high, medium, and low, and three levels are set according to each height level. Has been. And the height position (for example, the middle point of the raising / lowering range) and inclination angle (for example, 70 degrees) in the case of a body height are set as an apparatus initial position.

なお、本実施形態では、低身長レベルとは、主に車椅子ユーザが車椅子を使用する際の座高を想定しており、中身長レベルとは標準的な身長を想定している。情報端末装置１の設置環境が、例えば病院など車椅子ユーザの利用頻度の高い環境である場合には、装置初期位置として低身長の場合の高さ位置を設定してもよい。また、情報端末装置１を複数台設置する場合には、各装置の装置初期位置は、中身長及び低身長の高さ位置を含むよう設定することもできる。   In the present embodiment, the low stature level mainly assumes a sitting height when a wheelchair user uses the wheelchair, and the medium height level assumes a standard height. When the installation environment of the information terminal device 1 is an environment that is frequently used by wheelchair users, such as a hospital, for example, the height position in the case of a short stature may be set as the device initial position. When a plurality of information terminal devices 1 are installed, the device initial position of each device can be set to include the height positions of the medium height and the short height.

次に、進入検知部１１により、距離センサ９を用いたユーザの監視動作（図５には「距離センサ監視」と表記）が開始される（ステップＳ１０３）。この監視動作において、進入検知部１１は、距離センサ９の検出情報に基づいて、情報端末装置１の前方にいるユーザとの水平距離Ｌ１を算出し、この水平距離Ｌ１が所定値以下であるか否かを監視する。そして、ユーザとの水平距離Ｌ１が所定値以下となるとき、進入検知部１１により、ユーザが操作領域に進入したことが検知される（ステップＳ１０４）。   Next, the approach detection unit 11 starts a user monitoring operation using the distance sensor 9 (indicated as “distance sensor monitoring” in FIG. 5) (step S103). In this monitoring operation, the approach detection unit 11 calculates the horizontal distance L1 with the user in front of the information terminal device 1 based on the detection information of the distance sensor 9, and is this horizontal distance L1 less than or equal to a predetermined value? Monitor whether or not. When the horizontal distance L1 with the user is equal to or less than the predetermined value, the entry detection unit 11 detects that the user has entered the operation area (step S104).

ユーザが操作領域に進入したことが検知されると、上位アプリより自動調整処理の開始が指示され（ステップＳ１０５）、自動調整処理が開始される。自動調整処理とは、操作領域内に存在するユーザの身長に応じて、操作表示部４の高さ位置Ｈ１及び傾斜角θ１をユーザに最適なものに自動的に変更する処理である。自動調整処理では、まず顔検出部１２によりカメラ８が起動され（ステップＳ１０６）、カメラ８が撮像した操作表示部４の前方のカメラ画像が取得され、カメラ画像が解析されて、カメラ画像中にユーザの顔があるか否かが判定される（ステップＳ１０７）。   When it is detected that the user has entered the operation area, the host application instructs the start of the automatic adjustment process (step S105), and the automatic adjustment process is started. The automatic adjustment process is a process of automatically changing the height position H1 and the inclination angle θ1 of the operation display unit 4 to the optimum one for the user according to the height of the user existing in the operation area. In the automatic adjustment process, the camera 8 is first activated by the face detection unit 12 (step S106), the camera image in front of the operation display unit 4 captured by the camera 8 is acquired, the camera image is analyzed, and the camera image is included in the camera image. It is determined whether or not there is a user's face (step S107).

カメラ画像中にユーザの顔が無い場合（ステップＳ１０７のＮｏ）には、チルトユニット制御部１５によりチルトユニット６が駆動されて、カメラ８のチルト角を規定量だけ上または下に振る（ステップＳ１０８）ように、操作表示部４の傾斜角θ１が変更される。チルト角を振る方向は、例えば、カメラ画像中にユーザの体が有る場合には上方向に、無い場合には下方向とするなど、カメラ画像中のユーザの配置に応じて決めてもよいし、ランダムでもよい。なお、本実施形態では、カメラ８は操作表示部４の前面に設置されているので、カメラ８のチルト角は操作表示部４の傾斜角θ１と連動するものである。これにより、カメラ８の撮像方向が微調整され、ステップＳ１０７に戻り再度カメラ画像が解析される。ステップＳ１０７〜Ｓ１０８の処理は、カメラ画像中に顔が検出されるまで繰り返される。   If there is no user face in the camera image (No in step S107), the tilt unit controller 15 drives the tilt unit 6 to swing the tilt angle of the camera 8 up or down by a specified amount (step S108). ), The inclination angle θ1 of the operation display unit 4 is changed. The direction in which the tilt angle is shaken may be determined according to the user's arrangement in the camera image, for example, upward when the user's body is in the camera image, or downward when there is no user's body. It may be random. In the present embodiment, since the camera 8 is installed in front of the operation display unit 4, the tilt angle of the camera 8 is interlocked with the tilt angle θ 1 of the operation display unit 4. Thereby, the imaging direction of the camera 8 is finely adjusted, and the process returns to step S107 and the camera image is analyzed again. The processes in steps S107 to S108 are repeated until a face is detected in the camera image.

カメラ画像中に顔がある場合（ステップＳ１０７のＹｅｓ）には、カメラ８が停止され（ステップＳ１０９）、顔検出部１２により、このときの操作表示部４の傾斜角θ１と、カメラ画像内の顔の上下位置の情報（顔位置情報）が取得され、身長推定部１３に出力される。   When there is a face in the camera image (Yes in step S107), the camera 8 is stopped (step S109), and the face detection unit 12 causes the tilt angle θ1 of the operation display unit 4 at this time and Information on the vertical position of the face (face position information) is acquired and output to the height estimation unit 13.

つまり、本実施形態では、カメラ８は、ステップＳ１０６〜Ｓ１０９の間のみで起動される。言い換えると、カメラ８は、ユーザが情報端末装置１の前方の操作領域に入ることを開始トリガとして、撮像したカメラ画像中にユーザの顔がある状態となるまでの間のみ起動される。これにより、上位アプリの動作中に並行してカメラ８が作動することを回避できるので、ＣＰＵの負荷を低減できる。   That is, in this embodiment, the camera 8 is activated only during steps S106 to S109. In other words, the camera 8 is activated only until the user's face is in the captured camera image with a start trigger when the user enters the operation area in front of the information terminal device 1. As a result, it is possible to avoid the camera 8 from operating in parallel during the operation of the higher-level application, so that the load on the CPU can be reduced.

次に、身長推定部１３により、ユーザまでの水平距離Ｌ１と、カメラ８のチルト角、カメラ画像中のユーザの顔位置から、ユーザの身長が推定される（ステップＳ１１０：身長推定ステップ）。   Next, the height of the user is estimated from the horizontal distance L1 to the user, the tilt angle of the camera 8, and the user's face position in the camera image (step S110: height estimation step).

ここで、図６，７を参照して、ステップＳ１１０で身長推定部１３が行なうユーザの身長推定手法の一例を説明する。まず、図６，７に示した各パラメータを下記のとおり定義し、それぞれの取得／導出方法も示す。
・Ｌ１：情報端末装置１の前面からユーザまでの水平距離（距離センサ９で計測）
・Ｌ２：情報端末装置１の前面からカメラ８までの水平距離（Ｌ２＝Ｌ３×Ｃｏｓ(θ１））
・Ｌ３：操作表示部４下端からカメラ画像の中心線までの操作表示部４の前面上の最短距離（固定値）
・Ｈ１：床から操作表示部４の下端までの高さ（昇降ユニット５からの情報により算出）
・Ｈ２：操作表示部４の下端からカメラ画像の中心線までの鉛直方向高さ（Ｈ２＝Ｌ３×Ｓｉｎ(θ１））
・θ１：操作表示部４の傾斜角度（チルト角）（チルトユニット６（リニアアクチュエータ６ａ）からの情報より算出）
・θ２：操作表示部４の前面からカメラ８中心線までの角度（カメラ８の取り付け位置で決まる固定値）
・θ３：カメラ８の画角α内でのユーザの顔中心までの角度（θ３＝α×（Ａ１／Ａ２））
・Ａ１：カメラ画像の下端からユーザの顔中心までの長さ（カメラ画像から算出）
・Ａ２：カメラ画像の縦方向長さ（カメラ画像から算出）
・α：カメラ８の画角（カメラ８のレンズの性能で決まる固定値）
・Ｂ：顔中心から頭の上までの距離（固定値または顔の大きさより算出） Here, an example of the user's height estimation method performed by the height estimation unit 13 in step S110 will be described with reference to FIGS. First, each parameter shown in FIGS. 6 and 7 is defined as follows, and each acquisition / derivation method is also shown.
L1: Horizontal distance from the front of the information terminal device 1 to the user (measured by the distance sensor 9)
L2: horizontal distance from the front surface of the information terminal device 1 to the camera 8 (L2 = L3 × Cos (θ1))
L3: The shortest distance on the front surface of the operation display unit 4 from the lower end of the operation display unit 4 to the center line of the camera image (fixed value)
H1: Height from the floor to the lower end of the operation display unit 4 (calculated based on information from the lifting unit 5)
H2: Vertical height from the lower end of the operation display unit 4 to the center line of the camera image (H2 = L3 × Sin (θ1))
Θ1: Tilt angle (tilt angle) of the operation display unit 4 (calculated from information from the tilt unit 6 (linear actuator 6a))
Θ2: angle from the front surface of the operation display unit 4 to the center line of the camera 8 (a fixed value determined by the mounting position of the camera 8)
Θ3: angle to the user's face center within the angle of view α of the camera 8 (θ3 = α × (A1 / A2))
A1: Length from the bottom of the camera image to the user's face center (calculated from the camera image)
A2: Length of the camera image in the vertical direction (calculated from the camera image)
Α: Angle of view of the camera 8 (fixed value determined by the performance of the lens of the camera 8)
B: Distance from the center of the face to the top of the head (calculated from a fixed value or face size)

次に、上記のパラメータを用いた身長の導出過程を説明する。図７に示す水平線から顔中心までの角度θ４は、以下の（１）式で算出される。
θ４＝θ２−（α／２）＋θ３−θ１ ・・・（１） Next, the process of deriving height using the above parameters will be described. The angle θ4 from the horizontal line to the face center shown in FIG. 7 is calculated by the following equation (1).
θ4 = θ2- (α / 2) + θ3-θ1 (1)

このθ４は、図７に示す水平線から顔中心までの高さＸと、Ｌ１＋Ｌ２を用いて以下の（２）式で表すことができる。
ｔａｎ（θ４）＝Ｘ／（Ｌ１＋Ｌ２） ・・・（２）
上記（２）式より、Ｘは以下の（３）式で表すことができる。
Ｘ＝（Ｌ１＋Ｌ２）×ｔａｎ（θ４） ・・・（３） This θ4 can be expressed by the following equation (2) using the height X from the horizontal line to the face center shown in FIG. 7 and L1 + L2.
tan (θ4) = X / (L1 + L2) (2)
From the above formula (2), X can be expressed by the following formula (3).
X = (L1 + L2) × tan (θ4) (3)

ユーザの身長は以下の（４）式で表すことができる。
身長＝Ｈ１＋Ｈ２＋Ｘ＋Ｂ ・・・（４） The height of the user can be expressed by the following equation (4).
Height = H1 + H2 + X + B (4)

ここで、上記（４）式中のＨ１，Ｈ２，Ｂは、上述のとおり既知の値から導出できる。また、Ｘは、上記（１）式及び（３）式と、既知のＬ１，Ｌ２，θ１，θ２，θ３とを用いて導出することができる。したがって、ユーザの身長は図６，７に示すパラメータを用いて算出することができる。なお、上記のパラメータのうち、ユーザまでの距離を表すパラメータはＬ１であり、カメラ８のチルト角を表すパラメータはθ１−θ２であり、カメラ画像中のユーザの顔位置を表すパラメータはＡ１である。   Here, H1, H2, and B in the above equation (4) can be derived from known values as described above. X can be derived using the above equations (1) and (3) and known L1, L2, θ1, θ2, and θ3. Therefore, the height of the user can be calculated using the parameters shown in FIGS. Of the above parameters, the parameter representing the distance to the user is L1, the parameter representing the tilt angle of the camera 8 is θ1-θ2, and the parameter representing the user's face position in the camera image is A1. .

なお、身長推定部１３は、上記のような計算とは別の手法を用いてユーザの身長を推定する構成でもよい。例えば、ユーザとの間の水平距離Ｌ１、カメラ８のチルト角θ１−θ２、及びカメラ画像中のユーザの顔位置情報Ａ１と、ユーザの身長とを関連付けるテーブルを情報端末装置１が予め保持しておき、身長推定部１３が、水平距離、チルト角、顔位置に関する入力情報に基づいて、このテーブルを参照してユーザの身長を決定する手法でもよい。   The height estimation unit 13 may be configured to estimate the height of the user using a method different from the above calculation. For example, the information terminal device 1 holds in advance a table that associates the horizontal distance L1 with the user, the tilt angle θ1-θ2 of the camera 8, the user face position information A1 in the camera image, and the user's height. Alternatively, the height estimation unit 13 may determine the user's height by referring to this table based on the input information regarding the horizontal distance, the tilt angle, and the face position.

図５に戻り、ステップＳ１１０にて推定されたユーザの身長に応じて、昇降ユニット制御部１４及びチルトユニット制御部１５により、昇降ユニット５及びチルトユニット６が駆動され、操作表示部４の高さ位置Ｈ１及び傾斜角θ１がユーザに適切な位置に変更される（ステップＳ１１１：位置変更ステップ）。上記のとおり、本実施形態では、操作表示部４の高さ位置Ｈ１及び傾斜角θ１は、身長を高、中、低の３つのレベルに区分し、各身長レベルに応じてそれぞれ３段階が設定されているので、昇降ユニット制御部１４及びチルトユニット制御部１５は、ユーザの身長の推定値が該当する身長レベルの高さ位置及び傾斜角の値を選択し、操作表示部４がこの選択した高さ位置Ｈ１及び傾斜角θ１となるよう昇降ユニット５及びチルトユニット６を制御する。そして、操作表示部４の高さ位置Ｈ１及び傾斜角θ１が所望の位置に変更されると、操作表示部４の位置の自動調整処理が完了する（ステップＳ１１２）。   Returning to FIG. 5, the elevation unit 5 and the tilt unit 6 are driven by the elevation unit control unit 14 and the tilt unit control unit 15 according to the height of the user estimated in step S <b> 110, and the height of the operation display unit 4. The position H1 and the inclination angle θ1 are changed to positions appropriate for the user (step S111: position changing step). As described above, in this embodiment, the height position H1 and the inclination angle θ1 of the operation display unit 4 are divided into three levels of height, high, medium, and low, and three levels are set according to each height level. Therefore, the elevation unit control unit 14 and the tilt unit control unit 15 select the height position and the inclination angle value corresponding to the estimated height of the user, and the operation display unit 4 selects the selected value. The elevating unit 5 and the tilt unit 6 are controlled so as to be at the height position H1 and the inclination angle θ1. Then, when the height position H1 and the inclination angle θ1 of the operation display unit 4 are changed to desired positions, the automatic adjustment process of the position of the operation display unit 4 is completed (step S112).

その後、ユーザの身長に適合する操作表示部４の位置にて、操作表示部４のタッチパネル７を介して、上位アプリを利用するためのユーザ操作が実施される（ステップＳ１１３）。このユーザ操作が完了し、ユーザが情報端末装置１の前から離れると（ステップＳ１１４）、設定時間経過後に、昇降ユニット制御部１４及びチルトユニット制御部１５により、操作表示部４の高さ位置Ｈ１及び傾斜角θ１が装置初期位置に戻され（ステップＳ１１５）、ステップＳ１０３に戻り再びユーザが情報端末装置１の前に来るまで進入検知部１１によるユーザの監視動作が継続される。   Thereafter, a user operation for using the upper application is performed via the touch panel 7 of the operation display unit 4 at the position of the operation display unit 4 that matches the height of the user (step S113). When this user operation is completed and the user leaves the front of the information terminal device 1 (step S114), the elevating unit control unit 14 and the tilt unit control unit 15 set the height position H1 of the operation display unit 4 after the set time has elapsed. Then, the inclination angle θ1 is returned to the initial position of the apparatus (step S115), the process returns to step S103, and the monitoring operation of the user by the approach detection unit 11 is continued until the user comes to the information terminal apparatus 1 again.

次に、第一実施形態に係る情報端末装置１の効果を説明する。   Next, effects of the information terminal device 1 according to the first embodiment will be described.

本実施形態の情報端末装置１は、所定の傾斜角θ１で設置される操作表示部４と、操作表示部４の高さ位置Ｈ１を変更する昇降ユニット５と、操作表示部４に設置され、操作表示部４の前方に位置するユーザを撮像するカメラ８と、ユーザと当該情報端末装置１との間の距離に関する距離情報（水平距離Ｌ１）を取得する距離センサ９と、距離センサ９により取得される水平距離Ｌ１、操作表示部４の傾斜角θ１から導出されるカメラ８のチルト角（θ１−θ２）、及びカメラ８により撮像されるカメラ画像内におけるユーザの顔位置情報Ａ１に基づいて、ユーザの身長を推定し、この推定された身長に応じて、昇降ユニット５を制御して操作表示部４の高さ位置Ｈ１を変更する制御装置１０と、を備える。   The information terminal device 1 of this embodiment is installed in the operation display unit 4 installed at a predetermined inclination angle θ1, the elevating unit 5 that changes the height position H1 of the operation display unit 4, and the operation display unit 4. Acquired by the distance sensor 9 that acquires the distance information (horizontal distance L1) relating to the distance between the user 8 and the information terminal device 1, the camera 8 that captures the user located in front of the operation display unit 4, and the distance sensor 9. Based on the horizontal distance L1, the tilt angle (θ1-θ2) of the camera 8 derived from the tilt angle θ1 of the operation display unit 4, and the user face position information A1 in the camera image captured by the camera 8, A control device 10 that estimates the height of the user and controls the elevation unit 5 to change the height position H1 of the operation display unit 4 according to the estimated height.

カメラ画像の顔位置情報のみを利用して身長を推定する場合、ユーザの立ち位置などの他の要因によって適切な推定が行えない虞がある。例えば、高身長のユーザが装置から遠い位置にいる場合と、低身長のユーザが装置に近い位置にいる場合では、カメラ画像上のユーザの顔位置がほぼ同一となり、身長の推定値もほぼ同一となる状況が考えられる。これに対して、本実施形態では、ユーザの身長推定のパラメータとして、カメラ画像の顔位置情報のほかに、カメラ８のチルト角及びユーザとの距離情報Ｌ１を用いるので、ユーザの身長を精度良く推定できる。そして、このように、精度良く推定した身長の情報に基づいて、操作表示部４の高さ位置Ｈ１を変更するので、操作表示部４の高さ位置Ｈ１をユーザの身長に応じた適切な位置に調整することができ、この結果、個々のユーザによらず操作性を良好にできる。   When the height is estimated using only the face position information of the camera image, there is a possibility that appropriate estimation cannot be performed due to other factors such as the user's standing position. For example, when the tall user is far from the device and when the short user is near the device, the user's face position on the camera image is almost the same, and the estimated height is almost the same. The situation that can be considered. On the other hand, in the present embodiment, the tilt angle of the camera 8 and the distance information L1 to the user are used as the user height estimation parameters in addition to the face position information of the camera image, so that the height of the user can be accurately determined. Can be estimated. And since the height position H1 of the operation display part 4 is changed based on the height information estimated accurately in this way, the height position H1 of the operation display part 4 is changed to an appropriate position according to the height of the user. As a result, the operability can be improved regardless of individual users.

そして、個々のユーザによらず良好な操作性を提供できるので、一般ユーザには従来と同様の操作性を維持し、かつ、車椅子のユーザには装置高さを自動的に下げることにより、車椅子ユーザでも無理なく操作することが可能となり、一台の装置でサービスを好適に提供できるユーザのタイプが拡張でき、汎用性を向上できる。特に病院など車椅子ユーザの利用が多く見込まれる環境でも、車椅子ユーザ専用の端末を準備する必要がなくなり、コストを低減できる。   And since it is possible to provide good operability regardless of individual users, it is possible to maintain the same operability as before for general users, and for wheelchair users to automatically lower the device height so that wheelchairs can be provided. Users can operate without difficulty, and the types of users who can suitably provide services with a single device can be expanded, thereby improving versatility. In particular, even in an environment where wheelchair users are expected to be frequently used, such as hospitals, it is not necessary to prepare a dedicated terminal for wheelchair users, and costs can be reduced.

また、本実施形態の情報端末装置１は、操作表示部４の傾斜角θ１を変更するチルトユニット６を備え、距離センサ９は、ユーザと当該情報端末装置１との間の距離を計測し、制御装置１０は、距離センサ９によりユーザが当該情報端末装置１前方の所定領域に入ることが検知されるときに、カメラ８により撮像されるカメラ画像内にユーザの顔が含まれるようにチルトユニット６を制御して操作表示部４の傾斜角θ１を調整し、カメラ画像内にユーザの顔が含まれる状態となるとき、距離センサ９により計測される距離Ｌ１、チルトユニット６により設定される操作表示部４の現在の傾斜角θ１から導出されるカメラ８のチルト角、及び顔位置情報に基づいて、ユーザの身長を推定する。   In addition, the information terminal device 1 of the present embodiment includes a tilt unit 6 that changes the inclination angle θ1 of the operation display unit 4, and the distance sensor 9 measures the distance between the user and the information terminal device 1, When the distance sensor 9 detects that the user enters a predetermined area in front of the information terminal device 1, the control device 10 includes a tilt unit so that the user's face is included in the camera image captured by the camera 8. 6 is adjusted to adjust the tilt angle θ1 of the operation display unit 4, and when the user's face is included in the camera image, the distance L1 measured by the distance sensor 9 and the operation set by the tilt unit 6 The height of the user is estimated based on the tilt angle of the camera 8 derived from the current tilt angle θ1 of the display unit 4 and face position information.

この構成により、推定されたユーザの身長に基づき、操作表示部４の高さ位置Ｈ１に加えて、さらに操作表示部４の傾斜角θ１も変更するので、操作表示部４をユーザの身長に応じてより一層適切な位置に調整することができ、操作性をさらに向上できる。   With this configuration, in addition to the height position H1 of the operation display unit 4, the inclination angle θ1 of the operation display unit 4 is also changed based on the estimated height of the user. Therefore, the position can be adjusted to a more appropriate position, and the operability can be further improved.

ところで、ユーザが自分の身長と合わない位置にある操作表示部４を操作しようとする場合、ユーザは、操作し難いため操作に煩わしさを感じ、この結果操作効率が低下して所望の操作の所要時間が長くなる虞がある。特に車椅子ユーザの場合、一般ユーザに合わせた寸法では、操作表示部４の高さ位置が高すぎたり、傾斜角が寝すぎるなど、操作性が悪化する状況が発生する可能性が高いと考えられる。本実施形態では、この問題を解決するために、ユーザが情報端末装置１の使用開始時に、逐次ユーザの身長を推定して操作表示部４の位置を調整するが、この結果、ユーザは所望の操作を行なう前にユーザの身長推定処理及び操作表示部４の位置調整処理のための待ち時間を要することとなる。しかしながら、このような待ち時間を要したとしても、操作性を改善させることができれば、結果的にユーザビリティを向上でき、ユーザの満足度を向上することが期待できる。また、本実施形態によれば、ユーザの操作効率を向上できるので、待ち時間を取ったとしても所望の操作に要する総時間の短縮が期待できる。   By the way, when the user tries to operate the operation display unit 4 at a position that does not match his / her height, the user feels troublesome because it is difficult to operate, and as a result, the operation efficiency is lowered and the desired operation is reduced. The required time may be longer. In particular, in the case of a wheelchair user, it is considered that there is a high possibility that a situation in which the operability deteriorates, such as the height position of the operation display unit 4 being too high or the inclination angle being too slack, will occur in the dimensions adapted to general users. . In the present embodiment, in order to solve this problem, the user sequentially estimates the height of the user and adjusts the position of the operation display unit 4 at the start of use of the information terminal device 1. A waiting time for the user's height estimation process and the position adjustment process of the operation display unit 4 is required before the operation. However, even if such a waiting time is required, if the operability can be improved, the usability can be improved as a result, and the user satisfaction can be expected. In addition, according to the present embodiment, the user's operation efficiency can be improved, so that the total time required for a desired operation can be expected to be shortened even if a waiting time is taken.

［第二実施形態］
次に、図８，９を参照して第二実施形態を説明する。図８は、本発明の第二実施形態に係る情報端末装置の機能ブロック図であり、図９は、本発明の第二実施形態に係る情報端末装置による操作表示部の位置の自動調整処理を示すフローチャートである。 [Second Embodiment]
Next, a second embodiment will be described with reference to FIGS. FIG. 8 is a functional block diagram of the information terminal device according to the second embodiment of the present invention, and FIG. 9 shows an automatic adjustment process of the position of the operation display unit by the information terminal device according to the second embodiment of the present invention. It is a flowchart to show.

図８に示すように、第二実施形態の情報端末装置１ａは、距離センサ９の代わりに対人センサ１７（存在検知部、距離情報取得部）を備える点で、第一実施形態の情報端末装置１と異なるものである。   As shown in FIG. 8, the information terminal device 1 a of the second embodiment includes an interpersonal sensor 17 (presence detection unit, distance information acquisition unit) instead of the distance sensor 9, and the information terminal device of the first embodiment. 1 is different.

対人センサ１７は、第一実施形態の距離センサ９と同一位置に設置され、情報端末装置１ａから前方の特定距離以内にユーザが存在することを検知することができる。制御装置１０ａの進入検知部１１ａは、対人センサ１７の検知範囲内において、情報端末装置１ａのユーザが、情報端末装置１ａの前方の所定領域に進入したことを検知する。つまり、進入検知部１１ａがユーザの進入を検知する「所定領域」は、対人センサ１７が検知可能な「特定距離」により画定される。なお、「特定距離」とは、少なくともユーザが情報端末装置１ａを操作可能な範囲で設定される値であり、例えば８０（ｃｍ）である。   The interpersonal sensor 17 is installed at the same position as the distance sensor 9 of the first embodiment, and can detect that a user exists within a specific distance ahead of the information terminal device 1a. The entry detection unit 11a of the control device 10a detects that the user of the information terminal device 1a has entered a predetermined area in front of the information terminal device 1a within the detection range of the interpersonal sensor 17. That is, the “predetermined area” in which the entry detection unit 11 a detects the entry of the user is defined by the “specific distance” that can be detected by the interpersonal sensor 17. The “specific distance” is a value set at least within a range in which the user can operate the information terminal device 1a, and is, for example, 80 (cm).

図９を参照して、第二実施形態における操作表示部４の位置の自動調整処理を説明する。なお、ステップＳ２０１〜Ｓ２０２、Ｓ２０５〜Ｓ２０９、Ｓ２１１〜Ｓ２１５の各処理は、第一実施形態のステップＳ１０１〜Ｓ１０２、Ｓ１０５〜Ｓ１０９、Ｓ１１１〜Ｓ１１５の各処理と同一なので説明を省略する。   With reference to FIG. 9, the automatic adjustment process of the position of the operation display part 4 in 2nd embodiment is demonstrated. In addition, since each process of step S201-S202, S205-S209, S211-S215 is the same as each process of step S101-S102, S105-S109, S111-S115 of 1st embodiment, description is abbreviate | omitted.

ステップＳ２０３において、進入検知部１１ａにより、対人センサ１７を用いたユーザの監視動作（図９には「対人センサ監視」と表記）が開始される。この監視動作において、進入検知部１１ａは、対人センサ１７の検出情報に基づいて、情報端末装置１ａの前方にいるユーザが所定領域内に進入しているか否かを監視する。そして、ステップＳ２０４において、対人センサ１７が特定距離内にユーザが存在することを検知すると、進入検知部１１ａにより、ユーザが装置前方の所定領域に進入したことが検知される。   In step S203, the entry detection unit 11a starts a user monitoring operation using the interpersonal sensor 17 (indicated as “personal sensor monitoring” in FIG. 9). In this monitoring operation, the entry detection unit 11a monitors whether or not a user in front of the information terminal device 1a has entered a predetermined area based on the detection information of the interpersonal sensor 17. In step S204, when the interpersonal sensor 17 detects that the user exists within a specific distance, the entry detection unit 11a detects that the user has entered a predetermined area in front of the apparatus.

ステップＳ２１０において、身長推定部１３により、対人センサ検知距離Ｌ１と、カメラ８のチルト角θ１―θ２、カメラ画像中のユーザの顔位置の情報Ａ１から、ユーザの身長が推定される。対人センサ検知距離Ｌ１は、第一実施形態のユーザまでの水平距離Ｌ１に対応するが、第一実施形態とは異なり固定値となり、具体的には、対人センサ１７の検知範囲である「特定距離」である。本ステップの処理内容は、Ｌ１の値が固定値となる点以外は第一実施形態のステップＳ１１０と同じであり、（１）〜（４）式を用いてユーザの身長を推定する。   In step S210, the height estimation unit 13 estimates the height of the user from the interpersonal sensor detection distance L1, the tilt angle θ1-θ2 of the camera 8, and the user face position information A1 in the camera image. The interpersonal sensor detection distance L1 corresponds to the horizontal distance L1 to the user of the first embodiment. However, unlike the first embodiment, the interpersonal sensor detection distance L1 is a fixed value. Is. The processing content of this step is the same as step S110 of the first embodiment except that the value of L1 is a fixed value, and the height of the user is estimated using equations (1) to (4).

このように第二実施形態の情報端末装置１ａは、当該情報端末装置１ａから前方の特定距離（対人センサ検知距離Ｌ１）以内にユーザが存在することを検知する対人センサ１７を備え、制御装置１０ａは、対人センサ１７によりユーザが特定距離以内に入ることが検知されるときに、カメラ８により撮像されるカメラ画像内にユーザの顔が含まれるようにチルトユニット６を制御して操作表示部４の傾斜角θ１を調整し、カメラ画像内にユーザの顔が含まれる状態となるとき、対人センサ１７に設定される特定距離Ｌ１、チルトユニット６により調整される操作表示部４の現在の傾斜角θ１から導出されるカメラ８のチルト角θ１−θ２、及びカメラ画像中の顔位置情報Ａ１に基づいて、ユーザの身長を推定する。   As described above, the information terminal device 1a according to the second embodiment includes the interpersonal sensor 17 that detects that the user exists within a specific distance (interpersonal sensor detection distance L1) ahead of the information terminal device 1a, and includes the control device 10a. When the interpersonal sensor 17 detects that the user is within a specific distance, the operation display unit 4 controls the tilt unit 6 so that the user's face is included in the camera image captured by the camera 8. When the user's face is included in the camera image by adjusting the tilt angle θ1, the specific distance L1 set in the interpersonal sensor 17 and the current tilt angle of the operation display unit 4 adjusted by the tilt unit 6 are set. The height of the user is estimated based on the tilt angle θ1-θ2 of the camera 8 derived from θ1 and the face position information A1 in the camera image.

この構成により、ユーザの監視動作や、操作表示部４の位置の自動調整処理を行なう際に、情報端末装置１ａとユーザとの間の距離を逐次算出する必要がないので、演算負荷を低減することができ、上記の動作及び処理の処理時間を短縮できる。   With this configuration, it is not necessary to sequentially calculate the distance between the information terminal device 1a and the user when performing the user's monitoring operation or the automatic adjustment processing of the position of the operation display unit 4, thereby reducing the calculation load. And the processing time of the above operation and processing can be shortened.

［第三実施形態］
次に、図１０，１１を参照して第三実施形態を説明する。図１０は、本発明の第三実施形態に係る情報端末装置の機能ブロック図であり、図１１は、本発明の第三実施形態に係る情報端末装置による操作表示部の位置の自動調整処理を示すフローチャートである。 [Third embodiment]
Next, a third embodiment will be described with reference to FIGS. FIG. 10 is a functional block diagram of an information terminal device according to the third embodiment of the present invention, and FIG. 11 shows an automatic adjustment process of the position of the operation display unit by the information terminal device according to the third embodiment of the present invention. It is a flowchart to show.

図１０に示すように、第三実施形態の情報端末装置１ｂは、チルトユニット６及びチルトユニット制御部１５を備えない点で、第二実施形態の情報端末装置１ａと異なるものである。すなわち、本実施形態では、操作表示部４の傾斜角θ１は所定の固定値となる。これにより、カメラ８のチルト角（θ１―θ２）も固定値となる。また、第三実施形態の情報端末装置１ｂでは、対人センサ１７の検知範囲である「特定距離」と、操作表示部４の傾斜角θ１は、ユーザが特定距離以内にいる場合に、傾斜角θ１に固設された操作表示部４上のカメラ８のカメラ画像内に常にユーザの顔が含まれるように設定される。   As shown in FIG. 10, the information terminal device 1b of the third embodiment is different from the information terminal device 1a of the second embodiment in that it does not include the tilt unit 6 and the tilt unit control unit 15. That is, in the present embodiment, the inclination angle θ1 of the operation display unit 4 is a predetermined fixed value. Thereby, the tilt angle (θ1−θ2) of the camera 8 also becomes a fixed value. In the information terminal device 1b according to the third embodiment, the “specific distance” that is the detection range of the interpersonal sensor 17 and the inclination angle θ1 of the operation display unit 4 are the inclination angle θ1 when the user is within the specific distance. It is set so that the user's face is always included in the camera image of the camera 8 on the operation display unit 4 fixed to the screen.

図１１を参照して、第三実施形態における操作表示部４の位置の自動調整処理を説明する。なお、ステップＳ３０１〜Ｓ３０５、Ｓ３１０〜Ｓ３１４の各処理は、第二実施形態のステップＳ２０１〜Ｓ２０５、Ｓ２１１〜Ｓ２１５の各処理と同一なので説明を省略する。なお、ステップＳ３０２及びＳ３１０の処理では、本実施形態では操作表示部４の傾斜角θ１が固定値であるので、高さ位置Ｈ１のみが変更される。   With reference to FIG. 11, the automatic adjustment process of the position of the operation display part 4 in 3rd embodiment is demonstrated. In addition, since each process of step S301-S305, S310-S314 is the same as each process of step S201-S205 of 2nd embodiment, and S211-S215, description is abbreviate | omitted. In the processing of steps S302 and S310, since the inclination angle θ1 of the operation display unit 4 is a fixed value in the present embodiment, only the height position H1 is changed.

自動調整処理が開始されると、まず制御装置１０ｂの顔検出部１２ｂによりカメラ８が起動され（ステップＳ３０６）、カメラ８が撮像した操作表示部４の前方のカメラ画像が取得され、カメラ画像が解析されて、カメラ画像中のユーザの顔が検知される（ステップＳ３０７）。次いで、カメラ８が停止され（ステップＳ３０８）、顔検出部１２ｂにより、カメラ画像内の顔の上下位置の情報が取得され、身長推定部１３に出力される。   When the automatic adjustment process is started, first, the camera 8 is activated by the face detection unit 12b of the control device 10b (step S306), a camera image in front of the operation display unit 4 captured by the camera 8 is acquired, and the camera image is displayed. Analysis is performed to detect the user's face in the camera image (step S307). Next, the camera 8 is stopped (step S308), and information on the vertical position of the face in the camera image is acquired by the face detection unit 12b and output to the height estimation unit 13.

次に、身長推定部１３により、対人センサ検知距離Ｌ１と、カメラ８のチルト角、カメラ画像中のユーザの顔位置から、ユーザの身長が推定される（ステップＳ３０９）。対人センサ検知距離Ｌ１は、対人センサ１７の検知範囲である「特定距離」であり、固定値である。また、本実施形態では、上述のとおり操作表示部４の傾斜角θ１は固定値なので、カメラ８のチルト角も固定値となる。本ステップの処理内容は、対人センサ検知距離Ｌ１とカメラ８のチルト角の値が固定値となる点以外は第一実施形態のステップＳ１１０と同じであり、（１）〜（４）式を用いてユーザの身長を推定する。   Next, the height estimation unit 13 estimates the height of the user from the interpersonal sensor detection distance L1, the tilt angle of the camera 8, and the user's face position in the camera image (step S309). The interpersonal sensor detection distance L1 is a “specific distance” that is a detection range of the interpersonal sensor 17, and is a fixed value. In the present embodiment, as described above, since the tilt angle θ1 of the operation display unit 4 is a fixed value, the tilt angle of the camera 8 is also a fixed value. The processing content of this step is the same as step S110 of the first embodiment except that the interpersonal sensor detection distance L1 and the tilt angle value of the camera 8 are fixed values, and the equations (1) to (4) are used. To estimate the user's height.

このように第三実施形態の情報端末装置１ｂは、当該情報端末装置１ｂから前方の特定距離（対人センサ検知距離Ｌ１）以内にユーザが存在することを検知する対人センサ１７を備え、対人センサ１７の特定距離は、ユーザが特定距離以内に入るときに、カメラ８により撮像されるカメラ画像内にユーザの顔が含まれるように設定されている。制御装置１０ｂは、対人センサ１７によりユーザが特定距離以内に入ることが検知されたときに、対人センサ１７に設定される特定距離Ｌ１、カメラ８のチルト角θ１−θ２、及びカメラ画像中の顔位置情報Ａ１に基づいて、ユーザの身長を推定する。   As described above, the information terminal device 1b according to the third embodiment includes the interpersonal sensor 17 that detects the presence of the user within a specific distance (interpersonal sensor detection distance L1) ahead of the information terminal device 1b. The specific distance is set so that the user's face is included in the camera image captured by the camera 8 when the user enters within the specific distance. When the interpersonal sensor 17 detects that the user falls within a specific distance, the control device 10b detects the specific distance L1 set in the interpersonal sensor 17, the tilt angle θ1-θ2 of the camera 8, and the face in the camera image. The height of the user is estimated based on the position information A1.

この構成により、操作表示部４の位置の自動調整処理を行なう際に、カメラ８が撮像するカメラ画像内にユーザの顔が入るようにチルト角を調整する必要がないので、演算負荷をさらに低減することができ、自動調整処理の処理時間を短縮できる。   With this configuration, when performing the automatic adjustment processing of the position of the operation display unit 4, it is not necessary to adjust the tilt angle so that the user's face enters the camera image captured by the camera 8. And the processing time of the automatic adjustment process can be shortened.

以上、本発明の実施形態を説明したが、上記実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。上記実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行なうことができる。上記実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。   As mentioned above, although embodiment of this invention was described, the said embodiment was shown as an example and is not intending limiting the range of invention. The above embodiments can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the scope of the invention. The above-described embodiments and modifications thereof are included in the invention described in the claims and equivalents thereof, as long as they are included in the scope and gist of the invention.

上記実施形態では、距離センサ９または対人センサ１７により利用者が所定領域に進入したことを開始トリガとして、操作表示部４の位置の自動調整処理を行なう構成を例示したが、開始トリガは他の態様でもよく、例えばユーザがタッチパネル７上で入力操作を行なうべくタッチパネル７に触れたことを検知した場合としてもよい。   In the above embodiment, the configuration in which the position adjustment of the operation display unit 4 is automatically performed using the distance sensor 9 or the interpersonal sensor 17 as a start trigger is exemplified as the start trigger. For example, it may be a case where it is detected that the user has touched the touch panel 7 to perform an input operation on the touch panel 7.

また、上記実施形態では、３段階の身長レベルに応じて、操作表示部４の高さ位置Ｈ１及び傾斜角θ１をそれぞれ３段階に設定したが、設定する段階数を増減してもよいし、身長の推定値に応じて高さ位置Ｈ１及び傾斜角θ１を逐次算出する構成でもよい。また、標準的な身長を想定した中身長レベルの範囲を他のレベルの範囲より広くとったり、病院など車椅子ユーザの多い環境では、車椅子ユーザの座高を想定した低身長レベルの範囲を他より広くとるなど、使用環境や各種条件に応じて身長レベルの範囲を適宜変更してもよい。   Moreover, in the said embodiment, although the height position H1 and inclination-angle (theta) 1 of the operation display part 4 were each set in three steps according to the height level of three steps, you may increase / decrease the number of steps to set, A configuration may be employed in which the height position H1 and the inclination angle θ1 are sequentially calculated according to the estimated height value. In addition, the range of the height level that assumes standard height is wider than the range of other levels, and in environments where there are many wheelchair users such as hospitals, the range of low height level that assumes the seating height of wheelchair users is wider than others. For example, the range of the height level may be appropriately changed according to the use environment and various conditions.

１，１ａ，１ｂ 情報端末装置
４ 操作表示部（操作部）
５ 昇降ユニット（高さ位置変更部）
６ チルトユニット（傾斜角変更部）
８ カメラ（撮像部）
９ 距離センサ（距離情報取得部、距離計測部）
１０，１０ａ，１０ｂ 制御装置（制御部）
１７ 対人センサ（距離情報取得部、存在検知部） 1, 1a, 1b Information terminal device 4 Operation display section (operation section)
5 Lifting unit (height position changing part)
6 Tilt unit (Inclination angle changing part)
8 Camera (imaging part)
9 Distance sensor (distance information acquisition unit, distance measurement unit)
10, 10a, 10b Control device (control unit)
17 Interpersonal sensor (distance information acquisition unit, presence detection unit)

Claims (6)

所定の傾斜角で設置される操作部と、
前記操作部の高さ位置を変更する高さ位置変更部と、
前記操作部に設置され、前記操作部の前方に位置するユーザを撮像する撮像部と、
前記ユーザと当該情報端末装置との間の距離に関する距離情報を取得する距離情報取得部と、
前記距離情報取得部により取得される前記距離情報、前記操作部の前記傾斜角から導出される前記撮像部のチルト角、及び前記撮像部により撮像される画像内における前記ユーザの顔位置情報に基づいて、前記ユーザの身長を推定し、前記推定された身長に応じて、前記高さ位置変更部を制御して前記操作部の前記高さ位置を変更する制御部と、
を備えることを特徴とする情報端末装置。 An operation unit installed at a predetermined inclination angle;
A height position changing unit for changing a height position of the operation unit;
An imaging unit installed in the operation unit and imaging a user located in front of the operation unit;
A distance information acquisition unit that acquires distance information about a distance between the user and the information terminal device;
Based on the distance information acquired by the distance information acquisition unit, the tilt angle of the imaging unit derived from the tilt angle of the operation unit, and face position information of the user in an image captured by the imaging unit A control unit that estimates the height of the user and controls the height position change unit according to the estimated height to change the height position of the operation unit;
An information terminal device comprising: 前記操作部の前記傾斜角を変更する傾斜角変更部を備え、
前記距離情報取得部は、前記ユーザと当該情報端末装置との間の距離を計測する距離計測部であり、
前記制御部は、前記距離計測部により前記ユーザが当該情報端末装置前方の所定領域に入ることが検知されるときに、前記撮像部により撮像される前記画像内に前記ユーザの顔が含まれるように前記傾斜角変更部を制御して前記操作部の前記傾斜角を調整し、
前記画像内に前記ユーザの顔が含まれる状態となるとき、前記距離計測部により計測される前記距離、前記傾斜角変更部により設定される前記操作部の現在の前記傾斜角から導出される前記撮像部の前記チルト角、及び前記顔位置情報に基づいて、前記ユーザの身長を推定する、
請求項１に記載の情報端末装置。 An inclination angle changing unit for changing the inclination angle of the operation unit;
The distance information acquisition unit is a distance measurement unit that measures a distance between the user and the information terminal device,
When the distance measurement unit detects that the user enters a predetermined area in front of the information terminal device, the control unit includes the user's face in the image captured by the imaging unit. Controlling the tilt angle changing unit to adjust the tilt angle of the operation unit,
When the user's face is included in the image, the distance measured by the distance measuring unit and the current tilt angle of the operation unit set by the tilt angle changing unit are derived. Estimating the height of the user based on the tilt angle of the imaging unit and the face position information;
The information terminal device according to claim 1. 前記操作部の前記傾斜角を変更する傾斜角変更部を備え、
前記距離情報取得部は、当該情報端末装置から前方の特定距離以内に前記ユーザが存在することを検知する存在検知部であり、
前記制御部は、前記存在検知部により前記ユーザが前記特定距離以内に入ることが検知されるときに、前記撮像部により撮像される前記画像内に前記ユーザの顔が含まれるように前記傾斜角変更部を制御して前記操作部の前記傾斜角を調整し、
前記画像内に前記ユーザの顔が含まれる状態となるとき、前記存在検知部に設定される前記特定距離、前記傾斜角変更部により調整される前記操作部の現在の前記傾斜角から導出される前記撮像部の前記チルト角、及び前記顔位置情報に基づいて、前記ユーザの身長を推定する、
請求項１に記載の情報端末装置。 An inclination angle changing unit for changing the inclination angle of the operation unit;
The distance information acquisition unit is a presence detection unit that detects the presence of the user within a specific distance ahead of the information terminal device,
When the presence detection unit detects that the user falls within the specific distance, the control unit includes the tilt angle so that the user's face is included in the image captured by the imaging unit. Control the change unit to adjust the tilt angle of the operation unit,
When the user's face is included in the image, it is derived from the specific distance set in the presence detection unit and the current tilt angle of the operation unit adjusted by the tilt angle changing unit. Estimating the height of the user based on the tilt angle of the imaging unit and the face position information;
The information terminal device according to claim 1. 前記距離情報取得部は、当該情報端末装置から前方の特定距離以内に前記ユーザが存在することを検知する存在検知部であり、
前記存在検知部の前記特定距離は、前記ユーザが前記特定距離以内に入るときに、前記撮像部により撮像される前記画像内に前記ユーザの顔が含まれるように設定されており、
前記制御部は、前記存在検知部により前記ユーザが前記特定距離以内に入ることが検知されたときに、前記存在検知部に設定される前記特定距離、前記チルト角、及び前記顔位置情報に基づいて、前記ユーザの身長を推定する、
請求項１に記載の情報端末装置。 The distance information acquisition unit is a presence detection unit that detects the presence of the user within a specific distance ahead of the information terminal device,
The specific distance of the presence detection unit is set so that the user's face is included in the image captured by the imaging unit when the user enters within the specific distance,
The control unit is based on the specific distance, the tilt angle, and the face position information set in the presence detection unit when the presence detection unit detects that the user falls within the specific distance. Estimating the height of the user,
The information terminal device according to claim 1. 所定の傾斜角で設置される操作部と、
前記操作部の高さ位置を変更する高さ位置変更部と、
前記操作部に設置され、前記操作部の前方に位置するユーザを撮像する撮像部と、
前記ユーザと当該情報端末装置との間の距離に関する距離情報を取得する距離情報取得部と、を備える情報端末装置において、前記操作部の位置を調整する自動調整方法であって、
前記距離情報取得部により取得される前記距離情報、前記操作部の前記傾斜角から導出される前記撮像部のチルト角、及び前記撮像部により撮像される画像内における前記ユーザの顔位置情報に基づいて、前記ユーザの身長を推定する身長推定ステップと、
前記身長推定ステップにおいて推定された前記身長に応じて、前記高さ位置変更部を制御して前記操作部の前記高さ位置を変更する高さ位置変更ステップと、
を備えることを特徴とする自動調整方法。 An operation unit installed at a predetermined inclination angle;
A height position changing unit for changing a height position of the operation unit;
An imaging unit installed in the operation unit and imaging a user located in front of the operation unit;
In an information terminal device comprising a distance information acquisition unit that acquires distance information related to a distance between the user and the information terminal device, an automatic adjustment method for adjusting the position of the operation unit,
Based on the distance information acquired by the distance information acquisition unit, the tilt angle of the imaging unit derived from the tilt angle of the operation unit, and face position information of the user in an image captured by the imaging unit A height estimating step for estimating the height of the user;
In accordance with the height estimated in the height estimation step, a height position change step of controlling the height position change unit to change the height position of the operation unit;
An automatic adjustment method comprising: 所定の傾斜角で設置される操作部と、
前記操作部の高さ位置を変更する高さ位置変更部と、
前記操作部に設置され、前記操作部の前方に位置するユーザを撮像する撮像部と、
前記ユーザと当該情報端末装置との間の距離に関する距離情報を取得する距離情報取得部と、を備える情報端末装置において、前記操作部の位置を調整する自動調整プログラムであって、
前記距離情報取得部により取得される前記距離情報、前記操作部の前記傾斜角から導出される前記撮像部のチルト角、及び前記撮像部により撮像される画像内における前記ユーザの顔位置情報に基づいて、前記ユーザの身長を推定する身長推定機能と、
前記身長推定機能により推定された前記身長に応じて、前記高さ位置変更部を制御して前記操作部の前記高さ位置を変更する高さ位置変更機能と、
をコンピュータに実現させるための自動調整プログラム。 An operation unit installed at a predetermined inclination angle;
A height position changing unit for changing a height position of the operation unit;
An imaging unit installed in the operation unit and imaging a user located in front of the operation unit;
In an information terminal device comprising a distance information acquisition unit that acquires distance information regarding a distance between the user and the information terminal device, an automatic adjustment program that adjusts the position of the operation unit,
Based on the distance information acquired by the distance information acquisition unit, the tilt angle of the imaging unit derived from the tilt angle of the operation unit, and face position information of the user in an image captured by the imaging unit A height estimating function for estimating the height of the user;
According to the height estimated by the height estimation function, a height position change function for controlling the height position change unit to change the height position of the operation unit;
Is an automatic adjustment program that enables a computer to realize
JP2013124012A 2013-06-12 2013-06-12 Information terminal device, automatic adjustment method, and automatic adjustment program Expired - Fee Related JP5993349B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013124012A JP5993349B2 (en) 2013-06-12 2013-06-12 Information terminal device, automatic adjustment method, and automatic adjustment program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013124012A JP5993349B2 (en) 2013-06-12 2013-06-12 Information terminal device, automatic adjustment method, and automatic adjustment program

Publications (2)

Publication Number Publication Date
JP2014241553A true JP2014241553A (en) 2014-12-25
JP5993349B2 JP5993349B2 (en) 2016-09-14

Family

ID=52140568

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013124012A Expired - Fee Related JP5993349B2 (en) 2013-06-12 2013-06-12 Information terminal device, automatic adjustment method, and automatic adjustment program

Country Status (1)

Country Link
JP (1) JP5993349B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021059526A1 (en) * 2019-09-27 2021-04-01 日本電気株式会社 Information processing device, information processing method, and recording medium

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02259895A (en) * 1989-03-31 1990-10-22 Hitachi Ltd Automatic teller machine
JP2003308303A (en) * 2002-04-18 2003-10-31 Toshiba Corp Person authentication system, and passing control system
JP2005107587A (en) * 2003-09-26 2005-04-21 Toshiba Corp Face identification device and passage control device
JP2007158646A (en) * 2005-12-05 2007-06-21 Fuji Xerox Co Ltd User interface device and image reading apparatus

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02259895A (en) * 1989-03-31 1990-10-22 Hitachi Ltd Automatic teller machine
JP2003308303A (en) * 2002-04-18 2003-10-31 Toshiba Corp Person authentication system, and passing control system
JP2005107587A (en) * 2003-09-26 2005-04-21 Toshiba Corp Face identification device and passage control device
JP2007158646A (en) * 2005-12-05 2007-06-21 Fuji Xerox Co Ltd User interface device and image reading apparatus

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021059526A1 (en) * 2019-09-27 2021-04-01 日本電気株式会社 Information processing device, information processing method, and recording medium
JPWO2021059526A1 (en) * 2019-09-27 2021-04-01
EP4036846A4 (en) * 2019-09-27 2022-10-12 NEC Corporation Information processing device, information processing method, and recording medium
JP7264265B2 (en) 2019-09-27 2023-04-25 日本電気株式会社 Information processing device, information processing method and program

Also Published As

Publication number Publication date
JP5993349B2 (en) 2016-09-14

Similar Documents

Publication Publication Date Title
KR101626159B1 (en) User adaptive display device and method thereof
JP6617755B2 (en) Display device and electronic device
US11086405B2 (en) Display device and projection device
JP6182917B2 (en) Monitoring device
EP2676609A1 (en) X-ray imaging apparatus and control method thereof
JP5974189B2 (en) Projection-type image display apparatus and projection-type image display method
JP2015075877A (en) Imaging system
US9282940B2 (en) Mobile X-ray imaging apparatus
KR20180010257A (en) A method of adjusting a photographing focal length of a mobile terminal using a touch pad,
JP2016087031A (en) Desk system
JP2017204285A (en) Wearable information terminal and charging system
TW201428638A (en) Displaying device and method for adjusting an observation distance between an user and the displaying device
JP2009070245A (en) Image projection display device, image projection display method, image projection display program and storage medium
US20150324008A1 (en) Display apparatus and controlling method thereof
TWI524211B (en) Electronic apparatus and display angle adjustment method therewith
JP5993349B2 (en) Information terminal device, automatic adjustment method, and automatic adjustment program
TW201814451A (en) Input devices, methods for providing an input to a computing system and computer readable media
WO2013183533A1 (en) Display device, display method, and program
JP2011090236A (en) Automatic angle setting display machine
JP6776616B2 (en) Work guidance device and program
JP5222646B2 (en) Terminal device, display control method, and display control program
CN109091105B (en) Eye tracker and detection system and detection method thereof
KR20220002073A (en) Smart double motion desk
CN112583980A (en) Intelligent terminal display angle adjusting method and system based on visual identification and intelligent terminal
JP2007158646A (en) User interface device and image reading apparatus

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20151005

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20151009

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160728

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160816

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160819

R150 Certificate of patent or registration of utility model

Ref document number: 5993349

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees