WO2020044734A1 - 情報提供システムおよび情報提供方法 - Google Patents

情報提供システムおよび情報提供方法 Download PDF

Info

Publication number
WO2020044734A1
WO2020044734A1 PCT/JP2019/023771 JP2019023771W WO2020044734A1 WO 2020044734 A1 WO2020044734 A1 WO 2020044734A1 JP 2019023771 W JP2019023771 W JP 2019023771W WO 2020044734 A1 WO2020044734 A1 WO 2020044734A1
Authority
WO
WIPO (PCT)
Prior art keywords
user
attribute
positional relationship
display device
shape data
Prior art date
Application number
PCT/JP2019/023771
Other languages
English (en)
French (fr)
Inventor
雄哉 五十嵐
Original Assignee
清水建設株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 清水建設株式会社 filed Critical 清水建設株式会社
Priority to US17/270,469 priority Critical patent/US20210325983A1/en
Priority to SG11202101864WA priority patent/SG11202101864WA/en
Publication of WO2020044734A1 publication Critical patent/WO2020044734A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/521—Depth or shape recovery from laser ranging, e.g. using interferometry; from the projection of structured light
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F19/00—Advertising or display means not otherwise provided for
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/06—Remotely controlled electronic signs other than labels

Definitions

  • the present invention relates to an information providing system and an information providing method such as a digital signage and a touch panel installed in a shopping area or the like for the purpose of providing map information or advertising, for example.
  • a walking support system capable of discriminating a person who needs walking support from a video of a surveillance camera (see, for example, Patent Document 1), or three-dimensional distance information obtained by a stereo camera is used.
  • a known wheelchair user detection system for example, see Patent Document 2 is known.
  • an information providing device such as a signage that provides content according to the attribute
  • a signage that estimates a personal attribute from a camera image and performs an individually optimized display response for example, see Patent Literature 3
  • An elevator operation panel for example, refer to Patent Literature 4
  • a touch panel display that detects the position of the user's head at the time of touch and switches the content of information to be provided for adults and children, and a change in the distance between the user's head position and the display
  • a touch panel display that determines a wheelchair user or a low-vision person and provides information according to each of them (for example, see Patent Document 5).
  • Patent Documents 1 and 3 have a privacy problem. Further, the system using the distance information of the stereo camera disclosed in Patent Document 2 has a problem that it is difficult to distinguish a stroller user from a wheelchair user. Further, the system using the sensor for measuring the height disclosed in Patent Document 4 has a problem that it is not possible to distinguish between a wheelchair user and a child. Further, in the system disclosed in Patent Literature 5 in which a wheelchair user is determined based on the height of the head position and the distance to the display, there is a problem in that erroneous recognition of a child who is far from the display occurs.
  • the present invention has been made in view of the above, and an object of the present invention is to provide an information providing system and an information providing method with improved usability.
  • an information providing system in a predetermined information providing area, and includes information including an operation unit for a user who is in the information providing area.
  • a display device having a display function to display and an operation function of receiving a predetermined operation input to the operation unit by the user; a three-dimensional sensor for acquiring three-dimensional shape data including a user near the display device; User attribute determining means for determining a user attribute based on the acquired three-dimensional shape data; positional relationship acquiring means for determining a positional relationship between the user and the display device based on the acquired three-dimensional shape data; And a control unit for displaying the operation unit at a position corresponding to the user attribute and displaying the information content corresponding to the positional relationship and the user attribute on the display device.
  • the information providing method is provided in a predetermined information providing area, a display function of displaying information including an operating unit for a user in the information providing area, A three-dimensional shape data acquisition step of acquiring three-dimensional shape data including a user in the vicinity of a display device having an operation function of receiving a predetermined operation input of the user; A user attribute discriminating step for discriminating, a positional relation obtaining step for obtaining a positional relation between the user and the display device based on the obtained three-dimensional shape data, and displaying the operation unit at a position corresponding to the positional relation and the user attribute
  • a control step of displaying information content corresponding to the positional relationship and the attribute of the user on the display device is provided.
  • the display function installed in the predetermined information provision target area and displaying the information including the operation part toward the user who exists in the information provision target area, and the operation part by the user
  • a display device having an operation function of receiving a predetermined operation input, a three-dimensional sensor for acquiring three-dimensional shape data including a user in the vicinity of the display device, and a user's information based on the acquired three-dimensional shape data.
  • User attribute determining means for determining an attribute
  • positional relationship obtaining means for determining a positional relationship between the user and the display device based on the acquired three-dimensional shape data
  • an operation unit at a position corresponding to the positional relationship and the user attribute Control means for displaying information content corresponding to the positional relationship and the user's attribute on the display device while displaying the information, thereby improving the usability.
  • a display function for displaying information including an operation unit for a user located in a predetermined information providing area and present in the information providing area, and an operation by the user
  • a three-dimensional shape data obtaining step of obtaining three-dimensional shape data including a user in the vicinity of a display device having an operation function of receiving a predetermined operation input to the unit, and a user's operation based on the obtained three-dimensional shape data.
  • FIG. 1 is a schematic configuration diagram showing an embodiment of an information providing system according to the present invention.
  • FIG. 2 is a schematic flow chart showing an embodiment of the information providing method according to the present invention.
  • FIG. 3 is a diagram illustrating an example of a procedure for acquiring three-dimensional shape data.
  • FIG. 4 is a diagram illustrating an example of an attribute determination procedure.
  • FIG. 5 is a diagram showing the first embodiment of the present invention.
  • FIG. 6 is a diagram showing a second embodiment of the present invention.
  • the information providing system 10 includes a signage 12, a three-dimensional sensor 14, an attribute determination unit 16, a positional relationship acquisition unit 18, and a display content control unit 20.
  • the attribute determination unit 16, the positional relationship acquisition unit 18, and the display content control unit 20 are configured using an arithmetic processing function of a computer (not shown).
  • the signage 12 is installed on, for example, the floor of a shopping area (information provision target area).
  • the signage 12 is composed of a large touch panel type display (display device) for providing map information, ticketing information, advertisement information, and the like, and has an operation button (operation unit) directed to a user near the installation location. It has a display function of displaying the included information content on the display screen and an operation function of receiving a touch operation input by a fingertip or the like on an operation button.
  • a large display screen having a height of about 2 m and a width of about 1.5 m is assumed, but the present invention is not limited to this.
  • the three-dimensional sensor 14 is for acquiring three-dimensional shape data of the surface of an object including a user around the signage 12 and is provided near the signage 12 (for example, near the signage 12).
  • various non-contact sensors such as a laser irradiation method such as a LiDAR (Laser Imaging Detection and Ranging) sensor can be used.
  • a method for acquiring the three-dimensional shape data of the peripheral object by the three-dimensional sensor 14 a known method can be used.
  • the sensor when using a sensor that irradiates a laser beam, the sensor irradiates a linear laser beam toward the periphery, receives reflected light from the object surface at the irradiated portion, and receives light.
  • a method of acquiring three-dimensional shape data of a peripheral object surface based on data on the position and direction of a signal and a laser beam.
  • the three-dimensional shape data of the surface of the object including the user can be acquired, for example, by a method as shown in FIG.
  • a method as shown in FIG. In this method, first, as shown in FIG. 3A, three-dimensional shape data (background three-dimensional shape data) is acquired in advance in a state where no user is present in front of the signage 12. Next, as shown in (2), three-dimensional shape data (measured three-dimensional shape data) is acquired while the user is present. Next, as shown in (3), a process of removing the background three-dimensional shape data from the measured three-dimensional shape data is performed. By doing so, it is possible to acquire three-dimensional shape data of a target object such as a user as shown in (4).
  • a target object such as a user as shown in (4).
  • the attribute determination unit 16 determines a user attribute based on the acquired three-dimensional shape data. This functions as the user attribute determining means of the present invention.
  • Representative user attributes include adults, children (for example, preschoolers), wheelchair users, stroller users, and the like, but the present invention is not limited to these.
  • a method as shown in FIG. 4 can be used as the method for determining the user attribute by the attribute determining unit 16.
  • the three-dimensional shape data acquired by the three-dimensional sensor 14 is compared with a shape data model prepared for each attribute prepared in advance, and the attribute is determined from the best-fitting model. is there.
  • the attributes of the user are divided into four, attribute 1 (adult), attribute 2 (child), attribute 3 (wheelchair user), and attribute 4 (stroller user).
  • the figure shows a case where three shape data models are prepared in a database (not shown) or the like.
  • the attribute determination unit 16 compares the acquired three-dimensional shape data with the shape data model of each attribute, and determines that the shape data model of the attribute 1 (adult) is the model that best fits the three-dimensional shape data. ing. Thus, attribute 1 (adult) having this shape data model is determined as the attribute of the user.
  • the attribute 2 (child) is determined as the attribute of the user.
  • attribute 3 wheelchair user
  • attribute 4 stroller user
  • FIG. 4 a case where three shape data models are prepared for each attribute is shown, but the present invention is not limited to this, and four or more various shape data models may be prepared. .
  • the positional relationship acquisition unit 18 acquires the relative positional relationship between the user and the signage 12 based on the acquired three-dimensional shape data. This functions as the positional relationship acquisition unit of the present invention.
  • the positional relationship acquisition unit 18 As a method of acquiring the positional relationship by the positional relationship acquiring unit 18, for example, the distance and direction from the three-dimensional sensor 14 to the user and the signage 12 are determined using the peripheral three-dimensional shape data acquired by the three-dimensional sensor 14. A method of calculating each of them and obtaining the relative positional relationship between the user and the signage 12 from the calculation result can be used.
  • the display content control unit 20 controls the signage 12 to display the operation button at a position corresponding to the above-described positional relationship and the user's attribute. This controls the display of the information content.
  • the display content control unit 20 functions as control means of the present invention, and has a database (not shown). In this database, information contents including the display position information (operation interface information) of the operation buttons are recorded in advance in association with the above-described positional relationship and the attributes of the user.
  • the display content control unit 20 reads and sets information content corresponding to the positional relationship and the user attribute from the database, and causes the signage 12 to display the information content.
  • Examples of display control by the display content control unit 20 include the following. For example, when the attribute of the user is a wheelchair user or a child, an operation unit such as an operation button is displayed in a lower range of the display screen of the signage 12. If the attribute of the user is a child, the characters to be displayed are given a reading.
  • the information content provided by the signage 12 is map information and the attribute of the user is a wheelchair user
  • a display that emphasizes facilities such as a multipurpose toilet that is highly necessary for the wheelchair user is displayed.
  • facilities that are highly necessary for the stroller user such as a nursing room, are highlighted.
  • the display is made so that the child can easily select the child fee.
  • an operation unit such as an operation button is displayed in a low range of the display screen of the signage 12, or a display in which the child fee is emphasized.
  • the touch operable range of the operation buttons displayed on the display screen may be arranged in accordance with the position of the user. For example, if the touch operable range is arranged on the side closer to the position of the user, the convenience of the user who operates the operation buttons is enhanced, and the usability of the system is improved.
  • Example 1 In the first embodiment, the touch operation enabled range of the operation button is changed and controlled according to the attribute of the user.
  • FIG. 5 shows the first embodiment. As shown in FIG. 5A, when it is determined that the attributes of the user are the adult 1 and the stroller user 4, the touch-operable range 22 of the operation button is set to a normal range.
  • the touch-operable range 22 of the operation button is displayed on the display screen of the signage 12. Is set to a low range (for example, the lower side of the screen), and operation buttons are displayed in this range. Instead of this, a range obtained by reducing the entire normal touch operable range may be set as the touch operable range 22. Further, the touch-operable range 22 of the operation button may be set to a range corresponding to the position of the user. For example, as shown in FIG. 5B, when the position where the user is located is determined to be the right position toward the signage 12, the position may be set to the lower right side of the screen. Note that the information content may be displayed only in the touch operation possible range 22 or may be displayed beyond this range.
  • FIG. 6 shows the second embodiment.
  • the touch-operable range of the operation button is set. 22 may be set on the upper right side of the screen.
  • FIG. 6 (2) when the attribute of the user is adult 1 and the position where the user is located is determined to be the left position toward the signage 12, touching the operation button
  • the operable range 22 may be set at the upper left of the screen.
  • the touch operation of the operation button is possible.
  • the range 22 may be set on the lower left side of the screen. Note that the information content may be displayed only in the touch operation possible range 22 or may be displayed beyond this range.
  • step S1 three-dimensional shape data of the periphery is acquired by the three-dimensional sensor 14, a user is detected using the acquired three-dimensional shape data (step S1), and a signage 12 is detected (step S1).
  • step S2 three-dimensional shape data of the periphery is acquired by the three-dimensional sensor 14, a user is detected using the acquired three-dimensional shape data (step S1), and a signage 12 is detected (step S1).
  • the user's three-dimensional shape data is obtained (step S3), and the attribute determining unit 16 determines the user's attribute from the obtained three-dimensional shape data. (Step S4).
  • the method of FIG. 4 described above can be used for the determination of the attribute.
  • the relative positional relationship between the user and the signage 12 is acquired by the positional relationship acquisition unit 18 (step S5).
  • step S6 a touch-operable range of the operation buttons on the display screen of the signage 12 and a display range of the information content are set (step S6). Further, information contents to be displayed are selected from the attributes of the user (step S7). The operation buttons and the like are displayed in the range set in step S6, and the information content selected in step S7 is displayed (step S8).
  • the control processing of steps S6 to S8 is performed by the display content control unit 20.
  • the attribute of the user is determined by using the three-dimensional sensor 14, and the positional relationship between the user and the signage 12 is acquired from both shape data and the like. Appropriate display according to the positional relationship can be performed. In particular, it is possible to realize an operation interface that matches the positional relationship between the user and the signage 12. Therefore, according to the present embodiment, an information providing system with improved usability can be provided.
  • the present embodiment privacy information is not handled more than necessary.
  • the three-dimensional sensor 14 it is easy to discriminate between a wheelchair user and a stroller user, which is difficult with the conventional technology.
  • the display device of the present invention is not limited to this, and the display device may be the touch panel itself, or may be an automatic display device.
  • a touch panel type display device provided in a ticket vending machine or the like may be used, and the same operation and effect as described above can be obtained by using any display device.
  • a display function that is installed in a predetermined information providing area and displays information including an operation unit for a user who is in the information providing area,
  • a display device having an operation function of receiving a predetermined operation input from the user to the operation unit, a three-dimensional sensor for acquiring three-dimensional shape data including a user near the display device, and the acquired three-dimensional shape data
  • Attribute determining means for determining the attribute of the user based on the information
  • positional relationship obtaining means for determining the positional relationship between the user and the display device based on the acquired three-dimensional shape data
  • Control means for displaying the information content corresponding to the positional relationship and the user's attribute on the display device while displaying the operation unit at the corresponding position improves usability.
  • the information providing system capable of providing.
  • a display function for displaying information including an operation unit for a user located in a predetermined information providing area and present in the information providing area, and an operation by the user
  • a three-dimensional shape data obtaining step of obtaining three-dimensional shape data including a user in the vicinity of a display device having an operation function of receiving a predetermined operation input to the unit, and a user's operation based on the obtained three-dimensional shape data.
  • the information providing system and the information providing method according to the present invention are useful for digital signage or a touch panel installed in a shopping area or the like for the purpose of providing map information, advertising, and the like. Suitable to improve.
  • Information Provision System 12 Signage (Display) 14 three-dimensional sensor 16 attribute determination unit (user attribute determination means) 18 positional relationship acquisition unit (positional relationship acquisition means) 20 display content control unit (control means) 22 Touch Operation Range

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • Development Economics (AREA)
  • Marketing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Optics & Photonics (AREA)
  • Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Hardware Design (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

ユーザビリティを向上した情報提供システムおよび情報提供方法を提供する。　所定の情報提供対象エリアに設置され、情報提供対象エリアに居る利用者に向けて操作部を含む情報を表示する表示機能と、利用者による操作部への所定の操作入力を受け付ける操作機能とを有する表示装置１２と、この表示装置１２の周辺の利用者を含む３次元形状データを取得する３次元センサ１４と、取得した３次元形状データに基づいて利用者の属性を判別する利用者属性判別手段１６と、取得した３次元形状データに基づいて利用者と表示装置１２の位置関係を求める位置関係取得手段１８と、位置関係と利用者の属性に対応した位置に操作部を表示させる一方で、位置関係と利用者の属性に対応した情報コンテンツを表示装置１２に表示させる制御手段２０とを備えるようにする。

Description

情報提供システムおよび情報提供方法
　本発明は、例えば地図情報の提供や広告等を目的としてショッピングエリアなどに設置されるデジタルサイネージやタッチパネルなどの情報提供システムおよび情報提供方法に関するものである。
　従来、利用者属性を判別するシステムとして、監視カメラの映像より歩行支援が必要な人を判別できる歩行支援システム（例えば、特許文献１を参照）や、ステレオカメラで得た３次元距離情報を基にした車イス利用者検出システム（例えば、特許文献２を参照）などが知られている。
　また、属性に応じたコンテンツを提供するサイネージ等の情報提供装置として、カメラ画像から人物属性を推定し、個別最適化した表示応答を行うサイネージ（例えば、特許文献３を参照）や、乗客の身長を検出し、ボタンの表示位置を変更するエレベータ操作パネル（例えば、特許文献４を参照）が知られている。また、タッチ時の利用者の頭部の位置を検出し、提供する情報内容を大人用と子供用とに切り替えられるタッチパネルディスプレイや、利用者の頭部の位置とディスプレイとの距離（の変化）から車イス利用者や弱視者の判断を行い、それぞれに合わせた情報提供を行うタッチパネルディスプレイが知られている（例えば、特許文献５を参照）。
特許第３６９７６３２号公報 特許第４８１１６５１号公報 特許第４９５１６５６号公報 国際公開第０１／０９６２２４号公報 特許第４８３１０２６号公報
　しかしながら、巨大なモニタを備えたデジタルサイネージの場合、車イス利用者や子供では手が届かない場所に操作したいボタンがにモニタ表示されることがある。これは、従来技術の組合せで解決可能と思われがちであるが、それぞれ下記の問題がある。
　特許文献１、３のカメラ映像を用いたシステムでは、プライバシーの問題がある。また、特許文献２のステレオカメラの距離情報を用いたシステムでは、ベビーカー利用者と車イス利用者の判別が困難であるという問題がある。また、特許文献４の身長を測るセンサを用いたシステムでは、車イス利用者と子供との判別ができないという問題がある。また、特許文献５の頭部位置の高さとディスプレイまでの距離から車イス利用者を判別するシステムでは、ディスプレイから離れた位置にいる子供との誤認識が発生するという問題がある。
　本発明は、上記に鑑みてなされたものであって、ユーザビリティを向上した情報提供システムおよび情報提供方法を提供することを目的とする。
　上記した課題を解決し、目的を達成するために、本発明に係る情報提供システムは、所定の情報提供対象エリアに設置され、情報提供対象エリアに居る利用者に向けて操作部を含む情報を表示する表示機能と、利用者による操作部への所定の操作入力を受け付ける操作機能とを有する表示装置と、この表示装置の周辺の利用者を含む３次元形状データを取得する３次元センサと、取得した３次元形状データに基づいて利用者の属性を判別する利用者属性判別手段と、取得した３次元形状データに基づいて利用者と表示装置の位置関係を求める位置関係取得手段と、位置関係と利用者の属性に対応した位置に操作部を表示させる一方で、位置関係と利用者の属性に対応した情報コンテンツを表示装置に表示させる制御手段とを備えることを特徴とする。
　また、本発明に係る情報提供方法は、所定の情報提供対象エリアに設置され、情報提供対象エリアに居る利用者に向けて操作部を含む情報を表示する表示機能と、利用者による操作部への所定の操作入力を受け付ける操作機能とを有する表示装置の周辺の利用者を含む３次元形状データを取得する３次元形状データ取得ステップと、取得した３次元形状データに基づいて利用者の属性を判別する利用者属性判別ステップと、取得した３次元形状データに基づいて利用者と表示装置の位置関係を求める位置関係取得ステップと、位置関係と利用者の属性に対応した位置に操作部を表示させる一方で、位置関係と利用者の属性に対応した情報コンテンツを表示装置に表示させる制御ステップとを備えることを特徴とする。
　本発明に係る情報提供システムによれば、所定の情報提供対象エリアに設置され、情報提供対象エリアに居る利用者に向けて操作部を含む情報を表示する表示機能と、利用者による操作部への所定の操作入力を受け付ける操作機能とを有する表示装置と、この表示装置の周辺の利用者を含む３次元形状データを取得する３次元センサと、取得した３次元形状データに基づいて利用者の属性を判別する利用者属性判別手段と、取得した３次元形状データに基づいて利用者と表示装置の位置関係を求める位置関係取得手段と、位置関係と利用者の属性に対応した位置に操作部を表示させる一方で、位置関係と利用者の属性に対応した情報コンテンツを表示装置に表示させる制御手段とを備えるので、ユーザビリティを向上した情報提供システムを提供することができるという効果を奏する。
　また、本発明に係る情報提供方法によれば、所定の情報提供対象エリアに設置され、情報提供対象エリアに居る利用者に向けて操作部を含む情報を表示する表示機能と、利用者による操作部への所定の操作入力を受け付ける操作機能とを有する表示装置の周辺の利用者を含む３次元形状データを取得する３次元形状データ取得ステップと、取得した３次元形状データに基づいて利用者の属性を判別する利用者属性判別ステップと、取得した３次元形状データに基づいて利用者と表示装置の位置関係を求める位置関係取得ステップと、位置関係と利用者の属性に対応した位置に操作部を表示させる一方で、位置関係と利用者の属性に対応した情報コンテンツを表示装置に表示させる制御ステップとを備えるので、ユーザビリティを向上した情報提供方法を提供することができるという効果を奏する。
図１は、本発明に係る情報提供システムの実施の形態を示す概略構成図である。 図２は、本発明に係る情報提供方法の実施の形態を示す概略フロー図である。 図３は、３次元形状データの取得手順の一例を示す図である。 図４は、属性の判定手順の一例を示す図である。 図５は、本発明の実施例１を示す図である。 図６は、本発明の実施例２を示す図である。
　以下に、本発明に係る情報提供システムおよび情報提供方法の実施の形態を図面に基づいて詳細に説明する。なお、この実施の形態によりこの発明が限定されるものではない。
　図１に示すように、本実施の形態に係る情報提供システム１０は、サイネージ１２と、３次元センサ１４と、属性判定部１６と、位置関係取得部１８と、表示内容制御部２０とを備える。属性判定部１６、位置関係取得部１８、表示内容制御部２０は、図示しないコンピュータの演算処理機能を利用して構成される。
　サイネージ１２は、例えばショッピングエリア（情報提供対象エリア）のフロア上に設置される。このサイネージ１２は、地図情報、発券情報、広告情報等の提供を目的としたタッチパネル式の大型ディスプレイ（表示装置）からなり、設置場所の周辺に居る利用者に向けて操作ボタン（操作部）を含む情報コンテンツをディスプレイ画面上に表示する表示機能と、操作ボタンへの指先などによるタッチ操作入力を受け付ける操作機能とを有する。本実施の形態では、高さ２ｍ、幅１．５ｍ程度の大型ディスプレイ画面を想定しているが、本発明はこれに限るものではない。
　３次元センサ１４は、サイネージ１２の周辺の利用者を含む物体表面の３次元形状データを取得するためのものであり、サイネージ１２の近傍（例えば、サイネージ１２の上方近傍）に設けられる。３次元センサ１４としては、例えば、ＬｉＤＡＲ（Laser　Imaging　Detection　and　Ranging）センサのようなレーザ光を照射する方式など種々の非接触方式のものが利用可能である。３次元センサ１４による周辺物体の３次元形状データの取得方法としては、周知の方法を使用可能である。このような方法として、例えばレーザ光を照射する方式のセンサを用いる場合、センサから周辺に向けてライン状のレーザ光を照射して、その照射部位における物体表面からの反射光を受光し、受光信号とレーザ光の位置および方向のデータに基づいて、周辺にある物体表面の３次元形状データを取得するという方法がある。
　本実施の形態において、利用者を含む物体表面の３次元形状データは、例えば、図３に示すような方法で取得することができる。この方法では、まず、図３（１）に示すように、サイネージ１２の前方周辺に利用者が居ない状態で、予め３次元形状データ（背景３次元形状データ）を取得しておく。次に（２）に示すように、利用者が居る状態で３次元形状データ（計測３次元形状データ）を取得する。次に（３）に示すように、計測３次元形状データから背景３次元形状データを除く処理を行う。このようにすることで、（４）に示すような利用者などの対象物体の３次元形状データを取得することができる。
　属性判定部１６は、取得した３次元形状データに基づいて利用者の属性を判定するものである。これは、本発明の利用者属性判別手段として機能する。代表的な利用者の属性としては、大人、子供（例えば、未就学児程度）、車イス利用者、ベビーカー利用者などが挙げられるが、本発明はこれらに限るものではない。
　属性判定部１６による利用者属性の判定方法としては、例えば、図４に示すような方法を用いることができる。この方法では、図４に示すように、３次元センサ１４で取得した３次元形状データと、予め用意した属性ごとの形状データモデルとを比較し、最も当てはまりの良いモデルから属性を判定するものである。
　図４の例では、利用者の属性を、属性１（大人）、属性２（子供）、属性３（車イス利用者）、属性４（ベビーカー利用者）の４つに区分し、属性ごとに３つの形状データモデルを図示しないデータベースなどに用意した場合を示している。この例では、属性判定部１６は、取得した３次元形状データを各属性の形状データモデルと比較し、属性１（大人）の形状データモデルが３次元形状データに最も当てはまりの良いモデルと判定している。これにより、この形状データモデルを擁する属性１（大人）が利用者の属性として判定される。
　なお、比較の結果、属性２（子供）の形状データモデルが３次元形状データに最も当てはまりの良いモデルと判定した場合には、属性２（子供）が利用者の属性として判定されることになる。属性３（車イス利用者）、属性４（ベビーカー利用者）についても同様である。また、図４の例では、属性ごとに３つの形状データモデルを用意した場合を示したが、本発明はこれに限るものではなく、４つ以上の様々な形状データモデルを用意してもよい。
　位置関係取得部１８は、取得した３次元形状データに基づいて利用者とサイネージ１２の相対的な位置関係を取得するものである。これは、本発明の位置関係取得手段として機能する。位置関係取得部１８による位置関係の取得方法としては、例えば、３次元センサ１４で取得される周辺の３次元形状データを用いて、３次元センサ１４から利用者およびサイネージ１２までの距離、方向をそれぞれ算出し、この算出結果から利用者とサイネージ１２の相対的な位置関係を取得する方法を用いることができる。
　表示内容制御部２０は、サイネージ１２に対して、上記の位置関係と利用者の属性に対応した位置に操作ボタンを表示させる制御を行う一方で、上記の位置関係と利用者の属性に対応した情報コンテンツを表示させる制御を行うものである。表示内容制御部２０は、本発明の制御手段として機能するものであり、図示しないデータベースを有している。このデータベースには、操作ボタンの表示位置情報（操作インターフェース情報）を含む情報コンテンツが、上記の位置関係および利用者の属性と予め紐付けて記録されている。表示内容制御部２０は、上記の位置関係および利用者の属性に対応する情報コンテンツをデータベースから読み出して設定し、これをサイネージ１２に表示させる。
　表示内容制御部２０による表示制御の例としては、次のようなものが挙げられる。例えば、利用者の属性が車イス利用者、子供の場合には、サイネージ１２のディスプレイ画面の低い範囲に、操作ボタンなどの操作部を表示させる。また、利用者の属性が子供の場合には、表示する文字にフリガナを付ける。
　また、サイネージ１２で提供する情報コンテンツが地図情報で、かつ、利用者の属性が車イス利用者の場合には、多目的トイレのような車イス利用者にとってニーズの高い施設を強調した表示にする。また、ベビーカー利用者の場合には、授乳室のようなベビーカー利用者にとってニーズの高い施設を強調した表示にする。
　また、サイネージ１２が自動券売機の機能を有する場合（情報コンテンツが発券情報の場合）、子供に対して、子供料金を選びやすくする表示にする。例えば、サイネージ１２のディスプレイ画面の低い範囲に操作ボタンなどの操作部を表示させたり、子供料金を強調した表示にする。
　また、ディスプレイ画面に表示する操作ボタンのタッチ操作可能範囲を、利用者の位置に合わせて配置してもよい。例えば、利用者の位置に近い側にタッチ操作可能範囲を配置すれば、操作ボタンを操作する利用者の利便性が高まり、システムのユーザビリティが向上する。
　次に、上記の表示制御の実施例について具体的に説明する。
（実施例１）
　本実施例１は、利用者の属性に応じて操作ボタンのタッチ操作可能範囲を変更制御するものである。図５は、本実施例１を示したものである。図５（１）に示すように、利用者の属性が大人１、ベビーカー利用者４と判定された場合には、操作ボタンのタッチ操作可能範囲２２を通常の範囲に設定する。
　これに対し、図５（２）に示すように、利用者の属性が子供２、車イス利用者３と判定された場合には、操作ボタンのタッチ操作可能範囲２２を、サイネージ１２のディスプレイ画面の低い範囲（例えば画面の下側など）に設定し、この範囲に操作ボタンを表示させる。このようにする代わりに、通常のタッチ操作可能範囲全体を縮小した範囲をタッチ操作可能範囲２２に設定してもよい。また、操作ボタンのタッチ操作可能範囲２２を利用者の位置に応じた範囲に設定してもよい。例えば、図５（２）のように、利用者の居る位置がサイネージ１２に向かって右の位置と判定された場合には、画面の右下側に設定してもよい。なお、情報コンテンツはタッチ操作可能範囲２２にのみ表示可能としてもよいし、この範囲を超えて表示可能としてもよい。
（実施例２）
　本実施例２は、利用者とサイネージ１２の位置関係に応じて操作ボタンのタッチ操作可能範囲を変更制御するものである。図６は、本実施例２を示したものである。図６（１）に示すように、利用者の属性が大人１で、かつ、利用者の居る位置がサイネージ１２に向かって右の位置と判定された場合には、操作ボタンのタッチ操作可能範囲２２を、画面の右上側に設定してもよい。反対に、図６（２）に示すように、利用者の属性が大人１で、かつ、利用者の居る位置がサイネージ１２に向かって左の位置と判定された場合には、操作ボタンのタッチ操作可能範囲２２を、画面の左上側に設定してもよい。
　また、図６（３）に示すように、利用者の属性が子供２で、例えば利用者の居る位置がサイネージ１２に向かって左の位置と判定された場合には、操作ボタンのタッチ操作可能範囲２２を、画面の左下側に設定してもよい。なお、情報コンテンツはタッチ操作可能範囲２２にのみ表示可能としてもよいし、この範囲を超えて表示可能としてもよい。
　次に、上記のように構成した情報提供システム１０の動作および作用について説明する。
　図２に示すように、まず、３次元センサ１４で周辺の３次元形状データを取得し、取得した３次元形状データを用いて利用者の検出と（ステップＳ１）、サイネージ１２の検出を行う（ステップＳ２）。
　続いて、例えば上記の図３の方法を利用して、利用者の３次元形状データを取得し（ステップＳ３）、取得した３次元形状データから、属性判定部１６により利用者の属性を判定する（ステップＳ４）。属性の判定には、例えば上記の図４の方法を利用することができる。次に、ステップＳ４とＳ２の結果を用いて、位置関係取得部１８により利用者とサイネージ１２との相対的な位置関係を取得する（ステップＳ５）。
　次に、取得した利用者の属性と位置関係から、サイネージ１２のディスプレイ画面における操作ボタンのタッチ操作可能範囲や情報コンテンツの表示範囲を設定する（ステップＳ６）。さらに、利用者の属性から表示する情報コンテンツを選択する（ステップＳ７）。ステップＳ６で設定した範囲に操作ボタン等を表示するとともに、ステップＳ７で選択した情報コンテンツを表示する（ステップＳ８）。これらのステップＳ６～Ｓ８の制御処理は、表示内容制御部２０が行う。
　このように、本実施の形態では、３次元センサ１４を用いて利用者の属性を判別し、さらに、利用者とサイネージ１２の位置関係を双方の形状データ等から取得し、利用者の属性と位置関係に合わせた適切な表示を行うことができる。特に、利用者とサイネージ１２の位置関係に合わせた操作インタフェースを実現することが可能となる。このため、本実施の形態によれば、ユーザビリティを向上した情報提供システムを提供することができる。
　また、本実施の形態によれば、必要以上にプライバシー情報を取り扱わない。３次元センサ１４を用いることで、従来の技術では難しかった、車イス利用者とベビーカー利用者の判別も容易である。
　上記の実施の形態では、表示装置がサイネージ１２で構成される場合を例にとり説明したが、本発明の表示装置はこれに限るものではなく、表示装置がタッチパネル自体であってもよいし、自動券売機等に備わるタッチパネル式の表示装置であってもよく、いずれの表示装置で構成しても上記と同様の作用効果を奏することができる。
　以上説明したように、本発明に係る情報提供システムによれば、所定の情報提供対象エリアに設置され、情報提供対象エリアに居る利用者に向けて操作部を含む情報を表示する表示機能と、利用者による操作部への所定の操作入力を受け付ける操作機能とを有する表示装置と、この表示装置の周辺の利用者を含む３次元形状データを取得する３次元センサと、取得した３次元形状データに基づいて利用者の属性を判別する利用者属性判別手段と、取得した３次元形状データに基づいて利用者と表示装置の位置関係を求める位置関係取得手段と、位置関係と利用者の属性に対応した位置に操作部を表示させる一方で、位置関係と利用者の属性に対応した情報コンテンツを表示装置に表示させる制御手段とを備えるので、ユーザビリティを向上した情報提供システムを提供することができる。
　また、本発明に係る情報提供方法によれば、所定の情報提供対象エリアに設置され、情報提供対象エリアに居る利用者に向けて操作部を含む情報を表示する表示機能と、利用者による操作部への所定の操作入力を受け付ける操作機能とを有する表示装置の周辺の利用者を含む３次元形状データを取得する３次元形状データ取得ステップと、取得した３次元形状データに基づいて利用者の属性を判別する利用者属性判別ステップと、取得した３次元形状データに基づいて利用者と表示装置の位置関係を求める位置関係取得ステップと、位置関係と利用者の属性に対応した位置に操作部を表示させる一方で、位置関係と利用者の属性に対応した情報コンテンツを表示装置に表示させる制御ステップとを備えるので、ユーザビリティを向上した情報提供方法を提供することができる。
　以上のように、本発明に係る情報提供システムおよび情報提供方法は、例えば地図情報の提供や広告等を目的としてショッピングエリアなどに設置されるデジタルサイネージやタッチパネルなどに有用であり、特に、ユーザビリティを向上するのに適している。
　１０　情報提供システム
　１２　サイネージ（表示装置）
　１４　３次元センサ
　１６　属性判定部（利用者属性判別手段）
　１８　位置関係取得部（位置関係取得手段）
　２０　表示内容制御部（制御手段）
　２２　タッチ操作可能範囲

Claims (2)

  1. 　所定の情報提供対象エリアに設置され、情報提供対象エリアに居る利用者に向けて操作部を含む情報を表示する表示機能と、利用者による操作部への所定の操作入力を受け付ける操作機能とを有する表示装置と、この表示装置の周辺の利用者を含む３次元形状データを取得する３次元センサと、取得した３次元形状データに基づいて利用者の属性を判別する利用者属性判別手段と、取得した３次元形状データに基づいて利用者と表示装置の位置関係を求める位置関係取得手段と、位置関係と利用者の属性に対応した位置に操作部を表示させる一方で、位置関係と利用者の属性に対応した情報コンテンツを表示装置に表示させる制御手段とを備えることを特徴とする情報提供システム。
  2. 　所定の情報提供対象エリアに設置され、情報提供対象エリアに居る利用者に向けて操作部を含む情報を表示する表示機能と、利用者による操作部への所定の操作入力を受け付ける操作機能とを有する表示装置の周辺の利用者を含む３次元形状データを取得する３次元形状データ取得ステップと、取得した３次元形状データに基づいて利用者の属性を判別する利用者属性判別ステップと、取得した３次元形状データに基づいて利用者と表示装置の位置関係を求める位置関係取得ステップと、位置関係と利用者の属性に対応した位置に操作部を表示させる一方で、位置関係と利用者の属性に対応した情報コンテンツを表示装置に表示させる制御ステップとを備えることを特徴とする情報提供方法。
PCT/JP2019/023771 2018-08-28 2019-06-14 情報提供システムおよび情報提供方法 WO2020044734A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US17/270,469 US20210325983A1 (en) 2018-08-28 2019-06-14 Information providing system and information providing method
SG11202101864WA SG11202101864WA (en) 2018-08-28 2019-06-14 Information providing system and information providing method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018159602A JP7272764B2 (ja) 2018-08-28 2018-08-28 情報提供システム
JP2018-159602 2018-08-28

Publications (1)

Publication Number Publication Date
WO2020044734A1 true WO2020044734A1 (ja) 2020-03-05

Family

ID=69644104

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/023771 WO2020044734A1 (ja) 2018-08-28 2019-06-14 情報提供システムおよび情報提供方法

Country Status (4)

Country Link
US (1) US20210325983A1 (ja)
JP (1) JP7272764B2 (ja)
SG (1) SG11202101864WA (ja)
WO (1) WO2020044734A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021250797A1 (ja) * 2020-06-10 2021-12-16 三菱電機株式会社 情報処理装置、情報提示システム、情報処理方法、及び情報処理プログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012519922A (ja) * 2009-10-20 2012-08-30 サムスン エレクトロニクス カンパニー リミテッド 物品提供装置、ディスプレイ装置及びこれを用いたｇｕｉ提供方法
JP2012215555A (ja) * 2011-03-30 2012-11-08 Advanced Telecommunication Research Institute International 計測装置，計測方法および計測プログラム
US20170060319A1 (en) * 2015-09-02 2017-03-02 Samsung Electronics Co., Ltd. Large format display apparatus and control method thereof

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002107150A (ja) * 2000-10-02 2002-04-10 Mazda Motor Corp 地図情報購入方法、地図情報購入システム、購入地図情報表示装置および地図情報配信装置
JP2005035397A (ja) * 2003-07-15 2005-02-10 Kaoru Shimizu 乗り物と駆動補助方法
JP5648840B2 (ja) * 2009-09-17 2015-01-07 清水建設株式会社 ベッド上及び室内の見守りシステム
US9253607B2 (en) * 2011-12-16 2016-02-02 Maxlinear, Inc. Method and system for location determination and navigation using textual information
US20180357981A1 (en) * 2017-06-13 2018-12-13 Misapplied Sciences, Inc. Coordinated multi-view display experiences

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012519922A (ja) * 2009-10-20 2012-08-30 サムスン エレクトロニクス カンパニー リミテッド 物品提供装置、ディスプレイ装置及びこれを用いたｇｕｉ提供方法
JP2012215555A (ja) * 2011-03-30 2012-11-08 Advanced Telecommunication Research Institute International 計測装置，計測方法および計測プログラム
US20170060319A1 (en) * 2015-09-02 2017-03-02 Samsung Electronics Co., Ltd. Large format display apparatus and control method thereof

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021250797A1 (ja) * 2020-06-10 2021-12-16 三菱電機株式会社 情報処理装置、情報提示システム、情報処理方法、及び情報処理プログラム
JPWO2021250797A1 (ja) * 2020-06-10 2021-12-16

Also Published As

Publication number Publication date
JP7272764B2 (ja) 2023-05-12
JP2020035096A (ja) 2020-03-05
US20210325983A1 (en) 2021-10-21
SG11202101864WA (en) 2021-03-30

Similar Documents

Publication Publication Date Title
CN102193730B (zh) 图像处理设备，图像处理方法和程序
TWI534661B (zh) 畫像辨識裝置及操作判定方法以及電腦程式
JP5779641B2 (ja) 情報処理装置、方法およびプログラム
WO2009139214A1 (ja) 表示装置および制御方法
US20090167682A1 (en) Input device and its method
US20150234569A1 (en) Vehicle user interface unit for a vehicle electronic device
CN103870802A (zh) 使用指谷操作车辆内的用户界面的系统和方法
JP5645444B2 (ja) 画像表示システムおよびその制御方法
JP2007331692A (ja) 車載電子装置およびタッチパネル装置
JP2018181338A (ja) 自律走行する走行車の動作方法
JP2003271283A (ja) 情報表示装置
JP2015047885A (ja) 車両搭載インタラクティブシステム
WO2020044734A1 (ja) 情報提供システムおよび情報提供方法
JP6070211B2 (ja) 情報処理装置、システム、画像投影装置、情報処理方法およびプログラム
JP6765884B2 (ja) 情報処理装置、情報処理方法及びプログラム
KR20150067679A (ko) 차량용 제스처 인식 시스템 및 그 방법
JP4831026B2 (ja) 情報提供装置、情報提供方法および情報提供プログラム
JP6315443B2 (ja) 入力装置、マルチタッチ操作の入力検出方法及び入力検出プログラム
JP2018054747A (ja) 画像表示装置、画像形成装置、及びプログラム
JP2021101324A (ja) ジェスチャ検出装置、ジェスチャ検出方法、およびプログラム
JP2017174037A (ja) 表示制御装置、表示制御方法及びプログラム
WO2021220623A1 (ja) 操作入力装置
JP2009071557A (ja) 電子ボード装置
KR101190353B1 (ko) 웹사이트 문자 및 숫자 입력 시스템 그 방법
JP2007094612A (ja) 入力装置、情報処理装置、及び情報処理方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19855859

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19855859

Country of ref document: EP

Kind code of ref document: A1