JP7074066B2 - 情報処理装置、情報処理方法、記録媒体、およびプログラム - Google Patents

情報処理装置、情報処理方法、記録媒体、およびプログラム Download PDF

Info

Publication number
JP7074066B2
JP7074066B2 JP2018550032A JP2018550032A JP7074066B2 JP 7074066 B2 JP7074066 B2 JP 7074066B2 JP 2018550032 A JP2018550032 A JP 2018550032A JP 2018550032 A JP2018550032 A JP 2018550032A JP 7074066 B2 JP7074066 B2 JP 7074066B2
Authority
JP
Japan
Prior art keywords
display unit
user
image
unit
assimilated
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018550032A
Other languages
English (en)
Other versions
JPWO2018087972A1 (ja
Inventor
靖 宮島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Sony Group Corp
Original Assignee
Sony Corp
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp, Sony Group Corp filed Critical Sony Corp
Publication of JPWO2018087972A1 publication Critical patent/JPWO2018087972A1/ja
Application granted granted Critical
Publication of JP7074066B2 publication Critical patent/JP7074066B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F9/00—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements
    • G09F9/30—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements
    • G09F9/302—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements characterised by the form or geometrical disposition of the individual elements
    • G09F9/3026—Video wall, i.e. stackable semiconductor matrix display modules
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F19/00—Advertising or display means not otherwise provided for
    • G09F19/22—Advertising or display means on roads, walls or similar surfaces, e.g. illuminated
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F23/00—Advertising on or in specific articles, e.g. ashtrays, letter-boxes
    • G09F23/0058—Advertising on or in specific articles, e.g. ashtrays, letter-boxes on electrical household appliances, e.g. on a dishwasher, a washing machine or a refrigerator
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F27/00—Combined visual and audible advertising or displaying, e.g. for public address
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F27/00—Combined visual and audible advertising or displaying, e.g. for public address
    • G09F27/005—Signs associated with a sensor
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F27/00—Combined visual and audible advertising or displaying, e.g. for public address
    • G09F2027/001—Comprising a presence or proximity detector

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Marketing (AREA)
  • Multimedia (AREA)
  • Economics (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Development Economics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Indicating And Signalling Devices For Elevators (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)

Description

本開示は、情報処理装置、情報処理方法、および記録媒体に関する。
一般的に、エレベーターの注意事項や、店舗内でユーザが自ら操作する必要のある装置の利用方法等を紙に記載して周辺に貼り付けて利用者に周知することが行われている。既に熟知している利用者にとっては不要な情報であるが、そうでないユーザにとっては役に立つ情報となる。
ここで、情報提示技術に関し、例えば下記特許文献１では、人体検出状況（人感センサによる検知）に応じて広告データの再生方法を選択制御し、店舗内の広告視聴効果を維持しつつ省電力運転を実現する情報提供装置が提案されている。
また、下記特許文献２では、視聴者の年齢層、性別、人数、人流、時間帯に応じて、適切な広告データを選択し、再生する電子看板装置が提案されている。
また、下記特許文献３では、電子看板に対するユーザの位置、人数、年齢、性別等に応じて、ユーザに見返りとしてのデジタルクーポン等を提供する電子看板システムが提案されている。
また、下記特許文献４には、通常は広告、案内表示、有事には避難誘導表示や特定のメッセージを出力する電子ペーパー可変表示機能看板装置が提案されている。
また、下記特許文献５には、ＩＣカード乗車券やクレジットカード等より収集された顧客の情報を集計、分析し、その結果に応じて、広告内容を切り替える広告表示システムが提案されている。
また、下記特許文献６には、顧客の特徴に統計的な傾向が認められた場合、その傾向に合った広告を選択して表示する画像表示方法が提案されている。
また、下記特許文献７には、庫内映像を表示する冷蔵庫が提案されている。
特開２０１０－１９１１５５号公報 国際公開第１３／１２５０３２号 特表２０１２－５２００１８号公報 特開２０１５－００４９２１号公報 特開２００８－２２５３１５号公報 特開２００２－０７３３２１号公報 特開２００２－８１８１８号公報
しかしながら、いずれの情報提示技術においても、常に何らかの情報は提示された状態であるため、文字や図形が表示画面に表示されていることで、周囲の景観を損ねるといった問題が発生していた。
また、注意喚起や使い方を記載した張り紙が何枚も貼られていると、その物自体のデザイン性が損なわれてしまう。また、張り紙が破れたり剥がれたり乱雑な状態のまま放置されると、治安の悪化にも影響する恐れがある。
そこで、本開示では、景観を守り、かつ、必要な情報を適切に提示することが可能な情報処理装置、情報処理方法、および記録媒体を提案する。
本開示によれば、周辺の状況を把握するためのセンサにより検出されたセンサデータを受信する通信部と、前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記センサの周辺に脱着可能に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、を備え、前記同化画像は、前記表示部が設置される領域を前記表示部が設置されていない状態で撮像した画像に基づき取得される、情報処理装置を提案する。
本開示によれば、周辺の状況を把握するためのセンサにより検出された、電子機器に対する操作情報が含まれるセンサデータを受信する通信部と、前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記電子機器に設けられる表示部に適切な情報を含む画像を表示するための制御信号を生成し；情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、を備え、前記制御部は、前記操作情報に応じて、前記ユーザの前記電子機器に対する熟練度を、前記電子機器による１つの動作結果を得るための一連の操作における複数のステップそれぞれに対して閾値判定した結果に基づき認識すると共に、当該ユーザと当該熟練度を関連付けて記憶部に記憶するように制御し；前記ユーザの前記電子機器に対する熟練度に応じて、情報の提示が不要と判断したときには、前記表示部に、当該表示部が設置される設置面に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する、情報処理装置を提案する。
本開示によれば、周辺の状況を把握するためのセンサにより検出されたセンサデータを受信する通信部と、前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、収納部の前面に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、を備え、前記表示部は、前記収納部内のカメラにより撮像された収納部内画像を表示可能であり、前記制御部は、前記センサデータに基づき、特定のユーザが認識された際に、前記ユーザによる特定の物を指定する指示に応じて、前記収納部内のカメラにより撮像された収納部内画像に対して、当該特定の物と、当該特定の物以外の物とで異なる加工を施した上で、前記収納部内画像を表示するための制御信号を生成し；前記特定のユーザが認識されていないときには、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成し；生成した制御信号を前記通信部を介して前記表示部に送信するように制御する、情報処理装置を提案する。
本開示によれば、プロセッサが、周辺の状況を把握するためのセンサにより検出されたセンサデータを受信することと、前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記センサの周辺に脱着可能に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御することと、を含み、前記同化画像は、前記表示部が設置される領域を前記表示部が設置されていない状態で撮像した画像に基づき取得される、情報処理方法を提案する。
本開示によれば、プロセッサが、周辺の状況を把握するためのセンサにより検出された、電子機器に対する操作情報が含まれるセンサデータを通信部により受信することと、前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記電子機器に設けられる表示部に適切な情報を含む画像を表示するための制御信号を生成し；情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御することと、を含み、前記制御することは、前記操作情報に応じて、前記ユーザの前記電子機器に対する熟練度を、前記電子機器による１つの動作結果を得るための一連の操作における複数のステップそれぞれに対して閾値判定した結果に基づき認識すると共に、当該ユーザと当該熟練度を関連付けて記憶部に記憶するように制御し；前記ユーザの前記電子機器に対する熟練度に応じて、情報の提示が不要と判断したときには、前記表示部に、当該表示部が設置される設置面に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する、情報処理方法を提案する。
本開示によれば、プロセッサが、周辺の状況を把握するためのセンサにより検出されたセンサデータを通信部により受信することと、前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、収納部の前面に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御することと、を含み、前記表示部は、前記収納部内のカメラにより撮像された収納部内画像を表示可能であり、前記制御することは、前記センサデータに基づき、特定のユーザが認識された際に、前記ユーザによる特定の物を指定する指示に応じて、前記収納部内のカメラにより撮像された収納部内画像に対して、当該特定の物と、当該特定の物以外の物とで異なる加工を施した上で、前記収納部内画像を表示するための制御信号を生成し；前記特定のユーザが認識されていないときには、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成し；生成した制御信号を前記通信部を介して前記表示部に送信するように制御する、情報処理方法を提案する。
本開示によれば、コンピュータを、周辺の状況を把握するためのセンサにより検出されたセンサデータを受信する通信部と、前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記センサの周辺に着脱可能に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、として機能させ、前記同化画像は、前記表示部が設置される領域を前記表示部が設置されていない状態で撮像した画像に基づき取得されるためのプログラムが記録された、記録媒体を提案する。
本開示によれば、コンピュータを、周辺の状況を把握するためのセンサにより検出された、電子機器に対する操作情報が含まれるセンサデータを受信する通信部と、前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記電子機器に設けられる表示部に適切な情報を含む画像を表示するための制御信号を生成し；情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、して機能させ、前記制御部は、前記操作情報に応じて、前記ユーザの前記電子機器に対する熟練度を、前記電子機器による１つの動作結果を得るための一連の操作における複数のステップそれぞれに対して閾値判定した結果に基づき認識すると共に、当該ユーザと当該熟練度を関連付けて記憶部に記憶するように制御し；前記ユーザの前記電子機器に対する熟練度に応じて、情報の提示が不要と判断したときには、前記表示部に、当該表示部が設置される設置面に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御するためのプログラムが記録された、記録媒体を提案する。
本開示によれば、コンピュータを、周辺の状況を把握するためのセンサにより検出されたセンサデータを受信する通信部と、前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、収納部の前面に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、として機能させ、前記表示部は、前記収納部内のカメラにより撮像された収納部内画像を表示可能であり、前記制御部は、前記センサデータに基づき、特定のユーザが認識された際に、前記ユーザによる特定の物を指定する指示に応じて、前記収納部内のカメラにより撮像された収納部内画像に対して、当該特定の物と、当該特定の物以外の物とで異なる加工を施した上で、前記収納部内画像を表示するための制御信号を生成し；前記特定のユーザが認識されていないときには、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成し；生成した制御信号を前記通信部を介して前記表示部に送信するように制御するためのプログラムが記録された、記録媒体を提案する。
本開示によれば、コンピュータを、周辺の状況を把握するためのセンサにより検出されたセンサデータを受信する通信部と、前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記センサの周辺に着脱可能に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、として機能させ、前記同化画像は、前記表示部が設置される領域を前記表示部が設置されていない状態で撮像した画像に基づき取得されるためのプログラムを提案する。
本開示によれば、コンピュータを、周辺の状況を把握するためのセンサにより検出された、電子機器に対する操作情報が含まれるセンサデータを受信する通信部と、前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記電子機器に設けられる表示部に適切な情報を含む画像を表示するための制御信号を生成し；情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、して機能させ、前記制御部は、前記操作情報に応じて、前記ユーザの前記電子機器に対する熟練度を、前記電子機器による１つの動作結果を得るための一連の操作における複数のステップそれぞれに対して閾値判定した結果に基づき認識すると共に、当該ユーザと当該熟練度を関連付けて記憶部に記憶するように制御し；前記ユーザの前記電子機器に対する熟練度に応じて、情報の提示が不要と判断したときには、前記表示部に、当該表示部が設置される設置面に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御するためのプログラムを提案する。
本開示によれば、コンピュータを、周辺の状況を把握するためのセンサにより検出されたセンサデータを受信する通信部と、前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、収納部の前面に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、として機能させ、前記表示部は、前記収納部内のカメラにより撮像された収納部内画像を表示可能であり、前記制御部は、前記センサデータに基づき、特定のユーザが認識された際に、前記ユーザによる特定の物を指定する指示に応じて、前記収納部内のカメラにより撮像された収納部内画像に対して、当該特定の物と、当該特定の物以外の物とで異なる加工を施した上で、前記収納部内画像を表示するための制御信号を生成し；前記特定のユーザが認識されていないときには、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成し；生成した制御信号を前記通信部を介して前記表示部に送信するように制御するためのプログラムを提案する。
以上説明したように本開示によれば、景観を守り、かつ、必要な情報を適切に提示することが可能となる。
なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
本開示の一実施形態による情報処理システムの概要について説明する図である。 注意喚起等の張り紙により景観が損なわれる場合について説明する図である。 本実施形態による情報処理端末の外観の一例を示す図である。 第１の実施例による情報処理システムの構成の一例を示す図である。 第１の実施例による情報提示の動作処理を示すフローチャートである。 第１の実施例によるペット同伴者向けのメッセージの一例と台車利用者向けのメッセージの一例を示す図である。 第１の実施例による複数のメッセージを表示する一例と、非住人向けのメッセージの一例を示す図である。 第１の実施例によるカモフラージュ画像の生成処理を示すフローチャートである。 カモフラージュ画像生成の過程において用いられる画像の一例を示す図である。 カモフラージュ画像生成の過程において用いられる画像の一例を示す図である。 情報処理端末でのカモフラージュ画像の表示とメッセージ画像の切り替え例を示す図である。 第２の実施例の概要について説明する図である。 第２の実施例による情報処理システムの構成の一例を示す図である。 第２の実施例による情報処理システムの動作処理を示すフローチャートである。 第２の実施例による初心者用および熟練者用ＵＩの一例を示す図である。 第３の実施例の概要について説明する図である。 第３の実施例による冷蔵庫装置の構成の一例を示す図である。 第３の実施例による動作処理を示すフローチャートである。 第３の実施例による庫内表示の一例を示す図である。 第４の実施例の概要について説明する図である。 第４の実施例による情報処理システムの構成の一例を示す図である。 第４の実施例の動作処理を示すフローチャートである。
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
また、説明は以下の順序で行うものとする。
１．本開示の一実施形態による情報処理システムの概要
２．第１の実施例
２－１．構成
２－２．動作処理
３．第２の実施例
３－１．構成
３－２．動作処理
４．第３の実施例
４－１．構成
４－２．動作処理
５．第４の実施例
５－１．構成
５－２．動作処理
６．まとめ
＜＜１．本開示の一実施形態による情報処理システムの概要＞＞
図１は、本開示の一実施形態による情報処理システムの概要について説明する図である。図１に示すように、本実施形態による情報処理システムでは、情報提示が可能な情報処理端末１（１ａ～１ｃ）が、周辺の状況に応じて情報提示が不要と判断された場合には周囲に同化するようなカモフラージュ画像（同化画像）を表示することで、景観を守り、かつ、必要な情報を適切に提示することを特徴とする。例えばエレベーターの周辺に情報処理端末１ａ～１ｃが設置されている際に、周囲の模様と同化する模様を表示することで、エレベーター周辺の景観を損ねないようにすることが可能となる。
この場合、例えばユーザＡがエレベーター前に来た場合も、ユーザＡがペット連れていないため情報提示不要と判断し、図１左に示すように、情報処理端末１ａ～１ｃは、周囲の模様と同化する模様の表示を継続する。一方、ユーザＢがエレベーター前に来た場合は、ユーザＢがペットを連れていることから情報提示が必要と判断し、図１右に示すように、情報処理端末１ａ～１ｃは、ペット連れ利用者向けの注意事項やルールを表示する。
（背景）
上述したように、注意喚起や使い方を記載した張り紙が何枚も貼られていると、その物自体のデザイン性が損なわれ、また、張り紙が破れたり剥がれたり乱雑な状態のまま放置されると、治安の悪化に影響する恐れがある。
図２は、注意喚起等の張り紙により景観が損なわれる場合について説明する図である。図２に示すように、例えば店舗内に載置され、利用者が自ら操作してコーヒーを淹れるコーヒーマシーン２００や、マンション、ホテル、またはビル等のエレベーターホール２１０等において、注意事項等の張り紙により、せっかくのデザイン性が損なわれるという事態が頻繁に生じている。一般的に、利用者の多様性や、デザイン自体の分かり難さ、また、初めて利用する者に対しての注意喚起等、様々な状況全てに対応しようとすることから無理が生じ、デザイナーが本来デザインした見た目や景観がどんどん損なわれていくという問題がある。このような問題は、他にも例えば空港や駅等の公共施設においても生じている。すなわち、空間デザイナーにより設計されたデザインが、注意喚起のための張り紙や垂れ幕により阻害されている場合がある。特に駅は通勤時間帯によっては歩行者の量が多くなり、トラブルを回避するために歩く方向（右側通行、左側通行）を指示する張り紙や垂れ幕があちこちに展示されている。
また、心情的にも景観が乱れているのを好む人はおらず、景観の乱れが治安全体を悪くするということも考えられる。例えば、Broken Windows理論という、落書き等による景観の乱れが治安全体を悪くするという考え方もある。
すなわち、貼り紙が乱雑な状態で放置され、景観が乱れていると、壁の汚れや傷などが目立ちにくく、気が付くと汚れや傷みが進み、恣意的に汚される可能性も高い。景観の乱れが加速することで、ゴミのポイ捨てが増え始め、不良者の溜まり場となり、器物破損や盗難等の重大な犯罪の増加トリガとなる恐れがある。
そこで、本開示による情報処理システムでは、張り紙等による景観の乱れを防ぐため、情報提示が不要な間は、カモフラージュ画像を表示して情報処理端末１を周囲に同化させるよう制御する。そして周辺の状況（ユーザの理解度、状況、環境等）に応じて情報提示が必要と判断した場合は適切な情報を表示することを可能とする。
ここで、本実施形態による情報処理端末１（サイネージデバイス）は、例えば電子ペーパー端末により実現される。図３は、本実施形態による情報処理端末１の外観の一例を示す図である。図３に示すように、情報処理端末１は、ほぼ全体に表示部１４（例えばフルカラー電子ペーパー）が設けられ、一部に、周辺の状況を認識するためのカメラ１２（例えば広角カメラ）や、表示以外でユーザに注意喚起等の音声を出力するための音声出力部（スピーカ）１３（１つであってもよい）と、他のカメラで撮像された画像等のデータを記憶媒体から読み出すための記憶媒体Ｉ／Ｆ（インタフェース）１６（例えばカードスロットやＵＳＢインタフェース等）が設けられる。情報処理端末１は、周囲に同化するためのカモフラージュ画像を表示部１４に表示して通常は周囲の景観を損ねないようにし、周辺の状況に応じて情報提示が必要と判断した場合は、適切な情報を表示部１４に表示するよう制御する。
以上、本実施形態による情報処理システムの概要について説明した。続いて、このような本実施形態による情報処理システムについて、以下複数の実施例を用いて具体的に説明する。
＜＜２．第１の実施例＞＞
まず、第１の実施例について図４～図１１を参照して説明する。第１の実施例では、図１を参照して説明したエレベーターホールにおいて利用者にエレベーターの利用ルールを提示する場合について説明する。
＜２－１．構成＞
まず、第１の実施例による情報処理システムの構成について図４を参照して説明する。図４に示すように、本実施例による情報処理システムは、情報処理端末１－１と、個人識別サーバ２を含み、情報処理端末１－１と個人識別サーバ２はネットワーク３を介して接続される。
個人識別サーバ２は、情報処理端末１－１からの問い合わせに応じて、情報処理端末１－１のカメラ１２で撮像された人物の顔認識を行い、人物の個人識別と、属性等を返信することが可能である。本実施例では、例えばマンションの居住者の顔画像（またはその特徴量、パターン）が予め個人識別サーバ２に登録され、情報処理端末１－１からの問い合わせに応じて、カメラ１２で撮像された人物がマンションの住人であるか否かを判断し得る。
情報処理端末１－１は、図４に示すように、制御部１０、通信部１１、カメラ１２、音声出力部１３、表示部１４、記憶部１５、および記憶媒体Ｉ／Ｆ１６を有する。
制御部１０は、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理端末１－１内の動作全般を制御する。制御部１０は、例えばＣＰＵ（Central Processing Unit）、マイクロプロセッサ等の電子回路によって実現される。また、制御部１０は、使用するプログラムや演算パラメータ等を記憶するＲＯＭ（Read Only Memory）、及び適宜変化するパラメータ等を一時記憶するＲＡＭ（Random Access Memory）を含んでいてもよい。
また、本実施形態による制御部１０は、判断部１０１、画面生成部１０２、および表示制御部１０３として機能する。判断部１０１は、周辺の状況に応じて、情報提示を行うか否かを判断する。例えば判断部１０１は、近くに居る対象人物の理解度（リテラシ、慣れているか否か等）、状況（誰と／何と一緒に居るか、利用の目的や用途は何であるか等）、または環境の変化（人流、日時、イベント等）に基づいて、対象人物への情報提示を行うか否かを判断する。これにより、ダイナミックなＵＩ／内容提示を行うことが可能となる。
画面生成部１０２は、判断部１０１の判断結果に従って、表示部１４に表示する画面を生成する。例えば画面生成部１０２は、判断部１０１により情報提示が必要であると判断された場合、対象人物に提示する情報（予め設定されていてもよいし、対象人物に応じて選択してもよい）を含む画面を生成する。一方、判断部１０１により情報提示が不要であると判断された場合、画面生成部１０２は、周囲の景観に同化するようなカモフラージュ画像の画面を生成する。これにより、情報提示を行わない場合は周囲の景観を損ねないようにすることができる。
表示制御部１０３は、画面生成部１０２により生成された画面を表示部１４に表示するよう制御する。
通信部１１は、有線または無線によりネットワーク３と接続し、ネットワーク上の個人識別サーバ２とデータの送受信を行う。通信部１１は、例えば有線／無線ＬＡＮ（Local Area Network）、またはＷｉ－Ｆｉ（登録商標）、携帯通信網（ＬＴＥ（Long Term Evolution）、３Ｇ（第３世代の移動体通信方式））等によりネットワーク３と通信接続する。
本実施例による通信部１１は、個人識別サーバ２に、カメラ１２で撮像した対象人物の顔画像を送信し、マンションの住人であるか否かの識別を要求する。なお、本実施例では、個人識別を個人識別サーバ２（クラウド）で行っているが、本実施例はこれに限定されず、情報処理端末１－１（ローカル）で行うようにしてもよい。特にマンションの場合、住人の数は限られているため、大規模な記憶域は必要ない。
カメラ１２は、撮像レンズ、絞り、ズームレンズ、及びフォーカスレンズ等により構成されるレンズ系、レンズ系に対してフォーカス動作やズーム動作を行わせる駆動系、レンズ系で得られる撮像光を光電変換して撮像信号を生成する固体撮像素子アレイ等を有する。固体撮像素子アレイは、例えばＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）センサアレイや、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサアレイにより実現されてもよい。
本実施例によるカメラ１２は、例えばエレベーターの利用者を撮像し、撮像画像を制御部１０に出力する。
音声出力部１３は、音声信号を再生するスピーカと、スピーカに対するアンプ回路を有する。音声出力部１３は、制御部１０の制御に従って、例えば表示制御部１０３により表示部１４の表示画面が切り替えられた際に、表示の変更に気付かせるために何らかの音声や音を出力してユーザの注意を引くことが可能である。
表示部１４は、表示制御部１０３の制御に従って、情報提示画面やカモフラージュ画像を表示する。また、表示部１４は、上述したように、例えば電子ペーパー型ディスプレイにより実現される。
記憶部１５は、制御部１０の処理に用いられるプログラムや演算パラメータ等を記憶するＲＯＭ（Read Only Memory）、および適宜変化するパラメータ等を一時記憶するＲＡＭ（Random Access Memory）により実現される。例えば記憶部１５は、エレベーター利用者向けの各種メッセージ情報を記憶する。また、個人識別を情報処理端末１－１で行う場合は、マンションの住人の顔画像が記憶部１５に予め登録される。
記憶媒体Ｉ／Ｆ１６は、記憶媒体から情報を読み出すためのインタフェースであって、例えばカードスロットやＵＳＢインタフェース等が想定される。本実施形態では、例えば他のカメラで撮像されたエレベーターホールの撮像画像を記憶媒体から取得し、制御部１０の画面生成部１０２によりカモフラージュ画像を生成してもよい。
以上、本実施形態による情報処理端末１－１の構成について具体的に説明した。なお情報処理端末１－１の構成は図４に示す例に限定されず、例えば、音声入力部（マイクロホン）、各種センサ（位置情報取得部、圧力センサ、環境センサ等）、または操作入力部（タッチパネル等）をさらに有していてもよい。また、図４に示す情報処理端末１－１の構成のうち少なくとも一部が別体（例えば、サーバ側）にあってもよい。
＜２－２．動作処理＞
まず、第１の実施例による情報提示の動作処理について図５を参照して説明する。図５は、本実施例による情報提示の動作処理を示すフローチャートである。
図５に示すように、まず、エレベーターホールに設置された情報処理端末１－１は、カメラ１２により、エレベーターホールの撮像画像を取得する（ステップＳ１０３）。
次に、情報処理端末１－１の判断部１０１は、画像認識を行い（ステップＳ１０６）、カメラの前に人が立っているか、すなわちエレベーター利用者が居るか否かを判断する（ステップＳ１０９）。
次いで、カメラの前に人がいる場合（ステップＳ１０９／Ｙｅｓ）、判断部１０１は、画像認識の結果に基づいて、当該人物がペット（主に犬、猫などの動物）と一緒にいるか否かを判断する（ステップＳ１１２）。
次に、ペットと一緒にいると判断された場合（ステップＳ１１２／Ｙｅｓ）、画面生成部１０２は、ペット同伴者向けのメッセージを表示する画面を生成し、表示制御部１０３により表示部１４に表示する（ステップＳ１１５）。
次いで、当該人物が台車を持っているか否かを判断し（ステップＳ１１８）、持っている場合は（ステップＳ１１８／Ｙｅｓ）、既にメッセージが表示されている場合にはレイアウトを調整する（ステップＳ１２１）。例えばエレベーター前に複数の人物がいて、既にペット同伴者向けのメッセージを表示している場合は、ペット同伴者向けのメッセージのレイアウトを調整して新しいメッセージを表示できる領域を作る。
次に、情報処理端末１－１は、台車持込み者向けメッセージを生成し、表示する（ステップＳ１２４）。
次いで、当該人物の撮像画像に基づいて個人識別を行い、マンションの住人であるか否かを判断する（ステップＳ１２７）。個人識別は、例えば個人識別サーバ２に要求してもよい。
次に、マンションの住人ではないと判断された場合（ステップＳ１２７／Ｙｅｓ）、非住人向けのメッセージを表示する必要があるが、既にメッセージが表示されている場合にはレイアウトを調整する（ステップＳ１３０）。
そして、情報処理端末１－１は、非住人向けのメッセージを表示する（ステップＳ１３３）。これにより初めてこのマンションのエレベーターを利用する者も、当エレベーターのルールを把握することができる。
なお、表示部１４に表示される各メッセージの一例を図６および図７に示す。図６は、ペット同伴者向けのメッセージの一例と台車利用者向けのメッセージの一例を示す図である。図６左に示すように、メッセージ画面１４０により、ペット同伴者への注意事項が表示される。また、図６右に示すように、メッセージ画面１４１により、台車持込み者への注意事項が表示される。
また、図７は、複数のメッセージを表示する一例と、非住人向けのメッセージの一例を示す図である。図７左に示すように、メッセージ画面１４２は、メッセージ領域が分割されており、例えばペット同伴者向けメッセージと台車持込み者向けメッセージの双方が表示されている。なお複数のメッセージを表示する方法は、これに限定されず、例えば複数のメッセージを一定時間間隔で交互に表示してもよいし、縦または横方向にスクロールしながら表示してもよい。
また、図７右に示すように、メッセージ画面１４３により、非住人向けの注意事項が表示される。なお、マンション住人であるか否かの個人識別は、顔画像認識に限定されない。例えば、マンションによってはセキュリティの観点からキー（やカード）をタッチするとエレベーターを呼ぶ仕組みになっていることがあり、来客の場合にはインターホンで解錠するとエレベーターが自動的にエントランスフロアに降りる仕組みとなっている。したがって、キーを用いたかインターホンを用いたかによって住人であるか来客（非住人）であるかを識別するようにしてもよい。
続いて、カメラの前に人が立っていない（エレベーターを待っている人がいない）場合（ステップＳ１０９／Ｎｏ）、既にカモフラージュ画像が表示されている場合（ステップＳ１３６／Ｎｏ）は、そのまま維持する。具体的には、表示部１４に電子ペーパーを利用することで、一度表示した画像の保持に電力が不要なため、既にカモフラージュ画像が表示されていれば新たな処理は必要ない。
一方、表示されていない場合（例えば上述したメッセージ画面１４０～１４３が表示されている場合）は（ステップＳ１３６／Ｎｏ）、カモフラージュ画像を表示する（ステップＳ１３９）。
このように、エレベーターの前に来た人物がペット同伴者等、メッセージが必要な利用者である場合は所定のメッセージの提示が行われ、メッセージを提示する対象者に該当しない場合はカモフラージュ画像の表示が維持されるため、エレベーターホールの景観を守ることが可能となる。
以上、本実施例による動作処理について具体的に説明した。なお、図５を参照して説明した動作処理では、情報提示のためのいくつかの条件を例示したが、これは一例であって、他の条件に基づいて情報提示の判断を行うことも当然可能である。例えば自転車を認識した場合、自転車持ち込み用のエレベーターに誘導する等の、自転車持ち込み者向けの注意事項を示すメッセージを表示してもよい。
また、第１の実施例では、情報処理端末１－１がエレベーターホールに設置される場合について説明したが、本実施例はこれに限定されず、例えば、禁煙の場所に情報処理端末１－１を設置して、普段はカモフラージュ画像を表示させ、煙草を吸おうとしている（または吸っている）人を認識した場合には、「禁煙」のサインの表示画面に切り換えるようにしてもよい。
（カモフラージュ画像の生成）
続いて、カモフラージュ画像の生成について図８～図１１を参照して説明する。
図８は、本実施例によるカモフラージュ画像の生成処理を示すフローチャートである。図９～図１０は、カモフラージュ画像生成の過程において用いられる画像の一例を示す図である。
図８に示すように、まず、情報処理端末１－１を設置していない状態で、設置予定の場所をデジタルカメラ等で撮影し、その画像Ａ（図９に示す画像３０参照）を、情報処理端末１－１で取得する（ステップＳ１４３）。取得の方法は特に限定しないが、通信部１１を介して無線でデジタルカメラ等から受信してもよいし、記憶媒体Ｉ／Ｆを用いて、ＵＳＢやＳＤカード等のストレージメディアから取得してもよい。また、情報処理端末１－１のカメラ１２で情報処理端末１－１を設置していない状態の場所を撮影してもよい。なお、本処理は、情報処理端末１－１で行う場合について説明しているが、サーバ側で行う場合、撮影した画像はサーバに送信される。
次に、取得した画像Ａの特徴点Ｆを抽出する（図９に示す画像３１参照）（ステップＳ１４６）。この特徴点は、マーカレスＡＲや画像認識などで一般的に行われている特徴点抽出（e.g. ＳＩＦＴ、ＳＵＲＦ、Ｈａａｒ－ｌｉｋｅ等）が用いられる。
次いで、ユーザ操作に応じて、情報処理端末１－１の表示部１４にマーカ画像を表示する（ステップＳ１４９）。ユーザ（例えば管理者）は、マーカ画像が表示された情報処理端末１－１を実際に設置する場所に固定する。マーカ画像は撮影画像内の情報処理端末１－１を認識するためのものであって、認識さえできればどのようなマーカ画像であってもよい。
次に、情報処理端末１－１は、情報処理端末１－１を設置した状態で設置場所を撮影した画像Ａ’（図９の画像３２参照）を取得する（ステップＳ１５２）。
次いで、情報処理端末１－１の画面生成部１０２は、画像Ａ’に対して特徴点Ｆ’を抽出する（図１０の画像３３参照）（ステップＳ１５５）。また、画面生成部１０２は、画像Ａ’からマーカ画像を認識し、位置を求める（ステップＳ１５８）。なお図１０の画像３３では、マーカ部分に特徴点が抽出されていないが、これは説明上、図面を見やすくするためであって、実際には特徴点が抽出される可能性が高い。
次に、画面生成部１０２は、特徴点Ｆと特徴点Ｆ’をマッチングすることで、画像Ａと画像Ａ’の位置、回転、大きさの違いを検出し、画像Ａ’の情報処理端末１－１の設置位置（すなわち、マーカ画像の位置）が、画像Ａのどの部分にあたるかを検出可能する（ステップＳ１５８）。
次いで、画面生成部１０２は、求めた位置関係に基づいて、画像Ａ’におけるマーカ画像の位置と同じ位置関係になる部分（すなわち、情報処理端末１－１が設置された位置に相当する部分）の画像Ｓを画像Ａから抽出する（図１０の画像３４参照）（ステップＳ１６１）。画像Ａから抽出したかかる画像Ｓが、カモフラージュ画像に相当する。
そして、情報処理端末１－１は、画像Ｓを表示部１４に表示することで、情報処理端末１－１を周囲の景観に同化させることが可能となる（ステップＳ１６４）。ここで、図１１に、生成したカモフラージュ画像（画像Ｓ）の表示とメッセージ画像を切り替える例を示す。図１１の上段に示すように、情報処理端末１－１にカモフラージュ画像（画像Ｓ）を表示することで、情報処理端末１－１を周囲に同化させ、非常に目立ち難くすることで、エレベーターホールの景観を守ることが可能となる。一方、エレベーター利用者向けのメッセージの提示が必要となった場合は、図１１の下段に示すように、情報処理端末１－１にメッセージ画像１４４を表示することで、利用者への注意喚起を適切に行うことが可能となる。
以上、本実施例によるカモフラージュ画像の生成処理について具体的に説明した。なお、カモフラージュ画像の生成は、情報処理端末１－１で行われることに限定されず、例えばサーバ上で行われてもよい。
また、上述した実施例では、情報処理端末１－１の表示部１４を電子ペーパーで実現される場合について説明したが、本開示はこれに限定されない。例えば、プロジェクターを利用し、プロジェクション方式によりメッセージを提示する方法も考え得る。この場合、景観を守るために、情報提示の必要が無い時は映像をプロジェクションしないようにすればよい（つまり、元の背景がそのまま見えるようにする）ため、カモフラージュ画像の作成は不要となる。
さらに、一般の街中にある大型のデジタルサイネージでの実現を考慮する場合、光学迷彩の仕組みを利用することで、大型のデジタルサイネージも景観に同化させることが可能となる。具体的には、例えばデジタルサイネージの両面に表示画面を設け、それぞれ反対側に設けられたカメラで撮影した撮影画像を表示することで、デジタルサイネージの向こう側の景色が見える状態となり、景観を守ることが可能となる。なお、カモフラージュ画像は、カメラによりリアルタイムで撮影された撮影画像を表示するようにしてもよいし、予め生成しておいてもよい。
＜＜３．第２の実施例＞＞
次に、コンビニエンスストア等に載置されているセルフサービスのコーヒーサーバにおいて利用者にコーヒーサーバの注意喚起や説明を提示する場合について図１２～図１４を参照して説明する。
図１２は、第２の実施例の概要について説明する図である。近年、コンビニエンスストア等にセルフサービスのコーヒーサーバが普及しており、コーヒーサーバのデザイン性も高いものとなってきている。しかしながら、デザイン上、外国語で表記されたり、省略化されたり、ボタンだけの構成となっていることが多く、不慣れな者や初めて利用する者には、分かり難いデザインとなっていた。昨今では、このような不便さを解消するために、店員が張り紙をしたり、ボタンの意味を記載したシール等が貼られていることも多く見受けられるが、デザイン性が損なわれ、乱雑とした雰囲気になってしまうという問題もあった。
そこで、本実施例では、図１２に示すように、コーヒーサーバ５に設置された情報処理端末１－２において、普段は景観に同化するカモフラージュ画像１５０（例えばコーヒーのイラスト等、おしゃれな外観）を表示し、景観を守ることを可能とする。そして、例えばカメラ１２で利用者の個人識別を行い、熟練者（何回も利用している者）であれば、熟練者用ＵＩ（例えばデザイン性の高く説明が無い画面であって、周囲の景観を損ねることのないカモフラージュ画像）を表示する。一方、初心者（初めての利用者、若しくは高齢者や子供等の操作に不慣れであると推定される者）であれば、初心者用ＵＩ（例えばデザイン性は低いが分りやすい説明が表示される画面）を表示するようにする。これにより、普段は景観を守りつつも、必要な際は適宜情報提示を行うことが可能となる。
＜３－１．構成＞
まず、第２の実施例による情報処理システムの構成について図１３を参照して説明する。図１３に示すように、本実施例による情報処理システムは、情報処理端末１－２と、個人識別サーバ２を含み、情報処理端末１－２と個人識別サーバ２はネットワーク３を介して接続される。
個人識別サーバ２は、第１の実施例と同様に、情報処理端末１－２からの問い合わせに応じて、情報処理端末１－２のカメラ１２で撮像された人物の顔認識を行い、人物の個人識別と、属性等を返信することが可能である。なお本実施例では、個人識別サーバ２は、例えばコンビニエンスストアの利用者の顔画像（またはその特徴量、パターン）に基づいて個人識別し、さらに識別した利用者の利用回数や利用時の操作時間等のデータを蓄積し得る。また、個人識別サーバ２は、情報処理端末１－２からの問い合わせに応じて、カメラ１２で撮像された人物が熟練者であるか否かを判断し得る。
情報処理端末１－２は、図１３に示すように、制御部１０、通信部１１、カメラ１２、音声出力部１３、表示部１４、記憶部１５、タッチパネル１７、およびタイマー１８を有する。
制御部１０は、第１の実施例と同様に、判断部１０１、画面生成部１０２、および表示制御部１０３として機能する。本実施例による判断部１０１は、コーヒーサーバを利用するユーザが、熟練者であるか否か（対象人物の理解度）に応じて、どのような情報提示を行うかを判断する。
画面生成部１０２は、判断部１０１の判断結果に従って、表示部１４に表示する画面を生成する。例えば画面生成部１０２は、判断部１０１により熟練者向けの情報提示が必要であると判断された場合、熟練者向けのＵＩを生成する。熟練者向けのＵＩは、例えばデザイン性が高く、景観をより良くするものが想定される。一方、判断部１０１により初心者向けの情報提示が必要であると判断された場合、初心者向けのＵＩを生成する。また、画面生成部１０２は、利用者がいない場合や操作が終了した場合に表示するデフォルトのＵＩ（景観を損ねないカモフラージュ画像）も生成し得る。デフォルトのＵＩは、背景に同化させる（コーヒーサーバ５と同じ色、模様）にしてもよい。図１２に示す例では、少なくとも客が見つけることができるよう、最低限コーヒーサーバであることが分かる程度の表示として、コーヒーのイラストを表示し、背景はコーヒーサーバ５と同じ色、模様にしてもよい。なお各種操作画面の色合いは、店舗の雰囲気に合わせて調和する色を使うようにしてもよい。
表示制御部１０３は、画面生成部１０２により生成された画面を表示部１４に表示するよう制御する。
通信部１１、カメラ１２、音声出力部１３、表示部１４、および記憶部１５は、第１の実施例と同様であるため、ここでの説明は省略する。
タッチパネル１７は、表示部１４に設けられ、表示部１４に表示された操作画面（熟練者用ＵＩ、初心者用ＵＩ）に対するユーザの操作入力を検出し、制御部１０に出力する。
以上、本実施形態による情報処理端末１－１の構成について具体的に説明した。なお情報処理端末１－１の構成は図４に示す例に限定されず、例えば、音声入力部（マイクロホン）、各種センサ（位置情報取得部、圧力センサ、環境センサ等）、または操作入力部（タッチパネル等）をさらに有していてもよい。また、図４に示す情報処理端末１－１の構成のうち少なくとも一部が別体（例えば、サーバ側）にあってもよい。情報処理端末１－２は、ユーザによる操作入力情報を、通信部１１を介して、情報処理端末１－２が取り付けられているコーヒーサーバ５に送信する。
タイマー１８は、ユーザによるコーヒーサーバ５や、表示部１４に表示した操作画面への操作時間を計測し、制御部１０に出力する。かかる操作時間は、当該ユーザの操作に関する情報として、通信部１１から個人識別サーバ２に送信され、蓄積され得る。
以上、本実施形態による情報処理端末１－２の構成について具体的に説明した。なお情報処理端末１－２の構成は図１３に示す例に限定されず、例えば、音声入力部（マイクロホン）、各種センサ（位置情報取得部、圧力センサ、環境センサ等）をさらに有していてもよい。また、図１３に示す情報処理端末１－１の構成のうち少なくとも一部が別体（例えば、コーヒーサーバ５や、ネットワーク上のクラウドサーバ）にあってもよい。具体的には、例えばカメラ１２が、コーヒーサーバ５の前面上方に設けられ、無線／有線により継続的に撮像画像が情報処理端末１－１に送信されるようにしてもよい。
＜３－２．動作処理＞
続いて、本実施例の動作処理について図１４を参照して説明する。図１４は、第２の実施例による情報処理システムの動作処理を示すフローチャートである。
図１４に示すように、まず、情報処理端末１－２は、デフォルトＵＩを表示部１４に表示する（ステップＳ２０３）。デフォルトＵＩは、デザイン性の高いＵＩであってもよいし、背景のコーヒーサーバ５と完全に同化する色、模様にして目立たないようにするものでもよい。
次に、カメラ１２により、目の前（すなわちコーヒーサーバ５の前）を撮像し続け、目の前に人が立つ（利用者が現れる）まで待機する（ステップＳ２０６）。なお、単にコーヒーサーバ５の前を通り過ぎた人と利用者とを区別するために、目の前の人物がコーヒーサーバ５に正対しているか、顔がコーヒーサーバ５の方を向いているか、立ち止まっているか等を考慮してより正確に判断するようにしてもよい。
次いで、利用者が現れると、情報処理端末１－２は、カメラ１２により取得した利用者の顔画像を個人識別サーバ２に送信し、当該利用者が、過去にコーヒーサーバ５を利用したことがあるか否かを調べる（ステップＳ２０９）。個人識別サーバ２では、顔画像に基づいて個人識別を行い、データベースから過去にもコーヒーサーバ５を利用したことのあるユーザであるか否か、また、利用したことがある場合は熟練者であるか否かを示す情報（例えば熟練度を含む）を、情報処理端末１－２に返信する。
ここで、熟練者の判断の一例について説明する。熟練者であるか否かは、利用回数や直近の利用状況（最近利用したか、半年以上前か等）、ユーザ属性（年齢等）に応じて算出されてもよいし、操作時間に基づいて算出されてもよい。例えばコーヒーサーバ５の操作手順が以下のようなステップ（ｎ）である場合、各ステップにかかった操作時間（Ｔ）を計測して、Ｔｎ（ｎ＝１，２，…５）とする。
（操作１）コーヒーサーバ５の前に立ち、カップ置き場の蓋を開ける。
（操作２）カップ置き場に空のカップを置く。
（操作３）カップ置き場の蓋を閉める。
（操作４）飲み物の種類のボタンを押す（例えば、ホット／アイス、レギュラー／ラージの組み合わせでどれか１つ）。
（操作５）コーヒーの注ぎが終了したらカップ置き場の蓋を開けてコーヒーを取り出す。
そして、下記表１に示すように、Ｔｎごとに熟練者と初心者の閾値を設け、例えばＴｎのいずれか少なくとも１つが初心者閾値を超えていれば「初心者」と判断し、全てのＴｎが熟練者の閾値以内であれば「熟練者」としてもよい。また、Ｔｎの合計が熟練者の閾値以内であれば「熟練者」、初心者の閾値以上であれば「初心者」というように判断してもよい。
Figure 0007074066000001
また、個人識別サーバ２は、「熟練者」について、例えば閾値に対する操作時間の割合から、さらに熟練度を算出してもよい。
また、初心者と熟練者の間に「中級者」を定義してもよい。例えば、Ｔｎのいずれか少なくとも１つが初心者閾値を超えていれば「初心者」、全てのＴｎが熟練者の閾値以内であれば「熟練者」、それ以外は「中級者」というように判断してもよい。また、Ｔｎの合計が熟練者の閾値以内であれば「熟練者」、初心者の閾値以上であれば「初心者」、それ以外であれば「中級者」というように判断してもよい。
次に、過去に利用したユーザであって（ステップＳ２１２／Ｙｅｓ）、かつ熟練者である場合（ステップＳ２１５／Ｙｅｓ）、情報処理端末１－２は、画面生成部１０２により熟練度に合わせたＵＩを生成し、表示制御部１０３により表示部１４に表示する。なお熟練度の算出は情報処理端末１－２で行うようにしてもよい。
一方、過去に利用したユーザではない場合（ステップＳ２１２／Ｎｏ）、若しくは、過去に利用したユーザであるが（ステップＳ２１２／Ｙｅｓ）、熟練者ではない場合（ステップＳ２１５／Ｎｏ）、情報処理端末１－２は、画面生成部１０２により初心者用のＵＩを生成し、表示制御部１０３により表示部１４に表示する。
このように、利用者の推定される理解度に応じて、適切な操作画面を提示する。ここで、図１５に、本実施例による初心者用および熟練者用ＵＩの一例を示す。図１５左に示すように、熟練者用ＵＩ１５１は、デザイン性が高く、操作の説明は少ない物が想定される。具体的には、例えばデザイナーによってコーヒーサーバ５のデザインとトータルでデザインされたものであってもよい。これにより、周囲の景観を損ねることなく、コーヒーサーバ５のデザイン性を保つことができる。
なお、上述したように「中級者」が定義された場合、情報処理端末１－２は、中級者用のＵＩを表示するようにしてもよい。
続いて、情報処理端末１－２は、タイマー１８により操作時間の計測を開始する（ステップＳ２２４）。
具体的には、まず、情報処理端末１－２は、次の操作の操作時間閾値Ｔｈｎ（ｎは操作手順の番号）をセットする（ステップＳ２２７）。
次に、情報処理端末１－２は、ユーザが必要な操作を行ったか否かを判断する（ステップＳ２３０）。ユーザの操作は、カメラ１２により観測してもよいし、タッチパネル１７への操作入力、通信部１１を介してコーヒーサーバ５から取得したユーザ操作情報等に基づいて認識される。
次いで、必要な操作が行われず（ステップＳ２３０／Ｎｏ）、現在の操作の経過時間が、操作時間閾値Ｔｈｎを超えた場合（ステップＳ２３３／Ｙｅｓ）、情報処理端末１－２は、表示部１４に表示する操作画面を、初心者用ＵＩに変更する（ステップＳ２３６）。この際、操作手順について音声でのガイダンスを出力してもよい。
次に、初心者用ＵＩに変更したことに応じて、操作時間閾値Ｔｈｎを更新する（ステップＳ２３９）。例えば同じ操作時間閾値Ｔｈｎを新たにセットしてもよいし、初心者用の操作時間閾値Ｔｈｎをセットしてもよい。
次いで、必要な操作がすべて終了するまで上記ステップＳ２２７～Ｓ２３９を繰り返し、必要な操作がすべて終了すると（ステップＳ２４２／Ｙｅｓ）、情報処理端末１－２は、すべての操作を終えるまでにかかった操作時間の総計等に基づいて当該ユーザが熟練者か否かを判断する（ステップＳ２４５）。
そして、情報処理端末１－２は、判断結果を個人識別サーバ２へ送信する（ステップＳ２４８）。これにより、個人識別サーバ２に蓄積されている利用者の情報が更新される。なお新規の利用者の場合には、新規登録される。
以上、本実施例による動作処理について具体的に説明した。なお、上記ステップＳ２４５で示す熟練者か否かの判断は、個人識別サーバ２で行うようにしてもよい。この場合、情報処理端末１－２は、計測した操作時間を個人識別サーバ２に送信する。
また、個人識別は顔画像に基づく方法に限定されない。例えば、非接触ＩＣカード（またはスマートフォン等の通信端末）を利用したプリペイドカードを用いることで個人識別を行うことも可能である。また、プリペイドカードから、個人と特定せずとも、熟練者か否かの情報（利用回数、操作時間の蓄積データ等）を引き出せるため、プライバシー侵害の心配が無くなる。
また、本実施例では、個人識別を行わずに機能させることも可能である。例えば最初に標準的なＵＩを表示し、ユーザの操作にかかる時間に応じてＵＩを変化（初心者用または熟練者用に変更）させてもよい。なおＵＩは、さらに段階的に用意してもよい。
また、本実施例による情報処理端末１－２は、家庭用の家電に適用してもよい。例えば表示部１４をタッチパネル式電子ペーパーにして、利用者（の熟練度）に合ったＵＩを提示することが可能である。例えば機能が多い電子レンジや洗濯機、リビングに置いた時の見た目が重要となるコンポーネントステレオや加湿器等は、そのままだと多数のボタンや文字により操作面が雑然とし、室内のインテリアや色調に合わないことが多い。そこで、操作面をタッチパネル式電子ペーパー（情報処理端末１－２）にすることで、室内の景観を保つことが可能となる。
＜＜４．第３の実施例＞＞
次に、第３の実施例について図１６～図１９を参照して説明する。第３の実施例では、冷蔵庫（収納部）へ応用する場合について説明する。
図１６は、本実施例の概要について説明する図である。図１６に示すように、本実施例では、冷蔵庫装置１－３の扉部分に、電子ペーパーの表示部２３（２３ａ～２３ｃ）が設けられている。また、冷蔵庫装置１－３には、ユーザ音声を取得する音声入力部２０（マイクロホン）が設けられている。また、冷蔵庫装置１－３には、庫内照明および庫内カメラ（不図示）が設けられており、冷蔵庫の内部を照明して撮影することが可能となる。
本実施例による冷蔵庫装置１－３は、通常は、白や薄いブルーなど、冷蔵庫本来の色を再現するカモフラージュ画像を表示部２３ａ～２３ｃに表示する。次いで、音声により庫内確認指示があると、指示に応じて、庫内を撮影した庫内画像１６０を、対応する扉の表示部２３ａに表示する。これによりユーザは、扉を開けずに冷蔵庫の中身を確認することが可能となる。表示部２３ａに表示する庫内画像１６０には、所定の画像処理が施されていてもよい。例えば図１６に示す例では、「野菜を見せて」等のユーザの指示に応じて、庫内カメラにより撮影した撮影画像のうち着目する食材をフルカラーにして他は白黒にする等の画像処理を行い、着目する食材を目立たせるようにすることが可能である。
＜４－１．構成＞
図１７は、本実施例による冷蔵庫装置１－３の構成の一例を示す図である。図１６に示すように、冷蔵庫装置１－３は、制御部１０、音声入力部２０、タッチパネル２１、庫内カメラ２２、表示部２３、庫内照明２４、冷却部２５、および記憶部２６を有する。
制御部１０は、判断部１０１、画面生成部１０２、および表示制御部１０３として機能する。判断部１０１、画面生成部１０２、および表示制御部１０３は、主に上述した各実施例と同様の機能を有する。すなわち、判断部１０１は、周辺状況に応じて、情報提示が必要か否かを判断する。また、画面生成部１０２は、判断部１０１により情報提示が必要であると判断された場合、ユーザの指示に応じて、庫内カメラ２２で撮影された撮影画像に基づいて適切な画面を生成する。また、画面生成部１０２は、情報提示が必要でない場合は、周囲と同化するカモフラージュ画像を生成する。そして、表示制御部１０３は、画面生成部１０２により生成された画面を表示部２３に表示する。
音声入力部２０は、マイクロホンと、そのマイクロホンで得られた音声信号を増幅処理するマイクアンプ部と、音声信号にデジタル変換するＡ／Ｄ変換器により実現され、音声信号を制御部１０に出力する。本実施例による音声入力部２０は、ユーザによる庫内確認指示等を収音し、制御部１０に出力する。
タッチパネル２１は、表示部２３に設けられ、表示部２３に表示された操作画面や庫内画像に対するユーザの操作入力を検出し、制御部１０に出力する。
庫内カメラ２２は、冷蔵庫内を撮影するカメラであって、複数設けられていてもよい。また、庫内カメラ２２は、広角カメラにより実現されてもよい。
表示部２３は、表示制御部１０３の制御に従って、庫内画像やカモフラージュ画像を表示する。また、表示部２３は、電子ペーパー型ディスプレイにより実現される。
庫内照明２４は、庫内を照明する機能を有し、複数設けられていてもよい。庫内カメラ２２で撮影する際に点灯する他、冷蔵庫装置１－３の扉が開けられた際にも点灯する。
冷却部２５は、冷蔵庫本来の機能であって、庫内を冷却する構成を有する。
記憶部２６は、制御部１０の処理に用いられるプログラムや演算パラメータ等を記憶するＲＯＭ（Read Only Memory）、および適宜変化するパラメータ等を一時記憶するＲＡＭ（Random Access Memory）により実現される。
＜４－２．動作処理＞
次に、本実施例による動作処理について図１８を参照して説明する。図１８は、本実施例による動作処理を示すフローチャートである。
図１８に示すように、まず、冷蔵庫装置１－３の表示制御部１０３は、白や薄いブルーなど冷蔵庫本来の色（標準の設定色）または特定の画像（いずれも、カモフラージュ画像）を全ての表示部２３ａ～２３ｃに表示する（ステップＳ３０３）。
次に、音声による庫内確認指示があるまで待機する（ステップＳ３０６）。なお、庫内確認指示は音声に限定されず、操作ボタン（不図示）や、表示部２３に表示された操作ボタンＵＩ（タッチパネルにより検出）から行っても構わない。しかし料理中などは手が濡れていたり汚れたりしているため、冷蔵庫に触れずに音声指示により庫内を確認できるのは非常に有用である。また、冷蔵庫装置１－３に、目の前に立つユーザを認識するためのカメラを設け、特定のユーザ（住人、家族等）であることを認識した上で、庫内確認指示を受け付けるようにしてもよい。若しくは、音声認識により特定のユーザを認識してもよい。
次いで、冷蔵庫装置１－３は、確認指示の音声を認識して、着目する直材を選定する（ステップＳ３０９）。すなわち、庫内確認指示は、例えば「野菜を見せて」のように食材の種類を直接指示したり、「生姜焼きの材料」などのように料理名を指定することができ、この場合、音声認識により対象の食材が選定される。なお食材を指定せずに「庫内を見せて」という指示を行った場合は、ここでの選定は特に行われず、単に庫内画像が表示されることとなる。
次に、冷蔵庫装置１－３は、庫内照明２４を点灯し（ステップＳ３１２）、庫内カメラ２２で庫内の撮影を行い（ステップＳ３１５）、撮影が終了すると庫内照明消灯する（ステップＳ３１８）。どの庫内カメラ２２で撮影するかは、庫内確認指示に応じて選択される。また、庫内カメラ２２は、庫内の様子がよく分かるように例えば野菜室や冷凍室は上から撮影するようにしてもよいし、複数の側面から撮影してどの角度から見るかをユーザが指示できるようにしてもよい。また、扉の内側（収納スペース）を撮影して庫内画像を切り替え表示させることも可能である。
次いで、画像の歪み補正を行う（ステップＳ３２１）。庫内カメラ２２が広角カメラの場合は、画像の歪曲補正を行う方がよいためである。なお使用しているレンズは既知であるため、補正パラメータも予め把握され、既存のアルゴリズムで補正をかけることが可能である。
次いで、冷蔵庫装置１－３の画面生成部１０２は、庫内画像を画像認識にして着目する食材を特定し、画像処理を行って当該食材を目立たせる処理を行う（ステップＳ３２４）。例えば、図１６の庫内画像１６０のように、着目する食材以外は白黒にし、必要な食材がどこにあるかを一目で分かるようにしてもよい。また、庫内確認指示において食材を特定していない場合（単に庫内を確認する指示の場合）は、このような特定の食材を目立たせる画像処理は施さない。
次に、冷蔵庫装置１－３の表示制御部１０３は、冷蔵庫の各扉に設けられている表示部２３ａ～２３ｃのうち、撮影した庫内画像に対応する扉の表示部２３に、庫内画像を表示する（ステップＳ３２７）。ここで、庫内確認指示において食材を特定していない場合（単に庫内を確認する指示の場合）の表示例を図１９に示す。図１９に示すように、単に庫内を確認する指示の場合、冷蔵庫装置１－３の各扉に設けられた表示部２３ａ～２３ｃに、それぞれ対応する庫内画像６１～６３を表示する。
続いて、新たな料理や食材の指示（庫内確認指示）が入力された場合（ステップＳ３３０／Ｙｅｓ）、着目する食材を変更し（ステップＳ３３３）、上記ステップＳ３２４に戻る。
一方、庫内表示終了指示があった場合（ステップＳ３３６／Ｙｅｓ）、上記ステップＳ３０３に戻り、標準の設定色または特定の画像（いずれも、カモフラージュ画像）を全ての表示部２３に表示する。
このように、本実施例によれば、通常時は景観を損ねないようにカモフラージュ画像を表示し、必要な場合は扉を開けずに庫内の様子を見ることが可能となる。なお、庫内画像の画像処理は、上述したような着目食材を目立たせるものに限定されない。例えばユーザが来客中の場合（冷蔵庫の周辺にいる人物をカメラにて認識）、あえて一部の食材を高級食材に差し替えたりして表示するようにしてもよい。
＜＜５．第４の実施例＞＞
続いて、第４の実施例について図２０～図２２を参照して説明する。第４の実施例では、駅の階段等における誘導表示に応用する場合について説明する。
図２０は、第４の実施例の概要について説明する図である。一般的に、駅の階段や通路においては、混雑時の人の流れを考慮して、通行量が多い方に階段や通路のスペースを割くよう誘導表示を行っている。しかし、駅の階段や通路における混雑状況や人の流れは、時間帯や電車到着のタイミング等に応じて変動するものであって、掲示した誘導表示が必ずしも全ての状況に対応できているわけではない。また、空間デザイナー等により駅の外観や内観がデザインされていても、このような誘導表示や利用者への注意喚起表示等が多数掲示されると、せっかくのデザイン性が損なわれてしまう。
そこで、本実施例では、図２０左に示すように、例えば駅の階段等において、通常（非混雑時）は誘導表示を行わず、景観を損なわないよう周囲の景観に同化する画像を表示し、混雑時には、図２０右に示すように、誘導表示１７０～１７１を表示して適切な情報提示を行うようにする。
混雑時か否かは、例えば時間帯、電車管理サーバ６から通知される電車の到着のタイミング、また、階段に設置された人流センサ（不図示）のセンサデータ（通行量）に基づいて判断され得る。人流センサは、通行量を検知することが可能であるが、さらに複数個所（例えば、階段の上方と下方）に人流センサが設けられている場合、各人流センサで検知された通行量の変動に応じて、人の流れ（階段を昇る人が多いか、下る人が多いか）を検知することも可能である。
＜５－１．構成＞
図２１は、本実施例による情報処理システムの全体構成の一例を示す図である。図２１に示すように、本実施例による情報処理システムは、情報処理端末１－４と、電車管理サーバ６を含み、情報処理端末１－４と電車管理サーバ６はネットワーク３を介して接続される。
情報処理端末１－４は、制御部１０、通信部１１、表示部１４、記憶部１５、および人流センサ２７を有する。
制御部１０は、判断部１０１、画面生成部１０２、表示制御部１０３として機能する。判断部１０１、画面生成部１０２、および表示制御部１０３は、主に上述した各実施例と同様の機能を有する。すなわち、判断部１０１は、周辺状況に応じて、情報提示が必要か否かを判断する。具体的には、判断部１０１は、通信部１１により電車管理サーバ６が受信した電車到着タイミングや、人流センサ２７により検知された通行量や人流データ、若しくは時間帯に応じて、誘導等の情報提示を行うか否かを判断する。
また、画面生成部１０２は、判断部１０１により情報提示が必要であると判断された場合、通行量や人流に基づいて適切な誘導画面を生成する。例えば、昇りの利用者が多く混雑している場合、階段に表示する４つの誘導表示ラインのうち、３つのラインで表示する昇り用の誘導表示を生成する。一方、例えば下りの利用者が多く混雑している場合、階段に表示する４つの誘導表示ラインのうち、３つのラインで表示する下り用の誘導表示を生成する。また、画面生成部１０２は、情報提示が必要でない場合は、周囲と同化するカモフラージュ画像を生成する。
そして、表示制御部１０３は、画面生成部１０２により生成された画面を表示部１４に表示する。
通信部１１は、有線または無線によりネットワーク３と接続し、ネットワーク上の電車管理サーバ６とデータの送受信を行う。
表示部１４は、表示制御部１０３の制御に従って、誘導表示やカモフラージュ画像を表示する。また、表示部１４は、電子ペーパー型ディスプレイにより実現され、図２０に示すような階段の各ステップに複数設置される。
記憶部１５は、制御部１０の処理に用いられるプログラムや演算パラメータ等を記憶するＲＯＭ（Read Only Memory）、および適宜変化するパラメータ等を一時記憶するＲＡＭ（Random Access Memory）により実現される。
人流センサ２７は、通行量を検知するセンサであって、階段の上方と下方等、複数個所に設けられていてもよい。複数個所における通行量の変化に応じて、人の流れ（どの方向にどの程度の利用者が移動しているか）を認識することも可能である。人流センサ２７は、例えば圧力センサにより実現され、踏まれる回数をカウントすることで通行量を検知してもよい。また、人流センサ２７は、赤外線を使用した人感センサや遮断センサにより実現され、通行した人数をカウントするようにしてもよい。
以上、本実施例による情報処理システムの構成例について具体的に説明した。
＜５－２．動作処理＞
次に、本実施例の動作処理について図２２を参照して説明する。図２２は、本実施例による動作処理を示すフローチャートである。
図２２に示すように、まず、情報処理端末１－４の表示制御部１０３は、すべての矢印表示（誘導表示）を消す（ステップＳ４０３）。
次に、情報処理端末１－４は、情報処理端末１－４が設置された階段を利用する電車がホームに到着したか否かの情報を電車管理サーバ６から取得する（ステップＳ４０６）。本実施例では、駅に電車が到着したか否かは他のシステムで管理されるため、情報処理端末１－４は、電車到着情報をネットワーク３経由で取得する。
次いで、電車がホームに到着すると（ステップＳ４０９／Ｙｅｓ）、情報処理端末１－４は、駅のホームから上（または下）の階のコンコースに出るための階段において、上り側（または下り側）が混雑することが想定されるため、当該コンコースに向かう誘導表示のライン数を増やし、矢印が当該コンコースの方向に向くよう表示画面を更新する（ステップＳ４１２）。例えば４つのラインのうち、昇り誘導を３ライン、下り誘導を１ラインにして非対称にして表示し、昇りと下りの誘導表示バランスを動的に変更することができる。
次に、情報処理端末１－４は、人流センサ２７から混雑度Ｃを取得する（ステップＳ４１５）。例えば人流センサ２７が階段の上下端に設置されている場合、情報処理端末１－４は、各人流センサ２７により検知されたデータに基づいて階段を通過する人数を認識し、混雑度Ｃを算出する。
次いで、情報処理端末１－４は、混雑度Ｃが所定の閾値より下がった場合（ステップＳ４１８／Ｙｅｓ）、混雑は解消されたと推定されるため、上記ステップＳ４０３に戻り、全ての矢印表示（誘導表示）を消した状態に戻る。
以上、本実施例による動作処理について具体的に説明した。なお、僅かに人が途切れただけで誘導表示が戻ってしまわないよう、上記ステップＳ４１５で取得する混雑度Ｃは、一瞬のセンサの値ではなく、ある一定の時間範囲でカウントした値を積分するようにしてもよい。例えば、１分間の総人数カウント数を求めて、混雑度Ｃを算出してもよい。
＜＜６．まとめ＞＞
上述したように、本開示の実施形態による情報処理システムでは、景観を守り、かつ、必要な情報を適切に提示することが可能となる。
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本技術はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
例えば、上述した情報処理端末１－１、１－２、１－４、冷蔵庫装置１－３、または個人識別サーバ２に内蔵されるＣＰＵ、ＲＯＭ、およびＲＡＭ等のハードウェアに、情報処理端末１－１、１－２、１－４、冷蔵庫装置１－３、または個人識別サーバ２の機能を発揮させるためのコンピュータプログラムも作成可能である。また、当該コンピュータプログラムを記憶させたコンピュータ読み取り可能な記憶媒体も提供される。
また、本実施形態による情報処理端末１を、ビル等の建築物に応用させてもよい。例えばビルによって富士山が隠れる等、景観を損ねている状況が生じている場合でも、ビルによって隠れてしまった富士山が見えるよう、ビルの壁面等に富士山の画像（例えばリアルタイムに撮像された撮像画像等のカモフラージュ画像）を表示することで、ビルが消えたように見せることが可能となる。なお、大きな建築物の場合、一つの視点からしか周囲と同化しているように見えないといった課題も生じ得るが、例えば時間帯でbidするシステムを用いて、一番高額で落札した人の視点に合わせてその時間帯のカモフラージュ画像を生成して表示してもよい。また、パララックスバリア方式、レンティキュラ方式等の視線の視差分割方式を利用して、見る角度によって最適なカモフラージュ画像が視認できるようにすることで、ある程度視点が変わっても周囲と同化させることは可能である。
また、上述した各実施例では、情報処理端末１側で主な制御（判断処理、画面生成処理、および表示制御処理）を行っているが、少なくとも一部をサーバ（例えば個人識別サーバ２）で行うようにしてもよい。この場合、例えばサーバの制御部が、判断部、画面生成部、および表示制御部として機能し、情報処理端末１から受信したセンサデータ（撮像画像、操作データ、音声データ、人流センサの検知結果等）に基づいて情報提示の判断を行い、適切な画面を生成し、生成した画面を情報処理端末１に送信し、表示するよう制御する。
また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
なお、本技術は以下のような構成も取ることができる。
（１）
周辺の状況を把握するためのセンサにより検出されたセンサデータを受信する通信部と、
前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記センサの周辺に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；
情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、
を備える、情報処理装置。
（２）
前記制御部は、前記センサデータに基づいて認識された、前記ユーザに同伴している人、生物、または前記ユーザが所持している物の少なくともいずれかに応じて、適切な情報を特定する、前記（１）に記載の情報処理装置。
（３）
前記表示部は、電子機器に設けられ、
前記センサデータには、前記電子機器に対する操作情報が含まれ、
前記制御部は、
前記操作情報に応じて、前記ユーザの前記電子機器に対する熟練度を認識すると共に、当該ユーザと当該熟練度を関連付けて記憶部に記憶するように制御し；
前記ユーザの前記電子機器に対する熟練度に応じて、情報の提示が不要と判断したときには、前記表示部に、当該表示部が設置される設置面に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する、前記（１）に記載の情報処理装置。
（４）
前記制御部は、
前記操作情報に応じて、前記ユーザが前記電子機器の熟練者であるか否かを認識し、熟練者であれば前記同化画像を表示するための制御信号を生成する、前記（３）に記載の情報処理装置。
（５）
前記表示部は、収納部の前面に設置され、前記収納部内のカメラにより撮像された収納部内画像を表示可能であり、
前記制御部は、
前記センサデータに基づき、特定のユーザが認識された際に、前記表示部に、前記収納部内画像を表示するための制御信号を生成し；
特定のユーザが認識されていないときには、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成し；
生成した制御信号を前記通信部を介して前記表示部に送信するように制御する、前記（１）に記載の情報処理装置。
（６）
前記制御部は、収納部内の確認を指示するユーザ発話音声データに基づいて、前記特定のユーザを認識する、前記（５）に記載の情報処理装置。
（７）
前記制御部は、前記ユーザによる指示に応じて、前記収納部内のカメラにより撮像された収納部内画像に対して所定の加工を施した上で、前記収納部内画像を表示するための制御信号を生成する、前記（６）に記載の情報処理装置。
（８）
前記表示部は、通路上に設置されており、
前記制御部は、
前記センサデータにより検出されるユーザの数に応じて、前記表示部に、適切な誘導情報を含む画像を表示するための制御信号を生成し；
誘導情報の提示が不要と判断したときには、前記表示部に、当該表示部が設置される通路に同化するような同化画像を表示するための制御信号を生成し；
生成した制御信号を、前記通信部を介して前記表示部に送信するように制御する、前記（１）に記載の情報処理装置。
（９）
プロセッサが、
周辺の状況を把握するためのセンサにより検出されたセンサデータを通信部により受信することと、
前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記センサの周辺に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；
情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御することと、
を含む、情報処理方法。
（１０）
コンピュータを、
周辺の状況を把握するためのセンサにより検出されたセンサデータを受信する通信部と、
前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記センサの周辺に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；
情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、
として機能させるためのプログラムが記録された、記録媒体。
１（１－１、１－２、１－４） 情報処理端末
１－３ 冷蔵庫装置（情報処理端末）
２ 個人識別サーバ
３ ネットワーク
５ コーヒーサーバ
６ 電車管理サーバ
１０ 制御部
１１ 通信部
１２ カメラ
１３ 音声出力部
１４ 表示部
１５ 記憶部
１６ 記憶媒体Ｉ／Ｆ
１７ タッチパネル
１８ タイマー
２０ 音声入力部
２１ タッチパネル
２２ 庫内カメラ
２３ 表示部
２４ 庫内照明
２５ 冷却部
２６ 記憶部
２７ 人流センサ
１０１ 判断部
１０２ 画面生成部
１０３ 表示制御部

Claims (16)

  1. 周辺の状況を把握するためのセンサにより検出されたセンサデータを受信する通信部と、
    前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記センサの周辺に脱着可能に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；
    情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、
    を備え、
    前記同化画像は、
    前記表示部が設置される領域を前記表示部が設置されていない状態で撮像した画像に基づき取得される、情報処理装置。
  2. 前記制御部は、前記センサデータに基づいて認識された、前記ユーザに同伴している人、生物、または前記ユーザが所持している物の少なくともいずれかに応じて、適切な情報を特定する、請求項１に記載の情報処理装置。
  3. 前記制御部は、
    前記適切な情報を含む画像が既に前記表示部に表示されている状態で、前記ユーザに同伴している人、生物、または前記ユーザが所持している物のうち、当該適切な情報の特定に係る当該ユーザに同伴している人、生物、または当該ユーザが所持している物と異なる当該ユーザに同伴している人、生物、または当該ユーザが所持している物が検出された場合に；
    検出された当該ユーザに同伴している人、生物、または当該ユーザが所持している物に応じて新たな適切な情報を特定し、特定された当該新たな適切な情報を含む画像を、既に前記表示部に表示されている前記適切な情報を含む画像に加えて前記表示部に表示するための表示信号を生成して、前記通信部を介して前記表示部に送信するように制御する、
    請求項１または請求項２に記載の情報処理装置。
  4. 周辺の状況を把握するためのセンサにより検出された、電子機器に対する操作情報が含まれるセンサデータを受信する通信部と、
    前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記電子機器に設けられる表示部に適切な情報を含む画像を表示するための制御信号を生成し；
    情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、
    を備え、
    前記制御部は、
    前記操作情報に応じて、前記ユーザの前記電子機器に対する熟練度を、前記電子機器による１つの動作結果を得るための一連の操作における複数のステップそれぞれに対して閾値判定した結果に基づき認識すると共に、当該ユーザと当該熟練度を関連付けて記憶部に記憶するように制御し；
    前記ユーザの前記電子機器に対する熟練度に応じて、情報の提示が不要と判断したときには、前記表示部に、当該表示部が設置される設置面に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する、情報処理装置。
  5. 前記制御部は、
    前記熟練度に基づき前記ユーザが前記電子機器の熟練者であるか否かを認識し、熟練者であれば前記同化画像を表示するための制御信号を生成する、請求項４に記載の情報処理装置。
  6. 周辺の状況を把握するためのセンサにより検出されたセンサデータを受信する通信部と、
    前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、収納部の前面に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；
    情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、
    を備え、
    前記表示部は、前記収納部内のカメラにより撮像された収納部内画像を表示可能であり、
    前記制御部は、
    前記センサデータに基づき、特定のユーザが認識された際に、前記ユーザによる特定の物を指定する指示に応じて、前記収納部内のカメラにより撮像された収納部内画像に対して、当該特定の物と、当該特定の物以外の物とで異なる加工を施した上で、前記収納部内画像を表示するための制御信号を生成し；
    前記特定のユーザが認識されていないときには、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成し；
    生成した制御信号を前記通信部を介して前記表示部に送信するように制御する、情報処理装置。
  7. 前記制御部は、収納部内の確認を指示するユーザ発話音声データに基づいて、前記特定のユーザを認識する、請求項６に記載の情報処理装置。
  8. プロセッサが、
    周辺の状況を把握するためのセンサにより検出されたセンサデータを通信部により受信することと、
    前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記センサの周辺に脱着可能に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；
    情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御することと、
    を含み、
    前記同化画像は、
    前記表示部が設置される領域を前記表示部が設置されていない状態で撮像した画像に基づき取得される、情報処理方法。
  9. プロセッサが、
    周辺の状況を把握するためのセンサにより検出された、電子機器に対する操作情報が含まれるセンサデータを通信部により受信することと、
    前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記電子機器に設けられる表示部に適切な情報を含む画像を表示するための制御信号を生成し；
    情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御することと、
    を含み、
    前記制御することは、
    前記操作情報に応じて、前記ユーザの前記電子機器に対する熟練度を、前記電子機器による１つの動作結果を得るための一連の操作における複数のステップそれぞれに対して閾値判定した結果に基づき認識すると共に、当該ユーザと当該熟練度を関連付けて記憶部に記憶するように制御し；
    前記ユーザの前記電子機器に対する熟練度に応じて、情報の提示が不要と判断したときには、前記表示部に、当該表示部が設置される設置面に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する、情報処理方法。
  10. プロセッサが、
    周辺の状況を把握するためのセンサにより検出されたセンサデータを通信部により受信することと、
    前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、収納部の前面に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；
    情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御することと、
    を含み、
    前記表示部は、前記収納部内のカメラにより撮像された収納部内画像を表示可能であり、
    前記制御することは、
    前記センサデータに基づき、特定のユーザが認識された際に、前記ユーザによる特定の物を指定する指示に応じて、前記収納部内のカメラにより撮像された収納部内画像に対して、当該特定の物と、当該特定の物以外の物とで異なる加工を施した上で、前記収納部内画像を表示するための制御信号を生成し；
    前記特定のユーザが認識されていないときには、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成し；
    生成した制御信号を前記通信部を介して前記表示部に送信するように制御する、情報処理方法。
  11. コンピュータを、
    周辺の状況を把握するためのセンサにより検出されたセンサデータを受信する通信部と、
    前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記センサの周辺に着脱可能に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；
    情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、
    として機能させ、
    前記同化画像は、
    前記表示部が設置される領域を前記表示部が設置されていない状態で撮像した画像に基づき取得される
    ためのプログラムが記録された、記録媒体。
  12. コンピュータを、
    周辺の状況を把握するためのセンサにより検出された、電子機器に対する操作情報が含まれるセンサデータを受信する通信部と、
    前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記電子機器に設けられる表示部に適切な情報を含む画像を表示するための制御信号を生成し；
    情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、
    して機能させ、
    前記制御部は、
    前記操作情報に応じて、前記ユーザの前記電子機器に対する熟練度を、前記電子機器による１つの動作結果を得るための一連の操作における複数のステップそれぞれに対して閾値判定した結果に基づき認識すると共に、当該ユーザと当該熟練度を関連付けて記憶部に記憶するように制御し；
    前記ユーザの前記電子機器に対する熟練度に応じて、情報の提示が不要と判断したときには、前記表示部に、当該表示部が設置される設置面に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する
    ためのプログラムが記録された、記録媒体。
  13. コンピュータを、
    周辺の状況を把握するためのセンサにより検出されたセンサデータを受信する通信部と、
    前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、収納部の前面に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；
    情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、
    として機能させ、
    前記表示部は、前記収納部内のカメラにより撮像された収納部内画像を表示可能であり、
    前記制御部は、
    前記センサデータに基づき、特定のユーザが認識された際に、前記ユーザによる特定の物を指定する指示に応じて、前記収納部内のカメラにより撮像された収納部内画像に対して、当該特定の物と、当該特定の物以外の物とで異なる加工を施した上で、前記収納部内画像を表示するための制御信号を生成し；
    前記特定のユーザが認識されていないときには、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成し；
    生成した制御信号を前記通信部を介して前記表示部に送信するように制御するためのプログラムが記録された、記録媒体。
  14. コンピュータを、
    周辺の状況を把握するためのセンサにより検出されたセンサデータを受信する通信部と、
    前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記センサの周辺に着脱可能に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；
    情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、
    として機能させ、
    前記同化画像は、
    前記表示部が設置される領域を前記表示部が設置されていない状態で撮像した画像に基づき取得される
    ためのプログラム。
  15. コンピュータを、
    周辺の状況を把握するためのセンサにより検出された、電子機器に対する操作情報が含まれるセンサデータを受信する通信部と、
    前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、前記電子機器に設けられる表示部に適切な情報を含む画像を表示するための制御信号を生成し；
    情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、
    して機能させ、
    前記制御部は、
    前記操作情報に応じて、前記ユーザの前記電子機器に対する熟練度を、前記電子機器による１つの動作結果を得るための一連の操作における複数のステップそれぞれに対して閾値判定した結果に基づき認識すると共に、当該ユーザと当該熟練度を関連付けて記憶部に記憶するように制御し；
    前記ユーザの前記電子機器に対する熟練度に応じて、情報の提示が不要と判断したときには、前記表示部に、当該表示部が設置される設置面に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する
    ためのプログラム。
  16. コンピュータを、
    周辺の状況を把握するためのセンサにより検出されたセンサデータを受信する通信部と、
    前記センサデータから検出されたユーザの属性、ユーザの状況、および環境のうち、少なくともいずれか一つに応じて、収納部の前面に設置される表示部に適切な情報を含む画像を表示するための制御信号を生成し；
    情報の提示が不要と判断した場合には、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成して、前記通信部を介して前記表示部に送信するように制御する制御部と、
    として機能させ、
    前記表示部は、前記収納部内のカメラにより撮像された収納部内画像を表示可能であり、
    前記制御部は、
    前記センサデータに基づき、特定のユーザが認識された際に、前記ユーザによる特定の物を指定する指示に応じて、前記収納部内のカメラにより撮像された収納部内画像に対して、当該特定の物と、当該特定の物以外の物とで異なる加工を施した上で、前記収納部内画像を表示するための制御信号を生成し；
    前記特定のユーザが認識されていないときには、前記表示部に、当該表示部の周囲に同化するような同化画像を表示するための制御信号を生成し；
    生成した制御信号を前記通信部を介して前記表示部に送信するように制御するためのプログラム。
JP2018550032A 2016-11-14 2017-08-10 情報処理装置、情報処理方法、記録媒体、およびプログラム Active JP7074066B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016221658 2016-11-14
JP2016221658 2016-11-14
PCT/JP2017/029099 WO2018087972A1 (ja) 2016-11-14 2017-08-10 情報処理装置、情報処理方法、および記録媒体

Publications (2)

Publication Number Publication Date
JPWO2018087972A1 JPWO2018087972A1 (ja) 2019-09-26
JP7074066B2 true JP7074066B2 (ja) 2022-05-24

Family

ID=62110620

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018550032A Active JP7074066B2 (ja) 2016-11-14 2017-08-10 情報処理装置、情報処理方法、記録媒体、およびプログラム

Country Status (6)

Country Link
US (2) US11094228B2 (ja)
EP (1) EP3540716B1 (ja)
JP (1) JP7074066B2 (ja)
KR (1) KR102350351B1 (ja)
CN (1) CN109983526A (ja)
WO (1) WO2018087972A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11094228B2 (en) * 2016-11-14 2021-08-17 Sony Corporation Information processing device, information processing method, and recording medium
JP7408995B2 (ja) * 2019-10-18 2024-01-09 日産自動車株式会社 情報表示装置
RU195640U1 (ru) * 2019-11-21 2020-02-03 Общество с ограниченной ответственностью "БИЗНЕС МЕДИА" Рекламно-информационное устройство
JP6923029B1 (ja) * 2020-03-17 2021-08-18 大日本印刷株式会社 表示装置、表示システム、コンピュータプログラム及び表示方法

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003271084A (ja) 2002-03-15 2003-09-25 Omron Corp 情報提供装置および情報提供方法
JP2006189708A (ja) 2005-01-07 2006-07-20 Mitsubishi Electric Corp 表示装置
JP2009259127A (ja) 2008-04-18 2009-11-05 Konica Minolta Business Technologies Inc 表示操作部を備えた装置
JP2010122748A (ja) 2008-11-17 2010-06-03 Ricoh Co Ltd 操作表示装置及びそれを備えた画像形成装置
JP2010128416A (ja) 2008-12-01 2010-06-10 Mitsubishi Electric Corp 電子機器
JP2011038335A (ja) 2009-08-12 2011-02-24 Toshisada Sekiguchi 歩行者誘導方式及びこれを用いた歩行施設または歩行者誘導システム
JP2014070740A (ja) 2012-09-27 2014-04-21 Toshiba Corp 冷蔵庫
JP2014174213A (ja) 2013-03-06 2014-09-22 Dainippon Printing Co Ltd 情報表示媒体
US20140300265A1 (en) 2013-04-08 2014-10-09 Jihyun Lee Refrigerator
JP2015154259A (ja) 2014-02-14 2015-08-24 株式会社東芝 収納装置、画像処理装置、画像処理方法およびプログラム
JP2015210059A (ja) 2014-04-30 2015-11-24 株式会社東芝 冷蔵庫
WO2016002145A1 (ja) 2014-07-01 2016-01-07 株式会社デンソー 車両用表示制御装置及び車両用表示システム
JP2016114346A (ja) 2014-12-11 2016-06-23 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 制御方法及び冷蔵庫
WO2016162956A1 (ja) 2015-04-07 2016-10-13 三菱電機株式会社 冷蔵庫

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB9223223D0 (en) * 1992-11-05 1992-12-16 Gradus Ltd Display device
JP2002073321A (ja) 2000-04-18 2002-03-12 Fuji Photo Film Co Ltd 画像表示方法
JP2002081818A (ja) 2000-09-05 2002-03-22 Hitachi Ltd 冷蔵庫
JP3879848B2 (ja) * 2003-03-14 2007-02-14 松下電工株式会社 自律移動装置
US9101279B2 (en) * 2006-02-15 2015-08-11 Virtual Video Reality By Ritchey, Llc Mobile user borne brain activity data and surrounding environment data correlation system
US8059894B1 (en) * 2006-12-19 2011-11-15 Playvision Technologies, Inc. System and associated methods of calibration and use for an interactive imaging environment
JP2008225315A (ja) 2007-03-15 2008-09-25 Konica Minolta Holdings Inc 広告表示システム
US20110145053A1 (en) * 2008-08-15 2011-06-16 Mohammed Hashim-Waris Supply chain management systems and methods
WO2010024000A1 (ja) * 2008-08-26 2010-03-04 シャープ株式会社 画像表示装置、及び画像表示装置の駆動方法
JP5423035B2 (ja) 2009-02-18 2014-02-19 沖電気工業株式会社 情報提供装置及び方法
KR20110128322A (ko) 2009-03-03 2011-11-29 디지맥 코포레이션 공공 디스플레이들로부터의 내로우캐스팅과, 관련 처리방식들
US8964298B2 (en) * 2010-02-28 2015-02-24 Microsoft Corporation Video display modification based on sensor input for a see-through near-to-eye display
WO2012063560A1 (ja) * 2010-11-10 2012-05-18 日本電気株式会社 画像処理システム、画像処理方法、及び画像処理プログラムを記憶した記憶媒体
US9013515B2 (en) 2010-12-02 2015-04-21 Disney Enterprises, Inc. Emissive display blended with diffuse reflection
EP2570986A1 (en) * 2011-09-13 2013-03-20 Alcatel Lucent Method for creating a cover for an electronic device and electronic device
JP2013065110A (ja) * 2011-09-15 2013-04-11 Omron Corp 検出装置、該検出装置を備えた表示制御装置および撮影制御装置、物体検出方法、制御プログラム、ならびに、記録媒体
US10776103B2 (en) * 2011-12-19 2020-09-15 Majen Tech, LLC System, method, and computer program product for coordination among multiple devices
WO2013125032A1 (ja) 2012-02-24 2013-08-29 ジャパン サイエンス アンド テクノロジー トレーディング カンパニー リミテッド 誘引性多目的電子看板システム
US9195320B1 (en) * 2012-10-22 2015-11-24 Google Inc. Method and apparatus for dynamic signage using a painted surface display system
US9292162B2 (en) * 2013-04-08 2016-03-22 Art.Com Discovering and presenting décor harmonized with a décor style
JP2015004921A (ja) 2013-06-24 2015-01-08 平岡織染株式会社 可変表示機能看板装置およびその表示作動方法
US10405786B2 (en) * 2013-10-09 2019-09-10 Nedim T. SAHIN Systems, environment and methods for evaluation and management of autism spectrum disorder using a wearable data collection device
KR101641252B1 (ko) * 2014-04-08 2016-07-29 엘지전자 주식회사 3d 프린터의 제어장치
CN105698469B (zh) * 2014-11-26 2019-01-04 上海华博信息服务有限公司 一种具有透明显示面板的智能冰箱
US10161674B2 (en) 2014-12-11 2018-12-25 Panasonic Intellectual Property Corporation Of America Method for controlling a refrigerator and refrigerator
JP2016161830A (ja) * 2015-03-03 2016-09-05 カシオ計算機株式会社 コンテンツ出力装置、コンテンツ出力方法及びプログラム
WO2016144741A1 (en) * 2015-03-06 2016-09-15 Illinois Tool Works Inc. Sensor assisted head mounted displays for welding
JP5969090B1 (ja) * 2015-05-21 2016-08-10 東芝エレベータ株式会社 エレベータ
CN205247368U (zh) * 2015-11-30 2016-05-18 马国强 一种基于大容量数据存储及信息交互的公交站台服务系统
US11094228B2 (en) * 2016-11-14 2021-08-17 Sony Corporation Information processing device, information processing method, and recording medium

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003271084A (ja) 2002-03-15 2003-09-25 Omron Corp 情報提供装置および情報提供方法
JP2006189708A (ja) 2005-01-07 2006-07-20 Mitsubishi Electric Corp 表示装置
JP2009259127A (ja) 2008-04-18 2009-11-05 Konica Minolta Business Technologies Inc 表示操作部を備えた装置
JP2010122748A (ja) 2008-11-17 2010-06-03 Ricoh Co Ltd 操作表示装置及びそれを備えた画像形成装置
JP2010128416A (ja) 2008-12-01 2010-06-10 Mitsubishi Electric Corp 電子機器
JP2011038335A (ja) 2009-08-12 2011-02-24 Toshisada Sekiguchi 歩行者誘導方式及びこれを用いた歩行施設または歩行者誘導システム
JP2014070740A (ja) 2012-09-27 2014-04-21 Toshiba Corp 冷蔵庫
JP2014174213A (ja) 2013-03-06 2014-09-22 Dainippon Printing Co Ltd 情報表示媒体
US20140300265A1 (en) 2013-04-08 2014-10-09 Jihyun Lee Refrigerator
JP2015154259A (ja) 2014-02-14 2015-08-24 株式会社東芝 収納装置、画像処理装置、画像処理方法およびプログラム
JP2015210059A (ja) 2014-04-30 2015-11-24 株式会社東芝 冷蔵庫
WO2016002145A1 (ja) 2014-07-01 2016-01-07 株式会社デンソー 車両用表示制御装置及び車両用表示システム
JP2016114346A (ja) 2014-12-11 2016-06-23 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 制御方法及び冷蔵庫
WO2016162956A1 (ja) 2015-04-07 2016-10-13 三菱電機株式会社 冷蔵庫

Also Published As

Publication number Publication date
EP3540716A1 (en) 2019-09-18
EP3540716B1 (en) 2023-06-07
EP3540716A4 (en) 2019-11-27
KR102350351B1 (ko) 2022-01-14
JPWO2018087972A1 (ja) 2019-09-26
US20200226959A1 (en) 2020-07-16
US11094228B2 (en) 2021-08-17
WO2018087972A1 (ja) 2018-05-17
CN109983526A (zh) 2019-07-05
US11594158B2 (en) 2023-02-28
US20210327313A1 (en) 2021-10-21
KR20190078579A (ko) 2019-07-04

Similar Documents

Publication Publication Date Title
JP7074066B2 (ja) 情報処理装置、情報処理方法、記録媒体、およびプログラム
JP6153177B1 (ja) デジタルサイネージ制御装置、デジタルサイネージ制御プログラム、及びデジタルサイネージシステム
JP2002073321A (ja) 画像表示方法
JP2013109051A (ja) 電子情報提供システム及び電子情報提供方法
JPWO2018235595A1 (ja) 情報提供装置、情報提供方法及びプログラム
CN107924544A (zh) 信息处理系统和信息处理方法
JP2019066700A (ja) 制御方法、情報処理装置及び制御プログラム
JPWO2019039119A1 (ja) 情報処理装置、情報処理方法、およびプログラム
JP2011027977A (ja) 表示システム
WO2012012059A2 (en) Selecting displays for displaying content
KR20140068634A (ko) 지능형 광고를 위한 얼굴 영상 분석시스템
JP5440244B2 (ja) 映像情報提示装置
JP2008243095A (ja) 顔検出システム、および顔検出方法
US20190272561A1 (en) Digital Signage Control Apparatus And Digital Signage Control Program
JP7246166B2 (ja) 画像監視システム
CN210667733U (zh) 一种电子广告显示设备
JP6716137B2 (ja) 情報表示システム
JP5633155B2 (ja) 映像情報提示装置
JP2004245856A (ja) 情報表示システム及びそれに用いる特徴判定方法
Sutton The use of scent in out of home (OOH) advertising
JP6842136B1 (ja) プログラム、表示制御方法、表示制御装置及びサイネージシステム
WO2023152951A1 (ja) 表示システム、表示方法
WO2021144908A1 (ja) 表示制御装置、管理装置、表示制御システム、表示制御方法、管理方法及びプログラム
TWI389066B (zh) 注目次計數系統及其方法
JP2005107546A (ja) インタラクティブ表示装置

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20190515

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190522

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200709

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200709

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210629

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210803

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220307

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20220307

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20220316

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20220322

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220412

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220425

R151 Written notification of patent or utility model registration

Ref document number: 7074066

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151