CN101946274B - 信息显示装置以及信息显示方法 - Google Patents

信息显示装置以及信息显示方法 Download PDF

Info

Publication number
CN101946274B
CN101946274B CN2009801053677A CN200980105367A CN101946274B CN 101946274 B CN101946274 B CN 101946274B CN 2009801053677 A CN2009801053677 A CN 2009801053677A CN 200980105367 A CN200980105367 A CN 200980105367A CN 101946274 B CN101946274 B CN 101946274B
Authority
CN
China
Prior art keywords
user
degree
content
care
vividness
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2009801053677A
Other languages
English (en)
Other versions
CN101946274A (zh
Inventor
坂田幸太郎
前田茂则
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Corp of America
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN101946274A publication Critical patent/CN101946274A/zh
Application granted granted Critical
Publication of CN101946274B publication Critical patent/CN101946274B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440245Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/12Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/222Secondary servers, e.g. proxy server, cable television Head-end
    • H04N21/2223Secondary servers, e.g. proxy server, cable television Head-end being a public access point, e.g. for downloading to or uploading from clients
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42201Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Neurosurgery (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

提供一种信息显示装置,高效率地提高用户对显示的内容的关心。信息显示装置(10)包括:显示部(14),在画面显示第一内容;用户状态检测部(11),检测用户状态,该用户状态是位于画面的前面的用户的物理状态;关心度推定部(12),根据由用户状态检测部(11)检测出的用户状态,推定关心度,该关心度表示用户对由显示部(14)显示在画面的第一内容的关心程度;以及显示控制部(13),在由关心度推定部(12)推定的关心度的变化率的大小不足于第一阈值的情况下,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,使显示部显示第二内容。

Description

信息显示装置以及信息显示方法
技术领域
本发明涉及显示内容的信息显示装置,尤其涉及根据用户的状态进行显示控制的信息显示装置。
背景技术
近些年,在街头等设置大画面的显示器,在该显示器显示广告的电子广告系统已被实用化。通过在繁华街、站前的建筑物的墙壁、或公共交通工具的车站内等设置显示器,从而能够向不确定多数用户提供信息。
然而,在以往的电子广告系统中存在的问题是,步行人在路过时仅看显示在显示器的广告而已,而不能给看广告的人留下深刻印象。并且,还存在的问题是,在显示器反复显示同一影像(广告),因此,为了等人等而滞留的人,即使看显示在显示器的广告,也马上就会看腻。进而,虽然有为了引人注目而具备商品信息等的检索功能的交互式电子广告系统,但是,对于路过的人而言,利用检索功能是麻烦的。如此,以往的电子广告系统,与通常的广告板或海报等相比,虽然更能够引人注目,但是,存在使广告效果更提高的余地。
而且,提出了按照输入装置接受的来自用户的请求阶段性地显示信息的信息显示装置(例如,参照专利文献1)。并且,还提出了按照用户和信息显示装置之间的距离出示除了不能识别的信息以外的细节的信息显示装置(例如,参照专利文献2)。
进而,也提出了按照用户的内容的视听状态,正在再生时以更适当的定时来显示内容信息的信息显示装置(例如,参照专利文献3)。专利文献3记载的信息显示装置,按照用户看内容的时间生成关心度,在生成的关心度下降时,推荐其它的内容的再生等。
如此,根据这些专利文献1至3所述的信息显示装置,用户能够高效率地获得信息。
专利文献1:(日本)特开平11-296542号公报
专利文献2:(日本)特开2003-271283号公报
专利文献3:(日本)特开2005-250322号公报
然而,所述以往的信息显示装置,虽然能够提高与信息获得有关的用户的效率,但是不能期待得到因显示的内容而吸引用户的效果。也就是说,以往的信息显示装置,不能高效率地提高用户的关心。
发明内容
于是,为了解决所述以往的问题,本发明的目的在于提供一种信息显示装置等,能够高效率地提高用户对显示的内容的关心。
为了实现所述目的,本发明的实施方案之一中的信息显示装置,显示部,在画面显示第一内容;用户状态检测部,检测用户状态,该用户状态是位于所述画面的前面的用户的物理状态;关心度推定部,根据由所述用户状态检测部检测出的用户状态,推定关心度,该关心度表示用户对由所述显示部显示在画面的第一内容的关心程度;以及显示控制部,在由所述关心度推定部推定的关心度的变化率的大小不足于第一阈值的情况下,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,使所述显示部显示第二内容。
据此,按照用户状态,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,能够显示内容,并且,根据焦急效果,能够高效率地提高用户的关心。
在此,焦急效果是指,通过将内容的至少一部分所示的信息不给用户明显,从而能够吸引用户的注意的效果。也就是说,焦急效果是指,通过令用户焦急,从而提高关心的效果。
并且,优选的是,所述显示控制部,进一步,在由所述关心度推定部推定的关心度的变化率的大小超过第二阈值的情况下,提高显示在所述画面的第二内容的鲜明度或公开度。
据此,按照用户的关心度的变化率的大小,能够动态地提高鲜明度或公开度已降低的内容的鲜明度或公开度,因此,以用户的关心将要提高的状态,能够给用户公开内容所示的信息。其结果为,能够更高效率地提高用户的关心,并且,能够使内容所示的信息给用户留下深刻印象。
并且,优选的是,所述显示控制部,进一步,在由所述关心度推定部推定的关心度超过第三阈值的情况下,提高显示在所述画面的第二内容的鲜明度或公开度。
据此,按照用户的关心度的大小,能够动态地提高鲜明度或公开度已降低的内容的鲜明度或公开度,因此,在用户的关心高时,能够给用户公开内容所示的信息。其结果为,能够更高效率地提高用户的关心,并且,能够使内容所示的信息给用户留下深刻印象。
并且,优选的是,所述显示控制部,在由所述关心度推定部推定的关心度的变化率的大小不足于所述第一阈值的情况下,并且,在由所述关心度推定部推定的关心度的变化率的大小不足于所述第一阈值的状态持续了规定时间的情况下,使所述显示部显示所述第二内容。
据此,反应于用户的关心度的变化率的大小暂时变小,能够减少必要以上的内容的鲜明度或公开度的变更。
并且,优选的是,所述用户状态检测部检测所述用户的移动方向,以作为所述用户状态,所述关心度推定部,由所述用户状态检测部检测出的用户的移动方向越接近从该用户向代表所述画面的位置的方向、或从该用户向正在显示所述第一内容的位置的方向,就推定关心度越高。
据此,按照用户的移动方向,能够高精度地推定关心度。
并且,优选的是,所述用户状态检测部检测所述用户的移动速度,以作为所述用户状态,所述关心度推定部,由所述用户状态检测部检测出的用户的移动速度越小,就推定关心度越高。
据此,按照用户的移动速度,能够高精度地推定关心度。
并且,优选的是,所述用户状态检测部检测所述用户的位置,以作为所述用户状态,所述关心度推定部,由所述用户状态检测部检测出的用户的位置与正在显示所述第一内容的位置之间的距离越小,就推定关心度越高。
据此,按照用户的位置,能够高精度地推定关心度。
并且,优选的是,所述用户状态检测部检测用户的视线方向,以作为所述用户状态,所述关心度推定部,由所述用户状态检测部检测出的用户的视线方向越接近从该用户向代表所述画面的位置的方向、或从该用户向正在显示所述第一内容的位置的方向,就推定关心度越高。
据此,按照用户的视线方向,能够高精度地推定关心度。
并且,优选的是,还包括目标用户选定部,从位于所述画面的前面的用户中选定目标用户,所述显示控制部,在由所述目标用户选定部选定的目标用户的关心度的变化率的大小不足于所述第一阈值的情况下,使所述显示部显示所述第二内容。
据此,按照从位于画面的前面的用户中选定的目标用户状态,能够变更内容的鲜明度或公开度,且能够高效率地提高选定的用户的关心。
并且,优选的是,所述目标用户选定部,在由所述关心度推定部推定的关心度为第四阈值以上的情况下,将与该关心度相对应的用户选定为目标用户。
据此,能够将根据焦急效果能够提高关心的可能性高的用户选定为目标用户,能够更高效率地提高用户的关心。
并且,优选的是,所述目标用户选定部,在正在显示所述第一内容的位置与用户的位置之间的距离不足于第五阈值的情况下,将该用户选定为目标用户。
据此,能够将根据焦急效果能够提高关心的可能性高的用户选定为目标用户,能够更高效率地提高用户的关心。
并且,优选的是,还包括内容数据库,至少记忆适用区域,该适用区域表示所述第二内容的一部分且表示作为将要给用户看的信息的本质信息的部分的位置,所述显示控制部,以所述内容数据库所记忆的所述第二内容的适用区域的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,使所述显示部显示所述第二内容。
据此,能够降低显示本质信息的区域的鲜明度或公开度,能够提高吸引用户的注目的效果。其结果为,能够更高效率地提高用户的关心,并且,能够提高将要给用户看的信息的印象。
并且,优选的是,所述预先规定的鲜明度或公开度是所述第一内容的鲜明度或公开度,所述显示控制部,使所述显示部将所述第一内容显示为所述第二内容。
据此,按照用户状态,能够降低已显示的内容的鲜明度或公开度。
并且,本发明的实施方案之一中的信息显示方法,第一显示步骤,在画面显示第一内容;用户状态检测步骤,检测用户状态,该用户状态是位于所述画面的前面的用户的物理状态;关心度推定步骤,根据在所述用户状态检测步骤检测出的用户状态,推定关心度,该关心度表示用户对在所述显示步骤显示在画面的第一内容的关心程度;以及第二显示步骤,在所述关心度推定步骤推定的关心度的变化率的大小不足于第一阈值的情况下,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,显示第二内容。
据此,能够得到与所述信息显示装置相同的效果。
而且,本发明也可以实现为用于使计算机执行所述的信息显示方法的程序。而且,当然,也可以将这些程序经由CD-ROM(Compact Disc ReadOnly Memory)等的计算机可读的记录介质、或互联网等的传输介质来分发。
根据本发明的实施方案之一中的信息显示装置,按照用户对显示的内容的关心度的变化率的大小,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,能够显示内容。其结果为,根据焦急效果,能够吸引用户的注目,因此,能够高效率地提高用户的关心。
附图说明
图1是本发明的实施例1中的信息显示装置的外观图。
图2是示出本发明的实施例1中的信息显示装置的功能结构的方框图。
图3是用于说明鲜明度的图。
图4是用于说明公开度的图。
图5是示出本发明的实施例1中的信息显示装置执行的处理的流程的流程图。
图6是示出本发明的实施例1的变形例1中的信息显示装置执行的处理的流程的流程图。
图7是示出本发明的实施例1的变形例2中的信息显示装置执行的处理的流程的流程图。
图8是示出本发明的实施例2中的信息显示装置的功能结构的方框图。
图9A是用于说明本发明的实施例2中的用户位置计算方法的图。
图9B是用于说明本发明的实施例2中的用户位置计算方法的图。
图10是示出本发明的实施例2中的内容数据库的一个例子的图。
图11是用于说明适用区域的图。
图12是示出本发明的实施例2中的信息显示装置执行的处理的流程的流程图。
图13是用于说明本发明的实施例2中的关心度的计算方法的图。
图14A是用于说明本发明的实施例2中的目标用户的选定方法的图。
图14B是用于说明本发明的实施例2中的目标用户的选定方法的图。
图15是用于说明本发明的实施例2中的关心度的变化率的计算处理的图。
图16是示出本发明的实施例2中的信息显示装置的工作的具体例的图。
图17A是示出本发明的实施例2中的内容的显示方法的另一个例子的图。
图17B是示出本发明的实施例2中的内容的显示方法的另一个例子的图。
图18是示出本发明的实施例2的变形例中的与视线方向的检测有关的处理的流程的流程图。
图19是用于说明本发明的实施例2的变形例中的检测用户的脸的朝向的处理的图。
图20是用于说明视线方向基准面的图。
图21A是用于说明黑眼珠中心的检测的图。
图21B是用于说明黑眼珠中心的检测的图。
具体实施方式
以下,参照附图说明本发明的实施例。
(实施例1)
本发明的实施例1中的信息显示装置10是在画面显示内容的装置,其中,按照用户对显示在画面的内容(以下,简称为“显示内容”)的关心度,使显示内容的鲜明度或公开度发生变化。
图1是本发明的实施例1中的信息显示装置的外观图。并且,图2是示出本发明的实施例1中的信息显示装置的功能结构的方框图。
信息显示装置10包括用户状态检测部11、关心度推定部12、显示控制部13、以及显示部14。
用户状态检测部11,检测用户状态,该用户状态是位于画面的前面的用户的物理状态的用户状态。具体而言,用户状态检测部11,例如,检测脑波等的生物信号、用户的位置、速度、脸或身体的朝向、视线方向、表情、发言内容、发言量、或声音的大小等,以作为用户状态。
关心度推定部12,根据由用户状态检测部11检测出的用户状态,推定关心度,该关心度表示用户对由显示部14显示在画面的内容的关心程度。
具体而言,例如,关心度推定部12,检测出的用户的移动方向越接近从用户向代表画面的位置的方向、或从用户向正在显示内容的位置的方向,就推定关心度越高。也就是说,关心度推定部12,若用户向画面或显示内容移动,则推定关心度高。
在此,代表画面的位置是指,画面上的位置、且例如画面的中心位置(以下,简称为“画面的中心”)或重心位置等。并且,正在显示内容的位置是指,正在显示内容的画面上的位置、且代表该内容的位置。具体而言,例如,正在显示内容的位置是,正在显示内容的区域的中心位置(以下,简称为“内容的中心”)或重心位置等。并且,例如,正在显示内容的位置也可以是,正在显示内容的一部分表示的图像(例如,广告对象商品的图像)的区域的中心位置或重心位置。
并且,例如,关心度推定部12,检测出的用户的移动速度越小,就推定关心度越高。也就是说,若用户在画面的前面缓慢移动,则推定关心度高。
并且,例如,关心度推定部12,检测出的用户的位置与正在显示内容的位置之间的距离越小,就推定关心度越高。
并且,例如,关心度推定部12,检测出的用户的视线方向越接近从用户向代表画面的位置的方向、或从用户向正在显示内容的位置的方向,就推定关心度越高。也就是说,关心度推定部12,若用户看画面或显示内容的方向,则推定关心度高。
并且,关心度推定部12也可以,根据检测出的生物信号、表情、发言内容、发言量、或声音的大小信息等,推定关心度。
显示控制部13,在由关心度推定部12推定的关心度的变化率的大小不足于第一阈值的情况下,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,使显示部14显示内容。
具体而言,显示控制部13,根据公式(1),计算表示关心度的时间上的变化程度的变化率的大小a(t)。k(t)是在时刻t的关心度。进而,显示控制部13,判断如此计算出的变化率的大小a(t)是否不足于第一阈值。
在此,在变化率的大小a(t)不足于第一阈值的情况下,显示控制部13,以一部分或全部的鲜明度或公开度低于正在显示在画面的内容的鲜明度或公开度的状态,使显示部14显示该内容。也就是说,显示控制部13,例如,按照规定的时间,降低正在显示在画面的内容的至少一部分的鲜明度或公开度。
(公式1)
a ( t ) = | k ( t ) - k ( t - Δt ) Δt | · · · ( 1 )
在此,鲜明度表示内容的鲜明程度。也就是说,鲜明度表示内容所示的信息的鲜明程度。例如,在模糊效果或马赛克效果等的影像效果适用于内容的情况下,内容的鲜明度降低。
并且,公开度表示内容的公开程度。也就是说,公开度表示公开内容所示的信息的程度。例如,若与内容中包含的图像不同的图像被重叠并配置在内容中包含的图像的一部分或全部,则内容的公开度降低。
第一阈值是表示以下的情况的值,即,例如因用户对显示内容的兴趣降低等的理由,而用户对内容的关心度的变化变小了。
显示部14,例如具有等离子显示面板(PDP:Plasma Display Panel)或液晶面板(Liquid Crystal Panel)等的画面,在该画面显示内容。
图3是用于说明鲜明度的图。并且,图4是用于说明公开度的图。在图3以及图4中,将宣传销售单位“XXX Corporation”销售的品牌名“ABCD”的商品“电视机”的图像作为显示在画面的内容的一个例子,来进行说明。
图3(a)示出鲜明度降低之前的内容。并且,图3(b)示出对作为内容的一部分的表示商品的外观的区域执行马赛克处理后的内容。也就是说,图3(b)示出,以低于图3(a)的内容的鲜明度的状态来显示的内容。
如此,显示控制部13,在画面显示对内容的一部分适用了模糊效果或马赛克效果等的影像效果的内容,从而降低内容的一部分的鲜明度。
图4(a)示出公开度降低之前的内容。并且,图4(b)示出在作为内容的一部分的表示商品的外观的区域重叠与商品不同的图像的内容。也就是说,图4(b)示出,以低于图4(a)的内容的公开度的状态显示的内容。
如此,显示控制部13,在内容的一部分的区域重叠并显示与原来的图像不同的图像,从而降低内容的一部分的公开度。
而且,显示控制部13也可以,通过将原来的图像自然地变化为与该图像不同的图像的变形(morphing),降低内容的一部分的公开度。
并且,在图3以及图4中,说明了针对内容的一部分降低鲜明度或公开度,但也可以,显示控制部13,针对内容的全部降低鲜明度或公开度。
而且,优选的是,显示控制部13,降低表示作为将要给用户看的信息的本质信息的部分的鲜明度或公开度。据此,信息显示装置10,能够降低显示本质信息的区域的鲜明度或公开度,根据焦急效果,更能够吸引用户的注目。其结果为,信息显示装置10,能够高效率地提高用户的关心,并且,能够使将要给用户看的信息给用户留下深刻印象。
其次,说明如上构成的信息显示装置10的各种工作。
图5是示出本发明的实施例1中的信息显示装置执行的处理的流程的流程图。
首先,显示部14,在画面显示内容(S100)。其次,用户状态检测部11,检测用户状态(S101)。接着,关心度推定部12,根据检测出的用户状态推定关心度(S102)。进而,显示控制部13,计算关心度的变化率的大小(S104)。而且,显示控制部13,判断关心度的变化率的大小是否不足于第一阈值(S106)。
在此,在关心度的变化率的大小不足于第一阈值的情况下(S106的“是”),显示控制部13,降低显示在画面的内容的至少一部分的的鲜明度或公开度(S108),结束处理。也就是说,显示控制部13,按照用户的关心度,以至少一部分的鲜明度或公开度低于显示在画面的内容的鲜明度或公开度的状态,在画面显示内容。另一方面,在关心度的变化率的大小在第一阈值以上的情况下(S106的“否”),结束处理。
通过执行所述步骤S100至步骤S108的处理,信息显示装置10,按照用户的关心度,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,在画面能够显示内容。而且,信息显示装置10也可以,反复执行步骤S100至步骤S108的处理。
如上所述,本实施例中的信息显示装置10,按照用户对显示的内容的关心度的变化率的大小,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,能够显示内容。其结果为,信息显示装置10,根据焦急效果,能够吸引用户的注目,因此,能够高效率地提高用户的关心。
而且,在本实施例中,显示控制部13,在关心度的变化率的大小单纯地不足于第一阈值的情况下,以鲜明度或公开度低的状态,使显示部14显示内容,但也可以是,与此不同的情况。例如,显示控制部13也可以,在关心度的变化率的大小不足于第一阈值的状态持续了规定时间的情况下,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,使显示部14显示内容。据此,信息显示装置10,反应于用户的关心度的变化率的大小暂时变小,能够减少必要以上的内容的鲜明度或公开度的变更。
(实施例1的变形例1)
实施例1的变形例1中的信息显示装置10,与实施例1中的信息显示装置10不同之处是,在用户的关心度的变化率的大小为小时,在画面显示与正在显示在画面的内容不同的内容。以下,以与实施例1不同之处为中心,参照附图说明本变形例。
与图2示出的实施例1中的信息显示装置10相同,本变形例中的信息显示装置10也包括用户状态检测部11、关心度推定部12、显示控制部13、以及显示部14。而且,对于用户状态检测部11、关心度推定部12以及显示部14,与实施例1相同,因此省略说明。
本变形例中的显示控制部13,在由关心度推定部12推定的关心度的变化率的大小不足于第一阈值的情况下,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,使显示部14显示与正在显示在画面的内容不同的内容。
在此,预先规定的鲜明度或公开度是,例如内容的原来的鲜明度或公开度。也就是说,典型而言,预先规定的鲜明度或公开度是,未适用用于降低鲜明度或公开度的影像效果、或未执行用于降低鲜明度或公开度的图像处理的内容的鲜明度或公开度。
其次,说明如上构成的本变形例中的信息显示装置10的各种工作。
图6是示出本发明的实施例1的变形例1中的信息显示装置执行的处理的流程的流程图。而且,在图6中,对于与图5相同的处理,附上相同的符号,省略说明。
在关心度的变化率的大小不足于第一阈值的情况下(S106的“是”),显示控制部13,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,使显示部14显示与正在显示在画面的内容不同的内容(S112),结束处理。也就是说,显示控制部13,使显示部14显示预先降低了至少一部分的鲜明度或公开度且与正在显示在画面的内容不同的内容。
如上所述,本变形例中的信息显示装置10,在重新显示内容时,以降低了鲜明度或公开度的状态能够进行显示,因此,根据焦急效果,能够高效率地提高用户的关心。
(实施例1的变形例2)
在规定的期间一律地降低鲜明度或公开度的情况下,存在的问题是,令用户焦急的期间过长,反而降低用户的关心。于是,实施例1的变形例2中的信息显示装置10,其中,按照用户的关心度,动态地决定提高内容的鲜明度或公开度的定时。下,以与实施例1不同之处为中心,参照附图说明本变形例。
与图2示出的实施例1中的信息显示装置10相同,本变形例中的信息显示装置10也包括用户状态检测部11、关心度推定部12、显示控制部13、以及显示部14。而且,对于用户状态检测部11、关心度推定部12以及显示部14,与实施例1相同,因此省略说明。
本变形例中的显示控制部13,根据用户的关心度,提高显示在画面的内容的鲜明度或公开度。
具体而言,显示控制部13,例如,在由关心度推定部12推定的关心度的变化率的大小超过第二阈值时,提高显示在画面的内容的鲜明度或公开度。第二阈值是表示以下的情况的值,即,因降低内容的鲜明度或公开度,而用户的关心度的变化率变大了。而且,优选的是,第二阈值在第一阈值以上。
并且,例如,显示控制部13也可以,在由关心度推定部12推定的关心度超过第三阈值时,提高显示在画面的内容的鲜明度或公开度。第三阈值是表示以下的情况的值,即,因降低内容的鲜明度或公开度,而用户的关心度提高了。
其次,说明如上构成的本变形例中的信息显示装置10的各种工作。
图7是示出本发明的实施例1的变形例2中的信息显示装置执行的处理的流程的流程图。而且,在图7中,对于与图5相同的处理,附上相同的符号,省略说明。
在计算关心度的变化率的大小后,显示控制部13,判断是否已经降低正在显示在画面的内容的鲜明度或公开度(S122)。也就是说,显示控制部13,判断正在显示在画面的内容是否为以鲜明度或公开度低于预先规定的鲜明度或公开度的状态来正在显示在画面的内容。
在此,在还未降低鲜明度或公开度的情况下(S122的“否”),信息显示装置10,执行步骤S106至步骤S108的处理,返回到步骤S101的处理。
另一方面,在降低了鲜明度或公开度的情况下(S122的“是”),显示控制部13,根据用户的关心度,判断是否提高内容的鲜明度或公开度(S124)。
在此,在判断为提高内容的鲜明度或公开度的情况下(S124的“是”),显示控制部13,提高显示在画面的内容的鲜明度或公开度(S126),返回到步骤S101的处理。另一方面,在判断为不提高内容的鲜明度或公开度的情况下(S124的“否”),返回到步骤S101的处理。
如上所述,本变形例中的信息显示装置10,按照用户的关心度的变化率的大小或关心度的大小等,能够动态地提高显示在画面的内容的鲜明度或公开度。因此,信息显示装置10,能够按照用户状态,向用户动态地公开内容表示的信息。其结果为,信息显示装置10,能够更高效率地提高用户的关心,并且,能够使内容表示的信息给用户留下深刻印象。
(实施例2)
其次,对于本发明的实施例2,利用附图进行详细说明。
本发明的实施例2中的信息显示装置20,与实施例1中的信息显示装置10主要不同之处是,从位于画面的前面的用户中选定目标用户。
图8是示出本发明的实施例2中的信息显示装置的功能结构的方框图。
如图8示出,信息显示装置20包括:用户识别部21,从用户检测摄像机60获得图像信息;用户状态检测部22;关心度推定部23;目标用户选定部24;内容数据库25;显示控制部26;以及显示部27。
在显示部27的画面的周围设置至少两台用户检测摄像机60。也就是说,用户检测摄像机60包括第一用户检测摄像机60a和第二用户检测摄像机60b。而且,用户检测摄像机60包括,CCD(Charge Coupled Device:电荷耦合器件)或CMOS(Complementary Metal OxideSemiconductor:互补金属氧化半导体)等的图像传感器和光学系统。
并且,第一用户检测摄像机60a和第二用户检测摄像机60b同时拍摄存在于画面的前面的用户。而且,第一用户检测摄像机60a和第二用户检测摄像机60b将表示拍摄的图像的图像信息输出到用户识别部21以及用户状态检测部22。
用户识别部21,在从用户检测摄像机60得到的图像信息表示的图像中提取脸区域。而且,用户识别部21,按照提取的每个脸区域,输出用户识别信息,该用户识别信息是表示该脸区域的特征的信息,也是用于确定用户的信息。
用户状态检测部22,检测用户状态,该用户状态是位于画面的前面的用户的物理状态。
具体而言,用户状态检测部22,利用由第一用户检测摄像机60a以及第二用户检测摄像机60b拍摄的图像之间的拍摄了用户的区域(以下,简称为“用户区域”)的对应关系,按每个用户计算用户和画面的相对位置,以作为用户状态。也就是说,用户状态检测部22,利用由立体视的视差,按每个用户检测用户的位置,以作为用户状态。进而,用户状态检测部22,根据检测出的用户的位置的时间变化,检测用户的移动矢量(用户的移动方向以及用户的移动速度)。
图9A以及图9B是用于说明本发明的实施例2中的用户位置计算方法的图。
如图9A示出,第一用户检测摄像机60a和第二用户检测摄像机60b被设置,以便按照间隔B相隔、且平行于信息显示装置20的画面。具体而言,第一用户检测摄像机60a和第二用户检测摄像机60b被设置,以便各个用户检测摄像机的光轴相互平行、按照间隔B相隔、垂直于画面,并且,各个用户检测摄像机的光学中心被配置在包含画面的平面上。
而且,用户状态检测部22,提取由各个用户检测摄像机60拍摄的图像内的用户区域。而且,用户状态检测部22,根据图像间的对应的用户区域的位置的偏差,计算用户和信息显示装置20之间的距离D。具体而言,例如,用户状态检测部22,预先保存以用户不在的状态而由各个用户检测摄像机60拍摄的图像,求出用户出现在摄像范围(用户检测可能区域)时所拍摄的图像和保存的图像之间的差分,从而提取用户区域。并且,用户状态检测部22也可以,提取通过脸图像的检测以及脸图像的核对而得到的用户的脸区域,以作为用户区域。
图9B是示出用于根据两个图像上的对应的用户区域的位置关系求出用户和摄像机设置面(信息显示装置20的画面)之间的距离D的、由立体视的测距原理的图。如图9B示出,作为位置测量对象的用户的像被投影在第一用户检测摄像机60a以及第二用户检测摄像机60b的各个图像传感器的拍摄面。在将如此投影的位置测量对象的用户的像的图像上的偏差作为Z时,用户状态检测部22,如公式(2),利用摄像机的焦点距离f和摄像机的光轴间的距离B,能够计算用户和信息显示装置20的画面之间的距离D。
(公式2)
D = f B Z · · · ( 2 )
并且,用户状态检测部22,根据图像中的用户区域的位置和由公式(2)计算出的距离D,能够求出平行于信息显示装置20的画面的方向上的用户位置。用户状态检测部22,如此计算并输出对信息显示装置20的用户的相对位置。
进而,用户状态检测部22,根据如此计算出的位置的时间上的变化,计算用户的移动矢量。具体而言,用户状态检测部22,按每个用户保持计算出的用户的位置,利用保持的用户的位置,按每个用户计算用户的移动矢量。
而且,用户状态检测部22,并不需要根据立体视差计算用户的位置。例如,用户状态检测部22也可以,根据由光波测距(Time of Flight)的原理得到的距离信息,计算用户和信息显示装置20之间的相对位置。在此情况下,用户检测摄像机60包括利用光波测距的原理输出距离信息的距离图像传感器,且设置至少一台用户检测摄像机60。
并且,用户状态检测部22也可以,通过设置在信息显示装置20的画面的前面的地板面的地板压力传感器,获得对信息显示装置20的用户的相对位置。在此情况下,不需要设置用户检测摄像机60。
关心度推定部23,根据用户状态检测部22输出的用户的位置等,按由用户识别信息确定的每个用户,推定用户对显示内容的关心度。对于关心度的计算方法,在后面进行说明。
目标用户选定部24,根据关心度推定部23输出的各个用户的关心度,选定目标用户。例如,目标用户选定部24,在对显示内容的关心度在按每个显示内容预先规定的第四阈值以上的情况下,将与该关心度相对应的用户选定为目标用户。第四阈值是表示用户对显示内容表示某种程度的关心的值。也就是说,第四阈值是用于选定通过降低内容的鲜明度或公开度而更能够期待提高关心度的用户的值。
而且,目标用户选定部24也可以,用户的位置和显示内容的中心之间的距离不足于按每个显示内容预先规定的第五阈值的情况下,将该用户选定为目标用户。第五阈值是表示用户对显示内容表示某种程度的关心的距离。也就是说,第五四阈值是用于选定能够期待通过降低内容的鲜明度或公开度而更提高关心度的用户的距离。
内容数据库25是,按表示用户的关心度的水准的每个关心度级,记忆有内容、和适用于该内容的影像效果的种类以及适用区域的数据库。
图10是示出本发明的实施例2中的内容数据库的一个例子的图。如图10示出,在内容数据库25,按每个关心度级,将内容和影像效果以及适用区域相关联来存储。而且,在图10中,将内容数据库25所存储的内容是与商品名或品牌名“ABCD”的商品“电视机”的广告有关的内容的情况为一个例子,来进行说明。
关心度级“1”的内容是,商品“电视机”的印象人物被描述大的内容。并且,关心度级“2”的内容是,与比关心度级“1”相比,印象人物被描述略小,却在左上方描述有商品的图像的内容。并且,关心度级“3”的内容是,示出商品的阵容的内容。如此,存储用户的关心度越高就越出示商品的详细的信息的内容,信息显示装置20,用户的关心度越高,就越表示更详细的信息,从而能够使广告吸引用户的关心。
影像效果是,为了降低内容的鲜明度或公开度而适用于内容的效果。例如,影像效果是将内容掩盖“hiding”、或将内容模糊“blur”等的效果。“blur(30)”表示,模糊效果的强度为“30”。也就是说,“blur(75)”表示比“blur(30)”更强的模糊效果。如此,优选的是,在内容数据库25,除了存储影像效果的种类以外,还存储影像效果的强度。
适用区域,可以是内容的整体“all”,也可以是内容的一部分的区域。例如,“rectangle(20,50,500,300)”表示,坐标(20,50)是一个顶点、坐标(500,300)是位于该一个顶点的对角的顶点的长方形区域。具体而言,如图11示出,“rectangle(20,50,500,300)”表示,在以显示内容的左上为坐标原点的坐标系中,以坐标值x=20、y=50的点为左上的顶点、以x=500、y=300的点为右下的顶点的长方形区域。
在显示内容是商品的广告的情况下,若适用用于降低鲜明度或公开度的影像效果的适用区域是,表示商品名或商品的印象人物等对使商品吸引买主重要的信息的区域,则能够期待对用户的一种焦急效果,信息显示装置20,能够吸引用户的注意。也就是说,若适用区域是表示本质信息的区域,则根据焦急效果能够提高用户的关心。反而,即使适用用于降低鲜明度或公开度的适用影像效果的适用区域是表示重要的信息的区域以外的区域,信息显示装置20也能够,仅使重要的信息看清楚,而使整体不懂,从而能够吸引用户的注意。
显示控制部26,在由关心度推定部23推定的关心度的变化率的大小不足于第一阈值的情况下,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,使显示部14显示与正在显示的内容不同的内容。并且,显示控制部26具有应用程序控制部26a和画面描绘部26b。
应用程序控制部26a,在更新显示部27的画面的描绘细节时,将作为与该描绘细节的更新有关的信息的更新信息输出到画面描绘部26b。
画面描绘部26b,根据更新信息,描绘显示在显示部27的内容,将描绘了的内容输出到显示部27。
显示部27,具有画面,在画面显示由画面描绘部26b描绘的内容。
其次,说明如上构成的信息显示装置20的各种工作。特别是,以多个用户位于信息显示装置20的前面的状况为例子,说明信息显示装置20的各种工作。
图12是示出本发明的实施例2中的信息显示装置执行的处理的流程的流程图。图13是用于说明本发明的实施例2中的关心度的计算方法的图。图14A以及图14B是用于说明本发明的实施例2中的目标用户的选定方法的图。
首先,用户识别部21,通过从由用户检测摄像机60拍摄的图像中提取脸区域,从而生成用于确定用户的用户识别信息(S202)。
而且,用户状态检测部22,从由用户检测摄像机60拍摄的图像中提取用户区域,按提取的每个用户区域检测用户状态(S204)。具体而言,用户状态检测部22,按每个用户区域计算用户的位置。进而,用户状态检测部22,根据计算出的用户的位置的时间上的变化,计算用户的移动矢量。而且,关心度推定部23,根据公式(3),利用用户的移动矢量
Figure BPA00001204830600171
从用户的移动矢量
Figure BPA00001204830600172
和画面的交点到显示内容的中心为止的距离s、用户的位置和显示内容的中心的距离d,计算用户对显示内容的关心度k(S206)。
(公式3)
k = g 1 * 1 s + 1 + g 2 * 1 | u → | + g 3 * 1 d · · · ( 3 )
在此,g1、g2以及g3是增益,也是0以上的实数。
公式(3)的右边的第一项是与用户的移动方向有关的项,也是用于用户移动来越接近显示内容,使关心度就越大的项。
在图13中以实线表示的移位矢量表示,若在移动方向使该移位矢量延伸,则与画面或延长画面的面交叉的矢量。另一方面,在图13中以虚线表示的移位矢量表示,即使在移动方向使该移位矢量延伸,也不会与画面以及画面延伸的面交叉的矢量。
从用户的移动矢量
Figure BPA00001204830600181
和画面的交点到显示内容的中心为止的距离s,用户向显示内容越移动,就越成为小的值,从而第一项成为大的值。因此,根据该第一项,用户的移动方向越朝向显示内容的中心,关心度就越大。而且,对于从用户的移动矢量
Figure BPA00001204830600182
和画面的交点到显示内容的中心为止的距离s,虽然在图13中仅示出用户A以及用户C,但是,其它用户的距离s也是与用户A以及用户C相同计算的。并且,如用户B,即使在移动方向使移位矢量延伸,也不会与画面以及画面延伸的面交叉的用户的距离s成为无限大(∞),并且,与g1的值无关,而第一项成为0。
并且,在图13中,距离s是从用户的移动矢量和画面的交点到显示内容的中心为止的距离,但也可以是从用户的移动矢量和画面的交点到画面的中心为止的距离。在此情况下,用户移动来越接近画面的中心,关心度就越大。并且,距离s也可以是,从用户的移动矢量和画面的交点到显示内容的一部分表示的图像的中心为止的距离。在此情况下,用户移动来越接近显示内容的一部分表示的图像的中心,关心度就越大。
公式(3)的右边的第二项是与用户的速度有关的项,也是用于用户的移动越缓慢,使关心度就越大的项。
公式(3)的右边的第三项是与用户的位置和显示内容的中心的距离有关的项,也是用于用户的位置越接近显示内容的位置,使关心度就越大的项。
其次,目标用户选定部24,选定目标用户(S208)。具体而言,目标用户选定部24,例如,将关心度k在预先规定的第四阈值kTH以上的用户选定为目标用户。例如,在图14A中,在第四阈值kTH被设定为“0.4”的情况下,目标用户选定部24,将关心度为“0.7”的“用户A”和关心度为“0.4”的“用户D”设定为目标用户。
而且,目标用户选定部24也可以,将从显示内容的中心的距离d不足于预先规定的第五阈值的用户选定为目标用户。在此情况下,例如,在图14B中,目标用户选定部24,将从显示内容的中心的距离d不足于第五阈值dt的“用户A”和“用户B”选定为目标用户。
其次,显示控制部26,针对目标用户,计算关心度的变化率的大小的平均值(S210)。具体而言,显示控制部26,在当前时刻t,计算在规定的时间间隔Δt的各个目标用户的关心度的变化率的大小。例如,在步骤S208“用户A”和“用户B”被选定为目标用户的情况下,显示控制部26,如图15以及公式(4)示出,利用计算出的“用户A”的关心度k_a和“用户B”的关心度k_b,计算“用户A”的关心度的变化率的大小a_A(t)和“用户B”的关心度的变化率的大小a_B(t)。
(公式4)
a _ A ( t ) = | k _ a ( t ) - k _ a ( t - Δt ) Δt |
a _ B ( t ) = | k _ b ( t ) - k _ b ( t - Δt ) Δt | . . . ( 4 )
而且,显示控制部26,计算如此计算出的用户A和用户B的各个关心度的变化率的大小(a_A和a_B)的平均值,以作为目标用户的关心度的变化率的大小的平均值a_all。
其次,显示控制部26,判断显示部27显示的内容的至少一部分的鲜明度或公开度是否低于预先规定的鲜明度或公开度(S212)。
在此,在鲜明度或公开度高于预先规定的鲜明度或公开度的情况下(S212的“否”),显示控制部26,判断关心度的变化率的大小的平均值a_all低于第一阈值的状态是否持续了规定时间以上(S214)。
在此,在关心度的变化率的大小的平均值a_all低于第一阈值的状态不持续了规定时间以上的情况下(S214的“否”),结束处理。另一方面,在关心度的变化率的大小的平均值a_all低于第一阈值的状态持续了规定时间以上的情况下(S214的“是”),显示控制部26,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,显示对应于计算出的关心度的内容(S216)。具体而言,显示控制部26,参考内容数据库25,获得对应于计算出的关心度的内容以及影像效果。而且,显示控制部26,在显示部27显示获得的内容,并且,将获得的影像效果适用于该内容。而且,在关心度的变化率的大小的平均值a_all低于第一阈值的状态持续了规定时间以上的情况下,降低内容的鲜明度或公开度,这是因为,处于提高用户的关心度的效果高(应该提高关心度)的状况的缘故。
另一方面,在鲜明度或公开度低于预先规定的鲜明度或公开度的情况下(S212的“是”),显示控制部26,判断是否应该提高鲜明度或公开度(S218)。具体而言,例如,显示控制部26,按照由关心度推定部23推定的关心度的变化率的大小是否超过第二阈值,判断是否应该提高鲜明度或公开度。或者,显示控制部26,例如,按照由关心度推定部23推定的关心度是否超过第三阈值,判断是否应该提高鲜明度或公开度。
在此,在判断为应该提高鲜明度或公开度的情况下(S218的“是”),显示控制部26,提高显示内容的鲜明度或公开度(S220),结束处理。具体而言,显示控制部26,解除适用于正在显示在画面的内容的影像效果。另一方面,在判断为不应该提高鲜明度或公开度的情况下(S218的“否”),结束处理。
通过执行所述步骤S202至步骤S220的处理,信息显示装置20,能够按照目标用户的关心度,使内容的至少一部分的鲜明度或公开度发生变化。而且,信息显示装置20,也可以反复执行步骤S202至步骤S220的处理。
以下,利用图16,更具体地说明图12示出的处理的流程。
图16是示出本发明的实施例2中的信息显示装置的工作的具体例的图。在图16,在画面的一部分显示商品“电视机”的广告。而且,信息显示装置20,按照“用户A”的关心度,在画面显示图10示出的内容数据库25所存储的内容。例如,在图16(a)中,由于“用户A”的关心度在0至k1的范围内,因此,显示关心度级“1”的内容。
图16(a)出的状况是,目标用户的关心度顺利提高后,关心度的提高变钝了的状况。也就是说,图16(a)出的状况是,目标用户的关心度的变化率小,且关心度的变化稳定的状况。这些状态表示,虽然目标用户对显示内容的关心提高了某种程度,但是关心不会更提高的状态。也就是说,可以认为,目标用户判断为由显示内容出示的信息不是更提高关心的信息。在这些状态下,通过对显示内容(广告)的整体或一部分施加影像效果,来给用户新的刺激,从而能够使显示内容(广告)更吸引关心。
在图16(a)中,由于目标用户的关心度的变化率的大小低于第一阈值pc的状态持续了规定时间,因此,显示控制部26,如图16(b)示出,以一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,显示内容数据库25所存储的内容。具体而言,显示控制部26,将显示内容切换为作为比当前的关心度级高一级的关心度级的关心度级“2”的内容,还将影像效果“hiding(20)”适用于显示内容的适用区域“rectangle(20,50,500,300)”。其结果为,由于显示内容的商品“电视机”被显示的部分的公开度降低,因此,用户关注视认性降低了的该部分。
而且,显示控制部26,在关心度的变化率的大小超过第二阈值pc2时,如图16(c)示出,提高已降低的公开度。也就是说,显示控制部26,解除适用于内容的影像效果。而且,显示控制部26也可以,例如,在关心度超过k1时,提高内容的公开度。
在图16(c)中,关心度在k1至k2的范围内,与图16(a)相同,目标用户的关心度的变化率的大小低于阈值pc的状态持续了规定时间。于是,显示控制部26,如图16(d)将显示内容切换为关心度级“3”的内容,并且,将适用效果“blur(30)”适用于内容的适用区域“all”。其结果为,显示内容整体暂时被模糊,鲜明度降低,因此,用户会重新关注该显示内容。
而且,在图16的例子中,在图16(a)至图16(d),显示控制部26,“用户A”越接近画面或显示内容,使显示内容(广告)的显示区域的大小就越小。据此,“用户A”容易看显示内容整体,“用户A”对显示内容的的关心会提高。
如此,优选的是,显示控制部26,按照至少一名目标用户的位置,控制显示内容的画面的区域的位置或大小。具体而言,优选的是,显示控制部26,例如,将内容显示,以便至少一名目标用户的位置越接近显示内容的位置,显示内容的区域的大小就越小。并且,例如,优选的是,显示控制部26,例如,将内容显示,以便至少一名目标用户的位置越接近显示内容的位置,显示内容的区域的位置就越接近用户。
如上所述,本实施例中的信息显示装置20,按照从位于画面的前面的用户中选定的目标用户的用户状态,能够变更内容的鲜明度或公开度,且能够高效率地提高选定为目标用户的用户的关心。
并且,信息显示装置20,能够将根据焦急效果能够吸引注目的可能性高的用户选定为目标用户,且能够高效率地提高用户的关心。
而且,影像效果不仅限于所述例子。只要是降低显示内容的鲜明度或公开度来令用户暂时焦急的效果,就可以是其它的影像效果。例如,影像效果也可以是利用了易吸引用户的注意的符号或素材的效果。
而且,在本实施例中,利用与广告有关的内容进行了说明,以作为显示内容的一个例子,但是,本发明的实施方案之一中的信息显示装置,并不需要显示与广告有关的内容。信息显示装置也可以显示其它的内容,该其它的内容是通过提高用户的关心,从而得到效果的。
并且,在本实施例中,内容被显示在画面的一部分的区域,但也可以,如图17A示出,内容被显示在画面整体。并且,在本实施例中,一个内容被显示在画面,但也可以,如图17B示出,两个以上的内容(显示内容A以及显示内容B)被显示在画面。在此情况下,优选的是,信息显示装置20,按每个内容执行图12示出的处理。
并且,在本实施例中,关心度推定部23,利用用户的移动方向、移动速度以及位置的全部来推定了关心度,但是,利用用户的移动方向、移动速度以及位置之中的至少一个来推定关心度即可。例如,在公式(3),在增益g1和增益g2为0的情况下,关心度推定部23,能够仅根据用户的位置和显示内容的中心的距离,计算关心度k。
(实施例2的变形例)
实施例2的变形例中的信息显示装置20,与实施例2中的信息显示装置20不同,还利用用户的视线方向来推定关心度。以下,以与实施例2不同之处为中心,参照附图说明本变形例。
与图8示出的实施例2中的信息显示装置20相同,本变形例中的信息显示装置20包括用户识别部21、用户状态检测部22、关心度推定部23、目标用户选定部24、内容数据库25、显示控制部26、以及显示部27。而且,对于除了用户状态检测部22以及关心度推定部23以外的构成要素,与实施例2相同,因此,省略说明。
用户状态检测部22,还检测用户的视线方向,以作为用户状态。对于检测视线方向的具体方法,在后面说明。
关心度推定部23,检测出的用户的视线方向越接近从用户向代表画面的位置的方向、或从用户向正在显示内容的位置的方向,就推定关心度越高。具体而言,关心度推定部23,利用对公式(3)的右边还加上与用户的视线方向有关的第四项的公式(5),来计算关心度。公式(5)的第四项是,对从作为用户的视线方向的单位矢量的视线方向矢量
Figure BPA00001204830600231
和画面的交点到显示内容的中心为止的距离t加上1而得到的值的倒数,用户越看显示内容的中心的方向,该值就越大。
(公式5)
k = g 1 * 1 s + 1 + g 2 * 1 | u → | + g 3 * 1 d + g 4 * 1 t + 1 · · · ( 5 )
在此,与g1,g2以及g3相同,g4是增益,也是0以上的实数。
而且,距离t也可以,不是从视线方向矢量和画面的交点到显示内容的中心为止的距离,而是从视线方向矢量和画面的交点到画面的中心为止的距离。在此情况下,用户越看画面的中心的方向,关心度就越大。并且,距离t也可以是从视线方向矢量和画面的交点到显示内容的一部分表示的图像的中心为止的距离。在此情况下,用户越看显示内容的一部分表示的图像的中心的方向,关心度就越大。
其次,利用图18说明由用户状态检测部22的视线方向的检测方法。
图18是示出本发明的实施例2的变形例中的与视线方向的检测有关的处理的流程的流程图。也就是说,图18示出由用户状态检测部22的用户状态的检测处理(图12的步骤S204)的一部分。
如图18示出,用户状态检测部22,根据检测用户的脸的朝向的处理(S510)的结果、和检测作为与脸的朝向相对应的视线方向的相对视线方向的处理(S530)的结果,检测视线方向(S550)。
于是,首先,以下说明检测用户的脸的朝向的处理(S510)。
首先,用户状态检测部22,根据由用户检测摄像机60拍摄的、存在于画面的前方的用户的图像,进行脸区域的检测(S512)。其次,用户状态检测部22,针对检测出的脸区域,适用与各个基准脸朝向相对应的脸部位特征点的区域,剪出各个脸部位特征点的区域图像(S514)。
而且,用户状态检测部22,计算剪出的区域图像和预先保持的模板图像的相关度(S516)。接着,用户状态检测部22,求出按照计算出的相关度对各个基准脸朝向表示的角度进行加权并加法运算而得到的加权和,将其检测为与检测出的脸区域相对应的脸的朝向(S518)。
如上所述,用户状态检测部22,通过执行步骤S512至步骤S518的处理,从而检测用户的脸的朝向。
其次,说明检测相对视线方向的处理(S530)。
首先,用户状态检测部22,利用由用户检测摄像机60拍摄的图像,检测用户的左右的眼角的三维位置(S532)。接着,用户状态检测部22,利用由用户检测摄像机60拍摄的图像,检测用户的左右的黑眼珠中心的三维位置(S534)。而且,用户状态检测部22,利用根据左右的眼角的三维位置得到的视线方向基准面和左右的黑眼珠中心的三维位置,检测相对视线方向(S536)。
如上所述,用户状态检测部22,通过执行步骤S532至步骤S536的处理,从而检测相对视线方向。
而且,用户状态检测部22,利用如上检测出的用户的脸的朝向和相对视线方向,检测用户的视线方向。
其次,利用图19至图21B详细说明视线方向的检测处理。
图19是用于说明本发明的实施例2的变形例中的检测用户的脸的朝向的处理的图。
首先,用户状态检测部22,如图19(a)示出,从记忆有与各个基准脸朝向相对应的脸部位特征点的区域的脸部位区域DB中读出脸部位特征点的区域。接着,用户状态检测部22,如图19(b)示出,针对拍摄的图像的脸区域,按每个基准脸朝向,适用脸部位特征点的区域,按每个基准脸朝向,剪出脸部位特征点的区域图像。
而且,用户状态检测部22,如图19(c)示出,按每个基准脸朝向,计算剪出的区域图像和保持在脸部位区域模板DB的模板图像的相关度。并且,用户状态检测部22,按照如此计算出的相关度表示的相关程度的高低,计算每个基准脸朝向的权重。例如,用户状态检测部22,计算各个基准脸朝向的相关度对基准脸朝向的相关度的总和的比率,以作为权重。
接着,用户状态检测部22,如图19(d)示出,计算基准脸朝向表示的角度乘以计算出的权重而得到的值的总和,检测计算结果,以作为用户的脸的朝向。在图19(d)的例子中,针对基准脸朝向+20度的权重为“0.85”,针对0度的权重为“0.14”,针对-20度的权重为“0.01”,因此,用户状态检测部22,检测脸的朝向为16.8度(=20×0.85+0×0.14+(-20)×0.01)。
而且,在本变形例中,用户状态检测部22,以脸部位特征点的区域图像为对象来计算相关度,但是,并不需要以脸部位特征点的区域图像为对象。例如,用户状态检测部22也可以,以脸区域整体的图像为对象来计算相关度。
并且,对于检测脸的朝向的其它的方法有以下的方法,即,从脸图像检测眼睛、鼻子、嘴等的脸部位特征点,根据脸部位特征点的位置关系计算脸的朝向。对于根据脸部位特征点的位置关系计算脸朝向的方法有以下的方法,即,将预先准备的脸部位特征点的三维模型旋转、放大、缩小来进行匹配,以便与由一台摄像机得到的脸部位特征点最一致,并且,根据得到的三维模型的旋转量计算脸朝向。并且,对于根据脸部位特征点的位置关系计算脸朝向的其它的方法有以下的方法,即,基于由两台摄像机拍摄的图像,利用立体视的原理,根据左右的摄像机中的脸部位特征点位置的图像上的偏差,计算各个脸部位特征点的三维位置,并且,根据得到的脸部位特征点的位置关系计算脸的朝向。具体而言,例如有以下的方法,即,检测以双眼以及嘴这三维坐标点来张开的平面的法线方向,以作为脸朝向的方法等。
其次,利用图20、图21A以及图21B说明检测相对视线方向的方法。在本变形例中,用户状态检测部22,首先,检测视线方向基准面,其次,检测黑眼珠中心的三维位置,最后,检测相对视线方向。
首先,说明视线方向基准面的检测。
图20是用于说明视线方向基准面的图。在本变形例中,用户状态检测部22,通过检测左右的眼角(左眼以及右眼的鼻子一侧的端点)的三维位置,从而检测视线方向基准面。
视线方向基准面是在检测相对视线方向时成为基准的面,如图20示出,视线方向基准面与左右对称面相同。而且,眼角的位置,与眼梢、嘴角或眉毛等的其它的脸部位的位置相比,因表情而产生的变动少、且检测错误少。因此,在本变形例中,用户状态检测部22,利用眼角的三维位置检测作为脸的左右对称面的视线方向基准面。
具体而言,用户状态检测部22,对于由第一用户检测摄像机60a以及第二用户检测摄像机60b同时拍摄的两幅图像的每一幅,利用脸检测模块和脸部位检测模块,检测左右的眼角区域。而且,用户状态检测部22,利用检测出的眼角区域的图像间的位置的偏差(视差),检测左右的眼角的每一个的三维位置。进而,用户状态检测部22,如图20示出,检测将检测出的左右的眼角的三维位置作为端点的线段的垂直二等分面,以作为视线方向基准面。
其次,对黑眼珠中心的检测进行说明。
图21A以及图21B是用于说明黑眼珠中心的检测的图。
对于人而言,来自对象物的光,通过瞳孔达到视网膜,被转换为电信号,该电信号传递到脑,从而以视觉来识别对象物。因此,若利用瞳孔的位置,则能够检测视线方向。但是,由于日本人的虹彩为黑色或茶色,因此通过图像处理难以辨别瞳孔和虹彩。并且,瞳孔的中心和黑眼珠(包括瞳孔以及虹彩这两者)的中心大致一致。于是,在本变形例中,用户状态检测部22,在检测相对视线方向时,检测黑眼珠中心。
用户状态检测部22,首先,从拍摄的图像检测眼梢和眼角。而且,用户状态检测部22,从如图21A示出的包括眼梢和眼角的区域的图像检测亮度低的区域,以作为黑眼珠区域。具体而言,用户状态检测部22,例如,检测亮度在规定阈值以下的区域且大于规定的大小的区域,以作为黑眼珠区域。
其次,用户状态检测部22,在黑眼珠区域的任意的位置设定如图21B示出的由第一区域和第二区域而成的黑眼珠检测滤光器。而且,用户状态检测部22,搜索第一区域内的像素的亮度和第二区域内的像素的亮度的区域间分散成为最大的黑眼珠检测滤光器的位置,检测搜索结果表示的位置,以作为黑眼珠中心。用户状态检测部22,与所述相同,利用同时拍摄的两幅图像中的黑眼珠中心的位置的偏差,检测黑眼珠中心的三维位置。
最后,对相对视线方向的检测进行说明。
用户状态检测部22,利用检测出的视线方向基准面和黑眼珠中心的三维位置,检测相对视线方向。周知的是,对于成人的眼球直径,几乎没有个人差别,例如日本人的眼球直径大约24mm。因此,在已经知道朝向成为基准的方向(例如正面)时的黑眼珠中心的位置的情况下,通过求出从该位置到当前的黑眼珠中心位置为止的位移,从而能够计算并转换为视线方向。
在以往的方法中,由于未知道朝向成为基准的方向时的黑眼珠中心的位置,因此需要进行校准。但是,在本方法中,利用以下的情况,即,在朝向正面时,连结左右的黑眼珠中心的线段的中点存在于脸的中心即视线方向基准面上的情况。也就是说,用户状态检测部22,通过计算连结左右的黑眼珠中心的线段的中点与视线方向基准面之间的距离,从而检测相对视线方向。
具体而言,用户状态检测部22,利用眼球半径R以及连结左右的黑眼珠中心的线段的中点与视线方向基准面之间的距离d,如公式(6)示出,检测针对脸的朝向的左右方向的旋转角θ,以作为相对视线方向。
(公式6)
θ = sin - 1 ( d R ) · · · ( 6 )
如上所述,用户状态检测部22,利用视线方向基准面和黑眼珠中心的三维位置,检测相对视线方向。而且,用户状态检测部22,利用检测出的脸的朝向和相对视线方向,检测用户的视线方向。
如上所述,本变形例中的信息显示装置20,能够容易检测用户的视线方向,利用检测出的视线方向,能够高精度地推定关心度。
而且,在本变形例中,关心度推定部23,利用用户的移动方向、移动速度、位置、以及视线方向的全部来推定了关心度,但是,并不需要利用全部来推定关心度。例如,在公式(5)中,若增益g1、增益g2、增益g3为0,关心度推定部23,则能够仅根据用户的视线方向计算关心度k。
而且,在所述实施例2或其变形例中,信息显示装置20,利用距离s或距离t,对移动方向或视线方向与从用户向正在显示内容的位置的方向的近度进行数值化,但也可以通过其它的方法进行数值化。例如,信息显示装置20也可以,利用由移动方向或视线方向与从用户向正在显示内容的位置的方向而成的角度(-180度至180度)的绝对值,对移动方向或视线方向与从用户向显示内容的位置的方向的近度进行数值化。
以上,对于本发明的实施方案之一中的信息显示装置,根据实施例以及其变形例进行了说明,但是,本发明不仅限于这些实施例或其变形例。只要不脱离本发明的宗旨,对本实施例或其变形例施行本领域的技术人员想到的各种变形的形态、或组合不同的实施例或其变形例中的构成要素而构成的形态,也包含在本发明的范围内。
例如,在所述实施例中,信息显示装置包括了等离子显示面板或液晶面板等的画面,但是,并不需要包括画面。例如,信息显示装置也可以是,在屏幕或墙壁等的投影面投影内容的投影机等。
进而,也可以是,如下将本发明变形。
(1)具体而言,所述的各个装置是,由微处理器、ROM、RAM、硬盘单元、显示器单元、键盘、鼠标等构成的计算机系统。所述RAM或所述硬盘单元记忆有计算机程序。根据所述计算机程序,所述微处理器工作,从而各个装置实现其功能。在此,为了实现规定的功能,组合表示对计算机的命令的多个指令码,从而构成计算机程序。而且,各个装置,不仅限于包括微处理器、ROM、RAM、硬盘单元、显示器单元、键盘、鼠标等全部的计算机系统,而可以是由它们的一部分构成的计算机系统。
(2)也可以是,构成所述的各个装置的构成要素的一部分或全部,由一个系统LSI(Large Scale Integration:大规模集成电路)构成。系统LSI是,将多个构成部集成在一个芯片上而制造的超多功能LSI,具体而言,由微处理器、ROM以及RAM等构成的计算机系统。所述RAM记忆有计算机程序。根据所述计算机程序,所述微处理器工作,从而系统LSI实现其功能。
而且,在此,设想了LSI,但是根据集成度不同,有时被称为IC、超(Super)LSI、特大(Ultra)LSI。并且,集成电路化的方法,不仅限于LSI,也可以以专用电路或通用处理器来实现。也可以利用在制造LSI后能够编程的FPGA(Field Programmable Gate Array:现场可编程门阵列)、或可重构LSI内部的电路单元的连接或设定的可重构处理器。
而且,当然,若因半导体技术的进步或导出的其它的技术而出现代替LSI的集成电路化的技术,则可以利用其技术对功能框进行集成化。存在生物技术的应用等的可能性。
(3)也可以是,构成所述的各个装置的构成要素的一部分或全部,由与各个装置可装卸的IC卡或单体的模块构成。所述IC卡或所述模块是,由微处理器、ROM、RAM等构成的计算机系统。所述IC卡或所述模块也可以包括所述的超多功能LSI。根据计算机程序,微处理器工作,从而所述IC卡或所述模块实现其功能。该IC卡或该模块,也可以具有防窜改性。
(4)本发明也可以是,将所述的信息显示装置包括的具有特征性的构成部的工作作为步骤的方法。并且,也可以是由计算机实现所述方法的计算机程序,还可以是由所述计算机程序而成的数字信号。
并且,本发明也可以,将所述计算机程序或所述数字信号,记录到计算机可读的记录介质,例如记录到软盘、硬盘、CD-ROM、MO、DVD、DVD-ROM、DVD-RAM、BD(Blu-ray Disc(注册商标))、半导体存储器等。并且,也可以是,记录在这些记录介质的所述计算机程序或所述数字信号。
并且,本发明也可以,将所述计算机程序或所述数字信号,经由电通信电路、无线或有线通信电路、以互联网为代表的网络、数据广播等传输。
并且,也可以是,本发明是包括微处理器和存储器的计算机系统,所述存储器记忆有所述计算机程序,根据所述计算机程序,所述微处理器工作。
并且,将所述程序或所述数字信号记录到所述记录介质来传输,或者,将所述程序或所述数字信号经由所述网络等传输,从而由独立的其它的计算机系统执行。
(5)也可以将所述实施例以及所述变形例分别组合。
本发明的方案之一的信息显示装置,通过变更显示内容的公开度或鲜明度,从而能够提高用户对显示内容的关心度,因此,可以利用于显示广告等想要吸引用户的注意的内容的信息显示装置,例如,可以利用于室外电子广告(数字标牌)或大画面电视机等。
符号说明
10,20信息显示装置
11,22用户状态检测部
12,23关心度推定部
13,26显示控制部
14,27显示部
21用户识别部
24目标用户选定部
25内容数据库
26a应用程序控制部
26b画面描绘部
60用户检测摄像机
60a第一用户检测摄像机
60b第二用户检测摄像机

Claims (14)

1.一种信息显示装置,包括∶
显示部,在画面显示第一内容;
用户状态检测部,检测用户状态,该用户状态是位于所述画面的前面的用户的物理状态;
关心度推定部,根据由所述用户状态检测部检测出的用户状态,推定关心度,该关心度表示用户对由所述显示部显示在画面的第一内容的关心程度;以及
显示控制部,在表示由所述关心度推定部推定的关心度的时间上的变化程度的变化率的大小不足于第一阈值的情况下,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,使所述显示部显示第二内容;
所述鲜明度表示内容所示的信息的鲜明程度;
所述公开度表示内容所示的信息被公开的程度。
2.如权利要求1所述的信息显示装置,
所述显示控制部,进一步,在由所述关心度推定部推定的关心度的变化率的大小超过第二阈值的情况下,提高显示在所述画面的第二内容的鲜明度或公开度。
3.如权利要求1所述的信息显示装置,
所述显示控制部,进一步,在由所述关心度推定部推定的关心度超过第三阈值的情况下,提高显示在所述画面的第二内容的鲜明度或公开度。
4.如权利要求1所述的信息显示装置,
所述显示控制部,在由所述关心度推定部推定的关心度的变化率的大小不足于所述第一阈值的情况下,并且,在由所述关心度推定部推定的关心度的变化率的大小不足于所述第一阈值的状态持续了规定时间的情况下,使所述显示部显示所述第二内容。
5.如权利要求1所述的信息显示装置,
所述用户状态检测部检测所述用户的移动方向,以作为所述用户状态,
所述关心度推定部,由所述用户状态检测部检测出的用户的移动方向越接近从该用户向代表所述画面的位置的方向、或从该用户向正在显示所述第一内容的位置的方向,就推定关心度越高。
6.如权利要求1所述的信息显示装置,
所述用户状态检测部检测所述用户的移动速度,以作为所述用户状态,
所述关心度推定部,由所述用户状态检测部检测出的用户的移动速度越小,就推定关心度越高。
7.如权利要求1所述的信息显示装置,
所述用户状态检测部检测所述用户的位置,以作为所述用户状态,
所述关心度推定部,由所述用户状态检测部检测出的用户的位置与正在显示所述第一内容的位置之间的距离越小,就推定关心度越高。
8.如权利要求1所述的信息显示装置,
所述用户状态检测部检测用户的视线方向,以作为所述用户状态,
所述关心度推定部,由所述用户状态检测部检测出的用户的视线方向越接近从该用户向代表所述画面的位置的方向、或从该用户向正在显示所述第一内容的位置的方向,就推定关心度越高。
9.如权利要求1所述的信息显示装置,
还包括目标用户选定部,从位于所述画面的前面的用户中选定目标用户,
所述显示控制部,在由所述目标用户选定部选定的目标用户的关心度的变化率的大小不足于所述第一阈值的情况下,使所述显示部显示所述第二内容。
10.如权利要求9所述的信息显示装置,
所述目标用户选定部,在由所述关心度推定部推定的关心度为第四阈值以上的情况下,将与该关心度相对应的用户选定为目标用户。
11.如权利要求9所述的信息显示装置,
所述目标用户选定部,在正在显示所述第一内容的位置与用户的位置之间的距离不足于第五阈值的情况下,将该用户选定为目标用户。
12.如权利要求1所述的信息显示装置,
还包括内容数据库,至少记忆适用区域,该适用区域表示所述第二内容的一部分且表示作为将要给用户看的信息的本质信息的部分的位置,
所述显示控制部,以所述内容数据库所记忆的所述第二内容的适用区域的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,使所述显示部显示所述第二内容。
13.如权利要求1所述的信息显示装置,
所述预先规定的鲜明度或公开度是所述第一内容的鲜明度或公开度,
所述显示控制部,使所述显示部将所述第一内容显示为所述第二内容。
14.一种信息显示方法,包括∶
第一显示步骤,在画面显示第一内容;
用户状态检测步骤,检测用户状态,该用户状态是位于所述画面的前面的用户的物理状态;
关心度推定步骤,根据在所述用户状态检测步骤检测出的用户状态,推定关心度,该关心度表示用户对在所述显示步骤显示在画面的第一内容的关心程度;以及
第二显示步骤,在表示所述关心度推定步骤推定的关心度的时间上的变化程度的变化率的大小不足于第一阈值的情况下,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,显示第二内容;
所述鲜明度表示内容所示的信息的鲜明程度;
所述公开度表示内容所示的信息被公开的程度。
CN2009801053677A 2008-12-16 2009-12-15 信息显示装置以及信息显示方法 Active CN101946274B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2008319228 2008-12-16
JP2008-319228 2008-12-16
PCT/JP2009/006884 WO2010070882A1 (ja) 2008-12-16 2009-12-15 情報表示装置及び情報表示方法

Publications (2)

Publication Number Publication Date
CN101946274A CN101946274A (zh) 2011-01-12
CN101946274B true CN101946274B (zh) 2013-08-28

Family

ID=42268562

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009801053677A Active CN101946274B (zh) 2008-12-16 2009-12-15 信息显示装置以及信息显示方法

Country Status (6)

Country Link
US (1) US8421782B2 (zh)
EP (1) EP2360663B1 (zh)
JP (1) JP5518713B2 (zh)
KR (1) KR101596975B1 (zh)
CN (1) CN101946274B (zh)
WO (1) WO2010070882A1 (zh)

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011074198A1 (ja) * 2009-12-14 2011-06-23 パナソニック株式会社 ユーザインタフェース装置および入力方法
KR101694820B1 (ko) * 2010-05-07 2017-01-23 삼성전자주식회사 사용자 위치 인식 방법 및 장치
JP2012083669A (ja) * 2010-10-14 2012-04-26 Nippon Telegr & Teleph Corp <Ntt> 情報提示装置、情報提示方法および情報提示プログラム
JP5841538B2 (ja) * 2011-02-04 2016-01-13 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America 関心度推定装置および関心度推定方法
JP2012165181A (ja) * 2011-02-07 2012-08-30 Sony Corp 映像再生装置と映像再生方法およびプログラム
EP3664009A1 (en) * 2011-02-23 2020-06-10 Hivestack Inc. Method and system for monitoring real time demographic information for out-of-home advertising
JP2012186621A (ja) 2011-03-04 2012-09-27 Sony Corp 情報処理装置、情報処理方法およびプログラム
US9251588B2 (en) * 2011-06-20 2016-02-02 Nokia Technologies Oy Methods, apparatuses and computer program products for performing accurate pose estimation of objects
JP5932253B2 (ja) * 2011-07-12 2016-06-08 キヤノン株式会社 表示制御装置、表示制御装置の制御方法、プログラム及び記憶媒体
JP5863423B2 (ja) 2011-11-30 2016-02-16 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
US10402879B2 (en) 2011-12-30 2019-09-03 Adidas Ag Offering a customized collection of products
US9690368B2 (en) 2011-12-30 2017-06-27 Adidas Ag Customization based on physiological data
ITMI20120061A1 (it) * 2012-01-20 2013-07-21 Palo Leonardo De Sistema di acquisizione automatica del numero degli spettatori presenti davanti al televisore e inoltro ad un server per l elaborazione dei dati acquisiti.
JP5668031B2 (ja) * 2012-07-25 2015-02-12 東芝テック株式会社 表示制御装置及び表示制御プログラム
US9654563B2 (en) 2012-12-14 2017-05-16 Biscotti Inc. Virtual remote functionality
US9485459B2 (en) * 2012-12-14 2016-11-01 Biscotti Inc. Virtual window
WO2014115387A1 (ja) * 2013-01-28 2014-07-31 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
JP6116273B2 (ja) * 2013-02-13 2017-04-19 三菱電機株式会社 広告提示装置
JP2015064513A (ja) * 2013-09-26 2015-04-09 カシオ計算機株式会社 表示装置、コンテンツ表示方法及びプログラム
JP6561988B2 (ja) 2014-06-10 2019-08-21 株式会社ソシオネクスト 半導体集積回路およびそれを備えた表示装置並びに制御方法
KR101649896B1 (ko) * 2014-08-18 2016-08-23 강민정 콘텐츠 제공장치
US10129312B2 (en) * 2014-09-11 2018-11-13 Microsoft Technology Licensing, Llc Dynamic video streaming based on viewer activity
JP6539966B2 (ja) * 2014-09-18 2019-07-10 カシオ計算機株式会社 情報出力装置、情報出力方法、およびプログラム
CN105824400A (zh) * 2015-01-06 2016-08-03 索尼公司 电子设备的控制方法、控制装置以及电子设备
US9521143B2 (en) * 2015-02-20 2016-12-13 Qualcomm Incorporated Content control at gateway based on audience
US10226593B2 (en) 2015-03-31 2019-03-12 Philips Lighting Holding B.V. Lighting system and method for improving the alertness of a person
US20160307227A1 (en) * 2015-04-14 2016-10-20 Ebay Inc. Passing observer sensitive publication systems
JP6614547B2 (ja) * 2015-08-17 2019-12-04 パナソニックIpマネジメント株式会社 視聴状態検出装置、視聴状態検出システムおよび視聴状態検出方法
JP6109288B2 (ja) * 2015-12-21 2017-04-05 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
KR101744940B1 (ko) 2016-01-20 2017-06-08 서강대학교산학협력단 디지털 사이니지 시스템에서 상황인지형 컨텐츠 추천장치
US20190222890A1 (en) * 2016-06-23 2019-07-18 Outernets, Inc. Interactive content management
CA3125871C (en) * 2016-06-24 2024-06-11 The Nielsen Company (Us), Llc Invertible metering apparatus and related methods
US10405036B2 (en) 2016-06-24 2019-09-03 The Nielsen Company (Us), Llc Invertible metering apparatus and related methods
US9984380B2 (en) 2016-06-24 2018-05-29 The Nielsen Company (Us), Llc. Metering apparatus and related methods
US10178433B2 (en) 2016-06-24 2019-01-08 The Nielsen Company (Us), Llc Invertible metering apparatus and related methods
WO2018035133A1 (en) 2016-08-17 2018-02-22 Vid Scale, Inc. Secondary content insertion in 360-degree video
JP6304348B2 (ja) * 2016-11-14 2018-04-04 カシオ計算機株式会社 コンテンツ出力装置及びプログラム
WO2019044572A1 (ja) * 2017-09-04 2019-03-07 ソニー株式会社 情報処理装置および方法、並びにプログラム
US10904615B2 (en) * 2017-09-07 2021-01-26 International Business Machines Corporation Accessing and analyzing data to select an optimal line-of-sight and determine how media content is distributed and displayed
US11188944B2 (en) 2017-12-04 2021-11-30 At&T Intellectual Property I, L.P. Apparatus and methods for adaptive signage
WO2019198310A1 (ja) * 2018-04-10 2019-10-17 ソニー株式会社 情報処理装置及び情報処理方法、並びにロボット装置
JP2020113075A (ja) * 2019-01-11 2020-07-27 沖電気工業株式会社 情報処理装置、情報処理方法、プログラム、及び情報処理システム
JP7159135B2 (ja) * 2019-09-18 2022-10-24 デジタル・アドバタイジング・コンソーシアム株式会社 プログラム、情報処理方法及び情報処理装置
KR20210062955A (ko) * 2019-11-22 2021-06-01 엘지전자 주식회사 사용자인식에 기반한 디바이스의 제어
JP7316664B2 (ja) 2020-02-03 2023-07-28 マルコムホールディングス株式会社 対話ユーザの感情情報の提供装置
KR102284806B1 (ko) * 2021-04-29 2021-08-03 (주)비상정보통신 복수의 동적객체인식 처리가 가능한 다중해상도 영상처리장치 및 방법
CN114416272B (zh) * 2022-02-07 2024-04-05 神策网络科技(北京)有限公司 图形组件显示方法、装置、存储介质及电子设备

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1557083A (zh) * 2001-09-20 2004-12-22 �ʼҷ����ֵ��ӹɷ����޹�˾ 基于用户注意力的实时多媒体内容递送的质量适配

Family Cites Families (56)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5943049A (en) * 1995-04-27 1999-08-24 Casio Computer Co., Ltd. Image processor for displayed message, balloon, and character's face
JP3671258B2 (ja) 1995-04-27 2005-07-13 カシオ計算機株式会社 画像処理装置
JP2783212B2 (ja) 1995-09-08 1998-08-06 日本電気株式会社 情報提示装置
JPH1013605A (ja) 1996-06-19 1998-01-16 Star Micronics Co Ltd 電子式情報表示装置
US5731805A (en) * 1996-06-25 1998-03-24 Sun Microsystems, Inc. Method and apparatus for eyetrack-driven text enlargement
JP2894307B2 (ja) 1996-12-19 1999-05-24 日本電気株式会社 情報表示装置
JPH10187747A (ja) 1996-12-26 1998-07-21 Digital Vision Lab:Kk 情報提示方法及び装置、情報表示装置及び音声出力装置
JPH11276461A (ja) 1998-03-27 1999-10-12 Suzuki Motor Corp 注意力測定装置及びこれを用いた情報提示装置
JPH11296542A (ja) 1998-04-14 1999-10-29 Nec Corp 情報表示装置及びその表示方法並びにその制御プログラムを記録した記録媒体
JPH10320093A (ja) 1998-05-22 1998-12-04 Nec Corp メッセージ出力制御方法
JP2001043384A (ja) * 1999-07-29 2001-02-16 Nippon Telegr & Teleph Corp <Ntt> マルチメディア情報空間の入力方法及び入力装置及び入出力連携方法及び入出力連携装置及び入力プログラム及び入出力連携プログラムを記録した記録媒体
DE19951001C2 (de) * 1999-10-22 2003-06-18 Bosch Gmbh Robert Vorrichtung zur Darstellung von Informationen in einem Fahrzeug
JP2001216527A (ja) 2000-02-04 2001-08-10 Nippon Telegr & Teleph Corp <Ntt> マルチメディア情報空間入出力装置およびその方法、ならびにそのプログラムを記録した記録媒体
JP2001306941A (ja) 2000-02-15 2001-11-02 Web Port:Kk コンピュータネットワークを用いた広告方法、広告システムおよび記録媒体
GB0012132D0 (en) * 2000-05-20 2000-07-12 Hewlett Packard Co Targeted information display
KR100579121B1 (ko) 2000-06-16 2006-05-12 가부시끼가이샤 도시바 광고분배방법 및 광고분배장치
JP3707361B2 (ja) 2000-06-28 2005-10-19 日本ビクター株式会社 情報提供サーバ及び情報提供方法
JP2002023685A (ja) 2000-07-10 2002-01-23 Matsushita Electric Ind Co Ltd 電光表示装置
JP2002041537A (ja) * 2000-07-31 2002-02-08 Nec Corp 広告提示システム
JP2002063264A (ja) * 2000-08-17 2002-02-28 Fujitsu Ltd 広告情報提供システム及び方法、並びに、広告情報提供プログラムを記録したコンピュータ読取可能な記録媒体
JP3770374B2 (ja) 2000-10-16 2006-04-26 シャープ株式会社 画像表示装置
JP2001273064A (ja) 2001-01-24 2001-10-05 Casio Comput Co Ltd 画像表示制御装置及び画像表示制御方法
US7068813B2 (en) * 2001-03-28 2006-06-27 Koninklijke Philips Electronics N.V. Method and apparatus for eye gazing smart display
JP2003058086A (ja) 2001-08-10 2003-02-28 Event Kogaku Kenkyusho:Kk ネットワーク上での商品・サービス・広告情報の提供方法、この方法を用いた情報提供システム及びそのコンピュータプログラム
JP2003216635A (ja) 2002-01-17 2003-07-31 Nippon Telegraph & Telephone East Corp エージェント情報提示装置
JP2003263145A (ja) 2002-03-07 2003-09-19 Pioneer Electronic Corp 情報表示装置
JP2003271283A (ja) 2002-03-19 2003-09-26 Fuji Xerox Co Ltd 情報表示装置
JP3968778B2 (ja) 2002-10-17 2007-08-29 横河電機株式会社 アラーム表示装置
JP2004185139A (ja) 2002-11-29 2004-07-02 Fuji Photo Film Co Ltd 表示システム及び表示装置の制御方法
JP2004246709A (ja) 2003-02-14 2004-09-02 Fuji Xerox Co Ltd 情報可視化装置、方法およびプログラム
JP2004310554A (ja) 2003-04-08 2004-11-04 Tokyo Electric Power Co Inc:The 画像データインターフェースシステム、インターフェース方法、インターフェースプログラム
US7872635B2 (en) * 2003-05-15 2011-01-18 Optimetrics, Inc. Foveated display eye-tracking system and method
JP4328136B2 (ja) 2003-06-19 2009-09-09 国立大学法人 奈良先端科学技術大学院大学 関心度推定装置
JP4140898B2 (ja) 2003-08-20 2008-08-27 日本電信電話株式会社 情報提示装置および情報提示装置の使用方法
JP2005115476A (ja) 2003-10-03 2005-04-28 Canon Inc 情報出力装置、リンク報知方法、プログラム、及び記憶媒体
JP4110323B2 (ja) * 2003-11-27 2008-07-02 日本電信電話株式会社 情報出力方法及び装置及びプログラム及び情報出力プログラムを格納したコンピュータ読み取り可能な記憶媒体
US20080238889A1 (en) * 2004-01-20 2008-10-02 Koninklijke Philips Eletronic. N.V. Message Board with Dynamic Message Relocation
JP4481682B2 (ja) * 2004-02-25 2010-06-16 キヤノン株式会社 情報処理装置及びその制御方法
JP2005250322A (ja) 2004-03-08 2005-09-15 Matsushita Electric Ind Co Ltd 表示装置
JP4838499B2 (ja) 2004-05-21 2011-12-14 オリンパス株式会社 ユーザ支援装置
JP4911557B2 (ja) * 2004-09-16 2012-04-04 株式会社リコー 画像表示装置、画像表示制御方法、プログラム及び情報記録媒体
JP2006236013A (ja) 2005-02-25 2006-09-07 Nippon Telegr & Teleph Corp <Ntt> 環境的情報提示装置、環境的情報提示方法およびこの方法のプログラム
JP2006330912A (ja) 2005-05-24 2006-12-07 Toshiba Corp 情報処理装置およびプログラム
JP2007133304A (ja) 2005-11-14 2007-05-31 Nippon Telegr & Teleph Corp <Ntt> 情報表示制御装置および情報表示制御方法
JP2007133305A (ja) 2005-11-14 2007-05-31 Nippon Telegr & Teleph Corp <Ntt> 情報表示制御装置および情報表示制御方法
US20070150916A1 (en) * 2005-12-28 2007-06-28 James Begole Using sensors to provide feedback on the access of digital content
JP4779673B2 (ja) 2006-01-30 2011-09-28 トヨタ自動車株式会社 情報提供装置
JP2007272369A (ja) * 2006-03-30 2007-10-18 Advanced Telecommunication Research Institute International コンテンツ提示装置
US8775252B2 (en) * 2006-05-04 2014-07-08 National Ict Australia Limited Electronic media system
US20070271580A1 (en) * 2006-05-16 2007-11-22 Bellsouth Intellectual Property Corporation Methods, Apparatus and Computer Program Products for Audience-Adaptive Control of Content Presentation Based on Sensed Audience Demographics
US20080147488A1 (en) * 2006-10-20 2008-06-19 Tunick James A System and method for monitoring viewer attention with respect to a display and determining associated charges
JP2008141484A (ja) 2006-12-01 2008-06-19 Sanyo Electric Co Ltd 画像再生システム及び映像信号供給装置
US7556377B2 (en) * 2007-09-28 2009-07-07 International Business Machines Corporation System and method of detecting eye fixations using adaptive thresholds
JP5412743B2 (ja) * 2008-03-31 2014-02-12 大日本印刷株式会社 電子popシステム、サーバ、プログラム
JP5481954B2 (ja) * 2008-06-16 2014-04-23 大日本印刷株式会社 処理装置、処理方法、プログラム及びセンサシステム
US20100107184A1 (en) * 2008-10-23 2010-04-29 Peter Rae Shintani TV with eye detection

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1557083A (zh) * 2001-09-20 2004-12-22 �ʼҷ����ֵ��ӹɷ����޹�˾ 基于用户注意力的实时多媒体内容递送的质量适配

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JP特开2007-272369A 2007.10.18

Also Published As

Publication number Publication date
US20110050656A1 (en) 2011-03-03
CN101946274A (zh) 2011-01-12
EP2360663B1 (en) 2016-04-20
WO2010070882A1 (ja) 2010-06-24
JP5518713B2 (ja) 2014-06-11
US8421782B2 (en) 2013-04-16
JPWO2010070882A1 (ja) 2012-05-24
EP2360663A1 (en) 2011-08-24
EP2360663A4 (en) 2012-09-05
KR20110098988A (ko) 2011-09-05
KR101596975B1 (ko) 2016-02-23

Similar Documents

Publication Publication Date Title
CN101946274B (zh) 信息显示装置以及信息显示方法
Desingh et al. Depth really Matters: Improving Visual Salient Region Detection with Depth.
US20090158309A1 (en) Method and system for media audience measurement and spatial extrapolation based on site, display, crowd, and viewership characterization
CN106557937B (zh) 广告推送方法和装置
US20140363143A1 (en) System and method for identifying and altering images in a digital video
US20090196492A1 (en) Method, medium, and system generating depth map of video image
CN103093198B (zh) 一种人群密度监测方法及装置
CN102301316A (zh) 用户界面装置以及输入方法
JP2007512729A (ja) インタラクティブ・ビデオ・ディスプレイ・システムを管理する方法及びシステム
CN101807370A (zh) 信息处理装置和信息处理方法
CN103477352A (zh) 使用深度图像的姿势识别
JP5002441B2 (ja) マーケティングデータ分析方法、マーケティングデータ分析システム、データ分析サーバ装置およびプログラム
KR102097781B1 (ko) 객체 정보 제공 장치 및 방법
JP6498900B2 (ja) 広告評価システム、広告評価方法
KR20120019425A (ko) 화상 처리 장치 및 방법, 및 프로그램
WO2012006007A2 (en) Systems and methods for improving visual attention models
CN103946871A (zh) 图像处理装置、图像识别装置、图像识别方法以及程序
CN105359502A (zh) 追踪装置、追踪方法以及存储了追踪程序的非易失性存储介质
JP7088281B2 (ja) 商品分析システム、商品分析方法および商品分析プログラム
CN101739562A (zh) 面部图像提取设备和方法、电子广告设备以及计算机可读记录介质
CN103946887A (zh) 注视位置估计系统、注视位置估计系统的控制方法、注视位置估计装置、注视位置估计装置的控制方法、程序以及信息存储介质
CN113989245B (zh) 多视角多尺度图像篡改检测方法
WO2022041182A1 (zh) 音乐推荐方法和装置
EP2131306A1 (en) Device and method for tracking objects in a video, system and method for audience measurement
CN112102018A (zh) 智能试衣镜实现方法及相关装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: MATSUSHITA ELECTRIC (AMERICA) INTELLECTUAL PROPERT

Free format text: FORMER OWNER: MATSUSHITA ELECTRIC INDUSTRIAL CO, LTD.

Effective date: 20140930

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20140930

Address after: Seaman Avenue Torrance in the United States of California No. 2000 room 200

Patentee after: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

Address before: Osaka Japan

Patentee before: Matsushita Electric Industrial Co.,Ltd.