KR101596975B1 - 정보 표시 장치 및 정보 표시 방법 - Google Patents

정보 표시 장치 및 정보 표시 방법 Download PDF

Info

Publication number
KR101596975B1
KR101596975B1 KR1020107017932A KR20107017932A KR101596975B1 KR 101596975 B1 KR101596975 B1 KR 101596975B1 KR 1020107017932 A KR1020107017932 A KR 1020107017932A KR 20107017932 A KR20107017932 A KR 20107017932A KR 101596975 B1 KR101596975 B1 KR 101596975B1
Authority
KR
South Korea
Prior art keywords
user
degree
interest
content
screen
Prior art date
Application number
KR1020107017932A
Other languages
English (en)
Other versions
KR20110098988A (ko
Inventor
고타로 사카타
시게노리 마에다
Original Assignee
파나소닉 인텔렉츄얼 프로퍼티 코포레이션 오브 아메리카
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 파나소닉 인텔렉츄얼 프로퍼티 코포레이션 오브 아메리카 filed Critical 파나소닉 인텔렉츄얼 프로퍼티 코포레이션 오브 아메리카
Publication of KR20110098988A publication Critical patent/KR20110098988A/ko
Application granted granted Critical
Publication of KR101596975B1 publication Critical patent/KR101596975B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440245—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/222—Secondary servers, e.g. proxy server, cable television Head-end
    • H04N21/2223—Secondary servers, e.g. proxy server, cable television Head-end being a public access point, e.g. for downloading to or uploading from clients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42201—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Neurosurgery (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

표시되는 콘텐츠에 대한 유저의 관심을 효율적으로 높일 수 있는 정보 표시 장치를 제공한다.
정보 표시 장치(10)는, 제1 콘텐츠를 화면에 표시하는 표시부(14)와, 화면의 앞쪽에 위치하는 유저의 물리적인 상태인 유저 상태를 검출하는 유저 상태 검출부(11)와, 유저 상태 검출부(11)에 의해 검출된 유저 상태에 의거하여, 표시부(14)에 의해 화면에 표시된 제1 콘텐츠에 대한 유저의 관심 정도를 나타내는 관심도를 추정하는 관심도 추정부(12)와, 관심도 추정부(12)에 의해 추정된 관심도의 변화율의 크기가 제1 임계치 미만인 경우, 적어도 일부의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로, 제2 콘텐츠를 표시부에 표시시키는 표시 제어부(13)를 구비한다.

Description

정보 표시 장치 및 정보 표시 방법{INFORMATION DISPLAY DEVICE AND INFORMATION DISPLAY METHOD}
본 발명은, 콘텐츠를 표시하는 정보 표시 장치에 관한 것으로, 특히, 유저의 상태에 의거하여 표시 제어를 행하는 정보 표시 장치에 관한 것이다.
최근, 길거리 등에 대화면의 디스플레이를 설치하고, 이 디스플레이에 광고를 표시하는 전자 광고 시스템이 실용화되어 있다. 번화가, 역 앞의 건조물의 벽면, 혹은 공공 교통기관의 역의 구내 등에 디스플레이를 설치함으로써, 불특정 다수의 유저에게 정보를 제공할 수 있다.
그러나, 종래의 전자 광고 시스템에서는, 지나가는 통행자가 디스플레이에 표시된 광고를 바라보는 정도이며, 보는 사람에게 깊은 인상을 줄 수 없다는 문제가 있었다. 또, 디스플레이에는 동일 영상(광고)이 반복하여 표시되고 있으므로, 기다림 등으로 체류하고 있는 사람이 디스플레이에 표시된 광고를 봐도, 바로 싫증나 버린다는 문제도 있었다. 또한, 사람의 주목을 끌도록 상품 정보 등의 검색 기능을 구비한 인터랙티브한 전자 광고 시스템도 있지만, 지나가는 사람에게 있어서 검색 기능을 이용하는 것은 귀찮았다. 이와 같이, 종래의 전자 광고 시스템은, 통상의 광고판 또는 포스터 등보다 이목을 끌기 쉽지만, 광고 효과를 더욱 향상시킬 여지가 있다.
그런데, 입력 장치가 접수한 유저로부터의 요구에 따라 정보를 단계적으로 표시하는 정보 표시 장치가 제안되어 있다(예를 들면, 특허문헌 1 참조). 또, 유저와 정보 표시 장치의 거리에 따라 인지되지 않는 정보를 제외한 내용을 제시하는 정보 표시 장치도 제안되어 있다(예를 들면, 특허문헌 2 참조).
또한, 유저의 콘텐츠의 시청 상태에 맞추어, 보다 적절한 타이밍으로 콘텐츠의 재생 중에 콘텐츠 정보를 표시하는 정보 표시 장치도 제안되어 있다(예를 들면, 특허문헌 3 참조). 특허문헌 3에 기재된 정보 표시 장치는, 유저가 콘텐츠를 보고 있는 시간에 따라 관심도를 생성하고, 생성한 관심도가 저하하였을 때에, 다른 콘텐츠의 재생 등을 추천한다.
이러한 특허문헌 1∼3에 기재된 정보 표시 장치에 의해, 유저는, 효율적으로 정보를 취득하는 것이 가능해진다.
특허문헌 1 : 일본국 특허공개 평11-296542호 공보 특허문헌 2 : 일본국 특허공개 2003-271283호 공보 특허문헌 3 : 일본국 특허공개 2005-250322호 공보
그러나, 상기 종래의 정보 표시 장치는, 정보 취득에 관한 유저의 효율을 높일 수 있지만, 표시된 콘텐츠에 유저를 끌어들이는 효과는 기대할 수 없다. 요컨대, 종래의 정보 표시 장치에서는, 유저의 관심을 효율적으로 높일 수 없다.
그래서 본 발명은, 상기 종래의 과제를 해결하는 것으로서, 표시되는 콘텐츠에 대한 유저의 관심을 효율적으로 높일 수 있는 정보 표시 장치 등을 제공하는 것을 목적으로 한다.
상기 목적을 달성하기 위해, 본 발명의 한 양태에 있어서의 정보 표시 장치는, 제1 콘텐츠를 화면에 표시하는 표시부와, 상기 화면의 앞쪽에 위치하는 유저의 물리적인 상태인 유저 상태를 검출하는 유저 상태 검출부와, 상기 유저 상태 검출부에 의해 검출된 유저 상태에 의거하여, 상기 표시부에 의해 화면에 표시된 제1 콘텐츠에 대한 유저의 관심 정도를 나타내는 관심도를 추정하는 관심도 추정부와, 상기 관심도 추정부에 의해 추정된 관심도의 변화율의 크기가 제1 임계치 미만인 경우, 적어도 일부의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로, 제2 콘텐츠를 상기 표시부에 표시시키는 표시 제어부를 구비한다.
이에 의해, 유저 상태에 따라, 적어도 일부의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로 콘텐츠를 표시할 수 있으며, 관심 유발 효과에 의해 유저의 관심을 효율적으로 높일 수 있다.
여기에서, 관심 유발 효과란, 콘텐츠의 적어도 일부가 나타내는 정보를 유저에게 명확히 하지 않음으로써, 유저의 주의를 끌 수 있는 효과를 말한다. 요컨대, 관심 유발 효과란, 유저를 궁금하게 함으로써 관심을 높이는 효과이다.
또, 상기 표시 제어부는, 또한, 상기 관심도 추정부에 의해 추정된 관심도의 변화율의 크기가 제2 임계치를 초과하였을 때에, 상기 화면에 표시된 제2 콘텐츠의 선명도 또는 개시도를 올리는 것이 바람직하다.
이에 의해, 유저의 관심도의 변화율의 크기에 따라, 선명도 또는 개시도가 낮춰진 콘텐츠의 선명도 또는 개시도를 동적으로 올릴 수 있으므로, 유저의 관심이 높아지고 있는 상태로, 콘텐츠가 나타내는 정보를 유저에게 개시할 수 있다. 그 결과, 유저의 관심을 더욱 효율적으로 높일 수 있음과 더불어, 콘텐츠가 나타내는 정보를 유저에게 강하게 인상지을 수 있다.
또, 상기 표시 제어부는, 또한, 상기 관심도 추정부에 의해 추정된 관심도가 제3 임계치를 초과하였을 때에, 상기 화면에 표시된 제2 콘텐츠의 선명도 또는 개시도를 올리는 것이 바람직하다.
이에 의해, 유저의 관심도의 크기에 따라, 선명도 또는 개시도가 낮춰진 콘텐츠의 선명도 또는 개시도를 동적으로 올릴 수 있으므로, 유저의 관심이 높을 때에, 콘텐츠가 나타내는 정보를 유저에게 개시할 수 있다. 그 결과, 유저의 관심을 더욱 효율적으로 높일 수 있음과 더불어, 콘텐츠가 나타내는 정보를 유저에게 강하게 인상지을 수 있다.
또, 상기 표시 제어부는, 상기 관심도 추정부에 의해 추정된 관심도의 변화율의 크기가 상기 제1 임계치 미만이며, 또한, 상기 관심도 추정부에 의해 추정된 관심도의 변화율의 크기가 상기 제1 임계치 미만인 상태가 소정 시간 계속되고 있는 경우, 상기 제2 콘텐츠를 상기 표시부에 표시시키는 것이 바람직하다.
이에 의해, 유저의 관심도의 변화율의 크기가 일시적으로 작아진 것에 반응하여, 필요 이상으로 콘텐츠의 선명도 또는 개시도를 변경하는 것을 저감시킬 수 있다.
또, 상기 유저 상태 검출부는, 상기 유저의 이동 방향을 상기 유저 상태로서 검출하고, 상기 관심도 추정부는, 상기 유저 상태 검출부에 의해 검출된 유저의 이동 방향이, 당해 유저로부터 상기 화면을 대표하는 위치로 향하는 방향, 또는 당해 유저로부터 상기 제1 콘텐츠가 표시되어 있는 위치로 향하는 방향에 가까울수록 관심도가 높다고 추정하는 것이 바람직하다.
이에 의해, 유저의 이동 방향에 따라 관심도를 고정밀도로 추정할 수 있다.
또, 상기 유저 상태 검출부는, 상기 유저의 이동 속도를 상기 유저 상태로서 검출하고, 상기 관심도 추정부는, 상기 유저 상태 검출부에 의해 검출된 유저의 이동 속도가 작을수록 관심도가 높다고 추정하는 것이 바람직하다.
이에 의해, 유저의 이동 속도에 따라 관심도를 고정밀도로 추정할 수 있다.
또, 상기 유저 상태 검출부는, 상기 유저의 위치를 상기 유저 상태로서 검출하고, 상기 관심도 추정부는, 상기 유저 상태 검출부에 의해 검출된 유저의 위치와 상기 제1 콘텐츠가 표시되어 있는 위치의 거리가 작을수록 관심도가 높다고 추정하는 것이 바람직하다.
이에 의해, 유저의 위치에 따라 관심도를 고정밀도로 추정할 수 있다.
또, 상기 유저 상태 검출부는, 유저의 시선 방향을 상기 유저 상태로서 검출하고, 상기 관심도 추정부는, 상기 유저 상태 검출부에 의해 검출된 유저의 시선 방향이, 당해 유저로부터 상기 화면을 대표하는 위치로 향하는 방향, 또는 당해 유저로부터 상기 제1 콘텐츠가 표시되어 있는 위치로 향하는 방향에 가까울수록 관심도가 높다고 추정하는 것이 바람직하다.
이에 의해, 유저의 시선 방향에 따라 관심도를 고정밀도로 추정할 수 있다.
또, 상기 화면의 앞쪽에 위치하는 유저 중에서 타깃 유저를 선정하는 타깃 유저 선정부를 더 구비하고, 상기 표시 제어부는, 상기 타깃 유저 선정부에 의해 선정된 타깃 유저의 관심도의 변화율의 크기가 상기 제1 임계치 미만인 경우, 상기 제2 콘텐츠를 상기 표시부에 표시시키는 것이 바람직하다.
이에 의해, 화면의 앞쪽에 위치하는 유저 중에서 선정된 타깃 유저 상태에 따라, 콘텐츠의 선명도 또는 개시도를 변경할 수 있어, 선정된 유저의 관심을 효율적으로 높일 수 있다.
또, 상기 타깃 유저 선정부는, 상기 관심도 추정부에 의해 추정된 관심도가 제4 임계치 이상인 경우, 당해 관심도에 대응하는 유저를 타깃 유저로서 선정하는 것이 바람직하다.
이에 의해, 관심 유발 효과에 의해 관심을 높일 수 있을 가능성이 높은 유저를 타깃 유저로서 선정할 수 있어, 유저의 관심을 더욱 효율적으로 높일 수 있다.
또, 상기 타깃 유저 선정부는, 상기 제1 콘텐츠가 표시되어 있는 위치와 유저의 위치의 거리가 제5 임계치 미만인 경우, 당해 유저를 타깃 유저로서 선정하는 것이 바람직하다.
이에 의해, 관심 유발 효과에 의해 관심을 높일 수 있을 가능성이 높은 유저를 타깃 유저로서 선정할 수 있어, 유저의 관심을 더욱 효율적으로 높일 수 있다.
또, 상기 제2 콘텐츠의 일부이며 유저에게 보이고자 하고 있는 정보인 본질 정보를 나타내는 부분의 위치를 표시하는 적용 영역을 적어도 기억하고 있는 콘텐츠 데이터베이스를 더 구비하고, 상기 표시 제어부는, 상기 콘텐츠 데이터베이스에 기억된 상기 제2 콘텐츠의 적응 영역의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로, 상기 제2 콘텐츠를 상기 표시부에 표시시키는 것이 바람직하다.
이에 의해, 본질 정보가 표시되는 영역의 선명도 또는 개시도를 낮게 할 수 있어, 유저의 주목을 집중시키는 효과가 높아진다. 그 결과, 유저의 관심을 효율적으로 높일 수 있음과 더불어, 유저에게 보이고자 하고 있는 정보의 인상을 높일 수 있다.
또, 상기 미리 정해진 선명도 또는 개시도는, 상기 제1 콘텐츠의 선명도 또는 개시도이며, 상기 표시 제어부는, 상기 제1 콘텐츠를 상기 제2 콘텐츠로서 상기 표시부에 표시시키는 것이 바람직하다.
이에 의해, 이미 표시되어 있는 콘텐츠의 선명도 또는 개시도를 유저 상태에 따라 낮출 수 있다.
또, 본 발명의 한 양태에 있어서의 정보 표시 방법은, 제1 콘텐츠를 화면에 표시하는 제1 표시 단계와, 상기 화면의 앞쪽에 위치하는 유저의 물리적인 상태인 유저 상태를 검출하는 유저 상태 검출 단계와, 상기 유저 상태 검출 단계에서 검출된 유저 상태에 의거하여, 상기 표시 단계에서 화면에 표시된 제1 콘텐츠에 대한 유저의 관심 정도를 나타내는 관심도를 추정하는 관심도 추정 단계와, 상기 관심도 추정 단계에서 추정된 관심도의 변화율의 크기가 제1 임계치 미만인 경우, 적어도 일부의 영역의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로, 제2 콘텐츠를 표시하는 제2 표시 단계를 포함한다.
이에 의해, 상기 정보 표시 장치와 동일한 효과를 발휘할 수 있다.
또한, 본 발명은, 이러한 정보 표시 방법을 컴퓨터에 실행시키기 위한 프로그램으로서 실현할 수도 있다. 그리고, 그러한 프로그램은, CD-ROM(Compact Disc Read Only Memory) 등의 컴퓨터 판독 가능한 기록 매체, 혹은 인터넷 등의 전송 매체를 통해 전달할 수 있는 것은 말할 필요도 없다.
본 발명의 한 양태에 있어서의 정보 표시 장치에 의하면, 표시된 콘텐츠에 대한 유저의 관심도의 변화율의 크기에 따라, 적어도 일부의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로 콘텐츠를 표시할 수 있다. 그 결과, 관심 유발 효과에 의해 유저의 주목을 끌 수 있으므로, 유저의 관심을 효율적으로 높일 수 있다.
도 1은, 본 발명의 실시 형태 1에 있어서의 정보 표시 장치의 외관도이다.
도 2는, 본 발명의 실시 형태 1에 있어서의 정보 표시 장치의 기능 구성을 도시한 블록도이다.
도 3은, 선명도를 설명하기 위한 도면이다.
도 4는, 개시도를 설명하기 위한 도면이다.
도 5는, 본 발명의 실시 형태 1에 있어서의 정보 표시 장치가 실행하는 처리의 흐름을 도시한 흐름도이다.
도 6은, 본 발명의 실시 형태 1의 변형예 1에 있어서의 정보 표시 장치가 실행하는 처리의 흐름을 도시한 흐름도이다.
도 7은, 본 발명의 실시 형태 1의 변형예 2에 있어서의 정보 표시 장치가 실행하는 처리의 흐름을 도시한 흐름도이다.
도 8은, 본 발명의 실시 형태 2에 있어서의 정보 표시 장치의 기능 구성을 도시한 블록도이다.
도 9a는, 본 발명의 실시 형태 2에 있어서의 유저 위치 산출 방법을 설명하기 위한 도면이다.
도 9b는, 본 발명의 실시 형태 2에 있어서의 유저 위치 산출 방법을 설명하기 위한 도면이다.
도 10은, 본 발명의 실시 형태 2에 있어서의 콘텐츠 데이터베이스의 일례를 도시한 도면이다.
도 11은, 적용 영역을 설명하기 위한 도면이다.
도 12는, 본 발명의 실시 형태 2에 있어서의 정보 표시 장치가 행하는 처리의 흐름을 도시한 흐름도이다.
도 13은, 본 발명의 실시 형태 2에 있어서의 관심도의 산출 방법을 설명하기 위한 도면이다.
도 14a는, 본 발명의 실시 형태 2에 있어서의 타깃 유저의 선정 방법을 설명하기 위한 도면이다.
도 14b는, 본 발명의 실시 형태 2에 있어서의 타깃 유저의 선정 방법을 설명하기 위한 도면이다.
도 15는, 본 발명의 실시 형태 2에 있어서의 관심도의 변화율의 산출 처리를 설명하기 위한 도면이다.
도 16은, 본 발명의 실시 형태 2에 있어서의 정보 표시 장치의 동작의 구체예를 도시한 도면이다.
도 17a는, 본 발명의 실시 형태 2에 있어서의 콘텐츠의 표시 방법의 다른 일례를 도시한 도면이다.
도 17b는, 본 발명의 실시 형태 2에 있어서의 콘텐츠의 표시 방법의 다른 일례를 도시한 도면이다.
도 18은, 본 발명의 실시 형태 2의 변형예에 있어서의 시선 방향의 검출에 관한 처리의 흐름을 도시한 흐름도이다.
도 19는, 본 발명의 실시 형태 2의 변형예에 있어서의 유저의 얼굴 방향을 검출하는 처리를 설명하기 위한 도면이다.
도 20은, 시선 방향 기준면에 대해 설명하기 위한 도면이다.
도 21a는, 검은자 중심의 검출에 대해 설명하기 위한 도면이다.
도 21b는, 검은자 중심의 검출에 대해 설명하기 위한 도면이다.
이하, 본 발명의 실시 형태에 대해, 도면을 참조하면서 설명한다.
(실시 형태 1)
본 발명의 실시 형태 1에 있어서의 정보 표시 장치(10)는, 화면에 콘텐츠를 표시하는 장치이며, 화면에 표시되어 있는 콘텐츠(이하, 간단히 「표시 콘텐츠」라고 한다)에 대한 유저의 관심도에 따라, 표시 콘텐츠의 선명도 또는 개시도를 변화시키는 것을 특징으로 한다.
도 1은, 본 발명의 실시 형태 1에 있어서의 정보 표시 장치의 외관도이다. 또, 도 2는, 본 발명의 실시 형태 1에 있어서의 정보 표시 장치의 기능 구성을 도시한 블록도이다.
정보 표시 장치(10)는, 유저 상태 검출부(11)와, 관심도 추정부(12)와, 표시 제어부(13)와, 표시부(14)를 구비한다.
유저 상태 검출부(11)는, 화면의 앞쪽에 위치하는 유저의 물리적인 상태인 유저 상태를 검출한다. 구체적으로는, 유저 상태 검출부(11)는, 예를 들면, 뇌파 등의 생체 신호, 유저의 위치, 속도, 얼굴 혹은 몸의 방향, 시선 방향, 표정, 발화 내용, 발화량, 또는 음성의 크기 등을 유저 상태로서 검출한다.
관심도 추정부(12)는, 유저 상태 검출부(11)에 의해 검출된 유저 상태에 의거하여, 표시부(14)에 의해 화면에 표시된 콘텐츠에 대한 유저의 관심 정도를 나타내는 관심도를 추정한다.
구체적으로는, 예를 들면, 관심도 추정부(12)는, 검출된 유저의 이동 방향이, 유저로부터 화면을 대표하는 위치로 향하는 방향, 또는 유저로부터 콘텐츠가 표시되어 있는 위치로 향하는 방향에 가까울수록 관심도가 높다고 추정한다. 요컨대, 관심도 추정부(12)는, 유저가 화면 또는 표시 콘텐츠를 향해 이동하고 있으면 관심도가 높다고 추정한다.
여기에서, 화면을 대표하는 위치란, 화면 상의 위치이며, 예를 들면 화면의 중심 위치(이하, 간단히 「화면의 중심」이라고 한다) 또는 무게 중심 위치 등이다. 또, 콘텐츠가 표시되어 있는 위치란, 콘텐츠가 표시되어 있는 화면 상의 위치이며, 당해 콘텐츠를 대표하는 위치이다. 구체적으로는 예를 들면, 콘텐츠가 표시되어 있는 위치는, 콘텐츠가 표시되어 있는 영역의 중심 위치(이하, 간단히 「콘텐츠의 중심」이라고 한다) 혹은 무게 중심 위치 등이다. 또 예를 들면, 콘텐츠가 표시되어 있는 위치는, 콘텐츠의 일부가 나타내는 화상(예를 들면, 광고 대상 상품의 화상)이 표시되어 있는 영역의 중심 위치 혹은 무게 중심 위치여도 된다.
또, 예를 들면, 관심도 추정부(12)는, 검출된 유저의 이동 속도가 작을수록 관심도가 높다고 추정한다. 요컨대, 유저가 화면의 앞쪽에서 천천히 이동하고 있으면 관심도가 높다고 추정한다.
또, 예를 들면, 관심도 추정부(12)는, 검출된 유저의 위치와 콘텐츠가 표시되어 있는 위치의 거리가 작을수록 관심도가 높다고 추정한다.
또, 예를 들면, 관심도 추정부(12)는, 검출된 유저의 시선 방향이, 유저로부터 화면을 대표하는 위치로 향하는 방향, 또는 유저로부터 콘텐츠가 표시되어 있는 위치로 향하는 방향에 가까울수록 관심도가 높다고 추정한다. 요컨대, 관심도 추정부(12)는, 유저가 화면 또는 표시 콘텐츠의 방향을 보고 있으면 관심도가 높다고 추정한다.
또, 관심도 추정부(12)는, 검출된 생체 신호, 표정, 발화 내용, 발화량, 또는 음성의 크기 정보 등에 의거하여 관심도를 추정해도 된다.
표시 제어부(13)는, 관심도 추정부(12)에 의해 추정된 관심도의 변화율의 크기가 제1 임계치 미만인 경우, 적어도 일부의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로, 콘텐츠를 표시부(14)에 표시시킨다.
구체적으로는, 표시 제어부(13)는, 관심도의 시간적인 변화 정도를 나타내는 변화율의 크기 a(t)를, 식 (1)에 따라 산출한다. k(t)는, 시각 t에 있어서의 관심도이다. 또한, 표시 제어부(13)는, 이와 같이 산출한 변화량의 크기 a(t)가 제1 임계치 미만인지의 여부를 판정한다.
여기에서, 변화율의 크기 a(t)가 제1 임계치 미만인 경우, 표시 제어부(13)는, 일부 또는 전부의 선명도 또는 개시도가 화면에 표시되어 있는 콘텐츠의 선명도 또는 개시도보다 낮은 상태로, 당해 콘텐츠를 표시부(14)에 표시시킨다. 요컨대, 표시 제어부(13)는, 화면에 표시되어 있는 콘텐츠의 적어도 일부의 선명도 또는 개시도를, 예를 들면 소정의 시간만큼 낮춘다.
[수식 1]
Figure 112010051952287-pct00001
여기에서, 선명도란, 콘텐츠의 선명 정도를 나타낸다. 요컨대, 선명도란, 콘텐츠에 의해 나타내어지는 정보의 선명함의 정도를 나타낸다. 예를 들면, 흐림 효과 또는 모자이크 효과 등의 영상 효과가 콘텐츠에 적용된 경우, 콘텐츠의 선명도는 낮아진다.
또, 개시도란, 콘텐츠의 개시 정도를 나타낸다. 요컨대, 개시도란, 콘텐츠에 의해 나타내어지는 정보가 개시되어 있는 정도를 나타낸다. 예를 들면, 콘텐츠에 포함되는 화상과는 상이한 화상이 콘텐츠에 포함되는 화상의 일부 또는 전부에 겹쳐져 배치되면, 콘텐츠의 개시도는 낮아진다.
제1 임계치는, 예를 들면 표시 콘텐츠에 대한 유저의 흥미가 저하하는 등의 이유에 의해, 콘텐츠에 대한 유저의 관심도의 변화가 작아지고 있는 것을 나타내는 값이다.
표시부(14)는, 예를 들면 플라즈마 디스플레이 패널(PDP : Plasma Display Panel) 또는 액정 패널(Liquid Crystal Panel) 등의 화면을 가지며, 당해 화면에 콘첸츠를 표시한다.
도 3은, 선명도를 설명하기 위한 도면이다. 또 도 4는, 개시도를 설명하기 위한 도면이다. 도 3 및 도 4에서는, 판매자 「XXX Corporation」이 판매하는, 브랜드명 「ABCD」의 상품 「TV」를 광고하는 화상을, 화면에 표시되는 콘텐츠의 일례로서 설명한다.
도 3(a)는, 선명도가 낮춰지기 전의 콘텐츠를 나타낸다. 또, 도 3(b)는, 콘텐츠의 일부인 상품의 외관을 나타내는 영역에 모자이크 처리가 실시된 콘텐츠를 나타낸다. 요컨대, 도 3(b)는, 도 3(a)의 콘텐츠의 선명도보다 낮은 상태로 표시된 콘텐츠를 나타낸다.
이와 같이, 표시 제어부(13)는, 콘텐츠의 일부에 흐림 효과 또는 모자이크 효과 등의 영상 효과가 적용된 콘텐츠를 화면에 표시시킴으로써, 콘텐츠의 일부의 선명도를 낮춘다.
도 4(a)는, 개시도가 낮춰지기 전의 콘텐츠를 나타낸다. 또, 도 4(b)는, 콘텐츠의 일부인 상품의 외관을 나타내는 영역에 상품과는 상이한 화상이 겹쳐진 콘텐츠를 나타낸다. 요컨대, 도 4(b)는, 도 4(a)의 콘텐츠의 개시도보다 낮은 상태로 표시된 콘텐츠를 나타낸다.
이와 같이, 표시 제어부(13)는, 콘텐츠의 일부의 영역에 원래의 화상과는 상이한 화상을 겹쳐 표시시킴으로써, 콘텐츠의 일부의 개시도를 낮춘다.
또한, 표시 제어부(13)는, 원래의 화상으로부터 그 화상과는 상이한 화상으로 자연스럽게 변형시키는 모핑에 의해, 콘텐츠의 일부의 개시도를 낮춰도 된다.
또, 도 3 및 도 4에서는, 콘텐츠의 일부에 대해 선명도 또는 개시도를 낮추는 것에 대해 설명하였지만, 표시 제어부(13)는, 콘텐츠의 전부에 대해 선명도 또는 개시도를 낮춰도 된다.
또한, 표시 제어부(13)는, 유저에게 보이고자 하고 있는 정보인 본질 정보를 나타내는 부분의 선명도 또는 개시도를 낮추는 것이 바람직하다. 이에 의해, 정보 표시 장치(10)는, 본질 정보가 표시되는 영역의 선명도 또는 개시도를 낮게 할 수 있으며, 관심 유발 효과에 의해 보다 유저의 주목을 집중시킬 수 있다. 그 결과, 정보 표시 장치(10)는, 유저의 관심을 효율적으로 높일 수 있음과 더불어, 유저에게 보이고자 하고 있는 정보를 유저에게 강하게 인상지을 수 있다.
다음에, 이상과 같이 구성된 정보 표시 장치(10)에 있어서의 각종 동작에 대해 설명한다.
도 5는, 본 발명의 실시 형태 1에 있어서의 정보 표시 장치가 실행하는 처리의 흐름을 도시한 흐름도이다.
우선, 표시부(14)는, 화면에 콘텐츠를 표시한다(S100). 다음에, 유저 상태 검출부(11)는, 유저 상태를 검출한다(S101). 이어서, 관심도 추정부(12)는, 검출된 유저 상태에 의거하여 관심도를 추정한다(S102). 또한, 표시 제어부(13)는, 관심도의 변화율의 크기를 산출한다(S104). 그리고, 표시 제어부(13)는, 관심도의 변화율의 크기가 제1 임계치 미만인지의 여부를 판정한다(S106).
여기에서, 관심도의 변화율의 크기가 제1 임계치 미만인 경우(S106의 Yes), 표시 제어부(13)는, 화면에 표시된 콘텐츠의 적어도 일부의 선명도 또는 개시도를 낮추고(S108), 처리를 종료한다. 요컨대, 표시 제어부(13)는, 유저의 관심도에 따라, 적어도 일부의 선명도 또는 개시도가 화면에 표시된 콘텐츠의 선명도 또는 개시도보다 낮은 상태로, 콘텐츠를 화면에 표시한다. 한편, 관심도의 변화율의 크기가 제1 임계치 이상인 경우(S106의 No), 처리를 종료한다.
이러한 단계 S100으로부터 단계 S108까지의 처리를 실행함으로써, 정보 표시 장치(10)는, 유저의 관심도에 따라, 적어도 일부의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로, 콘텐츠를 화면에 표시할 수 있다. 또한, 정보 표시 장치(10)는, 단계 S101로부터 단계 S108까지의 처리를 반복하여 실행해도 된다.
이상과 같이, 본 실시 형태에 있어서의 정보 표시 장치(10)는, 표시된 콘텐츠에 대한 유저의 관심도의 변화율의 크기에 따라, 적어도 일부의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로 콘텐츠를 표시할 수 있다. 그 결과, 정보 표시 장치(10)는, 관심 유발 효과에 의해 유저의 주목을 끌 수 있으므로, 유저의 관심을 효율적으로 높일 수 있다.
또한, 본 실시 형태에 있어서, 표시 제어부(13)는, 관심도의 변화율의 크기가 단지 제1 임계치 미만인 경우에, 콘텐츠를 선명도 또는 개시도가 낮은 상태로 표시부(14)에 표시시키고 있었지만, 이와는 다른 경우여도 된다. 예를 들면, 표시 제어부(13)는, 관심도의 변화율의 크기가 제1 임계치 미만인 상태가 소정 시간 계속된 경우에, 적어도 일부의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로, 콘텐츠를 표시부(14)에 표시시켜도 된다. 이에 의해, 정보 표시 장치(10)는, 유저의 관심도의 변화율의 크기가 일시적으로 작아진 것에 반응하여, 필요 이상으로 콘텐츠의 선명도 또는 개시도를 변경하는 것을 저감시킬 수 있다.
(실시 형태 1의 변형예 1)
실시 형태 1의 변형예 1에 있어서의 정보 표시 장치(10)는, 유저의 관심도의 변화율의 크기가 작을 때에, 현재 화면에 표시되어 있는 콘텐츠와는 상이한 콘텐츠를 화면에 표시하는 점이, 실시 형태 1에 있어서의 정보 표시 장치(10)와 다르다. 이하, 실시 형태 1과 상이한 점을 중심으로, 본 변형예에 대해, 도면을 참조하면서 설명한다.
도 2에 나타낸 실시 형태 1에 있어서의 정보 표시 장치(10)와 동일하게, 본 변형예에 있어서의 정보 표시 장치(10)도, 유저 상태 검출부(11)와, 관심도 추정부(12)와, 표시 제어부(13)와, 표시부(14)를 구비한다. 또한, 유저 상태 검출부(11)와 관심도 추정부(12)와 표시부(14)는, 실시 형태 1과 동일하므로, 설명을 생략한다.
본 변형예에 있어서의 표시 제어부(13)는, 관심도 추정부(12)에 의해 추정된 관심도의 변화율의 크기가 제1 임계치 미만인 경우, 화면에 표시되어 있는 콘텐츠와는 상이한 콘텐츠를, 적어도 일부의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로 표시부(14)에 표시시킨다.
여기에서, 미리 정해진 선명도 또는 개시도는, 예를 들면, 콘텐츠 본래의 선명도 또는 개시도이다. 요컨대, 미리 정해진 선명도 또는 개시도는, 전형적으로는, 선명도 또는 개시도를 낮추기 위한 영상 효과가 적용되어 있지 않은, 또는 선명도 또는 개시도를 낮추기 위한 화상 처리가 실시되어 있지 않은 콘텐츠의 선명도 또는 개시도이다.
다음에, 이상과 같이 구성된, 본 변형예에서의 정보 표시 장치(10)에 있어서의 각종 동작에 대해 설명한다.
도 6은, 본 발명의 실시 형태 1의 변형예 1에 있어서의 정보 표시 장치가 실행하는 처리의 흐름을 도시한 흐름도이다. 또한, 도 6에 있어서, 도 5와 동일한 처리에 대해서는, 동일한 부호를 붙이고, 설명을 생략한다.
관심도의 변화율의 크기가 제1 임계치 미만인 경우(S106의 Yes), 표시 제어부(13)는, 화면에 표시되어 있는 콘텐츠와는 상이한 콘텐츠를, 적어도 일부의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로 표시부(14)에 표시시키고(S112), 처리를 종료한다. 요컨대, 표시 제어부(13)는, 적어도 일부의 선명도 또는 개시도가 미리 낮춰진 콘텐츠이며 화면에 표시되어 있는 콘텐츠와는 상이한 콘텐츠를 표시부(14)에 표시시킨다.
이상과 같이, 본 변형예에 있어서의 정보 표시 장치(10)는, 콘텐츠를 새롭게 표시할 때에 선명도 또는 개시도를 낮춘 상태로 표시할 수 있으므로, 관심 유발 효과에 의해 유저의 관심을 효율적으로 높일 수 있다.
(실시 형태 1의 변형예 2)
일률적으로 소정의 기간만큼 선명도 또는 개시도를 낮춘 경우, 유저를 궁금하게 하는 기간이 너무 길어져, 오히려 유저의 관심을 낮춰 버린다는 문제가 있다. 그래서, 실시 형태 1의 변형예 2에 있어서의 정보 표시 장치(10)는, 콘텐츠의 선명도 또는 개시도를 올리는 타이밍을 유저의 관심도에 따라 동적으로 결정하는 것을 특징으로 한다. 이하, 실시 형태 1과 상이한 점을 중심으로, 본 변형예에 대해, 도면을 참조하면서 설명한다.
도 2에 나타낸 실시 형태 1에 있어서의 정보 표시 장치(10)와 동일하게, 본 변형예에 있어서의 정보 표시 장치(10)도, 유저 상태 검출부(11)와, 관심도 추정부(12)와, 표시 제어부(13)와, 표시부(14)를 구비한다. 또한, 유저 상태 검출부(11)와 관심도 추정부(12)와 표시부(14)는, 실시 형태 1과 동일하므로, 설명을 생략한다.
본 변형예에 있어서의 표시 제어부(13)는, 유저의 관심도에 의거하여, 화면에 표시된 콘텐츠의 선명도 또는 개시도를 올린다.
구체적으로는, 표시 제어부(13)는, 예를 들면, 관심도 추정부(12)에 의해 추정된 관심도의 변화율의 크기가 제2 임계치를 초과하였을 때에, 화면에 표시된 콘텐츠의 선명도 또는 개시도를 올린다. 제2 임계치는, 콘텐츠의 선명도 또는 개시도를 낮춤으로써 유저의 관심도의 변화율이 커진 것을 나타내는 값이다. 또한, 제2 임계치는, 제1 임계치 이상인 것이 바람직하다.
또, 예를 들면, 표시 제어부(13)는, 관심도 추정부(12)에 의해 추정된 관심도가 제3 임계치를 초과하였을 때에, 화면에 표시된 콘텐츠의 선명도 또는 개시도를 올려도 된다. 제3 임계치는, 콘텐츠의 선명도 또는 개시도를 낮춤으로써 유저의 관심도가 올라간 것을 나타내는 값이다.
다음에, 이상과 같이 구성된, 본 변형예에서의 정보 표시 장치(10)에 있어서의 각종 동작에 대해 설명한다.
도 7은, 본 발명의 실시 형태 1의 변형예 2에 있어서의 정보 표시 장치가 실행하는 처리의 흐름을 도시한 흐름도이다. 또한, 도 7에 있어서, 도 5와 동일한 처리에 대해서는, 동일한 부호를 붙이고, 설명을 생략한다.
관심도의 변화율의 크기가 산출된 후, 표시 제어부(13)는, 화면에 표시되어 있는 콘텐츠의 선명도 또는 개시도가 이미 낮춰져 있는지의 여부를 판정한다(S122). 요컨대, 표시 제어부(13)는, 화면에 표시되어 있는 콘텐츠가, 미리 정해진 선명도 또는 개시도보다 선명도 또는 개시도가 낮은 상태로 화면에 표시되어 있는지의 여부를 판정한다.
여기에서, 선명도 또는 개시도가 아직 낮춰져 있지 않은 경우(S122의 No), 정보 표시 장치(10)는, 단계 S106∼단계 S108의 처리를 실행하고, 단계 S101의 처리로 되돌아간다.
한편, 선명도 또는 개시도가 낮춰져 있는 경우(S122의 Yes), 표시 제어부(13)는, 유저의 관심도에 의거하여, 콘텐츠의 선명도 또는 개시도를 올릴지의 여부를 판정한다(S124).
여기에서, 콘텐츠의 선명도 또는 개시도를 올린다고 판정된 경우(S124의 Yes), 표시 제어부(13)는, 화면에 표시된 콘텐츠의 선명도 또는 개시도를 올리고(S126), 단계 S101의 처리로 되돌아간다. 한편, 선명도 또는 개시도를 올리지 않는다고 판정된 경우(S124의 No), 단계 S101의 처리로 되돌아간다.
이상과 같이, 본 변형예에 있어서의 정보 표시 장치(10)는, 유저의 관심도의 변화율의 크기 또는 관심도의 크기 등에 따라, 화면에 표시된 콘텐츠의 선명도 또는 개시도를 동적으로 올릴 수 있다. 따라서, 정보 표시 장치(10)는, 유저 상태에 따라 동적으로, 콘텐츠가 나타내는 정보를 유저에게 개시할 수 있다. 그 결과, 정보 표시 장치(10)는, 유저의 관심을 더욱 효율적으로 높일 수 있음과 더불어, 콘텐츠가 나타내는 정보를 유저에게 강하게 인상지을 수 있다.
(실시 형태 2)
다음에, 본 발명의 실시 형태 2에 대해, 도면을 이용하여 상세하게 설명한다.
본 발명의 실시 형태 2에 있어서의 정보 표시 장치(20)는, 화면의 앞쪽에 위치하는 유저 중에서 타깃 유저를 선정하는 점이 실시 형태 1에 있어서의 정보 표시 장치(10)와 주로 상이하다.
도 8은, 본 발명의 실시 형태 2에 있어서의 정보 표시 장치의 기능 구성을 도시한 블록도이다.
도 8에 나타낸 바와 같이, 정보 표시 장치(20)는, 유저 검출 카메라(60)로부터 화상 정보를 얻는 유저 식별부(21)와, 유저 상태 검출부(22)와, 관심도 추정부(23)와, 타깃 유저 선정부(24)와, 콘텐츠 데이터베이스(25)와, 표시 제어부(26)와, 표시부(27)를 구비한다.
유저 검출 카메라(60)는, 표시부(27)의 화면 주위에 적어도 2대 설치된다. 요컨대, 유저 검출 카메라(60)는, 제1 유저 검출 카메라(60a)와 제2 유저 검출 카메라(60b)를 포함한다. 그리고, 유저 검출 카메라(60)는, CCD(Charge Coupled Device) 또는 CMOS(Complementary Metal Oxide Semiconductor) 등의 이미지 센서와 광학계를 구비한다.
또, 제1 유저 검출 카메라(60a)와 제2 유저 검출 카메라(60b)는, 화면의 앞쪽에 존재하는 유저를 동시에 촬영한다. 그리고, 제1 유저 검출 카메라(60a)와 제2 유저 검출 카메라(60b)는, 촬영한 화상을 나타내는 화상 정보를 유저 식별부(21) 및 유저 상태 검출부(22)로 출력한다.
유저 식별부(21)는, 유저 검출 카메라(60)로부터 얻은 화상 정보가 나타내는 화상에 있어서 얼굴 영역의 추출을 행한다. 그리고, 유저 식별부(21)는, 추출한 얼굴 영역마다, 당해 얼굴 영역의 특징을 나타내는 정보이며 유저를 특정하기 위한 정보인 유저 식별 정보를 출력한다.
유저 상태 검출부(22)는, 화면의 앞쪽에 위치하는 유저의 물리적인 상태인 유저 상태를 검출한다.
구체적으로는, 유저 상태 검출부(22)는, 제1 유저 검출 카메라(60a) 및 제2 유저 검출 카메라(60b)에 의해 촬영된 화상간에 있어서의 유저가 찍혀 있는 영역(이하, 간단히 「유저 영역」이라고 한다)의 대응 관계를 이용하여, 유저와 화면의 상대 위치를 유저 상태로서 유저마다 산출한다. 즉, 유저 상태 검출부(22)는, 스테레오 시(視)에 의한 시차를 이용하여, 유저의 위치를 유저 상태로서 유저마다 검출한다. 또한, 유저 상태 검출부(22)는, 검출된 유저의 위치의 시간 변화에 의거하여, 유저의 이동 벡터(유저의 이동 방향 및 유저의 이동 속도)를 검출한다.
도 9a 및 도 9b는, 본 발명의 실시 형태 2에 있어서의 유저 위치 산출 방법을 설명하기 위한 도면이다.
도 9a에 나타낸 바와 같이, 제1 유저 검출 카메라(60a)와 제2 유저 검출 카메라(60b)가 서로 간격 B만큼 떨어져, 정보 표시 장치(20)의 화면에 대해 평행하게 설치된다. 구체적으로는, 제1 유저 검출 카메라(60a)와 제2 유저 검출 카메라(60b)는, 각 유저 검출 카메라의 광축이 서로 평행하게 간격 B만큼 떨어져 화면과 수직이 되도록 설치되고, 또한, 각 유저 검출 카메라의 광학 중심이 화면을 포함하는 평면 상에 배치되도록 설치된다.
그리고, 유저 상태 검출부(22)는, 각각의 유저 검출 카메라(60)로 촬영된 화상 내의 유저 영역을 추출한다. 그리고, 유저 상태 검출부(22)는, 화상간의 대응하는 유저 영역의 위치의 어긋남에 의거하여, 유저와 정보 표시 장치(20)의 화면의 거리 D를 산출한다. 구체적으로는, 유저 상태 검출부(22)는, 예를 들면, 유저가 없는 상태로 각각의 유저 검출 카메라(60)에 의해 미리 촬영된 화상을 보존해 두고, 유저가 촬영 범위(유저 검출 가능 영역)에 나타났을 때에 촬영된 화상과 보존한 화상의 차분을 구함으로써 유저 영역을 추출한다. 또, 유저 상태 검출부(22)는, 얼굴 화상의 검출 및 얼굴 화상의 대조에 의해 얻어지는 유저의 얼굴 영역을 유저 영역으로서 추출할 수도 있다.
도 9b는, 2개의 화상 상의 대응하는 유저 영역의 위치 관계를 기초로 유저와 카메라 설치면(정보 표시 장치(20)의 화면)의 거리 D를 구하기 위한, 스테레오 시에 의한 거리 측정 원리를 나타낸 도면이다. 위치 측정 대상인 유저의 상은 제1 유저 검출 카메라(60a) 및 제2 유저 검출 카메라(60b) 각각의 이미지 센서의 촬영면에 도 9b에 나타낸 바와 같이 각각 투영된다. 이와 같이 투영된 위치 측정 대상의 상의 화상 상의 어긋남을 Z로 나타내었을 때, 유저 상태 검출부(22)는, 카메라의 초점 거리 f와 카메라의 광축간의 거리 B를 이용하여, 유저와 정보 표시 장치(20)의 화면의 거리 D를 식 (2)와 같이 산출할 수 있다.
[수식 2]
Figure 112010051952287-pct00002
또, 유저 상태 검출부(22)는, 정보 표시 장치(20)의 화면에 평행한 방향의 유저 위치에 대해서는, 화상 중의 유저 영역의 위치와 식 (2)에 의해 산출된 거리 D를 기초로 구할 수 있다. 유저 상태 검출부(22)는, 이와 같이 정보 표시 장치(20)에 대한 유저의 상대적인 위치를 산출하여 출력한다.
또한, 유저 상태 검출부(22)는, 이와 같이 산출된 위치의 시간적인 변화에 의거하여, 유저의 이동 벡터를 산출한다. 구체적으로는, 유저 상태 검출부(22)는, 산출한 유저의 위치를 유저마다 유지하고, 유지한 유저의 위치를 이용하여, 유저의 이동 벡터를 유저마다 산출한다.
또한, 유저 상태 검출부(22)는, 반드시 스테레오 시차에 의거하여 유저의 위치를 산출할 필요는 없다. 예를 들면, 유저 상태 검출부(22)는, 광파 거리 측정(Time of Flight)의 원리에 의해 얻어지는 거리 정보로부터, 유저와 정보 표시 장치(20)의 상대 위치를 산출해도 된다. 이 경우, 유저 검출 카메라(60)는, 광파 거리 측정의 원리를 이용하여 거리 정보를 출력하는 거리 화상 센서를 구비하고, 적어도 1대 설치된다.
또, 정보 표시 장치(20)의 화면 앞쪽의 상면(床面)에 설치된 상압력(床壓力) 센서로부터, 유저 상태 검출부(22)는, 정보 표시 장치(20)에 대한 유저의 상대 위치를 취득해도 된다. 이 경우, 유저 검출 카메라(60)는 설치될 필요가 없다.
관심도 추정부(23)는, 유저 상태 검출부(22)가 출력하는 유저의 위치 등에 의거하여, 표시 콘텐츠에 대한 유저의 관심도를 유저 식별 정보에 의해 특정되는 유저마다 추정한다. 관심도의 산출 방법에 대해서는, 후술한다.
타깃 유저 선정부(24)는, 관심도 추정부(23)가 출력하는 각 유저의 관심도에 의거하여, 타깃 유저를 선정한다. 예를 들면, 타깃 유저 선정부(24)는, 표시 콘텐츠에 대한 관심도가, 표시 콘텐츠마다 미리 정해진 제4 임계치 이상인 경우, 당해 관심도에 대응하는 유저를 타깃 유저로서 선정한다. 제4 임계치는, 유저가 표시 콘텐츠에 대해 어느 정도 관심을 나타내고 있는 것을 표시하는 값이다. 요컨대, 제4 임계치는, 콘텐츠의 선명도 또는 개시도를 낮춤으로써, 더욱 관심도를 높이는 것이 기대되는 유저를 선정하기 위한 값이다.
또한, 타깃 유저 선정부(24)는, 유저의 위치와 표시 콘텐츠의 중심의 거리가 표시 콘텐츠마다 미리 정해진 제5 임계치 미만인 경우, 당해 유저를 타깃 유저로서 선정해도 된다. 제5 임계치는, 유저가 표시 콘텐츠에 대해 어느 정도 관심을 나타내고 있는 것을 표시하는 거리이다. 요컨대, 제5 임계치는, 콘텐츠의 선명도 또는 개시도를 낮춤으로써, 더욱 관심도를 높이는 것이 기대되는 유저를 선정하기 위한 거리이다.
콘텐츠 데이터베이스(25)는, 유저의 관심도의 수준을 나타내는 관심도 레벨마다, 콘텐츠와, 당해 콘텐츠에 대해 적용되는 영상 효과의 종류 및 적용 영역을 기억하고 있는 데이터베이스이다.
도 10은, 본 발명의 실시 형태 2에 있어서의 콘텐츠 데이터베이스의 일례를 도시한 도면이다. 도 10에 나타낸 바와 같이, 콘텐츠 데이터베이스(25)에는, 관심도 레벨마다, 콘텐츠와 영상 효과 및 적용 영역이 관련지어져 저장되어 있다. 또한, 도 10에서는, 콘텐츠 데이터베이스(25)에 저장된 콘텐츠가 상품명 또는 브랜드명 「ABCD」의 상품 「TV」의 광고에 관한 콘텐츠인 경우를 일례로서 설명한다.
관심도 레벨 「1」의 콘텐츠는, 상품 「TV」의 이미지 캐릭터가 크게 그려진 콘텐츠이다. 또, 관심도 레벨 「2」의 콘텐츠는, 이미지 캐릭터가 관심도 레벨 「1」보다 조금 작게 그려지고, 그 대신에 상품의 화상이 좌측 위쪽에 그려진 콘텐츠이다. 또, 관심도 레벨 「3」의 콘텐츠는, 상품의 라인업이 표시된 콘텐츠이다. 이와 같이, 유저의 관심도가 높아짐에 따라, 상품의 상세한 정보를 제시하는 콘텐츠가 저장됨으로써, 정보 표시 장치(20)는, 유저의 관심도가 높아짐에 따라, 보다 상세한 정보를 나타내어, 광고에 유저의 관심을 끌어당길 수 있다.
영상 효과는, 콘텐츠의 선명도 또는 개시도를 낮추기 위해 콘텐츠에 적용되는 효과이다. 예를 들면, 영상 효과는, 콘텐츠를 숨기는 「hiding」, 또는 콘텐츠를 흐릿하게 하는 「blur」등의 효과이다. 「blur(30)」란, 흐림 효과의 강도가 「30」인 것을 나타내고 있다. 요컨대, 「blur(75)」는, 「blur(30)」보다 강하게 흐릿하게 하는 효과인 것을 나타낸다. 이와 같이, 콘텐츠 데이터베이스(25)에는, 영상 효과의 종류에 더하여, 영상 효과의 강도도 아울러 저장되는 것이 바람직하다.
적용 영역은, 콘텐츠의 전체 「all」이어도 되고, 콘텐츠의 일부의 영역이어도 된다. 예를 들면, 「rectangle(20, 50, 500, 300)」은, 좌표(20, 50)가 하나의 꼭짓점이며, 좌표(500, 300)가 당해 하나의 꼭짓점의 대각에 위치하는 꼭짓점인 직사각형 영역을 나타낸다. 구체적으로는 도 11에 나타낸 바와 같이, 「rectangle(20, 50, 500, 300)」은, 표시 콘텐츠의 좌측 위쪽을 좌표 원점으로 한 좌표계에 있어서, 좌표치 x=20, y=50의 점을 좌측 위쪽의 꼭짓점, x=500, y=300의 점을 우측 아래쪽의 꼭짓점으로 하는 직사각형 영역을 나타낸다.
표시 콘텐츠가 상품의 광고인 경우에는, 선명도 또는 개시도를 낮추기 위한 영상 효과를 적용하는 적용 영역이 상품명 혹은 상품의 캐릭터 등 상품의 소송 청구에 중요한 정보를 나타내는 영역이면, 유저에 대해 일종의 관심 유발 효과를 기대할 수 있어, 정보 표시 장치(20)는 유저의 주의를 끌 수 있다. 요컨대, 적용 영역이 본질 정보를 나타내는 영역이면, 관심 유발 효과에 의해 유저의 관심을 높일 수 있다. 반대로, 적용 영역이 선명도 또는 개시도를 낮추기 위한 영상 효과를 중요한 정보를 나타내는 영역 이외의 영역이어도, 정보 표시 장치(20)는, 중요한 정보만을 선명하게 보이고, 전체를 알 수 없도록 할 수 있어, 유저의 주의를 끌 수 있다.
표시 제어부(26)는, 관심도 추정부(23)에 의해 추정된 관심도의 변화율의 크기가 제1 임계치 미만인 경우, 적어도 일부의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로, 표시되어 있는 콘텐츠와는 상이한 콘텐츠를 표시부(27)에 표시시킨다. 또, 표시 제어부(26)는, 어플리케이션 제어부(26a)와 화면 묘화부(26b)를 갖는다.
어플리케이션 제어부(26a)는, 표시부(27)의 화면의 묘화 내용의 갱신을 행하는 경우에, 그 묘화 내용의 갱신에 관한 정보인 갱신 정보를 화면 묘화부(26b)에 출력한다.
화면 묘화부(26b)는, 갱신 정보에 의거하여 표시부(27)에 표시하는 콘텐츠를 묘화하고, 묘화된 콘텐츠를 표시부(27)에 출력한다.
표시부(27)는 화면을 갖고, 화면 묘화부(26b)에 의해 묘화된 콘텐츠를 화면에 표시한다.
다음에, 이상과 같이 구성된 정보 표시 장치(20)에 있어서의 각종 동작에 대해 설명한다. 특히, 복수의 유저가 정보 표시 장치(20)의 앞쪽에 있는 상황을 예로, 정보 표시 장치(20)의 각종 동작에 대해 설명한다.
도 12는, 본 발명의 실시 형태 2에 있어서의 정보 표시 장치가 행하는 처리의 흐름을 도시한 흐름도이다. 도 13은, 본 발명의 실시 형태 2에 있어서의 관심도의 산출 방법을 설명하기 위한 도면이다. 도 14a 및 도 14b는, 본 발명의 실시 형태 2에 있어서의 타깃 유저의 선정 방법을 설명하기 위한 도면이다.
우선, 유저 식별부(21)는, 유저 검출 카메라(60)에 의해 촬영된 화상으로부터 얼굴 영역을 추출함으로써, 유저를 특정하기 위한 유저 식별 정보를 생성한다(S202).
그리고, 유저 상태 검출부(22)는, 유저 검출 카메라(60)에 의해 촬영된 화상으로부터 유저 영역을 추출하고, 추출된 유저 영역마다 유저 상태를 검출한다(S204). 구체적으로는, 유저 상태 검출부(22)는, 유저 영역마다 유저의 위치를 산출한다. 또한, 유저 상태 검출부(22)는, 산출한 유저 위치의 시간적 변화에 의거하여, 유저의 이동 벡터를 산출한다.
그리고, 관심도 추정부(23)는, 유저의 이동 벡터
Figure 112010051952287-pct00003
와, 유저의 이동 벡터
Figure 112010051952287-pct00004
와 화면의 교점으로부터 표시 콘텐츠의 중심까지의 거리 s와, 유저의 위치와 표시 콘텐츠의 중심의 거리 d를 이용하여, 표시 콘텐츠에 대한 유저의 관심도 k를 식 (3)에 따라 산출한다(S206).
[수식 3]
Figure 112010051952287-pct00005
여기에서, g1, g2 및 g3은 게인이며, 0 이상의 실수이다.
식 (3)의 우변의 제1항은, 유저의 이동 방향에 관한 항이며, 표시 콘텐츠에 가까워지도록 유저가 이동할수록 관심도가 커지도록 하기 위한 항이다.
도 13에서 실선으로 표시된 이동 벡터는, 그 이동 벡터를 이동 방향으로 연장하면 화면 혹은 화면을 연장한 면과 교차하는 벡터를 나타낸다. 한편, 도 13에서 점선으로 표시된 이동 벡터는, 그 이동 벡터를 이동 방향으로 연장해도 화면 및 화면을 연장한 면과 교차하는 일이 없는 벡터를 나타낸다.
유저의 이동 벡터
Figure 112010051952287-pct00006
와 화면의 교점으로부터 표시 콘텐츠의 중심까지의 거리 s는, 유저가 표시 콘텐츠를 향해 이동하고 있을수록 작은 값이 되고, 제1항은 큰 값이 된다. 따라서, 이 제1항에 의해, 유저의 이동 방향이 표시 콘텐츠의 중심을 향하고 있을수록 관심도가 커진다.
또한, 유저의 이동 벡터
Figure 112010051952287-pct00007
와 화면의 교점으로부터 표시 콘텐츠의 중심까지의 거리 s는, 도 13에서는 유저 A 및 유저 C에 대해서만 도시되어 있지만, 다른 유저의 거리 s도 유저 A 및 유저 C와 동일하게 산출된다. 또, 유저 B와 같이, 이동 벡터를 이동 방향으로 연장해도 화면 및 화면을 연장한 면과 교차하는 일이 없는 유저의 거리 s는, 무한대(∞)가 되어, 제1항은, g1의 값에 상관없이 0이 된다.
또, 도 13에 있어서, 거리 s는, 유저의 이동 벡터와 화면의 교점으로부터 표시 콘텐츠의 중심까지의 거리이지만, 유저의 이동 벡터와 화면의 교점으로부터 화면의 중심까지의 거리여도 된다. 이 경우, 관심도는, 화면의 중심에 가까워지도록 유저가 이동할수록 커진다. 또, 거리 s는, 유저의 이동 벡터와 화면의 교점으로부터 표시 콘텐츠의 일부가 나타내는 화상의 중심까지의 거리여도 된다. 이 경우, 관심도는, 표시 콘텐츠의 일부가 나타내는 화상의 중심에 가까워지도록 유저가 이동할수록 커진다.
식 (3)의 우변의 제2항은, 유저의 속도에 관한 항이며, 유저가 천천히 이동할수록 관심도가 커지도록 하기 위한 항이다.
식 (3)의 우변의 제3항은, 유저의 위치와 표시 콘텐츠의 중심의 거리에 관한 항이며, 유저의 위치가 표시 콘텐츠의 위치에 가까울수록 관심도가 커지도록 하기 위한 항이다.
다음에, 타깃 유저 선정부(24)는, 타깃 유저를 선정한다(S208). 구체적으로는, 타깃 유저 선정부(24)는, 예를 들면, 관심도 k가 미리 정해진 제4 임계치 kTH 이상인 유저를 타깃 유저로 선정한다. 예를 들면 도 14a에 있어서, 제4 임계치 kTH가 「0.4」로 설정되어 있는 경우, 타깃 유저 선정부(24)는, 관심도가 「0.7」인 「유저 A」와 관심도가 「0.4」인 「유저 D」를 타깃 유저로서 선정한다.
또한, 타깃 유저 선정부(24)는, 표시 콘텐츠의 중심으로부터의 거리 d가 미리 정해진 제5 임계치 미만인 유저를 타깃 유저로서 선정해도 된다. 이 경우, 예를 들면 도 14b에 있어서, 타깃 유저 선정부(24)는, 표시 콘텐츠의 중심으로부터의 거리 d가 제5 임계치 dt 미만인 「유저 A」와 「유저 B」를 타깃 유저로서 선정한다.
다음에, 표시 제어부(26)는, 타깃 유저에 대해, 관심도의 변화율의 크기의 평균치를 산출한다(S210). 구체적으로는, 표시 제어부(26)는, 현재 시각 t에 있어서, 소정의 시간 간격 △t에 있어서의 각 타깃 유저의 관심도의 변화율의 크기를 산출한다. 예를 들면, 단계 S208에서 「유저 A」와「유저 B」가 타깃 유저로서 선정된 경우, 표시 제어부(26)는, 도 15 및 식 (4)에 나타낸 바와 같이, 「유저 A」의 관심도의 변화율의 크기 a_A(t)와 「유저 B」의 관심도의 변화율의 크기 a_B(t)를, 산출된 「유저 A」의 관심도 k_a와 「유저 B」의 관심도 k_b를 이용하여 산출한다.
[수식 4]
Figure 112010051952287-pct00008
그리고, 표시 제어부(26)는, 이와 같이 산출된 유저 A와 유저 B의 각각의 관심도의 변화율의 크기(a_A와 a_B)의 평균치를, 타깃 유저의 관심도의 변화율의 크기의 평균치 a_all로서 산출한다.
다음에, 표시 제어부(26)는, 표시부(27)에 표시되어 있는 콘텐츠의 적어도 일부의 선명도 또는 개시도가, 미리 정해진 선명도 또는 개시도보다 낮은지의 여부를 판정한다(S212).
여기에서, 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 높은 경우(S212의 No), 표시 제어부(26)는, 관심도의 변화율의 크기의 평균치 a_all이 제1 임계치를 밑돈 상태가 소정 시간 이상으로 계속되고 있는지의 여부를 판정한다(S214).
여기에서, 관심도의 변화율의 크기의 평균치 a_all이 제1 임계치를 밑돈 상태가 소정 시간 이상으로 계속되고 있지 않은 경우(S214의 No), 처리를 종료한다. 한편, 관심도의 변화율의 크기의 평균치 a_all이 제1 임계치를 밑돈 상태가 소정 시간 이상으로 계속되고 있는 경우(S214의 Yes), 표시 제어부(26)는, 산출된 관심도에 따른 콘텐츠를, 적어도 일부의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로 표시한다(S216). 구체적으로는, 표시 제어부(26)는, 콘텐츠 데이터베이스(25)를 참조함으로써, 산출된 관심도에 따른 콘텐츠 및 영상 효과를 취득한다. 그리고, 표시 제어부(26)는, 취득한 콘텐츠를 표시부(27)에 표시함과 더불어, 당해 콘텐츠에 취득한 영상 효과를 적용한다. 또한, 관심도의 변화율의 크기의 평균치 a_all이 제1 임계치를 밑돈 상태가 소정 시간 이상으로 계속되고 있는 경우에 콘텐츠의 선명도 또는 개시도를 낮추는 것은, 유저의 관심도를 끌어올리는 효과가 높은(관심도를 끌어올려야 하는) 상황이기 때문이다.
한편, 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 경우(S212의 Yes), 표시 제어부(26)는, 선명도 또는 개시도를 올려야 하는지의 여부를 판정한다(S218). 구체적으로는, 예를 들면, 표시 제어부(26)는, 관심도 추정부(23)에 의해 추정된 관심도의 변화율의 크기가 제2 임계치를 초과하는지의 여부에 따라, 선명도 또는 개시도를 올려야하는지의 여부를 판정한다. 또는, 표시 제어부(26)는, 예를 들면, 관심도 추정부(23)에 의해 추정된 관심도가 제3 임계치를 초과하는지의 여부에 따라, 선명도 또는 개시도를 올려야 하는지의 여부를 판정한다.
여기에서, 선명도 또는 개시도를 올려야 한다고 판정된 경우(S218의 Yes), 표시 제어부(26)는, 표시 콘텐츠의 선명도 또는 개시도를 올리고(S220), 처리를 종료한다. 구체적으로는, 표시 제어부(26)는, 화면에 표시되어 있는 콘텐츠에 적용된 영상 효과를 해제한다. 한편, 선명도 또는 개시도를 올려야 하지 않는다고 판정된 경우(S218의 No), 처리를 종료한다.
이러한 단계 S202로부터 단계 S220까지의 처리를 실행함으로써, 정보 표시 장치(20)는, 타깃 유저의 관심도에 따라, 콘텐츠의 적어도 일부의 선명도 또는 개시도를 변화시킬 수 있다. 또한, 정보 표시 장치(20)는, 단계 S202로부터 단계 S220까지의 처리를 반복하여 실행해도 된다.
이하에, 도 12에 나타낸 처리의 흐름을, 도 16을 이용하여 더욱 구체적으로 설명한다.
도 16은, 본 발명의 실시 형태 2에 있어서의 정보 표시 장치의 동작의 구체예를 도시한 도면이다. 도 16에서는, 화면의 일부에 상품 「TV」의 광고가 표시되어 있다. 또한, 정보 표시 장치(20)는, 「유저 A」의 관심도에 따라, 도 10에 나타낸 콘텐츠 데이터베이스(25)에 저장된 콘텐츠를 화면에 표시한다. 예를 들면, 도 16(a)에서는, 「유저 A」의 관심도가 0∼k1의 범위에 있으므로, 관심도 레벨 「1」의 콘텐츠가 표시되어 있다.
도 16(a)에 나타낸 상황은, 타깃 유저의 관심도가 순조롭게 높아진 후에, 높아진 관심도가 무디어진 상황이다. 즉, 도 16(a)에 나타낸 상황은, 타깃 유저의 관심도의 변화율이 작고, 관심도의 변화가 안정적인 상황이다. 이러한 상황은, 타깃 유저의 표시 콘텐츠에 대한 관심이 어느 정도 높아졌지만, 더욱 관심이 높아질 정도의 상황은 아닌 것을 나타낸다. 요컨대, 타깃 유저는, 표시 콘텐츠에 의해 제시된 정보가, 더욱 관심을 높일 정도의 정보는 아니라고 판단하였다고 생각된다. 이러한 상황에서는, 표시 콘텐츠(광고)의 전체 혹은 일부에 영상 효과를 더함으로써, 유저에게 새로운 자극을 주어, 표시 콘텐츠(광고)에 한층 더 관심을 끌어당길 수 있다.
도 16(a)에서는, 타깃 유저의 관심도의 변화율의 크기가 제1 임계치 pc를 소정 시간 계속해서 밑돌고 있으므로, 표시 제어부(26)는, 도 16(b)에 나타낸 바와 같이, 일부 또는 전부의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로, 콘텐츠 데이터베이스(25)에 저장된 콘텐츠를 표시한다. 구체적으로는, 표시 제어부(26)는, 현재의 관심도 레벨보다 1개 위의 관심도 레벨인 관심도 레벨 「2」의 콘텐츠로 표시 콘텐츠를 전환하고, 또한 영상 효과 「hiding(20)」을 표시 콘텐츠의 적용 영역 「rectangle(20, 50, 500, 300)」에 적용한다. 그 결과, 표시 콘텐츠의 상품 「TV」가 표시되어 있는 부분의 개시도가 낮아지므로, 유저는 시인성(視認性)이 나빠진 당해 부분에 주목한다.
그리고, 표시 제어부(26)는, 관심도의 변화율의 크기가 제2 임계치 pc2를 초과하였을 때에, 도 16(c)에 나타낸 바와 같이 낮춰진 개시도를 올린다. 요컨대, 표시 제어부(26)는, 콘텐츠에 적용된 영상 효과를 해제한다. 또한, 표시 제어부(26)는, 예를 들면, 관심도가 k1을 초과하였을 때에, 콘텐츠의 개시도를 올려도 된다.
도 16(c)에서는, 관심도가 k1∼k2의 범위에 있으며, 도 16(a)와 동일하게, 타깃 유저의 관심도의 변화율의 크기가 임계치 pc를 소정 시간 계속해서 밑돌고 있다. 그래서, 표시 제어부(26)는, 도 16(d)와 같이 관심도 레벨 「3」의 콘텐츠로 표시 콘텐츠를 전환함과 더불어, 콘텐츠의 적용 영역 「all」에 적용 효과 「blur(30)」를 적용한다. 그 결과, 표시 콘텐츠의 전체가 일시적으로 흐릿해져, 선명도가 낮아지므로, 유저는 당해 표시 콘텐츠에 대해 새롭게 주목하게 된다.
또한, 도 16의 예에서는, 도 16(a)로부터 도 16(b)에 있어서, 표시 제어부(26)는, 「유저 A」가 화면 또는 표시 콘텐츠에 가까워짐에 따라, 표시 콘텐츠(광고)의 표시 영역의 크기를 작게 하고 있다. 이에 의해, 「유저 A」는, 표시 콘텐츠 전체를 보기 쉬워져, 표시 콘텐츠에 대한 「유저 A」의 관심이 높아진다.
이와 같이, 표시 제어부(26)는, 타깃 유저의 적어도 1명의 위치에 따라, 콘텐츠가 표시되는 화면의 영역의 위치 또는 크기를 제어하는 것이 바람직하다. 구체적으로는, 표시 제어부(26)는, 예를 들면, 타깃 유저의 적어도 1명의 위치가 콘텐츠가 표시되어 있는 위치에 가까울수록 콘텐츠가 표시되는 영역의 크기가 작아지도록 콘텐츠를 표시하는 것이 바람직하다. 또, 예를 들면, 표시 제어부(26)는, 예를 들면, 타깃 유저의 적어도 1명의 위치가 콘텐츠가 표시되어 있는 위치에 가까울수록 콘텐츠가 표시되는 영역의 위치가 유저에 가까워지도록 콘텐츠를 표시하는 것이 바람직하다.
이상과 같이, 본 실시 형태에 있어서의 정보 표시 장치(20)는, 화면의 앞쪽에 위치하는 유저 중에서 선정된 타깃 유저의 유저 상태에 따라, 콘텐츠의 선명도 또는 개시도를 변경할 수 있으며, 타깃 유저로서 선정된 유저의 관심을 효율적으로 높일 수 있다.
또, 정보 표시 장치(20)는, 관심 유발 효과에 의해 주목을 끌 수 있을 가능성이 높은 유저를 타깃 유저로서 선정할 수 있으며, 유저의 관심을 효율적으로 높일 수 있다.
또한, 영상 효과는, 상기에서 예시한 것에 한정되지 않는다. 표시 콘텐츠의 선명도 또는 개시도를 낮춰 유저를 일시적으로 궁금하게 하는 효과가 있으면, 다른 영상 효과여도 된다. 예를 들면, 영상 효과는, 유저의 주의를 끌기 쉬운 사인 혹은 소재를를 이용한 효과여도 된다.
또한, 본 실시 형태에 있어서, 표시 콘텐츠의 일례로서 광고에 관한 콘텐츠를 이용하여 설명하였지만, 본 발명의 한 양태에 있어서의 정보 표시 장치는, 반드시 광고에 관한 콘텐츠를 표시할 필요는 없다. 정보 표시 장치는, 유저의 관심을 높임으로써 효과가 있는 다른 콘텐츠를 표시해도 된다.
또, 본 실시 형태에 있어서, 콘텐츠는, 화면의 일부의 영역에 표시되어 있었지만, 도 17a에 나타낸 바와 같이, 콘텐츠는 화면 전체에 표시되어도 된다. 또, 본 실시 형태에 있어서, 1개의 콘텐츠가 화면에 표시되어 있었지만, 도 17b에 나타낸 바와 같이 2 이상의 콘텐츠(표시 콘텐츠 A 및 표시 콘텐츠 B)가 화면에 표시되어도 된다. 이 경우, 정보 표시 장치(20)는, 도 12에 나타낸 처리를 콘텐츠마다 실행하는 것이 바람직하다.
또, 본 실시 형태에 있어서, 관심도 추정부(23)는, 유저의 이동 방향, 이동 속도, 및 위치의 모두를 이용하여 관심도를 추정하고 있었지만, 유저의 이동 방향, 이동 속도, 및 위치의 적어도 1개를 이용하여 관심도를 추정하면 된다. 예를 들면, 식 (3)에 있어서, 게인 g1과 게인 g2를 0으로 하면, 관심도 추정부(23)는, 유저의 위치와 표시 콘텐츠의 중심의 거리만에 의거하여 관심도 k를 산출할 수 있다.
(실시 형태 2의 변형예)
실시 형태 2의 변형예에 있어서의 정보 표시 장치(20)는, 또한 유저의 시선 방향을 이용하여 관심도를 추정하는 점이, 실시 형태 2에 있어서의 정보 표시 장치(20)와 상이하다. 이하, 실시 형태 2와 상이한 점을 중심으로, 본 변형예에 대해, 도면을 참조하면서 설명한다.
도 8에 나타낸 실시 형태 2에 있어서의 정보 표시 장치(20)와 동일하게, 본 변형예에 있어서의 정보 표시 장치(20)는, 유저 식별부(21)와, 유저 상태 검출부(22)와, 관심도 추정부(23)와, 타깃 유저 선정부(24)와, 콘텐츠 데이터베이스(25)와, 표시 제어부(26)와, 표시부(27)를 구비한다. 또한, 유저 상태 검출부(22) 및 관심도 추정부(23) 이외의 구성 요소는, 실시 형태 2와 동일하므로, 설명을 생략한다.
유저 상태 검출부(22)는, 또한, 유저의 시선 방향을 유저 상태로서 검출한다. 구체적인 시선 방향의 검출 방법에 대해서는 후술한다.
관심도 추정부(23)는, 검출된 유저의 시선 방향이, 유저로부터 화면을 대표하는 위치로 향하는 방향, 또는 유저로부터 콘텐츠가 표시되어 있는 위치로 향하는 방향에 가까울수록 관심도가 높다고 추정한다. 구체적으로는, 관심도 추정부(23)는, 식 (3)의 우변에, 또한 유저의 시선 방향에 관한 제4항을 더한 식 (5)를 이용하여 관심도를 산출한다. 식 (5)의 제4항은, 유저의 시선 방향의 단위 벡터인 시선 방향 벡터
Figure 112010051952287-pct00009
와 화면의 교점으로부터 표시 콘텐츠의 중심까지의 거리 t에 1을 가산한 값의 역수이며, 유저가 표시 콘텐츠의 중심 방향을 볼수록 큰 값이 된다.
[수식 5]
Figure 112010051952287-pct00010
여기에서, g4는, g1, g2 및 g3과 동일하게 게인이며, 0 이상의 실수이다.
또한, 거리 t는, 시선 방향 벡터와 화면의 교점으로부터 표시 콘텐츠의 중심까지의 거리가 아니라, 시선 방향 벡터와 화면의 교점으로부터 화면의 중심까지의 거리여도 된다. 이 경우, 관심도는, 유저가 화면의 중심 방향을 볼수록 커진다. 또, 거리 t는, 시선 방향 벡터와 화면의 교점으로부터 표시 콘텐츠의 일부가 나타내는 화상의 중심까지의 거리여도 된다. 이 경우, 관심도는, 유저가 표시 콘텐츠의 일부가 나타내는 화상의 중심 방향을 볼수록 커진다.
다음에, 유저 상태 검출부(22)에 의한 시선 방향의 검출 방법에 대해, 도 18을 이용하여 설명한다.
도 18은, 본 발명의 실시 형태 2의 변형예에 있어서의 시선 방향의 검출에 관한 처리의 흐름을 도시한 흐름도이다. 요컨대, 도 18은, 유저 상태 검출부(22)에 의한 유저 상태의 검출 처리(도 12의 단계 S204)의 일부를 나타낸다.
도 18에 나타낸 바와 같이, 유저 상태 검출부(22)는, 유저의 얼굴 방향을 검출하는 처리(S510)의 결과와, 얼굴 방향에 대한 상대적인 시선 방향인 상대 시선 방향을 검출하는 처리(S530)의 결과에 의거하여, 시선 방향을 검출한다(S550).
그래서 우선, 유저의 얼굴 방향을 검출하는 처리(S510)에 대해 이하에 설명한다.
우선, 유저 상태 검출부(22)는, 유저 검출 카메라(60)에 의해 촬영된, 화면의 앞쪽에 존재하는 유저의 화상으로부터 얼굴 영역의 검출을 행한다(S512). 다음에, 유저 상태 검출부(22)는, 검출된 얼굴 영역에 대해, 각 기준 얼굴 방향에 대응한 얼굴 부품 특징점의 영역을 적용시켜, 각 얼굴 부품 특징점의 영역 화상을 잘라낸다(S514).
그리고, 유저 상태 검출부(22)는, 잘라내어진 영역 화상과, 미리 유지된 템플릿 화상의 상관도를 계산한다(S516). 이어서, 유저 상태 검출부(22)는, 각 기준 얼굴 방향이 나타내는 각도를, 계산된 상관도에 따라 가중하여 가산한 가중합을 구하고, 이것을 검출한 얼굴 영역에 대응하는 유저의 얼굴 방향으로서 검출한다(S518).
이상과 같이, 유저 상태 검출부(22)는, 단계 S512∼단계 S518의 처리를 실행함으로써, 유저의 얼굴 방향을 검출한다.
다음에, 상대 시선 방향을 검출하는 처리(S530)에 대해 설명한다.
우선, 유저 상태 검출부(22)는, 유저 검출 카메라(60)에 의해 촬영된 화상을 이용하여, 유저의 좌우 눈머리의 3차원 위치를 검출한다(S532). 이어서, 유저 상태 검출부(22)는, 유저 검출 카메라(60)에 의해 촬영된 화상을 이용하여, 유저의 좌우 검은자 중심의 3차원 위치를 검출한다(S534). 그리고, 유저 상태 검출부(22)는, 좌우 눈머리의 3차원 위치로부터 얻어지는 시선 방향 기준면과 좌우의 검은자 중심의 3차원 위치를 이용하여, 상대 시선 방향을 검출한다(S536).
이상과 같이, 유저 상태 검출부(22)는, 단계 S532∼단계 S536의 처리를 실행함으로써, 상대 시선 방향을 검출한다.
그리고, 유저 상태 검출부(22)는, 상기와 같이 검출된, 유저의 얼굴 방향과 상대 시선 방향을 이용하여, 유저의 시선 방향을 검출한다.
다음에, 도 19∼도 21b를 이용하여 시선 방향의 검출 처리의 상세를 설명한다.
도 19는, 본 발명의 실시 형태 2의 변형예에 있어서의 유저의 얼굴 방향을 검출하는 처리를 설명하기 위한 도면이다.
우선, 유저 상태 검출부(22)는, 도 19(a)에 나타낸 바와 같이, 각 기준 얼굴 방향에 대응한 얼굴 부품 특징점의 영역을 기억하고 있는 얼굴 부품 영역 DB로부터, 얼굴 부품 특징점의 영역을 읽어낸다. 이어서, 유저 상태 검출부(22)는, 도 19(b)에 나타낸 바와 같이, 촬영된 화상의 얼굴 영역에 대해 얼굴 부품 특징점의 영역을 기준 얼굴 방향마다 적용시켜, 얼굴 부품 특징점의 영역 화상을 기준 얼굴 방향마다 잘라낸다.
그리고, 유저 상태 검출부(22)는, 도 19(c)에 나타낸 바와 같이, 잘라내어진 영역 화상과, 얼굴 부품 영역 템플릿 DB에 유지된 템플릿 화상의 상관도를 기준 얼굴 방향마다 계산한다. 또, 유저 상태 검출부(22)는, 이와 같이 계산된 상관도가 나타내는 상관 정도의 높이에 따라, 기준 얼굴 방향마다의 가중치를 산출한다. 예를 들면, 유저 상태 검출부(22)는, 기준 얼굴 방향의 상관도의 총합에 대한 각 기준 얼굴 방향의 상관도의 비를 가중치로서 산출한다.
이어서, 유저 상태 검출부(22)는, 도 19(d)에 나타낸 바와 같이, 기준 얼굴 방향이 나타내는 각도에, 산출된 가중치를 곱한 값의 총합을 계산하여, 계산 결과를 유저의 얼굴 방향으로서 검출한다. 도 19(d)의 예에서는, 기준 얼굴 방향 +20도에 대한 가중치가 「0.85」, 0도에 대한 가중치가 「0.14」, -20도에 대한 가중치가 「0.01」이므로, 유저 상태 검출부(22)는, 얼굴 방향을 16.8도(=20×0.85+0×0.14+(-20)×0.01)로 검출한다.
또한, 본 변형예에서는, 유저 상태 검출부(22)는, 얼굴 부품 특징점의 영역 화상을 대상으로 하여 상관도를 계산하였지만, 반드시 얼굴 부품 특징점의 영역 화상을 대상으로 할 필요는 없다. 예를 들면, 유저 상태 검출부(22)는, 얼굴 영역 전체의 화상을 대상으로 하여 상관도를 계산해도 된다.
또, 얼굴의 방향을 검출하는 그 밖의 방법으로서는, 얼굴 화상으로부터 눈·코·입 등의 얼굴 부품 특징점을 검출하여, 얼굴 부품 특징점의 위치 관계로부터 얼굴의 방향을 계산하는 방법이 있다. 얼굴 부품 특징점의 위치 관계로부터 얼굴 방향을 계산하는 방법으로서는, 1개의 카메라로부터 얻어진 얼굴 부품 특징점에 가장 일치하도록, 미리 준비한 얼굴 부품 특징점의 3차원 모델을 회전·확대 축소하여 매칭하고, 얻어진 3차원 모델의 회전량으로부터 얼굴 방향을 계산하는 방법이 있다. 또, 얼굴 부품 특징점의 위치 관계로부터 얼굴 방향을 계산하는 다른 방법으로서, 2대의 카메라에 의해 촬영된 화상을 기초로 스테레오 시의 원리를 이용하여, 좌우의 카메라에 있어서의 얼굴 부품 특징점 위치의 화상 상의 어긋남으로부터 각 얼굴 부품 특징점의 3차원 위치를 계산하여, 얻어진 얼굴 부품 특징점의 위치 관계로부터 얼굴의 방향을 계산하는 방법이 있다. 구체적으로는 예를 들면, 두 눈 및 입의 3차원 좌표점에서 쳐지는 평면의 법선 방향을 얼굴 방향으로서 검출하는 방법 등이 있다.
다음에, 상대 시선 방향을 검출하는 방법에 대해, 도 20, 도 21a 및 도 21b를 이용하여 설명한다. 본 변형예에서는, 유저 상태 검출부(22)는, 우선 시선 방향 기준면을 검출하고, 다음에 검은자 중심의 3차원 위치를 검출하며, 마지막으로 상대 시선 방향을 검출한다.
우선, 시선 방향 기준면의 검출에 대해 설명한다.
도 20은, 시선 방향 기준면에 대해 설명하기 위한 도면이다. 본 변형예에서는, 유저 상태 검출부(22)는, 좌우의 눈머리(왼쪽 눈 및 오른쪽 눈의 코 쪽의 끝점)의 3차원 위치를 검출함으로써, 시선 방향 기준면을 검출한다.
시선 방향 기준면은, 상대 시선 방향을 검출할 때에 기준이 되는 면이며, 도 20에 나타낸 바와 같이 얼굴의 좌우 대칭면과 동일하다. 또한, 눈머리의 위치는, 눈꼬리, 입고리, 혹은 눈썹 등의 다른 얼굴 부품의 위치에 비해, 표정에 의한 변동이 적고, 또 오검출이 적다. 따라서, 본 변형예에서는, 유저 상태 검출부(22)는, 얼굴의 좌우 대칭면인 시선 방향 기준면을 눈머리의 3차원 위치를 이용하여 검출한다.
구체적으로는, 유저 상태 검출부(22)는, 제1 유저 검출 카메라(60a) 및 제2 유저 검출 카메라(60b)로 동시에 촬영된 2장의 화상의 각각에 있어서, 얼굴 검출 모듈과 얼굴 부품 검출 모듈을 이용하여, 좌우의 눈머리 영역을 검출한다. 그리고, 유저 상태 검출부(22)는, 검출한 눈머리 영역의 화상간의 위치의 어긋남(시차)을 이용하여, 좌우의 눈머리 각각의 3차원 위치를 검출한다. 또한, 유저 상태 검출부(22)는, 도 20에 나타낸 바와 같이, 검출한 좌우 눈머리의 3차원 위치를 끝점으로 하는 선분의 수직 이등분면을 시선 방향 기준면으로서 검출한다.
다음에, 검은자 중심의 검출에 관해 설명한다.
도 21a 및 도 21b는, 검은자 중심의 검출에 대해 설명하기 위한 도면이다.
사람은, 대상물로부터의 광이 동공을 통해 망막에 도달하고, 전기 신호로 변환되어, 그 전기 신호가 뇌에 전달됨으로써, 대상물을 시각적으로 인식한다. 따라서, 동공의 위치를 이용하면, 시선 방향을 검출할 수 있다. 그러나, 일본인의 홍채는, 검은색 또는 갈색이므로, 화상 처리에 의해 동공과 홍채를 판별하는 것이 어렵다. 또, 동공의 중심과 검은자(동공 및 홍채의 양쪽을 포함한다)의 중심은 거의 일치한다. 그래서 본 변형예에서는, 유저 상태 검출부(22)는, 상대 시선 방향을 검출할 때에, 검은자 중심의 검출을 행한다.
유저 상태 검출부(22)는, 우선, 촬영된 화상으로부터 눈꼬리와 눈머리의 위치를 검출한다. 그리고, 유저 상태 검출부(22)는, 도 21a에 나타낸 바와 같은, 눈꼬리와 눈머리를 포함하는 영역의 화상으로부터, 휘도가 작은 영역을 검은자 영역으로서 검출한다. 구체적으로는, 유저 상태 검출부(22)는, 예를 들면, 휘도가 소정 임계치 이하인 영역이며, 소정의 크기보다 큰 영역을 검은자 영역으로서 검출한다.
다음에, 유저 상태 검출부(22)는, 도 21b에 나타낸 바와 같은, 제1 영역과 제2 영역으로 이루어지는 검은자 검출 필터를 검은자 영역의 임의의 위치에 설정한다. 그리고, 유저 상태 검출부(22)는, 제1 영역 내의 화소의 휘도와 제2 영역 내의 화소의 휘도의 영역간 분산이 최대가 되는 검은자 검출 필터의 위치를 탐색하여, 탐색 결과가 나타내는 위치를 검은자 중심으로서 검출한다. 유저 상태 검출부(22)는, 상기와 동일하게, 동시에 촬영된 2장의 화상에 있어서의 검은자 중심의 위치의 어긋남을 이용하여, 검은자 중심의 3차원 위치를 검출한다.
마지막으로, 상대 시선 방향의 검출에 대해 설명한다.
유저 상태 검출부(22)는, 검출한 시선 방향 기준면과, 검은자 중심의 3차원 위치를 이용하여, 상대 시선 방향을 검출한다. 성인의 안구 직경은, 거의 개인차가 없는 것이 알려져 있으며, 예를 들면 일본인의 경우 약 24mm이다. 따라서, 기준이 되는 방향(예를 들면 정면)을 향하였을 때의 검은자 중심의 위치를 알 수 있으면, 거기에서부터 현재의 검은자 중심 위치까지의 변위를 구함으로써 시선 방향으로 변환 산출할 수 있다.
종래 수법에서는 기준이 되는 방향을 향하였을 때의 검은자 중심의 위치가 알려져 있지 않으므로, 캘리브레이션을 필요로 하고 있었다. 그러나, 본 수법에서는, 정면을 향하였을 때는, 좌우의 검은자 중심을 연결한 선분의 중점이, 얼굴의 중심, 즉 시선 방향 기준면 상에 존재하는 것을 이용한다. 요컨대, 유저 상태 검출부(22)는, 좌우의 검은자 중심을 연결한 선분의 중점과 시선 방향 기준면의 거리를 산출함으로써, 상대 시선 방향을 검출한다.
구체적으로는, 유저 상태 검출부(22)는, 안구 반경 R과 좌우의 검은자 중심을 연결한 선분의 중점과 시선 방향 기준면의 거리 d를 이용하여, 식 (6)에 나타낸 바와 같이, 얼굴의 방향에 대한 좌우 방향의 회전각 θ를 상대 시선 방향으로서 검출한다.
[수식 6]
Figure 112010051952287-pct00011
이상과 같이, 유저 상태 검출부(22)는, 시선 방향 기준면과 검은자 중심의 3차원 위치를 이용하여, 상대 시선 방향을 검출한다. 그리고, 유저 상태 검출부(22)는, 검출된 얼굴의 방향과 상대 시선 방향을 이용하여, 유저의 시선 방향을 검출한다.
이상과 같이, 본 변형예에 있어서의 정보 표시 장치(20)는, 유저의 시선 방향을 간단하고 쉽게 검출할 수 있으며, 검출한 시선 방향을 이용하여 관심도를 고정밀도로 추정할 수 있다.
또한, 본 변형예에 있어서, 관심도 추정부(23)는, 유저의 이동 방향, 이동 속도, 위치, 및 시선 방향의 모두를 이용하여, 관심도를 추정하고 있었지만, 반드시 모두를 이용하여 관심도를 추정할 필요는 없다. 예를 들면, 식 (5)에 있어서, 게인 g1과 게인 g2와 게인 g3을 0으로 하면, 관심도 추정부(23)는, 유저의 시선 방향에만 의거하여 관심도 k를 산출할 수 있다.
또한, 상기 실시 형태 2 또는 그 변형예에 있어서, 정보 표시 장치(20)는, 거리 s 또는 거리 t를 이용하여, 이동 방향 또는 시선 방향과, 유저로부터 콘텐츠가 표시되어 있는 위치로 향하는 방향의 근접을 수치화하고 있었지만, 다른 방법에 의해 수치화해도 된다. 예를 들면, 정보 표시 장치(20)는, 이동 방향 또는 시선 방향과, 유저로부터 콘텐츠가 표시되어 있는 위치로 향하는 방향이 이루는 각도(-180도∼180도)의 절대치를 이용하여, 이동 방향 또는 시선 방향과, 유저로부터 콘텐츠가 표시되어 있는 위치로 향하는 방향의 근접을 수치화해도 된다.
이상, 본 발명의 한 양태에 있어서의 정보 표시 장치에 대해 실시 형태 및 그 변형예에 의거하여 설명하였지만, 본 발명은, 이들 실시 형태 또는 그 변형예에 한정되는 것은 아니다. 본 발명의 취지를 일탈하지 않는 한, 당업자가 생각해 내는 각종 변형을 본 실시 형태 또는 그 변형예에 실시한 것, 혹은 상이한 실시 형태 또는 그 변형예에 있어서의 구성 요소를 조합하여 구축되는 형태도, 본 발명의 범위 내에 포함된다.
예를 들면, 상기 실시 형태에 있어서, 정보 표시 장치는, 플라즈마 디스플레이 패널 또는 액정 패널 등의 화면을 구비하고 있었지만, 반드시 화면을 구비할 필요는 없다. 예를 들면, 정보 표시 장치는, 스크린 또는 벽면 등의 투영면에 콘텐츠를 투영하는 프로젝터 등이어도 된다.
또한, 본 발명은, 이하와 같이 변형할 수도 있다.
(1) 상기의 각 장치는, 구체적으로는, 마이크로 프로세서, ROM, RAM, 하드디스크 유닛, 디스플레이 유닛, 키보드, 마우스 등으로 구성되는 컴퓨터 시스템이다. 상기 RAM 또는 상기 하드디스크 유닛에는, 컴퓨터 프로그램이 기억되어 있다. 상기 마이크로 프로세서가, 상기 컴퓨터 프로그램에 따라 동작함으로써, 각 장치는, 그 기능을 달성한다. 여기에서, 컴퓨터 프로그램은, 소정의 기능을 달성하기 위해, 컴퓨터에 대한 지령을 나타내는 명령 코드가 복수개 조합되어 구성된 것이다. 또한, 각 장치는, 마이크로 프로세서, ROM, RAM, 하드디스크 유닛, 디스플레이 유닛, 키보드, 마우스 등의 모두를 포함하는 컴퓨터 시스템에 한정되지 않으며, 이들의 일부로 구성되어 있는 컴퓨터 시스템이어도 된다.
(2) 상기의 각 장치를 구성하는 구성 요소의 일부 또는 전부는, 1개의 시스템 LSI(Large Scale Integration : 대규모 집적 회로)로 구성되어 있어도 된다. 시스템 LSI는, 복수의 구성부를 1개의 칩 상에 집적하여 제조된 초다기능 LSI이며, 구체적으로는, 마이크로 프로세서, ROM, RAM 등을 포함하여 구성되는 컴퓨터 시스템이다. 상기 RAM에는, 컴퓨터 프로그램이 기억되어 있다. 상기 마이크로 프로세서가, 상기 컴퓨터 프로그램에 따라 동작함으로써, 시스템 LSI는 그 기능을 달성한다.
또한, 여기에서는, 시스템 LSI로 하였지만, 집적도의 차이에 따라, IC, LSI, 슈퍼 LSI, 울트라 LSI로 호칭되는 경우도 있다. 또, 집적 회로화의 수법은 LSI에 한정되는 것은 아니며, 전용 회로 또는 범용 프로세서로 실현해도 된다. LSI 제조 후에, 프로그램하는 것이 가능한 FPGA(Field Programmable Gate Array)나, LSI 내부의 회로 셀의 접속이나 설정을 재구성 가능한 리컨피규러블·프로세서를 이용해도 된다.
또한, 반도체 기술의 진보 또는 파생되는 다른 기술에 의해 LSI로 치환되는 집적 회로화의 기술이 등장하면, 당연히, 그 기술을 이용하여 기능 블록의 집적화를 행해도 된다. 바이오 기술의 적용 등이 가능성으로서 있을 수 있다.
(3) 상기의 각 장치를 구성하는 구성 요소의 일부 또는 전부는, 각 장치에 탈착 가능한 IC 카드 또는 단체의 모듈로 구성되어 있는 것으로 해도 된다. 상기 IC 카드 또는 상기 모듈은, 마이크로 프로세서, ROM, RAM 등으로 구성되는 컴퓨터 시스템이다. 상기 IC 카드 또는 상기 모듈은, 상기의 초다기능 LSI를 포함하는 것으로 해도 된다. 마이크로 프로세서가, 컴퓨터 프로그램에 따라 동작함으로써, 상기 IC 카드 또는 상기 모듈은, 그 기능을 달성한다. 이 IC 카드 또는 이 모듈은, 내탬퍼성을 갖는 것으로 해도 된다.
(4) 본 발명은, 상기에 나타낸 정보 표시 장치가 구비하는 특징적인 구성부의 동작을 단계로 하는 방법인 것으로 해도 된다. 또, 이들 방법을 컴퓨터에 의해 실현하는 컴퓨터 프로그램인 것으로 해도 되며, 상기 컴퓨터 프로그램으로 이루어지는 디지털 신호인 것으로 해도 된다.
또, 본 발명은, 상기 컴퓨터 프로그램 또는 상기 디지털 신호를 컴퓨터 판독 가능한 기록 매체, 예를 들면, 플렉시블 디스크, 하드디스크, CD-ROM, MO, DVD, DVD-ROM, DVD-RAM, BD(Blu-ray Disc(등록상표)), 반도체 메모리 등에 기록한 것으로 해도 된다. 또, 이들 기록 매체에 기록되어 있는 상기 컴퓨터 프로그램 또는 상기 디지털 신호인 것으로 해도 된다.
또, 본 발명은, 상기 컴퓨터 프로그램 또는 상기 디지털 신호를, 전기 통신 회선, 무선 또는 유선 통신 회선, 인터넷을 대표로 하는 네트워크, 데이터 방송 등을 경유하여 전송하는 것으로 해도 된다.
또, 본 발명은, 마이크로 프로세서와 메모리를 구비한 컴퓨터 시스템으로서, 상기 메모리는, 상기 컴퓨터 프로그램을 기억하고 있으며, 상기 마이크로 프로세서는, 상기 컴퓨터 프로그램에 따라 동작하는 것으로 해도 된다.
또, 상기 프로그램 또는 상기 디지털 신호를 상기 기록 매체에 기록하여 이송함으로써, 또는 상기 프로그램 또는 상기 디지털 신호를 상기 네트워크 등을 경유하여 이송함으로써, 독립된 다른 컴퓨터 시스템에 의해 실시하는 것으로 해도 된다.
(5) 상기 실시 형태 및 상기 변형예를 각각 조합하는 것으로 해도 된다.
[산업상의 이용 가능성]
본 발명의 한 양태에 있어서의 정보 표시 장치는, 표시 콘텐츠의 개시도 또는 선명도를 변경함으로써, 유저의 표시 콘텐츠에 대한 관심도를 높일 수 있으므로, 광고 등의 유저의 주의를 끌어당기고 싶은 콘텐츠를 표시하는 정보 표시 장치, 예를 들면 옥외 전자 광고(디지털·사이니지) 혹은 대화면 TV 등으로서 이용할 수 있다.
10, 20 : 정보 표시 장치
11, 22 : 유저 상태 검출부
12, 23 : 관심도 추정부
13, 26 : 표시 제어부
14, 27 : 표시부
21 : 유저 식별부
24 : 타깃 유저 선정부
25 : 콘텐츠 데이터베이스
26a : 어플리케이션 제어부
26b : 화면 묘화부
60 : 유저 검출 카메라
60a : 제1 유저 검출 카메라
60b : 제2 유저 검출 카메라

Claims (15)

  1. 제1 콘텐츠를 화면에 표시하는 표시부와,
    상기 화면의 앞쪽에 위치하는 유저의 물리적인 상태인 유저 상태를 검출하는 유저 상태 검출부와,
    상기 유저 상태 검출부에 의해 검출된 유저 상태에 의거하여, 상기 표시부에 의해 화면에 표시된 제1 콘텐츠에 대한 유저의 관심 정도를 나타내는 관심도를 추정하는 관심도 추정부와,
    상기 관심도 추정부에 의해 추정된 관심도의 변화율의 크기가 제1 임계치 미만인 경우, 적어도 일부의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로, 제2 콘텐츠를 상기 표시부에 표시시키는 표시 제어부를 구비하며,
    상기 제2 콘텐츠의 일부이며 유저에게 보이고자 하고 있는 정보인 본질 정보를 나타내는 부분의 위치를 표시하는 적용 영역을 적어도 기억하고 있는 콘텐츠 데이터베이스를 더 구비하고,
    상기 표시 제어부는, 상기 콘텐츠 데이터베이스에 기억된 상기 제2 콘텐츠의 적응 영역의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로, 상기 제2 콘텐츠를 상기 표시부에 표시시키는, 정보 표시 장치.
  2. 청구항 1에 있어서,
    상기 표시 제어부는, 또한, 상기 관심도 추정부에 의해 추정된 관심도의 변화율의 크기가 제2 임계치를 초과하였을 때에, 상기 화면에 표시된 제2 콘텐츠의 선명도 또는 개시도를 올리는, 정보 표시 장치.
  3. 청구항 1에 있어서,
    상기 표시 제어부는, 또한, 상기 관심도 추정부에 의해 추정된 관심도가 제3 임계치를 초과하였을 때에, 상기 화면에 표시된 제2 콘텐츠의 선명도 또는 개시도를 올리는, 정보 표시 장치.
  4. 청구항 1에 있어서,
    상기 표시 제어부는, 상기 관심도 추정부에 의해 추정된 관심도의 변화율의 크기가 상기 제1 임계치 미만이며, 또한, 상기 관심도 추정부에 의해 추정된 관심도의 변화율의 크기가 상기 제1 임계치 미만인 상태가 소정 시간 계속되고 있는 경우, 상기 제2 콘텐츠를 상기 표시부에 표시시키는, 정보 표시 장치.
  5. 청구항 1에 있어서,
    상기 유저 상태 검출부는, 상기 유저의 이동 방향을 상기 유저 상태로서 검출하고,
    상기 관심도 추정부는, 상기 유저 상태 검출부에 의해 검출된 유저의 이동 방향이, 당해 유저로부터 상기 화면을 대표하는 위치로 향하는 방향, 또는 당해 유저로부터 상기 제1 콘텐츠가 표시되어 있는 위치로 향하는 방향에 가까울수록 관심도가 높다고 추정하는, 정보 표시 장치.
  6. 청구항 1에 있어서,
    상기 유저 상태 검출부는, 상기 유저의 이동 속도를 상기 유저 상태로서 검출하고,
    상기 관심도 추정부는, 상기 유저 상태 검출부에 의해 검출된 유저의 이동 속도가 작을수록 관심도가 높다고 추정하는, 정보 표시 장치.
  7. 청구항 1에 있어서,
    상기 유저 상태 검출부는, 상기 유저의 위치를 상기 유저 상태로서 검출하고,
    상기 관심도 추정부는, 상기 유저 상태 검출부에 의해 검출된 유저의 위치와 상기 제1 콘텐츠가 표시되어 있는 위치의 거리가 작을수록 관심도가 높다고 추정하는, 정보 표시 장치.
  8. 청구항 1에 있어서,
    상기 유저 상태 검출부는, 유저의 시선 방향을 상기 유저 상태로서 검출하고,
    상기 관심도 추정부는, 상기 유저 상태 검출부에 의해 검출된 유저의 시선 방향이, 당해 유저로부터 상기 화면을 대표하는 위치로 향하는 방향, 또는 당해 유저로부터 상기 제1 콘텐츠가 표시되어 있는 위치로 향하는 방향에 가까울수록 관심도가 높다고 추정하는, 정보 표시 장치.
  9. 청구항 1에 있어서,
    상기 화면의 앞쪽에 위치하는 유저 중에서 타깃 유저를 선정하는 타깃 유저 선정부를 더 구비하고,
    상기 표시 제어부는, 상기 타깃 유저 선정부에 의해 선정된 타깃 유저의 관심도의 변화율의 크기가 상기 제1 임계치 미만인 경우, 상기 제2 콘텐츠를 상기 표시부에 표시시키는, 정보 표시 장치.
  10. 청구항 9에 있어서,
    상기 타깃 유저 선정부는, 상기 관심도 추정부에 의해 추정된 관심도가 제4 임계치 이상인 경우, 당해 관심도에 대응하는 유저를 타깃 유저로서 선정하는, 정보 표시 장치.
  11. 청구항 9에 있어서,
    상기 타깃 유저 선정부는, 상기 제1 콘텐츠가 표시되어 있는 위치와 유저의 위치의 거리가 제5 임계치 미만인 경우, 당해 유저를 타깃 유저로서 선정하는, 정보 표시 장치.
  12. 삭제
  13. 청구항 1에 있어서,
    상기 미리 정해진 선명도 또는 개시도는, 상기 제1 콘텐츠의 선명도 또는 개시도이며,
    상기 표시 제어부는, 상기 제1 콘텐츠를 상기 제2 콘텐츠로서 상기 표시부에 표시시키는, 정보 표시 장치.
  14. 제1 콘텐츠를 화면에 표시하는 제1 표시 단계와,
    상기 화면의 앞쪽에 위치하는 유저의 물리적인 상태인 유저 상태를 검출하는 유저 상태 검출 단계와,
    상기 유저 상태 검출 단계에서 검출된 유저 상태에 의거하여, 상기 표시 단계에서 화면에 표시된 제1 콘텐츠에 대한 유저의 관심 정도를 나타내는 관심도를 추정하는 관심도 추정 단계와,
    상기 관심도 추정 단계에서 추정된 관심도의 변화율의 크기가 제1 임계치 미만인 경우, 적어도 일부의 영역의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로, 제2 콘텐츠를 표시하는 제2 표시 단계를 포함하며,
    상기 제2 콘텐츠의 일부이며 유저에게 보이고자 하고 있는 정보인 본질 정보를 나타내는 부분의 위치를 표시하는 적용 영역이 콘텐츠 데이터베이스에 적어도 기억되어 있고,
    상기 제2 표시 단계에서는, 상기 콘텐츠 데이터베이스에 기억된 상기 제2 콘텐츠의 적응 영역의 선명도 또는 개시도가 미리 정해진 선명도 또는 개시도보다 낮은 상태로, 상기 제2 콘텐츠를 표시시키는, 정보 표시 방법.
  15. 청구항 14에 기재된 정보 표시 방법을 컴퓨터에 실행시키기 위한 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체.
KR1020107017932A 2008-12-16 2009-12-15 정보 표시 장치 및 정보 표시 방법 KR101596975B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2008319228 2008-12-16
JPJP-P-2008-319228 2008-12-16

Publications (2)

Publication Number Publication Date
KR20110098988A KR20110098988A (ko) 2011-09-05
KR101596975B1 true KR101596975B1 (ko) 2016-02-23

Family

ID=42268562

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020107017932A KR101596975B1 (ko) 2008-12-16 2009-12-15 정보 표시 장치 및 정보 표시 방법

Country Status (6)

Country Link
US (1) US8421782B2 (ko)
EP (1) EP2360663B1 (ko)
JP (1) JP5518713B2 (ko)
KR (1) KR101596975B1 (ko)
CN (1) CN101946274B (ko)
WO (1) WO2010070882A1 (ko)

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2515206B1 (en) 2009-12-14 2019-08-14 Panasonic Intellectual Property Corporation of America User interface apparatus and input method
KR101694820B1 (ko) * 2010-05-07 2017-01-23 삼성전자주식회사 사용자 위치 인식 방법 및 장치
JP2012083669A (ja) * 2010-10-14 2012-04-26 Nippon Telegr & Teleph Corp <Ntt> 情報提示装置、情報提示方法および情報提示プログラム
WO2012105196A1 (ja) * 2011-02-04 2012-08-09 パナソニック株式会社 関心度推定装置および関心度推定方法
JP2012165181A (ja) * 2011-02-07 2012-08-30 Sony Corp 映像再生装置と映像再生方法およびプログラム
EP2678816A4 (en) * 2011-02-23 2016-06-29 Ayuda Media Systems Inc METHODS, APPARATUSES AND SYSTEMS FOR CALCULATING AN AMOUNT TO BE INVOICED IN RELATION TO THE EXECUTION OF OUT-OF-HOME ADVERTISING DURING A PERIOD OF TIME
JP2012186621A (ja) 2011-03-04 2012-09-27 Sony Corp 情報処理装置、情報処理方法およびプログラム
US9251588B2 (en) * 2011-06-20 2016-02-02 Nokia Technologies Oy Methods, apparatuses and computer program products for performing accurate pose estimation of objects
JP5932253B2 (ja) * 2011-07-12 2016-06-08 キヤノン株式会社 表示制御装置、表示制御装置の制御方法、プログラム及び記憶媒体
JP5863423B2 (ja) * 2011-11-30 2016-02-16 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
US10402879B2 (en) 2011-12-30 2019-09-03 Adidas Ag Offering a customized collection of products
US9690368B2 (en) 2011-12-30 2017-06-27 Adidas Ag Customization based on physiological data
ITMI20120061A1 (it) * 2012-01-20 2013-07-21 Palo Leonardo De Sistema di acquisizione automatica del numero degli spettatori presenti davanti al televisore e inoltro ad un server per l elaborazione dei dati acquisiti.
JP5668031B2 (ja) * 2012-07-25 2015-02-12 東芝テック株式会社 表示制御装置及び表示制御プログラム
US9485459B2 (en) * 2012-12-14 2016-11-01 Biscotti Inc. Virtual window
US9654563B2 (en) 2012-12-14 2017-05-16 Biscotti Inc. Virtual remote functionality
WO2014115387A1 (ja) * 2013-01-28 2014-07-31 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
JP6116273B2 (ja) * 2013-02-13 2017-04-19 三菱電機株式会社 広告提示装置
JP2015064513A (ja) * 2013-09-26 2015-04-09 カシオ計算機株式会社 表示装置、コンテンツ表示方法及びプログラム
WO2015190093A1 (ja) 2014-06-10 2015-12-17 株式会社ソシオネクスト 半導体集積回路およびそれを備えた表示装置並びに制御方法
KR101649896B1 (ko) * 2014-08-18 2016-08-23 강민정 콘텐츠 제공장치
US10129312B2 (en) * 2014-09-11 2018-11-13 Microsoft Technology Licensing, Llc Dynamic video streaming based on viewer activity
JP6539966B2 (ja) * 2014-09-18 2019-07-10 カシオ計算機株式会社 情報出力装置、情報出力方法、およびプログラム
CN105824400A (zh) * 2015-01-06 2016-08-03 索尼公司 电子设备的控制方法、控制装置以及电子设备
US9521143B2 (en) * 2015-02-20 2016-12-13 Qualcomm Incorporated Content control at gateway based on audience
CN107889466B (zh) 2015-03-31 2021-01-22 飞利浦照明控股有限公司 用于提高人的警惕性的照明系统和方法
US20160307227A1 (en) * 2015-04-14 2016-10-20 Ebay Inc. Passing observer sensitive publication systems
JP6614547B2 (ja) * 2015-08-17 2019-12-04 パナソニックＩｐマネジメント株式会社 視聴状態検出装置、視聴状態検出システムおよび視聴状態検出方法
JP6109288B2 (ja) * 2015-12-21 2017-04-05 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
KR101744940B1 (ko) 2016-01-20 2017-06-08 서강대학교산학협력단 디지털 사이니지 시스템에서 상황인지형 컨텐츠 추천장치
WO2017223513A1 (en) * 2016-06-23 2017-12-28 Outernets, Inc. Interactive content management
US9984380B2 (en) 2016-06-24 2018-05-29 The Nielsen Company (Us), Llc. Metering apparatus and related methods
CA3125864A1 (en) * 2016-06-24 2017-12-28 The Nielsen Company (Us), Llc Invertible metering apparatus and related methods
US10405036B2 (en) 2016-06-24 2019-09-03 The Nielsen Company (Us), Llc Invertible metering apparatus and related methods
US10178433B2 (en) 2016-06-24 2019-01-08 The Nielsen Company (Us), Llc Invertible metering apparatus and related methods
EP3501014A1 (en) * 2016-08-17 2019-06-26 VID SCALE, Inc. Secondary content insertion in 360-degree video
JP6304348B2 (ja) * 2016-11-14 2018-04-04 カシオ計算機株式会社 コンテンツ出力装置及びプログラム
WO2019044572A1 (ja) * 2017-09-04 2019-03-07 ソニー株式会社 情報処理装置および方法、並びにプログラム
US10904615B2 (en) * 2017-09-07 2021-01-26 International Business Machines Corporation Accessing and analyzing data to select an optimal line-of-sight and determine how media content is distributed and displayed
US11188944B2 (en) 2017-12-04 2021-11-30 At&T Intellectual Property I, L.P. Apparatus and methods for adaptive signage
WO2019198310A1 (ja) * 2018-04-10 2019-10-17 ソニー株式会社 情報処理装置及び情報処理方法、並びにロボット装置
JP2020113075A (ja) * 2019-01-11 2020-07-27 沖電気工業株式会社 情報処理装置、情報処理方法、プログラム、及び情報処理システム
JP7159135B2 (ja) * 2019-09-18 2022-10-24 デジタル・アドバタイジング・コンソーシアム株式会社 プログラム、情報処理方法及び情報処理装置
KR20210062955A (ko) * 2019-11-22 2021-06-01 엘지전자 주식회사 사용자인식에 기반한 디바이스의 제어
JP7316664B2 (ja) 2020-02-03 2023-07-28 マルコムホールディングス株式会社 対話ユーザの感情情報の提供装置
KR102284806B1 (ko) * 2021-04-29 2021-08-03 (주)비상정보통신 복수의 동적객체인식 처리가 가능한 다중해상도 영상처리장치 및 방법
CN114416272B (zh) * 2022-02-07 2024-04-05 神策网络科技（北京）有限公司 图形组件显示方法、装置、存储介质及电子设备

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006113534A (ja) * 2004-09-16 2006-04-27 Ricoh Co Ltd 画像表示装置、画像表示制御方法、プログラム及び情報記録媒体

Family Cites Families (56)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5943049A (en) * 1995-04-27 1999-08-24 Casio Computer Co., Ltd. Image processor for displayed message, balloon, and character's face
JP3671258B2 (ja) 1995-04-27 2005-07-13 カシオ計算機株式会社 画像処理装置
JP2783212B2 (ja) 1995-09-08 1998-08-06 日本電気株式会社 情報提示装置
JPH1013605A (ja) 1996-06-19 1998-01-16 Star Micronics Co Ltd 電子式情報表示装置
US5731805A (en) 1996-06-25 1998-03-24 Sun Microsystems, Inc. Method and apparatus for eyetrack-driven text enlargement
JP2894307B2 (ja) 1996-12-19 1999-05-24 日本電気株式会社 情報表示装置
JPH10187747A (ja) 1996-12-26 1998-07-21 Digital Vision Lab:Kk 情報提示方法及び装置、情報表示装置及び音声出力装置
JPH11276461A (ja) 1998-03-27 1999-10-12 Suzuki Motor Corp 注意力測定装置及びこれを用いた情報提示装置
JPH11296542A (ja) 1998-04-14 1999-10-29 Nec Corp 情報表示装置及びその表示方法並びにその制御プログラムを記録した記録媒体
JPH10320093A (ja) 1998-05-22 1998-12-04 Nec Corp メッセージ出力制御方法
JP2001043384A (ja) * 1999-07-29 2001-02-16 Nippon Telegr & Teleph Corp <Ntt> マルチメディア情報空間の入力方法及び入力装置及び入出力連携方法及び入出力連携装置及び入力プログラム及び入出力連携プログラムを記録した記録媒体
DE19951001C2 (de) * 1999-10-22 2003-06-18 Bosch Gmbh Robert Vorrichtung zur Darstellung von Informationen in einem Fahrzeug
JP2001216527A (ja) 2000-02-04 2001-08-10 Nippon Telegr & Teleph Corp <Ntt> マルチメディア情報空間入出力装置およびその方法、ならびにそのプログラムを記録した記録媒体
JP2001306941A (ja) 2000-02-15 2001-11-02 Web Port:Kk コンピュータネットワークを用いた広告方法、広告システムおよび記録媒体
GB0012132D0 (en) * 2000-05-20 2000-07-12 Hewlett Packard Co Targeted information display
WO2001098971A1 (fr) 2000-06-16 2001-12-27 Kabushiki Kaisha Toshiba Procede de distribution de publicite et dispositif de distribution de publicite
JP3707361B2 (ja) 2000-06-28 2005-10-19 日本ビクター株式会社 情報提供サーバ及び情報提供方法
JP2002023685A (ja) 2000-07-10 2002-01-23 Matsushita Electric Ind Co Ltd 電光表示装置
JP2002041537A (ja) 2000-07-31 2002-02-08 Nec Corp 広告提示システム
JP2002063264A (ja) 2000-08-17 2002-02-28 Fujitsu Ltd 広告情報提供システム及び方法、並びに、広告情報提供プログラムを記録したコンピュータ読取可能な記録媒体
JP3770374B2 (ja) 2000-10-16 2006-04-26 シャープ株式会社 画像表示装置
JP2001273064A (ja) 2001-01-24 2001-10-05 Casio Comput Co Ltd 画像表示制御装置及び画像表示制御方法
US7068813B2 (en) * 2001-03-28 2006-06-27 Koninklijke Philips Electronics N.V. Method and apparatus for eye gazing smart display
JP2003058086A (ja) 2001-08-10 2003-02-28 Event Kogaku Kenkyusho:Kk ネットワーク上での商品・サービス・広告情報の提供方法、この方法を用いた情報提供システム及びそのコンピュータプログラム
US7284201B2 (en) * 2001-09-20 2007-10-16 Koninklijke Philips Electronics N.V. User attention-based adaptation of quality level to improve the management of real-time multi-media content delivery and distribution
JP2003216635A (ja) 2002-01-17 2003-07-31 Nippon Telegraph & Telephone East Corp エージェント情報提示装置
JP2003263145A (ja) 2002-03-07 2003-09-19 Pioneer Electronic Corp 情報表示装置
JP2003271283A (ja) 2002-03-19 2003-09-26 Fuji Xerox Co Ltd 情報表示装置
JP3968778B2 (ja) 2002-10-17 2007-08-29 横河電機株式会社 アラーム表示装置
JP2004185139A (ja) 2002-11-29 2004-07-02 Fuji Photo Film Co Ltd 表示システム及び表示装置の制御方法
JP2004246709A (ja) 2003-02-14 2004-09-02 Fuji Xerox Co Ltd 情報可視化装置、方法およびプログラム
JP2004310554A (ja) 2003-04-08 2004-11-04 Tokyo Electric Power Co Inc:The 画像データインターフェースシステム、インターフェース方法、インターフェースプログラム
US7872635B2 (en) * 2003-05-15 2011-01-18 Optimetrics, Inc. Foveated display eye-tracking system and method
JP4328136B2 (ja) 2003-06-19 2009-09-09 国立大学法人 奈良先端科学技術大学院大学 関心度推定装置
JP4140898B2 (ja) 2003-08-20 2008-08-27 日本電信電話株式会社 情報提示装置および情報提示装置の使用方法
JP2005115476A (ja) 2003-10-03 2005-04-28 Canon Inc 情報出力装置、リンク報知方法、プログラム、及び記憶媒体
JP4110323B2 (ja) 2003-11-27 2008-07-02 日本電信電話株式会社 情報出力方法及び装置及びプログラム及び情報出力プログラムを格納したコンピュータ読み取り可能な記憶媒体
JP2007526501A (ja) 2004-01-20 2007-09-13 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 動的メッセージ位置変更のあるメッセージボード
JP4481682B2 (ja) 2004-02-25 2010-06-16 キヤノン株式会社 情報処理装置及びその制御方法
JP2005250322A (ja) 2004-03-08 2005-09-15 Matsushita Electric Ind Co Ltd 表示装置
JP4838499B2 (ja) 2004-05-21 2011-12-14 オリンパス株式会社 ユーザ支援装置
JP2006236013A (ja) 2005-02-25 2006-09-07 Nippon Telegr & Teleph Corp <Ntt> 環境的情報提示装置、環境的情報提示方法およびこの方法のプログラム
JP2006330912A (ja) 2005-05-24 2006-12-07 Toshiba Corp 情報処理装置およびプログラム
JP2007133305A (ja) 2005-11-14 2007-05-31 Nippon Telegr & Teleph Corp <Ntt> 情報表示制御装置および情報表示制御方法
JP2007133304A (ja) 2005-11-14 2007-05-31 Nippon Telegr & Teleph Corp <Ntt> 情報表示制御装置および情報表示制御方法
US20070150916A1 (en) * 2005-12-28 2007-06-28 James Begole Using sensors to provide feedback on the access of digital content
JP4779673B2 (ja) 2006-01-30 2011-09-28 トヨタ自動車株式会社 情報提供装置
JP2007272369A (ja) * 2006-03-30 2007-10-18 Advanced Telecommunication Research Institute International コンテンツ提示装置
AU2007247852B2 (en) * 2006-05-04 2012-01-19 Commonwealth Scientific And Industrial Research Organisation An electronic media system
US20070271580A1 (en) * 2006-05-16 2007-11-22 Bellsouth Intellectual Property Corporation Methods, Apparatus and Computer Program Products for Audience-Adaptive Control of Content Presentation Based on Sensed Audience Demographics
US20080147488A1 (en) * 2006-10-20 2008-06-19 Tunick James A System and method for monitoring viewer attention with respect to a display and determining associated charges
JP2008141484A (ja) 2006-12-01 2008-06-19 Sanyo Electric Co Ltd 画像再生システム及び映像信号供給装置
US7556377B2 (en) * 2007-09-28 2009-07-07 International Business Machines Corporation System and method of detecting eye fixations using adaptive thresholds
JP5412743B2 (ja) * 2008-03-31 2014-02-12 大日本印刷株式会社 電子ｐｏｐシステム、サーバ、プログラム
JP5481954B2 (ja) * 2008-06-16 2014-04-23 大日本印刷株式会社 処理装置、処理方法、プログラム及びセンサシステム
US20100107184A1 (en) * 2008-10-23 2010-04-29 Peter Rae Shintani TV with eye detection

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006113534A (ja) * 2004-09-16 2006-04-27 Ricoh Co Ltd 画像表示装置、画像表示制御方法、プログラム及び情報記録媒体

Also Published As

Publication number Publication date
JP5518713B2 (ja) 2014-06-11
CN101946274B (zh) 2013-08-28
EP2360663A4 (en) 2012-09-05
US8421782B2 (en) 2013-04-16
EP2360663A1 (en) 2011-08-24
WO2010070882A1 (ja) 2010-06-24
US20110050656A1 (en) 2011-03-03
CN101946274A (zh) 2011-01-12
KR20110098988A (ko) 2011-09-05
EP2360663B1 (en) 2016-04-20
JPWO2010070882A1 (ja) 2012-05-24

Similar Documents

Publication Publication Date Title
KR101596975B1 (ko) 정보 표시 장치 및 정보 표시 방법
US11989842B2 (en) Head-mounted display with pass-through imaging
JP5286371B2 (ja) 情報表示装置及び情報表示方法
ES2718493T3 (es) Procedimiento de captura y visualización de aspectos
JP4934861B2 (ja) 表示システム、表示方法、表示効果測定システム、及び、表示効果測定方法。
JP5396062B2 (ja) 電子広告システム
US20130100140A1 (en) Human body and facial animation systems with 3d camera and method thereof
US20120262558A1 (en) Apparatus, systems and methods for providing motion tracking using a personal viewing device
US20140267771A1 (en) Gaze tracking and recognition with image location
CN101180653A (zh) 用于三维呈现的方法和设备
JP2007052304A (ja) 映像表示システム
EP2391983A1 (en) Systems and methods for simulating three-dimensional virtual interactions from two-dimensional camera images
JP2011033993A (ja) 情報提示装置、および情報提示方法
JP5016959B2 (ja) 見え方度判定装置
US20190281280A1 (en) Parallax Display using Head-Tracking and Light-Field Display
JP5426441B2 (ja) 広告画像表示装置、広告画像表示方法
US11205405B2 (en) Content arrangements on mirrored displays
US20220319014A1 (en) Systems and methods for dynamic image processing and segmentation
KR20220044489A (ko) 화상 처리 장치 및 화상 처리 방법, 그리고 프로그램
US10783853B2 (en) Image provision device, method and program that adjusts eye settings based on user orientation
CN113805824B (zh) 电子装置以及在显示设备上显示图像的方法
EP4222944A1 (en) Image capture eyewear with automatic image sending to recipients determined based on context
CN107491172A (zh) 体感数据获取方法、装置及电子设备

Legal Events

Date Code Title Description
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant