CN101609660A - 数字相框、信息处理系统和控制方法 - Google Patents

数字相框、信息处理系统和控制方法 Download PDF

Info

Publication number
CN101609660A
CN101609660A CNA2009101468696A CN200910146869A CN101609660A CN 101609660 A CN101609660 A CN 101609660A CN A2009101468696 A CNA2009101468696 A CN A2009101468696A CN 200910146869 A CN200910146869 A CN 200910146869A CN 101609660 A CN101609660 A CN 101609660A
Authority
CN
China
Prior art keywords
user
image
display part
described display
attentively
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2009101468696A
Other languages
English (en)
Inventor
杉原良平
龙田成示
井场阳一
龟山末帆
藤垣勇人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of CN101609660A publication Critical patent/CN101609660A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14Display of multiple viewports
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1601Constructional details related to the housing of computer displays, e.g. of CRT monitors, of flat displays
    • G06F1/1605Multimedia displays, e.g. with integrated or attached speakers, cameras, microphones
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00352Input means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00352Input means
    • H04N1/00381Input by recognition or interpretation of visible user gestures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00501Tailoring a user interface [UI] to specific requirements
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0089Image display device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/333Mode signalling or mode changing; Handshaking therefor
    • H04N2201/33307Mode signalling or mode changing; Handshaking therefor of a particular mode
    • H04N2201/33314Mode signalling or mode changing; Handshaking therefor of a particular mode of reading or reproducing mode

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Studio Devices (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供能够实现反映出用户状态的显示控制的数字相框、信息处理系统和控制方法等。数字相框包含:显示部;显示控制部;检测信息取得部,其取得由用户检测传感器检测出的检测信息;以及用户状态判断部,其根据所取得的检测信息,判断用户和显示部的位置关系、用户对显示部的视觉辨认状态、以及用户是否存在于检测范围内的至少一个。显示控制部根据用户和显示部的位置关系、用户的视觉辨认状态、以及用户是否存在于检测范围内的至少一个,进行改变在显示部上显示的图像的显示方式的显示控制。

Description

数字相框、信息处理系统和控制方法
技术领域
本发明涉及数字相框、信息处理系统和控制方法等。
背景技术
近年来,作为能够轻易地再现由数字静态照相机等数字照相机拍摄的图像的装置,出现了数字相框。该数字相框是将相架的装嵌照片的部分置换为液晶显示器的形式的装置,进行经由存储卡或通信装置读入的数字图像数据(电子照片)的再现处理。
作为数字相框的现有技术,例如有专利文献1所公开的技术。在该现有技术中,使作为数字相框的数字相架具备电话线路连接装置,从而实现相架和有线或无线的电话线路之间的传送路径的形成。
但是,在此前的数字相框中,仅具有简单地再现由数字照相机等拍摄的图像的功能,无法进行反映出用户状态等的显示控制。因此,再现图像是单调的,无法向用户显示多样的图像。
【专利文献1】日本特开2000-324473号公报
发明内容
根据本发明的几个方式,能够提供能够实现反映出用户状态的显示控制的数字相框、信息处理系统和控制方法等。
本发明的一个方式涉及一种数字相框,该数字相框包含:显示部,其显示图像;显示控制部,其进行所述显示部的显示控制;检测信息取得部,其取得由用户检测传感器检测出的检测信息;以及用户状态判断部,其根据所取得的所述检测信息,判断用户和所述显示部的位置关系、用户对所述显示部的视觉辨认状态、以及用户是否存在于检测范围内的至少一个,所述显示控制部根据用户和所述显示部的所述位置关系、用户的所述视觉辨认状态、以及用户是否存在于所述检测范围内的至少一个,进行改变在所述显示部上显示的图像的显示方式的显示控制。
根据本发明的一个方式,取得由用户检测传感器检测出的检测信息,根据检测信息来判断用户状态。然后,根据与用户的位置关系、用户的视觉辨认状态、或用户是否存在于检测范围内等,改变在显示部上显示的图像的显示方式。这样,在数字相框的显示部上显示反映出用户的位置关系等用户状态的图像,能够提供此前没有的类型的数字相框。
并且,在本发明的一个方式中,所述用户状态判断部也可以判断用户和所述显示部之间的距离,来作为用户和所述显示部的所述位置关系,所述显示控制部根据用户和所述显示部之间的距离,进行改变在所述显示部上显示的图像的显示方式的显示控制。
这样,根据与用户的距离的大小,来改变显示图像的显示方式,能够进行反映出距离的多样的图像表现。
并且,在本发明的一个方式中,所述显示控制部也可以进行用户和所述显示部之间的距离越近,在所述显示部上显示的图像的详细度越高的显示控制。
这样,在与用户的距离近的情况下,能够向用户提示包含更多信息的图像或精细的图像。
并且,在本发明的一个方式中,所述显示控制部也可以进行用户和所述显示部之间的距离越近,在所述显示部上显示的图像的画面分割数越多的显示控制。
这样,在与用户的距离近的情况下,增多图像的画面分割数,从而能够向用户提示包含更多信息的图像或多样的图像。
并且,在本发明的一个方式中,所述显示控制部也可以进行用户和所述显示部之间的距离越近,在所述显示部上显示的文字的尺寸越小的显示控制。
这样,在与用户的距离近的情况下,减小文字的尺寸,从而能够提示显示了更多文字的图像等。
并且,在本发明的一个方式中,所述数字相框也可以包含显示模式切换部,该显示模式切换部根据用户和所述显示部之间的距离,切换所述显示部的显示模式。
这样,通过切换显示模式这种简单的处理,能够根据与用户的距离来改变显示图像的显示方式。
并且,在本发明的一个方式中,也可以在用户和所述显示部之间的距离靠近的情况下,所述显示模式切换部将所述显示模式从简略显示模式切换为详细显示模式。
这样,在与用户的距离靠近的情况下,通过从简略显示模式切换为详细显示模式这种简单的控制,能够实现从简略图像到详细图像的显示切换。
并且,在本发明的一个方式中,所述显示模式切换部也可以在所述显示模式从所述简略显示模式切换为所述详细显示模式后,等待解除所述详细显示模式达规定时间的期间。
这样,能够有效防止在显示模式切换为详细显示模式后立即解除详细显示模式、频繁切换显示模式的情况等。
并且,在本发明的一个方式中,所述用户检测传感器也可以是对用户进行摄像的摄像传感器,所述用户状态判断部根据来自所述摄像传感器的摄像信息,检测用户的面部区域,根据所检测出的所述面部区域的尺寸,判断用户和所述显示部之间的距离。
这样,仅检测面部区域的尺寸就能够判断与用户的距离,并且,能够确保用户的视线朝向显示部的方向。
并且,在本发明的一个方式中,所述用户检测传感器也可以是对用户进行摄像的摄像传感器,所述用户状态判断部通过针对用户的自动对焦处理,判断用户和所述显示部之间的距离。
这样,利用已有的自动对焦,能够判断与用户的距离或用户的存在等。
并且,在本发明的一个方式中,所述用户检测传感器也可以是超声波传感器,所述用户状态判断部通过所述超声波传感器,来判断用户和所述显示部之间的距离。
并且,在本发明的一个方式中,所述用户状态判断部也可以判断是否是用户正在注视所述显示部的状态,来作为用户的所述视觉辨认状态,所述显示控制部根据用户是否正在注视所述显示部,进行改变在所述显示部上显示的图像的显示方式的显示控制。
这样,根据用户是否正在注视,来改变显示图像的显示方式,能够进行反映出用户的注视状态的多样的图像表现。
并且,在本发明的一个方式中,所述显示控制部也可以根据用户注视所述显示部的注视次数信息,进行改变在所述显示部上显示的图像的显示方式的显示控制。
这样,不仅反映出是否正在注视,还反映出注视次数信息,来改变显示图像的显示方式,因此,能够实现更加智能的显示控制。
并且,在本发明的一个方式中,也可以是在规定时间内用户对第1图像的注视次数大于等于规定次数的情况下,所述显示控制部进行切换到与所述第1图像对应的注视用图像的切换控制。
这样,在规定时间内第1图像的注视次数大于等于规定次数的情况下,能够在显示部上显示注视用图像。
并且,在本发明的一个方式中,所述显示控制部也可以根据规定时间内用户对第1图像的注视次数信息,改变所述第1图像或所述第1图像的关联图像的显示频度。
这样,例如在注视次数多的情况下,能够进行提高第1图像或其关联图像的显示频度的控制。
并且,在本发明的一个方式中,也可以在判断为用户正在注视第1图像的情况下,所述显示控制部进行切换到与所述第1图像对应的注视用图像的切换控制。
这样,在用户注视第1图像的情况下,能够在显示部上显示注视用图像。
并且,在本发明的一个方式中,也可以在判断为用户没有注视所述显示部的情况下,所述显示控制部进行在所述显示部上滑动显示第1~第N(N为大于等于2的整数)图像的控制,当在显示所述第1~第N图像中的第K(1≤K≤N)图像时判断为用户正在注视所述显示部的情况下,所述显示控制部进行在所述显示部上显示所述第K图像的关联图像或详细图像即注视用图像的控制。
这样,在用户注视第1~第N图像中的第K图像的情况下,能够显示其关联图像或详细图像来作为注视用图像,能够显示用户感兴趣等的图像的关联图像或详细图像。
并且,在本发明的一个方式中,所述用户状态判断部也可以判断用户和所述显示部之间的距离,来作为用户和所述显示部的所述位置关系,当在显示所述注视用图像时判断为用户靠近所述显示部的情况下,所述显示控制部进行显示所述注视用图像的详细图像的控制。
这样,如果在显示注视用图像时用户靠近,则能够显示其详细图像,能够向用户提示包含更多信息的图像或精细的图像。
并且,在本发明的一个方式中,也可以在判断为用户没有靠近所述显示部的情况下,所述显示控制部进行在所述显示部上滑动显示第1~第M(M为大于等于2的整数)注视用图像作为所述注视用图像的控制,当在显示所述第1~第M注视用图像中的第L(1≤L≤M)注视用图像时判断为用户靠近所述显示部的情况下,所述显示控制部进行在所述显示部上显示所述第L注视用图像的详细图像的控制。
这样,在用户没有靠近显示部的情况下,滑动显示第1~第M注视用图像,当用户靠近显示部时,显示此时正在显示的第L注视用图像的详细图像。
并且,在本发明的一个方式中,所述用户检测传感器也可以是对用户进行摄像的摄像传感器,所述用户状态判断部根据来自所述摄像传感器的摄像信息,检测用户的面部区域,设定在内部包含所检测出的所述面部区域、尺寸大于所述面部区域的计测区域,计测所述面部区域存在于所述计测区域内的时间,根据所计测的时间,判断用户是否正在注视所述显示部。
这样,能够有效活用面部检测来检测用户的注视状态。
并且,在本发明的一个方式中,所述数字相框也可以包含显示模式切换部,该显示模式切换部根据用户是否正在注视所述显示部,来切换所述显示部的显示模式。
这样,通过切换显示模式这种简单的处理,能够实现与用户的注视状态对应的显示方式的改变。
并且,在本发明的一个方式中,所述显示模式切换部也可以在所述显示模式切换为注视模式后,等待解除所述注视模式达规定时间的期间。
这样,能够有效防止在显示模式切换为注视模式后立即解除注视模式、频繁切换显示模式的情况等。
并且,在本发明的一个方式中,所述用户状态判断部也可以判断用户是否存在于所述检测范围内,在判断为用户存在于所述检测范围内的情况下,所述显示控制部进行接通所述显示部的显示的显示控制。
这样,在用户存在于检测范围内的情况下,才开始接通显示部,所以能够实现省电等。
并且,在本发明的一个方式中,所述用户状态判断部也可以在所述显示部的显示接通后,判断是否是所述显示部进入用户的视野范围内的状态,来作为用户的所述视觉辨认状态,在判断为所述显示部进入用户的视野范围内的情况下,所述显示控制部进行在所述显示部上滑动显示第1~第N图像的控制。
这样,在显示部接通后,在显示部进入用户的视野范围内的情况下,能够滑动显示第1~第N图像,例如能够进行用户登记的图像等的滑动显示。
并且,本发明的另一方式涉及一种信息处理系统,该信息处理系统包含:显示指示部,其进行在数字相框的显示部上显示的图像的显示指示;检测信息取得部,其取得由用户检测传感器检测出的检测信息;以及用户状态判断部,其根据所取得的所述检测信息,判断用户和所述显示部的位置关系、用户对所述显示部的视觉辨认状态、以及用户是否存在于检测范围内的至少一个,所述显示指示部根据用户和所述显示部的所述位置关系、用户的所述视觉辨认状态、以及用户是否存在于所述检测范围内的至少一个,进行改变在所述显示部上显示的图像的显示方式的显示指示。
并且,本发明的又一方式涉及一种数字相框的控制方法,取得由用户检测传感器检测出的检测信息,根据所取得的所述检测信息,判断用户和数字相框的显示部的位置关系、用户对所述显示部的视觉辨认状态、以及用户是否存在于检测范围内的至少一个,根据用户和所述显示部的所述位置关系、用户的所述视觉辨认状态、以及用户是否存在于所述检测范围内的至少一个,进行改变在所述显示部上显示的图像的显示方式的显示控制。
附图说明
图1(A)、图1(B)是示出数字相框的例子的图。
图2是本实施方式的数字相框的结构例。
图3(A)、图3(B)是根据距离来改变显示图像的详细度的手法的说明图。
图4(A)、图4(B)是根据距离来改变显示图像的画面分割数的手法的说明图。
图5(A)、图5(B)是用户和显示部的距离的检测手法的说明图。
图6(A)、图6(B)是根据用户是否正在注视显示部来改变显示图像的显示方式的手法的说明图。
图7(A)、图7(B)是根据用户是否正在注视显示部来改变显示图像的显示方式的手法的说明图。
图8(A)、图8(B)是根据用户是否正在注视显示部来改变显示图像的显示方式的手法的说明图。
图9(A)~图9(C)是用户的注视状态的检测手法的说明图。
图10是本实施方式的显示方式的切换手法的具体例。
图11是用于实现本实施方式的显示方式的切换手法的数据结构例。
图12是用于说明本实施方式的详细处理例的流程图。
图13是用于说明注视状态的检测处理的流程图。
图14是本实施方式的第1变形例。
图15是家用传感器的设置例。
图16是本实施方式的第2变形例。
标号说明
200:服务器;202:处理部;204:检测信息取得部;205:传送部;206:用户状态判断部;216:显示模式切换部;218:显示指示部;220:存储部;222:内容信息存储部;224:检测信息存储部;226:用户状态存储部;228:切换标志存储部;238:通信部;250:用户检测传感器(家用传感器);260:操作部;300:数字相框;302:处理部;304:检测信息取得部;306:用户状态判断部;307:位置关系判断部;308:视觉辨认状态判断部;309:用户存在判断部;316:显示模式切换部;318:显示控制部;320:存储部;322:内容信息存储部;324:检测信息存储部;326:用户状态存储部;328:切换标志存储部;330:信息存储介质;338:通信部;340:显示部;350:用户检测传感器;360:操作部。
具体实施方式
下面说明本实施方式。另外,下面说明的本实施方式不是不当地限定权利要求所记载的本发明的内容。并且,并不是本实施方式中说明的全部结构都是本发明的必需结构要件。
1.结构
图1(A)示出本实施方式的数字相框300(数字相片播放器、图像再现装置)的例子。图1(A)是所谓的相架类型的数字相框的例子。该数字相框300由用户设置在家中等任意场所。而且,执行数字图像数据或音频数据等内容信息的再现处理(图像再现、音频再现)。例如,即使没有用户的明确的再现指示,数字相框300也能够自动再现图像等内容信息(媒体信息)。例如,自动执行照片的幻灯放映或进行影像的自动再现。
另外,虽然图1(A)是相架类型的数字相框的例子,但是,例如图1(B)所示,也可以是壁挂类型。作为该壁挂类型的数字相框,例如可以使用由电泳型显示器等实现的电子纸等。并且,也可以在数字相框300中设置内容信息的再现指示按钮等,或使用遥控器进行再现指示。
数字相框300可以具有例如SD卡等存储卡的接口。或者,可以具有无线LAN、蓝牙等无线通信的接口、或USB等的有线通信接口。例如,当用户在存储卡中保存内容信息并将其装到数字相框300的存储卡接口上时,数字相框300执行保存在存储卡中的内容信息的自动再现(幻灯放映等)。或者,当数字相框300通过无线通信或有线通信从外部接收到内容信息时,执行该内容信息的再现处理(自动再现处理)。例如,在用户所具有的数字照相机或便携电话机等便携型电子设备具有蓝牙等无线功能的情况下,利用该无线功能从便携型电子设备向数字相框300传送内容信息。于是,数字相框300执行所传送的内容信息的再现处理。
图2示出数字相框300的结构例。该数字相框300包含处理部302、存储部320、通信部338、显示部340、用户检测传感器350、操作部360。另外,能够进行省略其中一部分结构要素(例如通信部、操作部、用户检测传感器)、或追加其他结构要素(例如扬声器)等各种变形并实施。
处理部302进行各种控制处理和运算处理。例如进行数字相框300的各部的控制或进行整体的控制。能够通过各种处理器(CPU等)、ASIC(门阵列等)等硬件或存储在信息存储介质330中的程序等,实现该处理部302的功能。
存储部320是处理部302、通信部338等的工作区域,能够通过RAM等存储器或HDD(硬盘驱动器)等实现其功能。该存储部320包含:存储图像或音频等内容信息的内容信息存储部322、存储所取得的检测信息的检测信息存储部324、存储所确定的用户状态的用户状态存储部326、存储显示模式的切换标志的切换标志存储部328、以及存储用户的注视次数信息的注视次数信息存储部329。
信息存储介质330(能够由计算机读取的介质)存储程序和数据等,能够通过存储卡或光盘等实现其功能。处理部302根据存储在信息存储介质330中的程序(数据)来进行本实施方式的各种处理。即,在信息存储介质330中存储用于使计算机(具有操作部、处理部、存储部、输出部的装置)作为本实施方式的各部发挥功能的程序(用于使计算机执行各部的处理的程序)。
通信部338(通信接口)通过无线或有线通信等与外部器件(例如服务器、便携型电子设备)之间进行信息交换,能够通过通信用ASIC或通信用处理器等硬件、通信用固件实现其功能。
显示部340用于显示作为内容信息的图像,例如能够通过液晶显示器、使用有机EL等发光元件的显示器、电泳型显示器等来实现。
用户检测传感器350(人体检测传感器)是用于检测用户(用户状态等)的传感器,根据检测结果输出检测信息。在本实施方式中,将该用户检测传感器350用作用于判断用户(人物)和显示部340(显示画面、数字相框)的位置关系、用户对显示部340的视觉辨认状态、以及用户是否存在于检测范围内等的传感器。
作为用户检测传感器350,例如能够使用热电传感器(焦電センサ)等人感传感器。热电传感器是如下的传感器:接收入等产生的红外线,将红外线转换为热,利用元件的热电效应将该热转换为电荷。通过使用该热电传感器,能够检测用户(人)是否存在于检测范围(检测区域)内、以及存在于检测范围内的用户的动作等。
并且,作为用户检测传感器350,例如能够使用CCD、CMOS传感器等摄像传感器。摄像传感器(图像传感器)是将一维或二维的光学信息转换为时间序列的电信号的光传感器。通过使用该摄像传感器,能够检测用户是否存在于检测范围内、以及存在于检测范围内的用户的动作等。并且,通过使用摄像传感器的面部检测(面部图像识别),能够检测用户和显示部340的距离、用户相对于显示部340的视线角度等位置关系。或者,能够检测是否是显示部340进入用户的视野范围内的状态、是否是用户正在注视显示部340的状态等用户的视觉辨认状态。或者,还能够检测用户是否正在靠近等。
并且,作为用户检测传感器350,例如能够使用超声波传感器等距离传感器。超声波距离传感器是如下的传感器:射出超声波脉冲,接收由人等反射的超声波脉冲,由此,根据其时间来测定距离。
另外,用户检测传感器350等传感器既可以是传感器器件本身,也可以是除了传感器器件以外还包含控制部和通信部等的传感器设备。并且,检测信息既可以是从传感器直接得到的一次信息,也可以是对一次信息进行加工处理(信息处理)而得到的二次信息。
并且,用户检测传感器350既可以直接安装在数字相框300上,也可以利用家用传感器等作为用户检测传感器350。在将用户检测传感器350安装在数字相框300上的情况下,如图1(A)所示,能够将用户检测传感器350安装在数字相框300的例如框部分上。或者,也可以是使用有线电缆等连接用户检测传感器350和数字相框300的方式。
操作部360用于供用户输入各种信息,例如能够通过操作按钮或遥控装置等来实现。用户能够使用该操作部360进行用户登记,或进行自身期望的再现内容(满意的图像)的登记等。
处理部302包含:检测信息取得部304、用户状态判断部306、显示模式切换部316、显示控制部318。另外,能够进行以下的各种变形并实施:省略这些中的一部分结构要素(例如用户状态判断部、显示模式切换部)、或追加其他结构要素等。
检测信息取得部304进行取得由用户检测传感器350检测出的检测信息的处理。例如,当通过用户检测传感器350检测出用户的状态等并输出检测信息(摄像信息)时,检测信息取得部304取入该检测信息。然后,所取入的检测信息被存储在存储部320的检测信息存储部324中。另外,在使用家用传感器等外部传感器作为用户检测传感器350的情况下,通信部338接收该检测信息,检测信息取得部304取得所接收的检测信息。
用户状态判断部306根据由检测信息取得部304取得的检测信息来判断用户状态等。例如,根据所取得的检测信息,判断用户(人物)和显示部340的位置关系、用户对显示部340的视觉辨认状态、以及用户是否存在于检测范围内的至少一个。然后,表示用户的位置关系、视觉辨认状态、以及是否存在的用户状态信息被存储在用户状态存储部326中。
这里,位置关系是用户和显示部340的距离、用户相对于显示部340的视线方向等,位置关系判断部307判断用户和显示部340的位置关系。例如,判断用户和显示部340之间的距离(距离信息、距离参数),作为用户和显示部340的位置关系。
并且,视觉辨认状态是用户的视野范围的状态和注视状态等,具体而言,是显示部340是否进入用户的视野范围(视见体积(view volume))、用户是否正在注视显示部340等。视觉辨认状态判断部308判断该用户的视觉辨认状态。例如,判断是否是用户正在注视显示部340的状态,来作为用户的视觉辨认状态。并且,用户存在判断部309判断用户是否存在于检测范围内。
另外,作为用户检测传感器350,假设设置有对用户进行摄像的摄像传感器。该情况下,用户状态判断部306(位置关系判断部)根据来自摄像传感器的摄像信息,检测用户的面部区域(矩形的框区域)。然后,根据所检测出的面部区域的尺寸,判断(估计)用户和显示部340之间的距离。并且,用户状态判断部306设定在内部包含所检测出的面部区域、尺寸大于面部区域的计测区域。即,设定与面部区域重叠的计测区域。然后,计测面部区域存在于计测区域内的时间,根据所计测的时间,判断用户是否正在注视显示部340。例如,在存在于计测区域内的时间大于等于规定时间的情况下,判断为用户正在注视。
或者,如后所述,用户状态判断部306也可以通过针对用户的自动对焦处理(自动对焦功能),来判断用户和显示部340之间的距离。例如在采用有源方式的情况下,在数字相框300等上设置射出红外线或超声波的器件,并且,设置红外线或超声波的受光传感器作为用户检测传感器350。然后,通过受光传感器检测来自用户的反射光,由此检测与用户的距离等。并且,在采用无源方式的情况下,可以设置摄像传感器作为用户检测传感器350,对摄像图像进行基于相位差检测方式或对比度检测方式的图像处理,由此检测与用户的距离等。
显示模式切换部316进行显示模式的切换处理。例如,根据用户和显示部340的位置关系、用户的视觉辨认状态等用户状态,来切换显示模式。具体而言,显示模式切换部316根据用户和显示部340之间的距离,来切换显示部340的显示模式。例如,在用户和显示部340之间的距离靠近的情况下(判断为靠近的情况下),将显示模式从简略显示模式切换为详细显示模式。并且,根据用户是否正在注视显示部340,来切换显示部340的显示模式。
并且,显示模式切换部316在切换了显示模式后,进行等待解除切换后的显示模式达规定时间的期间的处理。例如,在显示模式从简略显示模式切换为详细显示模式后,等待解除详细显示模式达规定时间的期间,然后切换为其他显示模式。或者,在显示模式从通常显示模式等切换为注视模式后,等待解除注视模式达规定时间的期间,然后切换为其他显示模式。
另外,使用存储在切换标志存储部328中的切换标志来进行显示模式的切换。具体而言,通过用户状态判断部306判断出用户状态后,根据该用户状态来设定显示模式的切换标志,将所设定的切换标志存储在切换标志存储部328中。
并且,对存储在内容信息存储部322中的图像赋予标签。具体而言,对各图像赋予详细显示模式用标签、简略显示模式用标签、注视模式用标签、来客模式用标签等各种显示模式用标签、以及内容种类的标签等。通过使用这样对各图像赋予的标签,在进行显示模式的切换时等,能够从内容信息存储部322中读出与各种显示模式对应的图像,并将其显示在显示部340上。
显示控制部318进行显示部340的显示控制。例如进行如下控制:根据存储在内容信息存储部322中的内容信息,在显示部340上显示图像。具体而言,显示控制部318从切换标志存储部328中读出根据用户状态而设定的显示模式切换标志。然后,从内容信息存储部322中读出与所读出的切换标志相关联的图像、音频等内容信息。然后,进行用于在显示部340上显示所读出的内容信息的图像的控制(对描绘缓冲器的写入处理等)。
而且,在本实施方式中,显示控制部318进行如下显示控制:根据用户和显示部340的位置关系、用户的视觉辨认状态、以及用户是否存在于检测范围内的至少一个,改变在显示部340上显示的图像的显示方式。
例如,用户状态判断部306判断用户和显示部340之间的距离,作为用户和显示部340的位置关系。该情况下,显示控制部318根据用户和显示部340之间的距离,改变在显示部340上显示的图像的显示方式。例如,用户和显示部340之间的距离越近,则在显示部340上显示的图像的详细度越高,或者在显示部340上显示的图像的画面分割数越多,或者在显示部340上显示的文字的尺寸(字体尺寸)越小。
另外,显示控制部318也可以不需要根据距离本身来改变显示部340的图像的显示方式,而根据与距离等效的参数(例如面部区域的尺寸等)来改变显示方式。并且,改变显示方式是指将第1显示方式的第1图像改变为第2显示方式的第2图像。例如,从第1图像改变为作为第1图像的详细图像的第2图像,或改变为作为第1图像的简略图像的第2图像,或改变为分割为多个画面的第2图像。
并且,用户状态判断部306判断用户是否正在注视显示部340,来作为用户的视觉辨认状态。该情况下,显示控制部318根据用户是否正在注视显示部340,来改变在显示部340上显示的图像的显示方式。具体而言,在判断为用户正在注视第1图像的情况下,进行切换为与第1图像对应的注视用图像的切换控制。例如,在判断为用户没有注视显示部340的情况下,不进行从第1图像到作为第1图像的关联图像或详细图像的注视用图像的切换控制。另一方面,在判断为正在注视的情况下,进行从第1图像到注视用图像的切换控制。或者,在判断为用户没有注视的情况下,在显示部340上滑动显示第1~第N(N为大于等于2的整数)图像(顺序显示)。例如,这里,第1~第N图像分别是不同种类或不同范畴的图像。另一方面,在显示第1~第N图像中的第K(1≤K≤N)图像时判断为用户正在注视显示部340(第K图像)的情况下,在显示部340上显示作为第K图像的关联图像或详细图像的注视用图像。然后,在显示该注视用图像时判断为用户靠近显示部340的情况下,显示控制部318显示注视用图像的详细图像。例如,在判断为用户没有靠近显示部340的情况下,在显示部340上滑动显示第1~第M(M为大于等于2的整数)注视用图像作为注视用图像。另一方面,在显示第1~第M注视用图像中的第L(1≤L≤M)注视用图像时判断为用户靠近显示部340的情况下,显示此时显示的第L注视用图像的详细图像。
另外,关联图像是作为与第1图像或第K图像的显示内容相关联的图像而预先被对应起来的图像。并且,详细图像是作为更详细地表示第1图像或第K图像的显示内容的图像而预先被对应起来的图像。这些关联图像和详细图像例如在内容信息存储部322中被与第1图像或第K图像预先对应起来。
并且,显示控制部318也可以根据用户注视显示部340的注视次数信息(注视次数本身、或根据注视次数而变化的参数),改变在显示部340上显示的图像的显示方式。例如,用户状态判断部306对用户的注视次数进行计数,作为注视次数信息存储在注视次数信息存储部329中。然后,在规定时间内用户对第1图像的注视次数大于等于规定次数的情况下,显示控制部318进行切换到与第1图像对应的注视用图像的切换控制。例如,在用户的注视次数少于规定次数的情况下,不进行从第1图像到作为第1图像的关联图像或详细图像的注视用图像的切换控制。另一方面,在注视次数大于等于规定次数的情况下,进行从第1图像到注视用图像的切换控制。或者,也可以根据在规定时间内对第1图像的注视次数信息,改变第1图像或第1图像的关联图像的显示频度。例如,在注视次数大于等于规定次数的情况下,提高显示频度。
并且,用户状态判断部306判断用户是否存在于用户检测传感器350的检测范围内。例如,假设使用能够进行更宽范围检测的热电传感器来检测是否存在用户。于是,在判断为用户存在于检测范围内的情况下,显示控制部318接通显示部340的显示。例如,接通液晶显示器的后背灯,使用户能够看到显示部340的图像。另外,在判断为用户不存在于检测范围内的情况下,显示控制部318断开显示部340的显示。例如,从通常模式切换为省电模式,节省消耗电力。
另外,例如,用户状态判断部306在显示部340的显示接通后,判断是否是显示部340进入用户的视野范围内的状态,来作为用户的视觉辨认状态。于是,在判断为显示部340进入用户的视野范围内的情况下,显示控制部318在显示部340上滑动显示第1~第N图像。这里,第1~第N图像例如是其显示内容的主题互不相同的图像。
2.与位置关系对应的显示方式的变化
在本实施方式中,根据用户和显示部340的位置关系,来改变显示图像的显示方式。
例如,在图3(A)、图3(B)中,根据用户和显示部340(数字相框)之间的距离(广义上为位置关系),来改变显示图像的详细度。具体而言,在图3(A)中,用户和显示部340之间的距离远,大于等于规定距离。该情况下,例如作为天气预报的图像而显示简略图像(通常图像)。即,使用大尺寸(字体)的文字或大尺寸的图标来显示天气预报的图像。另外,使用用户检测传感器350来实现距离的检测。
另一方面,在图3(B)中,用户和显示部340之间的距离近,小于规定距离。即,用户对显示部340的显示内容感兴趣而靠近。该情况下,作为天气预报的图像而显示详细图像。即,与图3(A)相比,在图3(B)中,使用小尺寸的文字等,显示告知详细天气预报的图像。
例如在图3(A)中,为了向处于远处的用户告知容易观看的天气预报,显示对天气预报进行了图标化后的简略图像。即,将图2的切换标志存储部328的显示模式的切换标志设定为简略显示模式,显示简略图像。另一方面,在图3(B)中,针对认为是关心今天的天气而靠近的用户,显示用于告知每小时的详细天气预报的详细图像。即,将切换标志存储部328的显示模式的切换标志切换为详细显示模式,显示详细图像。
如上所述,根据用户和显示部340的距离,来改变显示图像的详细度,由此能够实现与用户的距离对应的适当的图像显示。另外,在图3(A)、图3(B)中,根据与用户的距离,按2个阶段改变显示图像的详细度,但是,详细度的变化也可以大于等于3个阶段。
在图4(A)、图4(B)中,根据用户和显示部340之间的距离(位置关系),来改变显示图像的画面分割数。具体而言,在图4(A)中,用户和显示部340之间的距离远,大于等于规定距离。该情况下,显示画面分割数例如为1的图像(未进行画面分割的图像)。
另一方面,在图4(B)中,用户和显示部340之间的距离近,小于规定距离。该情况下,显示画面分割数例如为4的图像。即,与图4(A)相比,在图4(B)中,显示画面分割数多的图像。并且,在图4(A)中,显示天气信息的图像,但是,在图4(B)中,在第1、第2、第3、第4分割画面上分别显示天气信息、股价信息、交通信息、日历信息的图像。并且,在图4(B)中,与图4(A)相比,针对天气信息等显示用于告知详细内容的图像,并且,文字尺寸也变小。
例如在图4(A)中,为了使处于远处的用户容易观看,使用显示部340的整个画面显示天气预报的图像。即,将切换标志存储部328的显示模式的切换标志设定为1画面模式,显示画面分割数为1的图像。另一方面,在图4(B)中,由于用户靠近,因此对显示部340的画面进行分割,不仅显示天气预报的图像,还显示股价信息、交通信息、日历的图像。即,将切换标志存储部328的显示模式的切换标志切换为4画面模式,显示画面分割数为4的图像。
如上所述,根据用户和显示部340的距离,来改变显示图像的画面分割数,由此,能够实现与用户的距离对应的适当的图像显示。另外,在图4(A)、图4(B)中,按2个阶段来切换画面分割数,但是,画面分割数的切换也可以大于等于3个阶段。并且,画面的分割数也是任意的。
并且,在根据与用户的距离来切换显示方式的情况下,该距离既可以是用户和显示部340的直线距离,也可以是进深方向的距离(Z方向的距离)。并且,该情况下的距离还包含在数学上与距离等效的参数(例如后述的面部区域的面积等),例如只要是根据距离的变化而变化的参数即可。
并且,与用户的位置关系不限于距离,例如也可以是用户的视线方向和显示部340的显示画面所成的角度等。
并且,在图3(A)~图4(B)中,作为显示方式的变化,例示出改变详细度、画面分割数和文字尺寸的情况,但是,本实施方式的显示方式的变化不限于此。例如,也可以根据与用户的位置关系来显示关联图像,接通/断开显示部340的显示,由此改变显示方式。
接着,使用图5(A)、图5(B)说明用户和显示部340之间的距离(位置关系)的检测手法的一例。在图5(A)、图5(B)中,使用CCD、CMOS传感器等摄像传感器(照相机)作为用户检测传感器350。然后,根据来自摄像传感器的摄像信息,检测矩形的框区域即面部区域FAR,求出所检测出的面部区域FAR的尺寸。然后,根据所求出的尺寸,判断用户和显示部340之间的距离。
例如在图5(A)中,面部区域FAR的尺寸小(小于等于规定尺寸),所以判断为与用户的距离远。因此,该情况下,在显示部340上显示图3(A)、图4(A)所示的图像。另一方面,在图5(B)中,面部区域FAR的尺寸大(大于规定尺寸),所以判断为与用户的距离近。因此,该情况下,在显示部340上显示图3(B)、图4(B)所示的图像。
这里,作为面部区域的检测手法,考虑了各种手法。例如,为了进行面部检测,需要在利用摄像传感器拍摄的摄像图像中,对存在面部的场所和其他物体进行区分,切出面部区域。面部由眼睛、鼻子、嘴等构成,它们的形状/位置关系虽然存在个人差异,但是,具有大致共同的特征。因此,使用该共同的特征,从其他物体中识别出面部,并将其从画面中切出。作为其线索,有肤色、面部的动作、形状、大小等。在使用肤色的情况下,采用如下手法:将RGB数据转换为由色相、亮度、彩度构成的HSV数据,来提取人的肌肤的色相。
或者,也可以制作由多个人的面部模式生成的平均面部模式来作为面部模板。然后,在摄像图像的画面上扫描该面部模板,求出与摄像图像之间的相关性,检测相关值最高的区域作为面部区域。
另外,为了提高检测精度,也可以准备多个面部模板作为辞典数据,使用这些多个面部模板来检测面部区域。或者,也可以考虑眼睛、鼻子、嘴的特征、它们的位置关系、面部中的对比度等信息来检测面部区域。或者,也可以通过使用了神经网络模型的统计模式识别来检测面部区域。
根据图5(A)、图5(B)的检测手法,具有如下优点:通过面部区域FAR的尺寸,不仅能够检测用户和显示部340的距离,还能够同时检测用户是否正在观看显示部340。即,在用户的视线没有朝向显示部340方的情况下,与面部模板的相关值低,所以,没有检测出面部区域FAR。因此,检测出面部区域FAR与用户的视线朝向显示部340的方向、显示部340进入用户的视野范围内是等效的。然后,在该状态下,如果检测出面部区域FAR的尺寸,如图3(A)~图4(B)所示改变图像的显示方式,则能够对正在观看显示部340的图像的用户显示与距离对应的适当的图像。由此,能够提供此前没有的数字相框300。
另外,用户的检测手法不限于图5(A)、图5(B)的手法。例如,也可以有效活用装配在一般的照相机或便携电话机的照相机等上的自动对焦功能来检测用户。如果使用该自动对焦功能,则能够判断用户(人物)是否存在于数字相框300前方、该用户和显示部340的距离等位置关系。
例如,在谁都不在房间中的状态下,自动对焦的焦点几乎被固定,但是,在用户横穿过数字相框300的显示部340前方的情况下等,自动对焦功能动作,由此,能够判断用户是否存在。并且,在用户正在观看数字相框300的显示部340的情况下,对该用户进行反应,自动对焦动作,将焦点自动对焦到该用户,所以,能够检测用户和显示部340的大概距离。
另外,作为自动对焦的方式,有有源方式和无源方式。在有源方式中,射出红外线或超声波等来测定与用户等被摄体的距离。即,通过测定反射波返回的时间等,来测定与被摄体的距离。根据该有源方式,具有即使在暗处也能够简单地对焦的优点。
另一方面,在无源方式中,利用CCD传感器等摄像传感器接收被摄体的亮度信息,通过电气处理来检测与被摄体的距离(焦点位置)。即,使用所拍摄的图像来测定距离。在该无源方式中,具有检测亮度信号的横向偏移的相位差检测方式、和检测亮度信号的对比度的对比度检测方式等。
3.与视觉辨认状态对应的显示方式的变化
在本实施方式中,根据用户的视觉辨认状态,来改变显示图像的显示方式。具体而言,根据用户是否正在注视显示部340、显示部340是否进入用户的视野范围内等,来改变显示方式。
例如,在图6(A)、图6(B)中,根据用户是否正在注视显示部340,来改变显示图像的显示方式。具体而言,在图6(A)中,用户的视线方向没有朝向显示部340的方向,没有注视显示部340。该情况下,例如作为天气预报的图像而显示通常图像(第1图像)。另外,能够使用用户检测传感器350来检测用户是否正在注视。
另一方面,在图6(B)中,用户正在注视显示部340。例如显示部340进入用户的视野范围内的时间大于等于一定时间。该情况下,显示图6(A)的图像的关联图像(第1图像的关联图像即注视用图像)。即,在图6(A)中显示天气预报的图像,但是,在图6(B)中,显示告知花粉信息的图像来作为与天气预报相关联的图像。
例如,在从图6(A)的状态成为如图6(B)那样用户注视显示部340一定时间的状态的情况下,如果继续显示图6(A)的图像,则显示图像变得单调,缺乏变化。
关于这点,在图6(B)中,以用户注视了一定时间为条件,显示图6(A)的关联图像即花粉信息的图像。这样,由于用户注视,图像的显示方式变化,能够向用户显示富有变化的图像。并且,能够高效地对用户提供各种信息。
并且,在图7(A)、图7(B)中,以用户正在注视为条件,将显示图像从简略图像切换为详细图像。具体而言,在图7(A)中,用户没有注视显示部340,所以作为股市信息的图像而显示简略图像(第1图像)。即,简略地显示平均股价和交易动作。
另一方面,在图7(B)中,判断为用户注视了显示部340一定时间,所以切换为详细图像(第1图像的详细图像即注视用图像)。具体而言,显示告知个别交易品种的股价的变化的详细图像。这样,用户通过注视显示部340,能够知道股价变动的详细情况。另外,用户也可以使用操作部360等预先登记显示多个交易品种中的哪个交易品种(显示多个显示项目中的哪个显示项目)。这样,通过在显示股市信息的简略图像时用户注视显示部340,从而显示用于告知作为用户所关心的内容而被登记的交易品种的股价的详细情况的图像,能够提高用户的便利性。
另外,基于用户的注视状态(广义上为视觉辨认状态)的显示方式的变化不限于图6(A)~图7(B),能够进行改变文字尺寸或改变画面分割数等各种变形并实施。
例如,在图8(A)中,在第1、第2、第3、第4分割画面上分别显示天气信息、股价信息、交通信息、日历信息的图像。该状态下,例如,当检测出用户正在注视显示有天气信息的第1分割画面时,如图8(B)所示,选择天气信息并显示其图像。这样,通过用户注视分割画面中的任一个,能够选择该分割画面。另外,例如,当用户进一步注视图8(B)的图像一定时间时,也可以显示告知天气信息的详细情况的详细图像,或显示告知天气的关联信息的关联图像。
根据以上本实施方式的手法,当检测出用户的注视等视觉辨认状态时,显示图像的显示方式与其对应地发生变化。因此,增加向用户提供的显示图像的类别,并且,能够进行高效的信息传递,能够提供此前没有的类型的数字相框。
接着,使用图9(A)说明用户的注视状态的检测手法的一例。在图9(A)中,使用摄像传感器作为用户检测传感器350。而且,如在图5(A)、图5(B)中说明的那样,根据来自摄像传感器的摄像信息,检测用户的面部区域FAR。
接着,设定与所检测出的面部区域FAR对应的计测区域SAR。该计测区域SAR是内部包含面部区域FAR、尺寸大于面部区域FAR的区域。例如能够通过对面部区域FAR进行扩界(over sizing),来设定该计测区域SAR。然后,计测面部区域FAR存在于该计测区域SAR内的时间,根据所计测的时间,判断用户是否正在注视显示部340。例如,在面部区域FAR位于计测区域SAR内的时间大于等于一定时间的情况下,判断为用户正在注视显示部340。然后,如图6(A)~图8(B)所示,改变显示图像的显示方式。
根据图9(A)的检测手法,能够使用摄像传感器来实现基于图5(A)、图5(B)的手法的与用户的距离的检测和注视状态的检测这双方。由此,能够削减传感器的部件数量,能够进行高效的处理。
另外,注视状态的检测手法不限于图9(A)的手法。例如在图9(B)中,照射红外光来检测用户的红眼,由此检测注视状态。具体而言,由红外线器件354照射的红外线被半透半反镜353反射而到达用户的眼睛。然后,通过设有摄像传感器的照相机352进行拍摄来检测用户的红眼状态,由此,检测用户的眼睛的瞳孔的位置,检测用户的视线方向,判断用户是否是注视状态。并且,在图9(C)中,根据由2台照相机356、357(立体照相机)拍摄的用户的面部图像的眼睛周边的图像区域的明暗,来检测瞳孔的位置。然后,根据所检测出的瞳孔的中心位置和眼球的中心位置,检测用户的视线方向,判断用户是否是注视状态。这样,作为用户的注视状态的检测手法,能够采用各种手法。
并且,以上说明了检测与用户的距离或用户的注视状态来改变显示图像的显示方式的情况,但是,本实施方式不限于此。例如,也可以检测检测范围内用户的靠近程度来改变显示图像的显示方式。例如,求出图5(A)的面部区域FAR的尺寸相对于时间的变化率。然后,在尺寸的变化率大于等于一定值的情况下,判断为用户的靠近程度高,利用与图3(A)~图4(B)、图6(A)~图8(B)相同的手法来改变显示图像的显示方式。这样,能够向对数字相框感兴趣而靠近的用户显示各样的图像。
并且,也可以通过用户检测传感器350检测用户是否存在于检测范围内,在判断为用户存在于检测范围内的情况下,将显示部340的显示从断开切换为接通。例如,从省电模式切换为通常模式,在显示部340上显示图像。并且,在显示部340的显示接通的状态下,在判断为用户从检测范围内离开而不存在用户的情况下,将显示部340的显示从接通切换为断开。这样,能够防止在用户没有靠近时在数字相框上显示图像而白白消耗电力的情况。
并且,在检测出用户正在注视显示部340的情况下,可以以检测出一次注视为条件来切换显示模式,也可以以检测出多次注视为条件来切换显示模式。例如,根据用户注视显示部340的次数,来改变显示图像的显示方式。
具体而言,对在规定时间内用户注视显示部340的次数即注视次数进行计数并记录。然后,在规定时间内的注视次数超过作为阈值的规定次数(例如2~5次)之前,不切换显示模式,保持显示原来的图像(第1图像)的状态。另一方面,当规定时间内的注视次数超过规定次数时,将显示模式切换为例如注视模式等。然后,显示原来的图像的关联图像,或者显示原来的图像的详细图像。或者,在注视次数多的情况下,增加该图像的详细图像或关联图像的显示频度等。例如,在某个内容的图像的显示中,当检测到用户在30秒(规定时间)的期间内注视次数大于等于2次(规定次数)时,显示该内容的详细内容或关联内容的图像。或者,当检测到用户在1天(规定时间)内对某个内容的图像注视的次数大于等于5次(规定次数)时,增加该内容的关联内容的图像的显示频度。例如,在前一日中第1图像(例如专业棒球的比赛结果的图像)的注视次数大于等于规定次数的情况下,增加下一日中第1图像或第1图像的关联图像(例如专业棒球或大联盟的比赛结果的图像)的显示频度。
并且,在如本实施方式那样进行显示模式的切换的情况下,如果刚刚没有检测到用户的存在或没有检测到用户的视觉辨认状态,就切换显示模式而返回原来的显示模式,则可能损害用户的便利性。例如,在检测出用户的面部或检测出用户的注视而将显示模式切换为详细显示模式或注视模式的情况下,如果只不过由于用户仅在瞬间斜视,就解除该详细显示模式或注视模式而返回原来的显示模式,则会损害显示的流畅性,成为难以使用的数字相框。
为了防止这种情况,在要解除切换后的显示模式的情况下,等待一定时间(例如30秒),继续维持该显示模式。具体而言,在从简略显示模式切换成了详细显示模式的情况下,等待该详细显示模式的解除达规定时间的期间,继续维持详细显示模式。或者,在将显示模式切换成了注视模式的情况下,等待该注视模式的解除达规定时间的期间。然后,在经过了规定时间后也无法检测出用户的存在的情况下、或无法检测出用户的注视状态的情况下,从详细显示模式返回简略显示模式,或从注视模式返回通常显示模式。这样,能够有效地防止由于不经意地频繁切换显示模式而成为对用户而言看不清楚的显示图像的情况。
4.显示方式的切换手法的具体例
接着,使用图10说明本实施方式的显示方式的切换手法的具体例。
如图10所示,在判断为用户没有注视显示部340而将注视模式设定为关闭的情况下,进行图像IM1~IM5(广义上为第1~第N图像)的滑动显示。即,每规定时间顺序显示图像IM1~IM5的各图像。这里,图像IM1~IM5的内容(主题)不同。具体而言,图像IM1、IM2、IM3、IM4、IM5分别为表示新闻、天气、股价、风景照片、动物照片的内容。
这样,滑动显示图像IM1~IM5,例如设在显示图像IM2(广义上为第K图像)时用户注视显示部340。该情况下,将注视模式从关闭切换为打开,在显示部340上显示图像IM2的关联图像(或详细图像)即注视用图像IM21A、IM22A、IM23A。例如,如果在显示天气的图像IM2时用户注视该图像,则显示用于告知降水概率或花粉信息等的关联图像。
然后,例如如果在显示(滑动显示)这种注视用图像IM21A~IM23A(广义上为第1~第M注视用图像)时用户靠近显示部340,则显示注视用图像IM21A、IM22A、IM23A的详细图像(广义上为第L注视用图像的详细图像)即IM21B、IM22B、IM23B。即,当用户和显示部340的距离小于规定距离时,将显示模式从简略显示模式切换为详细显示模式,显示详细图像。例如,在图像IM21B中显示每小时的天气的详细情况,在图像IM22B中显示每小时的降水概率的详细情况,在图像IM23B中显示花粉信息的详细情况。即使在显示图像IM1、IM3、IM4、IM5时用户注视这些各图像的情况下,也与上述同样地切换显示模式,显示图像的显示方式发生变化。
根据图10的显示方式的切换手法,如果在滑动显示图像IM1~IM5时用户注视感兴趣的图像,则显示该图像的关联图像或详细图像。因此,能够高效地显示与用户的兴趣对应的图像,并且,能够根据用户的注视或用户的靠近而多样地改变图像的显示方式,能够提供此前没有的类型的数字相框。
另外,图11示出实现图10的手法所使用的图像的数据结构例。例如在图11中,图像IM1~IM5与注视模式关闭的标志对应起来。由此,在用户没有注视时显示图像IM1~IM5。并且,图像IM11A~IM53A与注视模式关闭及简略显示模式打开的标志对应起来,图像IM11B~IM53B与注视模式关闭及详细显示模式打开的标志对应起来。进而,图像IM11A~IM13B与图像IM1对应起来,图像IM21A~IM23B与图像IM2对应起来,图像IM31A~IM33B与图像IM3对应起来,图像IM41A~IM43B与图像IM4对应起来,图像IM51A~IM53B与图像IM5对应起来。通过采用这种数据结构,如图10所示,在注视图像IM2时,显示图像IM21A~IM23A,该状态下,当用户靠近显示部340时能够显示图像IM21B~IM23B。
5.详细的处理例
接着,使用图12的流程图说明本实施方式的详细的处理例。
首先,使用用户检测传感器即热电传感器判断用户(人物)是否存在于检测范围内(步骤S1)。即,为了在宽范围内粗略地检测用户是否存在于数字相框的周边,使用热电传感器。这样,作为用户检测传感器,区分使用热电传感器和摄像传感器,由此,能够高效地检测用户状态。
然后,在判断为不存在用户的情况下(步骤S2),断开显示部的显示而设定为省电模式(步骤S3)。另一方面,在判断为存在用户的情况下,接通显示部的显示,显示壁纸、钟表、日历等背景图像(步骤S4)。这样,能够防止用户没有位于数字相框附近却在显示部上显示图像从而白白消耗电力的情况。
接着,通过使用了用户检测传感器即摄像传感器(照相机)的面部检测,来判断显示部是否进入用户的视野范围内(步骤S5)。然后,在判断为进入视野范围内的情况下(步骤S6),根据面部区域(框区域)的尺寸来判断用户和显示部(显示画面)的距离(步骤S7)。例如,在如图5(A)、图5(B)所示检测出面部区域的情况下,判断为显示部进入用户的视野范围内。然后,检测面部区域的尺寸,判断(估计)用户和显示部的距离。
在判断为用户和显示部的距离在规定距离以内的情况下(步骤S8),打开详细显示模式(步骤S9)。另一方面,在判断为不是规定距离以内的情况下,打开简略显示模式(步骤S10)。由此,如在图3(A)、图3(B)中说明的那样,能够进行与距离对应的简略图像和详细图像的切换。
接着,通过使用了摄像传感器的注视检测,来判断用户是否正在注视显示部(步骤S11)。然后,在判断为正在注视的情况下(步骤S12),打开注视模式(步骤S13)。另一方面,在判断为没有注视的情况下,关闭注视模式(步骤S14)。由此,如在图6(A)、图6(B)中说明的那样,能够实现与用户是否注视对应的显示方式的切换。
接着,使用图3说明在图9(A)中说明的注视状态的检测处理的详细情况。
首先,通过使用了摄像传感器(照相机)的面部检测,检测面部区域(框区域)(步骤S21)。即,通过在图5(A)、图5(B)中说明的手法来检测面部区域。接着,设定在内部包含所检测出的面部区域、尺寸大于面部区域的计测区域(步骤S22)。即,如图9(A)所示,设定对面部区域进行了扩界的计测区域。然后,使用计时器计测面部区域存在于计测区域内的时间(步骤S23)。即,在设定计测区域后,开始计时器的计测,计测面部区域位于计测区域内的时间。然后,判断是否经过了大于等于规定时间的时间(步骤S24),在经过了大于等于规定时间的时间的情况下,打开注视模式(步骤S25)。另一方面,在没有经过大于等于规定时间的时间的情况下,依然关闭注视模式(步骤S26)。这样,能够进行用户的注视状态的检测和与其对应的注视模式的设定。
6.变形例
接着,说明本实施方式的变形例。图14示出本实施方式的第1变形例。在该第1变形例的系统中,设有家用服务器200(广义上为信息处理系统)。该家用服务器200包含处理部202、存储部220、通信部238、操作部260。另外,能够进行省略它们中的一部分结构要素、或追加其他结构要素等的各种变形并实施。另外,针对与图2相同的结构要素,标注相同的标号并省略其说明。
处理部202进行管理处理等各种处理,能通过CPU等处理器或ASIC等实现。存储部220是处理部202和通信部238的工作区域,例如能够通过RAM或HDD等实现。通信部238用于以有线或无线的方式与数字相框300和外部服务器600进行通信,能够通过通信用ASIC或通信用处理器等实现。操作部260用于供服务器的管理者输入各种信息。
在图14中,数字相框300和家用服务器200例如利用无线LAN等网络进行通信连接。并且,在图14中,作为用户检测传感器250,使用在家的各场所设置的家用传感器。而且,家用服务器200的检测信息取得部204取得来自家用传感器即用户检测传感器250的检测信息,所取得的检测信息被存储在检测信息存储部224中。
并且,通过传送部205,经由通信部238、338将由家用服务器200取得的检测信息传送到数字相框300。于是,数字相框300的检测信息取得部304取得所传送来的检测信息,所取得的检测信息被存储在检测信息存储部324中。然后,用户状态判断部306根据该检测信息来判断用户状态,显示模式切换部316根据用户状态来切换显示模式。例如,根据与用户的位置关系、视觉辨认状态等来切换显示模式。然后,显示控制部318进行在显示部340上显示与显示模式对应的图像的控制。例如,在简略显示模式、详细显示模式、注视模式分别打开的情况下,与其对应地,显示简略图像、详细图像、注视用图像(关联图像)。另外,这些图像等的内容信息被从家用服务器200的内容信息存储部222下载到数字相框300的内容信息存储部322。或者,也可以从外部服务器600的内容信息存储部622下载。并且,用于实现数字相框300的处理部302的程序也可以从外部服务器600或家用服务器200下载到数字相框300。
图15示出用户检测传感器250即家用传感器的设置例。在图15中,作为家用传感器,例如在房间的天花板的四角设置具有摄像传感器的照相机251、252、253、254。然后,使用这些照相机251~254拍摄用户10和数字相框300,由此,取得用于判断用户10和数字相框300的显示部340的位置关系、用户10对显示部340的视觉辨认状态、以及用户10是否存在于检测范围即房间内等的检测信息。然后,从家用服务器200向数字相框300传送所取得的检测信息,数字相框300根据检测信息判断用户状态,在显示部340上显示与用户状态对应的图像。另外,家用传感器不限于照相机251~254的摄像传感器,能够使用热电传感器、超声波传感器等各种传感器。
如果使用图14的第1变形例,则能够有效活用例如为了家庭安全等而设置的家用传感器,取得检测信息,根据该检测信息来判断用户状态,在数字相框300的显示部340上显示与用户状态对应的图像。
图16示出本实施方式的第2变形例。在图16中,家用服务器200的处理部202除了检测信息取得部204、传送部205以外,还包含用户状态判断部206和显示模式切换部216。并且,包含针对数字相框300进行显示指示的显示指示部218。并且,家用服务器200的存储部220除了内容信息存储部222、检测信息存储部224以外,还包含用户状态存储部226、切换标志存储部228、注视次数信息存储部229。
在图16中,家用服务器200的用户状态判断部206根据来自用户检测传感器250即家用传感器的检测信息,判断位置关系和视觉辨认状态等用户状态。并且,显示模式切换部216进行根据用户状态来切换显示模式的处理。例如,根据与用户的位置关系和视觉辨认状态等来切换显示模式。然后,显示指示部218进行对数字相框300进行指示的处理,以显示与显示模式对应的图像。即,根据用户和显示部340的位置关系、用户的视觉辨认状态、以及用户是否存在于检测范围内的至少一个,进行改变在显示部340上显示的图像的显示方式的显示指示。然后,数字相框300的显示控制部318根据来自显示指示部218的指示,进行显示部340的显示控制。由此,根据与用户的位置关系、用户的视觉辨认状态、用户是否存在于检测范围内,显示部340的显示方式发生变化。
根据图16的第2变形例,家用服务器200进行用户状态的判断处理、显示模式的切换处理,所以,能够减轻数字相框300的处理负担。因此,即使在数字相框300的处理部302(CPU)的处理能力低的情况下,也能够实现本实施方式的处理。另外,也可以通过家用服务器200和数字相框300的分散处理来实现这些处理。
另外,如上所述详细说明了本实施方式,但是,本领域技术人员能够容易地理解,能够进行在实体上不脱离本发明的新颖性事项和效果的多个变形。因此,这种变形例全部包含在本发明的范围中。例如,在说明书或附图中至少一次与更广义或同义的不同用语(位置关系、视觉辨认状态等)一起记载的用语(距离、注视状态等)也能够在说明书或附图的任意位置置换为该不同用语。并且,数字相框、信息处理系统的结构、动作、用户状态的判断手法、位置关系的检测手法、视觉辨认状态的检测手法等也不限于本实施方式中所说明的,能够进行各种变形实施。

Claims (26)

1.一种数字相框,其特征在于,该数字相框包含:
显示部,其显示图像;
显示控制部,其进行所述显示部的显示控制;
检测信息取得部,其取得由用户检测传感器检测出的检测信息;以及
用户状态判断部,其根据所取得的所述检测信息,判断用户和所述显示部的位置关系、用户对所述显示部的视觉辨认状态、以及用户是否存在于检测范围内的至少一个,
所述显示控制部根据用户和所述显示部的所述位置关系、用户的所述视觉辨认状态、以及用户是否存在于所述检测范围内的至少一个,进行改变在所述显示部上显示的图像的显示方式的显示控制。
2.根据权利要求1所述的数字相框,其特征在于,
所述用户状态判断部判断用户和所述显示部之间的距离,来作为用户和所述显示部的所述位置关系,
所述显示控制部根据用户和所述显示部之间的距离,进行改变在所述显示部上显示的图像的显示方式的显示控制。
3.根据权利要求2所述的数字相框,其特征在于,
所述显示控制部进行用户和所述显示部之间的距离越近,在所述显示部上显示的图像的详细度越高的显示控制。
4.根据权利要求2所述的数字相框,其特征在于,
所述显示控制部进行用户和所述显示部之间的距离越近,在所述显示部上显示的图像的画面分割数越多的显示控制。
5.根据权利要求2所述的数字相框,其特征在于,
所述显示控制部进行用户和所述显示部之间的距离越近,在所述显示部上显示的文字的尺寸越小的显示控制。
6.根据权利要求2~5中的任一项所述的数字相框,其特征在于,
所述数字相框包含显示模式切换部,该显示模式切换部根据用户和所述显示部之间的距离,切换所述显示部的显示模式。
7.根据权利要求6所述的数字相框,其特征在于,
在用户和所述显示部之间的距离靠近的情况下,所述显示模式切换部将所述显示模式从简略显示模式切换为详细显示模式。
8.根据权利要求7所述的数字相框,其特征在于,
所述显示模式切换部在所述显示模式从所述简略显示模式切换为所述详细显示模式后,等待解除所述详细显示模式达规定时间的期间。
9.根据权利要求2~5中的任一项所述的数字相框,其特征在于,
所述用户检测传感器是对用户进行摄像的摄像传感器,
所述用户状态判断部根据来自所述摄像传感器的摄像信息,检测用户的面部区域,根据所检测出的所述面部区域的尺寸,判断用户和所述显示部之间的距离。
10.根据权利要求2~5中的任一项所述的数字相框,其特征在于,
所述用户检测传感器是对用户进行摄像的摄像传感器,
所述用户状态判断部通过针对用户的自动对焦处理,判断用户和所述显示部之间的距离。
11.根据权利要求2~5中的任一项所述的数字相框,其特征在于,
所述用户检测传感器是超声波传感器,
所述用户状态判断部通过所述超声波传感器,来判断用户和所述显示部之间的距离。
12.根据权利要求1~5中的任一项所述的数字相框,其特征在于,
所述用户状态判断部判断是否是用户正在注视所述显示部的状态,来作为用户的所述视觉辨认状态,
所述显示控制部根据用户是否正在注视所述显示部,进行改变在所述显示部上显示的图像的显示方式的显示控制。
13.根据权利要求12所述的数字相框,其特征在于,
所述显示控制部根据用户注视所述显示部的注视次数信息,进行改变在所述显示部上显示的图像的显示方式的显示控制。
14.根据权利要求13所述的数字相框,其特征在于,
在规定时间内用户对第1图像的注视次数大于等于规定次数的情况下,所述显示控制部进行切换到与所述第1图像对应的注视用图像的切换控制。
15.根据权利要求12所述的数字相框,其特征在于,
所述显示控制部根据规定时间内用户对第1图像的注视次数信息,改变所述第1图像或所述第1图像的关联图像的显示频度。
16.根据权利要求12所述的数字相框,其特征在于,
在判断为用户正在注视第1图像的情况下,所述显示控制部进行切换到与所述第1图像对应的注视用图像的切换控制。
17.根据权利要求12所述的数字相框,其特征在于,
在判断为用户没有注视所述显示部的情况下,所述显示控制部进行在所述显示部上滑动显示第1~第N图像的控制,当在显示所述第1~第N图像中的第K图像时判断为用户正在注视所述显示部的情况下,所述显示控制部进行在所述显示部上显示所述第K图像的关联图像或详细图像即注视用图像的控制,其中N为大于等于2的整数,1≤K≤N。
18.根据权利要求16所述的数字相框,其特征在于,
所述用户状态判断部判断用户和所述显示部之间的距离,来作为用户和所述显示部的所述位置关系,
当在显示所述注视用图像时判断为用户靠近所述显示部的情况下,所述显示控制部进行显示所述注视用图像的详细图像的控制。
19.根据权利要求16所述的数字相框,其特征在于,
在判断为用户没有靠近所述显示部的情况下,所述显示控制部进行在所述显示部上滑动显示第1~第M注视用图像作为所述注视用图像的控制,当在显示所述第1~第M注视用图像中的第L注视用图像时判断为用户靠近所述显示部的情况下,所述显示控制部进行在所述显示部上显示所述第L注视用图像的详细图像的控制,其中M为大于等于2的整数,1≤L≤M。
20.根据权利要求12所述的数字相框,其特征在于,
所述用户检测传感器是对用户进行摄像的摄像传感器,
所述用户状态判断部根据来自所述摄像传感器的摄像信息,检测用户的面部区域,设定在内部包含所检测出的所述面部区域、尺寸大于所述面部区域的计测区域,计测所述面部区域存在于所述计测区域内的时间,根据所计测的时间,判断用户是否正在注视所述显示部。
21.根据权利要求12所述的数字相框,其特征在于,
所述数字相框包含显示模式切换部,该显示模式切换部根据用户是否正在注视所述显示部,来切换所述显示部的显示模式。
22.根据权利要求21所述的数字相框,其特征在于,
所述显示模式切换部在所述显示模式切换为注视模式后,等待解除所述注视模式达规定时间的期间。
23.根据权利要求1~5中的任一项所述的数字相框,其特征在于,
所述用户状态判断部判断用户是否存在于所述检测范围内,
在判断为用户存在于所述检测范围内的情况下,所述显示控制部进行接通所述显示部的显示的显示控制。
24.根据权利要求23所述的数字相框,其特征在于,
在所述显示部的显示接通后,所述用户状态判断部判断是否是所述显示部进入用户的视野范围内的状态,来作为用户的所述视觉辨认状态,
在判断为所述显示部进入用户的视野范围内的情况下,所述显示控制部进行在所述显示部上滑动显示第1~第N图像的控制。
25.一种信息处理系统,其特征在于,该信息处理系统包含:
显示指示部,其进行在数字相框的显示部上显示的图像的显示指示;
检测信息取得部,其取得由用户检测传感器检测出的检测信息;以及
用户状态判断部,其根据所取得的所述检测信息,判断用户和所述显示部的位置关系、用户对所述显示部的视觉辨认状态、以及用户是否存在于检测范围内的至少一个,
所述显示指示部根据用户和所述显示部的所述位置关系、用户的所述视觉辨认状态、以及用户是否存在于所述检测范围内的至少一个,进行改变在所述显示部上显示的图像的显示方式的显示指示。
26.一种数字相框的控制方法,其特征在于,
取得由用户检测传感器检测出的检测信息,
根据所取得的所述检测信息,判断用户和数字相框的显示部的位置关系、用户对所述显示部的视觉辨认状态、以及用户是否存在于检测范围内的至少一个,
根据用户和所述显示部的所述位置关系、用户的所述视觉辨认状态、以及用户是否存在于所述检测范围内的至少一个,进行改变在所述显示部上显示的图像的显示方式的显示控制。
CNA2009101468696A 2008-06-18 2009-06-17 数字相框、信息处理系统和控制方法 Pending CN101609660A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2008159111 2008-06-18
JP2008159111A JP2010004118A (ja) 2008-06-18 2008-06-18 デジタルフォトフレーム、情報処理システム、制御方法、プログラム及び情報記憶媒体

Publications (1)

Publication Number Publication Date
CN101609660A true CN101609660A (zh) 2009-12-23

Family

ID=41430738

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2009101468696A Pending CN101609660A (zh) 2008-06-18 2009-06-17 数字相框、信息处理系统和控制方法

Country Status (3)

Country Link
US (1) US20090315869A1 (zh)
JP (1) JP2010004118A (zh)
CN (1) CN101609660A (zh)

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102325232A (zh) * 2010-05-20 2012-01-18 巴比禄股份有限公司 通信系统、通信装置及通信方法
CN102710736A (zh) * 2011-02-28 2012-10-03 奥林巴斯株式会社 头戴型显示装置和客户端装置
CN103019524A (zh) * 2011-09-26 2013-04-03 丰田自动车株式会社 车辆操作输入装置和用于车辆操作输入装置的控制方法
CN103024242A (zh) * 2011-09-21 2013-04-03 卡西欧计算机株式会社 图像通信系统、终端装置、管理装置及附属图像生成方法
CN103376554A (zh) * 2012-04-24 2013-10-30 联想(北京)有限公司 手持电子设备和显示方法
CN103400589A (zh) * 2013-08-05 2013-11-20 济南伟利迅半导体有限公司 一种数码相框图像播放控制方法及控制系统
CN103413467A (zh) * 2013-08-01 2013-11-27 袁苗达 可控强制引导型自主学习系统
CN103649904A (zh) * 2011-05-10 2014-03-19 Nds有限公司 自适应内容呈现
CN103885574A (zh) * 2012-12-19 2014-06-25 联想(北京)有限公司 一种状态切换方法、装置以及电子设备
CN105049730A (zh) * 2015-08-20 2015-11-11 天脉聚源(北京)传媒科技有限公司 一种图像拍摄方法及装置
CN105446062A (zh) * 2014-09-18 2016-03-30 卡西欧计算机株式会社 信息输出装置和信息输出方法
CN105683889A (zh) * 2013-11-21 2016-06-15 奥林巴斯株式会社 图像显示装置
CN106164823A (zh) * 2014-04-10 2016-11-23 微软技术许可有限责任公司 在凝视跟踪方法和设备中视觉改变的非视觉反馈
CN107005670A (zh) * 2014-12-17 2017-08-01 日立麦克赛尔株式会社 影像显示装置、影像显示系统以及影像显示方法
CN107391997A (zh) * 2017-08-25 2017-11-24 突维科技有限公司 数码相框装置及其控制方法
CN108289656A (zh) * 2015-12-03 2018-07-17 奥林巴斯株式会社 超声波诊断系统、超声波诊断系统的工作方法以及超声波诊断系统的工作程序
CN110796468A (zh) * 2018-08-03 2020-02-14 丰田自动车株式会社 信息处理装置、信息处理方法以及非暂时性存储介质
CN110998490A (zh) * 2017-08-03 2020-04-10 延世大学校产学协力团 终端使用模式信息收集管理方法及系统
CN111183458A (zh) * 2018-06-06 2020-05-19 Jvc建伍株式会社 记录再现装置、记录再现方法以及程序
CN113168823A (zh) * 2018-12-18 2021-07-23 深圳市柔宇科技股份有限公司 显示控制方法、电子设备及计算机可读存储介质

Families Citing this family (75)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100465827C (zh) * 2005-03-29 2009-03-04 华为技术有限公司 多媒体终端及其进行状态转换的方法
US8730156B2 (en) 2010-03-05 2014-05-20 Sony Computer Entertainment America Llc Maintaining multiple views on a shared stable virtual space
US8793620B2 (en) 2011-04-21 2014-07-29 Sony Computer Entertainment Inc. Gaze-assisted computer interface
US9250703B2 (en) 2006-03-06 2016-02-02 Sony Computer Entertainment Inc. Interface with gaze detection and voice input
CN101453537B (zh) * 2007-12-05 2011-07-27 鹏智科技(深圳)有限公司 具有自动断电功能的电子相框
CN101662600B (zh) * 2008-08-28 2011-06-22 鸿富锦精密工业(深圳)有限公司 具电子相框和电视模式切换功能的电子相框及切换方法
US8154615B2 (en) * 2009-06-30 2012-04-10 Eastman Kodak Company Method and apparatus for image display control according to viewer factors and responses
JP5423183B2 (ja) * 2009-07-03 2014-02-19 ソニー株式会社 表示制御装置および表示制御方法
CN101996526A (zh) * 2009-08-12 2011-03-30 鸿富锦精密工业(深圳)有限公司 多功能显示设备
JP4900739B2 (ja) * 2009-09-04 2012-03-21 カシオ計算機株式会社 電子写真立て、その制御方法及びプログラム
JP5568929B2 (ja) 2009-09-15 2014-08-13 ソニー株式会社 表示装置および制御方法
US20120218321A1 (en) * 2009-11-19 2012-08-30 Yasunori Ake Image display system
US8539369B2 (en) * 2010-01-06 2013-09-17 La Crosse Technology, Ltd. Central monitoring and measurement system
KR20110106577A (ko) * 2010-03-23 2011-09-29 삼성전자주식회사 네트워크를 통해 수신된 정보를 이용한 컨텐츠 재생 방법 및 이를 이용한 디스플레이 장치
US8648880B2 (en) * 2010-06-03 2014-02-11 Sony Corporation Terminal device, display method, and application computer program product
TW201205267A (en) * 2010-07-26 2012-02-01 Wistron Corp Detecting device capable of economizing electricity and detecting method thereof
US20120054315A1 (en) * 2010-08-31 2012-03-01 Cisco Technology, Inc. System and method for providing virtualized file system management for a memory card in a digital environment
JP2012058475A (ja) * 2010-09-08 2012-03-22 Sharp Corp マルチディスプレイ装置
TW201222429A (en) * 2010-11-23 2012-06-01 Inventec Corp Web camera device and operating method thereof
US8957847B1 (en) * 2010-12-28 2015-02-17 Amazon Technologies, Inc. Low distraction interfaces
JP5682330B2 (ja) * 2011-01-27 2015-03-11 カシオ計算機株式会社 画像出力装置、画像出力方法及びプログラム
JP5510366B2 (ja) 2011-03-08 2014-06-04 カシオ計算機株式会社 画像表示制御装置及びプログラム
KR101801141B1 (ko) * 2011-04-19 2017-11-24 엘지전자 주식회사 영상표시장치 및 그 동작방법
GB2490866A (en) * 2011-05-09 2012-11-21 Nds Ltd Method for secondary content distribution
US10120438B2 (en) * 2011-05-25 2018-11-06 Sony Interactive Entertainment Inc. Eye gaze to alter device behavior
KR101302638B1 (ko) * 2011-07-08 2013-09-05 더디엔에이 주식회사 머리의 제스처 및 손의 제스처를 감지하여 컨텐츠를 제어하기 위한 방법, 단말 장치 및 컴퓨터 판독 가능한 기록 매체
JP5831929B2 (ja) * 2011-08-29 2015-12-09 日本電気株式会社 表示装置、制御方法、及びプログラム
JP2013055424A (ja) * 2011-09-01 2013-03-21 Sony Corp 撮影装置、パターン検出装置、および電子機器
US9293107B2 (en) * 2011-09-20 2016-03-22 Microsoft Technology Licensing, Llc Adjusting user interfaces based on entity location
JPWO2013046596A1 (ja) * 2011-09-26 2015-03-26 Necカシオモバイルコミュニケーションズ株式会社 携帯型情報処理端末
JP5803509B2 (ja) * 2011-09-28 2015-11-04 カシオ計算機株式会社 画像表示装置、画像表示プログラム、及び画像表示方法
JP5861360B2 (ja) * 2011-09-28 2016-02-16 カシオ計算機株式会社 画像表示装置、画像表示プログラム、及び画像表示方法
JP5978610B2 (ja) * 2011-12-09 2016-08-24 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
US20130257743A1 (en) * 2012-03-28 2013-10-03 Yat Wai Edwin Kwong Insect Repelling Digital Photo Frame with Biometrics
US9396518B2 (en) * 2012-05-15 2016-07-19 Salvadore Ragusa System of organizing digital images
KR101385438B1 (ko) 2012-06-12 2014-04-15 삼성디스플레이 주식회사 터치 스크린 패널
KR102049977B1 (ko) * 2012-12-31 2019-11-28 엘지전자 주식회사 이동 단말기
JP2015056141A (ja) 2013-09-13 2015-03-23 ソニー株式会社 情報処理装置、および情報処理方法
KR20150054413A (ko) * 2013-11-12 2015-05-20 삼성전자주식회사 시선 데이터에 따라 컨텐츠의 위치를 결정하는 전자 장치 및 방법
US20220261465A1 (en) * 2013-11-21 2022-08-18 Yevgeny Levitov Motion-Triggered Biometric System for Access Control
US11461448B2 (en) * 2016-07-18 2022-10-04 Yevgeny Levitov Motion-triggered biometric system for access control
KR102317386B1 (ko) * 2014-01-10 2021-10-27 삼성전자주식회사 전자 장치 및 그 디스플레이 방법
CN114741043A (zh) * 2014-03-31 2022-07-12 莫拉尔公司 基于周围条件生成输出显示的系统和方法
JP2015210797A (ja) * 2014-04-30 2015-11-24 シャープ株式会社 表示装置
JP6541940B2 (ja) * 2014-04-30 2019-07-10 シャープ株式会社 表示装置
WO2015166691A1 (ja) * 2014-04-30 2015-11-05 シャープ株式会社 表示装置
JP6555858B2 (ja) * 2014-08-01 2019-08-07 シャープ株式会社 機器、音声出力方法、音声出力プログラム、ネットワークシステム、サーバ、および通信機器
US9911398B1 (en) * 2014-08-06 2018-03-06 Amazon Technologies, Inc. Variable density content display
US9794511B1 (en) 2014-08-06 2017-10-17 Amazon Technologies, Inc. Automatically staged video conversations
KR102180333B1 (ko) * 2014-08-25 2020-11-18 삼성전자주식회사 전자 장치의 근접 감지 방법 및 그 전자 장치
US9002187B1 (en) * 2014-10-02 2015-04-07 Patricia L Reiman Handheld subject framing apparatus for photograph
JP6102895B2 (ja) * 2014-11-25 2017-03-29 コニカミノルタ株式会社 画像処理装置、画像処理装置の制御プログラム、画像処理システム
JP6652251B2 (ja) * 2015-03-26 2020-02-19 Necディスプレイソリューションズ株式会社 表示装置、表示方法、および表示プログラム
US20160313805A1 (en) * 2015-04-22 2016-10-27 Henge Docks Llc Method for Setting the Position of a Cursor on a Display Screen
CN104834446B (zh) * 2015-05-04 2018-10-26 惠州Tcl移动通信有限公司 一种基于眼球追踪技术的显示屏多屏控制方法及系统
US9819905B1 (en) 2015-05-28 2017-11-14 Amazon Technologies, Inc. Video communication sessions between whitelisted devices
US20180295420A1 (en) * 2015-09-01 2018-10-11 Thomson Licensing Methods, systems and apparatus for media content control based on attention detection
KR102349861B1 (ko) * 2015-09-16 2022-01-12 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 디스플레이 제어방법
US10382692B1 (en) * 2016-11-01 2019-08-13 Amazon Technologies, Inc. Digital photo frames with personalized content
KR102674490B1 (ko) * 2016-11-04 2024-06-13 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US10958841B2 (en) 2017-01-06 2021-03-23 Intel Corporation Integrated image sensor and display pixel
WO2018163974A1 (ja) * 2017-03-07 2018-09-13 シャープ株式会社 表示装置、虚像表示装置、および表示装置の制御方法
WO2019044608A1 (ja) * 2017-08-29 2019-03-07 日本電気株式会社 情報処理装置、情報処理方法、及び、記録媒体
US10489487B2 (en) * 2018-01-18 2019-11-26 Microsoft Technology Licensing, Llc Methods and devices to select presentation mode based on viewing angle
JP2019169004A (ja) * 2018-03-23 2019-10-03 富士通デバイス株式会社 視線検出システムおよび視線検出プログラム
JP7140963B2 (ja) * 2018-03-29 2022-09-22 富士通株式会社 判定プログラム、判定方法および判定装置
US20190310741A1 (en) * 2018-04-05 2019-10-10 Microsoft Technology Licensing, Llc Environment-based adjustments to user interface architecture
US20200086721A1 (en) * 2018-09-17 2020-03-19 Westinghouse Air Brake Technologies Corporation Door Assembly for a Transit Vehicle
WO2020084835A1 (ja) * 2018-10-25 2020-04-30 パナソニックIpマネジメント株式会社 表示制御方法、及び、表示制御システム
JP7440211B2 (ja) * 2019-03-08 2024-02-28 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 情報出力方法、情報出力装置及びプログラム
US11593670B2 (en) * 2020-01-14 2023-02-28 Dell Products L.P. System and method for managing a flow state of a user of an information handling system
US11211433B2 (en) 2020-05-04 2021-12-28 Intel Corporation In-display sensors and viewing angle adjustment microassemblies
FI20215100A1 (en) * 2021-01-29 2022-07-30 Elisa Oyj Video-controlled mobile multi-service device
US20220358488A1 (en) * 2021-05-07 2022-11-10 Infinity Pieces Inc. Nft digital frame
TWI810104B (zh) * 2022-11-01 2023-07-21 南開科技大學 具通訊功能的互動數位相框系統及其方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1210648A (zh) * 1996-02-09 1999-03-10 松下电器产业株式会社 电视接收机
US20020103625A1 (en) * 2000-12-08 2002-08-01 Xerox Corporation System and method for analyzing eyetracker data
US6456262B1 (en) * 2000-05-09 2002-09-24 Intel Corporation Microdisplay with eye gaze detection
JP2004185139A (ja) * 2002-11-29 2004-07-02 Fuji Photo Film Co Ltd 表示システム及び表示装置の制御方法
US20070126884A1 (en) * 2005-12-05 2007-06-07 Samsung Electronics, Co., Ltd. Personal settings, parental control, and energy saving control of television with digital video camera

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05118625A (ja) * 1991-10-29 1993-05-14 Hitachi Ltd 空気調和機
JPH1083146A (ja) * 1996-09-05 1998-03-31 Seiko Epson Corp 電子式写真立て
JPH1132498A (ja) * 1997-07-08 1999-02-02 Fujitsu General Ltd ブラシレスモータの制御方法およびその装置
JP2001319217A (ja) * 2000-05-09 2001-11-16 Fuji Photo Film Co Ltd 画像表示方法
US20030038754A1 (en) * 2001-08-22 2003-02-27 Mikael Goldstein Method and apparatus for gaze responsive text presentation in RSVP display
US7953648B2 (en) * 2001-11-26 2011-05-31 Vock Curtis A System and methods for generating virtual clothing experiences
JP4061379B2 (ja) * 2004-11-29 2008-03-19 国立大学法人広島大学 情報処理装置、携帯端末、情報処理方法、情報処理プログラム、およびコンピュータ読取可能な記録媒体
JP2006236013A (ja) * 2005-02-25 2006-09-07 Nippon Telegr & Teleph Corp <Ntt> 環境的情報提示装置、環境的情報提示方法およびこの方法のプログラム
JP4802618B2 (ja) * 2005-08-30 2011-10-26 ソニー株式会社 コンテンツ再生装置及びコンテンツ再生方法
JP5006587B2 (ja) * 2006-07-05 2012-08-22 株式会社エヌ・ティ・ティ・ドコモ 画像提示装置および画像提示方法
CN101495945A (zh) * 2006-07-28 2009-07-29 皇家飞利浦电子股份有限公司 用于被凝视物品的信息显示的凝视交互
TWI328433B (en) * 2007-12-19 2010-08-11 Wistron Corp Method for adjusting image output of a digital photo frame and related digital photo frame

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1210648A (zh) * 1996-02-09 1999-03-10 松下电器产业株式会社 电视接收机
US6456262B1 (en) * 2000-05-09 2002-09-24 Intel Corporation Microdisplay with eye gaze detection
US20020103625A1 (en) * 2000-12-08 2002-08-01 Xerox Corporation System and method for analyzing eyetracker data
JP2004185139A (ja) * 2002-11-29 2004-07-02 Fuji Photo Film Co Ltd 表示システム及び表示装置の制御方法
US20070126884A1 (en) * 2005-12-05 2007-06-07 Samsung Electronics, Co., Ltd. Personal settings, parental control, and energy saving control of television with digital video camera

Cited By (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102325232A (zh) * 2010-05-20 2012-01-18 巴比禄股份有限公司 通信系统、通信装置及通信方法
CN102710736A (zh) * 2011-02-28 2012-10-03 奥林巴斯株式会社 头戴型显示装置和客户端装置
CN102710736B (zh) * 2011-02-28 2017-06-13 奥林巴斯株式会社 头戴型显示装置和客户端装置
CN103649904A (zh) * 2011-05-10 2014-03-19 Nds有限公司 自适应内容呈现
CN103024242A (zh) * 2011-09-21 2013-04-03 卡西欧计算机株式会社 图像通信系统、终端装置、管理装置及附属图像生成方法
CN103024242B (zh) * 2011-09-21 2015-11-25 卡西欧计算机株式会社 图像通信系统、终端装置、管理装置及附属图像生成方法
CN103019524A (zh) * 2011-09-26 2013-04-03 丰田自动车株式会社 车辆操作输入装置和用于车辆操作输入装置的控制方法
US9221341B2 (en) 2011-09-26 2015-12-29 Toyota Jidosha Kabushiki Kaisha Vehicle operation input apparatus and control method for vehicle operation input apparatus
CN103376554A (zh) * 2012-04-24 2013-10-30 联想(北京)有限公司 手持电子设备和显示方法
CN103885574B (zh) * 2012-12-19 2017-09-22 联想(北京)有限公司 一种状态切换方法、装置以及电子设备
CN103885574A (zh) * 2012-12-19 2014-06-25 联想(北京)有限公司 一种状态切换方法、装置以及电子设备
CN103413467A (zh) * 2013-08-01 2013-11-27 袁苗达 可控强制引导型自主学习系统
CN103400589A (zh) * 2013-08-05 2013-11-20 济南伟利迅半导体有限公司 一种数码相框图像播放控制方法及控制系统
CN103400589B (zh) * 2013-08-05 2016-05-25 济南伟利迅半导体有限公司 一种数码相框图像播放控制系统
CN105683889A (zh) * 2013-11-21 2016-06-15 奥林巴斯株式会社 图像显示装置
CN106164823A (zh) * 2014-04-10 2016-11-23 微软技术许可有限责任公司 在凝视跟踪方法和设备中视觉改变的非视觉反馈
CN106164823B (zh) * 2014-04-10 2019-03-15 微软技术许可有限责任公司 在凝视跟踪方法和设备中视觉改变的非视觉反馈
US9628856B2 (en) 2014-09-18 2017-04-18 Casio Computer Co., Ltd. Information output apparatus and computer readable medium
CN105446062A (zh) * 2014-09-18 2016-03-30 卡西欧计算机株式会社 信息输出装置和信息输出方法
CN105446062B (zh) * 2014-09-18 2017-11-14 卡西欧计算机株式会社 信息输出装置和信息输出方法
CN107005670A (zh) * 2014-12-17 2017-08-01 日立麦克赛尔株式会社 影像显示装置、影像显示系统以及影像显示方法
CN105049730A (zh) * 2015-08-20 2015-11-11 天脉聚源(北京)传媒科技有限公司 一种图像拍摄方法及装置
CN108289656A (zh) * 2015-12-03 2018-07-17 奥林巴斯株式会社 超声波诊断系统、超声波诊断系统的工作方法以及超声波诊断系统的工作程序
CN110998490A (zh) * 2017-08-03 2020-04-10 延世大学校产学协力团 终端使用模式信息收集管理方法及系统
CN107391997A (zh) * 2017-08-25 2017-11-24 突维科技有限公司 数码相框装置及其控制方法
CN111183458A (zh) * 2018-06-06 2020-05-19 Jvc建伍株式会社 记录再现装置、记录再现方法以及程序
CN111183458B (zh) * 2018-06-06 2021-03-02 Jvc建伍株式会社 记录再现装置、记录再现方法以及程序
CN110796468A (zh) * 2018-08-03 2020-02-14 丰田自动车株式会社 信息处理装置、信息处理方法以及非暂时性存储介质
CN113168823A (zh) * 2018-12-18 2021-07-23 深圳市柔宇科技股份有限公司 显示控制方法、电子设备及计算机可读存储介质

Also Published As

Publication number Publication date
US20090315869A1 (en) 2009-12-24
JP2010004118A (ja) 2010-01-07

Similar Documents

Publication Publication Date Title
CN101609660A (zh) 数字相框、信息处理系统和控制方法
US10841476B2 (en) Wearable unit for selectively withholding actions based on recognized gestures
US11759143B2 (en) Skin detection method and electronic device
AU2015201759B2 (en) Electronic apparatus for providing health status information, method of controlling the same, and computer readable storage medium
US20160006941A1 (en) Electronic apparatus for providing health status information, method of controlling the same, and computer-readable storage
CN109670397A (zh) 人体骨骼关键点的检测方法、装置、电子设备及存储介质
CN109101873A (zh) 用于提供针对兴趣对象的外部光源的特性信息的电子设备
US20220180485A1 (en) Image Processing Method and Electronic Device
RU2635238C1 (ru) Способ, устройство и терминал для воспроизведения музыки на основе фотоальбома с фотографиями лиц
CN106373156A (zh) 通过图像确定空间参数的方法、装置及终端设备
US20230005254A1 (en) Image detection method and apparatus, and electronic device
US20210279445A1 (en) Skin Detection Method and Electronic Device
US11941804B2 (en) Wrinkle detection method and electronic device
US9779294B2 (en) Methods and devices for classifying pictures
CN105654039A (zh) 图像处理的方法和装置
CN112306442A (zh) 跨设备的内容投屏方法、装置、设备及存储介质
CN108960179A (zh) 一种图像数据处理方法及移动终端
US20220067387A1 (en) Method for extracting video clip, device for extracting video clip, and storage medium
KR102350351B1 (ko) 정보 처리 장치, 정보 처리 방법, 및 기록 매체
CN113920465A (zh) 片尾识别方法、装置、电子设备及存储介质
CN117201930B (zh) 一种拍照方法和电子设备
JP2003069935A (ja) 画像データの分類保存方法
JP2015135645A (ja) 情報表示制御装置、情報表示制御方法及びプログラム
US20240202950A1 (en) Image processing method, electronic device, storage medium, and program product
CN108307108B (zh) 一种拍照控制方法及移动终端

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20091223