CN103049081A - 开启对象视觉触发的方法、客户端及系统 - Google Patents

开启对象视觉触发的方法、客户端及系统 Download PDF

Info

Publication number
CN103049081A
CN103049081A CN2012105182948A CN201210518294A CN103049081A CN 103049081 A CN103049081 A CN 103049081A CN 2012105182948 A CN2012105182948 A CN 2012105182948A CN 201210518294 A CN201210518294 A CN 201210518294A CN 103049081 A CN103049081 A CN 103049081A
Authority
CN
China
Prior art keywords
target
blinkpunkt
unlatching
triggers
open
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012105182948A
Other languages
English (en)
Other versions
CN103049081B (zh
Inventor
马宇尘
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Liangming Technology Development Co Ltd
Original Assignee
Shanghai Liangming Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Liangming Technology Development Co Ltd filed Critical Shanghai Liangming Technology Development Co Ltd
Priority to CN201210518294.8A priority Critical patent/CN103049081B/zh
Publication of CN103049081A publication Critical patent/CN103049081A/zh
Application granted granted Critical
Publication of CN103049081B publication Critical patent/CN103049081B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供了一种开启对象视觉触发的方法、客户端及系统,属于计算终端、软件技术领域。其中的方法包括有如下步骤:步骤1,采集注视点的信息,判定注视点是否落在开启对象上;步骤2,在注视点落于开启对象上的情况下,触发该开启对象作为目标开启对象,使其进入到连续放大状态;步骤3,当放大至预设阈值的情况下,触发该开启对象打开。利用本发明,通过采集用户对开启对象的注视信息,通过调整目标开启对象的尺寸,提示用户对应的开启对象是否进入到触发状态,以及何时能够被触发。

Description

开启对象视觉触发的方法、客户端及系统
技术领域
本发明属于计算终端、软件技术领域。 
技术背景
能够利用用户视觉方面的探测信息,来判定用户对视窗中内容的注视点,进而能够判定用户所注视的对象。随着摄像识别技术的发展,判定注视点的位置也越来越易于实现。通过获取注视点的位置,然后比对视窗中的输出信息,进而判定注视点所对应视窗中的数据信息。当该数据信息是能够打开的开启对象时,还能够对该开启对象进行打开操作。所述的开启对象的类型是不限定的,可以是文件,或者文件夹,或者文档中的链接,或者互联网页面中的超链接,等等,具体均不限定。 
利用注视点触发开启对象时,如何对注视点的区域进行相应的标注,来使得用户能够快速明白注视点所对应的对象,以及避免随意在视窗中进行浏览时,因注视点随意改动而造成的误操作,是目前需要解决的问题。 
发明内容
本发明的目的是提供一种开启对象视觉触发的方法,以及对应的客户端及系统,利用本发明,通过采集用户对开启对象的注视信息,通过调整目标开启对象的尺寸,来提示用户对应的开启对象是否进入到触发状态,以及何时能够被触发。 
本发明提供一种开启对象视觉触发的方法,该方法包括有如下步骤: 
步骤1,采集注视点的信息,判定注视点是否落在开启对象上; 
步骤2,在注视点落于开启对象上的情况下,触发该开启对象作为目标开启对象,使其进入到连续放大状态; 
步骤3,当放大至预设阈值的情况下,触发该开启对象打开。 
进一步,所述注视点的获取方式,包括有如下步骤: 
当所在终端的视窗开启的情况下,启动所在终端拍摄图象信息; 
根据所拍摄的图象信息,判定是否具有双眼的图象,在不具有的情况下继续前一步骤,在具有的情况下转入下一步骤; 
依据所拍摄的双眼图象,获取眼球的位置以及瞳孔中心点的位置,取前述双眼的眼球中心位置及瞳孔中心点位置做延长线; 
将获得的两条延长线对应在视窗中的交汇点作为注视点。 
进一步,所述的开启对象,为如下类型其中之一: 
(1)通过超文本文件所设置的超链接数据; 
(2)在文档中所设置的链接数据,该链接数据在触发后能够指向于所在文档的其它位置,或者指向于所在终端中其它独立的文件; 
(3)所在终端中的文件夹; 
(4)文件数据。 
进一步,在触发放大操作的过程中,预设注视点在对应开启对象上的停留时间触发的时间阈值。 
进一步,前述的时间阈值,在1.5-3.0秒钟之间。 
进一步,在开启对象周围,设置有阈值外框,在前述的目标开启对象放大至阈值外框位置处的情况下,触发开启对象打开。 
进一步,对应着前述的阈值外框,在注视点的位置落于该阈值外框的范围内的情况下,则判定注视点落在该开启对象上。 
进一步,对应前述阈值外框所在的区域,设置前景色区域或者背景色区域,其中的前景色区域指的是前置于所述目标开启对象所在区域的窗口,其中的背景色区域指的是后置于所述目标开启对象所在区域的窗口。 
进一步,对应着所述的目标开启对象,在其周围设置一个或以上的分级别的轮廓线。 
进一步,所述的分级别轮廓线,用以实现临时窗口的触发操作,其步骤为, 
判定目标开启对象是否放大至分级别轮廓线的位置; 
在抵达分级别轮廓线的位置时,采集目标开启对象在打开后所对应的数据内容,将其置放于弹出的临时窗口输出。 
进一步,在前述的目标开启对象处于连续放大状态但没有达到预 设阈值的情况下,采集获得注视点移离前述目标开启对象的消息后,取消前述目标开启对象的放大状态,将该目标开启对象的尺寸恢复至初始状态。 
进一步,在前述的目标开启对象处于连续放大状态但没有达到预设阈值的情况下,采集获得注视点移离前述目标开启对象的消息后,停止放大状态的连续放大操作的情况下,在一个预设的时间阈值内维持该放大状态; 
如果在该阈值内注视点再次回落到该放大状态所在的目标位置处,则延续前述目标开启对象的放大状态并进行继续放大操作。 
进一步,所述的时间阈值,在2-6秒钟之间。 
本发明还提供一种开启对象视觉触发的客户端,该客户端包括: 
注视点判定单元,用以采集注视点的信息,判定注视点是否落在开启对象上; 
放大触发单元,用以在注视点落于开启对象上的情况下,触发该开启对象作为目标开启对象,使其进入到连续放大状态; 
开启对象打开单元,用以当放大至预设阈值的情况下,触发该开启对象打开。 
本发明还提供一种开启对象视觉触发的系统,该系统包括: 
视觉触发客户端,它包括: 
注视信息采集单元,用以拍摄用户的注视信息; 
视窗信息采集单元,用以采集当前视窗中所输出的数据信息; 
采集数据推送单元,用以将前述注视信息采集单元所采集的注视信息以及视窗信息采集单元所采集的视窗中的数据信息,向下述的视觉触发服务器进行推送; 
开启对象打开执行单元,用以获取视觉触发服务器所推送的识别结果,执行该识别结果中对目标开启对象进行放大操作或打开操作的指令信息; 
视觉触发服务器,它包括: 
注视点判定单元,用以采集前述视觉触发客户端所推送的注视信息及视窗中的数据信息,判定注视信息所对应的注视点是否落在视窗中的开启对象上; 
放大触发判定单元,用以在注视点落于开启对象上的情况下,判定该开启对象为目标开启对象,生成将其进行连续放大的操作指令; 
开启指令判定单元,用以判定前述的目标开启对象连续放大至预设阈值的情况下,触发生成将前述目标开启对象进行开启操作的指令; 
指令推送单元,用以将前述放大触发判定单元及开启指令判定单元所生成的指令推送至前述的视觉触发客户端。 
附图说明
图1是本发明所述方法的流程图,为一种实施例。 
图2是本发明中通过眼球中心位置及瞳孔中心点做延长线的示意图。 
图3是本发明中开启对象视觉触发的客户端的结构框图。 
图4是本发明中开启对象视觉触发的系统的结构框图。 
具体实施方式
实施例1 
参图1所示,这儿展示了本发明所述的一种开启对象视觉触发的方法流程图,所述的方法包括如下步骤: 
步骤S110,采集注视点的信息,判定注视点是否落在开启对象上; 
步骤S120,在注视点落于开启对象上的情况下,触发该开启对象作为目标开启对象,使其进入到连续放大状态; 
步骤S130,当放大至预设阈值的情况下,触发该开启对象打开。 
在本实施例中,所述的注视点,指的是用户通过眼睛对所在终端视窗进行注视操作的情况下,注视的目标位置点。该注视点的测量,作为举例而非限定,可以通过如下的步骤实施: 
当所在终端的视窗开启的情况下,启动所在终端拍摄图象信息; 
根据所拍摄的图象信息,判定是否具有双眼的图象,在不具有的情况下继续前一步骤,在具有的情况下转入下一步骤; 
依据所拍摄的双眼图象,获取眼球的位置以及瞳孔中心点的位 置,取前述双眼的眼球中心位置及瞳孔中心点位置做延长线; 
将获得的两条延长线对应在视窗中的交汇点作为注视点。 
参图2所示,这儿描述了通过眼球中心位置及瞳孔中心点做延长线的一种实施例。对应着眼球10,其眼球中心点11对应着所在眼球10的几何中心位置,或者用以进行注视点判定时,根据判定的方式对应在眼球10中所设定的中心点位置。对应着瞳孔20的几何中心点,即图中所示的瞳孔中心点21。在前述的眼球中心点11和瞳孔中心点21之间做延长线30,如图中所示的那样,通过双眼分别获得两条这样的延长线,进而将其在视窗中的交汇点作为注视点。 
当然,也可以通过其它已有的技术获得注视点,具体方式是不限定的。 
本发明所述的“开启对象”,指的是能够触发后开启相关联数据信息的对象。该开启对象只要能够触发下一级的数据生成就可以,具体的类型并不限定。作为典型的实施例,有如下几种类型: 
(1)该开启对象是通过超文本文件所设置的超链接数据,该超链接数据通常呈现于互联网网页中,当然也可以存在于已有的文档中,如Word文档中。每一个链接对应着一个统一资源标识符URL,在触发后能够开启该链接所指向的数据内容,比如网页,或者音频,或者视频文件等,具体并不限定。 
(2)该开启对象是在文档中所设置的链接数据,该链接数据在触发后能够指向于所在文档的其它位置,或者指向于所在终端中其它独立的文件。比如,在某个PPT文件中,如果用户插入了一段终端中已存储的视频,就可以对应着该视频数据在前述PPT文档中设置链接,用以在触发该链接后打开对应的视频文件。当然文档中的链接也可以用以指向所在文档中的其它部分等。 
(3)所述的开启对象是所在终端中的文件夹。在触发文件夹后,能够开启文件夹中的数据内容。文件夹中的数据内容可以有各种各样的形式,比如文件,或者是其它文件夹,或者是可供安装的程序,等等,具体并不限定。 
(4)所述的开启对象是具体的文件数据。比如说,该开启对象是一个Word文档,或者是一个PDF文档,或者是一个待安装的程序 数据,等等。通过本发明所述的触发方式,可以将对应的具体文件数据转为开启状态。 
接下来,对前述步骤所描述的技术细节作进一步说明。 
所述的开启对象,在触发之后进入到的放大状态,为连续的放大状态。该连续放大状态,指的是目标开启对象所对应的显示内容进行连续放大的输出状态。 
在触发放大操作的过程中,还适合预设触发的时间阈值。也就是说,如果前述的注视点在特定开启对象上的停留时间非常短暂的话,就不适合将该开启对象转为目标开启对象进行触发操作。这是因为用户的注视点在视窗中会来回移动,以此来寻找自己感兴趣的内容。前述时间阈值也不适合设置的时间过长,时间太长的话,就无法实现本发明通过注视点触发开启对象的功能。作为优选的实施例,该时间阈值可以选为1.5-3.0秒钟之间。 
进一步,对应着前述目标开启对象的周围,还可以设置阈值外框。所述的阈值外框,指的是在目标开启对象周围的区域中所设置的框体结构。该框体结构的各部分与前述目标开启对象的显示内容之间的最近距离,优选为相同或接近。其中,该阈值外框具有如下的作用: 
(1)能够便利地标识哪一个开启对象为目标开启对象。 
(2)能够方便于用户判定处于连续放大状态的目标开启对象,在什么样的条件能够被触发。 
该触发条件可以这样进行限定:所触发的目标开启对象的尺寸被连续放大的过程中,当放大到最大的状态时,能够抵达阈值外框所在的区域,且在该条件下,实现对该目标开启对象的打开触发操作。 
利用前述的阈值外框,能够让用户便利地判定当前正处于放大状态的目标开启对象和阈值外框之间的差距,从而能用来估算目标开启对象被触发的大致时间量。 
(3)在设置有阈值外框的情况下,能够方便于用户通过注视点的方式对目标开启对象的显示内容触发连续续放大操作。 
这是因为,可以预先设定:只要注视点的位置落于前述阈值外框的范围内,都代表对该开启对象进行着连续的注视操作,而不要求将注视点持续落在目标开启对象的显示内容上。这种方式下,就减少了 用户利用注视点触发目标开启对象的难度。 
进一步,前述的阈值外框所在的区域,还可以通过前景色区域或者背景色区域进行实现。在这种实施方式下,前述阈值外框所在的区域,能够通过相应的背景色彩进行呈现。当然,该背景色彩也可以通过背景图案实现。 
所述的前景色区域,指的是前置于所述目标开启对象所在区域的窗口。在这种情况下,为了使所述的前景色区域不影响目标开启对象的查看操作,适合设置前景色区域的透明度。比如,使其保持50%左右的透明度,以便于在看清前景色区域的情况下,也能够看清目标开启对象的数据内容。而所述的背景色区域,是后置于前述目标开启对象所在区域的窗口。对于背景色区域来说,其透明度不作限定。 
进一步,对应着所述的目标开启对象,还可以设置一个或以上的分级别轮廓线,该分级别轮廓线的尺寸大于前述目标开启对象内容的尺寸,随着目标开启对象内容的放大,能够抵达至该轮廓线的位置。其中,前述的轮廓线可以实现不同的目的。比如,能够用该轮廓线代表目标开启对象放大状态所处的阶段。 
另外,也可以通过该分级别轮廓线,实现临时窗口的触发操作。所述的临时窗口,是先判定目标开启对象是否放大至分级别轮廓线的位置,在达到的情况下,通过采集目标开启对象在打开后所对应的数据内容,将其置放于前述的临时窗口中输出。该临时窗口是一个弹出窗口,所输出的内容仅供用户参考,并非正式的目标开启对象在打开后的输出数据。当用户的注视点从前述目标开启对象上移开时,触发该临时窗口所对应的显示内容进行取消操作。 
进一步,对应着前述的步骤S110-步骤S130,如果所述的目标开启对象还处于放大状态,在所述的目标开启对象的放大状态没有达到预设阈值的情况下,如果所述的注视点的位置移离前述目标开启对象的情况下,则触发对前述目标开启对象放大状态的取消操作。这样操作的目的,是因为当用户将注视点移离处于放大状态的目标开启对象时,可将操作判定为用户希望取消通过注视点触发目标开启对象的打开操作。于是,将前述只处于放大状态没有达到预设阈值的目标开启对象,进行停止放大状态的操作。 
其中,当前述的目标开启对象因注视点位置的转移而停止继续放大的情况下,存在如下两种操作模式: 
(1)在目标开启对象处于放大状态的情况下,将该目标开启对象的尺寸恢复至初始状态。 
(2)在前述的目标开启对象停止放大状态的连续放大操作的情况下,在一个预设的时间阈值内维持该放大状态,如果在该阈值内注视点再次回落到该放大状态所在的目标位置处,则继续进行前述目标开启对象的触发操作,延续前述的放大状态并进行继续放大操作。 
这样操作的目的,是因为用户在通过注视点进行目标开启对象触发的过程中,可能会因为某些原因造成了注视点位置的短暂转移,且该转移并不是用户的本意。于是,就可以在前述时间阈值内,重新启动前述放大状态中止的目标开启对象。这儿所述的时间阈值,作为优选的实施例,可以选择在2-6秒钟之间。 
实施例2 
本实施例包括有如下步骤: 
步骤S210,对应在网络浏览器上设置视觉触发控件,用以在触发后通过注视点启动网页中的超链接。 
在本实施例中,通过注视点触发的开启对象是网页中的超链接数据。在网页中,通常会有大量的超链接数据。因此,如何采集注视点位置来启动特定的超链接数据,并不是一件容易的事。 
在本实施例中,如果没有启动前述视觉触发控件的话,则在对应的网络浏览器所输出的网页中,不触发本发明所描述的注视点启动超链接的功能。 
进一步,为了更好地表达注视点触发超链接的功能是否处于开启状态,还可以在启动了视觉触发控件之后,将所在的互联网页面设置为差异化显示状态。比如,该差异化显示状态可以通过在网络浏览器页面的顶部设置蓝色条框的形式进行表达,在没有处于注视点触发超链接功能的情况下,就不输出前述的蓝色条框。 
步骤S220,在网络浏览器开启的情况下,判定是否能够采集前述视觉触发控件的启动消息,在采集获得的情况下,启动所在终端上的摄像结构,拍摄用户的眼睛注视信息,识别后获取在当前视窗中的 注视点位置。 
步骤S230,判定注视点的位置是否具有开启对象,且在该开启对象处停留的时间是否达到预设阈值,其中该预示阈值为2秒钟,在达到的情况下转入到下一步骤,在达不到的情况下,重复步骤S220-步骤S230。 
所设置的时间阈值,是为了避免用户在随意查看网络浏览器页面的情况下,通过注视点触发并不希望打开的超链接。 
前述的阈值,取为2秒钟左右是合适的,在过短或过长的情况下,都会给用户带来不便。 
步骤S240,采集该超链接形式的目标开启对象中的显示内容,将其转为连续放大状态,其中本实施例中的开启对象的显示内容为字符,对字符中的数据内容进行连续放大操作;以及在目标开启对象所对应字符内容的周围设置阈值外框,该阈值外框是比前述字符内容所在区域大3倍的框体结构,均匀设置在字符内容的周围。 
步骤S250,在注视点位于前述外框区域内的时间范围内,对所述的目标信息对应的字符内容进行连续放大操作,进而转入到步骤S270;在注视点的位置信息从前述外框区域移开的情况下,转入到步骤S260。 
步骤S260,停止前述目标信息所对应设置的放大操作,进而重复步骤S220-步骤S250。 
步骤S270,在前述的目标信息所对应的字符内容放大至前述外框所在位置的情况下,触发前述的目标开启对象所对应的超链接进入到开启状态。 
实施例3 
参图3所示,在本实施例中,提供了一种开启对象视觉触发的客户端100,该客户端100安装在具有视窗,且能够拍摄用户眼部图象信息并识别获取注视点的终端上,该终端的具体类型是不限定的,比如能够实现该功能的智能手机,或平板电脑,或笔记本电脑,或台式机电脑等,都可以。利用该客户端100,能够通过视觉对所在终端上视窗的注视点,来打开视窗中的开启对象,而且,在打开视窗中开启对象的过程中,能够使得开启对象的显示内容的尺寸进行连续放大操 作。为实现本功能,所述的客户端100包括有如下结构: 
注视点判定单元110,用以采集注视点的信息,判定注视点是否落在开启对象上; 
放大触发单元120,用以在注视点落于开启对象上的情况下,触发该开启对象作为目标开启对象,使其进入到连续放大状态; 
开启对象打开单元130,用以当放大至预设阈值的情况下,触发该开启对象打开。 
在具体实施时,前述的开启对象,只要能够对其进行进一步的打开操作都可以,具体的数据类型并不限定,如前所述,该开启对象可以是互联网中的超链接,或者是文档中的链接,或者是所在终端中存储的文件夹,或者所在终端中存储的具体文件,等等。所述的注视点,是通过拍摄用户的眼部图象,然后判定双眼聚集的位置是否对应着所在的视窗。如果在视窗中的话,通过注视点判定单元110,判定和视窗中的哪部分数据内容相对应。在对应有具体对象的情况下,将该对象作为开启对象进行触发。触发的方式是通过前述的放大触发单元120,将注视点对应的开启对象作为待触发的目标开启对象,获取其显示内容信息,将显示内容信息进行连续的放大操作。为了方便于表达,如前所述,对应着目标开启对象的显示内容周围设置阈值外框,该阈值外框对应着用以触发开启对象进行打开操作的预设阈值条件。进而,通过开启对象打开单元130,判定目标开启对象的显示内容是否已放大至预设阈值,比如放大到前述的阈值外框的位置处,在达到预设阈值的情况下,将前述的目标开启对象进行打开操作。比如,如果目标开启对象为链接的话,则打开该链接所对应的页面;如果目标开启对象为文件的话,则打开该文件;如果目标开启对象为文件夹的话,则打开该文件夹,等等。 
实施例4 
参图4所示,在本实施例中,提供了一种开启对象视觉触发的系统200,该系统200包括有两个组成部分,其中之一是视觉触发客户端210;其中之二是视觉触发服务器220。该视觉触发客户端210安装在能够拍摄用户的眼部图象信息并识别获取注视点的终端上,该终端的具体类型是不限定的,比如能够实现该功能的智能手机,或平板 电脑,或笔记本电脑,或台式机电脑等,都可以。其中的视觉触发服务器220是与该视觉触发客户端210远程相连通的服务器,利用该服务器能够判定注视点是否触发了开启对象。 
为实现前述的功能,该系统200具体包括: 
视觉触发客户端210,它包括: 
注视信息采集单元211,用以拍摄用户的注视信息; 
视窗信息采集单元212,用以采集当前视窗中所输出的数据信息; 
采集数据推送单元213,用以将前述注视信息采集单元211所采集的注视信息以及视窗信息采集单元212所采集的视窗中的数据信息,向下述的视觉触发服务器220进行推送; 
开启对象打开执行单元214,用以获取视觉触发服务器220所推送的识别结果,执行该识别结果中对目标开启对象进行放大操作或打开操作的指令信息; 
视觉触发服务器220,它包括: 
注视点判定单元221,用以采集前述视觉触发客户端210所推送的注视信息及视窗中的数据信息,判定注视信息所对应的注视点是否落在视窗中的开启对象上; 
放大触发判定单元222,用以在注视点落于开启对象上的情况下,判定该开启对象为目标开启对象,生成将其进行连续放大的操作指令; 
开启指令判定单元223,用以判定前述的目标开启对象连续放大至预设阈值的情况下,触发生成将前述目标开启对象进行开启操作的指令; 
指令推送单元224,用以将前述放大触发判定单元222及开启指令判定单元223所生成的指令推送至前述的视觉触发客户端210。 
在本实施例中,通过前述的视觉触发客户端210,经由注视信息采集单元211,能够启动所在终端上的摄像结构拍摄用户的图象信息,该图象信息中,包括有用户对所在终端视窗的注视信息。另一方面,通过视窗信息采集单元212,来获取视窗的输出信息,作为优选的实施例而非限定,所采集视窗中的输出信息,可以通过视窗截图的 方式进行采集,采集的频率也不适合过快,因为这样会导致信息量大幅度增加,比如,每0.1-0.5秒钟采集一帧,都是可行的方案。进而,通过采集数据推送单元213,将采集获得的包括有注视信息的图象内容以及所在视窗中输出的信息,进行打包后向视觉触发服务器220进行推送。在该视觉触发服务器220中,通过注视点判定单元221,将所采集的包括有注视信息的图象内容,转换为所在视窗中的注视点,将该注视点的位置与视窗中输出的信息内容进行比对,获得注视点在视窗中的对应位置,以及判定所对应的位置处,是否具有开启对象。在具有开启对象的情况下,还可以预设对注视时间的判定,比如,预设注视时间达到2秒钟能够触发所对应的开启对象转为目标开启对象,进而对其生成开启对象进行放大操作的指令,将该指令通过指令推送单元224向前述的视觉触发客户端210进行推送。在视觉触发客户端210中接收到该推送的信息后,将所对应的开启对象转为目标开启对象进行放大操作。 
随着目标开启对象的连续放大,当达到预设的放大阈值的情况下,由开启指令判定单元223,生成将目标开启对象进行开启操作的指令,进而由指令推送单元224将该指令推送至视觉触发客户端210中,进而通过开启对象打开执行单元214,对前述的目标开启对象执行打开操作的指令。 
以上是对本发明的描述而非限定,基于本发明思想的其它任何实施例,亦均在本发明的保护范围之中。 

Claims (15)

1.一种开启对象视觉触发的方法,其特征在于该方法包括有如下步骤:
步骤1,采集注视点的信息,判定注视点是否落在开启对象上;
步骤2,在注视点落于开启对象上的情况下,触发该开启对象作为目标开启对象,使其进入到连续放大状态;
步骤3,当放大至预设阈值的情况下,触发该开启对象打开。
2.根据权利要求1所述的一种开启对象视觉触发的方法,其特征在于:所述注视点的获取方式,包括有如下步骤,
当所在终端的视窗开启的情况下,启动所在终端拍摄图象信息;
根据所拍摄的图象信息,判定是否具有双眼的图象,在不具有的情况下继续前一步骤,在具有的情况下转入下一步骤;
依据所拍摄的双眼图象,获取眼球的位置以及瞳孔中心点的位置,取前述双眼的眼球中心位置及瞳孔中心点位置做延长线;
将获得的两条延长线对应在视窗中的交汇点作为注视点。
3.根据权利要求1所述的一种开启对象视觉触发的方法,其特征在于:所述的开启对象,为如下类型其中之一,
(1)通过超文本文件所设置的超链接数据;
(2)在文档中所设置的链接数据,该链接数据在触发后能够指向于所在文档的其它位置,或者指向于所在终端中其它独立的文件;
(3)所在终端中的文件夹;
(4)文件数据。
4.根据权利要求1所述的一种开启对象视觉触发的方法,其特征在于:在触发放大操作的过程中,预设注视点在对应开启对象上的停留时间触发的时间阈值。
5.根据权利要求4所述的一种开启对象视觉触发的方法,其特征在于:前述的时间阈值,在1.5-3.0秒钟之间。
6.根据权利要求1所述的一种开启对象视觉触发的方法,其特征在于:在开启对象周围,设置有阈值外框,在前述的目标开启对象放大至阈值外框位置处的情况下,触发开启对象打开。
7.根据权利要求6所述的一种开启对象视觉触发的方法,其特征在于:对应着前述的阈值外框,在注视点的位置落于该阈值外框的范围内的情况下,则判定注视点落在该开启对象上。
8.根据权利要求6所述的一种开启对象视觉触发的方法,其特征在于:对应前述阈值外框所在的区域,设置前景色区域或者背景色区域,其中的前景色区域指的是前置于所述目标开启对象所在区域的窗口,其中的背景色区域指的是后置于所述目标开启对象所在区域的窗口。
9.根据权利要求1所述的一种开启对象视觉触发的方法,其特征在于:对应着所述的目标开启对象,在其周围设置一个或以上的分级别的轮廓线。
10.根据权利要求9所述的一种开启对象视觉触发的方法,其特征在于:所述的分级别轮廓线,用以实现临时窗口的触发操作,其步骤为,
判定目标开启对象是否放大至分级别轮廓线的位置;
在抵达分级别轮廓线的位置时,采集目标开启对象在打开后所对应的数据内容,将其置放于弹出的临时窗口输出。
11.根据权利要求1所述的一种开启对象视觉触发的方法,其特征在于:在前述的目标开启对象处于连续放大状态但没有达到预设阈值的情况下,采集获得注视点移离前述目标开启对象的消息后,取消前述目标开启对象的放大状态,将该目标开启对象的尺寸恢复至初始状态。
12.根据权利要求1所述的一种开启对象视觉触发的方法,其特征在于:在前述的目标开启对象处于连续放大状态但没有达到预设阈值的情况下,采集获得注视点移离前述目标开启对象的消息后,停止放大状态的连续放大操作的情况下,在一个预设的时间阈值内维持该放大状态;
如果在该阈值内注视点再次回落到该放大状态所在的目标位置处,则延续前述目标开启对象的放大状态并进行继续放大操作。
13.根据权利要求12所述的一种开启对象视觉触发的方法,其特征在于:所述的时间阈值,在2-6秒钟之间。
14.一种开启对象视觉触发的客户端,其特征在于该客户端包括:
注视点判定单元,用以采集注视点的信息,判定注视点是否落在开启对象上;
放大触发单元,用以在注视点落于开启对象上的情况下,触发该开启对象作为目标开启对象,使其进入到连续放大状态;
开启对象打开单元,用以当放大至预设阈值的情况下,触发该开启对象打开。
15.一种开启对象视觉触发的系统,其特征在于该系统包括:
视觉触发客户端,它包括,
注视信息采集单元,用以拍摄用户的注视信息;
视窗信息采集单元,用以采集当前视窗中所输出的数据信息;
采集数据推送单元,用以将前述注视信息采集单元所采集的注视信息以及视窗信息采集单元所采集的视窗中的数据信息,向下述的视觉触发服务器进行推送;
开启对象打开执行单元,用以获取视觉触发服务器所推送的识别结果,执行该识别结果中对目标开启对象进行放大操作或打开操作的指令信息;
视觉触发服务器,它包括,
注视点判定单元,用以采集前述视觉触发客户端所推送的注视信息及视窗中的数据信息,判定注视信息所对应的注视点是否落在视窗中的开启对象上;
放大触发判定单元,用以在注视点落于开启对象上的情况下,判定该开启对象为目标开启对象,生成将其进行连续放大的操作指令;
开启指令判定单元,用以判定前述的目标开启对象连续放大至预设阈值的情况下,触发生成将前述目标开启对象进行开启操作的指令;
指令推送单元,用以将前述放大触发判定单元及开启指令判定单元所生成的指令推送至前述的视觉触发客户端。
CN201210518294.8A 2012-12-05 2012-12-05 开启对象视觉触发的方法、客户端及系统 Active CN103049081B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210518294.8A CN103049081B (zh) 2012-12-05 2012-12-05 开启对象视觉触发的方法、客户端及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210518294.8A CN103049081B (zh) 2012-12-05 2012-12-05 开启对象视觉触发的方法、客户端及系统

Publications (2)

Publication Number Publication Date
CN103049081A true CN103049081A (zh) 2013-04-17
CN103049081B CN103049081B (zh) 2017-05-24

Family

ID=48061750

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210518294.8A Active CN103049081B (zh) 2012-12-05 2012-12-05 开启对象视觉触发的方法、客户端及系统

Country Status (1)

Country Link
CN (1) CN103049081B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103309451A (zh) * 2013-06-20 2013-09-18 上海华勤通讯技术有限公司 移动终端的显示方法及移动终端
CN103440038A (zh) * 2013-08-28 2013-12-11 中国人民大学 一种基于眼部识别的信息采集系统及其应用
CN103472912A (zh) * 2013-08-18 2013-12-25 苏州量跃信息科技有限公司 眼部充能触发的方法及系统
CN105068646A (zh) * 2015-08-05 2015-11-18 广东欧珀移动通信有限公司 终端的控制方法和系统
CN105589555A (zh) * 2014-11-12 2016-05-18 联想(新加坡)私人有限公司 视线触发语音识别
CN106325505A (zh) * 2016-08-17 2017-01-11 传线网络科技(上海)有限公司 基于视点跟踪的控制方法和装置
CN107924068A (zh) * 2015-05-30 2018-04-17 美你康新加坡私人有限公司 包装中的视觉触发器
CN107957775A (zh) * 2016-10-18 2018-04-24 阿里巴巴集团控股有限公司 虚拟现实空间环境中的数据对象交互方法及装置
CN110456964A (zh) * 2019-07-26 2019-11-15 天脉聚源(杭州)传媒科技有限公司 一种自适应的聊天气泡显示方法、系统、装置和存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050047629A1 (en) * 2003-08-25 2005-03-03 International Business Machines Corporation System and method for selectively expanding or contracting a portion of a display using eye-gaze tracking
CN101192129A (zh) * 2006-11-30 2008-06-04 重庆优腾信息技术有限公司 一种控制桌面背景的方法、装置及系统
CN101495945A (zh) * 2006-07-28 2009-07-29 皇家飞利浦电子股份有限公司 用于被凝视物品的信息显示的凝视交互
CN101943982A (zh) * 2009-07-10 2011-01-12 北京大学 基于被跟踪的眼睛运动的图像操作
US20120039505A1 (en) * 2010-08-11 2012-02-16 International Business Machines Corporation Dynamically resizing text area on a display device
GB2490868A (en) * 2011-05-09 2012-11-21 Nds Ltd A method of playing an audio track associated with a document in response to tracking the gaze of a user

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050047629A1 (en) * 2003-08-25 2005-03-03 International Business Machines Corporation System and method for selectively expanding or contracting a portion of a display using eye-gaze tracking
CN101495945A (zh) * 2006-07-28 2009-07-29 皇家飞利浦电子股份有限公司 用于被凝视物品的信息显示的凝视交互
CN101192129A (zh) * 2006-11-30 2008-06-04 重庆优腾信息技术有限公司 一种控制桌面背景的方法、装置及系统
CN101943982A (zh) * 2009-07-10 2011-01-12 北京大学 基于被跟踪的眼睛运动的图像操作
US20120039505A1 (en) * 2010-08-11 2012-02-16 International Business Machines Corporation Dynamically resizing text area on a display device
GB2490868A (en) * 2011-05-09 2012-11-21 Nds Ltd A method of playing an audio track associated with a document in response to tracking the gaze of a user

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103309451B (zh) * 2013-06-20 2016-06-08 上海华勤通讯技术有限公司 移动终端的显示方法及移动终端
CN103309451A (zh) * 2013-06-20 2013-09-18 上海华勤通讯技术有限公司 移动终端的显示方法及移动终端
CN103472912A (zh) * 2013-08-18 2013-12-25 苏州量跃信息科技有限公司 眼部充能触发的方法及系统
CN103472912B (zh) * 2013-08-18 2018-03-23 苏州量跃信息科技有限公司 眼部充能触发的方法及系统
CN103440038A (zh) * 2013-08-28 2013-12-11 中国人民大学 一种基于眼部识别的信息采集系统及其应用
CN103440038B (zh) * 2013-08-28 2016-06-15 中国人民大学 一种基于眼部识别的信息采集系统及其应用
CN105589555A (zh) * 2014-11-12 2016-05-18 联想(新加坡)私人有限公司 视线触发语音识别
CN107924068A (zh) * 2015-05-30 2018-04-17 美你康新加坡私人有限公司 包装中的视觉触发器
US11734722B2 (en) 2015-05-30 2023-08-22 Menicon Singapore Pte Ltd. Visual trigger in packaging
US11354705B2 (en) 2015-05-30 2022-06-07 Menicon Singapore Pte Ltd Visual trigger in packaging
CN105068646B (zh) * 2015-08-05 2017-11-10 广东欧珀移动通信有限公司 终端的控制方法和系统
CN105068646A (zh) * 2015-08-05 2015-11-18 广东欧珀移动通信有限公司 终端的控制方法和系统
CN106325505B (zh) * 2016-08-17 2019-11-05 传线网络科技(上海)有限公司 基于视点跟踪的控制方法和装置
CN106325505A (zh) * 2016-08-17 2017-01-11 传线网络科技(上海)有限公司 基于视点跟踪的控制方法和装置
CN107957775A (zh) * 2016-10-18 2018-04-24 阿里巴巴集团控股有限公司 虚拟现实空间环境中的数据对象交互方法及装置
CN107957775B (zh) * 2016-10-18 2021-09-21 阿里巴巴集团控股有限公司 虚拟现实空间环境中的数据对象交互方法及装置
CN110456964A (zh) * 2019-07-26 2019-11-15 天脉聚源(杭州)传媒科技有限公司 一种自适应的聊天气泡显示方法、系统、装置和存储介质

Also Published As

Publication number Publication date
CN103049081B (zh) 2017-05-24

Similar Documents

Publication Publication Date Title
CN103049081A (zh) 开启对象视觉触发的方法、客户端及系统
US10432698B2 (en) Information processing method, apparatus, terminal, and server
CN107911483A (zh) 一种信息传输方法和装置
CN103971244A (zh) 一种商品信息的发布与浏览方法、装置及系统
CN103997452A (zh) 多平台之间的信息分享方法及装置
CN109684571B (zh) 一种数据采集方法及装置、存储介质
CN104021218A (zh) 一种信息显示方法及装置
CN103139292A (zh) 在http代理中处理图片的方法、代理服务器及系统
CN107786884B (zh) 弹幕数据的处理方法、服务器、第一终端以及存储介质
CN103823858A (zh) 信息处理方法及信息处理装置
CN111601066A (zh) 信息获取方法、装置及电子设备
US20180107686A1 (en) Search method and apparatus
US20120115447A1 (en) System and method for providing safety content service
CN103455580A (zh) 一种推荐信息的方法和装置
CN102769641A (zh) 一种网页内容自适应控制的展示方法及系统
CN102752371A (zh) 在客户端上实现闪屏的方法和客户端
CN106209857B (zh) 数据传输方法和装置
CN110049094B (zh) 信息推送的方法和线下展示终端
KR101744696B1 (ko) 정보 필터링 방법, 장치, 프로그램 및 저장매체
CN102394836B (zh) 基于即时通信进行传输文档统计的方法、终端及系统
CN103853790A (zh) 移动终端浏览器的上传信息处理方法及装置
CN111045529B (zh) 一种数据输入方法、系统及相关设备
CN107346197B (zh) 一种信息显示方法及装置
CN102541877B (zh) 一种图文信息投放方法及系统
CN108959393B (zh) 动态图片处理方法、装置及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant