CN104168366A - 移动终端以及控制该移动终端的方法 - Google Patents
移动终端以及控制该移动终端的方法 Download PDFInfo
- Publication number
- CN104168366A CN104168366A CN201410202801.6A CN201410202801A CN104168366A CN 104168366 A CN104168366 A CN 104168366A CN 201410202801 A CN201410202801 A CN 201410202801A CN 104168366 A CN104168366 A CN 104168366A
- Authority
- CN
- China
- Prior art keywords
- image information
- mobile terminal
- user
- display
- controller
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0416—Control or interface arrangements specially adapted for digitisers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0486—Drag-and-drop
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
- H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/4223—Cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4367—Establishing a secure communication between the client and a peripheral device or smart card
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
- G06F2203/04105—Pressure sensors for measuring the pressure or force exerted on the touch surface without providing the touch position
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/04—Changes in size, position or resolution of an image
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/14—Solving problems related to the presentation of information to be displayed
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Social Psychology (AREA)
- Computer Networks & Wireless Communication (AREA)
- Databases & Information Systems (AREA)
- Telephone Function (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
移动终端以及控制该移动终端的方法。公开了一种移动终端,所述移动终端包括:显示器,所述显示器用于显示第一画面信息;用户跟踪设备,所述用户跟踪设备用于检测针对被连接的外部电子装置的用户凝视在作为基准的所述显示器的预定范围内;以及控制器,所述控制器用于基于检测到的用户凝视从所述被连接的外部电子装置接收第二画面信息,并且所述控制器用于控制所述显示器同时显示接收到的第二画面信息和所述第一画面信息。
Description
技术领域
本发明涉及一种移动终端以及控制该移动终端的方法,并且具体地说,涉及一种能够连接到外部电子装置的移动终端以及控制该移动终端的方法。
背景技术
通常,可以根据可移动状态将终端分类成移动(便携式)终端和固定终端。根据用户的携带方法,移动终端还可以被分类成手持终端和车载终端。
随着终端的功能变得越来越多样化,终端可以支持越来越复杂的功能,诸如捕捉图像或视频、再现音乐或视频文件、玩游戏、接收广播信号等。通过全面且集中地实现这些功能,可以以多媒体播放器或设备的形式来具体实施移动终端。已经进行了各种尝试,以借助硬件或软件在这样的多媒体设备中实现复杂的功能。
另一方面,偶尔地,在观看显示在移动终端上的内容的同时,用户可能同时或者交替观看或使用显示在不同的电子装置上的内容。在这种情况下,用户感受到不便,因为为了使用显示在移动终端和不同的电子装置上的所有内容,他/她不得不交替观看移动终端的画面和不同的电子装置的画面。
发明内容
因此,详细描述的一个方面在于提供一种移动终端以及控制该移动终端的方法,所述移动终端能够接收显示在与该移动终端连接的外部电子装置上的内容画面并且在该移动终端上显示内容画面。
详细描述的另一个方面在于提供一种移动终端以及控制该移动终端的方法,所述移动终端能够显示被显示在与该移动终端连接的外部电子装置上的内容画面并且根据该移动终端远程地控制所述内容画面。
为了实现这些优点并且根据本说明书的目的,如这里具体实施和广泛描述的,提供了一种移动终端,所述移动终端包括:显示单元,在所述显示单元上显示第一画面信息;检测单元,所述检测单元连接到外部电子装置并且检测针对被连接的外部电子装置的用户凝视移动到作为基准的所述显示器的预定范围内;以及控制器,所述控制器基于检测到的用户凝视接收第二画面信息,并且按照接收到的第二画面信息随着所述第一画面信息一起显示在所述显示单元的一个区域上的方式来执行控制,该第二画面信息被输出到所述被连接的外部电子装置。
在所述移动终端中,所述检测单元可以通过使用第一信号和第二信号来检测所述用户凝视的移动,与是否检测用户的眼睛相对应的所述第一信号从通过无线通信单元连接的所述外部电子装置接收,与是否检测所述用户的眼睛相对应的所述第二信号通过使用设置在所述移动终端上的至少一个传感器来检测。
在所述移动终端中,所述显示单元可以划分为第一区域和能够与所述第一区域相区分的第二区域,并且当检测到的用户凝视移动到作为基准的所述显示单元的所述预定范围内时,所述控制器可以按照所述第一画面信息显示在所述第一区域上并且所述第二画面信息显示在所述第二画面上的方式来控制所述显示单元。
在所述移动终端中,所述控制器可以基于触摸输入来指定所述第二区域,并且可以按照所述第二画面信息显示在指定的第二区域上的方式来控制所述显示单元。
所述移动终端还包括倾斜检测单元,所述倾斜检测单元检测所述移动终端的倾斜,其中所述控制器可以基于检测到的用户凝视和检测到的所述移动终端的倾斜来确定上面显示所述第二画面信息的所述第二区域。
在所述移动终端中,当检测到的用户凝视停留在位于所述显示单元上的第一位置上时,所述控制器可以按照在所述第一位置上显示所述第二画面信息的方式来控制所述显示单元。
在所述移动终端中,在所述第二画面信息显示在所述显示单元上的状态下,当检测到的用户凝视在预定时间内停留在所述第一画面信息被输出到的区域上时,所述控制器可以按照所述第二画面信息从所述显示单元消失的方式执行控制。
在所述移动终端中,在所述第二画面信息显示在所述显示单元上的状态下,当检测到的用户凝视停留在显示所述第二画面信息的区域上时,所述控制器可以按照在所述显示单元的所有区域上显示所述第二画面信息的方式执行控制。
在所述移动终端中,当将第一触摸施加至上面显示所述第二画面信息的区域时,所述控制器可以缩小所述第二画面信息并且可以显示缩小的第二画面信息,并且当将第二触摸施加至所述第二画面信息时,所述控制器可以按照在所述显示单元的所有区域上显示所述第二画面信息的方式来控制所述显示单元。
在所述移动终端中,当将第三触摸施加至上面显示第二画面信息的区域时,所述控制器可以按照与施加所述第三触摸的方向和所述第三触摸被拖动的程度相对应地缩小或放大所述第二画面信息的方式来控制所述显示单元,并且因此显示缩小或放大的第二画面信息。
在所述移动终端中,当在所述第二画面信息显示在所述显示单元上的状态下发生事件时,所述控制器可以将第一画面信息和第二画面信息切换到与发生的事件有关的画面信息,或者可以将用于切换到所述画面信息的图标输出到所述显示单元。
在所述移动终端中,当确定在作为基准的所述显示单元的预定范围内的用户凝视移动到所述被连接的外部电子装置的画面时,所述控制单元可以向所述被连接的外部电子装置发送所述第一信息。
在所述移动终端中,如果向所述被连接的外部电子装置发送所述第一画面信息并且在所述移动终端中发生事件,则所述控制器可以在处于正常模式中时向所述被连接的外部电子装置发送与所述事件相对应的事件数据,并且可以在处于用户保护模式中时仅向所述被连接的外部电子装置发送通知消息,该通知消息告诉所述事件的发生。
在所述移动终端中,当被连接的外部电子装置额外连接到不同的电子装置并且多个用户的凝视停留在被连接的外部电子装置的画面上时,所述控制器可以按照自动进入所述用户保护模式的方式执行控制。
在所述移动终端中,当在所述第二画面信息显示在所述显示单元上的状态下满足预定条件时,所述控制器可以执行与所述第二画面信息相关联的至少一个远程控制功能。
在所述移动终端中,所述预定条件可以基于针对弹出菜单键的触摸输入、语音信号输入、用户手势、与用户凝视有关的信息以及针对第二画面信息的触摸输入中的任何一个。
在所述移动终端中,当在第二画面信息显示在所述显示单元上的状态下进入输入模式时,所述控制器可以按照上面显示所述第二画面信息的区域的至少一部分被切换为将信息所输入到的区域的方式执行控制,并且输入到所述区域的所述信息按照该信息与所述第二画面信息交叠的方式显示在所述第二画面信息上。
所述移动终端还包括用户检测单元,所述用户检测单元被配置为根据所设置的摄像头捕捉的图像来检测用户位置,其中所述控制器可以基于检测到的用户位置与所述显示单元之间的距离,控制显示在所述显示单元上的画面信息的输出状态和输出到音频输出模块的音量中的至少一个。
在所述移动终端中,当在检测到针对被连接的外部电子装置的用户凝视移动到作为基准的显示单元的预定范围内之后超过预定时间时,所述控制器可以向被连接的外部电子装置发送无线信号,该无线信号用于将被连接的外部电子装置的画面和音量中的至少一个转换成去激活状态。
在所述移动终端中,所述控制器可以向被连接的外部电子装置发送无线信号,该无线信号用于根据超过预定时间的程度来逐渐调节被连接的外部电子装置的画面亮度和音量中的至少一个。
在所述移动终端中,当在检测到在作为基准的显示单元的预定范围内的用户凝视移动到被连接的外部电子装置之后超过预定时间时,所述控制器可以向被连接的外部电子装置发送无线信号,该无线信号用于将被连接的外部电子装置的画面和声音中的至少一个转换成激活状态。
为了实现这些优点并且根据本说明书的目的,如这里具体实施和广泛描述的,提供了一种控制移动终端的方法,所述方法包括以下步骤:显示所显示的第一画面信息;建立与外部电子装置的连接;并且检测针对被连接的外部电子装置的用户凝视移动到作为基准的所述显示单元的预定范围内;基于检测到的用户凝视接收第二画面信息,该第二画面信息被输入到所述被连接的外部电子装置;以及在所述显示单元的至少一个区域上与所述第一画面信息一起显示接收到的第二画面信息。
所述方法还包括以下步骤:在所述第二画面信息显示在所述显示单元上的状态下,当检测到的用户凝视停留在上面显示所述第二画面信息的区域上时,在所述显示单元的所有区域上显示所述第二画面信息,并且在所述第二画面信息显示在所述显示单元上的状态下,当检测到的用户凝视在预定时间内停留在所述第一画面信息所输出到的区域上时,使得所述第二画面信息从所述显示单元消失。
根据下文中给出的详细描述,本申请的适用性的进一步范围将变得更加明显。然而,应当理解的是,由于根据详细描述,本发明的精神和范围内的各种改变和修改对于本领域技术人员而言将变得显而易见,因此仅通过例示的方式给出了表示本发明的优选实施方式的详细描述和特定示例。
附图说明
附图被包括以提供对本公开的进一步理解,并且被并入本申请且构成本说明书的一部分,附图例示了示例性实施方式,并且与说明书一起用于说明本公开的原理。
在附图中:
图1是例示根据本发明的实施方式的移动终端和连接到该移动终端的外部电子装置的图;
图2是例示根据本发明的实施方式的移动终端的配置的图;
图3A和图3B是立体图,每个立体图均例示根据本发明的实施方式的移动终端的外观;
图4是例示连接到根据本发明的实施方式的移动终端的外部电子装置的配置的框图;
图5是用于描述控制根据本发明的实施方式的移动终端的方法的流程图;
图6A和图6B是例示控制图5中的移动终端的方法的图;
图7A至图7C是描述如下方法的图,在所述方法的每一个方法中,显示在与根据本发明的实施方式的移动终端连接的外部电子装置上的画面信息被显示在移动终端上;
图8是用于描述在画面信息显示在移动终端上的状态下,当在移动终端中发生事件时所使用的处理方法的图,该画面信息输出到与根据本发明的实施方式的移动终端连接的外部电子装置;
图9A和图9B是用于描述将显示在移动终端上的画面信息输出到与根据本发明的实施方式的移动终端连接的外部电子装置的方法的图;
图10A和图10B是在观看显示在与根据本发明的移动终端连接的外部电子装置上的画面信息时,在移动终端中发生事件的情况下,用于在外部电子装置中处理发生的事件的操作方法的图;
图11A和图11B是描述用于远程地控制被输出到根据本发明的实施方式的移动终端和与该移动终端连接的外部电子装置中的每一个的画面信息的操作方法的图。
图12是用于描述这样一种操作方法的图,在该操作方法中,在画面信息显示在移动终端上的状态下,根据触摸输入将预定信息输入到画面信息,该画面信息输出到与根据本发明的实施方式的移动终端连接的外部电子装置;
图13A是描述这样一种操作方法的图,该操作方法用于基于根据本发明的实施方式的移动终端与用户位置之间的距离来控制输出到移动终端的画面信息;以及
图13B是用于这样一种操作方法的描述的图,在该操作方法中,基于用户凝视,将连接到根据本发明的实施方式的移动终端的外部电子装置的输出状态切换到安全模式。
具体实施方式
除非进行不同定义,否则本文中所使用的、包括技术或科学术语的所有术语具有与与本发明的领域有关的本领域技术人员通常理解的术语相同的含义。在通常的字典中所定义的术语应理解为具有与相关领域的上下文的含义相同的含义。除非在本发明中明确定义,否则该术语不被解释为理想的或过于正式的含义。另外,当在本发明中所使用的技术术语是无法准确地表达本发明的技术的不适合的技术术语时,应当由本领域技术人员可以理解的适合的技术术语来代替所述不适合的技术术语。在本发明中使用的通用术语,应当基于前一个或下一个上下文来解释,但不应该被解释为过于狭窄的含义。
单数表达包括复数概念,除非二者在上下文中具有明显差异。在本发明中,术语“包括”或“具有”不应该被解释为绝对包括本说明书中的多个部件或步骤。相反,术语“包括”或“具有”可以不包括某些部件或某些步骤,或者还可以包括额外的部件。
附接到无线扬声器的部件的后缀(诸如‘模块’和‘单元或部分’)用于使本发明的详细描述方便。因此,后缀不具有彼此不同的含义。
虽然‘第一’、‘第二’等的术语用于说明各种部件,但是所述部件并不限于这些术语。该术语仅用于区分一个部件与另一个部件。例如,在本发明的范围内,第一部件可以被称为第二部件,或者类似地,第二部件可以被称为第一部件。
在下文中,将参照附图更加详细地说明本发明的优选实施方式。一个实施方式与其它实施方式的相同或相似的部件将具有相同或类似的附图标记,并且其详细说明将被省略。
如果认为相关技术的详细描述不在本发明的范围内,则详细的描述将被省略。此外,还应当理解的是,实施方式不被上述描述的任何细节所限制,而应该在其精神和范围内被广泛地解释,并且本发明旨在涵盖落入所附权利要求及其等同物的范围内的本发明的修改和变型
根据本发明的移动终端可以包括智能电话、膝上型计算机、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航仪等等。然而,对于本领域技术人员而言将显而易见的是,除了针对移动的特定配置之外,本发明还可以应用于诸如数字TV和桌上型计算机的固定终端。
图1是例示根据本发明的实施方式的移动终端和连接到该移动终端的外部电子装置的图。
参照图1,移动终端100通过有线或无线方式连接到例如图形显示装置200的外部电子装置。移动终端100连接到图形显示装置200,并且因此向图形显示装置200发送显示在该移动终端100上的内容。另外,图形显示装置200连接到移动终端100,并且因此向移动终端100发送输出到图形显示装置200的内容和与所述内容有关的信息。
另一方面,尽管在图1中没有示出,但是移动终端100和图形显示装置200连接到预定服务器(未示出)。在这种情况下,移动终端100请求服务发送已经存储的数据,并且请求服务器向图形显示装置200发送数据。
移动终端100和图形显示装置200通过使用诸如数字生活网络联盟(DLNA)指南、Wi-Fi标准、Wi-Fi直接标准(Wi-Fi Direct standards)和蓝牙标准的无线连接标准来彼此连接。这种移动终端100与图形显示装置200之间的连接或连接性是一对。
当移动终端100与图形显示装置200在这种方式下彼此无线连接时,利用使用远程帧缓冲器(RFB)协议的虚拟网络计算(VNC)技术,根据图形显示装置200远程地控制移动终端100,或者根据移动终端100远程地控制图形显示装置200。
另一方面,图1例示电视机作为图形显示装置200的示例,和空间遥控器作为用于远程地控制图形显示装置200的外部输入设备300的示例。外部输入设备300根据RF通信标准,向图形显示装置200发送信号和从图形显示装置200接收信号。响应于由用户进行的该外部输入设备300的上下、左右、前后移动或旋转,在该外部输入设备300的画面上显示与外部输入设备300的移动相对应的指示器101。因为指示器在移动时,101根据外部输入设备300的空间移动显示在图形显示装置200的画面上,所以将该外部输入设备300称为空间遥控器。
图2是根据本发明的实施方式的移动终端100框图。
如图2所示,移动终端100包括无线电通信单元110、A/V(音频/视频)输入单元120(‘用户跟踪单元’)、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180和电源190。图1示出了具有各种部件的移动终端100,但是可以理解实现所有所示部件不是必需的。移动终端100可以由更多或更少的部件来实现。
之后,将说明上述部件110~190中的每一个。
无线电通信单元110通常包括一个或更多个部件,其用于准许移动终端100与无线电通信单元系统之间或者移动终端100与该移动终端100所在的网络之间的无线通信。例如,无线电通信单元110可以包括广播接收模块111、移动通信模块112、无线因特网模块113、短程通信模块114、位置信息模块115等等。
广播接收模块111经由广播频道从外部广播管理服务器(或其它网络实体)接收广播信号和/或广播相关信息。广播相关信息可以指代与广播频道、广播节目或广播服务提供商相关联的信息。所述广播相关信息还可以经由移动通信网络来提供。在这种情况下,广播相关信息可以由移动通信模块112接收。经由广播接收模块111接收到的广播信号和/或广播相关信息可以存储在存储器160中。
移动通信模块112向基站、外部终端和服务器中的至少一个发送无线电信号和/或从基站、外部移动终端和服务器中的至少一个接收无线电信号。根据文本和/或多媒体消息发送和/或接收,这样的无线电信号可以包括音频呼叫信号、视频呼叫信号或者各种类型的数据。
无线因特网模块113支持用于移动终端的无线因特网接入。该模块可以内部或外部地连接到移动终端100。这里,作为无线因特网技术,可以使用无线局域网(WLAN)、Wi-Fi、无线宽带(Wibro)、全球微波接入互操作性(WiMAX)、高速下行链路分组接入(HSDPA)等等。
短程通信模块114是用于支持短程通信的模块。短程通信技术的一些示例包括BluetoothTM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、ZigBeeTM等等。
位置信息模块115是用于获取移动通信终端的位置(或定位)的模块。例如,位置信息模块115可以包括GPS(全球定位系统)模块。
参照图2,A/V输入单元120被配置为基于接收到的信号来接收音频或视频信号,并且跟踪用户。A/V输入单元120可以包括摄像头121、麦克风122和红外传感器123等。摄像头121在视频捕捉模式或者图像捕捉模式中对由图像捕捉设备所获取的静态图片或视频的图像数据进行处理。可以在显示单元151上显示经处理的图像帧。由摄像头121处理的图像帧可以存储在存储器160中或者经由无线电通信单元110发送。可以根据移动通信终端的配置提供两个或更多个摄像头121。
麦克风122可以在电话呼叫模式、记录模式、语音识别模式等中经由麦克风接收声音(听觉数据),并且可以将这些声音处理成音频数据。在电话呼叫模式中,可以将麦克风122处理的音频(语音)数据转换成可经由移动通信模块112向移动通信基站发送的格式,以进行输出。麦克风122可以实现各种类型的噪声消除(或抑制)算法,以消除(或抑制)在接收和发送音频信号的过程中所生成的噪声或干扰。
用户输入单元130可以根据用户输入的命令生成密钥输入数据,以控制移动通信终端的各种操作。用户输入单元130允许用户输入各种类型的信息,并且可以包括小键盘、薄膜开关(dome switch)、触摸板(例如,由于被接触而检测电阻、压力、电容等的变化的触摸感测构件)、操作轮、操作开关等等。
感测单元140检测移动终端100的当前状况(或者状态),诸如移动终端的打开或关闭状态、移动终端100的位置、用户与移动终端100触摸(接触)与否(例如触摸输入)、移动终端100的定向(orientation)、移动终端100的加速或减速运动和方向等等,并且生成用于控制移动终端100的操作的命令或信号。例如,当移动终端100实现为滑盖型移动电话时,感测单元140可以感测滑盖电话是打开还是闭合。另外,感测单元140可以检测电源单元190是否提供电力或者接口单元170是否与外部设备连接。
感测单元140可以包括接近传感器141。感测单元140还可以包括触摸传感器(未示出),所述触摸传感器用于感测显示单元151上的触摸操作。
触摸传感器可以实现为触摸膜、触摸片、触摸板等等。触摸传感器可以被配置为将施加到显示单元151的特定部分的压力或者从显示单元151的特定部分发生的电容的变化转换成电输入信号。此外,触摸传感器可以被配置为不仅感测触摸对象的触摸位置和触摸面积,而且还感测触摸压力。
如果显示单元151和触摸感测传感器(被称为‘触摸传感器’)之间具有分层结构,则可以将该结构称为触摸屏。显示单元151可以被用作输入设备而不是输出设备。这样的显示单元151可以被称为‘触摸屏’。
当通过触摸传感器感测到触摸输入时,向触摸控制器发送相应的信号(为示出)。触摸控制器处理接收到的信号,并且然后向控制器180发送相应的数据。因此,控制器180可以感测到显示单元151的哪个区域已被触摸。
当触摸屏实现为电容型时,通过电磁场的改变来感测指示器与触摸屏的接近。该情况下,触摸屏(触摸传感器)可以被分类为接近传感器141。
接近传感器141指示在没有机械接触的情况下,通过使用电磁场或者红外线,感测接近要被感测的表面的对象或者被布置在要被感测的表面附近的对象的存在与否的传感器。接近传感器141具有比接触传感器更长的寿命和更强的效用。接近传感器141可以包括透射型光电传感器、直接反射型光电传感器、镜面反射型光电传感器、高频振荡接近传感器、电容型接近传感器、磁型接近传感器、红外线接近传感器等等。
在以下描述中,出于简要的目的,将指示器被定位为接近触摸屏而不接触的识别称为‘接近触摸’,而将指示器在触摸屏上实际接触的识别称为‘接触触摸’。
接近传感器141检测接近触摸和接近触摸模式(例如,接近触摸距离、接近触摸速度、接近触摸时间、接近触摸位置、接近触摸运动状态等等),并且可以将与感测到的接近触摸操作和接近触摸模式相对应的信息输出到触摸屏。
输出单元150被配置为以视觉、听觉和/或触觉方式(里,音频信号、视频信号、警报信号、振动信号等)提供输出。输出单元150可以包括显示单元151、音频输出模块152、警报单元153和触觉模块154。
显示单元151可以显示在移动终端100中所处理的信息。例如,当在电话呼叫模式中操作移动终端100时,显示单元151可以显示与呼叫相关联的用户界面(UI)或图形用户界面(GUI)。当移动终端100处于视频呼叫模式或图像捕捉模式中时,显示单元151可以显示捕捉的和/或接收的图像、UI或者GUI。
显示单元151可以包括液晶显示器(LCD)、薄膜晶体管LCD(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器和电子墨水显示器中的至少一种。
这些显示器151中的一些可以被配置为是透明的,使得外部可以通过其可见,这样的显示器可以被称为透明显示器。这种透明显示器的代表性示例可以包括透明有机发光二极管(TOLED)等等。移动终端100可以包括两个或更多个显示器151。显示单元151的后表面部分也可以被实现为是光学透明的。在这种配置下,用户可以通过被主体的显示单元151占据的区域来观看位于该主体后侧的对象。
根据移动终端100的配置方面,可以实现数量为两个或更多个的显示单元151。例如,多个显示器151可以集成或单独地排列在一个表面上,或者可以排列在不同表面上。
音频输出模块152可以在呼叫接收模式、呼叫模式、记录模式、语音识别模式、广播接收模式等等中输出从无线电通信单元110接收到的或者存储在存储器160中的音频数据。此外,音频输出模块152可以提供与在移动终端100中执行的特定功能(例如,呼叫信号接收声音、消息接收声音等)相关的听觉输出。音频输出模块152可以包括接收器、扬声器、蜂鸣器等等。
警报单元153输出用于通知移动终端100的事件的发生的信号。在移动终端中生成的事件可以包括呼叫信号接收、消息接收、键盘信号输入等。除了视频或音频信号之外,警报单元153还可以以不同的方式输出信号,例如通知事件的发生。例如,警报单元153可以以振动的形式输出信号。可以通过显示单元151或音频输出模块152输出视频或音频信号。因此,可以将显示单元151和音频输出模块152分类为警报单元153的一部分。
触觉模块154生成用户可以感觉到的各种触觉效果。由触觉模块154生成的触觉效果的典型示例是振动。触觉模块154的强度和模式是可控的。例如,可以将不同的振动相组合以被输出或顺序输出。
除了振动之外,触觉模块154还可以生成各种其它的触觉效果,诸如由例如相对于接触皮肤垂直移动的针的排列、通过喷射孔/吸入开口的空气的喷力或吸力、皮肤上的接触、电极的接触、静电力等的刺激引起的效果、由使用可以吸热或生热的元件再现冷或和热的感觉的效果等等。
触觉模块154可以实现为允许用户通过诸如该用户的手指或手臂的肌肉感觉来感觉触觉效果,以及通过直接接触来传递该触觉效果。根据移动终端100的配置可以设置两个或更多个触觉模块154。
存储器单元160可以存储用于对控制器180执行的操作进行处理和控制的程序,或者可以临时存储输入或输出的数据(例如,地图数据、电话簿、消息、静态图像、视频等等)。当感测到针对触摸屏的触摸输入时,存储器160可以存储与振动和声音输出的各种模式有关的数据。
存储器160可以包括含有闪存、硬盘、多媒体卡微型、存储卡型(例如,SD或DX存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘、光盘的存储介质中的至少一种类型。此外,移动终端100可以相对于在因特网上执行存储器160的存储功能的网络存储设备进行操作。
接口单元170用作与和移动终端100连接的每个设备接口的连接。例如,外部设备可以向外部设备发送数据,向向移动终端100中的每个元件接收和发送电力,或者向外部设备发送移动终端100的内部数据。例如,接口单元170可以包括有线/无线耳机端口、外部电源端口、有线或无线的数据端口、存储卡端口、用于连接具有标识模块的设备的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。
这里,标识模块可以是存储用于对使用移动终端100的权限进行验证的各种信息的芯片,并且可以包括用户识别模块(UIM)、订户识别模块(SIM)、通用订户识别模块(USIM)等等。此外,具有标识模块的设备(下文中称为‘标识设备’)可以采取的智能卡的形式。因此,可以经由接口单元170将标识设备与移动终端100连接。
当移动终端100与外部托架连接时,接口单元170可以用作允许将来自托架的电力通过该接口单元170提供给移动终端100的通道,或者用作允许将用户从托架输入的各种命令信号通过该接口单元170被传递给移动终端的通道。来自托架的各种命令信号或电力输入可以操作为用于识别将移动终端100准确安装在托架的信号。
控制器180通常控制移动终端100的一般操作。例如,控制器180执行与语音呼叫、数据通信、视频呼叫等相关联的控制和处理。控制器180可以包括再现多媒体数据的多媒体模块181。多媒体模块181可以被配置在控制器180内,或者可以被配置为与控制器180分离。控制器180可以执行模式识别处理,以将在触摸屏上所执行的手写输入或绘图输入分别识别为字符或图像。
在控制器180的控制下,电源单元190接收外部电力或内部电力,并且提供操作相应的元件和部件所需的适当电力。
可以使用例如软件、硬件或其任何组合以计算机可读或其类似介质来实现这里所描述的各种实施方式。
对于硬件实现,可以通过使用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、设计为执行这里描述的功能的电子单元中的至少一种来实现这里描述的实施方式。在一些情况下,可以由控制器180本身来实现这样的实施方式。
对于软件实现,可以由单独的软件模块实现这里描述的诸如过程或功能的实施方式。每个软件模块可以执行这里描述的一个或更多个功能或操作。可以由以任何适当的编程语言编写的软件应用来实现软件代码。软件代码可以存储在存储器160中并由控制器180执行。
下文中,将说明处理针对移动终端100的用户输入的方法。
用户输入单元130可以被操控为接收用于控制移动终端100的操作的命令,并且可以包括多个操控单元。所述操控单元可以被称为操控部,并且可以包括能够以用户触觉方式来操控类型中的任何类型。
可以在显示单元151上显示各种类型的可视信息。这样的信息可以以诸如字符、数字、符号、图形、图标等多个形式来显示。另选地,这样的信息可以实现为3D立体图像。为了输入这样的信息,字符、数字、符号、图形或图标中的至少一个可以以预设配置排列或显示,从而以键区的形式实现。这样的键区可以称为‘软键’。
显示单元151可以被操作单一整个区域或者被划分为多个区域。对于后一种情况,所述多个区域可以彼此协作。例如,可在显示单元151的上部和下部分别显示输出窗口和输入窗口。可以在输入窗口上输出代表用于输入电话号码的数字等的软键。当触摸软键时,在输出窗口上输出与所触摸的软键相对应的数字。在对操控单元进行操控时,尝试针对显示在输出窗口上的电话号码的呼叫连接,或者可以向应用输入输出在输出窗口上的文本。
除了在实施方式中所示的输入方式之外,显示单元151或者触摸板可以滚动以接收触摸。用户可以滚动显示单元151或者触摸板,以移动位于显示在显示单元151上的对象(例如,图标等)上的光标或指示器。另外,在于显示单元151或触摸板上移动手指的情况下,可以在显示单元151上直观地显示手指移动的路径,这在编辑显示在显示单元151上的图像时是有用的。
可以与在显示单元151(触摸屏)和触摸板在特定时间内一起被触摸的情况相对应地执行终端的一个功能。一起被触摸的示例可以包括利用用户的拇指和食指夹住主体。所述一个功能例如可以是显示单元151或触摸板的激活或去激活。
图3A和图3B是示出根据本发明的移动终端100的外观的立体图。
图3A是示出根据本发明的移动终端100的前表面和一个侧表面的视图,并且图3B是示出移动终端100的后表面和另一个侧表面。
如图3A所示,该移动终端100直板型移动终端。然而,本发明不限于此,而是还可应用于诸如滑盖型、折叠型、旋转型、摆动型等等,在滑盖型中两个或更多个主体彼此连接以执行相对运动。
形成主体的外观的壳体(或者称为外壳、外罩、盖等)可以包括前壳体101和后壳体102。由前壳体101和后壳体102形成的空间可以在其中容纳各种部件。还可以在前壳体101与后壳体102之间布置至少一个中间壳体。
这些壳体可以通过注射成型的合成树脂形成,或者通过使用诸如不锈钢(STS)或钛(Ti)的金属材料来形成。
在前壳体101上,可以布置显示单元151、音频输出单元152、摄像头121、用户输入单元130(参见图1)、麦克风122、接口单元170等。
显示单元151占据前壳体101的主表面的大部分。音频输出单元152和摄像头121被排列在与显示单元151的一端相邻的区域上,并且用户输入单元131和麦克风122被排列在与显示单元151的另一端相邻的区域上。用户输入单元132、接口单元170等可以被排列在前壳体101与后壳体102的侧面上。
用户输入单元130被操控为接收用于控制移动终端100的操作的命令,并且可以包括多个操控单元131和132。
操控单元131和132可接收各种命令。例如,第一操控单元131被配置为输入诸如START、END、SCROLL等的命令,并且第二操控单元132被配置为输入用于控制从音频输出单元152输出的声音的等级的命令,或者用于将显示单元151的当前模式转换到触摸识别模式的命令。
参照图3B,可以在后壳体102上额外地设置摄像头121’。摄像头121’面对与摄像头121所面对的方向(参见图2A)相反的方向,并且可以具有与摄像头121不同的像素。
例如,可以以相对较低的像素(低分辨率)操作摄像头121。因此,在视频呼叫等期间,当用户能够捕捉他的面部并且将其发送给另一方时,摄像头121可能是有用的。另一方面,可以以相对较高的像素(高分辨率)操作摄像头121’,使得为了使用户获得用于稍后使用的高质量图片,该摄像头121’可能是有用的。
可以在终端主体上安装摄像头121和121',以便于旋转或弹出。
可以额外地靠近摄像头121’来布置闪光灯123和反射镜(未示出)124。当使用摄像头121’来拍摄图片时,闪光灯123与摄像头121’结合操作。反射镜124可以与摄像头121’协作,以允许用户在自拍模式下拍摄自己。
可以在终端主体的后表面上额外地排列音频输出模块152’。音频输出单元152’可以与被布置在终端主体的前表面上的音频输出单元152(参见图2A)协作,以实现立体声功能。此外,可以将后置音频输出单元152’配置为作为扬声器进行操作。
可以在在终端主体的侧表面上额外地布置广播信号接收天线116以及用户呼叫的天线。广播接收模块111(参照图1)的广播信号接收天线116可以被配置为缩回到终端主体中。
可以将用于向移动终端100提供电力的电源单元190安装到主体。电源单元190可以安装在主体中,或者可以可拆卸地安装到主体。
可以将用于感测触摸的触摸板135额外地安装到后壳体102。与显示单元151(参见图3A)相类似,触摸板135可以实现为透光型。触摸板135还可以额外地安装有后显示单元,以输出可视信息。可以由触摸板135控制从显示单元151(前显示器)和后显示器输出的信息。
触摸板135与显示单元151相关联地操作。触摸板135可以平行地布置在显示单元151的后表面上。触摸板135可以具有与显示单元151的尺寸相等或者比显示单元151的尺寸更小的尺寸。
图4是例示与本发明相关联的图形显示装置200和外部输入设备300的框图。
图形显示装置200在整个本说明书中包括接收和显示无线电广播或记录并且再现移动图像的装置,以及记录并且再现音频的装置。
图形显示装置200包括调谐器210、解调单元220、信号输入和输出单元230、接口单元240、控制器250、存储单元269、显示单元270和音频输出单元280外部输入设备300是与图形显示装置200分离的装置,但是可以被包括作为该图形显示装置200的一个组成元件。
参照图4,调谐器210从射频(RF)广播信号中选择与用户所选择的频道相对应的广播信号,并且将选择的广播信号转换成中频信号或者基带视频和语音信号。例如,如果RF广播信号是数字广播信号,则调谐器210将RF广播信号转换成数字IF信号(DIF)。相反,如果RF广播信号是模拟广播信号,则调谐器210将RF广播信号转换成基带视频和语音信号(CVBS/SIF)。在这种方式下,调谐器210是处理数字广播信号和模拟广播信号的混合调谐器。
从调谐器210输出的数字IF信号(DIF)被输入到解调单元220,并且从调谐器210输出的模拟基带视频和语音信号(CVBS/SIF)被输入到控制器250。
调谐器210接收根据先进电视系统委员会(ATSC)标准的单载波RF广播信号和根据数字视频广播(DVB)标准的多载波RF广播信号。尽管在附图中示出了一个调谐器210,但是图形显示装置200不限于一个调谐器并且可以包括多个调谐器(例如,第一调谐器和第二调谐器)。在这种情况下,第一调谐器接收与用户选择的广播频道相对应的第一RF广播信号,并且第二调谐器顺序并且定期接收与已存储的广播频道相对应的第二RF广播信号。第二调谐器按照与第一调谐器相同的方式,将RF广播信号转换成数字IF信号(DIF),或者模拟基带视频和语音信号(CVBS/SIF)。
解调单元220接收由于转换而产生的数字IF信号(DIF)并且执行解调操作。
从调谐器210输出的数字IF信号(DIF)在ATSC格式中,解调单元220执行8残留边带(8-VSB:8-vestigial side band)调制。8残留边带(8-VSB)解调由于残留边带调制而产生,其是使用国家电视系统委员会(NTSC)频率带宽的单载波振幅调制。此时,解调单元220执行诸如Trellis解码、解交织和Reed-Solomon解码的信道解码。为此,解调单元220包括Trellis解码器、解交织器、Reed-Solomon解码器等。
当从调谐器210输出的数字IF信号(DIF)在DVB格式中时,解调单元220执行编码正交频分调制(COFDMA)调制。此时,解调单元220执行诸如卷积解码、解交织以及Reed-Solomon解码的信道解码。
为此,解调单元220包括卷积解码器、解交织器以及Reed-Solomon解码器。
在这种方式下,在执行解调和信道解码之后,解调单元220输出流信号TS。此时,流信号由于对视频信号、语音信号或数据信号进行复用而产生。例如,流信号TS是由于对MPEG-2标准视频信号、Dolby AC-3标准视频信号等进行复用而产生的MPEG-2传输流(TS)。这里,MPEG-2TS包括4个字节的头和184个字节的有效载荷。
在这种方式下,从解调单元220输出的信号被输入到控制器250,并且通过反向复用以及视频和语音信号处理。
信号输入和输出单元230通过有线或无线的方式连接到外部装置(例如,数字多功能光盘(DVD)播放器、蓝光光盘播放器、游戏装置、照相机、磁带录象机,笔记本式计算机、机顶盒、便携式设备、智能电话等),并且执行信号输入和输出操作。为此,信号输入和输出单元230包括用于连接到有线网络的A/V输入和输出单元以及用于连接到无线链网络的无线通信单元。
A/V输入/输出单元包括以太网端口、USB端口、复合视频银行同步(CVBS)端口、复合端口、S-视频端口(模拟)、数字视频接口(DVI)端口、高清多媒体接口(HDMI)端口、移动高清链接(MHL)端口、RGB端口、D-SUB接口、IEEE1394端口、SPDIF端口、液晶HD端口等。将通过这些端口输入的数字信号传递给控制器250。此时,经CVBS端口和S-VIDEO端口输入的模拟信号通过模拟-至-数字转换器(未示出)被转换成数字信号,并且被传递给控制器250。
无线通信单元执行与因特网的无线通信。无线通信单元通过使用诸如无线LAN(WLAN)(Wi-Fi)、无线宽带(WiBro)、全球微波接入互操作性(Wimax)和高速下行链路分组接入(HSDPA)的无线通信技术来执行与因特网的无线通信。另外,无线通信单元可以执行与不同的电子装置的短程通信。例如,无线通信单元通过使用诸如Bluetooth、射频识别(RFID)、红外线通信(IrDA、红外数据协会)、超宽带(UWB)和ZigBee的短程通信技术来执行短程通信。
信号输入和输出单元230经由无线和有线网络连接到预定网页,并且因此向服务器发送数据并且从服务器额外接收由内容服务提供商或者网络管理器提供的内容或各项数据,例如,诸如电影、广告、游戏、VOD和广播信号的内容以及与该内容有关的各项信息。
信号输入和输出单元230经由有线或无线网络接收固件更新信息并且更新由网络管理器提供的文件,并且接收用户在被放置在公共领域中的应用当中选择的应用。
信号输入和输出单元230向控制器250传递由外部装置提供的图像信号、语音信号和数据信号。另外,信号输入和输出单元230向控制器250传递被包括在存储于外部存储设备(诸如存储器设备和硬盘驱动)内的各种媒体文件中的图像信号、语音信号和数据信号。另外,信号输入和输出单元230向上述外部装置或不同的外部装置传递由控制器250处理的图像信号、语音信号和数据信号。
更具体地说,信号输入和输出单元230通过上述端口中的至少一个端口连接到机顶盒(例如用于因特网协议TV(IPTV)的机顶盒),并且执行信号输入和输出操作。
另外,信号输入和输出单元230在图像信号、语音信号和数据信号可用于双向通信的方式下,向控制器250传递由用于IPTV的机顶盒处理的图像信号、语音信号和数据信号,并且向用于IPTV的机顶盒传递由控制器250处理的信号。IPTV在这里包括ADSL-TV、VDSL-TV和FTTH-TV,所述ADSL-TV、VDSL-TV和FTTH-TV在传输网络中是不同的。IPTV包括通过DSL上的TV、DSL上的视频、IP(TVIP)上的TV、宽带TV(BTV)等。另外,IPTV包括其中可以进行因特网连接的因特网TV和全浏览TV。
从信号输入和输出单元230输出的数字信号还包括流信号TS。上述流信号TS是由于对图像信号、语音信号和数据进行复用而产生的信号。
接口单元240向控制器250传递用户输入的信号,或者向用户传递从控制器250传递的信号。
接口单元240向控制器250传递被输入到电源键、频道键、音量键、设置键等的用户输入信号。另外,接口单元240包括用于感测用户手势、用户位置、触摸等的感测单元(未示出)。为此,感测单元包括触摸传感器、语音传感器、位置传感器、运动传感器、陀螺仪传感器等。在这种情况下,接口单元240向控制器250传递从感测单元输入的输入信号,或者向感测单元发送来自控制器250的信号。
接口单元240接收用户利用遥控器(例如,空间遥控器)输入的输入信号,以执行电源控制、频道、选择、画面设置等,或者向外部输入设备300发送由控制器250处理的信号。此时,接口单元240和外部输入设备300通过有线或无线方式彼此连接。
另外,接口单元240从外部输入设备300接收个人信息和/或通过使用所述个人信息接收与连接的网络服务器有关的信息。例如,如果移动终端在预定距离内接近外部输入设备并且执行近场通信(NFC),则外部输入设备300接收存储在移动终端中的个人信息和其它。个人信息在这里是在连接到电子装置或者使用该服务之前,利用预定账户登录所必需的信息。
控制器250控制图形显示装置200的一般操作。具体地说,控制器250通过对流信号TS进行反向复用,或者通过对反向复用的信号进行处理,来生成或者输出用于图像或语音输入的信号,该流信号TS通过调谐器210、解调单元220和/或信号输入和输出单元230接收。例如,控制器250控制器调谐器210,以对与用户选择的频道相对应的RF广播信号或者已经存储的频道进行调谐。
由控制器250进行图像处理的图像信号被传递给显示单元270并且输出与分辨率图像信号相对应的图像。由控制器250处理的语音信号被传递给音频输出单元280并且输出声音。另外,由控制器250处理的图像信号和/或语音信号,通过信号输入和输出单元230被输入到外部装置的输入设备中。
尽管在附图中没有示出,但是为了通过对流信号TS进行反向复用或者通过对反向复用的信号进行处理来生成或者输出用于图像或声音输出的信号,控制器250例如包括逆多路复用单元、图像处理单元、屏幕上显示(OSD)生成单元与语音处理单元、数据处理单元、频道浏览处理单元以及其它。
反向复用单元(未示出)对输出的流信号TS进行反向复用。例如,如果输入MPEG-2流信号TS,则反向复用单元将MPEG-2流信号TS反向复用到图像信号、语音信号和数据信号。如上所述,流信号TS在这里是从调谐器210、解调单元220和/或信号输入和输出单元230的输出。
成像处理单元(未示出)对反向复用的图像信号执行例如解码的图像处理。更具体地说,图像处理单元通过使用MPEG-2解码器对MPEG-1标准编码的图像信号进行解码,并且通过使用H.264解码器对根据数字多媒体广播(DMB)标准或数字视频广播-手持(DVB-H)标准的H.264标准编码的图像信号进行解码。另外,图像处理单元以调节图像信号的亮度、色度和色彩的方式执行成像处理。另外,图像处理单元以在显示单元270上输出反向复用的图像信号的方式执行缩放。在这种方式下,通过外部输入端口将由图像处理单元进行图像处理的图像信号传递给显示单元270或者传递给外部输出装置(未示出)。
OSD生成单元(未示出)根据用户输入或在其自身中生成OSD信号。更具体地说,OSD生成单元例如基于图像信号和数据信号或者从外部输入设备300接收的输入信号中的至少一个,在显示单元270的画面上生成用于以图形或文本的形式显示各项信息的信号。生成的OSD信号包括由图形显示装置200提供的用户接口、各种菜单画面、窗口小部件和图标以及与从外部输入设备300发送的指向信号相对应的指示器。另外,生成的OSD信号包括2D对象或3D对象。
控制器250将由OSD生成单元生成的OSD信号与由图像处理单元进行图像处理并且解码的图像信号混合。被混合的图像信号通过帧率转换(FRC)来改变其图像帧率。另外,被混合的图像信号通过格式器并且以其被改变的图像信号格式被输出,或者被分离成2D图像信号和用于3D图像显示的3D图像信号,或者从2D图像信号转换成3D图像信号。
语音处理单元(未示出)对反向复用的语音信号执行例如解码的语音处理。更具体地说,语音处理单元通过使用MPEG-2解码器对MPEG-2标准编码的语音信号进行解码,通过使用MPEG4解码器对根据DMB标准的MPEG4比特分片算术编码(BSAC)标准编码的语音信号进行解码,并且通过使用AAC解码器对根据卫星DMB标准或者数字视频广播-手持(DVB-H)标准的MPEG2先进音频编码(AAC)标准编码的语音信号进行解码。另外,语音处理单元执行基础处理、高音处理和音量处理。由语音处理单元在这种方式下处理的语音信号被传递给音频输出单元280(例如扬声器),或者被传递给外部输出设备。
数据处理单元(未示出)对反向复用的语音信号执行例如解码的数据处理。数据信号在这里包括电子节目指南(EPG)信息,其包括诸如在每个频道上广播的广播节目的广播开始时间和广播结束时间的广播信息。EPG信息在ATSC标准的情况下例如包括ATSC节目和系统信息协议(ATSC-PSIP)信息,并且在DVB的情况下包括DVB-服务信息(DVB-SI)信息。ATSC-PSIP信息或者DVB-SI信息在这里被包括在MPEG-2流信号TS的头(4个字节)中。
频道浏览处理单元(未示出)接收从解调单元220输出的流信号TS或者从信号输入和输出单元230输出的流信号作为输入,并且从其中提取图像,由此生成缩略图图像。生成的缩略图图像原样或者被编码,被输入到控制器250。在这种情况下,控制器250通过使用输入的缩略图图像在显示单元270上显示包括多个缩略图图像的缩略图列表。此时,缩略图列表中的缩略图图像显示在显示单元270的所有区域上,或者按照使得所述缩略图图形能够容易地被观看到的方式显示在显示单元270的一个区域上。另外,顺序地更新缩略图列表中的缩略图图像。
另一方面,控制器250对模拟基带图像/语音(CVBS/SIF)执行信号处理。例如,输入到控制器250的模拟基带图像和语音信号(CVBS/SIF),是从调谐器210或者信号输入和输出单元230输出的模拟基带图像和语音信号。控制器250按照对被输入的模拟基带图像和语音信号(CVBS/SIF)进行处理、经信号处理的图像信号显示在显示单元270上以及将经信号处理的语音信号输出到音频输出单元280的方式,执行控制。
另外,控制器250利用通过信号输入和输出单元230输入的用户命令或者利用内部程序来控制图形显示装置200的操作。更具体地说,控制器250基于与图形显示装置200周围的相邻外部装置有关的信息(该信息是从信号输入和输出单元230或者接口单元240接收的)并且基于与不同的外部装置有关的远程控制信息(诸如频道、频率和编码),根据从外部输入设备300输入的个人信息来确定是否连接了外部装置。然后,控制器250在显示单元270上显示指示被连接的外部装置的对象。
另外,控制器250显示将要显示在显示单元270上的至少一个对象作为3D对象。例如,除了连接的网络屏幕(报纸、杂志等)和电子节目(EPG)指南之外,对象在这里包括各个项目的菜单、小窗口、图标、静态图像、移动图像和文本中的至少一个。
另外,控制器250通过单独或组合地分析由成像设备(未示出)捕捉的图像、由感测单元(未示出)检测的信号以及由外部输入设备300发送的输入信号来检测用户手势。
另外,控制器250识别用户的位置、由成像单元(未示出)捕捉的图像。例如,控制器250测量用户与图形显示装置200之间的距离(X轴坐标),并且额外地测量与用户的位置相对应的显示单元270内部的X轴坐标和Y轴坐标。
存储单元260用于存储由控制器250进行的信号处理和控制的程序,并且通过使用经信号处理的图像信号、语音信号和数据信号以及诸如生成频道映射写入的频道存储功能来存储与预定的广播频道有关的信息。存储单元260包括以下存储介质中的至少一种:闪存、硬盘、微型多媒体卡)、卡型存储器(例如,SD或XD存储器)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM),可编程只读存储器(PROM)、磁存储器、磁盘以及光盘。
另外,存储单元260存储用于控制不同的外部装置的IR格式关键代码并且存储用于多个外部装置的IR格式关键数据库。
由控制器250处理的图像信号、数据信号和OSD信号,或者从信号输入和输出单元230或接口单元140接收到的图像信号、数据信号和控制信号,被转换成RGB信号,并且生成驱动信号。通过该过程,将结果产生的图像输出到显示单元270。显示单元270以如下各种形式来实现:等离子体显示面板(PDP)、液晶显示器(LCD)、薄膜晶体管液晶显示器(TFT-LCD)、有机发光二极管(OLED)、柔性显示器、3D显示器和电子墨水显示器。
例如,如果显示单元270是3D显示器,则这是利用启动3D图像观看的附加显示类型或唯一显示类型来实现的。针对显示单元270的唯一显示类型用于唯一实现3D图像而不分离显示(例如,不使用一副眼镜)。例如,唯一显示类型被分类为透镜型和视差屏障型。另外,针对显示单元270的附加显示类型用于通过使用3D观看设备来实现3D图像。例如,附加显示类型被分类为头戴式显示器(HMD)型和眼镜型。
另外,如果利用配备有触摸屏的触摸屏实现显示单元270,则显示单元270用作输入设备以及输出设备。
触摸传感器按照将施加至显示单元270的特定部分的压力、发生在显示单元270的特定部分中的静电电容的改变等转换成电信号的方式配置。触摸传感器按照检测在触摸时施加至触摸传感器的压力、以及触摸对象触摸的触摸传感器的位置和面积的方式配置。触摸对象在这里是将触摸施加至触摸传感器的对象,并且例如包括手指、触摸笔和手写笔、指示器等。
如果触摸输入施加至触摸传感器,则向触摸控制器发送与触摸输入相对应的信号。在处理了信号之后,触摸控制器向控制器250发送对应数据。因此,控制器250识别在显示单元270的哪个区域上触摸。
音频输出单元280接收由控制器250处理的语音信号(例如,立体声信号或5.1频道信号)作为输出,并且输出与经处理的语音信号相对应的声音。为此,音频输出单元280实现为各种类型的扬声器。
图形显示装置200包括用于拍摄用户的成像单元(未示出)。成像单元实现为一个摄像头,但是不限于一个摄像头。成像单元可以实现为包括多个摄像头。与成像单元捕捉的图像有关的信息被输入到控制器250,并且控制器250基于所捕捉的图像相应地检测用户的手势。
另外,除了成像单元(未示出)之外,图形显示装置200还包括图像通信单元(未示出),其被配置为包括麦克风(未示出)。控制器250对由成像单元捕捉的图像有关的信息和由麦克风收集的信息进行信号处理,并且通过信号输入和输出单元230或者接口单元240向另一方的图像通信装置发送信号处理的结果。
电源单元(未示出)在整个板上向图形显示装置200提供电力。具体地说,电源单元向以片上系统(SOC)的形式实现的控制器250、用于显示图像的显示单元270和用于输出音频的音频输出单元180提供电力。
为此,电源单元(未示出)包括将DC电力转换成AC电力的转换器(未示出)。另一方面,例如如果显示单元270实现为包括多个背光灯的液晶面板,则电源单元还包括逆变器(未示出),在该逆变器中,可以进行用于亮度变化和调光驱动的PWM操作。
外部输入设备300通过有线或无线方式连接到接口单元240,并且向接口单元240发送根据用户输入生成的输入信号。外部输入设备300包括遥控器(例如,空间遥控器)、鼠标、键盘、轮等。遥控器通过使用蓝牙通信、RF通信、IR通信、超宽带(UWB)通信、ZigBee通信等向接口单元240发送输入信号。如果外部输入设备300具体地实现为空间遥控器,则该外部输入设备300通过检测主体的移动而生成输入信号。
另一方面,图形显示装置200实现为固定型数字广播接收机或移动数字广播接收机。
如果图形显示装置200实现为固定型数字广播接收机,则该图形显示装置200以接收以下广播类型中的至少一种的方式实现:将使用单载波的ATSC型(8-VSB型)施加至其的数字广播、将使用多载波的地波DVB-T型(COFDM型)施加至其的数字广播、以及将允许根据用户权限使用不同的广播频道的ISDB-T型(BST-OFDM型)数字广播施加至其中的数字广播。
如果图形显示装置200实现为移动数字广播接收机,则该图形显示装置200以接收以下广播类型中的至少一种的方式实现:将地波DMB型施加至其的数字广播、将卫星DMB型施加至其的数字广播、将ATSC-M/H型施加至其的数字广播、将数字视频广播-手持(DVB-H)型施加至其的数字广播以及将仅媒体前向链路型施加至其的数字广播。
另一方面,图形显示装置200实现为用于有线通信、卫星通信或IPTV的数字广播接收机。另外,上述图像显示装置200还应用于移动终端。
根据本发明的上述移动终端100连接到外部电子装置200,移动终端100的用户跟踪单元120检测针对外部电子装置200的用户凝视移动到作为基准的移动终端100的显示单元151的预定范围内。
当通过用户跟踪单元120检测到用户凝视移动时,移动终端100的控制器180接收输出到被连接的外部电子装置200的画面信息并且随着早先显示在移动终端100上的画面信息一起在显示单元151的一个区域上显示接收到的画面信息。
由此,如果在观看显示在移动终端100上的内容时,用户想要同时观看或使用显示在被连接的电子装置200上的内容,则他/她设置有这样一种用户环境,在该用户环境中,可以在一个装置中同时观看并且使用多项内容而不会导致交替观看相应装置的画面的不便。
下面参照图2、图5和图6A与图6B来详细地描述根据本发明的实施方式的控制移动终端的方法。
在该上下文中,图5是用于描述操作根据本发明的实施方式的移动终端的方法的流程图,并且图6A与图6B是例示操作图5中的移动终端的方法的图。
参照图5,根据本发明的实施方式的移动终端100在显示单元151上输出第一画面信息(S510)。
第一画面信息在这里是诸如包括图像或文本的页面、网页、电子邮件、电子文档和社交网络服务(SNS)的内容。
另外,例如,第一画面信息包括至少一个对象,诸如图标、窗口小部件、缩略图图像和应用的执行菜单。
通过使用诸如数字生活网络联盟(DLNA)指南、Wi-Fi标准、Wi-Fi直接标准和蓝牙标准的无线连接标准例如将移动终端100连接到至少一个外部电子装置200。
当移动终端100和外部电子装置200在这种方式下彼此连接时,移动终端100的用户跟踪单元120检测针对被连接的外部电子装置200的用户凝视移动到作为基准的显示单元151的预定范围内(S520)。
具体地说,用户跟踪单元120可以基于与是否检测用户的眼睛相对应的第一信号和与是否检测用户的眼睛相对应的第二信号来检测用户凝视的移动,该第一信号从通过无线连接单元110连接的外部电子装置200接收,该第二信号通过使用针对移动终端100设置的至少一个传感器(例如,摄像头121、麦克风122和/或红外线传感器123)来检测。
为此,连接到移动终端100的外部电子装置200通过使用摄像头(未示出)和被安装在该外部电子装置200上的传感器来搜索用户的眼睛,并且连续地或以预定的时间间隔通过移动终端100的无线通信单元110来发送搜索的结果。
例如,当通过被连接的外部电子装置200搜索到用户的眼睛时,移动终端100接收第一无线信号,并且当通过被连接的外部电子装置200搜索到用户的眼睛时,移动终端100接收能够与第一信号相区分的第二无线信号。
另一方面,从外部电子装置200接收到的信号被传递给控制器180,并且确定是否搜索用户的眼睛。控制器180为用户跟踪单元120提供与接收到的无线信号相对应的确定的结果。
另外,用户跟踪单元120包括眼睛搜索单元(未示出)。眼睛搜索单元通过使用摄像头211和/或红外线传感器123来搜索用户的眼睛。具体地说,红外线从红外线传感器123发出,并且红外线利用作为基准的显示单元151到达存在于预定观看范围内的用户的视网膜并且从用户的视网膜反射。所反射的红外线回射在眼睛搜索单元上。随后,眼睛搜索单元通过使用所反射的红外线和摄像头121捕捉的图像来跟踪用户凝视。
通过按照这种方式来组合从被连接的外部电子装置200接收到的无线信号和在移动终端100中执行用户的眼睛的搜索的结果,移动终端100识别出观看显示在外部电子装置200上的画面信息的用户凝视移动到作为基准的移动终端100的显示单元151内。该组合的结果由用户跟踪单元120或者由控制器180执行并且被传递给用户跟踪单元120。
移动终端100基于由用户跟踪单元120检测到的用户凝视,接收被输出到被连接的外部电子装置200的第二信息(S530)。
具体地说,当确定检测到的用户凝视从被连接的外部电子装置200移动到移动终端100的显示单元151时,控制器180请求外部电子装置200通过无线通信单元110发送被输出的画面信息。然后,响应于从移动终端100发送的请求,外部电子装置200向移动终端发送当前输出的画面信息和与所述画面信息有关的信息项。
第二画面信息在这里是诸如包括图像或文本的页面、网页、电子邮件、电子文档和社交网络服务(SNS)的内容并且是与广播有关的信息。例如,如果被连接的外部电子装置200是电视机,则第二画面信息包括与地面信道相对应的广播信号和与广播有关的信息。
另外,随着该第二画面信息,移动终端100还接收与第二画面信息有关的信息,例如,与第二画面信息有关的声音信息和控制该第二画面信息所需的控制信息。
当在这种方式下从被连接的外部电子装置200接收到第二画面信息时,控制器180随着第一画面信息一起在显示单元151的至少一个区域上显示接收到的第二画面信息(S540)。
为此,显示单元151可以划分成第一区域和能够与第一区域相区分的第二区域。另外,当由用户跟踪单元120检测到的用户凝视移动到作为基准的显示单元151的预定范围内时,控制器180可以在显示单元151的第一区域上显示第一画面信息并且可以在第二区域上显示第二画面信息。
另外,控制器180按照第二画面信息与区域的一个部分交叠的方式将第二画面信息输出到第一画面信息所输出到的区域的一个部分,并且在通过缩小第一画面信息所输出到的区域而获得的区域上输出第二画面信息。
例如,如图6A所示,当确定用户400的凝视从与移动终端100连接的图形显示装置200移动到移动终端100的显示单元151时,控制器180将输出到图形显示装置200的广播画面输出到移动终端100的一个区域,例如,上部区域。即,输出到图形显示装置200的广播画面610a显示在显示单元151的上部区域上,并且同时在该显示单元151的下部区域上显示内容画面610b。另外,控制器180接收与显示在显示单元151上的广播画面相对应的声音信息,并且将声音输出到音频输出模块152。
上面显示广播画面610a的移动终端100的显示单元151的区域和上面显示内容画面610b的区域以各种方式设置。
作为一个示例,控制器180基于触摸输入来设置上面显示第一画面信息和第二画面信息的区域。具体地说,控制器180可以基于用户进行的触摸输入来指定第二区域,并且在指定的第二区域上显示第二画面信息。例如,当第一画面信息被显示并且触摸输入施加至显示单元151上的第一位置时,控制器180按照第二画面信息与预定范围内的一区域交叠的方式,在预定范围内的该区域上输出第二画面信息,该区域的中心是第一位置。
作为另一个示例,控制器180基于用户凝视和移动终端的倾斜,来设置上面显示第一画面信息和第二画面信息的区域。为此,移动终端100还可以包括倾斜检测单元(未示出),该倾斜检测单元用于检测移动终端的倾斜。控制器180可以基于由用户跟踪单元120检测到的用户凝视和由倾斜检测单元检测到的移动终端的倾斜,来确定上面显示第二画面信息的第二区域。
例如,参照图6B,当检测移动终端的倾斜的结果是该移动终端处于纵向方向上时,按照广播画面610a显示在显示单元151的上部部分并且内容画面610b显示在显示单元151的下部部分的方式来提供设置。另外,例如,当检测移动终端10处于横向方向上并且用户凝视朝向显示单元151的左手区域时,按照广播画面610a显示在用户凝视停留在其上的区域上并且内容画面610b显示在与上面显示广播画面610a的区域面对的区域上方式来提供设置。
作为另一个示例,控制器180基于用户凝视的移动来改变上面显示第一画面信息和第二画面信息的区域。具体地说,如果检测到用户凝视停留在显示单元151的第一位置上,则控制器180可以使得第二画面信息显示在其中心是第一位置的区域上。
另一方面,在于移动终端100的显示单元151上同时输出第一画面信息和第二画面信息的状态下,当用户凝视在预定时间内停留在上面显示第二画面信息的区域上时,控制器180使得第二画面信息显示在显示单元151的所有区域上。
另一方面,在于移动终端100的显示单元151上同时输出第一画面信息和第二画面信息的状态下,当用户凝视在预定时间内停留在上面显示第二画面信息的区域上时,控制器180按照使得第二画面信息从显示单元151消失的方式来执行控制。因此,只在移动终端100的显示单元151上显示早先显示的第一画面信息。
如上所述,在根据本发明的实施方式的移动终端中,基于用户凝视,随着显示在移动终端上的画面一起输出显示在连接到移动中的外部电子装置上的内容画面,并且因此可以在一个装置中同时观看或者使用显示在多个装置上的画面。
参照图2和图7A至图7C,下面描述各种方法,在所述各种方法中的每一种方法中,第二画面信息显示在移动终端100的显示单元151上。在该上下文中,图7A至图7C是描述如下方法的图,在所述方法的每一种方法中,显示在外部电子装置上的画面信息显示在移动终端上,该外部电子装置连接到根据本发明的实施方式的移动终端。移动终端100将第一画面信息输出到显示单元151。
移动终端100例如通过使用诸如数字生活网络联盟(DLNA)指南、Wi-Fi标准、Wi-Fi直接标准(Wi-Fi)和蓝牙标准的无线连接标准连接到至少外部电子装置200。
当移动终端100和外部电子装置200在这种方式下彼此连接时,移动终端100的用户跟踪单元120检测针对外部电子装置200的用户凝视移动到作为基准的显示单元151的预定范围内。控制器180基于由用户跟踪单元120检测到的用户凝视,接收输出到被连接的外部电子装置200的第二画面信息,并且随着第一画面信息一起在显示单元151上显示接收到的第二画面信息。
在按照这种方式在显示单元151上同时显示第一画面信息和第二画面信息的状态下,当由跟踪单元120检测到的用户凝视在预定时间(例如,2秒或更长)内停留在上面显示第二画面信息的区域上时,控制器180可以使得第二画面信息显示在显示单元151的所有区域上。即,使得显示在显示单元151上的第一画面信息消失或者显示在背景中。
例如,参照图7A,在第二画面信息710a显示在一个区域(例如,移动终端100的显示单元151的上部区域)上并且第一画面信息710b显示在不同的区域(例如下部部分)上的状态下,当用户400在预定时间(例如,2秒)内在第二画面信息710a被输出到的区域上凝视时,在显示单元151的所有区域上显示第二画面信息。
即,设置切换为第二画面信息710c的画面。
另外,在于显示单元151上同时显示第一画面信息和第二画面信息的状态下,当用户凝视在预定时间(例如,2秒或更长)内停留在第一画面信息被输出到的区域上时,控制器180可以使得第二画面信息从显示单元151消失。
例如,参照图7B,在第二画面信息710a显示在一个区域(例如,显示单元151的上部区域)上并且第一画面信息710b显示在不同的区域(例如下部部分)上的状态下,当用户400在预定时间(例如,大约2秒或更长)内在第一画面信息710b被输出到的区域上凝视时,在显示单元151的所有区域上显示第一画面信息并且第二画面信息710a从显示单元151消失。即,设置切换第一画面信息710d的画面。另外,当将第一触摸施加至上面显示第二画面信息的区域时,控制器180使得第二画面信息缩小并且显示缩小的第二画面信息。例如,当在上面显示第二画面信息的区域上检测到多个短触摸输入时,控制器180使得第二画面信息缩小并且显示缩小的第二画面信息。另一方面,当第二画面信息显示在将第二画面信息与第一画面信息相区分的区域上时,第一画面信息被放大,第二画面信息尽量被缩小,并且显示放大的第一画面信息。
根据另一个实施方式,当将第一触摸施加至上面显示第二画面信息的区域时,可以使得第一画面信息从显示单元151消失。
另外,当将第二触摸施加至上面显示第二画面信息的区域时,控制器180可以使得第二画面信息显示在显示单元151的所有区域上。例如,当在上面显示第二画面信息的区域上检测到一次短触摸或者一次长触摸输入,控制器180放大第二画面信息并且显示放大的第二画面信息。
另一方面,使得的第一画面信息从显示单元151消失或者显示在背景中。
根据另一个实施方式,当将第二触摸施加至上面显示第二画面信息的区域时,可以使得第二画面信息以预定尺寸被放大并且因此显示放大的第二画面信息。使得第一画面信息以预定尺寸被缩小并且因此显示缩小的第一画面信息。
另外,当将第三触摸施加至上面显示第二画面信息的区域时,控制器180可以使得第二画面信息与施加第三触摸的方向和第三触摸被拖动的程度相对应地被缩小或放大,并且因此显示缩小或放大的第二画面信息。
例如,参照图7C,在第一画面信息710b和第二画面信息710a同时显示在显示单元151上的状态下,当其起始点是第二画面信息710a上的两个触摸点的触摸和拖动输入被检测到并且示出时,彼此靠近地拖动多个触摸点,输出第二画面信息710c,其被缩小至同时拖动多个触摸点的距离。此时,当存在与第二画面信息710c相对应的声音信息时,被输出到音频输出模块152的声音信息的音量按照音量与被缩小的画面相对应的方式被减小。
另一方面,尽管在附图中未示出,但是当其起始点是第二画面信息710a上的两个触摸点的触摸和拖动输入被检测到并且多个触摸点被拖动以彼此远离时,第二画面信息710c被放大至同时拖动多个触摸点的距离。另外,根据另一个实施方式,当第三触摸施加至第二画面信息710a时,围绕包括在该第二画面信息710a中的特定对象对该第二画面信息710a进行放大或缩小。
以第二画面信息被缩小的值来预定最小值(例如消失),并且在显示单元151上显示缩小的第二画面信息,并且以第二画面信息被放大的值来预定最大值(显示单元151的所有区域),并且显示放大的第二画面信息。
另外,如果第二画面信息被缩小到最小值,则控制器180输出与第二画面信息相对应的缩略图或者包括缩略图的浮动窗口。当在按照这种方式输出的缩略图或浮动窗口上检测到预定类型触摸时,控制器180回到显示单元151的一个区域上显示第二画面信息。
另外,在第一画面信息和第二画面信息同时显示在显示单元151上的状态下,当将预定类型触摸施加至上面显示第二画面信息的区域时,控制器180按照第二画面信息的显示沿着触摸输出的轨迹消失并且早先显示在第一画面信息上的对象(例如应用的执行图标)出现的方式执行控制。
参照图2和图8,下面描述在第一画面信息和第二画面信息同时显示在移动终端100的显示单元151上的状态下,当发生事件时所使用的处理方法。
在该上下文中,图8是用于描述在画面信息显示在移动终端上的状态下,当在移动终端中发生事件时所使用的处理方法的图,该画面信息输出到与根据本发明的实施方式的移动终端连接的外部电子装置。
当在从被连接的外部电子装置200接收到的第二画面信息一起显示在显示单元151上的状态下发生事件时,控制器180可以将第一画面信息和第二画面信息切换到与发生的事件有关的画面信息,或者可以将用于将第一画面信息和第二画面信息切换到该画面信息的图标输出到显示单元151。
参照图8(A),在第一画面信息810b和第二画面信息810a同时显示在移动终端100的显示单元151上的状态下,当接收到呼叫时,切换为画面820以进入电话交谈模式发生。当进入电话交谈模式并且完成了电话交谈时,切换为提供之前画面的状态,即,第一画面信息810b和第二画面信息810a同时回到显示显示单元151上显示。
另外,例如,参照图8(B),在第二画面信息显示在移动终端100的显示单元151的所有区域上的状态下,当接收到的SMS消息时,用于切换为接收到的SMS消息下画面的指示器图标830,被输出到一个区域(例如,显示单元151的上端)。当将触摸施加至输出的指示器图标830时,执行相应的应用,并且因此读取接收到的SMS消息的内容。
参照图2以及图9A和图9B,下面描述在用户凝视移回到与移动终端100连接的外部电子装置200的情况下,显示在移动终端100上的画面和显示在外部电子装置200上的画面同时显示在该外部电子装置200的方法。在该上下文中,图9A和图9B是用于描述将显示在移动终端上的画面信息输出到与根据本发明的实施方式的移动终端连接的外部电子装置的方法的图。
第一画面信息输出到移动终端100的显示单元151,并且第二画面信息输出到与移动终端100连接的外部电子装置200。
移动终端100的用户跟踪单元120检测用户凝视移动到作为基准的显示单元151的预定范围内,并且向被连接的外部电子装置200发送检测的结果。被连接的外部电子装置200通过使用从移动终端100接收到的、与用户凝视相关联的无线信号和设置在外部电子装置200上的传感器,来检测用户凝视移动并且停留在外部电子装置200的画面上的预定时间(例如,5秒或更长)。
当在该方式下确定在作为基准的显示单元151的预定范围内的用户凝视移动到被连接的外部电子装置200的画面时,控制器180向被连接的外部电子装置200发送第一画面信息。然后,外部电子装置200随着第二画面信息一起输出接收到的第一画面信息。
例如,参照图9A,第一画面信息(例如,内容画面)显示在移动终端100的显示单元151上,并且当在作为基准的显示单元151的预定范围内检测到用户400的凝视移动到外部电子装置200时,在外部电子装置200的显示单元270上同时显示第一画面信息910a和第二画面信息910b。参照图9B,在第一画面信息910a和第二画面信息910b以这种方式同时显示在外部电子装置200的显示单元270上的状态下,当用户凝视停留在上面显示第一画面信息910a的区域上时,在显示单元270的所有区域上显示第一画面信息910a。即,设置切换为第一画面信息910C的画面。
如上所述,即使用户400的凝视从第一装置移动到第二装置,并且从第二装置移回到第一装置,也将输出到第一装置的画面和输出到第二装置的画面同时显示在用户凝视停留在其上的一个装置中。这样去除了使得用户交替观看多个装置的不便。
参照图2以及图10A和图10B,下面描述在第一画面信息和第二画面信息显示在连接到移动终端100的外部电子装置200上的状态下,当在移动终端上发生事件时,用于在外部电子装置中处理发生的事件的操作方法。在该上下文中,图10A和图10B是在观看显示在与根据本发明的移动终端连接的外部电子装置上的画面信息时,在移动终端中发生事件的情况下,用于在外部电子装置200中处理发生的事件的操作方法的图。
第一画面信息输出到移动终端100的显示单元151,并且第二画面信息输出到与移动终端100连接的外部电子装置200。当检测到在作为基准的显示单元151的预定范围内的用户凝视移动到被连接的外部电子装置200的画面时,该被连接的外部电子装置200可以随着第二画面信息一起输出从移动终端100接收到的第一信息。
当在第一画面信息被发送到被连接的外部电子装置200并且第一画面信息和第二画面信息显示在与移动终端100连接的外部电子装置200上的状态中,在移动终端100中发生事件时,控制器180可以根据控制模式来确定将要被输出到外部电子装置200的第一画面信息的范围,并且向外部电子装置200发送所确定的范围内的第一画面信息。
具体地说,当控制模式是正常模式时,控制器180向被连接的外部电子装置200发送与所述事件相对应的事件数据。
例如,参照图10A,当在第一画面信息1010a和第二画面信息1010b同时显示在与移动终端100连接的外部电子装置200上的状态中时,接收到SMS消息(S1011),该SMS消息例如告诉“"WHAT ARE YOU GOING TO DO TODAY”,与接收到的SMS消息相同的内容(即“What are you going to do today”)显示在上面显示第一画面信息1010a的区域上,以及被连接的外部电子装置200中。另外,当控制模式是用户保护模式时,控制器180向被连接的外部电子装置200发送告诉事件的发生的通知消息(例如,只告诉消息到达的通知消息和告诉SMS消息到达的通知消息)。即,不向外部电子装置200发送发送方和消息的内容。这里,可以从预先存储在存储器160中的预创建的消息中选择与事件发生相对应的通知消息。
另一方面,当被连接的外部电子装置200额外连接到不同的电子装置并且多个用户凝视停留在被连接的外部电子装置200的画面上时,控制器180可以自动地进入用户保护模式。例如,参照图10B,假设与移动终端100a连接的外部电子装置200额外连接到不同的移动终端100b,并且进一步地当移动终端100a和100b中的每一个的用户都观看被输出到外部电子装置200的第二画面信息(例如,广播画面)时,移动终端100a接收例如告诉“What are you going to do today”的SMS消息(S1011)。在这种情况下,在被连接的电子装置200上仅显示告诉SMS消息到达的通知消息1020。
即,当显示在连接到外部电子装置200的移动终端100a和100b上的画面信息项全部显示在外部电子装置200的画面上时,担心外部电子装置200的画面的显示可能极其复杂并且每个用户的隐私可能受到侵犯。由于这个原因,使得显示与在移动终端中发生的事件有关的最少信息。
当经过了预定时间后,使得与事件相关联的弹出消息从外部电子装置200的画面消失。
如上所述,如果在第一画面信息和第二画面信息同时显示在与移动终端连接的外部电子装置上状态下,在移动终端中发生事件,则使得与显示在第二画面信息上的事件相关联的数据的输出范围根据控制模式而变化。因此,使用户隐私的保护和画面的简单显示成为可能。
参照图2以及图11A和图11B,下面描述两种操作方法。在一个操作方法中,控制同时显示在移动终端100的显示单元151上的第一画面信息和第二画面信息。在另一个方法中,控制同时显示在外部电子装置200的画面上的第一画面信息和第二画面信息。
在该上下文中,图11A和图11B是描述用于远程地控制被输出到与移动终端连接的外部电子装置的画面信息的操作方法的图。
当在移动终端100的显示单元151上显示第二画面信息(显示在外部电子装置上的画面)的状态下,针对第二画面信息的用户输入满足预定条件,控制器180可以执行与该第二画面信息相关联的至少一个远程控制功能。
预定条件在这里基于针对在屏幕上弹出的菜单键的触摸输入、语音信号输入、预定类型用户手势、收集的与用户凝视有关的信息项以及针对第二画面信息的触摸输入中的一个来配置。作为一个示例,当沿着第一方向将轻弹触摸输入施加至显示在显示单元151上的第二画面信息时,在显示单元151的一个区域上弹出与第二画面信息相关联的菜单键。更具体地说,如果外部电子装置200是连接到移动终端100的电视机,并且第二画面信息例如是广播信息,则弹出菜单键包括频道改变键、音量控制键、查看预订键、主页键和设置键。另外,如果菜单键是是已经设置在移动终端100上的硬键,则针对相应的硬键,控制器180对与移动终端100的控制相关联的功能进行去激活并且对与外部电子装置200的广播信息控制相关联的功能进行激活。
作为另一个示例,当即使没有施加用户输入,但是在第二画面信息显示在移动终端100的显示单元151上的状态下超过了预定时间(例如,10秒)时,控制器180使得用于远程地控制第二画面信息下菜单键自动弹出。
用户可以通过操作弹出菜单键对第二画面信息执行远程控制。例如,根据施加至弹出菜单键的触摸输入,控制器180改变上面显示第二画面信息的区域(画面移动),将第二画面信息切换为不同的广播画面(例如,频道改变),调节声音源的音量,进行查看预订,或者对当前显示的画面信息进行标记。另外,根据施加至弹出菜单的触摸输入,控制器180将与对应的控制功能有关的图像或文本信息输出到显示单元151的一个区域。
例如,参照图11A,当将第一画面信息1110b和第二画面信息1110a输出到移动终端100的显示单元151时,触摸输入施加至特定区域1140,控制器180输出被输出的第二画面信息1110a以及用于控制与第二画面信息1110a有关的信息的菜单键1140。当根据输出的菜单1140的操作来改变第二画面信息1110a的输出状态时,外部电子装置200的画面状态与该状态相对应地一起改变。即,根据移动终端100,在观看显示在外部电子装置200上的画面的同时进行远程控制。
另一方面,当在第一画面信息(显示在移动终端100上的画面)显示在外部电子装置200的画面上的状态中时,针对第一画面信息的用户输入满足预定条件,外部电子装置200执行与第一画面信息相关联的至少一个远程控制功能。
预定条件在这里可以基于针对在屏幕上弹出的菜单键的触摸输入、语音信号输入、预定类型用户手势、收集的与用户凝视有关的信息项、针对第一画面信息的触摸输入以及通过使用外部输入设备300输入的输入信号中的任何一个来配置。
作为一个示例,当沿着第一方向将轻弹触摸输入施加至显示在外部电子装置200的画面上的第一画面信息时,在该画面的一个区域上弹出用于执行与第一画面信息相关联的控制功能的菜单键。
用户可以通过操作弹出菜单键输入用于执行控制功能的控制命令,例如,画面信息、应用执行、文本输入、呼叫连接建立等。作为另一个示例,用于执行控与显示在外部电子装置200上的第一画面信息相关联的控制功能的控制命令是根据语音命令。例如,当用户说“备忘录(MEMO NOTE)”时,执行备忘录应用,并且将第一画面信息切换为备忘录应用的执行画面。作为另一个示例,作为检测针对设置在外部输入设备300上的特定键的触摸或者检测外部输入设备300的移动的结果,生成指示器信号,该外部输入设备300远程地控制外部电子装置200。指示器信号被发送到外部电子装置200。根据发送的指示器信号来执行上述与第一画面信息相关联的控制功能。
例如,参照图11B,在第一画面信息1120a和第二画面信息1120b被输出到外部电子装置(例如,连接到移动终端100的图形显示装置200)的状态下,用户可以通过使用外部输入设备300来输入用于执行与第一画面信息1120a相关联的控制功能的控制命令。此时,针对所提供的特定键,外部输入设备300对与第二画面信息的控制相关联的功能进行去激活并且对与第一画面信息的控制相关联的功能进行激活。显示在图形显示装置200上的指示器响应于用户对外部输入设备300进行的上下、左右、前后移动或旋转而移动,并且根据该移动,选择包括在第一画面中的对象。例如,选择特定应用的执行图标。
如上所述,根据实施方式,将显示在其各自装置上的多个画面输出到一个装置,并且与多个画面中的每一个画面相关联的控制和远程控制也在一个装置中执行。在控制多个装置时,这为用户提供了实际的便利。参照图2和图12,下面描述这样一种操作方法,该操作方法用于在第一画面信息和第二画面信息输出到显示单元151的状态下,将预定信息输入到第二画面信息。
在该上下文中,图12是用于描述这样一种操作方法的图,在该操作方法中,在画面信息显示在移动终端上的状态下,根据触摸输入将预定信息输入到画面信息,该画面信息输出到与根据本发明的实施方式的移动终端连接的外部电子装置。
在第一画面信息和第二画面信息显示在显示单元151上的状态下,控制器180可以进入输入模式,在该输入模式中,到第二画面信息的输入已经准备就绪。
当进入到第二画面信息的输入已经准备就绪的模式中时,控制器180可以将上面显示第二画面信息的区域的至少一部分切换为信息所输入到的区域。当用户将预定信息输入到由于在这种方式下的切换而产生的区域中时,控制器180可以按照信息与第二画面信息交叠的方式在第二画面信息上显示被输入的信息。
这里,被输入的信息可以是与第二画面信息相关联的文本信息或者可以是尽管与第二画面信息不相关联但是被输入以显示娱乐效果的图像或文本。
例如,参照图12,在第一画面信息1210a和第二画面信息1210b同时显示在显示单元151上的情况下,当将预定类型触摸输入(例如,针对上面显示第二画面信息1210b的区域的左上部分的短触摸输入)施加至特定区域时,显示区域1230,在其中显示预定信息。当显示对应区域1230时,用户可以通过施加手触摸或者通过推进弹出的输入键,将预定信息输入到对应区域1230。此时,被输入的信息按照与第二画面信息1210b交叠的方式显示在第二画面信息1210b上,但是根据另一个实施方式,通过用户输入来选择对应区域1230的背景画面。另一方面,控制器180可以向外部电子装置200或者不同的移动终端发送第二画面信息1210b,预定信息按照这种方式被输入到该第二画面信息1210b中。
另外,尽管未示出,但是用户可以设置书写工具,利用该书写工具将预定信息输入到对应区域1230中。例如,如果书写工具被数字为“橡皮”,则当触摸输入施加至对应区域1230时,控制器180使得第二画面信息1210b的一部分随着触摸输入的轨迹从显示单元151消失。
参照图2以及图13A和图13B,下面描述这样一种操作方法,该操作方法用于根据用户的位置自动地控制输出到显示单元151的第一画面信息和/或第二画面信息,或者用于自动控制外部电子装置200的画面状态。
图13A是用于描述这样一种操作方法的图,该操作方法用于基于根据本发明的实施方式的移动终端与用户位置之间的距离来控制输出到移动终端的画面信息。
移动终端100将第一画面信息输入到显示单元151。
通过使用诸如数字生活网络联盟(DLNA)指南、Wi-Fi标准、Wi-Fi直接标准和蓝牙标准的无线连接标准将移动终端100连接到至少一个外部电子装置200。当移动终端100和外部电子装置200按照这种方式彼此连接时,移动终端100的用户跟踪单元120检测针对外部电子装置200的用户凝视移动到作为基准的显示单元151的移动范围内。控制器180基于用户跟踪单元120检测到的用户凝视,接收被输出到被连接的外部电子装置200的第二画面信息,并且随着第一画面信息一起在显示单元151上显示接收到的第二画面信息。
在第一画面信息和第二画面信息在此方式下同时显示在显示单元151上的状态下,移动终端100在作为基准的显示单元151的预定范围内检测用户位置。
为此,移动终端100还可以包括用户检测单元,该用户检测单元被配置为根据摄像头121捕捉的图像来检测用户位置。另外,移动终端100通过使得红外线传感器123发送红外线并且检测从用户反射回去的红外线来计算用户位置与显示单元151之间的距离。
基于检测到的用户位置与显示单元151之间的距离,控制器180控制显示在显示单元151上的第一画面信息和/或第二画面信息的输出状态和输出到音频输出模块152以与所述输出状态相对应的音量中的至少一个。
例如,参照图13A,控制器按照用户400的检测位置与显示单元151离得越远(a),第一画面信息和/或第二画面信息的光线和阴影越暗淡并且与画面相对应的音量越小的方式来执行控制。
另一方面,控制器按照用户400的检测位置越靠近显示单元151(b),第一画面信息和/或第二画面信息的光线和阴影越亮并且与画面相对应的音量越大的方式来执行控制。此时,根据用户400的检测位置与显示单元151之间的距离自动地控制的画面的亮度和音量的最小值和最大值,通过施加用户输入来设置。
另一方面,当输入与画面的亮度和音量相关联的控制命令同时自动控制画面的亮度和音量时,控制器180根据被输入的控制命令来调节画面的亮度和音量。另外,在第一画面信息和第二画面信息按照这种方式同时显示在显示单元151上的状态下,移动终端100利用用户跟踪单元120,在作为基准的显示单元151的预定范围内检测用户凝视。
在该上下文中,图13B是用于这样一种操作方法的描述的图,在该操作方法中,基于用户凝视,将连接到根据本发明的实施方式的移动终端100的外部电子装置200的输出状态切换到安全模式。
如果第一画面信息和第二画面信息同时显示在移动终端100的显示单元151上,则用户凝视仅在预定时间内停留在显示单元上,控制器180将其识别为承认用户不在使用外部电子装置200的手势。
即,当在检测到针对被连接的外部电子装置200的用户凝视移动到作为基准的显示单元151的预定范围内之后超过预定时间时,控制器180可以向被连接的外部电子装置发送无线信号,其用于将被连接的外部电子装置200的画面和音量中的至少一个转换成去激活状态。外部电子装置200根据接收到的无线信号,对画面和声音状态中的至少一个进行去激活。另一方面,输出到移动终端100的显示单元151的画面的状态,和输出到音频输出模块152的声音的状态,仍然没有任何改变。
例如,参照图13B,当检测到用户400的凝视例如从图形显示装置200移动到移动终端100时,在移动终端100的显示单元151上同时显示第一画面信息1010b和输出到外部电子装置200的第二画面信息1030a。当在第一画面信息1310b和第二画面信息1030a按照这种方式同时显示的状态下,超过了预定时间(例如,5秒),即,当用户400的凝视停留在显示单元151上达5秒或更长时,控制器180使图形显示装置200的画面的亮度变暗。这节省了电力。
另外,控制器180可以向被连接的外部电子装置发送无线信号,该无线信号用于根据超过预定时间的程度来逐渐调节被连接的外部电子装置200的画面亮度和音量中的至少一个。
例如,当在用户凝视仅停留在显示单元151上之后经过了10分钟时,发送第一信号,该第一信号用于将显示在外部电子装置200上的画面的亮度调节到有些暗的等级,并且当经过了额外10分钟时,发送第二信号,该第二信号用于将显示在外部电子装置200上的画面的亮度调节到非常暗的等级。此时,通过施加用户输入来设置画面的亮度的等级。
另一方面当确定在作为基准的显示单元151的预定范围内的用户凝视移回到被连接的外部电子装置200时,控制器180可以向被连接的外部电子装置200发送无线信号,该无线信号用户将被连接的外部电子装置200的画面和声音中的至少一个转换成激活状态。
另一方面,如果还是在移动终端100的用户凝视停留在显示单元151上的状态下,则在外部电子装置200上检测第三方的凝视,控制器180向被连接的外部电子装置200发送无线信号,该无线信号用户将被连接的外部电子装置200的画面和声音中的至少一个转换成激活状态。
另外,尽管未示出,但是当第一画面信息和第二画面信息同时显示在移动终端100的显示单元151上时,移动终端100与外部电子装置200之间的距离在预定范围外,控制器180使得外部电子装置200的画面和声音中的至少一个被转换成去激活状态。此时,通过使用无线通信单元110交换预定信号,来确定移动终端100与外部电子装置200之间的距离是否在预定范围外。
根据上述实施方式,当在预定时间内没有检测到移动终端和连接到移动终端的外部电子装置中的任何一个的用户观看时,将与所述功能相关联的对应装置的画面和功能实现为去激活。这导致了节省电力的效果。
如上所述,在根据本发明的实施方式的移动终端和控制该移动终端的方法中,基于用户凝视,将显示在连接到移动终端的外部电子装置上的内容画面实现为随着显示在移动终端上的画面一起输出。这为用户提供了在一个装置中同时观看或使用显示的多个装置上的画面的便利。
另外,与显示在一个装置上的每个画面相关联的控制和远程控制被实现为在一个装置中执行。在控制多个装置时,这导致实际的便利。此外,当在预定时间内没有检测到用户观看时,对应装置的画面和与该画面相关联的功能被实现为去激活。这导致了节省电力的效果。
此外,根据在本说明书中公开的一个实施方式,上述方法可以通过在程序存储介质中存储为处理器可读代码来实现。ROM、RAM、CD-ROM、磁带、软盘、光数据存储设备等是处理器可读介质的示例,并且该处理器可读介质可以以载波的形式来实现(例如,在因特网上的传输)。
对于上述移动终端,上述实施方式的配置和方法没有针对其应用给出任何限制,并且所有或一些实施方式可以按照创建各种实施方式的方式选择性地彼此结合。
前述实施方式和优点仅是示例性的并且不被认为限制本公开。本教导能够容易地应用于其它类型的装置。本说明书旨在是例示性的,并且不限制权利要求的范围。许多另选、修改和变型对于本领域技术人员而言将是明显的。这里描述的示例性实施方式的特征、结构、方法和其它特性可以按照各种方式来组合以获得额外的和/或另选的示例性实施方式。由于本发明的特征可以在不脱离其特性的情况下按照多种形式来具体实施,因此,还应当理解的是,除非另有规定,否则上面描述的实施方式不受前述说明书的任何细节限制,而应当广泛地认为在如所附权利要求中限定的其范围内,并且因此落在权利要求的界限内的所有改变和修改,或者这些界限的等同物因此旨在被所附的权利要求包含。
Claims (32)
1.一种移动终端,所述移动终端包括:
显示器,所述显示器用于显示第一画面信息;
用户跟踪设备,所述用户跟踪设备用于检测针对被连接的外部电子装置的用户凝视在作为基准的所述显示器的预定范围内;以及
控制器,所述控制器用于基于检测到的用户凝视从所述被连接的外部电子装置接收第二画面信息,并且所述控制器用于控制所述显示器同时显示接收到的第二画面信息和所述第一画面信息。
2.根据权利要求1所述的移动终端,其中所述用户跟踪设备用于通过使用第一信号和第二信号来检测所述用户凝视的移动,
与是否检测用户的眼睛相对应的所述第一信号从所述外部电子装置接收,以及
与是否检测所述用户的眼睛相对应的所述第二信号基于所述移动终端上的至少一个传感器。
3.根据权利要求1所述的移动终端,其中所述显示器包括第一区域和能够与所述第一区域相区分的第二区域,并且
其中,当检测到的用户凝视移动到所述显示器的所述预定范围内时,所述控制器用于控制所述显示器使得所述第一画面信息显示在所述显示器的所述第一区域上并且所述第二画面信息显示在所述显示器的所述第二区域上。
4.根据权利要求3所述的移动终端,其中所述控制器用于基于触摸输入来指定所述显示器的所述第二区域,并且所述控制器用于控制所述显示器使得所述第二画面信息显示在指定的第二区域上。
5.根据权利要求3所述的移动终端,所述移动终端还包括:
倾斜检测设备,所述倾斜检测设备用于检测所述移动终端的倾斜,并且其中,所述控制器用于基于检测到的用户凝视和检测到的所述移动终端的倾斜来确定所述显示器的所述第二区域。
6.根据权利要求1所述的移动终端,其中,当所述第二画面信息显示在所述显示器上,并且检测到的用户凝视在规定时间内在显示所述第一画面信息的区域上保持时,所述控制器用于控制所述显示器去除所述第二画面信息。
7.根据权利要求1所述的移动终端,其中,当所述第二画面信息显示在所述显示器上并且检测到的用户凝视在显示所述第二画面信息的区域上保持时,所述控制器用于控制所述显示器在该显示器的大致所有画面区域上显示所述第二画面信息。
8.根据权利要求1所述的移动终端,其中,响应于在显示所述第二画面信息的区域上的第一触摸,所述控制器用于缩小所述第二画面信息并且显示缩小的所述第二画面信息,并且
响应于针对所述第二画面信息的第二触摸,所述控制器用于控制所述显示器使得所述第二画面信息显示在所述显示器的大致所有画面区域上。
9.根据权利要求1所述的移动终端,其中,响应于在显示所述第二画面信息时发生的事件,所述控制器用于将所述第一画面信息和所述第二画面信息切换为与所述事件有关的画面信息,或者用于显示切换为所述画面信息的图标。
10.根据权利要求1所述的移动终端,其中,当在所述显示器的所述预定范围内检测到的用户凝视移动到所述被连接的外部电子装置的画面时,所述控制器用于向所述被连接的外部电子装置发送所述第一信息。
11.根据权利要求10所述的移动终端,其中,当向所述被连接的外部电子装置发送所述第一画面信息并且在所述移动终端中发生事件时,所述控制器用于在所述移动终端处于正常模式中时向所述被连接的外部电子装置发送与所述事件相对应的事件数据,并且所述控制器用于在所述移动终端处于用户保护模式中时仅向所述被连接的外部电子装置发送通知消息,该通知消息与所述事件的发生有关。
12.根据权利要求1所述的移动终端,其中,当所述第二画面信息显示在所述显示器上时,进入所述移动终端的输入模式,并且所述控制器用于控制所述显示器使得上面显示所述第二画面信息的区域的至少一部分被切换为信息所输入到的区域,并且输入到所述区域的所述信息显示在所述第二画面信息上使得用于输入信息的所述区域与所述第二画面信息交叠。
13.根据权利要求1所述的移动终端,其中,当在检测到针对所述被连接的外部电子装置的所述用户凝视在所述显示器的所述预定范围内之后超过预定时间时,所述控制器用于向所述被连接的外部电子装置提供第一无线信号,所述第一无线信号用于将所述被连接的外部电子装置的画面和声音中的至少一个转换成去激活状态。
14.一种控制移动终端的方法,所述方法包括以下步骤:
在显示器上显示第一画面信息;
连接到外部电子装置;
检测针对被连接的外部电子装置的用户凝视在所述显示器的预定范围内;
基于检测到的用户凝视从所述被连接的外部电子装置接收第二画面信息;以及
同时显示接收到的第二画面信息和所述第一画面信息。
15.根据权利要求14所述的方法,所述方法还包括以下步骤:
当检测到的用户凝视在显示所述第二画面信息的区域上保持时,在所述显示器的大致所有画面区域上显示所述第二画面信息;以及
当所述第二画面信息显示在所述显示器上时,在所述用户凝视在预定时间内在显示所述第一画面信息的区域上保持的情况下从所述显示器去除所述第二画面信息。
16.根据权利要求14所述的方法,其中,所述第一画面信息显示在所述显示器的第一区域上并且所述第二画面信息显示在所述显示器的第二区域画面上。
17.根据权利要求16所述的方法,所述方法还包括以下步骤:
基于触摸输入来指定所述显示器的所述第二区域,并且控制所述显示器使得所述第二画面信息显示在指定的第二区域上。
18.根据权利要求16所述的方法,所述方法还包括以下步骤:
检测所述移动终端的倾斜;以及
基于检测到的用户凝视和检测到的所述移动终端的倾斜来确定所述第二区域。
19.根据权利要求14所述的方法,所述方法还包括以下步骤:
当检测到的用户凝视在规定时间内在显示所述第一画面信息的区域上保持时,去除所述第二画面信息。
20.根据权利要求14所述的方法,所述方法还包括以下步骤:
当检测到的用户凝视在显示所述第二画面信息的区域上保持时,在所述显示器的大致所有画面区域上显示所述第二画面信息。
21.根据权利要求14所述的方法,所述方法还包括以下步骤:
响应于针对显示所述第二画面信息的区域的第一触摸,缩小所述第二画面信息;以及
响应于针对所述第二画面信息的第二触摸,在所述显示器的大致所有画面区域上显示所述第二画面信息。
22.根据权利要求14所述的方法,所述方法还包括以下步骤:
响应于在所述第二画面信息显示在所述显示器上的状态下发生的事件,将所述第一画面信息和所述第二画面信息切换为与所述事件有关的画面信息。
23.根据权利要求14所述的方法,所述方法还包括以下步骤:
当检测到的用户凝视移动到所述被连接的外部电子装置的画面时,向所述被连接的外部电子装置发送所述第一信息。
24.根据权利要求23所述的方法,所述方法还包括以下步骤:
在处于正常模式中时向所述被连接的外部电子装置发送与事件相对应的事件数据,并且在处于用户保护模式中时仅向所述被连接的外部电子装置发送通知消息,该通知消息与所述事件的发生有关。
25.根据权利要求14所述的方法,其中,当在检测到针对所述被连接的外部电子装置的所述用户凝视在所述显示器的所述预定范围内之后超过预定时间时,向所述被连接的外部电子装置发送第一无线信号,所述第一无线信号用于将所述被连接的外部电子装置的画面和声音中的至少一个转换成去激活状态。
26.一种移动终端,所述移动终端包括:
显示器,所述显示器用于显示第一画面信息;以及
控制器,所述控制器用于检测针对被连接的电子设备的用户的眼睛观看在作为基准的所述显示器的预定范围内,并且响应于检测到的用户的眼睛观看,所述控制器用于控制所述显示器同时显示从所述被连接的电子设备接收到的第二画面信息和所述第一画面信息。
27.根据权利要求26所述的移动终端,其中所述控制器用于通过使用第一信号和第二信号来检测所述用户的眼睛观看的移动,
与是否检测用户的眼睛相对应的所述第一信号从所述电子设备接收,以及
与是否检测所述用户的眼睛相对应的所述第二信号基于所述移动终端上的至少一个传感器。
28.根据权利要求26所述的移动终端,其中所述显示器包括第一区域和能够与所述第一区域相区分的第二区域,并且
其中,当检测到的用户的眼睛观看移动到所述显示器的所述预定范围内时,所述控制器用于控制所述显示器使得所述第一画面信息显示在所述显示器的所述第一区域上并且所述第二画面信息显示在所述显示器的所述第二区域上。
29.根据权利要求28所述的移动终端,其中所述控制器用于基于触摸输入来指定所述显示器的所述第二区域,并且所述控制器用于控制所述显示器使得所述第二画面信息显示在指定的第二区域上。
30.根据权利要求28所述的移动终端,所述移动终端还包括:
倾斜检测设备,所述倾斜检测设备用于检测所述移动终端的倾斜,并且其中,所述控制器用于基于检测到的用户的眼睛观看和检测到的所述移动终端的倾斜来确定所述显示器的所述第二区域。
31.根据权利要求26所述的移动终端,其中,当所述第二画面信息显示在所述显示器上并且检测到的用户的眼睛观看在规定时间内在显示所述第一画面信息的区域上保持时,所述控制器用于控制所述显示器去除所述第二画面信息。
32.根据权利要求26所述的移动终端,其中,当所述第二画面信息显示在所述显示器上并且检测到的用户的眼睛观看在显示所述第二画面信息的区域上保持时,所述控制器用于控制所述显示器在该显示器的大致所有画面区域上显示所述第二画面信息。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2013-0055267 | 2013-05-15 | ||
KR1020130055267A KR102111457B1 (ko) | 2013-05-15 | 2013-05-15 | 이동 단말기 및 이동 단말기의 제어 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104168366A true CN104168366A (zh) | 2014-11-26 |
CN104168366B CN104168366B (zh) | 2018-12-04 |
Family
ID=50897321
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410202801.6A Expired - Fee Related CN104168366B (zh) | 2013-05-15 | 2014-05-14 | 移动终端以及控制该移动终端的方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9170647B2 (zh) |
EP (1) | EP2804386A1 (zh) |
KR (1) | KR102111457B1 (zh) |
CN (1) | CN104168366B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105828129A (zh) * | 2016-03-22 | 2016-08-03 | 广东欧珀移动通信有限公司 | 一种音视频播放系统控制方法、装置和音视频播放系统 |
CN107924237A (zh) * | 2015-09-02 | 2018-04-17 | 微软技术许可有限责任公司 | 计算设备的增强现实控制 |
Families Citing this family (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8131848B1 (en) * | 2009-09-29 | 2012-03-06 | Jason Adam Denise | Image analysis and communication device control technology |
FR2987470A1 (fr) * | 2012-02-29 | 2013-08-30 | France Telecom | Procede de navigation au sein d'un contenu affichable a l'aide de commandes de navigation, dispositif de navigation et programme associe |
US9374872B2 (en) * | 2013-08-30 | 2016-06-21 | Universal Display Corporation | Intelligent dimming lighting |
KR102288726B1 (ko) | 2014-06-09 | 2021-08-12 | 삼성전자주식회사 | 웨어러블 전자 장치, 메인 전자 장치, 시스템 및 그 제어 방법 |
KR20160020903A (ko) * | 2014-08-14 | 2016-02-24 | 삼성전자주식회사 | 사용자 단말 장치, 사용자 단말 장치의 제어 방법 및 멀티미디어 시스템 |
KR102378514B1 (ko) | 2014-10-13 | 2022-03-24 | 삼성전자주식회사 | 광고 컨텐츠 제공 방법 및 장치 |
CN104777385B (zh) * | 2015-04-21 | 2017-06-13 | 东莞华贝电子科技有限公司 | 用于检测移动终端电源反接和数据反接保护功能的治具和方法 |
CN106293444B (zh) * | 2015-06-25 | 2020-07-03 | 小米科技有限责任公司 | 移动终端、显示控制方法及装置 |
US11190838B2 (en) | 2015-07-09 | 2021-11-30 | Lg Electronics Inc. | Multimedia device with standby mode and providing notification information |
KR102336984B1 (ko) * | 2015-07-09 | 2021-12-08 | 엘지전자 주식회사 | 멀티미디어 디바이스 |
KR102420916B1 (ko) | 2015-08-05 | 2022-07-15 | 엘지전자 주식회사 | 영상표시기기 및 그 제어방법 |
US10248280B2 (en) * | 2015-08-18 | 2019-04-02 | International Business Machines Corporation | Controlling input to a plurality of computer windows |
US10825058B1 (en) | 2015-10-02 | 2020-11-03 | Massachusetts Mutual Life Insurance Company | Systems and methods for presenting and modifying interactive content |
US10871821B1 (en) * | 2015-10-02 | 2020-12-22 | Massachusetts Mutual Life Insurance Company | Systems and methods for presenting and modifying interactive content |
CN105677089A (zh) * | 2015-12-31 | 2016-06-15 | 京东方科技集团股份有限公司 | 一种触控显示器、触控显示装置及其亮度调节方法 |
US9703523B1 (en) * | 2016-01-05 | 2017-07-11 | International Business Machines Corporation | Adjusting audio volume based on a size of a display area |
TWI656523B (zh) * | 2016-12-16 | 2019-04-11 | 群邁通訊股份有限公司 | 語音控制裝置、系統及控制方法 |
US20190056765A1 (en) * | 2017-08-16 | 2019-02-21 | Deonna Harris | Electronic Scheduling Assembly |
CN108829304A (zh) * | 2018-05-29 | 2018-11-16 | 维沃移动通信有限公司 | 一种显示控制方法及终端 |
JP6992769B2 (ja) * | 2019-01-17 | 2022-01-13 | セイコーエプソン株式会社 | 表示装置の制御方法、表示装置および表示システム |
KR20200091522A (ko) * | 2019-01-22 | 2020-07-31 | 삼성전자주식회사 | 컨텐츠의 표시 방향을 제어하기 위한 방법 및 그 전자 장치 |
KR20210007289A (ko) | 2019-07-10 | 2021-01-20 | 삼성전자주식회사 | 오디오 신호를 출력하기 위한 전자 장치 및 방법 |
US11726734B2 (en) | 2022-01-13 | 2023-08-15 | Motorola Mobility Llc | Configuring an external presentation device based on an impairment of a user |
KR20230112485A (ko) * | 2022-01-20 | 2023-07-27 | 엘지전자 주식회사 | 디스플레이 장치 및 그의 동작 방법 |
WO2023163334A1 (ko) * | 2022-02-23 | 2023-08-31 | 삼성전자주식회사 | 저전력 제어 방법 및 그 장치들 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102238280A (zh) * | 2010-05-03 | 2011-11-09 | Lg电子株式会社 | 电子设备及其发送信息的方法和控制电子设备的方法 |
CN102238279A (zh) * | 2010-05-07 | 2011-11-09 | Lg电子株式会社 | 移动终端及其控制方法 |
US20120066619A1 (en) * | 2010-09-15 | 2012-03-15 | Samsung Electronics Co., Ltd. | Apparatus and method for information transmission between tv and mobile communication system |
TWM435668U (en) * | 2012-02-06 | 2012-08-11 | Heran Co Ltd | Display device with multiple signal sources |
WO2012139240A1 (en) * | 2011-04-11 | 2012-10-18 | Intel Corporation | Next generation television with content shifting and interactive selectability |
US20130097525A1 (en) * | 2011-10-13 | 2013-04-18 | Woosung Kim | Data transferring method using direction information and mobile device using the same |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110267374A1 (en) * | 2009-02-05 | 2011-11-03 | Kotaro Sakata | Information display apparatus and information display method |
KR101664430B1 (ko) * | 2009-11-13 | 2016-10-10 | 삼성전자주식회사 | 리모트 ui 서비스 제공 방법 및 장치 |
WO2012036324A1 (ko) * | 2010-09-13 | 2012-03-22 | 엘지전자 주식회사 | 이동 단말기 및 그 동작 제어 방법 |
US8643680B2 (en) * | 2011-04-08 | 2014-02-04 | Amazon Technologies, Inc. | Gaze-based content display |
KR101773845B1 (ko) * | 2011-05-16 | 2017-09-01 | 삼성전자주식회사 | 휴대용 단말기에서 입력 처리 방법 및 장치 |
US10120438B2 (en) * | 2011-05-25 | 2018-11-06 | Sony Interactive Entertainment Inc. | Eye gaze to alter device behavior |
US10013053B2 (en) * | 2012-01-04 | 2018-07-03 | Tobii Ab | System for gaze interaction |
US9077846B2 (en) * | 2012-02-06 | 2015-07-07 | Microsoft Technology Licensing, Llc | Integrated interactive space |
US9513702B2 (en) * | 2013-07-15 | 2016-12-06 | Lg Electronics Inc. | Mobile terminal for vehicular display system with gaze detection |
KR102215815B1 (ko) * | 2013-07-24 | 2021-02-16 | 엘지전자 주식회사 | 단말기 및 이의 제어방법 |
-
2013
- 2013-05-15 KR KR1020130055267A patent/KR102111457B1/ko active IP Right Grant
-
2014
- 2014-04-22 US US14/258,785 patent/US9170647B2/en not_active Expired - Fee Related
- 2014-04-25 EP EP14001489.5A patent/EP2804386A1/en not_active Ceased
- 2014-05-14 CN CN201410202801.6A patent/CN104168366B/zh not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102238280A (zh) * | 2010-05-03 | 2011-11-09 | Lg电子株式会社 | 电子设备及其发送信息的方法和控制电子设备的方法 |
CN102238279A (zh) * | 2010-05-07 | 2011-11-09 | Lg电子株式会社 | 移动终端及其控制方法 |
US20120066619A1 (en) * | 2010-09-15 | 2012-03-15 | Samsung Electronics Co., Ltd. | Apparatus and method for information transmission between tv and mobile communication system |
WO2012139240A1 (en) * | 2011-04-11 | 2012-10-18 | Intel Corporation | Next generation television with content shifting and interactive selectability |
US20130097525A1 (en) * | 2011-10-13 | 2013-04-18 | Woosung Kim | Data transferring method using direction information and mobile device using the same |
TWM435668U (en) * | 2012-02-06 | 2012-08-11 | Heran Co Ltd | Display device with multiple signal sources |
Non-Patent Citations (1)
Title |
---|
SACHIN SRINIVAS, JAMES BLUSTEIN: "《A survey report on mobile eye-based Human- Computer Interaction》", 《INFORMATION SOCIETY》 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107924237A (zh) * | 2015-09-02 | 2018-04-17 | 微软技术许可有限责任公司 | 计算设备的增强现实控制 |
CN105828129A (zh) * | 2016-03-22 | 2016-08-03 | 广东欧珀移动通信有限公司 | 一种音视频播放系统控制方法、装置和音视频播放系统 |
CN105828129B (zh) * | 2016-03-22 | 2019-02-01 | Oppo广东移动通信有限公司 | 一种音视频播放系统控制方法、装置和音视频播放系统 |
Also Published As
Publication number | Publication date |
---|---|
US20140340334A1 (en) | 2014-11-20 |
KR20140135029A (ko) | 2014-11-25 |
KR102111457B1 (ko) | 2020-05-15 |
EP2804386A1 (en) | 2014-11-19 |
CN104168366B (zh) | 2018-12-04 |
US9170647B2 (en) | 2015-10-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104168366A (zh) | 移动终端以及控制该移动终端的方法 | |
US10721348B2 (en) | Mobile terminal and method for controlling the same | |
CN108182016B (zh) | 移动终端及其控制方法 | |
US9509959B2 (en) | Electronic device and control method thereof | |
EP2979365B1 (en) | Mobile terminal and method of controlling the same | |
US9514784B2 (en) | Terminal and operating method thereof | |
EP2947538B1 (en) | Mobile terminal and method of controlling the same | |
US20160283090A1 (en) | Mobile terminal and controlling method thereof | |
US20120060109A1 (en) | Terminal and contents sharing method for terminal | |
KR102404356B1 (ko) | 디지털 디바이스 및 상기 디지털 디바이스에서 데이터 처리 방법 | |
US11011138B2 (en) | Mobile terminal and control method thereof | |
US20180188950A1 (en) | Mobile terminal and method for controlling the same | |
US10055124B2 (en) | Mobile terminal and display operating method thereof | |
CN106954090B (zh) | 移动终端及控制其的方法 | |
US9411411B2 (en) | Wearable electronic device having touch recognition unit and detachable display, and method for controlling the electronic device | |
KR20150069760A (ko) | 디스플레이 디바이스 및 그 제어 방법 | |
US8941648B2 (en) | Mobile terminal and control method thereof | |
US10148997B2 (en) | Mobile terminal and method for controlling the same | |
KR101861697B1 (ko) | 이동 통신 단말기의 녹화 예약 장치 및 그 방법 | |
KR102280942B1 (ko) | 단말기 및 그 동작 방법 | |
KR102014417B1 (ko) | 단말기 및 그 제어 방법 | |
KR102214838B1 (ko) | 단말기 및 그 동작 방법 | |
KR101951422B1 (ko) | 영상 표시 장치, 휴대 전자 기기 및 그것들의 제어 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20181204 |