CN104284014A - 移动终端及其控制方法 - Google Patents

移动终端及其控制方法 Download PDF

Info

Publication number
CN104284014A
CN104284014A CN201410323524.4A CN201410323524A CN104284014A CN 104284014 A CN104284014 A CN 104284014A CN 201410323524 A CN201410323524 A CN 201410323524A CN 104284014 A CN104284014 A CN 104284014A
Authority
CN
China
Prior art keywords
user
mobile terminal
customizing messages
information
controller
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410323524.4A
Other languages
English (en)
Other versions
CN104284014B (zh
Inventor
林国赞
徐慧元
金宣希
尹汝明
阴惠珍
朴荷娜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN104284014A publication Critical patent/CN104284014A/zh
Application granted granted Critical
Publication of CN104284014B publication Critical patent/CN104284014B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H04L67/63Routing a service request depending on the request content or context
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B1/00Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40Circuits
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/011Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Telephone Function (AREA)

Abstract

移动终端及其控制方法。一种移动终端,包括:输出单元,其被构造成输出信息;接收装置,其被构造成从外部装置接收信息;控制器,其被构造成在接收装置正在接收特定信息或输出单元正在输出特定信息的同时接收关于用户身体状况的身体状况信息,分析所述身体状况信息并且基于所述身体状况信息估计用户情绪状态,生成指示估计的所述用户情绪状态的附着信息,将生成的所述附着信息与对应于所述特定信息的数据一起存储,输出生成的所述附着信息和对应于所述特定信息的数据。

Description

移动终端及其控制方法
技术领域
本发明涉及基于用户的感觉输出内容的移动终端。
背景技术
通常,可将终端相应划分成移动终端和固定终端。另外,可将移动终端划分成手持终端和车载终端。
随着此类功能变得更多样化,移动终端可支持更复杂的功能(诸如,拍摄图像或视频、再现音乐或视频文件、玩游戏、接收广播信号等)。因此,移动终端100可按多媒体播放器或设备的形式实施。
近来,在移动终端中引入了人工智能系统,该人工智能系统识别用户的语音并且根据用户的状况提供信息。然而,由于是基于用户有意识输入的命令提供适当的信息,因此除非用户输入控制命令,否则不能提供信息。因此,用户会无意识漏掉所需的信息或者会忘记提供的信息,在没有控制命令的情况下,他或她不能将信息存储在移动终端中。
发明内容
本发明的一方面提供了在没有控制命令的情况下根据用户感觉的变化提供内容的移动终端。
为了实现这些和其它优点并且根据本发明的目的,如本文实施和广义描述的,本发明的一方面提供了一种移动终端,所述移动终端包括:输入单元,其被构造成从外部接收信息;输出单元,其被构造成向用户输出信息;接收单元,其被构造成在正在从外部或从所述输出单元接收特定信息同时,接收用户的身体状况信号;分析单元,其被构造成分析所述身体状况信息以确定用户的感觉;控制器,其被构造成生成关于用户感觉的感觉数据并且将所述感觉数据附于所述特定信息,并且控制输出单元来输出与所述特定信息和所述感觉数据相关的内容。
在与本发明相关的示例中,所述身体状况信号可对应于关于用户心跳的信息,所述分析单元可分析心跳信息中包括的模式以确定用户的感觉。
在与本发明相关的示例中,移动终端100还可包括:终端机体,其被形成为固定于用户的身体:测量装置,其安装在所述终端机体中,被形成为具有接触用户皮肤的至少一部分,被构造成将所述心跳信息发送到所述接收单元。
在与本发明相关的示例中,移动终端100还可包括:输入单元,其被构造成接收用户的控制命令,其中所述控制器可分析输入到所述输入单元的用户的控制命令并且基于经分析的所述控制命令和所述心跳信息的属性来生成所述感觉数据。
在与本发明相关的示例中,所述控制器可控制所述接收单元在施加用于控制输出所述特定信息的所述输出单元的控制命令时接收所述身体状况信息。
在与本发明相关的示例中,相关内容可包括与所述特定信息的至少一个属性相同的属性。
在与本发明相关的示例中,移动终端100还可包括存储器,其中,当所述感觉数据匹配预设的感觉数据时,所述控制器可控制所述存储器来存储所述特定信息。
在与本发明相关的示例中,移动终端100还可包括:相机,所述相机被构造成将外部环境成像,其中当所述感觉数据匹配预设的感觉数据时,所述控制器可控制所述相机将所述特定信息成像。
在与本发明相关的示例中,移动终端100还可包括:存储器,所述存储器被构造成存储附有感觉数据的特定信息,其中,当分别附有多个感觉数据项的多个信息项被存储在所述存储器中时,所述控制器可控制所述存储器根据所述多个感觉数据项将所述多个信息项分类并且存储它们。
在与本发明相关的示例中,所述输出单元可包括:被构造成输出可视数据的显示单元,其中在所述感觉数据被附于所述特定信息之后,当再次向用户提供所述特定信息时,所述控制器可控制所述显示单元再次输出相关内容,所述相关内容可对应于可视化的感觉数据。
在与本发明相关的示例中,基于被施加到所述显示单元的输出可视化感觉数据的区域的触摸输入,所述控制器可控制所述输出单元来输出附有所述感觉数据的附加内容。
在与本发明相关的示例中,移动终端100还可包括:输入单元,所述输入单元被启动以接收从外部提供的外部信号。
在与本发明相关的示例中,所述控制器可基于通过所述输入单元输入的外部信号搜索与包括在所述特定信息中的至少一部分相关的附加内容,并且控制所述输出单元来输出所述附加内容。
在与本发明相关的示例中,所述控制器可控制所述输出单元,所述输出单元被构造成将附着的感觉数据可视化并且将经可视化的所述感觉数据与所述特定信息一起输出。
在与本发明相关的示例中,移动终端100还可包括:相机,其被构造成在正在提供所述特定信息的同时将用户的身体变化成像;麦克风,被构造成感测用户的语音,其中所述控制器可控制所述输出单元将可视数据与所述特定信息一起输出,所述可视数据是通过身体状况信号、经成像的身体变化和语音将用户感觉可视化而得到的。
在与本发明相关的示例中,所述可视数据可对应于从语音转换而来的文本或者描述身体变化的文本。
在与本发明相关的示例中,所述控制器可控制无线通信单元,所述无线通信单元被构造成向外部终端或网络发送文本和特定信息。
为了实现这些和其它优点并且根据本发明的目的,如本文实施和广义描述的,本发明的另一方面提供了一种移动终端的控制方法,所述控制方法包括:在正在从外部或通过输出单元为用户提供特定信息的同时,接收关于用户身体状况的信息;基于身体状况信息,生成用户的感觉数据;将所述感觉数据附于所述特定信息;输出与所述感觉数据和所述特定信息中的至少一个相关的相关内容。
在与本发明相关的示例中,所述方法还包括:基于所述感觉数据将所述特定信息分类并且存储它们。
在与本发明相关的示例中,输出与所述感觉数据和所述特定信息中的至少一个相关的相关内容可包括:将所述感觉数据附于所述特定信息之后生成的感觉数据与预设的参考数据进行比较;当感觉数据匹配参考数据时,搜索相关内容。
根据本发明的实施方式,基于感测到的用户感觉而提供的特定信息被存储并且基于感觉数据存储同一类别。
因此,用户可回忆起他或她关于特定信息的感觉,可方便地提供基于这些感觉的各种类型的特定信息。
根据下文中给出的详细描述,本发明的可应用性的其它范围将变得清楚。然而,应该理解,只以示例方式给出指示本发明的优选实施方式的详细描述和具体示例,因为根据详细描述,对于本领域的技术人员,本发明的精神和范围内的各种变化和修改将变得清楚。
附图说明
根据以下给出的详细描述和附图,将变得更充分地理解本发明,所述详细描述和附图只是以示例方式给出的,因此不限制本发明,其中:
图1是根据本发明的实施方式的移动终端的框图。
图2A和图2B是示出根据本发明的实施方式的移动终端能在其中进行操作的通信系统的概念图。
图3A是与本发明相关的移动终端的透视正视图;
图3B是图3A中示出的移动终端的透视后视图;
图4是示出根据本发明的实施方式的移动终端的控制方法的流程图。
图5A是示出根据本发明的实施方式的图4的控制方法的概念图。
图5B和图5C是示出图4的控制方法的概念图。
图5D是示出测量装置的概念图。
图5E包括示出从测量装置900接收的身体状况信息的曲线图。
图6A至图6C是示出根据本发明的各种实施方式的移动终端的控制方法的概念图。
图7A至图7D是示出用于提供用户的感觉数据或附有感觉数据的特定信息和附加内容的控制方法的概念图。
图8A和图8B是示出用于将用户的感觉数据作为内容输出的控制方法的概念图。
图9A至图9C是示出用于基于从各种源提供的特定信息输出内容的方法的概念图。
图10A至图10C是示出通过使用用户的感觉数据和外部终端的感觉数据向用户提供包括关于外部终端的信息的内容的控制方法的概念图。
具体实施方式
现在,将参照附图描述本发明的实施方式,在附图中,尽管实施方式是不同的,但类似的标号始终表示类似的元件,将针对不同实施方式的元件使用对第一实施方式的类似元件的描述。在下面的描述中,仅仅为了便于说明本发明,将使用诸如“模块”、“部件”或“单元”的后缀来引用元件,而本身并没有任何明显的含义。在描述本发明的过程中,如果对相关已知功能或构造的详细说明被认为不必要地转移了本发明的主旨,则省略此说明,但本领域的技术人员将会理解此说明。本发明的附图的目的是便于理解本发明并且不应该被理解为限于附图。
本公开中描述的移动终端可包括移动电话、智能电话、笔记本计算机、平板计算机、数字广播接收器、PDA(个人数字助理)、PMP(便携式多媒体播放器)、导航装置、slate PC、平板PC、超级本等。然而,本领域的技术人员将理解,除了出于移动目的而特别构造的任何元件之外,根据本发明的实施方式的构造还可应用于固定类型的终端(诸如,数字TV、台式计算机等)。
图1是根据本发明的实施方式的移动终端的框图。移动终端100可包括:无线通信单元110、A/V(音频/视频)输入单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180和电源单元190等。图1示出了移动终端具有各种组件,但并不需要实现所有这些示出的组件。可另选地实现更多或更少的组件。
无线通信单元110典型地包括允许在移动终端100与该移动终端所处的无线通信系统或者网络之间进行无线通信的一个或多个模块。例如,无线通信单元可包括广播接收模块111、移动通信模块112、无线互联网模块113、短距离通信模块114和定位信息模块115中的至少一个。
广播接收模块111经由广播信道从外部广播管理服务器(或其它网络实体)接收广播信号和/或广播相关信息。
广播信道可包括卫星信道和/或地面信道。广播管理服务器可以是生成并发送广播信号和/或广播相关信息的服务器或者是接收之前生成的广播信号和/或广播相关信息并且将它发送到终端的服务器。广播信号可包括TV广播信号、无线广播信号、数据广播信号等。另外,广播信号还可包括与TV或无线广播信号结合的广播信号。
广播相关信息可指与广播信道、广播节目或广播业务提供商相关的信息。广播相关信息还可经由移动通信网络提供,在这种情况下,可通过移动通信模块112接收广播相关信息。
广播相关信息可以各种形式存在。例如,广播相关信息可以数字多媒体广播(DMB)的电子节目指南(EPG)、数字视频广播手持(DVB-H)的电子业务指南(ESG)等形式存在。
广播接收模块111可被配置为接收通过使用各种类型的广播系统广播的信号。具体地,广播接收模块111可通过使用诸如多媒体广播-地面(DMB-T)、数字多媒体广播-卫星(DMB-S)、数字视频广播-手持(DVB-H)、称为仅媒体前向链路()的数据广播系统、综合业务数字广播-地面(ISDB-T)等数字广播系统接收数字广播。广播接收模块111可被配置为适用于提供广播信号的每个广播系统以及上述数字广播系统。
通过广播接收模块111接收到的广播信号和/或广播相关信息可被存储在存储器160中。
移动通信模块112向和/或从基站、外部终端和服务器中的至少一个发送和/或接收无线信号。这样的无线信号可根据文本和/或多媒体消息发送和/或接收而包括语音呼叫信号、视频呼叫信号或各种类型的数据。
无线互联网模块113支持移动终端进行无线互联网访问。该模块可内部地或外部地连接至终端。所实现的无线互联网接入技术可包括WLAN(无线LAN)(Wi-Fi)、Wibro(无线宽带)、Wimax(全球微波互联接入)、HSDPA(高速下行分组接入)等。
短距离通信模块114是用于支持短距离通信的模块。短距离通信技术的一些示例包括BluetoothTM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、ZigBeeTM等。
定位信息模块115是用于检查或者获取移动终端的定位(或位置)的模块。定位信息模块的典型示例是GPS(全球定位系统)或WiFi(无线保真)模块。
参照图1,A/V输入单元120被配置为接收音频或视频信号。A/V输入单元120可包括相机121和麦克风122。相机121处理由图像拍摄装置在视频拍摄模式或图像拍摄模式下所获得的静止照片或视频的图像数据。经处理的图像帧可在显示单元151上显示。
经相机121处理后的图像帧可被存储在存储器160(或其它存储介质)中或者经由无线通信单元110发送。根据移动终端的配置,可以设置两个或更多个相机121。
麦克风122可在电话通话模式、录音模式、语音识别模式等下接收声音(可听数据)并且可将此声音处理成音频数据。就电话通话模式而言,经处理后的音频(语音)数据可被转换为可经由移动通信模块112发送给移动通信基站的格式用于输出。麦克风122可实现用于消除(或抑制)在接收和发送音频信号的过程中生成的噪声或干扰的各种类型的噪声消除(或抑制)算法。
用户输入单元130可由用户输入的用于控制移动终端的各种操作的命令来生成输入数据。用户输入单元130可包括键盘、薄膜开关、触摸板、轻触滚轮、轻触开关等。
感测单元140检测移动终端100的当前状态(诸如,移动终端100的打开或关闭状态、移动终端100的定位、用户与移动终端100的接触(即,触摸输入)存在与否、移动终端100的朝向、移动终端100的加速或减速移动和方向等),并且生成用于控制移动终端100的操作的命令或信号。例如,当移动终端100被实现为滑盖型移动电话时,感测单元140可感测滑盖电话是打开还是关闭的。另外,感测单元140可检测电源单元190是否供电或者接口单元170是否与外部设备连接。
输出单元150被配置为以视觉、听觉和/或触觉方式提供输出(例如,音频信号、视频信号、报警信号、振动信号等)。输出单元150可包括显示单元151、音频输出模块153、报警单元154、触觉模块155等。
显示单元151显示在移动终端100中经处理的信息。例如,当移动终端100处于电话通话模式下时,显示单元151可显示与通话或其它通信(诸如,发文本消息、多媒体文件下载等)关联的用户界面(UI)或图形用户界面(GUI)。当移动终端100处于视频通话模式或图像拍摄模式下时,显示单元151可显示所拍摄的图像和/或接收到的图像、示出视频或图像及其相关功能的UI或GUI等。
显示单元151可包括液晶显示器(LCD)、薄膜晶体管-LCD(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器和电子墨水显示器中的至少一种。
这些显示器中的一些可被配置为是透明或透光的,以允许从外部观看,其可被称为透明显示器。典型的透明显示器可以是(例如)TOLED(透明有机发光二极管)显示器等。通过此配置,用户可通过终端机体的显示单元151所占据的区域看到设置在该终端机体后侧的对象。
移动终端100可根据其具体所需的实施方式而包括两个或更多个显示单元。例如,多个显示单元可分别地或者一体地设置在移动终端的一个表面上,或者可分别地设置在互不相同的表面上。
另外,显示单元151还可被配置为显示立体图像的立体显示单元152。这里,立体图像可以是三维(3D)立体图像,3D立体图像是指使观众感到监视器或屏幕上的物体的渐进深度和逼真度与真实空间相同的图像。3D立体图像是通过使用双眼视差实现的。双眼视差是指因双眼位置造成的视差。当双眼观看不同的2D图像时,图像通过视网膜传送到大脑并且在大脑中被组合以提供深度感和逼真感觉。
立体显示单元152可采用立体显示方案(诸如,立体方案(眼镜方案)、自动立体方案(无眼镜方案)、投影方案(全息方案)等)。家用电视接收器等一般使用的立体方案包括惠斯登立体方案(Wheatstone stereoscopic scheme)等。
自动立体方案包括(例如)视差屏障方案、透镜方案、集成成像方案等。投影方案包括反射型全息方案、透射型全息方案等。
通常,3D立体图像由左图像(左眼图像)和右图像(右眼图像)组成。根据左图像和右图像如何组合成3D立体图像,3D立体成像方法被划分成其中左图像和右图像在帧中上下设置的上下方法、其中左图像和右图像在帧中左右设置的L-R(左右,并排)方法、其中左图像和右图像的片段以搭接形式(tile form)设置的棋盘方法、其中左图像和右图像按列和行交替设置的交错方法、其中左图像和右图像按时间交替显示的时间序列(或逐帧)方法。
另外,至于3D缩略图图像,分别从原始图像帧的左图像和右图像生成左图像缩略图和右图像缩略图,然后组合左图像缩略图和右图像缩略图以生成单个3D缩略图图像。通常,缩略图是指缩小的图像或缩小的静止图像。显示生成的左图像缩略图和右图像缩略图,使其间的水平距离差是与屏幕上的左图像和右图像之间的视差对应的深度,从而提供立体空间感觉。
通过立体处理单元152a在立体显示单元152上显示用于实现3D立体图像所需的左图像和右图像。立体处理单元可接收3D图像并且提取左图像和右图像,或者可接收2D图像并且将它变成左图像和右图像。
同时,当显示单元151和用于检测触摸操作的传感器(下文中,称为“触摸传感器”)以层合方式叠置以形成触摸屏时,显示单元151既可用作输入设备又可用作输出设备。触摸传感器可具有触摸膜、触摸片、触摸板等形式。
触摸传感器可被配置为将施加于显示单元151的特定部分的压力或者在显示单元151的特定部分产生的电容等的变化转变为电子输入信号。触摸传感器可被配置为当施加触摸时检测压力以及所触摸的位置和区域。
当针对触摸传感器进行了触摸输入时,对应信号(或多个信号)被发送给触摸控制器。触摸控制器处理信号并且将对应数据发送到控制器180。因此,控制器180可识别触摸了显示单元151的哪个部分。
参照图1,在触摸屏的内部或附近可设置接近传感器141。接近传感器141是在不进行物理接触的情况下利用电磁力或红外线来检测相对于特定检测表面是否存在对象或者周围是否存在对象的传感器。因此,接近传感器141具有比接触型传感器长得多的寿命,并且它可被用于各种目的。
接近传感器141的示例可包括透射型光电传感器、直接反射型光电传感器、镜像反射型光电传感器、RF振荡型接近传感器、电容型接近传感器、磁接近传感器、红外接近传感器等。在触摸屏是电容型的情况下,通过电场按照指点物接近程度的变化来检测该指点物的接近程度。在这种情况下,触摸屏(触摸传感器)可被归类为接近传感器。
在下面的描述中,为了简明起见,被识别为指点物被设置成靠近触摸屏将被称为“接近触摸”,而被识别为指点物实际地接触了触摸屏将被称为“接触触摸”。在这种情况下,当指点物处于接近触摸的状态下时,意味着指点物被设置成垂直对应于触摸屏。
通过采用接近传感器141,可检测接近触摸和接近触摸模式(例如,接近触摸距离、接近触摸速度、接近触摸时间、接近触摸位置、接近触摸移动状态等),并且与检测到的接近触摸操作和接近触摸模式对应的信息可被输出到触摸屏。
当触摸传感器以分层方式交叠到立体显示单元152上时,或者当组合了立体显示单元和感测触摸操作的3D传感器时,立体显示单元152还可以用作3D输入装置。
作为3D传感器的示例,感测单元140可包括接近传感器141、立体触摸感测单元142、超声感测单元143、相机感测单元144。接近传感器141检测在没有机械接触的情况下利用电磁力或红外线施加触摸的感测对象(例如,用户的手指或手写笔)和检测表面之间的距离。通过使用该距离,终端识别触摸了立体图像中的哪个部分。
具体地,当触摸屏是静电触摸屏时,根据感测对象的接近度基于电场变化来检测感测对象的接近程度,通过使用接近程度来识别对3D图像的触摸。
立体触摸感测单元142被配置成检测施加到触摸屏的触摸的强度或持续时间。例如,立体触摸感测单元142感测施加触摸的压力,施加的压力强,立体触摸感测单元142识别该触摸是相对于朝向终端内部更远离触摸屏设置的对象的触摸。
超声感测单元143被配置成通过使用超声波识别感测对象的位置信息。
超声感测单元143可包括(例如)光学传感器和多个超声传感器。光学传感器被配置成感测光并且超声传感器可被配置成感测超声波。由于光比超声波快得多,因此光到达光学传感器的时间比超声波到达超声传感器的时间早得多。因此,基于作为参考信号的光,可通过使用光到达光学传感器的时间和超声波到达超声传感器的时间之间的时间差来计算波生成源的位置。
相机感测单元144包括相机、光传感器和激光传感器中的至少一个。例如,可组合相机和激光传感器来检测感测对象相对于3D立体图像的触摸。当激光传感器检测到的距离信息被添加到相机拍摄的2D图像上时,可得到3D信息。
在另一个示例中,光传感器可被层合到显示装置上。光传感器被配置成扫描感测对象接近触摸屏的移动。详细地,光传感器包括多行多列的光电二极管和晶体管,用于通过使用按所施加光量而变化的电信号来扫描安装在光传感器上的内容物。即,光传感器根据光的变化来计算感测对象的坐标,因此得到感测对象的位置信息。
音频输出模块153可在通话信号接收模式、通话模式、录音模式、语音识别模式、广播接收模式等下转换并输出从无线通信单元110接收或存储在存储器160中的声音音频数据。另外,音频输出模块153可提供与移动终端100执行的特定功能相关的可听输出(例如,通话信号接收声音、消息接收声音等)。音频输出模块153可包括扬声器、蜂鸣器或其他声音生成设备。
报警单元154输出用于通知移动终端100发生了事件的信号。移动终端100中生成的事件可包括通话信号接收、消息接收、键信号输入、触摸输入等。除了视频或音频信号之外,报警单元154还可用不同方式输出信号,例如,用于通知发生了事件。还可经由音频输出模块153输出视频或音频信号,这样,显示单元151和音频输出模块153可被归类为报警单元154的部分。
触觉模块155生成用户能感觉到的各种触觉效果。由触觉模块155生成的触觉效果的典型示例是振动。触觉模块155的强度和模式是可控的。例如,不同的振动可被组合地输出或者顺序地输出。
除了振动之外,触觉模块155还可生成多种其它触觉效果(诸如,通过诸如针阵列相对于接触皮肤垂直移动的刺激所生成的效果、通过喷射孔或吸孔的空气喷射力或吸力所生成的效果、在皮肤上接触所生成的效果、与电极接触所生成的效果、静电力所生成的效果等、利用可吸收或生成热的元件再现冷感和热感所生成的效果)。
触觉模块155可被实现为让用户通过诸如用户的手指或手臂的肌肉感觉来感觉触觉效果,以及通过直接接触传送触觉效果。根据移动终端100的构造,可提供两个或更多个触觉模块155。
存储器160可存储用于控制器180所执行的处理和控制操作的软件程序,或者可暂时存储被输入或输出的数据(例如,电话簿、消息、静止图片、视频等)。另外,存储器160可存储关于当触摸输入到触摸屏时输出的各种模式的振动和音频信号的数据。
存储器160可包括至少一种类型的存储介质,包括闪存、硬盘、多媒体卡微型存储器、卡型存储器(例如,SD或DX存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘和光盘。另外,移动终端100可与在互联网上执行存储器160的存储功能的网络存储设备相关联地进行操作。
接口单元170用作与连接移动终端100的每个外部设备的接口。例如,接口单元170可向外部设备发送数据,向移动终端100的各元件收发电力,或者向外部设备发送移动终端100的内部数据。例如,接口单元170可包括有线或无线头戴听筒端口、外部电源端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。
识别模块可以是存储用于认证使用移动终端100的权限的各种信息的芯片并且可包括用户识别模块(UIM)、用户身份模块(SIM)、通用用户身份模块(USIM)等。另外,具有识别模块的装置(下文中,被称为“识别装置”)可采用智能卡的形式。因此,识别装置可经由端口与终端100连接。
当移动终端100连接外部支架时,接口单元170可用作允许通过其从支架向移动终端100供电的通道或者可用作允许用户从支架输入的各种命令信号通过其传送到移动终端的通道。从支架输入的各种命令信号或电力可被操作为用于识别移动终端正确安装在支架上的信号。
控制器180典型地控制移动终端的总体操作。例如,控制器180执行与语音通话、数据通信、视频通话等相关的控制和处理。控制器180可包括用于再现多媒体数据的多媒体模块181。多媒体模块181可被配置在控制器180内或者可被配置为与控制器180分开。
控制器180可执行模式识别处理,用于将在触摸屏上执行的手写输入或画图输入分别识别为字符或图像。
另外,当移动终端的状态满足预设条件时,控制器180可执行用于限制用户输入控制命令的锁定状态。另外,在锁定状态下,控制器180可基于通过显示单元151感测到的触摸输入来控制锁定状态下显示的锁定画面。
电源单元190接收外部电力或内部电力并且在控制器180的控制下提供操作各个元件和组件所需的合适电力。
本文描述的各种实施方式可利用(例如)软件、硬件或其任何组合在计算机可读介质或其类似介质中实现。
对于硬件实现,本文描述的实施方式可利用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、设计用于执行本文描述的功能的电子单元中的至少一个来实现。在一些情况下,这种实施方式可由控制器180本身来实现。
对于软件实现,本文描述的诸如进程或功能的实施方式可用独立的软件模块来实现。各软件模块可执行本文描述的一个或更多个功能或操作。
软件代码可用以任何适当的编程语言编写的软件应用来实现。软件代码可被存储在存储器160中并且由控制器180来执行。
下文中,将描述能通过根据本发明的实施方式的可通过移动终端100实现的通信系统。图2A和图2B是根据本发明的移动终端能在其中进行操作的通信系统的概念图。
首先,参照图2A,通信系统可以使用不同的空中接口和/或物理层。例如,通信系统利用的空中接口示例包括频分多址(FDMA)、时分多址(TDMA)、码分多址(CDMA)、通用移动电信系统(UMTS)(具体地,长期演进(LTE))、全球移动通信系统(GSM)等。作为非限制性示例,此后的描述涉及CDMA通信系统,但这种教导同等地应用于其它类型的系统。
下文中,为了描述的目的,将描述CDMA,但本发明可应用于包括CDMA无线通信系统的任何通信系统。
参照图2A,CDMA无线通信系统可包括多个移动终端100、多个基站(BS)270、基站控制器(BCS)275、移动切换中心(MSC)280。MSC280被配置成与公共交换电话网络(PSTN)290接口。MSC280还被配置成与BSC275接口,BSC275可经由回程线路连接到基站270。可根据众多已知接口(包括例如E1/T1、ATM、IP、PPP、帧中继、HDSL、ADSL或xDSL)中的任一个配置回程线路。要理解,如图2A中所示的系统中可包括多个BSC275。
各BS270可为一个或多个扇区(或区域)服务,各扇区被全向天线或从BS270径向向外指向特定方向的天线覆盖。另选地,各扇区可被进行多样接收的两个或更多个天线覆盖。各BS270可被配置成支持多个频率分配,其中,各频率分配具有特定频谱(例如,1.25MHz、5MHz等)。
扇区和频率分配的交集可被称为CDMA信道。BS270还可被称为基站收发子系统(BTS)或其它等价术语。在一些情况下,术语“基站”可用于被统称为单个BSC275和至少一个BS270。基站还可被表示为“小区站点”。另选地,特定BS270的各个扇区可被称为多个小区站点。
如图2A中所示,广播发送器(BT)295向在系统内操作的移动终端100发送广播信号。如图1中所示的广播接收模块111设置在移动终端100中,用于接收BT295发送的广播信号。
另外,在图2A中,示出多个全球定位系统(GPS)卫星200。卫星200有助于定位多个移动终端100中的至少一个。在图2A中,示出许多卫星200,但可用任意数量的卫星来得到有用的定位信息。如图1中所示的GPS模块115典型地被配置成与卫星200协作来得到所需的定位信息。作为GPS追踪技术的替代或补充,可使用可追踪移动终端位置的其它技术。另外,至少一个GPS卫星200可选择性或另外地操纵卫星DMB发送。
作为无线通信系统的一个典型操作,BS270从各种移动终端100接收反向链路信号。移动终端100典型地从事通话、发消息和其它类型通信。特定基站270接收的各反向链路信号在该特定BS270内被处理。所得的数据被转发到关联的BSC275。BSC275提供通话资源分配和移动管理功能,包括BS270之间的软切换的协调。
BSC275还将接收到的数据路由到MSC280,MSC280提供用于与PSTN290接口的附加路由服务。类似地,PSTN290与MSC280接口,MSC280与BSC275接口,BSC275进而控制BS270以将正向链路信号发送到移动终端100。
接下来,将参照图2B描述使用Wi-Fi(无线保真)定位系统(WPS)300获取移动终端的位置信息的方法。Wi-Fi定位系统(WPS)300是指利用移动终端100中设置的Wi-Fi模块和用于向/从Wi-Fi模块发送/接收的无线接入点320,利用Wi-Fi作为追踪移动终端100位置的技术的基于无线局域网(WLAN)的位置确定技术。
Wi-Fi定位系统300可包括WiFi位置确定服务器310、移动终端100、连接到移动终端100的无线接入点(AP)320、存储有任何无线AP信息的数据库330。
Wi-Fi位置确定服务器310基于移动终端100的位置信息请求消息(或信号)提取连接移动终端100的无线AP320的信息。无线AP320的信息可通过移动终端100被发送到Wi-Fi位置确定服务器310或者从无线AP320发送到Wi-Fi位置确定服务器310。
基于移动终端100的位置信息请求消息而提取的无线AP的信息可以是MAC地址、SSID、RSSI、信道信息、隐私、网络类型、信号强度和噪声强度中的至少一个。
Wi-Fi位置确定服务器310接收如上所述连接到移动终端100的无线AP320的信息,将接收到的无线AP320的信息与预先创建的数据库330中包含的信息进行比较,以提取(或分析)移动终端100的位置信息。
另一方面,参照图2B,作为示例,连接到移动终端100的无线AP被图示为第一、第二和第三无线AP320。然而,连接到移动终端100的无线AP的数量可根据移动终端100所处的无线通信环境以各种方式变化。当移动终端100连接到至少一个无线AP时,Wi-Fi定位系统300可追踪移动终端100的位置。
接下来,更详细地考虑存储有任何无线AP信息的数据库330,设置在不同位置的任何无线AP的各种信息可被存储在数据库330中。
存储在数据库330中的任何无线AP的信息可以是诸如MAC地址、SSID、RSSI、信道信息、隐私、网络类型、纬度和经度坐标、无线AP所处的建筑、楼层数、详细的室内位置信息(可用的GPS坐标)、AP拥有者的地址、电话号码等信息。
以此方式,任何无线AP信息和与任何无线AP对应的位置信息被一起存储在数据库330中,因此,Wi-Fi位置确定服务器310可从数据库330中检索与连接到移动终端100的无线AP320的信息对应的无线AP信息,以提取与搜索到的无线AP匹配的位置信息,从而提取移动终端100的位置信息。
此外,所提取的移动终端100的位置信息可通过Wi-Fi位置确定服务器310被发送到移动终端100,从而获取移动终端100的位置信息。
下文中,图3A是示出与本公开相关的移动终端100的示例的透视正视图。本文公开的移动终端100设置有直板型终端机体。然而,本发明不限于此,而且可能可应用于其中两个或更多个机体以相对可移动方式彼此组合的各种结构(诸如,手表型、夹具型、眼镜型或折叠型、翻盖型、旋转型、旋动型等)。
终端机体包括形成终端外观的壳体(外壳、外罩、盖等)。在这个实施方式中,壳体可被划分成前壳体101和后壳体102。各种电子组件被安装在形成在前壳体101和后壳体102之间的空间中。在前壳体101和后壳体102之间可另外地设置至少一个中间壳体,用于覆盖电池191的电池盖103可以可脱离地构造在后壳体102上。
壳体可通过将合成树脂注射成型来形成或者也可由例如不锈钢(STS)、钛(Ti)等的金属形成。
显示单元151、第一音频输出模块153a、第一相机121a、第一操纵单元131等可设置在终端机体的前表面上,麦克风122、接口单元170、第二操纵单元132等可设置在终端机体的侧表面上。
显示单元151可被配置成显示(输出)正在移动终端100中处理的信息。显示单元151可包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器和电子墨水显示器中的至少一个。
显示单元151可包括用于通过触摸方法接收控制命令的触摸感测机制。当对显示单元151上的任一位置进行触摸时,触摸感测机制可被配置成感测这个触摸并且输入与所触摸位置对应的内容。通过触摸方法输入的内容可以是文本或数值、或能够指示或指明各种模式的菜单项。
触摸感测机制可形成为透明的,以允许看到显示单元151上显示的可视信息,并且可包括用于增强触摸屏亮的位置的可视性的结构。参照图3A,显示单元151占据前壳体101的大部分前表面。
第一音频输出单元153a和第一相机121a设置在邻近显示单元151的两个端部中的一个端部的区域,第一操纵输入单元131和麦克风122设置在邻近其另一个端部的区域。第二操纵单元132(参见图3B)、接口170等可设置在终端机体的侧表面上。
第一音频输出模块153a可被实现为用于向用户的耳朵或扬声器传送语音声音的接收器形式,扬声器用于输出各种警报声音或多媒体再现声音。
可配置成使得第一音频输出模块153a生成的声音沿着结构机体之间的组装间隙释放。在这种情况下,就外观而言,被独立形成以输出音频声音的孔不会被看到或者被隐藏,从而进一步简化了移动终端100的外观。然而,本发明可不限于此,但可在窗口上形成用于释放声音的孔。
第一相机121a在视频通话模式或拍摄模式下处理通过图像传感器得到的视频帧(诸如,静止图像或移动图像)。经处理的视频帧可在显示单元151上显示。
用户输入单元130被操纵成接收用于控制移动终端100操作的命令。用户输入单元130可包括第一操纵单元131和第二操纵单元132。第一操纵单元131和第二操纵单元132可被统称为操纵部,如果是让用户以触觉感觉(诸如,触摸、推动、滚动等)执行操纵的触觉方式,则可采用任何方法。
本附图示出第一操纵单元131是触摸键,但本公开不限于此。例如,第一操纵单元131可配置有机械键、或触摸键和机械键的组合。
第一操纵单元131和/或第二操纵单元132接收的内容可按各种方式设置。例如,第一操纵单元131可用于接收诸如菜单、主键、取消、搜索等命令,第二操纵单元132可接收诸如控制从第一音频输出模块153a输出的音量或者切换至显示单元151的触摸识别模式的命令。
麦克风122可被形成用于接收用户的语音、其它声音等。麦克风122可设置在多个位置并且被配置成接收立体声。
接口单元170用作允许移动终端100与外部装置交换数据的路径。例如,接口单元170可以是以有线或无线方式连接到耳机的连接端子、用于近场通信的端口(例如,红外数据协会(IrDA)端口、蓝牙端口、无线LAN端口等)、用于向移动终端100供电的电源端子中的至少一个。接口单元170可被实现为用于容纳外部卡(诸如,用户身份模块(SIM)或用户识别模块(UIM))和用于信息存储的存储卡的插座的形式。
图3B是示出图3A中示出的移动终端100的透视后视图。参照图3B,第二相机121b可附加地安装在终端机体的后表面(即,后壳体102)上。第二相机121b具有与第一相机单元121a的图像拍摄方向基本上相反的图像拍摄方向,并且可具有像素数量与第一相机单元121a的像素数量不同的像素。
例如,优选地,第一相机121a具有不足以造成当用户在视频通话等期间拍摄他或她自己的面部并将它发送到另一方时有困难的较小数量的像素,第二相机121b由于用户常常拍摄不立即发送的普通对象而具有较大数量的像素。第一相机121a和第二相机121b可按可旋转和可弹出方式设置在终端机体中。
闪光灯123和反射镜124可附加地邻近第二相机121b设置。当用第二相机121b拍摄对象时,闪光灯123向对象照射光。反射镜124让用户在使用第二相机121b拍摄他自己或她自己(自拍模式)时以反射方式看到他或她自己的面部等。
第二音频输出模块153b可附加地设置在终端机体的后表面上。第二音频输出模块153b与第一音频输出模块153a(参见图3A)一起可实现立体声功能,并且还可用于实现电话通话期间的免提模式。
除了用于进行电话通话等的天线之外,用于接收广播信号的天线可附加地设置在终端机体的侧表面上。构成广播接收模块111的部分的天线可以可缩回方式设置在终端机体中。
用于向移动终端100供电的电源单元190可安装在终端机体上。电源单元190可安装在终端机体内,或者可包括以可脱离方式构造在终端机体外部的电池191。附图示出电池盖103与后壳体102组合以覆盖电池191,从而限制电池191的脱离并且保护电池191免受外部冲击和外来物质的影响。
接下来,图4是示出移动终端的控制方法的流程图并且图5A是示出根据本发明的实施方式的图4的控制方法的概念图。
参照图5A的(a),用户通过移动终端100的输出单元150接收特定信息。例如,用户可接收输出到移动终端100的显示单元的第一特定信息610。另外,特定信息610可以是通过扬声器153输出的音频信息、通过显示单元输出的可视信息、或包括听觉信息和可视信息的媒体信息。然而,特定信息中包括的内容不受限制。
参照图5A的(a),显示单元151为用户显示作为第一特定信息610的画面信息。然后,在用户被提供第一特定信息610的同时,控制器180接收关于用户身体状况的信息。
身体状况信息是由接触用户身体的测量装置900生成的。例如,测量装置900可以是固定到用户手腕的手表,使得其至少某个区域接触用户的皮肤。然而,可使用任何类型的装置,只要它可感测用户的身体变化即可。例如,测量装置可以是可在连续的基础上接触用户面部区域的眼镜、耳环、手表、手镯等。另外,测量装置900可被安装在终端机体100接触用户手部的区域中。
另外,可通过用户皮肤传达的心跳的变化、测得的血流量的变化等来生成身体状况信息。
图5D是示出测量装置900的概念图。参照图5D,测量装置900可包括光发射单元911、光接收单元912、专用MCU920和主MCU930。光发射单元911和光接收单元912与用户皮肤并联地设置。光接收单元912被形成为感测从光发射单元911发射并且透射穿过用户皮肤的光。
同时,光发射单元911和光接收单元912可被形成为设置成使用户皮肤组织被插入其间。例如,光发射单元911和光接收单元912可被形成为,使得测量装置900被安装在其皮肤组织较薄的手指、耳垂等中。
光接收单元可根据血流速率的密度差异来过滤光学变化,放大光学变化以形成波形。专用MCU可被保持于启动状态或者可被控制成周期性地在每个预设时间打开或关闭。光接收单元912将关于测得的血流速率的信息传送到专用MCU。专用MCU将从光接收单元912接收的血流速率的变化与预设的参考变化进行比较,并且当检测到该变化是快速变化时,专用MCU启动主MCU930。
另外,主MCU可基于光接收单元912收集的信息来收集用户心跳的周期模式。例如,主MCU可生成心率变异性(HRV)信息。然后,可通过HRV信息分析心跳的速率,进而可估计用户的受激状况。
图5A的(a)中以曲线图形式示出的身体状况信息711对应于从测量装置900接收的HRV信息。即,在用户正被提供第一特定信息610的同时(例如,在显示单元151正在输出画面信息的同时),控制器180可从测量装置900接收身体状况信息711(图4中的S701)。控制器180基于身体状况信息711分析用户的感觉(S702),并且可通过HRV信息估计用户的感觉。
更详细地,图5E包括示出从测量装置900接收的身体状况信息711的曲线图。将参照图5E描述通过身体状况信息711估计用户的感觉的方法。
在图5E中,(a)是基于当用户没有受激时测量装置900感测到的血流速率的曲线图。当用户没有受激时,随时间推移的用户心率得以均匀保持。即,基于心率的曲线图具有恒定形式。基于用户心率的曲线图可对应于感测到的用户血流速率的平均值。另外,测量装置900可存储在用户没有受激的稳定状况下根据用户血流速率的曲线图案,并且将平均曲线图案定义为配戴测量装置900的用户没有受激的状态。
另外,根据个体差异出现的心率测量和感觉分析的误差可降至最小。例如,当血流速率由于心率增加而增加时,曲线图中对应于y轴的电压值会增大,并且由于心率增加,导致形成峰值点的时间间隔窄。也就是说,峰值点之间的时间间隔是心率的周期。
当测量这个状态下的心率时,专用MCU920可受控制,不启动主MCU930。即,当根据光发射单元911和光接收单元912感测到的血流速率的曲线图案不同于基于用户稳定状况的曲线图案时,例如,当峰值点之间的时间差比预设的阈值时间短时,当电压值高于预设的参考电压等等时,专用MCU920可启动主MCU930。因此,当用户处于受激状况时,控制器180可通过启动的主MCU930接收身体状况信息。
因此,基于曲线图案,测量装置900可感测到用户处于受激状况。例如,在图5E中,(b)示出当用户处于来自正面感觉的受激状况时感测到的曲线图案。这里,正面感觉是指诸如感激、愉快、喜爱、高兴等的感觉。
当曲线图案被形成为是规则的并且具有徐缓弯曲形状时,控制器180可估计用户的感觉是处于正面受激状况。即,当峰值点的电压值基本上近似、峰值点之间的间隔相对恒定并且峰值点形成的形状是曲线时,控制器可判定是正面感觉。可形成其中在受激状况下测得的电压值逐渐增大的图案。因此,用户可判定他或她不处于稳定状态。
同时,参照图5E的(c),当曲线图案相对不规则时,控制器可感测到用户处于来自负面感觉的受激状况。例如,当峰值点的电压值不规则、峰值点之间的间隔不规则并且峰值点的形状尖锐时,存在诸如生气、焦虑、害怕等负面受激状况。
也就是说,当峰值点之间的间隔变窄时,相对于稳定状态的情形(或者当峰值点的电压值增大时),控制器180可感测到用户处于受激状况并且通过曲线图案的形状判定情绪状态的正面性和负面性。因此,用户可根据正面受激状况和负面受激状况以不同方式控制移动终端。
另外,参照图4,控制器180将基于根据测量装置900接收的身体状况信息而估计的正面用户状况的感觉数据附于第一特定信息610(S703)。控制器180还可控制存储器160存储附有感觉数据的第一特定信息610。
参照图5A的(b),控制器180可控制输出单元150来输出与感觉数据和特定信息中的至少一个相关的内容。例如,第一特定信息610可对应于用于购买货物(或制品)的互联网购物中心的画面信息,第一相关内容810可对应于用于接收购买货物的信息的画面信息。
更详细地,控制器180通过使用在输出第一特定信息610的同时接收的用户的身体状况信息来估计正面感觉。控制器180将正面感觉数据附于特定信息。另外,控制器180控制显示单元151基于正面感觉数据来输出与购买包括在第一特定信息610中的货物的阶段对应的第一相关内容810。控制器180可控制显示单元151,以在用户没有施加控制命令的情况下从第一特定信息610变成第一相关内容810。
同时,控制器180控制存储器160,以存储附有感觉数据的特定信息。另外,控制器180可控制存储器160,以基于感觉数据将包括特定信息的多条信息归类。例如,控制器180可基于感觉数据以喜好次序排列多条信息,控制显示单元151将附有基于施加到显示单元151的用户触摸输入而选择的感觉数据的至少一条信息与多条特定信息一起显示。
例如,参照图5A的(c),控制器180可通过使用感觉数据确定多级喜好,控制存储器160或显示单元151来根据喜好输出多条信息。以喜好次序排列的这多条信息可基本上对应于同一类别,但本发明构思不限于此。在图5A中,(c)示出输出根据喜好分类和存储的多条信息811a的画面信息。另外,控制器180可控制显示单元151来输出与感觉数据相关的内容。
另外,控制器180可通过使用感觉数据自动地存储用户没有单独存储的特定信息。例如,被基于感觉数据分类的多条信息可对应于多条图像信息,这多条图像信息可被存储在图册应用的存储空间中。
因此,在特定信息被提供给用户的同时,根据用户的感觉提供与特定信息相关的内容,因此,可在没有单独的控制命令的情况下为用户提供内容。另外,在移动终端100提供特定信息的同时,在没有用户的控制命令的情况下感觉数据被附于特定信息并且被存储,并且根据感觉数据将特定信息分类,因此可为用户提供关于特定感觉的信息。因此,在没有控制命令的情况下,可只用包括感觉的记忆无意识地为用户提供内容。
接下来,图5B和图5C是示出图4的控制方法的概念图。参照图5B,将描述基于负面感觉数据控制移动终端的方法。在图5B中,(a)示出被提供来自外部的第二特定信息620的用户。在接收第二特定信息620的同时,从测量装置900接收用户的感觉数据712。
控制器180可分析感觉数据712,以估计用户具有负面感觉。控制器180还可得到外部提供的第二特定信息620。例如,控制器180可通过麦克风122接收与第二特定信息620相关的声音或者可通过相机121得到第二特定信息620的图像。
例如,如图5B中所示,当通过相机121得到试映影片的介质时,控制器180可将感觉数据附于第二特定信息620,控制存储器160来存储附有负面感觉数据的第二特定信息620。
在图5B中,(b)示出显示单元151,显示单元151输出包括与第二特定信息620基本上相同的信息的画面信息621。例如,画面信息621对应于用于预订第二特定信息620中包括的影片的网页。
如图5B的(c)中所示,当施加用于预订影片的控制命令时,控制器180可控制显示单元151来输出与附于第二特定信息620的感觉数据相关的第一附加内容821。例如,第二相关内容821可包括询问用户是否想要预订影片的提示短语(真的想预订吗?)或描述感觉数据的短语(估计具有90%的不佳印象)。因此,用户可想起他或她过去对要预订的影片的负面感觉并且相应作出决定。
另外,控制器180可控制显示单元151基于第二特定信息620和感觉数据712来输出第一附加内容821。例如,如图5B的(d)中所示,控制器180可控制显示单元151来基于第二特定信息620的类别和负面感觉数据提供过去存储的信息之中的附有正面感觉数据的电影相关内容822。
当移动终端100当前输出的信息匹配附有用户的感觉数据的特定信息时,控制器180控制输出单元150向用户提供对应信息。因此,可为用户提供考虑使用当前输出的信息来执行功能的机会。
接下来,图5C是示出分类并且存储附有感觉数据的特定信息的控制方法的概念图。控制器180可控制存储器160将附有多个感觉数据的多条特定信息分别成像,存储它们,还控制显示单元151输出感觉数据和这多条特定信息。例如,控制器180可控制显示单元151输出指示感觉数据的图标811b。控制器180可基于施加于图标811b的触摸输入控制显示单元151输出附有特定感觉数据的至少一条特定信息,如图5C的(b)和(c)中所示。
当特定信息对应于用于购买货物(或制品)的购买页时,控制器180可在成像的特定信息中形成超连接。也就是说,控制器180可基于施加于特定信息的触摸输入控制显示单元151输出对应于特定信息的网页。因此,可为用户提供他或她预言的信息,尽管他或她并没有记录该信息,并且用户可以通过使用该信息立即执行另外的功能。
根据本实施方式,当在没有控制命令的情况下用户具有特别感觉时,移动终端100记录从移动终端100或外部提供给用户的特定信息,将感觉数据附于该特定信息,并且存储它。另外,当为用户提供与特定信息或相关信息相同的信息时,移动终端100可将附有感觉数据的特定信息提供给用户。因此,用户可回想起通过周围环境中包括的特定信息无意识变化的感觉变化。
图6A至图6C是示出根据本发明的各种实施方式的移动终端的控制方法的概念图。将描述将在得到图像时生成的感觉数据附于图像的控制方法。具体地,图6A是示出通过相机121(图6A示出前部相机121a)得到图像的情形的视图。
在通过相机121得到图像的同时,用户将通过相机121输出到显示单元151的预览画面识别为第三特定信息630。另外,用户感测周围环境以及通过显示单元151提供的预览。
在通过相机121得到图像的同时,控制器180可通过测量装置900接收用户的身体状况信息。另外,在通过使用后部相机121b得到图像的同时,控制器180可控制前部相机121a拍摄用户的面部720。例如,当施加用于控制后部相机121b的控制命令以对周围环境成像时,控制器180可基于控制命令操作前部相机121a。
控制器180通过使用拍摄的用户面部图像和从测量装置900接收的身体状况信息中的至少一个来分析用户的感觉。控制器可将用户的感觉数据附于得到的图像。
例如,控制器180基于来自用户的另外的控制命令控制存储器160来存储得到的图像630。另外,控制器180可控制存储器160将感觉数据可视化以生成第三相关内容830并且控制存储器将第三相关内容830与图像630一起存储,如图6A的(b)和(c)中所示。另外,控制器180可控制显示单元151来输出第三相关内容830,使得它与图像630重叠。
也就是说,参照图6A的(b),控制器180可将感觉数据成像以生成第三相关内容830并且控制显示单元151来输出第三相关内容830使得它与图像630重叠。另外,控制器180可基于感觉数据控制存储器160将附有各种类型的感觉数据的多个图像作为内容进行分类,并且存储它们,如图6A的(c)中所示。
具体地,图6A的(c)示出表现了图册应用的存储空间的执行画面。控制器180可控制存储器160将附有对应感觉数据的图像存储在与不同类型的感觉数据相关的划分空间中。另外,控制器180可控制显示单元151输出通过将不同类型的感觉数据可视化成对应于各个感觉数据的文件夹图像并且表现其中存储有各个图像的划分空间而得到的相关内容830。
控制器180可基于施加于表现任何单个感觉数据的文件夹的触摸输入,控制显示单元151来输出与附有所选择的感觉数据的至少一个图像对应的第二附加内容831。即,控制器180将用户的感觉分类成不同类型的感觉数据。例如,基于身体状况信息,感觉数据可被分类为笑、生气、悲伤、高兴、紧张等。各个感觉数据可生成为可视化的第三相关内容830,第三相关内容830可对应于描述人类表情的图像、文本等。
即,控制器180将提供的特定信息与用户的感觉数据一起存储,并且基于感觉数据存储同一类别。因此,用户可回想起相对于特定信息的他的感觉并且可被方便地提供各种类型的特定信息。
将描述根据本发明的另一个实施方式的基于感觉数据提供信息的控制方法。如以上参照图6A描述的,在通过相机121得到图像的同时,控制器180控制存储器160将生成的用户的感觉数据附于图像并且存储它。另外,控制器180控制显示单元151来输出附有感觉数据的图像。
参照图6B,控制器180可基于施加于与输出到显示单元151的感觉数据对应的第三相关内容830的触摸输入控制显示单元151来输出与第三相关内容830相关的第二附加内容831。
例如,控制器180可控制显示单元151来输出附有与第三相关内容830的感觉数据基本上相同的感觉数据的不同图像。不同图像可按缩略图形式输出。因此,可通过使用附于图像的第三相关内容为用户快速提供与感觉数据相关的不同信息。
将参照图6C描述通过感测用户的语音生成感觉数据的控制方法。在图6C中,(a)是示出在接收到用户的语音时控制相机121来拍摄周围环境的情形的视图。为了接收用户的语音,控制器180启动麦克风122。控制器180可通过使用用户的语音来控制前部相机121a或后部相机121b。
控制器180在得到图像时通过测量装置900接收身体状况信息,并且分析通过麦克风122接收的语音。控制器180基于身体状况信息和经分析语音来生成用户的感觉数据。例如,控制器180可分析语音的属性(诸如,细微差异、音量、速度、声调等)以估计用户的感觉。
控制器180可控制存储器160将通过将感觉数据成像而得到的第三相关内容830附于图像并且存储它。根据本实施方式,因为输入以控制移动终端的用户语音以及身体状况信息被作为生成感觉数据的基础,所以可以更准确地识别用户的感觉。
接下来,图7A至图7D是示出用于提供用户的感觉数据或附有感觉数据的特定信息和附加内容的控制方法的概念图。
将参照图7A描述提供与附有感觉数据的特定信息类似的内容的控制方法。参照图7A,在通过输出单元150输出第四特定信息640的同时,控制器180通过测量装置900接收身体状况信息。
更详细地,在输出第四特定信息640的同时,控制器180可在向显示单元151施加触摸输入以执行与第四特定信息640相关的功能时接收身体状况信息。例如,当与第四特定信息640互相配合的子信息(例如,相对于一些发布的反应、评价等)被输入到输出第四特定信息640的显示单元151时,或者当施加用于共享第四特定信息640的触摸输入时,控制器180可识别用户的感觉。
控制器180可控制存储器160将感觉数据附于第四特定信息640或第四特定信息640的属性并且存储它。这里,第四特定信息640的属性可对应于第四特定信息640的类别、源和更高类别、第四特定信息640中包括的内容的类型等。
例如,将描述当生成对应于愉快的感觉数据时,同时正在输出与对应于通过使用无线通信接收到的名谣歌手的音乐会场景的视频文件对应的第四特定信息640。控制器180从无线通信单元下载作为文件的视频,控制存储器160将感觉数据附于视频文件并且存储它。
另选地,控制器180可通过利用与视频一起输出到显示单元151的不同信息等来确定视频的属性。例如,控制器180可提取视频的信息的类型、关于视频中包括的歌手的信息、音乐会、歌曲的名字、歌曲的类型和关于歌词的信息,控制存储器160将感觉数据附于所提取的信息并且存储它。
参照图7A的(b),当用户的感觉变化时,从测量装置900接收身体状况信息。控制器180用身体状况信息生成感觉数据并且在存储器160中搜索与感觉数据匹配的内容。例如,控制器180可控制输出单元150来输出附有对应于愉快的感觉数据的第三附加内容841。
第三附加内容841是已经存储的信息,因为当过去将它提供给用户时,用户对它的感觉是快乐。另外,控制器180可控制输出单元150,在从测量装置900接收身体状况信息时(甚至在用户没有操纵移动终端时)以及当用户使用移动终端时自动地提供附加内容。图7A的(b)示出指示被启动以生成第三附加内容841的移动终端的人工智能型代理的图像520。
例如,当生成对应于用户的悲伤的感觉数据时,控制器180可将移动终端100从其未启动状态启动,基于感觉数据控制显示单元151来输出附加内容。因此,当用户具有特定感觉时,可为用户提供辅助该感觉的内容。
参照图7A的(c),控制器180可搜索与第四特定信息640相关的附加内容,用于进行搜索的源不受限制。例如,当控制器180到达提供内容640的源时,控制器180可在源中搜索与第四特定信息640相关的信息。
更详细地,到达源可对应于访问包括各种类型的内容的特定网站、启动SNS应用等。当感觉数据是正面感觉时,控制器180可搜索与第四特定信息类似的内容。例如,控制器180可搜索具有与第四特定信息的属性重叠(或相同)的属性的内容。在另一个示例中,控制器180可在网络中搜索视频,视频中包括歌手。当用户生成关于负面感觉的感觉数据时,或者当移动终端100到达源时,控制器180可控制输出单元150来输出附加内容842。
根据本实施方式,控制器180可自动地提供与用户感觉和附有感觉数据的特定信息相关的信息,以帮助提高用户的感觉或者快速地提供用户所需的信息。
将参照图7B描述基于用户的感觉数据自动存储特定信息的控制方法。在移动终端100输出第五特定信息650的同时,控制器180可生成用户的感觉数据。例如,第五特定信息650可对应于随时间推移而变化的视频文件的再现画面。
当在输出第五特定信息650的同时生成的感觉数据与预设的特定感觉数据相同时,控制器180可控制存储器160将第五特定信息650成像并且存储它。例如,控制器180可控制存储器160在感觉数据与预设的特定感觉数据相同时对显示单元151上的画面信息进行成像(或拍摄)。
更详细地,随时间推移而移动的视频文件的再现画面可包括根据再现画面而变化的用户感觉,用户可在他或她观看再现画面的同时在没有控制命令的情况下存储第五特定信息650的图像。然而,本发明不限于此并且控制器180可控制移动终端来记录第五特定信息650的视频、记录再现的听觉数据等。
参照图7B的(c),控制器180可控制存储器160将第五特定信息650的图像存储在图册应用的存储空间中。即,控制器180可控制显示单元151(和扬声器)将第五特定信息的部分图像850(或记录的视频和听觉数据)输出到图册应用的执行画面。
将参照图7C描述根据另一个实施方式的将第五特定信息651的一部分存储在移动终端100中的控制方法。根据本实施方式的移动终端100'a对应于可配戴在用户面部上的可穿戴眼镜。根据本实施方式的移动终端100'a还可包括相机,该相机被形成为在与用户眼睛的方向相同的方向上将周围环境成像。
另外,测量装置900可被安装在移动终端100'a中。可通过移动终端100'a为用户提供通过外部图像显示装置100'b输出的第五特定信息651。第五特定信息651可被移动终端100'a变型并且被提供给用户。
在从图像显示装置100'b提供图像(包括视频)时,控制器180可通过测量装置900接收用户的身体状况信息并且生成感觉数据。然而,测量装置900可被安装在配戴在用户面部的移动终端100'a中。例如,测量装置900可设置在移动终端100'a的区域中。
当感觉数据与预设的感觉数据相同时,控制器180可控制安装在移动终端100'a中的相机得到从图像显示装置100'b输出的图像。同时,当通过移动终端100'a变型并且提供第五特定信息651时,控制器180可控制动终端100'a来存储经变型的特定信息的一部分。也就是说,在没有用户的控制命令的情况下,可存储从外部提供的特定信息。
现在,将参照图7D描述提供搜索特定信息中包括的数据的结果的控制方法。参照图7D的(a),在第五特定信息652输出到显示单元151的同时,控制器180接收用户的身体状况信息。控制器180根据身体状况信息生成感觉数据。控制器180可控制存储器160来基于感觉数据存储第五特定信息652。控制器180还可控制存储器160来暂时存储第五特定信息652。
另外,控制器180可通过使用存储器160中存储的第五特定信息652来执行另外的功能。例如,控制器180可搜索第五特定信息652中包括的数据并且将搜索结果提供给用户。例如,在提供第五特定信息652的同时,控制器180可通过用户到麦克风122的语音输入731从数据中选择待搜索数据。
参照图7D的(a),控制器180可分析用户的语音731(例如,呼喊等,对着左边笑)而非控制命令,从第一特定信息652之中选择待搜索数据。控制器可输出将存储第五特定信息521的一部分并且将执行另外的功能的通知。例如,控制器180可控制输出单元150来输出闪亮或输出短通知声音,如图7D的(b)中所示。
当终止输出第五特定信息652时,控制器180可控制显示单元151来输出对应于搜索结果的第四附加内容852。在输出第五特定信息652的同时,控制器180可输出与第五特定信息652重叠的弹出窗口,控制显示单元151在弹出窗口中显示搜索结果,如图7D的(c)中所示。
接下来,图8A和图8B是示出用于将用户的感觉数据作为内容输出的控制方法的概念图。将参照图8A描述将用户的感觉数据作为文本输出的控制方法。控制器180生成接收到第五特定信息653的用户的感觉数据。
控制器180可基于来自用户的共享第五特定信息653或者将它上传到网站的控制命令控制显示单元151和无线通信单元110以共享第五特定信息653。控制器180可在提供第五特定信息653的同时将感觉数据生成为内容,控制显示单元151将第五特定信息653和感觉数据853a作为内容一起上传,并且输出它们。
例如,控制器180可控制显示单元151来输出基于感觉数据描述用户情绪状态的文本或输出描述通过相机121感测到的用户行为的文本。另外,控制器可控制显示单元151来输出与各感觉数据对应并且被存储在存储器中的文本或图像。参照图8A的(c),控制器180可控制显示单元151将通过麦克风122输入的用户语音变成文本并且将它与第五特定信息652一起输出。
将参照图8B描述通过使用感觉数据生成评价信息的控制方法。参照图8B,图8B的(a)示出用户执行的应用的执行画面654。在移动终端执行游戏应用的同时,控制器180从测量装置900接收身体状况信息。
控制器180可通过使用身体状况信息生成感觉数据,并且将感觉数据附于游戏应用。即,控制器180可将用户的感觉数据附于关于安装在移动终端中的应用的信息并且存储它。
控制器180可通过使用感觉数据生成评价应用的信息作为第四附加内容854a。例如,控制器180可在没有控制命令的情况下将应用评价信息上传到网络。另外,当根据来自用户的控制命令输出应用信息时,控制器180可控制显示单元151将第四附加内容854a一起输出。另外,用户在过去对它的感觉的喜好可与应用信息一起自动地提供。
同时,参照图8B的(c),当从测量装置900接收用户的身体状况信息时,控制器180可控制显示单元151来推荐附有与身体状况信息相关的感觉数据的应用。
这里,与接收到的身体状况信息相关的感觉数据可对应于与身体状况信息中包括的用户感觉相反的数据。例如,当基于接收到的身体状况信息识别的用户感觉是负面感觉时,控制器180可控制显示单元151来输出图标854b,图标854b接收被施加的触摸输入以执行附有愉快的用户感觉数据的应用。
当在移动终端打开时从测量装置900接收身体状况信息时,控制器180可推荐应用等。例如,控制器180可控制显示单元151将推荐的应用的图标854b输出到处于没有执行应用的闲置状态下的基础主页画面510。
同时,控制器180推荐和输出的信息不限于应用的图标854b并且可对应于附有特定感觉数据的内容(例如,文本、媒体文件、图像等)。因此,可在没有控制命令的情况下为用户自动地提供有助于用户感觉的应用等,并且用户使用根据用户选择而提供的应用等。
接下来,图9A至图9C是示出用于基于各种源提供的特定信息输出内容的方法的概念图。将描述基于从移动终端外部提供的特定信息输出内容的控制方法。
在图9A中,(a)是示出从移动终端外部提供到用户的音乐的概念图。当从测量装置900接收到用户的身体状况信息时,控制器180可启动麦克风122和相机121中的至少一个,用于得到从外部提供的第六特定信息660。
控制器180可启动麦克风122以接收听到的信号(音乐声音)作为提供给用户的第六特定信息,并且接收听觉信号。在接收听觉信号的同时,控制器180可分析从测量装置900接收的身体状况信息并且生成感觉数据,控制存储器160将感觉数据附于第六特定信息660并且存储它。
另外,控制器180可搜索接收到的第六特定信息660,以收集与第六特定信息660相关的数据。控制器180控制显示单元151输出与第六特定信息660相关的第六相关内容860。相关的第六相关内容860可对应于存储在存储器160中的数据或通过使用第六特定信息搜索到的数据。
参照图9A的(b),用户的感觉数据被附于第六特定信息660(音乐声音),控制器180可控制显示单元151输出基于第六特定信息660搜索到的第六相关内容860。第六相关内容860可被输出到输出音乐的应用的执行画面。例如,第六相关内容860可包括用于接收用户的触摸输入以再现和下载音乐、音乐的名字和歌词等的图标。
因此,移动终端100可自动地收集当用户的感觉变化时以及当通过移动终端提供特定信息时从外部提供的特定信息。另外,由于从外部提供的特定信息和用户的感觉数据被一起存储和提供,因此可在没有控制命令的情况下为用户提供无意识传递的信息。
图9B是示出基于用户的感觉数据在移动终端的通话模式下收集特定信息并且提供相关内容的控制方法的视图。参照图9B的(a)和(b),控制器180在移动终端的通话模式下从测量装置900接收身体状况信息,并且通过使用身体状况信息生成感觉数据。
当在通话模式下生成的感觉数据匹配预设的参考感觉数据时,控制器180可控制存储器160来记录在通话模式下发送和接收的语音。当通话模式终止时,控制器180可控制显示单元151来输出指示通话模式下的语音已经被记录在存储器160中的第七相关内容870a。
例如,当触摸输入被施加到第七相关内容870a时,控制器180可控制扬声器来输出所记录的语音。另外,控制器180可控制存储器160将感觉数据附于语音并且将它们一起存储。同时,当通话模式下生成的感觉数据匹配预设的参考感觉数据时,控制器180控制存储器160将感觉数据附于所连接的外部终端的电话号码并且存储它们。
另外,控制器180可控制存储器160来存储附有感觉数据的外部终端的电话号码作为垃圾号码。因此,控制器180可控制无线通信单元110切断从附有感觉数据的电话号码接收的任何通信。
即,在通话终止之后,控制器180可控制显示单元151来输出确认是否要切断与外部终端的通信的第七相关内容870b。另外,第七相关内容870b可包括(共享)接收共享附有用户感觉数据的外部终端的信息的触摸输入的图标。
控制器180可分析通过移动终端的麦克风122接收的用户语音和通过扬声器153输出的对方的语音以及从测量装置900接收的身体状况信息,以生成感觉数据。因此,在终止通话之后,用户可识别他或她在通话模式下的情绪状态并且查看电话对话的内容。另外,当用户具有在没有控制命令的情况下的预设感觉时,可切断与对应的对方的外部终端的电话号码的通话。
因此,即使在用户打电话的同时不能控制移动终端的情形下,也可以存储电话对话并且可在必要时为用户提供电话对话。
将参照图9C描述使用关于移动终端位置的信息提供根据用户感觉数据的内容的控制方法。在图9C中,(a)示出用户在特定位置671进食的情形。参照图9C的(b),当在用户处于特定位置671的同时从测量装置900接收身体状况信息时,控制器180可控制感测单元(例如,GPS)来搜索特定位置671。
控制器180可控制显示单元151来输出特定位置671的地图信息671'。控制器180可控制显示单元151将感觉数据附于地图信息671',控制显示单元151来基于感觉数据和地图信息671'输出第七相关内容。
参照图9C的(c),第七相关内容871可包括用于接收将基于当前感觉情形的感觉数据附于地图信息并且存储它们的触摸输入的图标(被添加到黑名单)、(共享)接收用于共享附有感觉数据的地图信息的触摸输入的图标等。控制器180可控制显示单元151将第七相关内容输出到地图信息671'。
即,用户可将他或她的感觉数据附于他或她在室外从事特定事项的地点,存储并且共享关于附有感觉数据的地点的信息。
接下来,图10A至图10C是示出通过使用用户的感觉数据和外部终端的感觉数据向用户提供包括关于外部终端的信息的内容的控制方法的概念图。将参照图10A描述用于基于用户感觉数据推荐各种应用的控制方法。
参照图10A的(a),控制器180基于从测量装置900接收的身体状况信息生成用户的感觉数据。控制器180控制显示单元151来输出指示移动终端的人工智能型代理520的图像520。例如,代理520通过使用用户的语音识别或输入文本接收用户的命令并且执行对应的功能,显示单元输出指示预设功能已经在没有控制命令的情况下一起自动执行的信息。
控制器180控制显示单元151来输出指示生成的用户感觉数据的第八相关内容800。另外,控制器180可控制显示单元151来输出与感觉数据相关的第五附加内容881。例如,第四附加内容881可包括执行图标881a,执行图标881a用于接收被施加以执行所推荐应用的触摸。例如,当第八相关内容的感觉数据是负面感觉数据时,控制器180可提供附有正面感觉数据的应用作为第四附加内容881。
另外,第四附加内容881可包括呼叫图标881b,呼叫图标881b用于接收向外部终端发送呼叫的触摸输入。控制器180可推荐用户应当与附有正面感觉数据的对方的外部终端通话。
因此,当移动终端打开时,控制器180可根据用户的感觉自动地提供所推荐内容。因此,用户可根据他或她的感觉而被提供所需信息,可被快速提供所需应用,可通过操纵移动终端控制他或她的感觉。
将参照图10B描述接收对方的感觉数据并且将它提供给用户的控制方法。控制器180控制显示单元151来输出指示用户感觉数据的第八相关内容880。第八相关内容880可包括反映用户感觉数据的面部图像、照片等。
另外,控制器180控制无线通信单元110从外部终端接收可用于进行无线通信的外部终端的用户感觉数据。控制器180提取发送从外部终端接收的多个感觉数据中的与移动终端的第八相关内容880对应的感觉数据的外部终端。
另外,控制器180控制显示单元151来输出第四附加内容882,第四附加内容882包括关于所提取的外部终端的信息。第四附加内容882可包括接收用于向外部终端发送呼叫的触摸输入的图形图像、关于外部终端的信息(电话号码、代表名字、图像等)、基于从外部终端接收的感觉数据的图像等。另外,可为用户提供关于具有与他或她的感觉近似的感觉的用户的信息,用户可与外部终端的这些用户执行通话通信。
同时,参照图10B的(c),控制器180可控制无线通信单元,以接收所提取外部终端的位置数据或追踪所提取外部终端的位置。控制器180可控制显示单元151来输出包括外部终端位置的第六附加内容883。第六附加内容883可包括地图图像。
因此,可为用户提供关于具有与用户感觉近似的感觉的外部终端的用户和外部终端位置的信息,因此,用户可选择性与用户进行电话通话。
参照图10C,控制器180可通过使用移动终端的位置信息和外部终端的位置信息来搜索至少一个地点。例如,控制器180可搜索位于外部终端和移动终端100之间的饭店并且将关于该地点的信息提供给用户。
另外,控制器180可基于关于地点的信息和外部终端的位置信息控制显示单元151来输出将被发送到外部终端的文本。基于用户发送文本的触摸输入,控制器180可基于用户用于发送文本的触摸输入控制无线通信单元110将文本和地图图像发送到外部终端。
因此,用户可容易地与具有近似感觉的用户执行通话通信。即,移动终端100的人工智能代理可基于接收到的用户身体状况信息自动地提供将帮助用户的信息。
如上所述的根据本发明的实施方式的移动终端在其构造和方法应用方面不受限制,但这些实施方式的整体或以部分可被选择性组合,以被构造成各种修改形式。
因为示例性实施方式可在不脱离其特性的情况下用许多形式来实现,所以除非另外指明,否则上述实施方式不受以上描述中的任何细节限制,而是应该在所附权利要求书限定的其范围内进行广义理解。因此,落入权利要求书范围或此范围的等同物内的各种变化和修改旨在被所附权利要求书涵盖。

Claims (20)

1.一种移动终端,所述移动终端包括:
输出单元,其被构造成输出信息;
接收装置,其被构造成从外部装置接收信息;
控制器,其被构造成:
在所述接收装置正在接收特定信息或所述输出单元正在输出特定信息的同时,接收关于用户的身体状况的身体状况信息,
分析所述身体状况信息并且基于所述身体状况信息估计用户的情绪状态,
生成指示估计的所述用户的情绪状态的附着信息,
将生成的所述附着信息与对应于所述特定信息的数据一起存储,
输出生成的所述附着信息和对应于所述特定信息的数据。
2.根据权利要求1所述的移动终端,其中所述身体状况信息对应于在所述接收装置正在接收所述特定信息或者所述输出单元正在输出所述特定信息的同时关于所述用户的心跳的信息,
其中所述控制器还被构造成通过分析心跳信息中包括的模式来估计所述用户的情绪状态。
3.根据权利要求2所述的移动终端,所述移动终端还包括:
终端机体,其被构造成附接于所述用户的一部位并且包括:
测量装置,其安装在所述终端机体中并且具有被构造成与所述用户的皮肤接触的至少一个表面;
发送装置,其被构造成将所述心跳信息发送到接收单元。
4.根据权利要求3所述的移动终端,其中所述终端机体与所述移动终端分开或者与所述移动终端是一体的。
5.根据权利要求1所述的移动终端,其中所述输出单元包括被构造成显示所述特定信息的显示单元,
其中接收到的所述身体状况信息指示查看所述特定信息的所述用户的身体状况。
6.根据权利要求5所述的移动终端,其中所述特定信息包括网页信息,
其中,生成的所述附着信息包括与所述网页信息相关并且基于估计的所述用户的情绪状态的相关内容。
7.根据权利要求1所述的移动终端,其中所述外部装置将所述特定信息输出为视频数据和音频数据中的至少一种,
其中接收到的所述身体状况信息指示查看或收听所述特定信息的所述用户的身体状况。
8.根据权利要求7所述的移动终端,其中对应于所述特定信息的数据对应于网页信息,
其中生成的所述附着信息包括与所述外部装置上输出的所述特定信息相关并且基于估计的所述用户的情绪状态的相关内容。
9.根据权利要求1所述的移动终端,其中所述控制器还被构造成:
显示用于指示所述用户的情绪状态的可滑动情绪状态图标,
按照所述可滑动情绪状态图标的滑动来分类和显示内容条目。
10.根据权利要求1所述的移动终端,其中所述特定信息包括至少一个多媒体数据,
其中所述数据对应于所述至少一个多媒体数据并且生成的所述附着信息对应于表示估计的所述用户的情绪状态的情绪。
11.根据权利要求10所述的移动终端,其中所述控制器还被构造成在接收到用户输入请求时显示具有类似的估计的情绪状态的多个其它多媒体数据。
12.根据权利要求10所述的移动终端,其中所述身体状况信息对应于接收到的所述用户的语音,并且基于接收到的所述用户的语音估计所述用户的情绪状态。
13.根据权利要求1所述的移动终端,其中所述特定信息包括视频数据,
其中所述控制器还被构造成当估计的所述用户的情绪状态匹配预定的情绪状态时捕获所述视频数据中包括的至少一个图像。
14.根据权利要求1所述的移动终端,其中生成的所述附着信息包括表示估计的所述用户的情绪状态的文本和指示对所述接收装置接收的或者所述输出单元输出的所述特定信息的评价的评价信息中的一种。
15.根据权利要求1所述的移动终端,其中所述特定信息对应于正在播放的音乐或通话模式下的语音信息中的一种。
16.一种控制移动终端的方法,所述方法包括以下步骤:
在接收装置正在接收特定信息或输出单元正在输出特定信息的同时,经由所述移动终端的控制器接收关于用户的身体状况的身体状况信息;
经由所述控制器分析所述身体状况信息并且基于所述身体状况信息估计所述用户的情绪状态;
经由所述控制器生成指示估计的所述用户的情绪状态的附着信息;
经由与所述移动终端关联的存储器,将生成的所述附着信息与对应于所述特定信息的数据一起存储;
经由所述输出单元输出生成的所述附着信息和对应于所述特定信息的数据。
17.根据权利要求16所述的方法,其中所述身体状况信息对应于在所述接收装置正在接收所述特定信息或者所述输出单元正在输出所述特定信息的同时关于所述用户的心跳的信息,
其中估计步骤通过分析心跳信息中包括的模式来估计所述用户的情绪状态。
18.根据权利要求17所述的方法,所述方法还包括:
经由安装在被构造成附接于所述用户的一部位的终端机体中的测量装置进行测量,所述测量装置被安装在所述终端机体中并且具有被构造成与所述用户的皮肤接触的至少一个表面;
经由发送装置将所述心跳信息发送到接收单元。
19.根据权利要求18所述的方法,其中所述终端机体与所述移动终端分开或者与所述移动终端是一体的。
20.根据权利要求16所述的方法,其中所述输出单元包括被构造成显示所述特定信息的显示单元,
其中接收到的所述身体状况信息指示查看所述特定信息的所述用户的身体状况。
CN201410323524.4A 2013-07-09 2014-07-08 移动终端及其控制方法 Expired - Fee Related CN104284014B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020130080499A KR20150009032A (ko) 2013-07-09 2013-07-09 이동 단말기 및 이의 제어방법
KR10-2013-0080499 2013-07-09

Publications (2)

Publication Number Publication Date
CN104284014A true CN104284014A (zh) 2015-01-14
CN104284014B CN104284014B (zh) 2019-04-09

Family

ID=50159005

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410323524.4A Expired - Fee Related CN104284014B (zh) 2013-07-09 2014-07-08 移动终端及其控制方法

Country Status (4)

Country Link
US (1) US20150019682A1 (zh)
EP (1) EP2824540A1 (zh)
KR (1) KR20150009032A (zh)
CN (1) CN104284014B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106200989A (zh) * 2016-09-08 2016-12-07 广东小天才科技有限公司 一种移动终端亮屏的方法及装置
CN106257941A (zh) * 2015-06-19 2016-12-28 联想(新加坡)私人有限公司 通过无线信号确定装置位置的方法及产品和信息处理装置
CN107710222A (zh) * 2015-06-26 2018-02-16 英特尔公司 情绪检测系统
CN109313482A (zh) * 2016-05-25 2019-02-05 金善泌 人工智能透明显示装置的运转方法及人工智能透明显示装置
CN112890775A (zh) * 2015-03-06 2021-06-04 三星电子株式会社 用于控制电子装置的方法

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102254705B1 (ko) * 2014-09-19 2021-05-24 삼성전자주식회사 단말 장치 및 그 제어방법
KR102415906B1 (ko) * 2015-04-14 2022-07-01 엘지이노텍 주식회사 인체 착용 장치 및 이의 동작 방법
KR102479495B1 (ko) * 2015-09-07 2022-12-21 엘지전자 주식회사 이동단말기 및 그의 동작 방법
KR20180000152A (ko) * 2016-06-22 2018-01-02 주식회사 협성기전 재실 감지 장치
DE112017004949T5 (de) * 2016-09-30 2019-06-19 Honda Motor Co., Ltd. Informationsbeschaffungsvorrichtung und beweglicher Körper
CN107040712B (zh) * 2016-11-21 2019-11-26 英华达(上海)科技有限公司 智能自拍方法及系统
WO2019069529A1 (ja) * 2017-10-02 2019-04-11 ソニー株式会社 情報処理装置、情報処理方法、および、プログラム
CN108600050B (zh) * 2018-04-26 2020-10-23 北京比特大陆科技有限公司 命令传输方法、装置、计算机设备及可读存储介质
CN109121088A (zh) * 2018-07-04 2019-01-01 深圳市沃星实业有限公司 一种无线电子栅栏及人员进出监测方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101198277A (zh) * 2005-02-22 2008-06-11 海尔思-斯玛特有限公司 用于生理学和心理生理学监控的方法和系统及其应用
US20090292733A1 (en) * 2008-05-23 2009-11-26 Searete Llc., A Limited Liability Corporation Of The State Of Delaware Acquisition and particular association of data indicative of an inferred mental state of an authoring user
US20120004575A1 (en) * 2010-06-30 2012-01-05 Sony Ericsson Mobile Communications Ab System and method for indexing content viewed on an electronic device
US20120011477A1 (en) * 2010-07-12 2012-01-12 Nokia Corporation User interfaces

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CL2008001091A1 (es) * 2007-04-19 2009-01-09 Telefonica Sa Metodo para la gestion de informacion personal, basada en un modelo de la mente humana.
CN101853259A (zh) * 2009-03-31 2010-10-06 国际商业机器公司 添加和处理带有情感数据的标签的方法和设备
US20110179003A1 (en) * 2010-01-21 2011-07-21 Korea Advanced Institute Of Science And Technology System for Sharing Emotion Data and Method of Sharing Emotion Data Using the Same
US8974349B2 (en) * 2010-11-01 2015-03-10 Nike, Inc. Wearable device assembly having athletic functionality
US8869115B2 (en) * 2011-11-23 2014-10-21 General Electric Company Systems and methods for emotive software usability
KR102131765B1 (ko) * 2013-05-02 2020-07-08 삼성전자 주식회사 썸네일을 이용한 파일 관리 방법 및 장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101198277A (zh) * 2005-02-22 2008-06-11 海尔思-斯玛特有限公司 用于生理学和心理生理学监控的方法和系统及其应用
US20090292733A1 (en) * 2008-05-23 2009-11-26 Searete Llc., A Limited Liability Corporation Of The State Of Delaware Acquisition and particular association of data indicative of an inferred mental state of an authoring user
US20120004575A1 (en) * 2010-06-30 2012-01-05 Sony Ericsson Mobile Communications Ab System and method for indexing content viewed on an electronic device
US20120011477A1 (en) * 2010-07-12 2012-01-12 Nokia Corporation User interfaces
CN102986201A (zh) * 2010-07-12 2013-03-20 诺基亚公司 用户接口

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112890775A (zh) * 2015-03-06 2021-06-04 三星电子株式会社 用于控制电子装置的方法
CN106257941A (zh) * 2015-06-19 2016-12-28 联想(新加坡)私人有限公司 通过无线信号确定装置位置的方法及产品和信息处理装置
US10353047B2 (en) 2015-06-19 2019-07-16 Lenovo (Singapore) Pte. Ltd. Device location determined by wireless signals
CN106257941B (zh) * 2015-06-19 2020-06-23 联想(新加坡)私人有限公司 通过无线信号确定装置位置的方法及产品和信息处理装置
CN107710222A (zh) * 2015-06-26 2018-02-16 英特尔公司 情绪检测系统
CN109313482A (zh) * 2016-05-25 2019-02-05 金善泌 人工智能透明显示装置的运转方法及人工智能透明显示装置
CN106200989A (zh) * 2016-09-08 2016-12-07 广东小天才科技有限公司 一种移动终端亮屏的方法及装置
CN106200989B (zh) * 2016-09-08 2019-11-12 广东小天才科技有限公司 一种移动终端亮屏的方法及装置

Also Published As

Publication number Publication date
EP2824540A1 (en) 2015-01-14
CN104284014B (zh) 2019-04-09
US20150019682A1 (en) 2015-01-15
KR20150009032A (ko) 2015-01-26

Similar Documents

Publication Publication Date Title
CN104284014A (zh) 移动终端及其控制方法
CN104049885B (zh) 移动终端和控制移动终端的方法
CN102467343B (zh) 移动终端以及控制移动终端的方法
US9639251B2 (en) Mobile terminal and method of controlling the mobile terminal for moving image playback
CN104111772B (zh) 移动终端及其控制方法
US10055087B2 (en) Mobile terminal and method of controlling the same
US9792953B2 (en) Mobile terminal and control method for the same
CN104125332A (zh) 移动终端和控制移动终端的方法
CN104284088A (zh) 移动终端及其控制方法
CN105122361B (zh) 终端及其控制方法
CN104823434A (zh) 移动终端及其控制方法
CN106445219A (zh) 移动终端及其控制方法
KR20150008996A (ko) 이동 단말기 및 그것의 제어 방법
CN104049740A (zh) 移动终端及其控制方法
CN102981751A (zh) 移动终端和用于提供其用户界面的方法
CN104281402A (zh) 移动终端及其控制方法
CN103942040B (zh) 移动终端及其控制方法
US20170199570A1 (en) Mobile terminal and control method therefor
CN104052866A (zh) 移动终端和控制移动终端的方法
CN104580689A (zh) 移动终端及其控制方法
CN108600496A (zh) 电子设备及其控制方法
CN106796485A (zh) 移动终端及其控制方法
CN106612370A (zh) 移动设备及其控制方法
KR20190040822A (ko) 이동 단말기
US9479628B2 (en) Mobile terminal and control method thereof

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190409

Termination date: 20200708

CF01 Termination of patent right due to non-payment of annual fee