CN105453612A - 消息服务提供装置以及经由其提供内容的方法 - Google Patents

消息服务提供装置以及经由其提供内容的方法 Download PDF

Info

Publication number
CN105453612A
CN105453612A CN201580000958.3A CN201580000958A CN105453612A CN 105453612 A CN105453612 A CN 105453612A CN 201580000958 A CN201580000958 A CN 201580000958A CN 105453612 A CN105453612 A CN 105453612A
Authority
CN
China
Prior art keywords
electronic installation
user
message
content
content recommendation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580000958.3A
Other languages
English (en)
Other versions
CN105453612B (zh
Inventor
赵相旭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority to CN201911163405.6A priority Critical patent/CN110996271A/zh
Priority claimed from PCT/KR2015/008015 external-priority patent/WO2016018111A1/en
Publication of CN105453612A publication Critical patent/CN105453612A/zh
Application granted granted Critical
Publication of CN105453612B publication Critical patent/CN105453612B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12Messaging; Mailboxes; Announcements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01Social networking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/023Services making use of location information using mutual or relative location information between multiple location based services [LBS] targets or of distance thresholds
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02Terminal devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/18Service support devices; Network management devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Tourism & Hospitality (AREA)
  • Strategic Management (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Economics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Information Transfer Between Computers (AREA)
  • Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)

Abstract

一种用于提供消息服务的电子装置包括:通信单元,被配置为与另一装置交换消息;显示器,被配置为在该显示器的消息服务屏幕上一起显示从所述另一装置接收的消息、该电子装置输入的消息、以及该电子装置生成的至少一个应答消息;和处理器,被配置为确定接收的消息是否包括询问,并响应于接收的消息被确定为包括询问、而基于该询问提供至少一条推荐内容,并向所述另一装置传送包括所述至少一条推荐内容的至少一个应答消息。

Description

消息服务提供装置以及经由其提供内容的方法
技术领域
符合示范实施例的设备和方法涉及通过使用电子装置在对话期间向用户提供内容。
背景技术
随着便携式终端的分布率最近已快速增长,便携式终端已成为当代人们的日用品。便携式终端提供各种功能,不仅包括作为其主要功能的语音呼叫服务,而且包括诸如数据传递等的各类附加服务。
特别是,已通过使用智能终端来主动执行用户之间的通信。随着该趋势,已开发了被配置为提供用于这样的通信的更便利的环境的各种技术。
发明内容
技术问题
一个或多个示范实施例提供了通过使用各种电子装置来提供便利通信环境的方法。
附图说明
通过参考附图描述某些示范实施例,以上和/或其他方面将更清楚,其中:
图1是用于描述根据示范实施例的内容提供系统的图;
图2是根据示范实施例的电子装置的用户界面(UI)的图;
图3是用于描述根据示范实施例的经由电子装置提供内容的方法的流程图;
图4到7是用于描述根据示范实施例的提供内容的方法的图;
图8是用于描述应用根据示范实施例的提供内容的方法的各类电子装置和各种聊天方法的图;
图9A是用于描述电子装置中包括的被配置为提供与应答相关的内容的知识框架的图;
图9B是用于描述根据示范实施例的电子装置的每一组件的操作的图;
图10A到10D是根据示范实施例的电子装置所提供的环境设置用户界面的图;
图11A到11D是用于描述经由电子装置提供与应答相关的内容的方法的图;
图12A是用于描述经由电子装置提供与应答相关的内容的方法的流程图;
图12B是电子装置和服务器的每一个中包括的模块的图;
图13A是用于描述经由电子装置提供与应答相关的内容的方法的流程图;
图13B是电子装置和服务器的每一个中包括的模块的图;
图14A是用于描述经由电子装置提供与应答相关的内容的方法的流程图;
图14B是电子装置和服务器的每一个中包括的模块的图;
图15是用于描述为了理解用户之间的关系利用在服务器的数据库中存储的内容的方法的图;
图16是用于描述为了理解用户之间的关系利用在电子装置的数据库中存储的内容的方法的图;
图17是用于描述为了理解电子装置的用户和另一用户的装置的用户之间的关系、利用在电子装置的数据库中存储的内容和在服务器的数据库中存储的内容的方法的图;
图18、19A到19D、20A到20D、21、22A、22B、23A到23C以及24A到24E是用于描述根据示范实施例的用于提供内容的方法的图;
图25A到25E是根据示范实施例的当提供可对于应答使用的内容时、内容提供屏幕的图;
图26是提供经由其改变内容提供布局的界面的电子装置的图;
图27到37是用于描述根据示范实施例的提供内容的方法的图;
图38到42、43A、43B、44、45、46A、46B、47和48是用于描述根据示范实施例的提供内容的方法的图;
图49是根据示范实施例的用户的终端的组件的框图,其中用户的终端可以是图1的电子装置;
图50、51、52和53是用于描述根据示范实施例的提供内容的总体方法的图;
图54A到54D是用于描述根据示范实施例的提供内容的方法的图;
图55A到55D是用于描述根据示范实施例的提供内容的方法的图;
图56是根据示范实施例的用户的终端的软件组件的框图;
图57是根据示范实施例的电子装置的用户界面(UI)的图;和
图58是根据示范实施例的电子装置的用户界面(UI)的图。
具体实施方式
执行本发明的最佳模式
根据示范实施例的一个方面,提供了一种用于提供消息服务的电子装置,该电子装置包括:通信单元,被配置为与另一装置交换消息;显示器,被配置为在该显示器的消息服务屏幕上一起显示从所述另一装置接收的消息、该电子装置输入的消息、以及该电子装置生成的至少一个应答消息;和处理器,被配置为确定接收的消息是否包括询问,并响应于接收的消息被确定为包括询问、基于该询问而提供至少一条推荐内容,并向所述另一装置传送包括所述至少一条推荐内容的所述至少一个应答消息。
该处理器可被进一步配置为确定该电子装置是否存储为了生成所述至少一条推荐内容而要使用的数据,并基于确定结果获得该数据。
该处理器可被进一步配置为确定与所述至少一条推荐内容关联的关键字,并获得与该关键字对应的内容。
该处理器可被进一步配置为基于所述另一装置的用户与该电子装置的用户之间的关系数据,来获得所述至少一条推荐内容。
该关系数据可包括该电子装置中存储的数据、与该电子装置通信的服务器中存储的数据、以及所述另一装置中存储的数据中的至少一个。
该显示器可被进一步配置为,响应于被设置为手动推荐所述至少一条推荐内容的设置菜单、基于请求所述至少一条推荐内容的用户输入、来显示所述至少一条推荐内容,响应于被设置为半自动推荐所述至少一条推荐内容的设置菜单、基于在接收的消息中指示的用户输入、来显示所述至少一条推荐内容,以及响应于被设置为自动推荐所述至少一条推荐内容的设置菜单、当电子装置通过识别接收的消息来获得所述至少一条内容时、无需用户输入来显示所述至少一条推荐内容。
该处理器可被进一步配置为基于该消息中包括的单词的类型、单词之间的关系、以及单词的含义,来获得所述至少一条推荐内容。
该处理器可被进一步配置为基于该电子装置的用户和所述另一装置的用户之间的关系,来获得所述至少一条推荐内容,该关系是基于用户输入设置的。
所述至少一条推荐内容可根据电子装置中安装的应用来获得。
该处理器可被进一步配置为从接收的消息中提取至少一个关键字,以确定接收的消息是否包括询问。
根据另一示范实施例的一个方面,提供了一种经由提供消息服务的电子装置向另一装置提供内容的方法,该方法包括:从所述另一装置接收消息;在消息服务屏幕上显示接收的消息;确定接收的消息是否包括询问;基于接收的消息提供至少一条推荐内容;和向所述另一装置传送包括所述至少一条推荐内容的应答消息。
所述提供至少一条推荐内容的步骤可包括:确定该电子装置是否存储为了生成所述至少一条推荐内容而使用的数据,并基于确定结果获得该数据。
所述提供至少一条推荐内容的步骤可包括:确定与所述至少一条推荐内容关联的关键字,并获得与该关键字对应的内容。
所述提供至少一条推荐内容的步骤可包括:基于该电子装置的用户与所述另一装置的用户之间的关系数据,来获得所述至少一条推荐内容。
该关系数据可包括该电子装置中存储的数据、与该电子装置通信的服务器中存储的数据、以及所述另一装置中存储的数据中的至少一个。
所述提供至少一条推荐内容的步骤可包括:响应于被设置为手动推荐所述至少一条推荐内容的设置菜单,基于请求所述至少一条推荐内容的用户输入,来显示所述至少一条推荐内容;响应于被设置为半自动推荐所述至少一条推荐内容的设置菜单,基于在接收的消息中指示的用户输入,来显示所述至少一条推荐内容;和响应于被设置为自动推荐所述至少一条推荐内容的设置菜单,当电子装置通过识别接收的消息来获得所述至少一条内容时,无需用户输入而显示所述至少一条推荐内容。
所述提供至少一条推荐内容的步骤可包括:基于该消息中包括的单词的类型、单词之间的关系、以及单词的含义,来获得所述至少一条推荐内容。
所述提供至少一条推荐内容的步骤可包括:基于该电子装置的用户和所述另一装置的用户之间的关系,来获得所述至少一条推荐内容,该关系是基于用户输入设置的。
所述至少一条推荐内容可根据电子装置中安装的应用来获得。
所述提供至少一条推荐内容的步骤包括:从接收的消息中提取至少一个关键字,以确定接收的消息是否包括询问。
根据示范实施例的一个方面,提供了一种由服务器提供社交联网服务的方法,该方法包括:通过应用或网站显示第一装置发布的消息;识别激活该应用或网站上显示的输入区域的来自第二装置的用户输入;确定发布的消息是否包括询问;响应于包括询问的发布消息,基于第一装置的用户和第二装置的用户之间的关系的信息,来生成推荐应答;并向第二装置提供该推荐应答。
所述确定发布的消息是否包括询问的步骤可包括:确定该消息的句子是否以疑问副词开始,确定该句子的主语和动词是否反转,并确定该句子是否包括问号。
该推荐应答可包括属于至少两个不同类别的多个内容,并且所述至少两个不同类别包括应用和照片。
该方法可进一步包括基于第二装置选择每一类别的次数,来确定至少两个不同类别的用户偏好,并按照用户偏好的顺序来显示所述多个内容。
发明模式
本申请要求2015年2月25日在韩国知识产权局提交的韩国专利申请第10-2015-0026750号和2014年7月31日在韩国知识产权局提交的韩国专利申请第10-2014-0098634号的优先权,通过引用而在这里全部合并其公开。
下面参考附图来更详细地描述示范实施例。
在以下描述中,使用相同附图标记用于相同元件,即使在不同图中。提供描述中定义的内容(诸如详细构造和元件)以帮助示范实施例的全面理解。然而,清楚的是,能在没有那些特别定义的内容的情况下实践这些示范实施例。而且,不详细描述公知功能或构造,因为它们将利用不必要的细节使得该描述模糊。
当部分“包括”或“包含”元件时,除非存在与其相反的特定描述,否则该部分可进一步包括其它元件,不排除其它元件。贯穿该说明书,将理解的是,当元件被称为“连接”到另一元件时,其可“直接连接”到另一元件或者在其间具有居间元件的情况下“电连接”到另一元件。另外,诸如“……单元”、“……模块”等的术语表示执行至少一个功能或操作的单元,并且这些单元可被实现为硬件或软件或硬件和软件的组合。
贯穿该说明书,诸如“用户”的术语可表示电子装置的用户。贯穿该说明书,诸如“消息服务”的术语可表示一对一、一对多、或多对多服务,经由该服务,用户可容易地交换消息,诸如用户的会话。
贯穿该说明书,术语“应用”表示被设计为运行特定任务的一系列计算机程序的集合。该说明书中的应用可改变。应用可包括游戏应用、视频播放应用、地图应用、演示应用、日历应用、电话簿应用、广播应用、运动支持应用、支付应用、照片文件夹应用等。然而,应用不限于此。应用也可被称为App。
诸如“至少一个”的表述,当在元件列表之前时,修改整个元件列表,而不修改列表的个别元件。
在该说明书中,术语“消息”可表示一组文本单元或一组声音单元,包括从一个或多个单词、一个或多个短语、以及一个或多个从句中选择的至少一个,作为在用户之间交换的对话的一部分。
在该说明书中,术语“关键字”可表示与消息的含义相关的单词、短语、和从句,该含义是通过针对该消息执行自然语言分析而获得的。该关键字可不仅表示消息中包括的单词、短语、和从句,而且表示消息中没有包括的单词、短语、和从句。
在该说明书中,术语“内容”可表示数据、文件、软件和信息,其包括经由电子装置传递信息的视频、声音、和文本。例如,图像内容可表示经由电子装置传递的图像数据。例如,该内容可包括文本应答以及与各个应用服务相关的内容,该应答包括二维图像、三维图像、二维视频、三维视频、和各种语言。
图1是用于描述根据示范实施例的内容提供系统10的图。
如图1中图示的,内容提供系统10可包括电子装置100、另一用户的装置200、和服务器300。
根据示范实施例的电子装置100可与另一用户的装置200交换文本消息或语音消息。而且,电子装置100可经由服务器300与另一用户的装置200交换文本消息或语音消息。
另外,电子装置100可向服务器300请求并获得各类数据,并向服务器300传送各类数据。例如,电子装置100从服务器300获得的数据可以是在另一用户的装置200和服务器300之间交换的数据。
内容提供系统10可以由比图示的组件更多或更少的组件实施。例如,根据另一示范实施例,服务器300可以不被包括在内容提供系统10中。
其后,将更详细地描述电子装置100、另一用户的装置200、和服务器300。
根据示范实施例的电子装置100可与另一用户的装置200交换消息。
在该说明书中,电子装置100可以被实现为智能电话、平板(tablet)、个人计算机(PC)、可穿戴装置、个人数字助理(PDA)、膝上型计算机、蜂窝电话、移动电话、企业数字助理(EDA)、便携式多媒体播放器(PMP)、个人导航装置或便携式导航装置(PND)、手持游戏控制台、移动因特网装置(MID)、或电子书(e-book)。
可穿戴装置可包括头戴式显示器(HMD)(其后,称为“HMD”),其可在头部佩戴。例如,HMD可包括眼镜、头盔、帽子等,但是这不限于此。可穿戴装置也可被实现为戒指、项链、手镯、鞋子、耳环、发带、衣服、手套、顶针等。
另一用户的装置200可以是接收在电子装置100中生成的第一消息并在输出界面上显示该第一消息的装置。而且,另一用户的装置200可根据用户输入生成第二消息,并且向电子装置100传送第二消息。
根据示范实施例,另一用户的装置200可经由服务器300从电子装置100接收第一消息,并且可经由服务器300向电子装置100传送第二消息。根据另一示范实施例,另一用户的装置200可在没有服务器300的情况下从电子装置100直接接收第一消息,并且可在没有服务器300的情况下向电子装置100直接传送第二消息。根据另一示范实施例,另一用户的装置200可以是单一装置或多个装置。
根据示范实施例的另一用户的装置200可被实现为各个类型。例如,另一用户的装置200可被实现为智能电话、平板PC、可穿戴装置、个人数字助理(PDA)、膝上型计算机、蜂窝电话、移动电话、企业数字助理(EDA)、便携式多媒体播放器(PMP)、个人导航装置或便携式导航装置(PND)、手持游戏控制台、移动因特网装置(MID)、或电子书(e-book)。
服务器300可执行与括电子装置100或另一用户的装置200的通信。例如,服务器300可从电子装置100接收在电子装置100中生成的第一消息,并且可从另一用户的装置200接收在另一用户的装置200中生成的第二消息。而且,服务器300可向另一用户的装置200传送第一消息并向电子装置100传送第二消息。
服务器可管理从电子装置100或另一用户的装置200接收的消息。例如,服务器300可在每一装置的消息数据库(DB)中存储交换的消息。而且,服务器300可更新消息DB。服务器300可根据循环时间周期来更新消息DB,或者只要从电子装置100或另一用户的装置200接收到新消息,就更新消息DB。
图2是图示了根据示范实施例的电子装置100的用户界面(UI)的图。
参考图2,根据示范实施例的电子装置100可从自另一用户的装置200接收的消息提取关键字。而且,基于该关键字,电子装置100可获得当对该消息应答时可使用的至少一条内容。而且,电子装置100可显示获得的至少一条内容。
电子装置100可提供界面,诸如包括后退按钮20、呼叫按钮30、用户姓名框40、以及消息50、51、52和53的对话窗口。后退按钮20和呼叫按钮30可在用户姓名框40上显示。
用户可触摸或双击后退按钮20以回到前一菜单。用户可触摸或双击呼叫按钮21以运行语音聊天或语音呼叫。用户姓名框40可显示对话伙伴的姓名或昵称。而且,用户姓名框40可显示电子装置100的用户的姓名或昵称。对话窗口可显示在电子装置的用户和对话伙伴之间交换的消息50、51、52和53。
电子装置100可确定每一消息50、51、52或53是否是问题。当消息50、51、52、53的任一个是问题时,电子装置100可从消息50、51、52或53提取关键字。基于提取的关键字,电子装置100可获得当对消息应答时可使用的内容。
经由弹出窗口60,电子装置100可接收关于是否显示针对每一关键字获得的内容的用户输入。当用户触摸或点击第一应答按钮61时,电子装置100可显示获得的内容。当用户触摸或点击第二应答按钮62时,电子装置100可以不显示获得的内容。
当消息50、51、52和53的任一个是问题时,电子装置100可在激活弹出窗口60之前获得在应答问题时可使用的内容。作为选择,当消息50、51、52和53的任一个是问题时,电子装置100可在激活弹出窗口60之后获得在应答问题时可使用的内容。作为选择,当消息50、51、52和53的任一个是问题时,电子装置100可在激活弹出窗口60之后、在用户触摸第一应答按钮61之后、获得应答问题时可使用的内容。
图3是用于描述根据示范实施例的经由电子装置100提供内容的方法的流程图。
[1.1消息接收]
参考图3,电子装置100可在操作S110从另一用户的装置200接收消息。
电子装置100可从另一用户的装置200接收消息50、51、52和53。作为选择,电子装置100可经由服务器300从另一用户的装置200接收消息50、51、52和53。
电子装置100可确定消息50、51、52和53的每一个是否包括问题。电子装置100可通过使用稍后将描述的语义分析方法和统计分析方法,来确定消息50、51、52和53的每一个是否包括问题。
[1.2关键字提取]
电子装置100可在操作S130从自另一用户的装置200接收的消息中提取关键字。
电子装置100可通过使用语义分析方法和统计分析方法,来从消息中提取关键字。
电子装置100可通过使用语义分析来提取关键字。电子装置100可确定给定句子正要求回答还是正提供一些信息。电子装置100可分析句子以确定句子是以疑问副词(例如,谁、什么、什么时候、什么地方、为什么、哪一个、如何)还是助动词(例如,是、作为、能、能够、做、具有、可以、应该、将(is、are、can、could、did、does、do、have、has、may、might、shall、should、will、would)开始、句子的主语和动词是否反转、以及句子是否包括问号,来确定句子是否是疑问句。
例如,电子装置100可从另一用户的装置200接收消息53“你在哪里?”。电子装置100可确定消息53的含义并提取“哪里”作为关键字。而且,电子装置可通过进一步考虑用户之间的对话内容以及与用户相关的数据,而提取“哪里”作为关键字。与用户相关的数据可包括用户输入的内容和关于用户的记录数据中的至少一个。与用户相关的数据可表示与仅一个用户相关的内容或与两个或多个用户相关的内容。
电子装置100可基于从消息的含义、用户输入的内容、以及关于用户的记录数据中选择的至少一个,来提取“哪里”作为关键字。
电子装置100可对于消息的含义执行自然语言分析以提取关键字。例如,电子装置100可提取“哪里”作为关键字。电子装置100可分析并确定用户之间的对话中包括的消息的含义,并且可基于消息的含义预测应答消息的内容。例如,电子装置100可将消息的含义分析为另一用户的装置200的用户提出的、询问电子装置100的用户的地点的问题。基于该含义,电子装置100可预测电子装置100的用户可需要向另一用户的装置200的用户提供关于他/她自己的地点的应答,并可提取“哪里”作为关键字。
而且,当电子装置100基于消息的含义提取关键字时,电子装置100可考虑用户所输入的内容。例如,用户所输入的内容可包括用户的家庭地址、用户的公司地址、用户的移动路径记录、和根据用户的调度的场所。例如,当用户经由调度器应用记录商务旅行计划、并且与另一用户的装置200交换的消息的内容涉及商务旅行地点时,电子装置100可提取“哪里”作为关键字。
而且,当电子装置100基于消息的含义提取关键字时,电子装置100可考虑所记录的关于用户的内容。例如,所记录的关于用户的内容可表示电子装置100和服务器300中写入的关于用户的记录。而且,关于用户的记录可包括在用户使用电子装置100的同时由用户写入的记录、以及在用户使用App服务的同时在服务器中写入的记录。而且,关于用户的记录可包括在用户使用电子装置100或服务器300的同时由用户间接而不是直接写入的记录。
例如,关于用户的记录可包括用户的呼叫的内容、用户经由信用卡的支付的内容、以及用户经由社交网络服务(SNS)写入的内容。
电子装置100可通过统计分析计算出消息的含义,来提取关键字。
例如,电子装置100可确定用户的预测状况之间的优先级顺序。例如,电子装置100可确定一个或多个预测状况的任一个比其它状况更可能发生。例如,电子装置100可确定一个或多个关键字的任一个比其它关键字更可能出现。
电子装置可通过统计分析和语义分析按照上述方法提取“哪里”作为关键字。
[1.3内容获得]
电子装置100可在操作S170基于提取的关键字,获得当对该消息应答时可使用的内容。
电子装置100可通过基于提取的关键字执行各种搜索来获得内容。电子装置100获得的内容可包括二维图像、三维图像、二维视频、三维视频、由各种语言形成的文本回复、各个区域的内容、以及与提供各个服务的应用相关的内容。
根据示范实施例的电子装置100可从外部搜索服务器获得与关键字相关的内容。
例如,电子装置100可获得与涉及关键字的应用服务相关的内容。
例如,当接收的消息是问题类型消息时,电子装置100可分析该消息并获得与天气应用服务相关的内容。
例如,当尽管接收的消息不是问题类型、但是作为语义分析的结果识别到消息需要应答时,电子装置100可通过使用匹配表格或预定规则来获得内容。
例如,电子装置100可通过考虑对话内容以及与用户相关的数据,根据关键字来确定当用户对该消息应答时可使用的应用服务。
例如,当用户位于韩国时,电子装置100可选择韩国国籍的服务提供商所提供的与地图相关的应用服务。当用户位于日本时,电子装置100可选择日本国籍的服务提供商所提供的与地图相关的应用服务。
而且,例如,电子装置100可通过参考用户的应用使用频率,来选择电子装置100的用户频繁使用的地图应用服务。
而且,例如,电子装置100可从用户预先选择的应用服务之中选择适于当前状况的应用服务。
例如,电子装置100可从用户预先选择的第一到第五应用服务之中选择适于用户的当前状况的第一应用服务。例如,当存在用户预先选择的第一到第五餐厅应用服务时,电子装置100可从第一到第五餐厅应用服务之中选择适于用户的当前状况的至少一个餐厅应用服务。
而且,电子装置100可通过使用因特网搜索服务来获得内容。例如,电子装置100可在确定感兴趣搜索服务之后,通过基于关键字执行各种搜索来获得内容。例如,因特网搜索服务可以是仅授权人员能访问的搜索服务,诸如大学图书馆、论文搜索站点、以及研究所的数据库。
例如,电子装置100可通过搜索服务来获得与关键字对应的二维图像。例如,电子装置100可通过在搜索服务中输入关键字作为输入值,来获得各个区域的内容。
根据另一示范实施例,电子装置100可获得电子装置100中存储的相关内容。
例如,电子装置100可获得电子装置100中存储的二维图像、三维图像、二维视频、三维视频、由各种语言形成的文本回复、关于各个区域的内容的数据。
[1.4内容提供]
电子装置100可在操作S190提供至少一条获得的内容。
电子装置100可通过各种方法向用户提供基于关键字获得的内容。
例如,电子装置100可通过使用声音、图像、和文本的至少一个向用户提供获得的内容。例如,电子装置100通过其提供获得的内容的方法可根据电子装置100的类型改变。例如,电子装置100可通过屏幕划分方法和屏幕变换方法来显示获得的内容,并且当电子装置100是诸如智能手表的可穿戴装置时,电子装置100可通过总结内容来显示内容。例如,电子装置100可经由化身(avatar)显示声音和图像中的内容,并且当电子装置100是诸如智能手表的可穿戴装置时,电子装置100可显示内容的概要。
例如,电子装置100可通过使用搜索服务来获得与关键字对应的二维图像。例如,电子装置100可通过在搜索服务中输入关键字作为输入值,来获得各个区域的内容。
[2.场景1]
图4到7是用于描述根据示范实施例的提供内容的方法的图。图4到7是根据以下场景的步骤的用户界面的图,其中电子装置100提供文本聊天服务,并向用户提供电子装置100中存储的图像作为与应答相关的内容。
参考图4,电子装置100的用户Chris正执行与另一用户的装置200的用户Hyunjin的文本聊天。
电子装置100在用户姓名框40中显示电子装置100的用户的姓名。根据另一示范实施例,电子装置100可在用户姓名框40中显示另一用户的装置200的用户的姓名。
电子装置100在2013年8月6日8:26从另一用户的装置200接收消息50“嗨”。电子装置100向另一用户的装置200发送消息51并从另一用户的装置200接收消息52。电子装置100的用户从Hyunjin接收消息“你在哪里?”。
电子装置100可确定消息50、51、52和53的每一个是否包括问题。例如,电子装置100可确定消息50、51和52的每一个不是问题,并且消息53是问题。
例如,电子装置100可标记被确定为问题的消息,以区分问题消息和其他消息。例如,电子装置100可以用不同颜色(例如,荧光黄色)来标记电子装置100确定为问题的消息,以便与其他消息区分。
电子装置100可针对消息53提取关键字。例如,电子装置100可提取“当前地点”作为针对消息53的关键字。作为选择,例如,电子装置100可提取“你在哪里?”并将其变换为“我在哪里?”作为作为针对消息53的关键字。作为选择,例如,电子装置100可通过进一步考虑与用户相关的数据,来提取“英格兰”或“首尔”作为针对消息53的关键字。
参考图5,电子装置100可显示与消息53相关的图像71、72和73。电子装置100可显示电子装置100中存储的图像或在与电子装置100连接的服务器中存储的图像。当电子装置100将消息53确定为问题时,电子装置100可显示相关图像71、72和73,而无需用户的附加输入。作为选择,当电子装置100将消息53确定为问题时,电子装置100可通过考虑设置中的用户的输入值,来显示相关图像71、72和73作为可在应答时使用的内容。
参考图6,电子装置100可通过用户的触摸输入或点击输入,来选择显示的图像之一。
参考图7,电子装置100可经由消息54向另一用户的装置200发送通过用户的触摸或点击输入选择的图像72作为应答。
[2.1.能够应用该方法的装置和应用]
图8是用于描述能够应用根据示范实施例的提供内容的方法的各类电子装置和各种聊天方法的图。
参考图8,根据示范实施例的提供内容的方法可在通信处理期间经由电子装置100和另一用户的装置200之间的语音聊天或文本聊天来执行。而且,根据示范实施例的提供内容的方法可在通信处理期间经由电子装置100和另一用户的装置200之间的由话音到文本(STT)功能伴随的语音聊天来执行。而且,电子装置100可被实现为智能电话、平板PC、可穿戴装置等。而且,即使其不是以上类型,可实现消息服务的任何电子装置也可应用根据示范实施例的提供内容的方法。
[2.2.装置的特定组件]
图9A是用于描述电子装置100中包括的被配置为提供与应答相关的内容的知识框架120的图。
电子装置100可实现知识框架120、第一应用141、和第二应用143,并且可存储网络内容列表145和装置列表147。
知识框架120可包括自然语言处理单元(NLU)121、会话管理器122、剖析器123、上下文分析器124、应答生成器125、内容元数据储存器126、和App注册器127。
NLU121可分析电子装置100接收的每一消息的含义。NLU121可通过统计方法分析每一消息的含义。NLU121可通过统计方法和语义方法分析每一消息,并且可将分析的消息传送到上下文分析器124。
会话管理器122可针对电子装置100交换的消息来检查对话伙伴、对话日期和时间、对话内容、以及对话环境,并且可以组为单位来分析交换的消息。会话管理器122可分析电子装置100交换的一个或多个消息,以将消息定义为会话。
剖析器123可收集并存储关于电子装置的用户或与电子装置的用户交换消息的用户的内容。剖析器可保持、处理并存储电子装置的用户或与电子装置的用户交换消息的用户所写入的内容。
内容分析器124可基于电子装置交换的消息的含义,来分析并确定电子装置交换的每一消息的含义。内容分析器124可以一个或多个消息为单位,来分析并确定电子装置交换的每一消息的含义,该单位由会话管理器122定义。
应答生成器125可生成针对该消息的应答。应答生成器125可生成在对消息应答时可使用的内容。应答生成器125可生成各种可能应答,并经由界面屏幕向用户提供生成的应答。
内容元数据储存器126可包括关于内容的元数据。例如,内容元数据储存器126可包括关于应用的内容。例如,内容元数据储存器126可包括关于应用是与运动相关的应用还是与电影相关的应用的元数据。而且,例如,内容元数据储存器126可包括关于图像的元数据。内容元数据储存器126可包括内容,诸如图像中出现的人的姓名、以及人和电子装置的用户之间的关系。
例如,内容元数据储存器126可连续收集关于因特网上的网络内容列表145的内容。例如,内容元数据储存器126可连续收集关于电子装置的装置内容列表147的数据。
App注册器127可包括关于各个应用的内容。例如,App注册器127可包括关于电子装置100中包括的应用的数据。例如,App注册器127可包括关于不在电子装置100中包括的应用的数据。App注册器127可频繁更新关于应用的数据。应答生成器125可通过参考App注册器127的关于应用的数据,来生成与应用相关的应答。
例如,App注册器127可存储关于第一应用141和第二应用142的至少一个的数据。例如,第一应用141可以是在电子装置100中安装的应用。例如,第二应用142可以是不在电子装置100中安装的应用。
图9B是用于描述根据示范实施例的电子装置100的每一组件的操作的图。
参考图9B,电子装置100可包括会话管理器122、剖析器123、上下文分析器124、内容元数据储存器126、App注册器127、应答推荐器128、和网络搜索引擎129。
应答推荐器128可包括自然语言处理单元NLU121和应答生成器125。
会话管理器122可将消息um[n]传送到应答推荐器128。应答推荐器128可从会话管理器122接收消息um[n],并且自然语言处理单元NLU121可根据消息um[n]生成关键字kw[m]。例如,会话管理器122可将消息um[n]“你在哪里?”传送到应答推荐器128,并且自然语言处理单元NLU121可生成“地点”或“信息”作为关键字kw[m]。
应答推荐器128可从剖析器123接收用户信息usr.info。例如,针对消息um[n]“你在哪里?”,应答推荐器128可接收外部服务账户中的用户信息、关于用户的家或公司或者关于用户频繁拜访的场所的信息,作为用户信息usr.info。当应答推荐器128生成关键字kw[m]时,应答推荐器128可参考从剖析器123接收的用户信息usr.info。
应答推荐器128可从上下文分析器124接收上下文信息cnt.info。例如,关于消息um[n]“你在哪里?”的上下文信息cnt.info可包括时间信息、全球定位系统(GPS)信息、天气信息、分析的用户活动信息、以及最近日志。
例如,用户活动信息可包括以下信息,诸如用户待在餐厅达一小时的事实、以及用户连续跑步达一分钟的事实。例如,最近日志可包括诸如电子装置100可访问的基站的信息的联网信息。当通过使用关键字kw[m]生成推荐应答rcm.ans时,应答推荐器128可考虑上下文信息cnt.info。
应答推荐器128可通过向App注册器127传送关键字kw[m],来接收与应用相关的信息ap.info。例如,与应用相关的信息ap.info可包括应用的元数据或关于与地图相关的应用的信息。
应答推荐器128可从内容元数据储存器126接收与关键字kw[m]对应的内容信息cm.info。例如,内容信息cm.info可包括图像的特定信息。例如,特定图像信息可包括其中生成图像的地点(维度和经度)或标志信息。
应答推荐器128可通过向网络搜索引擎129传送关键字kw[m],来接收搜索结果值srch.rst。例如,搜索结果值srch.rst可包括波士顿的图像、公司的地址、和地图应用。
应答推荐器128可接收与应用相关的信息ap.info、内容信息cm.info和搜索结果值srch.rst中的至少一个,并且可通过参考用户信息usr.info和上下文信息cnt.info,来生成与消息um[n]对应的推荐应答rcm.ans。
[2.3.环境设置]
图10A到10D是根据示范实施例的电子装置100所提供的环境设置用户界面的图。
术语“设置”可表示通过用户的设置或用户的输入预先确定电子装置100的操作方法,以设置电子装置100的使用环境。
参考图10A,电子装置100根据设置可以不提供与应答相关的内容或者可以按照视觉或听觉向用户提供与应答相关的内容。当电子装置100根据设置提供与应答相关的内容时,电子装置100可自动、半自动和手动提供与应答相关的内容。
电子装置100根据设置自动提供与应答相关的内容可表示,当电子装置100确定交换的消息包括问题时,电子装置100提供针对该消息的与应答相关的内容,而不接收附加用户输入。
电子装置100根据设置半自动提供与应答相关的内容可表示,当电子装置100确定交换的消息包括问题时,如果电子装置100接收到针对该消息的用户的简单输入(触摸或点击输入),则电子装置100提供针对该消息的与应答相关的内容。
例如,当电子装置100半自动地提供与应答相关的内容时,电子装置100可显示与问题对应的消息,以便与其他消息区分。例如,电子装置100可与其他消息不同地显示与问题对应的消息的背景颜色。例如,电子装置可通过使用下划线和/或显眼的颜色来显示与问题对应的消息,以便与其他消息区分。
电子装置100的用户可通过触摸或点击使用以上方法之一标记的消息,来接收内容。电子装置100可通过接收用户的触摸或点击输入,来获得与应答相关的内容。电子装置100可在电子装置100接收到用户的触摸或点击输入之前获得并存储与预测的应答相关的内容,并且然后可在接收到用户的触摸或点击输入时提供与应答相关的内容。
当将电子装置100设置为手动提供与应答相关的内容时,如果电子装置100将交换的消息确定为问题、并且通过使用指示用户将接收与应答相关的内容的用户输入来标识用户是否将接收与应答相关的内容,则电子装置100提供针对该消息的与应答相关的内容。
参考图10B,电子装置100可通过考虑在设置中设置的与用户相关的条件,来提供与应答相关的内容。
例如,电子装置100可通过考虑在设置中设置的与第一用户User1相关的内容,来提供与应答相关的内容。而且,例如,电子装置100可针对第二用户User2交换的消息,来提供与应答相关的内容。而且,例如,电子装置100可仅针对第三用户User3输入的消息,来提供与应答相关的内容。
参考图10C,电子装置100可通过考虑在设置中设置的与时间相关的条件,来提供与应答相关的内容。
例如,当如图10A中图示的那样在设置中设置为半自动地提供与应答相关的内容时,电子装置100可限制其中显示与问题对应的消息的时间段,使得与问题对应的消息区别于其他消息。例如,电子装置100可将其中显示与问题对应的消息的时间段限制为10秒、20秒、30秒、或1分钟,以便区别于其他消息。当该时间段超期时,电子装置100可以不再显示与问题对应的消息以便区别于其他消息。
参考图10D,电子装置100可通过考虑在设置中的数据条件,来提供与应答相关的内容。
例如,电子装置100可通过参考仅电子装置100中存储的数据,来确定问题的内容。例如,电子装置100可通过参考仅电子装置100和服务器300中存储的数据,来确定问题的内容。
例如,电子装置100可通过参考仅电子装置100中存储的数据,来提供与应答相关的内容。例如,电子装置100可通过参考仅电子装置100和服务器300中存储的数据,来提供与应答相关的内容。
除了图10A到10D中图示的方式之外,电子装置100可根据设置按照各种方式操作。例如,电子装置100的用户可设置该设置,使得提供与应答相关的内容作为文本、声音、图像等。例如,电子装置100的用户可设置需要提供内容的感兴趣领域。例如,电子装置100的用户可将感兴趣领域设置为以下项目,诸如运动、天气、政治、电影、经济、生活等。
[2.4.基于终端的服务提供]
图11A图示了经由电子装置100提供与应答相关的内容的方法。
参考图11A,电子装置100可在操作S210从另一用户的装置200接收消息。电子装置100可从另一用户的装置200连续接收消息。电子装置100可经由服务器300从另一用户的装置200接收消息。
电子装置100可在操作S220确定从另一用户的装置200接收的消息是否包括问题。电子装置100可将消息中使用的句子划分为语法单元,并提取语法单元之间的关系。电子装置100可基于该操作的结果,来确定接收的消息是否是问题。
电子装置100可在操作S230从自另一用户的装置200接收的消息提取关键字。电子装置100可通过执行自然语言分析来从接收的消息提取关键字。当电子装置100提取关键字时,电子装置100可通过参考用户输入的数据或关于用户的记录数据,来提取关键字。
电子装置100可在操作S250基于关键字来获得在对消息应答时可使用的内容。电子装置100可通过基于提取的关键字执行各种搜索,来获得内容。电子装置100获得的内容可包括二维图像、三维图像、二维视频、三维视频。包括各种语言的文本回复、各个区域的内容、以及关于提供各个服务的应用服务的内容。
电子装置100可在操作S270提供至少一条获得的内容。例如,电子装置100可经由声音、图像、和文本的至少一个向用户提供至少一条获得的内容。
图11B图示了经由电子装置100提供与应答相关的内容的方法。
参考图11B,电子装置100可在操作S310从另一用户的装置200接收消息。
电子装置100可在操作S320确定是否接收在对从另一用户的装置200接收的消息进行应答时可使用的内容。例如,电子装置100可基于经由设置所设置的用户配置,来确定是否接收在对接收的消息进行应答时可使用的内容。
电子装置100可在操作S330从自另一用户的装置200接收的消息提取关键字。电子装置100可通过执行自然语言分析来提取关键字,以确定该消息的含义。
电子装置100可在操作S350基于关键字来获得在对消息应答时可使用的内容。电子装置100可从外部搜索服务器获得与关键字相关的内容。电子装置100可经由因特网搜索服务获得该内容。电子装置100可获得在电子装置100中存储的相关内容。
电子装置100可在操作S370提供获得的内容的列表。电子装置100可经由各种方法向用户提供基于关键字获得的内容。
图11C图示了经由电子装置100提供与应答相关的内容的方法。
参考图11C,电子装置100可在操作S410从另一用户的装置200接收消息。电子装置100可在操作S430从自另一用户的装置200接收的消息提取一个或多个关键字。
电子装置100可在操作S440基于电子装置100的内部数据或用户的输入,在一个或多个关键字之间设置优先级顺序。电子装置100可在关键字之间设置优先级顺序,可参考该优先级顺序用于获得内容。例如,当电子装置100可基于多个关键字获得内容时,电子装置100可首先获得基于具有高优先级顺序的关键字的内容,并且可稍后获得基于具有低优先级顺序的关键字的内容。例如,当电子装置100可基于多个关键字获得内容时,电子装置100可首先显示基于具有高优先级顺序的关键字的内容,并且可稍后显示基于具有低优先级顺序的关键字的内容。
电子装置100可在操作S450基于关键字来获得在对消息应答时可使用的内容,并且可在操作S470经由一种或多种方法提供至少一条内容。
图11D图示了经由电子装置100提供与应答相关的内容的方法。
参考图11D,电子装置100可在操作S510从另一用户的装置200接收消息。
电子装置100可在操作S530从自另一用户的装置200接收的消息提取关键字。
电子装置100可在操作S540分析另一用户的装置200的用户与电子装置100的用户之间的关系数据。另一装置200的用户与电子装置100的用户之间的关系数据可表示在电子装置100或服务器300中存储的数据。
电子装置100可在操作S550基于分析的用户之间的关系数据或关键字,来获得在对消息应答时可使用的内容。而且,电子装置100可在操作S50经由一种或多种方法提供至少一条内容。
图12A是用于描述经由电子装置100提供与应答相关的内容的方法的流程图。
电子装置100可在操作S1005从另一用户的装置200接收第一消息。电子装置100可经由服务器300从另一用户的装置200接收第一消息。
电子装置100可在操作S1010确定从另一用户的装置200接收的第一消息是否包括问题。电子装置100可通过执行自然语言分析来确定接收的第一消息是否包括问题。
当接收的第一消息包括问题时,电子装置100可在操作S1020从该消息提取关键字。
电子装置100可在操作S1020请求服务器300基于关键字获得内容。服务器300可在操作S1030基于关键字获得在对消息应答时可使用的内容。
服务器300可在操作S1035向电子装置100传送基于关键字获得的内容。电子装置100可在操作S1040提供所获得的内容。
电子装置100可在操作S1045向另一用户的装置200传送第二消息。例如,电子装置100可通过在第二消息中包括至少一条获得的内容,而向另一用户的装置200传送第二消息。
图12B是电子装置100和服务器300的每一个中包括的模块的图。
图12B是用于描述经由电子装置100获得与应答相关的内容的方法的示范图。可按照一种或多种方式来调整电子装置100中包括的特定组件和服务器300中包括的特定组件。
参考图12B,电子装置100可包括会话管理器122、剖析器123、上下文分析器124、和应答推荐器128。应答推荐器128可包括自然语言处理单元(NLU)121和应答生成器125。
服务器300可包括内容元数据储存器326和App注册器327。
NLU121可分析电子装置100所接收的消息的含义。NLU121可经由统计分析方法和语义分析方法来分析消息,并且可将分析的消息传送到上下文分析器124。
会话管理器122可通过针对电子装置100所交换的消息检查和使用对话伙伴、对话发生的日期和时间、对话内容、以及对话环境,来分析交换的消息。会话管理器122可对电子装置100所交换的一个或多个消息进行分组,并将该组定义为会话。例如,会话管理器122可向应答推荐器128传送例如消息um[n]“你今天下午打算去哪里?”。
应答推荐器128可从会话管理器122接收消息um[n],并且NLU121可根据消息um[n]生成关键字kw[m]。例如,会话管理器122可向应答推荐器128传送消息“你今天下午打算去哪里?”,并且NLU121可生成调度、事件、地点、目的地、或时间作为关键字kw[m]。
剖析器123可连续收集、处理并存储关于电子装置100的用户以及与电子装置100的用户相关的人的内容。当生成关键字kw[m]时,应答推荐器128可从剖析器123接收与关键字kw[m]相关的用户信息usr.info,并参考用户信息usr.info。例如,针对消息um[n]“你今天下午打算去哪里?”的用户信息usr.info可包括外部服务会计中的用户信息、以及关于用户的家或公司或者用户频繁拜访的场所的信息。
上下文分析器124可基于电子装置100交换的消息的含义,来确定电子装置100交换的每一消息的含义。上下文分析器124可以一个或多个消息为单位,来确定电子装置100交换的每一消息的含义,该单位由会话管理器122定义。应答推荐器128可从上下文分析器124接收上下文信息cnt.info。
例如,关于消息um[n]“你今天下午打算去哪里?”的上下文信息cnt.info可包括时间信息、GPS信息、分析的用户调度信息、和最近日志。例如,当应答推荐器128通过使用关键字kw[m]生成推荐的应答rcm.ans时,应答推荐器128可考虑上下文信息cnt.info。
电子装置100可通过向App注册器327传送关键字kw[m],来接收与应用相关的信息ap.info。例如,针对消息um[n]“你今天下午打算去哪里?”的与应用相关的信息ap.info可包括与调度器应用相关的信息、与社交网络服务应用相关的信息、以及与聊天应用相关的信息。例如,第一应用可以是在电子装置100中安装的与天气相关的应用。例如,第二应用可以是不在电子装置100中安装的与新闻相关的应用。
电子装置100可通过向内容元数据储存器326传送关键字kw[m],来接收内容信息cm.info。例如,应答推荐器128可从内容元数据储存器326接收关于与天气相关的应用以及与新闻相关的应用的数据。例如,关于消息um[n]“你今天下午打算去哪里?”的内容信息cm.info可包括图像特定信息或调度相关信息。例如,图像特定信息可包括其中生成图像的地点(纬度、经度)。
电子装置100的应答推荐器128可从服务器300接收与应用相关的信息ap.info和内容信息cm.info的至少一个,并参考用户信息usr.info和上下文信息cnt.info,以生成与消息um[n]对应的推荐的应答rcm.ans。
应答生成器125可生成针对该消息的与应答相关的内容。应答生成器125可生成在对消息应答时可使用的内容。应答生成器125可经由界面屏幕向用户提供生成的内容。
[2.5.基于服务器的服务提供]
图13A是用于描述经由电子装置100提供与应答相关的内容的方法的流程图。
服务器300可在操作S2010从另一用户的装置200接收第一消息。服务器300可在操作S2020向电子装置100传送从另一用户的装置200接收的第一消息。
服务器300可在操作S2030确定从另一用户的装置200接收的第一消息是否包括问题。
当接收的第一消息包括问题时,服务器300可在操作S2040从消息提取关键字。
服务器300可在操作S2050基于关键字获得在对消息应答时可使用的内容。
服务器300可向电子装置100提供基于关键字获得的内容。电子装置100可在操作S2060提供获得的内容。
电子装置100可在操作S2070向服务器300传送第二消息。例如,电子装置100可通过在第二消息中包括至少一条获得的内容,来向服务器300传送第二消息。服务器300可在操作S2080向另一用户的装置200传送第二消息。
在图13A中,操作S2030、S2040和S2050被图示为在通过操作S2020向电子装置100传送第一消息之后执行。然而,当前实施例不限于此,并且操作S2030、S2040和S2050可在服务器200向电子装置100传送第一消息之前执行。例如,第一消息可连同在操作2050获得的内容一起传送。
作为选择,另一用户的装置200可在另一用户的装置200向服务器300传送第一消息之前、之中或之后向电子装置100直接传送第一消息。在该情况下,服务器200可以省略操作S2020。
根据另一示范实施例,服务器300可通过网站或移动应用提供在线社交联网服务。在该情况下,服务器300可在网站或移动应用上显示从另一用户的装置200接收的第一消息,而不是向电子装置100直接转发第一消息(操作S2020)。第一消息可以是另一用户的装置200和/或其他用户发布的评论回复(threadedcomments)之一。当电子装置100的用户通过将光标放置在输入区域中或者用他/她的手指触摸输入区域、而激活评论输入区域时,服务器300可利用在网站或移动应用上发布的评论之一来执行操作S2030、S2040和S2050。例如,服务器300可对于最近发布的或者通过用户输入选择的评论执行操作S2030、S2040和S2050。
图13B是电子装置100和服务器300的每一个中包括的模块的图。
图13B是用于描述基于服务器300获得与应答相关的内容的方法的示范图。可经由一种或多种方法来调整电子装置100中包括的特定组件和服务器300中包括的特定组件。
参考图13B,电子装置100可包括剖析器123和上下文分析器124。
剖析器123可对电子装置100的用户或其他用户写入的内容进行连续恢复、处理和存储。剖析器123可通过接收服务器300的请求来向服务器300传送用户信息usr.info。
上下文分析器124可基于电子装置100所交换的消息的含义,来确定电子装置100所交换的每一消息的含义。上下文分析器124可通过接收服务器300的请求,来向服务器300传送上下文信息cnt.info。
服务器300可包括会话管理器322、内容元数据储存器326、App注册器327、和应答推荐器328。应答推荐器328可包括自然语言处理单元NLU321和应答生成器325。
会话管理器322可针对电子装置100所交换的消息确定对话伙伴、对话发生的日期和时间、对话内容、以及对话环境,并且可以以组为单位来确定电子装置100经由服务器300所交换的消息。会话管理器122可收集电子装置100所交换的一个或多个消息,并将收集的消息定义为会话。例如,会话管理器322可向应答推荐器328传送接收的消息um[n]。
应答推荐器328可从会话管理器322接收消息um[n],并且NLU321可根据消息um[n]生成关键字kw[m]。例如,会话管理器322可向应答推荐器328传送消息“波士顿存在热点争端吗?”,并且NLU321可生成新闻、争端、话题、和地点作为关键字kw[m]。
应答推荐器328可从剖析器123接收用户信息usr.info。例如,当生成关键字kw[m]时,应答推荐器328可参考从剖析器123接收的用户信息usr.info。例如,用户信息usr.info可包括用户的年龄和偏好。例如,用户信息usr.info可包括外部服务会计中的用户信息。
应答推荐器328可从上下文分析器124接收上下文信息cnt.info。例如,当应答推荐器328通过使用关键字kw[m]生成推荐的应答rcm.ans时,应答推荐器128可考虑上下文信息cnt.info。上下文信息cnt.info可包括时间、分析的用户调度、和最近日志。
应答推荐器328可接收与应用相关的信息ap.info和内容信息cm.info中的至少一个,并且可参考从电子装置100接收的用户信息usr.info和上下文信息cnt.info,以生成与消息um[n]对应的推荐应答rcm.ans。例如,与应用相关的信息ap.info可包括提供新闻、杂志、文章的应用的信息。例如,内容信息cm.info可包括波士顿的文章和图像。
应答生成器325可生成针对该消息的与应答相关的内容。应答生成器325可生成在对消息应答时可使用的内容。应答生成器325可向电子装置100传送生成的内容。
[2.6.基于终端和服务器的服务提供]
图14A是用于描述经由电子装置100提供与应答相关的内容的方法的流程图。
服务器300可在操作S3010从另一用户的装置200接收第一消息。服务器300可在操作S3020向电子装置100传送从另一用户的装置200接收的第一消息。
服务器300可在操作S3030确定从另一用户的装置200接收的第一消息是否包括问题。服务器300可在向电子装置100传送第一消息之后确定第一消息是否包括问题,并且可向电子装置100传送第一消息之前确定第一消息是否包括问题。
当接收的第一消息包括问题时,服务器300可在操作S3040从消息提取关键字。服务器300可在操作S3045将关键字传送到电子装置100。
电子装置100可在操作S3050基于关键字获得在对消息应答时可使用的内容。电子装置100可显示基于关键字获得的内容。
电子装置100可在操作S3060向服务器300传送第二消息。例如,电子装置100可通过在第二消息中包括至少一条获得的内容,来向服务器300传送第二消息。服务器300可在操作S3070向另一用户的装置200传送第二消息。
服务器300可在传送第一消息之前执行操作S3030和S3040,并可以基本同时向电子装置100传送第一消息和关键字。作为选择,另一用户的装置200可在另一用户的装置200向服务器300传送第一消息之前、之中或之后向电子装置100直接传送第一消息。在该情况下,服务器200可以省略操作S3020。
图14B是电子装置100和服务器300的每一个中包括的模块的图。
图14B是用于描述基于服务器300获得与应答相关的内容的方法的示范图。可经由一种或多种方式来调整电子装置100中包括的特定组件和服务器300中包括的特定组件。
参考图14B,电子装置100可包括第一剖析器123、内容元数据储存器126、和App注册器127。
第一剖析器123可对关于电子装置100的用户或另一用户的数据进行收集和存储。关于用户的数据可包括用户的姓名、工作、电话号码、感兴趣领域、朋友关系、和移动记录。第一剖析器123可对电子装置100的用户写入的内容进行保持、处理和存储。电子装置100的用户写入的内容可包括用户写入的消息、备忘录、回复和评论。
内容元数据储存器126可包括针对内容的各类数据。例如,内容元数据储存器126可包括关于应用的类型的数据。而且,例如,内容元数据储存器126可包括元数据,例如图像生成的日期、和图像生成的场所。
而且,例如,内容元数据储存器126可连续收集和存储针对因特网上各类网络内容的数据、和针对电子装置100的各类内容的数据。
App注册器127可包括关于各个应用的数据。例如,App注册器127可存储关于在电子装置100中安装的第一应用和不在电子装置100中安装的第二应用的至少一个的数据。
服务器300可包括NLU321、会话管理器322、第二剖析器323、上下文分析器324和应答生成器325。
会话管理器322可通过检查和使用服务器300所交换的消息的对话伙伴、对话日期和时间、对话内容、以及对话环境,来以组为单位分析服务器300所交换的消息。会话管理器122可收集服务器300所交换的一个或多个消息,并将收集的消息定义为会话。
NLU321可分析服务器300所接收的第一消息的含义。NLU321可通过统计分析方法和语义分析方法来分析第一消息的含义,并将分析的含义传送到上下文分析器324。
上下文分析器324可基于电子装置100所交换的消息的含义,来确定电子装置100所交换的每一消息的含义。上下文分析器324可以一个或多个消息为单位,来确定电子装置100交换的每一消息的含义,该单位由会话管理器322定义。
应答推荐器328可接收用户信息usr.info[p]和上下文信息cnt.info的至少一个,并且可参考从电子装置100接收的用户信息usr.info[p]、与应用相关的信息ap.info、和内容信息cm.info,以生成与消息um[n]对应的推荐应答rcm.ans。服务器300可向电子装置100传送推荐应答rcm.ans。
[2.7.对话参与者的关系的分析]
图15是用于描述为了计算用户之间的关系、利用在服务器300的数据库370中存储的信息的方法的图。
参考图15,服务器300可经由数据库370和数据库管理器360来收集、管理和分析用户的信息。
数据库370可包括针对各个用户的数据。例如,数据库370可存储与电子装置100的用户相关的关于用户的信息。例如,数据库370可包括关于另一用户的装置200的用户与电子装置100的用户之间的隐私级别的数据。
数据库管理器360可管理数据库370。数据库管理器360可管理数据库370中记录的各类数据,并且可响应于电子装置100的请求向电子装置100提供数据库管理器360所管理的数据。
数据库管理器360可管理数据库370中写入的每一用户的记录。而且,数据库管理器360可管理数据库370中写入的每一组的记录。数据库管理器360可向电子装置100传送电子装置100所请求的数据。
电子装置100可经由关系探测器140、隐私分析器150、和朋友列表数据库190,来编辑和管理服务器300中存储的信息。
关系探测器140可确定另一用户的装置200的用户与电子装置100的用户之间的关系。关系探测器140可通过请求来自服务器300中包括的数据库管理器360的信息,来接收关于另一用户的装置200的用户与电子装置100的用户的信息,并且可确定用户之间的关系。关系探测器140可通过分析用户之间的先前呼叫记录和对话内容,来确定用户之间的关系。
隐私分析器150可分析另一用户的装置200的用户与电子装置100的用户之间的隐私级别。例如,隐私分析器150可计算另一用户的装置200的用户与电子装置100的用户之间的隐私级别作为量化的数据(例如,诸如1、2、3和10的数据、或诸如第一级别、第二级别、和第三级别的数据)。例如,隐私分析器150可确定另一用户的装置200的用户与电子装置100的用户之间的隐私级别属于一个或多个预定类别中的哪一类。例如,隐私分析器150可按照这样的方式分析另一用户的装置200的用户与电子装置100的用户之间的隐私级别,使得隐私分析器150从诸如“家人”、“朋友”、“同事”或“同学”的类别之中选择隐私级别。
朋友列表数据库190可存储关系探测器140和隐私分析器150基于用户与电子装置100的用户之间的关系而分析的数据。这里,朋友列表数据库190中包括的信息可以不仅对应于关于电子装置100的用户的朋友(社交上下文中的朋友)的信息,而且对应于关于电子装置100可访问的所有人(诸如,家人、校友、同事、和亲戚)的信息。
例如,朋友列表数据库190可存储另一用户的装置200的用户与电子装置100的用户是社交网络服务(SNS)中的朋友的信息。例如,朋友列表数据库190可存储另一用户的装置200的用户与电子装置100的用户是家庭成员或亲戚的信息。例如,朋友列表数据库190可存储另一用户的装置200的用户与电子装置100的用户是公司的雇员和雇主的信息。例如,朋友列表数据库190可存储另一用户的装置200的用户与电子装置100的用户是学校的校友的信息。
图16是用于描述为了确定用户之间的关系利用在电子装置100的数据库170中存储的信息的方法的图。
参考图16,电子装置100可经由数据库170、数据库分析器160、关系探测器140、隐私分析器150、和朋友列表数据库190,来收集、管理和分析关于用户的信息。
数据库170可包括与电子装置100的用户和各个用户之间的电话记录对应的数据。例如,数据库170可实时存储关于电子装置100的用户和其它用户之间的电话记录的信息。例如,电话记录可包括呼叫时间、呼叫场所、呼叫开始时间、呼叫结束时间、和呼叫方法(语音或消息)。
而且,数据库170可包括在电子装置100的用户的地址簿或联系人列表中写入的数据。例如,数据库170可包括诸如朋友的公司名称、工作、和家庭关系的信息。
数据库分析器160可分析并管理数据库170中包括的诸如电话记录或地址列表的数据。数据库分析器160可分析数据库170中写入的各类数据,并且可响应于关系探测器140或隐私分析器150的请求,来提供数据的分析结果。
数据库分析器160可管理对于每一个体在数据库170中写入的记录。而且,数据库分析器160可管理对于每一组在数据库170中写入的记录。数据库分析器160可向电子装置100传送关系探测器140或隐私分析器150所请求的数据。
关系探测器140可确定另一用户的装置200的用户和电子装置100的用户之间的关系。关系探测器140可通过请求数据库分析器160,来确定另一用户的装置200的用户和电子装置100的用户之间的关系。关系探测器140可通过分析另一用户的装置200的用户和电子装置100的用户之间的先前呼叫记录,来确定另一用户的装置200的用户和电子装置100的用户之间的关系。
隐私分析器150可分析另一用户的装置200的用户和电子装置100的用户之间的隐私级别。例如,隐私分析器150可计算另一用户的装置200的用户与电子装置100的用户之间的隐私级别作为量化的数据(例如,诸如1、2、3和10的数据、或诸如第一级别、第二级别、和第三级别的数据)。例如,隐私分析器150可按照这样的方式分析另一用户的装置200的用户与电子装置100的用户之间的隐私级别,使得隐私分析器150从诸如“家人”、“朋友”、“同事”或“同学”的类别之中选择隐私级别。
朋友列表数据库190可存储关系探测器140和隐私分析器150基于用户与电子装置100的用户之间的关系而分析的数据。图16的朋友列表数据库190与图15的朋友列表数据库190类似。
图17是用于描述为了确定电子装置100的用户和另一用户的装置200的用户之间的关系、利用在电子装置100的数据库170中存储的内容和在服务器300的数据库370中存储的信息的方法的图。
参考图17,电子装置100可经由数据库170、数据库分析器160、关系探测器140、隐私分析器150、和朋友列表数据库190,来收集、管理和分析与用户相关的信息。图17的数据库170和数据库分析器160与图16的数据库170和数据库分析器160类似。其后,将省略重复描述。
服务器300可包括数据库370和数据库管理器360。图17的数据库370和数据库管理器360与图15的数据库370和数据库管理器360类似。其后,将省略重复描述。
关系探测器140可确定另一用户的装置200的用户和电子装置100的用户之间的关系。关系探测器140可通过请求数据库分析器160和数据库管理器360的至少一个,来确定另一用户的装置200的用户和电子装置100的用户之间的关系。关系探测器140可通过分析另一用户的装置200的用户和电子装置100的用户之间的先前呼叫记录,来确定另一用户的装置200的用户和电子装置100的用户之间的关系。关系探测器140可通过分析另一用户的装置200的用户和电子装置100的用户之间的对话内容,来确定另一用户的装置200的用户和电子装置100的用户之间的关系。
隐私分析器150可分析另一用户的装置200的用户和电子装置100的用户之间的隐私级别。隐私分析器150可通过请求数据库分析器160和数据库管理器360的至少一个,来分析另一用户的装置200的用户和电子装置100的用户之间的隐私级别。
例如,隐私分析器150可计算另一用户的装置200的用户与电子装置100的用户之间的隐私级别作为量化的数据(例如,诸如1、2、3和10的数据、或诸如第一级别、第二级别、和第三级别的数据)。例如,隐私分析器150可确定另一用户的装置200的用户与电子装置100的用户之间的隐私级别属于一个或多个预定类别中的哪一类。例如,隐私分析器150可按照这样的方式分析另一用户的装置200的用户与电子装置100的用户之间的隐私级别,使得隐私分析器150从诸如“家人”、“朋友”、“同事”或“同学”的类别之中选择隐私级别。
朋友列表数据库190可存储在关系探测器140和隐私分析器150中基于用户与电子装置100的用户之间的关系而分析的数据。
而且,根据另一示范实施例,关系探测器140、隐私分析器150和朋友列表数据库190的至少一个可被包括在服务器300中。
[3.场景2]
[3.1.针对内容获得的标识]
图18、19A到19D、20A到20D、21、22A、22B、23A到23C以及24A到24E是用于描述根据示范实施例的提供内容的方法的图。图18、19A到19D、20A到20D、21、22A、22B、23A到23C以及24A到24E是根据以下场景的步骤的用户界面的图,其中电子装置100提供文本聊天服务,并向用户直接提供图像和推荐的应用作为与应答相关的内容。
参考图18,电子装置100的用户Chris正执行与另一用户的装置200的用户Hyunjin的文本聊天。
电子装置100经由用户姓名框40显示电子装置100的用户的姓名。根据另一示范实施例,电子装置100可在用户姓名框40中显示另一用户的装置200的用户的姓名。
电子装置100在2013年8月6日8:26从另一用户的装置200接收消息50“嗨”。电子装置100向另一用户的装置200发送消息51并从另一用户的装置200接收消息52。电子装置100的用户从Hyunjin接收消息“你在哪里?”。
电子装置100可确定消息50、51、52和53的每一个是否包括问题。例如,电子装置100可确定消息50、51和52不包括问题,并且消息53包括问题。
例如,电子装置100可标记被确定为问题的消息,使得被确定为问题的消息区别于其他消息,如图19A到19C中图示的那样。例如,电子装置100可以通过使用图19A中图示的下划线来标记与该问题对应的消息。例如,电子装置100可以通过使用图19B中图示的用于文本的阴影,来标记与该问题对应的消息。例如,电子装置100可以通过使用图19C中图示的用于语音泡泡的阴影,来标记与该问题对应的消息。
当电子装置100接收与标记的部分对应的用户输入以便区别于其它消息时,电子装置100可显示在对消息应答时可使用的内容。
例如,当将消息53确定为问题时,电子装置100可经由弹出窗口60接收指示是否需要推荐应答的用户输入,如图19D中图示的那样。
[3.2.内容的建议]
参考图20A到20D,电子装置100可响应于用户输入显示在对消息53应答时可使用的内容。
参考图20A,当电子装置100接收与图19C中图示的标记对应的用户输入(例如,触摸)时,电子装置100可推荐与对应于该问题的消息相关的应用。例如,当对应于该问题的消息与地点相关时,电子装置100可推荐地图应用或导航应用。
参考图20B,当电子装置100接收与图19D中图示的标记对应的用户输入(例如,触摸是按钮的用户输入)时,电子装置100可推荐与对应于该问题的消息相关的应用。例如,当对应于该问题的消息与地点相关时,电子装置100可推荐地图应用或导航应用。
参考图20C,当电子装置100接收与图19D中图示的标记对应的用户输入(例如,触摸是按钮的用户输入)时,电子装置100可推荐与对应于该问题的消息相关的应用和图像中的至少一个。
电子装置100可根据参考图15到17描述的示范方法,通过考虑电子装置100的用户和另一用户的装置200的用户之间的关系,来推荐在对消息应答时可使用的应用和图像中的至少一个。
例如,当电子装置100确定电子装置100的用户和另一用户的装置200的用户具有雇主和雇员的关系时,电子装置100可推荐应用和图像(除了电子装置100的用户的私人照片之外)中的至少一个。例如,如果电子装置100的用户现在在伦敦度假,则电子装置100通过考虑对话参与者之间的关系是与商业相关的,可以不推荐在假期中拍摄的照片作为应答。电子装置100可将假期照片分类为私人数据,并存储与假期照片有联系的类别信息。当另一装置200的用户的隐私级别(例如,级别2)低于预定级别(例如,级别7)时,电子装置100可以不建议被分类为私人数据的任何数据。
参考图20D,当电子装置100接收与图19D中图示的标记对应的用户输入(例如,触摸是按钮的用户输入)时,电子装置100可推荐与对应于该问题的消息相关的应用、直接应答、和图像中的至少一个。
电子装置100可根据参考图15到17描述的示范方法,通过考虑电子装置100的用户和另一用户的装置200的用户之间的关系,来推荐在对消息应答时可使用的应用、直接应答、和图像中的至少一个。在该说明书中,直接应答可表示可成为针对该消息的应答的句子、短语、单词等,而无需附加搜索。
例如,当电子装置100确定电子装置100的用户和另一用户的装置200的用户具有高隐私级别的关系时(诸如,家人或朋友),电子装置100可提供在对消息应答时可使用的内容,该内容包括电子装置100的用户的私人照片。例如,如果电子装置100的用户现在在伦敦度假,则电子装置100可通过考虑对话参与者具有私人关系,来推荐在假期中拍摄的照片作为应答。
[3.3.特定应答状况]
图21、22A、22B、23A到23C以及24A到24E是图示了以下处理的图,其中用户选择电子装置100建议的与应答相关的内容,并向另一用户的装置200提供与应答相关的内容。
参考图21,电子装置100的用户可从图20D中图示的与推荐应答相关的内容之中选择地图应用。
参考图22A,电子装置100可请求用户经由弹出窗口70标识是否编辑内容。例如,当用户想使用该应用所提供的内容而没有其附加编辑时,用户可选择指示没有内容编辑的应答。
参考图22B,当电子装置100标识用户不想编辑选择的内容时,电子装置100可经由消息向另一用户的装置200提供在图21中选择的地图应用中指示用户的当前地点的屏幕,而无需屏幕的附加编辑。
参考图23A,电子装置100可请求用户经由弹出窗口70标识是否编辑内容。例如,当用户想通过编辑应用所提供的内容来作出应答时,用户可选择指示内容的编辑的应答。
参考图23B,当电子装置100标识用户想编辑选择的内容时,电子装置100可在图21中选择的地图应用中搜索用户的当前地点,用于用户编辑指示用户的当前地点的屏幕,并且可显示与搜索结果对应的屏幕。
参考图23C,电子装置100可经由消息向另一用户的装置100传送屏幕,该屏幕是经由用户编辑该地图应用提供的搜索结果的结果。
[3.4.反馈状况]
图24A到24E是根据示范实施例的用户界面的视图,经由该用户界面针对可在应答中使用的内容的提供来接收用户反馈。
参考图24A,电子装置100可经由弹出窗口80询问用户,用户对可在应答中使用的内容的提供是否满意。
参考图24B到24D,当用户已经由弹出窗口80回答用户对内容的提供不满意时,电子装置100可提供弹出窗口81、82、83、84和85,经由弹出窗口81、82、83、84和85,用户可选择用户想添加或排除的类别,用于可在应答中使用的内容的稍后提供。
参考图24E,当用户已经由弹出窗口80回答用户对内容的提供不满意时,电子装置100可提供弹出窗口86和87,经由弹出窗口86和87,用户可选择用户想调整的环境设置,针对可在应答中使用的内容的稍后提供。
根据另一示范实施例,电子装置100可确定用户的类别偏好,而不使用调查弹出窗口81、82、83、53和85。为此,电子装置100可自动存储每当作出选择时用户选择的内容的类别信息,并且对选择每一类别的次数进行计数。可按照类别偏好的顺序来显示推荐应答。
[3.5.建议应答的布局]
图25A到25E是根据示范实施例的当提供可在应答中使用的内容时、内容提供屏幕的图。
参考图25A,电子装置100可通过屏幕划分方法来提供内容。电子装置100可显示推荐内容列表90、推荐内容列表91、和推荐应用列表92。例如,当用户触摸第一场景场景#1中的推荐内容列表90时,电子装置100变换为第二场景场景#2以向另一用户的装置传送推荐内容列表90。例如,电子装置100可经由消息向另一用户的装置传送推荐内容列表90。
参考图25B,电子装置100可通过屏幕变换方法来提供内容。电子装置100可在第三场景场景#3中显示总结的与应答相关的内容92,并且可在第四场景场景#4中显示特定的与应答相关的内容93、94和95。当用户触摸或点击第三场景场景#3时,电子装置100可显示第四场景场景#4。
参考图25C,电子装置100可显示图像、应用或直接可能应答。电子装置100可通过一种或多种方法和安排,来显示在应答中可使用的内容。
参考图25D,电子装置100可经由化身的语音,来提供在应答中可使用的内容。
参考图25E,当电子装置100是智能手表时,电子装置100可经由概要屏幕97来提供推荐内容。当用户触摸或点击移动按钮98时,电子装置可显示另一概要屏幕。
图26是提供经由其改变内容提供布局的界面的电子装置100的图。
参考图26,电子装置100可经由弹出窗口99来接收关于是否改变内容提供的布局的用户反馈,并且可根据用户的选择来选择各个内容提供布局。
[4.场景3]
[4.1.针对内容获得的标识]
图27到37是用于描述根据示范实施例的提供内容的方法的图。图27到37是根据以下场景的操作的用户界面的图,其中电子装置100提供语音聊天服务,并向用户提供图像、推荐应用、和直接应答作为与应答相关的内容。
参考图27,电子装置100的用户Chris正执行与另一用户的装置200的用户Hyunjin的语音聊天。电子装置100和另一用户的装置200可以消息为单位来划分对话。
参考图28,电子装置100可接收每一语音消息,并根据图示的顺序针对该消息执行话音到文本(STT)变换。
电子装置100可在操作S4010标识每一语音消息由哪种语言形成。例如,电子装置100可标识每一语音消息由英文语言还是韩文语言形成。
电子装置100可在操作S4030将每一语音消息变换为所标识的语言的文本。例如,当电子装置100确定第一语音消息由英文语言形成时,电子装置100可将第一语音消息变换为英文文本。
电子装置100可在操作S4050显示所变换的文本。例如,电子装置100可将第一语音消息变换为英文文本,并经由显示单元(或输出界面)来显示英文文本。
参考图29,Chris的电子装置从Hyunjin的电子装置接收消息55“他在哪里?”。电子装置100可确定每一消息是否是问题。例如,电子装置100可确定消息55是否是问题。电子装置100可通过执行自然语言分析,来确定消息55“他在哪里?”中包括的“他”指代谁。
[4.2.用户输入接收]
参考图30,当电子装置100确定消息包括问题时,电子装置100可接收指示用户是否需要推荐应答的用户输入。
例如,当电子装置100确定消息55“他在哪里?”是问题时,电子装置100可经由弹出窗口63检查用户是否需要推荐应答,如图30中图示的那样。当用户对应于弹出窗口63触摸指示用户想接收在应答中可使用的内容的“是”按钮时,电子装置100可显示各类获得的内容。作为选择,电子装置100可省略根据用户设置显示弹出窗口63,并且一旦消息55被确定为询问消息,则可提供推荐应答。
[4.3.特定建议状况]
参考图31,电子装置100可提供消息74_a、74_b和74_c、应用75_a、75_b和75_c以及可能直接回答76。
参考图32,用户可从在应答中可使用的内容之中选择图像74_b。电子装置100可接收用户输入。例如,用户输入可以是选择图像74_b的触摸输入。
参考图33,电子装置100可经由弹出窗口64标识是否编辑选择的内容。用户可经由弹出窗口64触摸指示用户想使用选择的内容作为应答的“否”按钮,而无需编辑选择的内容。
参考图34,当用户经由弹出窗口64检查到用户想在无需编辑内容的情况下使用选择的内容时,电子装置100可经由消息56向对话伙伴传送消息74_b。
参考图35,电子装置100可经由弹出窗口64标识是否编辑选择的内容。用户可经由弹出窗口64触摸指示用户想通过编辑内容使用选择的内容作为应答的“是”按钮。
参考图36,当用户经由弹出窗口64触摸指示用户想通过编辑内容使用选择的内容作为应答的“是”按钮时,电子装置100可向用户提供图像编辑环境65。用户可经由图像编辑环境65编辑图像74_b。
参考图37,当用户完成编辑图像74_b时,电子装置100可根据电子装置100的用户的选择,经由邮件服务或社交网络服务,向电子装置的用户、另一用户的装置的用户、或第三用户提供图像74_b。而且,电子装置100可不管用户的选择,而向电子装置的用户、另一用户的装置的用户、或第三用户提供图像74_b。
[5.场景4]
[5.1.针对内容获得的标识]
图38、42、43A、43B、44、45、46A、46B、47、48、50、51、52、53(a)到53(c)、53(d1)、53(e)、54A到54D、55A到55D、和56是用于描述根据示范实施例的提供内容的方法的图。图38、42、43A、43B、44、45、46A、46B、47、48、50、51、52、53、54A到54D、55A到55D、和56是根据以下场景的操作的用户界面的图,其中电子装置100提供视频呼叫服务,并向用户提供图像、推荐应用、和可能直接回答中的至少一个作为与应答相关的内容。
参考图38,电子装置100的用户Sunny正执行与另一用户的装置的用户John的视频呼叫服务。电子装置100可实时显示电子装置的用户和另一用户的装置的用户的外表。电子装置可实时显示电子装置的用户和另一用户的装置的用户之间的对话的内容。例如,电子装置100可经由STT功能显示电子装置100和另一用户的装置200的用户之间的对话的内容,作为话音泡泡形状。
电子装置从作为John的装置的另一用户的装置200接收消息57“你在哪里?”。电子装置100和另一用户的装置200可经由STT功能显示交换的消息。电子装置100向另一用户的装置连续传送消息,并从另一用户的装置200接收消息。电子装置100可确定连续接收的消息是否是问题。电子装置100的用户从John接收消息57“你在哪里?”。
参考图39,当电子装置100确定消息37是问题时,电子装置100可经由弹出窗口65检查是否需要向用户提供在对消息37应答时可使用的内容。
[5.2.内容的建议]
参考图40到42,电子装置100可对应于用户输入显示在对消息57应答时可使用的内容。
参考图40,当电子装置100接收图38中图示的消息57时,电子装置100可推荐与消息57相关的应用。例如,当消息57的内容与地点相关时,电子装置100可推荐地图应用或导航应用。
参考图41,当电子装置100接收与图39中图示的标记对应的用户输入(例如,触摸是按钮的用户输入)时,电子装置100可推荐与消息57相关的应用。例如,当与问题对应的消息与地点相关时,电子装置100可推荐地图应用或导航应用。
参考图42,当电子装置100接收与图39中图示的标记对应的用户输入(例如,触摸是按钮的用户输入)时,电子装置100可推荐与消息57相关的图像、应用、和直接应答中的至少一个。
[5.3.特定建议状况(1)]
参考图43A,当用户请求在应答时可使用的内容时,电子装置100可向用户提供图像。
参考图43B,当用户想接收在对消息应答时可使用的内容时,电子装置100可向用户提供图像,而无需附加标识是否提供在应答时可使用的内容。
参考图44,用户可从在应答时可使用的内容之中选择图像77_a。电子装置100可接收选择内容的用户输入。例如,用户输入可以是选择图像77_a的触摸输入。
电子装置100可向用户提供应答编辑窗口。用户可经由应答编辑窗口编辑选择的图像77_b。
参考图45,当用户触摸用户已完成编辑的图像77_b时,编辑的选择的图像77_b可被提供到对话伙伴。例如,当用户触摸用户已完成编辑的选择的图像77_b时,电子装置100可向对话伙伴传送编辑的选择的图像77_b。电子装置100可经由显示用户的外表的部分传送编辑的选择的图像77_b。
当用户完成编辑选择的图像时,电子装置可根据用户的选择,经由邮件服务或SNS,向电子装置100的用户、另一用户的装置200的用户、或第三用户提供图像77_b。而且,电子装置100可不管用户的选择,而经由一个或多个服务,向电子装置100的用户、另一用户的装置200的用户、或第三用户提供图像77_b。
[5.4.特定建议状况(2)]
参考图46A,当用户请求在应答时可使用的内容时,电子装置100可提供图像、应用、和直接可能回答。
参考图46B,电子装置可提供图像、应用、和直接可能回答,而无需附加标识是否提供在对消息应答时可使用的内容。
参考图47,用户可从在应答时可使用的内容之中选择地图应用78_a。电子装置100可接收用户输入。例如,用户输入可以是选择应用78_a的触摸输入。
电子装置100可对应于用户输入向用户提供应答编辑窗口。电子装置100可经由应答编辑窗口显示在应用78_a中输入从消息提取的关键字的结果作为输入值。例如,如图47中图示的,电子装置100可经由应答编辑窗口显示图像78_b,其是在地图应用中输入关键字“当前地点”的结果。
电子装置100可经由应答编辑窗口提供编辑环境,经由该环境用户可编辑结果图像78_b。例如,用户可经由应答编辑窗口扩大或缩小结果图像78_b,并且可选择图像78_b的一部分。
参考图48,当用户选择已编辑的结果图像78_b时,可将结果图像78_b提供给对话伙伴。例如,当用户触摸已编辑的结果图像78_b时,电子装置100可向对话伙伴传送编辑的结果图像78_b。电子装置100可经由显示用户的外表的部分来传送编辑的结果图像78_b。
[6.场景5]
图50、51、52和53是用于总体描述根据示范实施例的提供内容的方法的图。图49、50、51、52和53是根据以下场景的操作的用户界面的图,其中电子装置100和另一用户的装置200向用户推荐可能直接回答、餐厅应用、与应答相关的图像、地图应用、和新闻应用,作为与应答相关的内容,同时电子装置100和另一用户的装置200提供文本消息服务。
[6.1.直接应答的建议]
参考图49(a)和49(b),电子装置100的用户John正经由文本消息服务与另一用户的装置200的用户Mike进行对话。John从Mike接收消息111“你今天下午打算去哪里?”。电子装置100和另一用户的装置200可显示交换的消息。电子装置100可确定连续接收的消息是否是问题。
参考图49(a),当电子装置100确定消息111是问题时,电子装置100可向用户提供直接回答候选111_a、111_b和111_c。电子装置100的用户John可点击一个直接回答候选111_b,以向对话伙伴Mike传送直接回答候选111_b。
参考图49(c)和49(d),John和Mike可经由每一装置标识交换的消息111、112、211和212。
[6.2.经由餐厅应用的餐厅的建议]
参考图50(a)和50(b),Mike可向John传送消息213“真的吗?我在那里待过一个月”。电子装置100可显示从另一用户的装置200接收的消息113。John可向Mike传送消息114“你知道Fenway公园附近的好餐厅吗?”。另一用户的装置200可显示从电子装置100接收的消息214。
参考图50(c)和50(d),另一用户的装置200可对应于接收的消息来推荐与各个餐厅相关的应用214_a,并且可推荐菜单内容。Mike可触摸菜单内容,以向John传送包括该菜单内容的消息115。
[6.3.经由图像的应答的建议]
参考图51(a)和51(b),电子装置100的用户John可向另一用户的装置200的用户Mike传送消息116“你有照片吗?”。另一用户的装置200可显示从John接收的消息216。
参考图51(c)和51(d),另一用户的装置200可对应于接收的消息来推荐图像216_b。Mike可触摸推荐食物图像,以向John传送包括该菜单内容的消息118。
[6.4.经由地图应用的其自己地点的传送]
参考图52(a)和52(b),Mike可向John传送消息219“你从哪里出发?”。电子装置100可显示从Mike接收的消息119。
参考图52(c)和52(d),电子装置100可对应于接收的消息119来推荐地图应用119_a。John可经由消息220向Mike传送经由推荐的地图应用的他的地点。
[6.5.经由新闻应用的文章的传送]
参考图53(a)和53(b),John可向Mike传送消息121“波士顿存在热点争端吗?”。
参考图53(c)、53(d1)和53(e),另一用户的装置200可显示从John接收的消息221。另一用户的装置200可对应于接收的消息221推荐新闻应用221_a。当Mike选择推荐的新闻应用221_a时,另一用户的装置200可如图53(e)中图示的那样经由屏幕变换显示新闻文章,并且Mike可选择新文章以向John的电子装置100传送相关文章。电子装置100可显示包括相关文章的链接和文章概要屏幕的消息122。
[7.场景6]
图54A到54D是用于描述根据示范实施例的提供内容的方法的图。图54A到54D是根据以下场景的操作的用户界面的图,其中电子装置100和另一用户的装置200在视频呼叫期间提供文本消息服务,并经由地图应用向用户推荐应答作为与应答相关的内容。
参考图54A,电子装置100可在语音呼叫期间接收语音消息131“哪里是事故点?”。参考图54B,电子装置可经由弹出屏幕132来标识用户是否想要推荐应答。参考图54C,电子装置100的用户可通过触摸输入来选择地图应用。参考图54D,另一用户的装置200可从电子装置100接收指示电子装置100的用户的地点的消息232。
[8.场景7]
图55A到55D是用于描述根据示范实施例的提供内容的方法的图。图55A到55D是根据以下场景的操作的用户界面的图,其中电子装置100和另一用户的装置200向用户推荐不同应答候选作为与应答相关的内容,同时电子装置100和另一用户的装置200提供文本消息服务。
参考图55A,John可从他的老板接收消息141“你今天下午打算去哪里?”。响应于此,电子装置100可提出直接应答,诸如“13:00午餐会议”141_a、“15:00商务旅行”141_b、或“18:00讨论会”141_c、以及相关应用141_d。
参考图55B,John可从朋友接收消息151“你今天下午打算去哪里?”。响应于此,电子装置100可提出直接应答,诸如“13:00午餐会议”151_a、“14:00和Peter的咖啡时间”151_b、或“18:00讨论会”151_c、以及相关应用151_d。
参考图55A和55B,响应于相同问题,电子装置100或另一用户的装置200可根据电子装置100的用户或另一用户的装置200的用户与对话伙伴之间的关系,来推荐不同应答。例如,当电子装置100从老板接收消息141时,可推荐应答“15:00商务旅行”141_b,并且当电子装置从朋友接收消息151时,可推荐应答“14:00和Peter的咖啡时间”151_b而不是应答“15:00商务旅行”141_b。
参考图55C,John可从销售人员接收消息142“买一辆好车怎么样?”。响应于此,电子装置100可推荐直接应答(诸如,“不,我不需要买车”142_a或“别给我来电话”142_b)和相关应用142_c。
参考图55D,John可从朋友接收消息152“买一辆好车怎么样?”。响应于此,电子装置100可建议直接应答(诸如,“如果你送我一辆,我会很开心”151_a或“我每天都会梦到它”152_b)和相关应用151_c。
参考图55C和55D,响应于相同问题,电子装置100或另一用户的装置200可根据电子装置100的用户或另一用户的装置200的用户与对话伙伴之间的关系,来推荐不同应答。例如,当电子装置100从销售人员接收消息142时,电子装置100可推荐直接应答“别给我来电话”142_b,并且当电子装置100从朋友接收消息152时,电子装置100可推荐直接应答“我每天都会梦到它”152_b。
[9.电子装置的组件]
图56是图示了根据示范实施例的用户终端装置1000的结构的框图。图56中图示的用户终端装置1000可以是图1的电子装置100。
参考图56,用户终端装置1000可包括从显示单元1100、控制单元(例如,控制器)1700、存储器1200、全球定位系统(GPS)芯片1250、通信单元1300、视频处理器1350、音频处理器1400、用户输入单元1450、麦克风单元1500、拍摄单元(例如,相机)1550、扬声器单元1600和运动检测单元(例如,运动检测器)1650中选择的至少一个。
显示单元1100可包括显示板1110和用于控制显示板1110的控制器。显示板1110可被实现为各类显示器,诸如液晶显示器(LCD)、有机发光二极管(OLED)、有源矩阵有机发光二极管(AM-OLED)、和等离子显示板(PDP)。显示板1110可被实现为挠性、透明和可穿戴的。显示单元1100可与用户输入单元1450的触摸板1470组合以便提供为触摸屏。例如,触摸屏可包括其中显示板1110和触摸板1470堆叠的集成模块。存储器1200可包括内部存储器和外部存储器的至少一个。
内部存储器可包括从例如易失性存储器(例如,动态RAM(DRAM)、静态RAM(SRAM)、和同步动态RAM(SDRAM))、非易失性存储器(例如,一次可编程ROM(OTPROM))、可编程ROM(PROM)、可擦除和可编程ROM(EPROM)、电可擦除和可编程ROM(EEPROM)、掩模ROM、和闪速ROM)、硬盘驱动器(HDD)、和固态驱动器(SSD)中选择的至少一个。根据示范实施例,控制单元1700可通过在易失性存储器中装载命令或数据,来处理从非易失性存储器或从其它组件的至少一个中接收的命令或数据。而且,控制单元1700可恢复非易失性存储器中从其它组件接收或生成的数据。
外部存储器可包括从例如紧凑型闪存(CF)、安全数字卡(SD)、微型安全数字卡(Micro-SD)、迷你安全数字卡(Mini-SD)、超级数字卡(xD)、和记忆棒中选择的至少一个。
存储器1200可存储用于用户终端装置1000的操作所使用的各种程序和数据。例如,存储器1200可暂时或半永久地存储要在锁定屏幕上显示的内容的至少一部分。
控制单元1700可控制显示单元1100,使得存储器1200中存储的内容的一部分显示在显示单元1100中。换言之,控制单元1700可在显示单元1100中显示存储器1200中存储的内容的一部分。作为选择,当在显示单元1100的一部分中生成用户的手势时,控制单元1700可执行与用户的手势对应的控制操作。
控制单元1700可包括图9A中图示的知识框架120的自然语言处理单元(NLU)121、会话管理器122、剖析器123、上下文分析器124、应答生成器125、内容元数据储存器126、和App注册器127的至少一个。例如,用户终端装置1000的控制单元170可包括自然语言处理单元(NLU)121、会话管理器122、剖析器123、上下文分析器124和应答生成器125,并且服务器300可包括图12B中示出的App注册器127和内容元数据储存器126。根据另一示范实施例,控制单元1700可包括剖析器123和上下文分析器124,并且服务器300可包括图13B中示出的自然语言处理单元(NLU)321、会话管理器322、应答生成器325、内容元数据储存器326和App注册器327。作为选择,用户终端装置1000的控制单元1700可包括剖析器123、App注册器127和内容元数据储存器126,并且服务器300可包括图14B中示出的自然语言处理单元(NLU)321、会话管理器322、应答生成器325、上下文分析器324和剖析器323。
控制单元1700可包括从随机存取存储器(RAM)1710、只读存储器(ROM)1720、中央处理单元(CPU)1730、图形处理单元(GPU)1740和总线1750中核选择的至少一个。RAM1710、ROM1720、CPU1730、和GPU1740可经由总线1750彼此连接。
CPU1730存取存储器1200,并通过使用存储器1200中存储的O/S来执行引导操作。而且,CPU1730通过使用存储器1200中存储的各个程序、内容和数据,来执行各种操作。
用于系统引导操作的命令语言的集合被存储在ROM1720中。例如,当在便携式终端1000中输入接通命令并供应电力时,CPU1730可根据ROM1720中存储的命令语言在RAM1710中拷贝存储器1200中存储的O/S,并且可运行O/S来引导系统。当完成引导时,CPU1730可在RAM1710中拷贝存储器1200中存储的各种程序,并运行RAM1710中拷贝的程序以执行各种操作。当完成用户终端装置1000的引导操作时,GPU1740在显示单元1100的一部分上显示UI屏幕。详细地,GPU1740可生成屏幕,其中显示包括各个对象(诸如内容、图标、和菜单)的电子文件。GPU1740可计算与屏幕的布局对应的显示对象的特征值(例如,坐标值、形状、尺寸和颜色)。而且,GPU1740可基于计算的特征值来生成包括对象的各种布局的屏幕。GPU1740生成的屏幕可被提供给显示单元1100,并且其每一个可在显示单元1100的每一部分中显示。
GPS芯片1250可从GPS卫星接收全球定位系统(GPS)信号,以计算用户终端装置1000的当前地点。当使用导航程序时,或者当需要当前用户地点时在其它场合,控制单元1700可通过使用GPS芯片1250来计算用户地点。
通信单元1300可根据各类通信方法执行与各类另一用户的装置的通信。通信单元1300可包括从WiFi芯片1310、蓝牙芯片1320、无线通信芯片1330、和NFC芯片1340中选择的至少一个。控制单元1700可控制通过使用通信单元1300与各类另一用户的装置的通信。
WiFi芯片1310和蓝牙芯片1320可通过分别使用WiFi方法和蓝牙方法来执行通信。当使用WiFi芯片1310或蓝牙芯片1320时,可首先传送和接收诸如SSID和会话密钥的各种连接内容,并然后通过使用各种连接内容来连接通信,以传送和接收各种信息。无线通信芯片1330指代根据各种通信标准执行通信的芯片,诸如IEEE、Zigbee、第3代(3G)、第3代伙伴项目(3GPP)、和长期演进(LTE)。NFC芯片1340指代使用来自各种RF-ID频率区域(135kHz、13.56MHz、433MHz、860-960MHz和2.45GHz)的13.56MHz区域、按照近场通信(NFC)方法操作的芯片。
视频处理器1350可处理经由通信单元1300接收的内容或在存储器1200中存储的内容中包括的视频数据。视频处理器1350可针对视频数据执行各种图像处理,诸如解码、缩放、噪声过滤、帧频变换、和分辨率变换。
音频处理器1400可处理经由通信单元1300接收的内容或在存储器1200中存储的内容中包括的音频数据。音频处理器1400可针对音频数据执行各种处理,诸如解码、放大和噪声过滤。
当运行针对多媒体内容的再现程序时,控制单元1700可驱动视频处理器1350和音频处理器1400,以再现对应内容。扬声器单元1600可输出音频处理器1400所生成的音频数据。
用户输入单元1450可从用户接收各种命令语言的输入。用户输入单元1450可包括从按键1460、触摸板1470和笔识别板1480中选择的至少一个。
按键1460可包括在用户终端装置1000的外部主体的各个部分(诸如,前部、侧部和后部)中形成的各类按键(诸如机械按钮和滚轮)。
触摸板1470可感测用户的触摸输入,并且可输出与感测的触摸信号对应的触摸事件值。当触摸板1470通过与显示板1110组合而形成为触摸屏时,触摸屏可被实现为各类触摸传感器,诸如电容类型、减压类型、和压电类型。电容类型使用以下方法,其通过使用触摸屏表面覆盖的电介质、感测当用户的人体的一部分触摸该触摸屏的表面时、由用户的人体导致的精电(fineelectricity),来计算触摸坐标。减压类型使用以下方法,其包括在触摸屏中装备的两个电极板,并通过感测当用户触摸屏幕时、由于在触摸点彼此接触的上板和下板导致的电流,来计算触摸坐标。在触摸屏中发生的触摸事件可主要由人的手指生成,但是也可以由可引起电容改变的导电材料的对象生成。
笔识别板1480可根据用户的触摸笔(例如,铁笔)或数字化装置笔的操作,感测笔的接近输入或笔的触摸输入,并且可输出感测的笔接近事件或笔触摸事件。笔识别板1480可被实现为例如EMR方法,并且可根据由于笔的接近或触摸导致的电磁场的强度的改变,来感测触摸或接近输入。详细地,笔识别板1480可通过包括具有网格结构的电子感应线圈传感器、和电子感应线圈传感器的每一环形线圈中顺序提供具有预定频率的间接信号的电子信号处理单元来形成。如果存在其中装备谐振器电路的笔,则在笔识别板1480的环形线圈周围,从对应环形线圈传送的磁场可在笔的谐振器电路中生成基于相互电磁感应的电流。基于该电流,从形成笔中的谐振器电路的线圈生成感应磁场,并且笔识别板1480可在信号接收状态之下检测环形线圈中的感应磁场,使得可感测笔的接近或触摸地点。笔识别板1480可通过具有预定面积(例如,可覆盖显示板1110的显示部分的面积)被提供在显示板1110之下。
麦克风单元1500可接收用户语音或其它噪声的输入,并将该输入变换为音频数据。控制单元1700可使用在呼叫操作中通过麦克风单元1500输入的用户的语音,或者可将用户的语音变换为音频数据以将音频数据存储在存储器1200中。
拍摄单元1550可根据用户的控制拍摄静止图像或视频。拍摄单元1550可被实现为多个,例如包括前相机和后相机。
当提供拍摄单元1550和麦克风单元1500时,控制单元1700可根据通过麦克风单元1500输入的用户语音或拍摄单元1550识别的用户的运动,来执行控制操作。例如,用户终端装置1000可按照运动控制模式或声音控制模式来操作。当用户终端装置1000按照运动控制模式操作时,控制单元1700可激活拍摄单元1550以拍摄用户,并且可跟踪用户的运动改变以执行与用户的运动改变对应的控制操作。当用户终端装置1000按照声音控制模式操作时,控制单元1700可分析通过麦克风单元1500输入的用户语音,并且可按照根据分析的用户的语音执行控制操作的声音识别模式来操作。
运动检测单元1650可感测用户终端装置1000的主体的运动。用户终端装置1000可按照各种方式旋转或可倾斜。这里,运动检测单元1650可通过使用各个传感器(例如,地球磁场传感器、陀螺仪传感器、和加速度传感器)的至少一个来检测运动的特性(诸如旋转的方向和角度、以及倾斜程度)。
另外,用户终端装置1000可进一步包括USB连接器可连接到的USB端口,用于与各种外部终端(例如,头戴式耳机、鼠标和LAN)连接的各种外部输入端口、接收和处理数字多媒体广播(DMB)信号的DMB芯片、和各种传感器。
用户终端装置1000的上述组件的名称可变化。而且,用户终端装置1000可通过包括上述组件之一、省略上述组件中的一些、或进一步包括附加组件来形成。
图57是用户终端装置1000的软件结构的框图。
参考图57,存储器1200可存储用于控制用户终端装置1000的资源的操作系统、以及用于操作应用的应用程序。操作系统可包括内核1210、中间件、应用程序接口(API)等。操作系统可包括例如安卓、iOS、Windows、塞班、Tizen、Bada等。
内核1210可包括用于管理资源的装置驱动器1210-1和系统资源管理器1210-2的至少一个。装置驱动器1210-1可如同软件一样存取并控制用户终端装置1000的硬件。为此,装置驱动器1210-1可划分为每一硬件公司提供的接口和单独驱动器模块。装置驱动器1210-1可包括例如从显示器驱动器、相机驱动器、蓝牙驱动器、共享存储器驱动器、USB驱动器、键盘驱动器、Wi-Fi驱动器、音频驱动器、和进程间通信(IPC)驱动器中选择的至少一个。系统资源管理器1210-2可包括进程管理单元、存储器管理单元、和文件系统管理单元中的至少一个。系统资源管理器1210-2可控制、分配和恢复系统资源。
中间件1220可包括预先实现的多个模块以提供各种应用的公共特征。中间件1220可经由API1230提供功能,使得应用1240可有效使用用户终端装置1000中的资源。中间件1220可包括从多个模块(包括例如,应用管理器1220-1、窗口管理器1220-2、多媒体管理器1220-3、资源管理器1220-4、电力管理器1220-5、数据库管理器1220-6、封装管理器1220-7、连接管理器1220-8、通知管理器1220-9、地点管理器1220-10、图形管理器1220-11、和安全性管理器1220-12)中选择的至少一个。
应用管理器1220-1可管理应用1240的至少一个应用的生命周期。窗口管理器1220-2可管理屏幕中使用的图形用户界面(GUI)资源。多媒体管理器1220-3可检查用于再现各个媒体文件的格式,并且可通过使用与对应格式对应的编解码器来编码或解码媒体文件。资源管理器1220-4可管理应用1240的至少一个应用的资源,诸如源代码、存储器和储存空间。电力管理器1220-5可通过与BIOS一起操作来管理电池或电力,并提供电力信息用于操作。数据库管理器1220-6可生成、搜索和改变要在应用1240的至少一个应用中使用的数据库。封装管理器1220-7可安装或更新按照封装文件格式分发的应用。连接管理器1220-8可管理无线连接,诸如Wifi或蓝牙。通知管理器1220-9可通过不干扰用户的方法向用户显示或向用户通知事件(诸如消息到达、约会、和接近通知)。地点管理器1220-10可管理用户终端装置1000的地点信息。图形管理器1220-11可管理向用户提供的图形效果和与其相关的用户界面。安全性管理器1220-12可提供系统安全性或用户验证所需的各种安全性功能。当用户终端装置1000包括呼叫功能时,中间件1220可进一步包括呼叫管理器,用于管理用户的语音或视频呼叫功能。
中间件1220可进一步包括运行时间库1220-13或其它库模块。运行时间库1220-13是编译者使用的当运行应用时用于经由编程语言添加新功能的库模块。例如,运行时间库1220-13可执行与输入和输出、存储器管理、或数学函数相关的功能。中间件1220可通过组合上述内部模块的各个功能来生成新的中间件模块。中间件1220可根据操作系统的类型提供专门模块,以提供区别的功能。中间件1220可动态地部分省略先前组件或添加新组件。中间件1220可通过部分省略当前示范实施例中的组件、通过进一步添加其它组件、或通过用基本执行具有不同名称的相同功能的其它组件来替换组件而形成。
API1230是API编程函数的集合,并且可根据操作系统由不同组件形成。在安卓或iOS的情况下,例如,可针对每一平台提供一个API集合,并且在Tizen的情况下,例如,可提供两个或多个API集合。
应用1240可包括缺省安装的预加载应用或用户在使用处理期间可安装和使用的第三方应用。应用1240可包括例如从以下应用中选择的至少一个,返回到主页屏幕的主页应用1240-1、用于与伙伴进行呼叫的拨号盘应用1240-2、用于从电话号码所标识的伙伴接收消息的文本消息应用1240-3、即时消息(IM)应用1240-4、浏览器应用1240-5、相机应用1240-6、警报应用1240-7、用于管理伙伴的电话号码或地址的电话簿应用1240-8、用于管理用户的呼叫日志、接收或发送日志的文本消息、或无呼叫日志的呼叫日志应用1240-9、用于从电子邮件所标识的伙伴接收消息的电子邮件应用1240-10、日历应用1240-11、医疗播放器应用1240-12、相册应用1240-13、和手表应用1240-14。当前示范实施例中所描述的软件的组件的名称可根据操作系统的类型而变化。而且,根据当前示范实施例的软件可包括上述组件中的至少一个,省略上述组件中的一些,或者可进一步包括其它附加组件。
图58是根据示范实施例的电子装置2000的用户界面(UI)的图。电子装置2000可以是图1的电子装置100。
电子装置2000可包括处理器2700、输入接口2400、和输出接口2100。
处理器2700可包括移动应用处理器或中央处理单元。处理器2700可被称为控制器和控制单元。可使用术语“处理器”来表示核心、显示控制器、和图像信号处理器(ISP)。处理器2700可包括参考图56的控制单元1700的组件121-126、1710、1720、1730和1740中的至少一个。
根据示范实施例的处理器2700可从经由消息服务在屏幕上显示的消息中提取至少一个关键字。而且,根据示范实施例的处理器2700可重新生成与该关键字相关的关键字。而且,根据示范实施例的处理器2700可基于重新生成的关键字和电子装置2000的地点信息来获得内容。
输入接口2400可表示用户输入数据以控制电子装置1000的装置。例如,输入接口2400可以是键盘、圆顶开关、触摸垫(使用触摸类型电容方法、压力类型电阻方法、红外感测方法、表面超声传导方法、整体张力测量方法、压电效应方法等)、微动轮、或微动开关。而且,输入接口2400可包括触摸屏、触摸板、麦克风、和键盘。
而且,输入接口2400可包括用于从用户接收数据的至少一个模块。例如,输入接口2400可包括运动识别模块、触摸识别模块、语音识别模块等。
触摸识别模块感测触摸屏上的用户的触摸手势,并将与触摸手势相关的内容传送给处理器。声音识别模块可通过使用语音识别引擎来识别用户的语音,并将识别的语音传送到处理器。运动识别模块可识别对象的运动,并将与对象的运动相关的内容传送到处理器。
贯穿该说明书,用户经由电子装置2000的输入接口2400作出的“输入”可包括从触摸输入、弯曲输入、语音输入、按键输入、和多模输入中选择的至少一个。然而,这不限于此。
“触摸输入”可表征用户控制电子装置100而在触摸屏上执行的手势。本说明书中阐述的触摸手势可包括点击、触摸并保持、双击、拖拽、平移、轻拂、拖放等。
“点击”是通过使用手指或诸如电子笔(例如,铁笔)的触摸工具触摸屏幕、并然后没有移动地立即从屏幕抬起手指或触摸工具的用户的运动。
“触摸并保持”是通过使用手指或诸如电子笔的触摸工具触摸屏幕、并然后在触摸屏幕之后的临界时间(例如,2秒)期间维持以上触摸动作的用户的运动。换言之,触入时间和触出时间之间的时间差大于或等于临界时间(例如,2秒)。当触摸输入在该临界时间上持续时,为了提醒用户触摸输入是点击还是触摸并保持,可按照可视、可听或可触摸方式来提供反馈信号。该临界时间可根据示范实施例改变。
“双击”是通过使用手指或触摸工具触摸屏幕两次的用户的运动。
“拖拽”是通过使用手指或触摸工具触摸屏幕并在保持触摸运动的同时将手指或触摸工具移动到屏幕上的另一位置的用户的运动。
“平移”是在没有选择对象的情况下执行拖拽运动的用户的运动。因为在平移运动中没有选择对象,所以没有对象在页面中移动,但是页面自己在屏幕上移动或者一组对象可在页面中移动。
“轻拂”是通过使用手指或触摸工具在临界速度(例如,100像素/秒)上执行拖拽运动的用户的运动。拖拽(平移)运动或轻拂运动可基于手指或触摸工具的临界速度是否在临界速度(例如,100像素/秒)上来区分。
“拖放”是通过使用手指或触摸工具将对象拖拽到预定位置并然后在那个位置放开对象的用户的运动。
“捏合”是沿着相反方向移动在屏幕上接触的两个手指的用户的运动。捏合运动是放大(撑开)或缩小(捏紧)对象或页面的手势。放大值或缩小值根据两个手指之间的距离来确定。
“滑动”是通过使用手指或触摸工具触摸屏幕上的对象并同时将对象水平或垂直移动预定距离的用户的操作。对角线方向上的滑动运动可以不被识别为滑动事件。
“运动输入”表示用户向电子装置100施加以控制电子装置100的运动。例如,运动输入可包括用户旋转电子装置100、用户倾斜电子装置100、以及用户沿着上、下、左、和右方向移动电子装置2000。电子装置2000可通过使用加速度传感器、倾斜传感器、陀螺仪传感器、和3轴磁传感器,来检测用户预定的运动。
贯穿该说明书,当电子装置100是挠性显示装置时,“弯曲输入”表示弯曲整个电子装置2000或电子装置2000的一部分以控制电子装置2000的用户输入。根据示范实施例,电子装置2000可通过使用弯曲传感器来感测弯曲地点(坐标值)、弯曲方向、弯曲角、弯曲速度、弯曲次数、弯曲操作的发生时间点、弯曲操作保持的时间段等。
贯穿该说明书,术语“按键输入”表示通过使用附加到电子装置2000的物理按键或由电子装置2000提供的虚拟按键、来控制电子装置2000的用户输入。
输出接口被配置为输出音频信号、视频信号或警报信号,并且可包括显示模块、声音输入信号等。而且,输出接口可包括可显示二维图像的平板显示装置、以及可显示三维图像的平板显示装置。输出接口可包括可输出三维全息图的装置。
电子装置2000可经由通信与搜索服务器交换信息。例如,电子装置2000可经由至少一个协议与搜索服务器通信。例如,电子装置2000可经由从简单文件传输协议(TFTP)、简单文件管理协议(SNMP)、简单邮件传输协议(SMTP)、邮局协议(POP)、因特网控制消息协议(ICMP)、串行线路接口协议(SLIP)、点对点协议(PPP)、动态主机控制协议(DHCP)、网络基本输入输出系统(NETBIOS)、网络间分组交换(IPX/SPX)、因特网控制管理协议(ICMP)、因特网协议(IP)、地址解析协议(ARP)、传输控制协议(TCP)、用户数据包协议(UDP)、winsock、动态主机配置协议(DHCP)、和路由信息协议(RIP)中选择的至少一个协议,与搜索服务器通信。然而,这不限于此。
电子装置2000可经由近场通信模块执行近场通信。近场通信技术可包括无线LAN(WiFi)、蓝牙、Zigbee、WiFi直接(WFD)、超宽带(UWB)、红外数据协会(IrDA)等。然而,这不限于此。
尽管不限于此,但是示范实施例能被实施为计算机可读记录介质上的计算机可读代码。计算机可读记录介质是能存储能由计算机系统其后读取的数据的任何数据储存装置。计算机可读记录介质的示例包括只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘、和光学数据储存装置。计算机可读记录介质也能在与网络耦接的计算机系统上分布,使得计算机可读代码按照分布方式存储和运行。而且,示范实施例可被写作通过计算机可读传输介质(诸如,载波)传送、并在运行程序的一般用途或特定目的数字计算机中接收和实现的计算机程序。此外,理解的是,在示范实施例中,上述设备和装置的一个或多个单元能包括电路、处理器、微处理器等,并且可运行计算机可读介质中存储的计算机程序。
前述示范实施例仅是示范性的,并不应被解释为限制性的。当前教义能容易地应用到其它类型设备。而且,示范实施例的描述意欲是解释性的,而不是限制本发明的范围,并且许多替换、修改、和变型对于本领域技术人员将是清楚的。

Claims (15)

1.一种用于提供消息服务的电子装置,该电子装置包括:
通信单元,被配置为与另一装置交换消息;
显示器,被配置为在该显示器的消息服务屏幕上一起显示从所述另一装置接收的消息、该电子装置输入的消息、以及该电子装置生成的至少一个应答消息;和
处理器,被配置为确定接收的消息是否包括询问,并响应于接收的消息被确定为包括询问、基于该询问而提供至少一条推荐内容,并向所述另一装置传送包括所述至少一条推荐内容的所述至少一个应答消息。
2.根据权利要求1的电子装置,其中该处理器被进一步配置为确定该电子装置是否存储为了生成所述至少一条推荐内容而要使用的数据,并基于确定结果获得该数据。
3.根据权利要求1的电子装置,其中该处理器被进一步配置为确定与所述至少一条推荐内容关联的关键字,并获得与该关键字对应的内容。
4.根据权利要求1的电子装置,其中该处理器被进一步配置为基于所述另一装置的用户与该电子装置的用户之间的关系数据,来获得所述至少一条推荐内容。
5.根据权利要求4的电子装置,其中该关系数据包括该电子装置中存储的数据、与该电子装置通信的服务器中存储的数据、以及所述另一装置中存储的数据中的至少一个。
6.根据权利要求1的电子装置,其中该显示器被进一步配置为,响应于被设置为手动推荐所述至少一条推荐内容的设置菜单、基于请求所述至少一条推荐内容的用户输入、来显示所述至少一条推荐内容,响应于被设置为半自动推荐所述至少一条推荐内容的设置菜单、基于在接收的消息中指示的用户输入、来显示所述至少一条推荐内容,以及当电子装置响应于被设置为自动推荐所述至少一条推荐内容的设置菜单、通过识别接收的消息来获得所述至少一条内容时、无需用户输入来显示所述至少一条推荐内容。
7.根据权利要求1的电子装置,其中该处理器被进一步配置为基于该消息中包括的单词的类型、单词之间的关系、以及单词的含义,来获得所述至少一条推荐内容。
8.根据权利要求1的电子装置,其中该处理器被进一步配置为基于该电子装置的用户和所述另一装置的用户之间的关系,来获得所述至少一条推荐内容,该关系是基于用户输入设置的。
9.一种经由提供消息服务的电子装置向另一装置提供内容的方法,该方法包括:
从所述另一装置接收消息;
在消息服务屏幕上显示接收的消息;
确定接收的消息是否包括询问;
基于接收的消息提供至少一条推荐内容;和
向所述另一装置传送包括所述至少一条推荐内容的应答消息。
10.根据权利要求9的方法,其中所述提供至少一条推荐内容的步骤包括:确定该电子装置是否存储为了生成所述至少一条推荐内容而要使用的数据,并基于确定结果获得该数据。
11.根据权利要求9的方法,其中所述提供至少一条推荐内容的步骤包括:确定与所述至少一条推荐内容关联的关键字,并获得与该关键字对应的内容。
12.根据权利要求9的方法,其中所述提供至少一条推荐内容的步骤包括:基于该电子装置的用户与所述另一装置的用户之间的关系数据,来获得所述至少一条推荐内容。
13.根据权利要求12的方法,其中该关系数据包括该电子装置中存储的数据、与该电子装置通信的服务器中存储的数据、以及所述另一装置中存储的数据中的至少一个。
14.根据权利要求9的方法,其中所述提供至少一条推荐内容的步骤包括:
响应于被设置为手动推荐所述至少一条推荐内容的设置菜单,基于请求所述至少一条内容的用户输入,来显示所述至少一条推荐内容;
响应于被设置为半自动推荐所述至少一条推荐内容的设置菜单,基于在接收的消息中指示的用户输入,来显示所述至少一条推荐内容;和
当电子装置响应于被设置为自动推荐所述至少一条推荐内容的设置菜单,通过识别接收的消息来获得所述至少一条推荐内容时,无需用户输入而显示所述至少一条推荐内容。
15.根据权利要求9的方法,其中所述提供至少一条推荐内容的步骤包括:基于该消息中包括的单词的类型、单词之间的关系、以及单词的含义,来获得所述至少一条推荐内容。
CN201580000958.3A 2014-07-31 2015-07-30 消息服务提供装置以及经由其提供内容的方法 Active CN105453612B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911163405.6A CN110996271A (zh) 2014-07-31 2015-07-30 消息服务提供装置以及服务器

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
KR10-2014-0098634 2014-07-31
KR20140098634 2014-07-31
KR1020150026750A KR102232929B1 (ko) 2014-07-31 2015-02-25 메시지 서비스를 제공하는 전자기기 및 그 전자기기가 컨텐트 제공하는 방법
KR10-2015-0026750 2015-02-25
PCT/KR2015/008015 WO2016018111A1 (en) 2014-07-31 2015-07-30 Message service providing device and method of providing content via the same

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201911163405.6A Division CN110996271A (zh) 2014-07-31 2015-07-30 消息服务提供装置以及服务器

Publications (2)

Publication Number Publication Date
CN105453612A true CN105453612A (zh) 2016-03-30
CN105453612B CN105453612B (zh) 2021-06-04

Family

ID=55357231

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201580000958.3A Active CN105453612B (zh) 2014-07-31 2015-07-30 消息服务提供装置以及经由其提供内容的方法
CN201911163405.6A Pending CN110996271A (zh) 2014-07-31 2015-07-30 消息服务提供装置以及服务器

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201911163405.6A Pending CN110996271A (zh) 2014-07-31 2015-07-30 消息服务提供装置以及服务器

Country Status (3)

Country Link
KR (2) KR102232929B1 (zh)
CN (2) CN105453612B (zh)
TW (1) TWI689201B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107193395A (zh) * 2017-05-31 2017-09-22 珠海市魅族科技有限公司 一种信息输入方法、终端以及计算设备
CN107222386A (zh) * 2017-05-02 2017-09-29 珠海市魅族科技有限公司 一种消息回复方法及终端
CN110199503A (zh) * 2017-01-17 2019-09-03 三星电子株式会社 消息生成方法及用于支持该方法的可穿戴的电子设备
CN111309875A (zh) * 2018-12-10 2020-06-19 百度在线网络技术(北京)有限公司 问题应答的方法、装置、设备和存储介质
CN111565143A (zh) * 2019-06-28 2020-08-21 上海掌门科技有限公司 即时通信方法、设备及计算机可读存储介质
CN112269509A (zh) * 2020-10-29 2021-01-26 维沃移动通信(杭州)有限公司 信息处理方法、装置及电子设备
WO2022253132A1 (zh) * 2021-06-02 2022-12-08 维沃移动通信(杭州)有限公司 信息显示方法、装置和电子设备

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10155168B2 (en) 2012-05-08 2018-12-18 Snap Inc. System and method for adaptable avatars
US10339365B2 (en) 2016-03-31 2019-07-02 Snap Inc. Automated avatar generation
KR101787248B1 (ko) 2016-04-14 2017-10-18 라인 가부시키가이샤 메신저 서비스를 이용한 키워드 검색 방법 및 시스템
US10432559B2 (en) 2016-10-24 2019-10-01 Snap Inc. Generating and displaying customized avatars in electronic messages
TWI617823B (zh) * 2016-12-23 2018-03-11 旺玖科技股份有限公司 非接觸式智慧電池感測系統及方法
US11030515B2 (en) 2016-12-30 2021-06-08 Google Llc Determining semantically diverse responses for providing as suggestions for inclusion in electronic communications
US10951562B2 (en) 2017-01-18 2021-03-16 Snap. Inc. Customized contextual media content item generation
KR102144978B1 (ko) * 2018-10-19 2020-08-14 인하대학교 산학협력단 영상의 쇼트 분류를 이용한 사용자 맞춤형 영상 추천 시스템

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100332218A1 (en) * 2009-06-29 2010-12-30 Nokia Corporation Keyword based message handling
CN103079008A (zh) * 2013-01-07 2013-05-01 北京播思软件技术有限公司 根据短信内容自动生成回复建议的方法和系统
CN103546362A (zh) * 2012-07-11 2014-01-29 腾讯科技(深圳)有限公司 进行信息推送的方法、系统及服务器
US20140074879A1 (en) * 2012-09-11 2014-03-13 Yong-Moo Kwon Method, apparatus, and system to recommend multimedia contents using metadata
US20140207806A1 (en) * 2013-01-21 2014-07-24 Samsung Electronics Co., Ltd. Method and apparatus for processing information of a terminal

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9419819B2 (en) * 2007-12-20 2016-08-16 At&T Intellectual Property I, L.P., Via Transfer From At&T Delaware Intellectual Property, Inc. Methods and computer program products for creating preset instant message responses for instant messages received at an IPTV
US20120095862A1 (en) * 2010-10-15 2012-04-19 Ness Computing, Inc. (a Delaware Corportaion) Computer system and method for analyzing data sets and generating personalized recommendations
US8549433B2 (en) * 2011-04-08 2013-10-01 Nokia Corporation Method and apparatus for providing a user interface in association with a recommender service
KR101801188B1 (ko) * 2011-07-05 2017-11-24 엘지전자 주식회사 휴대 전자기기 및 이의 제어방법
KR101290977B1 (ko) * 2012-01-26 2013-07-30 한국외국어대학교 연구산학협력단 푸쉬 서버를 이용한 메시지 전송 방법 및 그 시스템

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100332218A1 (en) * 2009-06-29 2010-12-30 Nokia Corporation Keyword based message handling
CN103546362A (zh) * 2012-07-11 2014-01-29 腾讯科技(深圳)有限公司 进行信息推送的方法、系统及服务器
US20140074879A1 (en) * 2012-09-11 2014-03-13 Yong-Moo Kwon Method, apparatus, and system to recommend multimedia contents using metadata
CN103079008A (zh) * 2013-01-07 2013-05-01 北京播思软件技术有限公司 根据短信内容自动生成回复建议的方法和系统
US20140207806A1 (en) * 2013-01-21 2014-07-24 Samsung Electronics Co., Ltd. Method and apparatus for processing information of a terminal

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110199503A (zh) * 2017-01-17 2019-09-03 三星电子株式会社 消息生成方法及用于支持该方法的可穿戴的电子设备
CN107222386A (zh) * 2017-05-02 2017-09-29 珠海市魅族科技有限公司 一种消息回复方法及终端
CN107193395A (zh) * 2017-05-31 2017-09-22 珠海市魅族科技有限公司 一种信息输入方法、终端以及计算设备
CN111309875A (zh) * 2018-12-10 2020-06-19 百度在线网络技术(北京)有限公司 问题应答的方法、装置、设备和存储介质
CN111309875B (zh) * 2018-12-10 2023-08-04 百度在线网络技术(北京)有限公司 问题应答的方法、装置、设备和存储介质
CN111565143A (zh) * 2019-06-28 2020-08-21 上海掌门科技有限公司 即时通信方法、设备及计算机可读存储介质
CN112269509A (zh) * 2020-10-29 2021-01-26 维沃移动通信(杭州)有限公司 信息处理方法、装置及电子设备
WO2022089481A1 (zh) * 2020-10-29 2022-05-05 维沃移动通信(杭州)有限公司 信息处理方法、装置及电子设备
CN112269509B (zh) * 2020-10-29 2022-11-25 维沃移动通信(杭州)有限公司 信息处理方法、装置及电子设备
WO2022253132A1 (zh) * 2021-06-02 2022-12-08 维沃移动通信(杭州)有限公司 信息显示方法、装置和电子设备

Also Published As

Publication number Publication date
KR20160016532A (ko) 2016-02-15
KR102232929B1 (ko) 2021-03-29
TWI689201B (zh) 2020-03-21
KR20220038639A (ko) 2022-03-29
TW201607303A (zh) 2016-02-16
CN110996271A (zh) 2020-04-10
CN105453612B (zh) 2021-06-04
KR102447503B1 (ko) 2022-09-27

Similar Documents

Publication Publication Date Title
KR102378513B1 (ko) 메시지 서비스를 제공하는 전자기기 및 그 전자기기가 컨텐트 제공하는 방법
KR102447503B1 (ko) 메시지 서비스를 제공하는 전자기기 및 그 전자기기가 컨텐트 제공하는 방법
US10841265B2 (en) Apparatus and method for providing information
US11829720B2 (en) Analysis and validation of language models
York et al. Human–computer interaction issues for mobile computing in a variable work context
CN104583927B (zh) 用户终端中的用户接口装置以及用于支持该用户接口装置的方法
CN105283839A (zh) 用以将命令显现在生产力应用用户界面内的个性化社区模型
CN109388383B (zh) 用于智能生成包容性系统设计的系统和方法
US9588635B2 (en) Multi-modal content consumption model
TWI554900B (zh) 提供資訊的裝置與方法
US20220357895A1 (en) Systems and methods for contextual memory capture and recall
EP3610376B1 (en) Automatic context passing between applications
KR102370373B1 (ko) 정보 제공하는 방법 및 이를 위한 전자기기
US9182954B2 (en) Web browser having user-configurable address bar button
CN108027825A (zh) 在企业中暴露外部内容
US20150160830A1 (en) Interactive content consumption through text and image selection
Wang Perceptual and context aware interfaces on mobile devices

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant