CN108351890B - 电子装置及其操作方法 - Google Patents

电子装置及其操作方法 Download PDF

Info

Publication number
CN108351890B
CN108351890B CN201680064363.9A CN201680064363A CN108351890B CN 108351890 B CN108351890 B CN 108351890B CN 201680064363 A CN201680064363 A CN 201680064363A CN 108351890 B CN108351890 B CN 108351890B
Authority
CN
China
Prior art keywords
electronic device
keyword
text messages
text
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680064363.9A
Other languages
English (en)
Other versions
CN108351890A (zh
Inventor
李海俊
卢智炫
金德镐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020160107179A external-priority patent/KR20170060567A/ko
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN108351890A publication Critical patent/CN108351890A/zh
Application granted granted Critical
Publication of CN108351890B publication Critical patent/CN108351890B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/004Artificial life, i.e. computing arrangements simulating life
    • G06N3/006Artificial life, i.e. computing arrangements simulating life based on simulated virtual individual or collective life forms, e.g. social simulations or particle swarm optimisation [PSO]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33Querying
    • G06F16/3331Query processing
    • G06F16/3332Query translation
    • G06F16/3334Selection or weighting of terms from queries, including natural language queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33Querying
    • G06F16/332Query formulation
    • G06F16/3329Natural language query formulation or dialogue systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33Querying
    • G06F16/3331Query processing
    • G06F16/334Query execution
    • G06F16/3344Query execution using natural language analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying
    • G06F16/9032Query formulation
    • G06F16/90332Natural language query formulation or dialogue systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/30Semantic analysis

Abstract

一种根据本公开的各种示例实施例的操作电子装置的方法可以包括:获取多条文本消息;通过对所述多条文本消息中的每一条文本消息进行分析来获取与所述多条文本消息相应的关键字;发送包括所述关键字的查询;在接收到所述关键字的分析结果之后,执行与所述关键字的分析结果相应的操作。

Description

电子装置及其操作方法
技术领域
本公开总体上涉及一种电子装置及其操作方法,例如,涉及一种对获取的文本进行处理的电子装置及其操作方法。
背景技术
最近,已积极地开发出了能够对由用户发出的语音或由用户输入的文本进行分析以捕获用户意图的程序或算法。例如,传统的程序或算法能够将输入的用户语音转换成文本并对该文本执行自然语言处理。自然语言处理可以是一种涵盖对人类语言的理解、产生和分析的人工智能技术,并可被用于理解每个成分在文本中的作用。此外,单独的用户意图分析算法对自然语言处理结果进行分析以分析包括在文本中的自然语言。
发明内容
技术问题
传统的电子装置可以分析例如由一个句子分隔开的文本,可以识别用户意图,并且可以执行与识别出的用户意图相应的操作。然而,传统的电子装置仅能够在由一个句子分隔开的文本包括清楚的参照物时才能够分析用户意图,并且因此难以识别出准确的用户意图。
技术方案
提供本公开以解决前述问题或其他问题,并且本公开的各种示例实施例可以提供一种能够分析多个文本以更加清楚地捕获用户意图并执行相应的操作的电子装置及其操作方法。
一种根据本公开的各种示例实施例的操作电子装置的方法可以包括:获取多条文本消息;通过对所述多条文本消息中的每一条文本消息进行分析来获取与所述多条文本消息相应的关键字;将包括所述关键字的查询发送到外部装置;在接收到所述关键字的分析结果之后,执行与所述关键字的分析结果相应的操作。
一种根据本公开的各种示例实施例的电子装置可以包括:通信模块,包括通信电路;处理器,包括被电连接到通信模块的处理电路;存储器,被电连接到处理器,其中,存储器可以存储指令,当由处理器运行所述指令时,所述指令使处理器的处理电路执行以下操作:获取多条文本消息;通过对所述多条文本消息中的每一条文本消息进行分析来获取与所述多条文本消息相应的关键字;使用通信模块的通信电路将包括所述关键字的查询发送到外部装置;在接收到所述关键字的分析结果之后,执行与所述关键字的分析结果相应的操作。
一种根据本公开的各种示例实施例的操作电子装置的方法可以包括:在显示器上显示在电子装置中运行的聊天应用的运行屏幕;在运行屏幕上显示通过通信单元的通信电路从另一电子装置接收的多条文本消息和通过电子装置的输入单元的输入电路输入的多条文本消息;基于在运行屏幕上显示的多条文本消息中的至少一条文本消息来确定能够提供信息的外部装置;从确定的外部装置接收信息;并在显示器上显示接收到的信息。在运行屏幕上显示的多条文本消息和接收到的信息可以按时间顺序排列并被显示在运行屏幕上。可以在运行屏幕上显示能够接收输入(例如,用户输入)的用户界面(UI)元素。
根据本公开的各种示例实施例,提供了一种能够分析多个文本以更加清楚地捕获一个用户或多个用户的意图并执行相应的操作的电子装置及其操作方法。相应地,当在多个用户之间的谈话中出现多个文本时,多个用户的意图可以被更加清楚地识别。此外,当单个用户间隔地发出或输入多个文本时,用户的意图也可以被更清楚地识别。
附图说明
从以下结合附图的详细描述,本公开的以上和其他方面、特征和优点将变得更加明显,其中相同的附图标号指示相同的元件,并且其中:
图1是示出根据本公开的各种示例实施例的示例电子装置和网络的框图;
图2是示出根据各种示例实施例的示例电子装置的框图;
图3是示出根据各种示例实施例的示例程序模块的框图;
图4是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图;
图5a和图5b是示出根据本公开的各种示例实施例的示例电子装置的框图;
图6是示出根据本公开的各种示例实施例的文本消息的示例获取的示图;
图7a和图7b是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图;
图8a是示出根据本公开的各种示例实施例的由电子装置进行的示例自然语言分析的示图;
图8b是示出根据本公开的各种示例实施例的示例模板的示图;
图8c是示出根据本公开的各种示例实施例的通过用户意图将机器学习算法或深度学习算法应用于模板的示例结果的示图;
图9是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图;
图10a是示出根据本公开的各种示例实施例的示例电子装置的示图;
图10b是示出根据本公开的各种示例实施例的关键字的示例产生的示图;
图10c是示出根据本公开的各种示例实施例的示例电子装置的示图;
图10d是示出根据本公开的各种示例实施例的产生关键字的示例处理的示图;
图11是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图;
图12a和图12b是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图;
图13是示出根据本公开的各种示例实施例的示例电子装置的示图;
图14是示出根据本公开的各种示例实施例的示例接收器服务器的示图;
图15是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图;
图16a、图16b和图16c是示出根据本公开的各种示例实施例的进一步使用另外的信息的关键字的示例产生的流程图;
图17a、图17b、图17c和图17d是示出根据本公开的各种示例实施例的进一步使用另外的信息的关键字的示例产生的示图;
图18是示出根据本公开的各种示例实施例的在物联网(IoT)环境中的电子装置的示例操作的示图;
图19是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图;
图20是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图;
图21a和图21b是示出根据本公开的各种示例实施例的处理来自单个用户的用户语音的示例处理的示图;
图22是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图;
图23是示出根据本公开的各种示例实施例的电子装置的示例操作的示图;
图24是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图;
图25a、图25b和图25c是示出根据本公开的各种示例实施例的电子装置调用室内IoT装置并与之通信的示例情况的示图。
具体实施方式
在下文中,将参照附图来描述本公开的各种示例实施例。然而,应该理解的是,并不旨在将本公开限制于本文公开的特定形式;相反,本公开应被理解为涵盖本公开的各种示例实施例的各种修改、等同物和/或替代物。在描述附图中,相似的附图标号可以被用于指定相似的组成元件。
如本文所使用的,表述“具有”、“可具有”、“包括”或“可包括”是指存在相应的特征(例如,数字、功能、操作或组成元件(诸如组件)),并且不排除存在一个或更多个另外的特征。
在本公开中,表述“A或B”、“A或/和B中的至少一个”或“A或/和B中的一个或更多个”可以包括所列出条目的全部可能的组合。例如,表述“A或B”、“A和B中的至少一个”或“A或B中的至少一个”是指下面的全部情况:(1)包括至少一个A、(2)包括至少一个B或(3)包括至少一个A和至少一个B的全部。
在本公开的各种示例实施例中使用的表述“第一”、“第二”、“所述第一”或“所述第二”可以不管顺序和/或重要性而修饰各种组件,但不限制相应的组件。例如,尽管第一用户装置和第二用户装置都是用户装置,但是它们指示不同的用户设备。例如,在不脱离本公开范围的情况下,第一元件可以被称为第二元件,并且类似地,第二元件可以被称为第一元件。
应该理解的是,当一个元件(例如,第一元件)被称为(可操作地或通信地)“被连接”或“被耦接”到另一元件(例如,第二元件)时,该元件可以被直接地连接或直接地耦接到所述另一元件或者任何其他元件(例如,第三元件),所述任何其他元件可以是它们之间的插入器。另一方面,可以理解的是,当一个元件(例如,第一元件)被称为“直接地被连接”或“直接地被耦接”到另一元件(第二元件)时,不存在任何元件(例如,第三元件)介于它们之间。
在本公开中使用的表述“被配置为”可以根据情况与例如“可适合于”、“具有......的能力”、“被设计为”、“适于”、“用于”或者“能够”进行交换。术语“被配置为”可以不必指示“专门针对硬件设计”。在一些情况下,表述“装置被配置为”可以指例如该装置与其他装置或组件一起“能够”的情况。例如,短语“处理器适于(或被配置为)执行A、B和C”可以指例如各种处理电路,包括例如但不限于仅用于执行相应操作的专用处理器(例如,嵌入式处理器),或可通过执行存储在存储器装置中的一个或更多个软件程序来执行相应操作的通用处理器(例如,中央处理单元(CPU)或应用处理器(AP))。
本文使用的术语仅是用于描述各种示例实施例的目的,而不旨在限制其他示例实施例的范围。如本文所使用的,单数形式也可以包括复数形式,除非上下文另有明确指示。除非另外定义,否则本文使用的全部术语(包括技术和科学术语)具有与本公开所属领域的技术人员通常理解的含义相同的含义。在通常使用的字典中定义的那些术语可以被解释为具有与相关领域中的上下文含义相同的含义,并且不被解释为具有理想的或过于正式的含义,除非在本公开中被明确定义。在一些情况下,即使在本公开中定义的术语也不应被解释为排除本公开的实施例。
根据本公开的各种示例实施例的电子装置可以包括例如智能电话、平板个人计算机(PC)、移动电话、视频电话、电子书阅读器(e-book reader),台式PC、膝上型PC、上网本计算机、工作站、服务器、个人数字助理(PDA)、便携式多媒体播放器(PMP)、MPEG-1音频层-3(MP 3)播放器、移动医疗装置、相机和可穿戴装置等中的至少一个,但不限于此。根据各种示例实施例,可穿戴装置可以包括附件类型(例如,手表、戒指、手镯、脚链、项链、眼镜、隐形眼镜或头戴式装置(HMD))、织物或衣服集成类型(例如,电子衣服)、身体安装类型(例如,皮肤垫或纹身)以及生物可植入类型(例如,可植入电路)等中的至少一个,但不限于此。此外,电子装置可以无线地从无线电力发射器接收电力并且因此可以被称为无线电力接收器。
根据一些示例实施例,电子装置可以是家用电器。家用电器可以包括例如电视机、数字视频盘(DVD)播放器、音响、冰箱、空调、吸尘器、烤箱、微波炉、洗衣机、空气净化器、机顶盒、家庭自动化控制面板、安全控制面板、TV盒(例如,Samsung HomeSyncTM、Apple TVTM或Google TVTM)、游戏控制台(例如,XboxTM和PlayStationTM)、电子词典、电子钥匙、摄录机和电子相框等中的至少一个,但不限于此。
根据另一示例实施例,电子装置可以包括各种医疗装置(例如,各种便携式医学测量装置(血糖监测装置、心率监测装置、血压测量装置、体温测量装置等)、磁共振血管造影(MRA)、磁共振成像(MRI)、计算机断层摄影(CT)机器和超声机器)、导航装置、全球定位系统(GPS)接收器、事件数据记录器(EDR)、飞行数据记录器(FDR)、车辆信息娱乐装置、用于船舶的电子装置(例如,用于船舶的导航装置和陀螺罗盘)、航空电子装置、安全装置、汽车头部单元、用于家庭或工业的机器人、银行中的自动取款机(ATM)、商店中的销售点(POS)或物联网装置(例如,灯泡、各种传感器、电表或气量计、洒水装置、火警器、热水器、街灯、烤面包机、体育用品、热水箱、加热器、锅炉等)等中的至少一个,但不限于此。
根据一些示例实施例,电子装置可以包括家具或建筑物/结构的一部分、电子板、电子签名接收装置、投影仪和各种类型的测量仪器(例如,水表、电表、气量计、无线电波表等)等中的至少一个,但不限于此。在各种示例实施例中,电子装置可以是前述各种装置中的一个或更多个的组合。根据一些示例实施例,电子装置也可以是柔性装置。此外,根据本公开的示例实施例的电子装置不限于前述装置,并且可以包括根据技术发展的新的电子装置。
在下文中,将参照附图来描述根据各种示例实施例的电子装置。在本公开中,术语“用户”可以指使用电子装置的人或使用电子装置的装置(例如,人工智能电子装置)。
参照图1来描述根据各种示例实施例的网络环境100中的电子装置101。电子装置101可以包括总线110、处理器(例如,包括处理电路)120、存储器130、输入/输出接口(例如,包括输入/输出电路)150、显示器160和通信模块(例如,包括通信电路)170。在一些示例实施例中,可以省略至少一个组件,或者可以在电子装置101中进一步包括另外的组件。
总线110可以包括例如将组件110至170彼此连接并且在组件之间传递通信(例如,控制消息和/或数据)的电路。
处理器120可以包括各种处理电路,例如但不限于中央处理单元(CPU)、应用处理器(AP)和通信处理器(CP)中的一个或更多个。处理器120可以控制例如电子装置101的至少一个不同的组件和/或可以执行与通信或数据处理相关的操作。
存储器130可以包括易失性和/或非易失性存储器。存储器130可以存储例如与电子装置101的至少一个不同组件相关的命令或数据。根据示例实施例,存储器130可以存储软件和/或程序140。程序140可以包括,例如,内核141、中间件143、应用编程接口(API)145和/或应用程序(或“应用”)147。内核141、中间件143和API 145中的至少一部分可被指定为操作系统(OS)。
内核141可以控制或管理被用于执行在其他程序(例如,中间件143、API 145或应用程序147)中实现的操作或功能的系统资源(例如,总线110、处理器120、存储器130等)。此外,内核141可以提供允许中间件143、API145或应用程序147访问电子装置101的单独组件以由此控制或管理系统资源的接口。
中间件143可以用作继电器,使得例如API 145或应用程序147与内核141进行通信以交换数据。
此外,中间件143可根据优先级来处理从应用程序147接收到的用于操作的一个或更多个请求。例如,中间件143可以为至少一个应用程序147分配用于使用电子装置101的系统资源(例如,总线110、处理器120、存储器130等)的优先级。中间件143可以根据分配给至少一个应用程序的优先级来处理用于操作的一个或更多个请求,从而执行针对一个或更多个操作请求的调度或负载平衡。
例如,API 145是用于应用程序147控制从内核141或中间件143提供的功能的接口,并且可以包括例如至少一个用于文件控制、窗口控制、图像处理或文本控制的接口或功能(例如,命令)。
输入/输出接口150可以包括各种输入/输出电路,所述输入/输出电路被配置为用作将从例如用户或不同的外部装置输入的命令或数据传送到电子装置101的不同组件的接口。此外,输入/输出接口150可以将从电子装置101的不同组件接收到的命令或数据输出到用户或不同的外部装置。
显示器160可以包括例如液晶显示器(LCD)、发光二极管(LED)显示器、有机发光二极管(OLED)显示器、微机电系统(MEMS)显示器和电子纸显示器等,但不限于此。显示器160可以显示例如针对用户的各种类型的内容(例如,文本、图像、视频、图标、符号等)。显示器160可以包括触摸屏并且可以使用例如电子笔或用户身体部位来接收触摸、手势、接近或悬停输入。
通信模块170可以包括被配置为例如在电子装置101和外部装置(例如,第一外部电子装置102、第二外部电子装置104或服务器106)之间建立通信的各种通信电路。例如,通信模块170可以经由无线通信或基于有线的通信被连接到网络162以与外部装置(例如,第二外部电子装置104或服务器106)进行通信。
无线通信可以使用例如蜂窝通信协议,所述蜂窝通信协议可以是例如长期演进(LTE)、高级LTE(LTE-A)、码分多址(CDMA)、宽带CDMA(WCDMA)、通用移动通信系统(UMTS)、无线宽带(WiBro)和全球移动通信系统(GSM)中的至少一个。此外,无线通信可以包括例如短距离通信164。短距离通信164可以包括例如无线保真(Wi-Fi)、蓝牙、近场通信(NFC)和全球导航卫星系统(GNSS)中的至少一个。GNSS可以根据使用面积或带宽包括例如全球定位系统(GPS)、全球导航卫星系统(Glonass)、北斗导航卫星系统(以下称为“北斗”)和伽利略(欧洲全球卫星导航系统)中的至少一个。在本公开中,“GPS”可以在下文中与“GNSS”互换使用。基于有线的通信可以包括例如通用串行总线(USB)、高清晰度多媒体接口(HDMI)、推荐标准232(RS-232)和普通老式电话服务(POTS)中的至少一个。网络162可以包括电信网络,所述电信网络可以是例如计算机网络(例如,局域网(LAN)或广域网(WAN))、互联网和电话网络中的至少一个。
第一外部电子装置102和第二外部电子装置104可以分别是与电子装置101相同或不同类型的装置。根据示例实施例,服务器106可以包括一组一个或更多个服务器。根据各种示例实施例,可以在另一电子装置或多个电子装置(例如,电子装置102和104或服务器106)中执行在电子装置101中执行的全部或部分操作。根据示例实施例,当电子装置101需要自动地或通过请求来执行功能或服务时,电子装置101可以请求另一电子装置(例如,电子装置102或104或服务器106)执行至少一些与该功能或服务相关的功能来代替自主地执行该功能或服务,或者电子装置101除了自主地执行功能或服务之外,还请求另一电子装置(例如,电子装置102或104或服务器106)执行至少一些与该功能或服务相关的功能。其他电子装置(例如,电子装置102或104或服务器106)可以执行被请求的功能或另外的功能,并且可以将结果发送到电子装置101。电子装置101可以通过使用相同的接收结果或另外地处理所述结果来提供被请求的功能或服务。为此,可以使用云计算、分布式计算或客户端-服务器计算技术。
在本公开的各种示例实施例中,存储器130可以存储用于处理器120的指令,所述指令在运行时,获取多条文本消息,通过对多条文本消息中的每一条文本消息进行分析来获取与多条文本消息相应的关键字,使用通信模块170将包括关键字的查询发送到外部装置,并且在接收到关键字的分析结果之后执行与关键字的分析结果相应的操作。
在本公开的各种示例实施例中,存储器130可以存储用于处理器120的指令,所述指令在运行时,获取关于执行关键字分析的接收器的接收器信息并且使用通信模块发送包括关键字和接收器信息的查询,并且关键字分析可以由与接收器信息相应的电子装置来执行。
在本公开的各种示例实施例中,存储器130可以存储用于处理器120的指令,所述指令在运行时,对多条文本消息中的每一条文本消息执行自然语言处理并且使用多条文本消息中的每一条文本消息的自然语言处理结果来产生关键字。
在本公开的各种示例实施例中,存储器130可以存储用于处理器120的指令,所述指令在运行时,将预设模板与自然语言处理结果进行比较并且基于比较结果来产生关键字。
在本公开的各种示例实施例中,存储器130可以存储用于处理器120的指令,所述指令在运行时,将机器学习、人工智能或深度学习算法应用于自然语言处理结果,基于应用结果来确定多条文本消息中的每一条文本消息的意图,并且基于多条文本消息中的每一条文本消息的意图来产生关键字。
在本公开的各种示例实施例中,存储器130可以存储用于处理器120的指令,所述指令在运行时,在第一时间段获取多条第一文本消息并在第二时间段获取多条第二文本消息。
在本公开的各种示例实施例中,存储器130可以存储用于处理器120的指令,所述指令在运行时,产生与多条第一文本消息相应的第一关键字并且产生与多条第二文本消息相应的第二关键字。
在本公开的各种示例实施例中,存储器130可以存储用于处理器120的指令,所述指令在运行时,使用多条第二文本消息的分析结果以及第一关键字和多条第一文本消息中的至少一个来产生第二关键字。
在本公开的各种示例实施例中,存储器130可以存储用于处理器120的指令,所述指令在运行时,获取另外的信息并使用多条文本消息的分析结果和另外的信息来产生关键字。
在本公开的各种示例实施例中,存储器130可以存储用于处理器120的指令,所述指令在运行时,获取与多条文本消息的分析结果相关联的另外的信息,或者从多条文本消息获取单独的另外的信息。
在本公开的各种示例实施例中,电子装置101还可以包括获取多条用户语音的麦克风(未示出),并且存储器130可以存储用于处理器120的指令,所述指令在运行时,通过对从麦克风获取的多条用户语音进行转换来获取多条文本消息。
在本公开的各种示例实施例中,显示器160可以显示在电子装置中运行的聊天应用的运行屏幕。存储器130可以存储用于控制处理器120的指令,所述指令在运行时,在聊天应用的运行屏幕上显示输入到电子装置101的或从另一电子装置接收的多条文本消息,接收针对多条文本消息的分析请求,根据分析请求通过通信模块170的通信电路来发送与多条文本消息相应的关键字,并且接收关键字的分析结果并在聊天应用的运行屏幕上显示接收到的关键字的分析结果。
在本公开的各种示例实施例中,存储器130可以存储用于处理器120的指令,所述指令在运行时,获取多条文本消息,通过对多条文本消息中的每一条文本消息进行分析来获取与多条文本消息相应的关键字,并执行与关键字相应的操作。
图2是示出根据各种示例实施例的示例电子装置201的框图。电子装置201可以包括例如图1中示出的电子装置101的全部或一部分。电子装置201可以包括一个或更多个处理器(例如,AP)(例如,包括处理电路)210、通信模块(例如,包括通信电路)220、用户识别模块(SIM)224、存储器230、传感器模块240、输入装置(例如,包括输入电路)250、显示器260、接口(例如,包括接口电路)270、音频模块280、相机模块291、电源管理模块295、电池296、指示器297和电机298。
处理器210可以包括各种处理电路,所述处理电路被配置为运行例如OS或应用程序以控制被连接到处理器210的多个硬件或软件组件,并且处理器210可以执行各种类型的数据处理和操作。处理器210可以被配置为例如各种处理电路(例如,包括CPU)、片上系统(SoC)等,但不限于此。根据示例实施例,处理器210还可以包括图形处理单元(GPU)和/或图像信号处理器。处理器210可以包括图2中示出的组件中的至少一部分(例如,蜂窝模块221)。处理器210可以将从其他组件(例如,非易失性存储器)中的至少一个组件接收到的命令或数据加载到易失性存储器中以处理命令或数据,并且可以将各种类型的数据存储在非易失性存储器中。
通信模块220可以具有与图1中的通信模块170的配置相同或相似的配置。通信模块220可以包括各种通信电路,所述通信电路包括例如但不限于蜂窝模块221、Wi-Fi模块223、蓝牙模块225、全球导航卫星系统(GNSS)模块227(例如,全球定位系统(GPS)模块、Glonass模块、北斗模块或伽利略模块)、近场通信(NFC)模块228和射频(RF)模块229。
蜂窝模块221可以通过通信网络提供例如语音呼叫、视频呼叫、文本消息服务或互联网服务。根据示例实施例,蜂窝模块221可以使用SIM(例如,SIM卡)224在通信网络中执行电子装置201的识别和认证。根据示例实施例,蜂窝模块221可以执行由处理器210提供的功能中的至少一部分。根据示例实施例,蜂窝模块221可以包括通信处理器(CP)。
Wi-Fi模块223、蓝牙模块225、GNSS模块227和NFC模块228可分别包括处理器以处理经由各个模块发送和接收的数据。根据示例实施例,蜂窝模块221、Wi-Fi模块223、蓝牙模块225、GNSS模块227和NFC模块228中的至少一部分(例如,两个或更多个)可以被包括在一个集成电路(IC)或IC封装中。
RF模块229可以发送和接收例如通信信号(例如,RF信号)。RF模块229可以包括例如收发器、功率放大器(amp)模块(PAM)、频率滤波器、低噪声放大器(LNA)、天线等。根据另一示例实施例,蜂窝模块221、Wi-Fi模块223、蓝牙模块225、GNSS模块227和NFC模块228中的至少一个可以通过单独的RF模块来发送和接收RF信号。
SIM 224可以包括例如包含SIM的卡和/或嵌入式SIM,并且可以包括唯一标识信息(例如,集成电路卡标识符(ICCID))或用户信息(例如,国际移动用户识别码(IMSI))。
存储器230(例如,存储器130)可以包括例如内部存储器232或外部存储器234。内部存储器232可以包括例如易失性存储器(例如,动态随机存取存储器(DRAM)、静态RAM(SRAM)、同步动态RAM(SDRAM)等)和非易失性存储器(例如,一次性可编程只读存储器(OTPROM)、可编程ROM(PROM)、可擦除可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)、掩模ROM、闪存ROM、闪存(例如,NAND闪存、NOR闪存等)、硬盘驱动器或固态驱动器(SSD))中的至少一个。
外部存储器234还可以包括闪存驱动器,例如,紧凑型闪存(CF)、安全数字(SD)、微型安全数字(micro-SD)、迷你安全数字(mini-SD)、极端数字(xD)、多媒体卡(MMC)、记忆棒等。外部存储器234可以通过各种接口被功能地和/或物理地连接到电子装置201。
传感器模块240可以测量例如物理量,或者可以检测电子装置201的操作状态并且将测量的或检测的信息转换为电信号。传感器模块240可以包括例如手势传感器240A、陀螺仪传感器240B、大气压力传感器240C、磁性传感器240D、加速度计240E、握持传感器240F、接近传感器240G、颜色传感器240H(例如,红色、绿色和蓝色(RGB)传感器)、生物传感器240I、温度/湿度传感器240J、照度传感器240K和紫外(UV)传感器240M中的至少一个。另外地或可替换地,传感器模块240可以包括例如电子鼻传感器、肌电图(EMG)传感器、脑电图(EEG)传感器、心电图(ECG)传感器、红外(IR)传感器、虹膜传感器和/或指纹传感器。传感器模块240还可以包括控制电路以控制属于传感器模块240中的至少一个或更多个传感器。在示例实施例中,电子装置201还可以包括处理器,所述处理器被配置为作为处理器210的一部分或者与处理器210分开来控制传感器模块240,从而在处理器210处于睡眠状态时控制传感器模块240。
输入装置250可以包括各种输入电路,例如但不限于触摸面板252、(数字)笔传感器254、键256或超声输入装置258。触摸面板252可以使用例如静电型、压敏型、红外型和超声型中的至少一种。此外,触摸面板252还可以包括控制电路。触摸面板252还可以包括触觉层以向用户提供触觉响应。
(数字)笔传感器254可以例如是触摸面板的一部分或者包括单独的识别片。键256可以包括例如物理按钮、光学键或小键盘。超声输入装置258可以通过麦克风(例如,麦克风288)来检测在输入工具中产生的超声波,并且可以识别与检测到的超声波相应的数据。
显示器260(例如,显示器160)可以包括面板262、全息图装置264或投影仪266。面板262可以包括与图1的显示器160的配置相同或相似的配置。例如,面板262可以被配置为柔性的、透明的或可穿戴的。面板262可以与触摸面板252一起被形成在单个模块中。全息图装置264可以使用光的干涉在空中显示三维图像。投影仪266可以将光投影到屏幕上以显示图像。屏幕可以被布置在例如电子装置201的内部或外部。根据示例实施例,显示器260还可以包括控制电路以控制面板262、全息图装置264或投影仪266。
接口270可以包括各种接口电路,例如但不限于高清多媒体接口(HDMI)272、通用串行总线(USB)274、光学接口276或D超小型(D-sub)278。接口270可以被包括在例如图1中示出的通信模块170中。另外地或可选地,接口270可以包括例如移动高清链接(MHL)接口、SD卡/MMC接口或者红外数据协会(IrDA)接口。
音频模块280可以例如对声音和电信号进行相互转换。音频模块280中的至少一些组件可以被包括在例如图1中示出的输入/输出接口150中。音频模块280可以处理例如通过扬声器282、接收器284、耳机286或麦克风288输入或输出的声音信息。
相机模块291是拍摄例如静止图像和视频的装置。根据示例实施例,相机模块291可以包括一个或更多个图像传感器(例如,前置传感器或后置传感器)、镜头、图像信号处理器(ISP)或闪光灯(例如,LED、氙气灯等)。
电源管理模块295可以管理例如电子装置201的电力。根据示例实施例,电源管理模块295可以包括电源管理集成电路、充电器集成电路(IC)或者电池或电量计。电源管理集成电路可以具有基于有线和/或无线的充电方法。无线充电方法可以包括例如磁共振方法、磁感应方法或电磁波方法,并且还可以包括用于无线充电的另外的电路,例如线圈环路、谐振电路或整流器。电池量表可以测量例如电池296的剩余电池电量、充电电压、电流或温度。电池296可以包括例如可再充电电池和/或太阳能电池。
指示器297可以显示电子装置201或其组件(例如,处理器210)的特定状态,所述特定状态可以是例如启动状态、消息状态或充电状态。电机298可以将电信号转换成机械振动并且可以产生振动或触觉效果。尽管未被示出,但是电子装置201可以包括用于支持移动TV的处理装置(例如,GPU)。用于支持移动TV的处理装置可以根据数字多媒体广播(DMB)、数字视频广播(DVB)或mediaFloTM标准来处理媒体数据。
图3是示出根据各种示例实施例的示例程序模块的框图。根据示例实施例,程序模块310(例如,程序140)可以包括控制与电子装置(例如,电子装置101)相关的资源的OS和/或运行在OS上的各种应用(例如,应用程序147)。OS可以是例如Android、iOS、Windows、Symbian、Tizen、Bada等。
程序模块310可以包括内核320、中间件330、API 360和/或应用370。程序模块310中的至少一部分可以被预先加载到电子装置上,或者可以从外部电子装置(例如,电子装置102或104、服务器106等)被下载。
内核320(例如,内核141)可以包括例如系统资源管理器321和/或装置驱动器323。系统资源管理器321可以执行系统资源的控制、分配或恢复;根据示例实施例,系统资源管理器321可以包括进程管理器、存储器管理器或文件系统管理器。装置驱动器323可以包括例如显示驱动器、相机驱动器、蓝牙驱动器、共享存储器驱动器、USB驱动器、小键盘驱动器、Wi-Fi驱动器、音频驱动器或者进程间通信(IPC)驱动器。
中间件330可以提供例如应用370通常需要的功能,或者可以通过API360向应用370提供各种功能,使得应用370可以有效地在电子装置中使用有限的系统资源。根据示例实施例,中间件330(例如,中间件143)可以包括运行时库335、应用管理器341、窗口管理器342、多媒体管理器343、资源管理器344、电源管理器345、数据库管理器346、包管理器347、连接管理器348、通知管理器349、位置管理器350、图形管理器351和安全管理器352中的至少一个。
运行时库355可以包括例如库模块,所述库模块由编译器使用以在应用370运行时通过编程语言来添加新的功能。运行时库355可以执行用于输入/输出管理、存储器管理或算术功能的功能。
应用管理器341可以管理例如应用370中的至少一个应用的生命周期。窗口管理器342可以管理用于屏幕的图形用户界面(GUI)资源。多媒体管理器343可以识别播放各种媒体文件所需的格式,并且可以使用适合于相应格式的编解码器对媒体文件进行编码或解码。资源管理器344可以管理用于应用370中的至少一个应用的资源,诸如源代码、存储器或存储空间。
电源管理器345可以使用例如基本输入/输出系统(BIOS)进行操作以管理电池或电源,并且可以提供关于电子装置的操作所需的电力的信息。数据库管理器346可以产生、检索或改变将被用于应用370中的至少一个应用的数据库。包管理器347可以安装或更新以包文件的形式发布的应用。
连接管理器348可以管理例如经由Wi-Fi或蓝牙的无线连接。通知管理器349可以以不干扰用户的方式来显示或报告呼入消息、约定和包括接近通知的事件。位置管理器350可以管理关于电子装置的位置信息。图形管理器351可以管理将提供给用户的图形效果或与图形效果相关的用户界面。安全管理器352可以提供系统安全或用户认证所需的全部安全功能。根据示例实施例,运行管理器353中的至少一些功能可以被包括在API 360或应用370中。根据示例实施例,当电子装置(例如,电子装置101)具有电话特征时,中间件330还可以包括电话管理器以管理电子装置的语音或视频呼叫功能。
中间件330可以包括形成前述组件的各种功能的组合的中间件模块。中间件330可以针对每种类型的OS提供专用模块,以便提供不同的功能。此外,中间件330可动态地删除一些现有组件或添加新的组件。
例如,API 360(例如,API 145)是一组API编程功能,并且可以根据OS被提供有不同的配置。例如,可以在Android或iOS中针对每个平台提供一个API集,而在Tizen中可以针对每个平台提供两个或更多个API集。
应用370(例如,应用程序147)可以包括能够执行例如主页371、拨号器372、SMS/MMS 373、即时消息(IM)374、浏览器375、相机376、闹钟377、联系人378、语音拨号379、电子邮件380、日历381、媒体播放器382、相册383、时钟384或医疗保健(例如,用于测量运动量或血糖)、环境数据应用(例如,用于提供大气压力、湿度或温度数据)等功能的一个或更多个应用。
根据示例实施例,应用370可以包括支持在电子装置(例如,电子装置101)和外部电子装置(例如,电子装置102或104)之间的信息交换的应用(在下文中,为了便于描述,被称为“信息交换应用”)。信息交换应用可以包括例如用于将特定信息转发到外部电子装置的通知转发应用或者用于管理外部电子装置的装置管理应用。
例如,通知转发应用可以包括将在电子装置的另一应用(例如,SMS/MMS应用、电子邮件应用、健康医疗应用、环境数据应用等)中产生的通知信息转发到外部电子装置(例如,电子装置102或104)的功能。此外,通知转发应用可以例如从外部电子装置接收通知信息并且将通知信息提供给用户。
装置管理应用可以管理(例如,安装、删除或更新)例如至少一个功能(例如,打开/关闭外部电子装置本身(或一些组件)或调节与电子装置进行通信的外部电子装置(例如,电子装置102或104)的显示器的亮度(或分辨率)的功能)、在外部电子装置中操作的应用或由外部电子装置提供的服务(例如,呼叫服务或消息服务)。
根据示例实施例,应用370可以包括根据外部电子装置(例如,电子装置102或104)的属性分配的应用(例如,移动医疗装置的健康医疗应用)。根据示例实施例,应用370可以包括从外部电子装置(例如,服务器106或电子装置102或104)接收的应用。根据示例实施例,应用370可以包括可从预先加载的应用或服务器下载的第三方应用。根据示例实施例,被示出的程序模块310的组件可以根据OS类型被命名为不同的术语。
根据各种示例实施例,程序模块310中的至少一部分可以以软件、固件、硬件(例如,电路)或至少两个或更多个的组合被实现。程序模块310中的至少一部分可以通过例如处理器(例如,处理器210)被实现(例如,被运行)。程序模块310中的至少一部分可以包括例如用于执行一个或更多个功能的模块、程序、例程、指令集或处理。
图4是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图。参照图5a和图5b来更加详细地描述图4的实施例。图5a和图5b是示出根据本公开的各种示例实施例的示例电子装置的示图。
在操作410,电子装置101可以获取多条文本消息。例如,文本消息可以指例如包括字母、数字和符号中的至少一个的文本。在示例实施例中,文本消息可以通过数据格式被分隔开。例如,用户A和用户B可以使用聊天应用来相互交换文本消息。用户A可以在聊天窗口中输入要发送的文本,并且可以在聊天窗口中完整地输入文本后输入预设发送命令。聊天应用可以根据发送命令将包括输入文本的文本消息发送到另一电子装置,并且可以显示从所述另一电子装置接收到的文本消息。在另一示例实施例中,文本消息可以通过自然语言处理结果被分隔开。例如,电子装置101可以基于文本分析结果来识别句子的结尾词并且可以使用该句子的结尾词来分隔文本消息。在这个示例中,被定义为一个句子的文本组可以被分隔为一条文本消息。在又一示例实施例中,文本消息可以按照时间被分隔开。例如,电子装置101可以将无停顿地连续输入的一组文本分隔为一条文本消息。在这个示例中,当文本被连续地输入以超过预设的停顿时,电子装置101可以获取在停顿之前输入的多组文本作为一条文本消息。相应地,文本消息可以包括一个或更多个句子。如上所述,文本消息可以通过各种标准被分隔开。
根据本公开的各种示例实施例,电子装置101可以获取从另一电子装置输入或接收的多个文本。电子装置101还可以获取在应用(例如,聊天应用)中处理的多个文本。电子装置101可以对通过麦克风从外部获取的多条用户语音执行文本到语音(TTS)处理,从而获取多个文本。
例如,如图5a所示,电子装置101可以在显示器160上显示聊天应用运行屏幕510。电子装置101可以运行聊天应用,并且相应地可以显示该聊天应用运行屏幕510。电子装置101可以显示从另一电子装置(未示出)接收的文本消息511、513和515,并且可以显示由用户输入的文本消息512和514。本领域技术人员将容易理解,聊天应用可以是能够在两个电子装置之间进行文本消息的发送和接收的任何应用。如图5a,电子装置101可以显示图形用户界面以区分由聊天参与者发送和接收的文本消息的历史记录。如图5a所示,电子装置101可以获取包括来自用户的文本消息和从另一电子装置接收的文本消息的多条文本消息。
在操作420,电子装置101可以使用多条文本消息的分析结果来获取关键字。电子装置101可以对每条文本消息进行分析并且可以使用每条文本消息的分析来获取关键字。在本公开的各种示例实施例中,电子装置101可以将多条文本消息中的每一条文本消息的分析结果与模板进行匹配,从而产生关键字。电子装置101可以应用从多条文本消息中的每条文本消息的分析结果分析用户意图的机器学习或深度学习算法,从而产生关键字。下面将参照图8a至图8c更加详细地描述根据各种示例实施例的关键字产生过程。在图5a的示例实施例中,电子装置101可以产生关键字“电影、这个星期日”。例如,电子装置101可以基于文本消息511“在这个星期日你做什么?”的自然语言分析结果来获取与时间“这个星期日”相应的文本。例如,电子装置101可以基于自然语言分析结果来识别出文本消息511的“这个星期日”是与时间相应的文本以及“你做什么?”是与动词相应的文本。自然语言分析可以被用于确定文本消息中的每个成分在句子中的角色,并且电子装置101可以基于自然语言分析结果来分析多条文本消息中的每个成分。
此外,电子装置101可以基于文本消息513“好的,看电影吗?”的自然语言分析结果来获取与对象“电影”相应的文本。电子装置101可以使用文本消息511和513的分析结果来获取关键字“电影、这个星期日”。电子装置101可以预先存储用于对作为关键字的与时间相应的文本和与对象相应的文本进行分类的算法并且可以基于应用该算法的结果来获取关键字。电子装置101可以从其他文本消息512、514和515获取对象(例如,“计划”或“你想看什么”),并且可以将对象包括在关键字中,或者可以经由过滤来排除对象。电子装置101可以预先存储具有略微模糊含义的对象的数据库,并且可以从关键字产生过程排除这些对象。电子装置101可以基于通过使用机器学习或深度学习算法分析文本消息511至515而获取的用户意图来产生关键字。电子装置101可以分析文本消息512以将用户意图确定为“计划”并且可以分析文本消息511和513以将用户意图确定为“在这个星期日看电影”。电子装置101可以分析文本消息511以分析用户询问对方这个星期日的日程的意图,并且可以通过机器学习或深度学习算法分析出在上述询问之后用于另外询问的文本消息513指示在那时要执行的活动。如上所述,电子装置101可以使用各种方法来分析关键字,并且本领域技术人员将容易理解,只要能够使用多条文本消息来分析关键字,就可以在没有限制的情况下使用任何类型的方法。
在操作430,电子装置101可以发送包括获取的关键字的查询。例如,如图5a所示,电子装置101可以显示图形用户界面516以请求关键字分析结果,并且可以将包括该关键字的查询发送到与图形用户界面516的指定相应的服务器106。
在操作440,服务器106可以分析包括在查询中的关键字。服务器106可以指例如存储能够分析关键字的算法或程序的任何电子装置。在本公开的各种示例实施例中,服务器106还可以将关键字转发给另一电子装置,这将在下面更加详细地进行描述。例如,服务器106可以对从电子装置101获取的关键字“电影、这个星期日”进行分析以获取针对这个星期日的电影时间表。
在操作450,服务器106可以将包括关键字分析结果的响应发送到电子装置101。在操作460,电子装置101可以使用关键字分析结果进行操作。例如,如图5b所示,电子装置101可以显示包括从服务器106接收的针对这个星期日的电影时间表的关键字分析结果的图形用户界面520。
例如,由于传统电子装置仅提供一条文本消息的分析结果,即,提供文本消息511中的“这个星期日”的分析结果,因此提供不准确的信息。此外,由于传统电子装置提供一条文本消息513中的“电影”的分析结果,因此提供不准确的信息。另一方面,根据本公开的各种示例实施例的电子装置101可以根据基于多条文本消息的关键字分析结果进行操作,从而提供信息以进一步满足用户意图。
在本公开的各种示例实施例中,服务器106可以接收多条文本消息,而不是基于多条文本消息的分析结果而获取的关键字。服务器106可以分析多条接收到的文本消息以产生关键字,并且可以将产生的关键字的分析结果发送到电子装置101。服务器106的关键字产生过程可以与电子装置101的关键字产生过程相同。
在本公开的各种示例实施例中,电子装置101可以在不向另一电子装置请求关键字分析的情况下自主地分析关键字。在另一示例实施例中,电子装置101可以立即执行与关键字相应的命令。
图6是示出根据本公开的各种示例实施例的文本消息的示例获取的示图。
如图6所示,电子装置101可以获取由多个用户601和602发出的多条用户语音611和612。电子装置101可以包括例如麦克风,并且可以通过麦克风将用户语音611和612转换为电信号。电子装置101可以对用户语音611和612执行TTS处理,从而获取与用户语音611和612相应的多条文本消息。电子装置101可以将对无预设停顿地连续获取的用户语音进行转换的结果处理为一条文本消息。此外,电子装置101可以使用声纹来处理用户语音。例如,即使当两个用户601和602同时发出用户语音时,电子装置101也可以使用声纹来分别处理由各个用户601和602发出的用户语音611和612。例如,如图5a所示,用户601和602可以发出具有以下内容的用户语音611和612:“在这个星期日你做什么?”、“我没有特别的计划。”、“好的。看电影吗?”、“行。你想看什么电影?”以及“嗯。现在正在上映什么电影?”。电子装置101可以对用户语音611和612执行TTS处理以获取如图5a示出的文本消息。当检测到关键字分析结果请求时,电子装置101可以发送包括使用多条文本消息的分析结果的关键字的查询,并且可以获取关键字分析结果作为对该查询的响应。相应地,图6的电子装置101可以显示如图5b示出的包括关键字分析结果的图形用户界面520。
如上所述,根据本公开的各种示例实施例的电子装置101可以以各种方式来获取多条文本消息。
图7a和图7b是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图。
参照图7a,在操作710,电子装置101可以获取多条文本消息。如上所述,电子装置101可以获取包括文本的文本消息,或者可以通过对用户语音执行TTS处理来获取文本。
在操作720,电子装置101可以对多条文本消息中的每一条文本消息执行自然语言分析。图8a是示出根据本公开的各种示例实施例的由电子装置进行的示例自然语言分析的示图。电子装置101可以获取多条文本消息810、820、830、840和850。电子装置101可以执行文本消息810的自然语言分析,从而确定文本消息810中的“这个”813是与时间相应的文本、“星期日”814是与时间相应的文本、“在”812是与后置词相应的文本以及“你做什么”811是与动词相应的文本。电子装置101还可以执行对其他文本消息820、830、840和850的自然语言分析以确定包括的成分821、822、823、824、831、832、833、841、842、843、844、845、846、851、852和853的属性。
在操作730,电子装置101可以使用例如自然语言分析结果和模板来产生关键字。在本公开的各种示例实施例中,电子装置101可以存储图8b中示出的模板860。模板860可以包括至少一个条目861,并且可以通过至少一个条目861来映射信息862。例如,电子装置101可以存储包括时间条目863、日期条目864、位置条目866和兴趣条目867的模板860。电子装置101可以将自然语言分析结果中的与模板860的条目相应的成分存储为信息862,从而产生关键字。例如,电子装置101可以将时间条目863或日期条目864映射到与时间相应的成分813和814,并且可以将成分813和814存储为信息865。电子装置101可以将兴趣条目867映射到与对象相应的成分833,并且可以将成分833存储为信息868。电子装置101可以使用映射到模板的条目861的信息862来产生关键字。例如,在图8b的示例实施例中,电子装置101可以产生关键字“11.15、电影”。例如,电子装置101可以将文本“这个星期日”替换为文本11.15并且可以存储文本11.15.。
如上所述,根据本公开的各种示例实施例的电子装置101可以基于与模板860的比较来产生关键字。
图7b是示出根据本公开的各种示例实施例的基于学习的关键字产生的示例处理的流程图。上面描述了操作710和操作720,因此这里省略其重复描述。在操作731,电子装置101可以通过将机器学习或深度学习算法应用于自然语言分析结果来产生关键字。例如,如图8c所示,电子装置101可以通过预先分析的用户意图将机器学习或深度学习算法应用于模板,并且还可以将机器学习或深度学习算法应用于多条获取的文本消息。因此,电子装置101可以通过模板870中的对话主题871对信息872进行映射。电子装置101可以通过提取级别873、874、876和878来确定用户意图以将用户意图或对方意图存储为信息。例如,假设更高的提取级别表示更清晰的用户意图。例如,电子装置101可以通过文本消息840的分析来确定出用户意图是决定一个电影875。例如,电子装置101可以通过文本消息810、820、830、840和850来确定用户意图。电子装置101可以使用由文本消息确定的用户意图中的更加具体确定的用户意图来产生关键字。例如,电子装置101可以确定“去看”877是文本消息810中的具体对方意图,并且可以确定“去看电影”879是文本消息830中的具体对方意图。电子装置101可以通过机器学习或深度学习来确定与更具体的用户意图相应的文本。电子装置101可以使用将机器学习或深度学习应用于多个文本的结果来产生关键字“这个星期日、去看电影”。
图9是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图。参照图10a至10d来更加详细地描述图9的实施例。
在操作910,电子装置101可以在第一时间段获取多条文本消息。在操作915,电子装置101可以使用第一时间段中的多条文本消息的分析结果来获取第一关键字。在操作920,电子装置101可以发送包括第一关键字的查询。在操作925,电子装置101可以接收第一关键字的分析结果并且可以使用第一关键字的分析结果来进行操作。图10a是示出根据本公开的各种示例实施例的电子装置101的示图,其中假设例如电子装置101显示图5a之后的图形用户界面。电子装置101可以将包括今日票房排行榜的图形用户界面1011显示为第一关键字“这个星期日、电影”的分析结果。例如,电子装置101可以发送包括第一关键字“这个星期日、电影”的查询,并且可以接收并显示关于今日票房排行榜的信息作为对该查询的响应。
在操作930,电子装置101可以在第二时间段获取多条文本消息。例如,可以基于根据关键字分析请求或关键字分析结果的操作来划分第一时间段和第二时间段。例如,如图10a所示,在显示与关键字分析结果相应的图形用户界面1011之后,电子装置101可以获取多条文本消息1012和1013。电子装置101可以在聊天应用运行屏幕1010上显示多条文本消息1012和1013。
在操作935,电子装置101可以使用第二时间段中的多条文本消息的分析结果来获取第二关键字。例如,电子装置101可以基于模板来获取第二关键字。电子装置101可以独立地从第二时间段中的多条文本消息中获取第二关键字,同时根据本公开的各种示例实施例的电子装置101可以基于第一时间段中的多条文本消息和第二时间段中的多条文本消息来获取第二关键字。电子装置101可以基于第一关键字和第二时间段中的多条文本消息来获取第二关键字。图10b是示出根据本公开的各种示例实施例的关键字的产生的示图。电子装置101可以基于根据模板1060的条目1061的信息1062来产生第二关键字。例如,电子装置101可以基于第一时间段中的文本消息来获取针对日期条目1065的信息1066“11月15日”和针对兴趣条目1069的信息1070“电影”。同时,电子装置101可以基于第二时间段中的文本消息来获取针对时间条目1063的信息1064“上午”、针对位置条目1067的信息1068“江南”以及针对兴趣条目1069的信息1070“指环王”和“预订”。电子装置101基于第二时间段中的文本消息的信息获取方法可以与在第一时间段中获取信息的方法相同,并且上面已经进行了描述,因此这里省略其重复描述。在图10b的示例实施例中,电子装置101可产生第二关键字“11月15日、上午、江南、电影、指环王、预订”。在另一示例实施例中,电子装置101可以基于第二时间段中的文本消息的分析结果来产生关键字“上午、江南、指环王、预订”,并且可以将所述关键字与第一时间段内的第一关键字“11月15日、电影”进行组合以产生第二关键字“11月15日、上午、江南、电影、指环王、预订”。
在操作940,电子装置101可以发送包括第二关键字的查询。在操作945,电子装置101可以接收第二关键字的分析结果,并且可以使用第二关键字的分析结果来进行操作。例如,电子装置101可以发送包括第二关键字“11月15日、上午、江南、电影、指环王、预订”的查询并且可以接收其分析结果。电子装置101可以显示包括接收到的分析结果的图形用户界面1071,例如,如图10c所示。例如,图形用户界面1071可以包括到电影预订网站的预订屏幕1072的超链接。
电子装置101还可以在第二时间段之后的第三时间段中获取多条文本消息1072和1073,并且可以显示多条获取的文本消息1072和1073。电子装置101可以对第三时间段中的文本消息1072和1073进行分析以产生第三关键字。例如,电子装置101可以使用第三时间段中的文本消息的分析结果来产生图10d中示出的关键字。参照图10d,电子装置101可以使用第三时间段中的文本消息1072和1073以及第一时间段和第二时间段中的文本消息来产生针对兴趣条目1069的第三关键字1076“11月15日、上午、江南、电影、指环王、预订了B1和B2”。当检测到与用于分析第三关键字的请求相应的图形用户界面1074的指定时,电子装置101可以发送包括第三关键字的查询。服务器(未示出)可以处理第三关键字以预订针对在11月15日上午江南分店的电影指环王的B1和B2,并且可以将预订结果作为响应发送到电子装置101。电子装置101可以显示接收到的响应,即,表示已完成预订的消息1075。
如上所述,根据本公开的各种示例实施例的电子装置101可以对在多个时间段中而不是在一个时间段中分别获取的多条文本消息进行分析,从而产生与各个时间段相应的多个关键字。当电子装置101产生与一个时间段相应的关键字时,电子装置101可以参考与不同于所述一个时间段的时间段相应的文本消息或关键字。
图11是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图。
在操作1110,电子装置101可以显示聊天应用运行屏幕。在操作1120,电子装置101可以显示分配给聊天应用的多个文本。例如,聊天应用运行屏幕可以被配置使得输入到电子装置101的文本消息和从另一电子装置接收的文本消息被显示在一个屏幕上。聊天应用被配置为将输入到电子装置101的文本消息布置在一侧并将从另一电子装置接收的文本消息布置在另一侧,从而允许用户容易地区分由用户输入的文本消息和由对方输入的文本消息。
在操作1130,电子装置101可以显示针对多个文本的分析请求图标。在操作1140,电子装置101可以检测针对多个文本的分析请求图标的指定。电子装置101可以显示针对文本的分析请求图标,并且可以在图标被指定时请求文本的分析。在另一示例实施例中,当输入请求分析文本的文本时,电子装置101可以显示输入文本并且可以请求文本的分析。
在操作1150,电子装置101可以通过分析多个文本来产生关键字。在操作1160,电子装置101可以发送关键字。在操作1170,电子装置101可以接收关键字的分析结果。在操作1180,电子装置101可以在聊天应用运行屏幕上显示关键字的分析结果。
图12a和图12b是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图。
在操作1210,电子装置101可以获取多条文本消息。在操作1215,电子装置101可以使用多条文本消息的分析结果来获取关键字。由于前面已经详细地描述了操作1210和操作1215,因此这里省略其重复描述。
在操作1220,电子装置101可以发送包括获取的关键字和接收器信息的查询。图13是根据本公开的各种示例实施例的电子装置的示图。如图13所示,电子装置101可以接收关于接收器的信息以对多条文本消息1311至1315进行分析并且可以显示输入信息1316。例如,用户可能想用“A电影院”来执行对多条文本消息的分析并且相应地可以输入包括接收器信息的文本消息作为信息1316。电子装置101可以在聊天应用屏幕1310上显示输入信息1316以供用户确认。
在操作1225,服务器106可以识别接收器信息。在操作1230,服务器106可以将包括关键字的查询发送到与接收器信息相应的接收器服务器1200。根据本公开的各种示例实施例的服务器106可以预先存储接收器信息的数据库,并且可以使用该数据库转发包括关键字的查询。服务器106可以存储数据库,在该数据库中来自电子装置101的语义形式的接收器信息被映射到接收器的标识符,并且服务器106相应地可以将各种形式的接收器信息映射到特定的接收器服务器。例如,甚至当以各种输入形式接收到由用户输入的接收器信息(例如,“A”、“A剧场”等,而不是“A电影院”)时,服务器106可以将接收器信息确定为“A电影院”并且可以将查询转发到“A电影院”的接收器服务器1200。
在操作1235,接收器服务器1200可以对包括在查询中的关键字进行分析。在操作1240,接收器服务器1200可以将包括关键字的分析结果的响应发送到服务器106。在本公开的各种示例实施例中,服务器106还可以将关于电子装置101的标识信息与查询一起发送到接收器服务器1200,在这种情况下,接收器服务器1200可以不经由服务器106将关键字的分析结果直接发送到电子装置101。
在操作1245,服务器106可以产生与关键字的分析结果相应的用户界面(UI)。在操作1250,服务器106可以将包括UI的响应发送到电子装置101。在本公开的各种示例实施例中,服务器106还可以将关键字的分析结果直接发送到电子装置101。
在操作1255,电子装置101可以显示包括在响应中的UI。在操作1260,电子装置101可以通过UI获取用户输入。在操作1265,电子装置101可以直接地或经由服务器106将与用户输入相应的命令发送到接收器服务器1200。在操作1270,接收器服务器1200可以与接收到的命令相应地进行操作。
图14是示出根据本公开的各种示例实施例的示例接收器服务器的示图。
在示例实施例中,电子装置101可以将接收器信息和关键字1401发送到服务器106。服务器106可以存储商店列表数据库1410作为接收器信息数据库的示例。商店列表数据库1410可以存储映射到商店的标识符的接收器信息,例如,与接收器相应的文本。例如,服务器106可以存储例如在表1中示出的商店列表数据库。
【表1】
文本 标识符
A、A电影院、A电影、A剧场 A电影院
B、B医院、B皮肤科诊所、B皮肤 B皮肤科诊所
C、C鞋、D服装店、D T恤、E太阳镜 F小型商业协会
如表1中所列,服务器106可以存储映射到标识符的语义文本。因此,当与例如“A电影”有关的接收器信息和关键字一起从电子装置101被接收到时,服务器106可以将包括关键字的查询发送到A电影院的接收器服务器。同时,小型商业主可能难以管理单独服务器,因此小型商业主可以联合管理小型商业集成服务器。
在本公开的各种示例实施例中,小型商业集成服务器1420可以包括预订管理服务器1421、客户账户服务器1422、商店账户服务器1423和按照商店的信息数据库1424等,但不限于此。当查询包括预订信息时,预订管理服务器1421可以执行预订。客户账户服务器1422可以管理用户账户。商店账户服务器1423可以管理商店管理者的账户。按照商店的信息数据库1424可以存储关于联锁商店的单独信息。
在本公开的各种示例实施例中,按照公司的服务器1430可以被配置为单独接收器服务器。按照公司的服务器1430可以包括预订管理服务器1431、客户账户服务器1432和按照商店的信息数据库1433等,但是不限于此。
小型商业集成服务器1420或按照公司的服务器1430可以分析或处理包括在查询中的关键字。此外,小型商业集成服务器1420或按照公司的服务器1430可将分析结果或处理结果发送到电子装置101。
图15是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图。
在操作1510,电子装置101可以获取多条文本消息。在操作1520,电子装置101可以对多条文本消息中的每一条文本消息执行自然语言分析。在操作1530,电子装置101可以获取另外的信息。例如,另外的信息可以指能够通过除获取文本消息的路径之外的路径所获取的全部信息。例如,电子装置101可以包括来自与用于获取文本消息的应用不同的另一应用的信息。
在操作1540,电子装置101可以使用自然语言分析结果、另外的信息和模板来产生关键字。在操作1550,电子装置101可以发送包括获取的关键字的查询。在操作1560,电子装置101可以接收关键字的分析结果。在操作1570,电子装置101可以使用关键字的分析结果进行操作。
在下文中,将参照16a至图16c更加详细地描述使用各条另外的信息关键字的产生。
图16a至16c是示出根据本公开的各种示例实施例的进一步使用另外的信息的关键字的示例产生的流程图。参照图17a至图17d更加详细地描述图16a至16c。图17a至图17d是示出根据本公开的各种示例实施例的进一步使用另外的信息的关键字的示例产生的示图。
参照图16a,在操作1610,电子装置101可以获取多条文本消息。在操作1620,电子装置101可以对多条文本消息中的每一条文本消息执行自然语言分析。例如,如图17a所示,电子装置101可以运行聊天应用以在显示器160上显示聊天应用运行屏幕1710。电子装置101可以显示多条获取的文本消息1711至1714。在本公开的各种示例实施例中,文本消息分析请求可以作为文本消息1714被输入。文本消息1714中的文本“@”可以被预设为指示接收器信息。
在操作1630,电子装置101可以获取用户日程信息作为另外的信息。例如,电子装置101可以从日程管理应用获取用户日程信息。电子装置101可以使用从日程管理应用接收到的用户日程信息来识别用户没有日程安排时的日期和时间。例如,电子装置101可以获取如图17b所示的指示用户没有日程安排时的日期和时间为11月20日、11月21日和11月22日上午10:00到11:00的信息。
如图16b所示,在操作1631,电子装置101可以获取用户位置信息作为另外的信息。例如,电子装置101可以从GPS管理应用获取用户位置信息。例如,电子装置101可以识别出用户的位置为首尔江南。电子装置101可以获取用户位置历史,并且可以识别出用户在没有日程安排的日期的位置为首尔江南,例如,如图17b所示。
在操作1640,电子装置101可以使用自然语言分析结果、用户日程信息和模板来产生关键字。可选地,在图16b的操作1641中,电子装置101可以使用自然语言分析结果、用户位置信息和模板来产生关键字。例如,如图17b所示,电子装置101可以获取针对模板1720中的条目1721的兴趣条目“去除粉刺、治疗粉刺”作为分析文本消息的结果。电子装置101可以使用另外的信息来获取针对条目1721的时间、日期和位置的信息1722。
在操作1650,电子装置101可以发送包括获取的关键字的查询。在操作1660,电子装置101可以接收关键字的分析结果。在操作1670,电子装置101可以使用关键字的分析结果进行操作。例如,如图17c所示,电子装置101可以接收并显示包括B皮肤科诊所的可用时间的关键字分析结果1715。关键字分析结果1715可以包括例如用于预订的超链接1716。
参照图16c,在操作1610,电子装置101可以获取多条文本消息。在操作1620,电子装置101可以对多条文本消息中的每一条文本消息执行自然语言分析。
在操作1632,电子装置101可以获取与自然语言分析结果相关联的历史。例如,假设电子装置101获取如图8b示出的关键字“11月15日、电影”作为自然语言分析结果。电子装置101可以获取指示用户从星期日上午11点到下午3点有空闲时间并且通常在首尔江南度过的历史作为与关键字“11月15日”相关联的历史。此外,电子装置101可以获取指示用户通常观看动作电影的电影预订历史作为与关键字“电影”相关联的历史。
在操作1642,电子装置101可以使用自然语言分析结果、获取的历史和模板来产生关键字。例如,如图17d所示,电子装置101可以获取信息1761“上午11点至下午3点”、信息865“11月15日”、信息1762“首尔江南”和信息1763“动作电影”分别作为针对时间条目863、日期条目864、位置条目866和兴趣条目867的历史。因此,电子装置101可以产生关键字“11月15日、上午11点至下午3点、首尔江南、电影、动作电影”。在操作1650,电子装置101可以发送包括获取的关键字的查询。在操作1660,电子装置101可以接收关键字的分析结果。在操作1670,电子装置101可以使用关键字的分析结果进行操作。
如上所述,根据本公开的各种示例实施例的电子装置101可以进一步使用除了文本分析结果之外的各条另外的信息(诸如,用户日程信息、用户位置信息或与文本分析结果相关联的历史)来产生关键字。
图18是示出根据本公开的各种示例实施例的在物联网(IoT)环境中的电子装置的操作的示图。
如图18所示,电子装置101可以与另一电子装置1820进行通信。在IoT环境中,电子装置101和另一电子装置1820可以被分配各自的各种格式(例如,Ipv4或Ipv6)的IP地址,并且可以使用各种类型的短距离通信(例如,蓝牙、蓝牙低功耗、Zig-bee、近场通信(NFC)和红外通信)和分配的IP地址来发送和接收数据。可选地,电子装置101可以在不使用IP地址的情况下基于各种通信方法向另一电子装置1820发送数据并从所述另一电子装置1820接收数据。
在本公开的各种示例实施例中,电子装置101可以包括麦克风以获取外部语音,并且可以包括短距离通信模块和蜂窝模块以与另一电子装置1820执行短距离通信。电子装置101可以通过麦克风来获取由人1801和1802发出的用户语音1811和1812。
电子装置101可以对用户语音1811和1812执行TTS处理以获取与用户语音1811和1812相应的多条文本消息。电子装置101可以将对无预设停顿地连续获取的用户语音进行转换的结果处理为一条文本消息。此外,电子装置101可以使用例如声纹来处理用户语音。例如,即使当两个用户1801和1802同时发出用户语音时,电子装置101也可以使用声纹来分别处理由各个用户1801和1802发出的用户语音1811和1812。例如,如图5a所示,用户1801和1802可以发出具有以下内容的用户语音1811和1812:“在这个星期日你做什么?”、“我没有特别的计划。”、“好的。看电影?”、“行。你想看什么电影?”、“嗯。现在正在上映什么电影?”。电子装置101可以对用户语音1811和1812执行TTS处理以获取如图5a所示的文本消息。当检测到关键字分析结果请求时,电子装置101可以通过蜂窝模块使用多条文本消息的分析结果来发送包括关键字的查询,并且可以获取关键字分析结果作为对查询的响应。
电子装置101可以通过短距离通信模块将关键字分析结果发送1825到另一电子装置1820。所述另一电子装置1820可显示从电子装置101接收的关键字分析结果1830。
在另一示例实施例中,电子装置101可以自主地执行关键字分析,并且可以将自主执行的关键字分析的结果发送1825到所述另一电子装置1820。
如上所述,电子装置101还可以执行将接收到的关键字分析结果发送到所述另一电子装置1820。
图19是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图。
在操作1910,电子装置101可以在第一时间段中获取多条语音。在操作1920,电子装置101可以对多条获取的语音进行转换以获取多条文本消息。在操作1930,电子装置101可以使用多条文本消息的分析结果来获取关键字。
在操作1940,电子装置101可以发送包括关键字的查询。在操作1950,电子装置101可以获取查询的分析结果。在操作1960,电子装置101可以输出分析结果或者可以将分析结果发送到另一可显示的电子装置。
图20是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图。将参照图21a和图21b更加详细地描述图20的示例实施例。图21a和图21b是示出根据本公开的各种示例实施例的处理来自单个用户的用户语音的示例处理的示图。
在操作2010,电子装置101可以在第一时间段中获取多条用户语音。例如,如图21a所示,电子装置101可以在第一时间段中的第一时间t1、第二时间t2和第三时间t3分别获取用户语音2101、2102和2103。用户语音2101、2102和2103可以由单个用户2100发出。同时,在图21中,电子装置101可以例如被配置为手表式可穿戴装置。
在操作2020,电子装置101可以对多条获取的语音进行转换以获取多条文本消息。当多条文本消息中包括预设文本(例如,@)时,电子装置101可以将该文本确定为文本消息分析请求。当检测到文本消息分析请求时,在操作2030,电子装置101可以使用多条文本消息的分析结果来获取关键字。在操作2040,电子装置101可以发送包括关键字的查询并且可以接收和显示关键字分析结果。例如,如图21b所示,电子装置101可以在显示器160上显示关键字分析结果2110。同时,当电子装置101被配置为手表型可穿戴装置时,电子装置101可以通过蜂窝模块来执行将查询直接发送到服务器(未示出)或者执行从服务器直接接收分析结果,或者可以通过短距离通信经由另一电子装置(例如,智能电话)来执行查询的发送或分析结果的接收。
图22是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图。
在操作2210,电子装置101可以获取至少一条用户语音。在操作2220,电子装置101可以对至少一条用户语音进行分析。在操作2230,电子装置101可以使用用户语音的分析结果来输出语音。例如,电子装置101可以预先存储聊天算法,并且可以可听地输出或可视地输出与用户语音的文本消息相应的文本。
例如,如图23所示,电子装置101可以对用户2300在第一时间t1发出的用户语音2301执行TTS处理,以获取文本“这个星期日我做什么?”。电子装置101可以被配置为例如机器人。电子装置101可以包括麦克风和扬声器。电子装置101可以预先存储能够将相关响应输出到用户输入文本的聊天算法。电子装置101可以获取响应“我早上有时间”作为将聊天算法应用于文本“在这个星期日我做什么?”的结果。电子装置101可以对将被作为语音2302输出或者通过显示器(未示出)以可视形式输出的响应“我早上有时间”执行TTS处理。例如,电子装置101可以参考用户日程信息来输出语音2302。
电子装置101还可以将聊天算法应用于在第二时间t2检测到的用户语音2303以输出响应2304。电子装置101可以在第一时间t1和第二时间t2获取多条文本消息。同时,电子装置101可以在第三时间t3获取包括文本消息分析请求和接收器信息的语音2305。
在操作2240,电子装置101可以将用户语音和输出语音转换成文本。电子装置101不仅可以获取从用户接收的文本消息,而且还可以获取由电子装置101输出的文本消息。在操作2250,电子装置101可以使用多个转换的文本来获取关键字。电子装置101可以使用从用户接收的文本消息和由电子装置101输出的文本消息两者来产生关键字。电子装置101可以通过使用由电子装置101输出的文本消息2302来获取关键字“星期日、上午、电影”而不是关键字“星期日、电影”。
在操作2260,电子装置101可以发送包括关键字的查询。在操作2270,电子装置101可以接收查询分析结果。在操作2280,电子装置101可以使用查询分析结果进行操作。例如,如图23所示,电子装置101可以输出包括查询分析结果的语音2306。
图24是示出根据本公开的各种示例实施例的操作电子装置的示例方法的流程图。
在操作2410,电子装置101可以获取多条文本消息。在操作2420,电子装置101可以对多条文本消息进行分析以获取与多条文本消息相应的关键字。电子装置101获取与多条文本消息相应的关键字的过程已经进行了详细地描述,因此这里省略其重复描述。
在操作2430,电子装置101可以执行与关键字相应的操作。例如,电子装置101可以发送包括与关键字相应的关键字的查询。可选地,电子装置101可以设置预设操作,所述预设操作在网络浏览应用中输入关键字并显示来自网络浏览应用的关键字处理结果。电子装置101可以预先存储与该关键字相应的命令,并且可以执行该命令或者可以将该命令发送到另一电子装置。例如,根据本公开的各种示例实施例的电子装置101不仅可以接收与多条文本消息相应的关键字的分析结果,而且还可以自主地执行与关键字相应的操作。
图25a至25c是示出根据本公开的各种示例实施例的电子装置调用室内IoT装置并与之通信的示例情况的示图。为了便于描述,IoT装置被示为冰箱,但不限于此。
图25a示出了电子装置101、IoT装置2525、第一服务器2521和第二服务器2523。
IoT装置2525可以是例如安装在室内的冰箱。第一服务器2521可以是例如购物中心服务器,但不限于此。第二服务器2523可以是例如管理室内IoT装置的服务器,但不限于此。
电子装置101可以在显示器160上显示在电子装置中运行的聊天应用的运行屏幕2503。电子装置101可以在运行屏幕上显示通过通信单元从另一电子装置接收的多条文本消息以及通过电子装置的输入单元输入的多条文本消息。例如,当用户A在电子装置101中运行聊天应用时,可以在屏幕2503上显示在用户A和用户B之间交换的消息2505、2506和2507。用户A可以通过电子装置的输入单元来输入文本消息2505和2507。用户B可以通过另一电子装置输入文本消息2506,并且所述另一电子装置可以将输入文本消息发送到电子装置。电子装置101可以在屏幕2503上显示接收到的文本消息2506。
电子装置101可以基于显示在屏幕上的多条消息来确定外部装置以为用户A提供信息。
电子装置101可以通过聊天应用来获取多条文本消息2505、2506和2507。电子装置101可以从多条文本消息2505、2506和2507提取关键字,并且可以基于提取的关键字提供来自外部装置的信息。电子装置101可以向外部装置发送数据和从外部装置接收数据,以便被从外部装置提供信息。电子装置101从文本消息提取关键字并在屏幕上布置和显示文本消息的方法已经在图4至图10中进行了描述,因此省略其详细的重复描述。
外部装置可以是第一服务器2521、第二服务器2523或冰箱2525。
例如,当用户A询问用户B“你晚餐要吃什么”2505并且用户B回答“披萨”2506时,电子装置101可以从词语“晚餐”、“吃”和“披萨”确定两个人正在谈论食物,并且可以在安装在室内的IoT装置中检索食物相关的装置。
电子装置可以从确定的外部装置接收信息。食物相关装置可以是例如冰箱或微波炉(MWO)。当用户A输入消息“冰箱中有食材吗?”时,电子装置101可以从消息中提取关键字“冰箱”和“食材”,并且可以检查存储在冰箱中的食材的清单。例如,电子装置101可以基于从多条文本消息2505、2506和2507提取的词语(关键字)来检索外部装置以发送数据和接收数据,并且可以将数据发送到检索到的外部装置并从检索到的外部装置接收数据。例如,数据可以是用于控制外部装置的命令或将提供给外部装置的数据。
电子装置101可以基于文本消息2507来请求来自冰箱2525的食材的清单,并且可以在屏幕上显示与请求相关的消息2508。电子装置101可以从冰箱2525接收“食材的清单”并且可以在正运行应用的屏幕2503上显示接收的食材的清单。这里,多条文本消息2505、2506和2507以及从冰箱接收的信息2508可以按时间顺序排列并被显示在运行屏幕上。
电子装置101可以在文本消息2508内显示UI元素2509,以提供关于冰箱2525中的食材的清单的信息。UI元素2509可以是按钮。UI元素可以接收用户输入。
当用户A选择按钮2509时,可以在屏幕上显示冰箱中的食材的清单。食材的清单可以被显示在文本消息2508内或者被显示在单独的弹出窗口上,但不限于此。例如,可以通过语音指示来提供食材的清单。
在示例实施例中,电子装置101可以通过第二服务器2523接收冰箱2525中的食材的清单。第二服务器2523可以是管理室内IoT装置的服务器,第二服务器2523可以以数据库形式管理关于室内IoT装置的状态和状况,并且可以将关于室内IoT装置的数据发送到包括电子装置101的另一装置。
参照图25b,电子装置101可以根据选择图25a中示出的按钮2509的用户输入在屏幕上显示食材的清单2531。在食材的清单2531的屏幕上,可以显示食材图像2532、2534、2536和2538以及食材的名称和保质期。
可以通过安装在冰箱上的相机或通过第一服务器(购物中心服务器)2521来获取食材图像2532、2534、2536和2538。可以通过第一服务器2521来获取食材的名称和保质期。
电子装置101可以基于文本消息来检查将要另外购买的食材的清单,并且可以向用户提供食材的清单。
参照图25c,电子装置可以在屏幕上显示将要购买的新食材的清单2551。电子装置101可以从图25a中的文本消息2506提取关键字“披萨”并且可以通过第一服务器来检索关于“披萨”的食谱。电子装置101可以基于检索结果对关于“披萨”的必需食材和冰箱中的食材的清单进行比较,并且可以产生将要购买的新食材的清单2551。
将要购买的新食材的清单2551可以包括食材图像2552、2554和2556以及食材的名称和价格。电子装置101可以通过用户确认将关于包括在将要购买的新食材的清单2551中的食材的信息发送到第一服务器(购物中心服务器)2521。例如,电子装置101可以通过用户确认来订购将要购买的新食材。
在示例实施例中,电子装置101可以在没有用户确认的情况下通过参考将要购买的新食材的清单2551来自动订购食材。
在本公开的各种示例实施例中,一种操作电子装置的方法可以包括:获取多条文本消息;通过对所述多条文本消息中的每一条文本消息进行分析来获取与所述多条文本消息相应的关键字;将包括关键字的查询发送到外部装置;并在接收到关键字的分析结果后,执行与关键字的分析结果相应的操作。
在本公开的各种示例实施例中,所述方法还可以包括:获取关于执行关键字分析的接收器的接收器信息,其中,发送查询的步骤发送包括关键字和接收器信息的查询,并且关键字分析是由与接收器信息相应的电子装置执行的。
在本公开的各种示例实施例中,获取关键字的步骤可以包括:对所述多条文本消息中的每一条文本消息进行自然语言处理;并且使用所述多条文本消息中的每一条文本消息的自然语言处理结果来产生关键字。
在本公开的各种示例实施例中,使用所述多条文本消息中的每一条文本消息的自然语言处理结果来产生关键字的步骤可以包括:将预设模板与自然语言处理结果进行比较;并基于比较结果来产生关键字。
在本公开的各种示例实施例中,使用所述多条文本消息中的每一条文本消息的自然语言处理结果来产生关键字的步骤可以包括:将机器学习算法或深度学习算法应用于自然语言处理结果;基于应用结果来确定所述多条文本消息中的每一条文本消息的意图;以及基于所述多条文本消息中的每一条文本消息的意图来产生关键字。
在本公开的各种示例实施例中,获取所述多条文本消息的步骤可以包括:在第一时间段获取多条第一文本消息;并在第二时间段获取多条第二文本信息。
在本公开的各个示例实施例中,获取关键字的步骤可以包括:产生与所述多条第一文本消息相应的第一关键字;以及产生与所述多条第二文本消息相应的第二关键字。
在本公开的各种示例实施例中,产生第二关键字的步骤可以包括使用第一关键字和所述多条第一文本消息中的至少一个以及所述多条第二文本消息的分析结果来产生第二关键字。
在本公开的各种示例实施例中,所述方法还可以包括获取另外的信息,其中,获取关键字的步骤可以包括使用所述多条文本消息的分析结果和另外的信息来产生关键字。
在本公开的各种示例实施例中,获取另外的信息的步骤可以包括获取与所述多条文本消息的分析结果相关联的另外的信息,或者可以从所述多条文本消息中获取单独的另外的信息。
在本公开的各种示例实施例中,获取所述多条文本消息的步骤可以包括:获取多条用户语音;以及通过对所述多条用户语音进行转换来获取所述多条文本消息。
在本公开的各种示例实施例中,一种操作电子装置的方法可以包括:显示在电子装置中运行的聊天应用的运行屏幕;在聊天应用的运行屏幕上显示输入到电子装置的或从另一电子装置接收的多条文本消息;接收针对所述多条文本消息的分析请求;根据分析请求来发送与所述多条文本消息相应的关键字;并且接收关键字的分析结果并且在聊天应用的运行屏幕上显示接收到的关键字的分析结果。
在本公开的各种示例实施例中,一种操作电子装置的方法可以包括:获取多条文本消息;通过对所述多条文本消息中的每一条文本消息进行分析来获取与所述多条文本消息相应的关键字;并执行与关键字相应的操作。
根据本公开的电子装置的每个组件可以由一个或更多个组件实现,并且相应组件的名称可以根据电子装置的类型而变化。在各种示例实施例中,检测设备可以包括上述元件中的至少一个。一些上述元件可以从电子装置中省略,或者检测装置还可以包括另外的元件。此外,根据本公开的各种示例实施例的电子装置的一些组件可以被组合以形成单个实体,并且因此可以等效地执行相应元件在组合之前的功能。
这里使用的术语“模块”例如可以指包括硬件(例如,电路)、软件和固件或者它们中的两个或更多个的组合中的一个的单元。“模块”可以与例如术语“单元”、“逻辑”、“逻辑块”、“组件”或“电路”互换使用。“模块”可以是集成组件或其一部分的最小单元。“模块”可以是执行一个或更多个功能或其一部分功能的最小单元。“模块”可以被机械地或电子地实现。例如,根据本公开的“模块”可以包括已知的或以后将要开发的用于执行操作的处理电路、专用集成电路(ASIC)芯片、现场可编程门阵列(FPGA)和可编程逻辑器件中的至少一个。
根据各种示例实施例,根据本公开的装置(例如,该装置的模块或功能)或方法(例如,操作)中的至少一些可以通过以编程模块形式存储在计算机可读存储介质中的命令来实现。当命令由一个或更多个处理器(例如,处理器120)执行时,一个或更多个处理器可以执行与该命令相应的功能。计算机可读存储介质可以例如是存储器130。
计算机可读记录介质可以包括硬盘、软盘、磁性介质(例如,磁带)、光学介质(例如,光盘只读存储器(CD-ROM)和数字通用光盘(DVD))、磁光介质(例如,软光盘)、硬件装置(例如,只读存储器(ROM)、随机存取存储器(RAM)、闪存)等。此外,程序指令可以包括能够通过使用解释器在计算机中运行的高级语言代码以及由编译器产生的机器代码。前述硬件装置可以被配置为作为一个或更多个软件模块进行操作以便执行本公开的操作,反之亦然。
根据本公开的编程模块可以包括一个或更多个前述组件,或者可以进一步包括其他另外的组件,或者可以省略一些前述组件。根据本公开的各种示例实施例的由模块、编程模块或其他组成元件执行的操作可以顺序地、并行地、重复地或者以启发方式被执行。此外,一些操作可以根据另一顺序被执行或者可以被省略,或者可以添加其他操作。
根据本公开的各种示例实施例,一种存储介质存储命令,其中所述命令被设置用于至少一个处理器以在由所述至少一个处理器运行时执行至少一个操作,并且所述至少一个操作可以包括:获取多条文本消息;通过对所述多条文本消息中的每条文本消息进行分析来获取与所述多条文本消息相应的关键字;发送包括关键字的查询;并在接收到关键字的分析结果后,执行与关键字的分析结果相应的操作。
提供本文公开的各种示例实施例仅用于容易地描述本公开的技术细节并且帮助理解本公开,并且不旨在限制本公开的范围。因此,应该理解,基于本公开的技术构思的全部修改和变化或修改和变化的形式全部落入本公开的范围内。

Claims (13)

1.一种操作电子装置的方法,包括:
与管理多个室内IoT装置的第一服务器建立连接;
获取多条第一文本消息,其中,所述多条第一文本消息包括由所述电子装置的用户输入的第一类文本消息和由所述电子装置从另一电子装置接收的第二类文本消息,其中,所述多条第一文本消息显示在运行在所述电子装置上的消息应用的执行屏幕中;
通过对所述多条第一文本消息中的每一条第一文本消息进行分析来获取至少一个第一关键字;
基于所述至少一个第一关键字识别对从所述多个室内IoT装置中选择的第一装置的第一查询;
获取与所述多条第一文本消息不同的至少一条第二文本消息;
通过对所述至少一条第二文本消息中的每一条第二文本消息进行分析来获取至少一个第二关键字;
基于所述至少一个第二关键字识别用于搜索包括在第一装置中的条目的第二查询;
向第一服务器发送包括第一查询和第二查询的查询;
从第一服务器接收响应于所述查询的关于包括在第一装置中的所述条目的信息;
将所述信息发送到与第一服务器不同的第二服务器;
从第二服务器接收包括与所述条目相关的图像的数据;
在所述消息应用的执行屏幕中显示用于提供所述信息和所述数据的UI元素;
响应于接收到对所述UI元素的用户输入,显示包括所述信息和所述数据的图形用户界面来代替所述消息应用的执行屏幕。
2.如权利要求1所述的方法,还包括:获取关于执行关键字分析的接收器的接收器信息,其中,发送所述查询的步骤包括发送包括所述接收器信息的查询。
3.如权利要求1所述的方法,其中,获取所述至少一个第一关键字的步骤包括:
对所述多条第一文本消息中的每一条第一文本消息执行自然语言处理;并且
使用所述多条第一文本消息中的每一条第一文本消息的自然语言处理结果来产生所述至少一个第一关键字。
4.如权利要求3所述的方法,其中,使用所述多条第一文本消息中的每一条第一文本消息的自然语言处理结果来产生所述至少一个第一关键字的步骤包括:
将预设模板与自然语言处理结果进行比较;
基于比较结果来产生所述至少一个第一关键字。
5.如权利要求3所述的方法,其中,使用所述多条第一文本消息中的每一条第一文本消息的自然语言处理结果来产生所述至少一个第一关键字的步骤包括:
将机器学习算法和深度学习算法中的一个应用于自然语言处理结果;
基于应用机器学习算法和深度学习算法中的一个的结果来确定所述多条第一文本消息中的每一条第一文本消息的意图;
基于所述多条第一文本消息中的每一条第一文本消息的意图来产生所述至少一个第一关键字。
6.如权利要求1所述的方法,其中,产生所述至少一个第二关键字的步骤包括:
使用所述第一关键字和所述多条第一文本消息中的至少一个以及多条第二文本消息的分析结果来产生所述至少一个第二关键字。
7.如权利要求1所述的方法,还包括获取另外的信息,其中,获取所述至少一个第一关键字的步骤包括使用所述多条第一文本消息的分析结果和所述另外的信息来产生所述至少一个第一关键字。
8.如权利要求7所述的方法,其中,获取另外的信息的步骤包括获取与所述多条第一文本消息的分析结果相关联的另外的信息或者从所述多条第一文本消息获取单独的另外的信息。
9.如权利要求1所述的方法,其中,获取所述多条第一文本消息的步骤包括:
获取多条用户语音;并且
通过将所述多条用户语音转换为文本来获取所述多条第一文本消息。
10.一种电子装置,包括:
显示器;
通信模块,包括通信电路;
处理器,包括被电连接到显示器和通信模块的通信电路的处理电路;
存储器,被电连接到处理器,
其中,存储器存储用于处理器的指令,当由处理器的处理电路运行所述指令时,所述指令使处理器执行包括以下操作的操作:
与管理多个室内IoT装置的第一服务器建立连接;
获取多条第一文本消息,其中,所述多条第一文本消息包括由所述电子装置的用户输入的第一类文本消息和由所述电子装置从另一电子装置接收的第二类文本消息,其中,所述多条第一文本消息显示在运行在所述电子装置的显示器上的消息应用的执行屏幕中;
通过对所述多条第一文本消息中的每一条第一文本消息进行分析来获取至少一个第一关键字;
基于所述至少一个第一关键字识别对从所述多个室内IoT装置中选择的第一装置的第一查询;
获取与所述多条第一文本消息不同的至少一条第二文本消息;
通过对所述至少一条第二文本消息中的每一条第二文本消息进行分析来获取至少一个第二关键字;
基于所述至少一个第二关键字识别用于搜索包括在第一装置中的条目的第二查询;
使用通信模块的通信电路向第一服务器发送包括第一查询和第二查询的查询;
从第一服务器接收响应于所述查询的关于包括在第一装置中的所述条目的信息;
将所述信息发送到与第一服务器不同的第二服务器;
从第二服务器接收包括与所述条目相关的图像的数据;
通过显示器在所述消息应用的执行屏幕中显示用于提供所述信息和所述数据的UI元素;
响应于接收到对所述UI元素的用户输入,通过显示器显示包括所述信息和所述数据的图形用户界面来代替所述消息应用的执行屏幕。
11.如权利要求10所述的电子装置,其中,存储器存储用于处理器的指令,当由处理电路运行所述指令时,所述指令使处理器还执行包括以下操作的操作:
获取关于执行关键字分析的接收器的接收器信息,并且使用通信模块的通信电路来发送包括所述接收器信息的查询。
12.如权利要求10所述的电子装置,其中,存储器存储用于处理器的指令,当由处理电路运行所述指令时,所述指令使处理器还执行包括以下操作的操作:
对所述多条第一文本消息中的每一条第一文本消息执行自然语言处理并且使用所述多条第一文本消息中的每一条第一文本消息的自然语言处理结果来产生所述至少一个第一关键字。
13.如权利要求12所述的电子装置,其中,存储器存储用于处理器的指令,当由处理电路运行所述指令时,所述指令使处理器还执行包括以下操作的操作:
将预设模板与自然语言处理结果进行比较并且基于比较结果来产生所述至少一个第一关键字。
CN201680064363.9A 2015-11-24 2016-11-22 电子装置及其操作方法 Active CN108351890B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
KR10-2015-0165070 2015-11-24
KR20150165070 2015-11-24
KR1020160107179A KR20170060567A (ko) 2015-11-24 2016-08-23 전자 장치 및 그 제어 방법
KR10-2016-0107179 2016-08-23
PCT/KR2016/013471 WO2017090954A1 (en) 2015-11-24 2016-11-22 Electronic device and operating method thereof

Publications (2)

Publication Number Publication Date
CN108351890A CN108351890A (zh) 2018-07-31
CN108351890B true CN108351890B (zh) 2022-04-12

Family

ID=58720901

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680064363.9A Active CN108351890B (zh) 2015-11-24 2016-11-22 电子装置及其操作方法

Country Status (3)

Country Link
US (1) US20170147919A1 (zh)
CN (1) CN108351890B (zh)
WO (1) WO2017090954A1 (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10680980B2 (en) * 2016-05-10 2020-06-09 Cisco Technology, Inc. Interactive contextual emojis
US11593668B2 (en) 2016-12-27 2023-02-28 Motorola Solutions, Inc. System and method for varying verbosity of response in a group communication using artificial intelligence
US9961516B1 (en) * 2016-12-27 2018-05-01 Motorola Solutions, Inc. System and method for obtaining supplemental information in group communication using artificial intelligence
US10051442B2 (en) * 2016-12-27 2018-08-14 Motorola Solutions, Inc. System and method for determining timing of response in a group communication using artificial intelligence
KR102369559B1 (ko) * 2017-04-24 2022-03-03 엘지전자 주식회사 단말기
TWI656448B (zh) * 2017-11-01 2019-04-11 中華電信股份有限公司 主題提供裝置及其雲儲存檔案提示方法
US20190149959A1 (en) 2017-11-16 2019-05-16 Motorola Solutions, Inc Method for controlling a virtual talk group memeber to perform an assignment
KR102479499B1 (ko) * 2017-11-22 2022-12-21 엘지전자 주식회사 이동 단말기
CN109471922A (zh) * 2018-09-29 2019-03-15 平安科技(深圳)有限公司 基于深度学习模型的案件类型识别方法、装置、设备及介质
KR20200121611A (ko) 2019-04-16 2020-10-26 삼성전자주식회사 서버 및 그 제어 방법
US11170175B1 (en) 2019-07-01 2021-11-09 Intuit, Inc. Generating replacement sentences for a particular sentiment
US11734322B2 (en) * 2019-11-18 2023-08-22 Intuit, Inc. Enhanced intent matching using keyword-based word mover's distance
CN111611390B (zh) * 2020-06-11 2023-11-17 支付宝(杭州)信息技术有限公司 一种数据处理方法及装置
US20210398543A1 (en) * 2020-06-18 2021-12-23 Motorola Solutions, Inc. System and method for digital assistant receiving intent input from a secondary user
KR20230050807A (ko) 2021-10-08 2023-04-17 삼성전자주식회사 전자 장치 및 이의 제어 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102750270A (zh) * 2011-03-31 2012-10-24 微软公司 扩充的对话理解代理
CN104951428A (zh) * 2014-03-26 2015-09-30 阿里巴巴集团控股有限公司 用户意图识别方法及装置
CN104951433A (zh) * 2015-06-24 2015-09-30 北京京东尚科信息技术有限公司 基于上下文进行意图识别的方法和系统

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7640160B2 (en) * 2005-08-05 2009-12-29 Voicebox Technologies, Inc. Systems and methods for responding to natural language speech utterance
US7949529B2 (en) * 2005-08-29 2011-05-24 Voicebox Technologies, Inc. Mobile systems and methods of supporting natural language human-machine interactions
US9318108B2 (en) * 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8849931B2 (en) * 2011-03-15 2014-09-30 Idt Messaging, Llc Linking context-based information to text messages
US20130174058A1 (en) * 2012-01-04 2013-07-04 Sprylogics International Corp. System and Method to Automatically Aggregate and Extract Key Concepts Within a Conversation by Semantically Identifying Key Topics
US9282066B2 (en) * 2013-07-18 2016-03-08 International Business Machines Corporation Targeted message response

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102750270A (zh) * 2011-03-31 2012-10-24 微软公司 扩充的对话理解代理
CN104951428A (zh) * 2014-03-26 2015-09-30 阿里巴巴集团控股有限公司 用户意图识别方法及装置
CN104951433A (zh) * 2015-06-24 2015-09-30 北京京东尚科信息技术有限公司 基于上下文进行意图识别的方法和系统

Also Published As

Publication number Publication date
CN108351890A (zh) 2018-07-31
US20170147919A1 (en) 2017-05-25
WO2017090954A1 (en) 2017-06-01

Similar Documents

Publication Publication Date Title
CN108351890B (zh) 电子装置及其操作方法
EP3567584B1 (en) Electronic apparatus and method for operating same
CN110199350B (zh) 用于感测语音结束的方法和实现该方法的电子设备
US11636861B2 (en) Electronic device and method of operation thereof
CN107637025B (zh) 用于输出消息的电子装置及其控制方法
US10217349B2 (en) Electronic device and method for controlling the electronic device
KR102481687B1 (ko) 업무 정보 처리 방법 및 이를 지원하는 전자 장치
US20180143802A1 (en) Method for processing various inputs, and electronic device and server for the same
KR102635945B1 (ko) 일정 관리 방법 및 이를 위한 전자 장치
KR102383791B1 (ko) 전자 장치에서의 개인 비서 서비스 제공
KR20170077714A (ko) 어플리케이션 실행 방법 및 이를 지원하는 전자 장치
US10034151B2 (en) Method for providing point of interest and electronic device thereof
US10713445B2 (en) Method for providing translation service, and electronic device therefor
KR20180109465A (ko) 전자 장치 및 이를 이용한 사용자 입력을 처리하기 위한 화면 제어 방법
US20200099785A1 (en) Electronic apparatus for providing voice recognition control and operating method therefor
US20180239754A1 (en) Electronic device and method of providing information thereof
KR20190018886A (ko) 음성 인식을 수행하는 방법 및 이를 사용하는 전자 장치
KR20180101926A (ko) 전자 장치 및 전자 장치의 어플리케이션 제어 방법
KR20170060567A (ko) 전자 장치 및 그 제어 방법
KR102323797B1 (ko) 전자 장치 및 그의 정보 공유 방법
US10810058B2 (en) Method for providing content to user according to user's preference and electronic device therefor
US20170024442A1 (en) Electronic device and method of acquiring user information in electronic device
EP3157002A1 (en) Electronic device and method for transforming text to speech utilizing super-clustered common acoustic data set for multi-lingual/speaker
KR102486575B1 (ko) 사용자 맞춤형 건강식품 추천 장치 및 방법
EP3407671B1 (en) Method and electronic device for network connection

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant