CN105426035A - 用于提供信息的方法和电子装置 - Google Patents

用于提供信息的方法和电子装置 Download PDF

Info

Publication number
CN105426035A
CN105426035A CN201510587545.1A CN201510587545A CN105426035A CN 105426035 A CN105426035 A CN 105426035A CN 201510587545 A CN201510587545 A CN 201510587545A CN 105426035 A CN105426035 A CN 105426035A
Authority
CN
China
Prior art keywords
information
item
present disclosure
main
electronic installation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510587545.1A
Other languages
English (en)
Other versions
CN105426035B (zh
Inventor
郑镇会
黄珉敬
曹圭星
曹益焕
朴志贤
全镛俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN105426035A publication Critical patent/CN105426035A/zh
Application granted granted Critical
Publication of CN105426035B publication Critical patent/CN105426035B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
    • G06Q20/32—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using wireless devices
    • G06Q20/327—Short range or proximity payments by means of M-devices
    • G06Q20/3276—Short range or proximity payments by means of M-devices using a pictured code, e.g. barcode or QR-code, being read by the M-device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Strategic Management (AREA)
  • Human Computer Interaction (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

根据本公开的实施例，由电子装置提供的信息的方法包括：从在所述电子装置的屏幕上显示的图像中识别至少一个对象，显示与识别出的对象相关联的至少一个主信息项，并且当选择了所述至少一个主信息项中的至少一个时，在屏幕上显示与所选择的主信息项相关联的次信息项。本文还提供了其他各种实施例。

Description

用于提供信息的方法和电子装置
技术领域
本公开的实施例针对用于提供信息的方法和电子装置。
背景技术
增强现实(Augmentedreality，AR)是其元素由计算机生成的感官输出，如声音、视频、图形、或GPS数据增强(或补充)的物理的真实世界环境的实时直接或间接的观看。它涉及到称为介导现实(mediatedreality)的更一般的概念，其中对现实的观看被计算机修改(可能甚至是减弱而非增强)。其结果是，该技术通过增强人们对现实的当前感知起作用。
智能电话、平板电脑、可穿戴设备、或者其它移动装置采用各种AR技术设备提供多样性服务。
根据常规的AR相关技术中，用户需要预先选择将被识别的目标对象或将要接收的与上述对象相关联的信息(例如，服务)。这意味着，当选择信息的时候，用户应该知道从其将获得识别结果的信息，所述信息是在识别出的对象不提供信息的类型的情况下通过个别地改变信息来确定的。
上述信息作为背景信息介绍，仅为帮助对本公开的理解。关于是否上述任何信息可能适用关于本公开的现有技术，并没有做出任何判定，也没有任何断言。
发明内容
根据本公开的实施例，可以提供与从在电子装置上显示的图像中识别出的对象相关联的信息，从而使得能够多维地和逐阶段地提供关于该识别出的对象的信息。
根据本公开的实施例，电子装置可以包括在屏幕上显示图像的显示器，以及被配置为从电子装置的屏幕上显示的图像中识别至少一个对象的控制器。电子装置还可以显示与识别出的对象相关联的至少一个主信息项，并且当选择至少一个主信息项中的至少一个时，在屏幕上显示与所选择的主信息项相关联的次信息项。
根据本公开的实施例，通过电子装置提供信息的方法可以包括：从在电子装置的屏幕上显示的图像中识别至少一个对象，显示与识别出的对象相关联的至少一个主信息项，以及当选择了至少一个主信息项中的至少一个时，在屏幕上显示与所选择的主信息项相关联的次信息项。
从下面结合附图公开了本公开的示例性实施例的详细描述中，本公开的其他方面、优点和显著特征对于本领域的技术人员将变得明显。
附图说明
当结合附图考虑时，参考下面的详细描述，本公开的更完整的理解及其许多附带的方面将更好理解而被更容易地掌握，附图中：
图1是示出根据本公开实施例的网络结构的视图；
图2是示出根据本公开的实施例的电子装置的示例性结构的框图；
图3是示出根据本公开的实施例的由电子装置提供信息的过程的流程图；
图4是示出根据本公开的实施例的由电子装置提供的信息的分层结构的视图；
图5是示出根据本公开的实施例的、由电子装置识别出与对象相关联的信息的例子的视图；
图6是示出根据本公开的实施例的逐阶段移位提供的信息项的视图；
图7是示出根据本公开的实施例的逐阶段移位提供的信息项的视图；
图8是示出根据本公开的实施例的逐阶段移位提供的信息项的视图；
图9是示出根据本公开的实施例的、与识别出的对象相关联的显示信息的例子的视图；
图10是示出根据本公开的实施例的、与识别出的对象相关联的显示信息的例子的视图；
图11是示出根据本公开的实施例的、根据与识别出的对象相关联的信息的选择提供信息的例子的视图；
图12是示出根据本公开的实施例的、根据与识别出的对象相关联的信息的选择提供信息的例子的视图；
图13是示出根据本公开的实施例的、显示与识别出的文本相关联的信息的例子的视图；
图14是示出根据本公开的实施例的、显示与识别出的文本相关联的信息的例子的视图；
图15是示出根据本公开的实施例的、显示关于多个识别出的对象的相关联的信息的例子的视图；
图16是示出根据本公开的实施例的、显示关于识别出的文档表格的相关联的信息的例子的视图；
图17是示出根据本公开的实施例的、显示与多个识别出的对象的组合相关联的信息的例子的视图；
图18是示出从多个目标中识别多个对象的例子的视图；
图19示出根据本公开的实施例的、显示与多个识别出的对象的组合相关联的信息的例子的视图；以及
图20是示出根据本公开的实施例的电子装置的配置的框图。
在整个附图中，相同的标号将被理解为指代相同的部分、部件和结构。
具体实施例
以下参照附图对本公开的实施例进行详细说明。可以对本公开做出各种改变，并且本公开可能会伴有多种实施例。结合附图示出和说明了本公开的一些实施例。然而，应当理解的是，本公开不限于这些实施例，并且其所有的改变和/或等同物或替代物也属于本公开的范围。在整个说明书和附图中，相同或相似的参考标号用于指代相同或相似的部件。
本文所用的术语“包括”和/或“包括有”指定所公开的功能、操作或部件的存在，但不排除存在或附加一个或多个其它功能、操作或部件。将进一步理解，在本说明书中使用术语“包括”和/或“具有”时，指定所陈述的特征、整数、步骤、操作、元件和/或部件的存在，但并不排除存在或添加一个或多个其它特征、整数、步骤、操作、元件、部件和/或它们的组。
如本文所使用的，术语“和/或”包括相关联的所列项目一个或多个的任意和所有的组合。举例来说，“A和/或B”可以包括A，或包括B，或包括A和B两个。
如本文所使用的序数，诸如“第一”、“第二”等，可以修饰多个实施例的各种部件，但不限制那些部件。例如，这些术语不限制部件的顺序和/或重要性。这些术语仅用来区分不同的部件。例如，第一用户装置和第二用户装置是彼此不同的用户装置。例如，第一部件可以称为第二部件，反之亦然，而不脱离本公开的范围。
当部件“连接到”或“耦接到”另一部件时，该部件可以是直接连接或耦接到其他部件，或者其它部件(多个)可以介入其间。相反，当元件“直接连接到”或“直接耦接到”另一部件时，没有其他中间部件可以介入其间。
提供如本文所使用的术语仅仅是为了描述一些实施例，而不是限制本公开。应当理解，单数形式“一”、“一个”和“该”包括复数形式，除非上下文另有明确规定。
除非另有定义，否则本文所使用的包括技术和科学术语的所有术语具有由本公开的实施例属于领域的普通技术人员所通常理解的相同的含义。将进一步理解，诸如在常用词典中定义的术语应解释为具有与它们在相关领域的上下文的含义一致的含义，并且不会被理想化或过于正式的解释，除非这里明确地如此定义。如本文所使用的，术语“信息”或“信息项”可以出于描述的目的互换使用，而不脱离本公开的范围。
根据本公开的实施例，本文所公开的是用于提供与从电子装置上显示的图像中识别出的对象相关联的信息的方法和电子装置。
根据本公开的实施例，可以在屏幕上显示与识别出的对象相关联的至少一个主信息项(例如，信息的类型)以及对应于所选择的主信息项的次信息项(例如，相关联的信息或详细信息)。例如，根据本公开的实施例，与识别出的对象相关联的信息项可以分层次或分阶段地显示以提供各种有效的用户体验。
根据本公开的实施例，从电子装置屏幕上显示的图像中识别出的对象实例可以包括，但不限于，广告图像、公司标志、人脸、人体、人体的一部分、人携带的物品、人穿戴的物品、建筑物、建筑物的一部分、树、固定于背景的物品、可动的物体、文本、纹理、手势、或任何图像中可识别的物体。
根据本公开的实施例，可提供的与识别出的对象相关联的信息类型可以包括，但不限于，优惠券、事件、电子地图、词典搜索、电子邮件、复制、呼叫、短消息服务、网页、导航、或任何其他类型的信息。
根据本公开的实施例，电子装置可以包括显示功能，但并不限于此。电子装置的实例可以包括，但不限于，智能电话、平板电脑、移动电话、可视电话、电子书阅读器、台式PC(个人计算机)、膝上型计算机、上网本计算机、PDA(个人数字助理)、PMP(便携式多媒体播放器)、MP3播放器、移动医疗设备、照相机、或可穿戴设备(例如，头戴式设备(HMDS)、电子服装、电子手镯、电子项链、电子配饰、电子纹身、或智能手表)。
根据本公开的实施例，电子装置可以是具有显示功能的智能家电。智能家电的实例可以包括，但不限于，电视机、数字视频盘(DVD)播放器、音频播放器、冰箱、空调、吸尘器、烤箱、微波炉、洗衣机、干燥机、空气净化器、机顶盒、电视盒(例如，三星HomeSyncTM、苹果电视TM、或谷歌TVTM)、游戏机、电子辞典、便携式摄像机或电子相框。
根据本公开的各种实施例，电子装置的实例可以包括，但不限于，各种医疗设备(例如，磁资源血管造影(MRA)装置、磁资源成像(MRI)装置、计算机断层摄影(CT)的装置、成像装置或超声波装置)、导航设备、全球定位系统(GPS)接收器、事件数据记录(EDR)、飞行数据记录器(FDR)、汽车信息娱乐设备、航海电子装置(例如，航海导航仪、陀螺仪或指南针)，航空电子装置、安全设备、车辆头单元、工业或家用机器人、自动柜员机(ATM)、或销售点(POS)设备。
根据本公开的各种实施例，电子装置的实例可以包括，但不限于，具有通信功能的家具、建筑物/结构的一部分、电子板、电子签名接收装置、投影仪或各种测量装置(例如，用于测量水、电、煤气、或电磁波的设备)。根据本公开的实施例，电子装置可以是上面列出的装置或器具一个或组合。根据本公开的实施例，电子装置可以是柔性装置。根据本公开的实施例，电子装置不限于上述列出的装置或器具。
现在参考附图描述本公开的各种实施例。如本文所使用的，术语“用户”可以表示使用该电子装置的人或其它装置。
图1示出根据本公开的实施例的、包括电子装置101的网络环境100。参照图1，电子装置101可以包括总线110、处理器120、存储器130、输入/输出接口140、显示器150、通信接口160和/或信息提供模块170。
总线110将其它部件彼此连接，并且总线110可以在其他部件之间运载数据(例如，控制消息)。
处理器120可以通过，例如总线110，从其他部件(例如，存储器130、输入/输出接口140、显示器150、通信接口160、或信息提供模块170)接收命令，可以解释所接收的命令，并可以根据该解释的指令执行计算或数据处理。
存储器130可以存储从其他部件(例如，输入/输出接口140、显示器150、通信接口160、或信息提供模块170)接收到的指令，或由处理器120或其它部件生成的命令或数据。存储器130可保留编程模块，包括，例如内核131、中间件132、应用编程接口(API)133、或应用134。编程模块可以被配置为软件、固件、硬件或两种或多种的组合。
内核131可以控制或管理用于执行在诸如中间件132、API133或应用134的其他编程模块中实现的操作或功能的系统资源(例如，总线110、处理器120、或存储器130)。内核131可提供使得中间件132、API133或者应用134能够访问电子装置101的各个部件以控制或管理它们的接口。
中间件132可以用作使得API133或应用134能够与内核131通信的中继。可提供多个应用134。中间件132可以控制从应用134接收的工作请求，例如通过将使用电子装置101的系统资源(例如，总线110、处理器120、或存储器130)的优先级分配到多个应用134中的至少一个。
API133是使得应用134能够控制从内核131或中间件132提供的功能的接口。例如，API133可以包括至少一个用于文档控制、窗口控制、图像处理或文本控制的接口或功能(例如，命令)。
根据本公开的实施例，可以提供多个应用134，包括SMS/MMS应用、电子邮件应用、日历应用、警报应用、卫生保健应用(例如，用于测量锻炼量或血糖的应用)、或环境信息的应用(例如，提供大气压力、水分或温度信息的应用)。另外地或可替代地，应用134可以是与电子装置101和外部电子装置之间的信息交换(例如，电子装置104)相关的应用。信息交换相关的应用的例子可以包括，但不限于，用于传送特定信息到外部电子装置的通知中继应用，或用于管理外部电子装置的装置管理应用。
例如，通知中继应用可以包括用于中继从电子装置101的其他应用生成的通知信息(例如，SMS/MMS应用、电子邮件应用、医疗应用、或环境信息的应用)到外部电子装置(电子装置104)的功能。另外地或任选地，通知中继应用可以从例如外部电子装置(例如，电子装置104)接收通知信息，并且可以将接收到的通知信息提供给用户。装置管理应用可以执行与电子装置101进行通信的外部电子装置(例如，电子装置104)的至少一些功能(例如，开/关外部电子装置(或外部电子装置的一些部件))或控制显示器的亮度(或分辨率)，并且装置管理应用可以管理(例如，安装、删除或更新)在外部电子装置操作的应用或从外部电子装置提供的服务(例如，呼叫服务或消息服务)。
根据本公开的实施例，应用134可以包括依赖外部电子装置(例如，电子装置104)的属性(例如，电子装置的类型)指定的应用。例如，假如外部电子装置是MP3播放器，则应用134可以包括与播放音乐相关的应用。类似地，假如外部电子装置是移动医疗设备，则应用134可以包括与卫生保健相关的应用。根据本公开的实施例，应用134可以包括指定到电子装置101的应用或从外部电子装置(例如，服务器106或电子装置104)接收到的应用。
根据本公开的实施例，应用134可以包括与图像分析相关的应用。例如，假如应用134是图像分析相关的应用，则可以由处理器120执行应用134以识别包括在所选择的图像中的至少一个对象，并通过显示器150提供与识别出的对象相关联的各种信息项。可以执行应用134以通过网络162从电子装置104中接收图像分析信息或与图像的对象相关联的信息项，并通过显示器150提供接收到的信息或信息项。其示例性实施例如下所述。
输入/输出接口140可通过，例如，总线110，传送用户通过输入/输出装置(例如，键盘或触摸屏)输入的命令或数据到处理器120、存储器130、或者通信接口160。例如，输入/输出接口140可通过触摸屏提供关于该用户的触摸输入的数据到处理器120。输入/输出接口140可通过输入/输出装置(例如，扬声器或显示器)输出通过如总线110从处理器120、存储器130、或者通信接口160接收到的命令或数据。例如，输入/输出接口140可通过扬声器输出由处理器120处理过的数据给用户。
显示器150可以向用户显示与识别出的对象相关联的各种类型(例如，多媒体数据或文本数据、增强现实图像，对象图像或信息项)的信息(例如，主信息项或次信息项)。显示器150可显示至少一个图像，并且显示器150可以显示与从显示的图像中识别出的对象相关联的至少一个信息项。
通信接口160可以接口电子装置101和外部电子装置(例如，电子装置104或服务器106)之间的通信。例如，通信接口160可以通过有线连接或无线地连接到网络162与外部电子装置进行通信。无线连接可以通过各种无线通信协议进行，包括但不限于WIFI(无线保真)、BT(蓝牙)、NFC(近场通信)、GPS(全球定位系统)、或蜂窝通信协议(例如，LTE、LTE-A、CDMA、WCDMA、UMTS、WiBro或GSM)。有线连接可通过各种有线通信协议进行，包括但不限于USB(通用串行总线)、HDMI(高清晰度多媒体接口)、RS-232(推荐标准232)、或POTS(普通老式电话服务)。
根据本公开的实施例，网络162可以是电信网络。电信网络可以包括，例如，计算机网络、因特网、物联网(IoT)网络或电话网络。根据本公开的实施例，用于电子装置101和外部电子装置之间的通信协议(这种协议的实例包括但不限于传输层协议、数据链路层协议或物理层协议)可以由应用134、API133、中间件132、内核131、或者通信接口160所支持。
尽管图1示出电子装置101包括通信接口160以经由网络162与外部电子装置104或106进行通信，但根据本公开的实施例，电子装置101也可以独立地操作而不需要单独的通信功能。
电子装置101和外部电子装置104在本文可以称为第一电子装置101和第二电子装置104。根据本公开的实施例，第一电子装置101与第二电子装置104可以单边或双边通信信息。第一电子装置101可以是诸如智能电话的便携式电子装置，和第二电子装置104可以是诸如光学头戴式设备或智能手表的可穿戴设备。可替代地，第一电子装置101可以是诸如光学头戴式设备或智能手表的可穿戴设备，以及第二电子装置104可以是诸如智能电话的便携式电子装置。然而，本公开的实施例不限于此。根据本公开的实施例，下面将要描述的操作或功能可以在单个电子装置中实现，并且至少一些功能可以通过经由网络162连接的另一个电子装置或服务器106提供。
图2是示出根据本公开实施例的电子装置的配置的框图。参照图2，电子装置可以包括控制器210、存储单元220、感测单元230、相机单元240、显示单元250、输入单元260、或通信单元270。控制器210可以包括目标识别单元211、信息管理单元212、信息检索单元213、屏幕配置单元214、或信息处理单元215。
根据本公开的实施例，可通过显示单元250显示由相机单元240捕获的图像或存储在存储单元220中的图像。根据本公开的实施例，在这种情况下，对象识别单元211可以从屏幕上显示的图像中识别至少一个对象。
根据本公开的实施例，可识别对象的例子可以包括，但不限于，广告图像、公司标志、人脸、人体、人体的一部分、由人携带的物品、人穿戴的物品、建筑物、建筑物的一部分、树、固定于背景的物品、可动的物品、文本、纹理、手势、或如本文所述图像中的任何可识别的物品。
根据本公开的实施例，当识别单元211识别了至少一个对象时，信息管理单元212搜索可以提供给识别对象的信息项(例如，主信息项或次信息项)，并且信息管理单元212可通过显示单元250在屏幕上显示搜索到的信息项。信息管理单元212可搜索存储单元220以搜索可提供给识别出的对象的信息，或者信息管理单元212可经由信息搜索单元213将请求发送到服务器106以执行搜索。
可提供的信息项(例如，主信息项或仲信息项)可以包括，但不限于，优惠券、事件、电子地图、词典搜索、电子邮件、复制、呼叫、短消息服务、网页、导航、或任何其他类型的信息。
根据本公开的实施例，所搜索的信息项可以联合识别出的对象通过屏幕配置单元214在屏幕上布局，并且在这种情况下，至少一个信息项可以连同与识别出的对象相关联的信息项通过显示单元250显示。
根据本公开的实施例，当输入单元260从通过显示单元250显示的至少一个信息项中选择了特定的信息项时，信息处理单元215可以提供关于所选择的信息项的相关联的信息或详细信息。例如，信息处理单元215可通过信息搜索单元213搜索与所选择的信息项和/或识别出的对象相关联的信息或详细信息，并且信息处理单元215可以在显示单元250上显示搜索到的信息。
根据本公开的实施例，关于所选择的信息项的相关联的信息或详细信息可以层次性地或阶段性地或分阶段提供。为便于描述，下文中称在屏幕上主要显示的关于识别出的对象的至少一个信息项为“主信息项(多个)”，并且关于所选择的主信息项的相关联的信息或详细信息称为“次信息项(多个)”。例如，主信息项可以是信息的类型或信息的一部分，次信息项可以是关于所选择的主信息项的类型的相关联的信息或详细资料。然而，本公开的实施例不限于此。
根据本公开的实施例，感测单元230可以包括加速度计、GPS模块、麦克风、或其他可测量的工具。例如，通过诸如感测单元230的GPS模块获得的位置信息可以是主信息项。由感测单元230信息感测到的信息可提供给识别单元211或信息管理单元212，并且可以参考所提供的信息提供与识别出的对象相关的服务或信息。
根据本公开的实施例，如本文所使用的，术语“功能单元”或“模块”可表示硬件或软件的功能或结构的组合以驱动硬件实现根据本公开的实施例的技术精神。例如，本领域普通技术人员应当理解的是，每个功能单元可以是预定代码的逻辑单元和用于执行该代码的硬件资源，并且功能单元并不一定意味着物理连接的代码或一种类型的硬件。
图2控制器210可以在与图1的处理器120分开提供的模块中实现。控制器210的至少一些功能可以在处理器120中包括和实现。根据本公开的实施例，控制器210的所有功能可以在处理器120或任何其它处理器中包括和实现。控制器210可以在软件或硬件中来实现。例如，控制器210可以以在存储器130中保留的应用134的形式来实现。
根据本公开的实施例，电子装置可以包括：在屏幕上显示图像的显示器；以及控制器，被配置为从在电子装置的屏幕上显示的图像中识别至少一个对象，显示与识别出的对象相关联的至少一个主信息项，并且当至少一个主信息项中的至少一个被选择时，在屏幕上显示与所选择的主信息项相关联的次信息项。
根据本公开的实施例，次信息项可以被配置为分阶段地，例如，分层地，并且当被选择时可以显示信息项的每一层。
根据本公开的实施例，主信息项和次信息项可以同时显示在同一屏幕上。
根据本公开的实施例，主信息项可包括从优惠券、事件、电子地图、词典搜索、电子邮件、复制、调用、短消息服务、网页、或导航中所选择的一项或多项。
根据本公开的实施例，主信息项或次信息项可以显示为与识别出的对象相关联。
根据本公开的实施例，显示主信息项或次信息项可以显示为，例如，通过线，与识别出的对象相连接。
根据本公开的实施例，主信息项或次信息项可以显示为与识别出的对象和图像中的至少一部分重叠。
根据本公开的实施例，当从多个主信息项中同时选择两个或更多的主信息项时，控制器210可以执行控制功能，以提供分别与所选择的两个或更多个主信息项相关联的附加信息项。
根据本公开的实施例，当所选择的两个或更多个主信息项中的至少一个包含电子邮件地址时，控制器210中可以执行控制功能以发送对应于另外的所选择的两个或更多个主信息项的信息项到上述电子邮件地址。
根据本公开的实施例，控制器210可以执行控制功能，以确定识别出的对象中的变化，并提供对应于识别出的对象中的变化被配置的信息项。
图3是示出根据本公开实施例的电子装置提供信息的过程的流程图。参照图3，根据本公开的实施例，可从显示单元250的屏幕上显示的图像中识别至少一个对象(操作302)。可以搜索与识别出的对象相关联的至少一个信息项(操作304)，并且所搜索的至少一个信息项(例如，主信息项(多个))可以在屏幕上显示(操作306)。该信息项可被显示为例如标志、图像、文本、图片、动画、声音或两种或更多种的组合的形式。例如，如图5所示，信息的类型可以显示为文本(写着，例如，“优惠券”)、图像(例如，地图图像)、标记、或图标(例如，指示事件)的形式。
根据本公开的实施例，当从显示的至少一个信息项中选择特定的信息项(操作308)时，可以搜索并在屏幕上显示关于所选择的信息项的相关联的信息或详细信息(例如，次信息项(多个))(操作310)。
通过电子装置提供信息的方法可以以由各种计算机装置可执行的编程指令的形式来实现，并且上述编程指令可以记录在计算机可读介质中。计算机可读介质可以包括程序命令、数据文件、或数据结构，单独地或它们的组合。记录在介质中的程序指令可以是为本公开专门设计和配置的，或可以是计算机软件相关的领域的普通技术人员已知的和可用的。计算机可读记录介质的例子可以包括，但不限于：诸如硬盘、软盘或磁带的磁介质，诸如CD-ROM或DVD光盘的光学介质，诸如光磁软盘的磁光介质，诸如ROM、RAM或快闪存储器的存储器，或其他专门配置以保持和执行程序命令的硬件设备。编程指令的实例可以包括，但不限于，可由使用如解释器的计算机执行的高级语言代码，以及由编译器创建机器语言代码。上述硬件装置可被配置为作为一个或多个软件模块来操作以执行根据本公开的实施例的操作，或软件模块可以被配置为作为一个或多个硬件模块操作，以执行上述操作。
根据本公开的实施例，可以省略图3中所示的操作中的至少一个，并且可在操作之间加入至少一个其他操作。图3中所示的操作可以按照所示的顺序或不同的顺序处理。
根据本公开的实施例，用于通过电子装置提供信息的方法可以包括：从在电子装置的屏幕上显示的图像中识别至少一个对象，显示与识别出的对象相关联的至少一个主信息项，以及当选择至少一个主信息项中的至少一个时，在屏幕上显示与所选择的主信息项相关联的次信息项。
根据本公开的实施例，次信息项可以被配置为按阶段的，如，例如，按层的，并且当被选择时，可以提供次信息项的每一层。
根据本公开的实施例，主信息项和次信息项可以同时显示在同一屏幕上。
根据本公开的实施例，主信息项可以包括，例如，从优惠券、事件、电子地图、词典搜索、电子邮件、复制、呼叫、短消息服务、网页、或导航中所选择的一个或多个。
根据本公开的实施例，主信息项或次信息项可以显示为与识别出的对象相关联。
根据本公开的实施例，主信息项或次信息项可以显示为例如，通过线，与识别出的对象相连接。
根据本公开的实施例，主信息项或次信息项可以显示为与识别出的对象和图像中的至少一部分重叠。
根据本公开的实施例，该方法可以还包括从所显示的多个主信息项中同时选择两个或更多个主信息项，并提供与所选择的两个或更多个主信息项分别相关联的附加信息项。
根据本公开的实施例，该方法还可以包括：当所选择的两个或更多个主信息项中的至少一个包含电子邮件地址时，将与所选择的两个或更多主信息项之外其它的主信息项相应的信息项发送到该电子邮件地址。
根据本公开的实施例，该方法还包括：确定所识别出的对象中的变化，并提供对应于所识别出的对象中的变化被配置的信息项。
图4是示出根据本公开的实施例提供的信息的层级结构的图。参照图4，可以搜索和提供可以与关键字401相关联地提供给从屏幕上显示的图像中识别的对象(例如，类型或信息的一部分)的各类主信息项402。
例如，根据本公开的实施例，如果有第一至第N个与识别出的对象相关联的主信息项，则主信息项可以以各种形式与识别出的对象相关联地显示在屏幕上。当从主信息项中选择了特定的主信息项时，可以提供对于所选择的主信息项的次信息项403(例如，相关联的信息或详细信息)。
根据本公开的实施例，如图4所示，主信息项402或次信息项403可以层级结构化并显示。例如，当从主信息项402中选择了第二主信息项时，相关联的第2-1信息项可显示为次信息项。当选择了相关联的第2-1信息项时，可以显示相关联的第2-2信息项。
现在将参考图5至图9，根据本公开的实施例，描述显示与由电子装置识别出的对象相关联的信息的各种例子。
参照图5，根据本公开的实施例，如果从电子装置500的屏幕上显示的图像识别出的对象为咖啡店标志，则可以搜索并在屏幕上显示可提供给所识别出的对象的主信息项(例如，诸如可提供的服务的信息类型)。例如，可提供给识别出的对象的信息项可以包括优惠券、事件通知以及地图检索服务，并且如图5所示，可以在屏幕上显示优惠券图像521、地图图像522和事件通知图标523。也可以显示与事件通知相关联的信息524(例如，事件通知的标题或主关键字)。
根据本公开的实施例，当从图5中所示的主信息项(例如，信息的类型)中选择了特定主信息项时，如图6至图8所示，与每个主信息项相关联的次信息项可以阶段性提供。根据本公开的实施例，信息项的选择可以由用户手动执行，或者根据服务的特性，可以自动完成这样的选择。在如图5所示的事件服务的情况下，例如出于广告的目的服务提供商可能希望与主信息项一起显示一些层级信息项(例如，次信息项)。根据本公开的实施例，电子装置可以连同对于根据用户或服务提供者的设置的特定信息项的一些次信息项(例如，附加信息项)显示特定信息项。
参照图6，根据本公开的实施例，在示例情况下，识别出的对象是咖啡店标志610，并且用户选择了作为咖啡店标志610的主信息项提供的优惠券图像620，则关于优惠券的详细信息630可以作为次信息项显示在屏幕上。
参照图7，根据本公开的实施例，在示例情况下，识别出的对象是咖啡店标志71并且用户选择作为咖啡店标志710的主信息项提供的事件图像720，关于事件的简要信息730可以作为次信息项显示在屏幕上。当选择简要信息730时，更详细的事件信息740可以显示在屏幕上。这样，根据用户的选择，与识别出的对象相关联的信息项可以在多个阶段提供或阶段性地提供。根据本公开的实施例，如图5所示，事件图像720和简要信息730可以同时显示在屏幕上。
参照图8，根据本公开的实施例，在示例情况下，识别出的对象是咖啡店标志810并且用户选择作为咖啡店标志810的主信息项提供的电子地图标志820，在其上咖啡馆的位置831被精确定位的电子地图图标830可作为次信息项显示在屏幕上。
参照图6至图8，根据本公开的实施例中，用户可能会意识到已经识别出什么目标，以及他感兴趣的目标是否已经被识别。根据本公开的实施例，用户可以区分感兴趣的目标和其他目标，例如通过突出显示、加边框或擦除所识别的目标的背景。
图9和图10是示出根据本公开的实施例的、显示与识别出的对象相关联的信息项的方法的例子的视图。
根据本公开的实施例，可以根据对象识别的结果来确定至少一个或多个服务，并且和服务数量一样多的服务类型的图像可以显示在屏幕上。为通过电子装置900和1000识别出的对象910和1010生成的服务类型的图像信息项921、922、1021和1022可以如图9所示分别在字气球上弹出指示识别出的对象，或者如图10所示，信息项可以与识别出的对象重叠。
根据本公开的实施例，可以基于识别对象的结果确定至少一个可提供的服务，并且确定的服务的类型可以以诸如图标的形式示出。因此，用户可以知道什么服务是可用的。作为确定至少一个可提供的服务的结果，可以示出一个或多个可用的服务，弹出在字气球上或重叠，并且用户可以立即识别并执行服务。
根据本公开的实施例，关于每个服务的信息(例如，优惠券的细节(例如，指示该优惠券是买一送一推广))可以由信息提供服务器提供(例如，服务提供者)，并且可以提供所选择的服务的深度信息。根据本公开的实施例，关于服务的特定信息项可以分阶段系列示出或阶段性地示出。信息的至少一个中间结果可干预，直到获得信息的最终结果。视用户期望获得的信息的深度，服务可以在获得信息的最终结果之前完成。附加信息的传输可以由信息提供服务器确定。
根据本公开的实施例，信息提供服务器可以视需要提供进一步分段的相关联的信息。例如，如图10所示用户可能感兴趣的事件的部分信息可以在主屏幕上提供，并且当选择了该信息时，可以从信息提供服务器提供更详细的事件信息。
根据本公开的实施例，当用户面对多个服务提议时，可以基于设置或预分析的情况在屏幕上表示不同阶段的服务。例如，可以示出服务使得识别出的目标的主要目标或服务提供商的核心服务可以更明显。如图10所示，在与咖啡店标志相关联的信息项中关于当前事件的信息可以叠加和映射到产品图像，从而使信息更明显，并有利于广告。
图11和图12是示出了分阶段探索与特定服务相关联的详细信息的例子的视图。
根据本公开的实施例，参照图11和图12，用户可以调节每个、一些或所有的在屏幕上显示的多个服务的阶段。例如，当用户选择多个服务中的一个时，如图11所示，可以通过该服务的下一阶段的信息项，或者当用户选择了识别出的对象时，如图12所示，可以同时获得与识别出的对象相关联的多个服务的各自的下一个阶段的信息项(例如，次信息项)。
根据本公开的实施例，与由电子装置1100识别的对象1110相关联的多个信息项1121、1122、1123和1124可以以各种形式显示。当选择了与识别出的对象1110相关联的多个信息项中的一个信息项1121时，可以显示关于所选择的信息项1121的详细信息1131。根据本公开的实施例，在选择了多个信息项1121、1122、1123和1124中的一些时，可以显示关于所选择的信息项1121、1122、1123和1124的详细信息1131。
根据本公开的实施例，如图12所示，与由电子装置1200识别的对象1210相关联的多个信息项1221、1222、1223和1224可以以各种形式显示。当用户选择了识别出的对象1210时，可以显示关于多个信息项1221、1222、1223和1224的预选的至少一个(例如，优惠券信息或地图信息)的详细信息1231和1232。
根据本公开的实施例，这种调整服务的各个阶段和选择识别出的对象可以以诸如触摸、悬停、眼睛跟踪、手掌识别或手势的各种方式实现。
根据本公开的实施例，可从识别出的对象识别字符串或文本，并可以提供与之相关联的服务。例如，各种服务，如字典或web搜索、发送或搜索电子邮件、电话或搜索呼叫、发送或搜索文本、复制、PIMS搜索或导航搜索，可进一步通过识别的文本提供。可以检查字符串或文本的模式，并可以启用或禁用字符串或文本。
例如，假如文本识别服务是字典搜索服务，则如图13所示，可以示出阶段性变化UX。具体地，可以示出识别的一段文本1310并且确定其是否有错误。然后，可以示出字典搜索服务对于识别出的文本是可用的指示1320。此后，字典信息提供者可以在他的字典中搜索识别出的文本，并且可以显示搜索结果1330。
QR(快速反应)代码经常使用它们的内部信息的URL。参照图14，根据本公开的实施例，可以由因特网视频流服务提供商实现对于识别出的QR码的阶段性变化的UX。
例如，根据本公开的实施例，显示QR码的区域1410，并且假如QR码的URL寻址到YoutubeVideoTM，则可以显示指示流服务是可用的指示1420。接着，显示相应视频的缩略图像1430，并且可以流传输相应视频的示例视频(或整个视频)1440。
根据本公开的实施例，用户可以接收关于在其中识别了对象并且确定了来自识别出的对象的服务的阶段的信息，并且用户可以执行他所期望的阶段的服务。
图15是示出根据本公开的实施例的、显示多个识别出的对象相关联的信息的例子的图。根据本公开的实施例，参照图15，当从屏幕上显示的图像中识别多个物体时，可以为每个识别出的对象提供至少一个可提供的服务类型。当用户选择了特定的识别出的对象的特定的服务时，可以提供关于特定服务的相关联的信息或详细信息。例如，当用户选择如图15所示的字搜索服务时，可以提供如图13所示的词典搜索服务，并且当用户选择如图15所示的QR码分析服务时，可以提供如图14所示的对应于识别出的QR码的视频。
例如，根据本公开的实施例，当由电子装置1500捕捉到至少一部分的报纸文章1510时，可以识别QR码1511。假如QR码1511的URL寻址到YoutubeVideoTM1512，则可以示出流服务可用的指示。在这种情况下，当用户选择字时，可以提供对所选择的字1514的检索服务，并且当用户选择QR码1515时，如图15所示提供对应于QR码的信息。
图16是示出根据本公开的实施例的显示与识别出的文档表格相关联的信息的例子的图。当本公开的实施例应用到增强现实服务时，可以识别实时变化的识别出的对象中的每个阶段，并且如图16所示，可以提供与其对应的服务。
根据本公开的实施例，可以从外部服务提供服务器提供逐阶段的识别服务。可以基于电子装置提供的框架配置额外服务，并可以配置与识别数据库(DB)互相作用的服务。来自外部服务提供服务器的服务可以以启动通过所得服务或信息选择的服务这样的方式来提供。根据本公开的实施例，可以在电子装置中下载外部独立网站或应用以操作服务。
例如，根据本公开的实施例，如图16所示，本公开的各种实施例可以应用于指导如何填写申请表格。例如，外部信息提供服务器可以以这样的方式提供服务，匹配所得服务或信息与目前在现实中识别的对象，并提供它们之间的相互作用。
根据本公开的实施例，用户可以使用从例如公共办公室可用的填充指导。例如，当电子装置1600识别护照申请表格1610为对象时，可以在电子装置的显示单元上显示指导或样本作为与护照申请表格1610相关的信息类型。例如，作为服务的第一阶段(例如，主信息项)，可以提供菜单以选择指示如何填写表格的每一个项目的导向和样本。当用户选择了样本时，如图16的第二子图所示，可以识别对象的待填充区域，并且可以在该区域示出样本作为服务的第二阶段。
当用户通过参考样本正确填写表单1610时，如图16的第三子图所示，作为服务的第三阶段，可以使用由用户做出的更改来更新样本。可以区别显示改变的部分，以使样本已经作了修改。例如，根据本公开的实施例，在图16中所示的样本的第一名字和第二名字可以分别提供给服务的第二阶段和服务的第三阶段。
图17是示出根据本公开的实施例、提供通过混合多个服务或识别出的对象显示另外的服务的方法的视图。
根据本公开的实施例，参照图17，假如有用于识别出的目标和多个对象的多个服务，则可以通过使它们彼此互连提供第三服务。例如，多个服务(例如，优惠券服务和电子地图服务)可以被适配为与识别出的对象互相作用，或多个识别出的目标可以被适配为通过引用名片中的电子邮件地址或QR码彼此互相作用。
根据本公开的实施例，假如可能有多个服务与每个识别的结果相关联，则用户可以选择服务进行调整或执行所选服务的信息阶段。可以通过识别用户的触摸、点击、手势(指尖识别或眼睛跟踪)、悬停、在预定的方向导向识别出的对象、基于上下文感知的自动化、或识别出的对象的实时位移来完成服务选择。
例如，参考图17，可以以各种形式显示与由电子装置1700识别的对象1710相关联的多个信息项1721、1722、1723和1724。根据本公开的实施例，当用户做手势(例如，捏)用于收集或组合优惠券信息项1721和地图信息项1722时，可以提供通过组合优惠券信息项和地图信息项获得的新的另外的信息项(例如，在当地社区提供的优惠券服务)给用户。例如，礼券信息项和地图信息项也可以相互结合，以提供例如优惠券可用区域的服务。
参照图18和图19，根据本公开的实施例，从两个识别出的对象确定的服务可以相互组合。
根据本公开的实施例，参照图18，名片1810可以覆盖在包括QR码的物品信息1820，然后QR码和名片可以由电子装置1830同时识别，并且相应地，可以组合从名片和QR码提取的信息以提供新的附加信息。
根据本公开的实施例，参照图19，名片1910可以覆盖包括QR码的物品信息1920，并且QR码和名片可以由电子装置1930同时识别。在这种情况下，当用户选择名片中的电子邮件地址并做出手势(例如，捏)用于与QR码组合时，可以发送从QR码识别的信息(例如，奖金信息)到所选择的电子邮件地址。例如，如图19所示，可以传送内容信息(例如，视频的URL信息或整个视频)到名片中的电子邮件地址。
电子装置101可以是具有显示单元的任何装置，并且电子装置101可以，例如，被称为相机、便携式设备、移动终端、通信终端、便携式通信终端或便携式移动终端。例如，电子装置可以是数字相机、智能电话、移动电话、游戏机、电视(TV)、显示器、车辆头单元、膝上型计算机、平板计算机、PMP(个人内侧播放器)、PDA(个人数字助理)、导航装置、自动取款机、或POS设备，或类似物。根据本公开的实施例，电子装置可以是柔性装置或包括柔性显示器。
图20是示出根据本公开的实施例的电子装置2001的框图。电子装置2001可包括例如在图1中所示的电子装置101的全部或部分。参照图20，电子装置2001可包括一个或多个应用处理器(APs)2010、通信模块2020、SIM(用户识别模块)卡2024、存储器2030、传感器模块2040、输入设备2050、显示器2060、接口2070、音频模块2080、照相机模块2091、功率管理模块2095、电池2096、指示器2097、或电动机2098。
通过运行操作系统或应用程序，AP2010可以控制连接到AP2010的多个硬件和软件部件，并且AP2010可以处理或计算包括多媒体数据的各种数据。AP2010可以实现在例如SoC(系统芯片)上。根据本公开的实施例，AP2010还可以包括GPU(图形处理单元)(未示出)。
通信模块2020(例如，通信接口160)可以经由网络执行与连接到电子装置2001的(例如，电子装置101)的其他电子装置(例如，电子装置104或服务器106)的数据通信。根据本公开的实施例，通信模块2020可以包括蜂窝模块2021、WiFi模块2023、BT模块2025、GPS模块2027、NFC模块2028或RF(射频)模块2029。
蜂窝模块2021可以通过通信网络(例如，LTE、LTE-A、CDMA、WCDMA、UMTS、WiBro、或GSM网络)提供语音呼叫、视频呼叫、文本或互联网服务。蜂窝模块2021可以使用例如订户识别模块(例如，SIM卡2024)在通信网络中的电子装置上执行识别或认证。根据本公开的实施例，蜂窝模块2021可以执行由AP2010提供的至少一些功能。例如，蜂窝模块2021可以执行至少一些多媒体控制功能。
根据本公开的实施例，蜂窝模块2021可以包括通信处理器(CP)。蜂窝模块2021可以在如SoC(系统芯片)上实现。尽管在图20中，蜂窝模块2021(例如，通信处理器)、存储器2030、或电源管理模块2095与AP2010分开提供，但根据本公开的实施例，但是AP2010可以被配置为包括至少一些(例如，蜂窝模块2021)上述列出的部件。
根据本公开的实施例，AP2010或蜂窝模块2021(例如，通信处理器)可以将从非易失性存储器或其他与之连接的部件接收到的数据或命令加载到易失性存储器，并处理所加载的命令或数据。AP2010或蜂窝模块2021可以在非易失性存储器中存储从其它部件(多个)接收的数据或由其它部件产生的数据。
WiFi模块2023、BT模块2025、GPS模块2027、或NFC模块2028可包括用于例如处理通过模块传送的数据的过程。尽管在图20中，蜂窝模块2021、WiFi模块2023、BT模块2025、GPS模块2027以及NFC模块2028显示于各自单独的模块中，但是根据本公开的实施例，蜂窝模块2021、WiFi模块2023、BT模块2025、GPS模块2027、以及NFC模块2028中的至少一些(例如，两个或更多个)可以包括在单个集成电路(IC)或IC封装中。例如，分别对应于蜂窝模块2021、WiFi模块2023、BT模块2025、GPS模块2027、以及NFC模块2028(例如，对应于蜂窝模块通信2021的通信处理器和对应于WiFi模块2023的无线网络处理器)的处理器中的至少一些可以在单个的SoC中实现。
RF模块2029可传送数据，例如，RF信号。RF模块2029可以包括例如，收发器、PAM(功率放大器模块)、频率滤波器或LNA(低噪声放大器)(未示出)。RF模块2029还可以包括用于当执行无线通信时在自由空间中通信无线电波的部件(例如，导体或电线)。尽管在图20中蜂窝模块2021、WiFi模块2023、BT模块2025、GPS模块2027、以及NFC模块2028共享单个RF模块2029，但是根据本公开的实施例，蜂窝模块2021、WiFi模块2023、BT模块2025、GPS模块2027或NFC模块2028可以通过单独的RF模块(多个)通信RF信号。
SIM卡2024可以包括订户识别模块，并且SIM卡2024可插入到在电子装置的预定位置处形成的槽。SIM卡2024可包含唯一的识别信息(例如，ICCID(集成电路卡标识符))或订户信息(例如，IMSI(国际移动订户身份))。
存储器2030(例如，存储器130)可以包括内部存储器2032或外部存储器2034。内部存储器2032可以包括，例如，易失性存储器(例如，DRAM(动态RAM)、SRAM(静态RAM)、SDRAM(同步动态RAM)等)，或非易失性存储器(例如OTPROM(一次性可编程ROM)、PROM(可编程只读存储器)、EPROM(可擦除和可编程ROM)、EEPROM(电可擦除和可编程ROM)，掩模ROM，闪速ROM，NAND快闪存储器，或NOR快闪存储器)。
根据本公开的实施例，内部存储器2032可以是SSD(固态硬盘)。外部存储器2034可包括闪存驱动器，例如，CF(紧凑式闪存)存储器、SD(9secure数字)存储器、微型SD存储器、mini-SD存储器，xD(极端数字)存储器，或内存stickTM。外部存储器2034可以与经由各种接口的电子装置2001功能性地连接起来。根据本公开的实施例，电子装置2001还可以包括诸如硬盘驱动器的存储装置(或存储介质)。
传感器模块2040可以测量物理量或检测电子装置2001的操作阶段，并且传感器模块2040可将所测量或检测的信息转换成电信号。传感器模块2040可以包括，例如，手势传感器2040A、陀螺传感器2040B、大气压力传感器2040C、磁传感器2040D、加速度传感器2040E、、手柄传感器2040F、接近传感器2040G、诸如RGB(红、绿、蓝)传感器的颜色传感器2040H、生物传感器2040I、温度/湿度传感器2040J、照度传感器2040K或紫外线(UV)传感器2040L。另外地或可替代地，传感器模块2040可以包括，例如电子鼻传感器、肌电图(EMG)传感器、脑电图(EEG)传感器、心电图(ECG)传感器、红外(IR)传感器、虹膜传感器，或者未在附图中示出的指纹传感器。传感器模块2040还可以包括用于控制包括在传感器模块2040中的至少一个传感器的一个或多个的控制电路。
输入单元2050可以包括触摸面板2052、(数字)笔传感器2054、密钥2056、或超声输入设备2058。触摸面板2052可以识别使用电容、电阻、红外或超声波的方法中的至少一个的触摸输入。触摸面板2052还可以包括控制电路。使用电容性方法，物理接触或接近检测是可能的。触摸面板2052还可以包括触觉层。在这方面，触摸面板2052可给用户提供触觉响应。
(数字)笔传感器2054可以以例如接收用户的触摸输入相同或类似的方式，或者通过使用单独的识别片来实现。键2056可包括例如，物理按键、光学键或键盘。超声波输入装置2058可以使用生成超声波信号的输入工具，并启动电子装置2001通过检测到麦克风2088的超声波信号以确定数据，从而启动无线识别。根据本公开的实施例，电子装置2001可通过通讯模块2020接收从诸如计算机或服务器的外部装置的用户输入。
显示器2060(对应于图1中的显示器150)可包括面板2062、全息图装置2064、或投影仪2066。面板2062可以是例如液晶显示器(LCD)、有源矩阵有机发光二极管(AMOLEDs)、或类似物。面板2062可以实现为柔性的、透明的、或可佩戴的。面板2062也可以与触摸板2052并入一个单元。全息图装置2064可以通过使用光的干涉在空气中显示三维(3D)图像(全息图)。投影仪2066可通过投射光到屏幕上显示图像。屏幕可以例如位于电子装置2001的内部或外部。根据实施例，显示器2060还可以包括控制电路、控制面板2062、全息图装置2064或投影机2066。
接口2070可以包括例如，高清晰度多媒体接口(HDMI)2072、USB2074、光学接口2076、或D-超小型(D-sub)2078。接口2070可以包括在例如图1中所示的通信接口160中。另外地或可替代地，接口2070可包括移动高清链路(MHL)接口、安全数字(SD)卡/多媒体卡(MMC)接口、或IrDA标准接口。
音频模块2080可以执行(例如，编码或解码)与转换声波和音频信号为电信号或反过来的相关的各种处理。音频模块2080的至少一部分可以包括于例如如图1中所示的电子装置101中。音频模块2080可以通过例如扬声器2082、接收器2084、耳机2086、或麦克风2088处理声音信息的输入或输出。
照相机模块2091可以是用于拍摄静态图像和视频的装置，并且根据本公开的实施例，可以包括一个或多个图像传感器(例如，正面和背面的传感器)、透镜、图像信号处理器(ISP)或诸如LED或氙灯的闪光灯。
电源管理模块2095可以管理电子装置2001的电源。尽管未示出，但例如电源管理集成电路(PMIC)、充电器IC或电池或燃料计包括在电源管理模块2095之中。
PMIC可以安装在例如IC或SOC之上。充电方法可以分为有线和无线充电的方法。该充电器IC可为电池充电，并防止从充电器产生过电压或过电流。根据本公开的实施例，充电器IC可以在电缆充电方案和无线充电方案中的至少一个中使用。无线充电方案可以包括例如，磁共振方案、磁感应方案、或基于电磁波的方案，并且诸如线圈回路、谐振电路、整流器，或类似物的附加电路可被添加用于无线充电。
电池电量计可以在电池2096正在进行充电的同时测量电池2096剩余电量、电压、电流、或温度。电池2096可以保存或生成电力，并将保存的或生成的电力提供给电子装置2001。电池2096可以包括例如可再充电电池或太阳能电池。
指示器2097可指示电子装置2001或电子装置的一部分(例如，AP2010)的特定状态，特定状态包括例如，引导状态、消息状态或充电状态。发动机2098可以将电信号转换为机械振动。尽管未示出，但是诸如GPU的用于支持移动电视的处理单元可包括在电子装置2001中。用于支持移动电视的处理单元可以处理符合数字多媒体广播(DMB)、数字视频广播(DVB)或媒体流的标准的数据。
电子装置的前述部件的每一个可以包括一个或多个部分，并且该部分的名称可以随电子装置类型改变。根据本公开的多种实施例的电子装置可以包括前述部件的至少之一、省略其中的一些、或包括其他另外的部件(多个)。虽然一些部件可以被组合成一个实体，但是实体可以执行部件可以实现的功能相同的功能。
术语“模块”可以指包括硬件、软件和固件，或者它们的组合的单元。术语“模块”可以与单元、逻辑、逻辑块、部件或电路交换使用。模块可以是最小单元或集成部件的一部分。该模块可以是执行一个或多个功能的最小单元或部分。模块可以机械地或电子地实现。例如，该模块可以包括至少一个的特定应用集成电路(ASIC)芯片、现场可编程门阵列(FPGA)、或者可编程逻辑阵列(PLA)，其执行已知的或将在将来开发的某些操作。
装置的至少一部分(例如，模块或它们的功能)或方法(例如，操作)可以实现为诸如以编程模块的形式存储在计算机可读存储介质中的指令。当由一个或多个处理器(例如，处理器120)执行时，指令可以使处理器执行相应的功能。计算机可读存储介质可以是如存储器130。可编程模块的至少一部分可以由例如处理器120实现。编程模块的至少一部分可包括例如模块、程序、例行程序、指令集、过程、或用于执行一个或多个功能的类似物。
计算机可读存储介质可以包括被配置为存储和执行程序指令(例如，编程模块)的硬件装置，例如诸如硬盘、软盘和磁带的磁介质，诸如光盘ROM(CD-ROMs)和数字通用光碟(DVD)的光学介质，诸如软盘、ROM、RAM、闪存的磁光介质，和/或类似物。程序指令的例子不仅包括机器语言代码，也还包括使用解释器通过各种计算方法可执行的高级语言代码。上述硬件装置可被配置以作为一个或多个软件模块，执行本公开的示例性实施例，反之亦然。
根据本公开的各种实施例的模块或程序模块可以包括至少一种或多种上述部件，省略其中的一些，或还包括其他另外的部件。根据各种本公开的各种实施例，由模块、编程模块或其它部件执行的操作可顺序地、同时地、反复多次地或启发式地实施。此外，一些操作可以以不同的顺序来执行，或省略，或包括其他另外的操作(多个)。
根据本发明的各种实施例，存储在存储介质中的命令可以被配置为当命令由至少一个处理器执行时使得至少一个处理器执行至少一个操作。至少一个操作可以包括：从显示在电子装置的屏幕上的图像中识别出至少一个对象的操作，显示与识别出的至少一个对象相关联的至少一个主信息项的操作，以及当至少一个主信息项中的至少一个被选中时，在屏幕上显示与所选择的主信息项相关联的次信息项的操作。
正如从前面的描述中明显看出的，根据本公开的实施例，用户可以容易地识别与从显示在电子装置的屏幕上的图像中识别的对象相关联的信息。
根据本公开的实施例，可以显示对每个识别出的对象可用的信息(例如，关于相关的服务的信息)，并且当选择了预定的服务时，可以提供对应于所选择的服务的详细信息，其使得不同的用户体验(UXs)成为可能。
提供本文的实施例仅仅是为了更好地理解本公开，并且本公开不应限于此。本领域的一个普通技术人员应该理解，可以在形式或细节上对这些实施例做出各种变化而不脱离由以下权利要求所限定的本公开的范围。

Claims (15)

1.一种由电子装置提供信息的方法，该方法包括：
从在所述电子装置的屏幕上显示的图像中识别至少一个对象；
显示与识别出的对象相关联的至少一个主信息项；以及
响应于选择所述至少一个主信息项中的至少一个，在屏幕上显示与所选择的主信息项相关联的次信息项。
2.如权利要求1所述的方法，其中，所述次级信息项被配置为在包括层的多阶段中，并且其中，当检测到选择了一个阶段时，提供次信息项的每一层。
3.如权利要求1所述的方法，其中在同一屏幕上同时显示所述主信息项和所述次信息项。
4.如权利要求1所述的方法，其中所述主信息项包括优惠券、事件、电子地图、词典搜索、电子邮件、复制、呼叫、短消息服务、网页或导航中的至少一个。
5.如权利要求1所述的方法，其中所述主信息项或所述次信息项被显示为与识别出的对象相关联。
6.如权利要求5所述的方法，其中所述主信息项或所述次信息项被显示为通过线与识别出的对象相连接。
7.如权利要求5所述的方法，其中所述主信息项或次信息项被显示为与识别出的对象和图像的至少一部分重叠。
8.如权利要求1所述的方法，还包括：
检测已经同时选择了所述至少一个主信息项中的两个或更多个；以及
提供分别与所选择的两个或更多个主信息项相关联的附加信息项。
9.如权利要求8所述的方法，其中当所述两个或更多个主信息项中的至少一个包含电子邮件地址时，发送相应于所述两个或更多个主信息项外的其它主信息项的信息项到所述电子邮件地址。
10.如权利要求1所述的方法，还包括：
确定所述识别出的对象中的变化；以及
提供被配置为对应于所述变化的信息项。
11.一种电子装置，包括
显示器，在屏幕上显示图像；以及
控制器，被配置为：从显示在电子装置的屏幕上的图像中识别至少一个对象；显示与识别出的对象相关联的至少一个主信息项；以及响应于选择所述至少一个主信息项中的至少一个，在屏幕上显示与所选择的主信息项相关联的次信息项。
12.如权利要求11所述的电子装置，其中所述次信息项被配置为在包括层的多个阶段中，其中，当检测到层被选择时，提供次信息项的每一层。
13.如权利要求11所述的电子装置，其中在同一屏幕上同时显示所述主信息项和所述次信息项。
14.如权利要求11所述的电子装置，其中所述主信息项包括优惠券、事件、电子地图、词典搜索、电子邮件、复制、呼叫、短消息服务、网页、或导航中的至少一个。
15.根据权利要求11所述的电子装置，其中所述主信息项或所述次信息项被显示为与所识别的对象相关联。
CN201510587545.1A 2014-09-15 2015-09-15 用于提供信息的方法和电子装置 Active CN105426035B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2014-0122111 2014-09-15
KR1020140122111A KR102178892B1 (ko) 2014-09-15 2014-09-15 정보 제공 방법 및 그 전자 장치

Publications (2)

Publication Number Publication Date
CN105426035A true CN105426035A (zh) 2016-03-23
CN105426035B CN105426035B (zh) 2021-01-26

Family

ID=53502488

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510587545.1A Active CN105426035B (zh) 2014-09-15 2015-09-15 用于提供信息的方法和电子装置

Country Status (4)

Country Link
US (1) US10146412B2 (zh)
EP (1) EP2996023A1 (zh)
KR (1) KR102178892B1 (zh)
CN (1) CN105426035B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106648322A (zh) * 2016-12-21 2017-05-10 广州市动景计算机科技有限公司 与虚拟对象进行互动操作的触发方法、装置和系统
CN109582134A (zh) * 2018-11-09 2019-04-05 北京小米移动软件有限公司 信息显示的方法、装置及显示设备
CN110537177A (zh) * 2017-04-17 2019-12-03 三星电子株式会社 电子装置及其操作方法
WO2021104209A1 (zh) * 2019-11-29 2021-06-03 维沃移动通信有限公司 视频显示方法、电子设备以及介质

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10323952B2 (en) * 2016-04-26 2019-06-18 Baidu Usa Llc System and method for presenting media contents in autonomous vehicles
KR20190005208A (ko) * 2016-05-07 2019-01-15 스마트 써드-아이 리미티드 핸드헬드 디바이스 내의 에지 카메라 어셈블리를 수반하는 시스템 및 방법
US9956876B2 (en) * 2016-05-25 2018-05-01 Baidu Usa Llc System and method for providing content in autonomous vehicles based on real-time traffic information
WO2018017177A2 (en) * 2016-07-21 2018-01-25 L-3 Communications Eto Enhanced vision systems and methods
KR102626304B1 (ko) * 2016-12-06 2024-01-18 삼성전자주식회사 콘텐츠 출력 방법 및 이를 지원하는 전자 장치
US11132840B2 (en) * 2017-01-16 2021-09-28 Samsung Electronics Co., Ltd Method and device for obtaining real time status and controlling of transmitting devices
JPWO2018230649A1 (ja) * 2017-06-16 2020-02-27 本田技研工業株式会社 情報提供システム、情報提供方法、およびプログラム
US20190095069A1 (en) * 2017-09-25 2019-03-28 Motorola Solutions, Inc Adaptable interface for retrieving available electronic digital assistant services
KR102599947B1 (ko) * 2017-10-27 2023-11-09 삼성전자주식회사 관련 이미지를 검색하기 위한 전자 장치 및 이의 제어 방법
WO2019095392A1 (zh) * 2017-11-20 2019-05-23 华为技术有限公司 根据背景图像动态显示图标的方法及装置
US20220335698A1 (en) * 2019-12-17 2022-10-20 Ashley SinHee Kim System and method for transforming mapping information to an illustrated map
US11632341B2 (en) * 2020-03-14 2023-04-18 Polypie Inc. Enabling communication with uniquely identifiable objects

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101669135A (zh) * 2007-03-13 2010-03-10 索尼株式会社 数据处理系统和数据处理方法
CN102193965A (zh) * 2010-03-03 2011-09-21 宏达国际电子股份有限公司 景点信息浏览方法、装置及系统
CN102334137A (zh) * 2009-02-20 2012-01-25 株式会社尼康 携带信息机器、摄影装置、以及信息取得系统
US20120223966A1 (en) * 2010-12-28 2012-09-06 Pantech Co., Ltd. Terminal to provide augmented reality
WO2013145566A1 (en) * 2012-03-26 2013-10-03 Sony Corporation Information processing apparatus, information processing method, and program
US20140282214A1 (en) * 2013-03-14 2014-09-18 Research In Motion Limited Electronic device and method of displaying information in response to a gesture

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6219045B1 (en) * 1995-11-13 2001-04-17 Worlds, Inc. Scalable virtual world chat client-server system
US8037425B2 (en) * 2007-12-14 2011-10-11 Scenera Technologies, Llc Methods, systems, and computer readable media for controlling presentation and selection of objects that are digital images depicting subjects
US8237666B2 (en) * 2008-10-10 2012-08-07 At&T Intellectual Property I, L.P. Augmented I/O for limited form factor user-interfaces
WO2012006356A2 (en) 2010-07-06 2012-01-12 Mark Lane Apparatus, system, and method for an improved video stream
US20120038668A1 (en) * 2010-08-16 2012-02-16 Lg Electronics Inc. Method for display information and mobile terminal using the same
KR101337555B1 (ko) 2010-09-09 2013-12-16 주식회사 팬택 객체 연관성을 이용한 증강 현실 제공 장치 및 방법
US20130212507A1 (en) * 2010-10-11 2013-08-15 Teachscape, Inc. Methods and systems for aligning items of evidence to an evaluation framework
US8788972B2 (en) * 2011-01-26 2014-07-22 Cisco Technology, Inc. Graphical display for sorting and filtering a list in a space-constrained view
US9778813B2 (en) * 2011-08-09 2017-10-03 Blackberry Limited Manipulating screen layers in multi-layer applications
US9606992B2 (en) 2011-09-30 2017-03-28 Microsoft Technology Licensing, Llc Personal audio/visual apparatus providing resource management
US9449342B2 (en) 2011-10-27 2016-09-20 Ebay Inc. System and method for visualization of items in an environment using augmented reality
KR20130056529A (ko) 2011-11-22 2013-05-30 삼성전자주식회사 휴대용 단말기에서 증강현실 서비스를 제공하기 위한 장치 및 방법
US8854325B2 (en) * 2012-02-29 2014-10-07 Blackberry Limited Two-factor rotation input on a touchscreen device
US8963962B2 (en) * 2012-03-06 2015-02-24 Apple Inc. Display of multiple images
JP5740351B2 (ja) * 2012-06-01 2015-06-24 任天堂株式会社 情報処理システム、情報処理プログラム、情報処理装置および表示方法
WO2014031126A1 (en) * 2012-08-24 2014-02-27 Empire Technology Development Llc Virtual reality applications
US10713846B2 (en) * 2012-10-05 2020-07-14 Elwha Llc Systems and methods for sharing augmentation data
US9077647B2 (en) * 2012-10-05 2015-07-07 Elwha Llc Correlating user reactions with augmentations displayed through augmented views
US9141188B2 (en) * 2012-10-05 2015-09-22 Elwha Llc Presenting an augmented view in response to acquisition of data inferring user activity
US9111383B2 (en) * 2012-10-05 2015-08-18 Elwha Llc Systems and methods for obtaining and using augmentation data and for sharing usage data
US10180715B2 (en) * 2012-10-05 2019-01-15 Elwha Llc Correlating user reaction with at least an aspect associated with an augmentation of an augmented view
US9424472B2 (en) * 2012-11-26 2016-08-23 Ebay Inc. Augmented reality information system
US10671973B2 (en) 2013-01-03 2020-06-02 Xerox Corporation Systems and methods for automatic processing of forms using augmented reality
US20140282152A1 (en) * 2013-03-12 2014-09-18 Sas Institute Inc. List with targets for touch screens
US8799799B1 (en) * 2013-05-07 2014-08-05 Palantir Technologies Inc. Interactive geospatial map

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101669135A (zh) * 2007-03-13 2010-03-10 索尼株式会社 数据处理系统和数据处理方法
CN102334137A (zh) * 2009-02-20 2012-01-25 株式会社尼康 携带信息机器、摄影装置、以及信息取得系统
CN102193965A (zh) * 2010-03-03 2011-09-21 宏达国际电子股份有限公司 景点信息浏览方法、装置及系统
US20120223966A1 (en) * 2010-12-28 2012-09-06 Pantech Co., Ltd. Terminal to provide augmented reality
WO2013145566A1 (en) * 2012-03-26 2013-10-03 Sony Corporation Information processing apparatus, information processing method, and program
US20140282214A1 (en) * 2013-03-14 2014-09-18 Research In Motion Limited Electronic device and method of displaying information in response to a gesture

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106648322A (zh) * 2016-12-21 2017-05-10 广州市动景计算机科技有限公司 与虚拟对象进行互动操作的触发方法、装置和系统
CN110537177A (zh) * 2017-04-17 2019-12-03 三星电子株式会社 电子装置及其操作方法
CN110537177B (zh) * 2017-04-17 2024-02-13 三星电子株式会社 电子装置及其操作方法
CN109582134A (zh) * 2018-11-09 2019-04-05 北京小米移动软件有限公司 信息显示的方法、装置及显示设备
US10931926B2 (en) 2018-11-09 2021-02-23 Beijing Xiaomi Mobile Software Co., Ltd. Method and apparatus for information display, and display device
CN109582134B (zh) * 2018-11-09 2021-07-23 北京小米移动软件有限公司 信息显示的方法、装置及显示设备
WO2021104209A1 (zh) * 2019-11-29 2021-06-03 维沃移动通信有限公司 视频显示方法、电子设备以及介质

Also Published As

Publication number Publication date
KR102178892B1 (ko) 2020-11-13
US20160077711A1 (en) 2016-03-17
KR20160031851A (ko) 2016-03-23
US10146412B2 (en) 2018-12-04
CN105426035B (zh) 2021-01-26
EP2996023A1 (en) 2016-03-16

Similar Documents

Publication Publication Date Title
CN105426035A (zh) 用于提供信息的方法和电子装置
KR102276847B1 (ko) 가상 오브젝트 제공 방법 및 그 전자 장치
KR102207208B1 (ko) 음악 정보 시각화 방법 및 장치
US20150358614A1 (en) Wearable device and method for providing augmented reality information
US20150193424A1 (en) Method of changing dynamic screen layout and electronic device
US10691402B2 (en) Multimedia data processing method of electronic device and electronic device thereof
KR102379171B1 (ko) 전자 장치 및 그의 영상 표시 방법
EP2843529A1 (en) Method for providing information based on contents and electronic device thereof
KR20160026578A (ko) 전자 장치의 디스플레이 방법 및 그 전자 장치
US11681411B2 (en) Method of selecting one or more items according to user input and electronic device therefor
CN108351892B (zh) 用于提供对象推荐的电子装置和方法
KR20170076489A (ko) 전자장치 및 그의 어플리케이션 프로그램 운용 방법
CN112130743B (zh) 智能手表及用于在智能手表中提供信息的方法
KR20150136801A (ko) 어플리케이션 ui 및 전자 장치
US9429447B2 (en) Method of utilizing image based on location information of the image in electronic device and the electronic device thereof
KR102316846B1 (ko) 미디어 컨텐츠를 선별하는 방법 및 이를 구현하는 전자장치
US9959598B2 (en) Method of processing image and electronic device thereof
US20180173701A1 (en) Method for contents tagging and electronic device supporting the same
US20180271388A1 (en) Electronic device and method for capturing contents
KR20160035649A (ko) 전자 장치에서 컨텐츠의 선호도를 표시하기 위한 장치 및 방법
US10496715B2 (en) Method and device for providing information
KR20160013329A (ko) 컨텐츠 제공 방법 및 그 전자 장치
KR20170022249A (ko) 전자 장치의 정보 제공 방법 및 장치
KR20150134087A (ko) 전자 장치 및 전자 장치에서 데이터를 추천하는 방법
KR20160046609A (ko) 컨텐츠 제공 방법 및 그 전자 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant