CN102467343B - 移动终端以及控制移动终端的方法 - Google Patents

移动终端以及控制移动终端的方法 Download PDF

Info

Publication number
CN102467343B
CN102467343B CN201110305637.8A CN201110305637A CN102467343B CN 102467343 B CN102467343 B CN 102467343B CN 201110305637 A CN201110305637 A CN 201110305637A CN 102467343 B CN102467343 B CN 102467343B
Authority
CN
China
Prior art keywords
image
mobile terminal
preview image
editor
controller
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201110305637.8A
Other languages
English (en)
Other versions
CN102467343A (zh
Inventor
李周宇
李宣姃
徐京慧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN102467343A publication Critical patent/CN102467343A/zh
Application granted granted Critical
Publication of CN102467343B publication Critical patent/CN102467343B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02—Terminal devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/322—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/023—Services making use of location information using mutual or relative location information between multiple location based services [LBS] targets or of distance thresholds
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/20—Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel
    • H04W4/21—Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel for social networking applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/42—Graphical user interfaces

Abstract

本发明涉及一种移动终端以及控制移动终端的方法。该用于控制移动终端的方法，包括：以增强现实(AR)模式显示通过相机输入的预览图像，显示与预览图像中的至少一个对象相对应的AR数据，以及提供用户界面，该用户界面用于编辑包括AR模式的AR数据的预览图像的至少一部分，以便生成编辑的预览图像。

Description

移动终端以及控制移动终端的方法
技术领域
本发明涉及一种移动终端，更确切地说，涉及一种移动终端和控制该移动终端的方法。
背景技术
移动终端是一种可以被配置为执行各种功能的设备，诸如数据和语音通信、经由相机拍摄图像和视频、记录音频、经由扬声器系统播放音乐文件和输出音乐、并且在显示器上显示图像和视频。一些终端包括支持玩游戏的附加功能，而其他终端也被配置为多媒体播放器。最近以来，移动终端已经被配置为接收广播和多播信号，以允许观看诸如视频和电视节目的内容。
通常，移动终端可以被分类为移动终端和固定终端。而且，根据用户是否能够随身携带移动终端，移动终端还可以被分类为手持终端和车载终端。
对于支持和增加移动终端的功能还在进行不断的努力。这样的努力包括软件和硬件的改善以及在形成移动终端的结构组件方面的改变和改善。
近来，移动终端被设置有增强现实(augmented reality)(AR)功能，用于提供位于相机的预览图像内的对象的信息。
发明内容
因此，本发明涉及一种移动终端及其控制方法，该终端及其控制方法基本上避免了由于现有技术的限制和缺点而导致的一个或多个问题。
根据一个实施例，一种用于控制移动终端的方法包括：在显示器上以增强现实(AR)模式显示通过相机输入的预览图像。该种方法还包括在显示器上显示与预览图像中的至少一个对象相对应的AR数据，并且提供用户界面，该用户界面用于编辑包括AR模式的AR数据的预览图像的至少一部分，以便生成编辑的预览图像。
应该理解的是，该方法还包括在存储器中存储编辑的预览图像。还应理解的是，该方法包括传送所存储的编辑的预览图像。
应该理解的是，该方法还包括传送编辑的预览图像。
应该理解的是，该方法还包括搜索AR模式的至少一个所存储的编辑的预览图像；以及显示至少与预览图像中的相同对象或预览图像的位置相对应的搜索到的至少一个所存储的编辑的预览图像的AR数据，其中，通过将搜索到的至少一个所存储的编辑的预览图像的至少一部分叠加在预览图像上，或者显示搜索到的至少一个所存储的编辑的预览图像，来执行显示所述AR数据。
应该理解的是，该方法还包括：识别预览图像中的对象；确定预览图像中的对象是否与AR模式的先前接收的编辑的预览图像中的对象相同；并且通过将先前接收的编辑的预览图像叠加到预览图像上或者显示先前接收的编辑的预览图像，基于所述确定来在预览图像中的对象上显示与先前接收的编辑的预览图像中的对象相对应的AR数据。
应该理解的是，该方法还包括：通过响应于根据至少一个功能经由用户界面接收的输入，改变至少AR数据或至少一个对象的外观，来编辑预览图像的至少一部分。还应该理解的是，所述至少一种功能用于区分在预览图像中的至少AR数据或至少一个对象。
应该理解的是，编辑预览图像的至少一部分包括：响应于经由用户界面接收的输入，来放大或缩小预览图像，以使得编辑的预览图像为放大的或缩小的图像，并且还包括将放大的或缩小的预览图像存储在存储器中。
应该理解的是，该方法还包括存储表示放大的或缩小的预览图像的放大率的值以及放大的或缩小的预览图像的位置信息，并且将表示放大率的值应用到预览图像。
应该理解的是，编辑预览图像的至少一部分包括：响应于经由用户界面接收的输入，在预览图像上输入备忘录或草写消息，并且还包括在存储器中存储包括备忘录或草写消息的编辑的预览图像。
应该理解的是，用户界面提供以下功能：用于将至少一个图像导入到预览图像上，并且将至少一个图像与预览图像合并以生成编辑的预览图像，还包括在存储器中存储包括至少一个图像的编辑的预览图像。
应该理解的是，导入至少一个图像包括：将至少一个图像拖动并且放在该至少一个图像将被合并的预览图像内的区域上，或者指定该至少一个图像将被合并的预览图像内的区域。
应该理解的是，导入至少一个图像包括：指定在至少一个图像内的第一区域；根据第一区域裁切至少一个图像，以便生成至少一个裁切的图像；并且指定该至少一个裁切的图像将被合并的预览图像内的第二区域。
应该理解的是，用户界面还提供接收关键词的功能，以用于至少在存储器或互联网搜索与关键词相关的至少一个图像。
应该理解的是，用户界面提供用于将信息链接到预览图像的功能，并且还包括在存储器中存储已被链接的预览图像，该信息与预览图像相关。
根据本发明的另一实施例，用于控制移动终端的方法包括：接收包括编辑的预览图像的传输，通过编辑包括AR模式的增强现实(AR)数据的预览图像的至少一部分来事先生成该编辑的预览图像；确定移动终端的当前位置；并且当移动终端的当前位置与对应于编辑的预览图像的位置相同时，在显示器上显示编辑的预览图像，其中，通过将编辑的预览图像的至少一部分叠加在当前预览图像上或显示整个编辑的预览图像，来执行显示编辑的预览图像。
应该理解的是，传输还包括与编辑的预览图像相对应的位置。
应该理解的是，该方法还包括通过将编辑的预览图像与相机输入的当前预览图像相比较，来确定与编辑的预览图像相对应的位置。
根据另一实施例，移动终端包括显示器，显示器被配置为以增强现实(AR)模式显示通过相机输入的预览图像，并且显示与预览图像中的至少一个对象相对应的AR数据；以及控制器，该控制器被配置为提供用户界面，该用户界面用于编辑包括AR模式的AR数据的预览图像的至少一部分，以生成编辑的预览图像。
应该理解的是，控制器还被配置为在存储器中存储编辑的预览图像。还应理解的是，控制器被配置为传送所存储的编辑的预览图像。
应该理解的是，控制器还被配置为传送编辑的预览图像。
应该理解的是，控制器还被配置为搜索AR模式的至少一个所存储的编辑的预览图像，其中，显示器还被配置为显示至少与预览图像中的相同对象或预览图像的位置相对应的搜索到的至少一个所存储的编辑的预览图像的AR数据，并且其中，通过将搜索到的至少一个所存储的编辑的预览图像叠加在预览图像上或者显示搜索到的至少一个所存储的编辑的预览图像，来显示搜索到的编辑的预览图像的AR数据。
应该理解的是，控制器还被配置为识别预览图像中的对象，并且确定在预览图像中的对象是否与AR模式的先前接收的编辑的预览图像中的对象相同，其中显示器还被配置为，通过将先前接收的编辑的预览图像的至少一部分叠加在预览图像上或者显示先前接收的编辑的预览图像，基于所述确定在预览图像中的对象上显示与先前接收的编辑的预览图像相对应的AR数据。
应该理解的是，控制器还被配置为响应于根据至少一个功能经由用户界面接收的输入，通过改变至少AR数据或至少一个对象的外观来编辑预览图像的至少一部分。
应该理解的是，该至少一个功能用于区分在预览图像中的至少AR数据或至少一个对象。
应该理解的是，所述控制器被配置为响应于经由用户界面接收的输入，通过放大或缩小预览图像来编辑预览图像的至少一部分，以使得编辑的预览图像为放大的或缩小的预览图像，还包括将放大的或缩小的预览图像存储在存储器中。
应该理解的是，控制器还被配置为存储表示放大的或缩小的预览图像的放大率的值，以及放大的或缩小的预览图像的位置信息，并且将表示放大率的值应用到预览图像。
应该理解的是，控制器还被配置为通过经由用户界面接收在预览图像上输入的备忘录或草写消息，来编辑预览图像的至少一部分，并且在存储器中存储包括备忘录或草写消息的编辑的预览图像。
应该理解的是，控制器还被配置为提供具有以下功能的用户界面：用于将至少一个图像导入到预览图像上，并且将至少一个图像与预览图像合并以生成编辑的预览图像。还应该理解的是，控制器还被配置为在存储器中存储包括至少一个图像的编辑的预览图像。
应该理解的是，导入至少一个图像包括：将至少一个图像拖动并且放在该至少一个图像将被合并的预览图像内的区域上，或者指定该至少一个图像将被合并的预览图像内的区域。
应该理解的是，导入至少一个图像包括：指定在至少一个图像内的第一区域；根据第一区域裁切至少一个图像以生成至少一个裁切的图像；并且指定该至少一个裁切的图像将被合并的预览图像内的第二区域。
应该理解的是，控制器还被配置为提供还具有接收关键词的功能的用户界面，以用于在存储器或互联网中搜索与关键词相关的至少一个图像。
应该理解的是，控制器还被配置为提供具有将信息链接到预览图像的功能的用户界面，该信息与该预览图像相关，并且在存储器中存储已被链接的预览图像。
根据另一实施例，移动终端包括控制器，该控制器被配置为接收包括编辑的预览图像的传输，通过编辑包括AR模式的增强现实(AR)数据的预览图像的至少一部分来事先生成该编辑的预览图像，并且确定移动终端的当前位置。移动终端还包括显示器，显示器被配置为当移动终端的当前位置和对应于编辑的预览图像的位置相同时，显示编辑的预览图像，其中，通过将编辑的预览图像的至少一部分叠加在当前预览图像上或显示整个编辑的预览图像，来显示编辑的预览图像。
应该理解的是，传输还包括与编辑的预览图像相对应的位置。还应该理解的是，移动终端还包括被配置为生成当前预览图像的相机，并且其中，控制器还被配置为通过将编辑的预览图像与当前预览图像相比较，来确定与编辑的预览图像相对应的位置。
根据下文参考附图的实施例的详细描述，这些和其他实施例将对于本领域技术人员来说变得显而易见，本发明不限于任何公开的特定实施例。
附图说明
包含的附图提供了对本发明的进一步理解，并且被并入且构成本发明的一部分，附图示出了本发明的实施例，并且与描述一起用于解释本发明的原理。在考虑到下文结合附图的优选实施例的描述时，本发明的上述和其他方面、特征以及优势将变得显而易见。在附图中：
图1示出了根据本发明一个实施例的移动终端的框图。
图2A是根据本发明一个实施例的移动终端的前透视图。
图2B是根据本发明一个实施例的移动终端的后透视图。
图3是示出了根据本发明一个实施例用于在增强现实(AR)模式中由移动终端执行的用于编辑预览图像的方法的流程图。
图4A至图8C是根据本发明各种实施例的移动终端的显示单元的示例性显示屏，其示出了通过改变特定对象或对象信息的显示样式而编辑AR模式的预览图像的操作。
图9A至图12B是根据本发明各种实施例的移动终端的显示单元的示例性显示屏，其示出了区分在AR模式的预览图像中的特定对象或对象信息的操作。
图13A至图13C是根据本发明一个实施例的移动终端的显示单元的示例性显示屏，其示出了通过输入备忘录消息而编辑AR模式的预览图像的操作。
图14A至图14C是根据本发明一个实施例的移动终端的显示单元的示例性显示屏，其示出了通过输入草写(scribble)消息而编辑AR模式的预览图像的操作。
图15A和图15B是根据本发明一个实施例的移动终端的显示单元的示例性显示屏，其示出了通过放大预览图像而编辑AR模式的预览图像的操作。
图16A和图16B是根据本发明一个实施例的移动终端的显示单元的示例性显示屏，其示出了通过缩小预览图而像编辑AR模式的预览图像的操作。
图17A至图17D是根据本发明一个实施例的移动终端的显示单元的示例性显示屏，其示出了通过将特定信息链接到预览图像而编辑AR模式的预览图像的操作。
图18A至图20C是根据本发明各种实施例的移动终端的显示单元的示例性显示屏，其示出了通过搜索与搜索关键词相关的图像而编辑AR模式的预览图像以及通过将该图像与预览图像合并而编辑预览图像的各种操作。
图21A至图21C是根据本发明一个实施例的移动终端的显示单元的示例性显示屏，其示出了通过根据用户所画的图片搜索图像而编辑AR模式的预览图像以及通过将该图像和预览图像合并而编辑预览图像的操作。
图22A至图22C是根据本发明一个实施例的移动终端的显示单元的示例性显示屏，其示出了通过将图形效果应用到预览图像而编辑AR模式的预览图像的操作。
图23A至图23C是根据本发明一个实施例的移动终端的显示单元的示例性显示屏，其示出了将编辑的预览图像传送到另一方的移动终端的操作。
图24A和图24B是根据本发明一个实施例的移动终端的显示单元的示例性显示屏，其示出了将编辑的预览图像传送到外部共享服务器的操作。
具体实施方式
在下文的详细描述中，对附图进行参考，附图形成本文的一部分，并且通过图示方式示出了本发明的特定实施例。本技术领域的普通技术人员应当理解，可以利用其他实施例，并且在不脱离本发明的范围的情况下可以做出结构、电气以及程序的改变。只要可能，在整个附图中将使用相同的附图标记来表示相同或者类似的部件。
此处对于各种元件使用术语“模块”“单元”和“部件”仅是为了方便本发明的公开。因此，此处可替换地使用术语“模块”“单元”和“部件”。
本发明能够应用于各种终端。例如，这些终端能够包括移动终端和固定终端，诸如移动电话、用户设备、智能电话、数字电视(DTV)、计算机、数字广播终端、个人数字助理、便携式多媒体播放器(PMP)和导航仪。
为了易于描述，将关于图1至图2B中所示的移动终端描述本发明。然而，应该理解的是，本发明也能应用于其他类型的终端。
图1示出了根据本发明一个实施例的移动终端100的示例性框图。应该理解的是，在不脱离本发明的精神和范围的情形下，也能够使用除了图1中所示之外的实施例、配置和布置。如图1中所示，移动终端100包括无线通信单元110、音频/视频(A/V)输入单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180和电源单元190。应该理解的是，移动终端100可以包括比图1中所示的那些更多或更少的组件。
无线通信单元110能够包括允许在移动终端100和移动终端100位于其中的无线通信系统或网络之间进行无线通信的一个或多个组件。例如，无线通信单元110能够包括广播接收模块111、移动通信模块112、无线互联网模块113、短距离通信模块114和位置定位模块115。
广播接收模块111经由广播信道从外部广播管理服务器接收广播信号和/或广播相关信息。在一个实施例中，移动终端100能够被配置成包括两个或更多个广播接收模块111，以实现两个或更多个广播信道的同步接收或易于切换广播信道。
广播信道能够包括卫星信道和地面信道。广播管理服务器能够是生成和发送广播信号和/或广播相关信息的服务器，或者是接收先前生成的广播信号和/或先前生成的广播相关信息或者将先前生成的广播信号和/或先前生成的广播相关信息发送到移动终端100的服务器。
例如，广播信号能够被实施为TV广播信号、无线电广播信号、数据广播信号和各种其他类型广播信号。在一个实施例中，广播信号能够包括广播信号和TV广播信号的合并或者广播信号和无线电广播信号的合并。
广播相关信息能够包括广播信道信息、广播节目信息、或者广播服务提供商信息。广播相关信息能够通过移动通信网络被提供到移动终端100。在该情形下，能够通过移动通信模块112接收广播相关信息。
能够以各种形式实施广播相关信息。例如，广播相关信息能够具有数字多媒体广播(DMB)标准的电子节目指南(EPG)或者手持数字视频广播(DVB-H)标准的电子服务指南(ESG)的形式。
广播接收模块111可以被配置为接收从各种类型的广播系统传送的广播信号，诸如地面数字多媒体广播(DMB-T)、卫星数字多媒体广播(DMB-S)、DVB-H、数字视频广播-广播和移动服务的集合(DVB-CBMS)、开放移动联盟广播(OMA-BCAST)、公知为仅媒体前向链路的数据广播系统和地面综合服务数字广播(ISDB-T)系统。广播接收模块111能够被配置成从除了上述数字广播系统之外的提供广播信号的广播系统接收信号。经由广播接收模块111接收的广播信号和/或广播相关信息能够被存储在存储介质，诸如存储器160中。
移动通信模块112能够向诸如基站、外部终端或服务器的至少一个网络实体传送无线信号，和/或从其接收无线信号。例如，根据文本/多媒体消息的传送和接收，这种无线信号能够包括音频、视频和数据。
移动通信模块112还能够将经由位置定位模块115获取的移动终端100的当前位置信息传送到外部服务器(在附图中未示出)，并且从外部服务器接收或下载与移动终端100位于其中的区域相关的数据。在该情形下，区域的详细地图数据能够被包括在表示移动终端100位于其中的区域的数据和图像中。
此外，与位于特定半径的区域内的对象相关的对象信息数据库能够被包括在地图数据中。例如，这些对象能够包括建筑物和位于建筑物内的机构，诸如医院、饭店、洗手间、警察局或社区中心。
每个区域的真实图像、包括在真实图像中的对象的位置信息、以及关于这些对象的详细信息能够被包括在地图数据中。例如，真实图像可以包括具有与通过相机121输入的预览图像相同视角的图像或鸟瞰图像。
无线互联网模块113可以是支持移动终端100的互联网接入的模块。例如，无线互联网模块113能够被包括在移动终端100中或者安装在与移动终端100耦合的外部设备中。例如，通过无线互联网模块113实施的无线互联网技术可以是无线局域网(WLAN)、Wi-Fi、无线带宽(WiBroTM)、全球微波互联接入(WiMAXTM)、或高速下行链路分组接入(HSDPA)。此外，无线互联网模块113能够从外部服务器接收或下载与移动终端100位于其中的区域相关的数据。
短距离通信模块114可以是用于支持相对短距离通信的模块。例如，短距离通信模块114能够被配置成使用短距离通信技术进行通信，该短距离通信技术诸如无线射频识别(RFID)、红外数据协会(IrDA)、或超宽带(UWB)，以及诸如蓝牙(BluetoothTM)和紫蜂(ZigbeeTM)的联网技术。
此外，如上所述，短距离通信模块114能够从外部服务器或位于移动终端100邻近的其他终端接收或下载与移动终端100位于其中的区域相关联的数据。
位置定位模块115识别或者以其他方式获取移动终端100的位置。在一个实施例中，位置定位模块115能够包括全球定位系统(GPS)模块。
A/V输入单元120能够用于输入音频信号或视频信号，并且能够包括相机121和麦克风122。例如，相机121能够具有数字变焦特征，并且在视频呼叫模式或拍摄模式中处理由相机121的图像传感器拍摄的静止图像或视频的图像帧。在显示单元151上能够显示处理后的图像帧。
相机121处理的图像帧能够被存储在存储器160中或者能够经由无线通信单元110被传送到外部设备。移动终端100的其他实施例能够包括多于一个相机121。
当在诸如电话呼叫模式、记录模式或语音识别模式的特定模式中操作时，麦克风122能够接收外部音频信号，并且能够将接收的音频信号处理成电子音频数据。随后音频数据能够被转换成在呼叫模式中能够通过移动通信模块112传送到移动通信基站的形式。麦克风122能够应用各种噪声去除或噪声消除算法，以去除或减少接收外部音频信号时产生的噪声。
响应于相应的输入设备或诸如小键盘、薄膜开关、触摸板、微动轮、微动开关的设备的用户操作，用户输出单元130能够生成输入数据。在一个实施例中，触摸板能够被配置成静压或电容类型。
感测单元140能够感测移动终端100的位置或移动终端100的组件的变化、移动终端100的组件(诸如显示器和小键盘)的相对定位、用户是否与移动终端100接触、移动终端100的方向、移动终端100的加速或减速、移动终端100的当前状态，诸如打开还是闭合状态。感测单元140也能够包括接近传感器141。
感测单元140能够生成用于根据移动终端的检测状态控制移动终端100的操作的感测信号。例如，当移动终端100被实施为滑盖型电话时，感测单元140能够感测移动终端100是打开还是闭合。此外，感测单元140能够感测电源190是否提供电力，以及接口单元170是否连接到外部设备。
输出单元150能够生成视觉、听觉和/或触觉输出，并且能够包括显示单元151、音频输出模块152、报警单元153、触觉模块154和投影仪模块155。显示单元151能够被配置成显示移动终端100所处理的信息。
例如，当移动终端100处于呼叫模式时，显示单元151能够显示用于发起、进行和终止呼叫的用户界面(UI)或图形用户界面(GUI)。例如，当移动终端100处于视频呼叫模式或拍摄模式中时，显示单元151能够额外地或可选地显示与这些模式相关联的图像，UI或GUI。
通过使用包括诸如液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT-LCD)、有机发光二极管显示器(OLED)、柔性显示器和三维显示器的显示技术实施显示单元151。根据移动终端100的配置，移动终端100能够被配置成包括多个显示单元151。
例如，移动终端100能够包括多个显示单元151，该多个显示单元151被布置在移动终端100的单个表面上，并且能够彼此间隔或者构造成一体。也能够在移动终端100的不同面上布置多个显示单元151。
在一个实施例中，在显示单元151中使用的显示器能够是透光类型或者光透射类型，以便显示单元151被实施为透明显示器。例如，透明显示器能够包括透明OLED(TOLED)显示器。显示单元151的背部结构也是光透射类型。因此，用户能够通过显示单元151所占的移动终端100的主体的透明区域看到位于移动终端100的主体后面的对象。
当显示单元151和用于感测用户触摸的传感器(在下文，称为“触摸传感器”)被配置成层结构以形成触摸屏时，显示单元151能够被用为输入设备和输出设备。例如，触摸传感器能够是触摸膜、触摸片或触摸板的形式。
触摸传感器能够将应用到显示单元151的特定部分的压力的变化或在显示单元151的特定部分生成的电容的变化转换成电输入信号。触摸传感器能够感测触摸所导致的压力，以及触摸的位置和区域。
当用户将触摸输入应用到触摸传感器时，与触摸输入相对应的信号能够被传送到触摸控制器(未示出)。触摸控制器能够处理信号并且将与处理后的信号相对应的数据传送到控制器180。随后，控制器180能够使用数据以检测显示单元151的触摸部分。
感测单元140的接近传感器141能够位于移动终端100的内部区域，并且由触摸屏包围或者在触摸屏周围。接近传感器141能够在没有机械接触的情况下使用电磁场或红外线来感测接近预定检测表面的对象或者位于接近传感器141附近的对象。接近传感器141具有比接触传感器更长的耐用性，并且在移动终端100中具有更广的应用。
接近传感器能够包括透射光电传感器、直接反射光电传感器、镜反射光电传感器、射频振荡接近传感器、静电电容接近传感器、磁接近传感器、和/或红外接近传感器。在一个实施例中，触摸屏能够包括静电电容接近传感器，以便通过根据指示器接近度的电场变化来检测指示器的接近。因此，触摸屏或触摸传感器可以被归类为接近传感器141。
为了简洁，指示器接近触摸屏并且被识别、而实际上未接触触摸屏的动作在此处称为“接近触摸”，而指示器接触触摸屏的动作在此处称为“接触触摸”。在触摸屏上指示器的接近触摸的位置可以对应于指示器与触摸屏垂直相对的触摸屏上的位置。
经由接近传感器141，能够检测接近触摸和接近触摸模式，诸如接近触摸距离、接近触摸持续时间、接近触摸位置、或接近触摸移动状态。例如，在触摸屏上能够显示与检测的接近触摸动作和接近触摸模式相对应的信息。
音频输出模块152在呼叫接收模式、呼叫发起模式、记录模式、语音识别模式、或广播接收模式中，输出从无线通信单元110接收到的或者存储在存储器160中的音频数据。音频输出模块152也能够提供与移动终端100所执行的特定功能(诸如接收到呼叫或接收到消息)相关的音频信号。例如，音频输出模块152能够包括扬声器、蜂鸣器、或其他音频输出设备。
报警单元153使用振动和视频或音频信号，能够输出用于指示诸如呼叫接收事件、消息接收事件和触摸输入事件的移动终端100的事件发生的信号。也能够经由显示单元151或音频输出单元152输出视频或音频信号。因此，显示单元151或音频输出模块152能够被认为是报警单元153的一部分。
触觉模块154能够生成用户能物理地感知的各种触觉效果。例如，触觉模块154生成的触觉效果能够包括振动。触觉模块154生成的振动的强度和/或模式可以被控制。例如，能够组合并提供不同振动，或者顺序地提供不同振动。
除了振动触觉模块154还能够生成各种触觉效果。这些触觉效果包括与用户的皮肤接触的垂直移动的针的阵列所产生的效果、通过喷射孔的空气的力或通过抽吸孔的空气的抽吸所产生的效果、掠过用户皮肤所产生的效果、接触电极所产生的效果、静电力所产生的效果、使用吸热或放热设备应用冷和热温度所产生的效果。
例如，触觉模块154能够使得用户通过用户的手指或胳膊的肌肉感觉来感知触觉效果，并且通过直接接触来传送触觉效果。可选地，根据移动终端100的配置，移动终端100能够包括至少两个触觉模块154。
投影仪模块155是用于执行移动终端100的图像投影功能的元件。在一个实施例中，投影仪模块155能够被配置成根据控制器180的控制信号在外部屏幕或墙上显示图像，该图像与显示单元151显示的图像相同或者部分地不同。
例如，投影仪模块155可以包括生成用于图像的外部投影的充足光的光源(未示出)，诸如激光器；用于经由从光源生成的光来产生将被投影的图像(未示出)的装置；以及根据预定焦距放大被投影的图像的透镜(未示出)。投影仪模块155还能够包括用于通过机械地移动透镜或整个投影仪模块155来调整投影图像的方向的设备(未示出)。
根据使用的显示器类型，投影仪模块155可以被分类成阴极射线管(CTR)模块、液晶显示器(LCD)模块、或者数字光处理(DLP)模块。例如，DLP模块是通过使得从光源生成的光能够在数字微镜设备(digital micro-mirror device)(DMD)芯片上反射来操作的，并且其有利于缩小投影仪模块151的尺寸。
优选地可以在移动终端100的侧面、前面或后面的长度方向上配置投影仪模块155。然而，应当理解，可以将投影仪模块155配置在移动终端100的任何部分。
存储器160能够存储各种数据，以支持移动终端100的处理、控制和存储需求。例如，这些类型的数据能够包括用于移动终端100所操作的应用的程序指令、联系人数据、电话本数据、消息、音频、静止图像、和/或运动图像。
每个类型的数据的最近使用历史或累计使用频率，诸如每个电话本、消息或多媒体的使用频率，能够被存储在存储单元160中。此外，在对触摸屏执行输入触摸时所输出的振动和/或声音的各种模式的数据可以被存储在存储单元160中。
包括对象(诸如建筑物、商店以及路标)的对象信息的对象信息数据库能够被存储在存储器160中。例如，使用与经由相机121拍摄的预览图像内的对象相关的模式识别信息或者经由位置定位模块115获得的移动终端100的位置信息，能够搜索对象信息数据库。经由搜索而识别的对象的对象信息能够包括：诸如建筑物或商店的名称的相关文本信息、诸如建筑物或商店的链接信息的相关链接信息、诸如建筑物或商店的图像标志的相关图像信息、以及诸如与建筑物或商店有关的歌曲的相关音频信息。
能够经由无线通信单元110从外部服务器的数据库下载或更新存储在存储器160中的对象信息数据库。根据存储器160的存储容量，存储在存储器160中的对象信息数据库能够包括从外部服务器下载的整个数据库或者从外部服务器下载的部分数据库。
对于距移动终端100当前位置预定距离之内的对象或者对于与移动终端100当前位置相关的预定区域(诸如行政区)内的对象，能够提供外部服务器的部分数据库。
能够将包括多个对方视频图像的联系人信息存储在存储器160中。在该情形下，联系人信息能够包括相应对方的姓名、视频图像、电话号码、电子邮箱地址和传真号码。
存储器160可以使用任何类型或组合的适当的易失性和非易失性存储器或存储设备来实现，诸如闪存、硬盘型存储器、多媒体卡微型存储器、卡型存储器，诸如安全数字(SD)卡或极限数字(XD)卡、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、可擦可编程只读存储器(EPROM)、可编程ROM(PROM)、电可擦可编程只读存储器(EEPROM)、磁存储器、磁盘、光盘或其他类型的存储器或数据存储设备。在其他实施例中，存储器160能够是可由移动终端100经由因特网而接入的存储设备。
接口单元170能够将移动终端100耦合到外部设备。接口单元170能够接收来自外部设备的数据或电力，并且将数据或电力传送到移动终端100的内部组件。此外，接口单元170能够将移动终端100的数据传送到外部设备。接口单元170能够例如包括有线或无线头戴式耳机端口、外部充电器端口、有线或无线数据端口、存储卡端口、用于连接到具有识别模块的设备的端口、音频输入/输出(I/O)端口、视频I/O端口、和/或耳机端口。
识别模块是存储用于对使用移动终端100的权限进行认证的各种信息的芯片。例如，识别模块能够是用户识别模块(UIM)、订户识别模块(SIM)、或通用订户识别模块(USIM)。也能够将包括识别模块的设备(下文称为“识别设备”)制造为智能卡的形式。因此，识别设备可经由接口单元170的相应端口连接到移动终端100。
当将移动终端100连接到外部支架时，接口单元170能够用作为允许将电力从支架供应给移动终端100的通道，或者能够用作为允许用户经由外部支架输入的各种命令信号被传送到移动终端100的通道。由外部支架提供的各种命令信号或电力可以用作为用于识别移动终端100被正确地加载在外部支架中的信号。
控制器180能够控制移动终端100的整体操作。例如，控制器180能够被配置成执行与语音呼叫、数据通信、和/或视频呼叫等相关联的控制和处理。控制器180能够执行模式识别处理，以从在触摸屏上执行的手写输入和绘图输入识别为字符或图像。在一个实施例中，控制器180经由模式识别处理能够识别预定图像的期望部分，诸如相机预览图像或其他显示的图像。
控制器180能够被配置成实施增强现实(AR)技术。AR是一种虚拟现实，其提供通过将用户的裸眼所看见的真实世界场景的图像和包括边信息(side information)的虚拟世界的图像合并而生成的单个图像。从概念上讲，AR例如通过提供关于真实世界的地理信息，以虚拟世界补足真实世界的图像。控制器180能够以AR的形式显示对象信息。
控制器180能够包括对象信息模块(未示出)，以执行与对象信息的显示相关的处理。对象信息模块能够与控制器180构造成一体或被外部地配置到控制器180。
控制器180能够包括用于播放多媒体的多媒体模块181。多媒体模块181能够与控制器180构造成一体，如图1中所示，或者能够被外部地连接到控制器180。
电源单元190能够是外部电源、内部电源或其组合。电源单元190将电力提供给移动终端100的其他组件。
使用诸如计算机软件、硬件或其一些组合经由计算机可读介质能够实现这里描述的各种实施例。例如，使用至少一个或多个专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、设计为执行此处描述的功能的其他电子单元、和/或其组合，能够在硬件中实现此处描述的移动终端100的组件。
例如，可以使用允许执行至少一个功能或操作的独立软件模块，在软件中实现此处描述的过程和功能。软件代码能够通过以任何适当的编程语言所编写的软件应用或程序来实现。能够在存储器160中存储软件代码并且通过控制器180执行。
图2A是根据本发明的一个实施例的移动终端100的前透视图。在图2A中，移动终端100被示出为具有直板形终端主体。
然而，应该理解的是，移动终端100不限于直板形终端主体，并且具有各种其他主体类型。这样的主体类型的示例包括滑动型主体、折叠型主体、旋转型主体、摆动型主体和其组合。虽然此处公开内容主要涉及直板形移动终端100，应该理解的是，本公开也能够应用到其他类型的移动终端。
如图2A中所示，形成移动终端100的外部的移动终端100的壳体(以其他方式称为“外壳”“外罩”或者“外盖”)能够包括前壳体101和后壳体102。各种电子组件能够设置在前壳体101和后壳体102之间提供的空间中。一个或多个中间壳体还能够被附加地设置在前壳体101和后壳体102之间。例如，前壳体101和后壳体102通过合成树脂的注模而形成，或者能够由诸如不锈钢(STS)、钛(Ti)等金属物质形成。
显示器151、音频输出模块152、相机121、用户输入模块130a和131b、麦克风122、或者接口单元170能够位于移动终端100上，并且更具体地，是位于前壳体101上。
如图2A中所示，例如，显示单元151能够被配置成占据前部壳体101的正面156的大部分。又如图2A中所示，音频输出单元152和相机121能够设置在与显示单元151的一个端部相邻的区域，而用户输入模块130a和麦克风122位于与显示单元151的另一端部相邻的区域。还如图2A中所示，用户输入模块130b和接口单元170能够被分别设置到前壳体101和后壳体102的侧部，诸如侧部158和159。
参考图1先前描述的用户输入单元130能够被配置成接收用于控制移动终端100的操作，并且能够包括图2A中所示的一个或多个用户输入模块130a和130b。用户输入模块130a和130b各个能够被称为“操作单元”，并且能够被配置成使用触觉操纵及响应的各种方法和技术，以便于用户操作。
用户输入模块130a和130b能够被配置成用于输入相对彼此不同的命令。例如，用户输入模块130a能够被配置成允许用户向移动终端100输入诸如“开始”“结束”和“滚动”等命令。用户输入模块130b能够允许用户输入用于调整音频输出单元152的音量的命令或用于切换到显示单元151的触摸识别模式的命令。
图2B是根据本发明的一个实施例的移动终端100的后透视图。如图2B中所示，相机121-1能够被附加地位于后壳体102的后表面161上。相机121-1具有基本上与图2A中所示的相机121的观看方向相反的观看方向。相机121和121-1能够相对彼此具有不同分辨率、或者不同像素数。
例如，相机121能够以低于相机121-1的相对较低的分辨率操作，以拍摄用户的图像，以允许该图像被立即传送到实时视频呼叫的另一用户，然而相机121-1能够以比相机121相对较高的分辨率操作，以拍摄具有较高图片质量的一般对象的图像，其不要求实时立即传送，并且可以被存储以用于随后浏览或使用。例如，相机121和相机121-1能够被配置成在移动终端100上旋转或弹出。
诸如闪光灯123和镜子124的附加的相机相关组件能够位于相机121-1的附近。当使用相机121-1拍摄物体的图像时，闪光灯123照亮物体。当用户期望使用相机121-1拍摄他自己的图像时，镜子124通过允许用户看见自己而允许进行自我图像拍摄。
后壳体102的后表面161还能够包括第二音频输出模块152-1。第二音频输出模块152-1能够与图2A中所示的音频输出模块152一起支持立体声音功能，并且当移动终端100处于扬声器电话模式时其能够用于电话呼叫期间的通信。
除了用于电话呼叫的天线之外，广播信号接收天线116能够附加地连接到移动终端100的主体的侧部。广播信号接收天线116能够形成图1中所示的广播接收模块111的一部分，并且能够设置在移动终端100的主体中，以便广播信号接收天线能够从移动终端100的主体中拉出和缩进。
图2B示出了用于将电力提供给移动终端100的电源单元190。例如，电源单元190能够位于移动终端100的内部或者可拆卸地连接到移动终端100。
如图2B中所示，用于感测用户的触摸的触摸板135能够位于后壳体102的后表面161。在一个实施例中，触摸板135和显示单元151能够是半透明的，以便显示在显示单元151上的信息能够在显示单元151的两侧面输出，并且能够通过触摸板135观看。通过触摸板135能够控制在显示单元151上显示的信息。在另一实施例中，除图2A中所示的显示单元151之外的第二显示单元能够位于后壳体102的后表面161，并且与触摸板135合并，以在后壳体102上形成触摸屏。
通过与前壳体101的显示单元互联来激活触摸板135。触摸板135能够位于与显示单元151平行或者在显示单元151的后面。触摸板135能够具有与显示单元151相同或更小的尺寸。
图3是示出用于根据本发明的一个实施例在增强现实(AR)模式中编辑预览图像的移动终端100所执行的方法的流程图。参考图3，如果用户选择用于进入AR模式的菜单功能，则移动终端100的控制器180驱动相机121，并且在触摸屏151上显示相机121当前输入的场景的预览图像300[S110]。
控制器180通过位置信息模块115获取移动终端100的当前位置[S120]。例如，位置信息模块115能够从卫星接收位置信息，诸如移动终端100的纬度、经度、海拔和方向。
控制器180基于移动终端100的当前位置，能够从存储器160中的对象信息数据库，搜索在预览图像中存在的一个或多个对象的对象信息[S130]。在一个实施例中，控制器180能够识别在预览图像中存在的对象的模式(pattern)，并且从存储器160中的对象信息数据库中搜索与识别的模式相对应的对象信息。例如，对象信息能够包括相对应对象的名称、联系地址和详细位置。
如果执行对象信息数据库的搜索以识别在预览图像中存在的对象的对象信息，则控制器180根据AR方案在预览图像内的对象的相对应的位置处显示对象信息[S140]。根据步骤S110至S140的移动终端100的操作模式将在下文称为“AR模式”。
控制器180根据一个或多个功能显示用于编辑预览图像、在预览图像中显示的对象或对象信息的UI[S150]。更确切地说，UI提供了根据各种功能用于编辑预览图像的工具，将在下文参考图4A至图24进行描述。
如果使用UI已经编辑了预览图像、在预览图像中显示的对象或对象信息[S160]，那么控制器180在存储器160中存储被编辑的预览图像以及与已被编辑的预览图像的部分相对应的位置信息[S170]。例如，如果移动终端100再次位于与先前编辑的预览图像的部分相对应的位置，那么存储的位置信息随后能够用于显示被编辑的预览图像。
例如，移动终端100的用户能够编辑当前预览图像、在当前预览图像中的对象或对象信息。移动终端100能够随后存储被编辑的预览图像、在当前预览图像中的被编辑的对象或对象信息。如果随着用户握住并操作移动终端100，移动终端100返回到与存储的位置信息相对应的位置，那么能够显示被存储的预览图像。
在一个实施例中，如果移动终端100位于与存储的预览图像的被编辑部分相对应的位置，那么控制器180能够被配置成在不使用位置信息的情形下显示被存储的预览图像。更确切地说，如果从相机121当前输入的预览图像与被存储的预览图像一样，那么控制器180能够显示被存储的预览图像。
例如，如果从相机121输入的当前预览图像与被存储的预览图像相同，那么控制器180能够从存储的预览图像提取被编辑的部分，并且通过在当前预览图像上的相对应位置上将提取部分和当前预览图像合并而显示提取部分。可选地，控制器180通过在当前预览图像的相对应位置上将提取部分叠加在当前预览图像上，能够显示提取部分。当控制器180显示被编辑的预览图像时，如果移动终端100在AR模式中操作，控制器180能够被配置成不再显示从相机121输入的当前预览图像，并且在用于AR的屏幕上显示被编辑的预览图像。
当控制器180显示被编辑的预览图像时，如果移动终端100在AR模式中操作，那么控制器180通过将从相机121输入的当前预览图像与被编辑的预览图像进行比较，能够从被编辑的预览图像仅提取被编辑部分，并且通过将提取部分和从相机121输入的当前预览图像的相对应部分叠加或合并，来显示提取部分。如果移动终端100不在AR模式中操作，那么控制器180能够通过在当前屏幕上仅显示被编辑的预览图像的帧，来显示被编辑的预览图像，或者将移动终端100的操作切换成AR模式，并且基于AR模式在屏幕上显示被编辑的预览图像。
控制器180通过无线通信单元110，能够将编辑和存储的预览图像传送到特定的其他移动终端的联系地址[S180]。例如，如果当编辑预览图像时或者在编辑预览图像之前输入特定的其他移动终端的联系地址，那么控制器180能够通过无线通信单元110将被编辑的预览图像传送到特定的其他移动终端。
控制器180也能够将与已经编辑的预览图像的部分相对应的位置信息与被编辑的预览图像一起传送到特定的其他移动终端。例如，在特定的其他移动终端从移动终端100接收到被编辑的预览图像和与已经编辑的预览图像的部分相对应的位置信息之后，如果特定的其他移动终端的当前位置与接收到的位置信息相对应，那么特定的其他移动终端显示接收到的预览图像。
因此，如果当前输入到相机121的预览图像的部分是与使用特定的其他移动终端的一方商定的部分或是重要部分，那么移动终端100用户可以编辑该预览图像，并且将被编辑的预览图像传送至该特定的其他移动终端。如果特定的其他移动终端的当前位置与接收到的已被编辑的预览图像的部分相对应，那么特定的其他移动终端能够显示被编辑的预览图像。
如果特定的其他移动终端再次位于与预览图像被编辑的部分相对应的位置上，那么特定的其他移动终端能够显示接收到的预览信息，而没有与被编辑的预览图像相对应的位置信息。换言之，在被编辑的预览图像被接收之后，如果从相机121当前输入的预览图像与接收的预览图像相同，那么特定的其他移动终端能够显示接收的预览图像。
如果从特定的其他移动终端的相机当前输入的预览图像与接收的预览图像相同，那么特定的其他移动终端能够从接收的预览图像提取被编辑的部分，并且通过在当前预览图像上的相对应位置上将提取部分和当前预览图像合并，来显示提取部分。可选地，特定的其他移动终端能够通过在当前预览图像的相对应位置上将提取部分叠加在当前预览图像上，来显示提取部分。
如果特定的其他移动终端正在AR模式中操作，那么特定的其他移动终端能够被配置成不再显示从特定的其他移动终端的相机当前输入的预览图像，并且在用于AR的屏幕上显示接收的预览图像。当特定的其他移动终端在AR模式中操作时显示接收的预览图像时，特定的其他移动终端能够通过将从特定的其他移动终端的相机输入的当前预览图像和接收的预览图像相比较，来从接收的预览图像仅提取被编辑的部分，并且通过将提取的部分和从特定的其他移动终端的相机当前输入的预览图像的相对应部分叠加或合并，来显示提取的部分。
当显示接收的预览图像时，如果特定的其他移动终端没有在AR模式中操作，那么特定的其他移动终端能够在屏幕上仅显示接收的预览图像的帧。可选地，当特定的其他移动终端没有在AR模式中操作时，特定的其他移动终端能够将当前操作模式切换成AR模式，并且基于AR模式在屏幕上显示接收的预览图像。
当显示接收的预览图像时，特定的其他移动终端能够识别从特定的其他移动终端的相机当前输入的预览图像的位置和所接收的预览图像的位置，计算到达与接收的预览图像的相对应的部分的距离，计算用于从当前位置行进到与接收的预览图像相对应的部分的时间段和路线，并且显示所计算的距离、时间段和路线。
在另一实施例中，控制器180能够通过经由无线通信单元110将编辑的预览图像传送到外部服务器，与多个其他方的其他移动终端共享编辑的预览图像。例如，外部服务器可以是允许两个或更多移动终端共享由该两个或更多移动终端编辑的预览图像的服务器。
根据本发明的一个实施例，能够使用UI来编辑在AR模式的预览图像中的特定对象或对象信息的外观，该UI提供用于改变特定对象或对象信息的显示样式的编辑功能。图4A至图8C是根据本发明的各种实施例示出了用于通过改变特定对象或对象信息的显示样式而编辑AR模式的预览图像的各种操作的显示单元151的示例性显示屏。
如图4A中所示，当在AR模式的预览图像中显示对象310A的对象信息310B和对象320A的对象信息320B时，能够输入用于编辑对象310A的对象信息310B的显示样式的编辑命令。如图4B中所示，控制器180随后能够显示UI 410，该UI 410提供用于改变对象信息310B的显示样式的编辑功能。
在一个实施例中，编辑命令能够是用于选择对象310A和320A和将要编辑的对象信息310B和320B之一的选择操作。例如，如图4A中所示，能够对对象信息310B执行选择操作。如图4B中所示，UI 410能够提供用于改变图4A中所选择的对象信息310B的一个或多个显示样式的编辑功能。
在一个实施例中，编辑功能能够包括尺寸改变功能411、颜色改变功能412、3D切换功能413和形状名称改变功能414，如图4B中所示。应该理解的是，用于改变显示样式的编辑功能不限于此处描述的示例，并且UI 410能够包括用于在AR模式的预览图像中改变对象或对象信息的显示样式的所有编辑功能。
现将参考图5A至图8C描述用于通过UI 410的414使用示例性编辑功能411来编辑对象信息310B的显示样式的移动终端100的操作。
如图5A中所示，能够从UI 410选择尺寸改变功能411。随后能够输入用于改变对象信息310B的尺寸的命令，如图5B或图5C中所示。如图5D中所示，控制器180能够根据用于改变对象信息310B的尺寸的相应命令，来改变对象信息310B的尺寸。
在图5B中，经由使用捏放(pinching-out)手势而执行的多触摸输入411a，来输入用于改变对象信息310B的尺寸的命令。更确切地说，通过在对象信息310B上触摸第一点和第二点并逐渐增加第一点和第二点之间的距离，能够执行多触摸输入411a。因此，如果在对象信息310B上使用捏放手势执行多触摸输入411a，那么控制器180将对象信息310B的尺寸增加与第一点和第二点之间的增加距离相对应的量。
虽然在图5B中未示出，但能够使用捏入(pinching-in)手势可选地执行多触摸输入。更确切地说，通过在对象信息310B上触摸第一点和第二点并且逐渐减少第一点和第二点之间的距离，能够执行多触摸输入。因此，如果在对象信息310B上使用捏入手势执行这种多触摸输入，那么控制器180能够将对象信息310B的尺寸减少与第一点和第二点之间的减少距离相对应的量。
在图5C中，能够经由尺寸输入窗口411b输入用于改变对象信息310B的尺寸的命令，该尺寸输入窗口411b可以被用于输入表示将被应用到对象信息310B的期望尺寸的值。例如，当在尺寸输入窗口411b中输入诸如“15”的值时，控制器180能够将对象信息310B的尺寸改变为与如图5D中所示的值相对应的尺寸。
参考图6A，能够从UI 410中选择颜色改变功能412。随后能够输入用于改变对象信息310B的颜色的命令，如图6B或图6C中所示。如图6D中所示，控制器180根据用于改变对象信息310B的颜色的相应命令，能够改变对象信息310B的颜色。
在图6B中，通过从颜色表415中选择期望的颜色，来输入用于改变对象信息310B的颜色的命令。更确切地说，当从颜色表415中选择特定颜色时，控制器180将对象信息310B的颜色改变为所选择的颜色。
在图6C中，能够经由颜色输入窗口416输入用于改变对象信息310B的颜色的命令，该颜色输入窗口416能够用于输入将要应用到对象信息310B的颜色。例如，当在颜色输入窗口416输入颜色的名称时，控制器180能够将对象信息310B的颜色改变为在颜色输入窗口416中命名的颜色。
参考图7A，能够从UI 410选择三维(3D)切换功能413。如图7B中所示，控制器180随后能够以3D显示对象信息310B。更确切地说，存储器160能够存储与左眼和右眼相对应的对象信息310B的图像，并且控制器180能够将与左眼和右眼相对应的图像合并成单个图像，以使得以3D观看对象信息310B。
参考图8A，能够从UI 410选择名称改变功能414。如图8B中所示，在名称输入窗口417中输入将被应用到对象信息310B的名称。控制器180随后将对象信息310B的名称改变为在输入窗口417中输入的名称，并且显示该名称，如图8C中所示。
因此，在通过使用一个或多个编辑功能411至414改变对象信息310B的显示样式而编辑了预览图像300之后，控制器180随后能够和编辑的预览图像的位置信息一起在存储器160中存储编辑的预览图像[S170]。控制器随后能够通过无线通信单元110将编辑和存储的预览图像传送到特定的其他移动终端的联系地址[S180]。
在一个实施例中，控制器180能够通过根据放大率(magnifying power)放大预览图像300来显示预览图像300。在执行对象信息310B的编辑之前或之后能够设置放大率。
更确切地说，控制器180能够通过在编辑对象信息310B之前根据放大率将预览图像300放大，来显示预览图像300，以便允许用户更详细地编辑对象信息310B。可选地，控制器180能够通过在编辑对象信息310B之后根据放大率将预览图像300放大，来显示预览图像300，以便允许用户更详细地识别对象信息310B。
应该理解的是，先前描述的实施例和用于改变对象信息310B的显示样式的示例也能够被类似地应用于在预览图像300中改变对象，诸如对象310A和320A。
根据本发明的另一实施例，能够使用UI来编辑AR模式的预览图像中的特定对象或对象信息的外观，该UI提供用于区分预览图像300内的对象或对象信息的编辑功能。图9A至图12B根据本发明的各种实施例示出了显示单元151的显示屏，其示出用于区分在AR模式的预览图像300中的特定对象或对象信息的操作。
如图9A中所示，当在AR模式的预览图像300中显示对象310A和320A的对象信息310B和320B时，能够输入用于编辑对象310A的对象信息310B的编辑命令，以区分在预览图像300中的对象信息310B。控制器180随后能够显示UI 420，该UI 420提供用于区分对象信息310B的一个或多个编辑功能，如图9B中所示。
如图9B中所示，UI 420提供用于区分从图9A中的预览图像中选择的对象信息310B的一个或多个编辑功能。在图9B的实施例中，UI420包括诸如闪烁功能421、高亮功能422以及缩小功能(reduction function)423的编辑功能。应该理解的是，用于区分对象信息的编辑功能不限于此处描述的示例，并且UI 420能够包括用于区分在AR模式的预览图像300中的对象或对象信息的所有编辑功能。
将参考图10A至图12B，描述用于通过使用包括在UI 420中的编辑功能421、422和423来区分对象信息310B，从而编辑AR模式的预览图像300的移动终端100的示例性操作。
在图10A中，从UI 420选择用于区分对象信息310B的闪烁功能421。响应于该选择，控制器180根据先前设置的周期使得对象信息310B闪烁，以区分在预览图像300中的对象信息310B，如图10B中所示。
用户能够编辑和存储对象信息，该对象信息被认为是在预览图像300中最重要的，诸如对象信息310B，以区分对象信息。当移动终端100返回到与预览图像300相对应的位置时，用户能够再次观看包括所区分的对象信息310B的预览图像300。
在一个实施例中，用户能够编辑与另一方所商定的部分相对应的对象的对象信息310B，以区分对象信息310B，并且将编辑的对象信息310B传送到另一方的特定的其他移动终端。因此，使用特定的其他移动终端的另一方能够容易地识别在接收的预览图像300中的对象信息310B，其中，对象信息310B对应于与用户商定的部分的信息。
在图11A中，从UI 420中选择用于区分对象信息310B的高亮功能422。响应于该选择，控制器180使得对象信息310B在预览图像300内被高亮，如图11B中所示。
在图12A中，从UI 420中选择用于区分对象信息310B的缩小功能423。响应于该选择，控制器180在预览图像300内减小对象320A和对象信息320B的尺寸，同时保持对象310A和对象信息310B的初始尺寸，如图12B中所示。因此，如果缩小功能423被选择，那么控制器180暂时存储预览图像300，并且相对于暂时存储的预览图像300内的对象310A和对象信息310B以缩小尺寸来显示对象320A和对象信息320B。
在如参考图9A至图12B所述通过使用编辑功能421、422和423来区分任何对象信息从而编辑预览图像300之后，随后控制器180能够和编辑的预览图像的位置信息一起在存储器160中存储编辑的预览图像[S170]。控制器180随后能够通过无线通信单元110将编辑和存储的预览图像传送到特定的其他移动终端的联系地址[S180]。
应该理解的是，能够以相同方式应用先前描述的实施例和用于区分对象信息310B的示例，以区分在预览图像300中的对象，诸如对象310A和320A。
将参考图13A至图14C描述用于通过插入备忘录或草写消息来编辑AR模式的预览图像的移动终端100的操作。在图13A至图14C的实施例中，UI在预览图像内能够提供备忘录和草写消息编辑功能。
图13A至图13C是根据本发明的一个实施例显示单元151的示例性显示屏，其示出用于通过输入备忘录消息来编辑AR模式的预览图像的操作。如图13A中所示，当在AR模式的预览图像300中显示对象310A的对象信息310B和对象320A的对象信息320B时，能够输入用于对对象310A的对象信息310B输入备忘录消息的编辑命令。如图13B中所示，控制器180随后显示UI 430，该UI 430提供用于将备忘录消息输入到对象信息310B的编辑功能。
在图13B的实施例中，UI 430是备忘录消息输入窗口，该备忘录消息输入窗口能够用于对对象信息310B输入备忘录消息。控制器180能够通过将备忘录消息430a附加到对象消息310B，显示经由UI 430输入的备忘录消息430a，如图13C中所示。
在一个实施例中，在对象或预览图像300的背景上或在对象信息上，能够输入备忘录消息430a。例如，如果在从预览图像300选择对象310A之后经由UI 430输入备忘录消息，那么控制器180能够通过将其附加到对象310A来显示备忘录消息。可选地，如果在预览图像300内的背景部分被选择之后经由UI 430输入备忘录消息，那么控制器180能够通过将其附加到预览图像300内被选择的背景部分来显示备忘录消息。
图14A至图14C是根据本发明的一个实施例显示单元151的示例性显示屏，其示出用于通过输入草写消息来编辑AR模式的预览图像的操作。在图14A至图14C的实施例中，当在AR模式的预览图像300中输入用于输入草写消息的命令时，控制器180启用提供编辑功能的UI，该编辑功能用于将草写消息附加到预览图像300。例如，UI能够被配置成接收经由用户执行的触摸输入而手动输入的草写消息。当用户通过触摸显示单元151在预览图像300上手动地输入草写消息440时，如图14B中所示，控制器180能够在预览图像300中显示由用户输入的草写消息440，如图14C中所示。
控制器180能够将输入的备忘录消息或草写消息转换成文件类型，并且与预览图像一起在存储器160中存储转换的备忘录文件或草写文件。因此，控制器180能够使用存储的备忘录文件或草写文件以用于其他可能用途。
在如参考图13A至图14C所描述的通过插入备忘录或草写消息而编辑了预览图像300之后，控制器180随后能够和被编辑的预览图像的位置信息一起在存储器160中存储被编辑的预览图像[S170]。控制器180随后通过无线通信单元110能够将编辑和存储的预览图像发送到特定的其他移动终端的联系地址[S180]。
将参考图15A至图16B描述通过以用户期望的放大率放大或缩小预览图像来编辑AR模式的预览图像的示例性操作。在图15A至图16B的实施例中，UI能够提供用于预览图像的放大或缩小编辑功能。
图15A和图15B是根据本发明的一个实施例显示单元151的示例性显示屏，其示出用于通过放大预览图像来编辑AR模式的预览图像的操作。如图15A中所示，当在AR模式的预览图像300中显示对象310A的对象信息310B和对象320A的对象信息320B时，能够输入用于放大预览图像300的编辑命令。如在图15B中所示的，然后，控制器180启用提供编辑功能的UI，该编辑功能用于放大预览图像300。
在图15A中，UI被配置成在预览图像300中从用户接收触摸输入，诸如在对象310A上执行的捏放多触摸输入。响应于捏放多触摸输入，控制器180通过控制相机121并在对应于捏放多触摸输入的预览图像300的部分上进行放大，来显示预览图像300，诸如图15B中所示的对象310A。
图16A和图16B是根据本发明的一个实施例显示单元151的显示屏，其示出用于通过缩小预览图像来编辑AR模式的预览图像的操作。如图16A中所示，当在AR模式的预览图像300中显示对象310A的对象信息310B和对象320A的对象信息320B时，能够输入用于缩小预览图像300的编辑命令。如图16B中所示，控制器180随后启用提供编辑功能的UI，该编辑功能用于缩小预览图像300。
在图16A中，UI被配置成在预览图像300内接收来自用户的触摸输入，诸如在对象310A上执行的捏入多触摸输入。响应于捏入多触摸输入，控制器180通过控制相机121并在与捏入多触摸输入相对应的预览图像300的部分上进行缩小，来显示预览图像300，诸如图16B中所示的对象310A。
在一个实施例中，如果使用关于图15A和图15B或图16A和图16B先前所描述的UI来放大或缩小预览图像300，那么控制器180在存储器160中仅存储表示放大或缩小预览图像300的放大率的值以及预览图像300的位置信息。换言之，控制器180不能存储放大或缩小的预览图像。因此，如果移动终端100再次位于与预览图像的部分(对于其存储表示放大率的值)相对应的位置，那么控制器通过将存储的值应用到从相机121当前输入的预览图像，来显示预览图像。
在如参考图15A至图16B中所描述的通过放大或缩小来编辑预览图像300之后，控制器180随后与预览图像的位置信息一起在存储器160中存储预览图像和表示放大率的值[S170]。控制器随后能够通过无线通信单元110，与位置信息一起将存储的预览图像300和表示放大率的值传送到其他的特定移动终端的联系地址[S180]。
参考图17A至图17D，将描述用于通过将特定信息链接到预览图像来编辑AR模式的预览图像的移动终端100的操作。在图17A至图17D的实施例中，UI能够提供用于将特定信息链接到预览图像的编辑功能。图17A至图17D是根据本发明的一个实施例显示单元151的示例性显示屏，其示出了用于通过将特定信息链接到预览图像来编辑AR模式的预览图像的操作。
如图17A中所示，当在AR模式的预览图像300中显示对象310A的对象信息310B和对象320A的对象信息320B时，能够输入用于将特定信息链接到对象信息310B的编辑命令。如图17B中所示，控制器180随后显示UI，诸如UI 450，其提供用于链接特定信息的编辑功能。
例如，特定信息能够是与对象310A和对象信息310B相关的信息，并且能够被先前存储在存储器160中或者通过网站获取。此外，特定信息能够是描述对象310A的内部的图像、对象310A的详细户外图像、或者关于对象310A的详细信息。
在图17A至图17D的实施例中，UI 450是用于将在存储器160中存储的期望信息项链接到对象信息310B的信息选择窗口。例如，如果经由如图17B中所示的UI 450选择期望的信息项451，那么控制器180能够通过将其链接到对象信息310B来显示信息项451，如图17C中所示。
如图17D中所示，当信息项451被选择时，控制器180能够显示链接到对象信息310B的信息项451。可选地，如果从预览图像300中选择链接到信息451的对象信息310B或对象310A，那么控制器180能够显示信息451。
在如参考图17A至图17D中所述的通过将特定信息链接到预览图像300而编辑了预览图像300之后，控制器180随后能够将编辑的预览图像和编辑的预览图像的位置信息一起存储在存储器160中[S170]。控制器随后能够通过无线通信单元110将编辑和存储的预览图像传送到特定的其他移动终端的联系地址[S180]。
将参考图18A至图20C描述用于通过搜索与搜索关键词相关联的图像来编辑AR模式的预览图像以及通过将图像和预览图像合并来编辑预览图像的移动终端100的示例性操作，其根据本发明的各种实施例示出了显示单元151的示例性显示屏，其示出了用于通过搜索与搜索关键词相关联的图像来编辑AR模式的预览图像以及通过将图像和预览图像合并来编辑预览图像的各种操作。在图18A至图20C的实施例中，UI能够提供根据搜索关键词搜索图像和将图像和预览图像合并的编辑功能。
如图18A中所示，控制器180显示UI 460，其用于搜索将与预览图像300合并的图像。例如，当经由UI 460将术语“怪物”作为搜索关键词460a输入时，如图18B中所示，控制器180从存储器160中搜索关于搜索关键词460a的图像。在另一实施例中，控制器180能够使用无线通信单元110访问网站，并且在网站内搜索与搜索关键词460a相关的图像。
控制器180能够显示通过搜索而找到的图像461和图像462。如图18C中所示，图像461和图像462中的特定一个，诸如图像462，能够被拖动并且放在预览图像300的特定区域上。控制器180随后能够在特定区域将图像462和预览图像300合并，如图18C中所示。
如图19A中所示，图像461和462中的特定一个，诸如图像462被选择。当在预览图像300内指定区域463时，如图19B中所示，控制器180能够在指定区域463将选择的图像462和预览图像300合并，如图19C中所示。
如图20A中所示，图像461和462中的特定一个，诸如图像461被选择。当在预览图像300内在图像461上指定用于裁切操作的区域461a时，控制器180能够在与区域461a相对应的图像461的部分上执行裁切操作。如图20B中所示，当在预览图像300内指定区域463时，控制器180能够在区域463将图像461的被裁切部分和预览图像300合并，如图20C中所示。
在如参考图18A至图20C所述的通过搜索与搜索关键词相关联的图像来编辑预览图像300以及通过将图像和预览图像300合并来编辑预览图像300来编辑预览图像300之后，控制器180随后能够在存储器160中存储编辑的预览图像和编辑的预览图像的位置信息[S170]。控制器随后能够通过无线通信单元110将编辑的和存储的预览图像传送到特定其他移动终端的联系地址[S180]。
将参考图21A至图21C描述用于通过根据用户所画的图片搜索图像来编辑AR模式的预览图像以及通过将图像与预览图像合并来编辑预览图像的移动终端100的操作，其是根据本发明的一个实施例，示出了通过根据用户所画的图片搜索图像来编辑AR模式的预览图像以及通过将图像与预览图像合并来编辑预览图像的显示单元151的示例性屏幕。在图21A至图21C的实施例中，UI能够提供根据用户所画的图片搜索图像和将图像与预览图像合并的编辑功能。
如图21A中所示，控制器180能够显示UI 470，UI 470能够用于搜索将要与预览图像300合并的图像。在图21A的实施例中，UI 470是配置成接收用户所画的图片的画板。如图21B中所示，当用户经由UI 470画了图片470a时，控制器180识别图片470a的形状并且从存储在存储器160中的图像中搜索与图片470a相关的图像。可选地，控制器180使用无线通信单元110访问网站并且能够在网站内搜索与图片470a相关的图片。
如图21B中所示，控制器180能够显示通过搜查而找到的图像471和图像472。当图像471和图像472中的特定图像，诸如图像471被拖动并放在预览图像300的特定区域内时，控制器180能够在特定区域内将图像471和预览图像300合并，如图21C中所示的。
在如参考图21A至图21C中所描述的通过根据用户所画的图片搜索图像和将图像与预览图像300合并来编辑预览图像300之后，控制器180随后能够在存储器160中存储编辑的预览图像和编辑的预览图像的位置信息[S170]。随后控制器能够通过无线通信单元110将编辑和存储的预览图像发送到特定的其他移动终端的联系地址[S180]。
将参考图22A至图22C描述用于通过为预览图像提供表示一个或多个图形效果的图标、选择该图标之一、并且将与所选择的图标相对应的图标效果应用到预览图像，来编辑AR模式的预览图像的移动终端100的操作，其是根据本发明的一个实施例，示出了通过将图形效果应用到预览图像来编辑AR模式的预览图像的操作的显示单元151的示例性显示屏。在图22A至图22C的实施例中，UI能够提供用于将与图标相对应的图形效果应用到预览图像300的编辑功能。
如图22A中所示，UI 480包括与一个或多个图形效果相对应的图标481和482。图标481和482中的特定图标，诸如图标481被选择，并且指定预览图像300内的区域以应用与所选择的图标481相对应的图形效果，如图22B中所示。控制器180随后将图形效果应用到指定的区域，如图22C中所示。
在如参考图22A至图22C所述的通过将与所选择的图标相对应的图形效果应用到预览图像300来编辑预览图像300之后，控制器180随后能够在存储器160中存储编辑的预览图像和编辑的预览图像的位置信息[S170]。控制器随后能够通过无线通信单元110，将编辑和存储的预览图像传送到特定的其他移动终端的联系地址[S180]。
将参考图23A至24B描述用于将关于图3至图22C先前描述的操作所编辑的预览图像传送到另一方的移动终端或外部服务器的移动终端100的操作。图23A至图23C是根据本发明的一个实施例的显示单元150的示例性显示屏，其示出了用于将使用关于图3至图22C先前描述的操作而编辑的预览图像发送到另一方的移动终端的操作。
如图23A中所示，当通过参考图3至22先前描述的操作编辑了预览图像300，并且命令385被输入以用于将编辑的预览图像300传送到另一方的移动终端时，控制器180能够显示其他方的多个移动终端的联系地址的列表。在存储在存储器160中的电话簿中登记联系地址的列表，如图23B中所示。
例如，如果从图23B中的联系地址的列表中选择与另一方的移动终端相对应的联系地址“LEE”，那么控制器180通过控制无线通信单元110，能够将包括编辑的预览图像300的信号传送到所选择的另一方的移动终端，如图23C中所示。在一个实施例中，控制器180还能够包括在被传送到另一方的移动终端的信号中的编辑的预览图像300的位置信息。因此，在从移动终端接收编辑的预览图像300和位置信息之后，在当前位置与接收的位置信息相对应时，另一方的移动终端能够显示接收的预览图像300。
在一个实施例中，当另一方的移动终端再次位于与预览图像300被编辑的部分相对应的位置时，另一方的移动终端能够显示从移动终端100接收的编辑的预览图像300，而没有预览图像300的位置信息。换言之，在接收编辑的预览图像300之后，当从另一方的移动终端的相机当前输入的预览图像与接收的预览图像300相同时，另一方的移动终端能够显示编辑的预览图像300。
在另一实施例中，当另一方的移动终端再次显示从移动终端100接收的编辑的预览图像300时，另一方的移动终端能够识别从其相机当前输入的预览图像的位置以及编辑的预览图像300的位置。另一方的移动终端随后能够计算到达与编辑的预览图像300相对应的部分的距离、用于从当前位置行进到与编辑的预览图像300相对应的部分的时间段和路线，并且显示所计算的距离、时间段和路线。
图24A和图24B是根据本发明一个实施例的显示单元151的示例性显示屏，其示出了将使用参考图3至图22C先前描述的操作而编辑的预览图像传送到外部共享服务器的操作。如图24A中所示，当通过参考图3至图22C先前描述的操作而编辑了预览图像300，并且命令387被输入以用于将编辑的预览图像300传送到外部共享服务器时，控制器180通过控制无线通信单元110，能够将包括编辑的预览图像300的信号传送到外部共享服务器，如图24B中所示。
例如，外部共享服务器能够是允许两个或多个移动终端共享由该两个或多个移动终端编辑的预览图像的服务器。控制器180将编辑的预览图像传送到服务器，以便允许与其他的移动终端共享编辑的预览图像。
如上所述，根据本发明的移动终端和用于控制移动终端的方法提供多种优点。例如，本发明能够允许用户经由UI使用各种编辑功能来编辑AR模式的预览图像。此外，移动终端100通过将编辑的预览图像传送到另一方的移动终端，与另一方的移动终端共享经由UI编辑的预览图像。
本领域的技术人员应该明白，在不脱离本发明的精神和范围的情形下，能够对本发明进行各种修改和改变。因此，本发明意欲覆盖落入所附权利要求及其等效物的范围内的本发明的修改和改变。

Claims (24)

1.一种用于控制移动终端的方法，所述方法包括：
在所述移动终端的显示器上以增强现实(AR)模式显示通过相机输入的第一图像；
当所述第一图像被输入时，通过所述移动终端的位置信息单元获得所述移动终端的第一位置信息；
基于所述获得的第一位置信息，在对象信息数据库中搜索在第一图像中存在的对象的对象信息，并在所述第一图像内的对象的相对应的位置处显示对象信息；
在所述显示器上提供用户界面(UI)，所述用户界面(UI)用于编辑包括AR模式中的所述对象信息的所述第一图像的至少一部分，以便生成编辑的第一图像；
在所述移动终端的存储器中存储所述编辑的第一图像和所述第一位置信息；
当所述移动终端移动时，通过所述位置信息单元获得所述移动终端的第二位置信息；以及
如果所述移动终端基于获得的所述第二位置信息位于与所述存储的第一位置信息相对应的位置，那么，
如果所述移动终端处于非AR模式，则在所述显示器上显示所述存储的编辑的第一图像，以及
如果所述移动终端处于AR模式，则在所述显示器上显示当前编辑的第一图像，其中，所述当前编辑的第一图像是指通过将由所述相机输入的所述第一图像与所述存储的编辑的第一图像进行比较，从所述存储的编辑的第一图像提取编辑部分，并且将提取的所述编辑部分与所述第一图像的相对应部分进行叠加而合成的图像。
2.根据权利要求1所述的方法，进一步包括：
显示包括对应于其他移动终端的联系人的列表；以及
当所述联系人从所述列表中被选择时，传送编辑的第一图像到其他移动终端。
3.根据权利要求1所述的方法，进一步包括：
响应于根据至少一个功能经由所述用户界面接收的输入，通过改变至少所述对象信息或所述对象的外观来编辑所述第一图像的至少一部分。
4.根据权利要求3所述的方法，其中，所述至少一个功能被用于区分所述图像中的所述对象信息或所述对象。
5.根据权利要求3所述的方法，其中，编辑所述第一图像的至少一部分包括：响应于经由所述UI接收的输入，放大或缩小所述第一图像，以使得编辑的第一图像为放大的或缩小的第一图像，并且
其中，所述方法进一步包括将所述放大的或缩小的第一图像存储在所述存储器中。
6.根据权利要求5所述的方法，进一步包括：
存储表示放大的或缩小的第一图像的放大率的值，以及所述放大的或缩小的第一图像的所述第一位置信息；以及
当所述第二位置信息位于与所述第一位置信息相对应的位置时，将对应于所述值的放大率应用到所述第一图像。
7.根据权利要求3所述的方法，其中，编辑所述第一图像的至少一部分包括：响应于经由所述UI接收的输入，在所述第一图像上输入备忘录或草写消息，并且
其中，所述方法进一步包括在所述存储器中存储包括所述备忘录或草写消息的编辑的第一图像。
8.根据权利要求1所述的方法，其中，所述用户界面包括用于导入至少一个导入图像到所述第一图像上，并且将所述至少一个导入图像与所述第一图像合并，以便生成编辑的第一图像，并且
其中，所述方法进一步包括在所述存储器中存储所述编辑的第一图像的功能，所述编辑的第一图像包括所述至少一个导入图像。
9.根据权利要求8所述的方法，其中，导入所述至少一个导入图像包括：将所述至少一个导入图像拖动并放在所述至少一个导入图像将被合并的所述第一图像内的区域上，或者指定所述至少一个导入图像将被合并的所述第一图像内的区域。
10.根据权利要求8所述的方法，其中，导入所述至少一个导入图像包括：
指定所述至少一个导入图像中的第一区域；
根据所述第一区域裁切所述至少一个导入图像，以便生成裁切的图像；以及
指定所述裁切的图像将被合并的所述第一图像内的第二区域。
11.根据权利要求8所述的方法，其中，所述UI进一步包括用于接收关键词的功能，以用于搜索所述至少一个导入图像的所述存储器或互联网。
12.根据权利要求1所述的方法，
其中，所述UI包括用于将相关信息链接到所述第一图像的功能；并且
其中，所述方法进一步包括在所述存储器中存储已被链接的第一图像。
13.一种移动终端，包括：
存储器；
相机；
显示器；
位置信息单元，所述位置信息单元配置为获得所述移动终端的位置信息；
控制器，所述控制器被配置为：
控制所述显示器以增强现实(AR)模式显示通过所述相机输入的第一图像；
当所述第一图像被输入时，控制所述位置信息单元获得所述移动终端的第一位置信息；
基于所述获得的第一位置信息，在对象信息数据库中搜索在第一图像中存在的对象信息，并在所述第一图像内的对象的相对应的位置处显示对象信息；
控制所述显示器提供用户界面(UI)，所述用户界面(UI)用于编辑包括AR模式中的所述对象信息的所述第一图像的至少一部分，以便生成编辑的第一图像；
控制所述存储器存储所述编辑的第一图像和所述第一位置信息；
当所述移动终端移动时，控制所述位置信息单元获得所述移动终端的第二位置信息；以及
如果所述移动终端基于获得的所述第二位置信息位于与所述存储的第一位置信息相对应的位置，那么，
如果所述移动终端处于非AR模式，则控制所述显示器显示所述存储的编辑的第一图像，以及
如果所述移动终端处于AR模式，则控制所述显示器显示当前编辑的第一图像，其中，所述当前编辑的第一图像是指通过将由所述相机输入的所述第一图像与所述存储的编辑的第一图像进行比较，从所述存储的编辑的第一图像提取编辑部分，并且将提取的所述编辑部分与所述第一图像的相对应部分进行叠加而合成的图像。
14.根据权利要求13所述的移动终端，其中，所述控制器进一步被配置为：
控制所述显示器显示包括对应于其他移动终端的联系人的列表；以及
控制移动终端的无线通信单元，以当所述联系人从所述列表中被选择时，传送编辑的第一图像。
15.根据权利要求13所述的移动终端，其中，所述控制器还被配置为通过响应于根据至少一个功能经由UI接收的输入，改变所述对象信息或所述对象的外观，来编辑所述第一图像的至少一部分。
16.根据权利要求15所述的移动终端，其中，所述至少一个功能用于区分所述第一图像中的所述对象信息或者所述对象。
17.根据权利要求13所述的移动终端，其中：
所述控制器进一步被配置为通过响应于经由UI接收的输入，放大或缩小所述第一图像，来编辑所述第一图像的至少一部分，以使得编辑的第一图像是放大的或缩小的第一图像；以及
存储所述放大的或缩小的第一图像。
18.根据权利要求17所述的移动终端，其中，所述控制器进一步被配置为：
存储表示所述放大的或缩小的第一图像的放大率的值，以及所述放大的或缩小的第一图像的所述第一位置信息；以及
当所述第二位置信息位于与所述存储的第一位置信息相对应的位置时，将对应于所述值的放大率应用到所述第一图像。
19.根据权利要求13所述的移动终端，其中，所述控制器进一步被配置为：
通过经由所述UI接收在所述第一图像上输入的备忘录或草写消息，来编辑所述第一图像的至少一部分；以及
存储包括所述备忘录或草写消息的编辑的第一图像。
20.根据权利要求13所述的移动终端，所述控制器进一步被配置为：
提供包括以下功能的UI：将至少一个导入图像导入到所述第一图像上，并且将所述至少一个导入图像与所述第一图像合并，以便生成编辑的第一图像；以及
存储包括所述至少一个导入图像的编辑的第一图像。
21.根据权利要求20所述的移动终端，其中，导入所述至少一个导入图像包括：将所述至少一个导入图像拖动并且放在所述至少一个导入图像将被合并的所述第一图像内的区域上，或者指定所述至少一个导入图像将被合并的所述第一图像内的区域。
22.根据权利要求20所述的移动终端，其中，导入所述至少一个导入图像包括：
指定在所述至少一个导入图像内的第一区域；
根据所述第一区域裁切所述至少一个导入图像，以生成裁切的图像；以及
指定所述裁切的图像将被合并的所述第一图像内的第二区域。
23.根据权利要求20所述的移动终端，其中，所述控制器进一步被配置为提供UI，所述UI还包括接收关键词的功能，以用于搜索用于所述至少一个导入图像的所述存储器或互联网。
24.根据权利要求13所述的移动终端，其中，所述控制器进一步被配置为：
提供具有将相关信息链接到第一图像的功能的UI；以及
在所述存储器中存储所述第一图像和将彼此相关的所述相关信息。
CN201110305637.8A 2010-11-03 2011-09-29 移动终端以及控制移动终端的方法 Expired - Fee Related CN102467343B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2010-0108596 2010-11-03
KR1020100108596A KR101788046B1 (ko) 2010-11-03 2010-11-03 이동 단말기 및 그 제어방법

Publications (2)

Publication Number Publication Date
CN102467343A CN102467343A (zh) 2012-05-23
CN102467343B true CN102467343B (zh) 2018-05-22

Family

ID=44650838

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110305637.8A Expired - Fee Related CN102467343B (zh) 2010-11-03 2011-09-29 移动终端以及控制移动终端的方法

Country Status (4)

Country Link
US (1) US9318151B2 (zh)
EP (1) EP2450899B1 (zh)
KR (1) KR101788046B1 (zh)
CN (1) CN102467343B (zh)

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7680324B2 (en) 2000-11-06 2010-03-16 Evryx Technologies, Inc. Use of image-derived information as search criteria for internet and other search engines
US7565008B2 (en) 2000-11-06 2009-07-21 Evryx Technologies, Inc. Data capture and identification system and process
US8224078B2 (en) 2000-11-06 2012-07-17 Nant Holdings Ip, Llc Image capture and identification system and process
US7899243B2 (en) 2000-11-06 2011-03-01 Evryx Technologies, Inc. Image capture and identification system and process
USD609714S1 (en) * 2007-03-22 2010-02-09 Fujifilm Corporation Electronic camera
US20090073476A1 (en) * 2007-09-13 2009-03-19 Konica Minolta Systems Laboratory, Inc. Printing appratus and system
JP5970937B2 (ja) * 2012-04-25 2016-08-17 ソニー株式会社 表示制御装置および表示制御方法
JP6040564B2 (ja) * 2012-05-08 2016-12-07 ソニー株式会社 画像処理装置、投影制御方法及びプログラム
US9349218B2 (en) 2012-07-26 2016-05-24 Qualcomm Incorporated Method and apparatus for controlling augmented reality
US9429912B2 (en) * 2012-08-17 2016-08-30 Microsoft Technology Licensing, Llc Mixed reality holographic object development
KR102009928B1 (ko) * 2012-08-20 2019-08-12 삼성전자 주식회사 협업 구현 방법 및 장치
CN103677229A (zh) * 2012-09-13 2014-03-26 昆达电脑科技(昆山)有限公司 手势结合扩增实境的图标控制方法
KR101943320B1 (ko) * 2012-09-21 2019-04-17 엘지전자 주식회사 이동단말기 및 그 제어방법
CN103780741B (zh) * 2012-10-18 2018-03-13 腾讯科技（深圳）有限公司 提示网速的方法和移动设备
KR102104497B1 (ko) * 2012-11-12 2020-04-24 삼성전자주식회사 영상을 표시하는 방법 및 이를 위한 장치
US9448404B2 (en) 2012-11-13 2016-09-20 Qualcomm Incorporated Modifying virtual object display properties to increase power performance of augmented reality devices
KR101988897B1 (ko) * 2013-01-25 2019-06-13 엘지전자 주식회사 이동 단말기 및 그의 오디오 줌잉 공유방법
KR102028952B1 (ko) * 2013-02-21 2019-10-08 삼성전자주식회사 휴대 단말에 의해 촬영된 이미지들을 합성하는 방법, 기계로 읽을 수 있는 저장 매체 및 휴대 단말
US9924102B2 (en) * 2013-03-14 2018-03-20 Qualcomm Incorporated Image-based application launcher
JP6245837B2 (ja) * 2013-04-30 2017-12-13 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
US10509533B2 (en) 2013-05-14 2019-12-17 Qualcomm Incorporated Systems and methods of generating augmented reality (AR) objects
CN103365964B (zh) * 2013-06-21 2015-06-03 腾讯科技（深圳）有限公司 一种信息推荐方法及相关设备、系统
CN103501455A (zh) * 2013-09-18 2014-01-08 深圳市龙视传媒有限公司 一种图片处理的方法及数字电视终端
KR102065416B1 (ko) * 2013-09-23 2020-01-13 엘지전자 주식회사 이동단말기 및 그 제어방법
CN104717265A (zh) * 2013-12-13 2015-06-17 广州杰赛科技股份有限公司 一种多屏互动数据传输系统
CN104717190A (zh) * 2013-12-13 2015-06-17 广州杰赛科技股份有限公司 一种无线的增强现实传输方法
CN104717266A (zh) * 2013-12-13 2015-06-17 广州杰赛科技股份有限公司 一种基于增强现实的互动多媒体传输系统
CN104717264A (zh) * 2013-12-13 2015-06-17 广州杰赛科技股份有限公司 一种跨平台多屏互动数据分享设备
US9835862B1 (en) * 2014-05-15 2017-12-05 Google Llc Graphic interface for real-time vision enhancement
US20160196693A1 (en) * 2015-01-06 2016-07-07 Seiko Epson Corporation Display system, control method for display device, and computer program
KR102334618B1 (ko) * 2015-06-03 2021-12-03 엘지전자 주식회사 이동 단말기 및 그 제어 방법
EP3136392A1 (en) * 2015-08-25 2017-03-01 Thomson Licensing Method and system for embedding and retrieving information through marker transformation
KR102557574B1 (ko) * 2016-05-17 2023-07-20 엘지전자 주식회사 디지털 디바이스 및 그 제어 방법
US9959037B2 (en) * 2016-05-18 2018-05-01 Apple Inc. Devices, methods, and graphical user interfaces for messaging
KR102172901B1 (ko) 2016-05-18 2020-11-02 애플 인크. 그래픽 메시징 사용자 인터페이스 내의 확인응답 옵션들의 적용
US10368208B2 (en) 2016-06-12 2019-07-30 Apple Inc. Layers in messaging applications
CN109117034A (zh) * 2017-06-23 2019-01-01 卢俊谚 线上整合扩增实境的编辑装置与系统
KR102094772B1 (ko) * 2017-06-30 2020-04-23 주식회사 레벨나인 영상 제어 방법 및 서버
US10789473B2 (en) 2017-09-22 2020-09-29 Samsung Electronics Co., Ltd. Method and device for providing augmented reality service
TWI633500B (zh) * 2017-12-27 2018-08-21 中華電信股份有限公司 擴增實境應用產生系統及方法
US11527044B2 (en) 2018-06-27 2022-12-13 Samsung Electronics Co., Ltd. System and method for augmented reality
CN109309757B (zh) * 2018-08-24 2020-11-10 百度在线网络技术（北京）有限公司 备忘录提醒方法及终端
CN109120800A (zh) * 2018-10-18 2019-01-01 维沃移动通信有限公司 一种应用程序图标调整方法及移动终端
KR102091217B1 (ko) 2018-12-12 2020-03-19 주식회사 하이쓰리디 모바일 증강현실 영상 편집 시스템
KR102201285B1 (ko) 2018-12-18 2021-01-11 주식회사 하이쓰리디 모바일 증강현실 영상 편집 지원 시스템
KR102543695B1 (ko) * 2019-01-18 2023-06-16 삼성전자주식회사 영상 처리 방법 및 이를 지원하는 전자 장치
CN111093033B (zh) * 2019-12-31 2021-08-06 维沃移动通信有限公司 一种信息处理方法及设备
US11867904B2 (en) 2020-12-18 2024-01-09 Samsung Electronics Co., Ltd. Method and electronic device for providing augmented reality environment
KR20220088043A (ko) * 2020-12-18 2022-06-27 삼성전자주식회사 증강 현실 환경을 제공하기 위한 방법 및 전자 장치
KR20220149803A (ko) * 2021-04-23 2022-11-08 삼성전자주식회사 정보를 공유하기 위한 전자 장치 및 그 동작 방법

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6037936A (en) * 1993-09-10 2000-03-14 Criticom Corp. Computer vision system with a graphic user interface and remote camera control
US6625299B1 (en) * 1998-04-08 2003-09-23 Jeffrey Meisner Augmented reality technology
DE10159610B4 (de) * 2001-12-05 2004-02-26 Siemens Ag System und Verfahren zur Erstellung einer Dokumentation von Arbeitsvorgängen, insbesondere im Umfeld Produktion, Montage, Service oder Wartung
US9681925B2 (en) * 2004-04-21 2017-06-20 Siemens Medical Solutions Usa, Inc. Method for augmented reality instrument placement using an image based navigation system
US20060190812A1 (en) * 2005-02-22 2006-08-24 Geovector Corporation Imaging systems including hyperlink associations
US8933889B2 (en) * 2005-07-29 2015-01-13 Nokia Corporation Method and device for augmented reality message hiding and revealing
US20080071559A1 (en) * 2006-09-19 2008-03-20 Juha Arrasvuori Augmented reality assisted shopping
US20080147730A1 (en) * 2006-12-18 2008-06-19 Motorola, Inc. Method and system for providing location-specific image information
US20080268876A1 (en) * 2007-04-24 2008-10-30 Natasha Gelfand Method, Device, Mobile Terminal, and Computer Program Product for a Point of Interest Based Scheme for Improving Mobile Visual Searching Functionalities
US8485038B2 (en) 2007-12-18 2013-07-16 General Electric Company System and method for augmented reality inspection and data visualization
US8264505B2 (en) * 2007-12-28 2012-09-11 Microsoft Corporation Augmented reality and filtering
US20100309225A1 (en) * 2009-06-03 2010-12-09 Gray Douglas R Image matching for mobile augmented reality
US8688443B2 (en) * 2009-12-23 2014-04-01 At&T Intellectual Property I, L.P. Multimodal augmented reality for location mobile information service
CN201585046U (zh) * 2009-12-31 2010-09-15 马述俭 文字输入型照相机
US9361729B2 (en) * 2010-06-17 2016-06-07 Microsoft Technology Licensing, Llc Techniques to present location information for social networks using augmented reality

Also Published As

Publication number Publication date
CN102467343A (zh) 2012-05-23
KR20120046991A (ko) 2012-05-11
US20120105703A1 (en) 2012-05-03
EP2450899B1 (en) 2017-03-22
EP2450899A1 (en) 2012-05-09
US9318151B2 (en) 2016-04-19
KR101788046B1 (ko) 2017-10-19

Similar Documents

Publication Publication Date Title
CN102467343B (zh) 移动终端以及控制移动终端的方法
US9639251B2 (en) Mobile terminal and method of controlling the mobile terminal for moving image playback
CN102340594B (zh) 移动终端及其控制方法
CN102223436B (zh) 移动终端及其控制方法
CN102291485B (zh) 移动终端和在该移动终端中生成组的方法
US9613627B2 (en) Mobile terminal and method of controlling the mobile terminal
CN101729659B (zh) 移动终端和用于控制与外部设备相关的功能的方法
CN102355526B (zh) 能提供多玩家游戏的移动终端及控制移动终端操作的方法
CN105830351B (zh) 移动终端及其控制方法
CN104111772B (zh) 移动终端及其控制方法
CN103200307B (zh) 移动终端及其控制方法
CN104284014B (zh) 移动终端及其控制方法
CN104182168B (zh) 移动终端及其控制方法
CN103428360A (zh) 移动终端及其控制方法
CN104049740A (zh) 移动终端及其控制方法
CN102281349A (zh) 移动终端及其控制方法
CN106406688B (zh) 移动终端及其控制方法
CN102981751A (zh) 移动终端和用于提供其用户界面的方法
CN104580686B (zh) 移动终端及其控制方法
CN103942040B (zh) 移动终端及其控制方法
CN102811271A (zh) 移动终端和在其中管理信息的方法
KR20120134932A (ko) 이동 단말기 및 그것의 제어 방법
CN104463092B (zh) 移动终端及其控制方法
KR20140062886A (ko) 이동 단말기 및 그것의 제어 방법
CN104052866A (zh) 移动终端和控制移动终端的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180522

Termination date: 20210929

CF01 Termination of patent right due to non-payment of annual fee