CN103162706A

CN103162706A - 用于移动终端中的内容显示的设备和方法

Info

Publication number: CN103162706A
Application number: CN2012105239397A
Authority: CN
Inventors: 金敬和; 姜志营; 金善花; 金熙云; 申东俊
Original assignee: Samsung Electronics Co Ltd
Current assignee: Samsung Electronics Co Ltd
Priority date: 2011-12-08
Filing date: 2012-12-07
Publication date: 2013-06-19
Anticipated expiration: 2032-12-07
Also published as: EP2602729A1; US9002400B2; KR101873525B1; CN103162706B; JP2013120606A; US20130150124A1; KR20130064244A; EP2602729B1; JP6169350B2

Abstract

公开了一种用于移动终端中的内容显示的设备和方法。所述设备包括：感测单元，包括产生包含纬度、经度和海拔的移动终端的当前位置信息的位置确定器；内容存储器，存储内容项目；控制单元，控制以下的处理：当内容项目被创建时将创建的内容项目和位置信息一起存储到内容存储器、设置用于内容显示的显示区域、检查存储的内容项目的位置信息、三维地显示在属于所述显示区域的地点处创建的内容项目；显示单元，在控制单元的控制下将内容项目显示在显示区域的对应地点处。

Description

用于移动终端中的内容显示的设备和方法

技术领域

本发明涉及移动终端中的内容的显示，更具体地讲，涉及一种用于可针对内容创建环境以各种透视图显示内容的移动终端中的内容显示的设备和方法。

背景技术

在现有技术中，具有用于高分辨率成像的相机模块和用于高速度通信和高清晰度显示的单元的高级移动终端可支持各种类型的通信和多媒体服务。这种移动终端可通过从外部输入内容、内部地产生内容并将补充信息添加到现有内容，来处理各种类型的内容。

但是，为了识别添加到移动终端中的内容项目的信息，移动终端的用户不得不检查每个内容项目。例如，当拍照时，用户可将关于拍摄位置的信息附加到在特定位置拍摄的照片，并存储该照片。之后，为了识别存储的照片的拍摄位置，用户会不得不选择每个照片并检查其拍摄位置。即，用户会无法共同地识别在给定区域或位置创建的内容项目。

发明内容

鉴于上述问题已做出了本发明并且本发明提供用于移动终端的设备和方法，其中，内容和创建时的位置信息一起被存储，并且之后，基于创建位置以各种方式被显示。

本发明还提供用于移动终端的设备和方法，其中，内容和创建时由传感器的组合收集的位置信息一被起存储，并且内容和位置信息一起以各种方式呈现在地图或捕获的图像上。

在本发明的示例性实施例中，移动终端将内容项目和包括创建时的纬度、经度和海拔的位置信息一起存储。当在地图上设置用于内容显示的显示区域时，移动终端选择创建位置属于显示区域的内容项目并基于海拔将选择的内容项目标记在地图上的显示区域中。在另一示例性实施例中，基于移动终端的当前位置、方向和倾斜以及相机模块的视角设置用于内容显示的显示区域，并且创建位置属于显示区域的内容项目被选择并被标记在由相机模块捕获的图像上的对应位置处。

根据本发明的示例性实施例，提供了一种用于移动终端中的内容显示的设备，包括感测单元，包括用于产生包含纬度、经度和海拔的移动终端的当前位置信息的位置确定器；内容存储器，存储内容项目；控制单元，控制以下的处理：当内容项目被创建时将创建的内容项目和位置信息一起存储到内容存储器、设置用于内容显示的显示区域、检查存储的内容项目的位置信息、三维地显示在属于所述显示区域的地点处创建的内容项目；显示单元，在控制单元的控制下将内容项目显示在显示区域的对应地点处。

根据本发明的另一示例性实施例，提供了一种用于移动终端中的使用3D地图的内容显示的设备，包括：位置确定器，产生包含纬度、经度和海拔的移动终端的当前位置信息；内容存储器，存储具有3D位置信息的内容项目；地图存储器，存储3D地图数据；控制单元，控制以下的处理：当内容项目被创建时将创建的内容项目和由位置确定器产生的位置信息一起存储到内容存储器、显示从地图存储器选择的地图数据以进行内容显示、在显示的地图上设置显示区域、检查存储的内容项目的位置信息、三维地显示在属于显示区域的地点处创建的内容项目；显示单元，在控制单元的控制下将内容项目显示在显示区域的对应地点处。

根据本发明的另一示例性实施例，提供了一种用于移动终端中的使用相机成像的内容显示的设备，包括：相机模块；感测单元，包括位置确定器、方向确定器、视角确定器和倾斜角确定器，所述位置确定器以纬度、经度和海拔产生移动终端所位于或内容项目被创建的位置的3D位置信息，所述方向确定器识别相机模块的当前方向，所述视角确定器识别相机模块的视角，所述倾斜角确定器识别移动终端的倾斜角；内容存储器，存储具有3D位置信息的内容项目；控制单元，控制以下的处理：当内容项目被创建时将创建的内容项目和3D位置信息(所述3D位置信息表示内容项目被创建的地点并由位置确定器产生)一起存储到内容存储器，基于移动终端的3D位置信息、倾斜角信息、方向信息和视角信息在由相机模块捕获的图像上设置用于内容显示的显示区域，检查存储的内容项目的3D位置信息，将在显示区域内的地点处创建的内容项目三维地显示；显示单元，在控制单元的控制下将内容项目三维地显示在显示区域的对应地点处。

根据本发明的另一示例性实施例，提供了一种用于移动终端中的内容显示的方法，包括：当内容项目被创建时，将创建的内容项目和包括纬度、经度和海拔的3D位置信息一起存储在内容存储器中，其中，3D位置信息表示内容项目被创建的地点并由位置确定器产生；通过设置显示区域、检查存储的内容项目的位置信息、选择在显示区域内的地点处创建的内容项目并在显示区域的对应地点处三维地显示选择的内容项目，来执行内容显示。

根据本发明的另一示例性实施例，提供了一种用于移动终端中的使用3D地图的内容显示的方法，包括：当内容项目被创建时，将创建的内容项目和包括纬度、经度和海拔的3D位置信息一起存储在内容存储器中，其中，3D位置信息表示内容项目被创建的地点并由位置确定器产生；通过显示从存储3D地图数据的地图存储器选择的地图数据、在地图上设置显示区域、检查存储的内容项目的位置信息、选择在显示区域内的地点处创建的内容项目并三维地显示选择的内容项目，来在地图模式下执行内容显示。

根据本发明的另一示例性实施例，提供了一种用于移动终端中的使用相机成像的内容显示的方法，包括：当内容项目被创建时，将创建的内容项目和包括纬度、经度和海拔的3D位置信息一起存储在内容存储器中，其中，3D位置信息表示内容项目被创建的地点并由位置确定器产生；通过操作相机模块、基于所述移动终端的3D位置信息和倾斜角信息以及相机模块的方向信息和视角信息在由相机模块捕获的图像上设置显示区域、检查存储的内容项目的位置信息、选择创建位置在显示区域中的预设可视范围内的内容项目并三维地显示选择的内容项目，来在增强现实（AR）模式下执行内容显示。

附图说明

通过下面结合附图的详细描述，本发明的特征和优点将会更加清楚，其中：

图1是根据本发明的示例性实施例的移动终端的框图；

图2是用于本发明的移动终端中的内容创建的配置；

图3示出本发明的移动终端中创建的内容的位置信息的获取；

图4示出用于在本发明的移动终端中在地图上显示具有位置信息的内容的配置；

图5A示出在三维(3D)地图上的本发明的具有位置信息的内容的显示，图5B示出本发明的具有相同位置信息的内容项目的显示；

图6示出用于在本发明的移动终端中在AR模式下显示具有位置信息的内容的配置；

图7A至图7C示出在本发明中在AR模式下的具有位置信息的内容的显示；

图8是根据本发明的可选示例性实施例的用于创建和显示具有位置信息的内容的方法的流程图；

图9是在本发明中用于显示具有位置信息的内容的过程的方法；

图10A示出本发明中的内容的类型，图10B示出显示在内容创建的时间编写的本发明中的备忘录。

具体实施方式

以下，参照附图详细描述本发明的示例性实施例。贯穿附图，相同标号表示相同或相似部件。在以下描述中，可省略公知功能和结构的详细解释，以避免对本发明的主题的不必要的混淆。但是可以以各种不同形式实现本发明，并且本发明不应被理解为局限于在此阐述的示例性实施例。此外，可根据用户和操作者的意图和实践，不同地实现考虑本发明的功能而定义的在此描述的术语。因此，应基于贯穿说明书的公开来理解上述术语。在不脱离本发明的范围的情况下，可以在变化的众多实施例中采用本发明的原理和特征。

此外，虽然附图示出本发明的示例性实施例，但是附图不是必需按比例绘制，且特定可以被夸大或省略，以更加清楚地示出和解释本发明。

在在此阐述的术语中，终端指的是能够处理发送到任何外部实体或从任何外部实体接收的数据的任何类型的装置。终端可在屏幕上显示图标或菜单，其中，存储的数据和各种可执行功能被分配给或映射到所述图标或菜单。终端可包括计算机、笔记本、平板PC、移动装置等。

在在此阐述的术语中，屏幕指的是显示器或其它输出装置，其中，所述其它输出装置将信息可视地显示给用户、可选地能够接收并电处理来自用户的使用触控笔、用户的手指或用于将来自用户的用户选择传送到输出装置的其它技术的触觉输入。

在在此阐述的术语中，图标指的是图形元素（例如，显示在装置的屏幕上的图形或符号），使得用户能够容易地选择期望的功能或数据。具体地讲，每个图标可以与在装置中可执行的任何功能或与存储在装置中的任何数据具有映射关系，并用于处理功能或选择装置中的数据。当用户选择显示的图标中的一个时，装置识别与选择的图标相关联的特定功能或数据。然后，装置执行识别的功能或显示识别的数据。

在在此阐述的术语中，数据指的是由装置处理的任何类型的信息，所述任何类型的信息包括从外部实体接收的文本和/或图像、发送或接收的消息和当由装置执行特定功能时创建的信息。

在本发明中，当在移动终端中创建内容时，在创建时间的位置信息（例如，经度、纬度和海拔）被创建，并且内容和位置信息被一起存储。这里，内容可以是由相机捕获的项目（例如，图像和运动图像）、由用户创建的信息项目（例如，备忘录和笔记）、记录项目（例如，语音记录）、下载的信息项目。

当创建的内容被显示时，地图或增强现实(AR)可被用于呈现内容。在地图模式下，当显示区域设置在显示的地图上时，移动终端检查存储的内容项目的位置信息，选择其创建位置属于显示区域的内容项目，并基于海拔在地图上的显示区域中标记选择的内容项目。这里，地图可以是具有街景、卫星视图或其它已知类型的视图的3D地图。在AR模式下，基于移动终端的当前位置、方向和倾斜以及相机模块的视角来针对内容显示设置显示区域，移动终端检查存储的内容项目的位置信息、选择其创建位置属于显示区域的内容项目并在由相机模块捕获的图像上的对应的位置处标记选择的项目。这里，可使用安装在移动终端中的传感器来获得移动终端的位置、方向和倾斜。

本发明的移动终端可安装有：用于创建内容（例如，图像、照片、笔记、备忘录和语音记录）的应用；用于产生在创建的时间的位置信息（例如，经度、纬度和海拔）的感测单元；用于产生显示区域信息（例如，位置、方向和倾斜）和/或地图数据的感测单元。

在下面的描述中，术语“3D位置信息”表示由纬度、经度和海拔指定的位置信息，术语“3D显示”表示基于纬度、经度和海拔在显示区域中的创建位置显示或标记内容项目。可在地图模式下，在显示单元上显示的3D地图上设置“显示区域”，或者在AR模式下，在显示单元上显示的相机捕获的图片上设置“显示区域”。在“AR模式显示”下，具有3D位置信息的内容项目在由相机模块捕获的图像上三维地显示或标记。

图1是根据本发明的示例性实施例的移动终端的框图。

参照图1，移动终端的感测单元130产生用于内容创建的内容项目的位置信息以及用于设置用于内容呈现的显示区域的信息。基于全球定位系统(GPS)的接收器131产生移动终端的位置信息。这里，位置信息可包括纬度和经度数据。高度传感器133产生移动终端的高度或海拔数据。高度传感器133可使用感测气压的传感器、使用卫星信号和/或压力感测的传感器或基于雷达的传感器。这里，当GPS接收器131能够感测海拔时，高度传感器133可不被包括。方向传感器135感测移动终端的三维的方位。可使用地磁传感器和/或陀螺传感器实现方向传感器135。角度检测传感器137感测移动终端的倾斜角度和运动(诸如，旋转)。这里，角度检测传感器137可感测与地球表面的基本平面的部分平行的水平面与移动终端之间的倾斜角度以及当移动终端由用户持握或携带或者安装在用户的身体的部分时移动终端的运动。可使用加速度计和/或陀螺传感器实现角度检测传感器137。

通信单元120建立与对应通信网络的无线连接，例如，通信单元120与基站或IP网络通信。这里，通信网络可以是移动通信网络或基于互联网协议的网络(诸如，互联网和/或万维网)。通信单元120可包括：发送器，用于上变换将被发送的信号的频率并放大该信号；接收器，用于低噪声放大接收信号并下变换接收的信号的频率。通信单元120还可包括：调制器，用于调制将被发送的信号并将调制的信号发送到发送器；解调器，用于解调通过接收器接收的信号。这里，可根据任何已知方法(诸如，LTE(4G)、WCDMA(3G)、GSM、Wi-Fi、WiBro或WiMAX)来进行调制和解调。

相机模块140捕获移动终端外部的对象的图像。

显示单元150在控制单元100的控制下显示信息。输入单元155接收用于控制移动终端的操作的命令和数据，诸如字母数字数据。输入单元155和显示单元150可被组合为触摸屏，或者可选择地，触摸屏可被合并到显示单元150和输入单元155中的至少一个中。

地图存储器115存储用于呈现创建的内容的地图数据。存储在地图存储器115中的地图数据可被用于显示具有街景、卫星视图或其它已知类型的视图的3D地图。

控制单元100控制移动终端的整体操作。具体地讲，控制单元100控制创建、存储和显示内容项目的处理。

存储单元110可包括：程序区域，存储用于操作移动终端和实现本发明的功能的程序；数据区域，存储安装数据和程序执行期间产生的数据。存储单元110还包括：内容存储器，用于将创建的内容和位置信息一起存储。另外，存储单元110还可包括地图存储器115。

在具有在此描述的配置的移动终端中，当内容被创建时，控制单元100控制GPS接收器131和高度传感器133以产生与在创建时间的移动终端的纬度、经度和/或海拔对应的位置信息，并控制用于将创建的内容和位置信息一起存储到存储单元110的内容存储器中的操作。这里，内容可以是由相机模块140捕获的项目(诸如，静止图像和运动图像)、通过通信单元120下载的多媒体信息、通过输入单元155创建的文本信息(诸如，备忘录和笔记)以及通过麦克风创建的项目(诸如，语音记录)。缩略图和图标可以与对应的内容项目一起存储在内容存储器中。

当存储的内容例如通过显示单元150显示时，控制单元100可使用地图或增强现实(AR)特征。在这种情况下，内容项目可在地图或增强现实图像上的对应位置处呈现为缩略图或图标。

在地图模式下，控制单元100从地图存储器115读取选择的地图数据并在显示单元140上显示所述地图数据。当由用户在显示的地图上设置显示区域时，控制单元100检查存储在存储单元110的内容存储器中的内容项目的位置信息，选择其创建位置属于所设置的显示区域的内容项目，并基于海拔将选择的内容项目标记在地图上所设置的显示区域中。

在AR模式下，控制单元100使用GPS接收器131和/或使用高度传感器133来识别移动终端的当前位置，使用方向传感器135来识别移动终端的指向或移动的方向(例如，北、东、西和南)，即，由相机模块140的镜头所指的方向，并基于预定或设置的变焦比确定由相机模块140捕获的图像的视角，使用角度检测传感器137识别移动终端的倾斜角，并基于移动终端的当前位置、方向和倾斜角以及相机模块140的视角来设置用于内容显示的显示区域。然后，控制单元100检查存储在存储单元110的内容存储器中的内容项目的位置信息，选择其创建位置属于显示区域的内容项目，并将选择的内容项目标记在显示单元150上的显示区域中。这里，当由相机模块140捕获的图像正被显示在显示单元150上时，选择的内容被标记在捕获的图像上的对应位置处。

显示的内容项目可在地图或AR图像上呈现为缩略图或图标。当多个内容项目存在于同一位置时，控制单元100可以以重叠方式显示对应的缩略图或图标，或显示对应于内容项目的数量和/或表示内容项目的数量的数字值或消息。当显示的缩略图或图标中的一个被选择时，控制单元100可在显示单元150上显示与选择的缩略图或图标对应的内容项目的细节。

下面，给出根据本发明的示例性实施例的用于创建和显示内容的方法的描述。在下面的描述中，为了仅示出的目的，内容包括拍摄的或其它视觉图像(诸如，运动图像或视频)，但是内容可以是任何类型的内容。

图2示出用于本发明的移动终端中的内容创建的配置。

参照图2，移动终端的用户可创建各种类型的内容。这里，内容可以是由相机模块140捕获的图像项目(诸如，照片和运动图像)、通过输入单元155创建的信息项目(诸如，备忘录和日程)、通过音频处理单元创建的音频项目(诸如，语音记录)、通过通信单元120下载的多媒体数据(诸如，电影、文档、音乐文件和其它类型的多媒体数据)以及由用户创建的信息项目(诸如，包括视频、音频和图像数据的文档)，其中，所述音频处理单元可例如通过任何已知音频处理装置实现或可被包括在输入单元155和/或控制器100中并且可包括麦克风，或可通过通信单元从外部源获得。

在一示例性实施例中，内容创建器210创建将三维地显示的内容项目。为此，内容创建器210可包括相机模块140、通信单元120和/或输入单元155。内容创建器210可以以可存储的形式对通过这些单元120、140、155获得的内容项目进行编码，并组合多个内容项目。可在设置模式下由用户指定或在制造处理期间预先指定可三维地显示的内容项目

在拍摄的图像的情况下，由相机模块140捕获的照片显示在显示单元150上。当用户发出存储请求时，内容创建器210将图像处理操作(诸如，缩放、压缩、变换等)应用于捕获的照片。这里，内容创建器210可包括相机模块140。位置确定器220使用关于拍摄照片的位置的信息来创建用于照片的位置信息。GPS接收器131可识别纬度、经度和海拔，或者可仅识别纬度和经度。这里，GPS接收器131仅识别例如平面上的纬度和经度。当GPS接收器131识别平面坐标(诸如，移动终端所位于的位置的纬度和经度)，并且高度传感器133识别移动终端所位于的位置的海拔时，位置确定器220可基于来自GPS接收器131和高度传感器133的结果确定创建内容项目(诸如，拍摄照片)的纬度、经度和海拔。这里，位置确定器220可包括GPS接收器131和/或高度传感器133。

内容操作器230将创建的内容项目和相关位置信息存储在内容存储器240中。这里，内容存储器240是存储单元110的一部分，并且可针对每个内容项目存储内容名称、创建时间、位置数据(诸如，纬度、经度和海拔)和内容数据。内容操作器230可将通过输入单元144编写的短备忘录添加到创建的内容项目。因此，存储在内容存储器240中的内容信息可具有如表1中示出的示例格式。

表1

图3示出本发明的移动终端中创建的内容的位置信息的获取。

参照图3，创建的内容项目的位置信息除了作为X轴坐标的纬度和作为Y轴坐标的经度可包括海拔(H)。例如，用户可在不同高度的各种地点(例如，在街道、大厦的顶部或地下大型购物中心)处使用相机模块140拍摄照片。在一示例性实施例中，当内容项目在显示模式下显示时，创建内容项目的地点的位置和高度被一起显示。例如，参照图3，当用户在所绘制的位置311至314中的一个位置处拍摄照片时，位置确定器220产生包括拍摄照片的地点的纬度、经度和海拔的位置信息，并且内容操作器230将照片作为由内容创建器210创建的内容项目与位置信息一起存储在内容存储器240中。然后，可以三维地显示存储在内容存储器240中的内容。

存储在内容存储器240中的内容项目可根据其位置信息三维地显示。即，内容项目可以显示在用户选择3D屏幕图像或3D地图。内容项目可以在地图模式或AR模式下显示。这里，内容项目的显示可以在地图模式下在3D地图上执行，或内容项目的显示可以在AR模式下在由相机模块140捕获的图像上执行。

下面，给出地图模式显示的描述。

图4示出用于在本发明的移动终端中在地图上显示具有位置信息的内容的配置；图5A示出在3D地图上的本发明的具有位置信息的内容的显示，图5B示出本发明的具有相同位置信息的内容项目的显示。

参照图4至图5B，为了在地图上显示具有位置信息的内容项目，用户通过输入单元155发出地图显示请求。响应于该请求，控制单元100从地图存储器115读取请求的地图数据，并在显示单元150上显示地图数据。这里，地图可以是具有街景、卫星视图或其它已知类型的视图的3D地图。地图数据可通过通信单元120下载并存储在地图存储器115中。地图存储器115可以是可移动存储装置。在这种情况下，外部地图数据可被存储在地图存储器115中，然后，所述地图存储器115连接到移动终端以允许外部地图数据传送到移动终端。之后，当用户选择显示的地图上的区域作为用于内容显示的显示区域时，控制单元100选择其创建位置属于所述显示区域的内容项目并在地图上三维地显示选择的内容项目。

响应于地图显示请求，显示区域确定器410从地图存储器115读取所请求的地图数据，如图5A所示地显示地图数据，并且根据用户选择在显示单元150上的地图上设置显示区域。显示区域是具有纬度、经度和海拔值的3D地图的区域。图5A示出具有显示区域的3D地图的示例。在设置显示区域之后，内容选择器420从内容存储器240选择将被显示在显示区域中的内容项目。如上结合表1所示，存储在内容存储器240中的内容项目具有包括纬度、经度和海拔值的位置信息。内容选择器420选择具有属于所述显示区域的纬度和经度值的内容项目。然后，如图5A所示，显示控制器430使用海拔值将选择的内容项目在地图上三维地显示为缩略图。这里，缩略图可以是表示内容类型（诸如，照片、运动图像、消息和文档）的图标或图像。

在图5A中，内容项目511至516可具有表1中所示的格式，并且位于各自的创建位置。由于每个内容项目具有纬度、经度和海拔值，所以显示控制器430可使用纬度和经度值确定地图上的平面坐标，并且可使用海拔值确定在地图上的高度。因此，如图5A所示，显示控制器430可以将内容项目三维地显示在显示于显示单元150上的地图上。

可在相同位置处创建多个内容项目。在这种情况下，显示控制器430可指示多个内容项目存在于一个位置处。例如，显示控制器430可如图5B所示地指示多个内容项目的存在。显示控制器430可通过重叠缩略图、通过表示内容项目的数量的数字或通过由标号520所指示的多个内容项目的组合，来指示多个内容项目的存在。当多个缩略图处于图5B所示的显示布置520时，当通过经由包括触摸屏的输入单元155和/或显示单元150的用户选择来触摸或拖拽一个缩略图时，显示控制器430可将内容项目的显示布置520改变为新的显示布置525。

在如图5A所示的内容项目在触摸屏上被显示为地图上的缩略图的情况下，当用户触摸选择的缩略图时，显示控制器430可在与触摸的缩略图相关联的内容项目上显示信息(例如，备忘录)；当用户通过将例如双触摸输入到触摸屏来选择缩略图时，显示控制器430可在显示单元150上显示与选择的缩略图相关联的内容项目的细节。

下面，给出AR模式显示的描述。

图6示出用于在本发明的移动终端中在AR模式下显示具有位置信息的内容的配置；图7A至图7C示出在本发明中在AR模式下的具有位置信息的内容的显示。

参照图6至图7C，为了在AR模式下显示具有位置信息的内容项目，用户操作相机模块140。控制单元100控制显示单元150显示由相机模块140捕获的图像。控制单元100在图像上三维地显示在由所述图像限定的区域中创建的内容项目。为此，控制单元100需要关于下列项的信息：用户的当前位置（由维度、经度和海拔规定）、移动终端的方向（例如，移动终端的方位或移动和/或相机模块140的拍摄方向）、移动终端的倾斜角度、由相机模块140捕获的图像的视角以及由用户或制造商设置的显示区域的可视范围。

当用户选择AR模式并操作相机模块140时，控制单元100在显示单元150上显示由相机模块140捕获的图像，识别移动终端的当前位置并设置用于内容显示的区域。位置确定器220确定包括移动终端的纬度、经度和海拔的当前位置。如在此描述，位置确定器220可包括GPS接收器131和高度传感器133，并基于来自GPS接收器131和高度传感器133的输出识别移动终端所位于的位置的纬度、经度和海拔。

方向确定器610识别相机模块的当前方向。这里，方向确定器610可包括可以是地磁传感器和/或陀螺传感器的方向传感器135。方向确定器610可以以相机模块140的朝向方向与北磁极或其它已知或预定供参考方向之间的角度产生方向值。

倾斜角确定器630识别移动终端的倾斜角，例如，针对地的角度。例如，用户可例如通过使相机向下对准对象来进行高角度拍摄，或例如通过使相机向上对准对象来进行低角度拍摄。在相同地点进行的高角度拍摄和低角度拍摄可产生不同图像。因此，为了设置在AR模式下的显示区域，可必需使用倾斜角确定器630来识别移动终端的倾斜角。

视角确定器620识别由相机模块140捕获的图像的视角。视角或视野表示由相机成像的给定场景的范围。广角图像具有相对宽的视角，远摄图像具有相对窄的视角。相机模块140的不同视角产生不同图像，导致用于内容显示的显示区域的尺寸变化。可通过变焦比来确定可在广角与远摄角之间的相机模块140的视角，其中，当相机模块140安装到移动终端时可预先设置所述变焦比和/或由移动终端的用户选择和设置所述变焦比。因此，控制单元100可基于变焦比设置视角。视角确定器620可在相机模块140被操作时识别由用户设置的变焦比，并基于识别的变焦比确定相机模块140的视角。

显示区域确定器640使用来自位置确定器220的包括纬度、经度和海拔的位置信息、来自方向确定器610的方向信息、来自视角确定器620的视角信息和来自倾斜角确定器630的倾斜角信息，来设置如图7A至7C所示的用于内容显示的显示区域700。这里，存储在内容存储器240中的内容项目可在接近于用户的当前位置或远离用户的当前位置处被创建。在示例实施例中，在接近于用户的当前位置的位置处创建的内容项目可被显示在显示区域中。因此，显示区域确定器640可具有可视范围信息，以仅显示其创建位置在离移动终端的当前位置预定或选择距离内的内容项目。所述可视范围信息可由制造商设置或可由用户在配置设置模式下设置。即，显示区域确定器640基于包括纬度、经度和/或海拔的位置信息、移动终端的方向信息和倾斜角信息、相机模块140的视角信息和可视范围信息，设置在AR模式下用于内容显示的显示区域。

内容选择器650识别根据纬度、经度和海拔的显示区域，检查存储在内容存储器240中的内容项目的位置信息，并选择其创建位置属于显示区域的内容项目。这里，一些存储的内容项目可已经在可视范围外的位置处创建，并且内容选择器650仅选择其创建位置在显示区域中的可视范围内的内容项目。显示控制器660控制显示单元150，将选择的内容项目显示在由内容项目的纬度、经度和海拔值所指示的地点处。因此，由相机模块140捕获的图像显示在显示单元150上，并且内容项目的缩略图显示在捕获的图像上的已创建内容项目的地点处。这里，显示的内容项目是在显示区域中的可视范围内的地点处已经创建的内容项目。为了将在近的地点处创建的内容项目与在远的地点处创建的内容项目区分，显示控制器660可以显示具有不同尺寸的图标或指示符的内容项目，例如，在近的地点处创建的内容项目在显示单元150中的显示区域上的尺寸比在远的地点处创建的内容项目的尺寸大，和/或近的和远的内容项目可以以不同颜色显示，近的内容项目具有第一颜色，远的内容项目具有第二个充分不同的第二颜色。

图7A至图7C示出呈现与内容项目对应的缩略图的显示区域根据移动终端的倾斜角的改变。即，在图7A至图7C所示的示例中，移动终端的位置和方向和相机模块140的视角相同，并且移动终端的倾斜角不同。图7A示出大厦的中间拍摄，图7B示出在与图7A的条件可相比的条件下已经将移动终端升高而进行的低角度拍摄，图7C示出在与图7A的条件可相比的条件下已经将移动终端降低而进行的高角度拍摄。由于倾斜角确定器630输出移动终端的不同倾斜角，所以显示区域确定器640设置用于内容项目的不同的显示区域，如图7A至图7C所示。内容选择器650检查存储在内容存储器240中的内容项目的位置信息，并选择其创建位置在显示区域中的可视范围内的内容项目。显示控制器660在显示单元150上显示选择的内容项目。

图8是根据本发明的可选示例性实施例的用于创建和显示具有位置信息的内容的方法的流程图。

参照图8，在步骤811，移动终端的控制单元100检查内容创建请求是否被发出。如果在步骤811，没有内容创建请求被发出，则所述方法进行到步骤821。否则，当在步骤811，内容创建请求被发出时，在步骤813，控制单元100创建内容项目并在显示单元150上显示内容项目。这里，内容可以是由相机模块140捕获的图像项目(诸如，照片和运动图像)、通过输入单元155创建的信息项目(诸如，备忘录、文档和日程)、通过如在此描述的音频处理单元创建的音频项目(诸如，语音记录)、通过通信单元120下载的多媒体数据(诸如，电影、文档、音乐文件及其它)和由用户创建的信息项目(诸如，包含视频、音频和图像数据的文档)。可以三维地显示的内容项目可由用户在设置模式下指定或在制造过程中预先指定。

在步骤815，控制单元100检查用户是否发出存储请求。如果没有存储请求被发出，则所述方法结束；否则，当在步骤815，存储请求被发出时，在步骤817，控制单元100使用GPS接收器131和高度传感器133产生创建的内容项目的位置信息。这里，位置信息可以是创建内容项目的地点的纬度、经度和海拔。当GPS接收器131可全部识别纬度、经度和海拔时，可选择性地不使用高度传感器133。这里，例如，GPS接收器131仅识别平面上的纬度和经度。当GPS接收器131识别平面坐标（诸如，用户的位置的纬度和经度），并且高度传感器133识别用户的位置的海拔时，控制单元100基于来自GPS接收器131和高度传感器133的结果确定包括创建内容项目的纬度、经度和海拔的位置。然后，在步骤819，控制单元100将创建的内容项目和相关位置信息存储在存储单元110的内容存储器中，并且所述方法结束。这里，内容存储器是存储单元110的一部分，并且存储在内容存储器中的内容项目可具有表1所示出的格式。

存储在存储单元110的内容存储器中的内容项目可根据其位置信息三维地显示。返回参照步骤811，当内容创建请求没有被发出时，在步骤821，控制单元100检查用户是否发出内容显示请求。如果在步骤821，内容显示请求没有被发出，则所述方法进行到步骤831，以执行请求的操作。否则，当在步骤821，内容显示请求被发出时，在步骤823，控制单元100确定所述内容显示请求是否是对具有位置信息的内容的请求。如果在步骤823，内容显示请求不是对具有位置信息的内容的请求，则所述方法进行到步骤827。否则，当所述内容显示请求是对具有位置信息的内容的请求时，在步骤825，在控制单元100设置显示区域、选择其创建位置在显示区域内的内容项目并显示选择的内容项目，然后所述方法结束。具有位置信息的内容项目可以在地图模式或AR模式下显示。这里，内容项目在地图模式下显示在3D地图上，内容项目在AR模式下显示在由相机模块140捕获的图像上。当所述内容显示请求是对不具有位置信息的内容的请求时，在步骤827，控制单元100执行现有的内容显示过程，然后所述方法结束。

当用户发出内容显示请求时，控制单元100在显示单元150上输出表示包括地图模式和AR模式的可选择的内容显示模式的菜单。当地图模式被选择时，控制单元100可在显示单元150上输出表示可选择的地图视图(诸如，街景、卫星视图和3D视图)的菜单，并且可以以选择的视图显示地图。

图9是本发明中用于显示具有位置信息的内容的过程的流程图。图9的过程对应于图8中的步骤825。

现在如下地描述地图模式显示。

在步骤911，控制单元100检查地图模式显示是否被选择。如果在步骤911，地图模式显示没有被选择，则所述方法进行到步骤931；否则，当在步骤911地图模式显示被选择时，在步骤913，控制单元100从地图存储器115读取选择的地图数据，并在显示单元150上显示地图数据。这里，地图可以是具有街景、卫星视图或其它已知类型的选择的视图的地图。地图数据可通过通信单元120下载并存储在地图存储器115中。地图存储器115可以是包含地图数据的可移走的存储器装置。当地图被显示时，用户可通过对于输入单元155的选择输入来扩大或减少在地图上的选择的区域，或可选择显示单元150上的区域以进行内容显示。在步骤915，控制单元100检查是否在地图上选择显示区域。如果在步骤915，显示区域没有被选择，则所述方法返回到步骤913；否则，当在步骤915，在地图上选择显示区域时，在步骤917，控制单元100在地图上设置用于内容的显示区域。当在步骤917，显示区域被设置时，控制单元100可获得显示区域的位置信息，诸如，纬度、经度和海拔值。在步骤919，控制单元100检查存储在内容存储器中的内容项目的位置信息，并选择其创建位置在显示区域内的内容项目。在步骤921，控制单元100基于海拔值在地图上的显示区域中显示选择的内容项目，所述方法结束。即，选择其创建位置在显示区域内的内容项目并在地图上三维地显示所述内容项目。

如上所述，响应于地图显示请求，控制单元100从地图存储器115读取请求的地图数据并显示地图数据。这里，地图是具有纬度、经度和海拔值的3D地图。当在地图上设置显示区域时，控制单元100检查存储在内容存储器中的内容项目的位置信息，并选择具有属于显示区域的纬度和经度值的内容项目。然后，控制单元100使用海拔值来在地图上以缩略图三维地显示选择的内容项目，如图5A中所示。在如图5A所示的内容项目在地图上被显示为缩略图的状态下，当用户触摸缩略图时，显示控制器430在与触摸的缩略图相关联的内容项目上显示信息(例如，备忘录)；当用户选择缩略图时，显示控制器430在显示单元150上显示与选择的缩略图相关联的内容项目的细节。

现在如下地描述AR模式显示。

参照在步骤911之后执行的步骤931，控制单元100在步骤931检查AR模式显示是否被选择。如果在步骤931，AR模式没有被选择，则所述方法进行到步骤951以按请求的方式或方法执行显示。否者，当在步骤931，AR模式显示被选择时，在步骤933，控制单元100操作相机模块140并将由相机模块140捕获的图像显示在显示单元150上。为了设置用于内容显示的显示区域，控制单元100在步骤935识别以下的参数。首先，控制单元100使用来自GPS接收器131和/或高度传感器133的输出来确定移动终端的当前位置。当前位置用于选择其创建位置沿相机模块140的方向在离当前位置给定距离以内的内容项目。第二，控制单元100使用来自方向传感器135的输出来识别相机模块140的方向，其中，所述方向传感器可以是地磁传感器和/或陀螺传感器。相机模块140的方向用于确定由相机模块140捕获的图像的方向。在AR模式下，由于内容显示在由相机模块140捕获的图像上，所以使用来自方向传感器135的输出确定捕获的图像的方向。第三，控制单元100使用来自角度检测传感器137的输出识别移动终端的倾斜角，诸如，相对于地的角度。倾斜角用于确定在AR模式下设置期望的显示区域所必需的相机角度。即，当在其它条件保持不变的同时相机角度改变时，显示单元150上的捕获的图像的纬度和经度不变，只是其海拔可改变。换言之，在相同地点进行的高角度拍摄和低角度拍摄可产生不同图像。因此，为了在AR模式下设置显示区域，需要识别移动终端的角度。第四，控制单元100识别由相机模块140捕获的图像的视角。视角或视野表示由相机成像的给定场景的范围。可在广角与远摄角之间的相机模块140的视角可通过可由用户在相机模块140操作时设置的变焦比确定。因此，控制单元100可基于变焦比确定视角。视角用于识别在显示单元150上的显示区域的尺寸，诸如，广角尺寸或远摄尺寸。

然后，在步骤937，控制单元100基于移动终端的包括纬度、经度和海拔的位置信息、方向信息和倾斜角信息以及相机模块140的视角信息，设置用于内容显示的显示区域。可在靠近或远离用户的当前位置的位置处创建存储在内容存储器240中的内容项目。本发明可将靠近用户的当前位置的位置处创建的内容项目显示在显示区域中。控制单元100可具有可视范围信息，以仅显示其创建位置在离移动终端的当前位置预定距离内的内容项目。因此，控制单元100在AR模式下，基于移动终端的位置信息(例如，纬度、经度和/或海拔)、方向信息和倾斜角信息、相机模块140的视角信息以及可视范围信息，设置用于内容显示的显示区域。

控制单元100根据纬度、经度和海拔识别显示区域，检查存储在存储单元110的内容存储器中的内容项目的位置信息，并在步骤939选择其创建位置属于显示区域的内容项目。这里，控制单元100可仅选择其创建位置在显示区域中的可视范围内的内容项目。例如，如图7A至图7C所示，在步骤941，控制单元100控制显示单元150，以将选择的内容项目显示在由内容项目的纬度、经度和海拔值所表示的地点。因此，由相机模块140捕获的图像显示在显示单元150上，内容项目的缩略图显示在捕获的图像上已经创建内容项目的地点处。这里，显示的内容项目是在显示区域的可视范围内的地点处已经创建的内容项目。为了将近的地点处创建的内容项目与远的地点处创建的内容项目区分，如在此所描述地，显示控制器660可以以不同尺寸显示内容项目，例如，在近的地点处创建的内容项目具有比在远的地点处创建的内容项目的尺寸更大的尺寸，或者显示控制器660可以以不同颜色显示内容项目。

在本发明中，可存在各种类型的内容。图10A示出本发明中的内容的类型，图10B示出显示在内容创建的时间编写的本发明中的备忘录。

参照图10A和图10B，内容项目1011至1014是在显示区域内的地点处创建的内容项目。内容项目1011是备忘录，内容项目1012和1014中的每一个是照片，内容项目1013是语音记录，其中，每一个内容项目由默认图标和/或与内容项目对应的实际照片的缩略图表示。对于内容创建，控制单元100以表1所示出的格式创建内容项目，并将创建的内容项目存储在存储单元110的内容存储器中。创建的内容项目1011至1014中的每一个还可包括如图10B所示的相关内容项目的描述，其中，这些描述选择性地包括在存储于内容存储器240中的内容项目的对应条目中，例如，表1的备忘录字段。对于在地图模式或AR模式下的内容显示，控制单元100设置显示区域并将其创建位置在显示区域内的内容项目显示为如图10A中示出的缩略图或图标。在如图10A所示地三维地显示内容项目的状态下，当用户选择内容项目时，如图3所示，控制单元100可显示选择的内容项目的位置信息。

如上所述，在本发明中，当内容项目被创建时，包括产生内容项目的地点的纬度、经度和海拔的位置信息与所述内容项目一起存储。然后，使用内容项目的位置信息来显示内容项目。即，其创建位置在显示区域内的内容项目被选择并在其创建位置处被显示为缩略图或图标。当使用可将图像及其位置信息一起显示的画廊浏览器(gallery viewer)时，画廊浏览器可产生与3D浏览器相似的效果。另外，可存在各种类型的内容，诸如，备忘录、语音记录、视频和照片。

在一示例性实施例中，当在相机模块140操作之后，包括位置信息的内容项目被提供时，移动终端可不使用用于提供位置信息的专门或单独的服务而将AR内容视图呈现给用户。在AR模式下，当相机模块140沿选择的方向捕获场景的图像时，移动终端可通过将照片、视频和备忘录映射到物理空间，来产生特殊效果。

在另一示例性实施例中，当内容项目在具有街景、卫星视图或3D视图的地图上显示时，内容项目位于地图上的其创建位置处。

在本发明中，移动终端可将内容和创建时的位置信息一起存储，并基于创建的位置以各种方式显示内容。另外，移动终端可将内容和创建时通过传感器的组合收集的位置信息一起存储，并通过位置信息、感测信息和地理信息的组合以各种透视图将内容呈现在3D地图或由相机模块捕获的图像上。

根据本发明的上述设备和方法可被实现为硬件、固件或可存储在非暂时记录介质(诸如、CD ROM、RAM、ROM、软盘、DVD、硬盘、磁存储介质、光学记录介质或磁光盘)中的软件或计算机代码、或通过网络下载、原始存储在远程记录介质、计算机可读记录介质或非暂时机器可读介质并将被存储在本地记录介质中的计算机代码，从而可使用通用计算机、数字计算机或专用处理器或可编程或专用硬件(诸如，ASIC或FPGA)通过这样的存储在记录介质上的软件来呈现在此描述的方法。如本领域中所理解，计算机、处理器、微处理器控制器或可编程硬件包括可存储或接收软件或计算机代码的存储部件(例如，ROM、RAM、闪存等)，其中，所述软件或计算机代码被计算机、处理器或硬件访问并执行时将实施在此描述的处理方法。另外，应该认识，当通用计算机访问用于实施在此示出的处理的代码时，代码的执行将所述通用计算机变换为用于执行在此示出的处理的专用计算机。另外，所述程序可通过任何介质(诸如，通过有线/无线连接发送的通信信号及其等同物)电传送。

虽然在上文已详细描述了本发明的示例性实施例，但应该理解，在此描述的基本的发明构思的各种变化和修改将落入由所附权利要求所限定的本发明的精神和范围内。

Claims

1.一种用于移动终端中的内容显示的设备，其特征在于，所述设备包括感测单元、内容存储器、控制单元和显示单元，其中，内容存储器存储内容项目，感测单元包括用于产生包含纬度、经度和海拔的移动终端的当前位置信息的位置确定器，

其中，控制单元控制以下的处理：当内容项目被创建时将创建的内容项目和位置信息一起存储到内容存储器、设置用于内容显示的显示区域、检查存储的内容项目的位置信息、三维地显示在属于所述显示区域的地点处创建的内容项目；

显示单元在控制单元的控制下将内容项目显示在显示区域的对应地点处。

2.根据权利要求1所述的设备，其特征在于，当内容项目被创建时，控制单元将创建的内容项目和3D位置信息一起存储到内容存储器中，其中，3D位置信息表示内容项目被创建的地点并由位置确定器产生。

3.如权利要求2所述的设备，其特征在于，还包括：地图存储器，存储3D地图数据，

控制单元在地图模式下将从地图存储器选择的地图数据显示在显示单元上，

控制单元包括：

显示区域确定器，根据用户选择设置显示区域；

内容选择器，检查存储在内容存储器中的内容项目的位置信息并选择在属于所述显示区域的地点处创建的内容项目；

显示控制器，将选择的内容项目三维地显示在显示单元上。

4.如权利要求1所述的设备，其特征在于，还包括：相机模块，

所述感测单元包括：

方向确定器，识别相机模块的当前方向；

视角确定器，识别相机模块的视角；

倾斜角确定器，识别移动终端的倾斜角，

在AR模式下操作相机模块的控制单元控制如下的处理：在内容项目被创建时将创建的内容项目和3D位置信息一起存储到内容存储器中；基于移动终端的3D位置信息、倾斜角信息、方向信息和视角信息来在由相机模块捕获的图像上设置用于内容显示的显示区域；检查存储的内容项目的3D位置信息；以及三维地显示在显示区域内的地点处创建的内容项目，其中，所述3D位置信息表示内容项目被创建的地点并由位置确定器产生。

5.如权利要求4所述的设备，其特征在于，控制单元包括：

显示区域确定器，操作相机模块，并基于由感测单元产生的移动终端的3D位置信息和倾斜角信息以及相机模块的方向信息和视角信息，在由相机模块捕获的图像上设置显示区域；

内容选择器，检查存储在内容存储器中的内容项目的3D位置信息，并选择创建位置在显示区域中的预设可视范围内的内容项目；

显示控制器，在显示单元上三维地显示选择的内容项目。

6.如权利要求5所述的设备，其特征在于，位置确定器包括：GPS接收器，识别纬度和经度；高度传感器，识别海拔，其中，方向确定器是地磁传感器，倾斜角确定器是加速度传感器和陀螺传感器中的至少一个。

7.如权利要求6所述的设备，其特征在于，通信单元与基站或IP网络通信，输入单元接收字母数字数据，内容项目包括由相机模块拍摄的照片、通过通信单元下载的数据以及通过输入单元创建的文本信息。

8.一种用于移动终端中的内容显示的方法，其特征在于，包括：

当内容项目被创建时，将创建的内容项目和包括纬度、经度和海拔的3D位置信息一起存储在内容存储器中，其中，3D位置信息表示内容项目被创建的地点并由位置确定器产生；

通过设置显示区域、检查存储的内容项目的位置信息、选择在显示区域内的地点处创建的内容项目并在显示区域的对应地点处三维地显示选择的内容项目，来执行内容显示。

9.如权利要求8所述的方法，其特征在于，执行内容显示的步骤包括：

在地图模式下，显示从存储3D地图数据的地图存储器选择的地图数据并根据用户选择设置显示区域；

检查存储在内容存储器中的内容项目的位置信息并选择在显示区域内的地点处创建的内容项目；

在显示单元上三维地显示选择的内容项目。

10.如权利要求9所述的方法，其特征在于，内容项目包括由相机模块拍摄的照片、通过通信单元下载的数据以及通过输入单元创建的文本信息。

11.如权利要求8所述的方法，其特征在于，

通过操作相机模块、基于所述移动终端的3D位置信息和倾斜角信息以及相机模块的方向信息和视角信息在由相机模块捕获的图像上设置显示区域、检查存储的内容项目的位置信息、选择创建位置在显示区域中的预设可视范围内的内容项目并三维地显示选择的内容项目，来在AR模式下执行内容显示。

12.如权利要求11所述的方法，其特征在于，执行内容显示的步骤包括：

操作相机模块；

基于所述移动终端的3D位置信息和倾斜角信息以及相机模块的方向信息和视角信息，在由相机模块捕获的图像上设置显示区域；

检查存储在内容存储器中的内容项目的位置信息，并选择创建位置在显示区域中的预设可视范围内的内容项目；

在显示单元上三维地显示选择的内容项目。

13.如权利要求12所述的方法，其特征在于，通过使用识别纬度和经度的GPS接收器和识别海拔的高度传感器来获得位置信息，使用地磁传感器来获得相机模块的方向信息，使用加速度传感器和陀螺传感器来获得移动终端的倾斜角。

14.如权利要求13所述的方法，其特征在于，内容项目包括由相机模块拍摄的照片、通过通信单元下载的数据以及通过输入单元创建的文本信息。