CN109784134A - 计算机可读存储介质、信息处理装置以及信息处理方法 - Google Patents

Abstract

本发明提供一种用于在拍摄图像中的被摄体的区域上重叠显示各种内容的计算机可读存储介质等。信息处理装置(10)拍摄作为被摄体的表面附有标识的地球仪(20)，取得拍摄图像。信息处理装置(10)基于所述标识识别取得的拍摄图像中的地球仪(20)。更进一步，信息处理装置(10)对识别的拍摄图像中的地球仪(20)重叠显示内容图像，使得该内容图像覆盖地球仪(20)的整个区域。

Description

计算机可读存储介质、信息处理装置以及信息处理方法

技术领域

本发明涉及计算机可读存储介质、信息处理装置以及信息处理方法。

背景技术

近年，开发了利用AR(Augmented Reality)系统的商品。AR系统是指，在智能电话、平板终端、便携式游戏机等具有相机以及显示部的信息设备上，事先安装有用于识别AR标识的应用程序。通过利用这样的信息设备，当拍摄附有AR标识的被摄体的时候，信息设备识别AR标识，在拍摄画像上重叠显示与识别的AR标识相对应的内容。由此，用户可以通过显示部看见在作为拍摄对象的被摄体上重叠有内容的图像。专利文献1公开了一种系统，该系统拍摄立体对象物，将图像或者文字等的附加信息重叠显示在所拍摄的图像中的立体对象物上。

专利文献1：日本特开2013－92407号公报

发明内容

对于AR系统，关于应将什么作为被摄体以及在拍摄图像上重叠显示的内容，进行了各种探讨。

本发明鉴于上述问题而作出，其目的在于提供一种用于在图像中的被摄体的区域上重叠显示各种内容的计算机可读存储介质等。

本发明公开的一种方式的计算机可读存储介质，其上存储有程序，该程序使计算机执行下述处理:取得表面附有标识的球体的拍摄图像，基于所述标识识别取得的所述拍摄图像中的所述球体，显示内容图像使得该内容图像覆盖识别的所述拍摄图像中的所述球体的整个区域。

本发明公开的一种方式的计算机可读存储介质，其上存储有程序，该程序使计算机执行下述处理:取得表面附有标识的球体的拍摄图像，基于所述标识识别取得的所述拍摄图像中的所述球体，将包含日期和时间信息的多个内容图像按照所述日期和时间信息表示的日期和时间的顺序重叠显示在识别的所述拍摄图像中的所述球体上。

根据本发明公开的一种方式，可以在拍摄球体所得的图像中的球体区域重叠显示各种内容，可以实现适合用户的娱乐方式。

附图说明

图1是表示AR系统的结构例的示意图。

图2是表示信息处理装置的结构例的框图。

图3是表示信息处理装置的控制部实现的功能的框图。

图4是表示信息处理装置进行处理的步骤的流程图。

图5是表示AR图像的显示例的示意图。

图6A是表示AR图像的显示例的示意图。

图6B是表示AR图像的显示例的示意图。

图7A是表示AR图像的显示例的示意图。

图7B是表示AR图像的显示例的示意图。

图8是表示AR图像的显示例的示意图。

图9是表示实施方式2的根据信息处理装置的控制部实现的功能的框图。

图10是表示信息处理装置进行处理的步骤的所示流程图。

图11A是表示AR图像的显示例的示意图。

图11B是表示AR图像的显示例的示意图。

图12是表示实施方式3的信息处理装置的控制部实现的功能的框图。

图13是表示信息处理装置进行处理的步骤的流程图。

图14是表示AR图像的显示例的示意图。

图15是表示AR图像的显示例的示意图。

图16是表示AR图像的显示例的示意图。

图17是表示AR图像的显示例的示意图。

图18是表示AR图像的显示例的示意图。

图19是表示实施方式4的信息处理装置的控制部实现的功能的框图。

图20是表示信息处理装置进行处理的步骤的流程图。

图21是表示信息处理装置进行处理步骤的流程图。

图22是表示信息处理装置进行处理步骤的流程图。

图23是表示AR图像的显示例的示意图。

图24是表示实施方式6的信息处理装置的控制部实现的功能的框图。

图25是表示奖牌DB的数据布局的一例的说明图。

图26是表示将关于奥运会的显示图像用作内容时的AR图像的显示例的示意图。

图27是表示点击国旗的显示图像时跳转到被链接网站的显示例的示意图。

图28是表示实施方式6的AR图像的显示处理的流程图。

附图标记说明：

10 信息处理装置

11 控制部

12 存储部

13 操作面板

14 输入部

15 显示部

16 相机

17 通信部

20 地球仪(球体)

21 地球仪识别部

22 内容读出部

23 提取部

24 图像处理部

25 重叠部

26 顺序确定部

27 位置确定部

具体实施方式

以下，关于本申请公开的存储介质等，基于示意实施方式的附图详细说明。

实施方式1

图1是表示AR系统的结构例的示意图。本实施方式的AR系统，以表面附有AR标识(标识)的呈球体的地球仪20为被摄体，利用信息处理装置10拍摄地球仪20使用。地球仪20，例如是一种通过填充空气而成为球体的PVC(Polyvinyl chloride:聚氯乙烯)材料制成的球，但并不受限于此。在地球仪20的表面，印刷有地球上的地图，在地图中的适当位置附有AR标识。例如如图1所示，对于地图中的海洋以及大陆分别地赋予名称，对于各个国家以及城市分别赋予国名以及城市名。这些文字构成了AR标识。另外，虽然图1中省略了描述，但是地图中包括各个国家的国境线，国境线也构成了AR标识。另外，可以用规定的颜色区分地图中的河川、平原、山脉等地形，各种颜色也构成了AR标识。更进一步，为了识别地图中的各个海、海域等，对于地图中的海赋予规定的标识M1～M4(例如船的标识M1、M2，乌龟或海鸥等的动物的标识M3、M4)。另外，为了识别地图中的各个大陆、地域，对于地图中的大陆、地域赋予了规定的标识M5～M7。这些标识M1～M7也构成了AR标识。

图2是表示信息处理装置10的结构例的框图。信息处理装置10是智能手机、平板终端、个人计算机、游戏机等信息设备，若是可移动型的信息设备，则容易操作。信息处理装置10包括控制部11、存储部12、操作面板13、相机16、通信部17等，这些各部通过总线相互连接。控制部11包括CPU(Central Processing Unit：中央处理器)或MPU(Micro-ProcessingUnit：微处理器)等处理器。控制部11，通过适当地执行存储在存储部12中的控制程序，进行信息处理装置10的各种信息处理以及控制处理等。

存储部12包括RAM(Random Access Memory：随机存储器)、闪存、硬盘、SSD(SolidState Drive：固态硬盘)等。存储部12，预先存储控制部11执行的控制程序以及控制程序的执行所需的各种数据等。另外，存储部12，临时存储控制部11执行控制程序时生成的数据等。存储部12中存储的控制程序包括本发明的图像处理应用程序(以下，简称为图像处理应用)P。另外，存储部12中存储的数据包括内容DB12a以及相簿12b。此外，内容DB12a，可以嵌入图像处理应用P中，也可以存储在能够与信息处理装置10经由网络N通信的存储装置中。另外，相簿12b可以存储在能够与信息处理装置10经由网络N通信的存储装置中。

内容DB12a中存储文字、图像等内容，各个内容与用于识别被赋予地球仪20的AR标识的信息、或者表示地球上的位置的位置信息(纬度以及经度)分别对应地存储。相簿12b，存储用户利用信息处理装置10拍摄的静止图像以及视频影像、通过通信部17从外部装置接收的静止图像以及视频影像等内容。静止图像以及视频影像等内容，与各自的表示拍摄日期和时间或者作成日期和时间等的日期和时间信息、表示拍摄场所、作成场所或者与各内容相对应的场所等的位置信息一起存储到相簿12b中。此外，也可以将不带有日期和时间信息以及位置信息的静止图像以及视频影像存储到相簿12b中。另外，存储在相簿12b的内容包括，例如，通过正距圆筒投影(equidistant cylindrical projection)将利用全景相机取得的全景图像平面展开得到的矩形的全景图像，将拍摄被摄体的所有表面得到的图像合成并通过正距圆筒投影平面展开得到的矩形的全景图像等。

操作面板13，是输入部14以及显示部15为一体结构的触摸屏。输入部14，是在显示部15的表面配置的触摸传感器，受理用户的输入操作，向控制部11发送与操作内容相对应的控制信号。显示部15，例如是液晶显示器、有机EL(Electro Luminescence)显示器等，按照控制部11的指示显示各种信息。输入部14以及显示部15也可以分开构成。

相机16，有镜头以及拍摄元件，通过拍摄元件将经由镜头入射的光进行光电变换取得电子数据(图像数据)。相机16，按照控制部11的指示进行拍摄，逐次将取得的图像数据(拍摄图像)向控制部11发送。此外，信息处理装置10，除了内置摄像机16之外，也可以是具备连接部的结构，该连接部能够和外部相机相连接。在这种情况下，连接部受理通过外部相机取得的影像数据的输入，将输入的影像数据逐次向控制部11发送。通信部17，是用于连接互联网等网络的接口，经由网络和外部装置之间进行信息的发送和接收。

信息处理装置10，也可以通过通信部17从外部装置取得图像处理应用P，存储到存储部12中。另外，信息处理装置10具备从移动型存储介质中读取存储的信息的读取部等的时候，可以从移动型存储介质中读出图像处理应用P，存储到存储部12中。此外，信息处理装置10，也可以是显示部15使用护目镜型或者眼镜型的头挂式显示器的HMD(Head MountedDisplay:头戴式显示器)型的信息设备。在这种情况下，输入部14，优选使用进行声音输入的麦克，或者检测用户视线的视线输入装置等。信息处理装置10，只要是有相机16以及显示部15的信息设备，就可以是任何样式的设备。

以下，对信息处理装置10通过控制部11执行图像处理应用P实现的功能进行说明。图3是表示信息处理装置10的控制部11实现的功能的框图。信息处理装置10的控制部11，执行存储部12中存储的图像处理应用P的时候，实现地球仪识别部21、内容读出部22、提取部23、图像处理部24、重叠部25的各个功能。此外，本实施方式中，虽然这些功能通过控制部11执行图像处理应用P实现，但这些功能中的一部分功能也可以利用专用的硬件电路实现。

信息处理装置10的控制部11，例如通过操作面板13(输入部14)受理用户的图像处理应用P的执行指示的时候，通过相机16开始拍摄。相机(取得部)16开始拍摄的时候，在规定的时机(例如每1/30秒、每1/15秒)取得拍摄图像。

地球仪识别部(识别部)21，对相机16取得的拍摄图像识别拍摄图像中的地球仪20的区域，并对地球仪20的拍摄区域(拍摄范围)等进行识别。例如，地球仪识别部21，对拍摄图像通过识别地球仪20的轮廓的圆形来确定拍摄图像中的地球仪20的轮廓(区域)。此外，地球仪识别部21，识别拍摄图像中的AR标识，基于识别的AR标识，确定拍摄的地球仪20的区域(拍摄范围)。例如，地球仪识别部21，基于AR标识，确定包括在拍摄的地球仪20(地球仪20的拍摄范围)中的海洋、大陆、国家、城市等。另外，地球仪识别部21，确定与地球仪20的拍摄范围内的各个位置(各个场所)相对应的地球上的位置信息(纬度以及经度)。此外，图像处理应用P包含被赋予地球仪20的各种AR标识的位置的相关信息，例如，海洋、大陆、国家、城市等的信息，或者地球上的位置信息。因此，地球仪识别部21，在识别AR标识的时候可以确定识别的AR标识的位置信息，基于确定的位置信息确定地球仪20的拍摄范围。

内容读出部22，从内容DB12a或者相簿12b中读出用于生成AR图像的内容。内容读出部22，例如，从内容DB12a中读出与地球仪识别部21从拍摄图像中识别出的AR标识相对应的内容。另外，内容读出部22，例如通过操作面板13(输入部14)从相簿12b中读出用户指示的内容。

提取部23，从内容读出部22在内容DB12a或者相簿12b里读取的内容中，提取与地球仪识别部21确定的地球仪20的拍摄范围相对应的区域。例如，在内容包括与地球上的各个位置相对应的图像的时候，提取部23从内容中提取与地球仪20的拍摄范围的纬度以及经度对应的区域相对应的图像。具体方式为，地球仪20的拍摄范围是以日本为中心的规定区域的时候，提取部23从内容中提取与以日本为中心的规定区域相对应的部分。

图像处理部24，对提取部23从内容中提取的区域(以下简称内容)进行各种图像处理。例如，图像处理部24，对内容进行放大处理或者缩小处理。另外，图像处理部24，为了在拍摄图像中的地球仪20的圆形区域显示内容，实施将内容变形(变换)为圆形图像的处理。此外，作为处理对象的内容，若是通过正距圆筒投影平面展开得到的矩形的全景图像，则可以通过向圆形图像的变换处理还原为全景图像，在圆形区域内显示的时候，可以有良好的显示效果。更进一步，图像处理部24，可以对内容进行各种加工处理，也可以通过操作面板13进行向内容追加用户手写输入的文字等的处理。

重叠部25，将圆形的内容图像以覆盖地球仪识别部21确定的拍摄图像中的地球仪20的整个区域的方式重叠生成AR图像，该圆形的内容图像基于图像处理部24处理后的内容。根据以上所述，对于用相机16拍摄的地球仪20的拍摄图像，能够生成在地球仪20的整个区域显示被处理为圆形的内容的AR图像。信息处理装置10，在显示部15显示重叠部25生成的AR图像。

根据上述的各个功能，信息处理装置10能够生成在相机16拍摄的地球仪20上重叠了存储在内容DB12a或者相簿12b中的内容的AR图像。此外，提取部23从内容中提取与地球仪20的拍摄范围相对应的区域，图像处理部24对提取的区域进行图像处理。根据以上所述，能够在地球仪20的拍摄范围内的各个位置(各个场所)与内容中的各个位置(各个场所)位置对准的状态下将内容重叠在地球仪20上。

以下，基于流程图说明信息处理装置10的AR图像的显示处理。图4是信息处理装置10进行的处理步骤的流程图。图5至图8是AR图像的显示例的示意图。控制部11通过执行信息处理装置10的存储部12中存储的控制程序进行以下的处理。

信息处理装置10，例如在通过操作面板13受理了用户的图像处理应用P的执行指示时，执行图像处理应用P。在执行图像处理应用P的信息处理装置10中，控制部11利用相机16开始拍摄(S1)。控制部11，通过相机16取得拍摄图像(S2)，对取得的拍摄图像，识别拍摄图像中的AR标识，基于AR标识以及拍摄图像，识别拍摄图像中的地球仪20(S3)。在这里，控制部11确定拍摄图像中的地球仪20的区域以及地球仪20的拍摄范围等。

控制部11，对于识别的地球仪20，判断拍摄范围是否被变更(S4)。例如，控制部11，事先存储步骤S3中确定的地球仪20的拍摄范围到存储部12，接下来确定了地球仪20的拍摄范围时，判断上一次的拍摄范围是否被变更。若判断为拍摄范围没有被变更(S4:NO)，则控制部11反复进行以下处理，即：返回步骤S2的处理，在规定的时机取得拍摄图像，基于取得的拍摄图像识别地球仪20。

若判断为拍摄范围被变更(S4:YES)、或者第一次对地球仪20进行了识别的时候，控制部11从内容DB12a或者相簿12b中读出用于AR图像的内容(S5)。控制部11，例如从内容DB12a中读出与步骤S3中识别的地球仪20或者AR标识相对应的内容。与地球仪20或者AR标识相对应的内容例如是与拍摄图像中的地球仪20的区域内的图案、地图等相对应的内容，或者是与拍摄图像中包含的AR标识相对应的内容。此外，在用户通过操作面板13指定了用于AR图像的内容时，控制部11从相簿12b中读出指定的内容。

接下来，控制部11从步骤S5读出的内容中提取与步骤S3中确定的地球仪20的拍摄范围相对应的区域(对应区域)(S6)。例如，控制部11，从内容图像中提取与地球仪20的拍摄范围的纬度以及经度相对应区域的图像。然后，控制部11对步骤S6中提取的区域(内容)进行图像处理(S7)。在这里，控制部11，进行将内容变形为圆形图像的处理，使得内容能够显示在拍摄图像中的地球仪20的圆形区域。更进一步，控制部11，以全面覆盖拍摄图像中的地球仪20的区域的方式重叠圆形的内容图像生成AR图像，该圆形的内容图像基于在步骤S7中进行了处理的内容(S8)。控制部11通过操作面板13显示生成的AR图像(S9)。

控制部11判断是否结束处理(S10)。结束处理的情况是指，例如通过操作面板13受理了用户的结束指示的情况。控制部11，若判断为不结束处理(S10：NO)，则返回步骤S2的处理，若判断为结束处理(S10：YES)，则结束处理。返回步骤S2的处理后，控制部11每次在规定的时机取得拍摄图像都进行步骤S3至S9的处理。根据以上所述，基于通过相机16逐次取得的拍摄图像，进行地球仪20的识别、与识别的地球仪20的拍摄范围相对应的内容的重叠，能够生成与地球仪20的拍摄图像相对应的AR图像。因此，通过旋转作为拍摄对象的地球仪20、或者变更地球仪20的拍摄方向变更了地球仪20的拍摄范围时，重叠在地球仪20上的内容也被实时变更。

如图5所示的例子是，NASA(National Aeronautics and Space Administration:美国国家航空航天局)公开的通过正距圆筒投影制作的月面照片用于内容时的AR图像。利用通过正距圆筒投影制作的月面照片时，控制部11，从内容(月面照片)中提取与拍摄的地球仪20的拍摄范围的纬度以及经度相对应的月面纬度以及月面经度(月面坐标)的区域的图像。然后，控制部11对提取的图像进行变形为圆形的图像处理后，重叠在拍摄图像中的地球仪20的圆形区域。根据以上所述，可以生成如图5所示的月球仪的AR图像。另外，通过旋转作为拍摄对象的地球仪20、或者变更对地球仪20的拍摄方向变更了地球仪20的拍摄范围时，控制部11，从内容(月面照片)中提取出与变更后的拍摄范围相对应的区域的图像。然后，控制部11，对提取的图像进行变形为圆形的图像处理后，重叠在拍摄图像中的地球仪20的圆形区域。根据以上所述，地球仪20的拍摄范围被变更时，与变更后的地球仪20的拍摄范围相对应的月面照片被重叠在地球仪20上。因此，对于如图5所示的月球仪的AR图像，能够通过变更地球仪20的拍摄范围来旋转月球仪，能够显示从各个方向看见的月球仪的图像。

如图6A以及图6B所示的例子是，合成由卫星拍摄的地球的所有周向表面照片并通过正距圆筒投影平面展开得到的卫星照片用于内容时的AR图像。利用这样的卫星照片的时候，控制部11从内容(卫星照片)中提取与拍摄的地球仪20的拍摄范围的纬度以及经度相对应的区域的图像。然后，控制部11对提取的图像进行变形为圆形的图像处理后，重叠在拍摄图像中的地球仪20的圆形区域。根据以上所述，如图6A、6B所示，可以显示从卫星上看到的地球的AR图像。此外，图6A是示意非洲大陆以及欧亚大陆的白天的卫星照片的例子，图6B是示意美洲大陆夜间的卫星照片的例子。在图6A、图6B示意的画面的显示状态下，当通过旋转作为拍摄对象的地球仪20、或者变更地球仪20的拍摄方向变更了地球仪20的拍摄范围时，在地球仪20上重叠与变更后的地球仪20的拍摄范围相对应的卫星照片。因此，在如图6A所示的AR图像被显示在显示部15上的状态下，当地球仪20的拍摄范围被变更为南美的时候，基于与南美相对应的卫星照片变更为如图6B所示的AR图像。即，对于如图6A、6B所示的AR图像，可以伴随着地球仪20的旋转使得AR图像中的地球也旋转，能够显示从各个方向看见的地球的图像(照片)。此外，像这样的内容，例如能够基于日本标准时间指定，也能够根据用户任意的指定。

图7A以及图7B所示的例子是，表示大陆形状随时间的变化(地壳变动)的图像用于内容时的AR图像。利用这样的图像的时候，控制部11从内容中提取与拍摄的地球仪20的拍摄范围的纬度以及经度相对应区域的图像。然后，控制部11对提取的图像进行变形为圆形的图像处理后，重叠在拍摄图像中的地球仪20的圆形区域。根据以上所述，如图7A所示，可以显示与地球仪20的拍摄范围相对应的2亿年前的大陆(地球)的AR图像。此外，在如图7A所示的AR图像被显示在显示部15上的状态下，当地球仪20的拍摄范围被变更时，基于与变更后的拍摄范围相对应的图像，显示变更后的拍摄范围内的2亿年前的大陆(地球)的AR图像。因此，对于如图7A所示的AR图像，可以伴随着作为拍摄对象的地球仪20的旋转使得AR图像中的2亿年前的地球也旋转，能够显示从各个方向看见的2亿年前的地球的图像。

另外，示意大陆地壳变动的图像的内容包括多个从2亿年前到现在的各个年代的地球的图像。因此，在如图7A所示的显示画面上显示有指示器13a，该指示器13a用于指定要作为AR图像显示的图像的年代。当在如图7A所示的显示画面中通过操作面板13操作指示器13a时，控制部11从指示器13a指定的年代的地球的图像(内容)中提取与地球仪20的拍摄范围相对应的区域。然后，控制部11对提取的区域(内容)进行图像处理并重叠在拍摄图像的地球仪20上生成AR图像。根据以上所述，在指示器13a指定的年代的与地球仪20的拍摄范围相对应的场所的大陆的图像被作为AR图像显示。此外，如图7A所示的显示画面是通过指示器13a指定了2亿年前的地球的例子，如图7B所示的显示画面是指定了现在的地球的例子。在图7A、图7B所示画面中，当通过指示器13a连续变更指定年代时，可逐次地显示使用了与指定的年代相对应的图像的AR图像。

图8所示的例子是，例如利用信息处理装置10将拍摄的狗的照片用于内容时的AR图像。用这样的照片时，控制部11，例如只对矩形的照片进行变形为圆形的图像处理，并重叠在拍摄图像中的地球仪20的圆形区域。像这样可以将任意的照片用于AR图像，因此可以生成适合用户的AR图像，能进一步享受用户自己拍摄的照片带来的乐趣。另外，在将像月面照片那样对被摄体的所有周向表面进行拍摄得到的照片用于内容时，能伴随着地球仪20的拍摄范围的变更，在地球仪20上重叠与变更后的地球仪20的拍摄范围相对应的照片。因此，通过旋转作为拍摄对象的地球仪20、或者变更对地球仪20的拍摄方向，能够使AR图像中的照片(照片中的拍摄对象)也旋转。

本实施方式中，除了上述的例子，例如表示各国的国境、领土、国名的随时间变化以及各个国家的地方的划分、地名的随时间变化的图像也可以作为内容。这种情况下，也能对应地球仪20的拍摄范围生成在拍摄的国家、地方等重叠了表示各种随时间变化的内容的AR图像。

根据本实施方式，从内容DB12a或者相簿12b中读出的内容以覆盖拍摄图像中的地球仪20的整个区域的方式被重叠。因此，能够将地球仪20的圆形区域作为显示区域显示各种内容。另外，通过信息处理装置10的相机16以及显示部15看地球仪20，可以看到地球仪20上显示着各种内容。更进一步，通过变更地球仪20的拍摄范围，被重叠的内容也被变更，因此，能够伴随着地球仪20的拍摄范围的变更使AR图像中的物体(例如月球仪)也旋转。

实施方式2

本实施方式涉及生成将多个内容按顺序切换地重叠于地球仪20上的AR图像的信息处理装置10。本实施方式的信息处理装置10，由于与实施方式1的信息处理装置10是相同的结构，故省略说明关于和实施方式1共通的部分。

图9是实施方式2的根据信息处理装置10的控制部11实现的功能的框图。本实施方式的信息处理装置10的控制部11，执行图像处理应用P时，与实施方式1同样地实现地球仪识别部21、内容读出部22、提取部23、图像处理部24、重叠部25的各个功能。此外，本实施方式中，内容读出部22具有顺序确定部26。在本实施方式中，这些功能中的部分功能也可以利用专用的硬件电路实现。

内容读出部22从内容DB12a或者相簿12b中读出多个内容时，顺序确定部26基于各个内容的日期和时间信息确定各个内容的读出顺序(显示顺序)。日期和时间信息，除了表示作成或者拍摄各个内容的日期和时间的信息，也可以是表示关联的多个内容的显示顺序的信息。日期和时间信息，与各个内容相对应地存储到内容DB12a或者相簿12b中。顺序确定部26，从内容DB12a或者相簿12b中读出内容的日期和时间信息，该内容的日期和时间信息是内容读出部22要从内容DB12a或者相簿12b中读出的内容的日期和时间信息。顺序确定部26，基于读出的日期和时间信息，对要从内容DB12a或者相簿12b读出的多个内容确定读出的顺序。例如，日期和时间信息表示各个内容的显示顺序的时候，顺序确定部26按照各个内容的日期和时间表示的顺序，决定各个内容的读出顺序。另外，日期和时间信息表示内容的拍摄日期和时间或者作成日期和时间的时候，顺序确定部26按照各个内容的日期和时间信息表示的日期和时间的顺序(例如升序或者降序)决定各个内容的读出顺序。内容读出部22，按照顺序确定部26确定的顺序，从内容DB12a或者相簿12b中读出各个内容。

如上所述读出的内容，和实施方式1同样地通过提取部23提取出与地球仪20的拍摄范围相对应的区域，通过图像处理部24进行图像处理后，通过重叠部25重叠在拍摄图像中的地球仪20的圆形区域。根据以上所述，生成AR图像。此外，内容读出部22按照顺序确定部26确定的顺序读出多个内容，提取部23、图像处理部24以及重叠部25对按照顺序读出的内容进行各种处理，生成AR图像。信息处理装置10将重叠部25按顺序生成的AR图像在规定的时机切换显示在显示部15上。因此，本实施方式中，能够显示多个内容在通过相机16拍摄的地球仪20上按照顺序被切换地重叠的AR图像。

以下，根据流程图说明本实施方式的信息处理装置10的AR图像的显示处理。图10是信息处理装置10进行处理的步骤的流程图。控制部11根据信息处理装置10的存储部12中存储的控制程序执行以下的处理。本实施方式的信息处理装置10的控制部11进行和图4中的步骤S1至S4相同的处理(S21至S24)。

控制部11，若判断为地球仪20的拍摄范围被变更(S24：YES)，或者是第一次对地球仪20进行了识别的时候，确定用于AR图像的多个内容各自的显示顺序(S25)。例如，控制部11，从内容DB12a或者相簿12b中读出要从内容DB12a或者相簿12b中读出的多个内容的日期和时间信息，基于读出的日期和时间信息确定各自的显示顺序。此外，在通过操作面板13受理了用户对用于AR图像的内容的指定时，控制部11从相簿12b读出该内容的日期和时间信息。另外，与步骤S23中识别的地球仪20或者AR标识相对应的内容用于AR图像的时候，控制部11从内容DB12a读出该内容的日期和时间信息。

控制部11，按照确定的显示顺序，从内容DB12a或者相簿12b中读出一个内容(S26)，对读出的内容进行和图4中的步骤S6至S9相同的处理(S27至S30)。根据以上所述，可显示在拍摄的地球仪20上重叠有一个内容的AR图像。然后，控制部11判断用于AR图像的所有的内容的显示(重叠)处理是否结束(S31)。控制部11，若判断为显示处理没有全部结束(S31：NO)，则转移到步骤S26的处理，按照步骤S25中确定的显示顺序，从内容DB12a或者相簿12b中读出下一个内容(S26)。然后，控制部11对读出的内容进行步骤S27至S30的处理。在判断为用于AR图像的所有的内容的处理结束了的时候(S31：YES)，控制部11判断是否结束处理(S32)。若控制部11判断为不结束处理(S32：NO)，则返回步骤S22的处理，若判断为处理结束(S32：YES)，则结束处理。

根据上述处理，在例如图5至图8所示以覆盖拍摄图像中的地球仪20的整个区域的方式重叠内容的AR图像中，内容在规定的时机被切换显示。因此，能够将地球仪20的圆形区域作为显示区域切换显示多个内容，因此能生成适合用户的AR图像，用户能够进一步享受自己拍摄的照片带来的乐趣。

本实施方式的AR图像，除了对拍摄图像中的地球仪20的整个区域按照顺序切换显示多个内容的结构外，也可以是如图11A以及如图11B所示在拍摄图像中的地球仪20的区域的一部分上显示各个内容的结构。图11A以及图11B是AR图像的显示例的示意图。图11A的示意例中，在拍摄图像中的地球仪20的区域，多个内容不重叠地排列显示。此外，图11A中的数字1至5表示各个内容的显示顺序。另外，也可以如图11B所示在拍摄图像中的地球仪20的区域使多个内容分别以部分重叠的方式显示。图11B中的数字1至4表示各个内容的显示顺序。像这样地生成AR图像时，重叠在拍摄图像中的地球仪20上的多个内容的显示形态可以适当变更。另外，也能够根据用户的指定切换各个内容的显示形态。图11A、图11B中，虽然用圆形示意了各个内容的显示区域，但也可以是矩形。

实施方式3

本实施方式涉及生成在拍摄图像中的地球仪20内的对应的各个位置(各个场所)重叠了多个内容的AR图像的信息处理装置10。本实施方式的信息处理装置10，由于与实施方式2的信息处理装置10有相同的结构，故省略说明有关和实施方式2共通的部分。

图12是实施方式3的信息处理装置10的控制部11实现的功能的框图。本实施方式的信息处理装置10的控制部11，执行图像处理应用P的时候，与实施方式2同样地实现地球仪识别部21、内容读出部22、图像处理部24、重叠部25的各个功能。此外，本实施方式中，提取部23不是必须具备的，重叠部25具有位置确定部27。在本实施方式中，这些功能中的部分功能也可以利用专用的硬件电路实现。

在重叠部25要将内容重叠在拍摄图像中的地球仪20时，位置确定部27基于各个内容的位置信息，确定要重叠的位置。位置信息，例如是表示各个内容的拍摄或者作成的位置(场所)的信息、表示要显示各个内容的位置(场所)的信息，可使用表示地球上(地图上)的位置的信息(纬度以及经度等)。另外，位置信息也可以是表示赋予地球仪20的各个AR标识的信息。位置信息与各个内容相对应地存储到内容DB12a或者相簿12b中，本实施方式中，当内容读出部22读出内容时，各个内容的位置信息也从内容DB12a或者相簿12b中读出。

当内容的位置信息是表示地球上的位置的信息时，位置确定部27，基于地球仪识别部21根据AR标识确定的拍摄图像中的地球仪20内的各个位置的位置信息和内容的位置信息，确定要重叠内容的位置。即，位置确定部27，基于拍摄图像中的地球仪20内的各个位置的位置信息，确定内容的位置信息表示的位置在地球仪20内的哪个位置，将确定的位置定为要重叠内容的位置。另外，内容的位置信息是表示对应的AR标识的信息的时候，位置确定部27，将地球仪识别部21确定的对应的AR标识的位置确定为要重叠内容的位置。

本实施方式的重叠部25，对于拍摄图像中的地球仪20，在位置确定部27确定的位置重叠内容图像生成AR图像，该内容图像基于图像处理部24处理过的内容。本实施方式中，由于内容读出部22按照顺序确定部26确定的顺序读出多个内容，所以可以生成将按照规定的顺序读出的内容分别重叠在地球仪20的对应位置的AR图像。此外，重叠部25，可以将由内容读出部22按照顺序读出并经过图像处理部24处理的多个内容在规定的时机按照顺序切换重叠于拍摄图像中的地球仪20，也可以将该多个内容在规定的时机按照顺序追加重叠于拍摄图像中的地球仪20。信息处理装置10，在显示部15显示重叠部25生成的AR图像。根据以上所述，信息处理装置10，可以生成在相机16拍摄的地球仪20的各个位置重叠了与各个位置相对应的内容的AR图像并对该AR图像进行显示。

以下，基于流程图说明本实施方式的信息处理装置10的AR图像的显示处理。图13是信息处理装置10进行处理的步骤的流程图，图14至图18是AR图像的显示例的示意图。控制部11按照信息处理装置10的存储部12中存储的控制程序执行以下的处理。本实施方式的信息处理装置10的控制部11，进行和图10中的步骤S21至S26相同的处理(S41至S46)。此外，本实施方式中，步骤S46中，控制部11在从内容DB12a或者相簿12b中读出内容时也读出内容的位置信息。

控制部11，对步骤S46中读出的内容进行图像处理(S47)。在这里，控制部11根据需要进行生成内容的缩略图的处理。此外，若是没有必要进行图像处理的内容，则控制部11对该内容可以不做任何的处理。接下来，控制部11基于从内容DB12a或者相簿12b中读出的内容的位置信息，对于拍摄图像中的地球仪20，确定要重叠内容的显示位置(S48)。然后，控制部11在确定的显示位置重叠内容图像(例如缩略图)生成AR图像(S49)，显示在操作面板13上(S50)，该内容图像基于步骤S47中进行了图像处理的内容。根据以上所述，在拍摄的地球仪20的对应位置重叠了一个内容(例如缩略图)的AR图像被显示。

控制部11，判断对用于AR图像的所有的内容的显示(重叠)处理是否结束了(S51)。控制部11，若判断为显示处理没有全部结束(S51：NO)，则转移到步骤S46的处理，按照步骤S45中确定的显示顺序，从内容DB12a或相簿12b中读取下一个内容(S46)。然后，控制部11对读出的内容进行步骤S47至S50的处理。若判断为对用于AR图像的所有的内容的处理结束了(S51：YES)，控制部11判断是否结束处理(S52)。控制部11，若判断为不结束处理(S52：NO)，则返回步骤S42的处理，若判断为结束处理(S52：YES)，则结束处理。

根据上述的处理，例如如图14至18所示，对于拍摄图像中的地球仪20，能够生成各个内容分别重叠在对应位置上的AR图像。图14所示的例子是台风的图像用于内容C0时的AR图像。利用该内容C0时，控制部11，对于拍摄的地球仪20的拍摄范围，确定与该内容C0的位置信息(纬度以及经度)相对应的显示位置，在拍摄图像中的地球仪20的确定的位置上重叠内容C0。根据以上所述，可以生成在拍摄的地球仪20上显示台风图像的AR图像。此外，多个图像构成一个内容的时候，控制部11，通过按照与各个图像的日期和时间信息相对应的显示顺序显示各个图像，可以在地球仪20上重叠台风的路线图。另外，地球仪20的拍摄范围变更了的时候，控制部11在与拍摄图像中的地球仪20的对应位置上重叠与变更后的拍摄范围相对应的内容(台风的图像)。因此，旋转作为拍摄对象的地球仪20、或者变更了对地球仪20的拍摄方向时，AR图像中的地球也进行旋转，在旋转后的地球上的各个场所发生的台风的图像也被显示。

图15所示的例子是，例如将用户在旅游中拍摄的照片用于内容C1至C3时的AR图像。用户拍摄的照片用于内容时，控制部11，对于拍摄的地球仪20的拍摄范围，从相簿12b中读出在拍摄范围内的各个场所拍摄的照片。然后，控制部11生成读出的各个照片的缩略图。此外，各个照片的缩略图存储在相簿12b的时候，控制部11只要从相簿12b中读出各个照片的缩略图即可。另外，控制部11，对于拍摄的地球仪20的拍摄范围，确定与各个内容C1至C3(各个照片)的位置信息(纬度以及经度)相对应的显示位置。然后，控制部11按照内容C1至C3的拍摄顺序在拍摄图像中的地球仪20的确定位置上重叠各个内容C1至C3。根据以上所述，如图15所示，能够生成在与地球仪20上的拍摄场所相对应的位置按照拍摄各个照片的顺序显示旅游中拍摄的照片的AR图像。

在图15中示出了三个内容C1至C3分别在地球仪20的对应位置上显示的状态，也可以在规定的时机切换显示各个内容C1至C3。即，可以是在地球仪20上始终只重叠一个内容的结构。另外，在图15所示的画面中通过操作面板13对内容C1至C3中的任一个进行了选择操作的时候，控制部11可以放大显示选择的内容。即，控制部11可以从相簿12b中读出选择的内容并在最前面显示。此外，在图15所示的画面中，通过旋转作为拍摄图像的地球仪20或者变更对地球仪20的拍摄方向变更了地球仪20的拍摄范围的时候，控制部11也是从相簿12b中读出与变更后的拍摄范围相对应的内容(在变更后的拍摄范围内拍摄的照片)，进行相同的处理。根据以上所述，通过旋转地球仪20变更地球仪20的拍摄范围，可以显示重叠了与变更后的拍摄范围相对应的照片的AR图像。

图16所示的例子是使用了内容C4至C5时的AR图像，该内容C4至C5在旅游前与表示旅游逗留预定的场所的位置信息以及逗留日期和时间相对应地存储在内容DB12a中。在这里，对于拍摄的地球仪20的拍摄范围，控制部11从内容DB12a中读出表示拍摄范围内的各个逗留预定场所的位置信息、与该位置信息相对应的逗留日期和时间以及内容C4至C6。然后，控制部11基于读出的位置信息(纬度以及经度)，对于拍摄的地球仪20的拍摄范围，确定各个内容C4至C6的显示位置。然后，控制部11按照内容C4至C6的逗留日期和时间的顺序，在拍摄图像中的地球仪20的确定位置上重叠内容C4至C6。根据以上所述，如图16所示，对于拍摄图像中的地球仪20，能够生成内容C4至C6按照逗留顺序重叠在与各自的逗留预定场所相对应的位置的AR图像。

图16所示的画面中，内容C4至C6也可以是例如表示逗留日期和时间的图标。此外，如图16所示，通过追加显示连接各个内容C4至C6的线，可以在地球仪20上显示旅游路线。更进一步，对于如图16所示的画面，可以对各个内容C4至C6事先设定规定的网站链接。这种情况下，通过操作面板13对内容C4至C6中的任一个进行了选择操作的时候，控制部11也可以从对被选择的内容设定的网站取得关于逗留场所的信息进行显示。

图17所示的例子是和图15一样将用户拍摄的照片用于内容时的AR图像。图17所示画面，在图15所示的画面上追加了期间指定栏13b，该期间指定栏13b用于指定要作为AR图像显示的照片的拍摄日期和时间。在图17所示的显示画面通过操作面板13指定了期间的时候，控制部11从相簿12b中读出照片，该照片是在拍摄的地球仪20的拍摄范围内的各个场所拍摄的照片中的、指定的期间内拍摄的照片。然后，控制部11生成读出的各个照片的缩略图，按照各个照片(内容)的拍摄顺序，分别在拍摄图像中的地球仪20的对应显示位置重叠各个照片的缩略图。根据以上所述，能够生成使在地球仪20的拍摄范围内并在用户指定的期间内拍摄的照片显示在地球仪20上的与拍摄场所相对应的位置的AR图像。在图17所示的画面中，通过操作面板13对任一个内容进行了选择操作的时候，控制部11可以放大显示被选择的内容。通过旋转作为拍摄对象的地球仪20、或者变更对地球仪20的拍摄方向变更了地球仪20的拍摄范围时，可显示与变更后的拍摄范围对应的显示内容(在变更后的拍摄范围内拍摄的照片)被重叠的AR图像。

图17所示的画面中，作为期间指定栏13b设有下拉菜单，通过下拉菜单能够设定任意的期间。但是期间指定栏13b不受限于该结构。例如，可以用通过操作面板13输入的文字设定期间。另外，也可以显示指示器，该指示器用于对于指定的期间内指定要作为AR图像显示的照片的拍摄年或者年月。这种情况下，可以和图7A以及图7B所示的例子相同，使指示器指定的年或者年月拍摄的照片作为AR图像显示。本实施方式中，照片等内容可以不必存储在存储部12中，也可以存储在可通过网络与信息处理装置10通信的外部装置中，例如存储到云服务器中。这种情况下，控制部11从云服务器中读出在与地球仪20的拍摄范围相对应的场所拍摄的照片、在用户指定的期间内拍摄的照片等内容即可。

本实施方式中，也可以将表示地球仪20上的各个位置的位置信息(也可以是表示各个AR标识的信息)事先和各个内容相对应地存储到内容DB12a中。图18所示的例子是在地球仪20上的各个位置将在三叠纪、侏罗纪、白垩纪等在各个位置生息的恐龙的图像用作内容C7至C9时的AR图像。在这里，控制部11，对于拍摄的地球仪20的拍摄范围，从内容DB12a中读出与拍摄范围内的各个位置相对应的内容C7至C9，对于拍摄的地球仪20，确定各个内容C7至C9的显示位置。然后，控制部11分别在与拍摄图像中的地球仪20的对应显示位置重叠各个内容C7至C9。根据以上所述，如图18所示，可以显示恐龙在三叠纪、侏罗纪、白垩纪等的生息场所的AR图像。在图18所示的画面中，旋转作为拍摄对象的地球仪20、或者变更了对地球仪20的拍摄方向时，对应的AR图像中的地球也进行旋转，与旋转后的地球上的各个场所对应的恐龙的图像(内容)被显示。

本实施方式中，除了上述的例子，例如通过事先将地球仪20上的各国的位置信息和各国的国旗相对应地存储到内容DB12a中，对于拍摄图像中的地球仪20，可以生成在各国的显示位置重叠了国旗的AR图像。另外，也可以事先将地球仪20上的各个位置信息和被登录为世界遗产的建筑物等的缩略图相对应地存储到内容DB12a中。这种情况下，对于拍摄图像中的地球仪20，可以生成在被登录为世界遗产的建筑物等的场所重叠了世界遗产的缩略图的AR图像。

更进一步，本实施方式中，例如基于飞行记录器中记录的飞行路线或者飞行预定路线，对于地球仪20，可以生成在飞行路线上的城市等的位置重叠了内容的AR图像。另外，例如基于哥伦布、达·伽马、麦哲伦等的探险家航海的航行路线，能够生成在地球仪20上重叠内容的AR图像，该内容用于示意各个航行路线。根据以上所述，可以在AR图像上复原各个航行路线。更进一步，能够对应地球仪20的拍摄区域生成在拍摄的场所重叠了内容的AR图像，该内容可以从视觉上把握各个场所的地形。通过如上所述利用与地球仪20的拍摄范围相对应的各种内容生成AR图像，能够利用AR图像进行各种学习。另外，将用户拍摄的照片等用于内容时，能够生成适合用户的AR图像，能够进一步享受用户自己拍摄的照片带来的乐趣。

上述各个实施方式中，内容可以是一个静止的图像，也可以是由多个静止图像构成，也可以由视频影像构成。利用多个静止图像或者视频影像构成的内容时，在拍摄的地球仪20上，重叠的内容以动态被显示。

实施方式4

本实施方式涉及基于在日程表中设定的预定信息生成AR图像的信息处理装置10。本实施方式的信息处理装置10，由于和实施方式3的信息处理装置10有相同的结构，故省略说明关于和实施方式3共通的部分。本实施方式的信息处理装置10，存储预定信息DB12c到存储部(预定存储部)12中。预定信息DB12c，例如事先存储日程表中设定的预定信息，预定信息包括，工作、旅行等预定日期和时间的日期和时间信息以及预定场所的位置信息。

图19是实施方式4的信息处理装置10的控制部11实现的功能的框图。本实施方式的信息处理装置10的控制部11，执行图像处理应用P的时候，与实施方式3同样地实现地球仪识别部21、内容读出部22、图像处理部24、重叠部25的各个功能。此外，本实施方式中，内容读出部22的顺序确定部26，从预定信息DB12c中取得作为预定信息的日期和时间信息，重叠部25的位置确定部27，从预定信息DB12c中取得作为预定信息的位置信息。

以下，基于流程图说明本实施方式的信息处理装置10的AR图像显示处理。图20是信息处理装置10进行处理步骤的流程图。控制部11通过执行信息处理装置10的存储部12中存储的控制程序进行以下的处理。此外，图20是在图13中的步骤S41的处理前追加了步骤S61的处理，图20中省略图13中的步骤S42至S52的图示。

本实施方式的信息处理装置10中，控制部11例如从预定信息DB12c中读出旅游的预定信息(S61)。预定信息例如包括，表示旅游中逗留的预定场所的位置信息、表示逗留日期和时间的日期和时间信息。控制部11，基于读出的预定信息，进行步骤S41以后的处理。具体方式为，在步骤S45中，控制部11基于读出预定信息中包含的逗留日期和时间，对用于AR图像的多个内容确定各自的显示顺序。另外，在步骤S48中，控制部11基于读出的预定信息中包含的位置信息，对于拍摄图像中的地球仪20，确定要重叠各个内容的显示位置。

此外，若读出的预定信息是未来的信息时，即，在预定信息表示的旅游之前，步骤S46中的控制部11，从内容DB12a或者相簿12b中读出如图16所示的内容(例如图标)。另外，若读出的预定信息是过去的信息时，即，在预定信息表示的旅游之后，步骤S46中的控制部11从内容DB12a或者相簿12b中读出如图15所示与表示的预定信息的日期和时间信息相对应的内容(例如照片)。

根据上述的处理，能够和实施方式3同样生成如图15、图16所示的AR图像。即，如图15所示，对于地球仪20，能够基于预定信息生成在与旅游的各个场所相对应的位置重叠了在各个场所拍摄的照片C1至C3的AR图像。另外，如图16所示，对于地球仪20，能够基于预定信息生成在与预定逗留的各个场所相对应的位置重叠了内容C4至C6的AR图像，该内容C4至C6用于示意逗留的顺序。本实施方式中，在内容DB12a或者相簿12b中存储的内容，可以是静止图像，也可以是视频影像。另外，照片等内容不只可以存储到存储12中，例如也可以存储到云服务器中。

实施方式5

本实施方式涉及生成AR图像的信息处理装置10，该AR图像是以覆盖拍摄图像中的地球仪20的整个区域的方式重叠了一个内容并在其上重叠了多个内容的AR图像。本实施方式的信息处理装置10有和实施方式1、实施方式3的信息处理装置10同样的结构，因此省略说明与实施方式1、实施方式3共通的部分。

以下，基于流程图说明本实施方式的信息处理装置10的AR图像显示处理。图21以及图22是信息处理装置10进行处理步骤的流程图，图23是AR图像的显示例的示意图。控制部11通过执行信息处理装置10的存储部12中存储的控制程序进行以下的处理。本实施方式的信息处理装置10的控制部11，进行和图4中的步骤S1至S9相同的处理(S71至S79)。根据以上的处理生成AR图像，该AR图像是在拍摄图像中的地球仪20的整个区域上重叠了与地球仪20的拍摄范围相对应的内容的AR图像。

接下来，控制部11进行和图13中的步骤S45至S51相同的处理(S80至S86)。在这里，控制部11，基于步骤S73中识别的地球仪20进行各个处理。控制部11，若判断对用于AR图像的所有内容的处理结束时(S86：YES)，控制部11判断是否结束处理(S87)。控制部11，若判断为不结束处理(S87：NO)，则返回步骤S72的处理，若判断为结束处理(S87：YES)，则结束处理。

根据上述的处理生成AR图像，该AR图像如图23所示，是以覆盖拍摄图像中的地球仪20的整个区域的方式重叠了内容并在该内容上进一步重叠了在地球仪20的拍摄范围内的各个场所拍摄的照片的缩略图的AR图像。此外，图23所示的例子中，以覆盖地球仪20的整个区域的方式重叠有日本夜间时拍摄的卫星照片，多个照片的缩略图重叠在地球仪20上的与各自的拍摄场所相对应的位置。另外，可以按照各个照片的拍摄的顺序显示各个照片的缩略图。根据以上所述，在以显示如图11A以及图11B所示的显示形态显示多个内容(缩略图)时，可以将任意的内容作为背景图像进行显示。

实施方式6

本实施方式中，作为显示图像的一例以奖牌举例说明。举办奥运会或者运动竞技比赛的时候，按选手、国家公布统计的每种奖牌的获得数量。本实施方式中，奖牌重叠显示在地球仪20的拍摄图像上。本实施方式的信息处理装置10有和实施方式3的信息处理装置10相同的结构，因此省略说明和实施方式3共通的部分。

图24是实施方式6的信息处理装置10的控制部11实现的功能的框图。本实施方式的信息处理装置10的控制部11，执行图像处理应用P的时候，与实施方式3同样地实现地球仪识别部21、内容读出部22、图像处理部24、重叠部25的各个功能。此外，本实施方式的信息处理装置10，存储奖牌DB12d到存储部(奖牌存储部)12中。奖牌DB12d，按国家存储每种奖牌的获得数量。此外，关于奖牌DB12d中存储的信息，不仅可以从互联网取得，也可以手动输入。

图25是奖牌DB12d的数据布局的一例的说明图。奖牌DB12d包括，国家列、位置(纬度、经度)列、金牌列、银牌列、铜牌列。国家列，存储国家的名称。此外，国家列也可以存储国家的代码用于取代国家的名称。位置(纬度、经度)列，存储国家的位置信息。位置信息包括纬度、经度。另外，位置信息也可以是首都或者城市的邮编号、地址或者设施名称等。金牌列，存储获得的金牌的数量。银牌列，存储获得的银牌的数量。铜牌列，存储获得的铜牌的数量。

图26是将关于奥运会的显示图像用作内容时的AR图像的显示例的示意图。此外，如图所示，白色空心的圆圈代表金牌，带有右斜纹的圆圈代表银牌，带有左斜纹的圆圈代表铜牌。举办奥运会或者运动竞技比赛的时候，能够按选手、国家公布统计的每种奖牌的获得数量，并重叠在地球仪20的拍摄图像上显示。

内容读出部22，从内容DB12a或者相簿12b中读出奖牌的显示图像以及各国的显示图像，从奖牌DB12d中按国家读出每种奖牌的获得数量。国家的显示图像，例如是代表国家的国旗、建筑物或者风景等的显示图像。以下，用国旗作为国家的显示图像举例说明。重叠部25的位置确定部27，从奖牌DB12d中取得各个国家的位置信息。控制部11，提取与拍摄的地球仪20的拍摄范围相对应的对应区域，在提取的对应区域，按国家进行对各个奖牌的显示图像的显示处理。

以下，以铜牌的显示处理的概要为例进行说明。控制部11，从与拍摄的地球仪20的拍摄范围相对应的对应区域中选择一个国家。控制部11，取得读出的该国家的铜牌的获得数量。控制部11，取得读出的奖牌的显示图像，以该奖牌的显示图像为原型，复制和铜牌的获得数量同等数量的奖牌的显示图像。例如，铜牌的获得数量为三个的时候，复制三个奖牌的显示图像。控制部11，给复制的奖牌的显示图像赋予铜色，沿着和地球仪20的拍摄图像中的球体的表面大致垂直的方向向上堆叠，重叠显示在与该国家的位置信息相对应的拍摄图像的球体位置。此外，也可以事先准备铜牌、银牌、金牌各自的显示图像数据。

铜牌的显示图像的显示处理结束后，按照银牌的显示图像、金牌的显示图像的顺序进行显示处理。关于银牌以及金牌的显示处理，由于和铜牌的显示处理相同故省略说明。控制部11，在金牌的显示处理结束后，将该国旗的显示图像在金牌的显示图像的上方堆叠显示。此外，国旗的显示图像的显示位置不受限于金牌的显示图像的上方，例如也可以在奖牌的显示图像之间进行显示。更进一步，也可以用国名的字符串代替国旗的显示图像。此外，本实施方式中，以铜牌、银牌、金牌的顺序进行显示处理，但不受此限制。例如，除了可以以金牌、银牌、铜牌的顺序进行显示处理外，还可以以随机的顺序进行显示处理。

本实施方式中，虽然对奖牌的显示图像赋予了颜色，但不受此限制。例如，也可以在奖牌的显示图像中写入文字“金”、“银”或者“铜”进行显示。此外，本实施方式中，根据奖牌的获得数量向上堆叠奖牌的显示图像并重叠显示在地球仪20的拍摄图像中，但不受此限制。例如，信息处理装置10也可以用长方体的显示图像代替奖牌的显示图像，根据奖牌的获得数量调整长方体的显示图像的高度来显示。

另外，也可以在内容DB12a或者奖牌DB12d中对上述显示图像设定规定网站的链接。图27是点击国旗的显示图像时转移到被链接网站的显示例的示意图。这种情况下，通过操作面板13对任一个国旗的显示图像进行了选择操作的时候，控制部11可以从对被选择的国旗的显示图像设定的网站上取得关于该国奖牌的详细信息进行显示。

图28是实施方式6的AR图像的显示处理的流程图。本实施方式的信息处理装置10的控制部11，进行和图4中的步骤S1至S4相同的处理(Sa01至Sa04)。内容读出部22，读出关于奖牌的内容(步骤Sa05)。具体方式为，内容读出部22，从内容DB12a或者相簿12b中读出奖牌的显示图像以及各国国旗的显示图像，从奖牌DB12d中按国家读出每种奖牌的获得数量。重叠部25的位置确定部27，从奖牌DB12d中取得各个国家的位置信息(Sa06)。控制部11，提取与拍摄的地球仪20的拍摄范围相对应的对应区域(Sa07)。此外，关于对应区域的提取处理，由于和实施方式1的对应区域的提取处理相同故省略说明。控制部11，基于各个国家的位置信息，对于拍摄图像中的地球仪20，确定重叠显示奖牌的显示图像以及国旗的显示图像的显示位置(Sa08)。控制部11，根据各种奖牌的获得数量，进行按国家将奖牌的显示图像以及国旗的显示图像沿着与球体的表面大致垂直的方向向上堆叠的处理(Sa09)。然后，控制部11，在拍摄图像中的地球仪20的区域，基于步骤Sa09中处理的显示图像生成AR图像(Sa10)。其后，信息处理装置10的控制部11，进行和图4中的步骤S9至S10相同的处理(Sa11至Sa12)。

上述的各个实施方式中，不限于通过变更地球仪20相对于相机16的方向(拍摄方向)来变更地球仪20的拍摄区域的结构。例如，信息处理装置10，可以具有如下结构，即，通过适当地切换一边移动拍摄位置一边对地球仪20的全部球面拍摄得到的多个拍摄图像，来变更在显示部15上被显示的地球仪20的区域。这种情况下，在显示部15上被显示的地球仪20的区域成为重叠内容的地球仪20的区域。有这种结构的时候，信息处理装置10具有检测本装置10倾斜的倾斜传感器等。然后，信息处理装置10，根据倾斜传感器检测的本装置10的倾斜，旋转在显示部15上显示的地球仪20，切换被显示的地球仪20的显示区域。其后，信息处理装置10，通过对在显示部15上被显示的地球仪20进行上述各个实施方式中说明的处理，能够显示对显示中的地球仪20重叠了各种内容的AR图像。

各个实施方式中被记载的技术的特征(构成要件)能够相互组合，通过组合可以形成新的技术的特征。

应该认为，这次公开的实施方式的所有点都是示例，不是限制性的。本发明的范围，不是上述的意思而是由权利要求所示，包含与权利要求书等同的意思和范围内的所有变更。

Claims (14)

1.一种计算机可读存储介质，其上存储有程序，其特征在于，该程序使计算机执行下述处理:

取得表面附有标识的球体的拍摄图像，

基于所述标识，识别取得的所述拍摄图像中的所述球体，

显示内容图像使得该内容图像覆盖识别的所述拍摄图像中的所述球体的整个区域。

2.根据权利要求1所述的计算机可读存储介质，其特征在于，所述程序使计算机执行下述处理:

对所述内容图像进行图像处理，使得所述内容图像的显示区域为所述拍摄图像中的所述球体的整个区域。

3.根据权利要求1或2所述的计算机可读存储介质，其特征在于，

多个所述内容图像分别包含日期和时间信息，

所述程序使计算机执行下述处理:

在所述拍摄图像中的所述球体的整个区域，按照所述日期和时间信息表示的日期和时间的顺序显示所述内容图像。

4.一种计算机可读存储介质，其上存储有程序，其特征在于，该程序使计算机执行下述处理:

取得表面附有标识的球体的拍摄图像，

基于所述标识，识别取得的所述拍摄图像中的所述球体，

将包含日期和时间信息的多个内容图像按照所述日期和时间信息表示的日期和时间的顺序重叠在识别的所述拍摄图像中的所述球体上进行显示。

5.根据权利要求4所述的计算机可读存储介质，其特征在于，

所述内容图像包括位置信息，

所述程序使计算机执行下述处理:

基于所述标识以及所述位置信息，在所述拍摄图像中的所述球体的对应位置显示所述内容图像。

6.根据权利要求4或5所述的计算机可读存储介质，其特征在于，

所述计算机具有预定存储部，所述预定存储部存储包括日期和时间信息以及位置信息的预定信息，

所述程序使计算机执行下述处理:

按照从所述预定存储部中读出的所述预定信息包含的日期和时间信息表示的日期和时间的顺序，在所述拍摄图像中的所述球体的基于所述预定信息包含的位置信息以及所述标识的位置显示内容图像。

7.根据权利要求4所述的计算机可读存储介质，其特征在于，

所述计算机具有奖牌存储部，所述奖牌存储部存储每种奖牌的获得数量以及国名，

所述程序使计算机执行下述处理:

基于从奖牌存储部读出的所述每种奖牌的获得数量以及所述国名，在与国家的位置信息相对应的所述拍摄图像中的球体位置，按国家堆叠显示每种奖牌的显示图像。

8.根据权利要求1至7中任一项所述的计算机可读存储介质，其特征在于，

所述计算机具有存储所述内容图像的存储部，

所述程序使计算机执行下述处理:

在所述拍摄图像中的所述球体上显示从所述存储部中读出的所述内容图像。

9.根据权利要求8所述的计算机可读存储介质，其特征在于，

所述内容图像存储在相簿中，所述相簿存储在所述存储部中，

所述程序使计算机执行下述处理:

加工从所述相簿中读出的所述内容图像，显示在所述拍摄图像中的所述球体上。

10.根据权利要求1至9中任一项所述的计算机可读存储介质，其特征在于:

所述内容图像是视频影像。

11.一种信息处理装置，其特征在于，包括:

取得部，所述取得部取得表面附有标识的球体的拍摄图像；和

识别部，所述识别部基于所述标识识别所述取得部取得的所述拍摄图像中的所述球体；和

显示部，所述显示部显示内容图像使得该内容图像覆盖所述识别部识别的所述拍摄图像中的所述球体的整个区域。

12.一种信息处理装置，其特征在于，包括:

取得部，所述取得部取得表面附有标识的球体的拍摄图像；

识别部，所述识别部基于所述标识识别所述取得部取得的所述拍摄图像中的所述球体；和

显示部，所述显示部将包含日期和时间信息的多个内容图像按照所述日期和时间信息表示的日期和时间的顺序重叠在所述识别部识别的所述拍摄图像中的所述球体上进行显示。

13.一种信息处理方法，其特征在于，信息处理装置执行下述处理:

取得表面附有标识的球体的拍摄图像，

基于所述标识识别取得的所述拍摄图像中的所述球体，

显示内容图像使得该内容图像覆盖识别的所述拍摄图像中的所述球体的整个区域。

14.一种信息处理方法，其特征在于，信息处理装置下述处理:

取得表面附有标识的球体的拍摄图像，

基于所述标识识别取得的所述拍摄图像中的所述球体，

将包含日期和时间信息的多个内容图像按照所述日期和时间信息表示的日期和时间的顺序重叠在识别的所述拍摄图像中的所述球体上进行显示。