TW201919003A - 電腦可讀取儲存媒體、信息處理裝置以及信息處理方法 - Google Patents

Abstract

本發明提供一種用於在拍攝圖像中的被攝體的區域上重疊顯示各種內容的電腦可讀取儲存媒體等。 信息處理裝置(10)拍攝作為被攝體的表面附有標識的地球儀(20)，取得拍攝圖像。信息處理裝置(10)基於所述標識識別取得的拍攝圖像中的地球儀(20)。更進一步，信息處理裝置(10)對識別的拍攝圖像中的地球儀(20)重疊顯示內容圖像，使得該內容圖像覆蓋地球儀（20）的整個區域。

Description

電腦可讀取儲存媒體、信息處理裝置以及信息處理方法

本發明涉及電腦可讀取儲存媒體、信息處理裝置以及信息處理方法。

近年，開發了利用AR（Augmented Reality）系統的商品。AR系統是指，在智能電話、平板終端、便攜式遊戲機等具有相機以及顯示部的信息設備上，事先安裝有用於識別AR標識的應用程式。通過利用這樣的信息設備，當拍攝附有AR標識的被攝體的時候，信息設備識別AR標識，在拍攝畫像上重疊顯示與識別的AR標識相對應的內容。由此，用戶可以通過顯示部看見在作為拍攝對象的被攝體上重疊有內容的圖像。專利文獻1公開了一種系統，該系統拍攝立體對象物，將圖像或者文字等的附加信息重疊顯示在所拍攝的圖像中的立體對象物上。

先行技術文獻 專利文獻： 專利文獻1：日本特開2013－92407號公報

發明欲解決的問題

對於AR系統，關於應將什麼作為被攝體以及在拍攝圖像上重疊顯示的內容，進行了各種探討。

本發明鑒於上述問題而作出，其目的在於提供一種用於在圖像中的被攝體的區域上重疊顯示各種內容的電腦可讀取儲存媒體等。 解決問題的手段

本發明公開的一種方式的電腦可讀取儲存媒體，其上存儲有程式，該程式使電腦執行下述處理：取得表面附有標識的球體的拍攝圖像，基於所述標識識別取得的所述拍攝圖像中的所述球體，顯示內容圖像使得該內容圖像覆蓋識別的所述拍攝圖像中的所述球體的整個區域。

本發明公開的一種方式的電腦可讀取儲存媒體，其上存儲有程式，該程式使電腦執行下述處理：取得表面附有標識的球體的拍攝圖像，基於所述標識識別取得的所述拍攝圖像中的所述球體，將包含日期和時間信息的多個內容圖像按照所述日期和時間信息表示的日期和時間的順序重疊顯示在識別的所述拍攝圖像中的所述球體上。 發明效果

根據本發明公開的一種方式，可以在拍攝球體所得的圖像中的球體區域重疊顯示各種內容，可以實現適合用戶的娛樂方式。

以下，關於本申請公開的儲存媒體等，基於示意實施方式的附圖詳細說明。

（實施方式1） 圖1是表示AR系統的結構例的示意圖。本實施方式的AR系統，以表面附有AR標識（標識）的呈球體的地球儀20為被攝體，利用信息處理裝置10拍攝地球儀20使用。地球儀20，例如是一種通過填充空氣而成為球體的PVC(Polyvinyl chloride：聚氯乙烯)材料製成的球，但並不受限於此。在地球儀20的表面，印刷有地球上的地圖，在地圖中的適當位置附有AR標識。例如如圖1所示，對於地圖中的海洋以及大陸分別地賦予名稱，對於各個國家以及城市分別賦予國名以及城市名。這些文字構成了AR標識。另外，雖然圖1中省略了描述，但是地圖中包括各個國家的國境線，國境線也構成了AR標識。另外，可以用規定的顏色區分地圖中的河川、平原、山脈等地形，各種顏色也構成了AR標識。更進一步，為了識別地圖中的各個海、海域等，對於地圖中的海賦予規定的標識M1～M4（例如船的標識M1、M2，烏龜或海鷗等的動物的標識M3、M4）。另外，為了識別地圖中的各個大陸、地域，對於地圖中的大陸、地域賦予了規定的標識M5～M7。這些標識M1～M7也構成了AR標識。

圖2是表示信息處理裝置10的結構例的方塊圖。信息處理裝置10是智慧手機、平板終端、個人電腦、遊戲機等信息設備，若是可移動型的信息設備，則容易操作。信息處理裝置10包括控制部11、儲存部12、操作面板13、相機16、通信部17等，這些各部通過匯流排相互連接。控制部11包括CPU（Central Processing Unit：中央處理器）或MPU（Micro-Processing Unit：微處理器）等處理器。控制部11，通過適當地執行存儲在儲存部12中的控制程式，進行信息處理裝置10的各種信息處理以及控制處理等。

儲存部12包括RAM(Random Access Memory：隨機存儲器)、閃存、硬盤、SSD（Solid State Drive：固態硬盤）等。儲存部12，預先存儲控制部11執行的控制程式以及控制程式的執行所需的各種數據等。另外，儲存部12，臨時存儲控制部11執行控制程式時生成的數據等。儲存部12中存儲的控制程式包括本發明的圖像處理應用程式（以下，簡稱為圖像處理應用）P。另外，儲存部12中存儲的數據包括內容DB12a以及相簿12b。此外，內容DB12a，可以嵌入圖像處理應用P中，也可以存儲在能夠與信息處理裝置10經由網路N通信的存儲裝置中。另外，相簿12b可以存儲在能夠與信息處理裝置10經由網路N通信的存儲裝置中。

內容DB12a中存儲文字、圖像等內容，各個內容與用於識別被賦予地球儀20的AR標識的信息、或者表示地球上的位置的位置信息（緯度以及經度）分別對應地存儲。相簿12b，存儲用戶利用信息處理裝置10拍攝的靜止圖像以及視頻影像、通過通信部17從外部裝置接收的靜止圖像以及視頻影像等內容。靜止圖像以及視頻影像等內容，與各自的表示拍攝日期和時間或者作成日期和時間等的日期和時間信息、表示拍攝場所、作成場所或者與各內容相對應的場所等的位置信息一起存儲到相簿12b中。此外，也可以將不帶有日期和時間信息以及位置信息的靜止圖像以及視頻影像存儲到相簿12b中。另外，存儲在相簿12b的內容包括，例如，通過正距圓筒投影(equidistant cylindrical projection)將利用全景相機取得的全景圖像平面展開得到的矩形的全景圖像，將拍攝被攝體的所有表面得到的圖像合成並通過正距圓筒投影平面展開得到的矩形的全景圖像等。

操作面板13，是輸入部14以及顯示部15為一體結構的觸摸屏。輸入部14，是在顯示部15的表面配置的觸摸傳感器，受理用戶的輸入操作，向控制部11發送與操作內容相對應的控制信號。顯示部15，例如是液晶顯示器、有機EL(Electro Luminescence)顯示器等，按照控制部11的指示顯示各種信息。輸入部14以及顯示部15也可以分開構成。

相機16，有鏡頭以及拍攝元件，通過拍攝元件將經由鏡頭入射的光進行光電變換取得電子數據(圖像數據)。相機16，按照控制部11的指示進行拍攝，逐次將取得的圖像數據(拍攝圖像)向控制部11發送。此外，信息處理裝置10，除了內置攝像機16之外，也可以是具備連接部的結構，該連接部能夠和外部相機相連接。在這種情況下，連接部受理通過外部相機取得的影像數據的輸入，將輸入的影像數據逐次向控制部11發送。通信部17，是用於連接互聯網等網路的介面，經由網路和外部裝置之間進行信息的發送和接收。

信息處理裝置10，也可以通過通信部17從外部裝置取得圖像處理應用P，存儲到儲存部12中。另外，信息處理裝置10具備從移動型儲存媒體中讀取存儲的信息的讀取部等的時候，可以從移動型儲存媒體中讀出圖像處理應用P，存儲到儲存部12中。此外，信息處理裝置10，也可以是顯示部15使用護目鏡型或者眼鏡型的頭掛式顯示器的HMD(Head Mounted Display：頭戴式顯示器)型的信息設備。在這種情況下，輸入部14，優選使用進行聲音輸入的麥克，或者檢測用戶視線的視線輸入裝置等。信息處理裝置10，只要是有相機16以及顯示部15的信息設備，就可以是任何樣式的設備。

以下，對信息處理裝置10通過控制部11執行圖像處理應用P實現的功能進行說明。圖3是表示信息處理裝置10的控制部11實現的功能的方塊圖。信息處理裝置10的控制部11，執行儲存部12中存儲的圖像處理應用P的時候，實現地球儀識別部21、內容讀出部22、提取部23、圖像處理部24、重疊部25的各個功能。此外，本實施方式中，雖然這些功能通過控制部11執行圖像處理應用P實現，但這些功能中的一部分功能也可以利用專用的硬體電路實現。

信息處理裝置10的控制部11，例如通過操作面板13（輸入部14）受理用戶的圖像處理應用P的執行指示的時候，通過相機16開始拍攝。相機（取得部）16開始拍攝的時候，在規定的時機（例如每1/30秒､每1/15秒）取得拍攝圖像。

地球儀識別部（識別部）21，對相機16取得的拍攝圖像識別拍攝圖像中的地球儀20的區域，並對地球儀20的拍攝區域(拍攝範圍)等進行識別。例如，地球儀識別部21，對拍攝圖像通過識別地球儀20的輪廓的圓形來確定拍攝圖像中的地球儀20的輪廓（區域）。此外，地球儀識別部21，識別拍攝圖像中的AR標識，基於識別的AR標識，確定拍攝的地球儀20的區域（拍攝範圍）。例如，地球儀識別部21，基於AR標識，確定包括在拍攝的地球儀20（地球儀20的拍攝範圍）中的海洋、大陸、國家、城市等。另外，地球儀識別部21，確定與地球儀20的拍攝範圍內的各個位置（各個場所）相對應的地球上的位置信息(緯度以及經度)。此外，圖像處理應用P包含被賦予地球儀20的各種AR標識的位置的相關信息，例如，海洋、大陸、國家、城市等的信息，或者地球上的位置信息。因此，地球儀識別部21，在識別AR標識的時候可以確定識別的AR標識的位置信息，基於確定的位置信息確定地球儀20的拍攝範圍。

內容讀出部22，從內容DB12a或者相簿12b中讀出用於生成AR圖像的內容。內容讀出部22，例如，從內容DB12a中讀出與地球儀識別部21從拍攝圖像中識別出的AR標識相對應的內容。另外，內容讀出部22，例如通過操作面板13（輸入部14）從相簿12b中讀出用戶指示的內容。

提取部23，從內容讀出部22在內容DB12a或者相簿12b裏讀取的內容中，提取與地球儀識別部21確定的地球儀20的拍攝範圍相對應的區域。例如，在內容包括與地球上的各個位置相對應的圖像的時候，提取部23從內容中提取與地球儀20的拍攝範圍的緯度以及經度對應的區域相對應的圖像。具體方式為，地球儀20的拍攝範圍是以日本為中心的規定區域的時候，提取部23從內容中提取與以日本為中心的規定區域相對應的部分。

圖像處理部24，對提取部23從內容中提取的區域（以下簡稱內容）進行各種圖像處理。例如，圖像處理部24，對內容進行放大處理或者縮小處理。另外，圖像處理部24，為了在拍攝圖像中的地球儀20的圓形區域顯示內容，實施將內容變形（變換）為圓形圖像的處理。此外，作為處理對象的內容，若是通過正距圓筒投影平面展開得到的矩形的全景圖像，則可以通過向圓形圖像的變換處理還原為全景圖像，在圓形區域內顯示的時候，可以有良好的顯示效果。更進一步，圖像處理部24，可以對內容進行各種加工處理，也可以通過操作面板13進行向內容追加用戶手寫輸入的文字等的處理。

重疊部25，將圓形的內容圖像以覆蓋地球儀識別部21確定的拍攝圖像中的地球儀20的整個區域的方式重疊生成AR圖像，該圓形的內容圖像基於圖像處理部24處理後的內容。根據以上所述，對於用相機16拍攝的地球儀20的拍攝圖像，能夠生成在地球儀20的整個區域顯示被處理為圓形的內容的AR圖像。信息處理裝置10，在顯示部15顯示重疊部25生成的AR圖像。

根據上述的各個功能，信息處理裝置10能夠生成在相機16拍攝的地球儀20上重疊了存儲在內容DB12a或者相簿12b中的內容的AR圖像。此外，提取部23從內容中提取與地球儀20的拍攝範圍相對應的區域，圖像處理部24對提取的區域進行圖像處理。根據以上所述，能夠在地球儀20的拍攝範圍內的各個位置（各個場所）與內容中的各個位置（各個場所）位置對准的狀態下將內容重疊在地球儀20上。

以下，基於流程圖說明信息處理裝置10的AR圖像的顯示處理。圖4是信息處理裝置10進行的處理步驟的流程圖。圖5至圖8是AR圖像的顯示例的示意圖。控制部11通過執行信息處理裝置10的儲存部12中存儲的控制程式進行以下的處理。

信息處理裝置10，例如在通過操作面板13受理了用戶的圖像處理應用P的執行指示時，執行圖像處理應用P。在執行圖像處理應用P的信息處理裝置10中，控制部11利用相機16開始拍攝（S1）。控制部11，通過相機16取得拍攝圖像(S2)，對取得的拍攝圖像，識別拍攝圖像中的AR標識，基於AR標識以及拍攝圖像，識別拍攝圖像中的地球儀20（S3）。在這裏，控制部11確定拍攝圖像中的地球儀20的區域以及地球儀20的拍攝範圍等。

控制部11，對於識別的地球儀20，判斷拍攝範圍是否被變更（S4）。例如，控制部11，事先存儲步驟S3中確定的地球儀20的拍攝範圍到儲存部12，接下來確定了地球儀20的拍攝範圍時，判斷上一次的拍攝範圍是否被變更。若判斷為拍攝範圍沒有被變更（S4：[否]），則控制部11反複進行以下處理，即：返回步驟S2的處理，在規定的時機取得拍攝圖像，基於取得的拍攝圖像識別地球儀20。

若判斷為拍攝範圍被變更（S4：[是]）、或者第一次對地球儀20進行了識別的時候，控制部11從內容DB12a或者相簿12b中讀出用於AR圖像的內容（S5）。控制部11，例如從內容DB12a中讀出與步驟S3中識別的地球儀20或者AR標識相對應的內容。與地球儀20或者AR標識相對應的內容例如是與拍攝圖像中的地球儀20的區域內的圖案、地圖等相對應的內容，或者是與拍攝圖像中包含的AR標識相對應的內容。此外，在用戶通過操作面板13指定了用於AR圖像的內容時，控制部11從相簿12b中讀出指定的內容。

接下來，控制部11從步驟S5讀出的內容中提取與步驟S3中確定的地球儀20的拍攝範圍相對應的區域（對應區域）（S6）。例如，控制部11，從內容圖像中提取與地球儀20的拍攝範圍的緯度以及經度相對應區域的圖像。然後，控制部11對步驟S6中提取的區域（內容）進行圖像處理（S7）。在這裏，控制部11，進行將內容變形為圓形圖像的處理，使得內容能夠顯示在拍攝圖像中的地球儀20的圓形區域。更進一步，控制部11，以全面覆蓋拍攝圖像中的地球儀20的區域的方式重疊圓形的內容圖像生成AR圖像，該圓形的內容圖像基於在步驟S7中進行了處理的內容（S8）。控制部11通過操作面板13顯示生成的AR圖像（S9）。

控制部11判斷是否結束處理（S10）。結束處理的情況是指，例如通過操作面板13受理了用戶的結束指示的情況。控制部11，若判斷為不結束處理（S10：[否]），則返回步驟S2的處理，若判斷為結束處理（S10：[是]），則結束處理。返回步驟S2的處理後，控制部11每次在規定的時機取得拍攝圖像都進行步驟S3至S9的處理。根據以上所述，基於通過相機16逐次取得的拍攝圖像，進行地球儀20的識別、與識別的地球儀20的拍攝範圍相對應的內容的重疊，能夠生成與地球儀20的拍攝圖像相對應的AR圖像。因此，通過旋轉作為拍攝對象的地球儀20、或者變更地球儀20的拍攝方向變更了地球儀20的拍攝範圍時，重疊在地球儀20上的內容也被實時變更。

如圖5所示的例子是，NASA（National Aeronautics and Space Administration：美國國家航空航天局）公開的通過正距圓筒投影製作的月面照片用於內容時的AR圖像。利用通過正距圓筒投影製作的月面照片時，控制部11，從內容（月面照片）中提取與拍攝的地球儀20的拍攝範圍的緯度以及經度相對應的月面緯度以及月面經度（月面坐標）的區域的圖像。然後，控制部11對提取的圖像進行變形為圓形的圖像處理後，重疊在拍攝圖像中的地球儀20的圓形區域。根據以上所述，可以生成如圖5所示的月球儀的AR圖像。另外，通過旋轉作為拍攝對象的地球儀20、或者變更對地球儀20的拍攝方向變更了地球儀20的拍攝範圍時，控制部11，從內容（月面照片）中提取出與變更後的拍攝範圍相對應的區域的圖像。然後，控制部11，對提取的圖像進行變形為圓形的圖像處理後，重疊在拍攝圖像中的地球儀20的圓形區域。根據以上所述，地球儀20的拍攝範圍被變更時，與變更後的地球儀20的拍攝範圍相對應的月面照片被重疊在地球儀20上。因此，對於如圖5所示的月球儀的AR圖像，能夠通過變更地球儀20的拍攝範圍來旋轉月球儀，能夠顯示從各個方向看見的月球儀的圖像。

如圖6A以及圖6B所示的例子是，合成由衛星拍攝的地球的所有周向表面照片並通過正距圓筒投影平面展開得到的衛星照片用於內容時的AR圖像。利用這樣的衛星照片的時候，控制部11從內容（衛星照片）中提取與拍攝的地球儀20的拍攝範圍的緯度以及經度相對應的區域的圖像。然後，控制部11對提取的圖像進行變形為圓形的圖像處理後，重疊在拍攝圖像中的地球儀20的圓形區域。根據以上所述，如圖6A、6B所示，可以顯示從衛星上看到的地球的AR圖像。此外，圖6A是示意非洲大陸以及歐亞大陸的白天的衛星照片的例子，圖6B是示意美洲大陸夜間的衛星照片的例子。在圖6A、圖6B示意的畫面的顯示狀態下，當通過旋轉作為拍攝對象的地球儀20、或者變更地球儀20的拍攝方向變更了地球儀20的拍攝範圍時，在地球儀20上重疊與變更後的地球儀20的拍攝範圍相對應的衛星照片。因此，在如圖6A所示的AR圖像被顯示在顯示部15上的狀態下，當地球儀20的拍攝範圍被變更為南美的時候，基於與南美相對應的衛星照片變更為如圖6B所示的AR圖像。即，對於如圖6A、6B所示的AR圖像，可以伴隨著地球儀20的旋轉使得AR圖像中的地球也旋轉，能夠顯示從各個方向看見的地球的圖像（照片）。此外，像這樣的內容，例如能夠基於日本標准時間指定，也能夠根據用戶任意的指定。

圖7A以及圖7B所示的例子是，表示大陸形狀隨時間的變化（地殼變動）的圖像用於內容時的AR圖像。利用這樣的圖像的時候，控制部11從內容中提取與拍攝的地球儀20的拍攝範圍的緯度以及經度相對應區域的圖像。然後，控制部11對提取的圖像進行變形為圓形的圖像處理後，重疊在拍攝圖像中的地球儀20的圓形區域。根據以上所述，如圖7A所示，可以顯示與地球儀20的拍攝範圍相對應的2億年前的大陸（地球）的AR圖像。此外，在如圖7A所示的AR圖像被顯示在顯示部15上的狀態下，當地球儀20的拍攝範圍被變更時，基於與變更後的拍攝範圍相對應的圖像，顯示變更後的拍攝範圍內的2億年前的大陸（地球）的AR圖像。因此，對於如圖7A所示的AR圖像，可以伴隨著作為拍攝對象的地球儀20的旋轉使得AR圖像中的2億年前的地球也旋轉，能夠顯示從各個方向看見的2億年前的地球的圖像。

另外，示意大陸地殼變動的圖像的內容包括多個從2億年前到現在的各個年代的地球的圖像。因此，在如圖7A所示的顯示畫面上顯示有指示器13a，該指示器13a用於指定要作為AR圖像顯示的圖像的年代。當在如圖7A所示的顯示畫面中通過操作面板13操作指示器13a時，控制部11從指示器13a指定的年代的地球的圖像（內容）中提取與地球儀20的拍攝範圍相對應的區域。然後，控制部11對提取的區域（內容）進行圖像處理並重疊在拍攝圖像的地球儀20上生成AR圖像。根據以上所述，在指示器13a指定的年代的與地球儀20的拍攝範圍相對應的場所的大陸的圖像被作為AR圖像顯示。此外，如圖7A所示的顯示畫面是通過指示器13a指定了2億年前的地球的例子，如圖7B所示的顯示畫面是指定了現在的地球的例子。在圖7A、圖7B所示畫面中，當通過指示器13a連續變更指定年代時，可逐次地顯示使用了與指定的年代相對應的圖像的AR圖像。

圖8所示的例子是，例如利用信息處理裝置10將拍攝的狗的照片用於內容時的AR圖像。用這樣的照片時，控制部11，例如只對矩形的照片進行變形為圓形的圖像處理，並重疊在拍攝圖像中的地球儀20的圓形區域。像這樣可以將任意的照片用於AR圖像，因此可以生成適合用戶的AR圖像，能進一步享受用戶自己拍攝的照片帶來的樂趣。另外，在將像月面照片那樣對被攝體的所有周向表面進行拍攝得到的照片用於內容時，能伴隨著地球儀20的拍攝範圍的變更，在地球儀20上重疊與變更後的地球儀20的拍攝範圍相對應的照片。因此，通過旋轉作為拍攝對象的地球儀20、或者變更對地球儀20的拍攝方向，能夠使AR圖像中的照片（照片中的拍攝對象）也旋轉。

本實施方式中，除了上述的例子，例如表示各國的國境、領土、國名的隨時間變化以及各個國家的地方的劃分、地名的隨時間變化的圖像也可以作為內容。這種情況下，也能對應地球儀20的拍攝範圍生成在拍攝的國家、地方等重疊了表示各種隨時間變化的內容的AR圖像。

根據本實施方式，從內容DB12a或者相簿12b中讀出的內容以覆蓋拍攝圖像中的地球儀20的整個區域的方式被重疊。因此，能夠將地球儀20的圓形區域作為顯示區域顯示各種內容。另外，通過信息處理裝置10的相機16以及顯示部15看地球儀20，可以看到地球儀20上顯示著各種內容。更進一步，通過變更地球儀20的拍攝範圍，被重疊的內容也被變更，因此，能夠伴隨著地球儀20的拍攝範圍的變更使AR圖像中的物體（例如月球儀）也旋轉。

（實施方式2） 本實施方式涉及生成將多個內容按順序切換地重疊於地球儀20上的AR圖像的信息處理裝置10。本實施方式的信息處理裝置10，由於與實施方式1的信息處理裝置10是相同的結構，故省略說明關於和實施方式1共通的部分。

圖9是實施方式2的根據信息處理裝置10的控制部11實現的功能的方塊圖。本實施方式的信息處理裝置10的控制部11，執行圖像處理應用P時，與實施方式1同樣地實現地球儀識別部21、內容讀出部22、提取部23、圖像處理部24、重疊部25的各個功能。此外，本實施方式中，內容讀出部22具有順序確定部26。在本實施方式中，這些功能中的部分功能也可以利用專用的硬體電路實現。

內容讀出部22從內容DB12a或者相簿12b中讀出多個內容時，順序確定部26基於各個內容的日期和時間信息確定各個內容的讀出順序（顯示順序）。日期和時間信息，除了表示作成或者拍攝各個內容的日期和時間的信息，也可以是表示關聯的多個內容的顯示順序的信息。日期和時間信息，與各個內容相對應地存儲到內容DB12a或者相簿12b中。順序確定部26，從內容DB12a或者相簿12b中讀出內容的日期和時間信息，該內容的日期和時間信息是內容讀出部22要從內容DB12a或者相簿12b中讀出的內容的日期和時間信息。順序確定部26，基於讀出的日期和時間信息，對要從內容DB12a或者相簿12b讀出的多個內容確定讀出的順序。例如，日期和時間信息表示各個內容的顯示順序的時候，順序確定部26按照各個內容的日期和時間表示的順序，決定各個內容的讀出順序。另外，日期和時間信息表示內容的拍攝日期和時間或者作成日期和時間的時候，順序確定部26按照各個內容的日期和時間信息表示的日期和時間的順序（例如昇冪或者降冪）決定各個內容的讀出順序。內容讀出部22，按照順序確定部26確定的順序，從內容DB12a或者相簿12b中讀出各個內容。

如上所述讀出的內容，和實施方式1同樣地通過提取部23提取出與地球儀20的拍攝範圍相對應的區域，通過圖像處理部24進行圖像處理後，通過重疊部25重疊在拍攝圖像中的地球儀20的圓形區域。根據以上所述，生成AR圖像。此外，內容讀出部22按照順序確定部26確定的順序讀出多個內容，提取部23、圖像處理部24以及重疊部25對按照順序讀出的內容進行各種處理，生成AR圖像。信息處理裝置10將重疊部25按順序生成的AR圖像在規定的時機切換顯示在顯示部15上。因此，本實施方式中，能夠顯示多個內容在通過相機16拍攝的地球儀20上按照順序被切換地重疊的AR圖像。

以下，根據流程圖說明本實施方式的信息處理裝置10的AR圖像的顯示處理。圖10是信息處理裝置10進行處理的步驟的流程圖。控制部11根據信息處理裝置10的儲存部12中存儲的控制程式執行以下的處理。本實施方式的信息處理裝置10的控制部11進行和圖4中的步驟S1至S4相同的處理（S21至S24）。

控制部11，若判斷為地球儀20的拍攝範圍被變更（S24：[是]），或者是第一次對地球儀20進行了識別的時候，確定用於AR圖像的多個內容各自的顯示順序（S25）。例如，控制部11，從內容DB12a或者相簿12b中讀出要從內容DB12a或者相簿12b中讀出的多個內容的日期和時間信息，基於讀出的日期和時間信息確定各自的顯示順序。此外，在通過操作面板13受理了用戶對用於AR圖像的內容的指定時，控制部11從相簿12b讀出該內容的日期和時間信息。另外，與步驟S23中識別的地球儀20或者AR標識相對應的內容用於AR圖像的時候，控制部11從內容DB12a讀出該內容的日期和時間信息。

控制部11，按照確定的顯示順序，從內容DB12a或者相簿12b中讀出一個內容（S26），對讀出的內容進行和圖4中的步驟S6至S9相同的處理（S27至S30）。根據以上所述，可顯示在拍攝的地球儀20上重疊有一個內容的AR圖像。然後，控制部11判斷用於AR圖像的所有的內容的顯示（重疊）處理是否結束（S31）。控制部11，若判斷為顯示處理沒有全部結束(S31：[否])，則轉移到步驟S26的處理，按照步驟S25中確定的顯示順序，從內容DB12a或者相簿12b中讀出下一個內容（S26）。然後，控制部11對讀出的內容進行步驟S27至S30的處理。在判斷為用於AR圖像的所有的內容的處理結束了的時候（S31：[是]），控制部11判斷是否結束處理（S32）。若控制部11判斷為不結束處理（S32：[否]），則返回步驟S22的處理，若判斷為處理結束(S32：[是])，則結束處理。

根據上述處理，在例如圖5至圖8所示以覆蓋拍攝圖像中的地球儀20的整個區域的方式重疊內容的AR圖像中，內容在規定的時機被切換顯示。因此，能夠將地球儀20的圓形區域作為顯示區域切換顯示多個內容，因此能生成適合用戶的AR圖像，用戶能夠進一步享受自己拍攝的照片帶來的樂趣。

本實施方式的AR圖像，除了對拍攝圖像中的地球儀20的整個區域按照順序切換顯示多個內容的結構外，也可以是如圖11A以及如圖11B所示在拍攝圖像中的地球儀20的區域的一部分上顯示各個內容的結構。圖11A以及圖11B是AR圖像的顯示例的示意圖。圖11A的示意例中，在拍攝圖像中的地球儀20的區域，多個內容不重疊地排列顯示。此外，圖11A中的數字1至5表示各個內容的顯示順序。另外，也可以如圖11B所示在拍攝圖像中的地球儀20的區域使多個內容分別以部分重疊的方式顯示。圖11B中的數字1至4表示各個內容的顯示順序。像這樣地生成AR圖像時，重疊在拍攝圖像中的地球儀20上的多個內容的顯示形態可以適當變更。另外，也能夠根據用戶的指定切換各個內容的顯示形態。圖11A、圖11B中，雖然用圓形示意了各個內容的顯示區域，但也可以是矩形。

（實施方式3） 本實施方式涉及生成在拍攝圖像中的地球儀20內的對應的各個位置（各個場所）重疊了多個內容的AR圖像的信息處理裝置10。本實施方式的信息處理裝置10，由於與實施方式2的信息處理裝置10有相同的結構，故省略說明有關和實施方式2共通的部分。

圖12是實施方式3的信息處理裝置10的控制部11實現的功能的方塊圖。本實施方式的信息處理裝置10的控制部11，執行圖像處理應用P的時候，與實施方式2同樣地實現地球儀識別部21、內容讀出部22、圖像處理部24、重疊部25的各個功能。此外，本實施方式中，提取部23不是必須具備的，重疊部25具有位置確定部27。在本實施方式中，這些功能中的部分功能也可以利用專用的硬體電路實現。

在重疊部25要將內容重疊在拍攝圖像中的地球儀20時，位置確定部27基於各個內容的位置信息，確定要重疊的位置。位置信息，例如是表示各個內容的拍攝或者作成的位置（場所）的信息、表示要顯示各個內容的位置（場所）的信息，可使用表示地球上（地圖上）的位置的信息（緯度以及經度等）。另外，位置信息也可以是表示賦予地球儀20的各個AR標識的信息。位置信息與各個內容相對應地存儲到內容DB12a或者相簿12b中，本實施方式中，當內容讀出部22讀出內容時，各個內容的位置信息也從內容DB12a或者相簿12b中讀出。

當內容的位置信息是表示地球上的位置的信息時，位置確定部27，基於地球儀識別部21根據AR標識確定的拍攝圖像中的地球儀20內的各個位置的位置信息和內容的位置信息，確定要重疊內容的位置。即，位置確定部27，基於拍攝圖像中的地球儀20內的各個位置的位置信息，確定內容的位置信息表示的位置在地球儀20內的哪個位置，將確定的位置定為要重疊內容的位置。另外，內容的位置信息是表示對應的AR標識的信息的時候，位置確定部27，將地球儀識別部21確定的對應的AR標識的位置確定為要重疊內容的位置。

本實施方式的重疊部25，對於拍攝圖像中的地球儀20，在位置確定部27確定的位置重疊內容圖像生成AR圖像，該內容圖像基於圖像處理部24處理過的內容。本實施方式中，由於內容讀出部22按照順序確定部26確定的順序讀出多個內容，所以可以生成將按照規定的順序讀出的內容分別重疊在地球儀20的對應位置的AR圖像。此外，重疊部25，可以將由內容讀出部22按照順序讀出並經過圖像處理部24處理的多個內容在規定的時機按照順序切換重疊於拍攝圖像中的地球儀20，也可以將該多個內容在規定的時機按照順序追加重疊於拍攝圖像中的地球儀20。信息處理裝置10，在顯示部15顯示重疊部25生成的AR圖像。根據以上所述，信息處理裝置10，可以生成在相機16拍攝的地球儀20的各個位置重疊了與各個位置相對應的內容的AR圖像並對該AR圖像進行顯示。

以下，基於流程圖說明本實施方式的信息處理裝置10的AR圖像的顯示處理。圖13是信息處理裝置10進行處理的步驟的流程圖，圖14至圖18是AR圖像的顯示例的示意圖。控制部11按照信息處理裝置10的儲存部12中存儲的控制程式執行以下的處理。本實施方式的信息處理裝置10的控制部11，進行和圖10中的步驟S21至S26相同的處理（S41至S46）。此外，本實施方式中，步驟S46中，控制部11在從內容DB12a或者相簿12b中讀出內容時也讀出內容的位置信息。

控制部11，對步驟S46中讀出的內容進行圖像處理（S47）。在這裏，控制部11根據需要進行生成內容的縮略圖的處理。此外，若是沒有必要進行圖像處理的內容，則控制部11對該內容可以不做任何的處理。接下來，控制部11基於從內容DB12a或者相簿12b中讀出的內容的位置信息，對於拍攝圖像中的地球儀20，確定要重疊內容的顯示位置（S48）。然後，控制部11在確定的顯示位置重疊內容圖像（例如縮略圖）生成AR圖像（S49），顯示在操作面板13上（S50），該內容圖像基於步驟S47中進行了圖像處理的內容。根據以上所述，在拍攝的地球儀20的對應位置重疊了一個內容（例如縮略圖）的AR圖像被顯示。

控制部11，判斷對用於AR圖像的所有的內容的顯示（重疊）處理是否結束了（S51）。控制部11，若判斷為顯示處理沒有全部結束（S51：[否]），則轉移到步驟S46的處理，按照步驟S45中確定的顯示順序，從內容DB12a或相簿12b中讀取下一個內容（S46）。然後，控制部11對讀出的內容進行步驟S47至S50的處理。若判斷為對用於AR圖像的所有的內容的處理結束了（S51：[是]），控制部11判斷是否結束處理（S52）。控制部11，若判斷為不結束處理（S52：[否]），則返回步驟S42的處理，若判斷為結束處理（S52：[是]），則結束處理。

根據上述的處理，例如如圖14至18所示，對於拍攝圖像中的地球儀20，能夠生成各個內容分別重疊在對應位置上的AR圖像。圖14所示的例子是台風的圖像用於內容C0時的AR圖像。利用該內容C0時，控制部11，對於拍攝的地球儀20的拍攝範圍，確定與該內容C0的位置信息（緯度以及經度）相對應的顯示位置，在拍攝圖像中的地球儀20的確定的位置上重疊內容C0。根據以上所述，可以生成在拍攝的地球儀20上顯示台風圖像的AR圖像。此外，多個圖像構成一個內容的時候，控制部11，通過按照與各個圖像的日期和時間信息相對應的顯示順序顯示各個圖像，可以在地球儀20上重疊台風的路線圖。另外，地球儀20的拍攝範圍變更了的時候，控制部11在與拍攝圖像中的地球儀20的對應位置上重疊與變更後的拍攝範圍相對應的內容（台風的圖像）。因此，旋轉作為拍攝對象的地球儀20、或者變更了對地球儀20的拍攝方向時，AR圖像中的地球也進行旋轉，在旋轉後的地球上的各個場所發生的台風的圖像也被顯示。

圖15所示的例子是，例如將用戶在旅遊中拍攝的照片用於內容C1至C3時的AR圖像。用戶拍攝的照片用於內容時，控制部11，對於拍攝的地球儀20的拍攝範圍，從相簿12b中讀出在拍攝範圍內的各個場所拍攝的照片。然後，控制部11生成讀出的各個照片的縮略圖。此外，各個照片的縮略圖存儲在相簿12b的時候，控制部11只要從相簿12b中讀出各個照片的縮略圖即可。另外，控制部11，對於拍攝的地球儀20的拍攝範圍，確定與各個內容C1至C3（各個照片）的位置信息（緯度以及經度）相對應的顯示位置。然後，控制部11按照內容C1至C3的拍攝順序在拍攝圖像中的地球儀20的確定位置上重疊各個內容C1至C3。根據以上所述，如圖15所示，能夠生成在與地球儀20上的拍攝場所相對應的位置按照拍攝各個照片的順序顯示旅遊中拍攝的照片的AR圖像。

在圖15中示出了三個內容C1至C3分別在地球儀20的對應位置上顯示的狀態，也可以在規定的時機切換顯示各個內容C1至C3。即，可以是在地球儀20上始終只重疊一個內容的結構。另外，在圖15所示的畫面中通過操作面板13對內容C1至C3中的任一個進行了選擇操作的時候，控制部11可以放大顯示選擇的內容。即，控制部11可以從相簿12b中讀出選擇的內容並在最前面顯示。此外，在圖15所示的畫面中，通過旋轉作為拍攝圖像的地球儀20或者變更對地球儀20的拍攝方向變更了地球儀20的拍攝範圍的時候，控制部11也是從相簿12b中讀出與變更後的拍攝範圍相對應的內容（在變更後的拍攝範圍內拍攝的照片），進行相同的處理。根據以上所述，通過旋轉地球儀20變更地球儀20的拍攝範圍，可以顯示重疊了與變更後的拍攝範圍相對應的照片的AR圖像。

圖16所示的例子是使用了內容C4至C5時的AR圖像，該內容C4至C5在旅遊前與表示旅遊逗留預定的場所的位置信息以及逗留日期和時間相對應地存儲在內容DB12a中。在這裏，對於拍攝的地球儀20的拍攝範圍，控制部11從內容DB12a中讀出表示拍攝範圍內的各個逗留預定場所的位置信息、與該位置信息相對應的逗留日期和時間以及內容C4至C6。然後，控制部11基於讀出的位置信息(緯度以及經度)，對於拍攝的地球儀20的拍攝範圍，確定各個內容C4至C6的顯示位置。然後，控制部11按照內容C4至C6的逗留日期和時間的順序，在拍攝圖像中的地球儀20的確定位置上重疊內容C4至C6。根據以上所述，如圖16所示，對於拍攝圖像中的地球儀20，能夠生成內容C4至C6按照逗留順序重疊在與各自的逗留預定場所相對應的位置的AR圖像。

圖16所示的畫面中，內容C4至C6也可以是例如表示逗留日期和時間的圖標。此外，如圖16所示，通過追加顯示連接各個內容C4至C6的線，可以在地球儀20上顯示旅遊路線。更進一步，對於如圖16所示的畫面，可以對各個內容C4至C6事先設定規定的網站鏈接。這種情況下，通過操作面板13對內容C4至C6中的任一個進行了選擇操作的時候，控制部11也可以從對被選擇的內容設定的網站取得關於逗留場所的信息進行顯示。

圖17所示的例子是和圖15一樣將用戶拍攝的照片用於內容時的AR圖像。圖17所示畫面，在圖15所示的畫面上追加了期間指定欄13b，該期間指定欄13b用於指定要作為AR圖像顯示的照片的拍攝日期和時間。在圖17所示的顯示畫面通過操作面板13指定了期間的時候，控制部11從相簿12b中讀出照片，該照片是在拍攝的地球儀20的拍攝範圍內的各個場所拍攝的照片中的、指定的期間內拍攝的照片。然後，控制部11生成讀出的各個照片的縮略圖，按照各個照片（內容）的拍攝順序，分別在拍攝圖像中的地球儀20的對應顯示位置重疊各個照片的縮略圖。根據以上所述，能夠生成使在地球儀20的拍攝範圍內並在用戶指定的期間內拍攝的照片顯示在地球儀20上的與拍攝場所相對應的位置的AR圖像。在圖17所示的畫面中，通過操作面板13對任一個內容進行了選擇操作的時候，控制部11可以放大顯示被選擇的內容。通過旋轉作為拍攝對象的地球儀20、或者變更對地球儀20的拍攝方向變更了地球儀20的拍攝範圍時，可顯示與變更後的拍攝範圍對應的顯示內容（在變更後的拍攝範圍內拍攝的照片）被重疊的AR圖像。

圖17所示的畫面中，作為期間指定欄13b設有下拉菜單，通過下拉菜單能夠設定任意的期間。但是期間指定欄13b不受限於該結構。例如，可以用通過操作面板13輸入的文字設定期間。另外，也可以顯示指示器，該指示器用於對於指定的期間內指定要作為AR圖像顯示的照片的拍攝年或者年月。這種情況下，可以和圖7A以及圖7B所示的例子相同，使指示器指定的年或者年月拍攝的照片作為AR圖像顯示。本實施方式中，照片等內容可以不必存儲在儲存部12中，也可以存儲在可通過網路與信息處理裝置10通信的外部裝置中，例如存儲到雲服務器中。這種情況下，控制部11從雲服務器中讀出在與地球儀20的拍攝範圍相對應的場所拍攝的照片、在用戶指定的期間內拍攝的照片等內容即可。

本實施方式中，也可以將表示地球儀20上的各個位置的位置信息（也可以是表示各個AR標識的信息）事先和各個內容相對應地存儲到內容DB12a中。圖18所示的例子是在地球儀20上的各個位置將在三疊紀、侏羅紀、白堊紀等在各個位置生息的恐龍的圖像用作內容C7至C9時的AR圖像。在這裏，控制部11，對於拍攝的地球儀20的拍攝範圍，從內容DB12a中讀出與拍攝範圍內的各個位置相對應的內容C7至C9，對於拍攝的地球儀20，確定各個內容C7至C9的顯示位置。然後，控制部11分別在與拍攝圖像中的地球儀20的對應顯示位置重疊各個內容C7至C9。根據以上所述，如圖18所示，可以顯示恐龍在三疊紀、侏羅紀、白堊紀等的生息場所的AR圖像。在圖18所示的畫面中，旋轉作為拍攝對象的地球儀20、或者變更了對地球儀20的拍攝方向時，對應的AR圖像中的地球也進行旋轉，與旋轉後的地球上的各個場所對應的恐龍的圖像（內容）被顯示。

本實施方式中，除了上述的例子，例如通過事先將地球儀20上的各國的位置信息和各國的國旗相對應地存儲到內容DB12a中，對於拍攝圖像中的地球儀20，可以生成在各國的顯示位置重疊了國旗的AR圖像。另外，也可以事先將地球儀20上的各個位置信息和被登錄為世界遺產的建築物等的縮略圖相對應地存儲到內容DB12a中。這種情況下，對於拍攝圖像中的地球儀20，可以生成在被登錄為世界遺產的建築物等的場所重疊了世界遺產的縮略圖的AR圖像。

更進一步，本實施方式中，例如基於飛行記錄器中記錄的飛行路線或者飛行預定路線，對於地球儀20，可以生成在飛行路線上的城市等的位置重疊了內容的AR圖像。另外，例如基於哥倫布、達‧伽馬、麥哲倫等的探險家航海的航行路線，能夠生成在地球儀20上重疊內容的AR圖像，該內容用於示意各個航行路線。根據以上所述，可以在AR圖像上復原各個航行路線。更進一步，能夠對應地球儀20的拍攝區域生成在拍攝的場所重疊了內容的AR圖像，該內容可以從視覺上把握各個場所的地形。通過如上所述利用與地球儀20的拍攝範圍相對應的各種內容生成AR圖像，能夠利用AR圖像進行各種學習。另外，將用戶拍攝的照片等用於內容時，能夠生成適合用戶的AR圖像，能夠進一步享受用戶自己拍攝的照片帶來的樂趣。

上述各個實施方式中，內容可以是一個靜止的圖像，也可以是由多個靜止圖像構成，也可以由視頻影像構成。利用多個靜止圖像或者視頻影像構成的內容時，在拍攝的地球儀20上，重疊的內容以動態被顯示。

（實施方式4） 本實施方式涉及基於在日程表中設定的預定信息生成AR圖像的信息處理裝置10。本實施方式的信息處理裝置10，由於和實施方式3的信息處理裝置10有相同的結構，故省略說明關於和實施方式3共通的部分。本實施方式的信息處理裝置10，存儲預定信息DB12c到儲存部（預定儲存部）12中。預定信息DB12c，例如事先存儲日程表中設定的預定信息，預定信息包括，工作、旅行等預定日期和時間的日期和時間信息以及預定場所的位置信息。

圖19是實施方式4的信息處理裝置10的控制部11實現的功能的方塊圖。本實施方式的信息處理裝置10的控制部11，執行圖像處理應用P的時候，與實施方式3同樣地實現地球儀識別部21、內容讀出部22、圖像處理部24、重疊部25的各個功能。此外，本實施方式中，內容讀出部22的順序確定部26，從預定信息DB12c中取得作為預定信息的日期和時間信息，重疊部25的位置確定部27，從預定信息DB12c中取得作為預定信息的位置信息。

以下，基於流程圖說明本實施方式的信息處理裝置10的AR圖像顯示處理。圖20是信息處理裝置10進行處理步驟的流程圖。控制部11通過執行信息處理裝置10的儲存部12中存儲的控制程式進行以下的處理。此外，圖20是在圖13中的步驟S41的處理前追加了步驟S61的處理，圖20中省略圖13中的步驟S42至S52的圖示。

本實施方式的信息處理裝置10中，控制部11例如從預定信息DB12c中讀出旅遊的預定信息（S61）。預定信息例如包括，表示旅遊中逗留的預定場所的位置信息、表示逗留日期和時間的日期和時間信息。控制部11，基於讀出的預定信息，進行步驟S41以後的處理。具體方式為，在步驟S45中，控制部11基於讀出預定信息中包含的逗留日期和時間，對用於AR圖像的多個內容確定各自的顯示順序。另外，在步驟S48中，控制部11基於讀出的預定信息中包含的位置信息，對於拍攝圖像中的地球儀20，確定要重疊各個內容的顯示位置。

此外，若讀出的預定信息是未來的信息時，即，在預定信息表示的旅遊之前，步驟S46中的控制部11，從內容DB12a或者相簿12b中讀出如圖16所示的內容（例如圖標）。另外，若讀出的預定信息是過去的信息時，即，在預定信息表示的旅遊之後，步驟S46中的控制部11從內容DB12a或者相簿12b中讀出如圖15所示與表示的預定信息的日期和時間信息相對應的內容（例如照片）。

根據上述的處理，能夠和實施方式3同樣生成如圖15、圖16所示的AR圖像。即，如圖15所示，對於地球儀20，能夠基於預定信息生成在與旅遊的各個場所相對應的位置重疊了在各個場所拍攝的照片C1至C3的AR圖像。另外，如圖16所示，對於地球儀20，能夠基於預定信息生成在與預定逗留的各個場所相對應的位置重疊了內容C4至C6的AR圖像，該內容C4至C6用於示意逗留的順序。本實施方式中，在內容DB12a或者相簿12b中存儲的內容，可以是靜止圖像，也可以是視頻影像。另外，照片等內容不只可以存儲到存儲12中，例如也可以存儲到雲服務器中。

（實施方式5） 本實施方式涉及生成AR圖像的信息處理裝置10，該AR圖像是以覆蓋拍攝圖像中的地球儀20的整個區域的方式重疊了一個內容並在其上重疊了多個內容的AR圖像。本實施方式的信息處理裝置10有和實施方式1、實施方式3的信息處理裝置10同樣的結構，因此省略說明與實施方式1、實施方式3共通的部分。

以下，基於流程圖說明本實施方式的信息處理裝置10的AR圖像顯示處理。圖21以及圖22是信息處理裝置10進行處理步驟的流程圖，圖23是AR圖像的顯示例的示意圖。控制部11通過執行信息處理裝置10的儲存部12中存儲的控制程式進行以下的處理。本實施方式的信息處理裝置10的控制部11，進行和圖4中的步驟S1至S9相同的處理（S71至S79）。根據以上的處理生成AR圖像，該AR圖像是在拍攝圖像中的地球儀20的整個區域上重疊了與地球儀20的拍攝範圍相對應的內容的AR圖像。

接下來，控制部11進行和圖13中的步驟S45至S51相同的處理（S80至S86）。在這裏，控制部11，基於步驟S73中識別的地球儀20進行各個處理。控制部11，若判斷對用於AR圖像的所有內容的處理結束時（S86：[是]），控制部11判斷是否結束處理（S87）。控制部11，若判斷為不結束處理（S87：[否]），則返回步驟S72的處理，若判斷為結束處理（S87：[是]），則結束處理。

根據上述的處理生成AR圖像，該AR圖像如圖23所示，是以覆蓋拍攝圖像中的地球儀20的整個區域的方式重疊了內容並在該內容上進一步重疊了在地球儀20的拍攝範圍內的各個場所拍攝的照片的縮略圖的AR圖像。此外，圖23所示的例子中，以覆蓋地球儀20的整個區域的方式重疊有日本夜間時拍攝的衛星照片，多個照片的縮略圖重疊在地球儀20上的與各自的拍攝場所相對應的位置。另外，可以按照各個照片的拍攝的順序顯示各個照片的縮略圖。根據以上所述，在以顯示如圖11A以及圖11B所示的顯示形態顯示多個內容（縮略圖）時，可以將任意的內容作為背景圖像進行顯示。

（實施方式6） 本實施方式中，作為顯示圖像的一例以獎牌舉例說明。舉辦奧運會或者運動競技比賽的時候，按選手、國家公佈統計的每種獎牌的獲得數量。本實施方式中，獎牌重疊顯示在地球儀20的拍攝圖像上。本實施方式的信息處理裝置10有和實施方式3的信息處理裝置10相同的結構，因此省略說明和實施方式3共通的部分。

圖24是實施方式6的信息處理裝置10的控制部11實現的功能的方塊圖。本實施方式的信息處理裝置10的控制部11，執行圖像處理應用P的時候，與實施方式3同樣地實現地球儀識別部21、內容讀出部22、圖像處理部24、重疊部25的各個功能。此外，本實施方式的信息處理裝置10，存儲獎牌DB12d到儲存部（獎牌儲存部）12中。獎牌DB12d，按國家存儲每種獎牌的獲得數量。此外，關於獎牌DB12d中存儲的信息，不僅可以從互聯網取得，也可以手動輸入。

圖25是獎牌DB12d的數據佈局的一例的說明圖。獎牌DB12d包括，國家列、位置（緯度、經度）列、金牌列、銀牌列、銅牌列。國家列，存儲國家的名稱。此外，國家列也可以存儲國家的代碼用於取代國家的名稱。位置（緯度、經度）列，存儲國家的位置信息。位置信息包括緯度、經度。另外，位置信息也可以是首都或者城市的郵編號、位址或者設施名稱等。金牌列，存儲獲得的金牌的數量。銀牌列，存儲獲得的銀牌的數量。銅牌列，存儲獲得的銅牌的數量。

圖26是將關於奧運會的顯示圖像用作內容時的AR圖像的顯示例的示意圖。此外，如圖所示，白色空心的圓圈代表金牌，帶有右斜紋的圓圈代表銀牌，帶有左斜紋的圓圈代表銅牌。舉辦奧運會或者運動競技比賽的時候，能夠按選手、國家公佈統計的每種獎牌的獲得數量，並重疊在地球儀20的拍攝圖像上顯示。

內容讀出部22，從內容DB12a或者相簿12b中讀出獎牌的顯示圖像以及各國的顯示圖像，從獎牌DB12d中按國家讀出每種獎牌的獲得數量。國家的顯示圖像，例如是代表國家的國旗、建築物或者風景等的顯示圖像。以下，用國旗作為國家的顯示圖像舉例說明。重疊部25的位置確定部27，從獎牌DB12d中取得各個國家的位置信息。控制部11，提取與拍攝的地球儀20的拍攝範圍相對應的對應區域，在提取的對應區域，按國家進行對各個獎牌的顯示圖像的顯示處理。

以下，以銅牌的顯示處理的概要為例進行說明。控制部11，從與拍攝的地球儀20的拍攝範圍相對應的對應區域中選擇一個國家。控制部11，取得讀出的該國家的銅牌的獲得數量。控制部11，取得讀出的獎牌的顯示圖像，以該獎牌的顯示圖像為原型，複制和銅牌的獲得數量同等數量的獎牌的顯示圖像。例如，銅牌的獲得數量為三個的時候，複制三個獎牌的顯示圖像。控制部11，給複制的獎牌的顯示圖像賦予銅色，沿著和地球儀20的拍攝圖像中的球體的表面大致垂直的方向向上堆疊，重疊顯示在與該國家的位置信息相對應的拍攝圖像的球體位置。此外，也可以事先准備銅牌、銀牌、金牌各自的顯示圖像數據。

銅牌的顯示圖像的顯示處理結束後，按照銀牌的顯示圖像、金牌的顯示圖像的順序進行顯示處理。關於銀牌以及金牌的顯示處理，由於和銅牌的顯示處理相同故省略說明。控制部11，在金牌的顯示處理結束後，將該國旗的顯示圖像在金牌的顯示圖像的上方堆疊顯示。此外，國旗的顯示圖像的顯示位置不受限於金牌的顯示圖像的上方，例如也可以在獎牌的顯示圖像之間進行顯示。更進一步，也可以用國名的字串代替國旗的顯示圖像。此外，本實施方式中，以銅牌、銀牌、金牌的順序進行顯示處理，但不受此限制。例如，除了可以以金牌、銀牌、銅牌的順序進行顯示處理外，還可以以隨機的順序進行顯示處理。

本實施方式中，雖然對獎牌的顯示圖像賦予了顏色，但不受此限制。例如，也可以在獎牌的顯示圖像中寫入文字“金”、“銀”或者“銅”進行顯示。此外，本實施方式中，根據獎牌的獲得數量向上堆疊獎牌的顯示圖像並重疊顯示在地球儀20的拍攝圖像中，但不受此限制。例如，信息處理裝置10也可以用長方體的顯示圖像代替獎牌的顯示圖像，根據獎牌的獲得數量調整長方體的顯示圖像的高度來顯示。

另外，也可以在內容DB12a或者獎牌DB12d中對上述顯示圖像設定規定網站的鏈接。圖27是點擊國旗的顯示圖像時轉移到被鏈接網站的顯示例的示意圖。這種情況下，通過操作面板13對任一個國旗的顯示圖像進行了選擇操作的時候，控制部11可以從對被選擇的國旗的顯示圖像設定的網站上取得關於該國獎牌的詳細信息進行顯示。

圖28是實施方式6的AR圖像的顯示處理的流程圖。本實施方式的信息處理裝置10的控制部11，進行和圖4中的步驟S1至S4相同的處理（Sa01至Sa04）。內容讀出部22，讀出關於獎牌的內容（步驟Sa05）。具體方式為，內容讀出部22，從內容DB12a或者相簿12b中讀出獎牌的顯示圖像以及各國國旗的顯示圖像，從獎牌DB12d中按國家讀出每種獎牌的獲得數量。重疊部25的位置確定部27，從獎牌DB12d中取得各個國家的位置信息（Sa06）。控制部11，提取與拍攝的地球儀20的拍攝範圍相對應的對應區域（Sa07）。此外，關於對應區域的提取處理，由於和實施方式1的對應區域的提取處理相同故省略說明。控制部11，基於各個國家的位置信息，對於拍攝圖像中的地球儀20，確定重疊顯示獎牌的顯示圖像以及國旗的顯示圖像的顯示位置（Sa08）。控制部11，根據各種獎牌的獲得數量，進行按國家將獎牌的顯示圖像以及國旗的顯示圖像沿著與球體的表面大致垂直的方向向上堆疊的處理（Sa09）。然後，控制部11，在拍攝圖像中的地球儀20的區域，基於步驟Sa09中處理的顯示圖像生成AR圖像（Sa10）。其後，信息處理裝置10的控制部11，進行和圖4中的步驟S9至S10相同的處理（Sa11至Sa12）。

上述的各個實施方式中，不限於通過變更地球儀20相對於相機16的方向（拍攝方向）來變更地球儀20的拍攝區域的結構。例如，信息處理裝置10，可以具有如下結構，即，通過適當地切換一邊移動拍攝位置一邊對地球儀20的全部球面拍攝得到的多個拍攝圖像，來變更在顯示部15上被顯示的地球儀20的區域。這種情況下，在顯示部15上被顯示的地球儀20的區域成為重疊內容的地球儀20的區域。有這種結構的時候，信息處理裝置10具有檢測本裝置10傾斜的傾斜傳感器等。然後，信息處理裝置10，根據傾斜傳感器檢測的本裝置10的傾斜，旋轉在顯示部15上顯示的地球儀20，切換被顯示的地球儀20的顯示區域。其後，信息處理裝置10，通過對在顯示部15上被顯示的地球儀20進行上述各個實施方式中說明的處理，能夠顯示對顯示中的地球儀20重疊了各種內容的AR圖像。

各個實施方式中被記載的技術的特徵（構成要件）能夠相互組合，通過組合可以形成新的技術的特徵。

應該認為，這次公開的實施方式的所有點都是示例，不是限制性的。本發明的範圍，不是上述的意思而是由權利要求所示，包含與權利要求書等同的意思和範圍內的所有變更。

10‧‧‧信息處理裝置

11‧‧‧控制部

12‧‧‧儲存部

12a‧‧‧內容DB

12b‧‧‧相簿

13‧‧‧操作面板

14‧‧‧輸入部

15‧‧‧顯示部

16‧‧‧相機

17‧‧‧通信部

20‧‧‧地球儀(球體)

21‧‧‧地球儀識別部

22‧‧‧內容讀出部

23‧‧‧提取部

24‧‧‧圖像處理部

25‧‧‧重疊部

26‧‧‧順序確定部

27‧‧‧位置確定部

圖1是表示AR系統的結構例的示意圖。 圖2是表示信息處理裝置的結構例的方塊圖。 圖3是表示信息處理裝置的控制部實現的功能的方塊圖。 圖4是表示信息處理裝置進行處理的步驟的流程圖。 圖5是表示AR圖像的顯示例的示意圖。 圖6A是表示AR圖像的顯示例的示意圖。 圖6B是表示AR圖像的顯示例的示意圖。 圖7A是表示AR圖像的顯示例的示意圖。 圖7B是表示AR圖像的顯示例的示意圖。 圖8是表示AR圖像的顯示例的示意圖。 圖9是表示實施方式2的根據信息處理裝置的控制部實現的功能的方塊圖。 圖10是表示信息處理裝置進行處理的步驟的所示流程圖。 圖11A是表示AR圖像的顯示例的示意圖。 圖11B是表示AR圖像的顯示例的示意圖。 圖12是表示實施方式3的信息處理裝置的控制部實現的功能的方塊圖。 圖13是表示信息處理裝置進行處理的步驟的流程圖。 圖14是表示AR圖像的顯示例的示意圖。 圖15是表示AR圖像的顯示例的示意圖。 圖16是表示AR圖像的顯示例的示意圖。 圖17是表示AR圖像的顯示例的示意圖。 圖18是表示AR圖像的顯示例的示意圖。 圖19是表示實施方式4的信息處理裝置的控制部實現的功能的方塊圖。 圖20是表示信息處理裝置進行處理的步驟的流程圖。 圖21是表示信息處理裝置進行處理步驟的流程圖。 圖22是表示信息處理裝置進行處理步驟的流程圖。 圖23是表示AR圖像的顯示例的示意圖。 圖24是表示實施方式6的信息處理裝置的控制部實現的功能的方塊圖。 圖25是表示獎牌DB的數據佈局的一例的說明圖。 圖26是表示將關於奧運會的顯示圖像用作內容時的AR圖像的顯示例的示意圖。 圖27是表示點擊國旗的顯示圖像時跳轉到被鏈接網站的顯示例的示意圖。 圖28是表示實施方式6的AR圖像的顯示處理的流程圖。

Claims (14)

1. 一種電腦可讀取儲存媒體，其上存儲有程式，其特徵在於，該程式使電腦執行下述處理： 取得表面附有標識的球體的拍攝圖像， 基於所述標識，識別取得的所述拍攝圖像中的所述球體， 顯示內容圖像使得該內容圖像覆蓋識別的所述拍攝圖像中的所述球體的整個區域。
2. 如申請專利範圍第1項所述的電腦可讀取儲存媒體，其特徵在於，所述程式使電腦執行下述處理： 對所述內容圖像進行圖像處理，使得所述內容圖像的顯示區域為所述拍攝圖像中的所述球體的整個區域。
3. 如申請專利範圍第1或2項所述的電腦可讀取儲存媒體，其特徵在於， 多個所述內容圖像分別包含日期和時間信息， 所述程式使電腦執行下述處理： 在所述拍攝圖像中的所述球體的整個區域，按照所述日期和時間信息表示的日期和時間的順序顯示所述內容圖像。
4. 一種電腦可讀取儲存媒體，其上存儲有程式，其特徵在於，該程式使電腦執行下述處理： 取得表面附有標識的球體的拍攝圖像， 基於所述標識，識別取得的所述拍攝圖像中的所述球體， 將包含日期和時間信息的多個內容圖像按照所述日期和時間信息表示的日期和時間的順序重疊在識別的所述拍攝圖像中的所述球體上進行顯示。
5. 如申請專利範圍第4項所述的電腦可讀取儲存媒體，其特徵在於， 所述內容圖像包括位置信息， 所述程式使電腦執行下述處理： 基於所述標識以及所述位置信息，在所述拍攝圖像中的所述球體的對應位置顯示所述內容圖像。
6. 如申請專利範圍第4或5項所述的電腦可讀取儲存媒體，其特徵在於， 所述電腦具有預定儲存部，所述預定儲存部存儲包括日期和時間信息以及位置信息的預定信息， 所述程式使電腦執行下述處理： 按照從所述預定儲存部中讀出的所述預定信息包含的日期和時間信息表示的日期和時間的順序，在所述拍攝圖像中的所述球體的基於所述預定信息包含的位置信息以及所述標識的位置顯示內容圖像。
7. 如申請專利範圍第4項所述的電腦可讀取儲存媒體，其特徵在於， 所述電腦具有獎牌儲存部，所述獎牌儲存部存儲每種獎牌的獲得數量以及國名， 所述程式使電腦執行下述處理： 基於從獎牌儲存部讀出的所述每種獎牌的獲得數量以及所述國名，在與國家的位置信息相對應的所述拍攝圖像中的球體位置，按國家堆疊顯示每種獎牌的顯示圖像。
8. 如申請專利範圍第1到7項中任一項所述的電腦可讀取儲存媒體，其特徵在於， 所述電腦具有存儲所述內容圖像的儲存部， 所述程式使電腦執行下述處理： 在所述拍攝圖像中的所述球體上顯示從所述儲存部中讀出的所述內容圖像。
9. 如申請專利範圍第8項所述的電腦可讀取儲存媒體，其特徵在於， 所述內容圖像存儲在相簿中，所述相簿存儲在所述儲存部中， 所述程式使電腦執行下述處理： 加工從所述相簿中讀出的所述內容圖像，顯示在所述拍攝圖像中的所述球體上。
10. 如申請專利範圍第1到9項中任一項所述的電腦可讀取儲存媒體，其特徵在於： 所述內容圖像是視頻影像。
11. 一種信息處理裝置，其特徵在於，包括： 取得部，所述取得部取得表面附有標識的球體的拍攝圖像；和 識別部，所述識別部基於所述標識識別所述取得部取得的所述拍攝圖像中的所述球體；和 顯示部，所述顯示部顯示內容圖像使得該內容圖像覆蓋所述識別部識別的所述拍攝圖像中的所述球體的整個區域。
12. 一種信息處理裝置，其特徵在於，包括： 取得部，所述取得部取得表面附有標識的球體的拍攝圖像； 識別部，所述識別部基於所述標識識別所述取得部取得的所述拍攝圖像中的所述球體；和 顯示部，所述顯示部將包含日期和時間信息的多個內容圖像按照所述日期和時間信息表示的日期和時間的順序重疊在所述識別部識別的所述拍攝圖像中的所述球體上進行顯示。
13. 一種信息處理方法，其特徵在於，信息處理裝置執行下述處理： 取得表面附有標識的球體的拍攝圖像， 基於所述標識識別取得的所述拍攝圖像中的所述球體， 顯示內容圖像使得該內容圖像覆蓋識別的所述拍攝圖像中的所述球體的整個區域。
14. 一種信息處理方法，其特徵在於，信息處理裝置下述處理： 取得表面附有標識的球體的拍攝圖像， 基於所述標識識別取得的所述拍攝圖像中的所述球體， 將包含日期和時間信息的多個內容圖像按照所述日期和時間信息表示的日期和時間的順序重疊在識別的所述拍攝圖像中的所述球體上進行顯示。