JP2023070056A - イメージ出力方法及び装置 - Google Patents

Abstract

【課題】ユーザに高解像度のイメージを迅速に提供する方法及び装置を提供する。【解決手段】ユーザにイメージを出力するために、電子装置は仮想座標系に基づいて設定されるグラフィック空間に対して予め設定された第１解像度の複数の基本イメージタイルをロードし、仮想座標系上に設定された仮想カメラの座標に基づいて複数の基本イメージタイルのうちターゲット基本イメージタイルを決定し、ターゲット基本イメージタイルに関する情報をサーバに送信し、サーバからターゲット基本イメージタイルに対応する第２解像度の複数の詳細イメージタイルを受信し、仮想カメラがターゲット基本イメージタイルをズームインする場合、複数の詳細イメージタイルに基づいて第２解像度のイメージを出力する。【選択図】図３

Description

技術分野は、ユーザにイメージを提供する技術に関し、特に、グラフィック空間に対する仮想カメラの視点に基づいてイメージを出力する装置及び方法に関する。
［ＳＷ高成長政府支援事業］
省庁名：科学技術情報通信部
研究管理専門機関：情報通信産業振興院
研究事業名：２０２２年ＳＷ高成長クラブ
自律課題名：オートトラッキング技術及びＨＷ／ＳＷ高度化によるチャネル拡大及び新規市場の開拓
主管機関：（株）スリーアイ
研究期間：２０２２．０３．０１～２０２２．１１．３０

仮想環境において、イメージの解像度によりテクスチャ表現が相違になる。ユーザに可能な限り高い解像度のイメージを提供することが好ましいが、仮想環境の全ての方向に対して高い解像度のイメージを提供しようとする場合、ユーザ端末が接続されているサーバから受信しなければならないデータ量が増加するため、データの送信時間が増加し、高い解像度のイメージをユーザに即刻に提供し難いこともある。一方、低い解像度のイメージをユーザに提供する場合、ユーザの実感度が低くなり得る。

一実施形態は、ユーザに高解像度のイメージを迅速に提供する方法及び装置を提供することにある。

一実施形態に係る電子装置によって実行されるイメージ出力方法は、仮想座標系に基づいて設定されるグラフィック空間に対して予め設定された第１解像度の複数の基本イメージタイルをロードする動作と、前記仮想座標系上に仮想カメラの座標を設定する動作と、前記仮想カメラの座標に基づいて、前記複数の基本イメージタイルのうち少なくとも１つのターゲット基本イメージタイルを決定する動作と、前記ターゲット基本イメージタイルに関する情報をサーバに送信する動作と、前記サーバから前記ターゲット基本イメージタイルに対応する第２解像度の複数の詳細イメージタイルを受信する動作と、前記仮想カメラが前記ターゲット基本イメージタイルをズームインする場合、前記複数の詳細イメージタイルに基づいて前記第２解像度のイメージを出力する動作とを含む。

前記仮想カメラの座標に基づいて、前記複数の基本イメージタイルのうち少なくとも１つのターゲット基本イメージタイルを決定する動作は、前記仮想カメラの座標に基づいて前記仮想カメラの視点を決定する動作と、前記仮想カメラの視点に対する切頭体情報を算出する動作と、前記切頭体情報に基づいて、前記複数の基本イメージタイルのうち少なくとも１つのターゲット基本イメージタイルを決定する動作とを含むことができる。

前記切頭体情報及び前記ターゲット基本イメージタイルに基づいて前記第１解像度のイメージを出力する動作をさらに含むことができる。

前記仮想カメラの座標に基づいて前記仮想カメラの視点を決定する動作は、前記電子装置のユーザの入力に基づいて前記仮想カメラの座標を変更する動作と、前記変更された仮想カメラの座標に基づいて仮想カメラの視点を決定する動作とを含むことができる。

前記イメージ出力方法は、前記仮想カメラが前記ターゲット基本イメージタイルをズームインする場合、前記複数の詳細イメージタイルのうち少なくとも１つのターゲット詳細イメージタイルを決定する動作と、前記ターゲット詳細イメージタイルに関する情報を前記サーバに送信する動作と、前記サーバから前記ターゲット詳細イメージタイルに対応する第３解像度の複数の追加－詳細イメージタイルを受信する動作とをさらに含むことができる。

前記イメージ出力方法は、前記仮想カメラが前記ターゲット詳細イメージタイルをズームインする場合、前記複数の追加－詳細イメージタイルに基づいて前記第３解像度のイメージを出力する動作をさらに含むことができる。

前記仮想カメラの座標に基づいて、前記複数の基本イメージタイルのうち少なくとも１つのターゲット基本イメージタイルを決定する動作は、前記仮想カメラの座標又は前記仮想カメラの視点が変更された場合、変更された前記仮想カメラの座標又は前記仮想カメラの視点に基づいて前記複数の基本イメージタイルのうち少なくとも１つのターゲット基本イメージタイルを再決定する動作を含むことができる。

前記ターゲット基本イメージタイルに関する情報をサーバに送信する動作は、前記ターゲット基本イメージタイルに対応する前記第２解像度の複数の詳細イメージタイルが格納されているか否かを決定する動作と、前記第２解像度の複数の詳細イメージタイルが格納されていない場合、前記ターゲット基本イメージタイルに関する情報をサーバに送信する動作とを含むことができる。

一実施形態に係るイメージを出力する方法を行う電子装置は、イメージを出力するプログラムが記録されたメモリと、前記プログラムを行うプロセッサとを含み、前記プログラムは、仮想座標系に基づいて設定されるグラフィック空間に対して、予め設定された第１解像度の複数の基本イメージタイルをロードする動作と、前記仮想座標系上に仮想カメラの座標を設定する動作と、前記仮想カメラの座標に基づいて、前記複数の基本イメージタイルのうち少なくとも１つのターゲット基本イメージタイルを決定する動作と、前記ターゲット基本イメージタイルに関する情報をサーバに送信する動作と、前記サーバから前記ターゲット基本イメージタイルに対応する第２解像度の複数の詳細イメージタイルを受信する動作と、前記仮想カメラが前記ターゲット基本イメージタイルをズームインする場合、前記複数の詳細イメージタイルに基づいて前記第２解像度のイメージを出力する動作とを行う。

一実施形態に係るユーザにイメージを出力するシステムによって実行されるイメージ出力方法は、前記システムのユーザ端末が仮想座標系に基づいて設定されるグラフィック空間に対して、予め設定された第１解像度の複数の基本イメージタイルをロードする動作と、前記ユーザ端末が前記仮想座標系上に仮想カメラの座標を設定する動作と、前記ユーザ端末が前記仮想カメラの座標に基づいて、前記複数の基本イメージタイルのうち少なくとも１つのターゲット基本イメージタイルを決定する動作と、前記ユーザ端末が前記ターゲット基本イメージタイルに関する情報を前記システムのサーバに送信する動作と、前記ユーザ端末が前記サーバから前記ターゲット基本イメージタイルに対応する第２解像度の複数の詳細イメージタイルを受信する動作と、前記仮想カメラが前記ターゲット基本イメージタイルをズームインする場合、前記複数の詳細イメージタイルに基づいて前記第２解像度のイメージを出力する動作とを含む。

本発明によると、ユーザに高解像度のイメージを迅速に提供する方法及び装置を提供することができる。

一例に係るグラフィック空間に基づいてユーザにイメージを提供する方法を示す。 一実施形態に係る電子装置の構成図である。 一実施形態に係るイメージ出力方法のフローチャートである。 一例に係る基本イメージタイル、詳細イメージタイル及び追加－詳細イメージタイルを示す。 一例に係る仮想カメラの視点に基づいてターゲット基本イメージタイルを決定する方法のフローチャートである。 一例に係る仮想カメラの視点による切頭体情報を示す。 一例に係るユーザの入力に基づいて仮想カメラの視点を決定する方法のフローチャートである。 一例に係るユーザに追加－詳細イメージタイルに基づいて第３解像度のイメージを出力する方法のフローチャートである。 一例に係るターゲット基本イメージタイルに関する情報を送信する方法のフローチャートである。

本明細書で用いる用語は、単に特定の実施形態を説明するために用いられるものであって、本発明を限定しようとする意図はない。単数の表現は、文脈上、明白に異なる意味をもたない限り複数の表現を含む。本明細書において、「含む」又は「有する」等の用語は明細書上に記載した特徴、数字、ステップ、動作、構成要素、部品、又はこれらを組み合わせたものが存在することを示すものであって、一つ又はそれ以上の他の特徴や数字、ステップ、動作、構成要素、部品、又はこれらを組み合わせたものなどの存在又は付加の可能性を予め排除しないものとして理解しなければならない。

異なる定義がされない限り、技術的であるか又は科学的な用語を含むここで用いる全ての用語は、本発明が属する技術分野で通常の知識を有する者によって一般的に理解されるものと同じ意味を有する。一般的に用いられる予め定義された用語は、関連技術の文脈上で有する意味と一致する意味を有するものと解釈すべきであって、本明細書で明白に定義しない限り、理想的又は過度に形式的な意味として解釈されることはない。

また、添付図面を参照して説明することにおいて、図面符号に関係なく、同じ構成要素は同じ参照符号を付与し、これに対する重複する説明は省略することにする。実施形態の説明において、関連する公知技術に対する具体的な説明が実施形態の要旨を不要に曖昧にするものと判断される場合、その詳細な説明を省略する。

図１は、一例に係るグラフィック空間に基づいてユーザにイメージを提供する方法を示す。

一実施形態によれば、様々な目的のために予め生成されたグラフィック空間１００（又は、仮想空間）内にユーザの視点に対応する仮想カメラ１１０を配置し、仮想カメラ１１０の視点１３０によるグラフィック空間の場面（ｓｃｅｎｅ）をユーザにイメージ１４０に提供する方法が示されている。ユーザは、電子装置１０を介してグラフィック空間１００に進入することができる。例えば、ユーザは、ゲーム又は旅行のような様々な目的のためのサービスによって予め生成されたグラフィック空間１００が提供され得る。

一実施形態によれば、サービスは電子装置１０とオンラインに接続されているサーバ（図示せず）を介してユーザに提供される。グラフィック空間１００は、予め設定された仮想座標系によって生成されてもよい。

例えば、仮想座標系は、ｘ軸、ｙ軸及びｚ軸に表現される３次元座標系であってもよく、グラフィック空間１００は、３次元座標系に基づいて６面体（例えば、キューブ）の形態に生成されてもよい。サーバは、予め生成（又は、撮影）された１つ以上のイメージに基づいて、グラフィック空間１００を生成することができる。例えば、予め生成された１つ以上のイメージは、現実の場面を撮影したパノラマイメージであってもよい。パノラマイメージを６部分に分類し、分類された部分に基づいてグラフィック空間１００が生成される。パノラマイメージは高画質であり得る。

異なる例として、仮想座標系は球状の座標系に表現され、グラフィック空間１００は、球状の座標系に基づいて球状に生成されてもよい。ただし、仮想座標系及びグラフィック空間１００が記載された実施形態に限定されない。

高画質のイメージで生成されたグラフィック空間１００が電子装置１０で実現されるためには、電子装置１０は、サーバからグラフィック空間１００を構成している部分イメージを受信し、部分イメージに基づいてグラフィック空間１００を再構成することができる。電子装置１０は、電子装置１０で再構成されたグラフィック空間１００内に仮想カメラ１１０を設定し、それに基づいてユーザにグラフィック空間１００に対するイメージ１４０をユーザに提供することができる。

電子装置１０がグラフィック空間１００を再構成するためには、サーバからグラフィック空間１００を構成している部分イメージを受信しなければならないが、高画質の部分イメージをそのまま受信する場合、電子装置１０が受信しなければならないデータ量が増加し、これによってイメージ出力が遅延されるという原因になる恐れがある。

以下、図２～図９を参照してユーザに遅延なしにグラフィック空間１００のイメージを出力する方法に対して詳細に説明される。

図２は、一実施形態に係る電子装置の構成図である。

電子装置２００は、通信部２１０、プロセッサ２２０及びメモリ２３０を含む。例えば、電子装置２００は、図１を参照して上述した電子装置１０であってもよい。電子装置１０は、パソコン（ｐｅｒｓｏｎａｌ ｃｏｍｐｕｔｅｒ）、モバイル装置、スマートフォンであってもよいが、記載された実施形態に限定されない。

通信部２１０は、プロセッサ２２０及びメモリ２３０に接続されてデータを送受信する。通信部２１０は、外部の他の装置に接続されてデータを送受信することができる。以下で、「Ａ」を送受信するという表現は、「Ａを示す情報（ｉｎｆｏｒｍａｔｉｏｎ）又はデータ」を送受信することを示す。

通信部２１０は、電子装置２００内の回路網に実現されることができる。例えば、通信部２１０は、内部バス及び外部バスを含んでもよい。異なる例として、通信部２１０は、電子装置２００と外部装置とを接続する要素であってもよい。通信部２１０はインターフェースであってもよい。通信部２１０は、外部の装置からデータを受信し、プロセッサ２２０及びメモリ２３０にデータを送信する。

プロセッサ２２０は、通信部２１０が受信したデータ及びメモリ２３０に格納されたデータを処理する。「プロセッサ」は、目的とする動作（ｄｅｓｉｒｅｄ ｏｐｅｒａｔｉｏｎｓ）を実行させるための物理的な構造を有する回路を有するハードウェアで具現されたデータ処理装置である。例えば、目的とする動作は、プログラムに含まれたコード（ｃｏｄｅ）又は命令（ｉｎｓｔｒｕｃｔｉｏｎｓ）を含んでもよい。例えば、ハードウェアで具現されたデータ処理装置は、マイクロプロセッサー（ｍｉｃｒｏｐｒｏｃｅｓｓｏｒ）、中央処理装置（ｃｅｎｔｒａｌ ｐｒｏｃｅｓｓｉｎｇ ｕｎｉｔ）、プロセッサコア（ｐｒｏｃｅｓｓｏｒ ｃｏｒｅ）、マルチ－コアプロセッサ（ｍｕｌｔｉ－ｃｏｒｅ ｐｒｏｃｅｓｓｏｒ）、マルチプロセッサ（ｍｕｌｔｉｐｒｏｃｅｓｓｏｒ）、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ－Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）を含んでもよい。

プロセッサ２２０は、メモリ（例えば、メモリ２３０）に格納されているコンピュータで読込み可能なコード（例えば、ソフトウェア）及びプロセッサ２２０によって誘発された命令を実行する。

メモリ２３０は、通信部２１０が受信したデータ及びプロセッサ２２０が処理したデータを格納する。例えば、メモリ２３０は、プログラム（又は、アプリケーション、ソフトウェア）を格納することができる。格納されるプログラムは、ユーザがイメージを出力できるようにコーディングされ、プロセッサ２２０によって実行可能なシンタックス（ｓｙｎｔａｘ）の集合であってもよい。

一側面によれば、メモリ２３０は、１つ以上の揮発性メモリ、不揮発性メモリ及びＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、フラッシュメモリ、ハードディスクドライブ及び光学ディスクドライブを含んでもよい。

メモリ２３０は、電子装置２００を動作させる命令語セット（例えば、ソフトウェア）を格納する。電子装置２００を動作させる命令語セットは、プロセッサ２２０によって実行される。

通信部２１０、プロセッサ２２０及びメモリ２３０に対して、以下の図３～図９を参照して詳細に説明される。

図３は、一実施形態に係るイメージ出力方法のフローチャートである。

一実施形態によれば、イメージ出力システムは図２を参照して上述した電子装置２００及び電子装置と接続されたサーバを含む。

以下の動作３１０～３７０は、電子装置２００によって実行されることができる。

動作３１０において、電子装置２００は、仮想座標系に基づいて設定されるグラフィック空間に対して予め設定された第１解像度の複数の基本イメージタイルをサーバからロード（又は、受信）する。サーバによって最初に生成されたグラフィック空間は、最も高い解像度（例えば、以下の第３解像度）のイメージタイルから構成されてもよいが、電子装置２００により最初に再構成されるグラフィック空間は、低い解像度（例えば、第１解像度）の基本イメージタイルに基づいて再構成されてもよい。第１解像度は、５１２ピクセル×５１２ピクセルであってもよい。電子装置２００は、低い解像度の基本イメージタイルをサーバから受信することで、グラフィック空間を再構成するための時間遅延を減少させ得る。複数の基本イメージタイルについては、以下の図４を参照して詳細に説明する。

動作３２０において、電子装置２００は、仮想座標系上に仮想カメラの座標を設定する。仮想カメラは、グラフィック空間上に位置するユーザの目の位置に対応する。例えば、仮想カメラの座標は、予め設定されたデフォルト座標であってもよい。異なる例として、仮想カメラの座標は、ユーザの入力に基づいて調整されてもよい。

動作３３０において、電子装置２００は、仮想カメラの座標に基づいて複数の基本イメージタイルのうち少なくとも１つのターゲット基本イメージタイルを決定する。ターゲット基本イメージタイルは、仮想カメラを介してユーザが注視している方向に対応する基本イメージタイルである。ターゲット基本イメージタイルを決定する方法については、以下の図５～図７を参照して詳細に説明する。

動作３４０において、電子装置２００は、仮想カメラの切頭体情報及びターゲット基本イメージタイルに基づいて第１解像度のイメージを出力する。仮想カメラの切頭体情報について、下記の図６を参照して詳細に説明する。

一側面によれば、電子装置２００は、仮想カメラの視点に対応するグラフィック空間の場面をレンダリングすることで第１解像度のイメージを生成し、生成されたイメージを電子装置２００のディスプレイを介してユーザに出力することができる。

動作３５０において、電子装置２００は、ターゲット基本イメージタイルに関する情報をサーバに送信する。現在の出力されるイメージは第１解像度であるため、ユーザは、現在の注視（又は、出力）している場面を詳細に見るために、後でズームインする可能性がある。実際にユーザがズームインを行った後、電子装置２００がターゲット基本イメージタイルに関する情報をサーバに送信する場合、ユーザに解像度の高いイメージが表示されるまでの遅延が生じることがある。このような遅延を防止するために、電子装置２００は、ユーザがズームインを行う前に予めターゲット基本イメージタイルに関する情報をサーバに送信し、ターゲット基本イメージタイルに対応する第２解像度の詳細イメージタイルを受信することができる。

動作３６０において、電子装置２００は、サーバからターゲット基本イメージタイルに対応する第２解像度の複数の詳細イメージタイルを受信する。第２解像度は、第１解像度よりも高い解像度であってもよい。

動作３７０において、電子装置２００は、仮想カメラがターゲット基本イメージタイルをズームインする場合、サーバから予め受信した複数の詳細イメージタイルに基づいて第２解像度のイメージを出力する。

一側面によれば、電子装置２００は、ズームインされた仮想カメラの視点に対応するグラフィック空間の場面をレンダリングすることで第２解像度のイメージを生成し、生成されたイメージを電子装置２００のディスプレイを介してユーザに出力することができる。仮想カメラがズームインをする前に、予め受信された複数の詳細イメージタイルに基づいて第２解像度のイメージが生成及び出力されるため、ユーザが感じるイメージの出力遅延は著しく減少する。

一実施形態によれば、第２解像度のイメージが出力されている状態（即ち、ズームイン状態）、ユーザは、仮想カメラの座標又は視点を変更することができる。変更された仮想カメラの座標又は視点に対応する基本イメージタイルが、動作３３０で決定されたターゲット基本イメージタイルとは異なる場合、新しいターゲット基本イメージタイルに基づいて動作３４０が再び実行できる。一例として、第２解像度のイメージが出力されている間に、注視される基本イメージタイルが変更された場合、ズームアウト（ｚｏｏｍ ｏｕｔ）されて第１解像度のイメージが出力される。前記の実施形態とは異なり、カメラの座標又は視点が一部変更されても、注視される基本イメージタイルが変更されない場合、第２解像度のイメージが継続的に出力され得る。即ち、カメラの座標又は視点が変更されることにより出力される第２解像度のイメージは、カメラの座標又は視点が変更される前のイメージとは異なるイメージであるが、解像度は同一である。

図４は、一例に係る基本イメージタイル、詳細イメージタイル及び追加－詳細イメージタイルを示す。

一実施形態に係る、電子装置２００によって再構成されたグラフィック空間の一部分を構成している複数の基本イメージタイル４００が示されている。例えば、グラフィック空間がキューブの形態である場合、複数の基本イメージタイル４００はキューブの一面を構成することができる。

一実施形態によれば、サーバには、複数の基本イメージタイル４００のうち第１基本イメージタイル４０１に対応する複数の詳細イメージタイル４１０が格納されている。複数の詳細イメージタイル４１０は、第１詳細イメージタイル４１１、第２詳細イメージタイル４１２、第３詳細イメージタイル４１３、及び第４詳細イメージタイル４１４を含む。複数の詳細イメージタイル４１０のそれぞれは第２解像度を有する。

例えば、図３を参照して上述した動作３３０において、電子装置２００がターゲット基本イメージタイルとして第１基本イメージタイル４０１に関する情報をサーバに送信し、これに対してサーバは、第１基本イメージタイル４０１に対応する複数の詳細イメージタイル４１０を電子装置２００に送信することができる。

さらに、一実施形態によれば、サーバには、複数の詳細イメージタイル４１０のうち、第１詳細イメージタイル４１１に対応する複数の追加－詳細イメージタイル４２０が格納され得る。複数の追加－詳細イメージタイル４２０は、第１追加－詳細イメージタイル４２１、第２追加－詳細イメージタイル４２２、第３追加－詳細イメージタイル４２３及び第４追加－詳細イメージタイル４２４を含む。複数の追加－詳細イメージタイル４１０のそれぞれは、第３解像度を有することができる。第３解像度は、第２解像度よりも高い解像度であってもよい。

サーバが電子装置２００に複数の追加－詳細イメージタイル４２０を送信する実施形態について、以下の図８を参照して詳細に説明する。

図５は、一例に係る仮想カメラの視点に基づいてターゲット基本イメージタイルを決定する方法のフローチャートである。

一実施形態によれば、図３を参照して上述した動作３３０は、下記の動作５１０～５３０を含む。

動作５１０において、電子装置２００は、仮想カメラの座標に基づいてグラフィック空間の仮想座標系内の仮想カメラの視点を決定する。仮想カメラの視点は、カメラの座標を基準としてカメラのレンズが向かっている方向又は光軸を示す。

動作５２０において、電子装置２００は、仮想カメラの視点に対する切頭体情報を算出する。切頭体に対して、以下の図６を参照して詳細に説明される。

動作５３０において、電子装置２００は、切頭体情報に基づいて複数の基本イメージタイルのうち、少なくとも１つのターゲット基本イメージタイルを決定する。例えば、仮想カメラによって撮影されるグラフィック空間の場面に対応する基本イメージタイルがターゲット基本イメージタイルとして決定されてもよい。

図６は、一例に係る仮想カメラの視点による切頭体情報を示す。

グラフィック空間の仮想座標系内に設定されている仮想カメラの座標６１０に基づいて、四角錐の立体６２０が定義される。座標６１０に対するイメージのために四角錐の立体内に第１平面６３０及び第２平面６４０が設定され、第１平面６３０及び第２平面６４０に基づいて切頭体６５０が生成される。

一実施形態によれば、第１平面６３０及び第２平面６４０のうち少なくとも１つは、仮想カメラのレンズの焦点距離のような内部パラメータに基づいて設定され、記載された実施形態に限定されない。

図７は、一例に係るユーザの入力に基づいて仮想カメラの視点を決定する方法のフローチャートである。

一実施形態によれば、図５を参照して上述した動作５１０は、以下の動作７１０及び７２０を含む。

動作７１０において、電子装置２００は、ユーザの入力に基づいて仮想カメラの座標を変更する。例えば、ユーザは、電子装置２００のユーザインターフェースを使用して仮想カメラの座標又は仮想カメラの視点を変更する命令を入力することができる。ユーザインターフェースは、ジャイロセンサ、キーボード、マウス、及び／又はタッチパネルを含んでもよいが、記載された実施形態に限定されない。

動作７２０において、電子装置２００は、変更された仮想カメラの座標に基づいて仮想カメラの視点を決定する。

一実施例によれば、動作７２０が行われた場合、動作５２０及び５３０を通じて変更された仮想カメラの座標又は仮想カメラの視点に基づいて、複数の基本イメージタイルのうち少なくとも１つのターゲット基本イメージタイルを再決定することができる。

一実施形態によれば、ユーザの入力に基づいて仮想カメラの視点が変更されることにより、ユーザに提供される第１解像度のイメージが再びレンダリングされることができる。

図８は、一実氏形態に係るユーザに追加－詳細イメージタイルに基づいて第３解像度のイメージを出力する方法のフローチャートである。

一実施形態によれば、図３を参照して上述した動作３６０が実行された後、以下の動作８１０～８４０がさらに実行され得る。

一実施形態によれば、動作８１０～８３０は、図３を参照して上述した動作３７０と独立的かつ並列的に実行されてもよい。即ち、ユーザに第２解像度のイメージが出力される間に、動作８１０～８３０が実行され得る。

動作８１０において、電子装置２００は、仮想カメラがターゲット基本イメージタイルをズームインする場合、ターゲット基本イメージタイルに対応する複数の詳細イメージタイルのうち少なくとも１つのターゲット詳細イメージタイルを決定する。例えば、電子装置２００は、複数の詳細イメージタイルのうち仮想カメラの座標、仮想カメラの視点、及び仮想カメラの内部パラメータに基づいて仮想カメラを介してユーザが注視している方向に対応する詳細イメージタイルをターゲット詳細イメージタイルとして決定することができる。

動作８２０において、電子装置２００は、ターゲット詳細イメージタイルに関する情報をサーバに送信する。現在出力されるイメージは第２解像度であるため、ユーザは、現在の注視（又は、出力）している場面を詳細に見るために、後で追加的なズームインする可能性がある。実際に、ユーザが追加的なズームインした後に電子装置２００がターゲット詳細イメージタイルに関する情報をサーバに送信する場合、ユーザに解像度のさらに高いイメージが表示されるまでの遅延が発生し得る。このような遅延を防止するために、電子装置２００は、ユーザが追加的なズームインを行う前に予めターゲット詳細イメージタイルに関する情報をサーバに送信し、ターゲット詳細イメージタイルに対応する第３解像度の追加－詳細イメージタイルを受信することができる。

動作８３０において、電子装置２００は、サーバからターゲット詳細イメージタイルに対応する第３解像度の複数の追加－詳細イメージタイルを受信する。第３解像度は、第２解像度よりも高い解像度であってもよい。

動作８４０において、電子装置２００は、仮想カメラがターゲット詳細イメージタイルを追加的にズームインする場合、サーバから予め受信した複数の追加－詳細イメージタイルに基づいて第３解像度のイメージを出力する。

一側面によれば、電子装置２００は、追加的にズームインされた仮想カメラの視点に対応するグラフィック空間の場面をレンダリングすることで第３解像度のイメージを生成し、生成されたイメージを電子装置２００のディスプレイを介してユーザに出力する。仮想カメラが追加的なズームインをする前に、予め受信された複数の追加－詳細イメージタイルに基づいて第３解像度のイメージが生成及び出力されるため、ユーザが感じるイメージの出力遅延が著しく減少する。

図９は、一例に係るターゲット基本イメージタイルに関する情報を送信する方法のフローチャートである。

一実施形態によれば、図３を参照して上述した動作３５０は下の動作９１０及び９２０を含んでもよい。

動作９１０において、電子装置２００は、ターゲット基本イメージタイルに対応する第２解像度の複数の詳細イメージタイルが格納されているか否かを決定する。例えば、仮想カメラを介してユーザが以前にターゲット基本イメージタイルを注視することによって、サーバから予め受信したターゲット基本イメージタイルに対応する第２解像度の複数の詳細イメージタイルが電子装置２００に格納されてもよい。

動作９２０において、電子装置２００は、ターゲット基本イメージタイルに対応する第２解像度の複数の詳細イメージタイルが電子装置２００に格納されていない場合、ターゲット基本イメージタイルに関する情報をサーバに送信する。

ターゲット基本イメージタイルに対応する第２解像度の複数の詳細イメージタイルが電子装置２００に格納されている場合、サーバから複数の詳細イメージタイルを再び受信する必要がないため、動作３７０が直ちに実行され得る。

以上で説明された装置は、ハードウェア構成要素、ソフトウェア構成要素、又はハードウェア構成要素及びソフトウェア構成要素の組み合せで具現される。例えば、本実施形態で説明した装置及び構成要素は、例えば、プロセッサ、コントローラ、ＡＬＵ（ａｒｉｔｈｍｅｔｉｃ ｌｏｇｉｃ ｕｎｉｔ）、デジタル信号プロセッサ（ｄｉｇｉｔａｌ ｓｉｇｎａｌ ｐｒｏｃｅｓｓｏｒ）、マイクロコンピュータ、ＦＰＡ（ｆｉｅｌｄ ｐｒｏｇｒａｍｍａｂｌｅ ａｒｒａｙ）、ＰＬＵ（ｐｒｏｇｒａｍｍａｂｌｅ ｌｏｇｉｃ ｕｎｉｔ）、マイクロプロセッサー、又は命令（ｉｎｓｔｒｕｃｔｉｏｎ）を実行して応答する異なる装置のように、１つ以上の汎用コンピュータ又は特殊目的コンピュータを用いて具現される。処理装置は、オペレーティングシステム（ＯＳ）及びオペレーティングシステム上で実行される１つ以上のソフトウェアアプリケーションを実行する。また、処理装置は、ソフトウェアの実行に応答してデータをアクセス、格納、操作、処理、及び生成する。理解の便宜のために、処理装置は１つが使用されるものとして説明する場合もあるが、当技術分野で通常の知識を有する者は、処理装置が複数の処理要素（ｐｒｏｃｅｓｓｉｎｇ ｅｌｅｍｅｎｔ）及び／又は複数類型の処理要素を含むことが把握する。例えば、処理装置は、複数のプロセッサ又は１つのプロセッサ及び１つのコントローラを含む。また、並列プロセッサ（ｐａｒａｌｌｅｌ ｐｒｏｃｅｓｓｏｒ）のような、他の処理構成も可能である。

ソフトウェアは、コンピュータプログラム、コード、命令、又はそのうちの一つ以上の組合せを含み、希望の通りに動作するよう処理装置を構成したり、独立的又は結合的に処理装置を命令することができる。ソフトウェア及び／又はデータは、処理装置によって解釈されたり処理装置に命令又はデータを提供するために、いずれかの類型の機械、構成要素、物理的装置、仮想装置、コンピュータ格納媒体又は装置、又は送信される信号波に永久的又は一時的に具体化することができる。ソフトウェアはネットワークに連結されたコンピュータシステム上に分散され、分散した方法で格納されたり実行され得る。ソフトウェア及びデータは一つ以上のコンピュータで読出し可能な記録媒体に格納され得る。

本実施形態による方法は、様々なコンピュータ手段を介して実施されるプログラム命令の形態で具現され、コンピュータ読み取り可能な記録媒体に記録される。記録媒体は、プログラム命令、データファイル、データ構造などを単独又は組み合せて含む。記録媒体及びプログラム命令は、本発明の目的のために特別に設計して構成されたものでもよく、コンピュータソフトウェア分野の技術を有する当業者にとって公知のものであり使用可能なものであってもよい。コンピュータ読み取り可能な記録媒体の例として、ハードディスク、フロッピー（登録商標）ディスク及び磁気テープのような磁気媒体、ＣＤ－ＲＯＭ、ＤＶＤのような光記録媒体、フロプティカルディスクのような磁気－光媒体、及びＲＯＭ、ＲＡＭ、フラッシュメモリなどのようなプログラム命令を保存して実行するように特別に構成されたハードウェア装置を含む。プログラム命令の例としては、コンパイラによって生成されるような機械語コードだけでなく、インタプリタなどを用いてコンピュータによって実行される高級言語コードを含む。上記で説明したハードウェア装置は、本発明に示す動作を実行するために１つ以上のソフトウェアモジュールとして作動するように構成してもよく、その逆も同様である。

上述したように実施形態をたとえ限定された図面によって説明したが、当技術分野で通常の知識を有する者であれば、上記の説明に基づいて様々な技術的な修正及び変形を適用することができる。例えば、説明された技術が説明された方法と異なる順に実行され、及び／又は説明されたシステム、構造、装置、回路などの構成要素が説明された方法とは異なる形態に結合又は組み合わせられてもよく、他の構成要素又は均等物によって置き換え又は置換されたとしても適切な結果を達成することができる。

したがって、他の具現、他の実施形態および特許請求の範囲と均等なものも後述する特許請求範囲の範囲に属する。

Claims (11)

1. 電子装置によって実行されるイメージ出力方法は、
   仮想座標系に基づいて設定されるグラフィック空間に対して予め設定された第１解像度の複数の基本イメージタイルをロードする動作と、
   前記仮想座標系上に仮想カメラの座標を設定する動作と、
   前記仮想カメラの座標に基づいて、前記複数の基本イメージタイルのうち少なくとも１つのターゲット基本イメージタイルを決定する動作と、
   前記ターゲット基本イメージタイルに関する情報をサーバに送信する動作と、
   前記サーバから前記ターゲット基本イメージタイルに対応する第２解像度の複数の詳細イメージタイルを受信する動作と、
   前記仮想カメラが前記ターゲット基本イメージタイルをズームインする場合、前記複数の詳細イメージタイルに基づいて前記第２解像度のイメージを出力する動作と、
   を含むイメージ出力方法。
2. 前記仮想カメラの座標に基づいて、前記複数の基本イメージタイルのうち少なくとも１つのターゲット基本イメージタイルを決定する動作は、
   前記仮想カメラの座標に基づいて前記仮想カメラの視点を決定する動作と、
   前記仮想カメラの視点に対する切頭体情報を算出する動作と、
   前記切頭体情報に基づいて、前記複数の基本イメージタイルのうち少なくとも１つのターゲット基本イメージタイルを決定する動作と、
   を含む、請求項１に記載のイメージ出力方法。
3. 前記切頭体情報及び前記ターゲット基本イメージタイルに基づいて前記第１解像度のイメージを出力する動作をさらに含む、請求項２に記載のイメージ出力方法。
4. 前記仮想カメラの座標に基づいて前記仮想カメラの視点を決定する動作は、
   前記電子装置のユーザの入力に基づいて前記仮想カメラの座標を変更する動作と、
   前記変更された仮想カメラの座標に基づいて仮想カメラの視点を決定する動作と、
   を含む、請求項２に記載のイメージ出力方法。
5. 前記仮想カメラが前記ターゲット基本イメージタイルをズームインする場合、前記複数の詳細イメージタイルのうち少なくとも１つのターゲット詳細イメージタイルを決定する動作と、
   前記ターゲット詳細イメージタイルに関する情報を前記サーバに送信する動作と、
   前記サーバから前記ターゲット詳細イメージタイルに対応する第３解像度の複数の追加－詳細イメージタイルを受信する動作と、
   をさらに含む、請求項１に記載のイメージ出力方法。
6. 前記仮想カメラが前記ターゲット詳細イメージタイルをズームインする場合、前記複数の追加－詳細イメージタイルに基づいて前記第３解像度のイメージを出力する動作をさらに含む、請求項５に記載のイメージ出力方法。
7. 前記仮想カメラの座標に基づいて、前記複数の基本イメージタイルのうち少なくとも１つのターゲット基本イメージタイルを決定する動作は、前記仮想カメラの座標又は前記仮想カメラの視点が変更された場合、変更された前記仮想カメラの座標又は前記仮想カメラの視点に基づいて前記複数の基本イメージタイルのうち少なくとも１つのターゲット基本イメージタイルを再決定する動作を含む、請求項１に記載のイメージ出力方法。
8. 前記ターゲット基本イメージタイルに関する情報をサーバに送信する動作は、
   前記ターゲット基本イメージタイルに対応する前記第２解像度の複数の詳細イメージタイルが格納されているか否かを決定する動作と、
   前記第２解像度の複数の詳細イメージタイルが格納されていない場合、前記ターゲット基本イメージタイルに関する情報をサーバに送信する動作と、
   を含む、請求項１に記載のイメージ出力方法。
9. 請求項１～請求項８のいずれか一項に記載の方法を行うプログラムを収録したコンピュータで読み出し可能記録媒体。
10. イメージを出力する方法を行う電子装置は、
    イメージを出力するプログラムが記録されたメモリと、
    前記プログラムを行うプロセッサと、
    を含み、
    前記プログラムは、
    仮想座標系に基づいて設定されるグラフィック空間に対して、予め設定された第１解像度の複数の基本イメージタイルをロードする動作と、
    前記仮想座標系上に仮想カメラの座標を設定する動作と、
    前記仮想カメラの座標に基づいて、前記複数の基本イメージタイルのうち少なくとも１つのターゲット基本イメージタイルを決定する動作と、
    前記ターゲット基本イメージタイルに関する情報をサーバに送信する動作と、
    前記サーバから前記ターゲット基本イメージタイルに対応する第２解像度の複数の詳細イメージタイルを受信する動作と、
    前記仮想カメラが前記ターゲット基本イメージタイルをズームインする場合、前記複数の詳細イメージタイルに基づいて前記第２解像度のイメージを出力する動作と、
    を行う、電子装置。
11. ユーザにイメージを出力するシステムによって実行されるイメージ出力方法は、
    前記システムのユーザ端末が仮想座標系に基づいて設定されるグラフィック空間に対して、予め設定された第１解像度の複数の基本イメージタイルをロードする動作と、
    前記ユーザ端末が前記仮想座標系上に仮想カメラの座標を設定する動作と、
    前記ユーザ端末が前記仮想カメラの座標に基づいて、前記複数の基本イメージタイルのうち少なくとも１つのターゲット基本イメージタイルを決定する動作と、
    前記ユーザ端末が前記ターゲット基本イメージタイルに関する情報を前記システムのサーバに送信する動作と、
    前記ユーザ端末が前記サーバから前記ターゲット基本イメージタイルに対応する第２解像度の複数の詳細イメージタイルを受信する動作と、
    前記仮想カメラが前記ターゲット基本イメージタイルをズームインする場合、前記複数の詳細イメージタイルに基づいて前記第２解像度のイメージを出力する動作と、
    を含む、イメージ出力方法。

Images