JP2017162451A - 立体空間のシーン編集方法及び立体空間のシーン編集システム - Google Patents

Abstract

【課題】ユーザが自らスマートデバイスを操作し直感的に立体空間において編集位置を決定することができる立体空間のシーン編集方法及び立体空間のシーン編集システムを提供する。【解決手段】スマートデバイス１０１におけるセンサにより立体空間の位置決め信号を取得し、タッチ表示スクリーンでタッチ表示スクリーン内のオブジェクトを直接的に編集し、オブジェクトの位置、大きさ、回転角度又はステアリングの編集に加えて、さらにソフトウェアによりこの立体空間の立体シーンでのオブジェクトの移動と変化を録画し、立体シーンでのオブジェクトの動的画像を形成する。動的画像を放送する場合、ユーザ１０は立体空間でのスマートデバイスの位置を操作することで、立体シーン内での一つ又は複数のオブジェクトの移動と変化を再現させる。【選択図】図１Ａ

Description

本発明は立体空間の編集技術、特にスマートデバイスにより立体空間においてこの立体空間内のシーン、オブジェクトを編集する立体空間のシーン編集方法及び立体空間のシーン編集システムに関する。

従来技術では、コンピュータ画像処理設計により立体仮想空間においてこの立体仮想空間における種々の画像オブジェクトを表示することで、ユーザがこの立体仮想空間を閲覧する場合、立体仮想空間でのオブジェクトの様子を視聴することができるため、一般の平面画像の視聴経験とは異なる。

しかし、通常、立体仮想空間内の種々の画像が形成する方法はコンピュータソフトウェアにより立体オブジェクトを生じ、座標変換を介して立体仮想空間におけるオブジェクトを形成させ、最後に特別なプレーヤーにて立体仮想画像を放送するような方法である。

本発明の目的の一つは、ユーザが自らスマートデバイスを操作し直感的に立体空間においてその立体空間のシーン及び一つ又は複数のシーンにおける画像オブジェクトを編集できる立体空間のシーン編集方法及び立体空間のシーン編集システムを提供することにある。具体的に言えば、本発明の目的の一つは、ユーザが手でスマートデバイスを持ち一つの立体空間において編集位置を決定し、ソフトウェアプログラムを介してデバイスにおけるセンサにより立体空間の位置決め信号を取得し、ユーザに提供しタッチ表示スクリーンでそのタッチ表示スクリーン内のオブジェクトを直接的に編集し、オブジェクトの位置、大きさ、回転角度又はステアリングの編集だけではなく、さらにソフトウェアによりこの立体空間内の立体シーンでのオブジェクトの移動と変化を録画し、立体シーンでのオブジェクトの動的画像を形成することができる、立体空間のシーン編集方法を提供することにある。

一つの実施例では、立体空間のシーン編集方法の主要なフローは、スマートデバイスを移動させることによって立体空間内の位置決め信号を生成し、立体空間の第１の位置にオブジェクトを取り込み、立体空間の第１の位置においてスマートデバイスでオブジェクトを編集し、第１の位置でのオブジェクトの状態、例えばオブジェクトの大きさ、回転角度及びステアリング等を決定し、その後、立体空間の第１の位置でのオブジェクトの状態を記憶する。

別の実施例では、オブジェクトを編集する場合、スマートデバイスを別の位置、例えば第２の位置に移動することができる。移動過程でオブジェクトが第１の位置から第２の位置に移動する移動軌跡を決定し、オブジェクトの連続状態とオブジェクトの移動軌跡を立体空間のシーン編集システムに記憶される。

更に別の実施例では、一つの立体空間には複数のオブジェクトを取り込むことができる。各オブジェクトの編集は前例の通りである。スマートデバイスを移動させることによって立体空間内の位置決め信号を生成し、立体空間の第１の位置に第１のオブジェクトを取り込み、第１のオブジェクトの状態を決定する。スマートデバイスを第２の位置に移動する場合、スマートデバイスの移動過程ではオブジェクトの移動と変化を制御することが可能である。また、生じられた連続変化と第１の移動軌跡は、いずれも立体空間のシーン編集システムに記憶される。

次に、第２のオブジェクトをさらに取り込み、スマートデバイスを操作し立体空間内を移動させ、第３の位置から第４の位置に移動するとともに、第２のオブジェクトの状態を変更することができる。また、生じられた連続状態と第２の移動軌跡が立体空間のシーン編集システムに記憶される。

最後に、第１のオブジェクトと第２のオブジェクトの放送を起動させる条件を設定する。

立体空間のシーン編集システムの一実施例では、立体空間のシーン編集システムの主要な構成部品は、立体空間でのスマートデバイスの位置決め信号を取得するための立体空間位置決めモジュールと、立体空間内の画像オブジェクトと立体シーンを処理するために用いられ、スマートデバイスから生成される位置決め信号に対応して表示画像を生成させるための画像処理モジュールと、立体空間内の表示画像を出力する表示モジュールと、画像オブジェクトを操作するユーザインタフェースを提供し、画像オブジェクトの立体空間における状態を決定するためのタッチモジュールと、主として最後に形成される画像オブジェクトと、関連立体シーンとを記憶する記憶モジュールとを備える。

立体空間のシーン編集システムは、スマートデバイスにおけるメモリに記憶される編集アセンブリと放送アセンブリとをさらに備える。アセンブリは、スマートデバイスから生成される立体空間内の位置決め信号を取得する命令と、位置決め信号に対応する立体シーンの画像を表示する命令と、異なる位置での画像オブジェクトの状態と移動軌跡を編集する命令と、異なる位置でのオブジェクトの状態変化と移動軌跡を録画する命令と、オブジェクトを再現させるための放送を起動させる条件を設定する命令と、オブジェクトの再現を起動させる命令とを含む。

本発明は、ユーザは直感的にスマートデバイスを操作し立体空間内を移動させるとともに、直感的に立体空間の任意位置においてオブジェクトを編集することができる立体空間のシーン編集方法及び立体空間のシーン編集システムを提供する。オブジェクトを編集する場合、直感的に立体空間でのスマートデバイスの位置に同期して表示する画面に応じて編集を行うことができるように、オブジェクトを編集する前に、まず立体シーンを取り込むことができる。画像を再現させる場合にも、ユーザは直感的にスマートデバイスを操作しこの立体空間の任意位置において画像を観賞することができる。

ユーザがスマートデバイスを操作し立体空間において編集を行う状況の模式図を示す。 ユーザがスマートデバイスを操作し立体空間において編集を行う状況の模式図を示す。 ユーザがスマートデバイスを操作しオブジェクトをズームさせるように編集する状況の模式図を示す。 ユーザがスマートデバイスを操作しオブジェクトを回転させるように編集する状況の模式図を示す。 ユーザがスマートデバイスを操作しオブジェクトを移動させるように編集する状況の模式図を示す。 本発明に係る立体空間のシーン編集方法を実現するスマートデバイスの機能モジュールの実施例の図面を示す。 本発明に係る立体空間のシーン編集方法の実施例のフローの１を示す。 本発明に係る立体空間のシーン編集方法の実施例のフローの２を示す。 本発明に係る立体空間のシーン編集方法の実施例のフローの３を示す。 本発明に係る立体空間のシーン編集方法の実施例のフローの４を示す。

本発明が所定の目的を達成するために用いられる技術、方法及び効果をさらに認識できるように、以下の本発明に関する詳細な説明、図面を参照されたい。これらにより、本発明の目的、特徴と特点を深く且つ具体的に理解できるが、添付図面は参照と説明のために提供されるものに過ぎず、本発明を制限するためのものではない。

本発明には、立体空間のシーン編集方法及び立体空間のシーン編集システムを提供する。立体空間のシーン編集方法及び立体空間のシーン編集システムに関する技術はスマートデバイスに稼働するソフトウェアプログラムを介して実現される。ソフトウェアによりユーザに一つの立体空間内の種々の静的又は動的の立体オブジェクトを直感的に編集させることは、ユーザが自らスマートデバイスを操作し直感的に立体空間においてスマートデバイスの位置を移動することで編集位置を決定するとともに、スマートデバイスにおける空間センサ（例えばジャイロスコープ）から生じられる位置決め信号も取得することを含む。ユーザは、表示スクリーンをタッチして表示スクリーン内のオブジェクトを直接的に編集し、オブジェクトの位置、大きさ、回転角度又はステアリングを編集し、さらにソフトウェアにより表示スクリーン内の立体シーンにおけるオブジェクトの移動と変化を録画し、立体シーンにおけるオブジェクトの動的画像を形成することができる。その後、立体シーンとこの立体シーン内のオブジェクトの画像を再現させる場合、放送プログラムは立体空間でのスマートデバイスの位置に対するユーザの操作に応じて、立体空間の立体シーン内の一つ又は複数のオブジェクトの移動と変化を再現させることができる。

ユーザが直感的に立体空間内の画像オブジェクトを編集する状況は図１Ａと図１Ｂに示す模式図を参照してもよい。状況の模式図において、ユーザ１０はスマートデバイス１０１を操作して立体空間の任意位置において編集を行うことができる。スマートデバイス１０１には立体シーンの編集プログラムがインストールされる。立体シーンの編集プログラムは応用ソフトウェア（ＡＰＰ）で実現することができる。編集する前に、予め立体シーンを取り込んでおいてもよい。この立体シーンは３６０度の立体空間の隅々を包含するものである。ユーザの操作から生じられる立体空間の位置決め信号に従い、対応するシーン画像をスマートデバイス１０１の表示スクリーンに表示することができる。従って、スマートデバイス１０１のスクリーンの大きさ、スクリーンの解像度はいずれも視聴しようとするある方位の画像の内容に影響する可能性がある。また、ユーザに視聴しようとする画面に含まれる画像の割合を操作して決定させることができるように、立体シーンの編集プログラムは、オブジェクトを編集する場合のオブジェクトの大きさを制御する機能が付与される。

図１Ａはユーザ１０がスマートデバイス１０１を頭頂部（位置Ａ）に移動して編集を行うことを模式的に示す。スマートデバイス１０１のタッチスクリーンは編集するためのユーザのインタフェースである。ユーザ１０がスマートデバイス１０１を頭頂部（位置Ａ）に移動する場合、スマートデバイス１０１の表示スクリーンは立体画像全体としてユーザ（視聴者）の頭頂及びその付近の画像を表示する。表示画面はスマートデバイス１０１の表示スクリーンの大きさ及び解像度に関係し、ユーザから設定される表示割合にも関係する。

この例では、ユーザ１０の頭頂付近の位置Ａは編集位置である。ユーザが編集プログラムを介してこの方位の立体シーンの対応画像（以下、説明の必要に応じて、画像オブジェクト、オブジェクト、オブジェクトの画像を称する場合もある）が見られる。この場合、ソフトウェアツールを介して画像オブジェクトを取り込むことができる。この画像オブジェクトは静的又は動的の画像であってもよい。編集時に位置Ａでの画像オブジェクトの状態（位置Ａに表示される画像オブジェクトの寸法の大きさ、回転角度を含む）が決定される。オブジェクトが立体オブジェクトであれば、表示される立体オブジェクトのステアリングを決定することもできる。

別の実施例において、直接スマートデバイス１０１を操作し、ある位置（例えば位置Ａ）でのオブジェクトの状態を決定するに加えて、この位置Ａでのオブジェクトにおけるある時間内の状態変化（この時間内のオブジェクトの大きさ、回転角度及び／又はステアリング等の連続変化を含む）を録画することもできる。

別の実施例では、オブジェクトを編集する場合、立体シーンを取り込む必要がなく、オブジェクトの編集が完了した後、立体シーンをオブジェクトと結合させ最後の画像を形成する。

図１Ｂはユーザ１０がスマートデバイス１０１を操作し、水平位置における二つの位置、例えば表示画面の左向きの位置Ｂとの右向きの位置Ｃにおいて、編集を行う状況の模式図を示す。ユーザ１０が片手でスマートデバイス１０１を持ちスマートデバイス１０１を立体空間内に移動させ、位置Ｂでオブジェクトを編集することを決定する場合、編集プログラムがスマートデバイス１０１の位置決め信号（例えばジャイロスコープから生じられる位置情報）を取得し、表示スクリーンがこの位置決め信号に対応する立体シーン画像を表示し、位置Ｂでのオブジェクトの状態を決定することができる。それに対応して、ユーザ１０がスマートデバイス１０１を図中の位置Ｃに移動し、編集プログラムによりこの位置Ｃの対応する位置決め信号を取得し、対応する位置Ｃの立体シーン画像を表示することができるので、ユーザ１０はこの位置Ｃ付近のシーン編集を行うことができる。

以上に記載された状況の模式図は、立体空間におけるオブジェクトを編集すると同時に、又はその後立体シーン、例えば１種の仮想現実の画像を取り込むことができるので、ユーザ１０はスマートデバイス１０１を操作し立体空間において上下左右へ移動させることができ、いずれも表示スクリーンから各方位に対応するシーン画面を見ることができる。また、オブジェクト画像を編集する場合、同時にスマートデバイス１０１における撮影モジュールにより、位置する立体空間の実際の立体画像を取得することも除外しない。即ち、直接この実の立体空間において画像オブジェクトを編集し、虚実の統合という目的を達成する。

次に、図２Ａはユーザがスマートデバイスを操作しオブジェクトをズームさせるように編集する状況の模式図を示す。この例では、ユーザはスマートデバイス１０１のタッチスクリーンを直接的に操作し、指でスマートデバイス１０１のタッチスクリーンにおけるオブジェクト２１を編集することが示される。実施例では、立体空間中のある空間位置においてオブジェクト２１を編集することが示される。このように、指でオブジェクト２１のズームを制御し、対応するタッチ信号はこの立体空間のあるシーン位置に表示することを決定する場合の大きさを反映する。

図２Ｂはユーザがスマートデバイスを操作しオブジェクトを回転させる模式図を示す。この例ではユーザがスマートデバイス１０１のタッチスクリーンを介して指でオブジェクト２１を操作し回転させることが示される。操作から生じられるタッチ信号は指で制御されるオブジェクト２１の回転角度を反映し、即ち、この立体空間のあるシーン位置における回転角度を決定する。

図２Ｃはスマートデバイスによりオブジェクトを移動させるように編集する状況の模式図を示す。この図例ではユーザが手でスマートデバイス１０１を持ち、まずスマートデバイス１０１を立体空間内の第１の位置に移動させる場合、この第１の位置に第１の位置オブジェクト２１ａとして示されるオブジェクトを取り込むことが示される。次に、ユーザはこのオブジェクトを表示スクリーンのある位置に固定させることができる。例えば、指でスクリーンにおけるオブジェクトを押さえ込み、指で押さえ込みながら立体空間において第２の位置に移動させ、この第２の位置に移動されたオブジェクトを第２の位置オブジェクト２１ｂとして示されることが可能である。この編集動作により、この立体空間でのオブジェクトの移動軌跡を形成し、即ち、ある時間内において、オブジェクトがこの立体空間における第１の位置から第２の位置に移動することを決定した。

以上のいくつかの状況の模式図に示すように、ユーザはスマートデバイス１０１を操作し一つの立体空間内を移動させ、編集しようとするオブジェクトの位置において、まず直感的に一時停止し動かせないことができる。この場合、オブジェクトの大きさ、回転角度又はステアリング等の状態を編集することができる。次に、スマートデバイス１０１を移動させることでこの立体空間でのオブジェクトの移動軌跡を決定することができる。オブジェクトを移動させるとともに、この移動に従うオブジェクトの状態変化（オブジェクトの大きさ、回転角度及び／又はステアリングを変更することを含む）を同時に決定することができる。移動とは、位置の変化も意味する。移動過程はソフトウェアプログラムを介して録画されることが可能であるため、立体シーンにおける動画となる。

実施例において、立体空間のシーン編集システムで本発明に係る立体空間のシーン編集方法を実現させる。立体空間のシーン編集システムは、例えばソフトウェアとハードウェアで組み合わせて生成される。立体空間のシーン編集システムはスマートデバイスに用いられる。立体空間のシーン編集システムに関する機能モジュールの実施例の図面は図３を参照してもよい。

図面に示す立体空間のシーン編集システムは、スマートデバイスの立体空間における位置決め信号を取得するための立体空間位置決めモジュール３３を備える。実施例では、立体空間位置決めモジュール３３として、スマートデバイスの立体方位を検知すると共に、立体空間内の位置決め信号を生成するための例えばジャイロスコープ（ｇｙｒｏｓｃｏｐｅ）を使用する。

立体空間のシーン編集システムには、立体空間内に表示される画面を処理するための画像処理モジュール３１が設けられる。画像処理モジュール３１は、一つの空間内の立体シーン３０１と、この立体シーン３０１における画像オブジェクト３０２とを表示する。また、画像処理モジュール３１は、立体シーン３０１を再現させる場合、スマートデバイスから生成される立体空間の位置決め信号に対応する表示画像を生成させる。画像オブジェクト３０２は一つ又は複数のオブジェクトを有してもよい。オブジェクトを編集する場合、ユーザがスマートデバイスを操作し立体空間内の所定位置での各オブジェクトの状態を決定し、最後に立体シーン３０１と画像（オブジェクトの画像）を合成することができる。

立体空間のシーン編集システムは、立体空間内の表示画像を出力するための表示モジュール３９を備える。表示モジュール３９は、例えばスマートデバイスの表示スクリーンなどである。立体空間のシーン編集システムは、画像オブジェクトを操作するユーザインタフェースを提供するためのタッチモジュール３７を備える。ユーザは、タッチモジュール３７によりスマートデバイスの表示スクリーン内のシーン及びオブジェクトなどをタッチして編集することによって、立体空間での画像オブジェクトの状態（例えば図２Ａ乃至図２Ｃに示す種々の変化）を決定することができる。立体空間のシーン編集システムは、操作完了後の立体シーンと、立体空間での画像オブジェクトにおけるある時間と位置の状態とを記憶するための記憶モジュール３５を有する。

一実施例では、ソフトウェアにより実現される立体空間のシーン編集システム、又はソフトウェアとハードウェアとの組み合わせにより実現される立体空間のシーン編集システムは、スマートデバイスにおけるメモリに記憶される編集アセンブリと放送アセンブリとをさらに備える。アセンブリ（編集アセンブリと放送アセンブリなどのアセンブリ）は単一のソフトウェアプログラムで実現してもよく、異なる複数のソフトウェアプログラムで実現してもよい。編集と放送時に画像情報を対応して取得できるために提供される。これらのアセンブリは、スマートデバイスから生成される立体空間内の位置決め信号を取得する命令と、位置決め信号に対応する立体シーンの画像を表示し、位置決め信号に応じて対応するある方位の画像を生成できる命令とを含む。この立体シーンの画像表示範囲はスマートデバイスのスクリーンの大きさと解像度に関連し、比例関係を有する。さらに、ユーザは見ようとする範囲の割合を選ぶことができる。命令セットは、異なる位置での画像オブジェクトの状態と移動軌跡を編集する命令（即ち、ユーザがスマートデバイスを操作することにより生成されるタッチ信号及び立体空間を移動することにより生成される位置決め信号から、オブジェクトの状態と移動の編集状態を取得できる命令）と、異なる位置でのオブジェクトの状態変化と移動軌跡を録画する命令（即ち、ユーザがスマートデバイスを操作することにより生成されるタッチ信号及び立体空間を移動することにより生成される位置決め信号から、オブジェクトの状態と移動を同期して録画できる命令）とを含む。命令セットは、オブジェクトを再現させるための放送を起動させる条件を設定する命令と、以上の条件に応じてオブジェクトの再現を起動させる命令とをさらに含む。オブジェクトを再現させるための放送を起動させる条件を設定する命令により、ユーザはオブジェクトがどのように放送を再現させるかの条件（さらには、複数のオブジェクトの間に関連性を有する放送条件を含む）を決定することができる。

本発明に係る立体空間のシーン編集方法の実施例において、主要な方法のステップでは、ユーザがスマートデバイスを直接的に操作してスマートデバイスを立体空間内に移動させる。ユーザ自体は移動する必要がなく、即ち、ユーザは所定の位置に立ち、手持ちによりスマートデバイスを操作する。図４の実施例において、スタートステップＳ４０１のように、予め立体シーンを取り込んでおいてもよい。立体シーンは事前に撮影しておいた実のシーンであってもよく、又は事前に製作された仮想シーンであってもよく、さらに即時にスマートデバイスの撮影モジュールにより撮影された即時の立体空間画像であってもよい。

次に、ステップＳ４０３のように、スマートデバイスを移動させ、立体空間でのスマートデバイスの移動状態を検出しながら、一組の空間座標を取得することができる。好ましくはスマートデバイス内の位置決めセンサ（例えばジャイロスコープ）で立体空間内の位置決め信号を生成する。

ステップＳ４０５では、スマートデバイスを移動する場合に生成される位置決め信号はプログラム編集において、対応する立体画像を表示する根拠となる。この場合、スマートデバイスの表示スクリーンから対応する位置の立体シーン画像を表示することで、ユーザは編集時に関連位置のシーンを視聴することができる。次に、ステップＳ４０７のように、ソフトウェアによりオブジェクトを選び、又はソフトウェアの編集ツールにより特定の形状、色及び／又はパターンのオブジェクトを生成し、例えば第１の位置などの編集位置を決定するようにしてもよい。ユーザはこの立体空間の第１の位置においてスマートデバイスでオブジェクトを編集する。ステップＳ４０９のように、ユーザは、タッチスクリーンを操作することによってタッチ信号を生成し、オブジェクトの形態（オブジェクトの位置（第１の位置、及び表示スクリーンにおける相対的位置を総称する）、大きさ及び回転角度を含む。立体オブジェクトを例にする場合、立体オブジェクトのステアリング状態をさらに含む）を設定する。タッチ信号の演算を介して立体オブジェクトが占める空間の情報が得られる。これらのタッチスクリーンを介してオブジェクトを編集することにより生成されるタッチ信号はオブジェクトの立体空間における状態を定義するためのものである。これにより、立体空間のシーン編集システムは、第１の位置でのオブジェクトの状態を取得する。ステップＳ４１１のように、立体空間でのオブジェクトの状態は、オブジェクトの大きさ、回転角度及びステアリングのうちの一つ又はその組合せを含む。

最後に、ステップＳ４１３のように、第１の位置でのオブジェクトの状態を確認する場合、編集プログラムは立体空間の第１の位置でのオブジェクトの状態を記憶することに協力し、立体画像、平面オブジェクト又は立体オブジェクト、及びオブジェクトの各時点における空間座標値、状態変化と時間等を記憶することを備えてもよい。

オブジェクトは立体シーンにおいて固定の位置に状態変化を生じてもよく、立体空間内に位置を変更して移動軌跡を形成してもよい。実施例は図５に示すフローの通りである。

先ず、ステップＳ５０１のように、スマートデバイスを第１の位置に移動させることで、開始空間位置を決定し、一組の空間座標値（センサから生じられる）を取得する。次に、ステップＳ５０３のように、第１のオブジェクトを取り込む。ここで、第１のオブジェクトは、静的なオブジェクトであってもよく、動的なオブジェクトであってもよい。また、第１のオブジェクトは、平面画像であってもよく、立体画像であってもよい。そして、ステップＳ５０５のように、立体空間のシーン編集システムは、第１の位置での第１のオブジェクトの状態を記録する。即ち、立体空間のシーン編集システムは、オブジェクトの開始状態を記録する。

さらに、ステップＳ５０７のように、スマートデバイスを移動するとともに、第１のオブジェクトの状態を変更する。立体空間のシーン編集システムは、ソフトウェアプログラムを介して各時点のスマートデバイスの位置と第１のオブジェクトの状態を記録し（ステップＳ５０９）、スマートデバイスを第２の位置に移動させる（ステップＳ５１１）。スマートデバイスの移動の過程において立体空間でのスマートデバイスの移動軌跡を形成する。立体空間でのスマートデバイスの移動軌跡は立体空間でのオブジェクトの移動軌跡である。次に、ステップＳ５１３のように、立体空間のシーン編集システムは第２の位置での第１のオブジェクトの状態を記録する。これは最後の終了位置であれば、立体空間のシーン編集システムはオブジェクトの終了状態と終了時間（相対的時間）を記録するとともに、オブジェクトの立体空間の第１の位置から第２の位置に移動する連続状態（移動軌跡を含む）を記憶する。ステップＳ５１５では、立体空間のシーン編集システムはユーザから設定される第１のオブジェクトの放送を起動させる条件を提供する。

一実施例において、第１のオブジェクトの放送を起動させる条件は、例えば、立体シーンでのオブジェクトの変化を編集して録画することを再現させること、ユーザがスマートデバイスを操作して立体シーンを視聴すること、第１のオブジェクトの開始位置まで移動すること、及び、立体空間での第１のオブジェクトの動画の放送を起動させることなどを含む。また、タッチスクリーンをタッチすることで第１のオブジェクトを触れることができることは、第１のオブジェクトの変化の放送を起動させる条件であってもよい。また、立体画像を視聴し始めてから所定時間に達すると、第１のオブジェクトが形成する動画の放送をスタートするようにしてもよい。

また、同じ立体シーンに一つ以上のオブジェクトがあるという方法の実施例が提供されている。この実施の態様では、複数のオブジェクトを同じ立体空間に組み込む場合、それぞれ各オブジェクトの開始時間、終了時間、オブジェクトの状態（ステアリングと大きさ）と移動軌跡を設定し、最後に異なるオブジェクト（例えば第１のオブジェクトと第２のオブジェクト）の放送を起動させる条件を設定することができる。

実施例は図６に示す立体空間のシーン編集方法のフローを参照してもよい。この立体空間のシーン編集方法のフローは図５に示す立体空間のシーン編集方法のフローのように第１のオブジェクトの編集を完成した後、継続してスマートデバイスを第２のオブジェクトを編集するための編集位置（第３の位置とされてもよい）に移動できる。この第３の位置（又は第４の位置）は第１のオブジェクトの第１の位置と第２の位置と直接的又は間接的関連があることを排除するものではない（ステップＳ６０１）。

この場合、ステップＳ６０３のように、第２のオブジェクトを取り込む。同様に、第２のオブジェクトは、静的画像であってもよく、動的画像であってもよい。また、第２のオブジェクトは、平面画像であってもよく、立体画像であってもよい。スマートデバイスから実施される編集プログラムにより、タッチスクリーンを介して、第２のオブジェクトの大きさ、回転角度、及び／又は立体オブジェクトのステアリング等の状態の編集を含む様々な編集を実施する。プログラムはタッチ信号及び立体空間の位置決め信号に応じて第３の位置での第２のオブジェクトの状態が得られる。立体空間のシーン編集システムは、第３の位置での第２のオブジェクトの状態を記録する（ステップＳ６０５）。

その後、ステップＳ６０７のように、ユーザは同じ立体シーンにおいてスマートデバイスを移動することができる。スマートデバイスは、移動による空間位置決め信号に応じて立体シーンの画像を同期して表示することができる。スマートデバイスの移動過程では、立体シーンでの第２のオブジェクトの位置を変更すると共に、移動中に形成されるスマートデバイスの移動軌跡も移動時点の第２のオブジェクトの空間移動軌跡となる。同時に、ユーザはさらにプログラム編集により第２のオブジェクトの状態を変更することができる。その過程では、ステップＳ６０９のように、立体空間のシーン編集システムは各時点のスマートデバイスの位置と第２のオブジェクトの状態を記録する。また、ユーザの設計に応じて、次にスマートデバイスを第４の位置に移動させることができる。即ち、第２のオブジェクトとともにスマートデバイスを第４の位置に移動すると共に、第２のオブジェクトの状態をも編集する（ステップＳ６１１）。立体空間のシーン編集システムは、第４の位置での第２のオブジェクトの状態を記録すると共に、この第４の位置の位置決め信号も組み込まれる（ステップＳ６１３）。

その後、ステップＳ６１５のように、第２のオブジェクトの放送を起動させる条件を設定してから、異なる位置でのオブジェクトの状態変化と、異なる位置間のオブジェクトの移動軌跡とを録画し記憶する。

なお、立体シーンでの複数のオブジェクト（例えば同じ立体シーンに第１のオブジェクト、第２のオブジェクトがある）の変化を編集し録画することを再現させる場合、個別のオブジェクトの放送を起動させる条件を設定するに加えて、オブジェクト間の放送条件をさらに編集することができる。個別のオブジェクト、例えば第２のオブジェクトの放送を起動させる条件は、例えば、スマートデバイスを第２のオブジェクトの開始位置（例えば第３の位置）に移動させる場合、即刻に立体空間での第２のオブジェクトの動画の放送を起動させるように設定することができる。又は、タッチスクリーンをタッチすることで第２のオブジェクトを触れることは、第２のオブジェクトの変化の放送を起動させる条件となるようにしてもよい。又は、ユーザがスマートデバイスを作動させこの立体画像を視聴し始めてから、所定時間に達すると、第２のオブジェクトが形成する動画の放送をスタートするようにしてもよい。

一実施例において、スマートデバイスの表示スクリーンにより、上記の実施例のような第１の位置に第１のオブジェクトを表示する場合、第１のオブジェクトの動画の放送を起動または表示するに加えて、この時点の別の相対的時点に第２のオブジェクトの放送又は表示をスタートするように設定してもよい。従って、第１のオブジェクトと第２のオブジェクト、又はさらに別のオブジェクトは同じ立体シーンにおいて、各オブジェクト間の時間関係、空間関係、及びオブジェクト間の放送を起動させる条件を設定することができる。

従って、ユーザは特定の編集された立体シーンを放送する場合、スマートデバイスの表示スクリーンを介してある範囲の立体シーン画像を視聴すると、ある時点に二つ又はそれ以上のオブジェクトが見られ、又はスマートデバイスを移動させ立体シーンを視聴する関係で、ある時点にあるオブジェクトのある部位が見られ、又はこの範囲でのオブジェクトの移動と変化が見られる可能性がある。これはいずれも一般の平面画像の視聴経験とは異なる。

立体シーンを放送する一実施例によれば、スマートデバイスにおける放送プログラムがスマートデバイス中のセンサ（例えばジャイロスコープ）から生じられる立体空間の位置決め信号を取得し、スマートデバイスの空間位置が検出される。放送プログラムは表示スクリーンを介して対応する位置の立体シーン画像を表示し、又はあるオブジェクトの開始位置を含む空間位置まで移動させることが可能である。各オブジェクトは設定される放送を起動させる条件に応じて、設定される軌跡と状態変化に従い動画の放送をスタートする。関連方法は図７に示す実施例のフローの通りである。

先ず、ステップＳ７０１のように、放送プログラムで立体シーンの放送ファイルを開き、ユーザはスマートデバイスを操作する。ステップＳ７０３のように、スマートデバイスを移動するとともに立体空間の位置決め信号を生成し、立体シーン全体を閲覧する。ステップＳ７０５のように、表示スクリーンを介して位置決め信号に対応する立体シーン画像を表示する。

この場合、放送プログラムは立体空間の位置決め信号を取得する。ステップＳ７０７のように、放送プログラムは立体空間の位置決め信号、立体シーンの放送ファイルに記憶される位置と画像関連情報を照合させると共に、各オブジェクトの放送を起動させる条件を照合させ、ステップＳ７０９を実施する。放送プログラムは放送を起動させる条件に応じて第１のオブジェクトの動画を放送することができる。そして、別のオブジェクトが存在すると、ステップＳ７１１のように、同時に第２のオブジェクトの放送を起動させる条件も参照し、放送を起動させる条件に従い第２のオブジェクトの動画を放送する。

放送のいずれかの時点に、ステップＳ７１３のように、ユーザは任意にスマートデバイスを移動できる。放送プログラムは位置決め信号に対応する立体シーンとオブジェクトの動画を表示する。立体シーン内の複数のオブジェクトは単独運転のオブジェクトであってもよい。また、個別な放送を起動させる条件があるようにしてもよい。したがって、特定時点の特定シーンにおいて、異なる放送条件での複数のオブジェクトが見られる可能性がある。各オブジェクトの放送を起動させる条件も互いに関連する可能性がある。ユーザは各オブジェクト始動の時間関係又は空間関係を設定することができる。時間関係を用いる起動条件の実施例において、第１のオブジェクトの放送開始後又は放送完成後の所定時間以降に第２のオブジェクトの放送を起動させるように設定でき、他のオブジェクトも同様に実施できる。空間関係を用いる起動条件の実施例において、第１のオブジェクトが立体空間のある位置に達する場合、第２のオブジェクトの放送を起動させるように設定でき、他のオブジェクトも同様に設定できる。時間と空間関係は組み合わせられて各オブジェクトの放送を起動させる条件を設定することができる。

したがって、本発明は、ユーザは直感的にスマートデバイスを操作し立体空間内を移動させるとともに、直感的にある空間位置においてオブジェクトを編集することができる立体空間のシーン編集方法及び立体空間のシーン編集システムを提供する。オブジェクトを編集する場合、直感的にスマートデバイスの立体空間における位置に同期して表示する画面に従い編集を行うことができるように、オブジェクトを編集する前に、まず立体シーンを取り込むことができる。画像を再現させる場合にも、ユーザは直感的にスマートデバイスを操作しこの空間の任意の位置において画像を観賞することができる。

上述したことは本発明の好ましい実施可能な実施例に過ぎず、それにより本発明の特許請求の範囲を制限するものではないので、本発明の明細書及び図示する内容に基づき為された等価の構造変化は、すべて同様に本発明の範囲に含まれることを明らかにしておく。

１０ ユーザ
１０１ スマートデバイス
Ａ、Ｂ、Ｃ 位置
２１ オブジェクト
２１ａ 第１の位置オブジェクト
２１ｂ 第２の位置オブジェクト
３１ 画像処理モジュール
３３ 立体空間位置決めモジュール
３５ 記憶モジュール
３７ タッチモジュール
３９ 表示モジュール
３０１ 立体シーン
３０２ 画像オブジェクト

Claims (10)

1. スマートデバイスを移動させることによって立体空間内の位置決め信号を生成するステップと、
   オブジェクトを取り込むステップと、
   前記立体空間の第１の位置において前記スマートデバイスで前記オブジェクトを編集し、前記第１の位置での前記オブジェクトの状態を決定するステップと、
   前記立体空間の前記第１の位置での前記オブジェクトの状態を記憶するステップと、を備えることを特徴とする、立体空間のシーン編集方法。
2. 前記立体空間での前記オブジェクトの状態は、前記オブジェクトの大きさ、回転角度及びステアリングのうちの一つ又はその組合せを含むことを特徴とする、請求項１に記載の立体空間のシーン編集方法。
3. 前記スマートデバイスのタッチスクリーンにおいて前記オブジェクトから生成されるタッチ信号を編集することによって前記立体空間での前記オブジェクトの状態を定義することを特徴とする、請求項２に記載の立体空間のシーン編集方法。
4. 前記オブジェクトを編集する場合、前記スマートデバイスを第２の位置に移動することによって前記オブジェクトが前記第１の位置から前記第２の位置に移動する移動軌跡を決定し、前記オブジェクトが前記立体空間の前記第１の位置から前記第２の位置に移動する連続状態を記憶し、
   前記連続状態は前記移動軌跡を含むことを特徴とする、請求項２に記載の立体空間のシーン編集方法。
5. 前記オブジェクトを編集する前に、立体シーンを取り込むことで、前記オブジェクトを編集する場合、前記立体空間での前記スマートデバイスの位置に応じて、前記立体空間の位置決め信号に対応する立体シーン画像を同期して表示することを特徴とする、請求項１〜４の何れか１項に記載の立体空間のシーン編集方法。
6. スマートデバイスを移動させることによって立体空間内の位置決め信号を生成するステップと、
   第１のオブジェクトを取り込むステップと、
   前記立体空間の第１の位置において前記スマートデバイスで前記第１のオブジェクトを編集することによって前記第１の位置での前記第１のオブジェクトの状態を決定し、前記スマートデバイスを第２の位置に移動することによって前記第１のオブジェクトが前記第１の位置から前記第２の位置に移動する連続状態を決定するステップと、
   前記第１のオブジェクトが前記第１の位置から前記第２の位置に移動する第１の移動軌跡と、前記第１のオブジェクトが前記第１の位置から前記第２の位置に移動する連続状態とを記憶するステップと、
   第２のオブジェクトを取り込むステップと、
   前記立体空間の第３の位置において前記スマートデバイスで前記第２のオブジェクトを編集することによって前記第３の位置での前記第２のオブジェクトの状態を決定し、前記スマートデバイスを第４の位置に移動することによって前記第２のオブジェクトが前記第３の位置から前記第４の位置に移動する連続状態を決定するステップと、
   前記第２のオブジェクトが前記第３の位置から前記第４の位置に移動する第２の移動軌跡と、前記第２のオブジェクトが前記第３の位置から前記第４の位置に移動する連続状態とを記憶するステップと、
   前記第１のオブジェクトと前記第２のオブジェクトの放送を起動させる条件を設定するステップと、を備えることを特徴とする、立体空間のシーン編集方法。
7. 前記立体空間での前記第１のオブジェクト又は前記第２のオブジェクトの状態は、大きさ、回転角度及びステアリングのうちの一つ又はその組合せを含むことを特徴とする、請求項６に記載の立体空間のシーン編集方法。
8. 前記第１のオブジェクトと前記第２のオブジェクトの放送を起動させる条件は、前記スマートデバイスのタッチスクリーンに前記第１のオブジェクト又は前記第２のオブジェクトを触れること、前記スマートデバイスの表示スクリーンにより前記第１の位置に前記第１のオブジェクトを表示する若しくは前記第３の位置に前記第２のオブジェクトを表示すること、前記立体空間の立体シーンを視聴し始めてから、所定時間に達すると、前記第１のオブジェクト又は前記第２のオブジェクトの放送を起動させること、又は、前記第１のオブジェクトの放送が開始し一定の時間に達してから前記第２のオブジェクトの放送を開始することを備えることを特徴とする、請求項６に記載の立体空間のシーン編集方法。
9. スマートデバイスに稼働する立体空間のシーン編集システムであって、
   立体空間での前記スマートデバイスの位置決め信号を取得するための立体空間位置決めモジュールと、
   前記立体空間内の画像オブジェクトと立体シーンを処理し、前記スマートデバイスから生成される前記立体空間での位置決め信号に対応し表示画像を生成させるための画像処理モジュールと、
   前記立体空間内の前記表示画像を出力するための表示モジュールと、
   前記画像オブジェクトを操作するユーザインタフェースを提供し、前記立体空間での前記画像オブジェクトの状態を決定するためのタッチモジュールと、
   前記立体空間の前記立体シーンと、前記立体空間での前記画像オブジェクトにおけるある時間とある位置の状態とを記憶するための記憶モジュールと、を備えることを特徴とする、立体空間のシーン編集システム。
10. 前記スマートデバイスにおけるメモリに記憶される編集アセンブリと放送アセンブリとをさらに備え、
    前記メモリに記憶されるアセンブリは、
    前記スマートデバイスから生成される前記立体空間内の位置決め信号を取得する命令と、
    前記位置決め信号に対応する前記立体シーンの画像を表示する命令と、
    前記画像オブジェクトにおける異なる位置の状態と移動軌跡を編集する命令と、
    前記画像オブジェクトにおける異なる位置の状態変化と前記移動軌跡を録画する命令と、
    前記画像オブジェクトを再現させるための放送を起動させる条件を設定する命令と、
    前記画像オブジェクトの再現を起動させる命令と、
    を含むことを特徴とする、請求項９に記載の立体空間のシーン編集システム。

Images