JP2002074399A - 画像編集システム及び画像編集方法、並びに記憶媒体 - Google Patents

Abstract

(57)【要約】 【課題】 ２次元的な元の画像から特定のオブジェクト
を切り出して３次元空間上に割り付けることによって３
次元的なシーンを作成・編集する。 【解決手段】 まず、２次元画像の中から、取り扱いた
い１以上のオブジェクトを選択した後、同じ２次元画像
上で３次元表示する際の遠近／奥行き感を指定する。画
像編集システムは、選択されたオブジェクトを、指定さ
れた遠近により３次元空間上に配置する。デジタル・カ
メラで撮影された画像やその他の２次元的な画像を３次
元空間上に配置して、回転や視点移動などの３次元的な
画像処理を可能とし、所望の３次元シーンを得るように
することができる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、計算機システム上
で３次元的なイメージを作成・編集するための画像編集
システム及び画像編集方法に係り、特に、２次元的な入
力イメージを基に計算機システム上で３次元的なイメー
ジを作成・編集するための画像編集システム及び画像編
集方法に関する。

【０００２】更に詳しくは、本発明は、デジタル・カメ
ラの撮像画像などの２次元的な画像を基に３次元的なシ
ーンを作成・編集するための画像編集システム及び画像
編集方法に係り、特に、２次元的な元の画像から特定の
オブジェクトを切り出して３次元空間上に割り付けるこ
とによって３次元的なシーンを作成・編集する画像編集
システム及び画像編集方法に関する。

【０００３】

【従来の技術】昨今の半導体技術や情報技術の進歩に伴
い、パーソナル・コンピュータ（ＰＣ）やワークステー
ションと呼ばれる比較的安価で且つ高性能な計算機シス
テムが広範に普及してきている。この種の計算機システ
ム上では、一般に、オペレーティング・システム（Ｏ
Ｓ）が提供する実行環境下で、各種のアプリケーション
を起動することができる。

【０００４】計算機システム上で使用されるアプリケー
ションの種類は、ワープロ、表計算、データベース、通
信、グラフィックスなど多岐にわたる。例えば、演算能
力や描画機能が強化された計算機システム上では、２Ｄ
や３Ｄなどのリアリティの高いグラフィックスを比較的
容易に作成し、描画したり、さらに画像変形処理を行っ
たりすることができる。

【０００５】計算機のディスプレイ・スクリーン上に描
かれたイメージは、基本的には２次元画像である。しか
しながら、計算機の演算能力を利用することで、２次元
イメージを３次元の世界座標系に変換し、さらに視点座
標系へ変換することで、３次元イメージを自動生成する
ことができる。また、３次元空間上で描画オブジェクト
に対して回転・移動などの作用を与えることで、別の視
点から見たオブジェクトを表示することができる。

【０００６】例えば、本出願人に既に譲渡されている特
願２０００−２０９７３１号明細書には、仮想的に設定
されたキャンバス上に手書きにより描画されたイメージ
を基に３次元的なイメージを作成することができる画像
編集システム及び画像編集方法について開示されてい
る。

【０００７】該画像編集システム及び画像編集方法によ
れば、まず、地平線のみの３次元空間がディスプレイ・
スクリーン上に現れ、該空間に対してストローク線を引
くと、該ストローク線を底辺とする壁がキャンバスとし
て設定される。スクリーンを介してユーザが描いた絵は
キャンバス上にマッピングされるので、結果として３次
元的な絵を描いたことになる。キャンバス設定と絵を描
く操作を重ねることで、所望のシーンを構築することが
できる。また、キャンバス回転や視点移動により所望の
３次元シーンが得られる。

【０００８】すなわち、同明細書に開示された画像編集
システム及び画像編集方法によれば、２次元平面上でマ
ウス操作により手書きと同じような形式で入力された素
朴な線画を、例えば点又は線の集合のデジタル・データ
として計算機システムで処理して、さらに計算機システ
ム上で高度に画像変形したり、２次元イメージとして入
力された手書きイメージを３次元的に処理することがで
きる訳である。

【０００９】ところで、計算機システム上で扱われる画
像の入力装置の一例として、デジタル・カメラが挙げら
れる。また、写真その他の画像をスキャナで電子化して
も同様の効果を得ることができる。

【００１０】写真は、通常、人物や建物など関心のある
オブジェクトをフレーム内に適当に配置して撮影して得
た画像である。計算機システム内で構築されたデジタル
空間上で描かれた画像は、画像の作成・編集者が関心の
あるオブジェクトのみで構成される。これに対し、実世
界を実際に撮影して得た画像には、関心のあるオブジェ
クトの他に、通行人や背景など関心のないオブジェクト
が多数混在したものである。

【００１１】デジタル空間上で描かれた画像は、画像を
構成する各描画オブジェクトの貴下情報や描画情報はコ
ンピュータライズされたデータとして扱われるので、各
表示オブジェクトに対して視点の移動に伴う座標変換や
画像変形などの画像処理を容易に適用することができ
る。

【００１２】これに対し、写真の画像は、ＪＰＥＧなど
のコンピュータ・ファイルとして扱われるが、各フレー
ムは一体としてしか扱うことができず、画像中の一部の
オブジェクトに対して処理を適用することはできない。
すなわち、撮像画像中の各オブジェクトに対して回転や
移動、画像変形などの処理を施すことはできない。

【００１３】また、写真などの画像に含まれる各オブジ
ェクトは、撮影された時点で２次元平面上に固定的に割
り当てられるので、各オブジェクト間の遠近の相違など
３次元的な表現を加えることができない。

【００１４】

【発明が解決しようとする課題】本発明の目的は、計算
機システム上で３次元的なイメージを作成・編集するこ
とができる、優れた画像編集システム及び画像編集方法
を提供することにある。

【００１５】本発明の更なる目的は、２次元的な入力イ
メージを基に計算機システム上で３次元的なイメージを
作成・編集することができる、優れた画像編集システム
及び画像編集方法を提供することにある。

【００１６】本発明の更なる目的は、デジタル・カメラ
の撮像画像などの２次元的な画像を基に３次元的なシー
ンを作成・編集することができる、優れた画像編集シス
テム及び画像編集方法を提供することにある。

【００１７】本発明の更なる目的は、２次元的な元の画
像から特定のオブジェクトを切り出して３次元空間上に
割り付けることによって、３次元的なシーンを作成・編
集することができる、優れた画像編集システム及び画像
編集方法を提供することにある。

【００１８】

【課題を解決するための手段】本発明は、上記課題を参
酌してなされたものであり、その第１の側面は、２次元
画像を基に３次元的なシーンを作成・編集するための画
像編集システム又は画像編集方法であって、画面に表示
された２次元画像中から１以上のオブジェクトを選択す
るオブジェクト選択手段又はステップと、前記オブジェ
クト選択手段又はステップによって選択された各オブジ
ェクト間の３次元空間上の遠近感を設定する遠近感設定
手段又はステップと、前記遠近感設定手段又はステップ
により設定された遠近感に従って選択された各オブジェ
クトを３次元空間上に配置するオブジェクト配置手段又
はステップと、を具備することを特徴とする画像編集シ
ステム又は画像編集方法である。

【００１９】本発明の第１の側面に係る画像編集システ
ム又は画像編集方法は、３次元空間上に配置された各オ
ブジェクトを回転及び／又は移動させて所望の３次元シ
ーンを生成する画像変形手段又はステップをさらに備え
ていてもよい。

【００２０】また、前記オブジェクト選択手段又はステ
ップは、ユーザがマウス操作により囲んだ領域を選択す
るようにしてもよい。

【００２１】また、前記遠近感設定手段又はステップ
は、画面中に遠近感を指定するためのインジケータを表
示し、該インジケータに対してユーザが行ったマウス操
作に基づいて遠近感を設定するようにしてもよい。イン
ジケータは、例えば、略コの字形状をなし、コの字の両
脚の長さ並びに両脚の先端の間隔によって遠近感を指定
するようにしてもよい。

【００２２】また、本発明の第２の側面は、２次元画像
を基に３次元的なシーンを作成・編集するための画像編
集処理をコンピュータ・システム上で実行するように記
述されたコンピュータ・ソフトウェアをコンピュータ可
読形式で物理的に格納した記憶媒体であって、前記コン
ピュータ・ソフトウェアは、画面に表示された２次元画
像中から１以上のオブジェクトを選択するオブジェクト
選択ステップと、前記オブジェクト選択ステップによっ
て選択された各オブジェクト間の３次元空間上の遠近感
を設定する遠近感設定ステップと、前記遠近感設定ステ
ップにより設定された遠近感に従って選択された各オブ
ジェクトを３次元空間上に配置するオブジェクト配置ス
テップと、を具備することを特徴とする記憶媒体であ
る。

【００２３】本発明の第２の側面に係る記憶媒体は、例
えば、様々なプログラム・コードを実行可能な汎用性の
コンピュータ・システムに対して、コンピュータ・ソフ
トウェアをコンピュータ可読な形式で物理的に提供する
媒体である。このような媒体は、例えば、ＣＤ（Compac
t Disc）やＦＤ（Floppy Disc）、ＭＯ（Magneto-Optic
al disc）などの着脱自在で可搬性の記憶媒体である。
あるいは、ネットワーク（ネットワークは無線、有線の
区別を問わない）などの伝送媒体などを経由してコンピ
ュータ・ソフトウェアを特定のコンピュータ・システム
にコンピュータ可読形式で提供することも技術的に可能
である。

【００２４】このような記憶媒体は、コンピュータ・シ
ステム上で所定のコンピュータ・ソフトウェアの機能を
実現するための、コンピュータ・ソフトウェアと記憶媒
体との構造上又は機能上の協働的関係を定義したもので
ある。換言すれば、本発明の第２の側面に係る記憶媒体
を介して所定のコンピュータ・ソフトウェアをコンピュ
ータ・システムにインストールすることによって、コン
ピュータ・システム上では協働的作用が発揮され、本発
明の第１の側面に係る画像編集システム及び画像編集方
法と同様の作用効果を得ることができる。

【００２５】

【作用】本発明に係る画像編集システム上では、まず、
２次元画像の中から、取り扱いたい１以上のオブジェク
トを選択した後、同じ２次元画像上で３次元表示する際
の遠近／奥行き感を指定する。画像編集システムは、選
択されたオブジェクトを、指定された遠近により３次元
空間上に配置する。

【００２６】３次元空間に配置された各オブジェクトに
対しては、回転や視点移動など、３次元コンピュータ・
グラフィックスにおける一般的な座標変換処理を適用す
ることができる。

【００２７】したがって、本発明に係る画像編集システ
ムによれば、デジタル・カメラで撮影された画像やその
他の２次元的な画像を３次元空間上に配置して、回転や
視点移動などの３次元的な画像処理を可能とし、所望の
３次元シーンを得るようにすることができる。

【００２８】本発明のさらに他の目的、特徴や利点は、
後述する本発明の実施例や添付する図面に基づくより詳
細な説明によって明らかになるであろう。

【００２９】

【発明の実施の形態】以下、図面を参照しながら本発明
の実施例を詳解する。

【００３０】図１には、本発明を実現するのに適した画
像編集システム１０のハードウェア構成を模式的に示し
ている。画像編集システム１０は、実際には、ワークス
テーションやパーソナル・コンピュータと呼ばれる一般
的な計算機システム上で画像編集用アプリケーションを
起動することによって実現される。計算機システムの一
例は、米ＩＢＭ社のＰＣ／ＡＴ（Personal Computer/Ad
vanced Technology）互換機又はその後継機である。以
下、システム１０の各部について説明する。

【００３１】システム１０のメイン・コントローラであ
るＣＰＵ（Central Processing Unit）１１は、オペレ
ーティング・システム(ＯＳ)の制御下で、各種のアプリ
ケーションを実行するようになっている。ＯＳは、より
好ましくはビットマップ形式の描画機能並びにＧＵＩ
（Graphical User Interface）環境を提供するが、例え
ば、ＵＮＩＸ（登録商標）や、米Ｍｉｃｒｏｓｏｆｔ社
のＷｉｎｄｏｗｓ９８／ＮＴでよい。

【００３２】図示の通り、ＣＰＵ１１は、バス１７によ
って他の機器類（後述）と相互接続されている。バス１
７上の各機器にはそれぞれ固有のメモリ・アドレス又は
Ｉ／Ｏアドレスが付与されており、ＣＰＵ１１はアドレ
ス指定することによってバス接続された各機器へのアク
セスが可能となっている。バス１７は、アドレス・バ
ス、データ・バス、コントロール・バスを含む共通信号
伝送路であるが、その一例はＰＣＩ（Peripheral Compo
nent Interconnect）バスである。

【００３３】メモリ１２は、プロセッサ１１において実
行されるプログラム・コードを格納したり、実行中の作
業データを一時保管するために使用される記憶装置であ
る。同図に示すメモリ１２は、不揮発メモリ及び揮発メ
モリ双方を含むものと理解されたい。

【００３４】ディスプレイ・コントローラ１３は、プロ
セッサ１１が発行する描画命令を実際に処理するための
専用コントローラであり、例えばＳＶＧＡ（Super Vide
o Graphic Array）又はＸＧＡ（eXtended Graphic Arra
y）相当のビットマップ描画機能をサポートする。ディ
スプレイ・コントローラ１３において処理された描画デ
ータは、例えばフレーム・バッファ（図示しない）に一
旦書き込まれた後、表示装置２１に画面出力される。表
示装置２１としては、例えば、ＣＲＴ（Cathode Ray Tu
be）ディスプレイや、液晶表示ディスプレイ（Liquid C
rystal Display）などを利用することができる。

【００３５】入力機器インターフェース１４は、キーボ
ード２２やマウス２３などのユーザ入力機器をシステム
１０に接続するための装置である。入力機器インターフ
ェース１４は、キーボード２２によるキー入力又はマウ
ス２３を介した座標指示入力に応答して、ＣＰＵ１１に
対して割り込みを発生する。

【００３６】ネットワーク・インターフェース１５は、
Ｅｔｈｅｒｎｅｔ（登録商標）などの所定の通信プロト
コルに従って、システム１０をＬＡＮ（Local Area Net
work）などのネットワーク（図示しない）に接続するこ
とができる。ネットワーク・インターフェース１５は、
一般に、ＬＡＮアダプタ・カードの形態で提供され、マ
ザーボード（図示しない）上のＰＣＩバス・スロットの
装着して用いられる。

【００３７】ＬＡＮ上では、複数のホスト（コンピュー
タ）がトランスペアレントな状態で接続され、分散コン
ピューティング環境が構築されている。また、ホストの
一部はルータとして稼動し、さらに他のＬＡＮやインタ
ーネットなどの外部ネットワークとの相互接続を実現し
ている。インターネット上では、ソフトウェア・プログ
ラムやデータ・コンテンツなどの配信が行われる。例え
ば、本実施例に係る画像編集アプリケーションや、画像
編集アプリケーション上で作成・編集された３次元描画
データなども、ネットワーク経由で配信・配布されても
よい。

【００３８】但し、ネットワーク・インターフェース１
５ではなく、モデム並びに一般電話回線（いずれも図示
しない）経由でシステム１０外部のネットワークに接続
することもできる。

【００３９】外部機器インターフェース１６は、ハード
・ディスク・ドライブ（ＨＤＤ）２４やメディア・ドライ
ブ２５などの外部装置をシステム１０に接続するための
装置である。外部機器インターフェース１６は、例え
ば、ＩＤＥ（Integrated DriveElectronics）やＳＣＳ
Ｉ（Small Computer System Interface）などのインタ
ーフェース規格に準拠する。

【００４０】ＨＤＤ２４は、記憶担体としての磁気ディ
スクを固定的に搭載した外部記憶装置であり（周知）、
記憶容量やデータ転送速度などの点で他の外部記憶装置
よりも優れている。ソフトウェア・プログラムを実行可
能な状態でＨＤＤ２６上に置くことをプログラムのシス
テムへの「インストール」と呼ぶ。通常、ＨＤＤ２４に
は、プロセッサ１１が実行すべきオペレーティング・シ
ステムのプログラム・コードや、アプリケーション・プロ
グラム、デバイス・ドライバなどが不揮発的に格納され
ている。例えば、本実施例に係る画像編集アプリケーシ
ョンなどは、ＨＤＤ２４上にインストールされる。ま
た、この画像編集アプリケーション上で作成された３次
元描画データなども、所定のファイル・フォーマットで
ＨＤＤ２４上に蓄積しておくことができる。

【００４１】また、メディア・ドライブ２５は、ＣＤ（C
ompact Disc）やＭＯ（Magneto-Optical disc）、ＤＶ
Ｄ（Digital Versatile Disc）などの可搬型メディアを
装填して、データ記録面にアクセスするための装置であ
る。可搬型メディアは、主として、ソフトウェア・プロ
グラムやデータ・ファイルなどをコンピュータ可読形式
のデータとしてバックアップすることや、これらを複数
のシステム間で移動（販売・流通・配布を含む）する目的
で使用される。例えば、本実施例に係る画像編集アプリ
ケーションや、画像編集アプリケーション上で作成・編
集された３次元描画データなどを、これら可搬型メディ
アを利用して流通・配布することができる。

【００４２】次いで、この画像編集システム１０上にお
いて実現される画像編集作業について詳解する。

【００４３】本実施例に係る画像編集システム１０によ
れば、デジタル・カメラで撮影された画像やその他の２
次元的な画像を３次元空間上に配置して、回転や視点移
動などの３次元的な画像処理を可能とし、所望の３次元
シーンを得るようにすることができる。かかる画像編集
処理は、概略的には以下の工程で構成される。

【００４４】（１）２次元画像の中から、取り扱いたい
１以上のオブジェクトを選択する。 （２）２次元画像上で、３次元表示する際の遠近／奥行
き感を指定する。 （３）選択されたオブジェクトを、指定された遠近によ
り３次元空間上に配置する。

【００４５】図２〜図５には、本実施例に係る画像編集
処理により、２次元画像中の特定のオブジェクトを遠近
感が設定された３次元空間上に配置していく様子を描写
している。

【００４６】まず、処理対象となる２次元画像を読み出
して、ディスプレイ２１のスクリーン上に表示する（図
２）。

【００４７】２次元画像は、例えばデジタル・カメラで
撮影された、あるいはスキャナで取り込まれた画像など
であり、所定の入力ポートを介して画像編集システム１
０に直接入力される。あるいは、２次元画像は、画像編
集システム１０内のローカル・ディスク２４中に格納さ
れていたり、可搬型メディアを媒介としてシステム１０
に供給されたり、ネットワーク経由でダウンロードして
もよい。

【００４８】次いで、ユーザは、マウス２３などの座標
指示装置によるドラッグ操作を用いて、２次元画像の中
から必要なオブジェクトを線（自由曲線）で囲む。図３
に示す例では、画像中の手前側に位置する２人の人間
と、その後方の２本の木が囲まれている。

【００４９】次いで、ユーザは、２次元画像中で選択さ
れたオブジェクトを３次元空間上に配置したときの互い
の遠近感を指定する。例えば、キーボード２２上でホッ
トキーを押下するなどのユーザ入力操作により、図４に
示すように、画面上には遠近画法における遠近感を表す
インジケータが出現する。

【００５０】図６に示すように、インジケータは略コの
字形状をなし、底辺部と両脚の先端までの距離と両先端
の間隔によって、３次元空間上における遠近感や距離感
を指示するようになっている。図示のように、このイン
ジケータの両端にはハンドルが配設されており、ユーザ
は、各ハンドルをマウス２３でドラッグ操作することに
よって遠近感を指定することができる。

【００５１】インジケータによる遠近感の指定が完了す
ると、指定された遠近感に従って選択された各オブジェ
クトが３次元空間上に配置される。また、ディスプレイ
２１の表示も３次元的表示に切り替わる。

【００５２】図５には、２次元画像が３次元表示に切り
替わったディスプレイ２１の表示画面を示している。同
図に示す例では、地面上には、「グリッド」と呼ばれる
格子状の模様が表示される。各グリッドの間隔や傾斜に
よって、インジケータで指定された通りの遠近感や距離
感を表現することができる。

【００５３】３次元空間に配置された各オブジェクトに
対しては、回転や視点移動など、３次元コンピュータ・
グラフィックスにおける一般的な座標変換処理を適用す
ることができる。したがって、２次元画像から取り出し
たオブジェクトを含む所望の３次元シーンを編集するこ
とが可能になる。

【００５４】図７には、本実施例に係る画像編集処理の
手順をフローチャートの形式で示している。以下、この
フローチャートに従って説明する。

【００５５】まず、デジタル・カメラやスキャナ、ロー
カル・ディスク２４など、所定の画像情報源から２次元
画像を読み込んで、ディスプレイ２１に表示させる（ス
テップＳ１）。

【００５６】そして、画像編集システム１０の動作モー
ドを初期化する（ステップＳ２）。本実施例では、初期
モードは、元の２次元画像を２次元的に表示する「２次
元モード」であるとする。

【００５７】他の動作モードとしては、２次元画像から
取り出した各オブジェクトを３次元空間上に配置して表
示する「３次元モード」と、インジケータを用いて３次
元空間上における遠近感を設定する「遠近感設定モー
ド」がある。動作モードの切替は、例えば、キーボード
２２上における特定のキーの組み合わせで構成されるホ
ットキーの入力などによって行われる（ステップＳ３、
Ｓ４）。

【００５８】２次元モードに設定されている場合、ディ
スプレイ２１に表示されているシーンが２次元表示でな
いときには、画面を２次元表示に切り替える（ステップ
Ｓ５、Ｓ６）。

【００５９】２次元モード下では、ユーザは、ディスプ
レイ２１に表示された表示画像内で、マウス２３による
ドラッグ操作により、注目すべきオブジェクトを曲線で
囲む。画像編集システム１０は、同２次元画像内でマウ
ス操作により囲まれた部分すなわち注目オブジェクトを
認識する（ステップＳ７）。そして、認識した部分の外
接四角形の位置を登録しておく（ステップＳ８）。

【００６０】遠近感設定モードに設定されている場合、
ディスプレイ２１に表示されているシーンが２次元表示
でない場合には２次元表示に切り替える（ステップＳ
９、Ｓ１０）。

【００６１】遠近感設定モード下では、ディスプレイ２
１の画面上には画面上には遠近画法における遠近感を表
すインジケータが出現する（ステップＳ１１）。

【００６２】図６を参照しながら既に説明したように、
インジケータは略コの字形状をなし、底辺部と両脚の先
端までの距離と両先端の間隔によって、３次元空間上に
おける遠近感や距離感を指示するようになっている。イ
ンジケータの両端にはハンドルが配設されており、ユー
ザは、各ハンドルをマウス２３でドラッグ操作すること
によって遠近感を指定する（ステップＳ１２）。

【００６３】３次元モードに設定されている場合、２次
元モードにおいて登録された各オブジェクトの外接四角
形の底辺を基準にして、遠近感設定モードで指定された
遠近感・距離感に従い、２Ｄ−３Ｄ変換を実行する（ス
テップＳ１３）。

【００６４】そして、該変換処理に従って、３次元空間
上に各オブジェクトを配置して、ディスプレイ２１に画
面表示する（ステップＳ１４）。

【００６５】３次元空間に配置された各オブジェクトに
対しては、回転や視点移動など、３次元コンピュータ・
グラフィックスにおける一般的な座標変換処理を適用す
ることができる。したがって、２次元画像から取り出し
たオブジェクトを含む所望の３次元シーンを編集するこ
とが可能になる。

【００６６】図８〜図１１には、本実施例に係る画像編
集処理により、実際のデジカメ撮影画像中の各注目オブ
ジェクトを遠近感が設定された３次元空間上に配置して
いく様子を描写している。

【００６７】まず、処理対象となる２次元撮影画像を読
み出して、ディスプレイ２１のスクリーン上に表示する
（図８）。

【００６８】次いで、ユーザは、マウス２３などの座標
指示装置によるドラッグ操作を用いて、２次元撮影画像
の中から必要なオブジェクトを線（自由曲線）で囲む。
図９に示す例では、画像中の手前側に位置する２人の人
間と、その後方の１本の木が囲まれている。撮影画像中
の背景やその他のオブジェクトは捨象される。

【００６９】次いで、ユーザは、２次元撮影画像中で選
択されたオブジェクトを３次元空間上に配置したときの
互いの遠近感を指定する。例えば、キーボード２２上で
ホットキーを押下するなどのユーザ入力操作により、図
１０に示すように、画面上には遠近画法における遠近感
を表すインジケータが出現する。インジケータは略コの
字形状をなし、底辺部と両端までの距離と両端の間隔に
よって、３次元空間上における遠近感や距離感を指示す
るようになっている。インジケータの両端にはハンドル
が配設されており、ユーザは、各ハンドルをマウス２３
でドラッグ操作することによって遠近感を指定すること
ができる。

【００７０】インジケータによる遠近感の指定が完了す
ると、指定された遠近感に従って選択された各オブジェ
クトが３次元空間上に配置される。また、ディスプレイ
２１の表示も３次元的表示に切り替わる。

【００７１】図１１には、２次元撮影画像が３次元表示
に切り替わったディスプレイ２１の表示画面を示してい
る。同図に示す例では、地面上には、「グリッド」と呼
ばれる格子状の模様が表示される。各グリッドの間隔や
傾斜によって、インジケータで指定された通りの遠近感
や距離感を表現することができる。

【００７２】３次元空間に配置された各オブジェクトに
対しては、回転や視点移動など、３次元コンピュータ・
グラフィックスにおける一般的な座標変換処理を適用す
ることができる。したがって、２次元画像から取り出し
たオブジェクトを含む所望の３次元シーンを編集するこ
とが可能になる。

【００７３】［追補］以上、特定の実施例を参照しなが
ら、本発明について詳解してきた。しかしながら、本発
明の要旨を逸脱しない範囲で当業者が該実施例の修正や
代用を成し得ることは自明である。すなわち、例示とい
う形態で本発明を開示してきたのであり、限定的に解釈
されるべきではない。本発明の要旨を判断するために
は、冒頭に記載した特許請求の範囲の欄を参酌すべきで
ある。

【００７４】

【発明の効果】以上詳記したように、本発明によれば、
２次元的な入力イメージを基に計算機システム上で３次
元的なイメージを作成・編集することができる、優れた
画像編集システム及び画像編集方法を提供することがで
きる。

【００７５】また、本発明によれば、デジタル・カメラ
の撮像画像などの２次元的な画像を基に３次元的なシー
ンを作成・編集することができる、優れた画像編集シス
テム及び画像編集方法を提供することができる。

【００７６】また、本発明によれば、２次元的な元の画
像から特定のオブジェクトを切り出して３次元空間上に
割り付けることによって３次元的なシーンを作成・編集
することができる、優れた画像編集システム及び画像編
集方法を提供することができる。

【図面の簡単な説明】

【図１】本発明を実現するのに適した画像編集システム
１０のハードウェア構成を模式的に示した図である。

【図２】２次元画像中の特定のオブジェクトを遠近感が
設定された３次元空間上に配置していく様子を描写した
図である。

【図３】２次元画像中の特定のオブジェクトを遠近感が
設定された３次元空間上に配置していく様子を描写した
図である。

【図４】２次元画像中の特定のオブジェクトを遠近感が
設定された３次元空間上に配置していく様子を描写した
図である。

【図５】２次元画像中の特定のオブジェクトを遠近感が
設定された３次元空間上に配置していく様子を描写した
図である。

【図６】３次元空間上に配置された各オブジェクト間の
遠近感を示すインジケータの操作方法を示した図であ
る。

【図７】本実施例に係る画像編集処理の手順を示したフ
ローチャートである。

【図８】本実施例に係る画像編集処理により、実際のデ
ジカメ撮影画像中の各注目オブジェクトを遠近感が設定
された３次元空間上に配置していく様子を描写した図で
ある。

【図９】本実施例に係る画像編集処理により、実際のデ
ジカメ撮影画像中の各注目オブジェクトを遠近感が設定
された３次元空間上に配置していく様子を描写した図で
ある。

【図１０】本実施例に係る画像編集処理により、実際の
デジカメ撮影画像中の各注目オブジェクトを遠近感が設
定された３次元空間上に配置していく様子を描写した図
である。

【図１１】本実施例に係る画像編集処理により、実際の
デジカメ撮影画像中の各注目オブジェクトを遠近感が設
定された３次元空間上に配置していく様子を描写した図
である。

【符号の説明】

１０…画像編集システム １１…ＣＰＵ １２…メモリ １３…ディスプレイ・コントローラ １４…入力機器インターフェース １５…ネットワーク・インターフェース １６…外部機器インターフェース １７…バス ２１…ディスプレイ ２２…キーボード ２３…マウス ２４…ＨＤＤ ２５…メディア・ドライブ

───────────────────────────────────────────────────── フロントページの続き (72)発明者 暦本 純一 東京都品川区東五反田３丁目14番13号 株 式会社ソニーコンピュータサイエンス研究 所内 Ｆターム(参考） 5B050 BA06 BA09 CA07 DA02 EA03 EA12 EA19 FA09 FA14

Claims (12)

【特許請求の範囲】
1. 【請求項１】２次元画像を基に３次元的なシーンを作成
   ・編集するための画像編集システムであって、 画面に表示された２次元画像中から１以上のオブジェク
   トを選択するオブジェクト選択手段と、 前記オブジェクト選択手段によって選択された各オブジ
   ェクト間の３次元空間上の遠近感を設定する遠近感設定
   手段と、 前記遠近感設定手段により設定された遠近感に従って選
   択された各オブジェクトを３次元空間上に配置するオブ
   ジェクト配置手段と、を具備することを特徴とする画像
   編集システム。
2. 【請求項２】さらに、３次元空間上に配置された各オブ
   ジェクトを回転及び／又は移動させて所望の３次元シー
   ンを生成する画像変形手段を備えることを特徴とする請
   求項１に記載の画像編集システム。
3. 【請求項３】前記オブジェクト選択手段は、ユーザがマ
   ウス操作により囲んだ領域を選択することを特徴とする
   請求項１に記載の画像編集システム。
4. 【請求項４】前記遠近感設定手段は、画面中に遠近感を
   指定するためのインジケータを表示し、該インジケータ
   に対してユーザが行ったマウス操作に基づいて遠近感を
   設定することを特徴とする請求項１に記載の画像編集シ
   ステム。
5. 【請求項５】前記インジケータは略コの字形状をなし、
   コの字の両脚の長さ並びに両脚の先端の間隔によって遠
   近感を指定することを特徴とする請求項４に記載の画像
   編集システム。
6. 【請求項６】２次元画像を基に３次元的なシーンを作成
   ・編集するための画像編集方法であって、 画面に表示された２次元画像中から１以上のオブジェク
   トを選択するオブジェクト選択ステップと、 前記オブジェクト選択ステップによって選択された各オ
   ブジェクト間の３次元空間上の遠近感を設定する遠近感
   設定ステップと、 前記遠近感設定ステップにより設定された遠近感に従っ
   て選択された各オブジェクトを３次元空間上に配置する
   オブジェクト配置ステップと、を具備することを特徴と
   する画像編集方法。
7. 【請求項７】さらに、３次元空間上に配置された各オブ
   ジェクトを回転及び／又は移動させて所望の３次元シー
   ンを生成する画像変形ステップを備えることを特徴とす
   る請求項６に記載の画像編集方法。
8. 【請求項８】前記オブジェクト選択ステップでは、ユー
   ザがマウス操作により囲んだ領域を選択することを特徴
   とする請求項６に記載の画像編集方法。
9. 【請求項９】前記遠近感設定ステップでは、画面中に遠
   近感を指定するためのインジケータを表示し、該インジ
   ケータに対してユーザが行ったマウス操作に基づいて遠
   近感を設定することを特徴とする請求項６に記載の画像
   編集方法。
10. 【請求項１０】前記インジケータは略コの字形状をな
    し、コの字の両脚の長さ並びに両脚の先端の間隔によっ
    て遠近感を指定することを特徴とする請求項９に記載の
    画像編集方法。
11. 【請求項１１】２次元画像を基に３次元的なシーンを作
    成・編集するための画像編集処理をコンピュータ・シス
    テム上で実行するように記述されたコンピュータ・ソフ
    トウェアをコンピュータ可読形式で物理的に格納した記
    憶媒体であって、前記コンピュータ・ソフトウェアは、 画面に表示された２次元画像中から１以上のオブジェク
    トを選択するオブジェクト選択ステップと、 前記オブジェクト選択ステップによって選択された各オ
    ブジェクト間の３次元空間上の遠近感を設定する遠近感
    設定ステップと、 前記遠近感設定ステップにより設定された遠近感に従っ
    て選択された各オブジェクトを３次元空間上に配置する
    オブジェクト配置ステップと、を具備することを特徴と
    する記憶媒体。
12. 【請求項１２】前記コンピュータ・ソフトウェアは、３
    次元空間上に配置された各オブジェクトを回転及び／又
    は移動させて所望の３次元シーンを生成する画像変形ス
    テップをさらに備えることを特徴とする請求項１１に記
    載の記憶媒体。