JP2003317110A - ３次元動画像データの提供方法とその表示方法、該提供装置と該表示端末、該方法の実行プログラム、および該方法の実行プログラムを記録した記録媒体 - Google Patents

Abstract

(57)【要約】 【課題】 ３次元動画像から２次元動画像を表示する際
の視点位置と視線方向をマルチメディア統合情報ファイ
ルの編集のみで修正できるようにする。 【解決手段】 コンテンツ提供者のサーバ装置１０は、
３次元動画像データが多視点動画像、全方位動画像等の
中でどれに該当するか表すフォーマット情報を指定し、
３次元動画像データを２次元投影面に投影するの際の視
点位置情報及び視線方向情報を指定するマルチメディア
統合情報を記憶し、コンテンツ表示者の端末に提供す
る。サーバ装置１０には編集用の端末２０が接続され
る。端末２０は、３次元動画像データに関するマルチメ
ディア統合情報を編集する編集手段２０−１、３次元動
画像データを復号し、視点位置情報及び視線方向情報に
基づいて２次元動画像を生成するコンテンツ再生手段１
０−２、及び生成されたマルチメディア情報を表示する
プレゼンテーション手段１０−３を備える。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は、３次元動画像デ
ータを提供し表示する方法と装置に関わり、テキスト、
音声、動画像などの多種多様なマルチメディア情報を一
つのコンテンツに統合して提供する提供方法、表示方
法、提供装置および表示端末に関するものである。ただ
し、３次元動画像とは多視点動画像、全方位動画像、パ
ノラマ動画像など、様々な視点位置と視線方向に関する
映像を記録したものであり、２次元動画像とは一つの視
点位置と視線方向に関する映像を記録したものであり、
従来から“動画像”と呼ばれているものである。また、
本発明によって３次元動画像データが提供される形態と
しては、放送、ネットワークを介した通信、あるいは蓄
積媒体を利用した提供がある。

【０００２】

【従来の技術】テキスト、音声、動画像等のマルチメデ
ィア情報を一つのコンテンツに統合してインターネット
やデジタル放送で配信するためのファイル・フォーマッ
ト（以下、マルチメディア統合ファイル・フォーマッ
ト）が開発され、実用化されている。この技術によれ
ば、コンテンツの受信側の画面に様々なマルチメディア
をレイアウト、同期化して表示することができる。マル
チメディア統合ファイル・フォーマットにおいては、動
画像や音やテキスト等のマルチメディア情報と、マルチ
メディア情報間の空間的位置関係や同期情報等を記述す
るマルチメディア統合情報で構成される。特に動画像に
関しては、マルチメディア統合情報として、マルチメデ
ィア情報を識別するＩＤ情報（例えばＨＴＴＰにおける
ＵＲＬなど）、それらが画面に配置される位置に関する
情報、再生時刻、再生期間を示す。このファイル・フォ
ーマットで構成されるコンテンツの配信ではマルチメデ
ィア統合情報と、動画像等のマルチメディア情報が受信
側に送信される。

【０００３】２次元動画像のマルチメディア統合情報の
一例としては、ＳＭＩＬ（Synchronized Multimedia In
tegration Language）がある。ＳＭＩＬはテキストで記
述され、基本的にはテキスト・エディタさえあればコン
テンツの編集が可能である。ＳＭＩＬで記述されるマル
チメディア統合情報としては、例えば２次元動画像ファ
イルが置かれているＵＲＬ、２次元動画像の表示位置、
再生開始のタイミング、再生期間、表示領域の大きさが
ある。さらに、ＳＭＩＬでは２次元動画像だけではなく
２次元静止画像やテキストを、同期しつつ２次元画面内
にレイアウト表示することができる。従って、複数のマ
ルチメディア情報の同期や画面内レイアウトをテキスト
編集によって変更しコンテンツを作成できるという特徴
を持っている。

【０００４】一方、画像の表示については２次元投影面
に投影するのが一般的である。そのため３次元画像をデ
ィスプレイに表示させる場合には、視点位置と視線方向
を何らかの方法で指定し、指定された視点位置、視線方
向における２次元画像が生成されて表示される。３次元
動画像は時間的に連続した３次元画像で構成され、表示
するディスプレイ上では２次元動画像として表示され
る。３次元動画像の技術を用いると、スポーツ、コンサ
ートや風景などを様々な視点から鑑賞でき、臨場感の高
い映像通信が可能になる。コンテンツ作成者の立場から
考えると、一つの３次元動画像から様々な２次元動画像
を作成できるので、コンテンツを編集する上での自由度
が高いというメリットがある。

【０００５】

【発明が解決しようとする課題】従来のマルチメディア
統合ファイル・フォーマットの技術を用いて３次元動画
像から生成された２次元動画像を受信側に表示させる場
合、コンテンツ作成者が事前に２次元動画像を作成して
おき、そのファイルのＵＲＬ等が記述されたマルチメデ
ィア統合情報ファイルとともに配信することになる。

【０００６】一方、コンテンツ提供側のコンテンツ作成
者としては、コンテンツ編集時の非効率はできる限り避
けたいという要求がある。しかし、３次元動画像から２
次元動画像を受信側に表示させるときの視点位置、視線
方向を変更する場合、３次元動画像から所望の視点位
置、視線方向における２次元動画像を作成し直す必要が
あった。従って、コンテンツ編集の段階で視点位置や視
線方向に小さな変更を加えるだけでも手間がかかってい
た。

【０００７】本発明は、上記の課題に鑑み創作されたも
のであり、３次元動画像を表示する際の視点位置と視線
方向をマルチメディア統合情報ファイルの編集のみで修
正できるような３次元動画像の配信方法と装置を提供す
ることを目的とする。

【０００８】

【課題を解決するための手段】本発明は、上記の目的を
達成するために、以下に述べるような特徴を有する手段
を採用している。

【０００９】請求項１の発明にあっては、３次元動画像
データを有するコンテンツ提供者の編集用端末で、３次
元動画像データが多視点動画像、全方位動画像、あるい
はその他の３次元動画像フォーマットの中で、どれに該
当するかを表す３次元動画像フォーマット情報を指定
し、３次元動画像データを２次元投影面に投影するため
に利用される視点位置情報を指定し、３次元動画像デー
タを２次元投影面に投影するために利用される視線方向
情報を指定するマルチメディア統合情報を編集する手順
と、コンテンツ提供者のサーバ装置が、該３次元動画像
データと共に該編集されたマルチメディア統合情報をコ
ンテンツ表示者の端末に提供する手順とを有することを
特徴とする３次元動画像データの提供方法。

【００１０】請求項２の発明にあっては、マルチメディ
ア統合情報を編集する手順では、マルチメディア統合情
報として、３次元動画像データを２次元投影面に投影し
表示する表示開始時刻情報または表示位置情報を指定す
ることを特徴とする請求項１に記載の３次元動画像デー
タの提供方法。

【００１１】請求項３の発明にあっては、マルチメディ
ア統合情報を編集する手順では、同一３次元動画像デー
タに対して、複数のマルチメディア統合情報によって複
数の視点位置情報と視線方向情報を指定することを特徴
とする請求項１または請求項２に記載の３次元動画像デ
ータの提供方法。

【００１２】請求項４の発明にあっては、マルチメディ
ア統合情報を編集する手順では、マルチメディア統合情
報として、表示開始時刻と表示開始時刻における視点位
置情報と視線方向情報と、終了時刻と終了時刻における
視点位置情報と視線方向情報と、表示開始時刻と終了時
刻の間の任意の時刻における視点位置情報と視線方向情
報を求める補間方法を指定することを特徴とする請求項
１から請求項３のいずれかに記載の３次元動画像データ
の提供方法。

【００１３】請求項５の発明にあっては、マルチメディ
ア統合情報を編集する手順では、マルチメディア統合情
報をテキストで記述することを特徴とする請求項１から
請求項４のいずれかに記載の３次元動画像データの提供
方法。

【００１４】請求項６の発明にあっては、マルチメディ
ア統合情報を編集する手順では、編集用端末が、他の編
集用端末との間で、マルチメディア統合情報を送受信し
てマルチメディア情報を編集することを特徴とする請求
項１から請求項５のいずれかに記載の３次元動画像の提
供方法。

【００１５】請求項７の発明にあっては、マルチメディ
ア統合情報をコンテンツ表示者の端末に提供する手順で
は、コンテンツ提供者のサーバ装置が、３次元動画像デ
ータとマルチメディア統合情報をコンテンツ表示者の端
末に通信手段で送信するかまたは蓄積媒体で配布するか
して提供することを特徴とする請求項１から請求項６の
いずれかに記載の３次元動画像データの提供方法。

【００１６】請求項８の発明にあっては、マルチメディ
ア統合情報をコンテンツ表示者の端末に提供する手順で
は、コンテンツ提供者のサーバ装置が、３次元動画像デ
ータを指定するＩＤ情報を有するマルチメディア統合情
報をコンテンツ表示者の端末に通信手段で送信するかま
たは蓄積媒体で配布するかして提供する手順と、該コン
テンツ表示者の端末が、該ＩＤ情報に対応した３次元動
画像データを該コンテンツ提供者のサーバ装置に通信手
段で要求するかまたは該蓄積媒体にアクセスした場合、
コンテンツ提供者のサーバ装置が、該要求されたＩＤ情
報に対応した３次元動画像データを送信するかまたは該
アクセスされた蓄積媒体が提供する手順とを有すること
を特徴とする請求項１から請求項６のいずれかに記載の
３次元動画像データの提供方法。

【００１７】請求項９の発明にあっては、コンテンツ表
示者の端末が、コンテンツ提供者のサーバ装置またはコ
ンテンツ提供者から提供された蓄積媒体からマルチメデ
ィア統合情報と３次元動画像データを取得する手順と、
該マルチメディア統合情報で指定される３次元動画像フ
ォーマット情報に基づいて３次元動画像データを復号す
る手順と、該復号された３次元動画像データから該マル
チメディア統合情報で指定される視点位置情報と視線方
向情報または視点位置情報と視線方向情報と表示開始時
刻情報もしくは表示位置情報に基づいて２次元動画像を
生成する手順と、該生成された２次元動画像をディスプ
レイに表示する手順とを有することを特徴とする３次元
動画像データの表示方法。

【００１８】請求項１０の発明にあっては、コンテンツ
表示者の端末が、コンテンツ提供者のサーバ装置または
コンテンツ提供者から提供された蓄積媒体からマルチメ
ディア統合情報と３次元動画像データを取得する手順
と、該マルチメディア統合情報で指定される３次元動画
像フォーマット情報に基づいて３次元動画像データを復
号する手順と、該マルチメディア統合情報で指定される
表示開始時刻と終了時刻、それらの時刻における視点位
置情報と視線方向情報、および補間方法情報に基づい
て、視点位置情報と視線方向情報の補間値を求める手順
と、該復号された３次元動画像データから該視点位置情
報と視線方向情報とその補間値に基づいて２次元動画像
を生成する手順と、該生成された２次元動画像をディス
プレイに表示する手順とを有することを特徴とする３次
元動画像データの表示方法。

【００１９】請求項１１の発明にあっては、マルチメデ
ィア統合情報と３次元動画像データを取得する手順で
は、コンテンツ提供者のサーバ装置から、３次元動画像
データを指定するＩＤ情報を有するマルチメディア統合
情報を通信手段で受信するかまたは蓄積媒体で提供を受
けるかして取得する手順と、該ＩＤ情報に対応した３次
元動画像データを該コンテンツ提供者のサーバ装置に通
信手段で要求するかまたは該蓄積媒体にアクセスする手
順と、コンテンツ提供者のサーバ装置から、該要求した
ＩＤ情報に対応した３次元動画像データを受信して取得
するかまたは該アクセスした蓄積媒体から取得する手順
とを有することを特徴とする請求項９または請求項１０
に記載の３次元動画像データの表示方法。

【００２０】請求項１２の発明にあっては、マルチメデ
ィア情報、およびこのマルチメディア情報に関する３次
元動画像データが多視点動画像、全方位動画像、あるい
はその他の３次元動画像フォーマットの中でどれに該当
するかを表す３次元動画像フォーマット情報を指定し、
３次元動画像データを２次元投影面に投影するために利
用される視点位置情報を指定し、３次元動画像データを
２次元投影面に投影するために利用される視線方向情報
を指定するマルチメディア統合情報を記憶し、表示者の
端末に提供するサーバ装置と、該マルチメディア情報に
関するマルチメディア統合情報を編集する編集手段、お
よび該編集されたマルチメディア統合情報に基づいて該
マルチメディア情報を生成し表示する再生、表示手段を
有する編集用端末とを備えることを特徴とする３次元動
画像データの提供装置。

【００２１】請求項１３の発明にあっては、複数の編集
用端末を備え、該編集用端末は他の編集用端末との間で
マルチメディア統合情報を送受信してマルチメディア情
報を編集するものであることを特徴とする請求項１２に
記載の３次元動画像データの提供装置。

【００２２】請求項１４の発明にあっては、コンテンツ
提供者のサーバ装置から３次元動画像データとマルチメ
ディア統合情報を取得し、該マルチメディア統合情報で
指定される３次元動画像フォーマット情報と視点位置情
報と視線方向情報または３次元動画像フォーマット情報
と視点位置情報と視線方向情報と表示開始時刻情報もし
くは表示位置情報とを取得し、該３次元動画像フォーマ
ット情報に基づいて３次元動画像データを復号し、該視
点位置情報と視線方向情報またはに該視点位置情報と視
線方向情報と表示開始時刻情報もしくは表示位置情報基
づいて２次元動画像を生成する再生手段と、該生成され
た２次元動画像をディスプレイに表示するプレゼンテー
ション手段とを備えることを特徴とする３次元動画像デ
ータの表示端末。

【００２３】請求項１５の発明にあっては、コンテンツ
提供者のサーバ装置から３次元動画像データとマルチメ
ディア統合情報を取得し、該マルチメディア統合情報で
指定される該３次元動画像フォーマット情報、表示開始
時刻と終了時刻、それらの時刻における視点位置情報と
視線方向情報、および補間方法情報を取得し、該３次元
動画像フォーマット情報に基づいて３次元動画像データ
を復号し、該表示開始時刻と終了時刻、それらの時刻に
おける視点位置情報と視線方向情報、および補間方法情
に基づいて視点位置情報と視線方向情報の補間値を求
め、該視点位置情報と視線方向情報の補間値に基づいて
２次元動画像を生成する再生手段と、該生成された２次
元動画像をディスプレイに表示するプレゼンテーション
手段とを備えることを特徴とする３次元動画像データの
表示端末。

【００２４】請求項１６の発明にあっては、２次元動画
像を生成する再生手段が、マルチメディア統合情報と３
次元動画像データを取得するのに際して、コンテンツ提
供者のサーバ装置から、３次元動画像データを指定する
ＩＤ情報を有するマルチメディア統合情報を通信手段で
受信するかまたは蓄積媒体で提供を受けるかして取得
し、該ＩＤ情報に対応した３次元動画像データを該コン
テンツ提供者のサーバ装置に通信手段で要求するかまた
は該蓄積媒体にアクセスし、コンテンツ提供者のサーバ
装置から、該要求したＩＤ情報に対応した３次元動画像
データを受信して取得するかまたは該アクセスした蓄積
媒体から取得するものであることを特徴とする請求項１
４または請求項１５に記載の３次元動画像データの表示
端末。

【００２５】請求項１７の発明にあっては、請求項１か
ら請求項８のいずれかに記載の３次元動画像データの提
供方法における手順を、コンピュータに実行させるため
のプログラムとしたことを特徴とする３次元動画像デー
タの提供方法の実行プログラム。

【００２６】請求項１８の発明にあっては、請求項９か
ら請求項１１のいずれかに記載の３次元動画像データの
表示方法における手順を、コンピュータに実行させるた
めのプログラムとしたことを特徴とする３次元動画像デ
ータの表示方法の実行プログラム。

【００２７】請求項１９の発明にあっては、請求項１か
ら請求項８のいずれかに記載の３次元動画像データの提
供方法における手順を、コンピュータに実行させるため
のプログラムとし、該プログラムを、該コンピュータが
読み取りできる記録媒体に記録したことを特徴とする３
次元動画像データの提供方法の実行プログラムを記録し
た記録媒体。

【００２８】請求項２０の発明にあっては、請求項９か
ら請求項１１のいずれかに記載の３次元動画像データの
表示方法における手順を、コンピュータに実行させるた
めのプログラムとし、該プログラムを、該コンピュータ
が読み取りできる記録媒体に記録したことを特徴とする
３次元動画像データの表示方法の実行プログラムを記録
した記録媒体。

【００２９】ただし、請求項１から請求項９の発明で
は、マルチメディア統合情報が視点位置情報や視線方向
情報を指定する順番は任意である。具体的には、マルチ
メディア統合情報のデータ構造上での順番、あるいはコ
ンテンツ提供者がマルチメディア統合情報を指定する際
の動作上の順番は任意である。例えば、マルチメディア
統合情報がテキストで記述されている場合、テキスト・
ファイル内で視点位置、視線方向、３次元動画像フォー
マット情報の順序でマルチメディア統合情報が記述され
ていても、３次元動画像フォーマット、視線方向、視点
位置の順番で記述されていても良い。あるいは、コンテ
ンツ提供者がコンテンツ編集の際、テキスト・エディタ
等で視点位置、視線方向、３次元動画像フォーマット情
報の順番で入力しても、３次元動画像フォーマット、視
線方向、視点位置の順番で入力しても良い。

【００３０】請求項１と請求項１２の発明によれば、コ
ンテンツ表示者のディスプレイに表示する２次元動画像
を３次元動画像から生成する際、視点位置情報と視線方
向情報の指定、修正をマルチメディア統合情報の指定、
修正のみで実行できる。

【００３１】請求項２の発明によれば、３次元動画像か
ら生成された２次元動画像を生成し再生する際、３次元
動画像の中での表示開始時刻を指定できる。また、３次
元動画像から生成された２次元動画像をディスプレイに
表示する際の表示位置を指定できるため、所望のレイア
ウトで他のマルチメディア情報と並べて表示することが
できる。

【００３２】請求項３の発明によれば、３次元動画像か
ら２次元動画像を生成する際の視点位置と視線方向が時
刻に応じて切り替わるという効果を演出することができ
る。

【００３３】請求項４の発明によれば、３次元動画像か
ら２次元動画像を生成する際の視点位置と視線方向が時
刻に応じて連続的に変化するという効果を演出すること
ができる。

【００３４】請求項５の発明によれば、上述の３次元動
画像に関するマルチメディア統合情報をテキストで記述
することが可能になり、テキスト・エデイタ等で容易に
編集することが可能になる。

【００３５】請求項６と請求項１３の発明によれば、コ
ンテンツ提供者が提供するコンテンツを複数のコンテン
ツ編集者が編集する際、コンテンツ編集者の間でマルチ
メディア統合情報のみを送受信すればコンテンツの編集
が行える。

【００３６】請求項７と請求項８の発明によれば、コン
テンツ提供者は上述の方法や手段で構成されたマルチメ
ディア統合情報と３次元動画像をコンテンツ表示者に提
供することにより、コンテンツ表示者にコンテンツを閲
覧させることができる。

【００３７】請求項９乃至請求項１１と請求項１４乃至
請求項１６の発明によれば、コンテンツ提供者がネット
ワークや蓄積媒体を介して提供したコンテンツを、コン
テンツ表示者が取得してコンテンツの表示を行うことが
できる。

【００３８】

【発明の実施の形態】以下、本発明の実施の形態につい
て図を用いて詳細に説明する。

【００３９】コンテンツが提供される方法としては、蓄
積媒体やネットワークを介した方法などが考えられる
が、コンテンツの提供に先立って行われるコンテンツ編
集の動作はいずれの場合も同様である。従って、コンテ
ンツを編集してコンテンツがコンテンツ提供者のサーバ
装置に蓄積されるまでの動作を最初に示す。その後に、
ネットワークを介してコンテンツの提供を行った場合の
データの送受信動作などについて、いくつかの実施形態
例を示す。また、以下の実施形態例ではマルチメディア
統合情報はテキスト・データで構成され、テキストによ
る記述におけるンンタックスとセマンティクスに関して
はＳＭＩＬを応用する。具体的には、ＳＭＩＬで従来か
ら用いられているマルチメディア統合情報に関しては引
用し、３次元動画像に対応したエレメントと視点位置情
報などに対応したアトリビュートを本実施形態例で新た
に導入する。また、コンテンツを構成するファイルは、
マルチメディア統合情報が記述されたテキスト・ファイ
ル（以下、PLUS3Dファイル）とコンテンツに導入される
テキスト、オーディオ、動画像データなどの各々のマル
チメディア情報に関するファイルである。

【００４０】以下にて、コンテンツを編集する際の動作
について述べる。コンテンツが編集される際の構成とし
ては２通り示す（構成Ａ、構成Ｂ）。構成Ａではコンテ
ンツ提供者がコンテンツ編集と提供の両方を行い、構成
Ｂでは２つのコンテンツ編集者とコンテンツ提供者とが
それぞれ個別に存在し、通信回線を介して接続されてい
る。

【００４１】図１は本発明の構成Ａの実施形態例におけ
る構成を示している。図１において、コンテンツ提供者
はコンテンツ配信を行うためのサーバ装置１０を有して
いる。サーバ装置１０には種々のマルチメディア情報を
格納したマルチメディア情報記憶手段１０−１とマルチ
メディア統合情報ファイルを格納したマルチメディア統
合情報記憶手段１０−２を備えている。さらに、コンテ
ンツ提供者は端末２０を有しており、端末２０にはマル
チメディア統合情報編集手段２０−１、コンテンツ再生
手段２０−２、プレゼンテーション手段２０−３を備え
ている。マルチメディア統合情報編集手段２０−１はPL
US3Dファイルに記述されたテキストをディスプレイに表
示し、PLUS3Dファイルを編集するための機能を持ってい
る。具体的には、この実施形態例ではマルチメディア統
合情報編集手段２０−１はテキスト・エディタであると
する。一方、コンテンツ再生手段２０−２はマルチメデ
ィア情報とPLUS3Dファイルを入力とし、圧縮符号化され
たマルチメディア情報の復号化を行い、PLUS3Dファイル
の記述に従って生成した画像データとオーディオ・デー
タをプレゼンテーション手段２０−３に送る機能を持
つ。プレゼンテーション手段２０−３はディスプレイと
スピーカーを備えており、コンテンツの鑑賞に利用され
る。

【００４２】構成Ａの実施形態例ではコンテンツ配信者
のサーバ装置１０に備えられたマルチメディア情報記憶
手段１０−１に記録された３次元動画像ファイルは、ar
tist.3dvというファイル名が付けられているとする。そ
して、コンテンツを鑑賞する際のディスプレイにはある
視点位置と視線方向から眺めた試合の２次元動画像（２
次元動画像１）と、別の視点位置と視線方向から眺めた
２次元動画像（２次元動画像２）をそれぞれ、図２の
（ａ）ように配置して表示するとする。さらに、このコ
ンテンツには２次元静止画像logo.gifとオーディオbgm.
wavも含まれており、３次元動画像が再生された後に２
次元静止画像は図２の（ｂ）のように表示されてオーデ
ィオもスピーカーから出力されるとする。さらに、この
コンテンツに対応したPLUS3Dファイルexample1.plus3a
には図３に示すような記述がなされているとする。図３
において、点線の四角の中が３次元動画像に関する記述
である。“3dvideo”が３次元動画像に関するエレメン
ト名であり、アトリビュートの“src”、“id”、“reg
ion”、“title”に関してはＳＭＩＬにおける定義を引
用する。さらに、本発明に対応した新たなアトリビュー
トとして、３次元動画像フォーマット、視点位置、視線
方向に関するアトリビュートが記述されている。まず、
ここでは３次元動画像フォーマットのアトリビュートを
formatと名づけた。これは３次元動画像が多視点動画
像、全方位動画像、光線空間動画像などの形式のうち、
どの形式を取るかを表す。なお、図３での“format=“m
ulti””はartist.3dvが多視点動画像であることを示し
ている。一方、視点位置のアトリビュートをfocusx、fo
cusy、focuszとした。ここでは、３次元動画像において
撮影されている３次元空間に３次直交座標系が定義され
ていると仮定しており、focusx、focusy、focuszはそれ
ぞれｘ軸、ｙ軸、ｚ軸の値であるとした。また、視線方
向のアトリビュートをaxistheta、axisphiとし、視線方
向に関しては極座標表現を導入している。なお、focus
x、focusy、focusz、axistheta、axisphiの概念図を図
４に示した。以下のコンテンツ提供者の動作例では、ex
ample.plus3dに視点位置情報と視点方向情報を記述した
後、example.plus3dにおける視点位置情報に修正を加え
ることとする。

【００４３】構成Ａにおいてのコンテンツ提供者側のコ
ンテンツ編集における動作例を以下に示す。図１０、１
１は、視点位置情報と視点方向情報により３次元動画像
から２次元動画像を提供する場合の基本的な処理手順を
示し、図１２、１３はその具体的な処理手順を示し、図
１４は図１２、１３における２次元動画像の生成、表示
過程（Ｓ２）の詳細な処理手順を示す。また、視点位置
情報と視点方向情報と表示位置情報により３次元動画像
から２次元動画像を提供する場合の基本的な処理手順を
図１５、図１６に、その具体的な処理手順を図１７、１
８に示す。図１９、２０は図１７、１８における２次元
動画像の生成、表示過程（Ｓ３）のオプション１の詳細
な処理手順を示し（ただし、図２０は図１９の一過程
（Ｓ３）の詳細フローを示す）、図２１、２２は図１
７、１８における２次元動画像の生成、表示過程（Ｓ
３）のオプション２の詳細な処理手順を示す（ただし、
図２２は図２１の一過程（Ｓ３）の詳細フローを示
す）。なお、図中の（注１）、（注２）は以下を表す。

【００４４】（注１）２次元動画像の表示過程（Ｓ２）
の処理、及び以降の図のフローチャートにおいて、コン
テンツ提供者側で３次元動画像から２次元動画像を生
成、表示する場合、これはプレビューを行っている処理
にあたる。つまり、入力された視点位置情報と視線方向
情報によって生成される２次元動画像がどのようになる
かを確認している。

【００４５】（注２）３次元動画像からの２次元動画像
の生成は従来技術を用いて実行できる。これらの従来技
術は、下記の公知文献に記載されており、これらの改良
技術は多数存在する。 ・S.E.Chen and L.Williams,“View interpolation for
Image Synthesis,”inProc.SlGGRAPH'93,pp.279-288.1
993（多視点画像） ・S.E.Chen,“Quicktime VR-An Image-based Approach
to Virtual EnvironmentNavigation,”In Proc.SlGGRAP
H'95,pp.29-38（全方位画像）・J.D.Foley,A.V.Dam,S.K
Feiner,J.F.Hughes,Computer Graphics:Principles an
d Practice,Addison-Wesley Publishing,1996（３次元
ＣＧアニメーション）まず、コンテンツ提供者は、テキ
スト・エディタ２０−１によりマルチメディア統合情報
記憶装置１０−２に図３の左右の図のようなPLUS3Dファ
イルexample1.plus3dを書き込み、視点位置情報、視線
方向情報、表示位置情報（以降、表示位置情報は省略可
能であり、表示位置情報を用いない場合の処理手順は図
１０〜図１４、用いる場合の処理手順は図１５〜図２２
となる）を入力する。視点位置情報、視線方向情報、表
示位置情報の追加が必要であれば、プレゼンテーション
手段２０−３により図３の左右の図を表示しながら、テ
キスト・エディタ２０−１により追加する。

【００４６】ここで、必要に応じてコンテンツをディス
プレイに表示するという動作が行われる。まず、exampl
e.plus3d、artist.3dv、logo.gif、bgm.wavがコンテン
ツ再生手段２０−２に入力される。次に、example.plus
3dの記述内容に従い、formatに対応した方法で３次元動
画像artist.3dvが復号化される。次に、復号化されたar
tist.3dvからfocusx、focusy、focusz、axistheta、axi
sphiの数値に従って２次元動画像が生成され、図２の
（ａ）に示したような映像がプレゼンテーション手段２
０−３のディスプレイに表示される。artist.3dvから生
成された２次元動画像の再生が終了すると、２次元静止
画像logo.gifが図２の（ｂ）のようにディスプレイに表
示され、プレゼンテーション手段２０−３のスピーカー
からオーディオが出力される。

【００４７】コンテンツ提供者は表示された２次元動画
像により、入力あるいは追加した視点位置情報、視線方
向情報、表示位置情報が現状のままでよいか判断し、修
正や追加が必要であれば、マルチメディア統合情報記憶
装置１０−２に格納されたPLUS3Dファイルexample1.plu
s3dをテキスト・エディタ２０−１に読み込んで、テキ
ストをプレゼンテーション手段２０−３のディスプレイ
に表示する。すると、入力された図３の左右の図がディ
スプレイに表示される（ただし、点線の四角と矢印は表
示されない）。コンテンツ提供者は、例えば、視点位置
座標のｚ軸の値focusz＝０をfocusz＝１０に修正するた
め、テキスト・エディタ２０−１を用いて修正する。

【００４８】以上のコンテンツ提供者の編集動作は必要
に応じて繰り返される。最後に、example.plus3d、arti
st.3dv、logo.gif、bgm.wavがネットワークを介して送
信され（図１０、１２、１５、１７）、あるいは蓄積媒
体に記録（図１１、１３、１６、１８）されて配布され
るなどの過程を経てコンテンツ表示者に提供される。

【００４９】なお、本実施形態例では視点位置と視線方
向に関する情報としては簡単なものを用いたが、請求項
４，５によれば、コンテンツの再生が進行している中で
視点位置が変化するなどの効果も演出できる。ここで
は、このような効果を演出するための実施形態例を示
す。この実施形態例のコンテンツでは図２の（ａ）のよ
うに、３次元動画像から生成された二つの２次元動画像
を表示する。図２においての２次元動画像１はartist.3
dvから生成されたものであり、視点位置と視線方向がコ
ンテンツ再生の進行とともに変化するようにする。一
方、２次元動画像２はartist2.3dvというファイル名が
付けられた３次元動画像から生成され、視点位置と視線
方向は時間に関して不変であるとする。

【００５０】本実施形態例では、コンテンツ提供者はテ
キスト・エディタ２０−１を用いて、PLUS3Dファイルに
図５に示すような記述を行う（ファイル名はexample2.p
lus3dとする）。図５においては、intepolationという
アトリビュートによって視点位置と視線方向の補間の有
無が指定される。ここではinterpolation＝“true”で
あり、補間が行われる（デフォルトの値は“false”、
すなわち補間が行われない）。そして、interpolation
＝“true”であった場合、コンテンツ編集者は以下に述
べるアトリビュートに関して値を定める。interpolatio
nTypeというアトリビュートは補間方法を現しており、
ここでは線形補間“linear”によって補間を行う（その
他の補間方法としてはスプライン補間などが考えられ
る）。さらに、コンテンツ提供者は３次元動画像の開始
時刻（clipBegin：３次元動画像artist2.3dvの最初から
何秒後の時点から再生を行うかを表す）と終了時刻（cl
ipEnd：３次元動画像artist2.3dvの最初から何秒後の時
点で再生を終了するかを表す）、およびそれぞれの時刻
における視点位置と視線方向（focusxBegin、focusyBeg
in、focuszBegin、axisthetaBegin、axisphiBegin、お
よびfocusxEnd、focusyEnd、focuszEnd、axisthetaEn
d、axisphiEnd）を図５の通りにexample2.plus3dに記述
する。

【００５１】コンテンツをプレゼンテーション手段２０
−３のディスプレイに表示する際には、まずコンテンツ
再生手段２０−２にexample2.plus3d、artist.3dv、art
ist2.3dvが読み込まれ、formatに従ってartist.3dvとar
tist2.3dvが復号化される、そして、artist2.3dvは視点
位置と視線方向が固定された状態で２次元動画像が生成
され、ディスプレイに表示される。一方、artist2.3dv
については、開始時刻と終了時刻においての視点位置と
視線方向しか定められていない。従って、開始、終了時
刻の間の時間帯においてはinterpolationTypeアトリビ
ュートで指定された方法によって開始、終了時刻の視点
位置と視線方向による補間値が用いられる。つまり、コ
ンテンツ再生手段２０−２においてこれら補間値が計算
され、補間値をもとにartist.3dvから２次元動画像が生
成される。最後にプレゼンテーション手段２０−３のデ
ィスプレイに図２の（ａ）のように、ここで生成された
２次元動画像が表示される。

【００５２】続いて、構成Ｂの実施形態例を示す。図６
は構成Ｂの実施形態例においての全体構成を示してい
る。

【００５３】図６に示されているように、コンテンツ提
供者とコンテンツ編集者Ａとコンテンツ編集者Ｂは通信
回線を介して接続されている。コンテンツ提供者はサー
バ装置１０を有しており、これは構成Ａの場合と同様の
手段を備えている。一方、コンテンツ編集者Ａは端末３
０においてマルチメディア統合情報編集手段３０−１、
コンテンツ再生手段３０−２、プレゼンテーション手段
３０−３、マルチメディア統合情報記憶手段３０−４
を、コンテンツ編集者Ｂは端末４０においてマルチメデ
ィア統合情報編集手段３０−１、コンテンツ再生手段３
０−２、プレゼンテーション３０−３、マルチメディア
統合情報記憶手段３０−４を有しているが、これらが果
たす機能は図１において示した同名の手段と同様であ
る。また、構成Ｂにおいてはexample.plus3dを用いたコ
ンテンツを編集する場合を示すとする。なお、example
2.plus3dによるコンテンツの編集も以下に示す動作例と
同様に行える。

【００５４】上記構成Ｂにおいてのコンテンツ編集の動
作例を示す。本動作例においても、編集者端末間でマル
チメディア統合情報を送受信して編集する点を除けば、
各端末での処理手順は基本的に図１０〜図２２に示した
フローチャートに示した処理手順を行う。

【００５５】以下の動作例が始まる段階では、コンテン
ツ編集者Ａが図３に示した記述をexample.plus3dにすで
に行っているとする。また、コンテンツ編集者Ａのマル
チメディア統合情報記憶手段３０−４にはexample.plus
3dが格納されているが、コンテンツ提供者とコンテンツ
編集者Ｂのマルチメディア統合情報記憶手段にはexampl
e.plus3dは格納されていないとする。一方、コンテンツ
提供者のマルチメディア情報記憶手段１０−１にはarti
st.3dv、logo.gif、bgm.wavが格納されているとする。
動作例の大まかな流れとしては、コンテンツ編集者Ｂが
このコンテンツを一度鑑賞し、修正を加え、最後にコン
テンツ提供者のサーバ装置１０にコンテンツが蓄積され
る。

【００５６】構成Ｂにおいてのコンテンツ編集の動作例
では、まずコンテンツ編集者Ａはマルチメディア統合情
報記憶手段３０−４に格納されたexample.plus3dをコン
テンツ編集者Ｂに送信する。コンテンツ編集者Ｂはexam
ple.plus3dを受信すると、artist.3dv、logo.gif、bgm.
wavをコンテンツ提供者のサーバ装置１０に要求する。
コンテンツ編集者Ｂがartist.3dv、logo.gif、bgm.wav
を受信し、コンテンツを構成する一連のファイルが揃う
と、これらのファイルはコンテンツ再生手段４０−２に
入力される。すると、プレゼンテーション手段４０−３
によりコンテンツが表示されるが、ここでの動作は構成
Ａの場合と同様である。次にコンテンツ編集者Ｂはexam
ple.plus3dをマルチメディア統合情報編集手段４０−１
に入力し、コンテンツの修正を行う。最後に、コンテン
ツ編集者Ｂはexample.plus3dをコンテンツ提供者のサー
バ装置１０に送信し、example.plus3dはマルチメディア
統合情報記憶手段１０−２に記録される。なお、コンテ
ンツ編集者Ａとコンテンツ編集者Ａの間でのexample.pl
us3dの送受信や修正は必要に応じて繰り返されてもよ
い。

【００５７】ここで、ネットワークを介した通信などで
コンテンツを提供したとき、このサービスを受ける（コ
ンテンツを取得して閲覧する）立場のコンテンツ表示者
とコンテンツ提供者の動作について述べる。ここでは、
３通りの提供方法（方法Ａ，Ｂ，Ｃ）について示す。図
７は方法Ａ、図８は方法Ｂ，Ｃにおいての構成図を示
す。コンテンツ提供者のサーバ装置１０とコンテンツ表
示者の端末５０は通信回線（インターネット）を介して
接続しており、図における矢印は情報の流れを表してい
る。サーバ装置１０におけるＨＴＭＬ文書記憶手段１０
−３にはＨＴＭＬ文書が格納されており、このＨＴＭＬ
文書にはコンテンツ提供者が保有しているコンテンツに
関する情報などが含まれている。また、端末５０におけ
るＨＴＭＬコンテンツ表示手段はＨＴＭＬ文書の記述に
従ってＨＴＭＬコンテンツ画像をプレゼンテーション手
段５０−３に送る、あるいはハイパーリンクに対応した
ファイルの要求を送信する機能を果たす。端末５０のコ
ンテンツ再生手段５０−１とプレゼンテーション手段５
０−３は図１に示した手段と同様の機能を果たすもので
ある。

【００５８】以下にコンテンツ表示者側の動作例を示
す。図２３、２４は、視点位置情報と視点方向情報によ
り３次元動画像から２次元動画像を表示する場合の基本
的な処理手順を示す。また、視点位置情報と視点方向情
報と表示位置情報により３次元動画像から２次元動画像
を表示する場合の基本的な処理手順を図２５、図２６に
示し、図２５、図２６における２次元動画像の表示過程
（Ｓ２）の詳細な処理手順を図２９に示す。また、３次
元動画像から２次元動画像を表示する場合の別の基本的
な処理手順を図２７、図２８に示し、図２７、図２８に
おける２次元動画像の表示過程（Ｓ２）の詳細な処理手
順を図３０に示す。なお、図中の（注２）は、前述のと
おりである。

【００５９】コンテンツ表示者がコンテンツ提供者のサ
ーバ装置１０のＨＴＭＬ文書記憶装置１０−３に格納さ
れたＨＴＭＬ文書を取得すると、ＨＴＭＬコンテンツ表
示手段５０−２によりＨＴＭＬコンテンツが図９のよう
に表示される。この図では“LIVE3D”という文字の下に
３つの静止画像が表示されており、コンテンツ表示者は
所望のコンテンツに対応した静止画像を、マウス等を用
いて指定する。すると、コンテンツ表示者の選択に関す
る情報がコンテンツ提供者のサーバ装置１０に送信され
る。以降の動作に関しては３通り（方法Ａ，Ｂ，Ｃ）あ
り、以下にてそれぞれについて述べる。

【００６０】方法Ａにおいては、コンテンツ提供者のサ
ーバ装置１０はPLUS3Dファイルexample.plus3d、artis
t.3dv、logo.gif、bgm.wavをコンテンツ表示者に送信す
る。example.plus3d、artist.3dv、logo.gif、bgm.wav
がコンテンツ表示者側で受信されると、これらのファイ
ルはコンテンツ再生手段４０−１に入力されて前記の種
々の処理が施される（図２３、図２５）。最後に、プレ
ゼンテーション手段５０−３によってコンテンツ提示者
はコンテンツを鑑賞できる。コンテンツが蓄積媒体とし
て配布された場合には、蓄積媒体からPLUS3Dファイルを
読み込んで同様に処理する（図２４、図２６）。

【００６１】一方、方法Ｂにおいては、コンテンツ提供
者のサーバ装置１０はPLUS3Dファイルexample.plus3dの
みをコンテンツ表示者に送信する。コンテンツ表示者が
example.plus3dを受信すると、このファイルはコンテン
ツ再生手段５０−３に入力され、このコンテンツに含ま
れるマルチメディア情報のＵＲＬが探索される。図３で
はＵＲＬは相対ＵＲＬとして記述されており、artist.3
dv、logo.gif、bgm.wavがそれにあたる。次に、artist.
3dv、logo.gif、bgm.wavのＵＲＬを指定した情報がコン
テンツ提供者に送信される。これを受信したコンテンツ
提供者のサーバ装置１０はartist.3dv、logo.gif、bgm.
wavをコンテンツ表示者に送信する。すると、コンテン
ツを構成する全てのファイルが揃うため、方法Ａと同様
の方法でプレゼンテーション手段５０−３によりコンテ
ンツの鑑賞ができる（図２７）。コンテンツが蓄積媒体
として配布された場合には、蓄積媒体からPLUS3Dファイ
ルを読み込んで同様にアクセスと読み込みの処理をする
（図２８）。

【００６２】最後に方法Ｃについて述べる。まず、方法
Ｂと同様に、コンテンツ提供者のサーバ装置１０はPLUS
3Dファイルexample.plus3dをコンテンツ表示者に送信さ
れてコンテンツ表示者はartist.3dv、logo.gif、bgm.wa
vをコンテンツ提供者に要求するが、これらのファイル
はコンテンツの再生中の必要なときに要求される。具体
的には、本実施形態例のコンテンツではartist.3dvが最
初にディスプレイに表示されため、まずartist.3dvのＵ
ＲＬを指定した情報がコンテンツ提供者に送信され、こ
の情報を受け取ったコンテンツ提供者がartist.3dvをコ
ンテンツ表示者に送信する。artist.3dvをコンテンツ提
供者が受信すると、example.plus3dにおいて記述された
マルチメディア統合情報に従って２次元動画像が生成さ
れ、ディスプレイに図２の（ａ）のように表示される。
一方、logo.gifがディスプレイに表示され、bgm.wavが
再生される時刻が近づくと、コンテンツ表示者のコンテ
ンツ再生手段５０−１がlogo.gif、bgm.wavのＵＲＬを
指定した情報を送信し、これらのファイルを要求する。
コンテンツ提供者は、この情報を受信するとlogo.gifと
bgm.wavを送信し、これを受信したコンテンツ提供者側
ではコンテンツ再生手段５０−１がプレゼンテーション
手段５０−３のディスプレイに図２の（ｂ）の通りに画
像を表示させ、スピーカーにオーディオを出力させる
（図２７）。コンテンツが蓄積媒体として配布された場
合には、蓄積媒体からPLUS3Dファイルを読み込んで同様
にアクセスと読み込みの処理をする（図２８）。

【００６３】なお、３次元動画像データのアトリビュー
トにclipBeginとclipEndを記述した場合には以下のよう
な処理が行われる。方法Ａで、このようなマルチメディ
ア統合情報をコンテンツ表示者が受信した時には、受信
する３次元動画像データのうちclipBeginとclipEndで指
定される区間のみ表示する。方法ＢおよびＣでは、３次
元動画像データartist.3dv全体をサーバ装置１０に要求
する場合と、clipBeginとclipEndで指定される３次元動
画像データのみをサーバ装置１０に要求する場合があ
る。後者の場合は、clipBeginとclipEndで指定される３
次元動画像データのみ、あるいは３次元動画像データ全
体を受信し、clipBeginとclipEndで指定される区間のみ
表示する。

【００６４】本発明ではコンテンツ表示者の作業を簡略
化するために、３次元動画像自体をコンテンツ表示者に
提供するという方法をとっている。これは一見冗長であ
るが、従来の３次元動画像技術を用いれば受信者が視点
位置などをコンテンツ閲覧時に実時間で変更するなどが
可能であり、冗長な部分は有効に利用されうる。

【００６５】また、ネットワークを介してコンテンツが
提供されている際にコンテンツ表示者側の通信回線の帯
域が狭い場合や、コンテンツ再生手段が３次元動画像か
ら２次元動画像を生成するプログラムを備えていない場
合、コンテンツ送信時にのみ実時間でコンテンツを変換
することが考えうる。この場合、コンテンツ提供者、あ
るいは別のサービス提供者がコンテンツ変換手段を持
ち、コンテンツを構成するファイルexample.plus3d、ar
tist,3dv、logo.gif、bgm.wavはコンテンツ表示者に届
く前にコンテンツ変換手段に入力される。コンテンツ変
換手段は、example.plus3dに記述された視点位置情報と
視線方向情報をもとにartist.3dvから二つの２次元動画
像（ファイル名をartistA.mpg、artistB.mpgとする）を
生成してコンテンツ表示者に送信すると同時に、exampl
e.plus3dをartistA.mpg、artistB.mpgに対応するように
変換してexample.plus3d、artistA.mpg、artistB.mpg、
logo.gif、bgm.wavをコンテンツ表示者に送信する。こ
の方法によれば、コンテンツ表示者は２次元動画像を受
信して再生すればよい。また、コンテンツ変換は実時間
で送信時のみに行う処理なので、コンテンツ編集を行っ
た度にコンテンツ変換を施したPLUS3Dファイルとマルチ
メディア情報を作成しておく必要はない。

【００６６】プレゼンテーション手段は、ＨＴＭＬコン
テンツ表示手段からの出力とコンテンツ再生手段からの
出力を表示する。しかし、プレゼンテーション手段を複
数備え、ＨＴＭＬコンテンツ表示手段からの出力とコン
テンツ再生手段からの出力を別々に、例えば別々のディ
スプレイやウィンドウで表示することも可能である。

【００６７】なお、マルチメディア統合情報はテキスト
ではなくバイナリ化しても良い。バイナリ化には可変長
符号化や算術符号化を適用することが出来る。

【００６８】また、本実施形態例では、１つのサーバか
ら配信される例を示したが、マルチメディア情報は複数
サーバに蓄積しておいて配信する構成も可能である。ま
た動画像データについては、実時間でカメラから撮影さ
れた動画像を実時間で符号化して配信してもよい。

【００６９】また、図６のようにマルチメディア統合情
報とマルチメディア情報を同時に配信する構成では、マ
ルチメディア統合情報またはマルチメディア情報の提供
方法として、通信ではなく放送やＤＶＤ等の蓄積媒体に
よる方法も可能である。更に、マルチメディア情報とマ
ルチメディア統合情報を別々の方法で提供することも可
能である。例えばマルチメディア情報を放送で提供しマ
ルチメディア統合情報を通信で提供することも可能であ
る。この場合には、複数のコンテンツ表示者に対して、
それぞれ個別に適したレイアウトでマルチメディア情報
を表示することができる。

【００７０】本発明では、マルチメディア統合情報の編
集・修正のみで、３次元動画像コンテンツをディスプレ
イに表示するときの見え方を設定できる。すなわち、ポ
イントとしてはコンテンツ提供者がコンテンツを編集す
るときの作業を効率化できるところにある。具体例をあ
げると、例えば以下のような場面で効率化をはかること
ができる。複数の人数でコンテンツを編集している場合
（それぞれの編集者が３次元動画像データを保持してい
るとする）、それぞれの編集者の間で各人が編集したコ
ンテンツのやり取りがネットワークを介して行われると
思われる。このとき、送受信すればよいのはマルチメデ
ィア統合情報のみであり、編集を行って送信する都度２
次元動画像を生成して圧縮符号化を施すという作業や、
やりとりするデータの量の意味で効率化をはかることが
できる。

【００７１】ＳＭＩＬに代表される、従来のマルチメデ
ィア統合情報を利用したコンテンツの提供方法において
は、符号化された３次元動画像データを保有するコンテ
ンツ提供者（あるいはコンテンツ編集者）が３次元動画
像データから生成される２次元動画像を提供する場合、
次の動作を行う。コンテンツ提供者（あるいはコンテン
ツ編集者）は３次元動画像データの復号化、視点位置情
報と視線方向情報の指定を行い、２次元動画像を生成し
てそれを符号化する。コンテンツ提供者は、この符号化
された２次元動画像データとマルチメディア統合情報を
蓄積媒体、あるいはネットワークを介して提供する。す
なわち、コンテンツが提供される前に視点位置と視線方
向を変更するということを行うとすると、その都度２次
元動画像を符号化することになる。一方、本発明では、
事前に保有していた３次元動画像データとマルチメディ
ア統合情報を提供すればよく、前記の従来技術の動作に
含まれていた２次元動画像を符号化するという動作がな
くなり、コンテンツ提供者（あるいはコンテンツ編集
者）の作業量を削減できる。

【００７２】また、図６を用いて説明した実施形態例に
関し、従来の方法ではコンテンツ編集者Ａはコンテンツ
編集者Ｂにマルチメディア統合情報と２次元動画像デー
タを送信しなければならなかった。一般的には二人以上
のコンテンツ編集者の各々が編集したコンテンツを幾度
も送受信し合うことが考えられるため、そのたびに各々
のコンテンツ編集者は２次元動画像を符号化して送信す
る必要があった。一方、本発明によればコンテンツ編集
者はマルチメディア統合情報のみを送受信すればよいの
で、各々のコンテンツ編集者が２次元動画像を符号化し
て送信するという動作を必要としない。

【００７３】なお、図１、図６〜図８で示したコンテン
ツの提供装置やコンテンツの表示端末における各部の一
部もしくは全部の機能をコンピュータのプログラムで構
成し、そのプログラムをコンピュータを用いて実行して
本発明を実現することができること、あるいは、図１１
〜図３０で示したコンテンツの提供方法やコンテンツの
表示方法における処理手順をコンピュータのプログラム
で構成し、そのプログラムをコンピュータに実行させる
ことができることは言うまでもなく、コンピュータでそ
の機能を実現するためのプログラム、あるいは、コンピ
ュータにその処理手順を実行させるためのプログラム
を、そのコンピュータが読み取り可能な記録媒体、例え
ば、ＦＤ（フロッピーディスク（登録商標））や、Ｍ
Ｏ、ＲＯＭ、メモリカード、ＣＤ、ＤＶＤ、リムーバブ
ルディスクなどに記録して、保存したり、配布したりす
ることが可能である。また、上記のプログラムをインタ
ーネットや電子メールなど、ネットワークを通して提供
することも可能である。

【００７４】

【発明の効果】本発明によればマルチメディア統合情報
を３次元動画像データと共に提供することが可能となる
ため、コンテンツ提供者は、３次元動画像データから２
次元動画像を生成する際の視点位置や視線方向の修正
で、マルチメディア統合情報の編集を行えはよく、２次
元動画像を生成し３次元動画像データを再符号化する作
業は必要ない。従って、コンテンツ提供者が３次元動画
像データを編集する際の作業の効率化を図ることができ
る。

【図面の簡単な説明】

【図１】コンテンツ編集時の構成Ａにおけるコンテンツ
提供者の構成を示す図である。

【図２】（ａ），（ｂ）は、ディスプレイにおいてのコ
ンテンツ表示例を示す図である。

【図３】ＳＭＩＬファイルの記述例を示す図である。

【図４】視点位置と視線方向情報の一定義例における概
念図である。

【図５】ＳＭＩＬファイルの他の記述例を示す図であ
る。

【図６】コンテンツ編集時の構成Ｂにおけるコンテンツ
提供者の構成を示す図である。

【図７】コンテンツ提供者がコンテンツをコンテンツ表
示者に提供する際の一方法（方法Ａ）においての全体構
成図である。

【図８】コンテンツ提供者がコンテンツをコンテンツ表
示者に提供する際の一方法（方法Ｂ，Ｃ）においての全
体構成図である。

【図９】コンテンツ表示者のディスプレイに表示される
ＨＴＭＬコンテンツの一例を示す図である。

【図１０】本発明の通信によるコンテンツ提供方法の基
本的な実施形態例を示すフローチャートである。

【図１１】本発明の蓄積媒体によるコンテンツ提供方法
の基本的な実施形態例を示すフローチャートである。

【図１２】本発明の通信によるコンテンツ提供方法の具
体的な実施形態例を示すフローチャートである。

【図１３】本発明の蓄積媒体によるコンテンツ提供方法
の具体的な実施形態例を示すフローチャートである。

【図１４】図１２、図１３の２次元動画像の生成、表示
過程の詳細手順を示すフローチャートである。

【図１５】本発明の通信によるコンテンツ提供方法で表
示位置情報を追加した場合の基本的な実施形態例を示す
フローチャートである。

【図１６】本発明の蓄積媒体によるコンテンツ提供方法
で表示位置情報を追加した場合の基本的な実施形態例を
示すフローチャートである。

【図１７】本発明の通信によるコンテンツ提供方法で表
示位置情報を追加した場合の具体的な実施形態例を示す
フローチャートである。

【図１８】本発明の蓄積媒体によるコンテンツ提供方法
で表示位置情報を追加した場合の具体的な実施形態例を
示すフローチャートである。

【図１９】図１７、図１８の２次元動画像の生成、表示
過程の詳細手順（オプション１）を示すフローチャート
である。

【図２０】図１９の２次元動画像の生成、表示過程の詳
細手順を示すフローチャートである。

【図２１】図１７、図１８の２次元動画像の生成、表示
過程の詳細手順（オプション２）を示すフローチャート
である。

【図２２】図２１の２次元動画像の生成、表示過程の詳
細手順を示すフローチャートである。

【図２３】本発明の通信によるコンテンツ表示方法Ａの
実施形態例を示すフローチャートである。

【図２４】本発明の蓄積媒体によるコンテンツ表示方法
Ａの実施形態例を示すフローチャートである。

【図２５】本発明の通信によるコンテンツ表示方法Ａで
表示位置情報を追加した場合の実施形態例を示すフロー
チャートである。

【図２６】本発明の蓄積媒体によるコンテンツ表示方法
Ａで表示位置情報を追加した場合の実施形態例を示すフ
ローチャートである。

【図２７】本発明の通信によるコンテンツ提供方法Ｂ，
Ｃの実施形態例を示すフローチャートである。

【図２８】本発明の蓄積媒体によるコンテンツ提供方法
でＢ，Ｃで表示位置情報を追加した場合の実施形態例を
示すフローチャートである。

【図２９】図２５、図２６の２次元動画像の生成、表示
過程の詳細手順を示すフローチャートである。

【図３０】図２７、図２８の２次元動画像の生成、表示
過程の詳細手順を示すフローチャートである。

【符号の説明】

１０…コンテンツ提供者のサーバ装置 １０−１…マルチメディア情報記憶手段 １０−２…マルチメディア統合情報記憶手段 １０−３…ＨＴＭＬ文書記憶手段 ２０…コンテンツ提供者の端末 ２０−１…マルチメディア統合情報編集手段 ２０−２…コンテンツ再生手段 ２０−３…プレゼンテーション手段 ３０…コンテンツ編集者Ａの端末 ３０−１…マルチメディア統合情報編集手段 ３０−２…コンテンツ再生手段 ３０−３…プレゼンテーション手段 ３０−４…マルチメディア統合情報記憶手段 ４０…コンテンツ編集者Ｂの端末 ４０−１…マルチメディア統合情報編集手段 ４０−２…コンテンツ再生手段 ４０−３…プレゼンテーション手段 ４０−４…マルチメディア統合情報記憶手段 ５０…コンテンツ表示者の端末 ５０−１…コンテンツ再生手段 ５０−２…ＨＴＭＬコンテンツ表示手段 ５０−３…プレゼンテーション手段

───────────────────────────────────────────────────── フロントページの続き (72)発明者 八島 由幸 東京都千代田区大手町二丁目３番１号 日 本電信電話株式会社内 (72)発明者 小林 直樹 東京都千代田区大手町二丁目３番１号 日 本電信電話株式会社内 Ｆターム(参考） 5B050 BA06 CA07 CA08 DA01 EA27 FA02 FA10 FA13 5C023 AA10 BA11 BA15 5C064 BA01 BC16 BC23 BD02 BD09 BD14

Claims (20)

【特許請求の範囲】
1. 【請求項１】 ３次元動画像データを有するコンテンツ
   提供者の編集用端末で、３次元動画像データが多視点動
   画像、全方位動画像、あるいはその他の３次元動画像フ
   ォーマットの中で、どれに該当するかを表す３次元動画
   像フォーマット情報を指定し、３次元動画像データを２
   次元投影面に投影するために利用される視点位置情報を
   指定し、３次元動画像データを２次元投影面に投影する
   ために利用される視線方向情報を指定するマルチメディ
   ア統合情報を編集する手順と、 コンテンツ提供者のサーバ装置が、該３次元動画像デー
   タと共に該編集されたマルチメディア統合情報をコンテ
   ンツ表示者の端末に提供する手順とを有することを特徴
   とする３次元動画像データの提供方法。
2. 【請求項２】 マルチメディア統合情報を編集する手順
   では、 マルチメディア統合情報として、３次元動画像データを
   ２次元投影面に投影し表示する表示開始時刻情報または
   表示位置情報を指定することを特徴とする請求項１に記
   載の３次元動画像データの提供方法。
3. 【請求項３】 マルチメディア統合情報を編集する手順
   では、 同一３次元動画像データに対して、複数のマルチメディ
   ア統合情報によって複数の視点位置情報と視線方向情報
   を指定することを特徴とする請求項１または請求項２に
   記載の３次元動画像データの提供方法。
4. 【請求項４】 マルチメディア統合情報を編集する手順
   では、 マルチメディア統合情報として、表示開始時刻と表示開
   始時刻における視点位置情報と視線方向情報と、終了時
   刻と終了時刻における視点位置情報と視線方向情報と、
   表示開始時刻と終了時刻の間の任意の時刻における視点
   位置情報と視線方向情報を求める補間方法を指定するこ
   とを特徴とする請求項１から請求項３のいずれかに記載
   の３次元動画像データの提供方法。
5. 【請求項５】 マルチメディア統合情報を編集する手順
   では、 マルチメディア統合情報をテキストで記述することを特
   徴とする請求項１から請求項４のいずれかに記載の３次
   元動画像データの提供方法。
6. 【請求項６】 マルチメディア統合情報を編集する手順
   では、 編集用端末が、他の編集用端末との間で、マルチメディ
   ア統合情報を送受信してマルチメディア情報を編集する
   ことを特徴とする請求項１から請求項５のいずれかに記
   載の３次元動画像の提供方法。
7. 【請求項７】 マルチメディア統合情報をコンテンツ表
   示者の端末に提供する手順では、コンテンツ提供者のサ
   ーバ装置が、３次元動画像データとマルチメディア統合
   情報をコンテンツ表示者の端末に通信手段で送信するか
   または蓄積媒体で配布するかして提供することを特徴と
   する請求項１から請求項６のいずれかに記載の３次元動
   画像データの提供方法。
8. 【請求項８】 マルチメディア統合情報をコンテンツ表
   示者の端末に提供する手順では、 コンテンツ提供者のサーバ装置が、３次元動画像データ
   を指定するＩＤ情報を有するマルチメディア統合情報を
   コンテンツ表示者の端末に通信手段で送信するかまたは
   蓄積媒体で配布するかして提供する手順と、 該コンテンツ表示者の端末が、該ＩＤ情報に対応した３
   次元動画像データを該コンテンツ提供者のサーバ装置に
   通信手段で要求するかまたは該蓄積媒体にアクセスした
   場合、コンテンツ提供者のサーバ装置が、該要求された
   ＩＤ情報に対応した３次元動画像データを送信するかま
   たは該アクセスされた蓄積媒体が提供する手順とを有す
   ることを特徴とする請求項１から請求項６のいずれかに
   記載の３次元動画像データの提供方法。
9. 【請求項９】 コンテンツ表示者の端末が、 コンテンツ提供者のサーバ装置またはコンテンツ提供者
   から提供された蓄積媒体からマルチメディア統合情報と
   ３次元動画像データを取得する手順と、 該マルチメディア統合情報で指定される３次元動画像フ
   ォーマット情報に基づいて３次元動画像データを復号す
   る手順と、 該復号された３次元動画像データから該マルチメディア
   統合情報で指定される視点位置情報と視線方向情報また
   は視点位置情報と視線方向情報と表示開始時刻情報もし
   くは表示位置情報に基づいて２次元動画像を生成する手
   順と、 該生成された２次元動画像をディスプレイに表示する手
   順とを有することを特徴とする３次元動画像データの表
   示方法。
10. 【請求項１０】 コンテンツ表示者の端末が、 コンテンツ提供者のサーバ装置またはコンテンツ提供者
    から提供された蓄積媒体からマルチメディア統合情報と
    ３次元動画像データを取得する手順と、 該マルチメディア統合情報で指定される３次元動画像フ
    ォーマット情報に基づいて３次元動画像データを復号す
    る手順と、 該マルチメディア統合情報で指定される表示開始時刻と
    終了時刻、それらの時刻における視点位置情報と視線方
    向情報、および補間方法情報に基づいて、視点位置情報
    と視線方向情報の補間値を求める手順と、 該復号された３次元動画像データから該視点位置情報と
    視線方向情報とその補間値に基づいて２次元動画像を生
    成する手順と、 該生成された２次元動画像をディスプレイに表示する手
    順とを有することを特徴とする３次元動画像データの表
    示方法。
11. 【請求項１１】 マルチメディア統合情報と３次元動画
    像データを取得する手順では、 コンテンツ提供者のサーバ装置から、３次元動画像デー
    タを指定するＩＤ情報を有するマルチメディア統合情報
    を通信手段で受信するかまたは蓄積媒体で提供を受ける
    かして取得する手順と、 該ＩＤ情報に対応した３次元動画像データを該コンテン
    ツ提供者のサーバ装置に通信手段で要求するかまたは該
    蓄積媒体にアクセスする手順と、 コンテンツ提供者のサーバ装置から、該要求したＩＤ情
    報に対応した３次元動画像データを受信して取得するか
    または該アクセスした蓄積媒体から取得する手順とを有
    することを特徴とする請求項９または請求項１０に記載
    の３次元動画像データの表示方法。
12. 【請求項１２】 マルチメディア情報、およびこのマル
    チメディア情報に関する３次元動画像データが多視点動
    画像、全方位動画像、あるいはその他の３次元動画像フ
    ォーマットの中でどれに該当するかを表す３次元動画像
    フォーマット情報を指定し、３次元動画像データを２次
    元投影面に投影するために利用される視点位置情報を指
    定し、３次元動画像データを２次元投影面に投影するた
    めに利用される視線方向情報を指定するマルチメディア
    統合情報を記憶し、表示者の端末に提供するサーバ装置
    と、 該マルチメディア情報に関するマルチメディア統合情報
    を編集する編集手段、および該編集されたマルチメディ
    ア統合情報に基づいて該マルチメディア情報を生成し表
    示する再生、表示手段を有する編集用端末とを備えるこ
    とを特徴とする３次元動画像データの提供装置。
13. 【請求項１３】 複数の編集用端末を備え、 該編集用端末は他の編集用端末との間でマルチメディア
    統合情報を送受信してマルチメディア情報を編集するも
    のであることを特徴とする請求項１２に記載の３次元動
    画像データの提供装置。
14. 【請求項１４】 コンテンツ提供者のサーバ装置から３
    次元動画像データとマルチメディア統合情報を取得し、
    該マルチメディア統合情報で指定される３次元動画像フ
    ォーマット情報と視点位置情報と視線方向情報または３
    次元動画像フォーマット情報と視点位置情報と視線方向
    情報と表示開始時刻情報もしくは表示位置情報とを取得
    し、該３次元動画像フォーマット情報に基づいて３次元
    動画像データを復号し、該視点位置情報と視線方向情報
    または該視点位置情報と視線方向情報と表示開始時刻情
    報もしくは表示位置情報に基づいて２次元動画像を生成
    する再生手段と、 該生成された２次元動画像をディスプレイに表示するプ
    レゼンテーション手段とを備えることを特徴とする３次
    元動画像データの表示端末。
15. 【請求項１５】 コンテンツ提供者のサーバ装置から３
    次元動画像データとマルチメディア統合情報を取得し、
    該マルチメディア統合情報で指定される該３次元動画像
    フォーマット情報、表示開始時刻と終了時刻、それらの
    時刻における視点位置情報と視線方向情報、および補間
    方法情報を取得し、該３次元動画像フォーマット情報に
    基づいて３次元動画像データを復号し、該表示開始時刻
    と終了時刻、それらの時刻における視点位置情報と視線
    方向情報、および補間方法情に基づいて視点位置情報と
    視線方向情報の補間値を求め、該視点位置情報と視線方
    向情報の補間値に基づいて２次元動画像を生成する再生
    手段と、 該生成された２次元動画像をディスプレイに表示するプ
    レゼンテーション手段とを備えることを特徴とする３次
    元動画像データの表示端末。
16. 【請求項１６】 ２次元動画像を生成する再生手段が、 マルチメディア統合情報と３次元動画像データを取得す
    るのに際して、コンテンツ提供者のサーバ装置から、３
    次元動画像データを指定するＩＤ情報を有するマルチメ
    ディア統合情報を通信手段で受信するかまたは蓄積媒体
    で提供を受けるかして取得し、該ＩＤ情報に対応した３
    次元動画像データを該コンテンツ提供者のサーバ装置に
    通信手段で要求するかまたは該蓄積媒体にアクセスし、
    コンテンツ提供者のサーバ装置から、該要求したＩＤ情
    報に対応した３次元動画像データを受信して取得するか
    または該アクセスした蓄積媒体から取得するものである
    ことを特徴とする請求項１４または請求項１５に記載の
    ３次元動画像データの表示端末。
17. 【請求項１７】 請求項１から請求項８のいずれかに記
    載の３次元動画像データの提供方法における手順を、コ
    ンピュータに実行させるためのプログラムとしたことを
    特徴とする３次元動画像データの提供方法の実行プログ
    ラム。
18. 【請求項１８】 請求項９から請求項１１のいずれかに
    記載の３次元動画像データの表示方法における手順を、
    コンピュータに実行させるためのプログラムとしたこと
    を特徴とする３次元動画像データの表示方法の実行プロ
    グラム。
19. 【請求項１９】 請求項１から請求項８のいずれかに記
    載の３次元動画像データの提供方法における手順を、コ
    ンピュータに実行させるためのプログラムとし、 該プログラムを、該コンピュータが読み取りできる記録
    媒体に記録したことを特徴とする３次元動画像データの
    提供方法の実行プログラムを記録した記録媒体。
20. 【請求項２０】 請求項９から請求項１１のいずれかに
    記載の３次元動画像データの表示方法における手順を、
    コンピュータに実行させるためのプログラムとし、 該プログラムを、該コンピュータが読み取りできる記録
    媒体に記録したことを特徴とする３次元動画像データの
    表示方法の実行プログラムを記録した記録媒体。