JP2011223076A - 双魚眼方式全方位パノラマ動画ライブ配信システム - Google Patents

Abstract

【課題】水平画角３６０度・垂直画角１８０度の全方位パノラマ動画を簡便にライブ配信し、実時間で閲覧するための技術が存在しないという点。
【解決手段】既存のクロス・プラットフォーム・ライブ動画配信システムを基礎にして、双魚眼全方位パノラマレンズを利用して撮影された水平画角３６０度・垂直画角１８０度の全方位パノラマ動画、すなわち図２−１のような双魚眼状の画像形式を持つ動画をライブ配信し、かつ、図１−８のような閲覧用クライアント上で、その双魚眼状の画像形式を持つ動画を、実時間で、通常の遠近法、ないしは正射影法（オーソゴナル・ビュー）、あるいは立体射影法（ステレオグラフィック・ビュー）などに変換して、閲覧する。
【選択図】図１

Description

本発明は、水平画角３６０度・垂直画角１８０度の全方位パノラマ動画をインターネット経由で簡便にライブ配信するためのシステムに関するものである。

現在、水平画角３６０度・垂直画角１８０度の全方位パノラマ動画をインターネット経由で簡便にライブ配信し、リアルタイムで閲覧するための実用的かつ簡便なシステムは存在しない。一般的なライブ動画を撮影する技術、撮影された画像をインターネット配信に適したフォーマットに圧縮する技術、圧縮された画像をサーバーに送信する技術、その画像をサーバーから閲覧用クライアントにストリーミング方式で配信する技術、閲覧用クライアントに配信された圧縮画像を伸張する技術、伸張された画像を閲覧用クライアント上で閲覧するためのソフトウェアに関する技術などはすでに確立され実用化されている。
一方、水平画角３６０度・垂直画角１８０度の全方位パノラマ動画をインターネット経由で簡便にライブ配信するには、上記の技術に加えて、全方位パノラマ動画をリアルタイムで簡便に撮影するための技術と、閲覧用クライアント上で伸張された全方位パノラマ動画をリアルタイムで簡便に閲覧できるようにするための技術が必要となる。

平成15年度・放送文化基金研究報告・奈良先端大・全方位ビデオ映像のネットワーク配信による実時間テレプレゼンスに関する研究

本発明が解決しようとする課題は、全方位パノラマ動画を簡便にリアルタイムで撮影するための技術、ならびに閲覧用クライアント上で伸張された全方位パノラマ動画をリアルタイムで簡便に閲覧できるようにするための技術が存在しないという点である。

本発明は、水平画角３６０度・垂直画角１８０度の静止画パノラマや動画パノラマを撮影するための装置として発明された双魚眼全方位パノラマレンズを、全方位パノラマ動画のライブ撮影用として利用すること、ならびに、双魚眼全方位パノラマレンズで撮影され、最終的に閲覧用クライアントで伸張されるライブ・パノラマ動画を実時間で通常の遠近射影法の画像（レクティリニア・ビュー、ないしはパースペクティブ・ビュー）、正射影法（オーソゴナル・ビュー）、ならびに立体射影法（ステレオグラフィック・ビュー）などに簡便に変換し閲覧できるようにするための技術を提供することを最も主要な特徴とする。第二の特徴は、ストリーミング・サーバーを介して全方位パノラマ動画のライブ配信を行うため、ＩＰアドレスに左右されない柔軟性のある配信と閲覧が可能になる点である。第三の特徴は、画像撮影、画像圧縮、送信、配信、画像伸張、射影変換、ならびに閲覧といった機能を実現するソフトウェアを、すべてクロス・プラットフォーム、すなわち一般的に利用されている主要オペレーティング・システム・プラットフォームの違いに左右されない単一のコードによって実現できる点である。

本発明には、スポーツやコンサートなどのエンターテインメントの模様を水平画角３６０度・垂直画角１８０度のパノラマ動画としてライブ配信し、実時間で閲覧する、あるいは家庭、商店、公共施設などに配置して極めて簡便かつ柔軟性のあるセキュリティ・システムとして利用する等々、多様な適用業務が存在する。インターネット回線を利用するため、地球上のいたるところからの配信、閲覧が可能であり、その適用範囲と拡張性は無限である。

ＩＰアドレスに左右されない柔軟性のある配信と閲覧が可能であり、かつ一般的に利用されている主要オペレーティング・システム・プラットフォームの違いに左右されない単一のコードによって実現できるという特徴を持つ、水平画角３６０度・垂直画角１８０度の全方位パノラマ動画をインターネット経由で簡便にライブ配信ならびに閲覧するためのシステムを、最小限のシステム構成によって実現した。

図１は水平画角360度・垂直画角１８０度のパノラマ動画ライブ配信システムの構成ならびに実施方法を示した説明図である（実施例１）。 図２は水平画角360度・垂直画角１８０度のパノラマ動画ライブ配信システムを構成する動画撮影装置（図１−２）で撮影された動画の一例を示した説明図である。 図３は水平画角360度・垂直画角１８０度のパノラマ動画ライブ配信システムを構成する画像表示機構（図１−１１)で表示された動画の一例を示した説明図である。

図１は、本発明システムの一つの実施例を示す、システム構成図である。

図１−１の双魚眼全方位パノラマレンズによって集光された、水平画角３６０度・垂直画角１８０度の景観は、図１−２の動画撮影装置によって撮影され、図２−１のような画像の動画として、図１−３のパノラマ動画撮影用クライアントに渡される。

動画撮影用クライアント内部では、図１−４の画像圧縮機構を使用して、受け取った画像をインターネット回線経由での伝送に適したフォーマットに変換する。

フォーマット変換後の動画は、図１−５の画像送信機構を使い、インターネット回線経由で図１−７の水平画角360度・垂直画角１８０度のライブ・パノラマ動画配信用ストリーミング・サーバー宛てに送信される。

図１−７のストリーミング・サーバーは、図２−１のような画像形式の圧縮動画を受取り、この画像をインターネット回線を介して、直接ないしは、通常のＷｅｂサーバーを介して、図１−８のパノラマ動画閲覧用クライアントに向けて配信する。

図１−８のパノラマ動画閲覧用クライアント内部では、図１−９の画像受信・伸張機構が、図２−１のような画像形式の圧縮動画を受取り、伸長した後、図２−１のような画像形式の非圧縮動画として一時的に保存する。

図２−１のような画像形式の非圧縮動画として一時的に保存された動画は、図１−１０の射影変換機構によって、実時間で、図３−１に示すような通常の遠近射影法の画像（レクティリニア・ビュー、ないしはパースペクティブ・ビューとも呼ばれる）、あるいはユーザーの指定に応じて正射影法（オーソゴナル・ビュー）、あるいは立体射影法（ステレオグラフィック・ビュー）などに変換される。

図３−１に示すような通常の遠近法に射影変換された動画、ないしは正射影法（オーソゴナル・ビュー）、あるいは立体射影法（ステレオグラフィック・ビュー）などに変換された動画は、図１−１１の画像表示機構によってユーザーの視覚に到達できる画像として表示される。

本発明には、スポーツやコンサートなどのエンターテインメントの模様を水平画角３６０度・垂直画角１８０度のパノラマ動画としてライブ配信し、実時間で閲覧する、あるいは家庭、商店、公共施設などに配置して極めて簡便かつ柔軟性のなるセキュリティ・システムとして利用する等々、多様な適用業務が存在する。インターネット回線を利用するため、地球上のいたるところからの配信、閲覧が可能であり、その産業上の利用範囲とその可能性は無限である。

図１−１ 双魚眼全方位パノラマレンズ
図１−２ 動画撮影装置
図１−３ パノラマ動画撮影用クライアント
図１−４ 画像圧縮機構
図１−５ 画像送信機構
図１−６ インターネット回線
図１−７ 水平画角３６０度・垂直画角１８０度パノラマ動画ライブ配信用ストリーミング・サーバー
図１−８ パノラマ動画閲覧用クライアント
図１−９ 画像受信・伸張機構
図１−１０ 射影変換機構
図１−１１ 画像表示機構
図２−１ 動画撮影装置（図１−２）で撮影された動画の一例
図３−１ 画像表示機構（図１−１１)で表示された動画の一例

Claims (1)

1. クロス・プラットフォームのライブ動画配信システムを基礎にして、双魚眼全方位パノラマレンズを利用して撮影された水平画角３６０度・垂直画角１８０度のライブ・パノラマ動画、すなわち図２−１のような双魚眼状の画像形式を持つ動画を配信し、かつ、図１−８のような閲覧用クライアント上で、その双魚眼状の画像形式を持つ動画を、実時間で、通常の遠近法、ないしは正射影法（オーソゴナル・ビュー）、あるいは立体射影法（ステレオグラフィック・ビュー）などに変換して、閲覧するシステム。