JP2020501391A - 仮想現実４ｄコンテンツ上映システム及びその方法 - Google Patents

Abstract

本発明は、仮想現実４Ｄコンテンツ上映システム及びその方法に関し、コンテンツまたは効果制御信号を提供する映像サーバと、前記コンテンツを表示するＨＭＤ（頭装着型ディスプレイ、Ｈｅａｄ−Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）装置と、前記効果制御信号により、前記コンテンツと同期化した効果を発生する４Ｄ装置と、を備える。

Description

本発明は、仮想現実４Ｄ（４次元）コンテンツ上映システム及びその方法に係り、さらに詳しくは、上映館におけるコンテンツの上映時、そのコンテンツに似合う４Ｄ効果と仮想現実効果を提供する仮想現実４Ｄコンテンツ上映システム及びその方法に関する。

劇場や映画館などの映像の上映施設において、従来は、観客に映像のみを上映していたが、最近では、映像の上映とともに様々な効果を観客に提供している。

一般的な映像を上映する映画館が２Ｄ（２次元）映画館であり、観客が映像を鑑賞するときに立体感を感じるように特殊に撮影された映像を上映する映画館が３Ｄ（３次元）映画館であるとすれば、視聴覚に加えて、触覚、嗅覚などを刺激して五感により感じながら映像を鑑賞可能な映画館が４Ｄ映画館である。

４Ｄ映画館においては、観客が着座した椅子を動かすモーションベースが椅子の下に設けられており、観客に様々な効果を提供する特殊効果装置が椅子及び映画館の内壁（または天井など）に設けられている。

観客は、椅子に着座して映画を鑑賞するとき、単に映像のみを見るわけではなく、映像と同期化したモーションと、水、風、煙、閃光、熱、香りなどの効果を自ら体感しながら映像への興味及び没入感を高めることができる。このように、観客の興味を増加させるために、劇場は、４Ｄ映画館に設置されたモーションチェアと特殊効果装置を用いて五感による体験を提供している。

しかしながら、４Ｄ映画館において上映する映像は、実際のような距離感のみが感じられるように製作されたものであり、立体感は感じられるが、仮想現実を現実のように感じるのには限界があった。

韓国公開特許第２０１６−００８２４９３号公報（２０１６．０７．０８．公開）

本発明は、上映館におけるコンテンツの上映時、そのコンテンツに似合う４Ｄ効果と仮想現実効果を提供する仮想現実４Ｄコンテンツ上映システム及びその方法を提供することを目的とする。

本発明は、モバイル機器を用いて上映すべきコンテンツを受信し、そのコンテンツをＨＭＤ（頭装着型ディスプレイ、Ｈｅａｄ−Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）装置から見られる仮想現実４Ｄコンテンツ上映システム及びその方法を提供することを他の目的とする。

本発明は、観客が着用したＨＭＤ装置の焦点を自動的に設定可能な仮想現実４Ｄコンテンツ上映システム及びその方法を提供することをまた他の目的とする。

一方、本発明が解決しようとする技術的課題は、上述した技術的課題に制限されず、以降の記載から通常の技術者に明確に理解される範囲内で様々な技術的課題が含まれ得る。

上述した課題を解決するための本発明の一側面によれば、コンテンツまたは効果制御信号を提供する映像サーバと、前記コンテンツを表示するＨＭＤ装置と、前記効果制御信号により、前記コンテンツと同期化した効果を発生する４Ｄ装置と、を備える仮想現実４Ｄコンテンツ上映システムが提供される。

前記映像サーバは、ＨＭＤ装置着用メッセージを出力し、既設定された一定時間の後、焦点調節告知映像を提供してＨＭＤ装置の焦点を設定することができる。

前記仮想現実４Ｄコンテンツ上映システムは、有線または無線通信を介して前記ＨＭＤ装置と連結され、前記映像サーバからコンテンツを受信するモバイル機器をさらに備え、前記ＨＭＤ装置は、前記モバイル機器からコンテンツを受信して表示することができる。

前記ＨＭＤ装置は、コンテンツ再生時間情報をリアルタイムで前記映像サーバに送信し、前記映像サーバは、前記時間情報を用いて前記４Ｄ装置との通信を介して同期化を行うことができる。

前記４Ｄ装置は、前記効果制御信号により、チクラー（ｔｉｃｋｌｅｒ）、振動、エアーショット、ウォーターショット、香りショット、ヒーターショットのうちのいずれか一つ以上の効果を実現する４Ｄチェアであってもよい。

また、前記４Ｄ装置は、上映館内に設けられ、前記効果制御信号により、雪、雨、風、露、霧、暴雨、稲光、香り、光のうちの少なくとも一つの効果を実現する４Ｄ効果装置であってもよい。

前記仮想現実４Ｄコンテンツ上映システムは、各上映館に設けられた映像サーバを制御するセントラルサーバをさらに備え、前記映像サーバは、前記セントラルサーバに新規コンテンツが存在する場合、新規コンテンツをアップデートすることができる。

前記ＨＭＤ装置は、コンテンツの表示時、仮想現実効果を提供することができる。

本発明の他の側面によれば、現在上映すべきコンテンツをＨＭＤ装置またはＨＭＤ装置と連結されたモバイル機器に送信するコンテンツサービス部と、前記ＨＭＤ装置からコンテンツ再生による時間情報を受信し、前記時間情報に基づいて４Ｄ装置との同期化を行い、当該時間に発生すべき効果に対する制御信号を当該４Ｄ装置に送信する効果制御部と、を備える映像サーバが提供される。

前記コンテンツサービス部は、セントラルサーバに新規コンテンツが存在する場合、新規コンテンツをアップデートすることができる。

前記映像サーバは、ＨＭＤ装置着用メッセージを出力し、既設定された一定時間の後、焦点調節告知映像を提供してＨＭＤ装置の焦点を設定するＨＭＤ装置焦点設定部をさらに備えてもよい。

本発明のまた他の側面によれば、コンテンツを受信する通信部と、前記受信されたコンテンツを表示するディスプレイ部と、前記コンテンツを前記ディスプレイ部に表示されるように制御する制御部と、を備えるＨＭＤ装置が提供される。

前記ＨＭＤ装置は、前記コンテンツが前記ディスプレイ部に表示されるように焦点を調節する焦点調節スイッチをさらに備えてもよい。

前記制御部は、コンテンツ再生による時間情報を映像サーバに送信することができる。

本発明のまた他の側面によれば、（ａ）映像サーバは、現在上映すべきコンテンツをＨＭＤ装置に送信する段階と、（ｂ）前記ＨＭＤ装置は、前記コンテンツを表示し、コンテンツ再生による時間情報を前記映像サーバに送信する段階と、（ｃ）前記映像サーバは、前記時間情報を用いて４Ｄ装置との同期化を行い、当該時間に発生すべき効果制御信号を当該４Ｄ装置に送信する段階と、（ｄ）前記４Ｄ装置は、前記効果制御信号により、前記コンテンツと同期化した効果を発生する段階と、を含む仮想現実４Ｄコンテンツ上映方法が提供される。

前記仮想現実４Ｄコンテンツ上映方法は、前記（ａ）段階以前に、前記映像サーバは、ＨＭＤ装置着用メッセージを出力し、既設定された一定時間の後、焦点調節告知映像を提供してＨＭＤ装置の焦点を設定する段階をさらに含んでもよい。

本発明のまた他の側面によれば、（ａ）映像サーバは、現在上映すべきコンテンツをＨＭＤ装置と連結されたモバイル機器に送信する段階と、（ｂ）前記モバイル機器は、前記コンテンツを保存し、前記映像サーバからコンテンツ再生開始信号が受信されると、前記保存されたコンテンツをＨＭＤ装置に送信する段階と、（ｃ）前記ＨＭＤ装置は、前記コンテンツを表示し、コンテンツ再生による時間情報を前記映像サーバに送信する段階と、（ｄ）前記映像サーバは、前記時間情報を用いて４Ｄ装置との同期化を行い、当該時間に発生すべき効果制御信号を当該４Ｄ装置に送信する段階と、（ｅ）前記４Ｄ装置は、前記効果制御信号により、前記コンテンツと同期化した効果を発生する段階と、を含む仮想現実４Ｄコンテンツ上映方法が提供される。

前記仮想現実４Ｄコンテンツ上映方法は、前記（ａ）段階以降、前記映像サーバは、ＨＭＤ装置着用メッセージを出力し、既設定された一定時間の後、焦点調節告知映像を提供してＨＭＤ装置の焦点を設定する段階をさらに含んでもよい。

一方、上述した前記「仮想現実４Ｄコンテンツ上映方法」は、プログラムの形態で実現されてから、電子装置が読取り可能な記録媒体に記録され、またはプログラムダウンロード管理装置（サーバなど）を介して配布されてもよい。

本発明によれば、４Ｄシステムに仮想現実技術をつなぎ合わせ、観客に仮想現実を提供し、これによるモーション及び環境効果を体感させることにより、仮想現実による視覚効果と一緒に五感を刺激し、観客にさらに大きな興味と没入感を提供することができる。

また、４Ｄシステムに仮想現実技術をつなぎ合わせることにより、観客にバーチャル広告を提供することができる。

また、これにより、チケット価格を上げ、またはさらに多くの顧客を誘致するようになり、結果として劇場の輸入増加に寄与することができる。

また、劇場運営会社は、仮想現実コンテンツを提供することにより、広告収入を増加させることができ、劇場で仮想現実映像を大衆が容易に接することにより、仮想現実コンテンツ関連製作会社の量的・質的成長が予想される。すなわち、大衆化した仮想現実技術により、広告売上及び市場が活性化され得る。

また、４Ｄ上映館において仮想現実コンテンツを提供することにより、劇場を訪問した観客にさらなる喜びを与え、特定機関や学校の場合、フィールドワークを低コストで劇場で行うことができる。例えば、小学生に火事の危険性を仮想現実で経験させ、火事が生じたとき、取るべき行動などを劇場で教育することができる。

一方、本発明の効果は、上述した効果に制限されず、以降の記載から通常の技術者に明確に理解される範囲内で様々な効果が含まれ得る。

図１は、本発明に係る仮想現実４Ｄコンテンツ上映システムを示す図である。 図２は、本発明に係るＨＭＤ装置の例示図である。 図３は、本発明に係る映像サーバの構成を概略的に示すブロック図である。 図４は、本発明に係るＨＭＤ装置の構成を概略的に示すブロック図である。 図５は、本発明の一実施形態に係る仮想現実４Ｄコンテンツ上映方法を示す図である。 図６は、本発明の他の実施形態に係る仮想現実４Ｄコンテンツ上映方法を示す図である。

本発明の上述した目的と技術的構成及びそれによる作用効果に関する詳細な事項は、本発明の明細書に添付された図面に基づく以下の詳細な説明によりさらに明確に理解される筈である。

以下、添付図面に基づき、本発明に係る「仮想現実４Ｄコンテンツ上映システム及びその方法」について詳細に説明する。説明する実施形態は、本発明の技術思想を当業者が理解し易いように提供されるものであり、これにより本発明が限定されることはない。なお、添付図面に表現した事項は、本発明の実施形態を説明し易くするために図式化したものであり、実際に実現される形態とは異なる場合がある。

一方、以下で表現する各構成要素は、本発明を実現するための一例に過ぎない。よって、本発明の他の実現においては、本発明の思想及び範囲を逸脱しない範囲内において他の構成要素が使用可能である。また、各構成要素は、単にハードウェアまたはソフトウェアの構成のみにより実現されてもよいが、同じ機能を行う様々なハードウェア及びソフトウェアの構成の組合せにより実現されてもよい。なお、一つのハードウェアまたはソフトウェアにより二つ以上の構成要素が一緒に実現されてもよい。

また、ある構成要素を「備える」という表現は「開放型」の表現であり、単に当該構成要素が存在することを指すものに過ぎず、さらなる構成要素を排除するものと理解されてはならない。

図１は、本発明に係る仮想現実４Ｄコンテンツ上映システムを示す図であり、図２は、本発明に係るＨＭＤ装置の例示図である。

図１を参照すると、仮想現実４Ｄコンテンツ上映システムは、映像サーバ１００、ＨＭＤ装置２００、４Ｄ装置３００を備え、これらは、通信網を介して連結される。ここで、通信網は、有線通信や無線通信のような通信形態を問わず構成されてもよく、近距離通信ネットワーク（ＬＡＮ；Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、都市規模ネットワーク（ＭＡＮ；Ｍｅｔｒｏｐｏｌｉｔａｎ Ａｒｅａ Ｎｅｔｗｏｒｋ）、広域ネットワーク（ＷＡＮ；Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）などの様々な通信網で構成されてもよい。

映像サーバ１００は、各上映館に設けられ、現在上映すべきコンテンツまたはコンテンツによる効果制御信号を提供する。ここで、コンテンツは、映画、広告、フィールドワークなどのように映像（イメージ）を含める情報であってもよく、効果制御信号は、チクラー、振動効果、雪、雨、風、露、霧、香り、及び光のうちのいずれか一つ以上の効果を実現させる信号であってもよい。

映像サーバ１００は、ＨＭＤ装置着用メッセージを出力し、既設定された一定時間の後、ＨＭＤ装置２００の焦点を設定する。ここで、ＨＭＤ装置着用メッセージは、ＨＭＤ装置着用を告知するメッセージであって、音声、映像などの様々な形態で出力される。ＨＭＤ装置着用メッセージを聞いたり見たりした観客は、ＨＭＤ装置２００を着用するようになる。

映像サーバ１００は、別途作製された焦点調節告知映像をコンテンツの前部に加えて、観客が着用したＨＭＤ装置２００の焦点を合わせるべき空き時間を与える。すなわち、映像サーバ１００は、焦点調節告知映像の提供後、既設定された一定時間（例えば、３〜５秒）が経過すると、観客のフォーカシングを中央にセットする作業を進行する。観客がＨＭＤ装置２００を正常に着用すればかまわないが、首を左側や右側に回した状況で、ＨＭＤ装置２００を着用したら、ＨＭＤ装置２００の方向が左側や右側に偏ることになる。この場合、ＨＭＤ装置２００を着用した観客は、正常の映像の中央が見られないので、ＨＭＤ装置２００には、別途のスイッチがあり、ユーザが手動でフォーカシングを正面にセットすることができる。

映像サーバ１００は、状況に応じて、４Ｄ装置３００の効果を制御するための効果制御信号を生成し、生成した効果制御信号を一つ以上の４Ｄ装置３００に送信する。すなわち、映像サーバ１００は、ＨＭＤ装置２００からコンテンツ再生時間情報をリアルタイムで受信し、前記時間情報を用いて、４Ｄ装置３００との通信を介して同期化を行い、当該時間に発生すべき効果制御信号を当該４Ｄ装置に送信する。

このように、映像サーバ１００は、ＨＭＤ装置の着用を告知し、観客にＨＭＤ装置２００を着用させる。その後、映像サーバ１００は、現在上映すべきコンテンツを観客が着用したＨＭＤ装置２００に提供し、仮想現実効果を実現するとともに、当該コンテンツに合う効果制御信号を４Ｄ装置３００に提供し、様々な効果を実現することができる。

ＨＭＤ装置２００は、映像サーバ１００と連結され、映像サーバ１００からコンテンツを受信して表示する。ＨＭＤ装置２００は、コンテンツの表示時、仮想現実効果を提供する。例えば、コンテンツがジェットコースターであると仮定すると、ＨＭＤ装置２００は、実際、ジェットコースターに乗る感じをＨＭＤ装置２００を着用した観客に提供する。

ＨＭＤ装置２００は、コンテンツ再生時間情報をリアルタイムで映像サーバ１００に送信する。すると、映像サーバ１００は、前記時間情報を用いて４Ｄ装置３００との同期化を行う。

ＨＭＤ装置２００は、上映館内の座席別または個人別に配置され、ＨＭＤ装置の着用が告知されると、観客がＨＭＤ装置２００を自分の頭に着用する。

このようなＨＭＤ装置２００は、例えば、通信機能及びデータ処理機能を有し、図２に示すように、ユーザの頭に着用される形態であってもよく、ユーザにより着用されたＨＭＤ装置２００は、画面上にコンテンツをディスプレイする。このとき、ＨＭＤ装置２００は、既設定された位置に既設定されたサイズによりコンテンツを表示する。また、ＨＭＤ装置２００は、眼鏡の形態を有してもよい。ＨＭＤ装置２００は、フレームなどによりユーザの頭に仮固定されてもよい。

ＨＭＤ装置２００は、その自体に中央演算処理装置（ＣＰＵ；Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）及びディスプレイを有する第１タイプと、ＨＭＤ装置２００にモバイル機器５００を取り付けて使う第２タイプとがある。第２タイプの場合、モバイル機器５００は、ＨＭＤ装置２００がコンテンツをディスプレイするように制御する役割をする。

第１タイプは、図１の（ａ）に示す構造であって、ＨＭＤ装置２００は、映像サーバ１００からコンテンツを受信して表示する。

第２タイプは、図１の（ｂ）に示す構造であって、ＨＭＤ装置２００は、有線または無線通信を介してモバイル機器５００と連結される。モバイル機器５００は、映像サーバ１００からコンテンツを受信し、ＨＭＤ装置２００は、モバイル機器５００からコンテンツを受信して表示する。

第２タイプの場合、ＨＭＤ装置２００は、モバイル機器５００及び映像サーバ１００と通信連結されてもよく、ＨＭＤ装置２００は、モバイル機器５００から送信されたコンテンツを出力するように設計される。このとき、ＨＭＤ装置２００は、モバイル機器５００からミラキャスト技術などを介してコンテンツを受信し、受信したコンテンツをディスプレイに表示する。

ＨＭＤ装置２００と連結されたモバイル機器５００は、スマートフォン、タブレット型パソコン、パソコン、スマートテレビ、携帯電話、携帯端末（ＰＡＤ；Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）、ラップトップ、メディアプレーヤー、マイクロサーバ、全地球測位システム（ＧＰＳ；Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）装置、電子書籍端末、デジタル放送用端末、ナビゲーション、キオスク、ＭＰ３プレーヤー、デジタルカメラ、及びその他のモバイルコンピューティング装置であってもよいが、これに制限されない。また、モバイル機器５００は、通信機能及びデータ処理機能を有する時計、バンドなどであってもよいが、これに制限されない。

このように、有線または無線通信を介して、モバイル機器５００及びＨＭＤ装置２００が相互接続されている。ＨＭＤ装置２００及びモバイル機器５００間のデータペアリングのために、ミラキャスト技術やＷｉＦｉダイレクト技術などが適用されてもよい。

４Ｄ装置３００は、映像サーバ１００と連結され、映像サーバ１００から送信された効果制御信号により、コンテンツと同期化した効果を発生させる。

このような４Ｄ装置３００は、コンテンツを鑑賞するとき、ユーザが着座する４Ｄチェア３１０、またはコンテンツと連動して観客に様々な効果を提供するために上映館の内壁または天井などに設けられた４Ｄ効果装置３２０を有してもよい。４Ｄチェア３１０は、コンテンツが始まると、そのコンテンツに合わせてモーション及び振動を提供し、４Ｄ効果装置３２０は、コンテンツに合わせてリアルタイムで雪、雨、風、露、霧、暴雨、稲光、香り、光などの４Ｄ効果を発生させる。

４Ｄ装置３００は、内部的に実際の特殊効果を実現する装置、すなわち、複数個の効果装置を駆動させるための機能部を含んでいるが、この機能部には、各効果装置を制御するのに必要なプログラム、すなわち、ファームウェアがインストールされている。ファームウェアとは、通常、機能部内の保存スペース、さらに具体的にはＲＯＭ（Ｒｅａｄ−Ｏｎｌｙ Ｍｅｍｏｒｙ）に記録されているものであって、４Ｄ装置３００を構成する全ての効果装置に対する制御コマンドを含める。このようなファームウェアがインストールされた機能部は、映像サーバ１００から効果制御信号を受信してからファームウェアを介して各効果装置を制御するようになる。

４Ｄ装置３００は、コンテンツの上映中、リアルタイムで映像サーバ１００と相互通信を行うためにタイムコードを同期化する。すなわち、映像サーバ１００と４Ｄ装置３００は、コンテンツの上映が始まると、相互参照する時間情報を同一に合わせるためにタイムコード同期化を行い、これにより、映像サーバ１００は、コンテンツ上映中に４Ｄ装置３００を別途に制御しようとするときや、突然エラーが発生して初期化しようとするときなどの突発変数が発生しても、４Ｄ装置３００と共有するタイムコードを参照して、適切な時刻に適切な措置を取るようになる。

一方、このように構成された仮想現実４Ｄコンテンツ上映システムは、各上映館に設けられた映像サーバ１００を制御するセントラルサーバ４００をさらに備えてもよい。

セントラルサーバ４００は、複数の映像サーバ１００を制御し、各上映館に設けられた映像サーバ１００にコンテンツを提供する。映像サーバ１００は、セントラルサーバ４００に新規コンテンツが存在する場合、新規コンテンツをアップデートする。

ここでは、一つの映像サーバ１００のみを図示しているが、セントラルサーバ４００は、複数の映像サーバ１００を制御することができるのは自明である。

図３は、本発明に係る映像サーバの構成を概略的に示すブロック図である。

図３を参照すると、映像サーバ１００は、データベース１１０、通信部１２０、コンテンツサービス部１３０、効果制御部１４０を有する。

データベース１１０には、上映中または上映予定のコンテンツ、各コンテンツに対する情報が保存される。

通信部１２０は、様々な電子装置とデータを送受信するための構成である。具体的に、通信部１２０は、映像サーバ１００をＨＭＤ装置または４Ｄ装置と有線通信網または無線通信網を介して連結する構成である。

コンテンツサービス部１３０は、現在上映すべきコンテンツをデータベース１１０から抽出し、ＨＭＤ装置またはＨＭＤ装置と連結されたモバイル機器に送信する。

コンテンツサービス部１３０は、セントラルサーバに新規コンテンツが存在する場合、新規コンテンツをアップデートする。

効果制御部１４０は、ＨＭＤ装置からコンテンツ再生による時間情報を受信し、その時間情報に基づいて４Ｄ装置との通信を介して同期化を行い、当該時間に発生すべき効果に対する効果制御信号を当該４Ｄ装置に送信する。ここで、効果制御信号は、チクラー、振動効果、雪、雨、風、露、霧、香り、及び光のうちのいずれか一つ以上の効果を実現させる信号であってもよい。

このように構成された映像サーバ１００は、ＨＭＤ装置焦点設定部１５０をさらに有してもよい。

ＨＭＤ装置焦点設定部１５０は、ＨＭＤ装置着用メッセージを出力し、既設定された一定時間の後、焦点調節告知映像を提供してＨＭＤ装置の焦点を中央に設定する。ＨＭＤ装置着用メッセージは、音声、映像などの様々な形態で出力され、観客は、ＨＭＤ装置着用メッセージを見てＨＭＤ装置を着用するようになる。

ＨＭＤ装置焦点設定部１５０は、焦点調節告知映像を提供して、ＨＭＤ装置を着用した観客のフォーカシングを中央にセットする作業を進行する。焦点調節告知映像は、コンテンツサービス部１３０が提供するコンテンツの前部に加えて提供し、または別途に作製して提供することができる。

一方、コンテンツサービス部１３０、効果制御部１４０、ＨＭＤ装置焦点設定部１５０のそれぞれは、コンピューティング装置の上で、プログラムを実行するために必要なプロセッサなどによりそれぞれ実現される。このように、コンテンツサービス部１３０、効果制御部１４０、ＨＭＤ装置焦点設定部１５０のそれぞれは、物理的に独立したそれぞれの構成により実現されてもよく、一つのプロセッサ内において機能的に区分される形態で実現されてもよい。

制御部１６０は、データベース１１０、通信部１２０、コンテンツサービス部１３０、効果制御部１４０、ＨＭＤ装置焦点設定部１５０を含める映像サーバ１００における様々な構成部の動作を制御する構成である。このような制御部１６０は、少なくとも一つの演算装置を有するが、ここで、前記演算装置としては、汎用の中央演算処理装置（ＣＰＵ）、特定目的に合うように実現されたプログラマブル素子｛結合プログラム可能論理回路（ＣＰＬＤ；Ｃｏｍｐｌｅｘ Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ）、フィールド・プログラマブル・ゲート・アレイ（ＦＰＧＡ；Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）｝、特定用途向け集積回路（ＡＳＩＣ；Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔｓ）またはマイクロコントローラーチップであってもよい。

図４は、本発明に係るＨＭＤ装置の構成を概略的に示すブロック図である。

図４を参照すると、ＨＭＤ装置２００は、通信部２１０、ディスプレイ部２２０、制御部２３０、メモリ２４０を有する。

通信部２１０は、様々な電子装置とデータを送受信するための構成である。具体的に、通信部２１０は、ＨＭＤ装置２００がコンテンツをディスプレイし、ディスプレイされたコンテンツを変更するために必要な情報を映像サーバまたはモバイル機器と送受信するための構成である。

ディスプレイ部２２０は、ＨＭＤ装置２００で処理される情報をディスプレイする。特に、ディスプレイ部２２０は、現在上映すべきコンテンツをディスプレイする。

また、ディスプレイ部２２０は、焦点調節告知映像をディスプレイする。

ディスプレイ部２２０から出力されるコンテンツは、一般視野にオーパーラップして表示される。

メモリ２４０は、ＨＭＤ装置２００がコンテンツをディスプレイし、ディスプレイされたコンテンツを変更するために必要な情報を保存する。

制御部２３０は、通常、ＨＭＤ装置２００の全般の動作を制御する。例えば、制御部２３０は、メモリ２４０に保存されたプログラムを実行することにより、ディスプレイ部２２０及び通信部２１０を制御する。

制御部２３０は、通信部２１０から受信したコンテンツをディスプレイ部２２０に表示するように制御する。

また、制御部２３０は、コンテンツ再生による時間情報をリアルタイムで映像サーバに提供する。

このようなＨＭＤ装置２００は、映像サーバ及びモバイル機器のうちの少なくとも一つと連結され、モバイル機器及び映像サーバのうちの少なくとも一つからコンテンツを受信することにより、ＨＭＤ装置２００の画面上にコンテンツをディスプレイする。

このように構成されたＨＭＤ装置２００は、コンテンツがディスプレイ部２２０に表示されるように焦点を調節する焦点調節スイッチ２５０をさらに有してもよい。

観客がＨＭＤ装置２００を正常に着用すればかまわないが、首を左側や右側に回した状況で、ＨＭＤ装置２００を着用したら、ＨＭＤ装置２００の方向が左側や右側に偏ることになる。この場合、ＨＭＤ装置２００を着用した観客は、正常の映像の中央が見られないので、ＨＭＤ装置２００には、焦点調節スイッチ２５０が別途に設けられ、ユーザが手動でフォーカシングを正面にセットすることができる。

制御部２３０は、通信部２１０、ディスプレイ部２２０、メモリ２４０、焦点調節スイッチ２５０を含めるＨＭＤ装置２００における様々な構成部の動作を制御する構成である。このような制御部２３０は、少なくとも一つの演算装置を有するが、ここで、前記演算装置としては、汎用の中央演算処理装置（ＣＰＵ）、特定目的に合うように実現されたプログラマブル素子（ＣＰＬＤ、ＦＰＧＡ）、特定用途向け集積回路（ＡＳＩＣ）またはマイクロコントローラーチップであってもよい。

図５は、本発明の一実施形態に係る仮想現実４Ｄコンテンツ上映方法を示す図である。

図５を参照すると、映像サーバは、ＨＭＤ装置の着用を告知し（Ｓ５０２）、焦点調節告知映像を提供してＨＭＤ装置の焦点を調節する（Ｓ５０４）。すなわち、映像サーバは、ＨＭＤ装置着用メッセージを出力し、観客は、ＨＭＤ装置着用メッセージを見てＨＭＤ装置を着用するようになる。映像サーバは、焦点調節告知映像を提供し、ＨＭＤ装置を着用した観客のフォーカシングを中央にセットする作業を進行する。

その後、映像サーバは、現在上映すべきコンテンツをＨＭＤ装置に送信し（Ｓ５０６）、ＨＭＤ装置は、コンテンツを表示し（Ｓ５０８）、コンテンツ再生による時間情報を映像サーバに送信する（Ｓ５１０）。ＨＭＤ装置がコンテンツを表示すると、仮想現実効果が提供される。

映像サーバは、ＨＭＤ装置から送信された時間情報に基づいて４Ｄ装置との通信を介して同期化を行い（Ｓ５１２）、当該時間に発生すべき効果に対する効果制御信号を当該４Ｄ装置に送信する（Ｓ５１４）。効果制御信号は、ＨＭＤ装置が再生するコンテンツに合う効果を発生させる信号である。

効果制御信号を受信した４Ｄ装置は、現在再生されるコンテンツと同期化した効果を発生する（Ｓ５１６）。すなわち、４Ｄチェアは、コンテンツが始まると、そのコンテンツに合わせてモーション及び振動を提供し、４Ｄ効果装置は、コンテンツに合わせてリアルハイムで雪、雨、風、露、霧、暴雨、稲光、香り、光などの４Ｄ効果を発生する。

図６は、本発明の他の実施形態に係る仮想現実４Ｄコンテンツ上映方法を示す図である。

図６を参照すると、映像サーバは、現在再生すべきコンテンツをＨＭＤ装置と連結されたモバイル機器に送信し（Ｓ６０２）、モバイル機器は、送信されたコンテンツを保存する（Ｓ６０４）。

その後、映像サーバは、ＨＭＤ装置の着用を告知し（Ｓ６０６）、焦点調節告知映像を提供してＨＭＤ装置の焦点を調節する（Ｓ６０８）。

その後、映像サーバは、コンテンツ再生開始信号をモバイル機器に送信し（Ｓ６１０）、モバイル機器は、コンテンツをＨＭＤ装置に送信する（Ｓ６１２）。このとき、モバイル機器は、ミラキャスト技術やＷｉＦｉダイレクト技術などを介してＨＭＤ装置にコンテンツを送信する。

すると、ＨＭＤ装置は、コンテンツを表示し（Ｓ６１４）、コンテンツ再生時間情報を映像サーバに送信する（Ｓ６１６）。

映像サーバは、ＨＭＤ装置から送信された時間情報を用いて４Ｄ装置との通信を介して同期化を行い（Ｓ６１８）、当該時間に発生すべき効果制御信号を当該４Ｄ装置に送信する（Ｓ６２０）。

効果制御信号を受信した４Ｄ装置は、現在再生されるコンテンツと同期化した効果を発生する（Ｓ６２２）。

一方、仮想現実４Ｄコンテンツ上映方法は、プログラムで作成可能であり、プログラムを構成するコード及びコードセグメントは、当該分野のプログラマーにより容易に推論される。また、仮想現実４Ｄコンテンツ上映方法に関するプログラムは、電子装置が読取り可能な情報保存媒体（または可読媒体）に保存され、電子装置により読み取られて実行される。

このように、本発明の属する技術分野における通常の知識を有する者は、本発明が、その技術的思想や必須の特徴を変更することなく他の具体的な実施形態で実施され得ることに認知することができるだろう。したがって、上述した実施形態は、例示的なものに過ぎず、その範囲を制限しておいた限定的なものではないと理解すべきである。また、図示されたフローチャートは、本発明を実施するにあたり、最も好ましい結果を達成するために例示的に示された順次的順序に過ぎず、他の追加段階が提供され、または一部の段階が削除され得るのはもちろんである。

本明細書で記述する技術的特徴とこれを実行する実現物は、デジタル電子回路で実現され、または本明細書で記述する構造及びその構造的な等価物を含むコンピュータソフトウェア、ファームウェアまたはハードウェアで実現され、またはこれらのうちの一つ以上の組合せで実現され得る。また、本明細書で記述する技術的特徴を実行する実現物は、コンピュータプログラム製品、すなわち、処理システムの動作を制御するために、またはこれによる実行のために類型のプログラム記録媒体上にエンコードされたコンピュータプログラムコマンドに関するモジュールとして実現されることも可能である。

一方、本明細書で“装置”や“システム”とは、例えば、プロセッサ、コンピュータまたは多重プロセッサやコンピュータを含めてデータを処理するためのあらゆる機構、装置及び機械を包括する。処理システムは、ハードウェアに付け加えて、例えばプロセッサファームウェアを構成するコード、プロトコルスタック、データベース管理システム、オペレーティングシステム、またはこれらのうち一つ以上の組合せなど、要請時コンピュータプログラムに対する実行環境を形成するコードを含むことができる。プログラム、ソフトウェア、ソフトウェアアプリケーション、スクリプトまたはコードとしても知られているコンピュータプログラムは、コンパイルまたは解釈された言語やアプリオリまたは手続き型言語を含むプログラミング言語の如何なる形態でも作成されてもよく、独立型プログラムやモジュール、コンポーネント、サブルーティンまたはコンピュータ環境での使用に適した他のユニットを含めて如何なる形態でも実現され得る。

本明細書に添付された図面に示されているブロック図及びフローチャートに含まれている本発明の技術的特徴を実行する構成は、これらの構成間の論理的な境界を意味する。しかし、ソフトウェアまたはハードウェアの実施形態によれば、図示された構成とその機能は、独立型ソフトウェアモジュール、モノリシックソフトウェア構造、コード、サービス、及びこれらの組み合わせで実行され、保存されたプログラムコード、コマンドなどを実行することが可能なプロセッサを備えたコンピュータで実行可能な媒体に保存されてそれらの機能が実現できるので、このような全ての実施形態も本発明の権利範囲内に属するものと見なすべきである。

したがって、添付図面とそれに対する技術は、本発明の技術的特徴を説明するが、このような技術的特徴を実現するためのソフトウェアの特定の配列が明らかに言及されない限り、単純に推論されてはならない。すなわち、上述した様々な実施形態が存在することができ、それらの実施形態が本発明と同じ技術的特徴を保有しながらも一部変形できるので、これも本発明の権利範囲内に属するものと見なすべきである。

また、フローチャートは、特定の順序で動作を描写しているが、これは最も好ましい結果を得るために図示したものであって、図示した特定の順序や順次的順序でそれらの動作が必ず実行されなければならないとか、全ての図示した動作が必ず実行されなければならないものと理解されてはならない。特定の場合、マルチタスク機能と並列処理が有利であり得る。併せて、上述した実施形態の様々なシステムコンポーネントの分離は、そのような分離を全ての実施形態で要求するものと理解されてはならず、説明したプログラムコンポーネント及びシステムは、一般に、単一のソフトウェア製品に一緒に統合され、または多重のソフトウェア製品にパッケージングされ得るという点を理解すべきである。

このように、本明細書は、その提示された具体的な用語によって本発明を制限しようとするものではない。したがって、上述した実施形態を参照して本発明を詳細に説明したが、本発明の属する技術分野における通常の知識を有する者であれば、本発明の範囲を逸脱することなく、本実施形態に対する改造、変更及び変形を加えることができる。本発明の範囲は、上記の詳細な説明よりは、後述する特許請求の範囲によって示され、特許請求の範囲の意味及び範囲そしてその等価概念から導き出される全ての変更または変形形態も本発明の権利範囲に含まれるものと解釈されるべきである。

１００ 映像サーバ
１１０ データベース
１２０、２１０ 通信部
１３０ コンテンツサービス部
１４０ 効果制御部
１５０ ＨＭＤ装置焦点設定部
１６０、２３０ 制御部
２００ ＨＭＤ装置
２２０ ディスプレイ部
２４０ メモリ
２５０ 焦点調節スイッチ
３００ ４Ｄ装置
３１０ ４Ｄチェア
３２０ ４Ｄ効果装置
４００ セントラルサーバ
５００ モバイル機器

Claims (18)

1. コンテンツまたは効果制御信号を提供する映像サーバと、
   前記コンテンツを表示するＨＭＤ（頭装着型ディスプレイ、Ｈｅａｄ−Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）装置と、
   前記効果制御信号により、前記コンテンツと同期化した効果を発生する４Ｄ装置と、を備える仮想現実４Ｄコンテンツ上映システム。
2. 前記映像サーバは、ＨＭＤ装置着用メッセージを出力し、既設定された一定時間の後、焦点調節告知映像を提供してＨＭＤ装置の焦点を設定することを特徴とする請求項１に記載の仮想現実４Ｄコンテンツ上映システム。
3. 有線または無線通信を介して前記ＨＭＤ装置と連結され、前記映像サーバからコンテンツを受信するモバイル機器をさらに備え、
   前記ＨＭＤ装置は、前記モバイル機器からコンテンツを受信して表示することを特徴とする請求項１に記載の仮想現実４Ｄコンテンツ上映システム。
4. 前記ＨＭＤ装置は、コンテンツ再生時間情報をリアルタイムで前記映像サーバに送信し、
   前記映像サーバは、前記時間情報を用いて前記４Ｄ装置との通信を介して同期化を行うことを特徴とする請求項１に記載の仮想現実４Ｄコンテンツ上映システム。
5. 前記４Ｄ装置は、前記効果制御信号により、チクラー（ｔｉｃｋｌｅｒ）、振動、エアーショット、ウォーターショット、香りショット、ヒーターショットのうちのいずれか一つ以上の効果を実現する４Ｄチェアであることを特徴とする請求項１に記載の仮想現実４Ｄコンテンツ上映システム。
6. 前記４Ｄ装置は、上映館内に設けられ、前記効果制御信号により、雪、雨、風、露、霧、暴雨、稲光、香り、光のうちの少なくとも一つの効果を実現する４Ｄ効果装置であることを特徴とする請求項１に記載の仮想現実４Ｄコンテンツ上映システム。
7. 各上映館に設けられた映像サーバを制御するセントラルサーバをさらに備え、
   前記映像サーバは、前記セントラルサーバに新規コンテンツが存在する場合、新規コンテンツをアップデートすることを特徴とする請求項１に記載の仮想現実４Ｄコンテンツ上映システム。
8. 前記ＨＭＤ装置は、コンテンツの表示時、仮想現実効果を提供することを特徴とする請求項１に記載の仮想現実４Ｄコンテンツ上映システム。
9. 現在上映すべきコンテンツをＨＭＤ装置またはＨＭＤ装置と連結されたモバイル機器に送信するコンテンツサービス部と、
   前記ＨＭＤ装置からコンテンツ再生時間情報を受信し、前記時間情報に基づいて４Ｄ装置との同期化を行い、当該時間に発生すべき効果に対する制御信号を当該４Ｄ装置に送信する効果制御部と、を備える映像サーバ。
10. 前記コンテンツサービス部は、セントラルサーバに新規コンテンツが存在する場合、新規コンテンツをアップデートすることを特徴とする請求項９に記載の映像サーバ。
11. ＨＭＤ装置着用メッセージを出力し、既設定された一定時間の後、焦点調節告知映像を提供してＨＭＤ装置の焦点を設定するＨＭＤ装置焦点設定部をさらに備えることを特徴とする請求項９に記載の映像サーバ。
12. コンテンツを受信する通信部と、
    前記受信されたコンテンツを表示するディスプレイ部と、
    前記コンテンツを前記ディスプレイ部に表示されるように制御する制御部と、を備えるＨＭＤ装置。
13. 前記コンテンツが前記ディスプレイ部に表示されるように焦点を調節する焦点調節スイッチをさらに備えることを特徴とする請求項１２に記載のＨＭＤ装置。
14. 前記制御部は、コンテンツ再生による時間情報を映像サーバに送信することを特徴とする請求項１２に記載のＨＭＤ装置。
15. （ａ）映像サーバは、現在上映すべきコンテンツをＨＭＤ装置に送信する段階と、
    （ｂ）前記ＨＭＤ装置は、前記コンテンツを表示し、コンテンツ再生による時間情報を前記映像サーバに送信する段階と、
    （ｃ）前記映像サーバは、前記時間情報を用いて４Ｄ装置との同期化を行い、当該時間に発生すべき効果制御信号を当該４Ｄ装置に送信する段階と、
    （ｄ）前記４Ｄ装置は、前記効果制御信号により、前記コンテンツと同期化した効果を発生する段階と、を含む仮想現実４Ｄコンテンツ上映方法。
16. 前記（ａ）段階以前に、前記映像サーバは、ＨＭＤ装置着用メッセージを出力し、既設定された一定時間の後、焦点調節告知映像を提供してＨＭＤ装置の焦点を設定する段階をさらに含むことを特徴とする請求項１５に記載の仮想現実４Ｄコンテンツ上映方法。
17. （ａ）映像サーバは、現在上映すべきコンテンツをＨＭＤ装置と連結されたモバイル機器に送信する段階と、
    （ｂ）前記モバイル機器は、前記コンテンツを保存し、前記映像サーバからコンテンツ再生開始信号が受信されると、前記保存されたコンテンツをＨＭＤ装置に送信する段階と、
    （ｃ）前記ＨＭＤ装置は、前記コンテンツを表示し、コンテンツ再生による時間情報を前記映像サーバに送信する段階と、
    （ｄ）前記映像サーバは、前記時間情報を用いて４Ｄ装置との同期化を行い、当該時間に発生すべき効果制御信号を当該４Ｄ装置に送信する段階と、
    （ｅ）前記４Ｄ装置は、前記効果制御信号により、前記コンテンツと同期化した効果を発生する段階と、を含む仮想現実４Ｄコンテンツ上映方法。
18. 前記（ａ）段階以降、前記映像サーバは、ＨＭＤ装置着用メッセージを出力し、既設定された一定時間の後、焦点調節告知映像を提供してＨＭＤ装置の焦点を設定する段階をさらに含むことを特徴とする請求項１７に記載の仮想現実４Ｄコンテンツ上映方法。