JP6953221B2 - 画像表示システム、画像表示プログラム、画像表示方法及びサーバ - Google Patents

Description

本発明は、画像表示システム、画像表示プログラム、画像表示方法及びサーバに関する。

企業の意思決定のために株主総会が行われている。株主総会においては、会社の組織・業態に関する事項や、構成員の選任・解任に関する事項や、株主の利益に関する事項等について決議する。この場合、株主からの質疑応答の時間が設けられている。そして、上場企業及び株主において、双方向に情報の発信及び収集のための技術も検討されている（例えば、特許文献１）。この文献に記載された技術では、各上場企業が株主に対して提供するドキュメントを保管する。そして、株主側端末からの要求に応じて、株主が保持する株に関するドキュメントと、電子議決権行使機能へのリンク情報とを含むＷｅｂページを株主側端末に提供する。この場合、更に株主総会の動画情報を配信する。

また、画像生成においては、上下左右の各方位で広範囲の画像によりパノラマ写真（天球画像）を生成する技術を用いる場合もある（例えば、特許文献２）。この文献に記載された技術では、撮像装置は、複数の撮像光学系から取得した画像を合成し、複数の画像のつなぎ位置を検出し、つなぎ位置で複数の画像を合成し、平面に展開された全天球画像を生成する。

特開２００８−９７１３９号公報 特開２０１６−２７７４４号公報

上述したように、総会会場を撮影した画像をユーザ端末に提供する場合、十分な情報量を提供できないことがある。天球画像をユーザに対して提供する場合にも、説明会場の訪問者とは異なり、ユーザ端末の利用者は、会場の多様な位置から総会の状況を見ることができない。また、撮影画像だけでは、情報が不足する場合もある。従って、的確な情報を入手することができなかった。

・上記課題を解決する画像表示システムは、記憶部、入力部及び出力部に接続された制御部を備える。前記記憶部は、カメラ毎に撮影され、ユーザの操作により表示領域を操作可能な天球画像を記憶する。そして、前記制御部が、議事進行に応じて、選択可能なカメラ候補を特定し、前記入力部において、ユーザの操作により、前記カメラ候補の中で指定されたカメラで撮影された天球画像を前記出力部に、議事進行に応じて表示する。

本発明によれば、天球画像を用いて、ユーザに対して、的確な情報提供を行なうことができる。

本実施形態の画像表示システムの機能ブロックの説明図。 本実施形態のハードウェア構成例の説明図。 本実施形態の記憶部の説明図であって、（ａ）は議題情報記憶部、（ｂ）は説明者情報記憶部、（ｃ）はスライド情報記憶部、（ｄ）は天球画像記憶部、（ｅ）は補足情報記憶部の説明図。 本実施形態における表示画面展開の説明図。 本実施形態における表示画面の説明図であって、（ａ）はトップ画面、（ｂ）は本会場を表示した表示画面。 本実施形態における表示画面の説明図であって、（ａ）は本会場での説明者による説明の表示画面、（ｂ）は天球画像を拡大した場合の表示画面、（ｃ）はスライドを拡大表示した表示画面。 本実施形態における処理手順の説明図。 本実施形態における処理手順の説明図。 本実施形態における表示画面の説明図であって、（ａ）は天球画像と重畳レイヤ、（ｂ）はアイコンを表示した表示画面、（ｃ）は補足説明を表示した表示画面の説明図。 本実施形態における補足説明の表示の説明図であって、（ａ）は正面にある場合、（ｂ）は少し右側に移動させた場合、（ｃ）は少し左側に移動させた場合、（ｄ）は大きく右側に移動させた場合、（ｅ）は大きく左側に移動させた場合の説明図。 本実施形態における処理手順の説明図。 本実施形態における天球画像の説明図であって、（ａ）は人が存在しない場合、（ｂ）は一般参加者が含まれる場合、（ｃ）は人物画像を加工した場合の説明図。 他の実施形態における処理手順の説明図。 他の実施形態における表示画面の説明図。

以下、図１〜図１２に従って、画像表示システム、画像表示プログラム及び画像表示方法を具体化した実施形態を説明する。
本実施形態では、図１に示すように、インターネット等のネットワークを介して接続されたユーザ端末１０に対して、管理サーバ２０が、株主総会に関する情報を提供する場合を説明する。

（ハードウェア構成例）
図２は、ユーザ端末１０や管理サーバ２０等の情報処理装置Ｈ１０のハードウェア構成例である。
情報処理装置Ｈ１０は、通信インターフェースＨ１１、入力装置Ｈ１２、表示装置Ｈ１３、記憶部Ｈ１４、プロセッサＨ１５を有する。なお、このハードウェア構成は一例であり、他のハードウェアを用いてもよい。

通信インターフェースＨ１１は、他の装置との間で通信経路を確立して、データの送受信を実行するインターフェースである。例えばネットワークインターフェースカードや無線インターフェース等である。

入力装置Ｈ１２は、ユーザ等からの入力を受け付ける装置であり、例えば入力部１４を実現する。表示装置Ｈ１３は、各種情報を表示するディスプレイや、音声を再生するスピーカ等であり、例えば出力部１５を実現する。入力装置Ｈ１２、表示装置Ｈ１３として、タッチパネルディスプレイを用いることも可能である。

記憶部Ｈ１４は、ユーザ端末１０や管理サーバ２０の各種機能を実行するためのデータや各種プログラムを格納する記憶装置であり、メモリ１２、議題情報記憶部２２〜補足情報記憶部２６を実現する。記憶部Ｈ１４の一例としては、ＲＯＭ、ＲＡＭ、ハードディスク等がある。

プロセッサＨ１５は、記憶部Ｈ１４に記憶されるプログラムやデータを用いて、ユーザ端末１０や管理サーバ２０における各処理を制御する制御部１１，２１を実現する。プロセッサＨ１５の一例としては、例えばＣＰＵやＭＰＵ等がある。このプロセッサＨ１５は、ＲＯＭ等に記憶されるプログラムをＲＡＭに展開して、各種処理に対応する各種プロセスを実行する。

（各部の機能説明）
図１に示すユーザ端末１０は、株主総会に関する情報を取得するユーザが用いるコンピュータ端末であって、各種アプリケーションを実行させることにより、情報の出力や入力に用いられる。

このユーザ端末１０は、制御部１１、メモリ１２、通信部１３、入力部１４、出力部１５を備える。
制御部１１は、メモリ１２に記録された各種アプリケーションを実行することにより、通信部１３〜出力部１５を制御する。本実施形態では、制御部１１は、通信部１３を介して、管理サーバ２０から表示画面を取得する。更に、制御部１１は、入力部１４において入力された指示に基づいて、出力部１５に表示された画面を制御する。

管理サーバ２０は、ユーザ端末１０に出力する各種データを管理するコンピュータシステムである。この管理サーバ２０は、制御部２１、議題情報記憶部２２、説明者情報記憶部２３、スライド情報記憶部２４、天球画像記憶部２５、補足情報記憶部２６を備える。

制御部２１は、ＣＰＵ、ＲＡＭ、ＲＯＭ等から構成された制御手段として機能し、後述する処理（カメラ選択段階、進行管理段階、天球表示段階、表示制御段階、画像加工段階等を含む処理）を行なう。このための画像表示処理プログラムを実行することにより、制御部２１は、カメラ選択部２１０、進行管理部２１１、天球表示部２１２、表示制御部２１３、画像加工部２１４等として機能する。

カメラ選択部２１０は、ユーザ端末１０において選択されたカメラを特定する。
進行管理部２１１は、総会の議事進行を管理する処理を実行する。
天球表示部２１２は、ユーザ端末１０に対して、カメラ選択部２１０が特定したカメラで撮影された天球画像（動画）を配信する処理を実行する。

表示制御部２１３は、天球画像において、説明情報を出力する処理を実行する。
画像加工部２１４は、総会への一般参加者（株主）の画像の肖像権を保護するために人物画像を加工する処理（ぼかし）を実行する。

図３（ａ）に示すように、議題情報記憶部２２には、議事進行を管理するための議題管理レコード２２０が記録される。この議題管理レコード２２０は、総会の議事進行の議題が登録された場合に記録される。議題管理レコード２２０には、順番、議題ＩＤに関するデータが記録される。

順番データ領域には、総会の議事進行における議題の順番に関するデータが記録される。
議題ＩＤデータ領域には、総会における議題（テーマ）を特定するための識別子に関するデータが記録される。議題としては、「オープニング」、「出席状況の報告」、「監査報告」、「事業報告」、「事業の経過と成果」、「資金調達の状況」、「連結計算書類」、「対処すべき課題」、「今後の事業方針」、「議案」、「質疑応答」、「採決」、「クロージング」等がある。

図３（ｂ）に示すように、説明者情報記憶部２３には、総会における説明者に関する説明者管理レコード２３０が記録される。この説明者管理レコード２３０は、総会における説明者が登録された場合に記録される。説明者管理レコード２３０には、説明者ＩＤ、氏名、役職、略歴に関するデータが記録される。

説明者ＩＤデータ領域には、各説明者を特定するための識別子に関するデータが記録される。
氏名、役職、略歴の各データ領域には、この説明者の氏名、役職、略歴に関するデータが記録される。

図３（ｃ）に示すように、スライド情報記憶部２４には、総会の会場に投影されるスライドについてのスライド管理データ２４０が記録される。このスライド管理データ２４０は、投影スライドが登録された場合に記録される。スライド管理データ２４０には、議題ＩＤ、投影時刻、投影スライド、ナレーションに関するデータが記録される。

議題ＩＤデータ領域には、議題を特定するための識別子に関するデータが記録される。
投影時刻データ領域には、この議題において用いるスライドを投影している時刻に関するデータが記録される。

投影スライドデータ領域には、ユーザ端末１０の出力部１５に表示するスライドデータが記録される。
ナレーションデータ領域には、このスライド投影に伴い出力される音声データが記録される。

図３（ｄ）に示すように、天球画像記憶部２５には、ユーザ端末１０の出力部に表示する天球画像データ２５０が記録される。この天球画像データ２５０は、総会会場に設置されたカメラを用いて撮影され、管理サーバ２０にアップロードされた場合に記録される。天球画像データ２５０には、議題ＩＤ、カメラＩＤ、天球画像、アイコン情報が記録される。

議題ＩＤデータ領域には、天球画像を撮影した時の議題を特定するための識別子に関するデータが記録される。
カメラＩＤデータ領域には、総会において天球画像の撮影に用いたカメラを特定するための識別子に関するデータが記録される。本実施形態では、株主総会の本会場、ホワイエ（展示ホール）に設置された複数のカメラを用いる。
天球画像データ領域には、撮影された天球画像に関するデータが記録される。本実施形態では、複数の画像を連続的に再生する動画が記録される。

アイコン情報は、マーカ座標、補足ＩＤに関するデータを含む。このアイコン情報は、動画を構成する天球画像の中で、補足説明を出力するタイミング（期間）の天球画像のみに設定されている。
マーカ座標データ領域には、天球画像において、補足説明を表示するオブジェクトの座標に関するデータが記録される。本実施形態では、この座標には、補足説明の表示指示に用いるマーカ（表示指示アイコン）を表示する。補足説明としては、説明者に関する情報や、投影スライドに関する情報等、天球画像に含まれる各種オブジェクトに対してアイコンを付与することができる。

補足ＩＤデータ領域には、マーカ（表示指示アイコン）の選択に基づいて出力する補足説明を特定するための識別子に関するデータが記録される。なお、補足説明として、説明者情報を出力する場合には、このデータ領域に説明者ＩＤを記録しておく。

図３（ｅ）に示すように、補足情報記憶部２６には、天球画像に関連して出力する補足説明に関する補足管理レコード２６０が記録される。この補足管理レコード２６０は、補足説明が登録された場合に記録される。補足管理レコード２６０には、補足ＩＤ、補足説明に関するデータが記録される。
補足ＩＤデータ領域には、各補足説明を特定するための識別子に関するデータが記録される。
補足説明データ領域には、補足説明として出力する内容に関するデータが記録される。

（表示画面の展開）
次に、図４〜図６を用いて、表示画面の展開を説明する。
図４に示すように、ユーザ端末１０から管理サーバ２０にアクセスした場合、管理サーバ２０の制御部２１は、出力部１５にトップ画面３００を表示する。このトップ画面３００においては、天球画像を撮影するカメラを選択することができる。本実施形態では、株主総会の「本会場」、「ホワイエ」に設置された複数のカメラを選択することができる。このため、トップ画面３００においては、カメラ選択部２１０が、カメラ選択メニュー３１０を出力する。カメラ選択メニュー３１０には、本会場選択アイコン３１１、ホワイエ選択アイコン３１２〜３１４が表示されている。
ここで、カメラ選択メニュー３１０において、本会場選択アイコン３１１を選択した場合、各議題に応じた表示画面３２０を閲覧することができる。
各議題に応じた表示画面３２０には、本会場の天球画像３３１が、例えば背景として出力される。更に、各表示画面３２０には、議題に応じて、議題一覧メニュー３３２、議題表示３３３、カメラ切替マップ３３４、スライド拡大表示３３５、トップ画面表示ボタン３３６が出力される。
天球画像３３１は、天球表示部２１２によって表示制御され、本会場を閲覧するための画像である。なお、天球画像において、予め定められた視野範囲（例えば株主席側）では、画像加工部２１４によって、人物を判別できないように画像加工処理（例えば、ぼかし、モザイク等）が行なわれる。ここでは、ユーザ端末１０の入力部１４による操作によって、天球画像の表示範囲が、特定角度を超えた場合に画像加工処理を実行する。例えば、表示範囲が、正面の状態から９０度以上、左右に移動して、株主席が映る込む角度になった場合に、ぼかした天球画像に変更される。
議題一覧メニュー３３２は、進行管理部２１１によって制御され、議題情報記憶部２２に記録された議題管理レコード２２０の順番で議題アイコンを並べて表示する。各議題アイコンには、議題ＩＤが記録されている。ユーザは、入力部１４を用いて、議題一覧メニュー３３２において所望の議題アイコンを選択する。この場合、進行管理部２１１は、ユーザ端末１０において指定された議題ＩＤを取得する。
議題表示３３３は、進行管理部２１１によって制御され、議事進行に応じて、ユーザ端末１０に表示している議題スライドを表示する。
カメラ切替マップ３３４は、カメラ選択部２１０によって制御され、天球画像を閲覧するためのカメラを切り替えるためのマップを表示する。このマップには、株主総会の会場において、カメラが設置された位置を示す目印アイコンが表示される。各目印アイコンには、カメラＩＤが設定されている。そして、目印アイコンが選択された場合、天球画像記憶部２５に記録されたカメラＩＤの天球画像を出力する。
スライド拡大表示３３５は、進行管理部２１１によって制御され、議事進行に応じて、ユーザ端末１０の出力部１５に出力された表示画面において、投影スライドを大きく拡大して表示する。
トップ画面表示ボタン３３６は、トップ画面に戻るためのボタンである。
なお、議題一覧メニュー３３２〜スライド拡大表示３３５は、議題の議事進行に応じて、予め表示条件が設定されている。例えば、所定の場面（例えば、議題「連結決算書類」）では、スライド拡大表示３３５を出力する表示条件により、出力を制御する。また、所定の場面（例えば、議題「出席状況の報告」）では、カメラ切替マップ３３４を無効にして、カメラ切替を制限する表示条件により、出力を制御する。また、表示条件として、天球画像３３１の操作可否を設定してもよい。この場合、ユーザ端末１０の出力部１５には、天球画像３３１において、所定の視野範囲のみが表示される。
また、議題一覧メニュー３３２〜トップ画面表示ボタン３３６は、天球画像３３１とは異なる前面の表示レイヤに出力される。従って、天球画像３３１の表示領域とは連動しない。例えば、ユーザが、ユーザ端末１０の入力部１４を用いて、天球画像３３１の表示領域を変更する指示を行ない、正面画像から天井画像を表示させた場合を想定する。この場合、表示画面の背景は天井画像に変更されるが、議題一覧メニュー３３２〜トップ画面表示ボタン３３６は、表示画面の同じ位置に維持される。

図５（ａ）は、トップ画面３００を示している。このトップ画面３００には、本会場選択アイコン３１１、ホワイエ選択アイコン３１２〜３１４を含むカメラ選択メニュー３１０が表示されている。更に、このトップ画面３００には、本会場の天球画像３３１、カメラ切替マップ３３４が含まれる。
図５（ｂ）は、トップ画面３００において本会場選択アイコン３１１を選択した場合に出力される表示画面３５０を示している。この表示画面３５０には、天球画像３３１、議題一覧メニュー３３２、カメラ切替マップ３３４、トップ画面表示ボタン３３６が出力されている。なお、この表示画面においては、議事進行前のため、議題表示は出力されていない。
図６（ａ）は、議題一覧メニュー３３２において所望の議題アイコン（ここでは、議題「出席状況の報告」）を選択した場合に出力される表示画面３６０を示している。この表示画面３６０には、天球画像３３１、議題一覧メニュー３３２、議題表示３３３、トップ画面表示ボタン３３６が出力されている。なお、この場面では、表示条件に基づいて、カメラの切り替えが許容されていないため、カメラ切替マップ３３４は出力されていない。例えば、説明者が登場して話をするといった重要議題である場合等、ユーザにその内容を閲覧させたい場合には、カメラ切替を制限することを目的としている。また、議題進行に応じて表示条件が変更になった場合にも、表示条件に応じた表示画像に切り替えるようにしてもよい。例えば、ユーザ端末１０の出力部１５にホワイエの天球画像が表示されている場合にも、議題進行に応じてカメラの切り替えが許容されていない議題になった場合には、管理サーバ２０の制御部２１は、表示条件に応じて、強制的に表示画面を本会場に切り替えるようにしてもよい。
図６（ｂ）に示すように、天球画像３３１を拡大した場合にも、議題一覧メニュー３３２、議題表示３３３、トップ画面表示ボタン３３６は、天球画像３３１とは連動せず、同じ位置で表示される。
図６（ｃ）は、議題一覧メニュー３３２において別の議題アイコン（ここでは、議題「連結決算書類」）を選択した場合に出力される表示画面３７０を示している。この表示画面３７０には、議題一覧メニュー３３２、議題表示３３３、カメラ切替マップ３３４、スライド拡大表示３３５が出力されている。なお、この画面では、表示条件に基づいて、天球画像３３１の操作が許容されていない。この画面では、説明者が登場して話をする場面ではなく、スライドの表示や動画生成などの議題であることを想定し、カメラ切替ができるようになっている。
また、ホワイエを表示している際に、本会場の様子がわかるように、本会場の画像を画面の一部（例えば、左上等）に表示してもよい。ここで、管理サーバ２０の制御部２１は、議事進行に応じて、所定時間後に議題の切替を検知した場合、ユーザ端末１０に対して、切替前であることを示す通知を行ない、本会場へのカメラ切替を促すようにしてもよい。これにより、ユーザが本会場における重要議題画面（動画）を見逃しを抑制することができる。

（動作）
次に、図７〜図１２を用いて、この管理サーバ２０における動作（進行管理処理、天球表示処理、画像加工処理）を説明する。総会の配信情報を閲覧する場合には、ユーザ端末１０を用いて、管理サーバ２０にアクセスする。

（進行管理処理）
まず、図７を用いて、進行管理処理を説明する。
ここでは、管理サーバ２０の制御部２１は、議題の特定処理を実行する（ステップＳ１−１）。具体的には、制御部２１の進行管理部２１１は、議題一覧メニュー３３２をユーザ端末１０の出力部１５に出力する。そして、進行管理部２１１は、議題一覧メニュー３３２において指定された議題ＩＤを取得する。

次に、管理サーバ２０の制御部２１は、スライド表示処理を実行する（ステップＳ１−２）。具体的には、制御部２１の進行管理部２１１は、指定された議題ＩＤの投影スライド、ナレーションをスライド情報記憶部２４から取得し、ユーザ端末１０に配信する。ユーザ端末１０の制御部１１は、出力部１５において、投影スライド、ナレーションを再生する。

次に、管理サーバ２０の制御部２１は、天球画像があるかどうかについての判定処理を実行する（ステップＳ１−３）。具体的には、制御部２１の進行管理部２１１は、天球画像記憶部２５を用いて、ユーザ端末１０に配信したスライドの議題ＩＤに関連付けられた天球画像データ２５０を天球画像記憶部２５において検索する。議題ＩＤに関連付けられた天球画像データ２５０が記録されている場合には、進行管理部２１１は、天球画像があると判定する。

天球画像があると判定した場合（ステップＳ１−３において「ＹＥＳ」の場合）、管理サーバ２０の制御部２１は、天球表示処理を実行する（ステップＳ１−４）。この処理の詳細については、図７を用いて後述する。

一方、天球画像がないと判定した場合（ステップＳ１−３において「ＮＯ」の場合）、管理サーバ２０の制御部２１は、天球表示処理（ステップＳ１−４）をスキップする。この場合には、スライド情報記憶部２４に記録された投影スライド、ナレーションをユーザ端末１０において再生する。

そして、管理サーバ２０の制御部２１は、再生終了かどうかについての判定処理を実行する（ステップＳ１−５）。具体的には、制御部２１の進行管理部２１１は、天空画像やナレーションの再生を終了した場合には、再生終了と判定する。なお、天空画像やナレーションの再生中に、ユーザ端末１０に出力された議題一覧メニューにおいて他の議題が選択された場合にも、再生終了と判定する。

再生終了でないと判定した場合（ステップＳ１−５において「ＮＯ」の場合）、管理サーバ２０の制御部２１は、スライド表示処理（ステップＳ１−２）を継続する。
一方、再生終了と判定した場合（ステップＳ１−５において「ＹＥＳ」の場合）、管理サーバ２０の制御部２１は、議題変更かどうかについての判定処理を実行する（ステップＳ１−６）。具体的には、制御部２１の進行管理部２１１は、次の議題を特定した場合や、他の議題が選択された場合は、議題変更と判定する。

議題変更と判定した場合（ステップＳ１−６において「ＹＥＳ」の場合）、管理サーバ２０の制御部２１は、議題の特定処理（ステップＳ１−１）を継続する。
一方、議題変更でないと判定した場合（ステップＳ１−６において「ＮＯ」の場合）、管理サーバ２０の制御部２１は、進行管理処理を終了する。

（天球表示処理）
次に、図８を用いて、天球表示処理を説明する。
まず、管理サーバ２０の制御部２１は、天球画像の表示処理を実行する（ステップＳ２−１）。具体的には、制御部２１の天球表示部２１２は、ユーザ端末１０の出力部１５に、表示画面を表示する。そして、天球表示部２１２は、表示画面において、天球画像（動画）を再生する。

この場合、図９（ａ）に示すように、天球表示部２１２は、天球画像５００の表示操作に連動し、天球画像５００を透過可能な重畳レイヤ５１０を、天球画像５００に重畳させて配置する。この重畳レイヤ５１０には、アイコン５１１が貼り付けられる。この場合、天球画像５００上にアイコン５１１が重畳して見える。そして、ユーザ端末１０において、拡大・縮小操作、視線方向の表示操作に基づいて、表示領域を指定する。

この場合、図９（ｂ）に示すように、天球表示部２１２は、指定された表示領域に応じて、天球画像を切り出した表示画面５２０を生成する。更に、天球表示部２１２は、表示画面５２０の所定位置に、議題表示領域５２１を設ける。ここでは、右下の脇に設けているが、設置位置はこれに限定されるものではなく、図６に示すように、左肩に設けてもよい。この議題表示領域５２１には、縮小化した投影スライドを出力する。そして、表示制御部２１３は、生成した表示画面５２０を、ユーザ端末１０の出力部１５において再生する。

次に、管理サーバ２０の制御部２１は、アイコンは表示可能かどうかについての判定処理を実行する（ステップＳ２−２）。具体的には、制御部２１の表示制御部２１３は、ユーザ端末１０の出力部１５において再生された天球画像の表示画面（表示領域）において、マーカ座標が含まれるかどうかを判定する。そして、表示画面の表示領域（基準値）内にマーカ座標が含まれる場合には、アイコンは表示可能と判定する。なお、マーカ座標が表示画面の端部に近い場合には、アイコンは表示不可と判定するようにしてもよい。この場合には、表示画面の内縁部にマージン領域を設け、マーカ座標がこのマージン領域に含まれる場合には、アイコンは表示不可（ステップＳ２−２において「ＮＯ」）と判定する。

アイコンは表示可能と判定した場合（ステップＳ２−２において「ＹＥＳ」の場合）、管理サーバ２０の制御部２１は、アイコン表示処理を実行する（ステップＳ２−３）。具体的には、制御部２１の表示制御部２１３は、天球画像に連動する重畳レイヤ内のマーカ座標にアイコンを出力する。この場合、天球画像及び重畳レイヤを切り出した表示画面に、アイコンが出力される。

次に、管理サーバ２０の制御部２１は、アイコンが選択されたかどうかについての判定処理を実行する（ステップＳ２−４）。具体的には、制御部２１の表示制御部２１３は、ユーザ端末１０の入力部１４の操作に基づいて、表示画面内に含まれるアイコンの指定を検知した場合には、アイコンの選択と判定する。

アイコンが選択されていないと判定した場合（ステップＳ２−４において「ＮＯ」の場合）、天球画像の表示処理（ステップＳ２−１）以降を繰り返す。
アイコンが選択されたと判定した場合（ステップＳ２−４において「ＹＥＳ」の場合）、管理サーバ２０の制御部２１は、説明画面の補足説明表示処理を実行する（ステップＳ２−５）。具体的には、制御部２１の表示制御部２１３は、補足情報記憶部２６から、マーカ座標の補足ＩＤが記録された補足管理レコード２６０を抽出する。次に、表示制御部２１３は、重畳レイヤのマーカ座標の位置に、補足管理レコード２６０の補足説明を貼り付ける。また、補足ＩＤとして説明者ＩＤが設定されている場合には、説明者情報記憶部２３から、説明者ＩＤの説明者管理レコード２３０を取得し、補足説明として、氏名、役職、略歴等を出力する。

図９（ｃ）に示すように、表示制御部２１３は、生成した表示画面５２０を、ユーザ端末１０の出力部１５において再生する。この場合、表示制御部２１３は、天球画像及び重畳レイヤを切り出した表示画面５２０に、補足説明画面５３０が出力される。

次に、管理サーバ２０の制御部２１は、補足説明の表示歪が大きいかどうかについての判定処理を実行する（ステップＳ２−６）。具体的には、制御部２１の表示制御部２１３は、ユーザ端末１０の出力部１５に表示された表示画面において、補足説明が表示されている位置（オブジェクトの位置）を特定する。

図１０（ａ）に示すように、表示画面６２０の中心近傍（正面）に補足説明画面５３０が配置される場合には、表示歪は小さい。
図１０（ｂ）、図１０（ｃ）に示すように、表示画面６２１，６２２の左右に、視線を移動させた場合、補足説明画面５３０の表示歪が生じる。ただし、移動量が少ない場合には、表示歪は小さい。

図１０（ｄ），図１０（ｅ）に示すように、表示画面６２３，６２４の左右に、大きく視線を移動させて、補足説明画面５３０が表示画面６２３，６２４の端部近傍に移動させた場合、補足説明画面５３０の表示歪が大きくなる。表示画面６２３，６２４から補足説明画面５３０までの方位角が基準値以上よりも大きくなった場合には、補足説明の表示歪が大きいと判定する。

方位角が基準値未満で、補足説明の表示歪が小さいと判定した場合（ステップＳ２−６において「ＮＯ」の場合）、管理サーバ２０の制御部２１は、図１０（ａ）、図１０（ｂ）、図１０（ｃ）に示すように、説明画面の補足説明表示処理（ステップＳ２−５）を継続する。そして、この補足説明表示処理（ステップＳ２−５）は、マーカ座標が関連付けられた天球画像の再生が終了するまで継続される。

一方、補足説明の表示歪が大きいと判定した場合（ステップＳ２−６において「ＹＥＳ」の場合）、管理サーバ２０の制御部２１は、補足説明表示の消去処理を実行する（ステップＳ２−７）。具体的には、制御部２１の表示制御部２１３は、重畳レイヤから補足説明画面５３０を消去する。この場合、ユーザ端末１０の出力部１５においては、図１０（ｄ）、図１０（ｅ）に示すように、補足説明画面５３０がない天球画像から切り出した表示画面６２３，６２４が再生される。

（画像加工処理）
次に、天球画像における画像加工処理について説明する。天球画像においては、視線方向によって、説明者画像だけではなく、総会への一般参加者（株主）の画像も含まれる。この参加者についての個人情報を保護するために画像加工処理を行なう。この画像加工処理は、天球画像記憶部２５に天球画像データ２５０を登録する前に実行される。

図１１を用いて、この画像加工処理を説明する。
まず、管理サーバ２０の制御部２１は、無人画像の取得処理を実行する（ステップＳ３−１）。具体的には、制御部２１の画像加工部２１４は、一般参加者が往来又は着席する立ち入り領域（参加者領域）を、参加者判定条件として特定し、人が存在しないときの無人の会場の風景画像（第１の天球画像）を予め取得する。
ここでは、図１２（ａ）に示すように、人がいない会場を撮影した天球画像７０１を取得する。

次に、管理サーバ２０の制御部２１は、総会開催時の天球画像の取得処理を実行する（ステップＳ３−２）。具体的には、制御部２１の画像加工部２１４は、会場に設置されたカメラで撮影された総会開催時の天球画像（第２の天球画像）を取得する。

次に、管理サーバ２０の制御部２１は、一般参加者の特定処理を実行する（ステップＳ３−３）。具体的には、制御部２１の画像加工部２１４は、無人画像（第１の天球画像）によって特定される参加者領域について、総会開催時の天球画像（第２の天球画像）において、一般参加者の人物画像を特定する。
ここでは、図１２（ｂ）に示すように、参加者が被写体として撮影された天球画像７０２を取得する。

次に、管理サーバ２０の制御部２１は、人物画像の加工処理を実行する（ステップＳ３−４）。具体的には、制御部２１の画像加工部２１４は、参加者判定条件に基づいて特定した人物画像を構成する画素を所定サイズのブロックにまとめるブロック処理を行なう。これにより、総会時被写体の解像度を落とし、参加者の人物画像をぼかす。
ここでは、図１２（ｃ）に示すように、参加者画像のみの解像度を落とした天球画像７０３を生成する。

以上、本実施形態によれば、以下に示す効果を得ることができる。
（１）本実施形態では、トップ画面３００において、カメラ選択部２１０が、カメラ選択メニュー３１０を出力する。各表示画面３２０には、議題に応じて、天球画像３３１、カメラ切替マップ３３４が出力される。これにより、複数のカメラで撮影された天球画像を、ユーザ端末１０における選択に応じて提供することができる。
表示画面３２０には、議題一覧メニュー３３２、議題表示３３３、スライド拡大表示３３５が出力される。これにより、ユーザ端末１０における選択に応じて、議題に応じた表示画像を提供することができる。そして、議題表示３３３により、ユーザ端末１０において、表示中の議題を把握することができる。また、スライド拡大表示３３５により、スライドを中心とした情報提供を行なうことができる。

（２）本実施形態では、スライド表示処理（ステップＳ１−２）の実行後、天球画像があると判定した場合（ステップＳ１−３において「ＹＥＳ」の場合）、管理サーバ２０の制御部２１は、天球表示処理を実行する（ステップＳ１−４）。これにより、天球画像を用いて、ユーザに対して情報提供を行なうことができる。
（３）本実施形態では、アイコンは表示可能と判定した場合（ステップＳ２−２において「ＹＥＳ」の場合）、管理サーバ２０の制御部２１は、アイコン表示処理を実行する（ステップＳ２−３）。これにより、ユーザ端末１０の出力部１５に表示された表示領域に応じて、補足説明を出力するためのアイコンを表示することができる。

（４）本実施形態では、アイコンが選択されたと判定した場合（ステップＳ２−４において「ＹＥＳ」の場合）、管理サーバ２０の制御部２１は、説明画面の補足説明表示処理を実行する（ステップＳ２−５）。これにより、天球画像に含まれるオブジェクトについての補足説明をユーザ端末１０に提供することができる。

（５）本実施形態では、補足説明の表示歪が大きいと判定した場合（ステップＳ２−７において「ＹＥＳ」の場合）、管理サーバ２０の制御部２１は、補足説明表示の消去処理を実行する（ステップＳ２−８）。天球画像に連動する画面に補足説明を貼り付けた場合、表示領域に応じて、補足説明の形状が変形する可能性があり、変形の度合いによって補足説明が読みにくくなることがある。表示済みで変形が大きい場合には消去することにより、的確な表示画面を出力することができる。

（６）本実施形態では、管理サーバ２０の制御部２１は、一般参加者の特定処理（ステップＳ３−３）、人物画像の加工処理（ステップＳ３−４）を実行する。これにより、一般参加者の個人情報の流出を抑制することができる。

また、上記実施形態は、以下の態様に変更してもよい。
・上記実施形態では、アイコンは表示可能と判定した場合（ステップＳ２−２において「ＹＥＳ」の場合）、管理サーバ２０の制御部２１は、アイコン表示処理を実行する（ステップＳ２−３）。この場合、マーカ座標に基づいて、アイコンの表示要否を判定する。アイコン表示は、マーカ座標に限定されるものではない。例えば、天球画像に含まれる被写体を画像認識し、被写体に応じてアイコンを表示するようにしてもよい。この場合には、例えば、管理サーバ２０の制御部２１は、表示領域に含まれる人物を特定する。そして、管理サーバ２０の制御部２１は、特定した人物の情報を説明者情報記憶部２３から取得し、補足説明として出力する。

・上記実施形態では、総会開催後に、動画を配信する。これに代えて、総会開催中に撮影された天球画像をリアルタイム或いはリアルタイムに近い状態で配信するようにしてもよい。

ここでは、総会会場内に複数のカメラを設置する。この場合、会場内に配置されたカメラのカメラＩＤをカメラ情報記憶部に登録しておく。そして、カメラで撮影した場合に映像に含まれる可能性がある被写体（オブジェクト）について、補足説明を行なう必要がある場合には、被写体の認識情報（配置位置や、被写体画像の特徴量）に対してマーカを設定しておく。このマーカには、補足ＩＤが関連付けられている。

そして、議事進行に応じて、天球画像の配信とビデオ再生とを使い分ける総会支援処理を実行する。このため、ビデオ記憶部に、議題ＩＤに関連付けて、総会で再生するビデオを登録しておく。

図１３を用いて、総会支援処理を説明する。
まず、管理サーバ２０の制御部２１は、議題の特定処理を実行する（ステップＳ４−１）。具体的には、制御部２１の進行管理部２１１は、総会運営者の指示に応じて、会場内のスクリーンに投影されたスライドを特定する。そして、進行管理部２１１は、投影スライドに応じて、現在の議題ＩＤを特定する。

次に、管理サーバ２０の制御部２１は、ビデオ説明かどうかについての判定処理を実行する（ステップＳ４−２）。具体的には、制御部２１の進行管理部２１１は、この議題ＩＤに関連付けられたビデオを検索する。そして、ビデオ記憶部に、議題ＩＤに関連付けられたビデオが登録されている場合には、ビデオ説明と判定する。

ビデオ説明と判定した場合（ステップＳ４−２において「ＹＥＳ」の場合）、管理サーバ２０の制御部２１は、ビデオ再生処理を実行する（ステップＳ４−３）。具体的には、制御部２１の進行管理部２１１は、ビデオ記憶部に、登録されているビデオをユーザ端末１０に配信し、出力部１５において再生する。

一方、ビデオ説明でないと判定した場合（ステップＳ４−２において「ＮＯ」の場合）、管理サーバ２０の制御部２１は、カメラ特定処理を実行する（ステップＳ４−４）。具体的には、制御部２１の進行管理部２１１は、カメラ情報記憶部から選択可能なカメラＩＤを取得する。次に、進行管理部２１１は、ユーザ端末１０の出力部１５に、選択可能なカメラＩＤを含めたカメラ選択画面を出力する。そして、進行管理部２１１は、ユーザ端末１０において選択されたカメラＩＤを特定する。なお、特定した議題に応じて、選択可能なカメラを予め設定しておいてもよい。この場合には、カメラ情報記憶部において、議題ＩＤに関連付けて選択可能なカメラＩＤを記録しておく。
また、議題ＩＤに関連付けられたカメラＩＤが１個の場合（利用可能なカメラが１台の場合）には、カメラ選択画面を出力することなく、このカメラ情報記憶部に記録されたカメラＩＤを特定するようにしてもよい。

次に、管理サーバ２０の制御部２１は、特定したカメラの映像の配信処理を実行する（ステップＳ４−５）。具体的には、制御部２１の天球表示部２１２は、特定されたカメラにおいて撮影した映像をユーザ端末１０に配信する。この場合、映像に含まれる被写体（オブジェクト）にマーカが設定されている場合には、天球画像において表示指示アイコンを出力する。ここでは、図１３に示す天球表示処理を実行する。

次に、管理サーバ２０の制御部２１は、議事の進行かどうかについての判定処理を実行する（ステップＳ４−６）。具体的には、制御部２１の進行管理部２１１は、投影スライドに関連付けられた新たな議題ＩＤが特定された場合には議事進行と判定する。
議事進行でないと判定した場合（ステップＳ４−６において「ＮＯ」の場合）、管理サーバ２０の制御部２１は、ビデオ説明かどうかについての判定処理（ステップＳ４−２）以降の処理を行なう。

一方、議事進行と判定した場合（ステップＳ４−６において「ＹＥＳ」の場合）、管理サーバ２０の制御部２１は、終了かどうかについての判定処理を実行する（ステップＳ４−７）。具体的には、制御部２１の進行管理部２１１は、最後の「クロージング」の投影スライドが表示された場合には、終了と判定する。

終了と判定した場合（ステップＳ４−７において「ＹＥＳ」の場合）、管理サーバ２０の制御部２１は、総会支援処理を終了する。
一方、終了でないと判定した場合（ステップＳ４−７において「ＮＯ」の場合）、管理サーバ２０の制御部２１は、議題の特定処理（ステップＳ４−１）以降の処理を繰り返す。

・上記実施形態では、管理サーバ２０の制御部２１は、議題の特定処理を実行する（ステップＳ１−１）。この場合、図８に示す議題一覧メニュー３３２を用いる。議題一覧メニュー３３２の形態は、これに限定されるものではない。例えば、天球画像において、総会で利用されていない領域に議題一覧メニューを貼り付けるようにしてもよい。
例えば、図１４に示すように、天球画像８００の天井面に議題一覧メニュー８０１を貼り付けるようにしてもよい。この場合には、視点方向に応じて議題一覧メニューを回転させて、地面が下側になるように議題一覧メニューを貼り付ける。

・上記実施形態では、天球画像に連動する重畳レイヤ内のマーカ座標にアイコンや補足説明を貼り付ける。これに代えて、天球画像にアイコンや補足説明を貼り付けてもよい。

・上記実施形態では、管理サーバ２０が、天球画像における画像加工処理を実行する。ここでは、参加者領域（参加者判定条件）の人物画像の画像加工処理を行なう。ここで、画像加工方法は、個人を特定できなければ、「ぼかし」に限定されない。例えば、人物画像の顔画像を他の画像に置き換えてもよい。
また、説明者の顔画像と一般参加者の顔画像とを識別して画像加工処理を行なうようにしてもよい。この場合には、説明者情報記憶部２３に、説明者の顔画像の特徴量を記憶しておく。参加者判定条件として、説明者の顔画像とは異なる特徴量を用いる。
そして、制御部２１の画像加工部２１４は、人物画像の顔画像の特徴量に基づいて、説明者と一般参加者とを識別する。この場合、人物画像の顔画像の特徴量が説明者情報記憶部２３に記憶されていない場合には、制御部２１の画像加工部２１４は、一般参加者と判定し、画像加工処理を行なう。一方、説明者情報記憶部２３に記憶された説明者と判定した場合には、画像加工処理を行なわない。

・上記実施形態では、管理サーバ２０が、株主総会の画像を提供する場合を説明した。本発明の適用対象は、株主総会に限定されるものではなく、カメラで撮影した天球画像を用いて情報を提供する場合に適用することができる。

１０…ユーザ端末、１１…制御部、１２…メモリ、１３…通信部、１４…入力部、１５…出力部、２０…管理サーバ、２１…制御部、２２…議題情報記憶部、２３…説明者情報記憶部、２４…スライド情報記憶部、２５…天球画像記憶部、２６…補足情報記憶部。

Claims (15)

1. 記憶部、入力部及び出力部に接続された制御部を備えた画像表示システムであって、
   前記記憶部は、複数のカメラのそれぞれによって撮影された天球画像を記憶し、
   前記制御部が、
   議事進行に応じて、前記カメラによって撮影された天球画像を選択するためのインターフェースを前記出力部に表示させ、
   前記入力部において、ユーザの操作により選択された天球画像を前記出力部に表示することを特徴とする画像表示システム。
2. 選択可能なカメラの配置を示したマップを前記出力部に表示し、
   前記マップにおいて前記ユーザの操作の操作により選択されたカメラで天球画像を出力部に表示することを特徴とする請求項１に記載の画像表示システム。
3. 前記制御部が、
   前記出力部に、議事進行における議題を選択可能な議題一覧を前記出力部に表示し、
   前記議題一覧において選択された議題を特定することを特徴とする請求項１又は２に記載の画像表示システム。
4. 前記制御部が、前記天球画像において、人物画像を特定し、
   参加者判定条件に基づいて、前記人物画像が参加者画像と判定した場合、前記参加者画像に対して画像加工処理を行なうことを特徴とする請求項１〜３の何れか一項に記載の画像表示システム。
5. 前記記憶部は、天球画像に含まれるオブジェクトの説明情報を記憶し、
   前記制御部が、
   前記天球画像の所定位置に、当該天球画像に含まれるオブジェクトについての説明情報を表示させる表示指示アイコンを表示し、
   ユーザによる前記表示指示アイコンの指定に応じて、前記説明情報を出力し、
   前記議事進行に応じて、前記表示指示アイコン又は前記説明情報を消去することを特徴とする請求項１〜４の何れか一項に記載の画像表示システム。
6. 前記天球画像は、前記ユーザにより表示領域を操作可能であり、
   前記制御部が、前記表示領域から前記オブジェクトの位置が基準値以上のずれを判定した場合、前記表示指示アイコン又は前記説明情報の表示を停止することを特徴とする請求項５に記載の画像表示システム。
7. 前記表示指示アイコン又は前記説明情報は、前記天球画像に貼り付けられていることを特徴とする請求項５又は６に記載の画像表示システム。
8. 前記表示指示アイコン又は前記説明情報は、前記天球画像に連動する重畳レイヤに貼り付けられていることを特徴とする請求項５〜７の何れか一項に記載の画像表示システム。
9. 前記制御部は、前記ユーザの操作により選択された前記カメラで撮影された天球画像を議事進行に応じて前記出力部に表示することを特徴とする請求項１〜８の何れか一項に記載の画像表示システム。
10. 前記制御部は、議事進行における特定の議題においては、前記インターフェースを前記出力部に表示させないことを特徴とする請求項１〜９のいずれか一項に記載の画像表示システム。
11. 前記天球画像は、議事が進行される本会場を撮影した第１天球画像と、ホワイエを撮影した第２天球画像と、を含み、
    前記制御部は、議事進行における特定の議題になると、前記出力部が前記第２天球画像を表示している場合であっても、前記第１天球画像の表示に切り替えることを特徴とする請求項１〜１０の何れか一項に記載の画像表示システム。
12. 議事進行における複数の議題のそれぞれに表示条件が設定されており、
    前記制御部は、前記表示条件に基づいて議事進行に応じた処理を行うことを特徴とする請求項１〜１１の何れか一項に記載の画像表示システム。
13. 記憶部、入力部及び出力部に接続された制御部を備えた画像表示システムを制御するプログラムであって、
    前記記憶部は、複数のカメラのそれぞれによって撮影された天球画像を記憶し、
    前記制御部を、
    議事進行に応じて、前記カメラによって撮影された天球画像を選択するためのインターフェースを前記出力部に表示させ、
    前記入力部において、ユーザの操作により選択された天球画像を前記出力部に表示する手段として機能させることを特徴とする画像表示プログラム。
14. 記憶部、入力部及び出力部に接続された制御部を備えた画像表示システムを制御する方法であって、
    前記記憶部は、複数のカメラのそれぞれによって撮影された天球画像を記憶し、
    前記制御部が、
    議事進行に応じて、前記カメラによって撮影された天球画像を選択するためのインターフェースを前記出力部に表示させ、
    前記入力部において、ユーザの操作により選択された天球画像を前記出力部に表示することを特徴とする画像表示方法。
15. 記憶部及び制御部を備えたサーバであって、
    前記記憶部は、複数のカメラのそれぞれによって撮影された撮影された天球画像を記憶
    し、
    前記制御部が、
    議事進行に応じて、前記カメラによって撮影された天球画像を選択するためのインターフェースをユーザ端末の出力部に表示させ、
    前記ユーザ端末の入力部において、ユーザの操作により選択された天球画像を前記出力部に表示させることを特徴とするサーバ。

Images