JP2024059438A - 画像処理システム、画像処理システムの制御方法、画像処理装置、画像処理方法 - Google Patents

Abstract

【課題】 収音装置に入り込む騒音を軽減させるための技術を提供すること。【解決手段】 冷却部を有する画像処理装置と、該画像処理装置の位置と収音装置の位置とに基づいて該画像処理装置の騒音の許容値を示す騒音許容パラメータを決定するサーバ装置と、を有する画像処理システムにおいて、該画像処理装置は、該冷却部の出力を、該騒音許容パラメータを用いて制御する。【選択図】 図２

Description

本開示は、騒音に係る制御技術に関するものである。

従来より、複数のカメラを用いた撮影システムで撮像した画像から、ユーザが指定した仮想視点から見た画像を作り出し、仮想視点映像として再生することができる仮想視点映像生成システムがある。

例えば、特許文献１には、撮影対象領域を複数の方向から撮影するための複数のカメラと、複数の画像処理装置と、画像生成装置と、が開示されている。この複数の画像処理装置は、それぞれ複数のカメラに接続されており、カメラから得られる画像からオブジェクト領域を抽出する。また、画像処理装置によるオブジェクト領域の抽出結果に応じた画像データは画像生成装置に送信される。画像生成装置は、送信されたオブジェクト領域の抽出結果に基づいて、仮想視点映像を生成することができる。

一方、テレビ番組やミュージックビデオの撮影においては、収音作業者がカメラの映り込みを回避しつつ、対象物に指向性の高いガンマイクを向けることで、動きのある対象物が発する音波の収音を実現している。

特許文献２によれば、画像に基づき検出した収音対象物の位置、特徴に基づき、収音指向性を制御することにより、精度よく音響信号を得ることができる。また、特許文献３によれば、周囲の騒音を測定し、騒音の許容増加量を計算し、算出した許容増加量に応じて機器冷却のためのファン回転数の制御が可能となっている。

特開2019-050593 特開2021-012314 特開2013-171919

前述の仮想視点映像生成システムのような画像処理システムにおいては、対象物が発する音波の収音を、マイクを用いることで実現しているが、対象物の周囲を取り囲むようにカメラや画像処理装置などの電子機器が配置されている。

画像処理装置やカメラなどの電子機器は、演算量に応じて消費電力を消費し、CPU、GPUなどの演算処理部が発熱することが知られている。演算量が多い場合はより演算処理部の発熱が大きくなり、電子機器内の温度や演算処理部の温度が、動作を保証する規定温度に到達してしまうことが考えられる。その場合、冷却ファンによる強制空冷をすることが考えられるが、その際に騒音（機材騒音）が発生するので、画像処理システムの場合、マイクへの機材騒音の入り込みが問題となる。本開示では、収音装置に入り込む騒音を軽減させるための技術を提供する。

本開示の一様態は、冷却部を有する画像処理装置と、前記画像処理装置の位置と、収音装置の位置と、に基づいて、該画像処理装置の騒音の許容値を示す騒音許容パラメータを決定するサーバ装置とを有し、前記画像処理装置は、前記冷却部の出力を、前記騒音許容パラメータを用いて制御することを特徴とする。

本開示の構成によれば、収音装置に入り込む騒音を軽減させることができる。

画像処理システムの構成例を示す図。 画像処理システム１０１（オペレーティング部１０５を除く）の機能構成例を示すブロック図。 騒音許容パラメータの決定方法の一例を示す図。 画像処理システム１０１における冷却部２１０の制御のフローチャート。 画像処理システム１０１の機能構成例を示すブロック図。 騒音許容パラメータの決定方法の一例を示す図。 画像処理システム１０１の機能構成例を示すブロック図。 騒音許容パラメータの決定方法の一例を示す図。 コンピュータ装置のハードウェア構成例を示すブロック図。

以下、添付図面を参照して実施形態を詳しく説明する。尚、以下の実施形態は特許請求の範囲に係る開示を限定するものではない。実施形態には複数の特徴が記載されているが、これらの複数の特徴の全てが開示に必須のものとは限らず、また、複数の特徴は任意に組み合わせられてもよい。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。

［第１の実施形態］
先ず、本実施形態に係る画像処理システムの構成例について、図１を用いて説明する。図１に示す如く、本実施形態に係る画像処理システム１０１は、撮像装置１０２と画像処理装置１０３のセット（図１では１０セット）、サーバ１０４、オペレーティング部１０５、収音装置１０７、を有する。

それぞれの撮像装置１０２は、撮影対象である撮影範囲１０６を囲むように配置されている。撮像装置１０２により撮影された撮影画像は、該撮像装置１０２に接続されている画像処理装置１０３に対して出力される。

画像処理装置１０３は、撮像装置１０２から受けた撮影画像に対して前景背景分離を行って、該撮影画像における前景を抽出する。そして画像処理装置１０３は、前景背景分離を行った撮影画像をサーバ１０４に対して送信する。

サーバ１０４は、それぞれの画像処理装置１０３から送信された撮影画像から抽出された前景の３次元モデルを生成する。そしてサーバ１０４は、オペレーティング部１０５から指定された仮想視点の位置姿勢に応じた仮想視点映像を、該３次元モデルを用いて生成し、該生成した仮想視点映像を該オペレーティング部１０５に対して送信する。

オペレーティング部１０５には、サーバ１０４から送信された仮想視点映像が表示され、ユーザは該仮想視点映像を閲覧すると共に、不図示の操作部を操作して仮想視点の位置姿勢を変更することができる。変更された仮想視点の位置姿勢はサーバ１０４に対して送信され、仮想視点映像の生成に利用される。

収音装置１０７は、周囲の音を集音し、該集音した音を示す信号をサーバ１０４に対して送信する。図１では、収音装置１０７は撮影範囲１０６の内側に設置されているが、設置する位置は撮影範囲１０６の内側に限らず、撮影範囲１０６の外側であっても良い。

本実施形態に係るサーバ１０４は、収音装置１０７と画像処理装置１０３との間の距離、撮像装置１０２による撮影の内容、に基づいて、該画像処理装置１０３の騒音の許容値を示す騒音許容パラメータを決定し、該決定した騒音許容パラメータを該画像処理装置１０３に対して送信する。画像処理装置１０３は、自身を冷却するための冷却部の出力を、サーバ１０４から受信した騒音許容パラメータを用いて制御する。

なお、図１に示す画像処理システム１０１は、スター型構成となっているが、この構成に加えて、画像処理装置１０３同士がデイジーチェーンにより接続され、そこからサーバ１０４に接続される構成としても良い。

また、図１では、撮像装置１０２と画像処理装置１０３のセットとして１０セットを示しているが、撮像装置１０２と画像処理装置１０３のセットの数は１０に限らない。また、撮像装置１０２と画像処理装置１０３とは１対１に限らず、多対単数、単数対多、であっても良い。

次に、画像処理システム１０１（オペレーティング部１０５を除く）の機能構成例について、図２のブロック図を用いて説明する。なお、図２では、撮像装置１０２と画像処理装置１０３のセットが１つであるケースについて示している。

サーバ１０４が有する機能部のうち、取得部２０２、取得部２０３、取得部２０４、決定部２０５、通信部２０６は、騒音制御に係る機能部であり、これらの機能部により、騒音制御システム２０１を実現させる。

取得部２０２は、収音装置１０７の位置を取得する。収音装置１０７の位置は、例えば、撮影範囲１０６の中心からの方向や距離、または、撮影範囲１０６の中心を原点とする座標系における３次元座標で表される。収音装置１０７の位置の取得方法には様々な方法がある。例えば、撮影範囲１０６の中心から収音装置１０７への方向や距離を予め計測しておき、該予め計測した方向や距離を「収音装置１０７の位置」として取得しても良い。また、無線などを用いて収音装置１０７の位置の測定を行うことで、収音装置１０７の位置を取得しても良い。

取得部２０４は、画像処理装置１０３の位置を取得する。画像処理装置１０３の位置は、収音装置１０７の位置と同じ座標系における位置として取得する。画像処理装置１０３の位置の取得方法には様々な方法がある。例えば、撮影範囲１０６の中心から画像処理装置１０３への方向や距離を予め計測しておき、該予め計測した方向や距離を「画像処理装置１０３の位置」として取得しても良い。また、無線などを用いて画像処理装置１０３の位置の測定を行うことで、画像処理装置１０３の位置を取得しても良い。

取得部２０３は、画像処理システム１０１を用いて行う撮影の内容（例えば、ミュージックビデオ撮影やテレビ番組撮影など）についての情報を撮影情報として取得する。例えば、一般的にミュージックホールのように音楽の収音では騒音は厳禁であるが、通常のテレビ番組などでは、テレビスタジオ程度の多少の騒音は許容される。取得する撮影情報は、どのような撮影を行うかについての情報に限定するものではなく、撮影時に許容される騒音の許容値等の騒音情報を撮影情報として取得しても良い。

決定部２０５は、取得部２０２が取得した収音装置１０７の位置、取得部２０４が取得した画像処理装置１０３の位置、取得部２０３が取得した撮影情報、に基づいて、「画像処理装置１０３の騒音の許容値を示す騒音許容パラメータ」を決定する。ここで、決定部２０５による騒音許容パラメータの決定方法の一例について、図３を用いて説明する。

決定部２０５は、取得部２０２が取得した収音装置１０７の位置と、取得部２０４が取得した画像処理装置１０３の位置と、の間の距離Ｒを求める。また、決定部２０５は、収音装置１０７に入り込んでも許容される機材全体の騒音値Ｎを特定する。騒音値Ｎは撮影情報ごとに設けられており、決定部２０５は、取得部２０３が取得した撮影情報に対応する騒音値Ｎを特定する。なお、騒音値Ｎは、撮影の内容から許容される騒音値を算出しても良いし、明示的に本撮影において許容する騒音値を定義しても良い。そして決定部２０５は、距離Ｒと、騒音値Ｎと、を用いて以下の（式１）を計算することで、騒音許容パラメータＮｔを求める。

Ｎｔ ＝ Ｎ＋２０ｌоｇ１０（Ｒ） … （式１）
なお、騒音値Ｎは、撮影情報によらず、一定の値としても良い。この場合、撮影情報は不要となる。通信部２０６は、決定部２０５により決定された騒音許容パラメータを画像処理装置１０３（通信部２０７）に対して送信する。

画像処理部２２０は、撮像装置１０２により撮影された撮影画像を取得し、該取得した撮影画像に対して前景背景分離（比較的処理負荷（計算負荷）が高い処理）を行って、該撮影画像における前景を抽出する。通信部２０７は、前景背景分離を行った撮影画像をサーバ１０４（通信部２０６）に対して送信する。

生成部２２１は、画像処理装置１０３から通信部２０６を介して受信した撮影画像から抽出された前景の３次元モデルを生成し、オペレーティング部１０５から指定された仮想視点の位置姿勢に応じた仮想視点映像を、該３次元モデルを用いて生成する。

送信部２２２は、生成部２２１により生成された仮想視点映像をオペレーティング部１０５に対して送信する。冷却部２１０は、冷却ファンなど、画像処理部２２０の一部もしくは全部を冷却するための装置である。

特性取得部２０８は、冷却部２１０の出力（例えばファンの回転速度）と、該出力において発生する騒音の値（騒音値）と、の関係を表す出力騒音特性を取得する。出力騒音特性を用いることで、指定の騒音値に対応する冷却部２１０の出力を求めることができる。出力騒音特性は、冷却部２１０の製品仕様を用いても良いし、制御部２０９で出力を変化させて測定しても構わない。このように、出力騒音特性を取得するための方法には様々な方法がある。

制御部２０９は、サーバ１０４から通信部２０７を介して受信した騒音許容パラメータと、特性取得部２０８が取得した出力騒音特性と、を用いて、冷却部２１０の目標出力を決定する。つまり、制御部２０９は、出力騒音特性において、騒音許容パラメータが示す騒音の許容値に対応する出力を、冷却部２１０の目標出力として決定（特定）する。そして制御部２０９は、冷却部２１０の出力が、冷却部２１０の目標出力となるように、冷却部２１０を制御する。

次に、画像処理システム１０１における冷却部２１０の制御について、図４のフローチャートに従って説明する。ステップＳ４０２では、取得部２０２は、収音装置１０７の位置を取得する。ステップＳ４０３では、取得部２０４は、画像処理装置１０３の位置を取得する。ステップＳ４０４では、取得部２０３は、撮影情報を取得する。ステップＳ４０５では、決定部２０５は、取得部２０２が取得した収音装置１０７の位置、取得部２０４が取得した画像処理装置１０３の位置、取得部２０３が取得した撮影情報、に基づいて、騒音許容パラメータを決定する。ステップＳ４０６では、通信部２０６は、決定部２０５により決定された騒音許容パラメータを画像処理装置１０３（通信部２０７）に対して送信する。ステップＳ４０７では、特性取得部２０８は、冷却部２１０の出力騒音特性を取得する。

ステップＳ４０８では、制御部２０９は、サーバ１０４から通信部２０７を介して受信した騒音許容パラメータと、特性取得部２０８が取得した出力騒音特性と、を用いて、冷却部２１０の目標出力を決定する。そして制御部２０９は、冷却部２１０の出力が、冷却部２１０の目標出力となるように、冷却部２１０を制御する。

上記の騒音制御を終了する場合には、処理はステップＳ４１０を介して終了し、上記の騒音制御を継続する場合には、処理はステップＳ４１０を介してステップＳ４０２に進む。

このように、本実施形態によれば、撮影中の装置の騒音低減と冷却の両立を実現することができる。なお、画像処理装置１０３に複数の騒音源が含まれる場合、それぞれの騒音源毎に騒音制御パラメータを設定しても構わないし、画像処理装置１０３の全体で出力騒音特性を計測して制御を行っても構わない。また、収音装置１０７の位置が固定されている場合には、図４のフローチャートにおいて２ループ目以降では、ステップＳ４０２をスキップして、ステップＳ４０３から処理を続けても構わない。

また、図２では、画像処理部２２０は画像処理装置１０３が有するものとしたが、撮像装置１０２が有しても構わない。この場合、画像処理部２２０は、前景背景分離を行った撮影画像をサーバ１０４（通信部２０６）に対して送信する。

［第２の実施形態］
本実施形態では、第１の実施形態との差分について説明し、以下で特に触れない限りは、第１の実施形態と同様であるものとする。本実施形態に係る画像処理システム１０１の機能構成例について、図５のブロック図を用いて説明する。図２に示した構成では、撮像装置１０２と画像処理装置１０３のセットが１つであるのに対し、図５に示した構成では、撮像装置１０２と画像処理装置１０３とのセットが複数となっている。

この場合、取得部２０４は、それぞれの画像処理装置１０３の位置を取得することになる。そして決定部２０５は、取得部２０２が取得した収音装置１０７の位置、取得部２０４が取得したそれぞれの画像処理装置１０３の位置、取得部２０３が取得した撮影情報、に基づいて、該画像処理装置１０３に対応する騒音許容パラメータを決定する。

ここで、決定部２０５による騒音許容パラメータの決定方法の一例について、図６を用いて説明する。図６では、撮像装置１０２と画像処理装置１０３のセットの数がｎ（ｎは３以上の整数）であるケースについて示している。画像処理装置１０３－ｍ（ｍ＝１，２，…ｎ）は、ｎ台の画像処理装置１０３のうちｍ台目の画像処理装置１０３を示している。

決定部２０５は、収音装置１０７の位置と画像処理装置１０３－１の位置との間の距離Ｒ１、収音装置１０７の位置と画像処理装置１０３－２の位置との間の距離Ｒ２、収音装置１０７の位置と画像処理装置１０３－ｎの位置との間の距離Ｒｎを求める。

Ｎｍは、画像処理装置１０３－ｍの騒音値が距離Ｒｍによって減衰した騒音値を表す。決定部２０５は、Ｎｍ＝２０ｌоｇ１０（Ｒｍ）を計算することで、Ｎｍを求める。本実施形態では、画像処理装置１０３－１～１０３－ｎのそれぞれの騒音値の総和を騒音値Ｎとする。取得部２０３は、以下の（式２）を計算することで、騒音値Ｎを求める。

Ｎ ＝ Ｎ１＋Ｎ２＋・・・＋Ｎｎ … （式２）
なお、取得部２０３は、以下の（式３）を計算することで騒音値Ｎを求めても良い。

そして以降は、第１の実施形態と同様に、決定部２０５は、Ｎｔｍ＝Ｎ＋２０ｌоｇ１０（Ｒｍ）を計算することで、画像処理装置１０３－ｍに対応する騒音許容パラメータＮｔｍを求めることができる。画像処理装置１０３－ｍは、騒音許容パラメータＮｔｍを用いて自身の冷却部２１０の出力制御を行う。なお、本実施形態では、騒音値Ｎ１～Ｎｎが全て同じ値（＝Ｎ１）であるものとする。このとき、騒音値Ｎ１は以下の（式４）で表される。

この場合、決定部２０５は、以下の（式５）を計算することで、画像処理装置１０３－ｍに対応する騒音許容パラメータＮｔｍを求めることができる。

そして以降は、第１の実施形態と同様に、画像処理装置１０３－ｍは、騒音許容パラメータＮｔｍを用いて自身の冷却部２１０の出力制御を行う。収音装置と画像処理装置との間の距離によって騒音許容パラメータが変化するため、本実施形態では、画像処理装置ごとに異なる騒音許容パラメータが設定されることとなる。なお、計算の簡略化のため、画像処理装置ごとに参照する収音装置を決定し、画像処理装置と決定した収音装置の位置から、画像処理装置ごとの騒音許容パラメータを設定しても良い。具体的には、画像処理装置と各収音装置との距離から、画像処理装置に最も近い収音装置を「参照する収音装置」とする。画像処理装置との距離が最も近い収音装置を「参照する収音装置」とすることで他の収音装置においても許容される騒音値を超えない騒音許容パラメータが設定可能となる。

［第３の実施形態］
本実施形態では、第１の実施形態との差分について説明し、以下で特に触れない限りは、第１の実施形態と同様であるものとする。本実施形態に係る画像処理システム１０１の機能構成例について、図７のブロック図を用いて説明する。図２に示した構成では、収音装置１０７の数が１つであるのに対し、図７に示した構成では、収音装置１０７の数が２となっている。なお、収音装置１０７の数が２以上であっても、以下の説明は同様に適用することができる。

この場合、取得部２０２は、それぞれの収音装置１０７の位置を取得することになる。そして決定部２０５は、取得部２０２が取得したそれぞれの収音装置１０７の位置、取得部２０４が取得した画像処理装置１０３の位置、取得部２０３が取得した撮影情報、に基づいて、騒音許容パラメータを決定する。

ここで、決定部２０５による騒音許容パラメータの決定方法の一例について、図８を用いて説明する。図８では、収音装置１０７の数がｎ（ｎは３以上の整数）であるケースについて示している。収音装置１０７－ｍ（ｍ＝１，２，…ｎ）は、ｎ台の収音装置１０７のうちｍ台目の収音装置１０７を示している。

決定部２０５は、収音装置１０７－１の位置と画像処理装置１０３の位置との間の距離Ｒ１、収音装置１０７－２の位置と画像処理装置１０３の位置との間の距離Ｒ２、収音装置１０７－ｎの位置と画像処理装置１０３の位置との間の距離Ｒｎを求める。

そして決定部２０５は、以下の（式６）をｍ＝１～ｎについて計算することで、収音装置１０７－１～１０７－ｎのそれぞれに対応する騒音許容パラメータを求めることができる。

Ｎｔｍ ＝ Ｎ＋２０ｌоｇ１０（Ｒｍ） … （式６）
そして決定部２０５は、Ｎｔ１～Ｎｔｎのうち最小の騒音許容パラメータを選択騒音許容パラメータとして選択し、通信部２０６は、該選択騒音許容パラメータを画像処理装置１０３（通信部２０７）に対して送信する。

なお、選択騒音許容パラメータは、Ｎｔ１～Ｎｔｎのうち最小の騒音許容パラメータであることに限らず、例えば、予め設定された閾値を超えない最大の騒音許容パラメータを選択騒音許容パラメータとしても良い。そして以降は、第１の実施形態と同様に、画像処理装置１０３は、選択騒音許容パラメータを用いて自身の冷却部２１０の出力制御を行う。

本実施形態においては、上式のように収音装置ごとに得られる騒音許容パラメータの中から値が最も小さいものを選択して、画像処理装置の騒音許容パラメータとする。これにより、全ての収音装置において許容される騒音値を満たすことが可能となる。

もしくは、画像処理装置と各収音装置との間の距離から、騒音許容パラメータを設定するために参照する収音装置を選定してもよい。例えば、画像処理装置からの距離が閾値以内となる収音装置を、参照する収音装置として選定しても良い。その場合、選定した収音装置にのみ上式を適用し、騒音許容パラメータを設定することが可能となり、全体の計算量を削減することができる。

なお、本実施形態では、撮像装置１０２と画像処理装置１０３のセットの数が１であるケースについて説明したが、複数あっても良い。その場合、本実施形態の騒音制御システム２０１を画像処理装置ごとに用いても構わない。また、第２の実施形態に係る騒音制御システム２０１のように、収音装置と画像処理装置の位置関係からそれぞれの画像処理装置の騒音許容パラメータを算出して送信しても構わない。

［第４の実施形態］
上記の各実施形態では、騒音制御システム２０１を、仮想視点映像を生成してオペレーティング部１０５に提供する画像処理システムに適用したケースについて説明したが、他の種類の画像処理を行う画像処理システムに適用しても構わない。

また、上記の各実施形態で説明した各種の処理の主体は、上記の主体に限らない。つまり、サーバ１０４が行う処理として説明した処理の一部もしくは全部を画像処理装置１０３が行っても良いし、画像処理装置１０３が行う処理として説明した処理の一部もしくは全部をサーバ１０４が行っても良い。

また、上記の各実施形態では、騒音値Ｎは撮影情報に応じた値としていたが、これに限らず、例えば、騒音値Ｎは、オペレーティング部１０５に対するユーザ操作に応じて選択しても構わない。

［第５の実施形態］
図２，５，７に示した画像処理装置１０３、サーバ１０４のそれぞれの機能部は、ハードウェアで実装しても良いし、ソフトウェア（コンピュータプログラム）で実装しても良い。後者の場合、該コンピュータプログラムを実行可能なコンピュータ装置は、画像処理装置１０３、サーバ１０４に適用可能である。

画像処理装置１０３、サーバ１０４に適用可能なコンピュータ装置のハードウェア構成例について、図９のブロック図を用いて説明する。なお、画像処理装置１０３、サーバ１０４に適用可能なコンピュータ装置のハードウェア構成は図９に示した構成に限らず、適宜変形／変更が可能である。また、図９に示したハードウェア構成を有するコンピュータ装置は、オペレーティング部１０５にも適用することができる。

ＣＰＵ９０１は、ＲＡＭ９０２やＲＯＭ９０３に格納されているコンピュータプログラムやデータを用いて各種の処理を実行する。これによりＣＰＵ９０１は、コンピュータ装置全体の動作制御を行うと共に、画像処理装置１０３、サーバ１０４、オペレーティング部１０５が行う処理として説明した各種の処理を実行もしくは制御する。

ＲＡＭ９０２は、ＲＯＭ９０３や外部記憶装置９０６からロードされたコンピュータプログラムやデータを格納するためのエリア、Ｉ／Ｆ９０７を介して外部装置から受信したコンピュータプログラムやデータを格納するためのエリア、を有する。さらにＲＡＭ９０２は、ＣＰＵ９０１が各種の処理を実行する際に用いるワークエリアを有する。このようにＲＡＭ９０２は、各種のエリアを適宜提供することができる。例えば、ＲＡＭ９０２は、フレームメモリとして割り当てたり、その他の各種データ例えば、カメラ情報、カメラパラメータを保存したりすることができる。また、騒音許容パラメータをＲＡＭ９０２で管理することもできる。

ＲＯＭ９０３には、コンピュータ装置の設定データ、コンピュータ装置の起動に係るコンピュータプログラムやデータ、コンピュータ装置の基本動作に係るコンピュータプログラムやデータ、などが格納されている。

操作部９０４は、キーボード、マウス、タッチパネル画面などのユーザインターフェースであり、ユーザが操作することで各種の情報や指示をコンピュータ装置に対して入力することができる。例えば、オペレーティング部１０５に適用したコンピュータ装置においては、ユーザは操作部９０４を操作することで、仮想視点の位置姿勢の変更指示を入力したり、騒音値Ｎを選択したりすることができる。

出力部９０５は、ＣＰＵ９０１による処理結果を出力する装置である。例えば、出力部９０５は、液晶画面やタッチパネル画面を有する表示装置であり、この場合、表示装置には、ＣＰＵ９０１による処理結果が画像や文字などでもって表示される。なお、出力部９０５は必須ではない。

外部記憶装置９０６は、ハードディスクドライブ装置などの大容量情報記憶装置である。外部記憶装置９０６には、ＯＳ（オペレーティングシステム）、コンピュータ装置を適用した装置（画像処理装置１０３、サーバ１０４、オペレーティング部１０５）が行う処理として説明した各種の処理をＣＰＵ９０１に実行もしくは制御させるためのコンピュータプログラムやデータ、などが保存されている。外部記憶装置９０６に保存されているデータには、上記の説明において、予め測定されたデータや既知の情報として取り扱ったデータが含まれる。更には、外部記憶装置９０６には、処理対象としての撮影画像が保存されていても良い。また、騒音許容パラメータを外部記憶装置９０６で保存することもできる。

外部記憶装置９０６に保存されているコンピュータプログラムやデータは、ＣＰＵ９０１による制御に従って適宜、ＲＡＭ９０２にロードされ、ＣＰＵ９０１による処理対象となる。

Ｉ／Ｆ９０７は、外部装置とのデータ通信を行うための通信インターフェースである。Ｉ／Ｆ９０７には、ＬＡＮやインターネット等のネットワーク、外部装置を接続することができ、本コンピュータ装置は、このＩ／Ｆ９０７を介して様々な情報を取得したり、送出したりすることができる。ＣＰＵ９０１、ＲＡＭ９０２、ＲＯＭ９０３、操作部９０４、出力部９０５、外部記憶装置９０６、Ｉ／Ｆ９０７、はいずれもシステムバス９０８に接続されている。

また、上記の各実施形態で使用した数値、処理タイミング、処理順、処理の主体、データ（情報）の取得方法／送信先／送信元／格納場所などは、具体的な説明を行うために一例として挙げたもので、このような一例に限定することを意図したものではない。

また、以上説明した各実施形態の一部若しくは全部を適宜組み合わせて使用しても構わない。また、以上説明した各実施形態の一部若しくは全部を選択的に使用しても構わない。

（その他の実施形態）
本開示は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

本明細書の本開示は、以下の画像処理システム、画像処理システムの制御方法、画像処理装置、画像処理方法、コンピュータプログラムを含む。

（項目１）
冷却部を有する画像処理装置と、
前記画像処理装置の位置と、収音装置の位置と、に基づいて、該画像処理装置の騒音の許容値を示す騒音許容パラメータを決定するサーバ装置と
を有し、
前記画像処理装置は、
前記冷却部の出力を、前記騒音許容パラメータを用いて制御する
ことを特徴とする画像処理システム。

（項目２）
前記サーバ装置は、
前記画像処理装置の位置と前記収音装置の位置との間の距離と、撮影する内容に応じた騒音の許容値を示すパラメータと、に基づいて、前記騒音許容パラメータを決定することを特徴とする項目１に記載の画像処理システム。

（項目３）
前記サーバ装置は、
画像処理装置ごとに、該画像処理装置の位置と前記収音装置の位置との間の距離に基づく騒音値を求め、該騒音値の総和と該距離とに基づいて、該画像処理装置に対応する騒音許容パラメータを決定することを特徴とする項目１に記載の画像処理システム。

（項目４）
前記サーバ装置は、
画像処理装置ごとに、該画像処理装置の位置と前記収音装置の位置との間の距離と、撮影する内容に応じた騒音の許容値を示すパラメータと、該画像処理装置の数と、に基づいて、該画像処理装置に対応する騒音許容パラメータを決定することを特徴とする項目１に記載の画像処理システム。

（項目５）
前記サーバ装置は、
前記画像処理装置の位置と該画像処理装置に最も近い収音装置の位置との間の距離と、撮影する内容に応じた騒音の許容値を示すパラメータと、に基づいて、前記騒音許容パラメータを決定することを特徴とする項目１に記載の画像処理システム。

（項目６）
前記サーバ装置は、
収音装置ごとに、前記画像処理装置の位置と該収音装置の位置との間の距離と、撮影する内容に応じた騒音の許容値を示すパラメータと、に基づいて、該収音装置に対応する騒音許容パラメータを求め、該求めた騒音許容パラメータのうち１つを選択し、
前記画像処理装置は、
前記冷却部の出力を、前記選択された騒音許容パラメータを用いて制御する
ことを特徴とする項目１に記載の画像処理システム。

（項目７）
前記画像処理装置は、
前記冷却部の出力と、該出力に対して発生する騒音と、の関係を表す出力騒音特性と、前記騒音許容パラメータと、に基づいて、前記冷却部の目標出力を決定し、前記冷却部の出力が該目標出力となるように制御する
ことを特徴とする項目１ないし６のいずれか１項目に記載の画像処理システム。

（項目８）
前記画像処理装置は、撮像装置により撮影された撮影画像に対して前景背景分離を行い、
前記サーバ装置は、前記前景背景分離により得られる前景に基づいて仮想視点映像を生成する
ことを特徴とする項目１ないし７のいずれか１項目に記載の画像処理システム。

（項目９）
前記画像処理装置は、前記冷却部の出力であるファンの回転速度を、前記騒音許容パラメータを用いて制御することを特徴とする項目１ないし８のいずれか１項目に記載の画像処理システム。

（項目１０）
冷却部を有する画像処理装置と、
前記画像処理装置の位置と、収音装置の位置と、に基づいて、該画像処理装置の騒音の許容値を示す騒音許容パラメータを決定するサーバ装置と
を有する画像処理システムにおいて、
前記画像処理装置は、
前記冷却部の出力を、前記騒音許容パラメータを用いて制御する
ことを特徴とする画像処理システムの制御方法。

（項目１１）
冷却部を有する画像処理装置であって、
前記画像処理装置の位置と、収音装置の位置と、に基づいて、該画像処理装置の騒音の許容値を示す騒音許容パラメータを決定する決定手段と、
前記冷却部の出力を、前記騒音許容パラメータを用いて制御する制御手段と
ことを特徴とする画像処理装置。

（項目１２）
冷却部を有する画像処理装置が行う画像処理方法であって、
前記画像処理装置の決定手段が、前記画像処理装置の位置と、収音装置の位置と、に基づいて、該画像処理装置の騒音の許容値を示す騒音許容パラメータを決定する決定工程と、
前記画像処理装置の制御手段が、前記冷却部の出力を、前記騒音許容パラメータを用いて制御する制御工程と
ことを特徴とする画像処理方法。

（項目１３）
コンピュータを、項目１１に記載の画像処理装置の各手段として機能させるためのコンピュータプログラム。

本開示は上記実施形態に制限されるものではなく、本開示の精神及び範囲から離脱することなく、様々な変更及び変形が可能である。従って、本開示の範囲を公にするために請求項を添付する。

１０１：画像処理システム １０２：撮像装置 １０３：画像処理装置 １０４：サーバ １０７：収音装置 ２０１：騒音制御システム ２０２：取得部 ２０３：取得部 ２０４：取得部 ２０５：決定部 ２０６：通信部 ２０７：通信部 ２０８：特性取得部 ２０９：制御部 ２１０：冷却部 ２２０：画像処理部 ２２１：生成部 ２２２：送信部

Claims (13)

1. 冷却部を有する画像処理装置と、
   前記画像処理装置の位置と、収音装置の位置と、に基づいて、該画像処理装置の騒音の許容値を示す騒音許容パラメータを決定するサーバ装置と
   を有し、
   前記画像処理装置は、
   前記冷却部の出力を、前記騒音許容パラメータを用いて制御する
   ことを特徴とする画像処理システム。
2. 前記サーバ装置は、
   前記画像処理装置の位置と前記収音装置の位置との間の距離と、撮影する内容に応じた騒音の許容値を示すパラメータと、に基づいて、前記騒音許容パラメータを決定することを特徴とする請求項１に記載の画像処理システム。
3. 前記サーバ装置は、
   画像処理装置ごとに、該画像処理装置の位置と前記収音装置の位置との間の距離に基づく騒音値を求め、該騒音値の総和と該距離とに基づいて、該画像処理装置に対応する騒音許容パラメータを決定することを特徴とする請求項１に記載の画像処理システム。
4. 前記サーバ装置は、
   画像処理装置ごとに、該画像処理装置の位置と前記収音装置の位置との間の距離と、撮影する内容に応じた騒音の許容値を示すパラメータと、該画像処理装置の数と、に基づいて、該画像処理装置に対応する騒音許容パラメータを決定することを特徴とする請求項１に記載の画像処理システム。
5. 前記サーバ装置は、
   前記画像処理装置の位置と該画像処理装置に最も近い収音装置の位置との間の距離と、撮影する内容に応じた騒音の許容値を示すパラメータと、に基づいて、前記騒音許容パラメータを決定することを特徴とする請求項１に記載の画像処理システム。
6. 前記サーバ装置は、
   収音装置ごとに、前記画像処理装置の位置と該収音装置の位置との間の距離と、撮影する内容に応じた騒音の許容値を示すパラメータと、に基づいて、該収音装置に対応する騒音許容パラメータを求め、該求めた騒音許容パラメータのうち１つを選択し、
   前記画像処理装置は、
   前記冷却部の出力を、前記選択された騒音許容パラメータを用いて制御する
   ことを特徴とする請求項１に記載の画像処理システム。
7. 前記画像処理装置は、
   前記冷却部の出力と、該出力に対して発生する騒音と、の関係を表す出力騒音特性と、前記騒音許容パラメータと、に基づいて、前記冷却部の目標出力を決定し、前記冷却部の出力が該目標出力となるように制御する
   ことを特徴とする請求項１に記載の画像処理システム。
8. 前記画像処理装置は、撮像装置により撮影された撮影画像に対して前景背景分離を行い、
   前記サーバ装置は、前記前景背景分離により得られる前景に基づいて仮想視点映像を生成する
   ことを特徴とする請求項１に記載の画像処理システム。
9. 前記画像処理装置は、前記冷却部の出力であるファンの回転速度を、前記騒音許容パラメータを用いて制御することを特徴とする請求項１に記載の画像処理システム。
10. 冷却部を有する画像処理装置と、
    前記画像処理装置の位置と、収音装置の位置と、に基づいて、該画像処理装置の騒音の許容値を示す騒音許容パラメータを決定するサーバ装置と
    を有する画像処理システムにおいて、
    前記画像処理装置は、
    前記冷却部の出力を、前記騒音許容パラメータを用いて制御する
    ことを特徴とする画像処理システムの制御方法。
11. 冷却部を有する画像処理装置であって、
    前記画像処理装置の位置と、収音装置の位置と、に基づいて、該画像処理装置の騒音の許容値を示す騒音許容パラメータを決定する決定手段と、
    前記冷却部の出力を、前記騒音許容パラメータを用いて制御する制御手段と
    ことを特徴とする画像処理装置。
12. 冷却部を有する画像処理装置が行う画像処理方法であって、
    前記画像処理装置の決定手段が、前記画像処理装置の位置と、収音装置の位置と、に基づいて、該画像処理装置の騒音の許容値を示す騒音許容パラメータを決定する決定工程と、
    前記画像処理装置の制御手段が、前記冷却部の出力を、前記騒音許容パラメータを用いて制御する制御工程と
    ことを特徴とする画像処理方法。
13. コンピュータを、請求項１１に記載の画像処理装置の各手段として機能させるためのコンピュータプログラム。

Images