JP2003198886A

JP2003198886A - 情報処理システム

Info

Publication number: JP2003198886A
Application number: JP2001401221A
Authority: JP
Inventors: Yuichi Kojima; 雄一小島; Takashi Otobe; 孝乙部; Kazumasa Takahashi; 一正高橋; Nobuyuki Ishikawa; 伸行石川; Sojiro Kizu; 聡二郎木津
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2001-12-28
Filing date: 2001-12-28
Publication date: 2003-07-11
Anticipated expiration: 2021-12-28
Also published as: JP3956696B2

Abstract

(57)【要約】【課題】プレーヤ等の視点からの画像情報や音情報な
どをプレーヤの動きに応じて見やすく迫力のある情報に
したり，さらに面白く楽しい情報にして視聴者に届ける
ことを可能とする。【解決手段】複数のグループに属する一または二以上
のメンバーによって所定の空間で行われるイベントのキ
ーパーソンの身体に挿着した撮像手段１００と，撮像手
段の画像情報を無線送信する無線送信手段２００と，撮
像手段からの画像情報を無線受信する無線受信手段４０
０と，受信手段で受信した画像情報に基づいてキーパー
ソンの身体の動きに応じた画像処理を行う画像情報処理
手段６００とを備えた。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は，画像情報や音情報
に対して所定の処理を行って出力する情報処理システ
ム，特にスポーツのプレーヤ，イベントの出演者などの
身体に取付けたカメラからの画像情報や音情報をプレー
ヤや出演者などの身体の動きに応じて見やすい形に画像
情報や音情報を処理する情報処理システムに関する。

【０００２】

【従来の技術】従来，スポーツや演劇などのイベントに
おける映像音声情報はプレーヤや出演者などを眺める視
点からのものだった。例えば特開２０００−３３３０８
０号公報に記載のものにおいては，スポーツの試合など
で移動する被写体をカメラで撮影し，撮影対象を識別し
て撮影対象の位置を検出し選手の名前等をスーパーイン
ポーズして表示する画像処理が行われている。

【０００３】ところで，プレーヤがどんな風に周囲の情
報を捉え，どんな風に感じているかは従来なかなか入手
が難しかった。それだけにプレーヤや出演者等の視点で
の情報，プレーヤ等の置かれた環境の情報はコンテンツ
として大きな価値を有する。特に視聴者にはプレーヤと
同じ情報を共有したいという参加意識が底流にあること
からその価値はさらに大きい。

【０００４】プレーヤや出演者の視点からの画像情報や
音情報をユーザーへ届けるものとしては，例えばＦ１レ
ースやスキージャンプ競技でレースカーやスキーなどに
挿着したカメラの映像をそのままユーザーへ届けるもの
がある。

【０００５】また，プレーやの置かれた環境の情報につ
いてはマラソンランナーの感覚を擬似的に味わう装置と
して例えば特開２０００−３４２７１３号公報に開示さ
れた周囲の映像，音，温度，ランナーの心拍数，呼吸等
の体調情報をトレッドミルの周辺へ配ることでトレッド
ミル上で走るランナーに疑似体験を与えるようなものも
ある。

【０００６】

【発明が解決しようとする課題】プレーヤや出演者の捉
える情報で最も情報量の多いものはカメラからの映像情
報である。しかしながら，従来は，カメラが捉える映像
が比較的単純であり、プレーヤや出演者の多彩な動きに
は対応していないため、例えば球技のような人気の高い
スポーツへの応用が難しいという問題点がある。例えば
身体の動きが激しかったり，身体の動きが大きい場合，
画像の揺れが激しく鑑賞者が見るに耐え難い画像になる
ことも多い。

【０００７】このような問題もあり，プレーヤや出演者
に直接カメラを取付けてプレーヤ等の視点からの画像情
報などを見やすい情報にしたり，さらに面白く楽しい情
報にしてユーザへ届けることを実現する手段は今までな
かった。

【０００８】そこで，本発明は，このような問題に鑑み
てなされたもので，その目的とするところは，プレーヤ
等の視点からの画像情報や音情報などをプレーヤの動き
に応じて見やすく迫力のある情報にしたり，さらに面白
く楽しい情報にすることができる情報処理システムを提
供することにある。

【０００９】

【課題を解決するための手段】上記課題を解決するため
に，本発明によれば，例えば複数のグループに属する一
または二以上のメンバーによって所定の空間で行われる
イベントのキーパーソンの身体に挿着した撮像手段と，
前記撮像手段の画像情報を無線送信する送信手段と，前
記撮像手段からの画像情報を無線受信する受信手段と，
前記受信手段で受信した画像情報に基づいて前記キーパ
ーソンの身体の動きに応じた画像処理を行う画像処理手
段とを備えたことを特徴とする画像処理システムが提供
される。

【００１０】本発明では，例えばスポーツや演劇、オペ
ラなどにおいて、演じられるイベントの全体の進行に大
きな影響を与える人、すなわちキーパーソンの身体にカ
メラ等の撮像手段を取り付ける。カメラ等の取り付けは
例えばキーパーソンの視線に応じた映像を撮るために頭
部などに取り付ける。カメラ等からの映像信号（画像信
号）は無線送信手段でこれに対応する近くの無線受信手
段へ送られる。かかる無線送受信手段を介して送られた
映像信号は例えばデジタル化され身体の動きの情報に基
づき身体の動きに合わせて画像処理が行われる。このよ
うに，プレーヤの動きに応じて画像情報を処理すること
により，プレーヤ等の視点からの画像情報などを見やす
い情報にしたり，面白く楽しい情報にして視聴者に提供
することができる。

【００１１】また、前記画像処理手段は，前記キーパー
ソンの身体の動きに応じてアングルを切替えてシーンチ
ェンジの画像処理を行う処理をするようにしてもよい。
例えば，身体に取付けられたカメラ等からの映像信号か
ら着目対象画像（具体的には例えば着目される人や物の
画素ブロック）を取り出す際に、着目対象画像を切り替
えてアングルを切り替えてシーンチェンジを行うきっか
けに、カメラを取り付けた身体の動きを用いることによ
り，野球試合においてピッチャーを見ているキャッチャ
ーが盗塁を見つけて立上がりカメラアングルが変るなど
キーパーソンの大きな動きに応じて画像処理を行うこと
ができる。これにより，視聴者に対して見やすく迫力の
ある画像を提供できる。

【００１２】また，前記画像処理手段は，前記キーパー
ソンの身体の動きを前記受信手段で受信した画像情報の
出力を処理することにより検出するようにしてもよい。
これにより，身体の動きを検出する装置を別途設ける必
要がなくなる。

【００１３】また，前記受信手段で受信した画像情報の
出力に基づいて着目対象画像を取出して画像のブレを検
出し，画像のブレが小さいと判断した場合はそのブレを
補正するようにしてもよい。例えば受信手段で受信した
画像情報から着目対象画像を取出し画像のブレを検出し
た際，画像のブレが小さく着目対象画像の画面内の動き
が撮像手段側の動きによると判断した場合、すなわち着
目対象画像が撮像手段の撮像範囲にありその範囲から外
れそうにもならないと判断した場合には、その動きを補
正する。これにより，画面内で着目対象画像が着目対象
画像の動きによってのみ動いて見えるように画像処理を
行うことができ，視聴者に見やすい画像にすることがで
きる。

【００１４】また，前記画像処理手段は，前記受信手段
で受信した画像情報の出力に基づいて着目対象画像を取
出して画像のブレを検出し，画像のブレが大きいと判断
したときは別の着目対象画像に切替えて画像処理を行う
ようにしてもよい。例えば受信手段で受信した画像情報
の出力に基づいて着目対象画像を取出し画像のブレを検
出した際，キーパーソンの身体の動が大きいため画像の
ブレが大きく着目対象画像が撮像手段の撮像範囲から外
れそうになるか若しくは外れてしまったと判断した場合
には、他の着目対象画像を取り出し画像信号の処理をそ
の新たな着目対象画像に対して行うことにより，キーパ
ーソンの身体の動きが大きい場合に着目対象画像が切り
替ったことが視聴者にわかるので，より見やすく迫力の
ある画像を提供することができる。

【００１５】また，前記画像処理手段は，前記キーパー
ソンの身体の動きを振動ジャイロにより検出するように
してもよい。例えば身体の動きを検出するのに画像信号
処理を用いる場合には注目しているマーカに似たような
特徴を持つ画像が現れると判定を誤るおそれがあるが，
三次元の動きを検出する振動ジャイロによってキーパー
ソンの身体の動きを検出すれば上記の場合でも判定を誤
ることを防止できる。

【００１６】また，前記撮像手段を取付けるキーパーソ
ンは，野球のキャッチャー又はピッチャーとしてもよ
い。これにより，撮像手段で撮像する特定対象が球から
盗塁手に切替えるなど野球に特有の画像処理を行うこと
ができる。

【００１７】また，前記キーパーソンの身体には，撮像
手段とともに集音手段も挿着し，前記送信手段は画像情
報とともに音情報も送信し，前記受信手段は画像情報と
ともに音情報も受信するようにしてもよい。画像の臨場
感には音の存在も大きいので，さらに迫力のある画像等
を視聴者に提供することができる。また，音情報のうち
プレーヤの音声を外部へ出すことがゲーム進行上好まし
くない場合もあるため、音声のみをマスクしてそれ以外
の音を視聴者に届けるような処理をすることもできる。

【００１８】

【発明の実施の形態】以下，本発明の実施の形態を図面
を参照して説明する。図１は本実施の形態にかかる情報
処理システム全体の構成を示すブロック図である。

【００１９】本発明にかかる情報処理システムは，大別
するとスポーツなどのイベントを行う者の動きに応じた
画像情報や音情報を取込んで無線で送信するためにその
行為者に取付ける装着者側の撮像手段１００・集音手段
１１０・無線手段１２０と，画像情報や音情報を無線で
受信してその画像情報や音情報の情報処理を行う処理装
置側の情報処理装置３００を備える。

【００２０】上記情報処理装置３００は，装着者側の無
線装置１２０からの無線情報を受信等する無線装置３２
０，この無線装置３２０で受信した画像情報，音情報を
加工処理する情報処理手段３５０，処理した画像を記憶
する記憶手段等を備えた各種データベース３６０，ＣＰ
Ｕ，ＣＰＵが行うプログラムなどを記憶したＲＯＭ，Ｃ
ＰＵが各種処理を行うときに使用するＲＡＭなどを設け
た制御部３７０，受信した画像情報を一時的に記憶する
フレームメモリ等各種メモリ３８０を備える。

【００２１】上記装着者側の撮像手段１００等は，スポ
ーツや演劇、オペラなどにおいて演じられるイベントの
全体の進行に大きな影響を与える人、すなわちキーパー
ソンの身体に取付けられる。従って，撮像手段１００等
はスポーツなどのイベントを行うのに邪魔にならないよ
うに，例えば撮像手段１００としては小型ＣＣＤカメ
ラ，集音手段１１０としては小型マイク，無線装置とし
ては小型無線装置など小型のものが好ましい。

【００２２】上記キーパーソンとしては例えば野球であ
ればキャッチャーやピッチャーなどが挙げられる。ま
た，サッカーであれば司令塔，テニスやバトミントンで
あれば両方の選手，フットボールであればクオーターバ
ックなどが挙げられる。これらの者から見た画像等を視
聴者に届けることができれば，スポーツの試合等の臨場
感が増し，より劇的な画像等を提供することができる。

【００２３】ここで，上記撮像手段１００等の取付例を
図２〜図５に示す。例えば図２に示すようにヘルメット
又は帽子など頭に被る被り物１０２に取りつける。この
場合例えばヘルメット等の登頂部の空隙に撮像手段１０
０，集音手段１１０と無線装置１２０を収める。なお，
無線手段１２０のアンテナはヘルメット等の周辺に目立
たない様に取り付ける。

【００２４】他の取付け例として，上記撮像手段１００
等は図３に示すように眼鏡１０４のつる１０６に取りつ
けてもよい。普段眼鏡１０４を掛けない人は、度の入ら
ない眼鏡１０４をするようにしてもよい。この場合、無
線手段１２０のアンテナは眼鏡１０４のフレームなどを
使用してもよい。

【００２５】他の取付け例として、上記撮像手段１００
等は図４に示すように耳の上側に取りつけるようにして
もよい。この場合，例えば補聴器のような取付方やヘッ
ドホンのような取付方によって取り付けてもよい。

【００２６】また、野球のキャッチャーに取り付ける場
合は、図５に示すようにキャッチャーマスク１０８に撮
像手段１００，集音手段１１０を取り付け、ヘルメット
１０２に無線手段１２０を取り付けるようにしてもよ
い。この場合、撮像手段１００と無線手段１２０はごく
近傍にあるので例えば赤外線を用いた近接用の伝送手段
１２２，１２２を使うのが好ましい。これにより本体の
電波を使った無線手段１２０との干渉を軽減することが
できる。

【００２７】また、上記撮像手段１００としてカメラの
光学系は広角が望ましく例えば魚眼レンズなどを用いる
事で、画角１８０度くらいの広い範囲の映像を捉える事
が可能になる。広角レンズで撮影した映像（画像）を使
用すれば，画像処理によって目的物を捉えるように加工
するのが容易となる。

【００２８】次に，本実施の形態にかかる無線装置につ
いて説明する。装着者側の無線装置１２０は，撮像手段
１００からの画像情報や集音手段１１０からの音情報を
符号化等する符号化器等１３０とこの符号化された情報
を無線情報として無線送信する無線送信手段２００と，
必要に応じて無線情報をセキュリティーコードにより変
換するセキュリティ手段１４０を備える。

【００２９】また，処理装置側の無線装置３２０は，装
着者側の無線装置１２０からの情報を無線で受信する無
線受信手段４００と，この無線受信手段４００で受信し
た画像情報や音情報を復号化等する復号器等３３０と，
必要に応じて無線情報をセキュリティーコードにより元
に戻すセキュリティ手段３４０を備える。

【００３０】ここではこれらの無線装置としてデジタル
ＦＰＵシステムを用いた例を図６〜図１５を参照しなが
ら説明する。

【００３１】この場合の無線送信手段２００となるデジ
タル送信機(Tx)は、図６に示すように送信制御部２１０
と送信高周波部２２０，アンテナ２３０などから構成さ
れる。送信制御部２１０は、符号化器等から伝送に適し
たＴＳ（Transport Stream）形式の信号を入力し、伝送
路符号化を行ってＩＦ信号を出力する。送信高周波部２
２０は、ＩＦ信号を入力し、周波数変換、電力増幅を行
ってＲＦ信号を出力する。

【００３２】また無線受信手段４００となるデジタルＦ
ＰＵ受信機(Rx)は、受信高周波部４２０，受信制御部４
１０，アンテナ４３０などから構成される。受信高周波
部４２０は、ＲＦ信号を入力し、周波数変換を行ってＩ
Ｆ信号を出力する。受信制御部４１０は、ＩＦ信号を入
力し、伝送路復号を行い、復号器等３３０へＴＳ形式の
信号を出力する。

【００３３】ここで無線送受信の変調方式としては、例
えば多重反射に強いＯＦＤＭ（直行周波数分割多重方
式）を用いた伝送方式を適用する。ＯＦＤＭの基本パラ
メータとの例として図７にＯＦＤＭ方式の伝送パラメー
タを、図８に伝送容量を示す。伝送パラメータは変調方
式と内符号の符号化率の組み合わせにおいて、ＴＳレー
ト５９．６４８（Mbps）および４４．７３６（Mbps）の
伝送パラメータを確保できるようなＦＦＴサンプリング
クロックを選定する。

【００３４】以下にＦＦＴサンプリングクロックの計算
法を示す。目標とするＴＳレートをTSR(Mbps)、データ
キャリア本数をD(本)、変調方式によって決まる帯域利
用効率をM(bit/Hz)、内符号の符号化率をR、有効シンボ
ル長をTe(ms)、ガードインタバル比をGrとすると、以下
の関係が成立する。

【００３５】 TSR = D×M×R／(Te×(１＋Gr)) …（１）ここで、Teについて求めると、 Te = D×M×R／(TSR×(１＋Gr)) …（２）ここで、ＦＦＴポイント数をP、ＦＦＴサンプリングク
ロックをFs(MHz)とすると、Fs = 1／(Te／P)であるから
（２）式を代入して整理すると、 Fs = TSR×(１＋Gr) ×P／(D×M×R) …（３）ここで、ＴＳレートTSR = 59.648 (Mbps)、ガードイン
タバル比Gr = 1/16、データキャリア本数D = 672、６４
ＱＡＭの場合の帯域利用効率M = 6、ＦＦＴポイント数P
= 1024を（３）式に代入してFsを求めると、 Fs = 19.3145904761905 (MHz) となる。

【００３６】上記符号化器等１３０の符号化器(Encode
r)、再多重化器(ReMUX)、または他のデジタルＦＰＵ受
信機(Rx)等とデジタルＦＰＵ送信機(Tx)とを接続する場
合の接続形態としては，例えば外インタリーブと誤り訂
正内符号との間で接続する場合、ＡＲＩＢ標準規格「テ
レビジョン放送番組素材伝送用データ・クロック別送イ
ンタフェース」（ＡＲＩＢＳＴＤ−Ｂ１８）を使用す
る。デジタルＦＰＵ受信機(Rx)と復号器等(Decoder)と
の接続形態もこれに対応する接続形態とする。

【００３７】その他の接続形態として，例えば情報源符
号化／多重化とデータフレーム同期との間で接続する場
合、ＤＶＢ−ＡＳＩ（ETSI EN 50083-9 "Cabled distri
bution systems for television, sound and interacti
ve multimedia signals Part9 :Interfaces for CATV/S
MATV headends and similar professional equipment f
or DVB/MPEG-2 transport streams"）の204byte/packet
(with 16 dummy byte)を使用してもよい。

【００３８】なお、上記の場合、クロック信号とデータ
の流れは、同一方向となることを基本とする。デジタル
ＦＰＵ送信機は外部クロックで動作可能とする。また、
必要に応じて符号化器または再多重化器等にクロックを
供給できるよう、デジタルＦＰＵ送信機はクロックの供
給機能を有する。

【００３９】次に、上記送信制御部２１０の構成を図９
を参照しながら説明する。送信制御部は、データフレー
ム同期（オプション）、簡易スクランブル（オプショ
ン），エネルギー拡散、誤り訂正外符号化、外インタリ
ーブ、誤り訂正内符号化，マッピング、ＯＦＤＭフレー
ム構成、ＯＦＤＭ変調などを行ってＩＦ信号を出力する
ものである。

【００４０】上記データフレーム同期は、簡易スクラン
ブルを用いる場合のオプションであり、簡易スクランブ
ルとセットで使用するものとする。従って、簡易スクラ
ンブルを使用しない場合には、データフレーム同期も使
用しない。データフレーム同期は、コーデックまたは再
多重化器から送信制御部に入力されるＴＳを、８ＴＳパ
ケット単位でフレーミングする。データフレームの最初
の同期バイトは、通常のＴＳ同期バイト０ｘ４７を反転
し０ｘＢ８とする。

【００４１】上記簡易スクランブルはオプションであ
る。本規格で扱う無線伝送システムは特定の相手方に対
して行われる通信であり設備規模の縮小と消費電力の削
減を図るため、スクランブルをかける場合は、１６ビッ
トの擬似ランダム系列（生成多項式Ｘ^１６＋Ｘ^１２＋
Ｘ^３＋Ｘ＋１）を加算する簡易なスクランブル方式とす
る。ＦＰＵは信号を受けるために方向調整を必要とする
など秘匿性を持たせる必要性が低いため、簡易スクラン
ブル機能は必要に応じて付加できるもの（オプション）
とする。ここで規定した秘匿化方式以外の任意のスクラ
ンブル方式を併せて使用する場合にあっても、スクラン
ブルを掛ける範囲は、上記規定に従わなければならな
い。

【００４２】スクランブルをかける範囲は、トランスポ
ートパケットの同期バイトとＰＳＩを伝送するトランス
ポートパケットを除くトランスポートストリームのペイ
ロードとする。スクランブルの鍵は、上記の擬似ランダ
ム系列を発生させるＬＦＳＲ（線形帰還シフトレジス
タ）にロードする初期値とする。なお、鍵の伝送は行わ
ない。ＬＦＳＲへの初期値ロードは、フレーム同期が通
過した直後に行うものとし、以降次のフレーム同期まで
の間、ＬＦＳＲの動作を継続するものとする。スクラン
ブルが禁止されている部分では単に擬似ランダム系列の
加算を中止するものとする。

【００４３】上記エネルギー拡散において、ＩＳＯ／Ｉ
ＥＣ１３８１８−１で多重化されたＴＳパケットにエネ
ルギー拡散のための擬似ランダム系列を加算する。擬似
ランダム系列の生成多項式は、Ｘ^１５＋Ｘ^１４＋１とす
る。また、擬似ランダム系列の発生回路の初期値は、低
次から"1001 0101 0000 000"とする。加算の範囲は、２
０４バイトの各パケットからダミーの１６バイト、デー
タフレーム同期バイト(０ｘＢ８)、ＴＳ同期バイト（０
ｘ４７）を除いた部分とする。初期値のロードは、ＯＦ
ＤＭ伝送フレームに収容されるＴＳパケットの最初の同
期バイト（０ｘＢ８もしくは０ｘ４７）が終了した直後
とする。なお、同期バイト部分においてもシフトレジス
タの動作は継続し、この部分では、単に擬似ランダム系
列の加算を中止するものとする。

【００４４】上記誤り訂正外符号は、短縮化リードソロ
モン（２０４，１８８）とする。短縮化リードソロモン
符号は、リードソロモン（２５５，２３９）符号化器
の、入力データ２０４バイトのうちダミーの１６バイト
を除いた１８８バイトの前に、５１バイトの「０」を付
加し、符号化後に先頭の５１バイトを除去することによ
り生成する。リードソロモン（２５５，２３９）符号の
多項式は、次の通りとする。

【００４５】符号生成多項式：g(x) = (x+λ^０)(x+λ^１)(x+λ^２).........(x+λ^１５) ここでλ=02hである。

【００４６】体生成多項式：p(x) = x^８+x^４+x^３+x^２+1 なお、リードソロモン（２０４，１８８）のバイト訂正
能力は、１０^−３入力で１０^−１１以下、１０^−４入力
で１０^−１９以下である。

【００４７】上記外インタリーブは、１ブロックで１７
バイトの遅延量を持つブロックを、第ｎ番目のパスが
（ｎ−１）ブロックの遅延量となるように配置した１２
パスに、リードソロモン符号化後の２０４バイトのビッ
トストリームを、１パス当たり１バイトずつ順次供給し
て行う畳み込みインタリーブとする。ここで、トランス
ポートパケットの同期バイト並びにフレーム同期バイト
は、常に、遅延のないパスを通過することとする。な
お、デインタリーブの回路構成は、先頭のパスの遅延ブ
ロックの挿入量を１１とし、パス番号順に１ブロックず
つ少なくなるものとする。

【００４８】上記誤り訂正内符号としては，拘束長７、
符号化率1/2を原符号とするパンクチュアード畳込み符
号を用いる。原符号の生成多項式は、G₁=171_OCT、G₂=13
3_OCTとし、パンクチュアー化によりR=1/2, 2/3, 3/4, 5
/6, 7/8 の５種類の符号化率に対応する。拘束長７、符
号化率1/2の畳込み符号化回路を図１０に示す。なお、
パンクチュアー化パターンはＯＦＤＭフレーム同期でリ
セットされるものとする。

【００４９】また、伝送路の特性から内符号が必要ない
場合には、内符号を省略することが出来る。この場合
は、入力信号をそのまま出力信号として用いる。

【００５０】上記周波数インタリーブは、次に示すよう
な周波数インタリーブ関数を用いる。上述の周波数インタリーブ関数に記述されたmseq10()
は、図１１に示す擬似ランダム系列を生成する回路のシ
フトレジスターの値を返すものとする。なお、シフトレ
ジスターの初期値は、“1111 1111 11”とする。ここ
で、関数Ｆ（i）は、インタリーブ前のキャリア位置
（i）をインタリーブ後のキャリア位置に変換する関数
である。生成多項式はg(x) = x¹⁰ + x³+ 1となる。

【００５１】上記時間インタリーブでは，フェージング
特性を向上させるため、キャリアを時間軸上で分散させ
る。時間インタリーブは、畳込みインタリーブを用い
る。時間インタリーブ長は、図１２に示すようにセル長
（Ｉ）の値を変えることで５種類のパラメータを選択で
きる。ただし、セル長（Ｉ）＝168のパラメータはオプ
ションとする。図１３に時間インタリーブの構成例を示
す。

【００５２】ここで，ＯＦＤＭフレームは、以下の５種
類のキャリアで構成されている。 − ＣＰ（Continual Pilot） − ＴＭＣＣ（Transmission and Multiplexing Configu
ration Control） − ＡＣ（Auxiliary Channel） − Ｎｕｌｌ（Null Carrier） − Data（Data Carrier）このうち、データキャリア以外のキャリアの配置を図１
４に示す。

【００５３】上記ガードインタバルの付加では，図１５
に示すように有効シンボルの後端部分のガードインタバ
ル長に相当する部分をコピーして有効シンボルの前に付
加する。

【００５４】ここで，上記ＲＦ信号フォーマットにおけ
るＲＦ帯においての信号フォーマットを規定する。定義 k：キャリア番号 n：シンボル番号 K：キャリア総数（K=793） T_s：シンボル期間長 T_g：ガード期間長 T_u：有効シンボル期間長 f_c：RF信号の中心周波数 K_c：RF信号の中心周波数に対応するキャリア番号（K_c=3
96） c(n,k)：シンボル番号n、キャリア番号kに対応する複素
信号点ベクトル s(t)：RF信号とすると，次の［数１］に示すようになる。

【００５５】

【数１】次に，上述した無線装置１２０が複数ある場合について
説明する。撮像手段１００，無線装置１２０などを複数
のキーパーソンに取付けた場合に，無線送受信の周波数
が重ならないようにする必要がある。例えば野球の場
合，両方のチームのキャッチャーに無線装置１２０を取
付けるには各無線装置１２０からの周波数が重ならない
ようにする必要がある。また，キャッチャーとピッチャ
ーの両方に無線装置１２０を取付ける場合についても同
様である。

【００５６】この場合，無線装置１２０に周波数変換用
の混合器などのミクサーを設け，画像情報や音情報の送
信データをミクサーを介して搬送波を変えて無線送信部
に送ることにより，別の異なる周波数帯へ移す。これに
より，複数データを別個に送る場合の周波数の重なりを
避けることができる。

【００５７】上述したピッチャーやキャッチャーなど装
着者に応じて異なる搬送波を用いて周波数を変換しても
よい。また，複数のグループに属する一または二以上の
メンバーによって行われる所定の空間で行われるスポー
ツの試合などのイベントでは，チームごとに異なる搬送
波を用いて周波数を変換してもよい。例えば，野球であ
れば，チームごとに異なる搬送波を用いてもよい。

【００５８】次に，本実施の形態において画像情報等を
送受信する際のセキュリティー手段について説明する。

【００５９】本実施の形態ではイベントの行為者自身，
例えばスポーツを行っている選手自身に撮像手段１００
や集音手段１１０を装着するため，その装着者の画像情
報や音情報が不特定多数の者に利用され悪用されること
を防止する必要がある。例えば，野球などでは，音情報
としてキャッチャーの音声などが含まれるとピッチャー
へのサインが予めわかってしまったり，次の行為を予測
することができたりするおそれがある。特に画像情報や
音情報のデータを無線で送受信する場合には，当該デー
タは不特定の者に受信されるおそれがあるのでこれを防
止する必要は大きい。

【００６０】このため，本実施の形態においては，図１
に示すように無線データを送信する装着者側の無線装置
１２０にセキュリティ手段１４０を設けるとともに，無
線データを受信する処理装置側の無線装置３２０にセキ
ュリティ手段３４０を設けている。

【００６１】このセキュリティ手段１４０，３４０は例
えばセキュリティーコードにより無線データを変換する
ことにより，不特定の者に受信され悪用されることを防
止する。

【００６２】装着者側の無線装置１２０におけるセキュ
リティ手段１４０は，予め定めたセキュリティーコード
を用いて送信するデジタルデータを処理して、これを無
線送信手段２００に送るようになっている。

【００６３】処理装置側の無線装置１２０におけるセキ
ュリティ手段３４０は，受信したデータから変換したデ
ジタルデータを，送信する場合と同様のセキュリティー
コードで処理して元のデータを取得し，次の処理を行う
情報処理手段３５０に送るようになっている。

【００６４】なお，このセキュリティ手段１４０，３４
０は，セキュリティーコードを使って無線で送信するデ
ータをＯＦＤＭのエネルギー拡散データを変えて変調す
るようにしてもよい。例えば、ＯＦＤＭの複数のエネル
ギー拡散データをセキュリティーコードに対応させて毎
回異なるものを選ぶようにしてもよい。

【００６５】このようなキュリティーコードの配布方法
は、例えば試合やイベントに対応して、セキュリティー
カードを配布する。また、携帯電話などを使って、使用
者を特定した後で、セキュリティーコードを伝えるよう
にしてもよい。ＩＣカードにセキュリティーコードを埋
め込むようにしてもよい。

【００６６】また，複数のグループに属する一または二
以上のメンバーによって行われる所定の空間で行われる
スポーツの試合などのイベントでは，チームごとに異な
るセキュリティーコードを用いるようにしてもよい。例
えば，野球であれば，チームごとに異なるセキュリティ
コードを用いてもよい。

【００６７】なお，セキュリティ手段１４０，３４０で
用いるセキュリティコードは更新可能である。例えば装
着者側の無線装置１２０には無線受信手段を設け，処理
装置側の無線装置３２０には無線送信手段を設けてそれ
ぞれ無線送受信可能に構成するとともに，情報処理装置
３００の書換え可能メモリにセキュリティーコードを記
憶しておき，これがキーボードやカード読取装置などの
入力手段により更新されると，そのセキュリティーコー
ドを処理装置側の無線装置３２０から装着者側の無線装
置１２０へ送信するようにしてもよい。これにより，装
着者側のセキュリティコードを自動的に更新することが
できる。

【００６８】この場合，セキュリティコードの更新，す
なわち上記入力手段からの入力は，ＩＤ，パスワードが
ないとできないように構成してもよい。これにより，イ
ベントの行為者とは異なる第三者だけがセキュリティー
コードを更新できるようにすることも可能となる。

【００６９】次に，上記情報処理装置３００において，
無線装置３２０により受信した画像情報，音情報のデー
タを処理する情報処理手段３５０について説明する。

【００７０】情報処理手段３５０は、図１に示すように
無線装置３２０により受信したデータのうち画像情報の
データ処理を行う画像情報処理手段６００、音情報のデ
ータ処理を行う音情報処理手段７００を備える。

【００７１】画像情報処理手段６００は、装着者の動き
に応じて画像処理を行う手段として、図１６に示すよう
に撮像手段１００の装着者の動きを検出する動き検出手
段６１０、この動き検出手段６１０で検出した装着者の
動きに応じてその装着者の動きが小さいときに画像のぶ
れ補正を行うぶれ補正手段６２０、上記動き検出手段６
１０で検出した装着者の動きに応じてその装着者の動き
が大きいときに画像のアングルを変更するアングル変更
手段６３０を備える。

【００７２】これらの動き検出手段６１０，画像のぶれ
補正手段６２０，アングル変更手段６３０は，コンピュ
ータ読取可能なハードディスクなどの記録媒体に記録さ
れたプログラムに基づいて制御部３７０が行うソフトウ
エアの処理によるものでもよいし，またハードウエアと
しての回路の処理によるものであってもよく，また両者
の組合せで処理してもよい。

【００７３】ここで，上記動き検出手段６１０の回路構
成例を図１７に示す。この回路は，デジタル化された画
像情報のデータのうち，基準となるフレームを記憶する
基準フレームメモリ６１２，基準フレームと比較するフ
レームを記憶する検索メモリ６１４，基準フレームメモ
リ６１２と検索フレームメモリ６１４から転送されてく
るデータに基づいて動き検出を行う動き検出回路６１６
を備える。

【００７４】次に，上記動き検出手段６１０，画像のぶ
れ補正手段６２０，アングル変更手段６３０により，例
えば無線受信手段４００で受信した画像情報のデータに
基づいて画像処理により装着者（キーパーソン）の動き
を検出し，この装着者の動きに応じて画像のぶれを補正
したり，アングルを変換したりする動作について説明す
る。

【００７５】なお、ここでは撮像装置１００としてカメ
ラを野球のキャッチャーなどのキーパーソンに装着し、
このカメラに魚眼レンズなどの広角レンズを装着し、画
像情報はカメラの前方１８０度の映像を写すようにす
し、この広い範囲の画像情報を使って下記の処理を行う
場合について説明する。

【００７６】カメラを装着したキーパーソンは漠然と周
りを見ているのではなく、自分にとってもっとも関心の
高い対象を主に見ていると考えられる。キーパーソンと
して特にスポーツ選手のように他の選手やボール等の動
きに対応して動作する者においては、動きのある画像を
注目しているはずである。例えば選手の頭部にカメラを
装着した場合は、その頭部の正面には概ねその選手が注
目している、動きのある着目対象画像があるものと想定
される。

【００７７】そして、キーパーソンの動きが大きい場合
には、キーパーソンが注目する動きのある着目対象画像
が変わり、カメラからの画像情報の内容としては元の着
目対象画像は画像範囲からはみ出たり、はみ出そうにな
ったりしたように大きく動くはずである。また、キーパ
ーソンの動きが小さい場合には、キーパーソンが注目す
る着目対象画像は変わっておらず、カメラからの画像情
報の内容としては元の着目対象画像は画像範囲からはみ
出ることもなく動きも小さいはずである。

【００７８】従って、キーパーソンに装着したカメラか
らの画像情報に基づいてキーパーソンの動きを検出する
には、先ず画像情報から抽出された動きのある画像を着
目対象画像として検出し、その着目対象画像の動きに基
づいて装着者の動きを間接的に検出すればよいと考えら
れる。

【００７９】そこで、先ず動きのある画像（着目対象画
像）を検出する動作を説明する。先ず，デジタル化され
たカメラからの画像情報のデータをフレームメモリへ蓄
積する。この場合、画像情報のデジタル化は情報処理装
置に設けたカメラ付加装置によって行うようにしてもよ
い。

【００８０】次に、比較の基準となるフィールドを決め
基準フレームメモリ６１２に記憶する。その前後のフィ
ールドを検索フレームメモリ６１４へ記憶し，動き検出
回路６１６にてそれぞれ対応する画素の信号レベルを比
較しその差を検出する。次いで、検出した差があらかじ
め決めた値よりも大きい画素の位置を検出する。続い
て、検出した画素を予め決められた数の連続した走査線
に出現する部分、すなわち動きのある画素の集まりを着
目対象画像として検出する。

【００８１】例えば、ＭＰＥＧ２では動きのある画素の
集まり（画素ブロック）を予測してサーチ範囲を予め決
めておくなどすることにより、動き検出に要する計算量
を減らすことができる。なお、この動き検出はフレーム
単位で対応する画素のレベル差を検出することにより行
われる。

【００８２】次に、こうして検出された着目対象画像の
動きに応じて画像処理を行う。先ず、着目対象画像の画
像のブレを検出し、画像のブレが小さく着目対象画像の
画面内の動きがカメラ側の動きによると判断した場合、
すなわち着目対象画像がカメラの撮像範囲にありその範
囲から外れそうにもならないと判断した場合には、画像
のブレを補正する（画像のぶれ補正手段）。具体的には
着目対象画像が中央に来るように画像を修正する、いわ
ゆる画像のぶれ補正を行う。

【００８３】例えば野球でキャッチャーにカメラを装着
した場合、キャッチャーはピッチャーが構えに入ってボ
ールを投げるときにはボールに注目しているため、この
ボールがカメラの撮像範囲から外れることはないものと
考えられる。この場合に、画像のぶれが補正されると視
聴者にはとても見やすい画像となる。このように、画面
内で着目対象画像が着目対象画像の動きによってのみ動
いて見えるように画像処理を行うことができ，視聴者に
見やすい画像にすることができる。

【００８４】これに対し，着目対象画像の画像のブレを
検出し、上記キーパーソンの身体の動が大きいため画像
のブレが大きく着目対象画像が撮像手段の撮像範囲から
外れそうになるか若しくは外れてしまったと判断した場
合には、別の着目対象画像に切替えてシーンチェンジの
画像処理を行う（アングル変更手段）。具体的には他の
着目対象画像を取り出しその着目対象画像が画面の中央
に来るように画像処理を行う。すなわち、従来のカメラ
のアングルを変える操作を画像処理でおこなうことにな
る。

【００８５】例えば野球でキャッチャーにカメラを装着
した場合、ピッチャーの投げたボールを注目していた
が、そのボールをバッターが打ってフライになった場
合、キャッチャーはそのボールを取ろうとして上を向く
ことになる。すると、ボールの画像はいったん撮像範囲
から外れるが、キャッチャーが上を向いたときにまたボ
ールの画像が中央にくるように画像処理される。このよ
うにカメラのアングルを変えたのと同じ状態になる。こ
うして，キーパーソンの身体の動きが大きい場合に着目
対象画像が切り替ったことが視聴者にわかるので，より
見やすく迫力のある画像を提供することができる。

【００８６】なお，上記着目対象画像を新たな画像情報
の中から探す際には、予め定めた対象物を探すようにし
てもよい。予め定めた対象物が見つかった場合はその対
象物が画面の中央にくるように画像処理を行い、予め定
めた対象物が無い場合はカメラからの画像のほぼ中央に
来る頻度の高い対象物を仮想の対象物として、それが画
面の中央に来るように画像処理を行う（アングル変更手
段）。また、カメラが大きく動かない場合は、画像のぶ
れ補正手段６２０により対象物が中央に来るように画像
を修正する、いわゆる画像のぶれ補正を行う（画像のぶ
れ補正手段）。

【００８７】例えば野球において図１８に示すように打
者が打った後に走る様子を考えると、背景のスコアボー
ドには動きがない。もしキーパーソンに装着したカメラ
に動きが無ければ、画面上でスコアボードを構成する画
素の位置は変化しない。しかし、打者は打った後で走る
ので、打者を構成する画素の位置は時間的に変化するこ
とになる。そこで、キーパーソンに装着したカメラの動
きは図１８に示すようなスコアボードのような動きの無
い対象物の画像の動きを検出することで行うことが好ま
しい。

【００８８】なお、上記動き検出手段６１０は、ある１
方向に振動(一次振動)する質量に角速度がつくと「コリ
オリ」効果でそれに直行する方向にも振動（二次振動）
が発生する事を利用した、いわゆる振動式ジャイロから
の出力に基づいて装着者の動きを検出するようにしても
よい。例えばこの振動式ジャイロを撮像手段１００の装
着者に取り付け、この振動ジャイロからの出力を画像情
報等とともに無線送信手段２００から無線データとして
送信し、無線受信手段４００で受信したデータから装着
者の動きを検出するようにしてもよい。

【００８９】上記振動式ジャイロとしては、例えば音や
ビーム形状のものを使用してもよいが、シリコンセンシ
ングシステムズの振動式ジャイロのように、振動形態を
棒（音叉やビーム形状）を上下左右に振るのでなく振動
子リングを中吊りにしてリングを楕円歪に振動させるも
のを使用するのが好ましい。このような振動式ジャイロ
は外来応力に敏感な支点が無い上、楕円振動は外部震動
・衝撃下では起こりにくく、悪い環境下でも忠実に高精
度角速度の検出ができるので、特に激しい動きをする野
球などのスポーツの選手に振動式ジャイロを装着するの
に適しているからである。

【００９０】上記画像情報処理手段１００は、図１６に
示すように対象物の動きに応じて画像処理を行う手段と
して、対象物の動きを検出する動き検出手段６４０、こ
の対象物の動きに応じて画像をデフォルメ化する画像デ
フォルメ化手段６５０を備える。

【００９１】これらの対象物の動き検出手段６４０，デ
フォルメ化手段６５０は，コンピュータ読取可能なハー
ドディスクなどの記録媒体に記録されたプログラムに基
づいて制御部３７０が行うソフトウエアの処理によるも
のでもよいし，またハードウエアとしての回路の処理に
よるものであってもよく，また両者の組合せで処理して
もよい。

【００９２】なお，上記動き検出手段６４０の回路構成
例としては，動き検出手段６１０と同様に図１７に示す
ものを使用してもよい。

【００９３】次に，上記動き検出手段６４０，デフォル
メ化手段６５０により，野球のボールなど撮像手段でと
らえた対象物の動きに応じてその画像をデフォルメ化
し，実際の画像よりもおもろい画像や劇的な画像などへ
変換する動作について説明する。なお、ここでも上記と
同様に撮像装置１００としてカメラを野球のキャッチャ
ーなどのキーパーソンに装着し、このカメラに魚眼レン
ズなどの広角レンズを装着し、画像情報はカメラの前方
１８０度の映像を写すようにすし、この広い範囲の画像
情報を使って下記の処理を行う場合について説明する。

【００９４】先ず，カメラから受信してデジタル化した
画像情報のデータに基づいてキーパーソンが着目する人
や物の画素ブロック，すなわち着目対象画像を認識し，
その着目対象画像の位置，速度等の付加情報の検出など
を行う。例えば球技であればボールの位置、速度などを
検出し，演劇であればカメラが捉えた着目対象画像であ
る着目対象者の表情の変化などの認識を行う。この場
合，予め映像をデフォルメするきっかけとなる着目対象
物、着目対象者を決めておき，図１に示す各種データベ
ース３６０の例えば着目対象画像データベースに記憶し
ておく。なお，カメラから受信した画像情報から特別の
動きをするものを捉え、その時点でそれを着目対象物、
着目対象者として着目対象画像データベースに記憶して
もよい。

【００９５】球技の場合であれば、ボールの位置、速度
等がデフォルメ化する場合のパラメータとなる。例えば
野球の場合、キャッチャーに装着したカメラが捉えたボ
ールの映像は、あらかじめ背景と比較したボールの映像
信号の特徴として例えば図１７に示す検索フレームメモ
リ６１４に記録しておき、カメラからの画像情報のフレ
ームは例えば基準フレームメモリ６１２に記憶し，これ
らのデータを動き検出回路６１６により比較してボール
を認識し、画面の中でのボールの大きさ、位置を測定す
る。これは映像信号の走査線上の輝度信号の変化などで
認識，測定することができる。

【００９６】ここで，カメラからの画像情報（画像信
号）に基づいて動き検出回路６１６によりボールの速度
を検出する方法の１例を説明する。ボールの速度の計算
は例えば図１９に示すようにカメラはレンズを固定すれ
ば画角が一定となり、その中で遠くから近づくボールの
大きさと画面寸法の比はDb／Da1からDb／Da２そしてDb
／Da1と増加するように変化する。画像情報（画像信
号）は時間変化に沿ってカメラから出力されるので上記
の比の時間変化を計算することでボールの速度を検出す
る。

【００９７】次に，動き検出回路６１６により認識され
た実際の着目対象物、着目対象者などの着目対象画像の
位置に予め記憶されたデフォルメ画像をはめ込む。例え
ば，図２０に示すようにピッチャーの画像が着目対象画
像である場合，実際のピッチャーの画像の位置にデフォ
ルメ化したピッチャーの画像をはめ込んだり，ボールの
画像が着目対象画像である場合，ボールがカメラに近づ
くに連れてボールの大きさを実際よりも大きくしたデフ
ォルメ画像をそのボールの位置にはめ込む。

【００９８】また，球技のボールの速度の大小は、例え
ば野球におけるピッチャーのボールでは時速１３０Km~
１６０Km程度とそれほど大きな変化ではないが、打者に
とってはその違いは大きい。そこで、図２１に示すよう
にボールの時速に応じて実際の映像のボールの色を変え
るようにしてもよい。また、図２２に示すように速度に
応じてボールの周りに炎をつけたり，リングをつけるな
どをCGによって画像合成してもよい。これにより、見て
いる人はリアルタイムでボールの速度を感じることがで
きる。上記図２１及び図２２ではそれぞれ同図（ａ），
（ｂ），（ｃ）の順にボールの速度が速くなる。

【００９９】なお，例えば着目対象物、着目対象者の特
徴を踏まえ実際の画像をＣＧ（Computer Graphics）な
どでデフォルメ化して作成されたデフォルメ画像は，図
１に示す各種データベース３６０の例えばデフォルメ画
像データベースに予め記憶しておき，このデフォルメ画
像データベースから必要な画像を取出すようにしてもよ
い。

【０１００】また，上記着目対象画像となり得るものと
しては，例えば野球であれば上述したピッチャーやボー
ルの他，盗塁手などが挙げられる。

【０１０１】次に，装着者に取付けられた集音手段１１
０から受信した音情報を実際の音よりも迫力のある音情
報に変換処理する音情報処理手段７００について説明す
る。

【０１０２】音情報処理手段７００は，集音手段１１０
からの音情報を音声，ボールの音，ボールがバットに当
った音など何の音かを識別する音識別手段７１０，音識
別手段７１０で識別された音をさらに迫力のある音など
に変換する音変換手段７２０，音識別手段７１０で識別
された音のうち特定の音声のみをマスクする音情報のセ
キュリティ手段としての特定音声マスク手段７３０を備
える。

【０１０３】これらの音識別手段７１０，音情報変換手
段７２０，特定音声マスク手段７３０は，コンピュータ
読取可能なハードディスクなどの記録媒体に記録された
プログラムに基づいて制御部３７０が行うソフトウエア
の処理によるものでもよいし，またハードウエアとして
の回路の処理によるものであってもよく，また両者の組
合せで処理してもよい。

【０１０４】上記音情報処理手段７００は，例えば野球
であれば音識別手段７１０によりボールの風を切る音が
認識されたときは，例えば上述した図１９で示す方法に
より上記動き検出手段６４０によってボールの速度を検
出した結果を用い，音情報変換手段７２０によりボール
の速度に応じてボールの風を切る音をより大きい音に変
換する。例えばボールの速度が速いほどボールの風を切
る音をより大きい音に変換する。

【０１０５】また，音情報変換手段７２０は，ボールの
速度に応じてキャッチャーミットで受ける音を大きくす
るようにしてもよい。さらに，ボールがバットに当った
場合は，そのボールの速度に応じてボールがバットに当
った音を大きくするようにしてもよい。

【０１０６】このようにボールの速度に応じて実際の音
よりも大きい音に変換することにより，ボールの威力が
画像のみならず音によっても強調され，よりおもしろく
迫力のある画像情報や音情報を視聴者に届けることがで
きる。

【０１０７】次に，音情報についてのセキュリティ手段
について説明する。上述したように本実施の形態ではイ
ベントの行為者自身，例えばスポーツを行っている選手
自身に撮像手段１００や集音手段１１０を装着するた
め，その装着者の画像情報や音情報が不特定多数の者に
利用され悪用されることを防止する必要がある。そこ
で，このような画像情報や音情報のデータを無線で特定
の者だけが受信して元のデータにできるようなセキュリ
ティ手段１４０，３４０を設けたが，ここでは特定の音
声情報自体をマスクしてしまい，特定の音声情報だけは
誰にも取得できないようにしたものである。従って，セ
キュリティ手段１４０，３４０によるセキュリティーコ
ードを持つ特定の者であっても特定の音声情報自体は元
のデータにすることもできない。

【０１０８】具体的には，集音手段１１０からの音声情
報のうち上記音識別手段７１０により特定の音声が識別
されると，特定音声マスク手段７３０によりその音声だ
けマスクをかけてデータを変換する。従って，特定の音
声以外の観客の歓声などの音声は取得することができ
る。

【０１０９】特定の音声としては，例えば次はフォーク
ボールなど人間の声として有意味の声，特にスポーツな
どのイベントを行う者の声が挙げられる。また，人間の
声として所定のワードを含む声をマスクするようにして
もよい。

【０１１０】これにより，特定の音声情報については，
誰にも取得されないようにすることができるので，例え
ば野球などではキャッチャーの音声などの特定の音声は
マスクされるので，ピッチャーへのサインが予めわかっ
てしまったり，次の行為を予測することができたりする
おそれを防ぐことができる。これにより，十分なセキュ
リティを確保することができる。

【０１１１】上述したような情報処理手段３５０で処理
された画像情報，音情報のデータは，図１に示す各種デ
ータベース３６０の例えば画像情報データベース，音情
報データベースにそれぞれ記憶される。

【０１１２】また，情報処理装置３００にテレビ電波送
信用の送信手段を設け，情報処理手段３５０で処理され
た画像情報，音情報のデータをリアルタイムで，アナロ
グ又はデジタルによりテレビ放送として発信するように
してもよい。この場合，情報処理手段３５０で処理する
データはデジタルデータであるため，そのままデジタル
放送として送信することができる。

【０１１３】デジタル放送として送信する場合はその送
信手段としては上記無線装置１２０の無線送信手段２０
０，符号化器等１３０と同様な手段を設けてもよい。

【０１１４】例えば、CSデジタル放送サービスで送信す
る場合，情報処理手段３５０で処理した画像情報や音情
報のデジタルデータは、圧縮符号化して伝送される。番
組編成情報としてはPSI（Program Specific Informatio
n）などの選局のための制御情報やSI（Service Informa
tion）などの電子番組表（EPG: Electronic ProgramGui
de）を表示するための情報を作成する。加入者の契約情
報からは、限定受信のための情報を作成する。これらの
情報は、多重化されてトランスポートストリーム（Tran
sport Stream）などの一本のパケット列となり、誤り訂
正符号を付加した後、QPSK（Quadrature Phase Shift K
eying）変調されて衛星回線などで伝送される。視聴者
である受信側では送信側と逆の処理を行い、番組の画像
情報，音情報などのデータを一般のテレビ受像機に出
力する。

【０１１５】また，情報処理手段３５０で処理された画
像情報，音情報のデータは，インターネットなどのネッ
トワークを介して視聴者端末装置に提供するようにして
もよい。

【０１１６】この場合には，例えば図１に示す情報処理
装置３００に事業者サーバ装置としての機能を持たせる
ことによりコンテンツ配信サービスシステムを構成する
ことができる。このようなコンテンツ配信サービスシス
テムの構成例を図２４に示す。

【０１１７】上記事業者サーバ１２００は，上述したイ
ベントの行為者に取付けた撮像手段１００等からのデー
タを情報処理装置３００で処理した画像情報，音情報の
データの他，他の撮像手段１０２，１０４により撮像し
てた画像情報，他の集音手段１１２により音情報のデー
タを受信する受信手段を設けている。従って，ここでい
うコンテンツには撮像手段１００等からのデータを情報
処理装置３００で処理した画像情報，音情報のデータの
他，他の撮像手段１０２，１０４により撮像してた画像
情報，他の集音手段１１２により音情報のデータをさら
に後述の空間画像処理手段１５００や視線アングル画像
処理手段１６００により画像処理等したデータも含まれ
る。

【０１１８】上記コンテンツ配信システム１０００は，
図２４に示すように視聴者端末装置１１００−１…１１
００−ｎ，事業者サーバ装置１２００，課金処理サーバ
１３００などがインターネット等のネットワーク１４０
０を介して接続される。なお，視聴者端末装置１１００
は，プロバイタ１４１０の通信キャリア１４２０を介し
て接続される。

【０１１９】上記視聴者端末装置１１００は，ディスプ
レイなどの画像表示手段，事業者サーバ装置１２００か
ら配信可能な上記画像情報のうち配信を希望する画像情
報の選択に応じて選択信号を出力する画像選択手段，こ
の画像選択手段からの選択信号を事業者サーバ装置１２
００へ送信する送信手段を備える。

【０１２０】上記事業者サーバ装置１２００は，上述し
た情報処理装置３００の構成に加えて，空間画像処理手
段１５００と視線アングル画像処理手段１６００とを備
える。

【０１２１】空間画像処理手段１５００は，上記受信手
段により受信した各撮像手段１００，１０２等からの画
像に基づいて，イベントの会場空間のうちイベントが行
われるプレー空間をマトリクス化して分割し，分割され
たプレー空間の画像を生成する処理を行う。

【０１２２】ここでいうプレー空間としては例えば野球
であれば球場のグラウンドが該当する。例えばキャッチ
ャーに取付けた撮像手段１００，球場の報道人席に設置
した撮像手段１０２など複数の撮像手段からの画像に基
づいてプレー空間全体を仮想３次元座標に座標変換す
る。そして，この仮想３次元空間のプレー空間をマトリ
クス化して分割し，ピッチャーのマウンドの空間，３塁
手の空間など各分割空間を映す画像に生成する。

【０１２３】これらの分割空間の画像をインターネット
等のネットワーク１４００を介して配信することによ
り，視聴者は好きなプレー空間の画像を選択して端末装
置１１００のディスプレイなどから見ることができる。

【０１２４】また，視線アングル画像処理手段１６００
は，上記受信手段により受信した各撮像手段１００，１
０２等からの画像に基づいて，前記イベントの会場空間
のうち観客席からのアングル画像や撮像手段を装着した
者の視線アングルの画像など視線アングルの異なる画像
を生成する処理を行う。

【０１２５】例えばキャッチャーに取付けた撮像手段１
００，球場の報道人席に設置した撮像手段１０２など複
数の撮像手段からの画像に基づいてプレー空間全体を仮
想３次元座標に座標変換する。この仮想３次元空間のう
ちの例えばピッチャーのマウンドの空間はこの空間を見
る観客席の位置によりアングル画像が異なる。そこで，
仮想３次元空間を見る位置をマトリクス化して，見る位
置ごとの視線アングルを演算し，視線アングル画像を生
成する。

【０１２６】これらのアングル画像をインターネット等
のネットワーク１４００を介して配信することにより，
視聴者は自宅等に居ながら例えばアリーナ席から見たア
ングル画像，外野席から見たアングル画像など好きなア
ングル画像を選択して端末装置１１００のディスプレイ
などから見ることができる。

【０１２７】また，上記アングル画像処理手段１６００
は，演算した視線アングルをイベントを行う者の動きに
応じて切り替えることにより，イベントを行う者ごとの
画像を生成するようにしてもよい。例えばサッカーでは
選手が広いグランドを動きまわるため，ある位置から見
たアングルで好きな選手を見るときには，その位置から
遠い方へ選手が動いてしまうとその選手の画像が小さく
なってしまう。従って，常に近い位置から特定の選手を
大きな画像で見ることができるように視線アングルを切
替えた画像を生成する。これにより，好きな選手を常に
最もよく見える位置からのアングルで見ることができる
ようになる。

【０１２８】上記課金処理サーバ１３００は，視聴者端
末装置１１００からの選択信号に基づいて上述したよう
なプレー空間の画像やアングル画像など選択された画像
に応じて課金する額を決定して課金する。

【０１２９】例えば，画像配信を希望する需用者のニー
ズに応じて課金する額を決定するようにしてもよい。ま
た，画像とともに付加情報として広告を配信する場合に
はその広告の有無に応じて課金する額を決定するように
してもよい。

【０１３０】また，画像とともに配信する画像の加工度
に応じて課金する額を決定してもよい。例えば，上述し
たように野球のボールの速度に応じて図２１に示すよう
なボールの色を変化させる画像処理（加工処理）が施さ
れている画像と，図２２に示すようにボールに炎を付加
した加工処理が施されている画像とでは課金する額を変
えてもよい。この場合，よりおもしろい画像に加工処理
された画像ほど高い金額を課金するようにしてもよい。

【０１３１】また，上記撮像手段１００の挿着者からの
画像やイベントを行う特定の者ごとに課金する額を決定
して課金するようにしてもよい。例えば野球選手ごと，
サッカー選手ごとに見たい選手の画像に応じて課金す
る。

【０１３２】以上，添付図面を参照しながら本発明に係
る好適な実施形態について説明したが，本発明は係る例
に限定されないことは言うまでもない。当業者であれ
ぱ，特許請求の範囲に記載された範疇内において，各種
の変更例または修正例に想到し得ることは明らかであ
り，それらについても当然に本発明の技術的範囲に属す
るものと了解される。

【０１３３】例えば，本実施の形態においては事業者サ
ーバ装置１２００が情報処理装置３００の構成をすべて
含む場合について説明したが，必ずしもこれに限定され
るものではなく，情報処理装置とは別個の構成にして，
事業者サーバ装置１２００に情報処理装置３００からの
画像情報，音情報などのデータを受信してこれを配信す
るようにしてもよい。また，画像等サーバを別途設け，
そこに情報処理装置３００からの画像情報，音情報など
のデータを蓄積するようにしてもよい。

【０１３４】

【発明の効果】以上詳述したように本発明によれば，プ
レーヤ等の視点からの画像情報や音情報などをプレーヤ
の動きに応じて見やすく迫力のある情報にしたり，さら
に面白く楽しい情報にして視聴者に届けることができる
情報処理システムを提供できるものである。

【図面の簡単な説明】

【図１】本発明の実施の形態にかかる画像処理システム
の構成を示すブロック図。

【図２】本実施の形態にかかる撮像手段等の取付例を示
す図。

【図３】本実施の形態にかかる撮像手段等の他の取付例
を示す図。

【図４】本実施の形態にかかる撮像手段等の他の取付例
を示す図。

【図５】本実施の形態にかかる撮像手段等の他の取付例
を示す図。

【図６】本実施の形態にかかる無線装置の構成例を示す
ブロック図。

【図７】本実施の形態にかかるＯＦＤＭ方式の伝送パラ
メータを示す図。

【図８】本実施の形態にかかるＯＦＤＭ方式の伝送容量
を示す図。

【図９】本実施の形態にかかる送信制御部の構成を示す
ブロック図。

【図１０】本実施の形態にかかる畳込み符号化回路の例
を示すブロック図。

【図１１】本実施の形態にかかる擬似ランダム系列を生
成する回路のシフトレジスターの例を示すブロック図。

【図１２】本実施の形態にかかる時間インターリーブ長
の例を示すブロック図。

【図１３】本実施の形態にかかる時間インターリーブの
構成例を示すブロック図。

【図１４】本実施の形態にかかるデータキャリア以外の
キャリアの配置例を示すブロック図。

【図１５】本実施の形態にかかるガードインタバルの付
加について説明する図。

【図１６】本実施の形態にかかる画像情報処理手段の構
成を示すブロック図。

【図１７】本実施の形態にかかる動き検出手段の構成例
を示すブロック図。

【図１８】本実施の形態にかかる動き検出手段における
検出の対象となる画像を説明する図。

【図１９】本実施の形態にかかるボールの速度検出方法
を説明する図。

【図２０】本実施の形態にかかる実際の画像の位置にデ
フォルメ化した画像をはめ込んだ例を示す図。

【図２１】本実施の形態にかかる実際の画像をデフォル
メ化した例を示す図。

【図２２】本実施の形態にかかる実際の画像をデフォル
メ化した他の例を示す図。

【図２３】本実施の形態にかかる音情報処理手段の構成
を示す図。

【図２４】本実施の形態にかかるコンテンツ配信システ
ムの構成を示すブロック図。

【符号の説明】

１００…撮像手段１１０…集音手段１２０…無線装置２００…無線送信手段１４０…セキュリティ手段３００…情報処理装置３２０…無線装置３４０…セキュリティ手段３５０…情報処理手段３６０…各種データベース４００…無線受信手段６００…画像情報処理手段６１０…撮像手段装着者の動き検出手段６２０…画像のぶれ検出手段６３０…アングル変換手段６４０…着目画像の動き検出手段６５０…画像のデフォルメ化手段７００…音情報処理手段７１０…音識別手段７２０…音情報変換手段７３０…特定音声マスク手段

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号ＦＩテーマコート゛(参考）Ｇ０６Ｔ 7/20 Ｇ０６Ｔ 7/20 Ｂ // Ｈ０４Ｎ 5/262 Ｈ０４Ｎ 5/262 (72)発明者高橋一正東京都品川区北品川６丁目７番35号ソニー株式会社内 (72)発明者石川伸行東京都品川区北品川６丁目７番35号ソニー株式会社内 (72)発明者木津聡二郎東京都品川区北品川６丁目７番35号ソニー株式会社内Ｆターム(参考） 5B057 BA02 BA26 CC01 CE03 CH18 DA02 DA07 DA16 DB02 DB09 5C022 AA00 AB55 AB65 AB68 AC69 AC72 AC77 AC78 CA02 5C023 AA11 AA16 AA21 AA26 AA37 BA01 BA11 CA01 CA04 CA08 5L096 CA02 HA04

Claims

【特許請求の範囲】

【請求項１】イベントのキーパーソンの身体に挿着し
た撮像手段と，前記撮像手段の画像情報を無線送信する
送信手段と，前記撮像手段からの画像情報を無線受信す
る受信手段と，前記受信手段で受信した画像情報に基づ
いて前記キーパーソンの身体の動きに応じた画像処理を
行う画像処理手段とを備えたことを特徴とする画像処理
システム。
【請求項２】前記画像処理手段は，前記キーパーソン
の身体の動きに応じてアングルを切替えてシーンチェン
ジの画像処理を行うことを特徴とする請求項１に記載の
画像処理システム。
【請求項３】前記画像処理手段は，前記キーパーソン
の身体の動きを前記受信手段で受信した画像情報の出力
を処理することにより検出することを特徴とする請求項
１に記載の画像処理システム。
【請求項４】前記画像処理手段は，前記受信手段で受
信した画像情報の出力に基づいて着目対象画像を取出し
て画像のブレを検出し，画像のブレが小さいと判断した
場合はそのブレを補正することを特徴とする請求項３に
記載の画像処理システム。
【請求項５】前記画像処理手段は，前記受信手段で受
信した画像情報の出力に基づいて着目対象画像を取出し
て画像のブレを検出し，画像のブレが大きいと判断した
ときは別の着目対象画像に切替えて画像処理を行うこと
を特徴とする請求項３に記載の画像処理システム。
【請求項６】前記画像処理手段は，前記キーパーソン
の身体の動きを振動ジャイロにより検出することを特徴
とする請求項１に記載の画像処理システム。
【請求項７】前記撮像手段を取付けるキーパーソン
は，野球のキャッチャー又はピッチャーとしたことを特
徴とする請求項６に記載の画像処理システム。
【請求項８】前記キーパーソンの身体には，撮像手段
とともに集音手段も挿着し，前記送信手段は画像情報と
ともに音情報も送信し，前記受信手段は画像情報ととも
に音情報も受信することを特徴とする請求項１に記載の
画像処理システム。