JP3975909B2

JP3975909B2 - Imaging apparatus, recording apparatus, and reproducing apparatus

Info

Publication number: JP3975909B2
Application number: JP2002364552A
Authority: JP
Inventors: 将 ▲高▼橋; 大輔吉田; 祐介谷田部
Original assignee: Hitachi Ltd
Current assignee: Hitachi Ltd
Priority date: 2002-12-17
Filing date: 2002-12-17
Publication date: 2007-09-12
Anticipated expiration: 2022-12-17
Also published as: JP2004200823A

Description

【０００１】
【発明の属する技術分野】
本発明は、撮像された動画データを記録媒体に記録する動画記録装置に係り、記録しながら伝送路へ送信する通信機能を備えた動画記録装置に関する。
【０００２】
【従来の技術】
本発明に関連する従来の技術として、例えば特開２００１−２８５８７５号公報（特許文献１）に記載の技術がある。この公報には「ＭＰＥＧ２画像圧縮情報をＭＰＥＧ４画像圧縮情報に変換する際に、演算処理量とビデオメモリ量を低減する」ことを課題とし、「飛び越し走査によるＭＰＥＧ２画像圧縮情報を構成するマクロブロックの８×８成分のＤＣＴ係数の内、４×８成分のみを用いて飛び越し画像を復号するＭＰＥＧ２画像情報復号化部と、ＭＰＥＧ２画像情報復号化部にて復号された飛び越し画像の第１フィールド又は第２フィールドのいずれか一方を選択して順次操作の画像を生成する走査変換部と、走査変換部にて生成された画像に対して水平方向にダウンサンプリングを行うダウンサンプラと、ダウンサンプラにてダウンサンプリングされた画像に対して垂直方向にダウンサンプリングを行うダウンサンプラと、ダウンサンプラにてダウンサンプリングされた画像をＭＰＥＧ４画像圧縮情報に符号化する符号化手段とを有する」という解決手段が開示されている。
【０００３】
【特許文献１】
特開２００１−２８５８７５号公報
【０００４】
【発明が解決しようとする課題】
動画像データを記録したり、伝送路に乗せたりする目的で、動画像データを圧縮符号化する手法が広く用いられている。ＭＰＥＧ−２は、放送および蓄積メディアに適用することを想定した動画像の符号化方式の国際規格であり、デジタル放送や、光ディスクの一種であるＤＶＤの規格に採用されている。ビデオカメラの分野においても、撮像された動画データをＭＰＥＧ−２で符号化してＤＶＤなどの記録媒体に記録することが行われている。一方、撮像された動画データをインターネットや携帯電話などの公衆回線に乗せて送る場合には、放送のように大容量の伝送路を占有することができないため、通信に適した高圧縮符号化であるＭＰＥＧ−４で符号化することが多い。
【０００５】
しかしながら、このような高圧縮符号化は、圧縮率が高い反面、画質が劣り、コンシューマや監視用途のビデオカメラの記録には適さないという欠点があった。
【０００６】
上記従来技術には、ＭＰＥＧ−２からＭＰＥＧ−４へ変換する手法はあるが、記録に適した符号化データと通信に適した符号化データを同時に生成することについては示されていない。両者を同時に生成した場合、撮像された動画データを記録に適した符号化データで高画質で記録媒体に記録しながら、通信に適した符号化データでインターネットや携帯電話などの公衆回線に乗せて送ることができる機能を追加することができる。
【０００７】
また、上記従来技術は、両者を同時に生成両者を同時に生成し、撮像された動画データを記録に適した符号化データで高画質で記録媒体に記録しながら、通信に適した符号化データでインターネットや携帯電話などの公衆回線に乗せて送ることができる機能をビデオカメラに追加した場合の、回路規模縮小や消費電力低下について示されていない。
本発明の目的は、上記課題を解決し、多機能な撮像装置を提供することである。
【０００８】
【課題を解決するための手段】
上記目的は特許請求の範囲に記載の発明により達成される。
【００１１】
【発明の実施の形態】
以下、本発明の実施の形態を図面を用いて説明する。この実施形態によれば、撮像された動画データを、高画質で記録媒体に記録しながら、インターネットや携帯電話などの公衆回線に乗せて送ることができる。
【００１２】
図１は、本発明による通信機能付き動画記録装置のブロック図である。撮像手段である撮像部１は被写体２を撮像して動画データを生成する。圧縮符号化手段の１つであるＭＰＥＧ−２符号化部３は動画データをＭＰＥＧ−２方式で符号化し、記録手段である記録部４はそれを光ディスクや磁気ディスクや半導体メモリその他の記憶素子などの記録媒体５へ記録する。一方、圧縮符号化手段の１つであるＭＰＥＧ−４符号化部６は動画データをＭＰＥＧ−４方式で符号化し、通信手段の１つであるネットワーク送信部７はそれをインターネットや携帯電話などの公衆回線または専用の回線であるネットワーク８へ送信する。
【００１３】
図２は、本発明による通信機能付き動画記録装置により同時に生成される符号化方式の異なる符号化データを示した概念図である。図２の下段に示すように、ＭＰＥＧ−４は、フレームレートを落とし、なおかつ画像サイズを縮小して符号化レートを小さくする。
【００１４】
以上により、撮像された動画データを高画質で記録媒体に記録しながら、インターネットや携帯電話などの公衆回線に乗せて送ることができる。コンシューマのビデオカメラの場合には、撮像した画像を高画質で残しつつ、公衆回線を通じて撮像の様子を他者に配信することが可能である。インターネット利用の場合には、不特定多数への映像を配信することもでき、だれでもどこでも放送局になれるといった新しい付加価値を提供することができる。監視用途のビデオカメラの場合には、監視対象の映像を後に証拠として提出可能な高画質でローカルに設けた記録媒体に残しつつ、ネットワークを通じて遠隔監視を行うことができる。
【００１５】
図1に戻って説明を続ける。通信手段の１つであるネットワーク受信部９は、ネットワークを通じて送られてくる音声、映像、文字、制御情報などを受信し、表示手段である表示部１０はこれらの情報を表示し、スピーカ（不図示）は受信した音声を出力する（なお、表示部１０やスピーカなどの、音声や映像、文字を表示または出力する部を出力手段と呼ぶことがある）。操作手段である操作部１１は、キー入力などの操作者の指示を受け付ける。制御手段であるシステム制御部１２は、操作部１１あるいはネットワーク受信部９からの情報に従って撮像部、符号化部、記録部、送信部からなるシステム全体の動作を制御する。コンシューマのビデオカメラの場合には、ネットワークを通じて通信先の相手から送られてくる音声情報や文字情報などを表示部１１により操作者が確認する。これにより、通信先の相手からの被写体の変更、ズーム、露出などの撮影条件のリクエストに応じて、操作者が操作部１１を通じて撮影条件を変更することができる。監視用途のビデオカメラの場合には、ネットワークを通じて送られてくる制御情報に基づき、システム制御部１２がシステム全体の動作を制御する。これにより、遠隔監視者が被写体の変更、ズーム、露出、記録画質などの撮影条件を変更することができる。
【００１６】
図３は、遠隔監視による記録画質の制御の一例を示した概念図である。通常状態では、記録媒体５への記録はフレームレートを下げた状態で行われる。遠隔監視者が異常を検知し、ネットワークを介してアラームの制御信号を送ると、システム制御部１２がＭＰＥＧ−２符号化部３および記録部４を制御し、フルフレームでの記録へ変更する。これにより、長時間記録とアラーム時の高精細記録を両立することができる。
【００１７】
図４は、本発明による通信機能付き動画記録装置の表示部１０に表示される画面を説明する図である。図４（ａ）は、電源を入れて録画の準備をしたときに表示される画面である。録画の準備ができてることをユーザに示すように「録画準備ＯＫ」との表示がされる。図４（ｂ）は、その後操作部１１を操作することにより表示されるメニュー画面である。メニュー画面には様々な設定をしたり、様々な機能を実行するための表示がされるが、ここでは通信機能の有無を選択する部分だけ図示している。ここではデフォルトとして通信機能「無」が選択されているとする。なおデフォルトで通信機能「有」としても、または前回の選択をそのまま維持するようにしても良い。
【００１８】
図４（ｃ）は、メニュー画面で通信機能を「有」に選択したときの表示画面である。「有」を選択すると本装置はネットワークとの接続を開始する。例えば、まず無線ＬＡＮに接続し、不図示のメモリに記憶しておいたＩＤとパスワードをインターネット接続業者のサーバに送信して、インターネットに接続する。なおユーザは予めインターネット接続業者と契約し、ＩＤとパスワードを取得し、本装置のメモリに格納しておく。そして接続が完了すると図４（ｄ）のように接続完了の旨を表示する。
【００１９】
図４（ｅ）は、接続が完了した後に表示される宛先指定の表示画面である。ここでは、自宅ＰＣ（パソコン、以下ＰＣという）、会社ＰＣ、サービスサーバ、ＰＤＡの選択肢がある画面例を示してある。自宅ＰＣや会社ＰＣは予めそれぞれを示すＩＰアドレスをメモリに記憶しておく。サービスサーバとは、撮影した映像を自宅ＰＣや会社ＰＣのような特定の宛先に送信するのではなく、所定のサーバに送信してそのサーバに記憶し、不特定多数の者がそのサーバにアクセスすることにより撮影した映像を閲覧できるようにするものである。また、ＰＤＡとは、ユーザの所有するＰＤＡに送信するものである。
【００２０】
図４（ｆ）は、上記の操作によりネットワークと接続された後の表示画面である。この画面には録画準備ＯＫとの表示に加え、現在ネットワークに接続中である旨が表示される。ここで、操作部１１（例えば不図示の録画開始ボタン）を操作すると録画が開始され図４（ｇ）に示す画面が表示される。このとき撮像部１で撮像された映像がＭＰＥＧ−２符号化部３でＭＰＥＧ−２方式で符号化され、記録部４で記録媒体５に記録される。画面には現在録画中である旨が表示されている。そして操作部１１（例えば不図示の送信開始ボタンまたは録画開始ボタン）を操作すると送信が開始され図４（ｈ）に示す画面が表示される。このとき撮像部１で撮像された映像がＭＰＥＧ−４符号化部６でＭＰＥＧ−４方式で符号化され、ネットワーク送信部７でネットワーク８に送信される。画面には現在送信中である旨が表示されている。なお、ネットワーク送信部７では、入力されたＭＰＥＧ−４で符号化された映像を適切なサイズのパケットに分割し、各パケットのヘッダに上述のように指定された宛先のＩＰアドレスと撮像映像ライブ受信ソフトのＩＰアドレスとを含めて送信する。
【００２１】
そして操作部１１（不図示の送信停止ボタンまたは録画停止ボタン）を操作すると、ＭＰＥＧ−４符号化部６とネットワーク送信部７は停止してＭＰＥＧ−４で符号化された映像のネットワークへの送信を停止し、図４（ｇ）に示す画面に戻る。次に操作部１１（不図示の録画停止ボタン）を操作すると、ＭＰＥＧ−２符号化部３と記録部４は停止してＭＰＥＧ−２で符号化された映像の記録媒体への記録を停止し、図４（ｆ）に示す画面に戻る。
【００２２】
図５は、上記のようにして送信されたＭＰＥＧ−４方式で符号化された映像を自宅ＰＣまたは会社ＰＣにて受信して表示するときの画面である。映像を受信するＰＣで映像を受信するためのソフトである撮像映像ライブ受信ソフトを起動すると、ウインドウ５０１が表示される。ウインドウ５０１の中には、受信したＭＰＥＧ−４方式で符号化された映像を復号化して表示する領域である映像表示領域５０２と、通信機能付き動画記録装置に撮影条件のリクエストを出す操作のためのアイコンである操作アイコン５０３と、通信機能付き動画記録装置に送信するテキストデータを入力するためのテキスト入力欄５０４と、入力したテキストデータを送信する指示をするための送信ボタン５０５と、音声入力のＯＮ／ＯＦＦを切り替える音声入力ボタン５０６と、が表示されている。
【００２３】
このＰＣで映像を閲覧する遠隔閲覧者は、映像表示領域５０２により現在撮像されている映像を閲覧することができる。そして、撮影条件の変更を希望する場合は、操作アイコン５０３を操作して撮影者に撮影条件変更のリクエストを出すことができる。例えば現在撮影している方向よりももっと左を撮影して欲しい場合には、操作アイコン５０３にある「撮影方向」の「左へ」を操作（例えばクリック）する。すると、撮影方向をもっと左へ移動するリクエストがＰＣから通信機能付き動画記録装置へ送信され、通信機能付き動画記録装置の表示部１０に撮影方向をもっと左へ移動するリクエストが表示される。また撮影方向を右へ移動するリクエストも同様であり、また明るさやズームなどの他の撮影条件変更のリクエストも同様である。そして操作者はその表示部１０に表示されたリクエストを確認し、操作部１１を操作して遠隔閲覧者の希望に合わせて撮影することができる。
【００２４】
また、ここでは撮影条件変更のリクエストが通信機能付き動画記録装置の表示部１０に表示される例を示したが、例えば、システム制御部１２がこのリクエストを受信し、操作者が操作部１１を操作しなくとも自動的にリクエストに応じた撮影をするようにしても良い。この場合、操作アイコン５０３の撮影方向に関するリクエストは無効とし、これに代えて「パン」に関するリクエストを用いる。この場合、通信機能付き動画記録装置は三脚等の運台に固定し、パンできる構成にしておく。
【００２５】
また、操作アイコンに代えて又は加えて、テキストを送信することにより撮影条件のリクエストを操作者に伝えることができる。この場合、どのように撮影して欲しいのかという希望をテキストで自由に伝えることができるので、操作者と遠隔閲覧者とのコミュニケーションがよりスムーズになる。遠隔閲覧者はテキスト入力欄５０４にテキストを入力し、入力が終わったら送信ボタン５０５を操作（例えばクリック）する。すると入力されたテキストデータがＰＣから通信機能付き動画記録装置に送信され、通信機能付き動画記録装置の表示部１０に表示される。操作者はその表示部１０に表示されたリクエストを確認し、操作部１１を操作して遠隔閲覧者の希望に合わせて撮影することができる。
【００２６】
また、ＰＣにマイク等の音声入力部を設け、音声を遠隔閲覧者から操作者に伝えることもできる。この場合、音声入力ボタン５０６を操作して音声入力ＯＮにし、その後はマイクに向かって伝えたい内容を話せば、その音声がＰＣから通信機能付き動画記録装置に送信され、通信機能付き動画記録装置の不図示のスピーカーから出力される。操作者はそのスピーカーから出力される音声を確認し、操作部１１を操作して遠隔閲覧者の希望に合わせて撮影することができる。
【００２７】
また、音声入力によって遠隔閲覧者のリクエストを操作者に伝える場合に備えて、通信機能付き動画記録装置は次のように構成されるとより良い。まずスピーカーから出力されるリクエストの音声がマイクに入力されないように、スピーカーとマイクとは離れた位置に配置する。また通常の撮影用のマイクの他に、操作者が遠隔閲覧者へ向けて返事をするための会話用マイクを備える構成にするとさらに良い。この場合、通常撮影用のマイクに入力された音声はＭＰＥＧ−２符号化部３に入力され、映像とともに記録媒体５に記録される。一方会話用マイクに入力された音声はＭＰＥＧ−２符号化部３には入力されず、ＭＰＥＧ−４符号化部６に通常撮影用マイクに入力された音声とともに入力され、ネットワーク送信部７からネットワーク８へ送信される。このように通常撮影用マイクと会話用マイクとに分けることにより、記録媒体５には操作者と遠隔閲覧者との会話が入らず、一方操作者と遠隔閲覧者とは音声で会話をすることができる。なお、操作者と遠隔閲覧者に音声の入出力端子を設け、マイク付きヘッドフォンを接続して、このマイク付きヘッドフォンに会話用の音声を入出力するようにしても良い。
【００２８】
なお、通信機能付き動画記録装置のネットワーク送信部７は、通信機能付き動画記録装置のＩＰアドレスをヘッダに含めて映像を送信するので、撮像映像ライブ受信ソフトはこの通信機能付き動画記録装置のＩＰアドレスを一時的に記憶しておき、ＰＣから通信機能付き動画記録装置にデータを送信する場合には、そのデータのヘッダに一時記憶しておいた通信機能付き動画記録装置のＩＰアドレスを含めて送信する。
【００２９】
また、以上の説明では遠隔閲覧するＰＣで撮像映像ライブ受信ソフトを起動するように説明したが、遠隔閲覧者から操作者へリクエストをせず受信した映像を閲覧するのみであれば一般のブラウザ（および必要であればＭＰＥＧ−４を復号化するプラグイン）であっても閲覧可能である。
【００３０】
また、以上の説明では通信機能付き動画記録装置から映像を閲覧するＰＣへそのＰＣを宛先として映像を直接送信する場合を説明したが、上述したサービスサーバを介して閲覧することもできる。この場合、上述のように通信機能付き動画記録装置はサービスサーバを宛先として指定し、そのサービスサーバにＭＰＥＧ−４方式で符号化した映像を送信する。サービスサーバは受信した映像を記憶する。遠隔閲覧者は遠隔閲覧者のＰＣからそのサービスサーバへアクセスし、通信機能付き動画記録装置から送信された映像を閲覧することできる。この場合は一般ブラウザ（および必要であればＭＰＥＧ−４を復号化するプラグイン）のみで閲覧可能であり、遠隔閲覧者の負担が少ない。またこの場合は、サービスサーバにて撮像映像ライブ受信ソフトと同様の画面を作成し、その画面に閲覧者がアクセスすることにより、一般ブラウザでありながら撮像映像ライブ受信ソフトと同様の機能を得ることができる。この際、操作アイコン５０３の操作やテキストデータの送信が遠隔閲覧者により指示された場合には、サービスサーバにて指示内容を判断し、撮像映像ライブ受信ソフトと同様の機能を果たすように、操作アイコンに対応したリクエストや入力されたテキストデータを通信機能付き動画記録装置に送信する。
【００３１】
図６は、遠隔閲覧者から上述のようにリクエストを受信して通信機能付き動画記録装置の表示部１０に表示した画面の例を示す図である。上述したように、「録画中」および「送信中」の表示がされていることから、現在、撮像してＭＰＥＧ−２方式で符号化した映像を記録媒体に記録中であり、かつ、ＭＰＥＧ−４方式で符号化した映像をネットワークに送信中であることが分かる。そしてさらに、遠隔閲覧者から撮像方向をもっと左へ移動して欲しいリクエスト、ズームアップして欲しいリクエストが受信され、画面左下に表示されている。また、遠隔閲覧者からテキストデータの送信があった場合には、画面右下のテキスト表示領域にそのテキストを表示する。このように、遠隔閲覧者から様々なリクエストやテキストを受信して表示部１０に表示するので、操作者は遠隔閲覧者と会話をしながら撮影をすることができる。
【００３２】
なお、以上の説明の中で、ＭＰＥＧ−４方式に符号化した映像をＰＤＡに送信する例を示したが、ＰＤＡの他に携帯電話やノートＰＣなどの携帯端末であっても良い。また、通信機能付き動画記録装置の表示部１０が本体から取り外し可能に構成されており、表示部１０と本体との双方に通信手段を設けても良い。この場合、上述のように、本体から表示部１０へＭＰＥＧ−４方式で圧縮した映像を送信して表示部１０で表示し、閲覧することができる。またさらに、表示部１０とともに操作部１１の全部または一部を本体と取り外し可能に構成しても良い。この場合、上述のように表示部１０で映像を閲覧することができ、さらに操作部１１で本体に対し上述したようなリクエストを送信して遠隔操作をすることができる。これらのように構成すれば、本体を運台に固定し、表示部１０と操作部１１を取り外して遠隔操作することができるので、重たい本体を持ちつづける必要がなく、手ぶれもなく、使い勝手が良い。
【００３３】
以上説明した実施例によれば、操作者は遠隔閲覧者と会話をしながら撮影をすることができる。例えば、子供の運動会へ父が通信機能付き動画記録装置を持って撮影に行き、母は自宅にいながら父から送信された映像をＰＣで閲覧することができ、会場に行った父も自宅にいる母もリアルタイムで子供の運動会での姿を閲覧することができる。さらに母が撮影して欲しい場面や撮影条件を会場で撮影している父に伝えることができ、父母ともに満足する映像を記録することができる。また父は、本体を三脚に固定し、手持ちの携帯端末で遠隔操作することにより、一日中重たい装置を持つ必要がなく手軽で簡単に撮影することができる。
【００３４】
次に、上述のサービスサーバについてより詳細に説明する。上述したように、図４（ｅ）に示す宛先指定画面においてサービスサーバを指定すると、ＭＰＥＧ−４方式で符号化した映像はサービスサーバに送信される。ユーザは予めサービスサーバを運用しているサービス業者と契約しており、サービスサーバに映像を送信して記憶するためのＩＤとパスワードを取得しておき、映像を送信する際には送信開始時にそのＩＤとパスワードを送信して認証を受け、その後映像を送信する。このＩＤとパスワードは予め通信機能付き動画記録装置のメモリ（不図示）に記憶しておき、サービスサーバを選択すると自動的に認証を受けるようにしておくと便利である。あるいは、サービスサーバに契約ユーザの通信機能付き動画記録装置のＩＰアドレスを登録しておき、そのＩＰアドレスからの映像は常に受信するようにしても良い。
【００３５】
またユーザはサービス業者との契約の際に、ユーザが映像を記憶するサーバのＵＲＬを取得する。ユーザはこのＵＲＬを遠隔閲覧者に予め伝えておき、遠隔閲覧者はＰＣのブラウザにこのＵＲＬを入力することにより、上述したように通信機能付き動画記録装置から送信された映像を閲覧することができる。
【００３６】
さらに、サービスサーバには各ユーザの通信機能付き動画記録装置から送信され記憶された映像をリストアップし、ユーザと直接関係のない第三者が閲覧できるようにすることもできる。その際、ユーザは各映像にその映像の内容を表すようなタイトルを付けることができるようにし、サービスサーバはそれを記憶する。そして、サービスサーバでは第三者に対してタイトルの検索ができるようにすれば、ユーザおよび第三者間で撮影した映像を自由に交換することができるようになる。その際、交換する映像は既にサービスサーバに記憶してあるＭＰＥＧ−４方式で符号化した映像でも良く、あるいは撮影したユーザにアクセスする手段を設け、撮影したユーザが記録媒体に記録しているＭＰＥＧ−２方式で符号化した映像を交換するようにしても良い。
【００３７】
こうすれば、例えば、上述した運動会を例にすれば、会場で撮影している多くのユーザは様々な映像を撮影しており、時には他人が撮影した映像の中に自分の子供の映像が含まれていることがある。このような場合に、各ユーザが撮影しながら映像をサービスサーバに送信し、例えばその学校名と運動会をタイトルとして付ければ、自宅にいる母は自分の子供が一番良く写ってる映像を選択してリアルタイムに閲覧することができる。さらにその後、サービスサーバに記憶されている各映像をチェックし、欲しい映像をＭＰＥＧ−４方式で符号化された映像として取得することができる。あるいは撮影したユーザにアクセスしてＭＰＥＧ−２方式で符号化したデータを取得することができる。このようにすれば、１台のカメラで撮影するよりも多くの角度から子供の運動会での姿が撮影された映像を得ることができる。
【００３８】
なお、以上の説明では撮像装置または記録装置として説明してきたが、再生装置においても応用することができる。例えば、ＭＰＥＧ−２方式で符号化された映像が記録された記録媒体からその映像を再生する再生手段と、その再生された映像を復号化して映像信号にする復号化手段を設ける。これによりＭＰＥＧ−２方式で符号化され記録されている映像を再生して閲覧することができる。そして、復号化された映像信号を再びＭＰＥＧ−４方式で符号化し、ネットワークに送信する。これにより、操作者が再生することにより操作者が閲覧できることはもちろんのこと、遠隔地にいる遠隔閲覧者も同時に閲覧することができる。
【００３９】
また、以上の説明ではＭＥＰＧ−４方式で符号化した映像信号はネットワークに送信する例を説明してきたが、ネットワークに送信する以外に、記録媒体にＭＰＥＧ−２方式の映像信号とともに記録したり、または別の記録媒体に記録したりすることもできる。別の記録媒体とは例えばメモリーカードなどである。
【００４０】
また、以上の説明では、図１に示すようにＭＰＥＧ−２符号化部３とＭＰＥＧ−４符号化部６とを別の構成として説明してきたが、これらは１つのＬＳＩで構成されることが望ましい。両者の共通部分を共通化したり流用したりすることにより、回路規模縮小や消費電力低下などの効果があるからである。
【００４１】
また、以上の説明では、記録に適した符号化方式としてＭＰＥＧ−２方式を、通信に適した符号化方式としてＭＰＥＧ−４方式を例として説明してきたが、これに限られるものではなく、他の符号化方式であっても本発明の適用範囲である。
【００４２】
【発明の効果】
本発明によれば、多機能な撮像装置を提供することができる。
【図面の簡単な説明】
【図１】本発明による通信機能付き動画記録装置のブロック図。
【図２】本発明による通信機能付き動画記録装置により同時に生成される符号化方式の異なる符号化データを示した概念図。
【図３】遠隔監視による記録画質の制御の一例を示した概念図。
【図４】本発明による通信機能付き動画記録装置の表示画面を示す図。
【図５】本発明による通信機能付き動画記録装置から送信された映像を他の端末で表示した際の表示画面を示す図。
【図６】本発明による通信機能付き動画記録装置が他の端末から情報を受信して表示したときの図。
【符号の説明】
１…撮像部、
２…被写体、
３…ＭＰＥＧ−２符号化部、
４…記録部、
５…記録媒体、
６…ＭＰＥＧ−４符号化部、
７…ネットワーク送信部、
８…ネットワーク、
９…ネットワーク受信部、
１０…表示部、
１１…操作部、
１２…システム制御部。[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a moving image recording apparatus that records captured moving image data on a recording medium, and relates to a moving image recording apparatus having a communication function for transmitting to a transmission path while recording.
[0002]
[Prior art]
As a conventional technique related to the present invention, for example, there is a technique described in Japanese Patent Laid-Open No. 2001-285875 (Patent Document 1). This gazette has an object of “reducing the amount of calculation processing and the amount of video memory when converting MPEG2 image compression information to MPEG4 image compression information”, and “decoding macroblocks constituting MPEG2 image compression information by interlaced scanning”. An MPEG2 image information decoding unit that decodes interlaced images using only 4 × 8 components of the 8 × 8 component DCT coefficients, and a first field or the first field of the interlaced image decoded by the MPEG2 image information decoding unit. A scan conversion unit that selects one of the two fields and sequentially generates an image, a downsampler that performs horizontal downsampling on the image generated by the scan conversion unit, and a downsampler that performs downsampling A downsampler that downsamples the sampled image in the vertical direction and a downsampler And a coding means for coding the encoded image into MPEG4 image compression information.
[0003]
[Patent Document 1]
JP 2001-285875 A
[0004]
[Problems to be solved by the invention]
A technique for compressing and encoding moving image data is widely used for the purpose of recording moving image data or placing it on a transmission path. MPEG-2 is an international standard for a moving picture encoding method that is supposed to be applied to broadcasting and storage media, and is adopted in the standard of digital broadcasting and DVD that is a kind of optical disc. Also in the field of video cameras, captured moving image data is encoded by MPEG-2 and recorded on a recording medium such as a DVD. On the other hand, when the captured video data is sent over a public line such as the Internet or a mobile phone, it cannot occupy a large-capacity transmission line as in broadcasting, so it can be encoded with high compression suitable for communication. It is often encoded with a certain MPEG-4.
[0005]
However, such high-compression encoding has a drawback that it has a high compression ratio but is inferior in image quality and is not suitable for recording by a video camera for consumer use or surveillance.
[0006]
Although there is a technique for converting from MPEG-2 to MPEG-4 in the above prior art, it does not show that encoded data suitable for recording and encoded data suitable for communication are generated simultaneously. When both are generated simultaneously, the captured video data is recorded on a recording medium with high-quality encoded data suitable for recording, and placed on a public line such as the Internet or a mobile phone with encoded data suitable for communication. Functions that can be sent can be added.
[0007]
In addition, the above-described conventional technology generates both at the same time, generates both images at the same time, and records the captured moving image data on a recording medium with high-quality encoded data suitable for recording, while using encoded data suitable for communication on the Internet. It does not show circuit size reduction or power consumption reduction when a video camera is added with a function that can be sent on a public line such as a mobile phone.
The purpose of the present invention is toSolve the above issues,It is to provide a multifunctional imaging apparatus.
[0008]
[Means for Solving the Problems]
The above object is achieved by the invention described in the claims..
[0011]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings. According to this embodiment, captured moving image data can be sent on a public line such as the Internet or a mobile phone while being recorded on a recording medium with high image quality.
[0012]
FIG. 1 is a block diagram of a moving picture recording apparatus with a communication function according to the present invention. An imaging unit 1 as an imaging unit captures a subject 2 and generates moving image data. An MPEG-2 encoding unit 3 which is one of the compression encoding units encodes moving image data by the MPEG-2 system, and a recording unit 4 which is a recording unit converts the moving image data into an optical disk, a magnetic disk, a semiconductor memory, or other storage elements. To the recording medium 5. On the other hand, the MPEG-4 encoding unit 6 which is one of the compression encoding units encodes moving image data by the MPEG-4 system, and the network transmission unit 7 which is one of the communication units converts it to the Internet or a mobile phone. It transmits to the network 8 which is a public line or a dedicated line.
[0013]
FIG. 2 is a conceptual diagram showing encoded data of different encoding methods generated simultaneously by the moving image recording apparatus with communication function according to the present invention. As shown in the lower part of FIG. 2, MPEG-4 lowers the frame rate and reduces the image size to reduce the encoding rate.
[0014]
As described above, the captured moving image data can be sent on a public line such as the Internet or a mobile phone while being recorded on a recording medium with high image quality. In the case of a consumer video camera, it is possible to deliver the captured state to others through the public line while leaving the captured image with high image quality. In the case of using the Internet, video can be distributed to an unspecified number of people, and new added value that anyone can become a broadcasting station can be provided. In the case of a video camera for monitoring purposes, remote monitoring can be performed through a network while leaving a video to be monitored on a locally provided recording medium with high image quality that can be submitted as evidence later.
[0015]
Returning to FIG. 1, the description will be continued. The network receiving unit 9 as one of the communication means receives voice, video, characters, control information, etc. sent through the network, and the display unit 10 as the display means displays these information, and a speaker (not connected). In the figure, the received voice is output (a part that displays or outputs voice, video, or characters, such as the display unit 10 or a speaker, may be referred to as output means). The operation unit 11 serving as an operation unit receives an operator instruction such as key input. The system control unit 12 serving as a control unit controls the operation of the entire system including the imaging unit, the encoding unit, the recording unit, and the transmission unit in accordance with information from the operation unit 11 or the network reception unit 9. In the case of a consumer video camera, the operator confirms voice information, character information, and the like sent from a communication partner through a network by the display unit 11. Accordingly, the operator can change the shooting condition through the operation unit 11 in response to a request for a shooting condition such as a change of the subject, zoom, and exposure from the communication partner. In the case of a video camera for surveillance purposes, the system control unit 12 controls the operation of the entire system based on control information sent through a network. Thereby, the remote supervisor can change the photographing conditions such as change of the subject, zoom, exposure, and recording image quality.
[0016]
FIG. 3 is a conceptual diagram showing an example of recording image quality control by remote monitoring. In the normal state, recording on the recording medium 5 is performed with the frame rate lowered. When the remote monitor detects an abnormality and sends an alarm control signal via the network, the system control unit 12 controls the MPEG-2 encoding unit 3 and the recording unit 4 to change to full frame recording. This makes it possible to achieve both long-time recording and high-definition recording at the time of an alarm.
[0017]
FIG. 4 is a diagram illustrating a screen displayed on the display unit 10 of the moving image recording apparatus with a communication function according to the present invention. FIG. 4A shows a screen displayed when the power is turned on to prepare for recording. “Recording preparation OK” is displayed to indicate to the user that the recording is ready. FIG. 4B shows a menu screen displayed by operating the operation unit 11 thereafter. The menu screen displays various settings and displays for executing various functions. Here, only the portion for selecting the presence or absence of the communication function is shown. Here, it is assumed that the communication function “none” is selected as a default. Note that the communication function “present” may be set as default, or the previous selection may be maintained as it is.
[0018]
FIG. 4C is a display screen when the communication function is selected as “present” on the menu screen. When “Yes” is selected, the apparatus starts connection with the network. For example, first, a wireless LAN is connected, and an ID and a password stored in a memory (not shown) are transmitted to a server of an Internet service provider to connect to the Internet. The user makes a contract with an Internet service provider in advance, acquires the ID and password, and stores them in the memory of the apparatus. When the connection is completed, a message indicating the completion of the connection is displayed as shown in FIG.
[0019]
FIG. 4E is a destination designation display screen displayed after the connection is completed. Here, an example of a screen with options of home PC (PC, hereinafter referred to as PC), company PC, service server, and PDA is shown. The home PC and the company PC store the IP address indicating each in advance in the memory. The service server does not send the captured video to a specific destination such as a home PC or a company PC, but transmits it to a predetermined server and stores it in that server, so that an unspecified number of people can access the server. By doing so, the photographed video can be browsed. The PDA is transmitted to the PDA owned by the user.
[0020]
FIG. 4F is a display screen after being connected to the network by the above operation. In this screen, in addition to displaying “Recording preparation OK”, it is displayed that the network is currently connected. Here, when the operation unit 11 (for example, a recording start button (not shown)) is operated, recording is started and a screen shown in FIG. 4G is displayed. At this time, the video imaged by the imaging unit 1 is encoded by the MPEG-2 encoding unit 3 using the MPEG-2 method, and is recorded on the recording medium 5 by the recording unit 4. The screen indicates that recording is currently in progress. When the operation unit 11 (for example, a transmission start button or a recording start button (not shown)) is operated, transmission is started and a screen shown in FIG. 4 (h) is displayed. At this time, the video imaged by the imaging unit 1 is encoded by the MPEG-4 encoding unit 6 according to the MPEG-4 system, and transmitted to the network 8 by the network transmission unit 7. The screen indicates that transmission is currently in progress. The network transmission unit 7 divides the input MPEG-4 encoded video into packets of an appropriate size, and the destination IP address and captured video live specified in the header of each packet as described above. Send it including the IP address of the receiving software.
[0021]
When the operation unit 11 (not shown transmission stop button or recording stop button) is operated, the MPEG-4 encoding unit 6 and the network transmission unit 7 are stopped and the MPEG-4 encoded video is transmitted to the network. To return to the screen shown in FIG. Next, when the operation unit 11 (recording stop button (not shown)) is operated, the MPEG-2 encoding unit 3 and the recording unit 4 are stopped and recording of the MPEG-2 encoded video on the recording medium is stopped. Return to the screen shown in FIG.
[0022]
FIG. 5 shows a screen when the video encoded by the MPEG-4 system transmitted as described above is received and displayed by the home PC or the company PC. When a captured video live reception software, which is software for receiving video, is activated on a PC that receives video, a window 501 is displayed. In the window 501, there is a video display area 502 which is an area for decoding and displaying the received video encoded by the MPEG-4 system, and an operation for issuing a request for shooting conditions to the moving image recording apparatus with communication function. An operation icon 503, a text input field 504 for inputting text data to be transmitted to the moving image recording apparatus with a communication function, a transmission button 505 for instructing transmission of the input text data, and voice input A voice input button 506 for switching between ON and OFF is displayed.
[0023]
A remote viewer who browses the video on this PC can browse the video currently captured in the video display area 502. If it is desired to change the shooting conditions, the user can make a request for changing shooting conditions by operating the operation icon 503. For example, when the user wants to photograph more left than the direction in which the current image is captured, the user operates (for example, clicks) “to the left” of “imaging direction” in the operation icon 503. Then, a request to move the shooting direction further to the left is transmitted from the PC to the moving image recording apparatus with communication function, and a request to move the shooting direction further to the left is displayed on the display unit 10 of the moving image recording apparatus with communication function. The request for moving the shooting direction to the right is the same, and the request for changing other shooting conditions such as brightness and zoom is also the same. The operator can confirm the request displayed on the display unit 10 and operate the operation unit 11 to take a picture according to the desire of the remote viewer.
[0024]
In addition, here, an example in which a request for changing shooting conditions is displayed on the display unit 10 of the moving image recording apparatus with a communication function is shown. For example, the system control unit 12 receives this request, and the operator operates the operation unit 11. You may make it automatically shoot according to a request, without operating. In this case, the request regarding the shooting direction of the operation icon 503 is invalid, and a request regarding “pan” is used instead. In this case, the moving image recording apparatus with a communication function is fixed to a tripod such as a tripod so that it can be panned.
[0025]
Further, instead of or in addition to the operation icon, a request for photographing conditions can be transmitted to the operator by transmitting text. In this case, since it is possible to freely convey the hope of how to take a picture by text, the communication between the operator and the remote viewer becomes smoother. The remote viewer inputs text in the text input field 504, and operates (eg, clicks) the send button 505 when input is completed. Then, the input text data is transmitted from the PC to the moving picture recording apparatus with a communication function and displayed on the display unit 10 of the moving picture recording apparatus with a communication function. The operator can confirm the request displayed on the display unit 10 and operate the operation unit 11 to take a picture as desired by the remote viewer.
[0026]
In addition, a voice input unit such as a microphone can be provided in the PC, and voice can be transmitted from the remote viewer to the operator. In this case, if the voice input button 506 is operated to turn on the voice input and then the content to be transmitted to the microphone is spoken, the voice is transmitted from the PC to the video recording device with the communication function, and the video recording device with the communication function Is output from a speaker (not shown). The operator can confirm the sound output from the speaker and operate the operation unit 11 to take a picture as desired by the remote viewer.
[0027]
Further, in preparation for the case where a remote viewer request is transmitted to the operator by voice input, it is better that the moving image recording apparatus with a communication function is configured as follows. First, the speaker and the microphone are arranged at positions away from each other so that the requested sound output from the speaker is not input to the microphone. Further, in addition to the normal shooting microphone, it is further preferable that the operator has a conversation microphone for replying to the remote viewer. In this case, the audio input to the normal shooting microphone is input to the MPEG-2 encoding unit 3 and recorded on the recording medium 5 together with the video. On the other hand, the audio input to the conversation microphone is not input to the MPEG-2 encoding unit 3 but is input to the MPEG-4 encoding unit 6 together with the audio input to the normal shooting microphone, and is transmitted from the network transmission unit 7 to the network. 8 is transmitted. As described above, by dividing the microphone into a normal shooting microphone and a conversation microphone, the conversation between the operator and the remote viewer does not enter the recording medium 5, while the operator and the remote viewer have a voice conversation. Can do. Note that an audio input / output terminal may be provided for the operator and the remote viewer, a headphone with a microphone may be connected, and voice for conversation may be input / output to the headphone with the microphone.
[0028]
Note that the network transmission unit 7 of the video recording device with communication function transmits the video including the IP address of the video recording device with communication function in the header, so the captured video live reception software is the IP of the video recording device with communication function. When the address is temporarily stored and data is transmitted from the PC to the video recording device with communication function, the IP address of the video recording device with communication function stored temporarily in the header of the data is included. Send.
[0029]
In the above description, the captured video live reception software is started on the PC for remote browsing. However, if the remote viewer only browses the received video without requesting the operator, a general browser ( Even if it is a plug-in for decoding MPEG-4 if necessary, it can be browsed.
[0030]
In the above description, a case has been described in which a video is directly transmitted from a moving image recording apparatus with a communication function to a PC that browses the video with the PC as a destination, but the video can also be browsed via the service server described above. In this case, as described above, the moving image recording apparatus with a communication function designates the service server as a destination, and transmits the video encoded by the MPEG-4 system to the service server. The service server stores the received video. The remote viewer can access the service server from the remote viewer's PC and browse the video transmitted from the moving image recording apparatus with a communication function. In this case, browsing is possible only with a general browser (and a plug-in for decoding MPEG-4 if necessary), and the burden on the remote viewer is small. In this case, a screen similar to the captured video live reception software is created on the service server, and a viewer accesses the screen to obtain the same function as the captured video live reception software even though it is a general browser. Can do. At this time, when an operation of the operation icon 503 or transmission of text data is instructed by a remote viewer, the content of the instruction is determined by the service server, and the operation is performed so as to perform the same function as the captured video live reception software. The request corresponding to the icon and the input text data are transmitted to the moving picture recording apparatus with a communication function.
[0031]
FIG. 6 is a diagram illustrating an example of a screen displayed on the display unit 10 of the moving image recording apparatus with a communication function upon receiving a request from a remote viewer as described above. As described above, since “recording” and “sending” are displayed, a video imaged and encoded in the MPEG-2 system is currently being recorded on a recording medium, and MPEG- It can be seen that the video encoded by the four systems is being transmitted to the network. Furthermore, a request for moving the imaging direction further to the left and a request for zooming in are received from a remote viewer and displayed at the lower left of the screen. When text data is transmitted from a remote viewer, the text is displayed in the text display area at the lower right of the screen. Thus, since various requests and texts are received from the remote viewer and displayed on the display unit 10, the operator can take a picture while talking with the remote viewer.
[0032]
In the above description, an example in which video encoded in the MPEG-4 format is transmitted to the PDA has been described. However, in addition to the PDA, a mobile terminal such as a mobile phone or a notebook PC may be used. Further, the display unit 10 of the moving image recording apparatus with a communication function is configured to be removable from the main body, and communication means may be provided on both the display unit 10 and the main body. In this case, as described above, the video compressed by the MPEG-4 method can be transmitted from the main body to the display unit 10 and displayed on the display unit 10 for viewing. Further, all or part of the operation unit 11 together with the display unit 10 may be configured to be removable from the main body. In this case, the video can be viewed on the display unit 10 as described above, and further, the operation unit 11 can transmit the request as described above to the main body and perform remote operation. With such a configuration, the main body can be fixed to the carriage, and the display unit 10 and the operation unit 11 can be detached and remotely operated. Therefore, it is not necessary to continue to hold a heavy main body, and there is no camera shake, which is convenient. .
[0033]
According to the embodiment described above, the operator can take a picture while talking with the remote viewer. For example, a father goes to a children's athletic meet to take a video recording device with communication function, and his mother can view the video transmitted from his father on his PC while at home. Mothers can view their children's sports events in real time. In addition, the scenes and conditions that the mother wants to shoot can be communicated to the father who is shooting at the venue, and both parents can record a satisfactory video. Also, by fixing the main body to a tripod and remotely controlling it with a handheld portable terminal, the father can easily and easily shoot without having to have heavy equipment all day long.
[0034]
Next, the service server described above will be described in more detail. As described above, when the service server is designated on the destination designation screen shown in FIG. 4E, the video encoded by the MPEG-4 system is transmitted to the service server. The user has a contract with a service provider that operates the service server in advance, obtains an ID and password for transmitting and storing the video to the service server, and when transmitting the video, ID and password are transmitted for authentication, and then video is transmitted. It is convenient to store the ID and password in advance in a memory (not shown) of a moving picture recording apparatus with a communication function so that authentication is automatically performed when a service server is selected. Alternatively, the IP address of the contracting user's video recording device with a communication function may be registered in the service server, and video from the IP address may be always received.
[0035]
Further, when the user contracts with the service provider, the user acquires the URL of the server that stores the video. The user communicates this URL to the remote viewer in advance, and the remote viewer can view the video transmitted from the video recording apparatus with communication function as described above by inputting this URL into the browser of the PC. it can.
[0036]
Furthermore, the service server can list videos transmitted and stored from each user's communication function-equipped moving picture recording apparatus so that a third party who is not directly related to the user can view the videos. At that time, the user can give each video a title that represents the content of the video, and the service server stores it. If the service server can search for a title with respect to a third party, the video shot between the user and the third party can be freely exchanged. At that time, the video to be exchanged may be an MPEG-4 encoded video that is already stored in the service server, or a means for accessing the photographed user is provided, and the MPEG recorded by the photographed user on the recording medium. -2 format encoded video may be exchanged.
[0037]
In this way, for example, in the case of the above-mentioned athletic meet, many users who shoot at the venue shoot various images, and sometimes the images of their children are included in the images taken by others. May be. In such a case, each user sends a video to the service server while taking a picture. For example, if the school name and athletic meet are given as titles, the mother at home selects the video that best shows his child. Can be viewed in real time. Further, after that, each video stored in the service server is checked, and the desired video can be acquired as a video encoded by the MPEG-4 system. Alternatively, data encoded by the MPEG-2 method can be acquired by accessing the user who has taken the image. In this way, it is possible to obtain an image in which a child's appearance at an athletic meet is photographed from more angles than when photographing with a single camera.
[0038]
In the above description, the imaging apparatus or the recording apparatus has been described, but the present invention can also be applied to a reproducing apparatus. For example, there are provided reproduction means for reproducing the video from a recording medium on which the video encoded by the MPEG-2 system is recorded, and decoding means for decoding the reproduced video into a video signal. As a result, it is possible to reproduce and browse a video encoded and recorded in the MPEG-2 system. Then, the decoded video signal is encoded again by the MPEG-4 method and transmitted to the network. Thereby, not only the operator can browse by the reproduction by the operator, but also a remote viewer at a remote place can browse at the same time.
[0039]
In the above description, an example of transmitting a video signal encoded by the MPEG-4 system to the network has been described. However, in addition to transmitting to the network, the video signal can be recorded on a recording medium together with the MPEG-2 system video signal, Alternatively, it can be recorded on another recording medium. Another recording medium is, for example, a memory card.
[0040]
In the above description, as shown in FIG. 1, the MPEG-2 encoding unit 3 and the MPEG-4 encoding unit 6 have been described as different configurations, but these may be configured by one LSI. desirable. This is because by sharing or diverting the common part between the two, there are effects such as circuit scale reduction and power consumption reduction.
[0041]
In the above description, the MPEG-2 system has been described as an example of an encoding system suitable for recording, and the MPEG-4 system has been described as an example of an encoding system suitable for communication. However, the present invention is not limited to this. This encoding method is also within the scope of the present invention.
[0042]
【The invention's effect】
According to the present invention, a multifunctional imaging apparatus can be provided.
[Brief description of the drawings]
FIG. 1 is a block diagram of a moving image recording apparatus with a communication function according to the present invention.
FIG. 2 is a conceptual diagram showing encoded data of different encoding methods generated simultaneously by the moving image recording apparatus with communication function according to the present invention.
FIG. 3 is a conceptual diagram illustrating an example of recording image quality control by remote monitoring.
FIG. 4 is a view showing a display screen of a moving picture recording apparatus with a communication function according to the present invention.
FIG. 5 is a diagram showing a display screen when an image transmitted from a moving image recording apparatus with a communication function according to the present invention is displayed on another terminal.
FIG. 6 is a diagram when the moving image recording apparatus with communication function according to the present invention receives and displays information from another terminal.
[Explanation of symbols]
1 ... Imaging unit,
2 ... Subject,
3 ... MPEG-2 encoding unit,
4 ... Recording part,
5 ... Recording medium,
6 ... MPEG-4 encoding unit,
7 ... Network transmitter
8 ... Network,
9: Network receiver,
10 ... display part,
11 ... operation part,
12: System control unit.

Claims

Imaging means for imaging a subject and outputting a video signal;
The video signal is encoded in parallel by the first encoding method and the second encoding method, and the first code data encoded by the first encoding method and the second encoding method are used. Encoding means constituted by one LSI for outputting the encoded second code data in parallel;
Recording means for recording the first code data on a recording medium;
A communication means for transmitting the second code data to an external device connected via a transmission path;
Operation means;
A storage unit for storing connection information used when the communication means is connected to a transmission line;
When switching from the shooting mode not using the communication means to the shooting mode used by operating the operation means, the connection information stored in the storage unit is transmitted to the transmission path, connected to the transmission path,
By the operation of the operation means, the recording means starts recording,
When the transmission means is instructed to start transmission by operation of the operation means during connection with the transmission path and during the recording, the communication means starts transmission of the second encoded data to the external device,
When communication is instructed to stop transmission by operating the operation means during connection with the transmission path and during the recording, the communication means stops transmission of the second encoded data to the external device,
A video camera characterized in that the recording means stops recording when instructed to stop recording by operating the operating means when connected to a transmission line and not transmitting the second encoded data. .

In claim 1 ,
The storage unit stores one or more pieces of destination information that is a destination to which the communication unit transmits the second code data,
Designating one of the destination information by operating the operation means when switching the photographing mode;
Features a video camera .

In either claim 1 or 2 ,
The first encoding method is MPEG2, and the second encoding method is MPEG4;
Features a video camera .