JP2004032636A

JP2004032636A - Image transmitter and image receiver

Info

Publication number: JP2004032636A
Application number: JP2002189725A
Authority: JP
Inventors: Masakazu Nishijima; 西嶋　征和
Original assignee: Fuji Photo Film Co Ltd
Current assignee: Fujifilm Holdings Corp
Priority date: 2002-06-28
Filing date: 2002-06-28
Publication date: 2004-01-29

Abstract

<P>PROBLEM TO BE SOLVED: To shorten the moving image transmitting time of an image transmitter by only transferring the necessary part of a picked-up moving image by eliminating the unnecessary part of the image and, to save the recording capacity of an image receiver for recording moving image. <P>SOLUTION: The image transmitter is provided with an image pick-up means 150 which picks up moving images, a still image generating means (information processing means 180) which generates a plurality of representative still images from a picked-up moving image, and a transmitting-receiving means 157 which receives the information on the reproduction start point or end point of the moving image from a portable terminal 30. The transmitter is also provided with an information processing means 180 which sets the partial moving image after the reproduction start point is received to a transmittable state when the means 180 receives the information on the reproduction start point of the moving image through the transmitting-receiving means 157 and the partial moving image before the reproduction terminating point is received to a transmittable state when the means 180 receives the information on the reproduction terminating point through the means 157 and a transmitting-receiving means 157 which transmits the representative still images and partial moving image to another communication equipment. <P>COPYRIGHT: (C)2004,JPO

Description

【０００１】
【発明の属する技術分野】
本発明は、画像送信機器並びに画像受信機器に係り、特に、取得した動画像の一部分を画像受信機器に送信する画像送信機器、並びに、画像送信機器に対して所望の部分動画を指定する画像受信機器に関する。
【０００２】
【従来の技術】
記録媒体に記録された動画像の中から所定間隔毎に静止画像を生成する静止画生成手段を有する画像再生装置が、特開平９−２４７５６９号の公報に示されている。
【０００３】
【発明が解決しようとする課題】
しかしながら、前記特開平９−２４７５９６号の公報に示されている画像再生装置では、画像再生時に一度動画ファイルをスキャンして静止画像を作成してマルチ画面表示し、利用者がマルチ画面を選択すると選択した箇所から動画の再生を開始している。このように、動画再生時に静止画を作成するため、再生対象の動画ファイルが再生機器と異なる機器上にある場合や、ネット上にある場合において、一度動画ファイル受信しその後スキャンして静止画を作成する必要があり、操作レスポンスが悪化するという不具合を生じている。
【０００４】
本発明は、このような事情に鑑みてなされたもので、利用者からの指示に基づいて不必要な動画の部分を排除して必要な動画のみを画像受信機器に転送することによって、動画の送信時間の短縮を図るとともに、画像受信機器における画像記録のための記録容量を節約することが可能な画像送信機器並びに画像受信機器を提供することを目的としている。
【０００５】
また本発明は、利用者が動画の中から必要な部分を容易に選び出すことが可能な画像受信機器を提供することを目的としている。
【０００６】
【課題を解決するための手段】
本発明は前記目的を達成するために、取得した動画像の一部分を他の通信機器に送信する画像送信機器であって、動画像を取得する取得手段と、前記取得した動画から複数の代表静止画を生成する静止画生成手段と、他の通信機器から動画再生の開始点又は終了点に関する情報を受信する受信手段と、前記受信手段を介して動画再生の開始点に関する情報を受信した場合には、前記取得した動画における動画再生の開始点以降の部分動画を送信可能に設定する情報処理手段、又は、前記受信手段を介して動画再生の終了点に関する情報を受信した場合には、前記取得した動画における動画再生の終了点以前の部分動画を送信可能に設定する情報処理手段と、前記生成した代表静止画及び前記送信可能に設定した部分動画を他の通信機器に送信する送信手段とを備えたことを特徴としている。
【０００７】
本発明によれば、動画像を取得する取得手段と、前記取得した動画から複数の代表静止画を生成する静止画生成手段と、他の通信機器から動画再生の開始点又は終了点に関する情報を受信する受信手段と、前記受信手段を介して動画再生の開始点に関する情報を受信した場合には、前記取得した動画における動画再生の開始点以降の部分動画を送信可能に設定する情報処理手段、又は、前記受信手段を介して動画再生の終了点に関する情報を受信した場合には、前記取得した動画における動画再生の終了点以前の部分動画を送信可能に設定する情報処理手段と、前記生成した代表静止画及び前記送信可能に設定した部分動画を他の通信機器に送信する送信手段とを備えたので、利用者からの指示に基づいて不必要な動画の部分を排除して必要な動画のみを画像受信機器に転送するので、動画の送信時間の短縮を図るとともに、画像受信機器における画像記録のための記録容量を節約することが可能となる。
【０００８】
また、本発明は前記目的を達成するために請求項２に記載の発明は、他の通信機器に対して所望の部分動画を指定する画像受信機器であって、他の通信機器から動画再生に関連する複数の代表静止画を受信する受信手段と、前記受信した動画再生に関連する複数の代表静止画を表示する表示手段と、利用者から動画再生の開始点又は終了点に関する情報を入力する入力手段と、前記入力手段を介して入力した動画再生の開始点又は終了点に関する情報を他の通信機器に送信する送信手段とを備えたことを特徴としている。
【０００９】
本発明によれば、他の通信機器から動画再生に関連する複数の代表静止画を受信する受信手段と、前記受信した動画再生に関連する複数の代表静止画を表示する表示手段と、利用者から動画再生の開始点又は終了点に関する情報を入力する入力手段と、前記入力手段を介して入力した動画再生の開始点又は終了点に関する情報を他の通信機器に送信する送信手段とを備えたので、画像送信機器に対して動画の必要な部分を指定することが可能となり、不必要な動画の部分を排除した必要な動画のみを画像送信機器から受信できるので、動画の送信時間の短縮を図るとともに、画像受信機器における画像記録のための記録容量を節約することが可能となる。
【００１０】
また本発明は、画像受信機器の表示手段に、受信した動画再生に関する複数の代表静止画を１画像毎に順次表示するか、又は、前記複数の代表静止画を一画面上に複数時系列表示することを特徴としている。
【００１１】
本発明によれば、画像受信機器の表示手段は、受信した動画再生に関する複数の代表静止画を１画像毎に順次表示するか、又は、前記複数の代表静止画を一画面上に複数時系列表示するようにしたので、利用者は動画の中から必要な部分を容易に選び出す設定を行うことが可能となる。
【００１２】
【発明の実施の形態】
以下添付図面に従って、本発明に係る画像送信機器並びに画像受信機器の好ましい実施の形態について詳説する。
【００１３】
図１は、本発明に係る画像送信機器並びに画像受信機器から構成される画像送受信システムの構成例を示す図である。
【００１４】
同図に示すように画像送受信システムは、画像を取得し、該取得した動画像の一部分である部分動画を携帯端末３０（画像受信機器）等の他の通信機器に送信する電子カメラ１０（画像送信機器）と、電子カメラ１０等の他の通信機器に対して所望の部分動画の範囲を指定する情報を送信するＰＤＡ等の携帯端末３０とから構成されている。
【００１５】
同図に示す例では、電子カメラ１０にて撮像した動画像を、有線又は無線の通信手段を介して携帯端末３０に送信して、該送信した動画像を携帯端末３０の表示手段３６８に表示したり、携帯端末３０内に設けられている記録手段に記録することが可能となっている。
【００１６】
また同図に示すように携帯端末３０には、動画像や文字情報等を表示するとともに利用者が情報を入力するタッチパネルから構成されている表示手段３６８と、携帯端末３０の処理機能を動作状態と非動作状態に切り換えるいわゆる電源スイッチ３０５と、当該携帯端末３０が動作状態であることを利用者に通知する電源のパイロットランプ等が設けられている。
【００１７】
利用者は、表示手段３６８に表示した画像、画像の一覧表示、又は複数の代表静止画（動画像から情報量を減少して生成した静止画の集合）等の画像を閲覧することが可能となっている。また利用者は、表示手段３６８に表示されているアイコンボタンやメニュー項目を付属のタッチペンで指示（タップ）して携帯端末３０の処理を指示したり、表示手段３６８の文字入力領域に割り当てられている文字入力認識手段を利用してコマンドや文字の入力を行うことが可能となっている。
【００１８】
図２に、本発明に係る画像送信機器の一形態である電子カメラ１０の信号処理系ブロック図を示す。
【００１９】
同図に示すように電子カメラ１０の撮像処理部には、受光面に結像した被写体像を光電変換して画像信号として出力する撮像手段１５０（動画像を取得する取得手段の機能を含むものであってもよい）と、アナログ信号用の画像処理手段１５３と、アナログの画像信号をデジタルの画像データに変換するＡ／Ｄ変換器１５４とが設けられている。
【００２０】
また、画像データ等の情報をパソコンや携帯端末３０等の他の通信機器と送受信するための通信手段として、画像データ等の情報を無線の通信手段を用いて伝達するアンテナ１５６と、画像データ等の情報を搬送波に乗せて送信又は受信する送受信手段１５７（送信手段、受信手段、取得手段の機能を含むものであってもよい）と、画像データ等の情報を伝達する通信ケーブルを装着する通信コネクタ１６２とが設けられている。
【００２１】
また、電子カメラ１０には、画像データ等に対して圧縮処理や伸張処理を実施する圧縮伸張手段１６７と、各種の文字を画像とともに表示手段１６８にオンスクリーンディスプレイするＯＳＤ１６９と、画像データに対してホワイトバランス処理を実施したり、ガンマ変換、ＹＣ変換処理、画素数の変換処理、電子ズーム処理、トリミング処理等を実施する信号処理手段１７０と、表示用の画像データを一時的に記憶しておくフレームメモリ１７１と、デジタルの画像データを表示用のコンポジット信号などに変換するＤ／Ａ変換器１７２とが設けられている。
【００２２】
また、電子カメラ１０には、電源スイッチやレリーズボタン等から構成される入力手段１７４と、入力手段１７４を介して入力された入力情報のインターフェースとなるＩ／Ｏ１７５と、記録媒体１７７を着脱可能に装着する記録媒体装着部１７８と、記録媒体１７７に対して画像データ等の情報を記録したり読み出したりする記録媒体インターフェース１７９（動画像を取得する取得手段の機能を含むものであってもよい）とが設けられている。
【００２３】
また、電子カメラ１０には、電子カメラ１０全体の制御を行うとともに画像処理や通信処理等の各種の処理を実施する情報処理手段１８０（不揮発性メモリ等の記録手段から動画像を取得する取得手段の機能を含むものであってもよい）と、情報の書き換えが可能であるとともに調整用の各種定数や電子カメラ１０の動作プログラム等を記憶する不揮発性メモリ１８２と、プログラム実行時の作業領域となる記録手段のＲＡＭ１８４とが設けられている。
【００２４】
また、電子カメラ１０には、時を刻むカレンダ時計１９０と、電子カメラ１０を駆動するための各種電力を供給する電源１９１及び電池１９１Ａと、撮像時に光を発光して被写体の光量不足を補う発光手段１９３と、該発光手段１９３の発光タイミング等の調節を行う発光制御手段１９４とが設けられている。
【００２５】
同図に示すように電子カメラ１０の情報処理手段１８０とその周辺の各回路はバス１９９で接続されており、互いに情報の伝達を高速で行うことが可能であるとともに、情報処理手段１８０が実行する処理プログラムに基づいて周辺の各回路を制御することが可能となっている。
【００２６】
なお、記録媒体１７７は、光記録式、ＥＥＰＲＯＭ等を用いた半導体記録式、フロッピーディスクやハードディスク等の磁気記録式等の記録媒体である。
【００２７】
なお、上記の説明では画像送信装置を、撮像手段を備えた電子カメラとした実施の形態で説明したが、本発明はこれに限定されるものではなく、記録媒体１７７から動画像を取得して、該取得した動画像の一部分を他の通信機器に送信する通信機器であれば、パソコン、携帯電話、ＰＤＡ（Ｐｅｒｓｏｎａｌ　Ｄａｔａ　Ａｓｓｉｓｔａｎｃｅ）、ネットワーク上のサーバその他の通信機器であっても本発明の目的を達成することが可能である。
【００２８】
上記のとおり構成された電子カメラ１０の撮像処理について説明する。
【００２９】
撮像する被写体の像は撮像レンズによって撮像手段１５０の受光面に結像され、結像した被写体像は光電変換されて画像処理手段１５３に出力される。画像処理手段１５３では、この画像信号に対して相関二重サンプリングや増幅、ノイズの低減処理等の画像処理を実施して、Ａ／Ｄ変換器１５４にてデジタルデータに変換する。
【００３０】
該デジタルデータに変換した画像データは、情報処理手段１８０の指令により信号処理手段１７０に転送され、画像のホワイトバランスやガンマ補正、ＹＣ変換、ズーム処理、画素数変換処理等の画像処理が施された後に、一時期ＶＲＡＭ等のフレームメモリ１７１に記憶される。
【００３１】
情報処理手段１８０は、フレームメモリ１７１に記憶されている画像データを逐次Ｄ／Ａ変換器１７２に伝達する指示を行うことによって、ＯＳＤ１６９から発生されるキャラクタ等の情報とともに表示手段１６８に表示することが可能となっている。
【００３２】
利用者が、入力手段１７４に設けられている撮像指示のためのレリーズボタンを押すと、情報処理手段１８０は被写体を撮像するモードに入る。すると情報処理手段１８０は、Ａ／Ｄ変換器１５４にてデジタルデータに変換された画像データを一時期ＲＡＭ１８４に記録する。
【００３３】
画像を記録媒体１７７に記録する場合には、前記ＲＡＭ１８４に記憶されている画像を逐次読み出して信号処理手段１７０に転送して、画像のホワイトバランスやガンマ補正、ＹＣ変換、ズーム処理、画素数変換処理等の画像処理を施して各色の階調変換、画像サイズの変換処理等を実施した後に、圧縮伸張手段１６７に転送して、画像の圧縮処理を行う。
【００３４】
圧縮伸張手段１６７にて所定の条件で圧縮処理が実施された画像データは、情報処理手段１８０の指示に基づいて再び一時期ＲＡＭ１８４のＦＩＬＥ用ワーク領域に一時記憶され、その後に記録用の画像ファイルの形式に変換された後に記録媒体インターフェース１７９に対して出力され、順次記録媒体１７７に記録される。このように画像ファイルを記録媒体１７７に記録する場合には、撮像処理と並行して、圧縮伸張手段１６７での各フレームの圧縮伸張処理や、記録媒体１７７に対する画像ファイルの記録処理が実施される。
【００３５】
なお以下に示す実施例では、携帯端末３０から「代表静止画像受信」の要求を受信した際に、代表静止画（代表静止画の詳細については後述する）を生成する実施の形態を示しているが、上記のようにして撮像した画像ファイルを記録する際に、情報処理手段１８０（静止画生成手段）が撮像した動画像から複数の代表静止画を生成する処理を行って、元の動画像と関連付けて記録媒体１７７に記録するようにしてもよい。このように画像ファイルを記録する際に代表静止画を生成して記録する場合には、後の工程で電子カメラ１０にて代表静止画を作成する処理を省くことができるため、利用者が部分動画（部分動画の詳細についても後述する）の範囲を設定する際に、部分動画の転送開始までの操作レスポンスを向上させ、操作性を向上させることが可能となる。
【００３６】
図３に、本発明に係る画像受信機器の一形態である携帯端末３０の信号処理系ブロック図を示す。
【００３７】
同図に示すように携帯端末３０の情報送受信部には、電子カメラ１０や無線通信基地局等の通信機器と無線通信を実施するアンテナ３５６と、情報を無線により送受信するために所定の形式にデータを変換する送受信手段３５７（送信手段、受信手段）と、電子カメラ１０やネットワーク上に設けられたサーバ等の通信機器と有線による線通信を実施する通信コネクタ３６２とが設けられている。
【００３８】
また、携帯端末３０には、画像や文字等の情報を表示する表示手段３６８と、表示用の画像データを一時的に記憶しておくフレームメモリ３７１と、フレームメモリ３７１に記録されている表示用の画像データを読み出して表示手段３６８が表示するのに適した表示用の画像信号に変換して出力する表示制御手段３７２と、表示手段３６８に表示されているアイコンやスクロールバー等を利用者が指定したことを示す情報や利用者が入力した文字情報を読み取るタッチパネル３６９と、タッチパネル３６９を介して利用者が入力した情報を情報処理手段３８０に対して出力するタッチパネル制御手段３７０とが設けられている。
【００３９】
また、携帯端末３０には、利用者が電源スイッチ３０５その他の入力手段３７４を介して入力した各種情報を読み取って後述する情報処理手段３８０に伝達したり、情報処理手段３８０から取得した指示に基づいて電源のパイロットランプ（ＬＥＤ）等の通知手段に表示指令を出力するＩ／Ｏ３７５とが設けられている。
【００４０】
また、携帯端末３０には、記録媒体３７７を着脱可能に装着する記録媒体装着部３７８と、記録媒体３７７に対して画像データ等の各種情報を記録したり読み出したりする記録媒体インターフェース３７９とが設けられている。なお、記録媒体３７７は前記記録媒体１７７と同様の着脱可能な記録媒体である。
【００４１】
また、携帯端末３０には、携帯端末３０の全体の制御を行う情報処理手段（ＣＰＵ）３８０と、情報処理手段３８０を動作させるプログラムや各種定数が記録されているＲＯＭや情報処理手段３８０が処理を実行する際の作業領域となる記録手段であるＲＡＭとから構成されるメモリ３８１と、携帯端末３０の処理に関する各種定数や電子カメラ１０と情報の送受信を実施する際に用いる接続情報その他の情報を記録する不揮発性メモリ３８２と、時刻を刻むカレンダ時計３９０と、時刻を計数するタイマ３９０Ａと、当該携帯端末３０を動作させる電力を供給する電池３９１Ａと、情報処理手段３８０その他の周辺機器に供給する電力の制御を行う電源３９１とが設けられている。
【００４２】
同図に示すように携帯端末３０内の情報処理手段３８０と、Ｉ／Ｏ３７５、メモリ３８１、カレンダ時計３９０等を含む各周辺回路はバス３９９で接続されており、情報処理手段３８０は各々の周辺回路を制御することが可能であるとともに、情報処理手段３８０が実行する処理プログラムに基づいて周辺の各回路を制御することが可能となっている。
【００４３】
なお、前記無線通信手段は、電波、超音波、赤外線等の光を搬送波に用いた通信手段である。電波を用いる場合には、無線ＬＡＮ（ローカルエリアネットワーク）やＢｌｕｅｔｏｏｔｈ等の無線通信の仕様に基づいてもよい。
【００４４】
なお、上記の説明では画像受信機器を携帯端末３０とした実施の形態で説明したが、本発明は携帯端末３０に限定されるものではなく、他の通信機器から複数の代表静止画を受信する受信手段と、前記受信した動画再生に関連する複数の代表静止画を表示する表示手段と、利用者から動画再生の開始点又は終了点に関する情報を入力する入力手段と、前記入力した動画再生の開始点又は終了点に関する情報を他の通信機器に送信する送信手段とを備えた通信機器であれば、パソコン、携帯電話、電子カメラその他の通信機器であっても、本発明の目的を達成することが可能である。
【００４５】
上記のとおり構成された携帯端末３０における代表静止画像の受信処理について説明する。
【００４６】
携帯端末３０の表示手段３６８に表示されているメニューの中から、利用者が「代表静止画像受信」の項目をタップして選択すると、携帯端末３０の処理モードは代表静止画像受信モードに設定される。有線の通信手段を用いて電子カメラ１０と通信を開始する場合には、携帯端末３０は直ちに電子カメラ１０と直接通信を開始し、お互いの通信機器を認識したり、通信プロトコルを設定するなどの通信に関する初期化処理を行う。
【００４７】
なお、携帯端末３０と電子カメラ１０とが無線通信を実施する場合には、無線通信を実施する通信圏内には複数の無線通信機器が存在する可能性があるために、通信プロトコルを設定する処理を実施した後に、電子カメラ１０及び携帯端末３０の双方でお互いの通信相手を認識する処理と、お互いに通信相手を特定する処理を行う。
【００４８】
上記のようにして電子カメラ１０と携帯端末３０との間で通信接続が確立すると、携帯端末３０の情報処理手段３８０は、送受信手段３５７を介して電子カメラ１０に対して画像ファイルの一覧を要求する情報を送信する。
【００４９】
電子カメラ１０の情報処理手段１８０が送受信手段１５７を介して前記画像ファイル一覧の要求情報を受信すると、情報処理手段１８０は撮像手段１５０が撮像した画像データであってＲＡＭ１８４等の記録手段に記録されている動画像、若しくは送受信手段１５７を介して他の通信機器から取得した画像ファイルを特定する情報や、動画像を代表する縮小画像（サムネイル画像）を送受信手段１５７を介して携帯端末３０に送信する処理を行う。
【００５０】
また、電子カメラ１０の情報処理手段１８０が送受信手段１５７を介して前記画像ファイル一覧の要求情報を受信した際に、情報処理手段１８０が記録媒体１７７若しくは不揮発性メモリ１８２等の記録手段に記録されている画像ファイルの一覧（代表縮小画像を含むものであってもよい）を読み出して、送受信手段１５７を介して携帯端末３０に送信してもよい。
【００５１】
前記画像ファイルの一覧を、電子カメラ１０から送受信手段３５７を介して受信した携帯端末３０の情報処理手段３８０は、受信した画像ファイルの一覧を表示手段３６８に表示する処理を行う。
【００５２】
利用者は、携帯端末３０の表示手段３６８に表示されている画像ファイルの一覧を見ながら所望の動画像を選択し、その動画像選択情報を入力手段３７４又はタッチパネル３６９を介して入力する。その動画像選択情報は、送受信手段３５７を介して電子カメラ１０に送信され、情報処理手段１８０が受信する。前記動画像選択情報を情報処理手段１８０が受信すると、情報処理手段１８０（静止画生成手段）は、画像選択情報に記載されている動画像から複数の代表静止画を生成する処理を行う。
【００５３】
なお、画像選択情報に記載されている動画像が、撮像手段１５０が撮像を実施したことによって取得した動画像、又は送受信手段１５７を介して他の通信機器から取得した動画像であって、ＲＡＭ１８４等の記録手段に記録されている画像である場合には、ＲＡＭ１８４等の記録手段に記録されている動画像に対して、複数の代表静止画を生成し、該生成した代表静止画を圧縮伸張手段１６７に出力して、ＭｏｔｉｏｎＪＰＥＧ等の手法による圧縮処理を実施した後に、再びＲＡＭ１８４又は記録媒体１７７等の記録手段に記録する。
【００５４】
なお、画像選択情報に記載されている動画像が、記録媒体１７７又は不揮発性メモリ１８２等の記録手段に記録されている動画像である場合には、該記録手段に記録されている動画像を読み出してＲＡＭ１８４等の記録手段に伸張展開し、当該展開した動画像に対して複数の代表静止画を生成する処理を行う。該生成した代表静止画は圧縮伸張手段１６７に出力して、ＭｏｔｉｏｎＪＰＥＧ等の手法による圧縮処理を実施した後に、再びＲＡＭ１８４又は記録媒体１７７等の記録手段に記録する。
【００５５】
次に情報処理手段１８０は、前記ＲＡＭ１８４又は記録媒体１７７等の記録手段に記録した圧縮処理済みの代表静止画を、送信可能な画像ファイルの形式に変換した後に、送受信手段１５７（送信手段）を介して携帯端末３０に送信する処理を行う。
【００５６】
前記生成した動画再生に関連する代表静止画は、元の動画像の各フレームに対して、所定のフレーム毎、若しくは一定時間毎、又はシーンの切り換わり目毎にフレームを抽出する処理を行って得た静止画像の集合であり、動画像の情報量を時間軸方向に大幅に減少させた画像である。なお、必要に応じて元の動画像に対する生成した代表静止画の位置情報や時刻情報を、前記生成した代表静止画と関連付けて画像ファイルに記録するようにしてもよい。
【００５７】
例えば、フレームが連続している動画像から代表静止画をｎ枚生成した場合には、代表静止画番号が０、１、２、３、…、ｎ─１となるｎ枚の代表静止画が含まれている画像ファイルが携帯端末３０に送信される。
【００５８】
なお、前記動画再生に関連する複数の代表静止画が含まれる画像ファイルは情報処理手段１８０の指示に基づき、送受信手段１５７を介して携帯端末３０に送信される。前記複数の代表静止画の画像ファイルを、送受信手段３５７（受信手段）を介して受信した情報処理手段３８０は、受信した画像ファイルに含まれる複数の代表静止画を抽出して、所定の伸張処理を実施して表示用の画像データに変換した後に、ホワイトバランス処理等の画を粗処理を実施して、フレームメモリ３７１に出力する処理を行う。
【００５９】
表示制御手段３７２は、フレームメモリ３７１に記録されている表示用の画像データを読み出して、表示手段３６８が表示するのに適した表示用の画像信号に変換して出力し、表示手段には１乃至複数の代表静止画と、利用者から指示を入力するためのアイコン、ボタン、若しくはスクロールバーその他の情報が表示される。
【００６０】
図４に、表示手段３６８に表示される複数の代表静止画を示す。
【００６１】
同図に示すように表示手段３６８には、現在の処理モードが「転送位置決定」の処理モードであることを示すモード表示と、電子カメラ１０（画像送信機器）から受信した動画再生に関連する複数の代表静止画のうちの６枚の代表静止画と、代表静止画のスクロールを指示する早戻し、戻し、停止、送り、早送りの各種スクロールボタンと、受信した全ての代表静止画のうち、現在表示している位置とその移動を指示するスクロールバーと、後に電子カメラ１０から受信する部分動画再生の開始点を設定する開始点設定ボタン（入力手段の機能を有するボタン表示）と、受信する部分動画再生の終了点を指示する終了点ボタン（入力手段の機能を有するボタン表示）と、設定した部分動画の受信開始を指示する受信開始ボタンとが表示されている。同図に示す例では、６枚の代表静止画は、左上から右下にかけて時系列表示されている。
【００６２】
利用者は、スクロールボタンやスクロールバー等の入力手段を操作して所望の開始点と終了点を設定して、受信開始ボタンを選択する。すると、その利用者が選択した情報は、タッチパネル制御手段３７０又はＩ／Ｏ３７５を介して情報処理手段３８０が読み取る。そして、前記利用者が選択した部分動画再生の開始点又は終了点を特定するための情報（元の動画像に対する代表静止画の位置情報又は時刻情報、画像番号等であってもよい）を、送受信手段３５７（送信手段）を介して電子カメラ１０に送信する処理を行う。
【００６３】
例えば、ｎ＝５０枚の代表静止画を携帯端末３０が電子カメラ１０から受信した場合には、利用者はｎ＝０からｎ＝ｎ─１枚目までの５０枚の代表静止画の中から、部分動画再生の開始点ｎ１（０≦ｎ１≦ｎ─１）又は部分動画再生の終了点ｎ２（ｎ１≦ｎ２≦ｎ─１）を設定する。
【００６４】
携帯端末３０から送信された部分動画再生の開始点又は終了点に関する情報は、電子カメラ１０の情報処理手段１８０が送受信手段１５７（受信手段）を介して取得する。情報処理手段１８０が、送受信手段１５７（受信手段）を介して動画再生の開始点に関する情報を受信した場合には、前記取得した動画における動画再生の開始点以降の部分動画を送信可能に設定する。
【００６５】
また情報処理手段１８０が、送受信手段１５７（受信手段）を介して動画再生の終了点に関する情報を受信した場合には、前記取得した動画における動画再生の終了点以前の部分動画を送信可能に設定する。次に情報処理手段１８０は、前記送信可能に設定した部分動画を圧縮伸張手段１６７に出力して、ＭｏｔｉｏｎＪＰＥＧ等の所定の圧縮形式にて動画像を圧縮する。
【００６６】
圧縮伸張手段１６７にて所定の圧縮処理が終了すると、情報処理手段１８０は圧縮処理が終了した動画像を画像ファイルの形式に変換した後に、携帯端末３０に対して送信する指示を送受信手段１５７（送信手段）に対して出力する。送受信手段１５７（送信手段）は、情報処理手段１８０から取得した画像ファイルの画像データを携帯端末３０に送信する処理を行う。また前記圧縮処理が終了した動画像の画像ファイルを、記録媒体１７７又は不揮発性メモリ１８２等の記録手段に記録するようにしてもよい。
【００６７】
なお電子カメラ１０の情報処理手段１８０は、前記画像ファイルを携帯端末３０に対して送信終了した後に、記録媒体１７７、不揮発性メモリ１８２、又はＲＡＭ１８４等の記録手段に記録されている送信済みの画像ファイルを消去するようにしてもよい。一般に画像ファイルのファイルサイズは大きいので、送信済みの画像ファイルを消去することによって前記各記録手段の記録容量を他の用途に振り分けて、限られた記録容量を有効に利用することが可能となる。
【００６８】
前記画像データは、携帯端末３０の情報処理手段１８０が送受信手段３５７を介して受信し、メモリ３８１、記録媒体３７７又は不揮発性メモリ３８２等の記録手段に記録する処理を行う。画像データの記録が終了すると、次に情報処理手段３８０は、受信した画像ファイルに含まれる動画像を抽出して、所定の伸張処理を実施して表示用の画像データに変換した後に、ホワイトバランス処理等の画像処理を実施して、逐次フレームメモリ３７１に出力する処理を行う。
【００６９】
表示制御手段３７２は、フレームメモリ３７１に記録されている表示用の画像データを読み出して、表示手段３６８が表示するのに適した表示用の画像信号に変換して出力する。すると表示手段３６８には、利用者によって指定された動画像が、利用者によって設定された開始点から利用者によって設定された終了点まて再生表示される。
【００７０】
なお、図４に示した「転送位置決定」の処理モードにて、利用者が開始点を設定しなかった場合には、携帯端末３０が受信して表示する部分動画は元の動画像の最初から再生される。また、同様に利用者が終了点を設定しなかった場合には、携帯端末３０が受信して表示する部分動画は元の動画像の最後まで再生される。
【００７１】
なお、取得した動画から複数枚の代表静止画を生成する静止画生成手段（情報処理手段１８０）は、動画の連続する各フレーム毎の静止画に対して周波数除去、画像サイズの縮小、中心エリア切り抜き等の画像処理を実施することによって、画像データの情報量を削減するように構成してもよい。このように画像データの情報量を減少させることによって、代表静止画の枚数を増やすことが可能となるので、利用者が開始点又は終了点を設定する際の自由度を広くすることが可能となる。また、部分動画を受信する前に携帯端末３０が受信する代表静止画のデータ量を減らすことが可能となるので通信時間が減少し、画像送信機器並びに画像受信機器を含む画像送受信システム全体の処理レスポンスを向上させることが可能となる。
【００７２】
また、携帯端末３０の表示手段３６８に代表静止画を１枚ずつ順次表示するようにしてもよいが、上記の説明のように複数の代表静止画を１画面上に同時に表示したり、スクロールバー状に複数の代表静止画を時系列に一度に表示することによって、利用者は前後の画像データを認識することが容易となるとともに、全体の画像データを検索することが可能となる。したがって、利用者による部分動画の開始点又は終了点の設定作業が容易になる。
【００７３】
【発明の効果】
以上説明したように本発明に係る画像送信機器によれば、動画像を取得する取得手段と、前記取得した動画から複数の代表静止画を生成する静止画生成手段と、他の通信機器から動画再生の開始点又は終了点に関する情報を受信する受信手段と、前記受信手段を介して動画再生の開始点に関する情報を受信した場合には、前記取得した動画における動画再生の開始点以降の部分動画を送信可能に設定する情報処理手段、又は、前記受信手段を介して動画再生の終了点に関する情報を受信した場合には、前記取得した動画における動画再生の終了点以前の部分動画を送信可能に設定する情報処理手段と、前記生成した代表静止画及び前記送信可能に設定した部分動画を他の通信機器に送信する送信手段とを備えたので、利用者からの指示に基づいて不必要な動画の部分を排除して必要な動画のみを画像受信機器に転送するので、動画の送信時間の短縮を図るとともに、画像受信機器における画像記録のための記録容量を節約することが可能となる。
【００７４】
また本発明に係る画像受信機器によれば、他の通信機器から動画再生に関連する複数の代表静止画を受信する受信手段と、前記受信した動画再生に関連する複数の代表静止画を表示する表示手段と、利用者から動画再生の開始点又は終了点に関する情報を入力する入力手段と、前記入力手段を介して入力した動画再生の開始点又は終了点に関する情報を他の通信機器に送信する送信手段とを備えたので、画像送信機器に対して動画の必要な部分を指定することが可能となり、不必要な動画の部分を排除した必要な動画のみを画像送信機器から受信できるので、動画の送信時間の短縮を図るとともに、画像受信機器における画像記録のための記録容量を節約することが可能となる。
【００７５】
また本発明に係る画像受信機器によれば、画像受信機器の表示手段は、受信した動画再生に関する複数の代表静止画を１画像毎に順次表示するか、又は、前記複数の代表静止画を一画面上に複数時系列表示するようにしたので、利用者は動画の中から必要な部分を容易に選び出す設定を行うことが可能となる。
【００７６】
また、本発明に係る画像送信機器並びに画像受信機器によれば、部分動画を取得する利用者は、元の動画像全体に含まれるシーンのレイアウトを、画像ファイル転送前に容易に把握することが可能となる。また利用者は、表示手段に表示されている代表静止画の中から必要な部分又は範囲を設定することによって、通信を介して必要な部分動画のみを取得することが可能となり、画像データの転送に必要な時間の短縮や、画像受信機器側における画像の記録容量を節約することが可能となる。
【００７７】
特に、元の動画像の画像サイズが大きい場合や、動画のフレームレートが高い場合などのように、画像ファイルのファイルサイズが大きく、動画像の転送処理に多くの時間を要する場合には、本発明による効果が大きい。
【図面の簡単な説明】
【図１】本発明に係る画像送受信システムの構成例を示す図
【図２】画像送信機器の一形態である電子カメラの信号処理系ブロック図
【図３】画像受信機器の一形態である携帯端末の信号処理系ブロック図
【図４】携帯端末の表示手段に表示される複数の代表静止画を示す図
【符号の説明】
１０…電子カメラ、３０…携帯端末、１５０…撮像手段、１５３…画像処理手段、１５４…Ａ／Ｄ変換器、１５６…アンテナ、１５７…送受信手段、１６２…通信コネクタ、１６７…圧縮伸張手段、１６８…表示手段、１６９…ＯＳＤ、１７０…信号処理手段、１７１…フレームメモリ、１７２…Ｄ／Ａ変換器、１７４…入力手段、１７５…Ｉ／Ｏ、１７７…記録媒体、１７８…記録媒体装着部、１７９…記録媒体インターフェース、１８０…情報処理手段、１８２…不揮発性メモリ、１８４…ＲＡＭ、１９０…カレンダ時計、１９１…電源、１９３…発光手段、１９４…発光制御手段、１９９…バス、３０５…電源スイッチ、３５６…アンテナ、３５７…送受信手段、３６２…通信コネクタ、３６８…表示手段、３６９…タッチパネル、３７０…タッチパネル制御手段、３７１…フレームメモリ、３７２…表示制御手段、３７４…入力手段、３７５…Ｉ／Ｏ、３７７…記録媒体、３７８…記録媒体装着部、３７９…記録媒体インターフェース、３８０…情報処理手段、３８１…メモリ、３８２…不揮発性メモリ、３９０…カレンダ時計、３９０Ａ…タイマ、３９９…バス[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image transmission device and an image reception device, and in particular, an image transmission device that transmits a part of an acquired moving image to an image reception device, and an image reception that specifies a desired partial moving image for the image transmission device. Regarding equipment.
[0002]
[Prior art]
Japanese Patent Application Laid-Open No. 9-247469 discloses an image reproducing apparatus having a still image generating means for generating a still image at predetermined intervals from a moving image recorded on a recording medium.
[0003]
[Problems to be solved by the invention]
However, in the image reproducing apparatus disclosed in Japanese Patent Laid-Open No. 9-247596, a moving image file is scanned once during image reproduction, a still image is created and displayed on a multi-screen, and the user selects a multi-screen. Video playback has started from the selected location. In this way, in order to create a still image during movie playback, if the movie file to be played is on a device different from the playback device or on the Internet, the movie file is received once and then scanned to create a still image. It has to be created, causing a problem that the operation response is deteriorated.
[0004]
The present invention has been made in view of such circumstances, and eliminates unnecessary moving image portions based on instructions from the user and transfers only necessary moving images to the image receiving device. An object of the present invention is to provide an image transmitting device and an image receiving device capable of shortening the transmission time and saving the recording capacity for image recording in the image receiving device.
[0005]
It is another object of the present invention to provide an image receiving device that allows a user to easily select a necessary part from a moving image.
[0006]
[Means for Solving the Problems]
In order to achieve the above object, the present invention provides an image transmission device that transmits a part of an acquired moving image to another communication device, an acquisition unit that acquires the moving image, and a plurality of representative still images from the acquired moving image. A still image generating means for generating a picture, a receiving means for receiving information on the start or end point of moving picture reproduction from another communication device, and information on the starting point of moving picture reproduction via the receiving means. The information processing means for setting the transmission of the partial video after the start point of the video playback in the acquired video, or the information on the end point of the video playback is received via the reception unit, the acquisition Information processing means for enabling transmission of a partial moving image before the end point of moving image reproduction in the selected moving image, and transmitting the generated representative still image and the partial moving image set to be transmittable to another communication device It is characterized in that a transmission means that.
[0007]
According to the present invention, the acquisition means for acquiring a moving image, the still image generation means for generating a plurality of representative still images from the acquired moving image, and information on the start point or end point of moving image playback from another communication device. A receiving means for receiving, and an information processing means for setting to transmit a partial moving picture after the starting point of moving picture reproduction in the acquired moving picture when receiving information on the starting point of moving picture reproduction via the receiving means; Alternatively, when information on the end point of the video playback is received via the receiving unit, the information processing unit that sets the partial video before the video playback end point in the acquired video to be transmittable, and the generated Since it includes a transmission means for transmitting the representative still image and the partial video set to be transmittable to other communication devices, it is necessary to eliminate unnecessary video portions based on instructions from the user. Since transferring videos only image receiving device, with shortened video transmission time, it is possible to save the recording capacity for image recording in the image receiving device.
[0008]
According to another aspect of the present invention, there is provided an image receiving device for designating a desired partial moving image to another communication device, wherein the moving image is reproduced from the other communication device. A receiving unit that receives a plurality of representative still images related to the display unit, a display unit that displays a plurality of representative still images related to the received moving image reproduction, and information regarding a start point or an end point of the moving image reproduction is input from the user. It is characterized by comprising an input means and a transmission means for transmitting information relating to the start point or end point of the moving image reproduction input via the input means to another communication device.
[0009]
According to the present invention, receiving means for receiving a plurality of representative still images related to moving image reproduction from another communication device, display means for displaying the plurality of representative still images related to the received moving image reproduction, and a user Input means for inputting information related to the start point or end point of the video playback from, and a transmission means for transmitting information related to the start point or end point of the video playback input via the input means to another communication device. Therefore, it is possible to specify the necessary part of the video for the image transmission device, and only the necessary video that excludes the unnecessary video part can be received from the image transmission device, so the transmission time of the video can be shortened. In addition, the recording capacity for image recording in the image receiving device can be saved.
[0010]
In the present invention, a plurality of representative still images related to the received moving image playback are sequentially displayed on the display unit of the image receiving device, or the plurality of representative still images are displayed on a single screen in a time series. It is characterized by doing.
[0011]
According to the present invention, the display unit of the image receiving device sequentially displays a plurality of representative still images related to the received moving image reproduction for each image, or a plurality of time series of the plurality of representative still images on one screen. Since it is displayed, the user can make a setting for easily selecting a necessary part from the moving image.
[0012]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, preferred embodiments of an image transmitting device and an image receiving device according to the present invention will be described in detail with reference to the accompanying drawings.
[0013]
FIG. 1 is a diagram illustrating a configuration example of an image transmission / reception system including an image transmission device and an image reception device according to the present invention.
[0014]
As shown in the figure, the image transmission / reception system acquires an image, and transmits an electronic camera 10 (image) that transmits a partial moving image that is a part of the acquired moving image to another communication device such as the mobile terminal 30 (image receiving device). Transmitting device) and a portable terminal 30 such as a PDA that transmits information specifying a range of a desired partial moving image to other communication devices such as the electronic camera 10.
[0015]
In the example shown in the figure, a moving image captured by the electronic camera 10 is transmitted to the portable terminal 30 via a wired or wireless communication unit, and the transmitted moving image is displayed on the display unit 368 of the portable terminal 30. Or can be recorded in a recording means provided in the portable terminal 30.
[0016]
Further, as shown in the figure, the mobile terminal 30 displays a moving image, character information, and the like, and at the same time, the display means 368 configured by a touch panel on which the user inputs information, and the processing functions of the mobile terminal 30 are in an operating state. A so-called power switch 305 for switching to a non-operating state and a pilot lamp for a power source for notifying the user that the mobile terminal 30 is in an operating state are provided.
[0017]
The user can view images such as images displayed on the display unit 368, a list of images, or a plurality of representative still images (a collection of still images generated by reducing the amount of information from moving images). It has become. Further, the user instructs (tap) the icon button or menu item displayed on the display unit 368 with the attached touch pen to instruct processing of the mobile terminal 30 or is assigned to the character input area of the display unit 368. It is possible to input commands and characters using the existing character input recognition means.
[0018]
FIG. 2 shows a block diagram of a signal processing system of the electronic camera 10 which is an embodiment of the image transmission device according to the present invention.
[0019]
As shown in the figure, the imaging processing unit of the electronic camera 10 includes an imaging unit 150 that photoelectrically converts a subject image formed on the light receiving surface and outputs it as an image signal (including a function of an acquisition unit that acquires a moving image). The image processing means 153 for analog signals and an A / D converter 154 for converting the analog image signal into digital image data are provided.
[0020]
In addition, as communication means for transmitting / receiving information such as image data to / from other communication devices such as a personal computer or a portable terminal 30, an antenna 156 that transmits information such as image data using wireless communication means, image data, etc. A communication unit 157 (which may include functions of a transmission unit, a reception unit, and an acquisition unit) and a communication cable that transmits information such as image data are transmitted and received on a carrier wave. A connector 162 is provided.
[0021]
Further, the electronic camera 10 includes a compression / expansion unit 167 that performs compression processing and expansion processing on image data and the like, an OSD 169 that displays various characters on the display unit 168 together with an image, and image data Signal processing means 170 that performs white balance processing, gamma conversion, YC conversion processing, pixel number conversion processing, electronic zoom processing, trimming processing, and the like, and display image data are temporarily stored. A frame memory 171 and a D / A converter 172 for converting digital image data into a composite signal for display and the like are provided.
[0022]
In addition, the electronic camera 10 can be detachably attached with an input unit 174 including a power switch, a release button, and the like, an I / O 175 serving as an interface for input information input via the input unit 174, and a recording medium 177. A recording medium mounting unit 178 to be mounted, and a recording medium interface 179 for recording and reading information such as image data on the recording medium 177 (may include a function of an acquisition unit for acquiring a moving image) And are provided.
[0023]
The electronic camera 10 includes an information processing unit 180 (acquiring unit for acquiring a moving image from a recording unit such as a nonvolatile memory) that controls the entire electronic camera 10 and performs various processes such as image processing and communication processing. A non-volatile memory 182 capable of rewriting information and storing various adjustment constants, an operation program of the electronic camera 10, and the like, a work area at the time of program execution, and the like. And a RAM 184 serving as recording means.
[0024]
The electronic camera 10 also includes a calendar clock 190 that keeps time, a power source 191 that supplies various powers for driving the electronic camera 10, and a battery 191A. Means 193 and light emission control means 194 for adjusting the light emission timing of the light emission means 193 and the like are provided.
[0025]
As shown in the figure, the information processing means 180 of the electronic camera 10 and its peripheral circuits are connected by a bus 199, and can transmit information to each other at a high speed. Each peripheral circuit can be controlled based on the processing program.
[0026]
The recording medium 177 is a recording medium such as an optical recording type, a semiconductor recording type using an EEPROM or the like, or a magnetic recording type such as a floppy disk or a hard disk.
[0027]
In the above description, the image transmission apparatus is described as an electronic camera including an imaging unit. However, the present invention is not limited to this, and a moving image is acquired from a recording medium 177. As long as it is a communication device that transmits a part of the acquired moving image to another communication device, it may be a personal computer, a mobile phone, a PDA (Personal Data Assistance), a server on the network, or other communication device. Can be achieved.
[0028]
An imaging process of the electronic camera 10 configured as described above will be described.
[0029]
The image of the subject to be imaged is formed on the light receiving surface of the image pickup means 150 by the image pickup lens, and the formed subject image is photoelectrically converted and output to the image processing means 153. The image processing unit 153 performs image processing such as correlated double sampling, amplification, and noise reduction processing on the image signal, and converts the image signal into digital data by the A / D converter 154.
[0030]
The image data converted into the digital data is transferred to the signal processing means 170 in response to an instruction from the information processing means 180, and subjected to image processing such as image white balance, gamma correction, YC conversion, zoom processing, and pixel number conversion processing. After that, it is temporarily stored in a frame memory 171 such as a VRAM.
[0031]
The information processing unit 180 displays the image data stored in the frame memory 171 on the display unit 168 together with information such as characters generated from the OSD 169 by sequentially instructing the D / A converter 172 to transmit the image data. Is possible.
[0032]
When the user presses a release button for an imaging instruction provided in the input unit 174, the information processing unit 180 enters a mode for imaging a subject. Then, the information processing means 180 records the image data converted into digital data by the A / D converter 154 in the RAM 184 for a time.
[0033]
When an image is recorded on the recording medium 177, the image stored in the RAM 184 is sequentially read out and transferred to the signal processing means 170, and the image white balance, gamma correction, YC conversion, zoom processing, pixel number conversion are performed. After image processing such as processing is performed, gradation conversion of each color, image size conversion processing, and the like are performed, and then the data is transferred to the compression / expansion unit 167 to perform image compression processing.
[0034]
The image data compressed by the compression / decompression unit 167 under a predetermined condition is temporarily stored again in the FILE work area of the RAM 184 once based on an instruction from the information processing unit 180, and then the image file for recording is stored. After being converted into the format, it is output to the recording medium interface 179 and sequentially recorded on the recording medium 177. When the image file is recorded on the recording medium 177 as described above, the compression / expansion processing of each frame by the compression / expansion unit 167 and the recording process of the image file on the recording medium 177 are performed in parallel with the imaging process. .
[0035]
In the embodiment described below, an embodiment in which a representative still image (details of the representative still image will be described later) is generated when a request for “representative still image reception” is received from the mobile terminal 30 is shown. However, when the image file captured as described above is recorded, the information processing unit 180 (still image generation unit) performs a process of generating a plurality of representative still images from the captured moving image, and the original moving image And may be recorded on the recording medium 177. When the representative still image is generated and recorded when the image file is recorded as described above, the process of creating the representative still image by the electronic camera 10 in the subsequent process can be omitted. When setting the range of a moving image (details of the partial moving image will be described later), it is possible to improve the operation response until the transfer of the partial moving image starts and improve the operability.
[0036]
FIG. 3 shows a block diagram of a signal processing system of the portable terminal 30 which is an embodiment of the image receiving device according to the present invention.
[0037]
As shown in the figure, the information transmission / reception unit of the portable terminal 30 has an antenna 356 that performs wireless communication with a communication device such as the electronic camera 10 or a wireless communication base station, and a predetermined format for wirelessly transmitting / receiving information. A transmission / reception unit 357 (transmission unit, reception unit) for converting data, and a communication connector 362 for performing wired communication with a communication device such as a server provided on the electronic camera 10 or a network are provided.
[0038]
Further, the portable terminal 30 includes a display unit 368 for displaying information such as images and characters, a frame memory 371 for temporarily storing image data for display, and a display for recording recorded in the frame memory 371. The display control means 372 for reading out the image data, converting the image data into a display image signal suitable for display by the display means 368, and the output, and the icon and scroll bar displayed on the display means 368 by the user. A touch panel 369 that reads information indicating designation and character information input by the user, and a touch panel control unit 370 that outputs information input by the user via the touch panel 369 to the information processing unit 380 are provided. Yes.
[0039]
Further, the mobile terminal 30 reads various information input by the user via the power switch 305 and other input means 374 and transmits the information to the information processing means 380 described later, or based on an instruction acquired from the information processing means 380. And an I / O 375 for outputting a display command to a notification means such as a pilot lamp (LED) of the power source.
[0040]
Further, the portable terminal 30 is provided with a recording medium mounting unit 378 that detachably mounts the recording medium 377 and a recording medium interface 379 that records and reads various information such as image data on the recording medium 377. It has been. The recording medium 377 is a detachable recording medium similar to the recording medium 177.
[0041]
Further, the mobile terminal 30 is processed by an information processing means (CPU) 380 that controls the entire mobile terminal 30, a ROM that stores a program for operating the information processing means 380 and various constants, and an information processing means 380. , A memory 381 composed of a RAM serving as a recording means serving as a work area when executing the operation, various constants relating to processing of the mobile terminal 30, connection information used when performing transmission / reception of information with the electronic camera 10, and other information A non-volatile memory 382 that records time, a calendar clock 390 that keeps time, a timer 390A that counts time, a battery 391A that supplies power for operating the mobile terminal 30, and an information processing means 380 that are supplied to other peripheral devices And a power source 391 for controlling the power to be transmitted.
[0042]
As shown in the figure, the information processing means 380 in the portable terminal 30 and each peripheral circuit including the I / O 375, the memory 381, the calendar clock 390, etc. are connected by a bus 399, and the information processing means 380 It is possible to control the circuits and to control each peripheral circuit based on a processing program executed by the information processing means 380.
[0043]
The wireless communication means is communication means that uses light such as radio waves, ultrasonic waves, and infrared rays as a carrier wave. When radio waves are used, it may be based on wireless communication specifications such as a wireless LAN (local area network) and Bluetooth.
[0044]
In the above description, the embodiment has been described in which the image receiving device is the mobile terminal 30, but the present invention is not limited to the mobile terminal 30, and receives a plurality of representative still images from other communication devices. Receiving means; display means for displaying a plurality of representative still images related to the received moving picture reproduction; input means for inputting information on a starting point or an ending point of moving picture reproduction from a user; If the communication device includes a transmission unit that transmits information about the start point or the end point to another communication device, the object of the present invention can be achieved even with a communication device such as a personal computer, a mobile phone, an electronic camera, or the like. It is possible.
[0045]
A process of receiving a representative still image in the mobile terminal 30 configured as described above will be described.
[0046]
When the user taps and selects the item “Representative still image reception” from the menu displayed on the display means 368 of the portable terminal 30, the processing mode of the portable terminal 30 is set to the representative still image reception mode. The When communication with the electronic camera 10 is started using a wired communication means, the mobile terminal 30 immediately starts direct communication with the electronic camera 10 to recognize each other's communication device, set a communication protocol, etc. Performs initialization processing related to communication.
[0047]
When the mobile terminal 30 and the electronic camera 10 perform wireless communication, there is a possibility that a plurality of wireless communication devices exist in the communication area where the wireless communication is performed. After performing the above, processing for recognizing each other's communication partner and processing for specifying each other's communication partner are performed by both the electronic camera 10 and the portable terminal 30.
[0048]
When a communication connection is established between the electronic camera 10 and the mobile terminal 30 as described above, the information processing means 380 of the mobile terminal 30 requests a list of image files from the electronic camera 10 via the transmission / reception means 357. To send information.
[0049]
When the information processing unit 180 of the electronic camera 10 receives the request information of the image file list via the transmission / reception unit 157, the information processing unit 180 is image data captured by the imaging unit 150 and is recorded in a recording unit such as the RAM 184. The moving image or the information specifying the image file acquired from another communication device via the transmission / reception unit 157 or the reduced image (thumbnail image) representing the moving image is transmitted to the portable terminal 30 via the transmission / reception unit 157. Perform the process.
[0050]
Further, when the information processing unit 180 of the electronic camera 10 receives the request information of the image file list via the transmission / reception unit 157, the information processing unit 180 is recorded in the recording unit such as the recording medium 177 or the nonvolatile memory 182. A list of image files (which may include representative reduced images) may be read out and transmitted to the mobile terminal 30 via the transmission / reception means 157.
[0051]
The information processing unit 380 of the mobile terminal 30 that has received the list of image files from the electronic camera 10 via the transmission / reception unit 357 performs processing for displaying the received list of image files on the display unit 368.
[0052]
The user selects a desired moving image while viewing a list of image files displayed on the display unit 368 of the mobile terminal 30 and inputs the moving image selection information via the input unit 374 or the touch panel 369. The moving image selection information is transmitted to the electronic camera 10 via the transmission / reception unit 357 and received by the information processing unit 180. When the information processing unit 180 receives the moving image selection information, the information processing unit 180 (still image generation unit) performs a process of generating a plurality of representative still images from the moving image described in the image selection information.
[0053]
Note that the moving image described in the image selection information is a moving image acquired by the imaging unit 150 performing imaging or a moving image acquired from another communication device via the transmission / reception unit 157, and the RAM 184. In the case of an image recorded in a recording means such as RAM, a plurality of representative still images are generated for the moving image recorded in the recording means such as the RAM 184, and the generated representative still images are compressed and expanded. The data is output to the means 167 and subjected to compression processing by a technique such as Motion JPEG, and then recorded again on the recording means such as the RAM 184 or the recording medium 177.
[0054]
When the moving image described in the image selection information is a moving image recorded in a recording unit such as the recording medium 177 or the non-volatile memory 182, the moving image recorded in the recording unit is selected. The data is read out and decompressed and expanded on a recording means such as the RAM 184, and processing for generating a plurality of representative still images is performed on the expanded moving image. The generated representative still image is output to the compression / expansion means 167, and after being subjected to compression processing by a technique such as Motion JPEG, it is recorded again in the recording means such as the RAM 184 or the recording medium 177.
[0055]
Next, the information processing means 180 converts the compressed representative still image recorded in the recording means such as the RAM 184 or the recording medium 177 into a transmittable image file format, and then sends the transmission / reception means 157 (transmission means). The process which transmits to the portable terminal 30 via is performed.
[0056]
The representative still image related to the generated moving image reproduction is subjected to a process of extracting a frame at every predetermined frame, every predetermined time, or every scene change with respect to each frame of the original moving image. It is a set of obtained still images, and is an image in which the information amount of moving images is greatly reduced in the time axis direction. If necessary, the position information and time information of the generated representative still image with respect to the original moving image may be recorded in an image file in association with the generated representative still image.
[0057]
For example, when n representative still images are generated from a moving image having continuous frames, n representative still images having representative still image numbers 0, 1, 2, 3,. The included image file is transmitted to the mobile terminal 30.
[0058]
Note that an image file including a plurality of representative still images related to the moving image reproduction is transmitted to the portable terminal 30 via the transmission / reception unit 157 based on an instruction from the information processing unit 180. The information processing unit 380 that has received the image files of the plurality of representative still images via the transmission / reception unit 357 (receiving unit) extracts a plurality of representative still images included in the received image file, and performs a predetermined decompression process. Are converted into image data for display, and then a rough process is performed on an image such as a white balance process, and a process of outputting to the frame memory 371 is performed.
[0059]
The display control means 372 reads the display image data recorded in the frame memory 371, converts it into a display image signal suitable for display by the display means 368, and outputs it. A plurality of representative still images and icons, buttons, scroll bars, and other information for inputting instructions from the user are displayed.
[0060]
FIG. 4 shows a plurality of representative still images displayed on the display means 368.
[0061]
As shown in the figure, the display means 368 relates to a mode display indicating that the current processing mode is the “transfer position determination” processing mode and the reproduction of a moving image received from the electronic camera 10 (image transmission device). Among the representative still images of six representative still images, various scroll buttons for fast reverse, reverse, stop, forward, fast forward to instruct scroll of the representative still images, and all received representative still images, A current display position, a scroll bar for instructing movement thereof, a start point setting button (button display having a function of input means) for setting a start point of partial video playback received later from the electronic camera 10, and reception An end point button for indicating the end point of the partial video playback (button display having a function of an input means) and a reception start button for instructing start of reception of the set partial video are displayed. That. In the example shown in the figure, six representative still images are displayed in time series from the upper left to the lower right.
[0062]
The user operates input means such as a scroll button and a scroll bar to set a desired start point and end point, and selects a reception start button. Then, the information selected by the user is read by the information processing means 380 via the touch panel control means 370 or the I / O 375. And information for specifying the start point or end point of the partial video playback selected by the user (may be position information or time information of the representative still image with respect to the original moving image, image number, etc.) A process of transmitting to the electronic camera 10 via the transmission / reception unit 357 (transmission unit) is performed.
[0063]
For example, when the mobile terminal 30 receives n = 50 representative still images from the electronic camera 10, the user can select from 50 representative still images from n = 0 to n = n−1. The partial video playback start point n1 (0 ≦ n1 ≦ n−1) or the partial video playback end point n2 (n1 ≦ n2 ≦ n−1) is set.
[0064]
Information regarding the start point or end point of the partial video playback transmitted from the mobile terminal 30 is acquired by the information processing unit 180 of the electronic camera 10 via the transmission / reception unit 157 (reception unit). When the information processing unit 180 receives the information on the starting point of the moving image reproduction via the transmission / reception unit 157 (receiving unit), the partial moving image after the starting point of the moving image reproduction in the acquired moving image is set to be transmittable. .
[0065]
In addition, when the information processing unit 180 receives information about the end point of the video playback via the transmission / reception unit 157 (reception unit), the partial video before the video playback end point in the acquired video is set to be transmittable. To do. Next, the information processing unit 180 outputs the partial moving image set to be transmittable to the compression / decompression unit 167 and compresses the moving image in a predetermined compression format such as Motion JPEG.
[0066]
When a predetermined compression process is completed by the compression / decompression unit 167, the information processing unit 180 converts the moving image for which the compression process has been completed into an image file format, and then transmits / receives an instruction to transmit to the portable terminal 30 (transmission / reception unit 157 ( Output to the transmission means). The transmission / reception unit 157 (transmission unit) performs processing for transmitting the image data of the image file acquired from the information processing unit 180 to the portable terminal 30. The image file of the moving image after the compression processing may be recorded in a recording unit such as the recording medium 177 or the nonvolatile memory 182.
[0067]
Note that the information processing unit 180 of the electronic camera 10 has already transmitted the image file recorded in the recording unit such as the recording medium 177, the nonvolatile memory 182, or the RAM 184 after completing the transmission of the image file to the portable terminal 30. The file may be deleted. Generally, since the file size of an image file is large, it becomes possible to effectively use the limited recording capacity by allocating the recording capacity of each recording means to other purposes by deleting the transmitted image file. .
[0068]
The image data is received by the information processing means 180 of the portable terminal 30 via the transmission / reception means 357, and is recorded in the recording means such as the memory 381, the recording medium 377, or the nonvolatile memory 382. When the recording of the image data is completed, the information processing means 380 extracts a moving image included in the received image file, performs a predetermined expansion process and converts it into image data for display, and then performs white balance. Image processing such as processing is performed, and processing to sequentially output to the frame memory 371 is performed.
[0069]
The display control means 372 reads the display image data recorded in the frame memory 371, converts it into a display image signal suitable for display by the display means 368, and outputs it. Then, the moving image designated by the user is reproduced and displayed on the display means 368 from the start point set by the user to the end point set by the user.
[0070]
In the “transfer position determination” processing mode shown in FIG. 4, if the user does not set the start point, the partial video received and displayed by the mobile terminal 30 is the first of the original moving images. Played from. Similarly, when the user does not set the end point, the partial moving image received and displayed by the mobile terminal 30 is reproduced to the end of the original moving image.
[0071]
The still image generating means (information processing means 180) that generates a plurality of representative still images from the acquired moving image removes the frequency, reduces the image size, and reduces the central area for each still frame of the moving image. It may be configured to reduce the amount of image data information by performing image processing such as clipping. Since the number of representative still images can be increased by reducing the information amount of the image data in this way, it is possible to increase the degree of freedom when the user sets the start point or end point. Become. In addition, since it is possible to reduce the data amount of the representative still image received by the mobile terminal 30 before receiving the partial moving image, the communication time is reduced, and the entire image transmission / reception system including the image transmission device and the image reception device is processed. It becomes possible to improve the response.
[0072]
In addition, the representative still images may be sequentially displayed one by one on the display unit 368 of the mobile terminal 30, but a plurality of representative still images may be displayed simultaneously on one screen as described above, or a scroll bar By displaying a plurality of representative still images in a time series at once, the user can easily recognize the previous and next image data and can search the entire image data. Accordingly, the user can easily set the start point or end point of the partial moving image.
[0073]
【The invention's effect】
As described above, according to the image transmission device of the present invention, the acquisition unit that acquires a moving image, the still image generation unit that generates a plurality of representative still images from the acquired moving image, and the moving image from another communication device Receiving means for receiving information related to the starting point or ending point of reproduction, and when receiving information relating to the starting point of moving image reproduction via the receiving means, a partial moving image after the starting point of moving image reproduction in the acquired moving image When the information about the video playback end point is received via the information processing means or the receiving means, the partial video before the video playback end point in the acquired video can be transmitted. Since the information processing means for setting and the transmission means for transmitting the generated representative still image and the partial moving image set to be transmittable to other communication devices are provided, based on an instruction from the user This eliminates unnecessary video parts and transfers only the necessary video to the image receiving device, thus reducing the video transmission time and saving the recording capacity for image recording in the image receiving device. It becomes possible.
[0074]
According to the image receiving device of the present invention, receiving means for receiving a plurality of representative still images related to moving image reproduction from another communication device, and displaying the plurality of representative still images related to the received moving image reproduction. Display means, input means for inputting information about the start point or end point of video playback from the user, and information about the start point or end point of video playback input via the input means are transmitted to other communication devices. Since it has a transmission means, it is possible to specify the necessary part of the video to the image transmission device, and only the necessary video that excludes the unnecessary video part can be received from the image transmission device. It is possible to reduce the transmission time of the image and save the recording capacity for image recording in the image receiving device.
[0075]
Further, according to the image receiving device of the present invention, the display means of the image receiving device sequentially displays the plurality of representative still images related to the received moving image reproduction for each image, or displays the plurality of representative still images one by one. Since a plurality of time series are displayed on the screen, the user can make a setting for easily selecting a necessary part from the moving image.
[0076]
Further, according to the image transmitting device and the image receiving device according to the present invention, the user who acquires the partial moving image can easily grasp the layout of the scene included in the entire original moving image before transferring the image file. It becomes possible. In addition, the user can acquire only the necessary partial video via communication by setting the necessary part or range from the representative still image displayed on the display means, and transfer of image data It is possible to shorten the time required for the image processing and to save the image recording capacity on the image receiving device side.
[0077]
This is especially true if the file size of the image file is large and a large amount of time is required to transfer the moving image, such as when the original moving image has a large image size or when the video frame rate is high. The effect of the invention is great.
[Brief description of the drawings]
FIG. 1 is a diagram showing a configuration example of an image transmission / reception system according to the present invention.
FIG. 2 is a block diagram of a signal processing system of an electronic camera which is an embodiment of an image transmission device.
FIG. 3 is a block diagram of a signal processing system of a mobile terminal which is one form of an image receiving device.
FIG. 4 is a diagram showing a plurality of representative still images displayed on the display unit of the mobile terminal.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 10 ... Electronic camera, 30 ... Portable terminal, 150 ... Imaging means, 153 ... Image processing means, 154 ... A / D converter, 156 ... Antenna, 157 ... Transmission / reception means, 162 ... Communication connector, 167 ... Compression / decompression means, 168 ... display means, 169 ... OSD, 170 ... signal processing means, 171 ... frame memory, 172 ... D / A converter, 174 ... input means, 175 ... I / O, 177 ... recording medium, 178 ... recording medium mounting section, 179 ... Recording medium interface, 180 ... Information processing means, 182 ... Non-volatile memory, 184 ... RAM, 190 ... Calendar clock, 191 ... Power supply, 193 ... Light emission means, 194 ... Light emission control means, 199 ... Bus, 305 ... Power switch 356... Antenna 357. Transmission / reception means 362 Communication connector 368 Display means 369 Touch panel 3 DESCRIPTION OF SYMBOLS 0 ... Touch panel control means, 371 ... Frame memory, 372 ... Display control means, 374 ... Input means, 375 ... I / O, 377 ... Recording medium, 378 ... Recording medium mounting part, 379 ... Recording medium interface, 380 ... Information processing Means 381 ... Memory, 382 ... Non-volatile memory, 390 ... Calendar clock, 390A ... Timer, 399 ... Bus

Claims

An image transmission device that transmits a part of the acquired moving image to another communication device,
An acquisition means for acquiring a moving image;
A still image generating means for generating a plurality of representative still images from the acquired moving image;
Receiving means for receiving information on the start point or end point of video playback from another communication device;
When information about the starting point of the video playback is received via the receiving means,
Information processing means for enabling transmission of a partial video after the start point of video playback in the acquired video, or
When information about the end point of the video playback is received via the receiving means,
Information processing means for setting the partial video before the end point of video playback in the acquired video to be transmittable,
Transmitting means for transmitting the generated representative still image and the partial moving image set to be transmittable to another communication device;
An image transmission device comprising:

An image receiving device that designates a desired partial video for another communication device,
Receiving means for receiving a plurality of representative still images related to video reproduction from other communication devices;
Display means for displaying a plurality of representative still images related to the received video reproduction;
An input means for inputting information on the start or end point of the video playback from the user;
Transmitting means for transmitting information relating to the start point or end point of the video playback input via the input means to another communication device;
An image receiving device comprising:

The display means is a display means for sequentially displaying a plurality of representative still images related to the received moving image reproduction for each image, or a display means for displaying the plurality of representative still images on a single screen in a time series. The image receiving apparatus according to claim 2, wherein the apparatus is an image receiving apparatus.