JP2009266215A - Image processor, image processing method, and program - Google Patents
Image processor, image processing method, and program Download PDFInfo
- Publication number
- JP2009266215A JP2009266215A JP2009082179A JP2009082179A JP2009266215A JP 2009266215 A JP2009266215 A JP 2009266215A JP 2009082179 A JP2009082179 A JP 2009082179A JP 2009082179 A JP2009082179 A JP 2009082179A JP 2009266215 A JP2009266215 A JP 2009266215A
- Authority
- JP
- Japan
- Prior art keywords
- data
- scenario
- edit
- image processing
- processing apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
Description
本発明は、ユーザによって取得された画像データを含む素材データを加工して、品質の高い編集データを生成する技術に関する。 The present invention relates to a technique for processing high-quality editing data by processing material data including image data acquired by a user.
昨今、カメラ付きの携帯電話やデジタルスチルカメラが広く普及し、一般的なユーザが手軽にデジタル画像データを楽しむようになってきた。そして、これらの画像データを単にディスプレイに表示させて楽しむだけでなく、音声データや文字データと合成してナレーションを入れたり、様々な特殊効果を施した画像データとして表示させるなど、楽しみ方も多様化してきた。 Recently, mobile phones with cameras and digital still cameras have become widespread, and general users can easily enjoy digital image data. In addition to enjoying these image data simply by displaying them on the display, there are various ways to enjoy such as synthesizing with voice data and character data and adding narration or displaying them as image data with various special effects. It has become.
従来より、デジタルスチルカメラで撮像した複数の静止画像データを、撮影順に一定時間間隔で表示してスライドショーのような画像を表示させるための編集データを作成する技術が知られている。 2. Description of the Related Art Conventionally, there has been known a technique for creating editing data for displaying a plurality of still image data captured by a digital still camera at a predetermined time interval in the order of shooting to display an image like a slide show.
ところが、スライドショーは単純であり一般ユーザにとっても比較的容易に作成できるものの、品質の高い凝った表現方法とは言えない。一方、画像に関する特殊な表現方法や加工技法等について専門的な知識を有していないと、凝った演出（修飾）を用いた品質の高い編集データを作成することは、困難であるという問題があった。すなわち、専門的知識がないと、素材となる画像データにそもそもどのようなデータ処理を施してよいか指示することができないからである。 However, although a slide show is simple and can be created relatively easily for general users, it cannot be said to be a high quality elaborate expression method. On the other hand, it is difficult to create high-quality editing data using elaborate effects (modifications) unless you have specialized knowledge about special expression methods and processing techniques related to images. there were. In other words, if there is no specialized knowledge, it is impossible to instruct what kind of data processing should be applied to the image data as the material.
本発明は、上記課題に鑑みてなされたものであり、画像処理に関する専門的な知識を有しない一般ユーザであっても、品質の高い編集データを生成して楽しむことができるようにすることを目的とする。 The present invention has been made in view of the above problems, and enables even a general user who does not have specialized knowledge about image processing to generate and enjoy high-quality editing data. Objective.
上記の課題を解決するため、請求項１の発明は、編集データを作成する画像処理装置であって、素材データとオペレータにより予め作成されるシナリオ元データとを記憶する記憶手段と、前記シナリオ元データに基づいて、前記記憶手段に記憶された素材データの中から前記シナリオ元データにおいて要求される編集前データを特定するとともに、編集前データとして特定された素材データと前記編集前データに対して実行すべきデータ処理とを互いに関連づけるシナリオ解析手段と、前記シナリオ解析手段によりデータ処理が関連づけられた素材データに前記データ処理を実行して編集データを生成する生成手段とを備える画像処理装置。
In order to solve the above problems, the invention of
また、請求項２の発明は、請求項１の発明に係る画像処理装置であって、前記シナリオ元データにおいて要求される編集前データを特定するための特定情報を入力するようにユーザに対して要求する要求手段と、前記要求手段の要求に応じてユーザが入力した特定情報を受け付ける操作手段とをさらに備え、前記シナリオ解析手段は、前記特定情報に基づいて編集前データを特定することを特徴とする。
The invention of
また、請求項３の発明は、請求項２の発明に係る画像処理装置であって、被写体を撮像して撮像データを生成する撮像手段をさらに備え、前記要求手段は、撮像指示情報を出力することにより前記撮像手段による撮像をユーザに対して要求するとともに、前記要求に応じて行われる撮像により生成される撮像データを、前記シナリオ元データにおいて要求される編集前データとして特定するための特定情報を生成することを特徴とする。
The invention of
また、請求項４の発明は、請求項２または３の発明に係る画像処理装置であって、周囲の音声を録音して録音データを生成する録音手段をさらに備え、前記要求手段は、録音指示情報を出力することにより前記録音手段による録音をユーザに対して要求するとともに、前記要求に応じて行われる録音により生成される録音データを、前記シナリオ元データにおいて要求される編集前データとして特定するための特定情報を生成することを特徴とする。
The invention according to claim 4 is the image processing apparatus according to
また、請求項５の発明は、請求項１ないし４の発明に係る画像処理装置であって、前記生成手段により生成された編集データを再生する再生手段をさらに備えることを特徴とする。 According to a fifth aspect of the present invention, there is provided the image processing apparatus according to any of the first to fourth aspects of the present invention, further comprising a reproducing unit that reproduces the editing data generated by the generating unit.
また、請求項６の発明は、請求項１ないし５の発明に係る画像処理装置であって、前記生成手段により生成された編集データを記録データとして保存する保存手段をさらに備えることを特徴とする。
The invention according to claim 6 is the image processing apparatus according to any one of
また、請求項７の発明は、編集データを作成する画像処理方法であって、オペレータがシナリオ元データを予め作成する工程と、素材データと前記シナリオ元データとを記憶する工程と、前記シナリオ元データに基づいて、前記素材データの中から前記シナリオ元データにおいて要求される編集前データを特定する工程と、編集前データとして特定された素材データと前記編集前データに対して実行すべきデータ処理とを互いに関連づける工程と、データ処理が関連づけられた素材データに前記データ処理を実行して編集データを生成する工程とを有する画像処理方法。 The invention according to claim 7 is an image processing method for creating edit data, wherein an operator creates a scenario source data in advance, stores material data and the scenario source data, and the scenario source A step of identifying pre-edit data required in the scenario source data from the material data based on the data, and data processing to be performed on the material data identified as pre-edit data and the pre-edit data And a process of generating edit data by executing the data processing on the material data associated with the data processing.
また、請求項８の発明は、コンピュータによって実行されるプログラムであって、前記コンピュータによる前記プログラムの実行は、前記コンピュータを、素材データとオペレータにより予め作成されるシナリオ元データとを記憶する記憶手段と、前記シナリオ元データに基づいて、前記記憶手段に記憶された素材データの中から前記シナリオ元データにおいて要求される編集前データを特定するとともに、編集前データとして特定された素材データと前記編集前データに対して実行すべきデータ処理とを互いに関連づけるシナリオ解析手段と、前記シナリオ解析手段によりデータ処理が関連づけられた素材データに前記データ処理を実行して編集データを生成する生成手段とを備える画像処理装置として機能させることを特徴とする。
Further, the invention of
また、請求項９の発明は、編集データを作成する画像処理装置であって、素材データとオペレータにより予め作成されるシナリオ元データとを記憶する記憶手段と、前記シナリオ元データに基づいて、前記記憶手段に記憶された素材データの中から前記シナリオ元データにおいて要求される編集前データを特定するとともに、編集前データとして特定された素材データと前記編集前データに対して実行すべきデータ処理とを互いに関連づけるシナリオ解析手段と、編集データを再生する再生装置に関する性能データを取得する取得手段と、前記取得手段により取得された性能データに応じて、前記シナリオ解析手段によりデータ処理が関連づけられた素材データに前記データ処理を実行して編集データを生成する生成手段とを備える画像処理装置。
The invention according to
また、請求項１０の発明は、請求項９の発明に係る画像処理装置であって、前記生成手段により生成された編集データを前記再生装置に出力する出力手段をさらに備えることを特徴とする。
The invention of
また、請求項１１の発明は、請求項９または１０の発明に係る画像処理装置であって、前記性能データは、前記再生装置の識別子、処理能力、解像度、記憶容量または再生可能なデータ形式に関するデータの少なくとも１つを含むことを特徴とする。
The invention according to
請求項１ないし１１に記載の発明は、素材データとオペレータにより予め作成されるシナリオ元データとを記憶し、シナリオ元データに基づいて、素材データの中からシナリオ元データにおいて要求される編集前データを特定するとともに、編集前データとして特定された素材データと編集前データに対して実行すべきデータ処理とを互いに関連づけ、データ処理が関連づけられた素材データに当該データ処理を実行して編集データを生成することにより、ユーザが専門的な知識を有していなくても、高品質な編集データを得ることができる。
The invention according to any one of
請求項２に記載の発明は、シナリオ元データにおいて要求される編集前データを特定するための特定情報を入力するようにユーザに対して要求する要求手段と、要求手段の要求に応じてユーザが入力した特定情報を受け付ける操作手段とをさらに備え、シナリオ解析手段は、特定情報に基づいて編集前データを特定することにより、例えば撮り溜める膨大な画像データが素材データとして記憶手段に記憶されていたとしても、要求手段の要求に従って入力するだけで、ユーザは容易に必要な編集前データを指定できる。 According to the second aspect of the present invention, there is provided request means for requesting the user to input specific information for specifying pre-edit data required in the scenario original data, and the user in response to a request from the request means. The scenario analysis means further specifies, for example, pre-edit data based on the specific information, and for example, a large amount of image data to be collected is stored in the storage means as material data. However, the user can easily specify necessary pre-edit data simply by inputting according to the request of the request means.
請求項３に記載の発明は、撮像指示情報を出力することにより撮像手段による撮像をユーザに対して要求するとともに、当該要求に応じて行われる撮像により生成される撮像データを、シナリオ元データにおいて要求される編集前データとして特定するための特定情報を生成することにより、出力される撮像指示情報に従うことによって、ユーザは、どのようなシーンを撮像したらよいかを容易に知ることができる。また、このようにして撮像された撮像データは、既に存在している素材データよりも適切な編集前データとなる。 According to the third aspect of the present invention, the imaging request information is output to the user by outputting the imaging instruction information, and the imaging data generated by the imaging performed in response to the request is included in the scenario source data. By generating the specific information for specifying the required pre-edit data, the user can easily know what scene should be imaged by following the imaging instruction information that is output. Further, the imaged data imaged in this way is more pre-edit data than material data that already exists.
請求項４に記載の発明は、録音指示情報を出力することにより録音手段による録音をユーザに対して要求するとともに、当該要求に応じて行われる録音により生成される録音データを、シナリオ元データにおいて要求される編集前データとして特定するための特定情報を生成することにより、出力される録音指示情報に従うことによって、ユーザは、どのような音声を録音したらよいかを容易に知ることができる。また、このようにして録音された録音データは、既に存在している素材データよりも適切な編集前データとなる。 The invention according to claim 4 requests the user to record by the recording means by outputting the recording instruction information, and the recording data generated by the recording performed in response to the request in the scenario source data. By generating the specific information for specifying the required pre-edit data, the user can easily know what kind of sound should be recorded by following the output recording instruction information. Also, the recording data recorded in this way becomes pre-edit data that is more appropriate than the already existing material data.
請求項５に記載の発明は、生成手段により生成された編集データを再生する再生手段をさらに備えることにより、容易に編集データを確認することができる。 According to the fifth aspect of the present invention, the editing data can be easily confirmed by further including a reproducing unit that reproduces the editing data generated by the generating unit.
請求項６に記載の発明は、生成手段により生成された編集データを記録データとして保存する保存手段をさらに備えることにより、編集データの汎用性が向上する。 According to the sixth aspect of the present invention, the versatility of the edit data is improved by further including a storage unit that stores the edit data generated by the generation unit as record data.
請求項９に記載の発明は、編集データを再生する再生装置に関する性能データを取得する取得手段と、前記取得手段により取得された性能データに応じて、前記シナリオ解析手段によりデータ処理が関連づけられた素材データに前記データ処理を実行して編集データを生成する生成手段とを備えることにより、再生装置に適した編集データを作成することができる。 According to the ninth aspect of the present invention, an acquisition unit that acquires performance data related to a playback device that reproduces edited data is associated with data processing by the scenario analysis unit according to the performance data acquired by the acquisition unit. Editing data suitable for the playback apparatus can be created by including generation means for generating the editing data by executing the data processing on the material data.
以下、本発明の好適な実施の形態について、添付の図面を参照しつつ、詳細に説明する。 DESCRIPTION OF EXEMPLARY EMBODIMENTS Hereinafter, preferred embodiments of the invention will be described in detail with reference to the accompanying drawings.
＜１． 第１の実施の形態＞
図１は、本発明に係る画像処理装置として構成されるデジタルスチルカメラ１を含む情報処理システムを示す図である。情報処理システムは、一般ユーザが所持するデジタルスチルカメラ１と、例えばコンテンツプロバイダ等に設置されるサーバ装置２とが互いにネットワーク８を介して接続される構成となっている。
<1. First Embodiment>
FIG. 1 is a diagram showing an information processing system including a
なお、ネットワーク８としては、インターネットや公衆網等が該当する。また、デジタルスチルカメラ１およびサーバ装置２の台数は１台に限定されるものではなく、例えば複数のデジタルスチルカメラ１や複数のサーバ装置２がネットワーク８に接続されていてもよい。
The
サーバ装置２は、データベース２０を備えた一般的なコンピュータとして構成されており、先述のようにネットワーク８に接続されている。サーバ装置２のデータベース２０には、シナリオ元データ２２、ＧＵＩデータ２３および素材データ２４（以下、これらを「コンテンツデータ２１」と総称する場合がある。）が予め保存されている。なお、コンテンツデータ２１は、シナリオ元データ２２、ＧＵＩデータ２３および素材データ２４を全て含んでいる必要はなく、それらのうちのいずれかであってもよい。
The
コンテンツデータ２１は、画像処理に関する専門知識を有するオペレータ（イラストレータやカメラマン、プログラマ等）によって予め作成されたデータである。したがって、コンテンツデータ２１は、一般ユーザによって作成されるデータに比べて品質の高いデータとして提供される。コンテンツデータ２１のうちのシナリオ元データ２２およびＧＵＩデータ２３は、デジタルスチルカメラ１において実行されるデータであって、例えば、スクリプト言語等で記述されるテキストデータである。
The
シナリオ元データ２２は、結婚式やゴルフコンペ、運動会、卒業式といった様々なテーマごとにそれぞれ制作されており、対応するテーマと関連づけられて保存されている。したがって、ユーザは具体的なテーマを選択するだけで、個々のシナリオ元データ２２の内容を詳細に理解していなくても、所望の編集データを作成するためのシナリオ元データ２２を複数のシナリオ元データ２２の中から容易に指定することが可能である。
The
なお、シナリオ元データ２２と関連づけられるテーマは、上記に挙げたものに限定されるものではないが、ユーザが状況に応じて容易に思いつき、かつ、内容を容易に想像できるものが好ましい。また、編集データとは、ユーザが作成しようとする目的のデータであって、本実施の形態では画像（静止画像または動画像）や音声を表現した未圧縮のストリーム情報である。
The themes associated with the
また、各シナリオ元データ２２には対応するＧＵＩデータ２３が関連づけられている。対応づけられるＧＵＩデータ２３は、各シナリオ元データ２２にとって専用のＧＵＩデータ２３であってもよいし、複数のシナリオ元データ２２において共通に使用される汎用のＧＵＩデータ２３であってもよい。このようにシナリオ元データ２２にＧＵＩデータ２３が関連づけられていることにより、ユーザはテーマを選択するだけで、シナリオ元データ２２を指定できるとともに、当該シナリオ元データ２２に必要なＧＵＩデータ２３も特定される。
Each
シナリオ元データ２２には、目的の編集データに必要な編集前データ（画像データや音声データ、フォントデータ等）の識別子が記述されるとともに、各編集前データに対して実行すべきデータ処理が各編集前データごとに記述される。すなわち、シナリオ元データ２２には、編集前データの識別子とデータ処理とが互いに関連づけられて記述される。
The
シナリオ元データ２２に記述されるデータ処理として、例えば、画像を表現した編集前データについて、どのような画像効果（Effect）を施すか、どのような画像合成（Synthesis）を行うか、あるいはどのように画像移行（Transition）させるか等が想定され、対応する編集前データに応じて画像処理の専門家であるオペレータによって選択され記述される。また、音声を表現した編集前データについても、再生のタイミングや音量等に関する設定情報（データ処理）が記述される。
As the data processing described in the scenario
なお、シナリオ元データ２２に識別子が記述される編集前データのうち、オペレータが制作したデータ（サーバ装置２に存在する素材データ２４）については、当該シナリオ元データ２２において当該素材データ２４との関連づけが既にされている。したがって、シナリオ元データ２２が特定されると、特定されたシナリオ元データ２２において使用される素材データ２４も編集前データとして特定される。
Of the pre-edit data whose identifier is described in the
このように、コンテンツプロバイダは、ユーザがテーマを選択するだけで、サーバ装置２上の必要なシナリオ元データ２２、ＧＵＩデータ２３および素材データ２４が容易に特定されるように、それぞれの関連づけを行って提供する。
As described above, the content provider associates each of the
ＧＵＩデータ２３は、対応するシナリオ元データ２２に応じて、適切なＧＵＩをデジタルスチルカメラ１のユーザに提供するものである。すなわち、ＧＵＩデータ２３を実行することにより、デジタルスチルカメラ１は、シナリオ元データ２２において要求される編集前データを素材データ９０（図２）の中から特定するための特定情報を入力するようにユーザに対して要求し、デジタルスチルカメラ１におけるユーザ操作を支援する。例えば、対応するシナリオ元データ２２で要求されている編集前データのうち、ユーザが指定（選択）しなければならないデータについては、その入力を促したり、当該編集前データとして適切な素材データ９０をユーザが容易に指定できるように、当該編集前データに関する情報を表示したりする。
The
素材データ２４は、デジタルスチルカメラ１において加工される素材となるデータであって、画像データや音声データ、フォントデータ等である。素材データ２４に含まれる画像データとしては、例えば、アニメキャラクタや映画の名場面、名所を撮影した風景画像、イラスト画像等であり、静止画像に限らず動画像であってもよい。また、音声データとしては、例えば、声優や俳優の声、ＢＧＭ、動物の鳴き声、楽器の音、効果音等であり、現実に録音されたデータであってもよいし、機械的に合成された音を出力するためのデータであってもよい。素材データ２４は、各シナリオ元データ２２に最適なデータとして、専門家のオペレータによって制作され収集されたデータである。
The
先述のように、デジタルスチルカメラ１とサーバ装置２とは互いにデータ通信によるデータの送受信が可能であり、デジタルスチルカメラ１は必要に応じてサーバ装置２において提供されるコンテンツデータ２１をダウンロードすることが可能である。
As described above, the digital
図１に示すように、本実施の形態におけるデジタルスチルカメラ１は、携帯型の装置として構成されており、無線通信機能によって必要に応じてネットワーク８に接続することが可能とされている。このような無線通信機能を実現する構成としては、ＷｉＦｉ（Wireless Fidelity）や赤外線通信といった通信規格を採用することが可能である。
As shown in FIG. 1, the digital
また、デジタルスチルカメラ１は、図１に示すように可搬性の記録メディア９を着脱可能に設計されており、当該記録メディア９に記憶されているデータを読み出して利用したり、デジタルスチルカメラ１において生成したデータ（あるいはダウンロードしたデータ）を当該記録メディア９に記憶させたりすることが可能である。本実施の形態では記録メディア９としてＳＤカードを採用するが、記録メディア９はこれに限定されるものではなく、例えばＰＣカードやメモリスティック等であってもよい。
Further, the digital
図２は、デジタルスチルカメラ１の構成を示すブロック図である。図２に示すように、サーバ装置２からダウンロードされたシナリオ元データ２２、ＧＵＩデータ２３および素材データ２４は、記録メディア９に格納される。
FIG. 2 is a block diagram showing a configuration of the digital
なお、撮像データ９１および録音データ９２は、デジタルスチルカメラ１においてユーザにより撮像または録音され生成されるユーザ由来（サーバ装置２から提供されるデータではないという意味）のデータである。したがって、記録メディア９に記憶される素材データ９０は、オペレータによって制作される素材データ２４の他に、撮像データ９１および録音データ９２を含んでいる。先述のように、素材データ２４はシナリオ元データ２２によって特定されダウンロードされたデータであるから、シナリオ元データ２２において要求されている編集前データである。しかし、撮像データ９１および録音データ９２はシナリオ元データ２２とは無関係に取得されたデータを含んでおり、これらのうちのいずれが編集前データとなるかを記録メディア９上で区別することは本実施の形態においてはできない。すなわち、本実施の形態においては、素材データ９０は編集前データ以外のデータを含んでいる。
Note that the
デジタルスチルカメラ１は、各種データに関する演算処理を行うＣＰＵ１０と、各種データを必要に応じて適宜記憶する記憶部１１とを備えており、一般的なコンピュータとしても構成されている。
The digital
ＣＰＵ１０は、記憶部１１のＲＡＭを一時的なワーキングエリアとして使用しつつ、記憶部１１のＲＯＭに格納されているプログラム１１０に従って動作することにより、デジタルスチルカメラ１の各構成を制御する。なお、ＣＰＵ１０は、サーバ装置２からダウンロードされて記録メディア９に格納されているシナリオ元データ２２およびＧＵＩデータ２３を実行する機能も有しているが詳細は後述する。
The
デジタルスチルカメラ１は、各種データを取り込むための構成として、ユーザによって操作される操作部１２と、周囲の音声を電気信号に変換することにより録音を行うマイク１３と、入射する光を電気信号に変換することにより撮像を行う撮像部１４とを備える。
The digital
操作部１２は、ユーザがデジタルスチルカメラ１に対して指示を入力するために使用される。操作部１２は、例えば、デジタルスチルカメラ１（撮像部１４）に撮像を行わせるための指示を入力するシャッターボタン、デジタルスチルカメラ１の動作に必要な設定データ等を入力するためのボタン類、あるいは文字データを入力するためのキー等で構成されている。特に、本実施の形態では、操作部１２は、ユーザが、所望のテーマ（シナリオ元データ２２）を選択するときや、記録メディア９に記憶されている素材データ９０から編集前データを特定するための特定情報を入力するとき等に操作される。
The
マイク１３は、先述のように、音声を電気信号に変換する機能を備えており、マイク１３によって取得された電気信号はＡ／Ｄ変換された後、例えば、後述するＡ／Ｖコーデック１７１に伝達される。
As described above, the
撮像部１４は、レンズ等の光学系と、光学系によって導かれた光を受光して電気信号に変換する複数の光電変換素子（例えばＣＣＤ素子）とを備えている。複数の光電変換素子は、アレイ状に配列されており、それぞれが撮像時に受光した光の光量に応じた電気信号を出力する。撮像部１４は、ユーザが操作部１２（シャッターボタン）を操作することにより撮像を行い、１度の撮像によって複数の光電変換素子から得られたそれぞれの出力信号はＡ／Ｄ変換や色補正等がされた後、１枚の画像を表現したデジタルデータとして、例えば、後述するＪＰＥＧコーデック１７０に伝達される。
The
デジタルスチルカメラ１は、各種データを出力するための構成として、音声データに基づいて生成される電気信号により音声を再生するスピーカ１５と、画像データに基づいて画像を表示する液晶パネル１６とを備える。
As a configuration for outputting various data, the digital
スピーカ１５は、録音データ９２等の音声データに基づいて音声を再生するための装置である。
The
液晶パネル１６は、ＣＰＵ１０からの制御によって必要なデータを画像として表示する表示装置として構成されている。例えば、液晶パネル１６は記録メディア９内に記憶されている素材データ９０（画像を表現したデータ）や、作成された編集データのうちの映像に関するデータを再生表示するだけでなく、ＣＰＵ１０からの指示に従って所定のメッセージ（文字）等を表示する機能も有している。特に、本実施の形態における液晶パネル１６は、ＣＰＵ１０がＧＵＩデータ２３を実行することにより提供されるＧＵＩ画面を表示する機能を有している。
The
さらに、デジタルスチルカメラ１は、データ変換部１７、画像処理部１８および通信部１９を備えている。
Furthermore, the digital
データ変換部１７は、論理回路（ハードウェア）から主に構成され、ＪＰＥＧコーデック１７０と、Ａ／Ｖコーデック１７１とを備えている。
The
ＪＰＥＧコーデック１７０は、画像データのデータ形式をＪＰＥＧ形式に変換（エンコード）する機能と、ＪＰＥＧ形式の画像データをデコードして例えば液晶パネル１６に伝達する機能とを有している。したがって、例えば、ＪＰＥＧコーデック１７０は、撮像部１４から伝達される画像データをＪＰＥＧ形式に圧縮された静止画像データに変換して撮像データ９１を生成する。ＪＰＥＧコーデック１７０により生成された撮像データ９１は、記録メディア９に転送され記憶される。
The
Ａ／Ｖコーデック１７１は、マイク１３によって取得されたデータのデータ形式を例えばＭＰ３形式等にエンコードして録音データ９２を生成し記録メディア９に記録させる。また、逆に録音データ９２をデコードし例えばスピーカ１５に伝達する。また、Ａ／Ｖコーデック１７１は、画像データおよび音声データのデータ形式を、例えばＭＰＥＧ形式等にエンコードして記録データ９３を生成し記録メディア９に伝達する機能と、ＭＰＥＧ形式等の記録データ９３をデコードし例えばスピーカ１５や液晶パネル１６に伝達する。
The A /
詳細は図示しないが画像処理部１８は、画像データを解析して被写体の動きや形状等を判定する画像認識回路と、画像の合成や補間、変換等の様々な加工を行う画像加工回路とを備えている。
Although not shown in detail, the
通信部１９は、デジタルスチルカメラ１において必要となるデータを外部から取得する機能と、デジタルスチルカメラ１で生成されたデータを外部に伝達する機能とを有している。通信部１９は、ネットワークインタフェースやハードウェアインタフェース等の総称であって、通信部１９を介してデジタルスチルカメラ１に接続される構成はネットワーク８や記録メディア９に限定されるものではない。例えば、専用のケーブルで接続されるテレビやオーディオ機器、ＵＳＢ接続される外部のコンピュータや専用のクレードル、ＮＡＮＤフラッシュメモリやＤＲＡＭ等の記録媒体等であってもよい。
The
図３は、デジタルスチルカメラ１の機能ブロックをデータの流れとともに示す図である。図３に示す要求部１００、シナリオ解析部１０１、画像生成部１０２および音声生成部１０３は、主にＣＰＵ１０が記憶部１１に記憶されているプログラム１１０に従って動作することにより実現される機能ブロックである。
FIG. 3 is a diagram showing functional blocks of the digital
なお、以下の説明では、ユーザによって「テーマ」が既に選択されており、当該選択されたテーマに応じて特定された１つのシナリオ元データ２２がサーバ装置２からダウンロードされているものとする。すなわち、図３は、ユーザが操作部１２を操作することにより、既にシナリオ元データ２２の特定は完了し、特定されたシナリオ元データ２２に関連づけられているＧＵＩデータ２３および素材データ２４も既にダウンロードされ、記録メディア９に記憶されている状態を示している。
In the following description, it is assumed that the “theme” has already been selected by the user, and one
要求部１００は、ＧＵＩデータ２３を参照しつつ、そこに記述されている内容に従って、デジタルスチルカメラ１のユーザに対して必要な情報を入力するように促すＧＵＩを提供する。すなわち、要求部１００は、液晶パネル１６にメニュー画面や入力画面等を表示させることにより、シナリオ元データ２２において要求される編集前データを特定するための特定情報を入力するようにユーザに対して要求する機能を有している。
The
シナリオ元データ２２に記述されている編集前データの識別子とは、いわば編集データにおける役名である。そして、各役名にどの俳優（素材データ９０）を具体的に割り当てるかは、ユーザが特定情報を入力することにより決定される。ユーザがＧＵＩデータ２３によって提供されるＧＵＩに従って入力することにより、役名（編集前データの識別子）と俳優名（素材データ９０の識別子）とが関連づけられる。
The identifier of the pre-edit data described in the
したがって、ユーザは、液晶パネル１６に表示されるＧＵＩ画面によって要求される情報を、当該ＧＵＩ画面に従って操作部１２を操作して入力するだけで、専門的な知識を有していなくても、編集データを作成するために必要な指示をデジタルスチルカメラ１に与えることが可能である。
Therefore, the user can edit the information required by the GUI screen displayed on the
また、本実施の形態における要求部１００は、すでに記録メディア９に記憶されている素材データ９０から編集前データとなるデータを選択するように要求するだけではなく、素材収集指示情報をＧＵＩ画面に表示することにより、ユーザに対して、編集前データとなる新たな素材データ９０を取得するように要求する。例えば、既に撮像され撮り溜めされた過去の撮像データ９１を選択させるだけでなく、新たに撮像を行って撮像データ９１を取得するよう要求する。
In addition, the
すなわち、要求部１００は、例えば、撮像指示情報を液晶パネル１６に表示させることにより撮像部１４よる撮像をユーザに対して要求するとともに、その要求に応じて行われる撮像により生成される撮像データ９１を、シナリオ元データ２２において要求される編集前データとして特定するための特定情報を生成する。撮像指示情報は、新たな撮像を行うように指示するメッセージだけでなく、どのような場面、被写体を撮像すればよいか等を指示するメッセージ等を含めることも可能である。
That is, for example, the
なお、要求部１００は、ＧＵＩ画面に従って、ユーザが撮像（あるいは録音）を行って新たに取得したデータを記録メディア９に記憶させる機能も有している。図３では図示していないが、マイク１３および撮像部１４から要求部１００に入力される新たなデータは、ＪＰＥＧコーデック１７０またはＡ／Ｖコーデック１７１を介して記録メディア９に転送され素材データ９０として記憶される。
Note that the
ユーザからの指示に従って選択あるいは新たに取得された各素材データ９０は、シナリオ元データ２２において宣言されている各編集前データとしてユーザに指定されたものとみなされ、互いに関連づけが行われて、その情報が要求部１００からシナリオ解析部１０１に伝達される。すなわち、全ての編集前データに関するユーザの指定が完了した段階で、要求部１００は、シナリオ元データ２２で要求される編集前データの識別子と、記録メディア９に記憶されている各素材データ９０の記録メディア９上の識別子（例えば記録メディア９における各素材データ９０のファイル名）とを関連づけた情報（以下、「素材指定情報」と称する）をシナリオ解析部１０１に伝達する。先に示した例で言えば、素材指定情報とは、役名と俳優名とを関連づけたリスト情報となる。
Each
シナリオ解析部１０１は、要求部１００から伝達される素材指定情報とシナリオ元データ２２とに基づいて、記録メディア９に記憶された素材データ９０の中から当該シナリオ元データ２２において要求される編集前データを特定する。また、シナリオ解析部１０１は、編集前データとして特定された素材データ９０の識別子と、編集前データに対して実行すべきデータ処理を示す識別子とを、それぞれに関連づけられている編集前データの識別子を仲立ちにして、互いに関連づけ、シナリオデータを作成する。すなわち、シナリオデータとは、シナリオ元データ２２と、素材指定情報とに基づいてシナリオ解析部１０１によって作成されるデータである。
Based on the material designation information and the
このようなシナリオデータが作成されることによって、編集データを作成するために必要な全ての素材データ９０が特定され、かつ、各素材データ９０に対するデータ処理が特定される。
By creating such scenario data, all
さらに、シナリオ解析部１０１は、作成する編集データにおいける映像を構成する素材データ９０の識別子と、当該素材データ９０に関連づけられたデータ処理の識別子とを、編集データにおける順序に従って、画像生成部１０２に映像シナリオデータとして伝達する。一方で、作成する編集データにおいて、音声に係る素材データ９０の識別子と、当該素材データ９０に関連づけられたデータ処理の識別子とを、編集データにおける順序に従って、音声生成部１０３に音声シナリオデータとして伝達する。
Further, the
画像生成部１０２は、シナリオ解析部１０１から伝達される映像シナリオデータを参照しつつ、そこに記述されている素材データ９０の識別子に基づいて記録メディア９から該当する素材データ９０を読み出す。そして、シナリオ解析部１０１から伝達された映像シナリオデータを参照しつつ、当該素材データ９０に関連づけられたデータ処理の識別子に応じて、当該素材データ９０に対して行うべきデータ処理を画像処理部１８を使用しつつ実行し、編集データ（より詳しくは編集データのうちの映像に係るデータ）を生成する。画像生成部１０２は、生成した映像に係る編集データを液晶パネル１６あるいはＡ／Ｖコーデック１７１に伝達する。
The
音声生成部１０３は、シナリオ解析部１０１から伝達される音声シナリオデータを参照しつつ、そこに記述されている素材データ９０の識別子に基づいて記録メディア９から該当する素材データ９０を読み出す。そして、シナリオ解析部１０１から伝達された音声シナリオデータを参照しつつ、当該素材データ９０に関連づけられたデータ処理の識別子に応じて、当該素材データ９０に対して行うべきデータ処理を実行し、編集データ（より詳しくは編集データのうちの音声に係るデータ）を生成する。音声生成部１０３は、生成した音声に係る編集データをスピーカ１５あるいはＡ／Ｖコーデック１７１に伝達する。
The
以上がデジタルスチルカメラ１の構成および機能の説明である。次に、デジタルスチルカメラ１を用いて、編集データを作成する方法について説明する。
The above is the description of the configuration and function of the digital
図４は、デジタルスチルカメラ１における画像処理方法を示す流れ図である。
FIG. 4 is a flowchart showing an image processing method in the digital
なお、図４に示す状態となるまでに、サーバ装置２には、オペレータによって作成されたコンテンツデータ２１が記憶されているものとする。すなわち、画像処理の専門家であるオペレータがシナリオ元データ２２を予め作成する工程は、図４に示す各工程の前に既に完了しているものとする。
It is assumed that the
まず、ユーザはデジタルスチルカメラ１の操作部１２を操作して、所望する状況に応じてテーマを入力する。例えば、結婚式を撮像した素材データ９０を編集して編集データを作成しようとする場合、ユーザはテーマとして「結婚式」を入力する。より詳細には、ユーザはサーバ装置２のネットワーク８におけるアドレス等も入力する。
First, the user operates the
これに応じてデジタルスチルカメラ１は通信部１９およびネットワーク８を介してサーバ装置２にアクセスし、入力されたテーマ「結婚式」をサーバ装置２に伝達する。サーバ装置２はデジタルスチルカメラ１から伝達されたテーマ「結婚式」をキーワードとしてデータベース２０を検索し、当該テーマに関連づけられているシナリオ元データ２２を、ＧＵＩデータ２３および素材データ２４とともにデジタルスチルカメラ１に送信する。これによって、コンテンツデータ２１（シナリオ元データ２２、ＧＵＩデータ２３および素材データ２４）がデジタルスチルカメラ１にダウンロードされ（ステップＳ１）、記録メディア９に記憶される。
In response to this, the digital
ダウンロードが完了すると、ユーザは操作部１２を操作して編集作業の開始を指示する（ステップＳ２）。この指示に応じて、デジタルスチルカメラ１の要求部１００が記録メディア９に格納されたＧＵＩデータ２３を参照し、ユーザに必要な入力を促すＧＵＩ画面を液晶パネル１６に表示させる（ステップＳ３）。
When the download is completed, the user operates the
このとき、要求部１００は、要求される編集前データに関するデータを表示するとともに、当該編集前データとして、既に記録メディア９に記憶されている素材データ９０から選択するか否かを選択するようにユーザに対して要求するメッセージを表示する（ステップＳ４）。
At this time, the
ユーザは、既に記録メディア９に記憶されている素材データ９０を指定する場合は、ステップＳ４において「選択する」と入力する。これにより要求部１００はステップＳ４においてＹｅｓと判定し、ＧＵＩ画面として選択画面を液晶パネル１６に表示する（ステップＳ５）。選択画面が表示されると、ユーザは、一覧表示される素材データ９０（その時点で記録メディア９に記憶されている素材データ９０）から適当なデータを特定するための特定情報を入力することにより、編集前データとしての素材データ９０を選択する（ステップＳ６）。これにより、素材データ９０の中からシナリオ元データ２２において要求される編集前データが１つ特定され、素材指定情報の１レコードが作成される。
When the user designates
一方、ユーザが新たに素材データ９０を取得しようと所望する場合は、ステップＳ４において「選択しない」と入力する。これにより要求部１００はステップＳ４においてＮｏと判定し、ＧＵＩ画面として取得画面を液晶パネル１６に表示させる（ステップＳ７）。取得画面が表示されると、ユーザは取得画面に表示される撮像指示情報（または録音指示情報）に従って、撮像（または録音）を行うように操作部１２を操作し、これにより撮像（または録音）が行われる（ステップＳ８）。撮像（または録音）により取得された素材データ９０は、要求部１００によって、シナリオ元データ２２において要求される編集前データの１つとして特定され、素材指定情報の１レコードが作成される。
On the other hand, if the user desires to newly acquire the
次に、要求部１００は、ＧＵＩデータ２３を参照することにより、全ての編集前データが特定されたか否かを判定する（ステップＳ９）。要求部１００は、シナリオ元データ２２において要求されている編集前データ（ＧＵＩデータ２３にも記述されている）のうち、未だ特定されていない編集前データが存在する場合はステップＳ９においてＮｏと判定し、ステップＳ３からの処理を繰り返す。
Next, the
全ての編集前データが特定されていれば、要求部１００はステップＳ９においてＹｅｓと判定する。そして、シナリオ解析部１０１がシナリオ元データ２２を参照しつつ、編集前データとして特定された各素材データ９０と、各素材データ９０に対して実行すべきデータ処理との関連づけを行い（ステップＳ１０）、シナリオデータを生成する。
If all the pre-edit data has been specified, the
素材データ９０とデータ処理との関連づけが完了すると、シナリオ解析部１０１が、シナリオデータを映像シナリオデータまたは音声シナリオデータに分類しつつ、画像生成部１０２および音声生成部１０３にそれぞれ伝達する。これにより、画像生成部１０２および音声生成部１０３が、素材データ９０にデータ処理を実行して編集データを生成する（ステップＳ１１）。さらに、生成された編集データは、スピーカ１５および液晶パネル１６に伝達され、音声が再生されるとともに、映像が再生される（ステップＳ１２）。
When the association between the
これにより、未圧縮のストリーム情報がリアルタイムに演算され、音声および映像が再生される。なお、生成された編集データは、Ａ／Ｖコーデック１７１に伝達され、ＭＰＥＧ形式の記録データ９３として記録メディア９に保存される。
Thereby, uncompressed stream information is calculated in real time, and audio and video are reproduced. The generated editing data is transmitted to the A /
以上のように、本実施の形態におけるデジタルスチルカメラ１は、編集データを作成する画像処理装置として構成されており、素材データ９０とオペレータにより予め作成されるシナリオ元データ２２とを記憶する記録メディア９と、シナリオ元データ２２に基づいて、記録メディア９に記憶された素材データ９０の中からシナリオ元データ２２において要求される編集前データを特定するとともに、編集前データとして特定された素材データ９０と編集前データに対して実行すべきデータ処理とを互いに関連づけるシナリオ解析部１０１と、シナリオ解析部１０１によりデータ処理が関連づけられた素材データ９０にデータ処理を実行して編集データを生成する画像生成部１０２および音声生成部１０３とを備えることにより、ユーザが専門的な知識を有していなくても、高品質な編集データを得ることができる。
As described above, the digital
また、シナリオ元データ２２において要求される編集前データを特定するための特定情報を入力するようにユーザに対して要求する要求部１００と、要求部１００の要求に応じてユーザが入力した特定情報を受け付ける操作部１２とをさらに備え、シナリオ解析部１０１は、特定情報に基づいて編集前データを特定することにより、例えば撮り溜めた膨大な撮像データ９１が素材データ９０として記録メディア９に記憶されていたとしても、要求部１００の要求に従って入力するだけで、ユーザは容易に必要な編集前データを指定できる。
The
また、被写体を撮像して撮像データ９１を生成する撮像部１４をさらに備え、要求部１００が撮像指示情報を出力することにより撮像部１４による撮像をユーザに対して要求するとともに、当該要求に応じて行われる撮像により生成される撮像データ９１を、シナリオ元データ２２において要求される編集前データとして特定するための特定情報を生成することにより、出力される撮像指示情報に従うことによって、ユーザは、どのようなシーンを撮像したらよいかを容易に知ることができる。また、このようにして撮像された撮像データ９１は、既に存在している素材データ９０よりも適切な編集前データとなる。
The
また、周囲の音声を録音して録音データを生成するマイク１３をさらに備え、要求部１００は、録音指示情報を出力することによりマイク１３による録音をユーザに対して要求するとともに、当該要求に応じて行われる録音により生成される録音データ９２を、シナリオ元データ２２において要求される編集前データとして特定するための特定情報を生成することにより、出力される録音指示情報に従うことによって、ユーザは、どのような音声を録音したらよいかを容易に知ることができる。また、このようにして録音された録音データ９２は、既に存在している素材データ９０よりも適切な編集前データとなる。
In addition, the
また、画像生成部１０２および音声生成部１０３により生成された編集データを再生するスピーカ１５および液晶パネル１６をさらに備えることにより、未圧縮のストリーム情報をリアルタイムに演算しつつ再生することができ、容易に編集データを確認することができる。
Further, by further including the
また、生成された編集データを記録データ９３として保存する記録メディア９を備えることにより、記録データ９３を外部装置に転送したり、ＤＶＤ等の媒体に記憶させて配布したりすることができる。すなわち、編集データの汎用性が向上する。
Further, by providing the
なお、上記実施の形態では、コンテンツデータ２１を外部のサーバ装置２からダウンロードする例で説明した。このように構成することによって、デジタルスチルカメラ１のユーザは、コンテンツプロバイダから提供される最新のコンテンツデータ２１によって編集データを作成して楽しむことができる。しかし、コンテンツデータ２１に相当する汎用のデータを予めプログラム１１０に含めておけば、デジタルスチルカメラ１のユーザは、ダウンロード操作をすることなく、編集データを作成して楽しむことが可能である。
In the above embodiment, the example in which the
また、上記実施の形態では画像処理装置としてデジタルスチルカメラ１を例に説明したが、撮像機能を備えた携帯電話であってもよい。あるいは撮像機能を有せず、画像データを通信等により取得する携帯電話によって画像処理装置を構成してもよい。
In the above embodiment, the digital
また、デジタルスチルカメラ１がネットワーク８に接続されているサーバ装置２とデータのやりとりを行う構成としては無線通信に限定されるものではない。例えば、必要に応じて専用ケーブル（ＵＳＢやＳＣＳＩあるいは専用クレードル等）でコンピュータに接続し、当該コンピュータがネットワーク８に接続する構成としてもよい。このような構成の場合、サーバ装置２が提供するコンテンツデータ２１は、一旦、当該コンピュータにネットワーク８を介してダウンロードされ、その後、デジタルスチルカメラ１に専用ケーブルを介して転送される。
Further, the configuration in which the digital
また、上記実施の形態では、シナリオ元データ２２と、当該シナリオ元データ２２で必要となる素材データ２４との関連づけが当該シナリオ元データ２２において既にされていると説明した。しかし、コンテンツプロバイダから提供される素材データ２４についても、いくつかの候補の中からユーザが選択できるように構成してもよい。例えば、シナリオ元データ２２で定義されるシーンＡにおいて必要となる１つの素材データ９０として、いくつかの素材データ２４がシナリオ元データ２２とともにデジタルスチルカメラ１にダウンロードされ、ユーザによって１つに絞り込まれてもよい。
In the above embodiment, the
＜２． 第２の実施の形態＞
第１の実施の形態では画像処理装置としてデジタルスチルカメラ１を例に説明したが、撮像機能を有せず、画像データを通信等により取得するコンピュータによって画像処理装置を構成してもよい。
<2. Second Embodiment>
In the first embodiment, the digital
図５は、本発明に係る画像処理装置として構成されるサーバ装置３を含む情報処理システムを示す図である。第２の実施の形態における情報処理システムは、一般ユーザが所持するデジタルスチルカメラ１ａと、例えばコンテンツプロバイダ等に設置されるサーバ装置３とが互いにネットワーク８を介して接続される構成となっている。
FIG. 5 is a diagram showing an information processing system including the
詳細は後述するが、本実施の形態において画像処理装置として構成されるサーバ装置３は、データベース３０を備えた一般的なコンピュータとして構成されており、先述のようにネットワーク８に接続されている。サーバ装置３のデータベース３０には、シナリオ元データ３２、ＧＵＩデータ３３および素材データ３４（以下、これらを「コンテンツデータ３１」と総称する場合がある。）が予め保存されている。なお、コンテンツデータ３１は、シナリオ元データ３２、ＧＵＩデータ３３および素材データ３４を全て含んでいる必要はなく、それらのうちのいずれかであってもよい。
As will be described in detail later, the
コンテンツデータ３１は、第１の実施の形態におけるコンテンツデータ２１と同様に、画像処理に関する専門知識を有するオペレータによって予め作成されたデータである。したがって、コンテンツデータ３１は、一般ユーザによって作成されるデータに比べて品質の高いデータとして提供される。コンテンツデータ３１のうちのシナリオ元データ３２およびＧＵＩデータ３３は、例えば、スクリプト言語等で記述されるテキストデータである。
Similar to the
シナリオ元データ３２は、第１の実施の形態におけるシナリオ元データ２２と同様のデータであるが、サーバ装置３において実行されるデータである点が異なっている。すなわち、第１の実施の形態ではデジタルスチルカメラ１にシナリオ元データ２２がダウンロードされたが、第２の実施の形態ではシナリオ元データ３２がデジタルスチルカメラ１ａにダウンロードされることはない。
The scenario
ＧＵＩデータ３３は、対応するシナリオ元データ３２に応じて、適切なＧＵＩをデジタルスチルカメラ１ａのユーザに提供するものである。したがって、ＧＵＩデータ３３は、サーバ装置３からデジタルスチルカメラ１ａに向けてダウンロードされる。そして、ダウンロードされたＧＵＩデータ３３を実行することにより、デジタルスチルカメラ１ａは、シナリオ元データ３２において要求される編集前データを特定するための情報（図６：特定情報９４）を入力するようにユーザに対して要求し、デジタルスチルカメラ１ａにおけるユーザ操作を支援する。
The
素材データ３４は、第１の実施の形態における素材データ２４と同様のデータであって、画像データや音声データ、フォントデータ等である。ただし、第２の実施の形態における素材データ３４は、サーバ装置３において加工されるデータであり、デジタルスチルカメラ１ａにダウンロードされることはない。
The
図６は、第２の実施の形態におけるデジタルスチルカメラ１ａの構成を示すブロック図である。デジタルスチルカメラ１ａは、画像処理部１８を備えていない一方で、デジタルスチルカメラ１と同様に、スピーカ１５と液晶パネル１６とを備えている。すなわち、第２の実施の形態におけるデジタルスチルカメラ１ａは、サーバ装置３において作成される編集データ（記録データ９５）を再生する再生装置としての機能を備えている。以下の説明では、デジタルスチルカメラ１ａにおいて、第１の実施の形態におけるデジタルスチルカメラ１と同様の構成については同符号を付し、適宜、説明を省略する。
FIG. 6 is a block diagram showing the configuration of the digital
図６に示すように、サーバ装置３からデジタルスチルカメラ１ａにダウンロードされたＧＵＩデータ３３は、記録メディア９に格納される。なお、第２の実施の形態における編集データである記録データ９５は、サーバ装置３において作成され、サーバ装置３からデジタルスチルカメラ１ａにダウンロードされる。
As shown in FIG. 6, the
第２の実施の形態における素材データ９０は、第１の実施の形態における素材データ９０と同様に撮像データ９１および録音データ９２を含むデータであるが、第２の実施の形態では素材データ３４がデジタルスチルカメラ１ａにダウンロードされることはないので、素材データ９０は素材データ２４に相当するデータ（例えば素材データ３４）を含まないデータである。
The
また、本実施の形態における性能データ９６は、デジタルスチルカメラ１ａに固有の識別子（ハードウェアＩＤ）と、記録メディア９における空き容量（記憶可能なデータ容量）を示す値とを含むデータである。ハードウェアＩＤは、サーバ装置３がデジタルスチルカメラ１ａを識別するための情報であり、予め記憶部１１のＲＯＭに格納されており、ＣＰＵ１０によって適宜読み出されて性能データ９６に含められる。また、記録メディア９における空き容量は、性能データ９６を作成する際の記録メディア９の空き容量であって、ＣＰＵ１０によって検出され、性能データ９６に含められる。また、性能データ９６は、デジタルスチルカメラ１ａからサーバ装置３に向けて送信される。
Further, the
第２の実施の形態におけるデータ変換部１７ａは、論理回路（ハードウェア）から主に構成され、第１の実施の形態と同様のＪＰＥＧコーデック１７０を備えるとともに、Ａ／Ｖコーデック１７１の代わりに音声コーデック１７２を備えている。
The
第２の実施の形態におけるＪＰＥＧコーデック１７０は、撮像部１４によって取得されたデータのデータ形式をＪＰＥＧ形式にエンコードして撮像データ９１（素材データ９０）を生成し記録メディア９に記録させる。このように、デジタルスチルカメラ１ａにおいても、撮像部１４およびＪＰＥＧコーデック１７０によって、被写体を撮像し保存することが可能となっている。
The
また、逆に、ＪＰＥＧコーデック１７０は、記録データ９５に含まれる画像に係るデータや撮像データ９１をデコードし、液晶パネル１６に伝達する。これにより、デジタルスチルカメラ１ａにおいても、撮像された画像が液晶パネルに表示される。なお、本実施の形態におけるデジタルスチルカメラ１ａは、ＭＰＥＧ形式のデータをエンコードするハードウェア（第１の実施の形態におけるＡ／Ｖコーデック１７１に相当するハードウェア）を備えていない装置として説明するが、そのような構成を備えていてもよい。
Conversely, the
第２の実施の形態における音声コーデック１７２は、マイク１３によって取得されたデータのデータ形式をＭＰ３形式にエンコードして録音データ９２（素材データ９０）を生成し記録メディア９に記録させる。このように、デジタルスチルカメラ１ａにおいても、マイク１３および音声コーデック１７２によって、周囲の音声を録音することが可能となっている。
The
また、逆に、音声コーデック１７２は、記録データ９５に含まれる音声に係るデータや録音データ９２をデコードし、例えばスピーカ１５に伝達する。これにより、デジタルスチルカメラ１ａにおいても、録音された音声がスピーカ１５から再生される。
Conversely, the
図６に示すように、第２の実施の形態における記憶部１１は、プログラム１１０ａを格納している。第２の実施の形態におけるＣＰＵ１０は、プログラム１１０ａおよびＧＵＩデータ３３を実行する機能を有している。
As shown in FIG. 6, the
このように、第２の実施の形態におけるデジタルスチルカメラ１ａは、ＪＰＥＧコーデック１７０および音声コーデック１７２を備えることにより、記録データ９５（編集データ）に含まれる画像および音声を再生する機能を備えている。すなわち、先述のように、第２の実施の形態におけるデジタルスチルカメラ１ａは再生装置としての機能を備えている。
As described above, the digital
図７は、第２の実施の形態におけるデジタルスチルカメラ１ａの機能ブロックをデータの流れとともに示す図である。図７に示す要求部１００ａは、主にＣＰＵ１０が記憶部１１に記憶されているプログラム１１０ａに従って動作することにより実現される機能ブロックである。
FIG. 7 is a diagram illustrating functional blocks of the digital
要求部１００ａは、ＧＵＩデータ３３を参照しつつ、そこに記述されている内容に従って、デジタルスチルカメラ１ａのユーザに対して必要な情報を入力するように促すＧＵＩを提供する。すなわち、要求部１００ａは、液晶パネル１６にメニュー画面や入力画面等を表示させることにより、シナリオ元データ３２において要求される編集前データを特定するための特定情報９４を入力するようにユーザに対して要求する機能を有している。
While referring to the
第２の実施の形態においても、シナリオ元データ３２に記述されている編集前データの識別子とは、いわば編集データにおける役名である。そして、各役名にどの俳優（素材データ９０）を具体的に割り当てるかは、ユーザが特定情報を入力することにより決定される。ユーザがＧＵＩデータ３３によって提供されるＧＵＩに従って入力することにより、役名（編集前データの識別子）と俳優名（素材データ９０の識別子）とが要求部１００ａによって関連づけられる。
Also in the second embodiment, the identifier of the pre-edit data described in the
したがって、ユーザは、液晶パネル１６に表示されるＧＵＩ画面によって要求される情報を、当該ＧＵＩ画面に従って操作部１２を操作して入力するだけで、専門的な知識を有していなくても、編集データを作成するために必要な指示をデジタルスチルカメラ１ａに与えることが可能である。
Therefore, the user can edit the information required by the GUI screen displayed on the
また、要求部１００ａは、第１の実施の形態における要求部１００と同様に、素材収集指示情報をＧＵＩ画面に表示することにより、ユーザに対して、編集前データとなる新たな素材データ９０を取得するように要求する機能も有している。したがって、要求部１００ａは、例えば、撮像指示情報を液晶パネル１６に表示させることにより撮像部１４よる撮像をユーザに対して要求することが可能である。そして、その要求に応じて行われる撮像により生成される撮像データ９１を、シナリオ元データ３２において要求される編集前データとして特定するための特定情報９４を生成する。
Further, the
なお、要求部１００ａは、ＧＵＩ画面に従って、ユーザが撮像（あるいは録音）を行って新たに取得したデータを記録メディア９に記憶させる機能も有している。すなわち、マイク１３および撮像部１４から要求部１００ａに入力される新たなデータは、ＪＰＥＧコーデック１７０または音声コーデック１７２を介して記録メディア９に転送され素材データ９０として記憶される。
The
さらに、第２の実施の形態における要求部１００ａは、サーバ装置３において提供されている素材データ３４の中から、編集前データとなるデータを特定するための特定情報９４をユーザに対して要求する機能も有している。
Furthermore, the
ユーザからの指示に従って選択あるいは新たに取得された各素材データ９０は、シナリオ元データ３２において宣言されている各編集前データとしてユーザに指定されたものとみなされる。そして、要求部１００ａによって、各編集前データと、各素材データ９０（素材データ３４を含む）とが互いに関連づけられ、特定情報９４が作成される。すなわち、全ての編集前データに関するユーザの指定が完了した段階で、要求部１００ａは、シナリオ元データ３２で要求される編集前データの識別子と、記録メディア９に記憶されている各素材データ９０の記録メディア９上の識別子（サーバ装置３のデータベース３０に記憶されている各素材データ３４のデータベース３０上の識別子を含む）とを関連づけた特定情報９４を作成する。
Each
このようにして作成される特定情報９４は、第１の実施の形態における素材指定情報に相当する情報である。特定情報９４は、操作部１２が操作されることにより入力される送信指示に応じて、通信部１９により、サーバ装置３に向けて送信される。なお、特定情報９４がサーバ装置３に向けて送信される際に、当該特定情報９４とともに、当該特定情報９４において編集前データとして関連づけられている素材データ９０と、性能データ９６とがサーバ装置３に向けて送信される。
The
以上が、第２の実施の形態における情報処理システムにおいて再生装置として機能するデジタルスチルカメラ１ａの構成および機能の説明である。次に、第２の実施の形態における情報処理システムにおいて画像処理装置として機能するサーバ装置３の構成および機能について説明する。
The above is the description of the configuration and functions of the digital
図８は、第２の実施の形態におけるサーバ装置３の構成を示すブロック図である。サーバ装置３は、プログラム１１０ｂを実行しつつサーバ装置３の各構成を制御するＣＰＵ４０、プログラム１１０ｂや既に説明したデータベース３０等を記憶する記憶部４１、マウスやキーボード等から成る操作部４２、および、文字や画像を表示するディスプレイ４３を備えており、一般的なコンピュータとして構成されている。
FIG. 8 is a block diagram illustrating a configuration of the
記憶部４１に記憶されている装置性能リスト９７とは、市販されている様々な再生装置（例えばデジタルスチルカメラ１ａ）の識別子（ハードウェアＩＤ）と、各再生装置の性能を示す情報とを関連づけたデータベース構造のデータである。装置性能リスト９７は、性能データ９６に含まれるハードウェアＩＤを検索キーとして、当該ハードウェアＩＤによって識別される再生装置の性能を示す情報を検索することが可能なように構成されている。なお、再生装置の性能を示す情報とは、各再生装置が編集データを再生する際のハードウェアスペックを示す情報であって、例えば、各再生装置のＣＰＵ性能（処理能力）、解像度、ワークメモリ容量あるいは再生可能なデータ形式に関するデータ（備えているコーデックの種類を示すデータ）等である。
The
また、サーバ装置３は、データ変換部４４、画像処理部４５、および、サーバ装置３をネットワーク８に接続する機能を有する通信部４６を備えている。サーバ装置３は、通信部４６を備えることにより、生成された記録データ９５（編集データ）を、デジタルスチルカメラ１ａにネットワーク８を介して出力する。
The
データ変換部４４は、複数種類のコーデック部（図示せず）を備えており、これらを選択的に用いて、ＣＰＵ４０（図９：画像生成部１０２ａおよび音声生成部１０３ａ）によって作成される編集データを、所定のデータ形式に変換し、記録データ９５を生成する機能を有している。すなわち、データ変換部４４は、第１の実施の形態におけるＡ／Ｖコーデック１７１に相当する機能を有している。ただし、Ａ／Ｖコーデック１７１と異なり、データ変換部４４は、１種類のデータ形式だけでなく、一般的に広く採用されている多様なデータ形式に対応できるだけの機能（コーデック部）を有している。
The
データ変換部４４は、記録データ９５を生成する際に、デジタルスチルカメラ１ａから送信され記憶部４１に記憶されている性能データ９６を参照し、予め記憶部４１に記憶されている装置性能リスト９７を検索して、記録データ９５を再生するデジタルスチルカメラ１ａの性能に関するデータを取得する。
The
画像処理部４５は、第１の実施の形態における画像処理部１８に相当する構成であり、画像処理部１８と同様に、画像データを解析して被写体の動きや形状等を判定する画像認識回路と、画像の合成や補間、変換等の様々な加工を行う画像加工回路とを備えている。
The
図９は、第２の実施の形態におけるサーバ装置３の機能ブロックをデータの流れとともに示す図である。図９に示すシナリオ解析部１０１ａ、画像生成部１０２ａ、および、音声生成部１０３ａは、主にＣＰＵ４０がプログラム１１０ｂに従って動作することにより実現される機能ブロックである。
FIG. 9 is a diagram illustrating functional blocks of the
シナリオ解析部１０１ａは、デジタルスチルカメラ１ａから送信された特定情報９４と、シナリオ元データ３２とに基づいて、記憶部４１に記憶されている素材データ３４，９０の中から当該シナリオ元データ３２において要求される編集前データを特定する。また、シナリオ解析部１０１ａは、編集前データとして特定された素材データ３４，９０の識別子と、編集前データに対して実行すべきデータ処理を示す識別子とを、それぞれに関連づけられている編集前データの識別子を仲立ちにして、互いに関連づけ、シナリオデータを作成する。第２の実施の形態におけるシナリオデータとは、シナリオ元データ３２と、特定情報９４とに基づいてシナリオ解析部１０１ａによって作成されるデータである。
Based on the
このようなシナリオデータが作成されることによって、編集データを作成するために必要な全ての素材データ３４，９０が特定され、かつ、各素材データ３４，９０に対するデータ処理が特定される。
By creating such scenario data, all
さらに、シナリオ解析部１０１ａは、作成する編集データにおける映像を構成する素材データ３４，９０の識別子と、当該素材データ３４，９０に関連づけられたデータ処理の識別子とを、編集データにおける順序に従って、画像生成部１０２ａに映像シナリオデータとして伝達する。一方で、作成する編集データにおいて、音声に係る素材データ３４，９０の識別子と、当該素材データ３４，９０に関連づけられたデータ処理の識別子とを、編集データにおける順序に従って、音声生成部１０３ａに音声シナリオデータとして伝達する。
Further, the
画像生成部１０２ａは、シナリオ解析部１０１ａから伝達される映像シナリオデータを参照しつつ、そこに記述されている素材データ３４，９０の識別子に基づいて記憶部４１から該当する素材データ３４，９０を読み出す。そして、シナリオ解析部１０１ａから伝達された映像シナリオデータを参照しつつ、当該素材データ３４，９０に関連づけられたデータ処理の識別子に応じて、当該素材データ３４，９０に対して行うべきデータ処理を画像処理部４５を使用しつつ実行し、編集データ（より詳しくは編集データのうちの映像に係るデータ）を生成する。さらに、画像生成部１０２ａは、生成した映像に係る編集データをデータ変換部４４に伝達する。
The
音声生成部１０３ａは、シナリオ解析部１０１ａから伝達される音声シナリオデータを参照しつつ、そこに記述されている素材データ３４，９０の識別子に基づいて記憶部４１から該当する素材データ３４，９０を読み出す。そして、シナリオ解析部１０１ａから伝達された音声シナリオデータを参照しつつ、当該素材データ３４，９０に関連づけられたデータ処理の識別子に応じて、当該素材データ３４，９０に対して行うべきデータ処理を実行し、編集データ（より詳しくは編集データのうちの音声に係るデータ）を生成する。さらに、音声生成部１０３ａは、生成した音声に係る編集データをデータ変換部４４に伝達する。
The
以上が第２の実施の形態における情報処理システムの構成および機能の説明である。次に、情報処理システムによって編集データを作成し再生する方法について説明する。 The above is the description of the configuration and functions of the information processing system in the second embodiment. Next, a method for creating and reproducing edit data by the information processing system will be described.
図１０は、第２の実施の形態におけるデジタルスチルカメラ１ａにＧＵＩデータ３３をダウンロードする画像処理方法を示す流れ図である。
FIG. 10 is a flowchart illustrating an image processing method for downloading the
ユーザは、デジタルスチルカメラ１ａの操作部１２を操作して、プログラム１１０ａを起動し（ステップＳ１５）、ネットワーク８を介してデジタルスチルカメラ１ａからサーバ装置３にアクセスする（ステップＳ１６）。これにより、デジタルスチルカメラ１ａの液晶パネル１６に、データベース３０に登録されているテーマ（各シナリオ元データ３２に関連づけられている）の一覧が表示される。
The user operates the
次に、ユーザは、表示されたテーマの一覧から、所望のテーマを選択する（ステップＳ１７）。これにより、シナリオ元データ３２、ＧＵＩデータ３３および素材データ３４が選択される。
Next, the user selects a desired theme from the displayed list of themes (step S17). As a result, the
ユーザによるテーマの選択が完了すると、選択されたテーマに応じて、選択されたＧＵＩデータ３３がデジタルスチルカメラ１ａにダウンロードされ（ステップＳ１８）、記録メディア９に格納される（ステップＳ１９）。
When the selection of the theme by the user is completed, the selected
ＧＵＩデータ３３のダウンロードが完了すると、デジタルスチルカメラ１ａはサーバ装置３とのデータ通信を終了する。これにより、ＧＵＩデータ３３がデジタルスチルカメラ１ａに格納され、準備が完了する。
When the download of the
図１１は、第２の実施の形態におけるデジタルスチルカメラ１ａにおいて、素材データ３４，９０を特定する画像処理方法を示す流れ図である。なお、図１１に示す工程が開始されるまでに、図１０に示した処理が１回は行われており、少なくとも１つのＧＵＩデータ３３がダウンロードされ、記録メディア９に格納されているものとする。
FIG. 11 is a flowchart showing an image processing method for specifying the
デジタルスチルカメラ１ａの操作部１２が操作され、ユーザによって特定作業の開始が指示されると（ステップＳ２１）、要求部１００ａはＧＵＩデータ３３を参照して、ＧＵＩ画面を表示する（ステップＳ２２）。なお、本実施の形態では、記録メディア９に格納されているいずれか１つのＧＵＩデータ３３を、ユーザが操作部１２を操作して指定することにより、指定されたＧＵＩデータ３３についての特定作業の開始が指示されるものとする。
When the
このとき、要求部１００ａは、要求される編集前データに関するデータを表示するとともに、当該編集前データとして、既に記録メディア９に記憶されている素材データ９０（またはデータベース３０に記憶されている素材データ３４）から選択するか否かを選択するようにユーザに対して要求するメッセージを表示する（ステップＳ２３）。
At this time, the
ユーザは、既に記憶されている素材データ３４，９０を編集前データとして指定する場合は、ステップＳ２３において「選択する」と入力する。これにより要求部１００ａはステップＳ２３においてＹｅｓと判定し、ＧＵＩ画面として選択画面を液晶パネル１６に表示する（ステップＳ２４）。なお、素材データ３４から選択すべき編集前データの場合には、デジタルスチルカメラ１ａはサーバ装置３にアクセスし、サーバ装置３から該当する素材データ３４の一覧を取得して選択画面に表示する。
When the user designates the already stored
選択画面が表示されると、ユーザは、一覧表示される素材データ３４，９０から適当なデータを特定するための特定情報を入力することにより、編集前データとしての素材データ３４，９０を選択する（ステップＳ２５）。これにより、素材データ３４，９０の中からシナリオ元データ３２において要求される編集前データが１つ特定され、特定情報９４の１レコードが作成される。
When the selection screen is displayed, the user selects the
一方、ユーザが新たに素材データ９０を取得しようと所望する場合は、ステップＳ２３において「選択しない」と入力する。これにより要求部１００ａはステップＳ２３においてＮｏと判定し、ＧＵＩ画面として取得画面を液晶パネル１６に表示させる（ステップＳ２６）。取得画面が表示されると、ユーザは取得画面に表示される撮像指示情報（または録音指示情報）に従って、撮像（または録音）を行うように操作部１２を操作し、これにより撮像（または録音）が行われる（ステップＳ２７）。撮像（または録音）により取得された素材データ９０は、要求部１００ａによって、シナリオ元データ３２において要求される編集前データの１つとして特定され、特定情報９４の１レコードが作成される。
On the other hand, if the user desires to newly acquire the
次に、要求部１００ａは、ＧＵＩデータ３３を参照することにより、全ての編集前データが特定されたか否かを判定する（ステップＳ２８）。要求部１００ａは、シナリオ元データ３２において要求されている編集前データのうち、未だ特定されていない編集前データが存在する場合はステップＳ２８においてＮｏと判定し、ステップＳ２２からの処理を繰り返す。
Next, the
全ての編集前データが特定されていれば、要求部１００ａはステップＳ２８においてＹｅｓと判定し、作成された特定情報９４に、ＧＵＩデータ３３を特定する識別子（以下、「ＧＵＩデータ識別子」と称する。）を含めて、特定作業を終了する。
If all the pre-edit data are specified, the
図１２は、第２の実施の形態において記録データ９５を作成する画像処理方法を示す流れ図である。なお、図１２に示す工程が実行されるまでに、少なくとも図１１に示す特定作業が１回は実行されており、少なくとも１つのＧＵＩデータ３３について特定情報９４が作成されているものとする。
FIG. 12 is a flowchart showing an image processing method for creating the
まず、デジタルスチルカメラ１ａの操作部１２がユーザによって操作され、編集作業の開始が指示されると（ステップＳ３１）、ＣＰＵ１０が記録メディア９の空き容量を検出する（ステップＳ３２）。さらに、ＣＰＵ１０は、検出した空き容量と、ハードウェアＩＤとに基づいて性能データ９６を作成する（ステップＳ３３）。
First, when the
次に、編集作業の開始において指定された特定情報９４と、特定情報９４において特定されている素材データ９０と、ステップＳ３３において作成された性能データ９６とが、デジタルスチルカメラ１ａからサーバ装置３に送信される（ステップＳ３４）。
Next, the
サーバ装置３においてこれらのデータが受信されると、シナリオ解析部１０１ａが特定情報９４に含まれるＧＵＩデータ識別子に基づいてシナリオ元データ３２を特定する。さらに、シナリオ解析部１０１ａは、特定したシナリオ元データ３２を参照しつつ、特定情報９４において編集前データとして特定された各素材データ３４，９０と、各素材データ３４，９０に対して実行すべきデータ処理との関連づけを行い（ステップＳ３５）、シナリオデータを生成する。
When these data are received by the
素材データ３４，９０とデータ処理との関連づけが完了すると、シナリオ解析部１０１ａが、シナリオデータを映像シナリオデータまたは音声シナリオデータに分類しつつ、画像生成部１０２ａおよび音声生成部１０３ａにそれぞれ伝達する。これにより、画像生成部１０２ａおよび音声生成部１０３ａが、素材データ３４，９０にデータ処理を実行して編集データを生成する（ステップＳ３６）。
When the association between the
画像生成部１０２ａおよび音声生成部１０３ａにおいて生成された編集データ（未圧縮のストリーム情報）は、データ変換部４４に伝達される。データ変換部４４は、性能データ９６に含まれるハードウェアＩＤを検索キーとして装置性能リスト９７を検索することにより、特定情報９４を送信したデジタルスチルカメラ１ａ（この後作成される記録データ９５を再生する再生装置）の性能に関する情報（性能データ９６に含まれる空き容量に関する情報を含む）を取得する（ステップＳ３７）。
The edit data (uncompressed stream information) generated by the
次に、データ変換部４４は、取得した性能に関する情報に基づいて、作成する記録データ９５のデータ形式（ＭＰＥＧ形式、ＪＰＥＧ形式、モーションＪＰＥＧ形式、ＭＰ３形式等）やデータサイズ（圧縮率や画素数、動画におけるフレーム数等）等を決定し、デジタルスチルカメラ１ａに最適な記録データ９５を生成する（ステップＳ３８）。
Next, the
さらに、サーバ装置３は、作成した記録データ９５を、デジタルスチルカメラ１ａに向けて送信し（ステップＳ３９）、当該記録データ９５はデジタルスチルカメラ１ａの記録メディア９に保存される。記録データ９５は、データ変換部４４によって、記録メディア９の空き容量を考慮して作成されており、送信された記録データ９５のデータサイズは記録メディア９の空き容量以下となっている。したがって、記録メディア９の空き容量不足によって、記録データ９５がデジタルスチルカメラ１ａにおいて、受信不能となることを防止できる。
Further, the
記録データ９５が記録メディア９に格納された後は、ユーザの再生指示に応じて、記録メディア９に記憶された記録データ９５がデータ変換部１７ａ（ＪＰＥＧコーデック１７０および音声コーデック１７２）によってエンコードされ、スピーカ１５や液晶パネル１６に再生される（ステップＳ４０）。記録データ９５は、デジタルスチルカメラ１ａの性能に応じて作成されているため、例えば、記録データ９５がデジタルスチルカメラ１ａにおいて再生不能なデータ形式であったり、ＣＰＵ１０の処理能力不足であるといった不都合が生じることがない。
After the
第１の実施の形態における情報システムのように、再生装置となるデジタルスチルカメラ１を画像処理装置として兼用する構成とした場合、記録データ９３をデジタルスチルカメラ１に適したデータとなるように作成することは、デジタルスチルカメラ１が自装置の性能を把握しているため、比較的容易である。しかしながら、本来は撮像装置として構成されるデジタルスチルカメラ１ａに高性能のコーデック（データ変換部１７）を搭載することはコストの面で困難な場合がある。そこで、第２の実施の形態における情報処理システムのように、記録データ９５の作成等の比較的高負荷の処理をサーバ装置３が担うことにより、比較的性能の低いデジタルスチルカメラ１ａにおいても記録データ９５を楽しむことが可能となる。
When the digital
一方、第２の実施の形態における情報処理システムのように、再生装置以外の装置（サーバ装置３）を画像処理装置（特に不特定多数の再生装置に対して記録データ９５を生成する画像処理装置）として構成する場合、画像処理装置において作成した記録データ９５が当該記録データ９５を再生する再生装置において実際に再生可能（あるいはユーザの不快感なく再生可能）であるとは限らない。例えば、デジタルスチルカメラ１ａが備えるデータ変換部１７ａでは、ＭＰＥＧ形式のデータをエンコードすることはできないため、記録データ９５がＭＰＥＧ形式で作成されていると、当該記録データ９５を再生することができない。
On the other hand, as in the information processing system in the second embodiment, a device other than the playback device (server device 3) is used as an image processing device (particularly an image processing device that generates recording
しかしながら、第２の実施の形態における画像処理装置であるサーバ装置３は、記録データ９５を再生するデジタルスチルカメラ１ａの性能に関する情報を取得することにより、デジタルスチルカメラ１ａに適した記録データ９５を作成することができる。
However, the
なお、第２の実施の形態において、素材データ３４に関する特定は、素材データ９０に関する特定作業と並行して実行されるように説明したが、これに限定されるものではない。例えば、ＧＵＩデータ３３をダウンロードするとき（あるいは特定情報９４をサーバ装置３に送信するためにサーバ装置３にアクセスしたとき）に、素材データ３４についての特定作業を実行するようにしてもよい。
In the second embodiment, the specification related to the
また、第１の実施の形態において、デジタルスチルカメラ１がサーバ装置２との間でデータのやりとりを行う構成としては無線通信に限定されるものではないと説明したが、第２の実施の形態においても同様である。例えば、必要に応じてデジタルスチルカメラ１ａを専用ケーブルでコンピュータに接続し、当該コンピュータがネットワーク８に接続する構成としてもよい。このような構成とした場合、例えば、デジタルスチルカメラ１ａに接続されるコンピュータを再生装置として構成してもよいし、当該コンピュータを画像処理装置として構成してもよい。
In the first embodiment, the configuration in which the digital
また、第２の実施の形態では、性能データ９６に含まれるハードウェアＩＤによって装置性能リスト９７を検索することにより、デジタルスチルカメラ１ａの性能に関する情報を取得すると説明した。しかし、装置性能リスト９７に格納されている情報をそのままデジタルスチルカメラ１ａにおいて性能データ９６に含めるように構成してもよい。その場合、サーバ装置３は、予めデータ（装置性能リスト９７に相当するデータ）を記憶しておく必要がない。
Further, in the second embodiment, it has been described that the information about the performance of the digital
＜３． 変形例＞
以上、本発明の実施の形態について説明してきたが、本発明は上記実施の形態に限定されるものではなく様々な変形が可能である。
<3. Modification>
Although the embodiments of the present invention have been described above, the present invention is not limited to the above embodiments, and various modifications can be made.
例えば、上記実施の形態における機能ブロックはプログラム１１０，１１０ａ，１１０ｂ（ソフトウェア）によって実現される例で説明したが、これらの機能ブロックは専用の論理回路（ハードウェア）として実現されてもよい。一方、上記実施の形態において論理回路により構成されると説明したデータ変換部１７，４４や画像処理部１８，４５等の各構成の一部または全部をソフトウェアによって実現するように構成してもよい。
For example, the functional blocks in the above-described embodiment have been described as examples realized by the
また、デジタルスチルカメラ１，１ａで使用されるコンテンツデータ２１，３１はサーバ装置２，３によってネットワーク８を介して提供されると説明したが、例えば、記録メディア９によって提供されてもよい。すなわち、コンテンツデータ２１，３１を記憶した記録メディア９が店頭等において配布され、これをデジタルスチルカメラ１，１ａに装着して利用してもよい。
Further, the
また、要求部１００，１００ａがＧＵＩデータ２３，３３を実行することにより提供されるのは、液晶パネル１６に出力される。しかし、例えば、スピーカ１５に音声ガイダンスを再生させるように構成してもよい。すなわち、ＧＵＩに限らず、ＵＩを提供するデータを作成してもよい。
Further, what is provided by the
また、上記実施の形態では、デジタルスチルカメラ１，１ａにおいて取得され、素材データ９０として指定される音声データとして録音データ９２についてのみ説明した。しかし、指定の対象となる音声データは必ずしもデジタルスチルカメラ１，１ａにおいて録音されたデータに限られるものではなく、例えば、他のサイト等から別途ダウンロードされた音楽ファイルであってもよい。すなわち、ユーザは、予め好みの曲を別途ダウンロードして記録メディア９に格納しておくことにより、編集データに使用するＢＧＭとして録音データ９２以外の音声データを指定することができる。この場合、ユーザはデジタルスチルカメラ１，１ａのマイク１３を使ってわざわざ好みの曲を録音する必要がない。
In the above embodiment, only the
１，１ａ デジタルスチルカメラ
１０，４０ ＣＰＵ
１００，１００ａ 要求部
１０１，１０１ａ シナリオ解析部
１０２，１０２ａ 画像生成部
１０３，１０３ａ 音声生成部
１１，４１ 記憶部
１１０，１１０ａ，１１０ｂ プログラム
１２，４２ 操作部
１３ マイク
１４ 撮像部
１５ スピーカ
１６ 液晶パネル
１７，１７ａ，４４ データ変換部
１８，４５ 画像処理部
１９，４６ 通信部
２，３ サーバ装置
２０，３０ データベース
２１，３１ コンテンツデータ
２２，３２ シナリオ元データ
２３，３３ ＧＵＩデータ
２４，３４，９０ 素材データ
４３ ディスプレイ
８ ネットワーク
９ 記録メディア
９１ 撮像データ
９２ 録音データ
９３，９５ 記録データ
９４ 特定情報
９６ 性能データ
９７ 装置性能リスト
1,1a Digital still
100,
Claims (11)
素材データとオペレータにより予め作成されるシナリオ元データとを記憶する記憶手段と、
前記シナリオ元データに基づいて、前記記憶手段に記憶された素材データの中から前記シナリオ元データにおいて要求される編集前データを特定するとともに、編集前データとして特定された素材データと前記編集前データに対して実行すべきデータ処理とを互いに関連づけるシナリオ解析手段と、
前記シナリオ解析手段によりデータ処理が関連づけられた素材データに前記データ処理を実行して編集データを生成する生成手段と、
を備える画像処理装置。 An image processing apparatus for creating edit data,
Storage means for storing material data and scenario source data created in advance by an operator;
Based on the scenario source data, the pre-edit data required in the scenario source data is specified from the material data stored in the storage means, and the material data and the pre-edit data specified as the pre-edit data Scenario analysis means for associating data processing to be executed with respect to each other;
Generating means for generating editing data by executing the data processing on the material data associated with the data processing by the scenario analysis means;
An image processing apparatus comprising:
前記シナリオ元データにおいて要求される編集前データを特定するための特定情報を入力するようにユーザに対して要求する要求手段と、
前記要求手段の要求に応じてユーザが入力した特定情報を受け付ける操作手段と、
をさらに備え、
前記シナリオ解析手段は、前記特定情報に基づいて編集前データを特定することを特徴とする画像処理装置。 The image processing apparatus according to claim 1,
Request means for requesting the user to input specific information for specifying pre-edit data required in the scenario source data;
Operation means for receiving specific information input by a user in response to a request from the request means;
Further comprising
The image processing apparatus characterized in that the scenario analysis means specifies pre-edit data based on the specifying information.
被写体を撮像して撮像データを生成する撮像手段をさらに備え、
前記要求手段は、撮像指示情報を出力することにより前記撮像手段による撮像をユーザに対して要求するとともに、前記要求に応じて行われる撮像により生成される撮像データを、前記シナリオ元データにおいて要求される編集前データとして特定するための特定情報を生成することを特徴とする画像処理装置。 The image processing apparatus according to claim 2,
It further comprises imaging means for imaging the subject and generating imaging data,
The requesting unit requests the user to capture an image by the imaging unit by outputting imaging instruction information, and imaging data generated by imaging performed in response to the request is requested in the scenario source data. An image processing apparatus for generating identification information for identification as pre-edit data.
周囲の音声を録音して録音データを生成する録音手段をさらに備え、
前記要求手段は、録音指示情報を出力することにより前記録音手段による録音をユーザに対して要求するとともに、前記要求に応じて行われる録音により生成される録音データを、前記シナリオ元データにおいて要求される編集前データとして特定するための特定情報を生成することを特徴とする画像処理装置。 The image processing apparatus according to claim 2 or 3,
It further comprises a recording means for recording ambient sound and generating recording data,
The requesting unit requests the user to record by the recording unit by outputting recording instruction information, and recording data generated by recording performed in response to the request is requested in the scenario source data. An image processing apparatus for generating identification information for identification as pre-edit data.
前記生成手段により生成された編集データを再生する再生手段をさらに備えることを特徴とする画像処理装置。 The image processing apparatus according to claim 1, wherein:
An image processing apparatus, further comprising: a reproducing unit that reproduces the editing data generated by the generating unit.
前記生成手段により生成された編集データを記録データとして保存する保存手段をさらに備えることを特徴とする画像処理装置。 The image processing apparatus according to claim 1, wherein
An image processing apparatus, further comprising: a storage unit that stores the editing data generated by the generation unit as recording data.
オペレータがシナリオ元データを予め作成する工程と、
素材データと前記シナリオ元データとを記憶する工程と、
前記シナリオ元データに基づいて、前記素材データの中から前記シナリオ元データにおいて要求される編集前データを特定する工程と、
編集前データとして特定された素材データと前記編集前データに対して実行すべきデータ処理とを互いに関連づける工程と、
データ処理が関連づけられた素材データに前記データ処理を実行して編集データを生成する工程と、
を有する画像処理方法。 An image processing method for creating edit data,
A process in which the operator creates scenario source data in advance;
Storing the material data and the scenario source data;
Identifying pre-edit data required in the scenario source data from the material data based on the scenario source data;
Associating material data identified as pre-edit data with data processing to be performed on the pre-edit data;
Executing the data processing on the material data associated with the data processing to generate edit data;
An image processing method.
素材データとオペレータにより予め作成されるシナリオ元データとを記憶する記憶手段と、
前記シナリオ元データに基づいて、前記記憶手段に記憶された素材データの中から前記シナリオ元データにおいて要求される編集前データを特定するとともに、編集前データとして特定された素材データと前記編集前データに対して実行すべきデータ処理とを互いに関連づけるシナリオ解析手段と、
前記シナリオ解析手段によりデータ処理が関連づけられた素材データに前記データ処理を実行して編集データを生成する生成手段と、
を備える画像処理装置として機能させることを特徴とするプログラム。 A program executed by a computer, wherein execution of the program by the computer causes the computer to
Storage means for storing material data and scenario source data created in advance by an operator;
Based on the scenario source data, the pre-edit data required in the scenario source data is specified from the material data stored in the storage means, and the material data and the pre-edit data specified as the pre-edit data Scenario analysis means for associating data processing to be executed with respect to each other;
Generating means for generating editing data by executing the data processing on the material data associated with the data processing by the scenario analysis means;
A program for causing a computer to function as an image processing apparatus.
素材データとオペレータにより予め作成されるシナリオ元データとを記憶する記憶手段と、
前記シナリオ元データに基づいて、前記記憶手段に記憶された素材データの中から前記シナリオ元データにおいて要求される編集前データを特定するとともに、編集前データとして特定された素材データと前記編集前データに対して実行すべきデータ処理とを互いに関連づけるシナリオ解析手段と、
編集データを再生する再生装置に関する性能データを取得する取得手段と、
前記取得手段により取得された性能データに応じて、前記シナリオ解析手段によりデータ処理が関連づけられた素材データに前記データ処理を実行して編集データを生成する生成手段と、
を備える画像処理装置。 An image processing apparatus for creating edit data,
Storage means for storing material data and scenario source data created in advance by an operator;
Based on the scenario source data, the pre-edit data required in the scenario source data is specified from the material data stored in the storage means, and the material data and the pre-edit data specified as the pre-edit data Scenario analysis means for associating data processing to be executed with respect to each other;
Acquisition means for acquiring performance data relating to a playback device for playing back edited data;
In accordance with the performance data acquired by the acquisition means, a generation means for generating edit data by executing the data processing on the material data associated with the data processing by the scenario analysis means,
An image processing apparatus comprising:
前記生成手段により生成された編集データを前記再生装置に出力する出力手段をさらに備えることを特徴とする画像処理装置。 The image processing apparatus according to claim 9,
An image processing apparatus, further comprising: an output unit that outputs the editing data generated by the generation unit to the playback device.
前記性能データは、前記再生装置の識別子、処理能力、解像度、記憶容量または再生可能なデータ形式に関するデータの少なくとも１つを含むことを特徴とする画像処理装置。 The image processing apparatus according to claim 9 or 10,
The image processing apparatus, wherein the performance data includes at least one of data relating to an identifier, processing capability, resolution, storage capacity, or reproducible data format of the reproduction apparatus.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009082179A JP2009266215A (en) | 2008-03-31 | 2009-03-30 | Image processor, image processing method, and program |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2008090443 | 2008-03-31 | ||
| JP2009082179A JP2009266215A (en) | 2008-03-31 | 2009-03-30 | Image processor, image processing method, and program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2009266215A true JP2009266215A (en) | 2009-11-12 |
Family
ID=41391918
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2009082179A Pending JP2009266215A (en) | 2008-03-31 | 2009-03-30 | Image processor, image processing method, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2009266215A (en) |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001243496A (en) * | 2000-02-29 | 2001-09-07 | Sony Corp | Device and method for scene description generation, device and method for scene description conversion, device and method for secne description storage, device and method for decoding scene description, user interface system, recording medium and transmission medium |
| JP2003078868A (en) * | 2001-09-04 | 2003-03-14 | Toshiba Corp | Device and program for supporting media work production |
-
2009
- 2009-03-30 JP JP2009082179A patent/JP2009266215A/en active Pending
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001243496A (en) * | 2000-02-29 | 2001-09-07 | Sony Corp | Device and method for scene description generation, device and method for scene description conversion, device and method for secne description storage, device and method for decoding scene description, user interface system, recording medium and transmission medium |
| JP2003078868A (en) * | 2001-09-04 | 2003-03-14 | Toshiba Corp | Device and program for supporting media work production |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9124860B2 (en) | Storing a video summary as metadata | |
| JP5568178B2 (en) | How to summarize videos | |
| US8446490B2 (en) | Video capture system producing a video summary | |
| US20060188237A1 (en) | Electronic visual jockey file | |
| US20060268121A1 (en) | In-camera cinema director | |
| WO2004051999A1 (en) | Video signal processor, video signal recorder, video signal reproducer, video signal processor processing method, video signal recorder processing method, video signal reproducer processing method, recording medium | |
| JP2006086620A (en) | Information processing apparatus and method, and program | |
| US10972811B2 (en) | Image processing device and image processing method | |
| JP2012217144A (en) | Image editing device, image editing method, and program | |
| JP5818599B2 (en) | Movie recording device | |
| JP5283433B2 (en) | Digital still camera, image processing method and program | |
| JP2009272846A (en) | Image processor, image processing method and program | |
| JP2006261957A (en) | Photographic device | |
| JP4466482B2 (en) | Information processing apparatus and method, recording medium, and program | |
| JP2009266215A (en) | Image processor, image processing method, and program | |
| JP6110731B2 (en) | Command input recognition system by gesture | |
| JP5257980B2 (en) | Image processing system, image processing method, and program | |
| JP2005260748A (en) | Electronic camera and control program of electronic camera | |
| JP6463967B2 (en) | Imaging apparatus and control method thereof | |
| JP2008108298A (en) | Reproducing device, reproducing method, and program | |
| JP2009253710A (en) | Image processing system, information processor, and image processing method | |
| JP6218489B2 (en) | Image processing device | |
| JP4616895B2 (en) | Digital still camera with music playback function and image music playback device | |
| JP2014071753A (en) | Photographing device, photographing system, control method, and program | |
| JP5812848B2 (en) | Image processing apparatus and control method thereof |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090727 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120330 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130528 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130702 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20131029 |