JP2009253710A - Image processing system, information processor, and image processing method - Google Patents
Image processing system, information processor, and image processing method Download PDFInfo
- Publication number
- JP2009253710A JP2009253710A JP2008099880A JP2008099880A JP2009253710A JP 2009253710 A JP2009253710 A JP 2009253710A JP 2008099880 A JP2008099880 A JP 2008099880A JP 2008099880 A JP2008099880 A JP 2008099880A JP 2009253710 A JP2009253710 A JP 2009253710A
- Authority
- JP
- Japan
- Prior art keywords
- data
- scenario
- image processing
- recording
- processing system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Facsimiles In General (AREA)
Abstract
Description
本発明は、ユーザによって取得された画像データを含む素材データを加工して、符号化された記録データを生成する技術に関する。 The present invention relates to a technique for processing encoded material data by processing material data including image data acquired by a user.
昨今、カメラ付きの携帯電話やデジタルスチルカメラが広く普及し、一般的なユーザが手軽にデジタル画像データを楽しむようになってきた。そして、これらの画像データを単にディスプレイに静止画として表示させて楽しむだけでなく、音声データや文字データと合成してナレーションを入れたり、様々な特殊効果を施した画像データとして表示させるなど、表示形態が多様化してきた。 Recently, mobile phones with cameras and digital still cameras have become widespread, and general users can easily enjoy digital image data. These image data are not only displayed as still images on the display for enjoyment, but they can also be displayed as image data with various special effects, including narration by synthesizing with audio data and text data. The form has diversified.
従来より、デジタルスチルカメラで撮像した複数の静止画像データを、撮影順に一定時間間隔で表示してスライドショーのような動画像を表示させるための編集データ(ビデオストリーム)を作成する技術が知られている。 2. Description of the Related Art Conventionally, a technique for creating editing data (video stream) for displaying a plurality of still image data captured by a digital still camera at a certain time interval in the order of shooting and displaying a moving image such as a slide show is known. Yes.
一方で、動画像を配したブログの作成、動画投稿サイトへのアップロード、あるいはDVDへの書き込みなど、動画像の利用形態も多様化している。すなわち、編集データを作成したその場で単に視聴するだけでなく、編集データを符号化して保存用の記録データ(例えばMPEGファイル等)を作成しておきたいという要請が強くなっている。 On the other hand, usage forms of moving images are diversifying, such as creating a blog with moving images, uploading to a video posting site, or writing to a DVD. That is, there is a strong demand not only for viewing the edited data on the spot where it was created, but also for creating the recording data for storage (for example, an MPEG file) by encoding the edited data.
ところが、動画像に係る編集データを作成しつつ、これを符号化して記録データを作成するとなると画像処理における演算量や当該画像処理に要する時間が増大するという問題があった。特に、デジタルスチルカメラのように携帯されることが前提となる携帯端末装置では、常に安定した電源供給が望めるわけではなく、画像処理の途中でバッテリがなくなる危険性があるなど、画像処理における消費電力が問題になる。 However, when editing data relating to a moving image is created and recording data is created by encoding the editing data, there is a problem that the amount of calculation in image processing and the time required for the image processing increase. In particular, in portable terminal devices that are supposed to be carried like digital still cameras, it is not always possible to expect a stable power supply, and there is a risk that the battery will run out during image processing. Electricity becomes a problem.
本発明は、上記課題に鑑みてなされたものであり、携帯端末装置に記憶されている素材データから符号化された記録データを安定して作成することを目的とする。 The present invention has been made in view of the above problems, and an object thereof is to stably create recorded data encoded from material data stored in a mobile terminal device.
上記の課題を解決するため、請求項1の発明は、素材データに基づいて符号化された記録データを作成する画像処理システムであって、要求する素材データと前記素材データに対して施すデータ処理との対応関係を示す少なくとも1つのシナリオデータと前記少なくとも1つのシナリオデータにおいて要求される素材データとを事前に記憶する携帯端末装置と、商用電源から電力の供給を受ける情報処理装置と、とを備え、前記携帯端末装置に記憶されている少なくとも1つのシナリオデータの中からユーザによって選択される対象シナリオデータを特定する特定手段と、前記特定手段により特定された対象シナリオデータに基づいて、前記対象シナリオデータにおいて要求される素材データに施されるべきデータ処理を特定しつつ、特定したデータ処理を前記素材データに施して編集データを生成する生成手段と、前記商用電源から電力の供給を受けつつ、前記生成手段により生成された編集データを符号化して記録データを生成する符号化手段とをさらに備えることを特徴とする。
In order to solve the above-mentioned problem, the invention of
また、請求項2の発明は、請求項1の発明に係る画像処理システムであって、前記携帯端末装置は前記商用電源から電力の供給を受ける受給手段をさらに備え、前記符号化手段は、前記携帯端末装置に設けられており、かつ、前記受給手段が前記商用電源から電力の供給を受けているときに記録データの生成を行うことを特徴とする。
Further, the invention of
また、請求項3の発明は、請求項1または2の発明に係る画像処理システムであって、前記符号化手段は、前記情報処理装置に設けられていることを特徴とする。 A third aspect of the present invention is the image processing system according to the first or second aspect of the present invention, wherein the encoding means is provided in the information processing apparatus.
また、請求項4の発明は、請求項1ないし3のいずれかの発明に係る画像処理システムであって、前記符号化手段により生成された記録データを復号化して再生データを生成する復号化手段と、前記復号化手段により生成された再生データを表示する第1表示手段とをさらに備えることを特徴とする。 According to a fourth aspect of the present invention, there is provided an image processing system according to any one of the first to third aspects, wherein the decoding means generates the reproduction data by decoding the recording data generated by the encoding means. And first display means for displaying the reproduction data generated by the decoding means.
また、請求項5の発明は、請求項1ないし4のいずれかの発明に係る画像処理システムであって、前記生成手段により生成された編集データを表示する第2表示手段をさらに備えることを特徴とする。
Further, the invention of claim 5 is the image processing system according to any one of
また、請求項6の発明は、請求項1ないし5のいずれかの発明に係る画像処理システムであって、前記携帯端末装置は被写体を撮像して画像データを生成する撮像手段を備え、前記素材データは、前記撮像手段により生成された画像データを含むことを特徴とする。
The invention according to
また、請求項7の発明は、商用電源からの電力供給を受ける情報処理装置であって、要求する素材データと前記素材データに対して施すデータ処理との対応関係を示す少なくとも1つのシナリオデータと前記少なくとも1つのシナリオデータにおいて要求される素材データとを事前に記憶する記憶手段と、前記少なくとも1つのシナリオデータの中からユーザによって選択される対象シナリオデータを特定する特定手段と、前記特定手段により特定された対象シナリオデータに基づいて、前記対象シナリオデータにおいて要求される素材データに施されるべきデータ処理を特定しつつ、特定したデータ処理を前記素材データに施して編集データを生成する生成手段と、前記生成手段により生成された編集データを符号化して記録データを生成する符号化手段とを備えることを特徴とする。 According to a seventh aspect of the present invention, there is provided an information processing apparatus for receiving power supply from a commercial power source, wherein at least one scenario data indicating a correspondence relationship between requested material data and data processing applied to the material data; Storage means for preliminarily storing material data required in the at least one scenario data; specifying means for specifying target scenario data selected by the user from the at least one scenario data; and the specifying means Generation means for generating edit data by applying the specified data processing to the material data while specifying the data processing to be applied to the material data required in the target scenario data based on the specified target scenario data And encoding data generated by the generating means to generate recording data Characterized in that it comprises a that encoding means.
また、請求項8の発明は、素材データに基づいて符号化された記録データを作成する画像処理方法であって、要求する素材データと前記素材データに対して施すデータ処理との対応関係を示す少なくとも1つのシナリオデータと前記少なくとも1つのシナリオデータにおいて要求される素材データとを事前に記憶する工程と、記憶されている少なくとも1つのシナリオデータの中からユーザによって選択される対象シナリオデータを特定する工程と、特定された対象シナリオデータに基づいて、前記対象シナリオデータにおいて要求される素材データに施されるべきデータ処理を特定しつつ、特定したデータ処理を前記素材データに施して編集データを生成する工程と、商用電源から電力の供給を受けつつ、生成された編集データを符号化して記録データを生成する工程とを有することを特徴とする。
The invention of
請求項1ないし8に記載の発明は、要求する素材データと当該素材データに対して施すデータ処理との対応関係を示す少なくとも1つのシナリオデータと当該少なくとも1つのシナリオデータにおいて要求される素材データとを事前に記憶し、記憶されている少なくとも1つのシナリオデータの中からユーザによって選択される対象シナリオデータを特定し、特定された対象シナリオデータに基づいて、対象シナリオデータにおいて要求される素材データに施されるべきデータ処理を特定しつつ、特定したデータ処理を素材データに施して編集データを生成して、商用電源から電力の供給を受けつつ、生成された編集データを符号化して記録データを生成することにより、安定した電力供給を受けることができ、安定して処理を行うことができる。また、シナリオデータを選択するだけで、所望の記録データを容易に作成することができる。 According to the first to eighth aspects of the present invention, at least one scenario data indicating a correspondence relationship between requested material data and data processing applied to the material data, and material data required in the at least one scenario data, Is stored in advance, target scenario data selected by the user from at least one stored scenario data is specified, and based on the specified target scenario data, material data required in the target scenario data is determined. While specifying the data processing to be performed, the specified data processing is applied to the material data to generate edit data, and the generated edit data is encoded while receiving power from the commercial power supply, and the recording data is By generating, you can receive a stable power supply and perform stable processing. That. Also, desired recording data can be easily created simply by selecting scenario data.
請求項2に記載の発明は、携帯端末装置が商用電源から電力の供給を受ける受給手段をさらに備え、符号化手段は、携帯端末装置に設けられており、かつ、受給手段が商用電源から電力の供給を受けているときに記録データの生成を行うことにより、情報処理装置への負荷を低減できる。 According to a second aspect of the present invention, the mobile terminal device further includes receiving means for receiving power from a commercial power source, the encoding means is provided in the mobile terminal device, and the receiving means receives power from the commercial power source. By generating the recording data while receiving the supply, the load on the information processing apparatus can be reduced.
請求項3に記載の発明は、消費電力の大きい処理を行う構成を、商用電源に接続されている情報処理装置に設けることによって、より安定した処理を実現できる。 According to the third aspect of the present invention, a more stable process can be realized by providing the information processing apparatus connected to the commercial power supply with a configuration for performing a process with large power consumption.
請求項4に記載の発明は、符号化手段により生成された記録データを復号化して再生データを生成する復号化手段と、復号化手段により生成された再生データを表示する第1表示手段とをさらに備えることにより、画像処理システムにおいて再生データを楽しむことができる。 According to a fourth aspect of the present invention, there is provided a decoding unit that decodes the recording data generated by the encoding unit to generate reproduction data, and a first display unit that displays the reproduction data generated by the decoding unit. In addition, it is possible to enjoy the reproduction data in the image processing system.
請求項5に記載の発明は、生成手段により生成された編集データを表示する第2表示手段をさらに備えることにより、例えば、記録データを生成しつつ内容を確認できる。あるいは、記録データを生成せず再生データに相当する画像および音声を楽しむことができる。 According to the fifth aspect of the present invention, it is possible to confirm the contents while generating the recording data, for example, by further including the second display means for displaying the editing data generated by the generating means. Alternatively, it is possible to enjoy an image and sound corresponding to reproduction data without generating recording data.
以下、本発明の好適な実施の形態について、添付の図面を参照しつつ、詳細に説明する。 DESCRIPTION OF EXEMPLARY EMBODIMENTS Hereinafter, preferred embodiments of the invention will be described in detail with reference to the accompanying drawings.
<1. 実施の形態>
図1は、本発明に係る画像処理システム1を含む情報処理システムを示す図である。情報処理システムは、画像処理システム1(デジタルスチルカメラ2)と、例えばコンテンツプロバイダ等に設置されるサーバ装置5とが互いにネットワーク8を介して接続される構成となっている。
<1. Embodiment>
FIG. 1 is a diagram showing an information processing system including an
なお、ネットワーク8としては、インターネットや公衆網等が該当する。また、サーバ装置5の台数は1台に限定されるものではなく、例えば複数のサーバ装置5がネットワーク8に接続されていてもよい。
The
サーバ装置5は、データベース50を備えた一般的なコンピュータとして構成されており、先述のようにネットワーク8に接続されている。サーバ装置5のデータベース50には、シナリオ元データ52、GUIデータ53および素材データ54(以下、これらを「コンテンツデータ51」と総称する場合がある。)が予め保存されている。なお、コンテンツデータ51は、シナリオ元データ52、GUIデータ53および素材データ54を全て含んでいる必要はなく、それらのうちのいずれかであってもよい。
The server device 5 is configured as a general computer including a
コンテンツデータ51は、画像処理に関する専門知識を有するオペレータ(イラストレータやカメラマン、プログラマ等)によって予め作成されたデータである。したがって、コンテンツデータ51は、一般ユーザによって作成されるデータに比べて品質の高いデータとして提供される。コンテンツデータ51のうちのシナリオ元データ52およびGUIデータ53は、画像処理システム1(デジタルスチルカメラ2)において実行されるデータであって、例えば、スクリプト言語等で記述されるテキストデータである。
The
シナリオ元データ52は、結婚式やゴルフコンペ、運動会、卒業式といった様々なテーマごとにそれぞれ制作されており、対応するテーマと関連づけられて保存されている。したがって、ユーザは具体的なテーマを選択するだけで、個々のシナリオ元データ52の内容を詳細に理解していなくても、所望の編集データを作成するためのシナリオ元データ52を複数のシナリオ元データ52の中から容易に指定することが可能である。
The
なお、シナリオ元データ52と関連づけられるテーマは、上記に挙げたものに限定されるものではないが、ユーザが状況に応じて容易に思いつき、かつ、内容を容易に想像できるものが好ましい。また、編集データとは、ユーザが作成しようとする目的のデータであって、本実施の形態では画像(静止画像または動画像)や音声を表現した未圧縮のストリーム情報である。
The themes associated with the
また、各シナリオ元データ52には対応するGUIデータ53が関連づけられている。対応づけられるGUIデータ53は、各シナリオ元データ52にとって専用のGUIデータ53であってもよいし、複数のシナリオ元データ52において共通に使用される汎用のGUIデータ53であってもよい。このようにシナリオ元データ52にGUIデータ53が関連づけられていることにより、ユーザはテーマを選択するだけで、シナリオ元データ52を指定できるとともに、当該シナリオ元データ52に必要なGUIデータ53も特定される。
Each
シナリオ元データ52には、目的の編集データに必要な編集前データ(画像データや音声データ、フォントデータ等)の識別子が記述されるとともに、各編集前データに対して実行すべきデータ処理が各編集前データごとに記述される。すなわち、シナリオ元データ52には、編集前データの識別子とデータ処理とが互いに関連づけられて記述される。
In the scenario
シナリオ元データ52に記述されるデータ処理として、例えば、画像を表現した編集前データについて、どのような画像効果(Effect)を施すか、どのような画像合成(Synthesis)を行うか、あるいはどのように画像移行(Transition)させるか等が想定され、対応する編集前データに応じて画像処理の専門家であるオペレータによって選択され記述される。また、音声を表現した編集前データについても、再生のタイミングや音量等に関する設定情報(データ処理)が記述される。
As the data processing described in the scenario
なお、シナリオ元データ52に識別子が記述される編集前データのうち、オペレータが制作したデータ(サーバ装置5に存在する素材データ54)については、当該シナリオ元データ52において当該素材データ54との関連づけが既にされている。したがって、シナリオ元データ52が特定されると、特定されたシナリオ元データ52において使用される素材データ54も編集前データとして特定される。
Of the pre-edit data whose identifier is described in the
このように、コンテンツプロバイダは、ユーザがテーマを選択するだけで、サーバ装置5上の必要なシナリオ元データ52、GUIデータ53および素材データ54が容易に特定されるように、それぞれの関連づけを行って提供する。
In this way, the content provider associates each of the
GUIデータ53は、対応するシナリオ元データ52に応じて、適切なGUIをデジタルスチルカメラ2のユーザに提供するものである。すなわち、GUIデータ53を実行することにより、デジタルスチルカメラ2は、シナリオ元データ52において要求される編集前データを素材データ90(図2)の中から特定するための特定情報を入力するようにユーザに対して要求し、デジタルスチルカメラ2におけるユーザ操作を支援する。例えば、対応するシナリオ元データ52で要求されている編集前データのうち、ユーザが指定(選択)しなければならないデータについては、その入力を促したり、当該編集前データとして適切な素材データ90をユーザが容易に指定できるように、当該編集前データに関する情報を表示したりする。
The
素材データ54は、デジタルスチルカメラ2において加工される素材となるデータであって、画像データや音声データ、フォントデータ等である。素材データ54に含まれる画像データとしては、例えば、アニメキャラクタや映画の名場面、名所を撮影した風景画像、イラスト画像等であり、静止画像に限らず動画像であってもよい。また、音声データとしては、例えば、声優や俳優の声、BGM、動物の鳴き声、楽器の音、効果音等であり、現実に録音されたデータであってもよいし、機械的に合成された音を出力するためのデータであってもよい。素材データ54は、各シナリオ元データ52に最適なデータとして、専門家のオペレータによって制作され収集されたデータである。
The
図1に示すように、画像処理システム1は、携帯端末装置として構成されるデジタルスチルカメラ2と、商用電源から電力の供給を受ける情報処理装置4とを備えている。そして、画像処理システム1は、デジタルスチルカメラ2と情報処理装置4とがクレードル32を介して接続された構成となっている。
As shown in FIG. 1, the
先述のように、デジタルスチルカメラ2とサーバ装置5とは互いにデータ通信によるデータの送受信が可能である。すなわち、本実施の形態における画像処理システム1はデジタルスチルカメラ2によってネットワーク8に接続されているが、もちろん情報処理装置4がネットワーク8に接続されていてもよい。
As described above, the digital
図2は、デジタルスチルカメラ2の構成を示すブロック図である。図2に示すように、サーバ装置5からダウンロードされたシナリオ元データ52、GUIデータ53および素材データ54は、記録メディア9に格納される。
FIG. 2 is a block diagram showing a configuration of the digital
なお、撮像データ91および録音データ92は、デジタルスチルカメラ2においてユーザにより撮像または録音され生成されるユーザ由来(サーバ装置5から提供されるデータではないという意味)のデータである。したがって、記録メディア9に記憶される素材データ90は、図2に示すように、オペレータによって制作される素材データ54の他に、撮像データ91および録音データ92を含んでいる。先述のように、素材データ54はシナリオ元データ52によって特定されダウンロードされたデータであるから、シナリオ元データ52において要求されている編集前データである。しかし、撮像データ91および録音データ92はシナリオ元データ52とは無関係に取得されたデータを含んでおり、これらのうちのいずれが編集前データとなるかを記録メディア9上で区別することは本実施の形態においてはできない。すなわち、本実施の形態においては、素材データ90は編集前データ以外のデータを含んでいる。
Note that the
また、デジタルスチルカメラ2は、図1に示すように可搬性の記録メディア9を着脱可能に設計されており、当該記録メディア9に記憶されているデータを読み出して利用したり、デジタルスチルカメラ2において生成したデータ(あるいはダウンロードしたデータ)を当該記録メディア9に記憶させたりすることが可能である。本実施の形態では記録メディア9としてSDカードを採用するが、記録メディア9はこれに限定されるものではなく、例えばPCカードやメモリスティック等であっもよい。
Further, the digital
デジタルスチルカメラ2は、各種データに関する演算処理を行うCPU20と、各種データを必要に応じて適宜記憶する記憶部21とを備えており、一般的なコンピュータとしても構成されている。
The digital
CPU20は、記憶部21のRAMを一時的なワーキングエリアとして使用しつつ、記憶部21のROMに格納されているプログラム210に従って動作することにより、デジタルスチルカメラ2の各構成を制御する。なお、CPU20は、サーバ装置5からダウンロードされて記録メディア9に格納されているシナリオ元データ52およびGUIデータ53を実行する機能も有しているが詳細は後述する。
The
デジタルスチルカメラ2は、各種データを取り込むための構成として、ユーザによって操作される操作部22と、周囲の音声を電気信号に変換することにより録音を行うマイク23と、入射する光を電気信号に変換することにより撮像を行う撮像部24とを備える。
The digital
操作部22は、ユーザがデジタルスチルカメラ2に対して指示を入力するために使用される。操作部22は、例えば、デジタルスチルカメラ2(撮像部24)に撮像を行わせるための指示を入力するシャッターボタン、デジタルスチルカメラ2の動作に必要な設定データ等を入力するためのボタン類、あるいは文字データを入力するためのキー等で構成されている。特に、本実施の形態では、操作部22は、ユーザが、所望のテーマ(シナリオ元データ52)を選択するときや、記録メディア9に記憶されている素材データ90から編集前データを特定するための特定情報を入力するとき等に操作される。
The
マイク23は、先述のように、音声を電気信号に変換する機能を備えており、マイク23によって取得された電気信号はA/D変換された後、例えば、後述するA/Vコーデック271に伝達される。
As described above, the
撮像部24は、レンズ等の光学系と、光学系によって導かれた光を受光して電気信号に変換する複数の光電変換素子(例えばCCD素子)とを備えている。複数の光電変換素子は、アレイ状に配列されており、それぞれが撮像時に受光した光の光量に応じた電気信号を出力する。撮像部24は、ユーザが操作部22(シャッターボタン)を操作することにより撮像を行う。そして、1度の撮像によって複数の光電変換素子から得られたそれぞれの出力信号はA/D変換や色補正等がされた後、1枚の画像を表現したデジタルデータとして、例えば、後述するJPEGコーデック270に伝達される。
The
デジタルスチルカメラ2は、各種データを出力するための構成として、音声データに基づいて生成される電気信号により音声を再生するスピーカ25と、画像データに基づいて画像を表示する液晶パネル26とを備える。
As a configuration for outputting various data, the digital
スピーカ25は、録音データ92、編集データに含まれる音声ストリーム情報、あるいは再生データ(後述)を構成する音声データ等に基づいて音声を再生するための装置である。
The
液晶パネル26は、CPU20からの制御によって必要なデータを画像として表示する表示装置として構成されている。例えば、液晶パネル26は記録メディア9内に記憶されている素材データ90(画像を表現したデータ)や、作成された編集データのうちの映像に関するデータを再生表示するだけでなく、CPU20からの指示に従って所定のメッセージ(文字)等を表示する機能も有している。
The
特に、本実施の形態における液晶パネル26は、CPU20がGUIデータ53を実行することにより提供されるGUI画面や編集データに含まれる画像ストリーム情報、あるいは再生データを構成する画像データ等を表示する機能を有している。
In particular, the
さらに、デジタルスチルカメラ2は、データ変換部27、画像処理部28、カードスロット29、通信部30およびフレキシブル端子31を備えている。
Further, the digital
データ変換部27は、論理回路(ハードウェア)から主に構成され、JPEGコーデック270と、A/Vコーデック271とを備えている。
The
JPEGコーデック270は、画像データのデータ形式をJPEG形式に変換(エンコード)する機能と、JPEG形式の画像データをデコードして例えば液晶パネル26に伝達し表示させる機能とを有している。例えば、JPEGコーデック270は、撮像部24から伝達される画像データをJPEG形式に圧縮された静止画像データに変換して撮像データ91を生成する。JPEGコーデック270により生成された撮像データ91は、記録メディア9に転送され記憶される。
The
A/Vコーデック271は、マイク23によって取得されたデータのデータ形式を例えばMP3形式等にエンコードして録音データ92を生成し記録メディア9に記録させる。また、逆に録音データ92をデコードし例えばスピーカ25に伝達する。また、A/Vコーデック271は、画像データおよび音声データのデータ形式を、例えばMPEG形式等にエンコード(符号化)して記録データ94を生成し記録メディア9に伝達する機能と、MPEG形式等の記録データ94をデコードしてスピーカ25や液晶パネル26に伝達する。
The A /
詳細は図示しないが画像処理部28は、画像データを解析して被写体の動きや形状等を判定する画像認識回路と、画像の合成や補間、変換等の様々な加工を行う画像加工回路とを備えている。
Although not shown in detail, the
カードスロット29は、デジタルスチルカメラ2に記録メディア9を装着する機能を提供するハードウェアインタフェースである。カードスロット29に記録メディア9が装着されることにより、デジタルスチルカメラ2は記録メディア9を記憶装置として使用することが可能となる。
The
通信部30は、デジタルスチルカメラ2を無線通信によりネットワーク8に接続する機能を有している。これにより、デジタルスチルカメラ2は、いつでも(後述するクレードル32に装着されていないときでも)サーバ装置5からコンテンツデータ51をダウンロードすることが可能である。
The
図1に示すように、本実施の形態におけるデジタルスチルカメラ2は、無線通信機能によって必要に応じてネットワーク8に接続することが可能とされており、携帯型の装置として構成されている。このような無線通信機能を実現する通信部30の構成としては、WiFi(Wireless Fidelity)や赤外線通信といった通信規格を採用することが可能である。
As shown in FIG. 1, the digital
フレキシブル端子31は、デジタルスチルカメラ2とクレードル32とを着脱自在に接続するための端子である。詳細は図示しないが、クレードル32にはUSB(Universal Serial Bus)端子が設けられており、USBケーブルを介して情報処理装置4とUSB接続が可能とされている。したがって、本実施の形態におけるデジタルスチルカメラ2は、専用のクレードル32に装着されることにより、フレキシブル端子31、クレードル32およびUSBケーブルを介して情報処理装置4とUSB接続される。
The
このようにデジタルスチルカメラ2と情報処理装置4とがUSB接続されることにより、デジタルスチルカメラ2は、情報処理装置4との間でデータ通信が可能となる。なお、情報処理装置4がネットワーク8に接続する機能を有している場合には、デジタルスチルカメラ2と情報処理装置4との間のデータ通信は、ネットワーク8を介して行われてもよい。
As described above, the digital
USB接続はデバイスに電源を供給することが可能な規格である。そして、情報処理装置4は携帯型の装置ではなく、商用電源に常時接続された装置として構成されている。したがって、デジタルスチルカメラ2をUSBのバスパワードデバイスとして構成することにより、情報処理装置4およびフレキシブル端子31を介してデジタルスチルカメラ2に当該商用電源から電力の供給を行うことが可能となる。すなわち、フレキシブル端子31は、本発明における受給手段に相当する。なお、デジタルスチルカメラ2がフレキシブル端子31およびクレードル32を介して接続可能な構成としては、USB端子で接続される情報処理装置4以外に、例えば、テレビやオーディオ機器、NANDフラッシュメモリやDRAM等の記録媒体等であってもよい。
USB connection is a standard that can supply power to a device. The
デジタルスチルカメラ2は、クレードル32から取り外された場合でも内部に備えるバッテリ(図示せず)によって動作することが可能な携帯端末装置として構成されている。デジタルスチルカメラ2に限らず、撮像装置は商用電源が存在しないような屋外でも自由に撮像が行えるように、携帯型の装置として構成されるのが一般的である。
The digital
図3は、デジタルスチルカメラ2の機能ブロックをデータの流れとともに示す図である。図3に示す要求部100、シナリオ解析部101、画像生成部102および音声生成部103は、主にCPU20が記憶部21に記憶されているプログラム210に従って動作することにより実現される機能ブロックである。
FIG. 3 is a diagram showing functional blocks of the digital
なお、以下の説明では、ユーザによって「テーマ」が既に選択されており、当該選択されたテーマに応じて特定された1つのシナリオ元データ52がサーバ装置5からダウンロードされているものとする。すなわち、図3は、ユーザが操作部22を操作することにより、既にシナリオ元データ52の特定は完了し、特定されたシナリオ元データ52に関連づけられているGUIデータ53および素材データ54も既にダウンロードされ、記録メディア9に記憶されている状態を示している。
In the following description, it is assumed that the “theme” has already been selected by the user, and one
要求部100は、GUIデータ53を参照しつつ、そこに記述されている内容に従って、デジタルスチルカメラ2のユーザに対して必要な情報を入力するように促すGUIを提供する。すなわち、要求部100は、液晶パネル26にメニュー画面や入力画面等を表示させることにより、シナリオ元データ52において要求される編集前データを特定するための特定情報を入力するようにユーザに対して要求する機能を有している。
The
シナリオ元データ52に記述されている編集前データの識別子とは、いわば編集データにおける役名である。そして、各役名にどの俳優(素材データ90)を具体的に割り当てるかは、ユーザが特定情報を入力することにより決定される。ユーザがGUIデータ53によって提供されるGUIに従って入力することにより、編集前データの識別子(役名)と素材データ90の識別子(俳優名)とが関連づけられる。
The identifier of the pre-edit data described in the scenario
したがって、ユーザは、液晶パネル26に表示されるGUI画面によって要求される情報を、当該GUI画面に従って操作部22を操作して入力するだけで、専門的な知識を有していなくても、編集データを作成するために必要な指示をデジタルスチルカメラ2に与えることが可能である。
Therefore, the user can edit the information requested by the GUI screen displayed on the
また、本実施の形態における要求部100は、すでに記録メディア9に記憶されている素材データ90から編集前データとなるデータを選択するように要求するだけではなく、素材収集指示情報をGUI画面に表示することにより、ユーザに対して、編集前データとなる新たな素材データ90を取得するように要求する。例えば、既に撮像され撮り溜めされた過去の撮像データ91を選択させるだけでなく、新たに撮像を行って撮像データ91を取得するよう要求する。
In addition, the
すなわち、要求部100は、例えば、撮像指示情報を液晶パネル26に表示させることにより撮像部24よる撮像をユーザに対して要求するとともに、その要求に応じて行われる撮像により生成される撮像データ91を、シナリオ元データ52において要求される編集前データとして特定するための特定情報を生成する。撮像指示情報は、新たな撮像を行うように指示するメッセージだけでなく、どのような場面、被写体を撮像すればよいか等を指示するメッセージ等を含めることも可能である。
That is, for example, the
なお、要求部100は、GUI画面に従って、ユーザが撮像(あるいは録音)を行って新たに取得したデータを記録メディア9に記憶させる機能も有している。図3では図示していないが、マイク23および撮像部24から要求部100に入力される新たなデータは、JPEGコーデック270またはA/Vコーデック271を介して記録メディア9に転送され素材データ90として記憶される。
Note that the
ユーザからの指示に従って選択あるいは新たに取得された各素材データ90は、シナリオ元データ52において宣言されている各編集前データとしてユーザに指定されたものとみなされ、互いに関連づけが行われて、その情報が要求部100からシナリオ解析部101に伝達される。すなわち、全ての編集前データに関するユーザの指定が完了した段階で、要求部100は、シナリオ元データ52で要求される編集前データの識別子と、記録メディア9に記憶されている各素材データ90の記録メディア9上の識別子(例えば記録メディア9における各素材データ90のファイル名)とを関連づけた情報(以下、「素材指定情報」と称する)をシナリオ解析部101に伝達する。先に示した例えで言えば、素材指定情報とは、役名と俳優名とを関連づけたリスト情報となる。
Each
シナリオ解析部101は、要求部100から伝達される素材指定情報とシナリオ元データ52とに基づいて、記録メディア9に記憶された素材データ90の中から当該シナリオ元データ52において要求される編集前データを特定する。
Based on the material designation information and the
また、シナリオ解析部101は、編集前データとして特定された素材データ90の識別子と、編集前データに対して実行すべきデータ処理を示す識別子とを、それぞれに関連づけられている編集前データの識別子を仲立ちにして、互いに関連づけ、シナリオデータ93を作成し、記録メディア9に記憶させる。すなわち、シナリオデータ93とは、シナリオ元データ52と、素材指定情報とに基づいてシナリオ解析部101によって作成されるデータであって、要求する素材データ90と当該素材データに対して施すデータ処理との対応関係を示すデータである。
In addition, the
このようなシナリオデータが作成されることによって、編集データを作成するために要求される全ての素材データ90が特定され、かつ、各素材データ90に対するデータ処理が特定される。なお、デジタルスチルカメラ2では、様々な場面においてシナリオデータ93が作成される。すなわち、記録メディア9に記憶されているシナリオデータ93は一つとは限らず、複数のシナリオデータ93が存在している場合がある。以下の説明では、複数のシナリオデータ93のうち、作成しようとする編集データに対応したシナリオデータ93を特に「対象シナリオデータ93」と称する。
By creating such scenario data, all
画像生成部102は、対象シナリオデータ93(より詳しくは映像に係る対象シナリオデータ93)を参照しつつ、そこに記述されている素材データ90の識別子に基づいて記録メディア9から該当する素材データ90を読み出す。そして、当該対象シナリオデータ93において当該素材データ90に関連づけられているデータ処理の識別子に応じて、当該素材データ90にデータ処理を施して編集データ(より詳しくは編集データのうちの映像に係るデータ)を生成する。画像生成部102は、生成した映像に係る編集データを液晶パネル26あるいはA/Vコーデック271に伝達する。なお、画像生成部102が素材データ90にデータ処理を施すに当たっては、画像処理部28を適宜使用しつつ実行する。
The
音声生成部103は、対象シナリオデータ93(より詳しくは音声に係る対象シナリオデータ93)を参照しつつ、そこに記述されている素材データ90の識別子に基づいて記録メディア9から該当する素材データ90を読み出す。そして、当該対象シナリオデータ93において当該素材データ90に関連づけられているデータ処理の識別子に応じて、当該素材データ90にデータ処理を施して編集データ(より詳しくは編集データのうちの音声に係るデータ)を生成する。音声生成部103は、生成した音声に係る編集データをスピーカ25あるいはA/Vコーデック271に伝達する。
The
以上がデジタルスチルカメラ2の構成および機能の説明である。次に、デジタルスチルカメラ2を用いて、予めシナリオデータ93と素材データ90とを作成して記録メディア9に記憶させておく方法について説明する。
The above is the description of the configuration and function of the digital
図4は、デジタルスチルカメラ2におけるシナリオデータ作成処理を示す流れ図である。なお、図4に示す状態となるまでに、サーバ装置5には、オペレータによって作成されたコンテンツデータ51が記憶されているものとする。すなわち、画像処理の専門家であるオペレータがシナリオ元データ52を予め作成する工程は、図4に示す各工程の前に既に完了しているものとする。
FIG. 4 is a flowchart showing scenario data creation processing in the digital
まず、ユーザはデジタルスチルカメラ2の操作部22を操作して、所望する状況に応じてテーマを入力する。例えば、結婚式を撮像した素材データ90を編集して編集データを作成しようとする場合、ユーザはテーマとして「結婚式」を入力する。より詳細には、ユーザはサーバ装置5のネットワーク8におけるアドレス等も入力する。
First, the user operates the
これに応じてデジタルスチルカメラ2は通信部30およびネットワーク8を介してサーバ装置5にアクセスし、入力されたテーマ「結婚式」をサーバ装置5に伝達する。サーバ装置5はデジタルスチルカメラ2から伝達されたテーマ「結婚式」をキーワードとしてデータベース50を検索し、当該テーマに関連づけられているシナリオ元データ52を、GUIデータ53および素材データ54とともにデジタルスチルカメラ2に送信する。これによって、コンテンツデータ51(シナリオ元データ52、GUIデータ53および素材データ54)がデジタルスチルカメラ2にダウンロードされ(ステップS1)、記録メディア9に記憶される。
In response to this, the digital
ダウンロードが完了すると、ユーザは操作部22を操作して編集作業の開始を指示する(ステップS2)。この指示に応じて、デジタルスチルカメラ2の要求部100が記録メディア9に格納されたGUIデータ53を参照し、ユーザに必要な入力を促すGUI画面を液晶パネル26に表示させる(ステップS3)。
When the download is completed, the user operates the
このとき、要求部100は、要求される編集前データに関するデータを表示するとともに、当該編集前データとして、既に記録メディア9に記憶されている素材データ90から選択するか否かを選択するようにユーザに対して要求するメッセージを表示する(ステップS4)。
At this time, the
ユーザは、既に記録メディア9に記憶されている素材データ90を指定する場合は、ステップS4において「選択する」旨を入力する。これにより要求部100はステップS4においてYesと判定し、その時点で記録メディア9に記憶されている素材データ90を一覧表示した選択画面をGUI画面として液晶パネル26に表示する(ステップS5)。選択画面が表示されると、ユーザは、一覧表示された素材データ90から適当なデータを特定するための特定情報を入力することにより、編集前データとしての素材データ90を選択する(ステップS6)。
When the user designates the
これにより、素材データ90の中からシナリオ元データ52において要求される編集前データが1つ特定され、素材指定情報の1レコードが作成される。なお、ステップS6が実行される場合とは、要求される素材データ90のうちの1つが既に記録メディア9に記憶されていたことを示す。
As a result, one piece of pre-edit data required in the
一方、ユーザが新たに素材データ90を取得しようと所望する場合は、ステップS4において「選択しない」旨を入力する。これにより要求部100はステップS4においてNoと判定し、GUI画面として取得画面を液晶パネル26に表示させる(ステップS7)。取得画面が表示されると、ユーザは取得画面に表示される撮像指示情報(または録音指示情報)に従って、撮像(または録音)を行うように操作部22を操作し、これにより撮像(または録音)が行われる(ステップS8)。
On the other hand, if the user desires to newly acquire the
ステップS8により取得された素材データ90は、要求部100によって、シナリオ元データ52において要求される編集前データの1つとして特定され、素材指定情報の1レコードが作成される。また、このとき取得された素材データ90は記録メディア9に記憶される。すなわち、ステップS8が実行されることにより、1つの編集データを作成するために要求される素材データ90のうち、未だ記録メディア9に記憶されていなかった(作成されていなかった)素材データ90が新たに1つ作成され記憶されたことになる。
The
ステップS6またはステップS8によって素材指定情報の1レコードが作成される度に、要求部100は、GUIデータ53を参照することにより、全ての編集前データが特定されたか否かを判定する(ステップS9)。要求部100は、シナリオ元データ52において要求されている編集前データ(GUIデータ53にも記述されている)のうち、未だ特定されていない編集前データが存在する場合はステップS9においてNoと判定し、ステップS3からの処理を繰り返す。
Each time one record of the material designation information is created in step S6 or step S8, the
一方、全ての編集前データが特定されていれば、要求部100はステップS9においてYesと判定する。これにより、1つの編集データにおいて要求される全ての素材データ90が記録メディア9に記憶されたことになる。
On the other hand, if all the pre-edit data has been specified, the
全て編集前データが特定されると(ステップS9においてYes)、シナリオ解析部101がシナリオ元データ52を参照しつつ、編集前データとして特定された各素材データ90と、各素材データ90に対して実行すべきデータ処理との関連づけを行い(ステップS10)、シナリオデータ93を生成し記憶する(ステップS10)。
When all the pre-edit data is specified (Yes in step S9), the
以上のように、デジタルスチルカメラ2は、編集データを作成するためのシナリオデータ93と、当該シナリオデータ93において要求される素材データ90のうちコンテンツデータ51に含まれない素材データ90とを作成して記憶しておくことが可能である。また、素材データ54についてはダウンロードにより予め記憶しておくことが可能である。
As described above, the digital
なお、図4に示すシナリオデータ作成処理を複数回繰り返すことによって、複数のシナリオデータ93と、それぞれにおいて要求される素材データ90とを記憶しておくことも可能である。
It is also possible to store a plurality of
図5は、情報処理装置4の構成を示すブロック図である。図5に示すように、情報処理装置4は、電源ケーブル(図示せず)を介して商用電源7に常時接続される据え置き型の装置として構成されている。
FIG. 5 is a block diagram illustrating a configuration of the
情報処理装置4は、各種データに関する演算処理を行うCPU40と、各種データを必要に応じて適宜記憶する記憶部41とを備えており、一般的なコンピュータとして構成されている。
The
CPU40は、記憶部41のRAMを一時的なワーキングエリアとして使用しつつ、記憶部41のROMに格納されているプログラム410に従って動作することにより、情報処理装置4の各構成を制御する。なお、CPU40の機能および動作についての詳細は後述する。
The
情報処理装置4は、操作部42、スピーカ43、液晶ディスプレイ44、カードスロット46およびUSB端子47を備えている。
The
操作部42は、ユーザが情報処理装置4に対して指示を入力するために使用される。操作部42は、例えば、情報処理装置4に対する指示を入力するためのボタン類、あるいは文字データを入力するためのキー等で構成されている。特に、本実施の形態では、操作部42は、ユーザが、デジタルスチルカメラ2に記憶されている複数のシナリオデータ93の一覧を要求したり、当該一覧から対象シナリオデータ93を選択するための指示を入力するために操作される。
The
スピーカ43は、音声データに基づいて音声を再生する機能を有する。特に、スピーカ43は、編集データに含まれる音声ストリーム情報あるいは再生データを構成する音声データ等に基づいて音声を再生する。
The
液晶ディスプレイ44は、CPU40からの制御によって必要なデータを画像として表示する表示装置として構成されている。特に、本実施の形態における液晶ディスプレイ44は、編集データに含まれる画像ストリーム情報あるいは再生データを構成する画像データ等を表示する機能を有している。
The
カードスロット46は、情報処理装置4に記録メディア9を装着する機能を提供するハードウェアインタフェースである。カードスロット46に記録メディア9が装着されることにより、情報処理装置4は記録メディア9を記憶装置として使用することが可能となる。
The
USB端子47は、USBケーブルを介して情報処理装置4とクレードル32とをUSB接続するためのインタフェースである。先述のように、USB接続は電源を供給する機能を有しており、図5に示すように、USB端子47には商用電源7からの電力供給がされている。なお、詳細は図示していないが、USB端子47と商用電源7との間には、様々な回路が存在しており、適宜、電圧や電流、あるいは、交流/直流等が変換される。
The
図6は、情報処理装置4の機能ブロックをデータの流れとともに示す図である。図6に示すシナリオ特定部400、データ管理部401、画像生成部402、音声生成部403およびコーデック部404は、主にCPU40がプログラム410に従って動作することによって実現される機能ブロックである。
FIG. 6 is a diagram illustrating the functional blocks of the
シナリオ特定部400は、デジタルスチルカメラ2に存在する複数のシナリオデータ93の中から、作成する記録データ94に対応するシナリオデータ93(対象シナリオデータ93)を特定する機能を有する。シナリオ特定部400が対象シナリオデータ93を特定する手法については後述する。
The
データ管理部401は、コーデック部404によって記録データ94が作成されたときに、記憶部41に記憶されている対象シナリオデータ93および素材データ90を削除する機能を有する。
The
画像生成部402は、対象シナリオデータ93(より詳しくは映像に係る対象シナリオデータ93)を参照しつつ、そこに記述されている素材データ90の識別子に基づいて記憶部41から該当する素材データ90を読み出す。そして、当該対象シナリオデータ93において当該素材データ90に関連づけられているデータ処理の識別子に応じて、当該素材データ90にデータ処理を施して編集データ(より詳しくは編集データのうちの映像に係るデータ)を生成する。画像生成部402は、生成した映像に係る編集データを液晶ディスプレイ44あるいはコーデック部404に伝達する。すなわち、画像生成部402は、デジタルスチルカメラ2における画像生成部102および画像処理部28の機能を有する。
The
音声生成部403は、対象シナリオデータ93(より詳しくは音声に係る対象シナリオデータ93)を参照しつつ、そこに記述されている素材データ90の識別子に基づいて記憶部41から該当する素材データ90を読み出す。そして、当該対象シナリオデータ93において当該素材データ90に関連づけられているデータ処理の識別子に応じて、当該素材データ90にデータ処理を施して編集データ(より詳しくは編集データのうちの音声に係るデータ)を生成する。音声生成部403は、生成した音声に係る編集データをスピーカ43あるいはコーデック部404に伝達する。すなわち、音声生成部403は、デジタルスチルカメラ2における音声生成部103と同様の機能を有する。
The
コーデック部404は、画像生成部402および音声生成部403から伝達される編集データ(例えばストリーム情報)に、符号化処理を行って記録データ94を作成し、記憶部41に記憶させる機能を有する。また、コーデック部404は、記録データ94の作成を完了したことを示す信号をデータ管理部401に伝達する。さらに、コーデック部404は、記録データ94に復号化処理を行って再生データを作成し、スピーカ43および液晶ディスプレイ44に伝達する機能を有する。
The
以上が画像処理システム1の構成および機能の説明である。次に、画像処理システム1によって、素材データ90に基づいて符号化された記録データ94を作成する方法について説明する。
The above is the description of the configuration and functions of the
図7は、画像処理システム1の動作を示す流れ図である。なお、図7に示す処理が開始されるまでに、デジタルスチルカメラ2において図4に示したシナリオデータ作成処理が少なくとも1回以上実行され、デジタルスチルカメラ2に装着されている記録メディア9には、少なくとも1つのシナリオデータ93と、当該少なくとも1つのシナリオデータ93において要求される素材データ90が既に記憶されているものとする。また、デジタルスチルカメラ2がクレードル32に装着され、かつ、クレードル32と情報処理装置4のUSB端子47とが接続されているものとする。
FIG. 7 is a flowchart showing the operation of the
画像処理システム1の情報処理装置4は、記録データ94を新たに作成するよう指示されるか、既に作成され記憶されている記録データ94を再生するよう指示されるか、終了が指示されるかを監視(以下、単に「監視状態」と称する。)している(ステップS21,S23,S25)。本実施の形態では、このような指示は、ユーザが情報処理装置4の操作部42を操作して入力するものとする。
Whether the
監視状態において記録データ94を作成するに指示がユーザにより入力されると、情報処理装置4のCPU40はステップS21においてYesと判定し、記録データ生成処理を開始する(ステップS22)。
When an instruction is input by the user to create the
図8は、記録データ94を作成する記録データ生成処理(画像処理方法)を示す流れ図である。
FIG. 8 is a flowchart showing recording data generation processing (image processing method) for generating
記録データ生成処理が開始されると、シナリオ特定部400がシナリオ特定工程を実行する(ステップS31)。
When the recording data generation process is started, the
シナリオ特定工程では、シナリオ特定部400がデジタルスチルカメラ2に記憶されているシナリオデータ93の一覧を送信するように、USB端子47を介して、デジタルスチルカメラ2に要求する。この要求に応じてデジタルスチルカメラ2のCPU20が、記録メディア9に記憶されているシナリオデータ93のリストをフレキシブル端子31を介して情報処理装置4に向けて送信する。シナリオデータ93のリストを受信すると、シナリオ特定部400は、受信したシナリオデータ93のリストを液晶ディスプレイ44に表示させる。
In the scenario specifying step, the
ユーザは、液晶ディスプレイ44に表示されたシナリオデータ93のリストを確認しながら、作成したい記録データ94に対応するシナリオデータ93を操作部42を操作することにより選択する。ユーザの選択により入力された情報に基づいて、シナリオ特定部400は、リスト(記録メディア9に記憶されている複数のシナリオデータ93)から1つのシナリオデータ93(対象シナリオデータ93)を特定する。
The user selects the
なお、表示されるリストとしては、各シナリオデータ93において要求される素材データ90から代表となるサムネイル画像を作成したものや、シナリオ元データ52を選択する際に用いた「テーマ」に基づいて作成したもの等が考えられる。
The list to be displayed is created based on a representative thumbnail image created from the
次に、情報処理装置4のCPU40は、記録データ94を作成するために必要な指示をユーザに入力させるための指示入力工程を実行する(ステップS32)。このときに入力される情報としては、例えば、記録データ94を情報処理装置4で作成するかデジタルスチルカメラ2で作成するかを指定する情報、記録データ94を作成している間にプレビュー画面を表示するか否かを指定する情報、あるいは記録データ94の符号化形式を選択する情報等が考えられる。
Next, the
必要な指示が入力されると、CPU40は、ステップS32において入力された情報に基づいて、記録データ94を情報処理装置4で作成するか否かを判定する(ステップS33)。
When a necessary instruction is input, the
ユーザにより、デジタルスチルカメラ2が選択されていた場合、CPU40は、ステップS31で特定した対象シナリオデータ93を示す識別子とともに、記録データ94を作成するように指示する作成要求を、USB端子47を介して、デジタルスチルカメラ2に向けて送信する(ステップS34)。
When the digital
この作成要求を受信したデジタルスチルカメラ2では、画像生成部102および音声生成部103が、先述の識別子によって特定される対象シナリオデータ93に基づいて、当該対象シナリオデータ93において要求される素材データ90に施されるべきデータ処理を特定しつつ、特定したデータ処理を当該素材データ90に施して演算により編集データを生成する(ステップS35)。
In the digital
このとき、ユーザによってプレビューを行うように指示されている場合(そのような指示を示す情報がステップS32で入力され作成要求に含まれている場合)、画像生成部102および音声生成部103は、生成した編集データ(画像ストリーム情報および音声ストリーム情報)をA/Vコーデック271だけではなく、液晶パネル26およびスピーカ25にも伝達する。これによって、液晶パネル26には生成された編集データの画像が表示され、スピーカ25からは生成された編集データの音声が再生される。
At this time, when the user has instructed to perform a preview (when information indicating such an instruction is input in step S32 and included in the creation request), the
さらに、生成された編集データをA/Vコーデック271が所定の規則に従って符号化して記録データ94を生成(エンコード)する(ステップS36)。本実施の形態では、デジタルスチルカメラ2が作成要求を受信した場合とは、デジタルスチルカメラ2がUSB端子47にUSB接続されている場合である。したがって、このときデジタルスチルカメラ2(A/Vコーデック271を含む)は、商用電源7から電力の供給を受けつつ、記録データ94を生成することができる。
Further, the A /
すなわち、電力の安定供給を確保しつつ記録データ94を生成することができるので、比較的多くの電力を消費する処理であるにも関わらず、処理中にデジタルスチルカメラ2が電源断になったり、動作が不安定になったりすることを防止できる。
In other words, since the
また、撮像部24を備えるデジタルスチルカメラ2は、一般に、画像処理に特化したハードウェア(画像処理部28およびA/Vコーデック271)を備えているため、デジタルスチルカメラ2において記録データ94を生成することにより、トータルの処理時間を短縮することができる。
In addition, since the digital
また、記録データ94をデジタルスチルカメラ2で生成することにより、情報処理装置4のCPU40を占有することがない。一般に、ユーザが記録データ94を生成したいと所望する状況では、デジタルスチルカメラ2による撮像等が望まれることは想定しにくい。したがって、他の処理を行わない可能性の高いデジタルスチルカメラ2(CPU20およびA/Vコーデック271)に記録データ94を生成させることによって、システム全体の処理効率が向上する。
Further, the
なお、作成要求を受信してからステップS36を実行するまでに、デジタルスチルカメラ2において、充分な電力の供給がされているか否かをCPU20が判定する工程を設けて、その判定結果に応じてステップS36を実行するように構成してもよい。
Note that a step is provided in which the
さらに作成された記録データ94は、フレキシブル端子31を介して、情報処理装置4に向けて送信される(ステップS37)。
Further, the created
なお、より詳しくはステップS36,S37の処理は、前工程で処理された分のデータずつ処理を行う工程である。また、記録メディア9に保存するように指示されている場合には、情報処理装置4に送信せずに、記録メディア9に保存してもよい。あるいは、記録メディア9の空き領域に応じて、情報処理装置4に送信するか、記録メディア9に保存するかを決定してもよい。
In more detail, the processing of steps S36 and S37 is a step of performing processing for each piece of data processed in the previous step. Further, when an instruction to save to the
一方、ユーザにより情報処理装置4において記録データ94を生成するように選択されていた場合、CPU40はステップS33においてYesと判定し、ステップS31で特定された対象シナリオデータ93を示す識別子とともに、送信要求をデジタルスチルカメラ2に対して送信する(ステップS38)。送信要求とは、対象シナリオデータ93と、当該対象シナリオデータ93において要求される素材データ90とを情報処理装置4に向けて送信するようにデジタルスチルカメラ2に要求する情報である。
On the other hand, if the user has selected to generate the
送信要求を受信したデジタルスチルカメラ2のCPU20は、送信要求に添付されている識別子に基づいて、記録メディア9に記憶されている複数のシナリオデータ93の中から、対象シナリオデータ93を特定して記録メディア9から読み出し、情報処理装置4に向けて送信する。また、当該対象シナリオデータ93において要求される素材データ90についても記録メディア9から読み出して情報処理装置4に向けて送信する。
The
対象シナリオデータ93と素材データ90とを受信すると、情報処理装置4では、画像生成部402および音声生成部403が、受信した対象シナリオデータ93に基づいて、当該対象シナリオデータ93において要求される素材データ90に施されるべきデータ処理を特定しつつ、特定したデータ処理を当該素材データ90に施して演算により編集データを生成する(ステップS39)。
When the
このとき、ユーザによってプレビューを行うように指示されている場合、画像生成部402および音声生成部403は、生成した編集データをコーデック部404だけではなく、液晶ディスプレイ44およびスピーカ43にも伝達する。これによって、液晶ディスプレイ44には生成された編集データの画像が表示され、スピーカ43からは生成された編集データの音声が再生される。
At this time, when the user instructs to perform the preview, the
さらに、生成された編集データをコーデック部404が所定の規則に従って符号化して記録データ94を生成(エンコード)する(ステップS40)。本実施の形態では、情報処理装置4は商用電源7から電力の供給を受けている。したがって、このとき情報処理装置4(コーデック部404を含む)は、商用電源7から電力の供給を受けつつ、記録データ94を生成することができる。
Further, the generated editing data is encoded by the
すなわち、電力の安定供給を確保しつつ記録データ94を生成することができるので、比較的多くの電力を消費する処理であるにも関わらず、処理中にが電源断になったり、動作が不安定になったりすることを防止できる。
That is, since the
全ての素材データ90に対する全てのデータ処理が終了し、記録データ94の生成が完了すると、データ管理部401が記憶部41に記憶されている対象シナリオデータ93と素材データ90とを削除する(ステップS41)。
When all the data processing for all the
画像データや音声データには一般に著作権が存在するため、複製の作成には制限がある。本実施の形態における画像処理システム1は、データ管理部401が記録データ94の作成が完了した後には、目的を遂げた素材データ90を削除することにより、不正な複製を抑制することができる。なお、データ管理部401は、コンテンツデータ51に含まれるデータのみ削除するように構成されていてもよい。また、データ管理部401は、デジタルスチルカメラ2において記録データ94が生成された場合にも、適宜、対象シナリオデータ93や素材データ90を削除してもよい。
Since image data and audio data generally have copyrights, there is a limitation in creating a copy. In the
ステップS37またはステップS41が実行されると、記録データ94は記憶部41に記憶され保存される。このとき、記録データ94は不揮発性の記憶領域(例えばハードディスク)に記憶されることが好ましい。また、カードスロット46にSDカードが装着されている場合には、当該SDカードに保存してもよい。
When step S37 or step S41 is executed, the
ステップS42が実行されると、画像処理システム1は記録データ生成処理を終了して、図7に示す処理に戻る。
When step S42 is executed, the
監視状態において記録データ94を再生する指示が入力されると、CPU40は、ステップS23においてYesと判定し、既に作成されている記録データ94の一覧を液晶ディスプレイ44に表示させる。この表示を確認したユーザが再生したい記録データ94を操作部42を操作して選択すると、コーデック部404が選択された記録データ94を復号化して再生データを生成しつつ、スピーカ43および液晶ディスプレイ44に生成した再生データを伝達する。
When an instruction to reproduce the recorded
これにより、再生データにおける映像が液晶ディスプレイ44に再生されるとともに、再生データにおける音声がスピーカ43に再生される(ステップS24)。
Thereby, the video in the reproduction data is reproduced on the
なお、再生する装置としてデジタルスチルカメラ2が選択されていた場合には、A/Vコーデック271が選択された記録データ94を復号化して再生データを生成しつつ、スピーカ25および液晶パネル26に生成した再生データを伝達する。
When the digital
これにより、情報処理装置4において実行される場合と同様に、再生データにおける映像が液晶パネル26に再生されるとともに、再生データにおける音声がスピーカ25に再生される(ステップS24)。
As a result, the video in the reproduction data is reproduced on the
したがって、ユーザは、情報処理装置4またはデジタルスチルカメラ2に再生データを再生させることができ、所望の動画像を楽しむことができる。なお、画像処理システム1が監視状態において、終了する旨の指示がユーザによって入力されると、情報処理装置4のCPU40は、処理を終了する。
Therefore, the user can cause the
以上のように、本実施の形態における画像処理システム1は、素材データ90に基づいて符号化された記録データ94を作成するシステムとして構成されており。要求する素材データ90と当該素材データ90に対して施すデータ処理との対応関係を示す少なくとも1つのシナリオデータ93と当該少なくとも1つのシナリオデータ93において要求される素材データ90とを事前に記憶するデジタルスチルカメラ2と、商用電源7から電力の供給を受ける情報処理装置4とを備え、デジタルスチルカメラ2に記憶されている少なくとも1つのシナリオデータ93の中からユーザによって選択される対象シナリオデータ93を特定し、特定された対象シナリオデータ93に基づいて、当該対象シナリオデータ93において要求される素材データ90に施されるべきデータ処理を特定しつつ、特定したデータ処理を当該素材データ90に施して編集データを生成し、商用電源7から電力の供給を受けつつ、生成された編集データを符号化して記録データ94を生成することにより、電力消費が大きい処理にもかかわらず、安定して記録データ94を生成することができる。
As described above, the
また、シナリオデータ93を選択するだけで、所望の記録データ94を容易に作成して楽しむことができる。
Also, by simply selecting the
なお、本実施の形態におけるデータ管理部401は、記録データ94が作成されたときに積極的に記憶部41からシナリオデータ93および素材データ90を削除すると説明した。しかし、これらのデータが揮発性の記憶装置(例えばRAM)に記憶されているときには、記録データ94が作成された時点で当該記憶領域を開放するだけでもよい。その場合であっても、開放された記憶領域には他のデータによる上書きがされるか、あるいは、情報処理装置4の電源断によってこれらのデータは自然に削除される。
It has been described that the
<2. 変形例>
以上、本発明の実施の形態について説明してきたが、本発明は上記実施の形態に限定されるものではなく様々な変形が可能である。
<2. Modification>
Although the embodiments of the present invention have been described above, the present invention is not limited to the above embodiments, and various modifications can be made.
例えば、上記実施の形態では携帯端末装置としてデジタルスチルカメラ2を例に説明したが、撮像機能を備えた携帯電話であってもよい。
For example, although the digital
また、上記実施の形態における機能ブロックはプログラム210,410(ソフトウェア)によって実現される例で説明したが、これらの機能ブロックによって実現される機能の一部または全部を専用の論理回路(ハードウェア)として実現してもよい。一方、上記実施の形態において論理回路により構成されると説明したデータ変換部27の各構成や画像処理部28の一部または全部をソフトウェアによって実現するように構成してもよい。
Moreover, although the functional block in the said embodiment was demonstrated by the example implement | achieved by program 210,410 (software), a part or all of the function implement | achieved by these functional blocks is a dedicated logic circuit (hardware). It may be realized as. On the other hand, each configuration of the
また、上記に示した処理の内容(図4および図7)はあくまでも例示であって、同様の効果が得られるならば、処理の手順等が適宜変更されてもよい。例えば、デジタルスチルカメラ2または情報処理装置4において、編集データのプレビューだけを行い、記録データ94の作成を行わないような処理工程を設けてもよい。
The contents of the processing shown above (FIGS. 4 and 7) are merely examples, and the procedure of the processing may be changed as appropriate as long as the same effect can be obtained. For example, the digital
また、記録データ94をデジタルスチルカメラ2に生成させるか、情報処理装置4に生成させるかの選択は、ユーザの指示によって行われると説明した。しかし、例えば、デジタルスチルカメラ2と情報処理装置4との処理能力(記録データ94を生成する能力)を比較して情報処理装置4が自動的に判定するように構成してもよい。あるいは、デジタルスチルカメラ2に対して電源が充分に確保されているか否かによって判定してもよい。
In addition, it has been described that the selection of whether the
また、デジタルスチルカメラ2で使用されるコンテンツデータ51はサーバ装置5によってネットワーク8を介して提供されると説明したが、例えば、記録メディア9によって提供されてもよい。すなわち、コンテンツデータ51を記憶した記録メディア9が店頭等において配布され、これをデジタルスチルカメラ2に装着して利用してもよい。
Further, the
また、デジタルスチルカメラ2に装着されていた記録メディア9(対象シナリオデータ93および素材データ90が記憶されている)を、情報処理装置4のカードスロット46に装着した場合には、デジタルスチルカメラ2と情報処理装置4とがUSB接続されていなくても情報処理装置4によって記録データ94を作成してもよい。
Further, when the recording medium 9 (which stores the
また、クレードル32またはデジタルスチルカメラ2に電源アダプタを介して商用電源7に接続する端子が設けられており、かつ、デジタルスチルカメラ2が電源アダプタを介して商用電源7に接続されている場合には、デジタルスチルカメラ2に情報処理装置4が接続されていなくても、デジタルスチルカメラ2において記録データ94が作成されてもよい。
Further, when the
1 画像処理システム
102,402 画像生成部
103,403 音声生成部
2 デジタルスチルカメラ
20,40 CPU
21,41 記憶部
210,410 プログラム
22,42 操作部
23 マイク
24 撮像部
25,43 スピーカ
26 液晶パネル
271 A/Vコーデック
28 画像処理部
29 カードスロット
30 通信部
31 フレキシブル端子
32 クレードル
4 情報処理装置
400 シナリオ特定部
401 データ管理部
404 コーデック部
44 液晶ディスプレイ
47 USB端子
9 記録メディア
90 素材データ
91 撮像データ
92 録音データ
93 シナリオデータ
94 記録データ
DESCRIPTION OF
21, 41
Claims (8)
要求する素材データと前記素材データに対して施すデータ処理との対応関係を示す少なくとも1つのシナリオデータと前記少なくとも1つのシナリオデータにおいて要求される素材データとを事前に記憶する携帯端末装置と、
商用電源から電力の供給を受ける情報処理装置と、
とを備え、
前記携帯端末装置に記憶されている少なくとも1つのシナリオデータの中からユーザによって選択される対象シナリオデータを特定する特定手段と、
前記特定手段により特定された対象シナリオデータに基づいて、前記対象シナリオデータにおいて要求される素材データに施されるべきデータ処理を特定しつつ、特定したデータ処理を前記素材データに施して編集データを生成する生成手段と、
前記商用電源から電力の供給を受けつつ、前記生成手段により生成された編集データを符号化して記録データを生成する符号化手段と、
をさらに備えることを特徴とする画像処理システム。 An image processing system for creating recorded data encoded based on material data,
A portable terminal device that stores in advance at least one scenario data indicating a correspondence relationship between requested material data and data processing performed on the material data, and material data required in the at least one scenario data;
An information processing device that receives power from a commercial power source; and
And
Specifying means for specifying target scenario data selected by a user from at least one scenario data stored in the mobile terminal device;
Based on the target scenario data specified by the specifying means, while specifying the data processing to be performed on the material data required in the target scenario data, the specified data processing is performed on the material data to edit data. Generating means for generating;
Encoding means for generating recording data by encoding edit data generated by the generation means while receiving supply of power from the commercial power source;
An image processing system further comprising:
前記携帯端末装置は前記商用電源から電力の供給を受ける受給手段をさらに備え、
前記符号化手段は、前記携帯端末装置に設けられており、かつ、前記受給手段が前記商用電源から電力の供給を受けているときに記録データの生成を行うことを特徴とする画像処理システム。 The image processing system according to claim 1,
The portable terminal device further includes a receiving unit that receives power from the commercial power source,
The image processing system is characterized in that the encoding means is provided in the portable terminal device and generates recording data when the receiving means is supplied with power from the commercial power source.
前記符号化手段は、前記情報処理装置に設けられていることを特徴とする画像処理システム。 The image processing system according to claim 1 or 2,
The image processing system, wherein the encoding means is provided in the information processing apparatus.
前記符号化手段により生成された記録データを復号化して再生データを生成する復号化手段と、
前記復号化手段により生成された再生データを表示する第1表示手段と、
をさらに備えることを特徴とする画像処理システム。 The image processing system according to any one of claims 1 to 3,
Decoding means for decoding the recording data generated by the encoding means to generate reproduction data;
First display means for displaying reproduction data generated by the decoding means;
An image processing system further comprising:
前記生成手段により生成された編集データを表示する第2表示手段をさらに備えることを特徴とする画像処理システム。 The image processing system according to any one of claims 1 to 4,
An image processing system, further comprising second display means for displaying the edit data generated by the generating means.
前記携帯端末装置は被写体を撮像して画像データを生成する撮像手段を備え、
前記素材データは、前記撮像手段により生成された画像データを含むことを特徴とする画像処理システム。 An image processing system according to any one of claims 1 to 5,
The portable terminal device includes an imaging unit that images a subject and generates image data,
The image processing system, wherein the material data includes image data generated by the imaging means.
要求する素材データと前記素材データに対して施すデータ処理との対応関係を示す少なくとも1つのシナリオデータと前記少なくとも1つのシナリオデータにおいて要求される素材データとを事前に記憶する記憶手段と、
前記少なくとも1つのシナリオデータの中からユーザによって選択される対象シナリオデータを特定する特定手段と、
前記特定手段により特定された対象シナリオデータに基づいて、前記対象シナリオデータにおいて要求される素材データに施されるべきデータ処理を特定しつつ、特定したデータ処理を前記素材データに施して編集データを生成する生成手段と、
前記生成手段により生成された編集データを符号化して記録データを生成する符号化手段と、
を備えることを特徴とする情報処理装置。 An information processing apparatus that receives power supply from a commercial power source,
Storage means for storing in advance at least one scenario data indicating a correspondence relationship between requested material data and data processing applied to the material data, and material data required in the at least one scenario data;
Specifying means for specifying target scenario data selected by the user from the at least one scenario data;
Based on the target scenario data specified by the specifying means, while specifying the data processing to be performed on the material data required in the target scenario data, the specified data processing is performed on the material data to edit data. Generating means for generating;
Encoding means for generating recording data by encoding the editing data generated by the generating means;
An information processing apparatus comprising:
要求する素材データと前記素材データに対して施すデータ処理との対応関係を示す少なくとも1つのシナリオデータと前記少なくとも1つのシナリオデータにおいて要求される素材データとを事前に記憶する工程と、
記憶されている少なくとも1つのシナリオデータの中からユーザによって選択される対象シナリオデータを特定する工程と、
特定された対象シナリオデータに基づいて、前記対象シナリオデータにおいて要求される素材データに施されるべきデータ処理を特定しつつ、特定したデータ処理を前記素材データに施して編集データを生成する工程と、
商用電源から電力の供給を受けつつ、生成された編集データを符号化して記録データを生成する工程と、
を有することを特徴とする画像処理方法。 An image processing method for creating recording data encoded based on material data,
Storing in advance at least one scenario data indicating a correspondence relationship between requested material data and data processing applied to the material data, and material data required in the at least one scenario data;
Identifying target scenario data selected by the user from at least one stored scenario data;
A step of generating edit data by applying the specified data processing to the material data while specifying the data processing to be applied to the material data required in the target scenario data based on the specified target scenario data; ,
A process of generating recording data by encoding the generated editing data while receiving power from a commercial power source;
An image processing method comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008099880A JP2009253710A (en) | 2008-04-08 | 2008-04-08 | Image processing system, information processor, and image processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008099880A JP2009253710A (en) | 2008-04-08 | 2008-04-08 | Image processing system, information processor, and image processing method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2009253710A true JP2009253710A (en) | 2009-10-29 |
Family
ID=41313936
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008099880A Withdrawn JP2009253710A (en) | 2008-04-08 | 2008-04-08 | Image processing system, information processor, and image processing method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2009253710A (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101398774B1 (en) | 2013-03-08 | 2014-06-27 | 황재원 | System and method for estimating pupillary distance and optical height of eye glasses using user terminal |
-
2008
- 2008-04-08 JP JP2008099880A patent/JP2009253710A/en not_active Withdrawn
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101398774B1 (en) | 2013-03-08 | 2014-06-27 | 황재원 | System and method for estimating pupillary distance and optical height of eye glasses using user terminal |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8244104B2 (en) | System for creating content using content project data | |
KR100932152B1 (en) | Data processing device and control method | |
US20040095474A1 (en) | Imaging apparatus using imaging template | |
JP5783737B2 (en) | Image pickup apparatus and moving image recording apparatus control method | |
JP5759212B2 (en) | Scenario editing apparatus, scenario editing method, and imaging system | |
JP2006186420A (en) | Imaging apparatus and its control method | |
JP4587178B2 (en) | Imaging apparatus and imaging method | |
JP5818599B2 (en) | Movie recording device | |
JP4349288B2 (en) | Imaging apparatus, image processing method, and program | |
JP5283433B2 (en) | Digital still camera, image processing method and program | |
JP5683301B2 (en) | Image recording device | |
US20070297767A1 (en) | Image reproducing apparatus and reproducing program creation apparatus | |
JP2011147119A (en) | Image processing apparatus and image processing program | |
JP2009253710A (en) | Image processing system, information processor, and image processing method | |
JP2008053971A (en) | Data recording device and control method thereof | |
JP2009272846A (en) | Image processor, image processing method and program | |
JP2006261957A (en) | Photographic device | |
JP5257980B2 (en) | Image processing system, image processing method, and program | |
JP2005260748A (en) | Electronic camera and control program of electronic camera | |
JP2010098599A (en) | Imaging device, method of controlling the same, and program | |
JP5633113B2 (en) | Imaging apparatus, recording control method, and program | |
JP2008276899A (en) | Recording and playback device and control method thereof | |
JP6566826B2 (en) | Image processing apparatus, control method thereof, and control program | |
JP2007067768A (en) | Reproducing apparatus and method, recording apparatus and method, and program | |
JP2009266215A (en) | Image processor, image processing method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Withdrawal of application because of no request for examination |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20110705 |