JP4363468B2 - 撮像装置及び撮像方法並びに映像信号処理プログラム - Google Patents

撮像装置及び撮像方法並びに映像信号処理プログラム Download PDF

Info

Publication number
JP4363468B2
JP4363468B2 JP2007182824A JP2007182824A JP4363468B2 JP 4363468 B2 JP4363468 B2 JP 4363468B2 JP 2007182824 A JP2007182824 A JP 2007182824A JP 2007182824 A JP2007182824 A JP 2007182824A JP 4363468 B2 JP4363468 B2 JP 4363468B2
Authority
JP
Japan
Prior art keywords
correction
simulation
parameter
video signal
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2007182824A
Other languages
English (en)
Other versions
JP2009021827A (ja
Inventor
光俊 真貝
一雄 遠藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2007182824A priority Critical patent/JP4363468B2/ja
Priority to US12/170,745 priority patent/US8077229B2/en
Priority to CN2008101307505A priority patent/CN101345888B/zh
Publication of JP2009021827A publication Critical patent/JP2009021827A/ja
Application granted granted Critical
Publication of JP4363468B2 publication Critical patent/JP4363468B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction

Description

本発明は撮像装置及び撮像方法並びに映像信号処理プログラムに関し、特に撮像素子に取り込まれた映像信号に所定の映像信号処理を施して記録用や表示用に変換する撮像装置及び撮像方法、並びにその撮像装置及び撮像方法に用いられる映像信号処理プログラムに関する。
撮影された映像素材を含む様々な映像シーンが連結して構成される映像コンテンツの作成工程では、コンテンツを構成するシーンを撮影するための撮影計画、各シーンの撮影、コンテンツの編集という作業が順次行われる。これらの作業を効率的に行うため、コンテンツ作成を支援するシステムが提案されている(たとえば、特許文献1参照)。
特許文献1に記載のコンテンツ作成システムによれば、撮影計画工程では、撮影支援情報を作成して外部記録媒体に出力し、撮影実行時に参照できるようにしておく。撮影時は、撮像装置によって撮影支援情報に従って映像を撮影する。そして、編集工程では、撮影された映像を様々に編集し、編集後映像を作成する。ここで行われる撮影後の処理をポストプロダクション処理(または、後処理)と呼ぶ。この編集後映像は、撮影支援情報、撮影映像、及び編集に用いた補正パラメータを含む編集情報とともに、データベースに蓄積して管理する。データベースに蓄積されている編集情報は、次回以降のコンテンツ作成時に利用することができる。ポストプロダクション処理では、撮影時に設定されるカメラ設定値と、映像を調整する効果補正値との2種類の補正パラメータが用いられる。カメラ設定値は、撮影時における設定値で、たとえば、露出、ホワイトバランス、ガンマ補正、カラー調整など、カメラの各機能を設定する値を含む。一方、効果補正値は、所望の画質を得るために撮影後の映像の補正に用いられる設定値である。たとえば、露出、ホワイトバランス、ガンマ補正、3D効果、トリミング、ズームなど、映像の効果に関する属性を調整する値を含む。ポストプロダクション処理時には、ユーザが操作入力部を介して設定した補正パラメータ値や、データベースに蓄積されている過去の編集情報に設定されている補正パラメータ値などが使われる。
特開2007−43373号公報(段落番号〔0076〕〜〔0113〕、図14〜図16)
従来のコンテンツ作成の工程では、効果補正のための補正パラメータは、撮影後のポストプロダクション処理において設定されるため、撮影時には、処理が施された映像を確認できないという問題点があった。上記の特許文献1のコンテンツ作成装置でも、補正パラメータは、編集を行う情報処理装置が管理しており、撮像装置には通知されない。
しかし、従来から、ポストプロダクション処理が施された映像を撮影時にシミュレーションしたいという要望があった。たとえば、補正パラメータのひとつであるガンマ補正パラメータは、映像のコントラストを調整するトーン加工処理に用いられる。パラメータ値に応じて映像の質感が変化し、撮影後のポストプロダクション処理においてユーザが求める映像表現を決める上での重要な要素となっている。従って、映画撮影の現場などでは、撮影時にポストプロダクション処理によってガンマ補正が施された後の映像を確認しておきたいという要望は強かった。
そこで、撮像装置に接続し、撮影された映像にガンマ補正を施して表示させる外部機器があった。しかしながら、撮影機材に加えてこのような外部機器を撮影現場に持ち込まなければならず、不便であった。さらに、このとき設定された補正パラメータを保存・利用することが容易ではなかった。補正パラメータを外部機器から外部記録媒体に出力できたとしても、別装置である撮像装置が生成する映像信号との関連付けは、人が手作業で行わなければならなかった。
本発明はこのような点に鑑みてなされたものであり、撮影現場においてポストプロダクション処理をシミュレーションし、その映像効果を確認することが可能な撮像装置及び撮像方法、並びに映像信号処理プログラムを提供することを目的とする。
本発明では上記課題を解決するために、ガンマ補正用のパラメータを記憶するパラメータ記憶手段、ガンマ補正パラメータの設定制御を行うパラメータ設定手段、ガンマ補正処理を行うガンマ補正処理手段、及び表示用信号変換手段を有し、撮像素子に取り込まれた映像信号に所定の映像信号処理を施して記録用や表示用に変換する撮像装置が提供される。パラメータ記憶手段は、撮影時の映像信号を記録メディアに記録、または出力端子を介して外部へ出力する記録モード時に適用される出力用補正パラメータと、撮影後の編集工程における後処理をシミュレーションするシミュレーションモード時に適用されるシミュレーション用補正パラメータとを記憶する。パラメータ設定手段は、外部からの指示入力に基づいて、シミュレーションモードが設定されたときはシミュレーション用補正パラメータを選択し、シミュレーションモードが解除されたときは出力用補正パラメータを選択してパラメータ記憶手段から読み出し、補正処理用に設定する。ガンマ補正処理手段は、パラメータ設定手段によって補正処理用に設定された出力用補正パラメータまたはシミュレーション用補正パラメータに基づいて、入力された映像信号に対してガンマ補正処理を行う。表示用信号変換手段は、シミュレーションモードが設定されたとき、シミュレーション用補正パラメータに基づいてガンマ補正が施された映像信号を、表示用信号に変換する。
このような撮像装置によれば、記録モード時、パラメータ設定手段は、パラメータ記憶手段に記憶される出力用補正パラメータを選択し、ガンマ補正パラメータに設定している。このとき、ガンマ補正処理手段は、出力用補正パラメータに基づいて、映像信号にガンマ補正を施す。ガンマ補正後の映像信号は、通常、映像記録メディアに記録されて、外部に出力される。ここで、外部からの指示入力によって撮影後の後処理をシミュレーションするシミュレーションモードが設定されると、パラメータ設定手段によってパラメータ記憶手段に記憶されるシミュレーション用補正パラメータが選択され、ガンマ補正パラメータに設定される。ガンマ補正処理手段は、パラメータ設定手段が選択したシミュレーション用補正パラメータに基づいて、映像信号にガンマ補正を施す。シミュレーション用補正パラメータによって補正された補正後映像信号は、表示用信号変換手段によって表示用に変換され、表示用映像信号として外部に出力される。これを表示装置に表示させれば、撮影後の後処理をシミュレーションした映像をモニタすることができる。
また、上記課題を解決するために、撮像素子に取り込まれた映像信号を所定の映像信号処理を施して記録用や表示用に変換する撮像方法において、パラメータ設定手段が、撮影された映像信号を記録メディアに記録、または出力端子を介して外部へ出力する記録モード時に適用される出力用補正パラメータと、撮影後の編集工程における後処理をシミュレーションするシミュレーションモード時に適用されるシミュレーション用補正パラメータとを記憶するパラメータ記憶手段から、外部からの指示入力に基づいてシミュレーションモードが設定されたときはシミュレーション用補正パラメータを選択し、シミュレーションモードが解除されたときは出力用補正パラメータを選択して読み出し、補正処理用に設定するステップと、ガンマ補正処理手段が、パラメータ設定手段によって補正処理用に設定された出力用補正パラメータまたはシミュレーション用補正パラメータに基づいて、入力された映像信号に対しガンマ補正処理を行うステップと、表示用信号変換手段が、シミュレーションモードが設定されたとき、シミュレーション用補正パラメータに基づいてガンマ補正が施された映像信号を、表示用信号に変換するステップと、を実行することを特徴とする撮像方法、が提供される。
このような撮像方法によれば、撮影後の後処理のシミュレーションモードが設定されると、パラメータ設定手段は、ガンマ補正手段に設定されるガンマ補正パラメータを、記録モード時の出力用補正パラメータから、シミュレーションモード時のシミュレーション用補正パラメータに切り替える。ガンマ補正手段は、シミュレーション用補正パラメータに基づいて映像信号の補正処理を行う。補正された映像信号は、表示用信号変換手段によって表示用信号に変換される。この表示用信号を表示装置に表示すれば、シミュレーションによって模擬された映像をモニタすることができる。
本発明では、通常時の補正に適用される出力用補正パラメータとともに、後処理(ポストプロダクション処理)に適用されるシミュレーション用補正パラメータを記憶しておき、外部からの指示入力に応じて適用するガンマ補正パラメータを切り替える。ポストプロダクション処理のシミュレーションが設定されれば、シミュレーション用補正パラメータに基づいて、映像信号にガンマ補正を施した後、表示用信号に変換する。変換された表示用信号を表示装置に出力させれば、ポストプロダクション処理が施された映像を模擬するシミュレーション映像を撮影時に確認することができる。なお、シミュレーションが指示されないときは、出力用補正パラメータに切り替えられ、映像信号に通常時のガンマ補正が施される。
このように、シミュレーションを設定すれば、ガンマ補正パラメータが適宜切り替えられ、ポストプロダクション処理のシミュレーションができる。このとき、シミュレーションのために別途ガンマ補正処理回路を設けたり、ガンマ補正処理を行う装置を用いたりする必要もない。これにより、撮影現場で、簡単にポストプロダクション処理の効果を確認することが可能となる。
以下、本発明の実施の形態を図面を参照して説明する。
図1は、実施の形態に適用される発明の概念図である。本発明に係る撮像装置は、ガンマ補正パラメータを記憶するパラメータ記憶手段1a、処理に適用するガンマ補正パラメータを設定するパラメータ設定手段1b、映像信号にガンマ補正を施すガンマ補正処理手段1c、補正後の映像信号を表示用に変換する表示用信号変換手段1d、映像記録メディア2aに映像信号などを記録する映像データ記録手段1e、及びメタデータ記録メディア2bにメタデータを記録するメタデータ記録手段1fを有する。なお、入力される映像信号は、前段の処理においてデジタル変換されたデジタルデータである。また、上記の各処理手段は、コンピュータが映像信号処理プログラムを実行することにより、その処理機能が実現される。
パラメータ記憶手段1aは、通常時、撮影された映像信号を記録メディアに記録したり、出力端子を介して外部へ出力したりするときに適用される出力用補正パラメータと、撮影後のポストプロダクション処理のシミュレーションで適用されるシミュレーション用補正パラメータと、を記憶する。出力用補正パラメータには、主として画像のダイナミックレンジを確保するためパラメータ値が設定される。一方、シミュレーション用補正パラメータには、ポストプロダクション処理で行われるトーン加工用の補正パラメータの値が設定される。トーン加工では、質感など、所望の映像を得るため、ガンマカーブなどが調整される。シミュレーション用補正パラメータには、主としてガンマカーブを調整するための補正値が設定される。
パラメータ設定手段1bは、ポストプロダクション処理のシミュレーションが設定されているか、解除されたかに応じて、ガンマ補正処理手段1cに適用されるガンマ補正パラメータを切り替えて設定する。通常時、すなわち、シミュレーションが解除されているときは、パラメータ記憶手段1aに記憶される出力用補正パラメータを選択し、ガンマ補正処理手段1cに設定する。ポストプロダクション処理のシミュレーションが設定されるときは、パラメータ記憶手段1aに記憶されるシミュレーション用補正パラメータを選択し、ガンマ補正処理手段1cに設定する。なお、通常のポストプロダクション処理は、出力用補正パラメータに基づいてガンマ補正がなされた後に実行される。従って、パラメータ記憶手段1aに記憶されているシミュレーション用補正パラメータは、出力用補正パラメータに加える重畳分が設定されている。そこで、パラメータ設定手段1bでは、撮影時の映像信号が処理対象であれば、出力用補正パラメータにシミュレーション用補正パラメータを重畳して設定する。また、パラメータ記憶手段1aに予め出力用補正パラメータにシミュレーション用補正パラメータを重畳したパラメータを設定しておいてもよい。さらに、ガンマ補正処理手段1cが、重畳分が設定されるシミュレーション用補正パラメータを受け取り、出力用補正パラメータに重畳させるとしてもよい。
また、シミュレーション時に、外部から補正パラメータの変更指示が入力されたときは、変更指示に従って、シミュレーション用補正パラメータを更新し、ガンマ補正パラメータに反映する。変更されたシミュレーション用補正パラメータは、書き込み指示があれば、パラメータ記憶手段1aに保存する。このとき、保存するシミュレーション用補正パラメータを特定可能にするため、そのシミュレーション用補正パラメータにIDを付与する。
ガンマ補正処理手段1cは、パラメータ設定手段1bが設定したガンマ補正パラメータに基づいて、入力された映像信号にガンマ補正を施し、補正後映像信号を出力する。映像信号として、撮像素子によって撮影された映像信号や、映像記録メディア2aに記録され、再生された映像信号が入力される。出力である補正後映像信号は、表示用信号変換手段1dと、映像データ記録手段1eとに出力される。シミュレーションの状態に合わせて、補正後映像信号の出力先を切り替え、シミュレーション時には表示用信号変換手段1d、通常時には映像データ記録手段1eに出力するようにしてもよい。
表示用信号変換手段1dは、ガンマ補正処理手段1cがガンマ補正を行った補正後映像信号を入力し、これを表示用信号に変換する。表示用信号は、DVoutを介して外部に接続する表示装置などに送られ、表示用信号に基づく画像がこの表示装置に表示される。なお、表示用信号変換手段1dは、入力される補正後映像信号から常に表示用信号を生成するとしてもよいし、シミュレーション時など、指定されたときのみ表示信号を生成するとしてもよい。
映像データ記録手段1eは、ガンマ補正処理手段1cから出力用ガンマ補正パラメータに基づく補正が行われた映像信号を取得し、必要であれば圧縮処理などを施した後、メタデータとともに映像記録メディア2aへ書き込む。メタデータは、ガンマ補正処理手段1cでどのような処理が行われたのかを示す処理情報であり、適用された出力用補正パラメータなどである。さらに、ポストプロダクション処理のシミュレーションで適用されたシミュレーション用ガンマ補正パラメータを、次のポストプロダクション処理で利用する場合には、指定されたシミュレーション用ガンマ補正パラメータ、あるいは、シミュレーション用ガンマ補正パラメータを特定可能にする特定情報を、メタデータとして記録する。以下、映像信号のデータとともに映像記録メディア2aに記録されるメタデータを、記録用メタデータと表記する。
メタデータ記録手段1fは、パラメータ設定手段1bを介して取得したシミュレーション用補正パラメータと、シミュレーション用補正パラメータに付与されたIDとを、映像信号に関するメタデータとして、メタデータ記録メディア2bへ記録する。以下、記録用メタデータと区別するため、メタデータ記録メディア2bへ記録されるシミュレーション用補正パラメータを含むメタデータを、ポスプロ用メタデータと表記する。なお、シミュレーション用補正パラメータに付与されたIDは、ポスプロ用メタデータのIDも兼ねる。また、映像データと同様、ポスプロ用メタデータは、通信手段などを介して外部へ出力してもよい。
このような構成の撮像装置の動作及び撮像方法について説明する。また、以下の説明では、シミュレーションが設定されている状態をシミュレーションモード、解除されている状態を記録モードとする。
パラメータ記憶手段1aには、記録モードで適用される出力用補正パラメータ、及びシミュレーションモードで適用されるシミュレーション用補正パラメータが記憶されている。記憶されている情報は、外部から変更指示に応じて、パラメータ設定手段1bが適宜書き換えを行う。
通常時、すなわち、記録モード時には、撮影された映像信号は、ダイナミックレンジを確保するためのガンマ補正処理が施された後、映像記録メディア2aに記録される。また、補正後の映像信号は、通信手段などを介して外部に出力するとしてもよい。
記録モード時、パラメータ設定手段1bは、パラメータ記憶手段1aから出力用補正パラメータを読み出し、ガンマ補正処理手段1cに設定する。ガンマ補正処理手段1cは、入力した映像信号に出力用補正パラメータに基づくガンマ補正を施し、補正後映像信号を出力する。映像データ記録手段1eは、必要に応じて補正後映像信号を圧縮処理し、パラメータ設定手段1bを介して取得した記録用メタデータとともに、映像記録メディア2aに書き込む。また、通信手段を介して外部に映像信号を出力する場合も、記録用メタデータを付加して出力する。
こうして、映像記録メディア2aには、撮影された映像信号に対しダイナミックレンジを確保するためのガンマ補正が施された映像信号と、適用された出力用補正パラメータ及びポストプロダクション処理で参照されるシミュレーション用補正パラメータまたはそのIDと、が記録される。なお、このときガンマ補正パラメータ以外の補正処理も行われれば、適用された補正パラメータのメタデータも映像記録メディア2aに記録される。
シミュレーションモードになると、パラメータ設定手段1bは、ガンマ補正処理手段1cに適用するガンマ補正パラメータをシミュレーション用補正パラメータに切り替える。なお、シミュレーション用補正パラメータに設定されている値が、出力用補正パラメータに重畳する補正値分であれば、出力用補正パラメータに、読み出したシミュレーション用補正パラメータを重畳した補正値を算出した後、ガンマ補正処理手段1cに設定する。ガンマ補正処理手段1cは、パラメータ設定手段1bが設定したシミュレーション用補正パラメータに基づいて映像信号にガンマ補正を施す。補正された補正後映像信号は、表示用信号変換手段1dと、映像データ記録手段1eとに出力される。映像データ記録手段1eは、シミュレーション設定されているので、記録処理は行わない。なお、補正後映像信号を表示用信号変換手段1dのみに出力するとしてもよい。表示用信号変換手段1dは、シミュレーション用補正パラメータに基づいてガンマ補正された映像信号、すなわち、ポストプロダクション処理を模擬した映像信号を取得し、表示用信号に変換した後、DVoutを介して外部の表示装置へ出力する。この表示用信号を表示装置に表示すれば、ポストプロダクション処理が施された後の映像を実際に見て確認することができる。なお、表示装置は、撮像装置に備わっていてもよい。また、このとき、変更指示によってガンマ補正処理手段1cに適用されているシミュレーション用補正パラメータを変更すれば、変更されたシミュレーション補正パラメータがガンマ補正処理手段1cに適用され、パラメータ変更後の映像を表示装置に表示することができる。こうして調整を行い、最終的に得られたシミュレーション用補正パラメータは、パラメータ設定手段1bを介して、新たなシミュレーション用補正パラメータとしてパラメータ記憶手段1aに記憶させることもできる。このとき、新たに登録されるシミュレーション用補正パラメータには、IDが付与される。このシミュレーション補正パラメータは、記録要求があれば、メタデータ記録手段1fによってメタデータ記録メディア2bに記録することができる。このとき、メタデータ記録メディア2bには、メタデータとしてシミュレーション用補正パラメータと、そのIDとが記録される。
このように、モードに応じてガンマ補正パラメータを切り替えられ、記録モードでは出力用ガンマ補正パラメータ、シミュレーションモードではシミュレーション用ガンマ補正パラメータが選択される。シミュレーションモードでは、シミュレーション用ガンマ補正パラメータによってガンマ補正が処理された映像信号が表示用に変換されるので、表示して映像を確認することができる。また、記録モードでは、出力用ガンマ補正パラメータによってガンマ処理がされた映像信号を映像データ記録メディアに記録するときに、メタデータとして選択したシミュレーション用ガンマ補正パラメータまたはそのIDを記録することができる。これにより、撮影現場において、新たな機器などを接続することなく、ポストプロダクション処理のシミュレーションを行って映像を確認することが可能となる。さらに、設定されたシミュレーション用ガンマ補正パラメータを記録用の映像信号とともに次工程のポストプロダクション処理に伝達することが可能となる。この結果、撮影工程及びポストプロダクション処理工程の効率を上げることができる。
以下、実施の形態を、図面を参照して詳細に説明する。
図2は、実施の形態の撮像装置のハードウェア構成例を示したブロック図である。
撮像装置100は、CPU(Central Processing Unit)101によって装置全体が制御されている。CPU101には、バス110を介してRAM(Random Access Memory)102、ROM(Read Only Memory)103、フラッシュメモリ104、撮像部105、表示部106、操作部107、記録再生部108、外部インタフェース(I/F)109が接続されている。
RAM102には、CPU101に実行させるOS(Operating System)のプログラムやアプリケーションプログラムの少なくとも一部が一時的に格納される。また、RAM102には、CPU101による処理に必要な各種データが格納される。ROM103には、OSやアプリケーションのプログラムが格納される。フラッシュメモリ104には、各種パラメータなど、電源断時にも保持しておきたいデータを格納する。撮像部105は、撮像素子や撮像素子を駆動する駆動回路、撮影されたアナログ信号をデジタルに変換するA/D変換回路などを有し、被写体の撮影信号を生成する。表示部106は、CPU101からの命令に従って、ガンマ補正パラメータなどの登録情報を表示する。操作部107は、たとえば、キーボード、釦、スイッチなどを介して入力され操作入力信号を、バス110を介してCPU101に送信する。記録再生部108は、映像記録メディア2aやメタデータ記録メディア2bなどの外部記録メディアに、CPU101の指示に従ってデータを書き込むとともに、外部記録メディアから読み出したデータをバス110経由でCPU101に伝える。外部I/F109は、表示装置などの周辺機器に接続し、CPU101に従って周辺機器との間のデータ交換を処理する。
このようなハードウェア構成によって、本実施の形態の処理機能を実現することができる。
図3は、撮像装置の処理機能を示した機能ブロック図である。
撮像装置は、撮像素子121、映像信号処理部122、補正処理部(ガンマ補正)123、圧縮処理部124、データ記録部125、パラメータ記憶部131、パラメータ設定部132、表示用映像信号変換部133、メタデータ記録部134、操作入力部135、表示処理部136、及びメタデータ読込部137を有する。各部で行われる処理手順は、CPU101がROM103に格納された映像信号処理プログラムを実行することによって実行される。
撮像部105を構成する撮像素子121は、CMOS(Complementary Metal Oxide Semiconductor)やCCD(Charge Coupled Devices)などであり、被写体を撮影した映像信号を生成する。映像信号処理部122は、アナログの映像信号を受け取り、ノイズの除去や、デジタル信号への変換処理などを行う。補正処理部123は、映像信号処理部122によってデジタル変換された映像信号を入力し、色調調整、被線形処理、輪郭補償など、映像信号を補正する補正処理を行う。非線形処理のひとつであるガンマ補正では、通常状態において設定される出力用補正パラメータに基づいて、撮影された映像信号を適切なダイナミックレンジに圧縮する補正が行われる。また、ポストプロダクション処理のシミュレーションが設定されたときは、パラメータ設定部132が設定するシミュレーション用補正パラメータに基づいて、ポストプロダクション処理を模擬したガンマ補正が実行される。補正後の補正後映像信号は、圧縮処理部124と、表示用映像信号変換部133とに出力される。なお、シミュレーション時には表示用映像信号変換部133に補正後映像信号を出力し、シミュレーション以外のときは圧縮処理部124に補正後映像信号を出力するように出力切り替えが行われてもよい。圧縮処理部124は、入力されたデジタルの映像信号のデータ量を削減するため、映像信号に圧縮処理を施す。データ記録部125は、圧縮処理部124によって圧縮された映像信号及び記録用メタデータを映像データ記録メディア201に記録する。
パラメータ記憶部131は、ダイナミックレンジを確保するための出力用補正パラメータと、映像を効果的に補正するためのシミュレーション用補正パラメータと、を記憶する。パラメータ記憶部131は、たとえば、フラッシュメモリ104に設けられる。また、パラメータ記憶部131に記憶されるパラメータは、操作入力部135から入力される指示に従って、パラメータ設定部132が書き換えを行う。パラメータ設定部132は、モードに応じて、補正処理部123のガンマ補正で使用するガンマ補正パラメータを設定する。シミュレーションモードのときは、シミュレーション用補正パラメータを選択し、パラメータ記憶部131から読み出して設定する。記録モードのときは、出力用補正パラメータを選択し、パラメータ記憶部131から読み出して設定する。また、記録モード時は、記録用メタデータをデータ記録部125へ出力する。表示用映像信号変換部133は、シミュレーションモード時、補正処理部123がシミュレーション用補正パラメータに基づいて補正処理を行った映像信号を取得し、表示用の映像信号に変換した後、DVoutを介して外部へ出力する。メタデータ記録部134は、要求のあったとき、シミュレーション用ガンマ補正パラメータに関するポスプロ用メタデータをメタデータ記録メディア202に記録する。なお、ポスプロ用メタデータは、パラメータ設定部132から取得してもよいし、メタデータ記録部134が直接パラメータ記憶部131から読み出してもよい。操作入力部135は、ユーザが操作部107を操作して指示した内容を情報に変換し、パラメータ設定部132に伝達する。パラメータ設定部132に伝達される情報には、シミュレーションが設定されたか否か、ガンマ補正パラメータの値変更などがある。表示処理部136は、パラメータ設定部132の指示に従って、現在設定されている補正パラメータやメタデータ、変更操作状態などの情報を表示する。メタデータ読込部137は、記録再生部108を制御して、ポストプロダクション装置などで予め設定され、メタデータ記録メディア202に記録されたメタデータを読み込む。メタデータは、自装置が前回処理以前にメタデータ記録メディア202に書き込んでおいたものでもよい。この場合のメタデータは、主としてポスプロ用メタデータを指す。
このような撮像装置では、記録モード時、パラメータ設定部132は、ダイナミックレンジの確保を目的とした出力用補正パラメータを選択し、ガンマ補正処理を行う補正処理部123に設定する。また、適用された出力用補正パラメータと、撮影後のポストプロダクション処理に適用したいシミュレーション用補正パラメータ、またはそのIDとを含む記録用メタデータも、データ記録部125に出力される。撮像素子121が撮影し、映像信号処理部122によってデジタルに変換された映像信号が補正処理部123に入力される。補正処理部123は、入力された映像信号を出力用補正パラメータに基づいてガンマ補正し、同時に設定されるそのほかの補正処理を行った補正後映像信号を圧縮処理部124へ出力する。圧縮処理部124では、補正後映像信号を圧縮処理し、データ記録部125へ出力する。データ記録部125は、圧縮された映像信号と、記録用メタデータとを映像データ記録メディア201に記録する。こうして映像データ記録メディア201には、撮影された映像信号と、記録用メタデータとが記録される。
シミュレーションモード時は、パラメータ設定部132は、パラメータ記憶部131からシミュレーション用補正パラメータを読み出し、補正処理部123に設定する。このとき、それぞれ設定値が異なる複数のシミュレーション用補正パラメータの組があれば、操作入力部135によって選択されたシミュレーション用ガンマ補正パラメータの組が選択され、補正処理部123に設定される。また、シミュレーション実行時に、操作入力部135からパラメータの変更指示があれば、変更指示に基づいてシミュレーション用補正パラメータを変更し、補正処理部123の設定に反映させる。このとき、パラメータ記憶部131に記憶される当該シミュレーション用補正パラメータは、変更指示に応じて更新されてもよいし、最終的に指示された時点で更新するとしてもよい。補正処理部123は、設定されたシミュレーション用補正パラメータを用いて映像信号にガンマ補正を施し、補正映像信号を表示用映像信号変換部133と、圧縮処理部124とに出力する。表示用映像信号変換部133は、補正後映像信号を表示用信号に変換し、DVoutから出力する。圧縮処理部124は、特に処理は行わない。DVoutを介して接続する表示装置は、ポストプロダクション処理のシミュレーション用のシミュレーション用補正パラメータによって補正された映像信号に基づく表示を行うことができる。また、このとき適用されたシミュレーション用補正パラメータに関するポスプロ用メタデータは、メタデータ記録部134によってメタデータ記録メディア202に適宜記録される。
以上のように、実施の形態では、1台の撮像装置においてモードを切り替えることにより、出力用補正パラメータを適用した映像信号の記録と、シミュレーション用補正パラメータを適用した映像信号の表示とを切り替えて実行することができる。これにより、撮影時に、大規模な装置を用いることなく、ポストプロダクション処理のシミュレーションを行って、ポストプロダクション処理の映像効果を確認し、適用するガンマ補正パラメータの値を予め決めておくことができる。さらに、記録モードでは、通常の出力用補正パラメータを用いてガンマ補正が行われた映像信号とともに、シミュレーションで決定されたシミュレーション用補正パラメータ、またはそのIDを映像データ記録メディアに記録しておく。なお、IDが記録されるときは、対応するポスプロ用メタデータをメタデータ記録メディアに記録しておく必要がある。
ポストプロダクション装置では、映像データ記録メディアから、映像信号とともにポスプロ用メタデータを取得し、ポスプロ用メタデータに設定されるシミュレーション用補正パラメータによって映像信号の補正を行う。
ここで、ガンマ補正パラメータの設定について説明する。
図4は、ガンマカーブを調整する補正パラメータの一例を示した図である。(A)はゲイン係数(GAIN)、(B)はリフト係数(LIFT)、(C)は、パワー係数(POWER)を示した図である。
以下、元のガンマカーブをガンマ値=1としたときの補正処理について説明する。ガンマ値=1のとき、ガンマカーブは直線となり、入力xと出力yの関係を、y=xと表すことができる。
(A)ゲイン係数(GAIN)は、ガンマカーブの傾きを変えるパラメータである。ゲイン係数をaとすると、ガンマカーブを補正する補正関数f(x)は、
y=f(x)=ax ・・・(1)
と表すことができる。パラメータaは、−9.99から9.99の範囲の値をとれることとする。
(B)リフト係数(LIFT)は、ガンマカーブにオフセットを与えるパラメータである。リフト係数をbとすると、ガンマカーブを補正する補正関数g(x)は、
y=g(x)=x+b ・・・(2)
と表すことができる。パラメータbは、−9.99から9.99の範囲の値をとれることとする。
(C)パワー係数(POWER)は、ガンマカーブの指数を変え、ガンマ値を補正するパラメータである。パラメータをcとすると、ガンマカーブを補正する補正関数h(x)は、
y=h(x)=xc ・・・(3)
と表すことができる。パラメータcは、−9.99から9.99の範囲の値をとれることとする。
このように、補正関数の係数をパラメータとして設定することにより、所望の映像表現を再現するガンマカーブが得られる。さらに、実施の形態では、補正関数の処理順を任意に設定することができる。
図5は、従来の補正処理と実施の形態の補正処理とを示した図である。(A)は、ハードウェアで構成された従来のガンマ補正処理回路であり、(B)は、ソフトウェアで構成された実施の形態のガンマ補正処理部である。
(A)は、ハードウェア構成の例であり、補正処理の順序が固定である。すなわち、図の例では、f(x)補正回路301、g(x)補正回路302、及びh(x)補正回路303の順に接続が固定化されている。f(x),g(x),h(x)は、図4と同じとする。この場合、各補正関数の係数は、ユーザが任意に調整することができるが、入力信号xに対して補正関数f(x)の処理が行われ、その出力x’に対して補正関数g(x)の処理が行われ、最後にその出力x”に対して補正関数h(x)の処理が行われるという順序を変更することはできない。
これに対し、(B)に示した実施の形態のソフトウェア構成では、補正関数を合成し、ガンマ補正処理部に反映させることができる。(A)と同様の構成を実現する場合には、ガンマ補正処理部310にて、補正関数h(g(f(x)))による処理が行われる。
ここで、式(1)で表された補正関数f(x)と式(2)で表された補正関数g(x)とを実行する場合には、(A)の構成で行われる補正では、ガンマカーブは、常に、y=ax+bになる。これに対し、(B)の構成では、演算順を補正関数f(x)、補正関数g(x)にすれば、(A)と同様に、ガンマカーブは、y=ax+bによって補正される。しかし、補正処理順を補正関数g(x)、補正関数f(x)とすれば、ガンマカーブは、y=a(x+b)によって補正される。補正関数h(x)を組み合わせることにより、さらに、多彩な補正を行うことが可能となる。また、各補正関数の係数を任意に設定できることは当然である。
以上のガンマ補正処理を実現するため、本実施の形態では、シミュレーション用補正パラメータに関するポスプロ用メタデータとして、補正関数f(x)調整用のパラメータa、補正関数g(x)調整用のパラメータb、補正関数h(x)調整用のパラメータc、及び補正関数f(x),g(x),h(x)の処理順序を設定する。
なお、実際の撮像装置では、ガンマ補正は、赤(R)、緑(G)、青(B)の色ごとに調整される。また、ガンマカーブ自体の補正もガンマカーブ全体を補正する場合のほか、あるガンマカーブのある範囲の補正のみを行う場合がある。上記の説明の本実施の形態のガンマ補正処理が、各色、あるいは、ガンマカーブの所定の範囲について適用できることは当然である。
また、上記の説明は、ガンマカーブの理論式に対する補正処理を示している。実際の処理では、たとえば、理論式を近似した折れ線近似による補正あるいは、ルックアップテーブルと呼ばれる補正テーブルを用いた補正を行う。このような処理は公知であり、本実施の形態では、上記のようにして算出された理論式に基づいて、折れ線あるいはルックアップテーブルを用いた処理が適宜実行されることとし、詳細な説明は省略する。
次に、ユーザがシミュレーション用補正パラメータのメタデータを変更し、シミュレーション用補正パラメータを調整するときの処理について説明する。図6は、表示部に表示されるメニュー画面の一例を示した図である。
パラメータ設定部132は、操作入力部135を介してメタデータ変更指示が入力されると、表示処理部136に指示し、表示部106にメニュー画面400を表示させる。
メニュー画面400には、ページタイトル401とともに、ページ番号402と、シミュレーション用補正パラメータであるGAIN403、LIFT404、POWER405、及びORDER406の現在の設定値が表示される。
ページタイトル401は、ページの内容を示す情報で、任意に登録することができる。ページ番号402は、ページに対応するシミュレーション用補正パラメータを特定する特定情報であり、シミュレーション用補正パラメータ(ポスプロ用メタデータ)のIDである。また、「製品型番、製造番号、パラメータ作成日時・時刻」や、SMPTEで規定されグローバルユニーク(世界中で唯一)なIDであるUMID(Unique Material Identifier)を用いてもよい。これにより、複数のカメラで撮影した映像素材をポストプロダクション処理において同時に扱うことができる。なお、UMIDはSMPTE 330Mで規定されている。撮像装置では、予め、それぞれ異なる映像表現が再現されるシミュレーション用補正パラメータのメタデータ(GAIN、LIFT、POWER、ORDER)の組が、ページに対応付けられて複数管理されている。ユーザは、パラメータを個々に調整して設定することもできるし、所望の映像が得られるパラメータ値が設定されたページを選択して設定することもできる。もちろん、新たにページを設定することもできる。
ここで、GAIN403はゲイン係数を決めるパラメータ、LIFT404はリフト係数を決めるパラメータ、及びPOWER405はパワー係数を決めるパラメータを表し行に表示されている数値はその値である。値は、操作入力部135を介して入力された指示に基づいて適宜更新される。ORDER406は、補正関数の演算順序を表す項目で、補正関数に対応する文字列が表示される。図の例で、Gはゲイン係数を補正するf(x)、Lはリフト係数を補正するg(x)、及びPはパワー係数を補正するh(x)を表す。図のGLPは、f(x)、g(x)、h(x)の演算順で実行することを示す。また、GPLは、f(x)、h(x)、g(x)の演算順を示し、LGPはg(x)、f(x)、h(x)の演算順を示す。他の演算順も同様に設定することができる。
ユーザは、操作部107を操作し、それぞれのパラメータ値、演算順を変更する。そして、ユーザが登録釦407を操作すると、パラメータ設定部132によって、パラメータ記憶部131の所定の領域に更新したメタデータ値が書き込まれる。パラメータ記憶部131には、ページに対応する領域が設けられており、パラメータ設定部132はページ番号402に対応する領域、図の例ではページ9に対応する領域のシミュレーション用補正パラメータを更新する。
ここで、メタデータについて説明する。図7は、メタデータの例を示した図である。(A)は、メタデータをASCII形式で表記した一例であり、(B)は、バイナリ(Binary)形式で表記した一例である。
(A)ASCII形式では、メニュー画面400に表示されるパラメータの項目名と、設定されたパラメータ値の文字一つずつをASCIIコード(2桁の16進数)に変換する。たとえば、図6に示した「GAIN:(+)0.95,LIFT:−1.55・・・」は、47H(G)、41H(A)、49H(I)、4EH(N)、3AH(:)、2BH(+)、30H(0)、2EH(.)、39H(9)、35H(5)、44H(,)、4CH(L)、・・・と変換される。この例では、数値と次のアイテムとの間は、カンマ(,)で区切られている。
ASCII形式の場合、それぞれの文字がASCIIコードに変換されるので、後で項目の変更が生じたときにも対処しやすい。特に、別装置であるポストプロダクション装置とのデータ受け渡しの際は、メタデータの構造を通知する必要はなく、便利である。しかし、GAIN、LIFTがそれぞれ10文字、POWERが11文字、ORDERが9文字、カンマに3文字とあり、かつASCIIコードに変換するとバイト数は文字数の倍になるので、データ量が多くなる。
(B)バイナリ形式では、メニュー画面400に表示されている項目に対応してバイト領域が設けられている。たとえば、GAINは、バイト0から3の4バイトを使って、パラメータ値を格納する。同様に、LIFTは、バイト4から7を使って、パラメータ値を格納する。ORDERの演算順序は、G,L,Pの順序6通りについて、0〜5のIDを振り、バイト番号Cに格納する。
バイナリ形式の場合、メニュー画面400の情報が、0〜Cバイトの13バイトで表現することが可能であり、メタデータのサイズを小さくすることができる。しかし、項目の入れ替えなどの柔軟な対応はできない。
以上のような形式で記述されるメタデータは、メタデータ記録メディア202、あるいは、映像データ記録メディア201に記録され、ポストプロダクション装置などに引き渡される。また、予め受け渡し先の装置が、同じ内容のメタデータを保持しているときには、メタデータ全体を送る必要はなく、ポスプロ用メタデータのIDのみが送付されればよい。
たとえば、映像データ記録メディア201に、圧縮された映像信号と、記録用メタデータとして出力用補正パラメータとポスプロ用メタデータのIDとが記録されていたとする。ポストプロダクション装置には、メタデータ記録メディア202などを介して、このメタデータIDによって特定されるシミュレーション用補正パラメータの値を設定しておくとする。ポストプロダクション装置では、映像データ記録メディア201に記録されるメタデータIDを読み取り、自装置が保持するポスプロ用メタデータから、IDが一致するものを選択する。これにより、ポストプロダクション装置では、撮像装置によって指定されたガンマ補正パラメータで映像信号を処理することが可能となる。なお、映像データ記録メディア201の記録用メタデータに直接ポスプロ用メタデータが記録されている場合には、これを用いてポストプロダクション処理を行う。
このような実施の形態の撮像装置によれば、撮像現場において、撮影された映像信号のポストプロダクション処理のシミュレーションを指示すると、パラメータ設定部132は、補正処理部123のガンマ補正パラメータを、シミュレーション用補正パラメータに切り替える。補正処理部123においてシミュレーション用補正パラメータで処理された映像信号は、表示用映像信号変換部133で表示用信号に変換され表示装置に表示される。ユーザは、表示装置に表示された映像を確認しながら、操作入力部135を操作してシミュレーション用補正パラメータを調整する。そして、所望の映像が得られた時点でシミュレーション用補正パラメータを決定し、設定されたシミュレーション用補正パラメータのポスプロ用メタデータは、IDとともにパラメータ記憶部131に記憶される。このポスプロ用メタデータは、要求があれば、IDとともにメタデータ記録部134によってメタデータ記録メディア202に記録される。シミュレーションが終了されると、パラメータ設定部132は、ガンマ補正パラメータを出力用補正パラメータに切り替える。なお、メタデータ記録メディア202への書き込みは、シミュレーションモードでなくてもできることとする。
記録モード時、撮影された映像信号は、出力用補正パラメータによって補正された後、圧縮処理され映像データ記録メディア201に記録される。このとき、映像信号に付加して、記録用メタデータ(適用された出力用補正パラメータ、指定されたシミュレーション用補正パラメータのポスプロ用メタデータ、または、ポスプロ用メタデータのIDが、映像データ記録メディア201に記録される。
ポストプロダクション装置では、映像データ記録メディア201に記録されたポスプロ用メタデータを解読し、再現されたガンマ補正パラメータを用いて映像データ記録メディア201に記録された映像信号のガンマ補正処理を行う。また、映像データ記録メディア201にメタデータのIDのみが記録されていたときは、メタデータ記録メディア202を読み込んで対応するメタデータを取得し、同様の処理を行う。なお、同一IDのメタデータが、装置内に保存されているときは、これを用いてもよい。
以上のように、本実施の形態では、撮影現場で簡単にポストプロダクション処理をシミュレーションできるばかりでなく、シミュレーションの結果をプロダクション装置での処理に利用することができる。
次に、本実施の形態の映像信号処理を、シミュレーションモードの場合と、記録モードの場合とについて説明する。
図8は、シミュレーションモードの場合の映像信号処理の手順を示したフローチャートである。
[ステップS01] シミュレーションがモードであるかどうかを判定する。シミュレーションモードのときは、ステップS02へ処理を進める。記録モードのときは、図9に示した処理Aへ進む。
[ステップS02] 補正処理部123に設定するガンマ補正パラメータの切り替えが必要であるかどうかを判定する。シミュレーションモードに切り替わった後の最初の処理であれば、切り替えが必要と判定する。切り替えが必要と判定されたときは、処理をステップS03へ進め、切り替えが必要と判定されなかったときは、処理をステップS06へ進める。
[ステップS03] パラメータ記憶部131に格納されるシミュレーション用補正パラメータを読み出す。複数の組のシミュレーション用補正パラメータが設定されているときは、指定されたパラメータの組、または、最終に使用されたパラメータの組のデータを読み出す。
[ステップS04] 現在設定されている出力用補正パラメータに、ステップS03で読み出したシミュレーション用補正パラメータを重畳し、ガンマ補正パラメータを算出する。
[ステップS05] ステップS04で算出されたガンマ補正パラメータを補正処理部123に設定する。これにより、以降、補正処理部123は、設定されたガンマ補正パラメータに基づいて映像信号処理部122から入力される映像信号のガンマ補正処理を行う。
[ステップS06] メタデータ記録メディアへの記録要求の有無を判定する。要求がないときは、処理を終了する。要求があったときは、処理をステップS07へ進める。
[ステップS07] メタデータ記録メディアへの記録が要求されたときは、要求されたポスプロ用メタデータをメタデータ記録メディア202へ書き込む。また、パラメータ記憶部131に記憶されるすべてのポスプロ用メタデータをメタデータ記録メディア202に書き込むとしてもよい。
以上の処理手順が実行されることにより、シミュレーションモードになると、補正処理部123が適用するガンマ補正パラメータは、シミュレーション用補正パラメータに切り替えられる。シミュレーション用補正パラメータに基づいて補正処理が行われた映像信号は、表示用映像信号変換部133で表示用信号に変換され、表示装置に出力される。これにより、ユーザは、撮影現場で、ポストプロダクション処理をシミュレーションすることが可能となる。
図9は、記録モードの場合の映像信号処理の手順を示したフローチャートである。
記録モードのとき、以下の処理が行われる。
[ステップS11] 補正処理部123に設定するガンマ補正パラメータの切り替えが必要であるかどうかを判定する。シミュレーションから記録モードに切り替わった後の最初の処理であれば、切り替えが必要と判定する。切り替えが必要と判定されたときは、処理をステップS12へ進め、切り替えが必要と判定されなかったときは、処理をステップS14へ進める。
[ステップS12] 切り替えが必要と判定されたときは、パラメータ記憶部131から出力用補正パラメータを読み出す。複数の組の出力用補正パラメータが設定されているときは、指定されたパラメータの組、または、最終に使用されたパラメータの組のデータを読み出す。
[ステップS14] 映像データ記録メディアへの記録要求の有無を判定する。要求がないときは、処理を終了する。要求があったときは、処理をステップS15へ進める。
[ステップS15] 対応させるポスプロ用メタデータを特定するIDを取得する。
[ステップS16] 映像データ記録メディアに、圧縮処理を施した映像信号とともに、メタデータして、映像信号に施された出力用補正パラメータ及びポスプロ用メタデータIDとを記録する。また、メタデータに、直接ポスプロ用メタデータメを記録してもよい。
以上の処理手順が実行されることにより、撮影された映像信号に対し、通常の記録用に用いられる出力用補正パラメータに基づくガンマ補正を施した映像信号が、ポストプロダクション処理で参照されるポスプロ用メタデータ、あるいはポスプロ用メタデータIDとともに映像データ記録メディア201に記録される。撮影後のポストプロダクション処理では、映像データ記録メディア201に記録されたポスプロ用メタデータまたはポスプロ用メタデータIDを参照し、映像信号に対するプロダクション処理を実行することができる。
なお、上記の処理機能は、コンピュータによって実現することができる。その場合、撮像装置が有すべき機能の処理内容を記述したプログラムが提供される。そのプログラムをコンピュータで実行することにより、上記処理機能がコンピュータ上で実現される。処理内容を記述したプログラムは、コンピュータで読み取り可能な記録媒体に記録しておくことができる。コンピュータで読み取り可能な記録媒体としては、磁気記録装置、光ディスク、光磁気記録媒体、半導体メモリなどがある。磁気記録装置には、ハードディスク装置(HDD)、フレキシブルディスク(FD)、磁気テープなどがある。光ディスクには、DVD(Digital Versatile Disc)、DVD−RAM、CD−ROM(Compact Disc Read Only Memory)、CD−R(Recordable)/RW(ReWritable)などがある。光磁気記録媒体には、MO(Magneto-Optical disk)などがある。
プログラムを流通させる場合には、たとえば、そのプログラムが記録されたDVD、CD−ROMなどの可搬型記録媒体が販売される。また、プログラムをサーバコンピュータの記憶装置に格納しておき、ネットワークを介して、サーバコンピュータから他のコンピュータにそのプログラムを転送することもできる。
プログラムを実行するコンピュータは、たとえば、可搬型記録媒体に記録されたプログラムもしくはサーバコンピュータから転送されたプログラムを、自己の記憶装置に格納する。そして、コンピュータは、自己の記憶装置からプログラムを読み取り、プログラムに従った処理を実行する。なお、コンピュータは、可搬型記録媒体から直接プログラムを読み取り、そのプログラムに従った処理を実行することもできる。また、コンピュータは、サーバコンピュータからプログラムが転送されるごとに、逐次、受け取ったプログラムに従った処理を実行することもできる。
実施の形態に適用される発明の概念図である。 実施の形態の撮像装置のハードウェア構成例を示したブロック図である。 撮像装置の処理機能を示した機能ブロック図である。 ガンマカーブを調整する補正パラメータの一例を示した図である。 従来の補正処理と実施の形態の補正処理とを示した図である。 表示部に表示されるメニュー画面の一例を示した図である。 メタデータの例を示した図である。 シミュレーションモードの場合の映像信号処理の手順を示したフローチャートである。 記録モードの場合の映像信号処理の手順を示したフローチャートである。
符号の説明
1a・・・パラメータ記憶手段、1b・・・パラメータ設定手段、1c・・・ガンマ補正処理手段、1d・・・表示用信号変換手段、1e・・・映像データ記録手段、1f・・・メタデータ記録手段、2a・・・映像記録メディア、2b・・・メタデータ記録メディア

Claims (7)

  1. 撮像素子に取り込まれた映像信号に所定の映像信号処理を施して記録用や表示用に変換する撮像装置において、
    撮影された映像信号を記録メディアに記録、または出力端子を介して外部へ出力する記録モード時に適用される出力用補正パラメータと、撮影後の編集工程における後処理をシミュレーションするシミュレーションモード時に適用されるシミュレーション用補正パラメータと、を記憶するパラメータ記憶手段と、
    外部からの指示入力に基づいて前記シミュレーションモードが設定されたときは前記シミュレーション用補正パラメータを選択し、前記シミュレーションモードが解除されたときは前記出力用補正パラメータを選択して前記パラメータ記憶手段から読み出し、補正処理用に設定するパラメータ設定手段と、
    前記パラメータ設定手段によって補正処理用に設定された前記出力用補正パラメータまたは前記シミュレーション用補正パラメータに基づいて、入力された前記映像信号に対しガンマ補正処理を行うガンマ補正処理手段と、
    前記シミュレーションモードが設定されたとき、前記シミュレーション用補正パラメータに基づいてガンマ補正が施された前記映像信号を、表示用信号に変換する表示用信号変換手段と、
    を有することを特徴とする撮像装置。
  2. 前記シミュレーション用補正パラメータを、前記シミュレーション用補正パラメータを特定する特定情報とともに、他の装置から読み出し可能なメタデータ記録メディアに記録、または外部へ出力するメタデータ記録手段を、
    さらに有することを特徴とする請求項1記載の撮像装置。
  3. 前記記録モード時、前記出力用補正パラメータによって前記ガンマ補正が施された前記映像信号を他の装置から読み出し可能な前記記録メディアに記録、または外部へ出力するとき、前記映像信号に前記シミュレーションモード時に決定された前記シミュレーション用補正パラメータを付加する映像データ記録手段を、
    さらに、有することを特徴とする請求項1記載の撮像装置。
  4. 前記シミュレーション用補正パラメータには、前記シミュレーション用補正パラメータを特定する特定情報が関連付けられており、
    前記映像データ記録手段は、前記シミュレーション用補正パラメータの代わりに前記シミュレーション用補正パラメータの特定情報を前記映像信号に付加する、
    ことを特徴とする請求項3記載の撮像装置。
  5. 前記シミュレーション用補正パラメータは、前記ガンマ補正処理手段に適用されるガンマカーブの特性を変更する複数の補正関数の係数と、前記複数の補正関数によって行われる演算の順序と、を含み、
    前記ガンマ補正処理手段は、前記シミュレーション用補正パラメータによって規定される前記複数の補正関数を合成し、合成された補正関数に基づいてガンマ補正処理を実行する、
    ことを特徴とする請求項1記載の撮像装置。
  6. 撮像素子に取り込まれた映像信号を所定の映像信号処理を施して記録用や表示用に変換する撮像方法において、
    パラメータ設定手段が、撮影された映像信号を記録メディアに記録、または出力端子を介して外部へ出力する記録モード時に適用される出力用補正パラメータと、撮影後の編集工程における後処理をシミュレーションするシミュレーションモード時に適用されるシミュレーション用補正パラメータとを記憶するパラメータ記憶手段から、外部からの指示入力に基づいて前記シミュレーションモードが設定されたときは前記シミュレーション用補正パラメータを選択し、前記シミュレーションモードが解除されたときは前記出力用補正パラメータを選択して読み出し、補正処理用に設定するステップと、
    ガンマ補正処理手段が、前記パラメータ設定手段によって補正処理用に設定された前記出力用補正パラメータまたは前記シミュレーション用補正パラメータに基づいて、入力された前記映像信号に対しガンマ補正処理を行うステップと、
    表示用信号変換手段が、前記シミュレーションモードが設定されたとき、前記シミュレーション用補正パラメータに基づいてガンマ補正が施された前記映像信号を、表示用信号に変換するステップと、
    を実行することを特徴とする撮像方法。
  7. 撮像素子に取り込まれた映像信号を所定の映像信号処理を施して補正する処理を行う映像信号処理プログラムにおいて、
    コンピュータを、
    撮影された映像信号を記録メディアに記録、または出力端子を介して外部へ出力する記録モード時に適用される出力用補正パラメータと、撮影後の編集工程における後処理をシミュレーションするシミュレーションモード時に適用されるシミュレーション用補正パラメータとを記憶するパラメータ記憶手段から、外部からの指示入力に基づいて前記シミュレーションモードが設定されたときは前記シミュレーション用補正パラメータを選択し、前記シミュレーションモードが解除されたときは前記出力用補正パラメータを選択して読み出し、補正処理用に設定するパラメータ設定手段、
    前記パラメータ設定手段によって補正処理用に設定された前記出力用補正パラメータまたは前記シミュレーション用補正パラメータに基づいて、入力された前記映像信号に対しガンマ補正処理を行うガンマ補正処理手段、
    前記シミュレーションモードが設定されたとき、前記シミュレーション用補正パラメータに基づいてガンマ補正が施された前記映像信号を、表示用信号に変換する表示用信号変換手段、
    として機能させることを特徴とする映像信号処理プログラム。
JP2007182824A 2007-07-12 2007-07-12 撮像装置及び撮像方法並びに映像信号処理プログラム Active JP4363468B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2007182824A JP4363468B2 (ja) 2007-07-12 2007-07-12 撮像装置及び撮像方法並びに映像信号処理プログラム
US12/170,745 US8077229B2 (en) 2007-07-12 2008-07-10 Image parameter correction for picked-up image and simulated image
CN2008101307505A CN101345888B (zh) 2007-07-12 2008-07-14 成像装置和成像方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007182824A JP4363468B2 (ja) 2007-07-12 2007-07-12 撮像装置及び撮像方法並びに映像信号処理プログラム

Publications (2)

Publication Number Publication Date
JP2009021827A JP2009021827A (ja) 2009-01-29
JP4363468B2 true JP4363468B2 (ja) 2009-11-11

Family

ID=40247756

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007182824A Active JP4363468B2 (ja) 2007-07-12 2007-07-12 撮像装置及び撮像方法並びに映像信号処理プログラム

Country Status (3)

Country Link
US (1) US8077229B2 (ja)
JP (1) JP4363468B2 (ja)
CN (1) CN101345888B (ja)

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9137417B2 (en) 2005-03-24 2015-09-15 Kofax, Inc. Systems and methods for processing video data
US9769354B2 (en) 2005-03-24 2017-09-19 Kofax, Inc. Systems and methods of processing scanned data
US7545529B2 (en) * 2005-03-24 2009-06-09 Kofax, Inc. Systems and methods of accessing random access cache for rescanning
US8774516B2 (en) 2009-02-10 2014-07-08 Kofax, Inc. Systems, methods and computer program products for determining document validity
US9349046B2 (en) 2009-02-10 2016-05-24 Kofax, Inc. Smart optical input/output (I/O) extension for context-dependent workflows
US8958605B2 (en) 2009-02-10 2015-02-17 Kofax, Inc. Systems, methods and computer program products for determining document validity
US9576272B2 (en) 2009-02-10 2017-02-21 Kofax, Inc. Systems, methods and computer program products for determining document validity
US9767354B2 (en) 2009-02-10 2017-09-19 Kofax, Inc. Global geographic information retrieval, validation, and normalization
CN101883202B (zh) * 2010-07-07 2012-06-27 世大光电(深圳)有限公司 侦测传感器内部讯号改善装置及方法
US8567112B2 (en) * 2010-10-11 2013-10-29 Amerigreen Technology, Inc. Method and apparatus for controlling burrowing animals
JP5730634B2 (ja) * 2011-03-24 2015-06-10 オリンパス株式会社 画像処理装置
US9058515B1 (en) 2012-01-12 2015-06-16 Kofax, Inc. Systems and methods for identification document processing and business workflow integration
US10146795B2 (en) 2012-01-12 2018-12-04 Kofax, Inc. Systems and methods for mobile image capture and processing
US9058580B1 (en) 2012-01-12 2015-06-16 Kofax, Inc. Systems and methods for identification document processing and business workflow integration
US8989515B2 (en) 2012-01-12 2015-03-24 Kofax, Inc. Systems and methods for mobile image capture and processing
US9483794B2 (en) 2012-01-12 2016-11-01 Kofax, Inc. Systems and methods for identification document processing and business workflow integration
JP6021356B2 (ja) * 2012-03-02 2016-11-09 キヤノン株式会社 画像表示装置及びその制御方法
JP5873380B2 (ja) * 2012-04-11 2016-03-01 キヤノン株式会社 画像処理装置およびその制御方法
JP5416253B2 (ja) * 2012-06-27 2014-02-12 株式会社Nttドコモ 関連コンテンツ検索装置及び関連コンテンツ検索方法
JP2014075762A (ja) * 2012-10-05 2014-04-24 Nikon Corp 撮像装置
JP6008716B2 (ja) 2012-11-29 2016-10-19 キヤノン株式会社 撮像装置、画像処理装置、画像処理システム、及び制御方法
JP6049425B2 (ja) * 2012-11-29 2016-12-21 キヤノン株式会社 撮像装置、画像処理装置、及び制御方法
JP6057705B2 (ja) 2012-12-28 2017-01-11 キヤノン株式会社 撮像装置、撮像装置の制御方法、及びプログラム
JP2014164690A (ja) * 2013-02-27 2014-09-08 Nippon Hoso Kyokai <Nhk> 映像質感変換装置、変換パラメータ生成装置、映像質感近似変換装置、および、それらのプログラム
US9208536B2 (en) 2013-09-27 2015-12-08 Kofax, Inc. Systems and methods for three dimensional geometric reconstruction of captured image data
US9355312B2 (en) 2013-03-13 2016-05-31 Kofax, Inc. Systems and methods for classifying objects in digital images captured using mobile devices
WO2014160426A1 (en) 2013-03-13 2014-10-02 Kofax, Inc. Classifying objects in digital images captured using mobile devices
US20140316841A1 (en) 2013-04-23 2014-10-23 Kofax, Inc. Location-based workflows and services
DE202014011407U1 (de) 2013-05-03 2020-04-20 Kofax, Inc. Systeme zum Erkennen und Klassifizieren von Objekten in durch Mobilgeräte aufgenommenen Videos
JP2016538783A (ja) 2013-11-15 2016-12-08 コファックス, インコーポレイテッド モバイル映像データを用いて長尺文書の合成画像を生成するためのシステムおよび方法
US10009588B2 (en) 2013-12-26 2018-06-26 Canon Kabushiki Kaisha Image processing apparatus and imaging apparatus
US9760788B2 (en) 2014-10-30 2017-09-12 Kofax, Inc. Mobile document detection and orientation based on reference object characteristics
US9832419B2 (en) * 2014-12-18 2017-11-28 Canon Kabushiki Kaisha Display apparatus, control method, and non-transitory computer-readable medium in which an image-quality adjusting parameter set for received image data is recorded in a storage
CN105796125B (zh) * 2014-12-29 2019-01-18 深圳市巨烽显示科技有限公司 一种超声图像输出显示效果的调整方法及便携式超声设备
US10242285B2 (en) 2015-07-20 2019-03-26 Kofax, Inc. Iterative recognition-guided thresholding and data extraction
US9779296B1 (en) 2016-04-01 2017-10-03 Kofax, Inc. Content-based detection and three dimensional geometric reconstruction of objects in image and video data
US10803350B2 (en) 2017-11-30 2020-10-13 Kofax, Inc. Object detection and image cropping using a multi-detector approach
US11910105B2 (en) 2019-03-29 2024-02-20 Sony Group Corporation Video processing using a blended tone curve characteristic

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3887060B2 (ja) * 1997-04-09 2007-02-28 ペンタックス株式会社 電子スチルカメラの画像補正情報記録装置および画像復元処理装置
JP3610195B2 (ja) * 1997-07-04 2005-01-12 キヤノン株式会社 撮像装置
JP4126784B2 (ja) 1998-10-30 2008-07-30 株式会社ニコン 画像取り込み装置
JP2001251635A (ja) * 2000-03-07 2001-09-14 Olympus Optical Co Ltd 電子カメラ
EP1152604A1 (en) * 2000-04-24 2001-11-07 Pulnix America, Inc. Video glare reduction
US6995793B1 (en) * 2000-11-14 2006-02-07 Eastman Kodak Company Video tap for a digital motion camera that simulates the look of post processing
JP2002374417A (ja) 2001-06-15 2002-12-26 Canon Inc 画像処理装置及び画像処理方法
JP3927995B2 (ja) * 2001-12-27 2007-06-13 ソニー株式会社 画像表示制御装置と画像表示制御方法及び撮像装置
US20030174228A1 (en) * 2002-03-14 2003-09-18 Brake Wilfred F. System for user-selectable image pre-processing in a digital camera
JP4218264B2 (ja) 2002-06-25 2009-02-04 ソニー株式会社 コンテンツ作成システム、コンテンツ企画作成プログラム、プログラム記録媒体、撮像装置、撮像方法、撮像プログラム
US7463295B2 (en) * 2002-06-26 2008-12-09 Panasonic Corporation Characteristic correction apparatus for gamma correcting an image based on the image type
JP2004328098A (ja) 2003-04-22 2004-11-18 Mitsubishi Electric Corp デジタルカメラおよびその画像補正方法
JP2006005477A (ja) * 2004-06-15 2006-01-05 Canon Inc 撮像装置及び撮像方法及びプログラム
JP4407454B2 (ja) * 2004-09-30 2010-02-03 セイコーエプソン株式会社 ディジタルカメラ及び画像処理方法
JP2006340120A (ja) * 2005-06-03 2006-12-14 Sony Corp 撮像装置、撮像結果の処理方法、画像処理装置、撮像結果の処理方法のプログラム、撮像結果の処理方法のプログラムを記録した記録媒体及び撮像結果の処理システム
JP4587178B2 (ja) * 2005-07-29 2010-11-24 キヤノン株式会社 撮像装置及び撮像方法
JP4244972B2 (ja) 2005-08-02 2009-03-25 ソニー株式会社 情報処理装置,情報処理方法,およびコンピュータプログラム
JP4792985B2 (ja) * 2006-01-18 2011-10-12 カシオ計算機株式会社 カメラ装置、撮影条件設定方法、及び、プログラム
JP2007235506A (ja) * 2006-03-01 2007-09-13 Pioneer Electronic Corp 画像調整装置および画像調整方法
JP5083090B2 (ja) * 2007-09-18 2012-11-28 ソニー株式会社 表示制御装置、撮像装置、表示制御方法およびプログラム
JP4513891B2 (ja) * 2008-04-09 2010-07-28 ソニー株式会社 映像信号処理装置、撮像装置、映像信号処理方法及びプログラム
US8259208B2 (en) * 2008-04-15 2012-09-04 Sony Corporation Method and apparatus for performing touch-based adjustments within imaging devices
JP5509750B2 (ja) * 2009-01-15 2014-06-04 カシオ計算機株式会社 画像処理装置、及びプログラム

Also Published As

Publication number Publication date
US20090015687A1 (en) 2009-01-15
CN101345888A (zh) 2009-01-14
US8077229B2 (en) 2011-12-13
CN101345888B (zh) 2012-05-02
JP2009021827A (ja) 2009-01-29

Similar Documents

Publication Publication Date Title
JP4363468B2 (ja) 撮像装置及び撮像方法並びに映像信号処理プログラム
US8537230B2 (en) Imaging apparatus, an imaging method, a reproducing apparatus, a reproducing method and a program
JP2004128809A (ja) 画像処理方法及び装置、及び撮像装置
JP2004186723A (ja) ビデオ信号処理装置,ビデオ信号記録装置,ビデオ信号再生装置,ビデオ信号処理装置の処理方法,ビデオ信号記録装置の処理方法,ビデオ信号再生装置の処理方法,プログラム,記録媒体
US20090115861A1 (en) Recording apparatus
JP5783737B2 (ja) 撮像装置および動画記録装置の制御方法
JP2007295479A (ja) 撮影装置および撮影方法、並びにプログラム
JP2016167788A (ja) 動画像記録装置
TWI244866B (en) Method for managing recording apparatus and recording medium
KR20050040942A (ko) 동화상 기록 장치
JP2006186420A (ja) 撮像装置及び撮像装置の制御方法
JP2004222236A (ja) 撮像装置、画像編集方法及びプログラム
JP2004180279A (ja) コンテンツ編集支援システム,映像処理装置,再生装置,編集装置,コンピュータプログラム,およびコンテンツ処理方法
JP2007295478A (ja) 撮影装置および撮影方法、並びにプログラム
JP2004056641A (ja) 画像ファイル編集方法、画像ファイル編集装置、及び画像ファイル編集プログラム
JP2012147288A (ja) 放送システム
JP2006060732A (ja) 撮像装置、撮像方法および撮像プログラム、ならびに、記録装置、記録方法および記録プログラム
JPH09116852A (ja) 電子カメラ
JP2004088437A (ja) 画像処理方法および装置並びにプログラム
WO2004104821A1 (ja) 情報処理装置および方法、プログラム記録媒体、プログラム、並びに撮像装置
JP4165542B2 (ja) ビデオデータ処理装置,ビデオデータ処理装置の処理方法,プログラム,記録媒体
JP7410620B2 (ja) 撮像装置、画像処理装置、及び、その制御方法
JP2001045430A (ja) 映像記録再生装置
JP3559499B2 (ja) デジタルカメラ
JP2005253014A (ja) 記録装置、方法、およびプログラム

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090421

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090428

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090629

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090728

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090810

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120828

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 4363468

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120828

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130828

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250