JP2017059927A - ユーザ端末、色彩補正システム及び色彩補正方法 - Google Patents

Abstract

【課題】実際の撮影画像と、画面表示装置に表示する表示画像とを同じ色彩で表示することにより、利便性を向上させたユーザ端末、色彩補正システム及び色彩補正方法を提供する。
【解決手段】被写体を撮影するカメラと、被写体を画面表示する画面表示装置と、を備えるユーザ端末１００は、被写体に備えられ、色彩の基準となるカラーサンプルをカメラが撮影することで出力されたカラー撮影データを抽出し、抽出されたカラー撮影データと、本来のカラーサンプルの色彩とを比較し、比較した結果として、画面表示装置に表示された被写体の色彩を補正する。
【選択図】図１

Description

本発明は、被写体を撮影するカメラと、この被写体を画面表示する画面表示装置と、を備えるユーザ端末、色彩補正システム及び色彩補正方法に関する。

近年、カメラ等の撮影装置で撮影された動画像や静止画像等の画像を画像解析し、画像中の色彩補正を行うことが知られている。

例えば、特許文献１のように、撮影画像の画像データを、光を測色し、この測色データに基づいて、撮影画像データを補正することが開示されている。

特開２００７−１５８７０１号公報

特許文献１の構成では、撮影範囲内の複数の一から測色対象位置を選択し、この測色対象位置からの光に基づいて、測色データを出力している。そのうえで、撮影した撮影画像の撮影画像データの色彩を補正しているが、撮影画像データを表示する画面表示装置によって、色彩の表示状況は異なっているため、実際の撮影画像と、画面表示装置に表示する撮影画像との間で色彩が異なってしまうおそれがあった。

そこで、本発明は、実際の撮影画像と、画面表示装置に表示する表示画像との色彩の差異を補正する点に着目した。

本発明の目的は、実際の撮影画像と、画面表示装置に表示する表示画像とを同じ色彩で表示することにより、利便性を向上させたユーザ端末、色彩補正システム及び色彩補正方法を提供することを目的とする。

本発明では、以下のような解決手段を提供する。

第１の特徴に係る発明は、被写体を撮影するカメラと、
前記被写体を画面表示する画面表示装置と、を備えるユーザ端末であって、
前記被写体に備えられ、色彩の基準となるカラーサンプルを前記カメラが撮影することで出力されたカラー撮影データを抽出するカラー基準データ抽出手段と、
抽出された前記カラー撮影データと、本来のカラーサンプルの色彩とを比較する色彩比較手段と、
前記比較手段による比較した結果として、前記画面表示装置に表示された被写体の色彩を補正する色彩補正手段と、
を備えることを特徴とするユーザ端末を提供する。

第１の特徴に係る発明によれば、被写体を撮影するカメラと、前記被写体を画面表示する画面表示装置と、を備えるユーザ端末は、前記被写体に備えられ、色彩の基準となるカラーサンプルを前記カメラが撮影することで出力されたカラー撮影データを抽出し、抽出された前記カラー撮影データと、本来のカラーサンプルの色彩とを比較し、比較した結果として、前記画面表示装置に表示された被写体の色彩を補正する。

ここで、第１の特徴に係る発明は、ユーザ端末のカテゴリであるが、色彩補正方法、ユーザ端末用プログラム等の他のカテゴリにおいても、そのカテゴリに応じた同様の作用・効果を発揮する。

第２の特徴に係る発明は、前記カラーサンプルを前記カメラが撮影する被写体に投影するカラーサンプル投影手段と、
をさらに備えることを特徴とする第１の特徴に係る発明であるユーザ端末を提供する。

第２の特徴に係る発明によれば、第１の特徴に係る発明であるユーザ端末は、前記カラーサンプルを前記カメラが撮影する被写体に投影する。

第３の特徴に係る発明は、前記色彩比較手段は、前記カラー撮影データのＲＧＢ値と、前記本来のカラーサンプルの色彩のＲＧＢ値とを比較する、ことを特徴とする第１又は第２のいずれかの特徴に係る発明であるユーザ端末を提供する。

第３の特徴に係る発明によれば、第１又は第２の特徴に係る発明であるユーザ端末は、前記カラー撮影データのＲＧＢ値と、前記本来のカラーサンプルの色彩のＲＧＢ値とを比較する。

第４の特徴に係る発明は、被写体を撮影するカメラと、
前記被写体を画面表示する画面表示装置と、を備える色彩補正システムであって、
前記被写体に備えられ、色彩の基準となるカラーサンプルを、前記カメラが撮影することで出力されたカラー撮影データを抽出するカラー基準データ抽出手段と、
抽出された前記カラー撮影データと、本来のカラーサンプルの色彩とを比較する色彩比較手段と、
前記比較手段による比較した結果として、前記画面表示装置に表示された被写体の色彩を補正する色彩補正手段と、
を備えることを特徴とする色彩補正システムを提供する。

第４の特徴に係る発明によれば、被写体を撮影するカメラと、前記被写体を画面表示する画面表示装置と、を備える色彩補正システムは、前記被写体に備えられ、色彩の基準となるカラーサンプルを、前記カメラが撮影することで出力されたカラー撮影データを抽出し、抽出された前記カラー撮影データと、本来のカラーサンプルの色彩とを比較し、比較した結果として、前記画面表示装置に表示された被写体の色彩を補正する。

第５の特徴に係る発明は、被写体を撮影するカメラと、
前記被写体を画面表示する画面表示装置と、を備える色彩補正方法であって、
前記被写体に備えられ、色彩の基準となるカラーサンプルを前記カメラが撮影することで出力されたカラー撮影データを抽出するステップと、
抽出された前記カラー撮影データと、本来のカラーサンプルの色彩とを比較するステップと、
前記比較した結果として、前記画面表示装置に表示された被写体の色彩を補正するステップと、
を備えることを特徴とする色彩補正方法を提供する。

本発明によれば、実際の撮影画像と、画面表示装置に表示する表示画像とを同じ色彩で表示することにより、利便性を向上させたユーザ端末、色彩補正システム及び色彩補正方法を提供することが可能となる。

図１は、色彩補正システム１の概要を示す図である。 図２は、色彩補正システム１の全体構成図である。 図３は、ユーザ端末１００の機能ブロック図である。 図４は、ユーザ端末１００が実行する色彩補正処理を示すフローチャートである。 図５は、被写体用カラーサンプル６を示す図である。 図６は、ユーザ端末１００が表示する被写体５及び被写体用カラーサンプル６を示す図である。 図７は、ユーザ端末１００が記憶する色彩データベースを示す図である。 図８は、テレビ１０が表示する基準カラーサンプル７を示す図である。 図９は、テレビ１０が表示する補正後撮影画像を示す図である。

以下、本発明を実施するための最良の形態について図を参照しながら説明する。なお、これはあくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。

［色彩補正システム１の概要］
図１は、本発明の好適な実施形態である色彩補正システム１の概要を説明するための図である。色彩補正システム１は、ユーザ端末１００、被写体５、被写体用カラーサンプル６、テレビ１０、基準カラーサンプル７からなる。

色彩補正システム１にいて、ユーザ端末１００は、テレビ１００とＬＡＮやインターネット等の公衆回線網を通じて通信可能に接続されていても良いし、有線による接続されていても良い。ユーザ端末１００は、被写体５を撮影するカメラ及び撮影した撮影画像を表示する画面表示装置を有する。

色彩補正システム１において、はじめに、ユーザ端末１００は、自身が有するカメラ等の撮影装置により、被写体５を撮影する（ステップＳ０１）。なお、この被写体５は、後述する被写体用カラーサンプル６を備える。

ステップＳ０１において、ユーザ端末１００は、撮影装置から、被写体用カラーサンプル６を被写体５に投影し、被写体５及び被写体用カラーサンプル６を撮影するようにしても良い。

ユーザ端末１００は、撮影した被写体５の撮影画像データから、被写体用カラーサンプル６を抽出する（ステップＳ０２）。ステップＳ０２において、ユーザ端末１００は、被写体用カラーサンプル６における各々の色彩のＲＧＢ値を抽出する。

次に、ユーザ端末１００は、テレビ１０が表示する基準カラーサンプル７を、撮影装置で撮影し、基準カラーサンプル７の基準カラーサンプル画像データを取得する（ステップＳ０３）。

ユーザ端末１００は、取得した基準カラーサンプル画像データにおける各々の色彩のＲＧＢ値を抽出する（ステップＳ０４）。

ユーザ端末１００は、被写体用カラーサンプルデータから抽出した各色彩のＲＧＢ値と、基準カラーサンプルデータから抽出した各色彩のＲＧＢ値とを比較し、被写体用カラーサンプルデータの各色彩のＲＧＢ値を、基準カラーサンプルデータの各色彩のＲＧＢ値に補正する（ステップＳ０５）。ステップＳ０５において、例えば、ユーザ端末１００は、基準カラーサンプルデータから抽出した隣接する色彩間のＲＧＢ値の状況や、基準カラーサンプルデータの色彩の配置状況に基づいて、被写体用カラーサンプルデータの各色彩を、特定し、各色彩のＲＧＢ値を、基準カラーサンプルデータの各色彩のＲＧＢ値に補正する。

ユーザ端末１００は、補正した被写体用カラーサンプルデータの各色彩のＲＧＢ値に基づいて、撮影した被写体５の撮影画像データにおける各色彩のＲＧＢ値を補正し、テレビ１０補正後撮影画像データとして出力する（ステップＳ０５）。

テレビ１０は、ユーザ端末１００が出力した補正後撮影画像データに基づいて、補正された撮影画像を表示する。

なお、本実施形態では、ユーザ端末１００が、被写体５を撮影する撮影装置と、撮影装置が撮影した撮影画像を表示する表示装置と、を備えているが、撮影装置と、表示装置とが別体になっていても良い。

この場合、例えば、被写体５を撮影装置で撮影し、撮影装置が撮影した撮影画像の撮影画像データを、ユーザ端末１００に送信し、ユーザ端末１００が撮影画像データに基づいて、撮影画像を表示するようにすれば良い。

以上が、色彩補正システム１の概要である。

［色彩補正システム１の構成］
図２は、本発明の好適な実施形態である色彩補正システム１のシステム構成図である。色彩補正システム１は、ユーザ端末１００、テレビ１０、公衆回線網３（インターネット網や第３世代通信網、第４世代通信網等）から構成される。

ユーザ端末１００は、後述の機能を備え、テレビ１０とデータ通信可能に接続される。

テレビ１０は、一般的なテレビ受像機であり、ユーザ端末１００とデータ通信可能に接続され、ユーザ端末１００が送信したデータを表示する。

［各機能の説明］
図３は、ユーザ端末１００の機能ブロック図と、各機能の関係を示す図である。

ユーザ端末１００は、制御部１１０として、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）等を備え、通信部１２０として、例えば、ＩＥＥＥ８０２．１１に準拠したＷｉＦｉ（Ｗｉｒｅｌｅｓｓ Ｆｉｄｅｌｉｔｙ）対応デバイス又は、第３世代移動通信システム等のＩＭＴ−２０００規格に準拠した無線デバイス等を備える（有線によるＬＡＮ接続であってもよい）。

また、ユーザ端末１００は、記憶部１３０として、ハードディスクや半導体メモリ、記録媒体、メモリカード等によるデータのストレージ部を備える。記憶部１３０は、後述する色彩データベースが含まれる。

また、ユーザ端末１００は、入出力部１４０として、制御部１１０で制御したデータや画像を出力表示する表示部と、ユーザからの入力を受け付けるタッチパネルやキーボード、マウス等に加え、時刻を取得する時計機能、位置情報取得デバイスや、高度、通信強度、傾き、加速度等を取得する各種センサを備える。

また、ユーザ端末１００は、撮影部１５０として、動画像や静止画像等の画像を撮影する殺意素子やレンズ等を備える。
ユーザ端末１００において、制御部１１０が所定のプログラムを読み込むことで、通信部１２０と協働して、基準カラーサンプル取得モジュール１６０、データ送信モジュール１６１を実現する。また、ユーザ端末１００において、制御部１１０が所定のプログラムを読み込むことで、記憶部１３０と協働して、データベース記憶モジュール１７０、色彩記憶モジュール１７１、色彩補正モジュール１７２を実現する。また、ユーザ端末１００において、制御部１１０が所定のプログラムを読み込むことで、入出力部１４０と協働して、サンプル抽出モジュール１８０を実現する。また、ユーザ端末１００において、制御部１１０が所定のプログラムを読み込むことで、撮影部１５０と協働して、撮影モジュール１９０、サンプル投影モジュール１９１を実現する。

［色彩補正処理］
図４は、本発明の好適な実施形態におけるユーザ端末１００が実行する色彩補正処理のフローチャートである。上述した各装置のモジュールが行う処理について、本処理に併せて説明する。

はじめに、ユーザ端末１００の撮影モジュール１９０は、被写体５を撮影する指示を受け付けたか否かを判断する（ステップＳ１０）。ステップＳ１０において、撮影モジュール１９０は、被写体５を撮影する指示を受け付けていないと判断した場合（ステップＳ１０ ＮＯ）、撮影する指示を受け付けるまで本処理を繰り返す。

一方、ユーザ端末１００の撮影モジュール１９０は、被写体５を撮影する指示を受け付けたと判断した場合（ステップＳ１０ ＹＥＳ）、被写体５を撮影する（ステップＳ１１）。ステップＳ１１において、ユーザ端末１００のサンプル投影モジュール１９１は、被写体５に対して、図５に示す被写体用カラーサンプル６を投影する。すなわち、撮影モジュール１９０は、図６に示す通り、被写体５を撮影する際、被写体５だけでなく、被写体用カラーサンプル６をも撮影する。なお、被写体用カラーサンプル６は、サンプル投影モジュール１９１が被写体５に投影されるのではなく、被写体５が直接備えていても良い。

［被写体用カラーサンプル６］
図５は、ユーザ端末１００のサンプル投影モジュール１９１が、被写体５に投影する被写体用カラーサンプル６を示す図である。被写体用カラーサンプル６は、本実施形態においては、複数のセルが、ハニカム状の色彩パターンを構成している。被写体用カラーサンプル６は、各セルにおいて、一つの色彩を意味している。また、被写体用カラーサンプル６は、各セルが各々異なるＲＧＢ値を有する。ユーザ端末１００のデータベース記憶モジュール１７０は、この各セルのＲＧＢ値を色彩データベースとして記憶する。なお、各セルの大きさや、その数等は適宜変更可能である。この場合、ユーザ端末１００の撮影モジュール１９０が被写体用カラーサンプル６を撮影し、後述するユーザ端末１００のサンプル抽出モジュール１８０が認識可能であり、各セルのＲＧＢ値を抽出可能な大きさであれば良い。

［色彩データベース］
ユーザ端末１００のデータベース記憶モジュール１７０は、上述した各セルのＲＧＢ値を図７に示す色彩データベースとして記憶している。本実施形態において、データベース記憶モジュール１７０は、各セルと、このセルのＲＧＢ値とを対応付けたデータベースとして記憶する。なお、データベース記憶モジュール１７０は、各セルそのものではなく、セルの位置を示す番号や、セル番号等の他の態様と、ＲＧＢ値とを対応付けてデータベースとして記憶しても良い。

次に、ユーザ端末１００のサンプル抽出モジュール１８０は、ユーザ端末１００の撮影モジュール１９０が撮影した被写体５の撮影画像データに含まれる被写体用カラーサンプル６を抽出する（ステップＳ１２）。ステップＳ１２において、サンプル抽出モジュール１８０は、撮影画像データに含まれる被写体用カラーサンプル６の各セルの色彩を、色彩データベースに基づいて、各セルのＲＧＢ値を参照し、抽出する。

ユーザ端末１００の色彩記憶モジュール１７１は、ステップＳ１２においてユーザ端末１００のサンプル抽出モジュール１８０が抽出した各セルの色彩を記憶する（ステップＳ１３）。

次に、ユーザ端末１００の撮影モジュール１９０は、図８に示すテレビ１０が表示する基準カラーサンプル７を撮影する（ステップＳ１４）。ステップＳ１４において、テレビ１０は、自身が表示する基準カラーサンプル７を、公衆回線網３を介して、データベースや他のサーバ等から取得して表示しても良いし、自身が有する基準カラーサンプル７を表示しても良い。撮影モジュール１９０が撮影する基準カラーサンプル７は、上述した被写体用カラーサンプル６と同様のものである。なお、ステップＳ１４において、テレビ１０が表示する基準カラーサンプル７のサイズや各セルの位置等は、上述した被写体用カラーサンプル６と同様に適宜変更可能である。

ユーザ端末１００のサンプル抽出モジュール１８０は、ユーザ端末１００の撮影モジュール１９０が撮影した基準カラーサンプル７の基準カラーサンプル画像データに基づいて、基準カラーサンプル７の各セルのＲＧＢ値を抽出する（ステップＳ１５）。ステップＳ１５において、サンプル抽出モジュール１８０は、各セルの画像認識を行うことにより、各セルの色彩のＲＧＢ値を抽出する。

ユーザ端末１００の色彩補正モジュール１７２は、色彩記憶モジュール１７１が記憶した被写体用カラーサンプル６の各セルの色彩を、基準カラーサンプル７から抽出した各セルの色彩に補正する（ステップＳ１６）。ステップＳ１６において、色彩補正モジュール１７２は、ユーザ端末１００のサンプル抽出モジュール１８０が抽出した、被写体用カラーサンプルの各色彩と、基準カラーサンプル７の各色彩とを比較し、被写体用カラーサンプルの各色彩のＲＧＢ値を、基準カラーサンプル７の各色彩のＲＧＢ値に補正する。例えば、色彩補正モジュール１７２は、基準カラーサンプル７から抽出した隣接する色彩間のＲＧＢ値の状況や、基準カラーサンプル７の各色彩の配置状況に基づいて、被写体用カラーサンプル６の各色彩を特定し、各色彩のＲＧＢ値を、基準カラーサンプル７の各色彩のＲＧＢ値に補正する。

ステップＳ１６において、ユーザ端末１００の色彩補正モジュール１７２は、撮影画像データの全てのピクセルにおいて、ＲＧＢ値の補正を実行する。

ユーザ端末１００のデータベース記憶モジュール１７０は、ステップＳ１６において補正されたＲＧＢ値を、各カラーサンプルのＲＧＢ値として色彩データベースに記憶する（ステップＳ１７）。ステップＳ１７において、データベース記憶モジュール１７０は、補正後のカラーサンプルのＲＧＢ値を、補正前のカラーサンプルのＲＧＢ値に上書きして記憶しても良いし、別の色彩データベースとして記憶しても良い。

ユーザ端末１００のデータ送信モジュール１６１は、ステップＳ１６において補正した色彩の撮影画像である補正後撮影画像データを、テレビ１０に送信する（ステップＳ１８）。なお、ステップＳ１８において、データ送信モジュール１６１は、被写体用カラーサンプル６のデータを削除した状態、すなわち、被写体５のみのデータをテレビ１０に送信しても良い。このとき、ユーザ端末１００は、被写体用カラーサンプル６の位置のデータを、画像補正することにより、被写体用カラーサンプル６を削除すれば良い。

テレビ１０は、図９に示す補正後撮影画像を自身に表示する。

以上が、色彩補正処理である。

本実施形態では、ユーザ端末１００が、被写体５を撮影する撮影装置と、撮影装置が撮影した撮影画像を表示する表示装置と、を備えているが、撮影装置と、表示装置とが別体になっていても良い。

この場合、例えば、被写体５を撮影装置で撮影し、撮影装置が撮影した撮影画像の撮影画像データを、ユーザ端末１００に送信し、ユーザ端末１００が撮影画像データに基づいて、撮影画像を表示するようにすれば良い。

上述した手段、機能は、コンピュータ（ＣＰＵ、情報処理装置、各種端末を含む）が、所定のプログラムを読み込んで、実行することによって実現される。プログラムは、例えば、フレキシブルディスク、ＣＤ（ＣＤ−ＲＯＭなど）、ＤＶＤ（ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭなど）等のコンピュータ読取可能な記録媒体に記録された形態で提供される。この場合、コンピュータはその記録媒体からプログラムを読み取って内部記憶装置又は外部記憶装置に転送し記憶して実行する。また、そのプログラムを、例えば、磁気ディスク、光ディスク、光磁気ディスク等の記憶装置（記録媒体）に予め記録しておき、その記憶装置から通信回線を介してコンピュータに提供するようにしてもよい。

以上、本発明の実施形態について説明したが、本発明は上述したこれらの実施形態に限るものではない。また、本発明の実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本発明の実施形態に記載されたものに限定されるものではない。

１ 色彩補正システム、５ 被写体、６ 被写体用カラーサンプル、７基準カラーサンプル、１０ テレビ、１００ ユーザ端末

Claims (5)

1. 被写体を撮影するカメラと、
   前記被写体を画面表示する画面表示装置と、を備えるユーザ端末であって、
   前記被写体に備えられ、色彩の基準となるカラーサンプルを前記カメラが撮影することで出力されたカラー撮影データを抽出するカラー基準データ抽出手段と、
   抽出された前記カラー撮影データと、本来のカラーサンプルの色彩とを比較する色彩比較手段と、
   前記比較手段による比較した結果として、前記画面表示装置に表示された被写体の色彩を補正する色彩補正手段と、
   を備えることを特徴とするユーザ端末。
2. 前記カラーサンプルを前記カメラが撮影する被写体に投影するカラーサンプル投影手段と、
   をさらに備えることを特徴とする請求項１に記載のユーザ端末。
3. 前記色彩比較手段は、前記カラー撮影データのＲＧＢ値と、前記本来のカラーサンプルの色彩のＲＧＢ値とを比較する、ことを特徴とする請求項１又は２に記載のユーザ端末。
4. 被写体を撮影するカメラと、
   前記被写体を画面表示する画面表示装置と、を備える色彩補正システムであって、
   前記被写体に備えられ、色彩の基準となるカラーサンプルを、前記カメラが撮影することで出力されたカラー撮影データを抽出するカラー基準データ抽出手段と、
   抽出された前記カラー撮影データと、本来のカラーサンプルの色彩とを比較する色彩比較手段と、
   前記比較手段による比較した結果として、前記画面表示装置に表示された被写体の色彩を補正する色彩補正手段と、
   を備えることを特徴とする色彩補正システム。
5. 被写体を撮影するカメラと、
   前記被写体を画面表示する画面表示装置と、が実行する色彩補正方法であって、
   前記被写体に備えられ、色彩の基準となるカラーサンプルを前記カメラが撮影することで出力されたカラー撮影データを抽出するステップと、
   抽出された前記カラー撮影データと、本来のカラーサンプルの色彩とを比較するステップと、
   前記比較した結果として、前記画面表示装置に表示された被写体の色彩を補正するステップと、
   を備えることを特徴とする色彩補正方法。