JP2008288859A - Video display system with improved color reproduction - Google Patents

Video display system with improved color reproduction Download PDF

Info

Publication number
JP2008288859A
JP2008288859A JP2007131646A JP2007131646A JP2008288859A JP 2008288859 A JP2008288859 A JP 2008288859A JP 2007131646 A JP2007131646 A JP 2007131646A JP 2007131646 A JP2007131646 A JP 2007131646A JP 2008288859 A JP2008288859 A JP 2008288859A
Authority
JP
Japan
Prior art keywords
video data
terminal device
portable terminal
video
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2007131646A
Other languages
Japanese (ja)
Inventor
Takeshi Ioka
健 井岡
Yasuhiro Komiya
康宏 小宮
Akira Matsushita
朗 松下
Takuji Horie
卓二 堀江
Hiroyuki Fukuda
弘之 福田
Takeyuki Ajito
剛幸 味戸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2007131646A priority Critical patent/JP2008288859A/en
Publication of JP2008288859A publication Critical patent/JP2008288859A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Color Television Systems (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To more accurately reproduce colors of an object when a mobile terminal device connected to a server which transmits video signals through a network downloads video data and displays it. <P>SOLUTION: An environmental lighting detector 114 detects spectral characteristics of environmental illumination lights which illuminate the surrounding of the mobile terminal device 110, and outputs terminal identification information to specify the type of the mobile terminal device 110 and spectral information on the environmental illumination lights to the server 130. The server 130 extracts a monitor profile corresponding to the terminal identification information from a monitor profile storage part 138, and color converts video data stored in a multi primary color video storage part 132 using the spectral characteristics of the environmental illuminating lights and the monitor profile of the mobile terminal device 110 to output the color-converted video data to the mobile terminal device 110. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、携帯電話やＰＤＡ（携帯情報端末）、ノートＰＣ等の可搬式端末装置を用い、ネットワークを介して映像をダウンロードして高度な色再現の映像を視聴可能とする技術に関する。   The present invention relates to a technology that enables a user to view an image with high color reproduction by downloading an image via a network using a portable terminal device such as a mobile phone, a PDA (personal digital assistant), or a notebook PC.

被写体の正確な色再現をカラーディスプレイ装置で可能とする技術として、種々の方法が提案されている。例えば、特許文献１には、カラーディスプレイ装置の色特性（モニタプロファイル）を、カラーディスプレイ装置に表示した色標（カラーパッチ）をカラーカメラで撮影することにより取得し、また、カラーディスプレイ装置の置かれる環境の照明条件（観察環境照明情報）を、照明光センサを用いて取得し、ネットワークを介して画像サーバから送られて来る画像データに対して上述したモニタプロファイルおよび観察環境照明情報に基づいて色変換の処理をし、映像を表示するものが開示されている。このような構成によって、例えばネットワークを介しての電子ショッピングに際し、顧客がカラーディスプレイ装置を観視している観察環境下で商品を観たときにどのような色調となるかをシミュレートすることが可能となり、注文して顧客の元に届けられた商品の色が予想していたものと異なっていたと云った理由で返品される不都合を抑制することが可能となる。
特開２００１−６００８２号公報 Various techniques have been proposed as a technology that enables accurate color reproduction of a subject with a color display device. For example, in Patent Document 1, the color characteristics (monitor profile) of a color display device are acquired by photographing a color mark (color patch) displayed on the color display device with a color camera, and the color display device is installed. Based on the monitor profile and the observation environment illumination information described above for the image data acquired from the image server via the network by acquiring the illumination conditions (observation environment illumination information) of the environment to be taken A device that performs color conversion processing and displays an image is disclosed. With such a configuration, for example, when electronic shopping is performed via a network, it is possible to simulate the color tone when a product is viewed in an observation environment where a customer is viewing a color display device. It becomes possible, and it becomes possible to suppress the inconvenience of being returned for the reason that the color of the product ordered and delivered to the customer is different from the expected color.
Japanese Patent Laid-Open No. 2001-60082

上述した特許文献１の構成では、モニタプロファイルを計測するためのカラーカメラが必要で、高価となる。また、特に携帯電話やＰＤＡ等の軽量・小型であることを求められる機器に、それらの機器のディスプレイを撮影するためのカラーカメラを設けることは現実的ではない。加えて、携帯電話等の移動式端末装置、ＰＤＡ、ノートＰＣ等を用いて公衆回線にアクセスし、サーバから映像をダウンロードして視聴するような環境においては、それらの機器の情報処理能力、電池の容量等に制限があることから、ダウンロードした画像データに色変換の処理を行うような重い処理を長時間にわたり実行させることは困難な場合がある。   In the configuration of Patent Document 1 described above, a color camera for measuring the monitor profile is necessary and expensive. In particular, it is not realistic to provide a color camera for photographing a display of a device that is required to be lightweight and small, such as a mobile phone or a PDA. In addition, in an environment in which a mobile terminal device such as a mobile phone, a PDA, a notebook PC, etc. is used to access a public line and video is downloaded from a server for viewing, the information processing capability of those devices, the battery Since there is a limitation on the capacity of the image data, it may be difficult to execute heavy processing such as color conversion processing on the downloaded image data for a long time.

本発明は、上述した課題を解決するための手段を提供することを目的としており、可搬式の端末装置にモニタプロファイルを検出するためのセンサ等を用いることなく安価に、しかも情報処理能力がさほど高くなくても被写体の色を正確に再現して表示することが可能な技術を提供することを目的とする。   An object of the present invention is to provide a means for solving the above-described problems, and without using a sensor or the like for detecting a monitor profile in a portable terminal device, the information processing capability is low. An object of the present invention is to provide a technique capable of accurately reproducing and displaying the color of a subject even if it is not high.

（１） 本発明の第１の態様は、ネットワークを介して互いに接続される可搬式端末装置および映像データ送出サーバを有する映像表示システムに適用される。
そして前記可搬式端末装置は、
前記映像データ送出サーバから出力される映像データに基づく映像を表示可能な映像表示部と、
前記可搬式端末装置を取り巻く環境を照明する光である環境照明光の分光特性に関連する情報である環境照明情報を前記映像データ送出サーバに送出するための環境照明情報送出部と、
前記可搬式端末装置の種類を前記映像データ送出サーバが特定することが可能に構成される端末特定情報を前記映像データ送出サーバに送出するための端末特定情報送出部と
を有し、
前記映像データ送出サーバは、
４つ以上の原色からなる多原色映像データを保管する多原色映像保管部と、
前記映像データ送出サーバに接続しうる複数種類の可搬式端末装置それぞれが有する映像表示部の表示特性を表すモニタプロファイルを記憶するモニタプロファイル記憶部と、
前記可搬式端末装置から送出される前記環境照明情報と、前記可搬式端末装置から送出される前記端末特定情報に対応する前記モニタプロファイルとに基づいて前記多原色映像データに色変換処理を行い、当該の色変換処理後の映像データを前記可搬式端末装置に送出するように構成される映像データ処理部と
を有する、
ことにより上述した課題を解決する。
（２） 本発明の第２の態様は、映像データ送出サーバにネットワークを介して接続可能な可搬式端末装置に適用される。そしてこの可搬式端末装置が、
前記映像データ送出サーバから出力される映像データに基づく映像を表示可能な映像表示部と、
前記可搬式端末装置を取り巻く環境を照明する光である環境照明光の分光特性に関連する情報である環境照明情報を前記映像データ送出サーバに送出するための環境照明情報送出部と、
前記可搬式端末装置の種類を前記映像データ送出サーバが特定することが可能に構成される端末特定情報を前記映像データ送出サーバに送出するための端末特定情報送出部と
を有し、
前記映像データ送出サーバに接続しうる複数種類の可搬式端末装置それぞれが有する映像表示部の表示特性を表すモニタプロファイルを記憶するために前記映像データ送出サーバ内に備えられるモニタプロファイル記憶部中から前記端末特定情報に対応するものとして取り出されたモニタプロファイルと、前記可搬式端末装置から前記映像データ送出サーバに送られた前記環境照明情報とに基づいて、前記映像データ送出サーバ中に保管される４つ以上の原色からなる多原色映像データに対して色変換処理が行われて生成され、出力される色変換処理後の映像データを前記映像データ送出サーバから入力して前記映像表示部に映像を表示可能に構成されることにより、上述した課題を解決する。 (1) The first aspect of the present invention is applied to a video display system having a portable terminal device and a video data transmission server connected to each other via a network.
And the portable terminal device
A video display unit capable of displaying video based on video data output from the video data transmission server;
An environmental lighting information sending unit for sending environmental lighting information, which is information related to the spectral characteristics of the environmental lighting light, which is light that illuminates the environment surrounding the portable terminal device, to the video data sending server;
A terminal specifying information sending unit for sending to the video data sending server terminal specifying information configured such that the video data sending server can specify the type of the portable terminal device;
The video data transmission server is
A multi-primary color video storage unit for storing multi-primary color video data composed of four or more primary colors;
A monitor profile storage unit for storing a monitor profile representing display characteristics of a video display unit included in each of a plurality of types of portable terminal devices that can be connected to the video data transmission server;
Performing color conversion processing on the multi-primary color video data based on the environmental lighting information sent from the portable terminal device and the monitor profile corresponding to the terminal specifying information sent from the portable terminal device, A video data processing unit configured to send the video data after the color conversion processing to the portable terminal device;
This solves the problems described above.
(2) The second aspect of the present invention is applied to a portable terminal device that can be connected to a video data transmission server via a network. And this portable terminal device
A video display unit capable of displaying video based on video data output from the video data transmission server;
An environmental lighting information sending unit for sending environmental lighting information, which is information related to the spectral characteristics of the environmental lighting light, which is light that illuminates the environment surrounding the portable terminal device, to the video data sending server;
A terminal specifying information sending unit for sending to the video data sending server terminal specifying information configured such that the video data sending server can specify the type of the portable terminal device;
The monitor profile storage unit provided in the video data transmission server for storing the monitor profile representing the display characteristics of the video display unit of each of the plurality of types of portable terminal devices that can be connected to the video data transmission server. 4 stored in the video data transmission server based on the monitor profile extracted as corresponding to the terminal identification information and the environmental lighting information sent from the portable terminal device to the video data transmission server. Color conversion processing is performed on multi-primary color video data composed of two or more primary colors, and the output video data after color conversion processing is input from the video data transmission server, and the video is displayed on the video display unit. By being configured to be displayable, the above-described problems are solved.

本発明によれば、観察環境照明情報を可搬式端末装置が映像データ送出サーバに出力可能であることにより、可搬式端末装置がどのような観察環境に置かれていても、その観察環境に対応した映像を表示することが可能となる。また、可搬式端末装置が移動することによって観察環境が目まぐるしく変わる状況においてもその状況に対応して色変換の処理がなされた映像データに基づく映像をユーザは観ることが可能となる。さらに、色変換の処理が可搬式端末装置ではなく映像データ送出サーバの側で行われることにより、可搬式端末装置に求められる情報処理能力はさほど高いものではなくなるとともに、可搬式端末装置の映像表示部が有する原色数および表示解像度に対応して最適化された映像データが映像データ送出サーバから可搬式端末装置に送出されるので無駄な回線容量の浪費を抑制することが可能となる。   According to the present invention, the observation environment illumination information can be output to the video data transmission server by the portable terminal device, so that the observation environment can be handled regardless of the observation environment in which the portable terminal device is placed. It is possible to display the video. Further, even in a situation where the observation environment changes rapidly due to the movement of the portable terminal device, the user can view the video based on the video data that has undergone color conversion processing corresponding to the situation. Furthermore, since the color conversion processing is performed on the video data transmission server side instead of the portable terminal device, the information processing capability required for the portable terminal device is not so high, and the video display of the portable terminal device is not performed. Since the video data optimized in accordance with the number of primary colors and the display resolution of the unit is transmitted from the video data transmission server to the portable terminal device, it is possible to suppress waste of line capacity.

− 第１の実施の形態 −
図１は、本発明の第１の実施の形態に係る映像表示システム１００の概略的構成を示すブロック図である。映像表示システム１００は、可搬式端末装置１１０と、映像データを可搬式端末装置１１０に送出するためのサーバ１３０とがネットワーク１２０を介して有線又は無線の方式で接続されて構成される。 − First embodiment −
FIG. 1 is a block diagram showing a schematic configuration of a video display system 100 according to the first embodiment of the present invention. The video display system 100 is configured by connecting a portable terminal device 110 and a server 130 for sending video data to the portable terminal device 110 via a network 120 in a wired or wireless manner.

可搬式端末装置１１０は、ＰＤＡ、ノートＰＣ等の可搬式のコンピュータや携帯電話、あるいはネットワークに接続して映像データを受信し、映像を表示可能なモニタ装置などで構成することが可能である。可搬式端末装置１１０は、映像表示部１１２と、環境照明検出部１１４とキー入力部１１６とを有する。これらの構成要素は一体に構成されていても別体で構成されていてもよい。映像表示部１１２は、カラー液晶表示デバイスや有機ＥＬ表示デバイス等で構成され、様々な情報および映像を表示可能に構成される。   The portable terminal device 110 can be configured by a portable computer such as a PDA or a notebook PC, a mobile phone, or a monitor device that can be connected to a network to receive video data and display video. The portable terminal device 110 includes a video display unit 112, an environmental illumination detection unit 114, and a key input unit 116. These components may be formed integrally or separately. The video display unit 112 includes a color liquid crystal display device, an organic EL display device, and the like, and is configured to be able to display various information and videos.

環境照明検出部１１４は、可搬式端末装置１１０を取り巻く環境の照明の状況（分光スペクトル）を計測可能に構成される。以下、本明細書においては、可搬式端末装置１１０を取り巻く環境を観察環境と称し、この観察環境に存在して観察環境を照明する自然光、あるいはタングステン灯や蛍光灯などを総称して観察環境照明と称する。そして観察環境照明からの光を観察環境照明光と称する。環境照明検出部１１４は一例として、図２にその概略が示されるような構成を有するものとすることが可能である。   The environmental illumination detection unit 114 is configured to be able to measure the illumination status (spectral spectrum) of the environment surrounding the portable terminal device 110. Hereinafter, in this specification, the environment surrounding the portable terminal device 110 is referred to as an observation environment, and natural light that exists in the observation environment and illuminates the observation environment, or a tungsten lamp or a fluorescent lamp, is collectively referred to as an observation environment illumination. Called. And the light from observation environment illumination is called observation environment illumination light. As an example, the environmental illumination detection unit 114 may have a configuration as schematically illustrated in FIG.

図２において、環境照明検出部１１４は、コサインコレクタ２０２と、光ファイバ２０４と、スリット２０６と、コリメータ・ミラー２０８と、グレーティング２１０と、結像ミラー２１２と、ラインセンサ２１４と、信号処理回路２１６とを有する。外光、すなわち観察環境照明光がコサインコレクタ２０２を介して光ファイバ２０４の入射端に導かれる。コサインコレクタ２０２は、１８０°の入射角で光を入射してそれを光ファイバ２０４の入射端に導くことにより測光特性を改善するためのものである。光ファイバ２０４の出射端から射出した光は、上記出射端近傍に配置されるスリット（開口）２０６で絞られてコリメータ・ミラー２０８に入射し、コリメータ・ミラー２０８の反射面で反射された際に平行光となるようにコリメートされ、グレーティング２１０に導かれる。グレーティング２１０で回折されて生成された一次スペクトル光は、結像ミラー２１２で反射・集光されてラインセンサ２１４に導かれる。   In FIG. 2, the ambient illumination detection unit 114 includes a cosine collector 202, an optical fiber 204, a slit 206, a collimator mirror 208, a grating 210, an imaging mirror 212, a line sensor 214, and a signal processing circuit 216. And have. External light, that is, observation environment illumination light is guided to the incident end of the optical fiber 204 through the cosine collector 202. The cosine collector 202 is for improving the photometric characteristics by making light incident at an incident angle of 180 ° and guiding it to the incident end of the optical fiber 204. The light emitted from the exit end of the optical fiber 204 is narrowed by a slit (opening) 206 disposed in the vicinity of the exit end, enters the collimator mirror 208, and is reflected by the reflection surface of the collimator mirror 208. The light is collimated to be parallel light and guided to the grating 210. The primary spectrum light diffracted and generated by the grating 210 is reflected and collected by the imaging mirror 212 and guided to the line sensor 214.

上述のようにして分光されてラインセンサ２１４に入射する光の強度が信号処理回路２１６で求められ、ラインセンサ２１４を構成する各画素の位置および画素値から観察環境照明光の分光スペクトルを知ることが可能となる。なお、環境照明検出部１１４の構成としては、図２を参照して以上に説明したものに限られるものではなく、プリズム等を用いて分光された光をラインセンサやエリアセンサ等で受光して分光スペクトルを計測するものであってもよい。あるいは、互いに異なる透過帯域を有する複数（４以上）のカラーフィルタをＣＣＤ等の受光素子の光入射部に設置して観察環境照明光の分光スペクトルを計測可能としてもよい。   The signal processing circuit 216 obtains the intensity of the light that is split as described above and enters the line sensor 214, and knows the spectral spectrum of the observation environment illumination light from the position and pixel value of each pixel constituting the line sensor 214. Is possible. Note that the configuration of the ambient illumination detection unit 114 is not limited to that described above with reference to FIG. 2, and the light separated using a prism or the like is received by a line sensor or area sensor. You may measure a spectrum. Alternatively, a plurality of (four or more) color filters having different transmission bands may be installed in a light incident portion of a light receiving element such as a CCD so that the spectrum of the observation environment illumination light can be measured.

図１に戻り、キー入力部１１６は、数字や文字等を入力するためのキー、あるいは映像表示部１１２に表示されるカーソル等の動きを観察者が制御したりメニュー操作をしたりすることが可能に構成される操作部材を含む。   Returning to FIG. 1, the key input unit 116 allows the observer to control the movement of the keys or the like displayed on the video display unit 112 or perform menu operations. An operation member configured to be possible is included.

ネットワーク１２０は、可搬式端末装置１１０が携帯電話である場合には移動体通信網およびインターネットで構成される。また、可搬式端末装置１１０が、アダプタを介して移動体通信網に接続可能なＰＤＡやノートＰＣである場合にもネットワーク１２０は移動体通信網およびインターネットで構成される。ネットワーク１２０はまた、ＬＡＮ、ＷＡＮ、公衆回線網などで構成することも可能である。その場合、可搬式端末装置１１０は無線のアクセスポイントを介してネットワーク１２０に接続することも、あるいは有線でネットワーク１２０に接続することも可能である。   The network 120 includes a mobile communication network and the Internet when the portable terminal device 110 is a mobile phone. Further, when the portable terminal device 110 is a PDA or a notebook PC that can be connected to a mobile communication network via an adapter, the network 120 includes a mobile communication network and the Internet. The network 120 can also be constituted by a LAN, a WAN, a public line network, or the like. In that case, the portable terminal device 110 can be connected to the network 120 via a wireless access point, or can be connected to the network 120 by wire.

サーバ１３０は、可搬式端末装置１１０から要求される映像データを送出可能に構成され、いわゆるコンテンツプロバイダによって提供されるものであっても、個人が所有するコンピュータによって構成されるものであってもよい。   The server 130 is configured to be capable of transmitting video data requested from the portable terminal device 110 and may be provided by a so-called content provider or may be configured by a computer owned by an individual. .

可搬式端末装置１１０は、ネットワーク１２０を介してサーバ１３０に接続され、環境照明検出部１１４で検出された観察環境照明光の分光スペクトルに関連する情報と、可搬式端末装置１１０の種類をサーバ１３０が特定することが可能に構成される端末識別情報とが、ダウンロードすることを観察者が欲している映像データの種類を特定する情報とともにサーバ１３０へ送出される。   The portable terminal device 110 is connected to the server 130 via the network 120, and information related to the spectrum of the observation environment illumination light detected by the environment illumination detection unit 114 and the type of the portable terminal device 110 are displayed on the server 130. The terminal identification information configured to be able to be identified is sent to the server 130 together with information identifying the type of video data that the observer wants to download.

可搬式端末装置１１０からの要求に応じて映像データを送出可能に構成されるサーバ１３０は、多原色映像保管部１３２と、映像データ処理部１３４と、モニタプロファイル選択部１３６と、モニタプロファイル記憶部１３８とを有する。   A server 130 configured to be able to send video data in response to a request from the portable terminal device 110 includes a multi-primary color video storage unit 132, a video data processing unit 134, a monitor profile selection unit 136, and a monitor profile storage unit. 138.

多原色映像保管部１３２には、Ｍ原色（Ｍは４以上）の多原色映像が多数保管される。多原色映像とは、従来のカラー映像がＲＧＢ３原色の映像信号で構成されていたのと異なり、原色数が４以上、好ましくは６以上の映像信号で構成される映像である。例えば６バンドマルチスペクトルカメラで被写体を撮影して６バンドの多原色映像信号が生成される例について以下に説明する。   The multi-primary color video storage unit 132 stores a large number of M primary colors (M is 4 or more). A multi-primary color video is a video composed of video signals having four or more primary colors, preferably six or more, unlike a conventional color video composed of RGB three primary color video signals. For example, an example in which a 6-band multi-primary video signal is generated by shooting a subject with a 6-band multispectral camera will be described below.

６バンドマルチスペクトルカメラ（不図示）の撮影レンズを透過した被写体光はビームスプリッタによって第１および第２の光路上を進む光に分離される。そのうち、第１の光路上を進む光は第１の分光透過特性を有する干渉フィルタを透過し、その後ダイクロイックプリズムによって例えばＲ１、Ｇ２、Ｂ１という分光波長帯域を有する３色の光に分離され、それぞれの色の光が異なる撮像素子上で被写体像を形成してＲ１、Ｇ２、Ｂ１の映像信号が形成される。第２の光路上を進む光は第２の分光透過特性を有する干渉フィルタを透過し、その後上述したのとは別のダイクロイックプリズムによって例えばＲ２、Ｇ１、Ｂ２という分光帯域を有する３色の光に分離され、それぞれの色の光が異なる撮像素子上で被写体像を形成してＲ２、Ｇ１、Ｂ２の映像信号が形成される。すなわち、撮影レンズを透過した被写体光はビームスプリッタによって二つの光に分離され、それぞれが互いに異なる分光透過特性を有する干渉フィルタおよびダイクロイックプリズムを経て６つの撮像素子上に導かれる、６板式のマルチスペクトルカメラ（ＭＳＣ）によって、Ｒ１、Ｒ２、Ｇ１、Ｇ２、Ｂ１、Ｂ２の６バンド多原色映像信号が生成される。このとき、撮影時に被写体を照明していた照明光のスペクトルが計測され、この被写体を照明していた照明光のスペクトルに関連する情報（以下、本明細書ではこれを撮影環境照明情報と称する）が多原色映像データとともに記録される。多原色映像データにはまた、撮影レンズ、色分解光学系、撮像素子などによって決まる、各原色に対応する分光特性、階調（ガンマ）特性、レベル等の入力機器情報も含まれる。   Subject light that has passed through a photographing lens of a 6-band multispectral camera (not shown) is separated into light traveling on the first and second optical paths by a beam splitter. Among them, the light traveling on the first optical path is transmitted through the interference filter having the first spectral transmission characteristic, and then separated into three colors of light having spectral wavelength bands of R1, G2, and B1, for example, by the dichroic prism. Subject images are formed on image sensors with different colors of light, and video signals of R1, G2, and B1 are formed. The light traveling on the second optical path is transmitted through the interference filter having the second spectral transmission characteristic, and then converted into light of three colors having spectral bands of R2, G1, and B2, for example, by a dichroic prism different from that described above. The subject images are formed on the image sensors that are separated and have different colors of light, and video signals of R2, G1, and B2 are formed. That is, the subject light that has passed through the photographing lens is separated into two lights by a beam splitter, and each is guided onto six image pickup devices through interference filters and dichroic prisms having different spectral transmission characteristics. A camera (MSC) generates a six-band multi-primary color video signal of R1, R2, G1, G2, B1, and B2. At this time, the spectrum of the illumination light illuminating the subject at the time of photographing is measured, and information related to the spectrum of the illumination light illuminating the subject (hereinafter referred to as photographing environment illumination information in this specification). Are recorded together with multi-primary color video data. The multi-primary color image data also includes input device information such as spectral characteristics, gradation (gamma) characteristics, and levels corresponding to each primary color, which are determined by the photographing lens, color separation optical system, image sensor, and the like.

観察者、すなわちサーバ１３０から映像データをダウンロードして、可搬式端末装置１１０の映像表示部１１２に表示される映像を観察する人は、キー入力部１１６を操作することによって、多原色映像保管部１３２中に保管される複数の映像データ中で所望のものを選択する。   An observer, that is, a person who downloads video data from the server 130 and observes the video displayed on the video display unit 112 of the portable terminal device 110 operates the key input unit 116 to operate the multi-primary color video storage unit. A desired one of a plurality of video data stored in 132 is selected.

モニタプロファイル記憶部１３８は、サーバ１３０に接続される可能性のある複数種類の可搬式端末装置それぞれが有する映像表示部の表示特性を網羅的に記録するデータベースである。このモニタプロファイル記憶部１３８には、一例として、各モニタの原色点（モニタがＲＧＢモニタである場合、Ｒ色のみ、Ｇ色のみ、Ｂ色のみの画像を表示した際の表示色）の色度値（ＣＩＥ ｘｙ色度図上のｘ、ｙ座標値）に関連する情報、ガンマ特性（Ｒ、Ｇ、Ｂそれぞれの入力信号の変化量に対する表示される色の変化量の割合）、バイアス値（Ｒ、Ｇ、Ｂそれぞれの入力信号を０、すなわち最も暗い黒を表示したときの表示輝度レベル）等が可搬式端末装置の種類に対応して記録される。   The monitor profile storage unit 138 is a database that comprehensively records display characteristics of a video display unit included in each of a plurality of types of portable terminal devices that may be connected to the server 130. In this monitor profile storage unit 138, as an example, the chromaticity of the primary color point of each monitor (when the monitor is an RGB monitor, the display color when displaying only the R color, only the G color, and only the B color) is displayed. Information related to the value (x, y coordinate values on the CIE xy chromaticity diagram), gamma characteristics (ratio of the change amount of the displayed color to the change amount of each input signal of R, G, B), bias value ( R, G, B input signals are recorded as 0 corresponding to the type of portable terminal device, that is, the display brightness level when the darkest black is displayed.

なお、可搬式端末装置１１０の映像表示部１１２は、ＸＹＺの測色値表示や多原色による表示が可能な構成とすることもできる。その場合には、それらの表示方式に対応した表示特性をモニタプロファイル記憶部１３８は記憶可能に構成される。   Note that the video display unit 112 of the portable terminal device 110 may be configured to display XYZ colorimetric values or display using multiple primary colors. In that case, the monitor profile storage unit 138 is configured to be able to store display characteristics corresponding to those display methods.

モニタプロファイル選択部１３６は、サーバに接続されている可搬式端末装置１１０から送出された端末識別情報に対応するモニタプロファイルを選択して映像データ処理部１３４に出力する。この映像データ処理部１３４には、可搬式端末装置１１０から出力される観察環境照明情報も入力される。映像データ処理部１３４は、観察者が選択した映像に対応する映像データを多原色映像保管部１３２から取り出し、この映像データに対して上述したモニタプロファイルおよび観察環境照明情報に基づく色変換処理を行う。この色変換処理の詳細については後で図３および図４を参照して詳述する。映像データ処理部１３４は、ネットワーク１２０を介して色変換処理後の映像データを可搬式端末装置１１０に送出する。   The monitor profile selection unit 136 selects a monitor profile corresponding to the terminal identification information sent from the portable terminal device 110 connected to the server, and outputs it to the video data processing unit 134. Observation video illumination information output from the portable terminal device 110 is also input to the video data processing unit 134. The video data processing unit 134 extracts video data corresponding to the video selected by the observer from the multi-primary color video storage unit 132, and performs color conversion processing based on the above-described monitor profile and observation environment illumination information on the video data. . Details of this color conversion processing will be described later with reference to FIGS. The video data processing unit 134 sends the video data after the color conversion process to the portable terminal device 110 via the network 120.

図３は、図１に示される映像データ処理部１３４の内部構成を概略的に示す図である。映像データ処理部１３４には、上述したように多原色映像保管部１３２から撮影環境照明情報および映像データが入力され、可搬式端末装置１１０からネットワーク１２０を介して観察環境照明情報が入力され、モニタプロファイル選択部１３６からモニタプロファイルが入力される。   FIG. 3 is a diagram schematically showing the internal configuration of the video data processing unit 134 shown in FIG. As described above, the imaging environment illumination information and the image data are input from the multi-primary color image storage unit 132 to the image data processing unit 134, and the observation environment illumination information is input from the portable terminal device 110 via the network 120 to the monitor. A monitor profile is input from the profile selection unit 136.

映像データ処理部１３４は、色変換データ演算部３０２と、モニタ色変換データ演算部３０４と、撮影特性情報分離部３０６と、色変換処理部３０８と、モニタ色変換部３１０とを有する。   The video data processing unit 134 includes a color conversion data calculation unit 302, a monitor color conversion data calculation unit 304, an imaging characteristic information separation unit 306, a color conversion processing unit 308, and a monitor color conversion unit 310.

撮影特性情報分離部３０６は、多原色映像保管部１３２から入力した映像データ中から入力機器情報を分離抽出して撮影環境照明情報とともに色変換データ演算部３０２に出力する。撮影特性情報分離部３０６はまた、多原色映像保管部１３２から入力した映像データ中から分離抽出した多原色映像データを色変換処理部３０８に出力する。   The shooting characteristic information separation unit 306 separates and extracts input device information from the video data input from the multi-primary color video storage unit 132 and outputs the input device information to the color conversion data calculation unit 302 together with the shooting environment illumination information. The photographing characteristic information separation unit 306 also outputs the multi-primary color video data separated and extracted from the video data input from the multi-primary color video storage unit 132 to the color conversion processing unit 308.

色変換データ演算部３０２は、撮影特性情報分離部３０６から入力した撮影環境照明情報および入力機器情報から、画像データの色変換処理に際して用いる演算パラメータ（以下、これを「演算パラメータ１」と称する）を求め、それを色変換処理部３０８に出力する。   The color conversion data calculation unit 302 uses calculation parameters (hereinafter referred to as “calculation parameter 1”) used in color conversion processing of image data from the shooting environment illumination information and the input device information input from the shooting characteristic information separation unit 306. Is output to the color conversion processing unit 308.

モニタ色変換データ演算部３０４は、モニタプロファイル選択部１３６から入力したモニタプロファイルから、モニタ色変換部３１０で後述するモニタ色変換の処理をする際に用いる演算パラメータ（以下、これを「演算パラメータ２」と称する）を求め、求めた演算パラメータ２をモニタ色変換部３１０に出力する。   The monitor color conversion data calculation unit 304 uses the monitor profile input from the monitor profile selection unit 136 as a calculation parameter (hereinafter referred to as “calculation parameter 2”) when the monitor color conversion unit 310 performs monitor color conversion processing to be described later. The calculated calculation parameter 2 is output to the monitor color conversion unit 310.

図４は、上述した色変換処理部３０８およびモニタ色変換部３１０の詳細を説明するブロック図である。色変換処理部３０８では、色変換データ演算部３０２から入力される演算パラメータ１に基づき、ルックアップ・テーブル（ＬＵＴ）１，ＬＵＴ２，…，ＬＵＴ Ｍ （以下、これらのＬＵＴを「ＬＵＴ ４０２」と総称する）と、マトリクス演算部４０４内のＭ×３マトリクスとが生成される。これらのＬＵＴ４０２およびＭ×３マトリクスは、色変換処理部３０８に入力される多原色映像データ（図４に示す例においてはＭバンド、すなわち原色数Ｍの多原色映像データが示される）を処理する際に用いられる。   FIG. 4 is a block diagram illustrating details of the color conversion processing unit 308 and the monitor color conversion unit 310 described above. In the color conversion processing unit 308, lookup tables (LUT) 1, LUT 2,..., LUT M (hereinafter, these LUTs are referred to as “LUT 402”) based on the calculation parameter 1 input from the color conversion data calculation unit 302. And the M × 3 matrix in the matrix calculation unit 404 is generated. The LUT 402 and the M × 3 matrix process multi-primary color video data (in the example shown in FIG. 4, multi-primary color video data of M bands, that is, the number of primary colors M is shown) input to the color conversion processing unit 308. Used when.

ところで、多原色の映像データに基づいて高度の色再現を行う技術分野において、レンダリング照明による色再現の技術が知られている。この技術は、マルチスペクトルカメラで得られる映像データから、撮影機器の特性や撮影環境照明光の分光スペクトルに基づいて被写体の分光反射率を推定し、任意の分光強度を有する照明光のスペクトルデータを上記のようにして求められた分光反射率に乗じることにより、被写体が任意の照明光で照明されたときの色（被写体で反射された光のスペクトル）を再現（シミュレート）して表示する技術である。例えば、観察環境における照明光の分光スペクトルデータを上記分光反射率に乗じることにより、表示装置と、この表示装置に表示される映像を観察する観察者を取り巻く環境に被写体が存在していたときの色を再現して表示することにより、観察者にとってその映像は非常にリアルなものとして感じられるようになる。本発明においては、或る分光特性を有する照明光を当てたときに被写体がどのような色合いに観えるかをシミュレートする際に、被写体の推定された分光反射率に対して適用する照明光をレンダリング照明光と称する。また、本発明においては、レンダリング照明光として観察環境照明光を適用して可搬式端末装置１１０の映像表示部１１２に映像を表示することにより、撮影時とは異なる、観察環境における照明光源下での被写体の色を再現する。   By the way, in the technical field of performing advanced color reproduction based on multi-primary color video data, a color reproduction technique using rendering illumination is known. This technology estimates the spectral reflectance of a subject from video data obtained by a multispectral camera based on the characteristics of the photographic equipment and the spectral spectrum of the shooting environment illumination light, and obtains the spectral data of the illumination light having an arbitrary spectral intensity. Technology that reproduces (simulates) and displays the color (spectrum of light reflected by the subject) when the subject is illuminated with arbitrary illumination light by multiplying the spectral reflectance obtained as described above It is. For example, by multiplying the spectral reflectance data of the illumination light in the observation environment by the spectral reflectance, when the subject is present in the environment surrounding the observer who observes the image displayed on the display device By reproducing and displaying colors, the viewer can feel the image as very realistic. In the present invention, the illumination light applied to the estimated spectral reflectance of the subject when simulating how the subject can be seen when illuminated with illumination light having a certain spectral characteristic. Is referred to as rendering illumination light. In the present invention, the observation environment illumination light is applied as the rendering illumination light to display an image on the image display unit 112 of the portable terminal device 110, so that the illumination light source in the observation environment is different from that at the time of shooting. Reproduce the color of the subject.

色変換処理部３０８における色変換処理の説明に戻ると、色変換処理部３０８に入力される多原色映像データは、レンダリング照明光が適用される前の、推定分光反射率の映像データであり、暗闇に被写体があっても見えず、色が分からないのと同様に、レンダリング照明光が適用される前の映像データは、そのままでは色をなさない。色変換処理部３０８内において、多原色映像データには先ずＬＵＴ４０２が適用され、多原色映像データのそれぞれに対していわゆるトーンカーブの補正がなされてカメラのレベル・ガンマ特性の影響が除去される。続いて、マトリクス演算部４０４では多原色映像データに対してマトリクス演算がなされ、レンダリング照明光を適用する処理およびＸ、Ｙ、Ｚの測色値映像データに変換する処理が行われる。このようにして得られたＸ、Ｙ、Ｚ測色値映像データはモニタ色変換部３１０に送出される。   Returning to the description of the color conversion processing in the color conversion processing unit 308, the multi-primary color video data input to the color conversion processing unit 308 is video data of estimated spectral reflectance before the rendering illumination light is applied, Even if there is a subject in the dark, the image data before the rendering illumination light is applied is not colored as it is, since it is not visible and the color is unknown. In the color conversion processing unit 308, the LUT 402 is first applied to the multi-primary color video data, and so-called tone curve correction is performed on each of the multi-primary color video data to remove the influence of the level / gamma characteristics of the camera. Subsequently, the matrix calculation unit 404 performs matrix calculation on the multi-primary color video data, and performs processing for applying the rendering illumination light and conversion to X, Y, and Z colorimetric value video data. The X, Y, Z colorimetric image data obtained in this way is sent to the monitor color conversion unit 310.

モニタ色変換部３１０では、モニタ色変換データ演算部３０４から入力される演算パラメータ２に基づき、色分解演算部４１４内のデータテーブルと、ルックアップ・テーブル（ＬＵＴ）１，ＬＵＴ２，…，ＬＵＴ Ｎ（以下、「ＬＵＴ ４１２」と称する）とが生成される。これらのデータテーブルおよびＬＵＴ４１２は、モニタ色変換部３１０に入力される３バンドの映像信号を処理する際に用いられる。   In the monitor color conversion unit 310, based on the calculation parameter 2 input from the monitor color conversion data calculation unit 304, the data table in the color separation calculation unit 414, look-up tables (LUT) 1, LUT 2,. (Hereinafter referred to as “LUT 412”). These data table and LUT 412 are used when processing a 3-band video signal input to the monitor color conversion unit 310.

色分解演算部４１４内のデータテーブルは、入力される３バンド（Ｘ、Ｙ、Ｚ）の映像信号を原色１から原色Ｎの映像データに分解するために用いられる。ＬＵＴ４１２は、可搬式端末装置１１０の映像表示部１１２のガンマ特性およびバイアス値を補正するために用いられる。色分解演算部４１４内の上記データテーブルは、可搬式端末装置１１０に送出される映像データがＲＧＢ、ＸＹＺ等の３原色のものである場合には３×３のマトリクスとすることができる。可搬式端末装置１１０に送出される映像データの原色数が４以上の場合には、モニタ色変換部３１０に入力される３バンドの映像データから４色以上の原色の映像データを生成するためのルックアップ・テーブルが色分解演算部４１４内に生成される。   The data table in the color separation calculation unit 414 is used to separate an input 3-band (X, Y, Z) video signal from primary color 1 to primary color N video data. The LUT 412 is used to correct the gamma characteristic and bias value of the video display unit 112 of the portable terminal device 110. The data table in the color separation calculation unit 414 can be a 3 × 3 matrix when the video data sent to the portable terminal device 110 is of three primary colors such as RGB and XYZ. When the number of primary colors of video data sent to the portable terminal device 110 is 4 or more, it is necessary to generate video data of four or more primary colors from the 3-band video data input to the monitor color conversion unit 310. A lookup table is generated in the color separation calculation unit 414.

以上に説明したように、可搬式端末装置１１０の観察者はネットワーク１２０を介してサーバ１３０にアクセスし、観たい映像を選択する。その際に可搬式端末装置１１０からは環境照明検出部１１４で検出された環境照明の分光特性に関連する観察環境照明情報が端末識別情報とともにサーバ１３０に送出される。サーバ１３０では、選択された映像データに対して、端末識別情報に対応するモニタプロファイルと、観察環境照明情報とに基づいて色変換の処理を行い、色変換処理後の映像データを可搬式端末装置１１０に送出する。その結果、映像表示部１１２に表示される映像中の被写体があたかも観察環境照明で照明されているかのような色合いで表示がなされるので、観察者は非常にリアルな映像を観察することが可能となる。また、インターネットを介してのショッピング等においても商品の色味が観察者の居る環境に置かれたときの色合いが再現可能となるので、発注して後日届けられた商品の色がイメージしていたものと異なる、といった不具合を抑制することが可能となる。   As described above, the observer of the portable terminal device 110 accesses the server 130 via the network 120 and selects a video to be viewed. At that time, observation environment illumination information related to the spectral characteristic of the environment illumination detected by the environment illumination detection unit 114 is transmitted from the portable terminal device 110 to the server 130 together with the terminal identification information. The server 130 performs color conversion processing on the selected video data based on the monitor profile corresponding to the terminal identification information and the observation environment illumination information, and the video data after the color conversion processing is transferred to the portable terminal device. 110. As a result, since the subject in the video displayed on the video display unit 112 is displayed in a hue as if illuminated by the observation environment illumination, the observer can observe a very realistic video. It becomes. In addition, the color of the product when it is placed in an environment where the observer is present can be reproduced even when shopping via the Internet, etc., so the color of the product delivered after ordering was imaged It is possible to suppress the problem of being different from the one.

また、可搬式端末装置１１０からは端末識別情報がサーバ１３０に送出されて、その端末識別情報に基づいて、サーバ１３０内のモニタプロファイル記憶部１３８内に記憶されるモニタプロファイル中から可搬式端末装置１１０用のモニタプロファイルが選択され、映像データ処理部１３４での色変換処理に際して参照される構成を有することにより、可搬式端末装置１１０の側にモニタプロファイル計測用の構成を備える必要がない。   Moreover, terminal identification information is sent from the portable terminal device 110 to the server 130, and based on the terminal identification information, the portable terminal device is selected from the monitor profiles stored in the monitor profile storage unit 138 in the server 130. Since the monitor profile for 110 is selected and referred to when the color conversion process is performed by the video data processing unit 134, it is not necessary to provide a monitor profile measurement configuration on the portable terminal device 110 side.

そして、映像データに対する色変換の処理はサーバ１３０の側で行われることにより、可搬式端末装置１１０の情報処理能力がさほど高くなくても高品位の映像を観察することが可能となる。加えて、映像表示部１１２の原色数が３しかないような場合には、サーバ１３０の側で３原色の映像データに変換してから可搬式端末装置１１０に送出されるので回線容量を浪費することがない。このとき、可搬式端末装置１１０の側の表示解像度をサーバ１３０が端末識別情報をもとに判定し、送出する映像データの解像度を最適なものに設定することによって、必要とする回線容量をさらに削減することが可能となる。   Then, the color conversion processing for the video data is performed on the server 130 side, so that a high-quality video can be observed even if the information processing capability of the portable terminal device 110 is not so high. In addition, when the number of primary colors of the video display unit 112 is only 3, the server 130 side converts the video data into the three primary colors and then sends the video data to the portable terminal device 110, which wastes line capacity. There is nothing. At this time, the server 130 determines the display resolution on the portable terminal device 110 side based on the terminal identification information, and sets the resolution of the video data to be transmitted to an optimum one, thereby further reducing the required line capacity. It becomes possible to reduce.

以上の実施の形態の説明において、観察環境照明情報が可搬式端末装置１１０からサーバ１３０に送出されるタイミングについて詳しく述べていないが、以下のようなタイミングで送出可能である。すなわち、可搬式端末装置１１０からサーバ１３０に対して映像データの送出を要求する際に観察環境照明情報を送出可能である。あるいは、一定時間ごとに送出することも、送られてくる映像データのシーンの変わり目、あるいは映像データが静止画のデータである場合には異なる映像に切り替えられるタイミングで観察環境照明情報を送出することもできる。また、予め定められたタイミングで環境照明検出部１１４が環境照明光の検出を行い、検出された環境照明光の特性に予め定められた量を超す変化があったかどうかを可搬式端末装置１１０の側で判定し、上記予め定められた量を超す変化があったと判定される場合に可搬式端末装置１１０からサーバ１３０に新たな観察照明情報を送出するように構成されていてもよい。さらにまた、観察者が観察環境照明情報の更新操作をした際に可搬式端末装置１１０からサーバ１３０に新たな観察環境照明情報を送出するように構成されていてもよい。   In the above description of the embodiment, the timing at which the observation environment illumination information is transmitted from the portable terminal device 110 to the server 130 is not described in detail, but it can be transmitted at the following timing. That is, the observation environment illumination information can be transmitted when the portable terminal device 110 requests the server 130 to transmit video data. Alternatively, it can be sent at regular intervals, or the observation environment illumination information can be sent at the transition of the scene of the video data being sent, or when the video data is still image data, and switched to a different video. You can also. In addition, the environmental illumination detection unit 114 detects the environmental illumination light at a predetermined timing, and the portable terminal device 110 side determines whether or not there is a change exceeding a predetermined amount in the characteristic of the detected environmental illumination light. The portable terminal device 110 may send new observation illumination information to the server 130 when it is determined that there has been a change exceeding the predetermined amount. Furthermore, it may be configured such that new observation environment illumination information is transmitted from the portable terminal device 110 to the server 130 when the observer performs an update operation of the observation environment illumination information.

モニタプロファイル記憶部１３８に記憶されるモニタプロファイルの情報は、可搬式端末装置１１０のメーカからサーバ１３０を所有・管理するコンテンツプロバイダあるいは個人に供給するようにしても、上記コンテンツプロバイダで計測し、得られた情報を記憶するようにしてもよい。   Even if the monitor profile information stored in the monitor profile storage unit 138 is supplied from the manufacturer of the portable terminal device 110 to a content provider or an individual who owns and manages the server 130, it is measured and obtained by the content provider. The stored information may be stored.

− 第２の実施の形態 −
図５は、本発明の第２の実施の形態に係る映像表示システム１００Ａの概略的構成を示すブロック図である。なお、以下の説明において、図１から図４に示される本発明の第１の実施の形態に係る映像表示システムが有するものと同様の構成要素には同じ符号を付してその説明を省略する。また、機能的に類似している構成要素に対しては第１の実施の形態を説明する上記各図に示されるものと同じ番号にアルファベットを付加したものを参照符号として付している。 − Second Embodiment −
FIG. 5 is a block diagram showing a schematic configuration of a video display system 100A according to the second embodiment of the present invention. In the following description, the same components as those in the video display system according to the first embodiment of the present invention shown in FIGS. 1 to 4 are denoted by the same reference numerals, and the description thereof is omitted. . Further, structurally similar components are given the same reference numerals as those shown in the respective drawings for explaining the first embodiment, with alphabets added to the same numbers.

第１の実施の形態においては、可搬式端末装置１１０から送出される観察環境照明情報に対応して、サーバ１３０からいわばリアルタイムで色変換の処理がなされた映像データが送出されるものであった。これに対して、第２の実施の形態においては、観察環境照明光として予め想定されるもの、例えば自然光（晴天昼光、朝、夕方、曇天等）、人工光（タングステン光、普通形蛍光灯、高演色タイプ蛍光灯等）などの状況と、モニタプロファイルの種類との組み合わせに対応して予め色変換の処理をしたものを保管しておく。そして、それらの映像データの中から最も適したものを可搬式端末装置１１０に送出する。   In the first embodiment, in response to the observation environment illumination information sent from the portable terminal device 110, the video data that has been subjected to color conversion processing in real time is sent from the server 130. . In contrast, in the second embodiment, what is assumed in advance as the observation environment illumination light, for example, natural light (sunny daylight, morning, evening, cloudy weather, etc.), artificial light (tungsten light, ordinary fluorescent lamp) The color conversion processing is stored in advance corresponding to the combination of the situation such as a high color rendering type fluorescent lamp) and the type of monitor profile. Then, the most suitable video data is sent to the portable terminal device 110.

図５に示す映像表示システム１００Ａは、可搬式端末装置１１０とサーバ１３０Ａとがネットワーク１２０を介して有線又は無線の方式で接続されて構成される。サーバ１３０Ａは、多原色映像保管部１３２と、映像データ処理部１３４Ａと、モニタプロファイル記憶部１３８と、観察環境照明情報記憶部５０２と、表示用映像保管部５０４と、映像選択部５０６と、観察環境照明類似度判定部５０８とを有する。   The video display system 100A shown in FIG. 5 is configured by connecting a portable terminal device 110 and a server 130A via a network 120 in a wired or wireless manner. The server 130A includes a multi-primary color video storage unit 132, a video data processing unit 134A, a monitor profile storage unit 138, an observation environment illumination information storage unit 502, a display video storage unit 504, a video selection unit 506, an observation And an environmental illumination similarity determination unit 508.

これらの構成要素のうち、観察環境照明情報記憶部５０２には、上述したように観察環境照明光として予め想定されるものに対応する観察環境照明情報が予め記憶されている。表示用映像保管部５０４には、映像データ処理部１３４Ａにおいて後述するようにオフラインで色変換処理されて生成された表示用の映像データが多数保管される。   Among these components, the observation environment illumination information storage unit 502 stores observation environment illumination information corresponding to what is assumed in advance as the observation environment illumination light as described above. The display video storage unit 504 stores a large number of display video data generated by offline color conversion processing in the video data processing unit 134A as described later.

観察環境照明類似度判定部５０８は、ネットワーク１２０を介して可搬式端末装置１１０から観察環境照明情報、すなわち観察環境照明光の分光スペクトルに関連する情報を入力する。そして観察環境照明類似度判定部５０８は、観察環境照明情報記憶部５０２に記憶される観察環境照明情報中から、可搬式端末装置１１０より上述のように入力した観察環境照明情報に最も類似するものを選択し、その最も類似するものに対応する情報である類似観察環境照明情報を映像選択部５０６に出力する。映像選択部５０６は、表示用映像保管部５０４に保管される映像データ中から、ネットワーク１２０を介して可搬式端末装置１１０から入力した端末識別情報および上記の類似観察環境照明情報の組み合わせに対応して最も適した映像データを選択し、ネットワーク１２０を介して可搬式端末装置１１０に送出する。   The observation environment illumination similarity determination unit 508 inputs observation environment illumination information, that is, information related to the spectrum of the observation environment illumination light, from the portable terminal device 110 via the network 120. The observation environment illumination similarity determination unit 508 is the one most similar to the observation environment illumination information input from the portable terminal device 110 as described above from the observation environment illumination information stored in the observation environment illumination information storage unit 502. , And outputs similar observation environment illumination information corresponding to the most similar to the video selection unit 506. The video selection unit 506 corresponds to the combination of the terminal identification information input from the portable terminal device 110 via the network 120 and the similar observation environment illumination information from the video data stored in the display video storage unit 504. The most suitable video data is selected and transmitted to the portable terminal device 110 via the network 120.

図６は、映像データ処理部１３４Ａの内部構成を説明するブロック図である。映像データ処理部１３４Ａは、撮影特性情報分離部３０６と、色変換処理部３０８と、モニタ色変換部３１０と、色変換データ演算部３０２とモニタ色変換データ演算部３０４とを有する。図３と図６とを比較すると明らかなように、第１の実施の形態中における映像データ処理部１３４と第２の実施の形態中における映像データ処理部１３４Ａとで内部構成に違いはなく、これらの映像データ処理部が入出力する情報あるいはデータの内容と、それらの情報あるいはデータをどこから入力してどこへ出力するかという点に違いがある。   FIG. 6 is a block diagram illustrating the internal configuration of the video data processing unit 134A. The video data processing unit 134A includes an imaging characteristic information separation unit 306, a color conversion processing unit 308, a monitor color conversion unit 310, a color conversion data calculation unit 302, and a monitor color conversion data calculation unit 304. As is apparent from a comparison between FIG. 3 and FIG. 6, there is no difference in internal configuration between the video data processing unit 134 in the first embodiment and the video data processing unit 134A in the second embodiment. There is a difference between the contents of information or data input / output by these video data processing units and where the information or data is input from and output to.

図５および図６を参照して説明すると、映像データ処理部１３４Ａは、以下に説明する処理をオフラインにて最初に行う。すなわち、色変換データ演算部３０２は観察環境照明情報記憶部５０２から複数の種類の観察環境照明情報を順次入力し、この観察環境照明情報と、撮影特性情報分離部３０６から入力した撮影環境照明情報および入力機器情報とに基づいて、これらの情報の組み合わせに対応する演算パラメータ１を色変換処理部３０８に順次出力する。同様に、モニタ色変換データ演算部３０４は、モニタプロファイル記憶部１３８から複数の種類のモニタプロファイルを順次入力し、このモニタプロファイルに対応する演算パラメータ２をモニタ色変換部３１０に順次出力する。映像データ処理部１３４Ａは、多原色映像保管部１３２から入力される映像データに対して上記の演算パラメータ１および演算パラメータ２を適用して処理済み映像データを順次生成し、表示用映像保管部５０４に出力する。   Referring to FIGS. 5 and 6, the video data processing unit 134A first performs the processing described below offline. That is, the color conversion data calculation unit 302 sequentially inputs a plurality of types of observation environment illumination information from the observation environment illumination information storage unit 502, and the observation environment illumination information input from the observation environment illumination information and the imaging characteristic information separation unit 306. On the basis of the input device information, the calculation parameter 1 corresponding to the combination of these information is sequentially output to the color conversion processing unit 308. Similarly, the monitor color conversion data calculation unit 304 sequentially inputs a plurality of types of monitor profiles from the monitor profile storage unit 138 and sequentially outputs calculation parameters 2 corresponding to the monitor profiles to the monitor color conversion unit 310. The video data processing unit 134A sequentially generates processed video data by applying the calculation parameter 1 and the calculation parameter 2 to the video data input from the multi-primary color video storage unit 132, and displays the video storage unit 504 for display. Output to.

図７は、表示用映像保管部５０４に保管される処理済み映像データを概念的に示す図である。図７に例示されるように、処理済み映像データは、コンテントごとに機種（可搬式端末装置の種類）および観察環境照明の種類に対応して生成・保管される。図７に示す例では、機種１の映像表示部はＲＧＢ表示であるため、機種１用の映像データはＲＧＢ映像データとなっている。また、機種２の映像表示部はＸＹＺの測色値表示仕様となっているので機種２用の映像データはＸＹＺ映像データとなっている。さらに、機種３の映像表示部は４つの原色を有する仕様となっているので、機種３用の映像データは４バンド映像データとなっている。このように、サーバ１３０Ａに接続される可能性のある可搬式端末装置それぞれが有する映像表示部と、予め想定される観察環境照明との組み合わせに対応して映像データが生成され、表示用映像保管部５０４に保管される。   FIG. 7 is a diagram conceptually showing processed video data stored in the display video storage unit 504. As illustrated in FIG. 7, the processed video data is generated and stored for each content corresponding to the model (type of portable terminal device) and the type of observation environment illumination. In the example shown in FIG. 7, since the video display unit of model 1 is RGB display, the video data for model 1 is RGB video data. In addition, since the video display unit of model 2 has XYZ colorimetric value display specifications, the video data for model 2 is XYZ video data. Furthermore, since the video display unit of the model 3 has a specification having four primary colors, the video data for the model 3 is 4-band video data. In this way, video data is generated corresponding to the combination of the video display unit included in each portable terminal device that may be connected to the server 130A and the presumed observation environment illumination, and the video for display is stored. Stored in the unit 504.

観察者は可搬式端末装置１１０を操作し、ネットワーク１２０を介してサーバ１３０Ａにアクセスし、観たい映像（コンテント）を選択する。その際に可搬式端末装置１１０からは環境照明検出部１１４で検出された環境照明の分光特性に関連する観察環境照明情報が端末識別情報とともにサーバ１３０Ａに送出される。観察環境照明情報記憶部５０２中に記憶される複数種類の観察照明情報中から、サーバ１３０Ａ内の観察環境照明類似度判定部５０８に入力された観察環境照明情報に最も類似するものである類似観察環境照明情報が映像選択部５０６に入力される。その類似観察環境照明情報に基づいて映像選択部５０６は表示用映像保管部５０４に保管される映像データ中から最適の映像データを可搬式端末装置１１０に送出する。   The observer operates the portable terminal device 110, accesses the server 130A via the network 120, and selects an image (content) to be viewed. At that time, observation environment illumination information related to the spectral characteristics of the environment illumination detected by the environment illumination detection unit 114 is sent from the portable terminal device 110 to the server 130A together with the terminal identification information. Similar observation that is the most similar to the observation environment illumination information input to the observation environment illumination similarity determination unit 508 in the server 130A from among a plurality of types of observation illumination information stored in the observation environment illumination information storage unit 502. Environmental lighting information is input to the video selection unit 506. Based on the similar observation environment illumination information, the video selection unit 506 sends the optimum video data from the video data stored in the display video storage unit 504 to the portable terminal device 110.

本発明の第２の実施の形態においては、サーバ１３０Ａに接続される可能性のある可搬式端末装置１１０の種類と、予め想定される観察環境照明光の種類との組み合わせに基づいて映像データが予め処理されて表示用映像保管部５０４に保管される。そのため、サーバ１３０Ａが処理済みの映像データを可搬式端末装置１１０に送出する際に映像データを処理する必要がないのでサーバ１３０Ａの処理負荷を軽減することが可能となる。   In the second embodiment of the present invention, the video data is based on the combination of the type of portable terminal device 110 that may be connected to the server 130A and the type of observation environment illumination light that is assumed in advance. Processed in advance and stored in the display video storage unit 504. Therefore, it is not necessary to process the video data when the server 130A sends the processed video data to the portable terminal device 110, so that the processing load on the server 130A can be reduced.

以上に説明したように、観察環境照明類似度判定部５０８は、観察環境照明情報記憶部５０２に記憶される観察環境照明情報中から、可搬式端末装置１１０より入力される観察環境照明情報に最も類似するものを選択する構成を有しているので、第２の実施の形態における可搬式端末装置１１０の環境照明検出部１１４は観察環境照明光の分光特性を厳密に測定可能なものでなくてもよい。例えば、Ｒ、Ｇ、Ｂ各色のフィルタが受光部に設けられるＣＣＤあるいはＣ−ＭＯＳセンサ等を用いて観察環境照明光のホワイトバランスあるいは色温度を測定可能な構成としてもよい。   As described above, the observation environment illumination similarity determination unit 508 is the most similar to the observation environment illumination information input from the portable terminal device 110 among the observation environment illumination information stored in the observation environment illumination information storage unit 502. Since it has the structure which selects a similar thing, the environment illumination detection part 114 of the portable terminal device 110 in 2nd Embodiment cannot measure the spectral characteristic of observation environment illumination light exactly | strictly Also good. For example, R, G, B color filters may be configured to measure the white balance or color temperature of the observation environment illumination light using a CCD or C-MOS sensor or the like provided in the light receiving unit.

また、以上に説明したオフライン処理による表示用映像データの生成処理に関して、サーバ１３０Ａ以外の処理システムで処理がなされて、処理後の映像データがサーバ１３０Ａの表示用映像保管部５０４に転送あるいはコピーされるものであってもよい。   Further, regarding the generation processing of display video data by the offline processing described above, processing is performed by a processing system other than the server 130A, and the processed video data is transferred or copied to the display video storage unit 504 of the server 130A. It may be a thing.

第２の形態の説明においても、可搬式端末装置１１０からサーバ１３０Ａに観察環境照明情報を送出するタイミングは第１の実施の形態で説明したのと同様のものとすることが可能である。   Also in the description of the second embodiment, the timing at which the observation environment illumination information is sent from the portable terminal device 110 to the server 130A can be the same as that described in the first embodiment.

モニタプロファイル記憶部１３８に記憶されるモニタプロファイルの情報も、第１の実施の形態と同様、可搬式端末装置１１０のメーカからサーバ１３０Ａを所有・管理するコンテンツプロバイダあるいは個人に供給するようにしても、上記コンテンツプロバイダで計測し、得られた情報を記憶するようにしてもよい。   Similarly to the first embodiment, the monitor profile information stored in the monitor profile storage unit 138 may be supplied from the manufacturer of the portable terminal device 110 to the content provider or individual who owns and manages the server 130A. The information obtained by measurement by the content provider may be stored.

− 第３の実施の形態 −
図８は、本発明の第３の実施の形態に係る映像表示システム１００Ｂの概略的構成を示すブロック図である。以下の説明において、図１から図７に示される本発明の第１および第２の実施の形態に係る映像表示システムが有するものと同様の構成要素には同じ符号を付してその説明を省略する。また、機能的に類似している構成要素に対しては第１および第２の実施の形態を説明する上記各図に示されるものと同じ番号にアルファベットを付加したものを参照符号として付している。 − Third embodiment −
FIG. 8 is a block diagram showing a schematic configuration of a video display system 100B according to the third embodiment of the present invention. In the following description, the same components as those of the video display system according to the first and second embodiments of the present invention shown in FIGS. 1 to 7 are denoted by the same reference numerals, and the description thereof is omitted. To do. In addition, for functionally similar components, the same reference numerals as those shown in the respective drawings for explaining the first and second embodiments are added as reference numerals. Yes.

第１および第２の実施の形態においては、可搬式端末装置１１０が環境照明検出部１１４を有していて、観察環境照明光の分光特性を検出可能に構成されるものであった。これに対して、第３の実施の形態においては、可搬式端末装置１１０Ａは観察環境照明光の分光特性を検出可能な構成を有していない。代わりに、可搬式端末装置１１０Ａは観察環境照明情報設定部８０２を有する。観察者は、可搬式端末装置１１０Ａおよび観察者を取り巻く観察環境を照明する光の種類を判断し、観察環境照明情報設定部８０２を操作して最適の観察環境照明情報を設定する。観察環境照明情報設定部８０２で設定可能な観察環境照明の種類としては、自然光（晴天昼光、朝、夕方、曇天等）、人工光（タングステン光、普通形蛍光灯、高演色タイプ蛍光灯等）などとすることが可能である。   In the first and second embodiments, the portable terminal device 110 has the environment illumination detection unit 114 and is configured to be able to detect the spectral characteristics of the observation environment illumination light. On the other hand, in the third embodiment, the portable terminal device 110A does not have a configuration capable of detecting the spectral characteristics of the observation environment illumination light. Instead, the portable terminal device 110 </ b> A has an observation environment illumination information setting unit 802. The observer determines the type of light that illuminates the observation terminal surrounding the portable terminal device 110A and the observer, and operates the observation environment illumination information setting unit 802 to set optimal observation environment illumination information. The types of observation environment illumination that can be set by the observation environment illumination information setting unit 802 include natural light (sunny daylight, morning, evening, cloudy weather, etc.), artificial light (tungsten light, ordinary fluorescent lamp, high color rendering type fluorescent lamp, etc.) Or the like.

図８に示す映像表示システム１００Ｂは、可搬式端末装置１１０Ａとサーバ１３０Ｂとがネットワーク１２０を介して有線又は無線の方式で接続されて構成される。サーバ１３０Ｂは、多原色映像保管部１３２と、映像データ処理部１３４Ａと、モニタプロファイル記憶部１３８と、観察環境照明情報記憶部５０２と、表示用映像保管部５０４と、映像選択部５０６とを有する。映像データ処理部１３４Ａの内部構成は、図６に示されるものと同様である。   The video display system 100B shown in FIG. 8 is configured by connecting a portable terminal device 110A and a server 130B via a network 120 in a wired or wireless manner. The server 130B includes a multi-primary color video storage unit 132, a video data processing unit 134A, a monitor profile storage unit 138, an observation environment illumination information storage unit 502, a display video storage unit 504, and a video selection unit 506. . The internal configuration of the video data processing unit 134A is the same as that shown in FIG.

本発明の第３の実施の形態においても、第２の実施の形態と同様に、サーバ１３０Ｂに接続される可能性のある可搬式端末装置１１０Ａの種類と、予め想定される観察環境照明光の種類との組み合わせに基づいて映像データがオフライン時に予め処理されて表示用映像保管部５０４に保管される。   Also in the third embodiment of the present invention, similar to the second embodiment, the type of the portable terminal device 110A that may be connected to the server 130B and the observation environment illumination light assumed in advance are assumed. Based on the combination with the type, the video data is processed in advance when offline and stored in the display video storage unit 504.

観察者は可搬式端末装置１１０Ａを操作し、ネットワーク１２０を介してサーバ１３０Ｂにアクセスし、観たい映像（コンテント）を選択する。このとき観察者が観察環境照明情報設定部８０２を操作して適宜の観察環境照明に設定するのに応じて可搬式端末装置１１０Ａからは上記のように観察者が設定した観察環境照明に対応する観察環境照明設定情報が端末識別情報とともにサーバ１３０Ｂに送出される。観察環境照明設定情報および端末識別情報は映像選択部５０６に入力される。映像選択部５０６は、入力された観察環境照明設定情報および端末識別情報に基づいて表示用映像保管部５０４に保管される映像データ中から最適の映像データを可搬式端末装置１１０Ａに送出する。   The observer operates the portable terminal device 110A, accesses the server 130B via the network 120, and selects an image (content) to be viewed. At this time, the portable terminal device 110A corresponds to the observation environment illumination set by the observer as described above according to the observer operating the observation environment illumination information setting unit 802 and setting the appropriate observation environment illumination. The observation environment illumination setting information is sent to the server 130B together with the terminal identification information. The observation environment illumination setting information and the terminal identification information are input to the video selection unit 506. The video selection unit 506 sends the optimal video data from the video data stored in the display video storage unit 504 to the portable terminal device 110A based on the input observation environment illumination setting information and terminal identification information.

第３の実施の形態の説明において、可搬式端末装置１１０Ａからサーバ１３０Ｂに観察環境照明設定情報を送出するタイミングは、可搬式端末装置１１０Ａからサーバ１３０Ｂに対して映像データの送出を要求する際とすることが可能である。あるいは、観察者が必要を感じたときに観察環境照明情報設定部８０２を操作し、その際に観察環境照明設定情報が可搬式端末装置１１０Ａからサーバ１３０Ｂに送出されるものであってもよい。この場合サーバ１３０Ａは、送出するべき映像データを、入力した観察環境照明設定情報に対応するものに即切り替えてもよいし、動画であればシーンの切り替えタイミングで、静止画であれば次の映像データを送出するタイミングで切り替えてもよい。   In the description of the third embodiment, the timing for transmitting the observation environment lighting setting information from the portable terminal device 110A to the server 130B is the timing when the portable terminal device 110A requests the server 130B to send video data. Is possible. Alternatively, the observation environment illumination information setting unit 802 may be operated when the observer feels necessary, and the observation environment illumination setting information may be transmitted from the portable terminal device 110A to the server 130B at that time. In this case, the server 130A may immediately switch the video data to be transmitted to one corresponding to the input observation environment lighting setting information, or at the scene switching timing for a moving image, or the next video for a still image. It may be switched at the timing of sending data.

モニタプロファイル記憶部１３８に記憶されるモニタプロファイルの情報も、第１および第２の実施の形態と同様、可搬式端末装置１１０Ａのメーカからサーバ１３０Ｂを所有・管理するコンテンツプロバイダあるいは個人に供給するようにしても、上記コンテンツプロバイダで計測し、得られた情報を記憶するようにしてもよい。   Similarly to the first and second embodiments, the monitor profile information stored in the monitor profile storage unit 138 is supplied from the manufacturer of the portable terminal device 110A to the content provider or individual who owns and manages the server 130B. Alternatively, the information obtained by measurement by the content provider may be stored.

− 第４の実施の形態 −
図９は、本発明の第４の実施の形態に係る映像表示システム１００Ｃの概略的構成を示すブロック図である。なお、以下の説明において、図１から図８に示される本発明の第１から第３の実施の形態に係る映像表示システムが有するものと同様の構成要素には同じ符号を付してその説明を省略する。また、機能的に類似している構成要素に対しては第１から第３の実施の形態を説明する上記各図に示されるものと同じ番号にアルファベットを付加したものを参照符号として付している。 -Fourth embodiment-
FIG. 9 is a block diagram showing a schematic configuration of a video display system 100C according to the fourth embodiment of the present invention. In the following description, the same components as those of the video display system according to the first to third embodiments of the present invention shown in FIG. 1 to FIG. Is omitted. For structurally similar components, the same reference numerals as those shown in the drawings for explaining the first to third embodiments are added as reference numerals. Yes.

第４の実施の形態においては、以下に詳述するように可搬式端末装置１１０Ａは観察環境照明情報設定部８０２を有し、観察者は可搬式端末装置１１０Ａおよび観察者を取り巻く観察環境を照明する光の種類を判断し、観察環境照明情報設定部８０２を操作して最適の観察環境照明情報を設定する。サーバ１３０Ｃは、可搬式端末装置１１０Ａから入力した観察環境照明設定情報をもとに色変換の処理をリアルタイムで行い、可搬式端末装置１１０Ａに送出する。   In the fourth embodiment, as will be described in detail below, the portable terminal device 110A has an observation environment illumination information setting unit 802, and the observer illuminates the observation environment surrounding the portable terminal device 110A and the observer. The type of light to be determined is determined, and the observation environment illumination information setting unit 802 is operated to set optimal observation environment illumination information. The server 130C performs color conversion processing in real time based on the observation environment illumination setting information input from the portable terminal device 110A, and sends the color conversion processing to the portable terminal device 110A.

図９に示す映像表示システム１００Ｃは、可搬式端末装置１１０Ａとサーバ１３０Ｃとがネットワーク１２０を介して有線又は無線の方式で接続されて構成される。サーバ１３０Ｃは、多原色映像保管部１３２と、映像データ処理部１３４Ｂと、モニタプロファイル記憶部１３８と、モニタプロファイル選択部１３６と、観察環境照明情報記憶部５０２と、適用観察環境照明選択部９０２とを有する。観察環境照明情報記憶部５０２には、第２および第３の実施の形態で説明したように観察環境照明光として予め想定されるもの、一例として自然光（晴天昼光、朝、夕方、曇天等）、人工光（タングステン光、普通形蛍光灯、高演色タイプ蛍光灯等）に対応する観察環境照明情報が予め記憶されている。   The video display system 100C shown in FIG. 9 is configured by connecting a portable terminal device 110A and a server 130C via a network 120 in a wired or wireless manner. The server 130C includes a multi-primary color video storage unit 132, a video data processing unit 134B, a monitor profile storage unit 138, a monitor profile selection unit 136, an observation environment illumination information storage unit 502, and an application observation environment illumination selection unit 902. Have As described in the second and third embodiments, the observation environment illumination information storage unit 502 is assumed in advance as the observation environment illumination light, for example, natural light (sunny daylight, morning, evening, cloudy weather, etc.) Observation environment illumination information corresponding to artificial light (tungsten light, ordinary fluorescent lamp, high color rendering fluorescent lamp, etc.) is stored in advance.

適用観察環境照明選択部９０２は、観察環境照明情報記憶部５０２に記憶される観察環境照明情報中から、可搬式端末装置１１０Ａより入力した観察環境照明設定情報に対応、あるいは最も類似する観察環境照明情報を選択し、映像データ処理部１３４Ｂに出力する。   The applicable observation environment illumination selection unit 902 corresponds to or most similar to the observation environment illumination setting information input from the portable terminal device 110A from the observation environment illumination information stored in the observation environment illumination information storage unit 502. Information is selected and output to the video data processing unit 134B.

図１０は、映像データ処理部１３４Ｂの内部構成を説明するブロック図である。映像データ処理部１３４Ｂは、撮影特性情報分離部３０６と、色変換処理部３０８と、モニタ色変換部３１０と、色変換データ演算部３０２とモニタ色変換データ演算部３０４とを有する。図３、図６、および図１０を比較すると明らかなように、第１、第２の実施の形態中における映像データ処理部１３４、１３４Ａと第４の実施の形態中における映像データ処理部１３４Ｂとで内部構成に違いはなく、これらの映像データ処理部が入出力する情報あるいはデータの内容と、それらの情報あるいはデータをどこから入力してどこへ出力するかという点に違いがある。   FIG. 10 is a block diagram illustrating the internal configuration of the video data processing unit 134B. The video data processing unit 134B includes an imaging characteristic information separation unit 306, a color conversion processing unit 308, a monitor color conversion unit 310, a color conversion data calculation unit 302, and a monitor color conversion data calculation unit 304. As is clear from a comparison of FIGS. 3, 6, and 10, the video data processing units 134 and 134A in the first and second embodiments and the video data processing unit 134B in the fourth embodiment However, there is no difference in the internal structure, and there is a difference in the information or the contents of data input / output by these video data processing units and where the information or data is input from and output to.

図９および図１０を参照して説明すると、映像データ処理部１３４Ｂ内の色変換データ演算部３０２は、適用観察環境照明選択部９０２から出力される観察環境照明情報を、撮影特性情報分離部３０６から出力される撮影環境照明情報および入力機器情報とともに入力する。色変換データ演算部３０２は、上述のように入力した情報に基づいて演算パラメータ１を求め、それを色変換処理部３０８に出力する。   9 and 10, the color conversion data calculation unit 302 in the video data processing unit 134B converts the observation environment illumination information output from the application observation environment illumination selection unit 902 into the imaging characteristic information separation unit 306. Input together with shooting environment lighting information and input device information. The color conversion data calculation unit 302 obtains the calculation parameter 1 based on the information input as described above, and outputs it to the color conversion processing unit 308.

観察者は可搬式端末装置１１０Ａを操作し、ネットワーク１２０を介してサーバ１３０Ｃにアクセスし、観たい映像（コンテント）を選択する。このとき観察者が観察環境照明情報設定部８０２を操作して適宜の観察環境照明に設定するのに応じて可搬式端末装置１１０Ａからは上記のように観察者が設定した観察環境照明に対応する観察環境照明設定情報が端末識別情報とともにサーバ１３０Ｃに送出される。端末識別情報は、モニタプロファイル選択部１３６に入力され、この端末識別情報に対応するモニタプロファイルがモニタプロファイル記憶部１３８中から選択されて映像データ処理部１３４Ｂ内のモニタ色変換データ演算部３０４に入力される。観察環境照明設定情報は、適用観察環境照明選択部９０２に入力され、この観察環境照明設定情報に対応する観察環境照明情報が観察環境照明情報記憶部５０２中から選択されて映像データ処理部１３４Ｂ内の色変換データ演算部３０２に入力される。   The observer operates the portable terminal device 110A, accesses the server 130C via the network 120, and selects an image (content) to be viewed. At this time, the portable terminal device 110A corresponds to the observation environment illumination set by the observer as described above according to the observer operating the observation environment illumination information setting unit 802 and setting the appropriate observation environment illumination. The observation environment illumination setting information is sent to the server 130C together with the terminal identification information. The terminal identification information is input to the monitor profile selection unit 136, and a monitor profile corresponding to the terminal identification information is selected from the monitor profile storage unit 138 and input to the monitor color conversion data calculation unit 304 in the video data processing unit 134B. Is done. The observation environment illumination setting information is input to the application observation environment illumination selection unit 902, and the observation environment illumination information corresponding to the observation environment illumination setting information is selected from the observation environment illumination information storage unit 502 and stored in the video data processing unit 134B. Are input to the color conversion data calculation unit 302.

映像データ処理部１３４Ｂでは、選択された映像データに対して、端末識別情報に対応するモニタプロファイルと、観察環境照明情報とに基づいて色変換の処理を行い、色変換処理後の映像データを可搬式端末装置１１０Ａに送出する。その結果、映像表示部１１２に表示される映像中の被写体があたかも観察環境照明で照明されているかのような色合いで表示がなされる。   The video data processing unit 134B performs color conversion processing on the selected video data based on the monitor profile corresponding to the terminal identification information and the observation environment illumination information, and enables the video data after the color conversion processing. It is sent to the portable terminal device 110A. As a result, the display in the color as if the subject in the video displayed on the video display unit 112 is illuminated by the observation environment illumination is performed.

第４の実施の形態においても、第３の実施の形態と同様に、可搬式端末装置１１０Ａからサーバ１３０Ｃに観察環境照明設定情報を送出するタイミングは、可搬式端末装置１１０Ａからサーバ１３０Ｃに対して映像データの送出を要求する際とすることが可能である。あるいは、観察者が必要を感じたときに観察環境照明情報設定部８０２を操作し、その際に観察環境照明設定情報が可搬式端末装置１１０Ａからサーバ１３０Ｃに送出されるものであってもよい。この場合サーバ１３０Ｃは、送出するべき映像データを、入力した観察環境照明設定情報に対応するものに即切り替えてもよいし、動画であればシーンの切り替えタイミングで、静止画であれば次の映像データを送出するタイミングで切り替えてもよい。   Also in the fourth embodiment, similarly to the third embodiment, the timing at which the observation environment illumination setting information is sent from the portable terminal device 110A to the server 130C is sent from the portable terminal device 110A to the server 130C. It is possible to request transmission of video data. Alternatively, the observation environment illumination information setting unit 802 may be operated when the observer feels necessary, and the observation environment illumination setting information may be sent from the portable terminal device 110A to the server 130C at that time. In this case, the server 130C may immediately switch the video data to be transmitted to one corresponding to the input observation environment lighting setting information, or at the scene switching timing for a moving image, or the next video for a still image. It may be switched at the timing of sending data.

モニタプロファイル記憶部１３８に記憶されるモニタプロファイルの情報も、第１および第２の実施の形態と同様、可搬式端末装置１１０Ａのメーカからサーバ１３０Ｂを所有・管理するコンテンツプロバイダあるいは個人に供給するようにしても、上記コンテンツプロバイダで計測し、得られた情報を記憶するようにしてもよい。   Similarly to the first and second embodiments, the monitor profile information stored in the monitor profile storage unit 138 is also supplied from the manufacturer of the portable terminal device 110A to the content provider or individual who owns and manages the server 130B. Alternatively, the information obtained by measurement by the content provider may be stored.

本発明に係る映像信号処理の技術は、映像データを送出可能なサーバと、有線および無線の形態を問わずにネットワークを介してこのサーバに接続される、携帯電話、ＰＤＡ、ノートＰＣ、モニタ装置等の可搬式の端末装置とで構成される映像表示システムに利用可能である。   A video signal processing technique according to the present invention includes a server capable of transmitting video data, and a mobile phone, a PDA, a notebook PC, and a monitor device connected to the server via a network regardless of wired or wireless forms. It can be used for a video display system configured with a portable terminal device such as the above.

本発明の第１の実施の形態に係る映像表示システムの概略的構成を説明するブロック図である。1 is a block diagram illustrating a schematic configuration of a video display system according to a first embodiment of the present invention. 環境照明検出部の内部構成例を概略的に示すブロック図である。It is a block diagram which shows schematically the internal structural example of an environmental illumination detection part. 映像データ処理部の内部構成例を概略的に示すブロック図である。It is a block diagram which shows schematically the internal structural example of a video data processing part. 色変換処理部およびモニタ色変換部の内部構成例を概略的に示すブロック図である。It is a block diagram which shows roughly the example of an internal structure of a color conversion process part and a monitor color conversion part. 本発明の第２の実施の形態に係る映像表示システムの概略的構成を説明するブロック図である。It is a block diagram explaining the schematic structure of the video display system which concerns on the 2nd Embodiment of this invention. 映像データ処理部の内部構成例を概略的に示すブロック図である。It is a block diagram which shows schematically the internal structural example of a video data processing part. 表示用映像保管部に保管される映像データの保管形式を概念的に示す図である。It is a figure which shows notionally the storage format of the video data stored in the video storage part for a display. 本発明の第３の実施の形態に係る映像表示システムの概略的構成を説明するブロック図である。It is a block diagram explaining the schematic structure of the video display system which concerns on the 3rd Embodiment of this invention. 本発明の第４の実施の形態に係る映像表示システムの概略的構成を説明するブロック図である。It is a block diagram explaining the schematic structure of the video display system which concerns on the 4th Embodiment of this invention. 映像データ処理部の内部構成例を概略的に示すブロック図である。It is a block diagram which shows schematically the internal structural example of a video data processing part.

符号の説明Explanation of symbols

１００、１００Ａ、１００Ｂ、１００Ｃ … 映像表示システム
１１０、１１０Ａ … 可搬式端末装置
１１２ … 映像表示部
１１４ … 環境照明検出部
１１６ … キー入力部
１２０ … ネットワーク
１３０、１３０Ａ、１３０Ｂ、１３０Ｃ … サーバ
１３２ … 多原色映像保管部
１３４、１３４Ａ、１３４Ｂ … 映像データ処理部
１３６ … モニタプロファイル選択部
１３８ … モニタプロファイル記憶部
２０２ … コサインコレクタ
２０４ … 光ファイバ
２０６ … スリット
２０８ … コリメータ・ミラー
２１０ … グレーティング
２１２ … 結像ミラー
２１４ … ラインセンサ
２１６ … 信号処理回路
３０２ … 色変換データ演算部
３０４ … モニタ色変換データ演算部
３０６ … 撮影特性情報分離部
３０８ … 色変換処理部
３１０ … モニタ色変換部
４０２、４１２ … ＬＵＴ
４０４ … マトリクス演算部
４１４ … 色分解演算部
５０２ … 観察環境照明情報記憶部
５０４ … 表示用映像保管部
５０６ … 映像選択部
５０８ … 観察環境照明類似度判定部
８０２ … 観察環境照明情報設定部
９０２ … 適用観察環境照明選択部 100, 100A, 100B, 100C ... Video display system 110, 110A ... Portable terminal device 112 ... Video display unit 114 ... Environmental illumination detection unit 116 ... Key input unit 120 ... Network 130, 130A, 130B, 130C ... Server 132 ... Many Primary color video storage unit 134, 134A, 134B ... Video data processing unit 136 ... Monitor profile selection unit 138 ... Monitor profile storage unit 202 ... Cosine collector 204 ... Optical fiber 206 ... Slit 208 ... Collimator mirror 210 ... Grating 212 ... Imaging mirror 214 ... Line sensor 216 ... Signal processing circuit 302 ... Color conversion data calculation unit 304 ... Monitor color conversion data calculation unit 306 ... Shooting characteristic information separation unit 308 ... Color conversion processing unit 310 ... Monitor color conversion unit 40 , 412 ... LUT
404 ... Matrix calculation unit 414 ... Color separation calculation unit 502 ... Observation environment illumination information storage unit 504 ... Display image storage unit 506 ... Image selection unit 508 ... Observation environment illumination similarity determination unit 802 ... Observation environment illumination information setting unit 902 ... Applicable observation environment illumination selector

Claims (6)

ネットワークを介して互いに接続される可搬式端末装置および映像データ送出サーバを有する映像表示システムであって、
前記可搬式端末装置は、
前記映像データ送出サーバから出力される映像データに基づく映像を表示可能な映像表示部と、
前記可搬式端末装置を取り巻く環境を照明する光である環境照明光の分光特性に関連する情報である環境照明情報を前記映像データ送出サーバに送出するための環境照明情報送出部と、
前記可搬式端末装置の種類を前記映像データ送出サーバが特定することが可能に構成される端末特定情報を前記映像データ送出サーバに送出するための端末特定情報送出部と
を有し、
前記映像データ送出サーバは、
４つ以上の原色からなる多原色映像データを保管する多原色映像保管部と、
前記映像データ送出サーバに接続しうる複数種類の可搬式端末装置それぞれが有する映像表示部の表示特性を表すモニタプロファイルを記憶するモニタプロファイル記憶部と、
前記可搬式端末装置から送出される前記環境照明情報と、前記可搬式端末装置から送出される前記端末特定情報に対応する前記モニタプロファイルとに基づいて前記多原色映像データに色変換処理を行い、当該の色変換処理後の映像データを前記可搬式端末装置に送出するように構成される映像データ処理部と
を有する
ことを特徴とする映像表示システム。 A video display system having a portable terminal device and a video data transmission server connected to each other via a network,
The portable terminal device is:
A video display unit capable of displaying video based on video data output from the video data transmission server;
An environmental lighting information sending unit for sending environmental lighting information, which is information related to the spectral characteristics of the environmental lighting light, which is light that illuminates the environment surrounding the portable terminal device, to the video data sending server;
A terminal specifying information sending unit for sending to the video data sending server terminal specifying information configured such that the video data sending server can specify the type of the portable terminal device;
The video data transmission server is
A multi-primary color video storage unit for storing multi-primary color video data composed of four or more primary colors;
A monitor profile storage unit for storing a monitor profile representing display characteristics of a video display unit included in each of a plurality of types of portable terminal devices that can be connected to the video data transmission server;
Performing color conversion processing on the multi-primary color video data based on the environmental lighting information sent from the portable terminal device and the monitor profile corresponding to the terminal specifying information sent from the portable terminal device, A video display system comprising: a video data processing unit configured to send the video data after the color conversion processing to the portable terminal device. 前記可搬式端末装置が、前記環境照明光の分光特性を検出するための環境照明検出部をさらに有することを特徴とする請求項１に記載の映像表示システム。   The video display system according to claim 1, wherein the portable terminal device further includes an environmental illumination detection unit for detecting a spectral characteristic of the environmental illumination light. 前記環境照明検出部は予め定められたタイミングで前記環境照明光の分光特性を検出し、検出された前記分光特性に予め定められた量を超す変化があったときに前記可搬式端末装置から前記映像データ送出サーバへ新たな観察照明情報を送出するように構成されることを特徴とする請求項２に記載の映像表示システム。   The environmental illumination detection unit detects a spectral characteristic of the environmental illumination light at a predetermined timing, and when there is a change exceeding a predetermined amount in the detected spectral characteristic, the portable terminal device The video display system according to claim 2, wherein the video display system is configured to transmit new observation illumination information to the video data transmission server. 前記映像表示部に表示される映像を観察するユーザによって前記環境照明光情報を入力又は設定することが可能に構成される環境照明光情報入力部が前記可搬式端末装置に備えられることを特徴とする請求項１に記載の映像表示システム。   The portable terminal device includes an environment illumination light information input unit configured to be able to input or set the environment illumination light information by a user who observes an image displayed on the image display unit. The video display system according to claim 1. 前記映像データ送出サーバが、
予め想定される複数種類の所定環境照明光と複数の前記モニタプロファイルとの網羅的組み合わせに対応して予め前記色変換処理を行って得られる複数の色変換処理後映像データを保管する色変換処理後映像データ保管部と、
前記予め想定される複数種類の所定環境照明光のうち、前記可搬式端末装置から送出される環境照明情報で特定される環境照明光に最も類似する所定環境照明光を特定する類似環境照明光特定部と、
前記色変換処理後映像データ保管部中に保管される前記複数の色変換処理後映像データ中から、前記類似環境照明光特定部で特定された所定環境照明光と、前記端末特定情報との組み合わせに対応する色変換処理後映像データを選択して前記可搬式端末装置に送出する映像選択送出部と
をさらに有することを特徴とする請求項１から４のいずれか一つに記載の映像表示システム。 The video data transmission server is
Color conversion processing for storing a plurality of color-converted video data obtained by performing the color conversion processing in advance corresponding to an exhaustive combination of a plurality of types of predetermined environmental illumination light and a plurality of monitor profiles. After video data storage,
Similar environmental illumination light specification that identifies predetermined environmental illumination light that is most similar to the environmental illumination light specified by the environmental illumination information transmitted from the portable terminal device among the plurality of types of predetermined environmental illumination light that is assumed in advance And
A combination of the predetermined environment illumination light identified by the similar environment illumination light identification unit and the terminal identification information from the plurality of color conversion processed video data stored in the color conversion processed video data storage unit 5. The video display system according to claim 1, further comprising: a video selection / transmission unit that selects video data after color conversion processing corresponding to the video data and transmits the video data to the portable terminal device. . 映像データ送出サーバにネットワークを介して接続可能な可搬式端末装置であって、
前記映像データ送出サーバから出力される映像データに基づく映像を表示可能な映像表示部と、
前記可搬式端末装置を取り巻く環境を照明する光である環境照明光の分光特性に関連する情報である環境照明情報を前記映像データ送出サーバに送出するための環境照明情報送出部と、
前記可搬式端末装置の種類を前記映像データ送出サーバが特定することが可能に構成される端末特定情報を前記映像データ送出サーバに送出するための端末特定情報送出部と
を有し、
前記映像データ送出サーバに接続しうる複数種類の可搬式端末装置それぞれが有する映像表示部の表示特性を表すモニタプロファイルを記憶するために前記映像データ送出サーバ内に備えられるモニタプロファイル記憶部中から前記端末特定情報に対応するものとして取り出されたモニタプロファイルと、前記可搬式端末装置から前記映像データ送出サーバに送られた前記環境照明情報とに基づいて、前記映像データ送出サーバ中に保管される４つ以上の原色からなる多原色映像データに対して色変換処理が行われて生成され、出力される色変換処理後の映像データを前記映像データ送出サーバから入力して前記映像表示部に映像を表示可能に構成されることを特徴とする可搬式端末装置。 A portable terminal device connectable to a video data transmission server via a network,
A video display unit capable of displaying video based on video data output from the video data transmission server;
An environmental lighting information sending unit for sending environmental lighting information, which is information related to the spectral characteristics of the environmental lighting light, which is light that illuminates the environment surrounding the portable terminal device, to the video data sending server;
A terminal specifying information sending unit for sending to the video data sending server terminal specifying information configured such that the video data sending server can specify the type of the portable terminal device;
The monitor profile storage unit provided in the video data transmission server for storing the monitor profile representing the display characteristics of the video display unit of each of the plurality of types of portable terminal devices that can be connected to the video data transmission server. 4 stored in the video data transmission server based on the monitor profile extracted as corresponding to the terminal identification information and the environmental lighting information sent from the portable terminal device to the video data transmission server. Color conversion processing is performed on multi-primary color video data composed of two or more primary colors, and the output video data after color conversion processing is input from the video data transmission server, and the video is displayed on the video display unit. A portable terminal device configured to be displayable.
JP2007131646A 2007-05-17 2007-05-17 Video display system with improved color reproduction Pending JP2008288859A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007131646A JP2008288859A (en) 2007-05-17 2007-05-17 Video display system with improved color reproduction

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007131646A JP2008288859A (en) 2007-05-17 2007-05-17 Video display system with improved color reproduction

Publications (1)

Publication Number Publication Date
JP2008288859A true JP2008288859A (en) 2008-11-27

Family

ID=40148171

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007131646A Pending JP2008288859A (en) 2007-05-17 2007-05-17 Video display system with improved color reproduction

Country Status (1)

Country Link
JP (1) JP2008288859A (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010055609A1 (en) 2008-11-11 2010-05-20 新日本製鐵株式会社 Thick steel sheet having high strength and method for producing same
JP2011176455A (en) * 2010-02-23 2011-09-08 Canon Inc Content providing apparatus, processing method of content providing apparatus, and program
JPWO2010073363A1 (en) * 2008-12-26 2012-05-31 富士通株式会社 Resolution changing apparatus, resolution changing method, and resolution changing program
JP2012526451A (en) * 2009-05-06 2012-10-25 トムソン ライセンシング Method and system for delivering multimedia content optimized according to the capabilities of a presentation device
JP2012253745A (en) * 2011-05-10 2012-12-20 Canon Inc Image display system and control method of the same
US20130069977A1 (en) * 2011-09-21 2013-03-21 Casio Computer Co., Ltd. Image display method, server and image display system
JP2013535135A (en) * 2010-06-15 2013-09-09 ドルビー ラボラトリーズ ライセンシング コーポレイション Encoding, distribution and display of video data including customized video content versions
JP2016059019A (en) * 2014-09-12 2016-04-21 キヤノン株式会社 Video processor, video processing method, and video distribution system
JP2018511966A (en) * 2015-02-13 2018-04-26 アルカテル−ルーセント Coding parameter adaptation based on viewing experience and system constraints

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002262119A (en) * 2001-02-28 2002-09-13 Sharp Corp Image processor, image processing method, machine- readable recording medium for recording image processing program and the image processing program
JP2002330296A (en) * 2001-04-27 2002-11-15 Matsushita Electric Ind Co Ltd Device and system for managing color
JP2003030639A (en) * 2001-07-13 2003-01-31 Dainippon Ink & Chem Inc Color information providing system, color information providing method and program therefor
JP2003134527A (en) * 2001-10-24 2003-05-09 Telecommunication Advancement Organization Of Japan System for reproducing color video image
JP2003228330A (en) * 2002-02-01 2003-08-15 Sanyo Electric Co Ltd Display device
JP2006091281A (en) * 2004-09-22 2006-04-06 Fuji Xerox Co Ltd Electronic color sample output method and electronic color sample output apparatus

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002262119A (en) * 2001-02-28 2002-09-13 Sharp Corp Image processor, image processing method, machine- readable recording medium for recording image processing program and the image processing program
JP2002330296A (en) * 2001-04-27 2002-11-15 Matsushita Electric Ind Co Ltd Device and system for managing color
JP2003030639A (en) * 2001-07-13 2003-01-31 Dainippon Ink & Chem Inc Color information providing system, color information providing method and program therefor
JP2003134527A (en) * 2001-10-24 2003-05-09 Telecommunication Advancement Organization Of Japan System for reproducing color video image
JP2003228330A (en) * 2002-02-01 2003-08-15 Sanyo Electric Co Ltd Display device
JP2006091281A (en) * 2004-09-22 2006-04-06 Fuji Xerox Co Ltd Electronic color sample output method and electronic color sample output apparatus

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010055609A1 (en) 2008-11-11 2010-05-20 新日本製鐵株式会社 Thick steel sheet having high strength and method for producing same
JPWO2010073363A1 (en) * 2008-12-26 2012-05-31 富士通株式会社 Resolution changing apparatus, resolution changing method, and resolution changing program
JP2012526451A (en) * 2009-05-06 2012-10-25 トムソン ライセンシング Method and system for delivering multimedia content optimized according to the capabilities of a presentation device
JP2015167368A (en) * 2009-05-06 2015-09-24 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ Method and system for delivering multimedia content optimized in accordance with presentation device capability
JP2011176455A (en) * 2010-02-23 2011-09-08 Canon Inc Content providing apparatus, processing method of content providing apparatus, and program
JP2013535135A (en) * 2010-06-15 2013-09-09 ドルビー ラボラトリーズ ライセンシング コーポレイション Encoding, distribution and display of video data including customized video content versions
US9894314B2 (en) 2010-06-15 2018-02-13 Dolby Laboratories Licensing Corporation Encoding, distributing and displaying video data containing customized video content versions
US8884843B2 (en) 2011-05-10 2014-11-11 Canon Kabushiki Kaisha Image display system and control method therefor
JP2012253745A (en) * 2011-05-10 2012-12-20 Canon Inc Image display system and control method of the same
JP2013068687A (en) * 2011-09-21 2013-04-18 Casio Comput Co Ltd Image display method, server, and image display system
CN103024470A (en) * 2011-09-21 2013-04-03 卡西欧计算机株式会社 Image display method, server and image display system
US20130069977A1 (en) * 2011-09-21 2013-03-21 Casio Computer Co., Ltd. Image display method, server and image display system
JP2016059019A (en) * 2014-09-12 2016-04-21 キヤノン株式会社 Video processor, video processing method, and video distribution system
JP2018511966A (en) * 2015-02-13 2018-04-26 アルカテル−ルーセント Coding parameter adaptation based on viewing experience and system constraints

Similar Documents

Publication Publication Date Title
JP2008288859A (en) Video display system with improved color reproduction
JP3829238B2 (en) Color reproduction system
CN100596206C (en) Projector color correcting method
US20090096815A1 (en) Image signal processing device and color conversion processing method
US8531548B2 (en) Image processing method, image processing program, image processing device and camera
JP4231661B2 (en) Color reproduction device
KR100278642B1 (en) Color image processing apparatus and method
US8326027B2 (en) Conversion matrix determining method, image processing device, image processing program and imaging apparatus
US20090195670A1 (en) Image processing device, image processing method and program product
JP2005117612A (en) Image processing method and apparatus
JP2015127680A (en) Measuring device, system and program
JP2003348501A (en) Image display device
CN103474046B (en) Method for improving color reproduction effect from digital camera to displayer
EP1450146A1 (en) Optical sensor, optical sensing method, program, and recording medium
JP2010268294A (en) Color management system and program
JP6851082B2 (en) Multi-point monitor color sharing device
JP4403224B2 (en) Color conversion system, color conversion method, and color conversion program
Nikkanen et al. Subjective effects of white-balancing errors in digital photography
JP2017212640A (en) Color adjustment device and color adjustment system
JP2006005509A (en) Characteristic evaluation apparatus and characteristic evaluation method for imaging apparatus
KR102721790B1 (en) Image display system, image display method, image display program, and image display device
JP5029187B2 (en) Color coordinate conversion device, imaging device, color coordinate conversion program, and color coordinate conversion method
JP2010145097A (en) Color unevenness inspection method, and inspection image data generation apparatus
JP2010239498A (en) Image input/output method and system
JP4677924B2 (en) Imaging system, moving image processing method, and moving image processing apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100427

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120426

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120501

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20120925