JP5133202B2 - The information processing apparatus, the color adjustment method, and computer-executable program - Google Patents

The information processing apparatus, the color adjustment method, and computer-executable program Download PDF

Info

Publication number
JP5133202B2
JP5133202B2 JP2008279676A JP2008279676A JP5133202B2 JP 5133202 B2 JP5133202 B2 JP 5133202B2 JP 2008279676 A JP2008279676 A JP 2008279676A JP 2008279676 A JP2008279676 A JP 2008279676A JP 5133202 B2 JP5133202 B2 JP 5133202B2
Authority
JP
Grant status
Grant
Patent type
Prior art keywords
display
white balance
information
camera
processing apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2008279676A
Other languages
Japanese (ja)
Other versions
JP2010109693A (en )
Inventor
英輝 柏山
Original Assignee
レノボ・シンガポール・プライベート・リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Grant date

Links

Images

Description

本発明は、情報処理装置、その色調整方法、およびコンピュータが実行可能なプログラムに関し、詳細には、ディスプレイと、当該ディスプレイの表示面側に配置されるカメラとを備えた情報処理装置、その色調整方法、およびコンピュータが実行可能なプログラムに関する。 The present invention relates to an information processing apparatus, the color adjustment method, and a computer-executable program, in particular, an information processing apparatus having a display and a camera disposed on a display side of the display, the color adjusting method, and a computer-executable program.

デジタルカメラでは、被写体を撮像する場合に、できるだけ自然な色で撮像される必要がある。 In the digital camera, when imaging an object, it is necessary to be imaged as much as possible natural colors. このため、デジタルカメラでは、周知のとおり、ホワイトバランス調整回路が付加されている。 Therefore, in the digital camera, as is well known, it is added the white balance adjustment circuit. このホワイトバランス調整回路では、ある色温度の光源で照明された白い物体を撮像したときに、R:G:B=1:1:1となるように調整している。 In this white balance adjustment circuit, when capturing a white object illuminated by the light source of a certain color temperature, R: G: B = 1: 1: is adjusted to be 1.

しかしながら、従来のデジタルカメラのホワイトバランス調整回路にあっては、ある一定の入力光に対してのみ正常に調整されるだけであり、入力光が暗すぎるときには青っぽく調整され、あるいは、例えばカメラの画角の一部に強力な光源があって入力光が明るすぎるときには赤っぽく調整されてしまうという不都合があった。 However, in the white balance adjustment circuit of a conventional digital camera, only be adjusted correctly only for a certain input light is adjusted bluish when the input light is too dark, or, for example, camera image when there is a strong light source in a part of the corner input light is too bright, there is a disadvantage that the adjusted reddish. このような不都合を解消しようとすると、回路が複雑化し、コストアップとなり、かつ回路の複雑化に伴って外形が大型化するという問題がある。 If you try to solve this problem, the circuit is complicated, it is cost, and there is a problem that the outer shape is enlarged in accordance with the complexity of the circuit.

ところで、近時、ノート型パソコンや携帯電話などの情報処理装置では、カメラを搭載したものが普及している。 By the way, in recent years, in the information processing devices such as notebook computers and mobile phones, which was equipped with a camera it has become widespread. かかる情報処理装置に搭載されるカメラは、画面全体の情報または予め指定した任意の画面範囲の情報に対して各種の補正が行われる。 Camera to be mounted on the information processing apparatus, various corrections are made to the information of any screen range specified information or advance the entire screen. カメラには、撮像を良好に維持するために、各種映像補正機能(Auto White Balance、Auto Exposure等)が搭載されている。 The camera, in order to maintain good imaging, various image correction function (Auto White Balance, Auto Exposure, etc.) are mounted.

例えば、特許文献1では、コストアップを抑えたまま、被写体輝度が不足している場合であっても良好な写真撮影を行なうために、カメラと表示装置を備えたカメラ付情報端末において、撮影時に、表示装置に白100%の信号に基づく表示をさせることにより補助光として点灯させる技術が開示されている。 For example, Patent Document 1, while suppressing an increase in cost, in order to perform even better photography even when the subject luminance is insufficient, the camera-equipped information terminal with a camera and a display device, at the time of photographing , techniques for lighting the auxiliary light is disclosed by the display based on the white 100% of the signal to the display device.

また、特許文献2では、デジタルカメラがフラッシュと連動して撮影する際には、取得した画像データをフラッシュから取得したICCプロファイルと関連付けて記録することにより、画像データに対して外部フラッシュの特性を反映した色補正を行う技術が開示されている。 In Patent Document 2, when the digital camera shoots in conjunction with flash, by recording in association with ICC profile acquired image data acquired from the flash, the characteristics of the external flash to the image data techniques for performing color correction that reflects is disclosed.

また、特許文献3では、テレビ電話のカメラは、撮像した画像データを複数のブロックに分割し、複数のブロックの内から特定の被写体が写っているブロックを特定ブロックとして出力し、この特定されたブロックの画像データは、予め設定された設定値データと比較され、比較結果が著しく設定値データと異なるときに、ホワイトバランスを適正な値に補正する補正信号を形成する技術が開示されている。 In Patent Document 3, the videophone camera divides the image data captured into a plurality of blocks, and outputs the block that is reflected a specific object from among the plurality of blocks as a specific block has been this particular image data of the block is compared with a preset set value data, when the comparison result is different from the remarkable setting value data, and a technique for forming a correction signal for correcting the white balance to a proper value is disclosed.

ノート型パソコンに搭載されるカメラは、例えば、電話会議で自己の顔を撮影する場合に使用頻度が高い。 Camera to be mounted on a notebook personal computer, for example, is frequently used when shooting a self-face in a conference call. かかるカメラは、通常、ディスプレイの表示画面の近傍に配置されているため、PC使用者を撮影する場合に、ディスプレイの表示画面の状態(表示画面の色、輝度等)によって影響を受けてしまう。 Such cameras typically because it is located near the display screen of the display, when photographing a PC user, thus influenced by the state of the display screen of the display (color of the display screen, brightness, etc.). 例えば、ディスプレイ画面が赤色だと赤味を帯びた顔となり、ディスプレイ画面が青色だと青味を帯びた顔となってしまう。 For example, become the face of the display screen has a reddish that it is red, becomes a face in which the display screen is bluish that it is blue. 従来の映像補正機能はPC使用者に対して有効ではないという問題がある。 Conventional image correction function, there is a problem that it is not valid for the PC user.

特開2005−286440号公報 JP 2005-286440 JP 特開2006−87099号公報 JP 2006-87099 JP 特開平06−086314号公報 JP 06-086314 discloses

本発明は、上記課題に鑑みてなされたものであり、ディスプレイの表示画面の表示状態によらずに、簡易な構成で被写体を適正な色バランスで撮像することが可能な情報処理装置、その色調整方法、およびコンピュータが実行可能なプログラムを提供することを目的とする。 The present invention has been made in view of the above problems, irrespective of the display state of the display screen of the display, an information processing apparatus capable of imaging an object at a proper color balance with a simple configuration, the color adjusting method, and a computer and an object thereof is to provide an executable program.

上述した課題を解決し、目的を達成するために、本発明は、ディスプレイと、当該ディスプレイの表示面側に配置されるカメラとを備えた情報処理装置であって、前記カメラで撮像した画像データのホワイトバランス調整を行うホワイトバランス調整手段と、前記ディスプレイの表示情報を取得するディスプレイ表示情報取得手段と、を備え、前記ホワイトバランス調整手段は、前記ディスプレイ表示情報取得手段で取得した前記ディスプレイの表示情報に基づいて、前記カメラで撮像した画像データのホワイトバランス調整を行うことを特徴とする。 To solve the above problems and achieve the object, the present invention is an information processing apparatus having a display and a camera disposed on a display side of the display, the image data picked up by the camera a white balance adjusting means performs white balance adjustment, and a display displaying information acquiring means for acquiring display information of the display, the white balance adjustment unit, the display of the display acquired by the display display information acquisition unit based on the information, and performs white balance adjustment of the image data captured by the camera.

また、本発明の好ましい態様によれば、前記ディスプレイの表示情報は、前記ディスプレイの各座標のR、G、Bの階調データを含むことが望ましい。 According to a preferred embodiment of the present invention, display information of the display, R of each coordinate of the display, G, it is desirable to include a gray-scale data of the B.

また、本発明の好ましい態様によれば、さらに、前記カメラで撮像する場合の露出を制御する露出制御手段を備え、前記露出制御手段は、前記ディスプレイ表示情報取得手段で取得した前記ディスプレイの表示情報に基づいて、前記カメラの露出を制御することが望ましい。 According to a preferred embodiment of the present invention, further comprising exposure control means for controlling the exposure in the case of imaging by the camera, the exposure control means, display information of the display acquired by the display display information acquisition unit based on, it is desirable to control the exposure of the camera.

また、本発明の好ましい態様によれば、前記ディスプレイの表示情報は、前記ディスプレイのバックライトの輝度データを含むことが望ましい。 According to a preferred embodiment of the present invention, display information of the display preferably includes a luminance data of the backlight of the display.

また、上述した課題を解決し、目的を達成するために、本発明は、ディスプレイと、当該ディスプレイの表示面側に配置されるカメラとを備えた情報処理装置の色調整方法であって、前記カメラで撮像した画像データのホワイトバランス調整を行うホワイトバランス調整工程と、前記ディスプレイの表示情報を取得するディスプレイ表示情報取得工程と、を含み、前記ホワイトバランス調整工程では、前記ディスプレイ表示情報取得工程で取得した前記ディスプレイの表示情報に基づいて、前記カメラで撮像した画像データのホワイトバランス調整を行うことを特徴とする。 Further, to solve the problem described above and achieve the object, the present invention includes a display, a color adjustment method for an information processing apparatus having a camera which is arranged on the display surface side of the display, the a white balance adjusting step adjusts the white balance of the image data captured by the camera includes a display displaying information acquisition step of acquiring display information of the display, in the white balance adjustment process, in the display the display information acquisition step based on the acquired display information of the display, and performs white balance adjustment of the image data captured by the camera.

また、上述した課題を解決し、目的を達成するために、本発明は、ディスプレイと、当該ディスプレイの表示面側に配置されるカメラとを備えた情報処理装置に搭載されるプログラムであって、コンピュータに、前記カメラで撮像した画像データのホワイトバランス調整を行うホワイトバランス調整工程と、前記ディスプレイの表示情報を取得するディスプレイ表示情報取得工程と、を実行させ、前記ホワイトバランス調整工程では、前記ディスプレイ表示情報取得工程で取得した前記ディスプレイの表示情報に基づいて、前記カメラで撮像した画像データのホワイトバランス調整を行うことを特徴とする。 Further, to solve the problem described above and achieve the object, the present invention provides a program installed in an information processing apparatus having a display and a camera disposed on a display side of the display, the computer, and white balance adjusting step adjusts the white balance of the image data picked up by said camera, said the display display information acquisition step of acquiring the display information of the display, is to run, in the white balance adjustment process, the display based on the display information of the display acquired by the display information acquisition process, and performs white balance adjustment of the image data captured by the camera.

本発明によれば、ディスプレイと、当該ディスプレイの表示面側に配置されるカメラとを備えた情報処理装置であって、前記カメラで撮像した画像データのホワイトバランス調整を行うホワイトバランス調整手段と、前記ディスプレイの表示情報を取得するディスプレイ表示情報取得手段と、を備え、前記ホワイトバランス調整手段は、前記ディスプレイ表示情報取得手段で取得した前記ディスプレイの表示情報に基づいて、前記カメラで撮像した画像データのホワイトバランス調整を行うこととしたので、ディスプレイの表示画面の状態によらずに、簡易な構成で被写体を適正な色バランスで撮像することが可能な情報処理装置を提供することが可能になるという効果を奏する。 According to the present invention, a display, an information processing apparatus having a camera which is arranged on the display surface side of the display, the white balance adjusting means performs white balance adjustment of the image data captured by the camera, and a display displaying information acquiring means for acquiring display information of the display, the white balance adjustment means on the basis of the display information of the display acquired by the display display information acquisition unit, the image data picked up by the camera since it was decided to perform the white balance adjustment, irrespective of the state of the display screen of the display, it is possible to provide an information processing apparatus capable of imaging an object at a proper color balance with a simple structure there is an effect that.

以下に、この発明につき図面を参照しつつ詳細に説明する。 It will be explained below in detail with reference to the accompanying drawings. なお、この実施例によりこの発明が限定されるものではない。 It should be understood that the present invention is not limited by this embodiment. また、下記実施例における構成要素には、当業者が容易に想定できるものまたは実質的に同一のものが含まれる。 In addition, constituent elements in the embodiments, those skilled in the art include easily assume or that are substantially equivalent.

図1は、本発明の実施例に係る携帯情報処理装置を適用したノート型PCの概略の外観図である。 Figure 1 is a schematic external view of a notebook type PC to which the portable information processing apparatus according to an embodiment of the present invention. ノート型PC1は、同図に示すように、いずれも略直方体である本体側筐体2およびディスプレイ側筐体3を備える。 Notebook PC1, as shown in the figure, both provided with a main body side housing 2 and the display-side housing 3 is substantially rectangular parallelepiped. 本体側筐体2は、キーボードおよびトラックポイント(ポインティング・デバイス)等を有する入力部4を備える。 Main casing 2 includes an input unit 4 that has a keyboard and TrackPoint (pointing device) and the like. ディスプレイ側筐体3は、液晶ディスプレイ5と、液晶ディスプレイ5の表示面側にその上方の略中央に配置され、前方の被写体を撮像可能なカメラモジュール6とを備える。 Display-side housing 3 includes a liquid crystal display 5 is arranged substantially at the center of its upper on the display surface side of the liquid crystal display 5, and a camera module 6 capable captured forward direction of the subject.

さらに、本体側筐体2およびディスプレイ側筐体3は、それぞれの端部で左右の一対の連結部(ヒンジ部)7a、7bによって連結されており、連結部7a、7bは、これらの筐体を開閉自在に支持している。 Further, the main body side housing 2 and the display-side housing 3 includes a pair of connecting portions of the left and right at each end (hinge section) 7a, are connected by 7b, connecting portions 7a, 7b, these housings It is openably supported.

同図において、カメラモジュール6により前方の利用者を撮影する場合は、液晶ディスプレイ5の表示画面の表示状態により影響を受けてしまうため、適正なホワイトバランスの画像を得ることができない。 In the figure, when shooting in front of the user by the camera module 6, because thereby affected by the display state of the display screen of the liquid crystal display 5, it is impossible to obtain an image of the proper white balance. そこで、本実施の形態では、液晶ディスプレイ5の表示情報を取得し、カメラモジュール6で撮像した利用者の画像に対して、液晶ディスプレイ5の表示情報を使用してホワイトバランス調整を行うことにより、簡易な構成で適正なホワイトバランス調整された被写体画像を得ることにしている。 Therefore, in this embodiment, obtains the display information of the liquid crystal display 5, for the user of an image captured by the camera module 6, by performing white balance adjustment by using the display information of the liquid crystal display 5, It is to obtain a proper white balance adjusted object image with a simple configuration.

図2は、図1のノート型PC1の概略のハードウェア構成例を示す図である。 Figure 2 is a diagram illustrating an example hardware configuration of the outline of the notebook PC1 FIG. ノート型PC1は、同図に示すように、CPU11、ROM12、メモリ13、HDD(ハードディスク)14、液晶ディスプレイ5と、グラフィックスアダプタ16と、ビデオポート17と、USBインターフェース18と、カメラモジュール6と、エンベデッドコントローラ19と、入力部4と、リッドセンサ20と、電源回路21とを備えており、各部はバスを介して直接または間接的に接続されている。 Notebook PC1, as shown in the figure, CPU 11, ROM 12, memory 13, HDD (hard disk) 14, a liquid crystal display 5, a graphics adapter 16, a video port 17, a USB interface 18, a camera module 6 , the embedded controller 19, an input unit 4, a lid sensor 20, and a power supply circuit 21, respective sections are directly or indirectly connected via a bus.

CPU11は、バスを介して接続されたHDD14に格納されたOS14aによりノート型PC1全体の制御を行うとともに、HDD14に格納された各種のプログラムに基づいて処理を実行する機能を司る。 CPU11 controls the overall notebook PC1 by OS14a stored in HDD 14 connected via a bus, manages a function of executing processing based on various programs stored in the HDD 14. ROM12は、BIOS(Basic Input/Output System:基本入出力システム)12aやデータ等を格納している。 ROM12 is, BIOS: stores (Basic Input / Output System output system) 12a and data.

メモリ13は、キャッシュメモリやRAMで構成されており、CPU11の実行プログラムの読み込み領域として、実行プログラムの処理データを書き込む作業領域として利用される書き込み可能メモリである。 Memory 13 is composed of a cache memory and a RAM, as a read area of ​​the execution program of the CPU 11, which is a writable memory used as a work area for writing processing data of the execution program.

HDD(ハードディスク)14は、例えば、Windows(R)等のノート型PC1全体の制御を行うためのOS14a、周辺機器類をハードウェア操作するための表示ドライバ等の各種ドライバ14b、カメラモジュール6を制御するためのカメラ用アプリ(アプリケーションプログラム)14c、テレビ会議やチャットを行うためのテレビ電話用アプリ14d、特定業務に向けられた他のアプリ等を記憶する機能を有する。 HDD (hard disk) 14, for example, control OS14a for performing notebook PC1 overall control such as Windows (R), various drivers 14b of the display driver or the like for the peripheral devices to operate hardware, a camera module 6 the camera app (application program) 14c for, has a function of storing the video conferencing and videophone application 14d for carrying out the chat, other apps that are directed to a particular business or the like.

グラフィックスアダプタ16は、CPU11の制御に従って、表示情報をビデオ信号に変換し、変換したビデオ信号を液晶ディスプレイ15に出力したり、ビデオポート17を介して外部に出力する。 Graphics adapter 16, under the control of the CPU 11, converts the display information into a video signal, and outputs the converted video signal to output to the liquid crystal display 15, to the outside through the video port 17.

液晶ディスプレイ5は、LCDコントローラ5aと、LCDパネル5bと、バックライトコントローラ5cと、およびバックライト5dとで構成されている。 The liquid crystal display 5, the LCD controller 5a, is composed of a LCD panel 5b, and a backlight controller 5c, and a backlight 5d. LCDパネル5bは、透過型または半透過型の液晶パネルであり、CPU11の制御に従って、各種情報を表示する機能を有している。 LCD panel 5b is a liquid crystal panel of the transmission type or semi-transmission type, according to the control of the CPU 11, and has a function of displaying various kinds of information. LCDコントローラ5aは、CPU11の制御に従って、LCDパネル5bの表示制御を行い、グラフィックアダプタ16から入力されるビデオ信号に応じた各種情報をLCDパネル5bに表示させる。 LCD controller 5a is under the control of the CPU 11, performs display control of the LCD panel 5b, displaying various information in accordance with the video signal input from the graphics adapter 16 to the LCD panel 5b. バックライトコントローラ5cは、グラフィックスアダプタ16を介して、CPU11から入力される制御情報に基づいて、バックライト5dの輝度を制御する。 The backlight controller 5c via a graphics adapter 16, on the basis of the control information input from the CPU 11, controls the brightness of the backlight 5d. バックライト5dは、LEDや反射板で構成されており、LCDパネル5bを照光する。 Backlight 5d is formed by a LED and reflector to illuminate the LCD panel 5b. なお、本実施の形態では、ディスプレイとして液晶ディスプレイを使用することにしているが、本発明はこれに限られるものではなく、有機ELディスプレイやCRT等の他のディスプレイを使用することにしてもよい。 In the present embodiment, although on the use of a liquid crystal display as a display, the present invention is not limited thereto, may be the use of other displays such as an organic EL display, a CRT .

エンベデッドコントローラ18は、入力部4、リッドセンサ20,および電源回路21が接続されており、入力部4、リッドセンサ20,および電源回路21の動作を制御する。 The embedded controller 18, an input unit 4, the lid sensor 20, and a power supply circuit 21 is connected to control the operation of the input unit 4, the lid sensor 20, and a power supply circuit 21. 入力部4は、ユーザが入力操作を行うためのユーザインターフェースであり、文字、コマンド等を入力する各種キーより構成されるキーボードや、画面上のカーソルを移動させたり、各種メニューを選択するトラックスポインタ等を備えている。 The input unit 4 is a user interface for a user to perform an input operation, a character, a keyboard and composed of various keys for inputting a command or the like, or to move the cursor on the screen, Tracks pointer to select various menus It has a like. リッドセンサ20は、ディスプレイ側筐体3の閉じ状態を検出した場合に閉じ検出信号を、エンベデットコントローラ19を介してCPU11に通知する。 The lid sensor 20, a detection signal to close when detecting the closed state of the display-side housing 3, and notifies the CPU11 via the embedded controller 19.

電源回路21は、ACアダプタ、インテリジェント電池、インテリジェント電池を充電するための充電器、およびDC/DCコンバータ等を備えている。 Power circuit 21, AC adapter, and a intelligent battery charger for charging the intelligent battery, and DC / DC converter or the like. エンベデットコントローラ18は、BIOS12aの指示に従って、電源回路21による各デバイスへの電力供給を制御して、システム状態の管理を行う。 Embedded controller 18 according to instructions BIOS12a, by controlling the power supply to each device by the power supply circuit 21, to manage the system state.

カメラモジュール6は、USBインターフェース18に接続されており、レンズ31と、撮像部32と、DSP33と、USBコントローラ34と、フラッシュメモリ35とを備えている。 The camera module 6 is connected to the USB interface 18, a lens 31, an imaging unit 32, a DSP 33, and includes a USB controller 34, a flash memory 35. レンズ31は、被写体光を結像する。 Lens 31 images the subject light. 撮像部32は、CCD(Charge Coupled Device)やCMOS(Complementary Metal−Oxide Semiconductor)等の撮像素子、およびRGBカラーフィルタ等を備えており、レンズ31で撮像された被写体光をR,G,Bの画像信号として出力する。 Imaging unit 32, CCD (Charge Coupled Device) or CMOS (Complementary Metal-Oxide Semiconductor) imaging element, etc., and includes a RGB color filter or the like, the subject light is captured by the lens 31 R, G, and B and outputs as an image signal. DSP33は、AE機能やAWB機能等を有しており、A/D変換器、画像処理用LSI、メモリ等を備え、撮像素子の駆動タイミングや露出制御等を行うと共に、撮像部32で得られたRGBの画像信号に対してホワイトバランス調整等の各種信号処理を行う。 DSP33 has a AE function and AWB function, etc., A / D converter, an image processing LSI, includes a memory, performs the driving timing and exposure control of the imaging device, obtained by the imaging unit 32 It performs various signal processing such as white balance adjustment with respect to the RGB image signals. なお、DSP34の機能はソフトウェアにより実現してもよい。 The functions of the DSP34 may be implemented by software. USBコントローラ34は、USBインターフェース18とのデータ通信を制御する。 USB controller 34 controls the data communication with the USB interface 18.

CPU11は、カメラ用アプリ14cを実行することにより、カメラモジュール6を制御する。 CPU11 executes the camera application 14c, and controls the camera module 6. 以下、CPU11がプログラムを実行して実現する機能を、プログラムを動作主体として説明する。 Hereinafter, CPU 11 will be described functions realized by executing a program, the program as the operating entity. 図3は、液晶ディスプレイ5に表示されるカメラモジュール6の操作・モニタ画面の一例示す図である。 Figure 3 is a diagram showing an example of an operation monitor screen of the camera module 6 to be displayed on the LCD 5. カメラ用アプリ14cは、入力部4のユーザ操作に応じて、液晶ディスプレイ5のLCDパネル5bにカメラモジュール6の操作・モニタ画面40を表示する。 App 14c camera in response to user operation of the input unit 4 displays an operation monitor screen 40 of the camera module 6 to the LCD panel 5b of the liquid crystal display 5. 操作・モニタ画面40には、画面部41および各種ボタン(メニュー画面を表示するためのメニューボタン41、撮像した画像をメモリ13に格納する指示を与えるレリーズボタン42、メニュー項目の選択操作(カーソル移動操作)や再生画像のコマ送り/コマ戻し等の指示を入力する十字ボタン43等)が表示される。 The operation monitor screen 40, screen 41 and various buttons (release button 42 for issuing a command to store menu button 41 for displaying a menu screen, an image captured in memory 13, the menu item selection operation (cursor movement operation) cross button 43, etc. and to input an instruction such as a back frame advance / frame of the reproduced image) is displayed. 画面部41には、動作モード(モニタリングモード、再生モード)や画質モード(最大画素数モード(全有効画素を使用するモード)、低画素数モード)等を選択するためメニュー画面やカメラモジュール6で撮像した撮像画像やHDD14に記憶している画像(再生画像)が表示される。 The screen unit 41, an operation mode (monitoring mode, playback mode) and the image quality mode (mode using the maximum pixel number mode (all the effective pixels), low pixel count mode) on the menu screen and camera module 6 for selecting such image (reproduced image) is displayed which is stored in the captured image and HDD14 captured. カメラ用アプリ14cは、操作・モニタ画面40のユーザ操作に従って、カメラモジュール6を制御する。 App 14c for camera according to the user operation of the operation monitor screen 40, and controls the camera module 6.

次に、カメラモジュール6の動作を説明する。 Next, an operation of the camera module 6. 図4は、カメラモジュール6の撮像動作を説明するためのフローチャートである。 Figure 4 is a flowchart illustrating the imaging operation of the camera module 6. 図4において、カメラモジュール6のDSP33にカメラ用アプリ14cから撮像指示が入力されると(ステップS1)、DSP33は、グラフィックスアダプタ16から液晶ディスプレイ5の表示情報として、バックライト5dの輝度lおよびLCDパネル5bの各座標でのR,G,Bの階調データr(x、y)、g(x、y)、b(x、y)を取得する(ステップS2)。 4, when the DSP 33 imaging instruction from the camera application 14c in the camera module 6 is input (step S1), DSP 33, as the display information of the liquid crystal display 5 from the graphics adapter 16, the brightness l backlight 5d and R at each coordinate of the LCD panel 5b, G, gradation data r of B (x, y), g (x, y), b (x, y) to get (step S2). DSP33は、取得したバックライト5dの輝度lおよびLCDパネル5bの各座標でのR,G,Bの階調データr(x、y)、g(x、y)、b(x、y)に基づいて、下式(1)、(2)を使用して、ホワイトバランス補正値Cr、Cg、Cbおよび露出補正値Clを算出する(ステップS3)。 DSP33 is, R in each coordinate of the luminance l and LCD panel 5b of the obtained backlight 5d, G, gradation data r of B (x, y), g (x, y), b (x, y) to based on the following equation (1), by using (2), it calculates a white balance correction value Cr, Cg, and Cb and exposure correction value Cl (step S3).

カメラモジュール6では、露出量を露出補正値Clで補正し、補正した露出量で露出制御を行って(例えば、撮像素子の露光時間を補正する)、撮像部32から被写体のRGBの画像信号を取り込む(ステップS4)。 In the camera module 6, the exposure amount is corrected by the exposure correction value Cl, performs exposure control by correcting the exposure amount (e.g., to correct the exposure time of the image pickup device), the RGB image signal of an object from the imaging unit 32 take in (step S4). 具体的には、撮像部32の撮像素子の撮像面に入射して結像される。 Specifically, is imaged is incident on the imaging surface of the imaging element of the imaging unit 32. 撮像素子に蓄積された信号電荷は、DSP33から加えられるリードパルスによって転送路に読み出され、信号電荷に応じたRGBの画像信号として順次、DSP33に出力される。 The signal charges accumulated in the imaging element is read out to the transfer path by a read pulse applied from DSP 33, as sequential RGB image signals corresponding to the signal charges are outputted to the DSP 33.

DSP33は、RGBの画像信号がA/D変換器(不図示)によりディジタルの画像信号である画像データR,G,Bに変換した後(ステップS5)、画像データR,G,Bに対して、ホワイトバランス補正値Cr、Cg、Cbをそれぞれ乗算して、ホワイトバランス調整を行う(ステップS6)。 DSP33, after the RGB image signal is converted by the A / D converter (not shown) the image data R is a digital image signal, G, and B (step S5), and the image data R, G, with respect to B , by multiplying the white balance correction value Cr, Cg, Cb, respectively, the white balance adjustment (step S6). この後、色変換処理等の他の信号処理が施される。 Thereafter, other signal processing such as color conversion processing is performed.

DSP33で信号処理が行われた画像データは、USBコントローラ34によりUSBフォーマットの画像データに変換された後、メモリ13に格納される。 The image data signal processing in the DSP33 is converted into image data of USB format by USB controller 34, it is stored in the memory 13. メモリ13に格納された画像データは、グラフィックスアダプタ16に転送されて液晶ディスプレイ15の操作・モニタ画面40(図3参照)に表示される(ステップS8)。 The image data stored in the memory 13 is displayed by being transferred to the graphics adapter 16 to the operation monitor screen 40 of the liquid crystal display 15 (see FIG. 3) (step S8). シャッタボタン43が操作されると、カメラ用アプリ14cは、撮像した画像データをHDD14に記憶する。 When the shutter button 43 is operated, the application 14c camera stores image data captured in the HDD 14. 本実施の形態によれば、例えば、テレビ電話で利用者の撮像画像を相手に送信する場合に、液晶ディスプレイ5の表示画面の表示状態によらずに、高画質(適正な色バランスおよび明るさ)の撮像画像を送信することが可能となる。 According to this embodiment, for example, when sending a captured image of a user at videophone opponent irrespective of the display state of the display screen of the liquid crystal display 5, high quality (proper color balance and brightness ) it is possible to transmit the captured image.

以上説明したように、本実施の形態によれば、カメラモジュール6では、グラフィックスアダプタ16から液晶ディスプレイ5の表示情報を取得し、取得した液晶ディスプレイ5の表示情報に基づいて、撮像した画像データのホワイトバランス調整を行うこととしたので、液晶ディスプレイの表示画面の状態によらずに、簡易な構成で被写体を適正な色バランスで撮像することが可能となる。 As described above, according to this embodiment, the camera module 6, acquires the display information of the liquid crystal display 5 from the graphics adapter 16, on the basis of acquired display information of the liquid crystal display 5, the image data captured since it was decided to perform the white balance adjustment, irrespective of the state of the display screen of the liquid crystal display, it is possible to capture a subject in an appropriate color balance with a simple configuration.

また、本実施の形態によれば、液晶ディスプレイ5の表示情報は、液晶ディスプレイ5の各座標のR、G、Bの階調データを含むこととしたので、液晶ディスプレイに表示される表示色の影響を受けることがなく、適正な色バランスの撮像画像を得ることが可能となる。 Further, according to the present embodiment, the display information of the liquid crystal display 5, the coordinates of the liquid crystal display 5 R, G, since it was decided to include gradation data of B, the display color of which is displayed on the liquid crystal display effect without undergoing, it is possible to obtain a captured image of proper color balance. 例えば、表示画面で赤色の分布が多い場合でも赤味を帯びた撮像画像となるのを防止できる。 For example, it is possible to prevent the the captured image reddish even when the red distribution is large display screen.

また、本実施の形態によれば、カメラモジュール6では、グラフィックスアダプタ16から液晶ディスプレイ5の表示情報を取得し、取得した液晶ディスプレイ5の表示情報に基づいて、露出を制御することとしたので、液晶ディスプレイの表示画面の状態によらずに、簡易な構成で適正な明るさの撮像画像を得ることが可能となる。 Further, according to this embodiment, the camera module 6, acquires the display information of the liquid crystal display 5 from the graphics adapter 16, on the basis of acquired display information of the liquid crystal display 5, so it was decided to control exposure , irrespective of the state of the display screen of the liquid crystal display, it is possible to obtain a captured image of proper brightness with a simple configuration.

また、本実施の形態によれば、液晶ディスプレイ5の表示情報は、液晶ディスプレイ5のバックライト5dの輝度データを含むこととしたので、液晶ディスプレイの明るさの影響を受けることなく、適正な明るさの撮像画像を得ることが可能となる。 Further, according to the present embodiment, the display information of the liquid crystal display 5, so it was decided to include the luminance data of the backlight 5d of liquid crystal display 5, without being affected by the brightness of the LCD display, appropriate brightness it is possible to obtain the captured image.

また、上記実施の形態では、本発明に係る情報処理装置として、ノート型PCを例示して説明したが、本発明に係る情報処理装置は、ノート型PCに限られるものではなく、ディスプレイの表示面側に配置されるカメラを備える構成であればよく、ディスクトップ型PC、携帯電話、PDA等の各種の情報処理装置に適用可能である。 In the above embodiment, as the information processing apparatus according to the present invention, it has been illustrated and described a notebook PC, a information processing apparatus according to the present invention is not limited to the notebook PC, a display of the display may have a configuration comprising a camera which is arranged on the side, desktop PC, a mobile phone, it is applicable to various information processing apparatuses such as a PDA.

本発明に係る情報処理装置、その色調整方法、およびコンピュータが実行可能なプログラムは、ディスプレイの表示面側にカメラを配置して、被写体を撮像する場合に有用である。 The information processing apparatus according to the present invention, the color adjustment method, and the computer-executable program, by placing the camera on the display surface side of the display, which is useful for imaging a subject.

本発明の実施例に係る情報処理装置を適用したノート型PCの概略の外観図である。 It is an external view of a schematic of a notebook PC for the information processing apparatus according to an embodiment of the present invention. 図1のノート型PCの概略のハードウェア構成例を示す図である。 Is a diagram illustrating an example hardware configuration of the outline of the notebook PC 1. カメラ用アプリが表示する操作・モニタ画面の一例を示す図である。 It is a diagram showing an example of an operation monitor screen app camera displays. カメラモジュールの撮像動作を説明するためのフローチャートである。 Is a flowchart illustrating the imaging operation of the camera module.

符号の説明 DESCRIPTION OF SYMBOLS

1 ノート型PC 1 notebook PC
2 本体側筐体 3 ディスプレイ側筐体 4 入力部 5 液晶ディスプレイ 5a LCDコントローラ 5b LCDパネル 5c バックライトコントローラ 5d バックライト 6 カメラモジュール 7a、7b 連結部(ヒンジ部) 2 main casing 3 display-side housing 4 input unit 5 LCD 5a LCD controller 5b LCD panel 5c backlight controller 5d backlight 6 camera module 7a, 7b connecting portion (hinge portion)
11 CPU 11 CPU
12 ROM 12 ROM
12a BIOS 12a BIOS
13 メモリ 14 HDD(ハードディスク) 13 memory 14 HDD (hard disk)
14a OS 14a OS
14b ドライバ 14c カメラ用アプリ 14d テレビ電話用アプリ 16 グラフィックスアダプタ 17 ビデオポート 18 USBインターフェース 19 エンベデッドコントローラ 20 リッドセンサ 21 電源回路 31 レンズ 32 撮像素子 33 DSP 14b driver 14c for camera application 14d videophone application 16 graphics adapter 17 video port 18 USB interface 19 embedded controller 20 the lid sensor 21 power supply circuit 31 lens 32 image sensor 33 DSP
34 USBコントローラ 34 USB controller

Claims (6)

  1. ディスプレイと、当該ディスプレイの表示面側に配置されるカメラとを備えた情報処理装置であって、 A display, an information processing apparatus having a camera which is arranged on the display surface side of the display,
    前記カメラで撮像した画像データのホワイトバランス調整を行うホワイトバランス調整手段と、 A white balance adjusting means performs white balance adjustment of the image data captured by the camera,
    前記ディスプレイの表示情報を取得するディスプレイ表示情報取得手段と、 A display displaying information acquiring means for acquiring display information of the display,
    を備え、 Equipped with a,
    前記ホワイトバランス調整手段は、前記ディスプレイ表示情報取得手段で取得した前記ディスプレイの表示情報に基づいて、前記カメラで撮像した画像データのホワイトバランス調整を行い The white balance adjusting means on the basis of the display information of the display acquired by the display display information acquisition unit performs white balance adjustment of the image data captured by the camera,
    前記ディスプレイの表示情報は、前記ディスプレイの各座標のR、G、Bの階調データと、前記ディスプレイのバックライトの輝度データを含むことを特徴とする情報処理装置。 Display information of the display, R of each coordinate of the display, G, and the gradation data of B, the information processing apparatus comprising a luminance data of the backlight of the display.
  2. ディスプレイと、当該ディスプレイの表示面側に配置されるカメラとを備えた情報処理装置であって、 A display, an information processing apparatus having a camera which is arranged on the display surface side of the display,
    前記カメラで撮像した画像データのホワイトバランス調整を行うホワイトバランス調整手段と、 A white balance adjusting means performs white balance adjustment of the image data captured by the camera,
    前記カメラで撮像する場合の露出を制御する露出制御手段と、 And exposure control means for controlling the exposure in the case of imaging by the camera,
    前記ディスプレイの表示情報を取得するディスプレイ表示情報取得手段と、 A display displaying information acquiring means for acquiring display information of the display,
    を備え、 Equipped with a,
    前記ホワイトバランス調整手段は、前記ディスプレイ表示情報取得手段で取得した前記ディスプレイの表示情報に基づいて、前記カメラで撮像した画像データのホワイトバランス調整を行い、 The white balance adjusting means on the basis of the display information of the display acquired by the display display information acquisition unit, have rows white balance adjustment of the image data captured by the camera,
    前記露出制御手段は、前記ディスプレイ表示情報取得手段で取得した前記ディスプレイの表示情報に基づいて、前記カメラの露出を制御することを特徴とする情報処理装置。 It said exposure control means, based on the display information of the display acquired by the display display information acquisition unit, the information processing apparatus characterized by controlling the exposure of the camera.
  3. 前記ディスプレイの表示情報は、前記ディスプレイのバックライトの輝度データを含むことを特徴とする請求項に記載の情報処理装置。 Display information of the display apparatus according to claim 2, characterized in that it comprises a luminance data of the backlight of the display.
  4. ディスプレイと、当該ディスプレイの表示面側に配置されるカメラとを備えた情報処理装置の色調整方法であって、 A display, a color adjustment method for an information processing apparatus having a camera which is arranged on the display surface side of the display,
    前記カメラで撮像した画像データのホワイトバランス調整を行うホワイトバランス調整工程と、 A white balance adjusting step adjusts the white balance of the image data captured by the camera,
    前記ディスプレイの表示情報を取得するディスプレイ表示情報取得工程と、 A display displaying information acquisition step of acquiring display information of the display,
    を含み、 It includes,
    前記ホワイトバランス調整工程では、前記ディスプレイ表示情報取得工程で取得した前記ディスプレイの表示情報に基づいて、前記カメラで撮像した画像データのホワイトバランス調整を行い、 And in the white balance adjustment process, based on the display information of the display acquired by the display display information acquisition process, have rows white balance adjustment of the image data captured by the camera,
    前記ディスプレイの表示情報は、前記ディスプレイの各座標のR、G、Bの階調データと、前記ディスプレイのバックライトの輝度を含むことを特徴とする情報処理装置の色調整方法。 The display information of the display, R of each coordinate of the display, G, and the gradation data of B, the color adjustment method for an information processing apparatus which comprises the brightness of the backlight of the display.
  5. ディスプレイと、当該ディスプレイの表示面側に配置されるカメラとを備えた情報処理装置の色調整方法であって、 A display, a color adjustment method for an information processing apparatus having a camera which is arranged on the display surface side of the display,
    前記カメラで撮像した画像データのホワイトバランス調整を行うホワイトバランス調整工程と、 A white balance adjusting step adjusts the white balance of the image data captured by the camera,
    前記カメラで撮像する場合の露出を制御する露出制御工程と、 An exposure control step of controlling exposure in the case of imaging by the camera,
    前記ディスプレイの表示情報を取得するディスプレイ表示情報取得工程と、 A display displaying information acquisition step of acquiring display information of the display,
    を含み、 It includes,
    前記ホワイトバランス調整工程では、前記ディスプレイ表示情報取得工程で取得した前記ディスプレイの表示情報に基づいて、前記カメラで撮像した画像データのホワイトバランス調整を行い、 And in the white balance adjustment process, based on the display information of the display acquired by the display display information acquisition process, have rows white balance adjustment of the image data captured by the camera,
    前記露出制御工程では、前記ディスプレイ表示情報取得工程で取得した前記ディスプレイの表示情報に基づいて、前記カメラの露出を制御することを特徴とする情報処理装置の色調整方法。 Wherein the exposure control step, on the basis on the display information of the display obtained by the display display information acquisition step, the color adjustment method for an information processing apparatus and controls the exposure of the camera.
  6. ディスプレイと、当該ディスプレイの表示面側に配置されるカメラとを備えた情報処理装置に搭載されるプログラムであって、 A display, a program installed in an information processing apparatus having a camera which is arranged on the display surface side of the display,
    コンピュータに、 On the computer,
    前記カメラで撮像した画像データのホワイトバランス調整を行うホワイトバランス調整工程と、 A white balance adjusting step adjusts the white balance of the image data captured by the camera,
    前記ディスプレイの表示情報を取得するディスプレイ表示情報取得工程と、 A display displaying information acquisition step of acquiring display information of the display,
    を実行させ、 Was executed,
    前記ホワイトバランス調整工程では、前記ディスプレイ表示情報取得工程で取得した前記ディスプレイの表示情報に基づいて、前記カメラで撮像した画像データのホワイトバランス調整を行い、 And in the white balance adjustment process, based on the display information of the display acquired by the display display information acquisition process, have rows white balance adjustment of the image data captured by the camera,
    前記ディスプレイの表示情報は、前記ディスプレイの各座標のR、G、Bの階調データと、前記ディスプレイのバックライトの輝度を含むことを特徴とするコンピュータが実行可能なプログラム。 Display information of the display, R of each coordinate of the display, G, and the gradation data of B, computer-executable program, characterized in that it comprises the brightness of the backlight of the display.
JP2008279676A 2008-10-30 2008-10-30 The information processing apparatus, the color adjustment method, and computer-executable program Active JP5133202B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008279676A JP5133202B2 (en) 2008-10-30 2008-10-30 The information processing apparatus, the color adjustment method, and computer-executable program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008279676A JP5133202B2 (en) 2008-10-30 2008-10-30 The information processing apparatus, the color adjustment method, and computer-executable program

Publications (2)

Publication Number Publication Date
JP2010109693A true JP2010109693A (en) 2010-05-13
JP5133202B2 true JP5133202B2 (en) 2013-01-30

Family

ID=42298689

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008279676A Active JP5133202B2 (en) 2008-10-30 2008-10-30 The information processing apparatus, the color adjustment method, and computer-executable program

Country Status (1)

Country Link
JP (1) JP5133202B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0900867D0 (en) * 2009-01-19 2009-03-04 Sony Espana Sa Image compensation apparatus
JP2014011686A (en) * 2012-06-29 2014-01-20 Nec Personal Computers Ltd Portable terminal device
JP5520341B2 (en) * 2012-07-03 2014-06-11 レノボ・シンガポール・プライベート・リミテッド The information processing apparatus, the communication method, and computer-executable program

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001175234A (en) * 1999-12-21 2001-06-29 Sharp Corp Information processor
JP2005286440A (en) * 2004-03-29 2005-10-13 Fuji Photo Film Co Ltd Information terminal having camera
JP5487581B2 (en) * 2008-09-01 2014-05-07 ソニー株式会社 Image processing apparatus, image processing method, a program, and an imaging apparatus

Also Published As

Publication number Publication date Type
JP2010109693A (en) 2010-05-13 application

Similar Documents

Publication Publication Date Title
US20100309335A1 (en) Image capturing device having continuous image capture
US20110086680A1 (en) Apparatus and method for reducing current consumption in portable terminal with flexible display
US20100157084A1 (en) Imaging apparatus and image processing method used in imaging device
US20030071907A1 (en) Image taking system having a digital camera and a remote controller
KR20050095463A (en) Infrared ray photography apparatus and method using camera in mobile terminal
US20110115833A1 (en) Portable terminal and luminance adjustment program
JP2008228053A (en) Camera
CN103152523A (en) Electronic equipment and shooting method and device for electronic equipment
JP2000134527A (en) Digital camera
US20100177215A1 (en) Image processing apparatus and recording medium
US20070273680A1 (en) Method for adjusting visibility of a display and system thereof
US20080218601A1 (en) Camera System and Camera Main Body
US20030095196A1 (en) Camera system
US20110019004A1 (en) Imaging device, imaging method, imaging control program, and portable terminal device
US20100315542A1 (en) Image capturing apparatus and image capturing apparatus control method
US20150109498A1 (en) Imaging device, and image processing method
US20030215220A1 (en) Electronic camera, method of controlling an electronic camera, recording medium, and image processing device
US20150124129A1 (en) Imaging device, and image processing method
JPH11266384A (en) Digital camera system
US20060022917A1 (en) Display apparatus and displaying method thereof
JP2008236489A (en) Display device and imaging device
US20090185049A1 (en) Image processing apparatus and image processing method and image capturing apparatus
US20060007238A1 (en) Monitor control apparatus for optical device
US20050068421A1 (en) Camera module
US20070058957A1 (en) Imaging apparatus, data extraction method, and data extraction program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20101012

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120712

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120724

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121016

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121106

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121107

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151116

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250