WO2006033255A1

WO2006033255A1 - プロジェクタ装置、携帯電話、カメラ

Info

Publication number: WO2006033255A1
Application number: PCT/JP2005/016742
Authority: WO
Inventors: Hirotake Nozaki; Tadashi Ohta; Setsu Mitsuhashi; Keiichi Nitta; Akira Ohmura; Nobuhiro Fujinawa
Original assignee: Nikon Corporation
Priority date: 2004-09-21
Filing date: 2005-09-12
Publication date: 2006-03-30
Also published as: EP1793600A4; CN102006346A; EP1793600A1; EP1793600B1; ATE532330T1; US20080259289A1; US20110075102A1; US8123363B2

Abstract

　プロジェクタ装置は、画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、撮像装置により撮影して取得された投射像の撮像画像に基づいて、その投射像の投射面における映り具合を調整するためのキャリブレーション動作をその投射像の投射中に繰り返し実行するキャリブレーション制御装置とを備える。

Description

明細書

プロジェクタ装置、携帯電話、カメラ

技術分野

[0001] 本発明は、液晶表示パネルを用いた投射型液晶プロジェクタのように、画像を投射面に投射してその投射像を生成するプロジェクタ装置であって、携帯電話やカメラに内蔵されるハンディタイプのプロジェクタ装置などに関する。

背景技術

[0002] 投射型液晶プロジェクタとして、ハロゲンランプやキセノンランプなどの光源を用いたものが従来力も知られている。これは、光源から出力された光を赤 (R)、緑 (G)および青 (B)の 3原色光に分離し、それぞれを異なる液晶表示パネルに導!、て透過させた後に再び合成して、その合成光を投影レンズを介してスクリーンなどの投射面へ投射するものである。しかし、こうしたランプ光源を用いた投射型液晶プロジェクタでは、光学系の分離 ·合成が必要であるために装置が大型化してしまうと、う欠点があった。そこで、こうした欠点を解決するために、たとえば R、 Gおよび Bの 3種類のレーザ光を光源として用いたもの（特許文献 1)や、 R、 Gおよび Bの 3種類の LED光を光源として用いたもの（特許文献 2)などが知られている。

[0003] 特許文献 1 :特開平 9 326981号公報

特許文献 2：特開 2000— 194275号公報

発明の開示

発明が解決しょうとする課題

[0004] 特許文献 1や 2に開示されるような光源を用いて装置を小型化することにより、手に持って使用できるハンディタイプの投射型液晶プロジェクタを構築することができる。しかし、ハンディタイプの投射型液晶プロジェクタはユーザが手に持って使用することから、従来のような据え置き型の投射型液晶プロジェクタと比べて、その使用方法において異なる点がある。そのため、ユーザにとって使いやすいハンディタイプの投射型液晶プロジェクタを実現するためには、従来の据え置き型の投射型液晶プロジェクタには無力つた様々な動作を行う必要がある。課題を解決するための手段

[0005] 本発明によるプロジェクタ装置は、投射像を生成し、その投射像を撮影して投射像の種々の調節を行う。

本発明のプロジェクタ装置は、画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、撮像装置により撮影して取得された投射像の撮像画像に基づヽて、その投射像の投射面における映り具合を調整するためのキャリブレーション動作をその投射像の投射中に繰り返し実行するキャリブレーション制御装置とを備える。

上記のプロジェクタ装置において、キャリブレーション制御装置は、キヤリブレーション動作を一定周期ごとに繰り返し実行することができる。あるいは、ユーザからの操作入力を受け付けるための操作入力装置をプロジェクタ装置がさらに備え、キヤリブレーシヨン制御装置は、キャリブレーション動作を操作入力装置への操作入力が行われるごとに繰り返し実行することもできる。

本発明のプロジェクタ装置において、投射像生成装置は、所定の形状パターンを含む画像を投射し、キャリブレーション制御装置は、その投射像の撮像画像中に含まれて、る所定の形状パターンに基づ、て、キャリブレーション動作を実行することができる。

上記のプロジェクタ装置において、投射像生成装置は、所定の形状パターンを含む画像を所定の短時間だけ投射し、撮像装置は、その画像の投射タイミングに同期して、投射像を被写体として撮影することが好ましい。

上記のプロジェクタ装置において、キャリブレーション動作の実行頻度を設定するための設定装置をプロジェクタ装置がさらに備えることとし、キャリブレーション制御装置は、その設定装置により第 1の実行頻度が設定された場合は、キャリブレーション動作を投射像の投射中に繰り返し実行し、第 2の実行頻度が設定された場合は、キヤリブレーシヨン動作を投射像の投射中に 1回だけ実行し、第 3の実行頻度が設定された場合は、キャリブレーション動作を実行しな、こととしてもよ!/、。

[0006] または、本発明のプロジェクタ装置は、所定の形状パターンを含む画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、撮像装置により撮影して取得された投射像の撮像画像中に含まれて、る所定の形状パターンに基づ!、て、投射像のフォーカス状態を調節するフォーカシング装置とを備える。

あるいは、本発明のプロジェクタ装置は、静止画像および動画像のいずれかを投射面に投射してその静止画像または動画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、投射像生成装置により静止画像が投射されているときには、撮像装置により撮影して取得された投射像の撮像画像に基づ、て、投射像のフォーカス状態を調節するフォーカシング装置とを備える。上記のプロジェクタ装置において、投射像生成装置は、動画像を投射する場合には、その動画像に所定の形状パターンを含めて投射し、フォーカシング装置は、投射像生成装置により所定の形状パターンが含められた動画像が投射されているときには、その投射像の撮像画像中に含まれている所定の形状パターンに基づいて、投射像のフォーカス状態を調節することができる。

上記のプロジェクタ装置において、フォーカシング装置は、投射像のフォーカス状態の調節をその投射像の投射中に繰り返し行うことができる。このとき、投射像のフォ一カス状態の調節を一定周期ごとに繰り返し行うことが好ましい。あるいは、ユーザからの操作入力を受け付けるための操作入力装置をプロジェクタ装置がさらに備え、投射像のフォーカス状態の調節を操作入力装置への操作入力が行われるごとに繰り返し行うこととしてもよい。

上記のプロジェクタ装置にぉ、て、投射像のフォーカス状態の調節頻度を設定するための設定装置をプロジェクタ装置がさらに備えることとし、フォーカシング装置は、設定装置により第 1の調節頻度が設定された場合は、投射像のフォーカス状態の調節をその投射像の投射中に繰り返し行い、第 2の調節頻度が設定された場合は、投射像のフォーカス状態の調節をその投射像の投射中に 1回だけ行い、第 3の調節頻度が設定された場合は、投射像のフォーカス状態の調節を行わな、こととしてもよ!/ヽまたは、本発明のプロジェクタ装置は、所定の形状パターンを含む画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、撮像装置により撮影して取得された投射像の撮像画像中に含まれている所定の形状パターンに基づいて、投射像の明るさを調節する明るさ調節装置とを備える。

あるいは、本発明のプロジェクタ装置は、光源を有し、その光源力発せられる光を用いて画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、撮像装置により撮影して取得された投射像の撮像画像に基づいて、光源からの発光量を変化させることにより、投射像の明るさを調節する明るさ調節装置とを備える。

上記のプロジェクタ装置において、明るさ調節装置は、投射像の明るさを所定の基準値よりも暗くする場合には、光源力もの発光量を低下させて投射像の明るさを調節し、投射像の明るさを基準値よりも明るくする場合には、画像自体の明るさを変えることにより、投射像の明るさを調節することができる。

上記のプロジェクタ装置において、明るさ調節装置は、投射像の明るさの調節をその投射像の投射中に繰り返し行うことができる。このとき、投射像の明るさの調節を一定周期ごとに繰り返し行うことが好ましい。あるいは、ユーザ力もの操作入力を受け付けるための操作入力装置をプロジェクタ装置がさらに備え、投射像の明るさの調節を操作入力装置への操作入力が行われるごとに繰り返し行うこととしてもよい。

上記のプロジェクタ装置において、投射像の明るさの調節頻度を設定するための設定装置をプロジェクタ装置がさらに備えることとし、明るさ調節装置は、設定装置により第 1の調節頻度が設定された場合は、投射像の明るさの調節をその投射像の投射中に繰り返し行い、第 2の調節頻度が設定された場合は、投射像の明るさの調節をその投射像の投射中に 1回だけ行い、第 3の調節頻度が設定された場合は、投射像の明るさの調節を行わな、こととしてもよ!/、。

[0008] または、本発明のプロジェクタ装置は、所定の形状パターンを含む画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、撮像装置により撮影して取得された投射像の撮像画像中に含まれて、る所定の形状パターンに基づ!、て、投射像の色合!、を調節する色合い調節装置とを備える。

あるいは、本発明のプロジェクタ装置は、複数の色の光を発光する光源を有し、その光源カゝら発せられる各色の光を合成した光を用いて画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、撮像装置により撮影して取得された投射像の撮像画像に基づヽて、光源からの発光量をその発光色ごとに変化させることにより、投射像の色合いを調節する色合!ゝ調節装置とを備える。

上記のプロジェクタ装置において、色合い調節装置は、投射像の色合いの調節をその投射像の投射中に繰り返し行うことができる。このとき、投射像の色合いの調節を一定周期ごとに繰り返し行うことが好ましい。あるいは、ユーザからの操作入力を受け付けるための操作入力装置をプロジェクタ装置がさらに備え、投射像の色合いの調節を操作入力装置への操作入力が行われるごとに繰り返し行うこととしてもよい。上記のプロジェクタ装置において、投射像生成装置は、所定の形状パターンを含む画像を所定の短時間だけ投射し、撮像装置は、その画像の投射タイミングに同期して、投射像を被写体として撮影することが好ましい。

上記のプロジェクタ装置において、投射像の色合いの調節頻度を設定するための設定装置をプロジェクタ装置がさらに備えることとし、色合い調節装置は、設定装置により第 1の調節頻度が設定された場合は、投射像の色合いの調節をその投射像の投射中に繰り返し行い、第 2の調節頻度が設定された場合は、投射像の色合いの調節をその投射像の投射中に 1回だけ行い、第 3の調節頻度が設定された場合は、投射像の色合、の調節を行わな、こととしてもよ!/、。

[0009] または、本発明のプロジェクタ装置は、投射像の形状を特定するための所定の図形または記号を含む画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、撮像装置により撮影して取得された投射像の撮像画像中に含まれて、る図形または記号に基づ、て、投射像生成装置の投射方向と投射面との角度に応じて生じる投射像の台形状の歪みを補正する台形補正装置とを備える。

あるいは、本発明によるプロジェクタ装置は、ヒンジ部を中心に折りたたみ可能な構造を有し、ヒンジ部を介して連結された第 1の部位と第 2の部位を有する筐体部と、筐体部の折りたたみ角度を検出する検出装置と、画像を投射面に投射してその画像の投射像を生成し、その投射方向が第 1の部位に対して固定されている投射像生成装置と、検出装置によって検出された折りたたみ角度に基づいて、投射像生成装置の投射方向と投射面との角度に応じて生じる投射像の台形状の歪みを補正する台形補正装置とを備える。

あるいは、本発明によるプロジェクタ装置は、所定の回転軸を中心として回転可能な構造を有する第 1の部位と、その第 1の部位に連結された第 2の部位とを有する筐体部と、所定の基準位置に対する第 1の部位の回転角度を検出する検出装置と、画像を投射面に投射してその画像の投射像を生成し、その投射方向が第 1の部位に対して固定されている投射像生成装置と、検出装置によって検出された回転角度に基づいて、投射像生成装置の投射方向と投射面との角度に応じて生じる投射像の台形状の歪みを補正する台形補正装置とを備える。

上記のプロジェクタ装置において、台形補正装置は、台形状の歪みの補正を投射像の投射中に繰り返し行うことができる。このとき、台形状の歪みの補正を一定周期ごとに繰り返し行うことが好ましい。あるいは、ユーザ力もの操作入力を受け付けるための操作入力装置をプロジェクタ装置がさらに備え、台形状の歪みの補正を操作入力装置への操作入力が行われるごとに繰り返し行うこととしてもよい。

上記のプロジェクタ装置において、投射像生成装置は、図形または記号を含む画像を所定の短時間だけ投射し、撮像装置は、その画像の投射タイミングに同期して、投射像を被写体として撮影することが好ましヽ。

上記のプロジェクタ装置において、台形状の歪みの補正頻度を設定するための設定装置をプロジェクタ装置がさらに備えることとし、台形補正装置は、設定装置により第 1の補正頻度が設定された場合は、台形状の歪みの補正を投射像の投射中に繰り返し行い、第 2の補正頻度が設定された場合は、台形状の歪みの補正を投射像の投射中に 1回だけ行い、第 3の補正頻度が設定された場合は、台形状の歪みの補正を行わな、こととしてもよ、。

または、本発明のプロジェクタ装置は、画像を投射面に投射してその画像の投射像を生成する投射焦点位置が可変な投射像生成装置と、撮影した被写体の撮像画像を取得する撮像焦点位置が可変な撮像装置と、撮像装置により撮影して取得された投射像の撮像画像に基づいて、その投射像の投射面における映り具合を調整するためのキャリブレーション動作を実行するキャリブレーション制御装置とを備える。そして、投射像生成装置は、異なる複数の投射焦点位置において投射像をそれぞれ生成し、撮像装置は、投射像生成装置により複数の投射焦点位置において生成された複数の投射像の撮像画像を、プロジェクタ装置に対する距離が複数の投射焦点位置とそれぞれほぼ等、複数の撮像焦点位置にぉ、てそれぞれ取得し、キヤリブレーシヨン制御装置は、撮像装置により複数の撮像焦点位置において取得された複数の投射像の撮像画像に基づ、て、キャリブレーション動作を実行する。

あるいは、本発明のプロジェクタ装置は、画像を投射面に投射してその画像の投射像を生成する投射焦点位置が可変な投射像生成装置と、撮影した被写体の撮像画像を取得する撮像焦点位置が可変な撮像装置と、撮像装置により撮影して取得された投射像の撮像画像に基づいて、その投射像の投射面における映り具合を調整するためのキャリブレーション動作を実行するキャリブレーション制御装置とを備える。そして、投射像生成装置は、異なる複数の投射焦点位置において投射像をそれぞれ生成し、撮像装置は、投射像生成装置により複数の投射焦点位置において生成された複数の投射像の撮像画像を、固定された 1つの撮像焦点位置にお!、てそれぞれ取得し、キャリブレーション制御装置は、撮像装置により 1つの撮像焦点位置において取得された複数の投射像の撮像画像に基づ、て、キャリブレーション動作を実行する。

上記のプロジェクタ装置において、撮像装置により 1つの撮像焦点位置において取得された複数の投射像の撮像画像が所定の条件を満たす場合には、その複数の投射像の撮像画像に基づヽて撮像焦点位置を調節した後、その調節後の撮像焦点位置において、投射像生成装置による複数の投射像の生成と、撮像装置による複数の投射像の撮像画像の取得とを再び行うことが好ましい。あるいは、上記のプロジェクタ装置において、撮像装置は、取得される撮像画像のピントが近くから無限遠まで合つているパンフォーカス状態となるように撮像焦点位置を固定し、その撮像焦点位置にぉヽて複数の投射像の撮像画像をそれぞれ取得することとしてもょ、。

上記のプロジェクタ装置にぉヽて、投射像を撮像装置によって撮影する前の撮像焦点位置の状態を記憶する状態記憶装置をプロジクタ装置がさらに備え、投射像生成装置による投射像の生成を止めた後、またはキャリブレーション制御装置によるキャリブレーション動作の実行を止めた後に、状態記憶装置により記憶された状態へと撮像焦点位置を戻すこととしてもょ、。

[0011] または、本発明のプロジェクタ装置は、画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得するズーミング可能な撮像装置と、撮像装置のズーム位置を制御するズーミング制御装置と、撮像装置により撮影して取得された投射像の撮像画像に基づヽて、その投射像の投射面における映り具合を調整するためのキャリブレーション動作を実行するキヤリブレーション制御装置とを備える。そして、投射像を撮像装置により撮影する際、ズーミング制御装置は、撮像装置における撮影範囲が投射像の投射範囲を少なくとも含むように予め設定された所定のズーム位置に、撮像装置のズーム位置を制御する。

上記のプロジェクタ装置にぉ、て、投射像を撮像装置によって撮影する前のズーム位置の状態を記憶する状態記憶装置をプロジクタ装置がさらに備え、投射像生成装置による投射像の生成を止めた後、またはキャリブレーション制御装置によるキヤリブレーシヨン動作の実行を止めた後に、状態記憶装置により記憶された状態へとズーム位置を戻すことが好まし!/、。

[0012] または、本発明のプロジェクタ装置は、所定の色合い特性で発光する光源を有し、その光源から発せられる光を用いて画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、撮像画像の色合ヽを調節する色合ヽ調節装置と、撮像装置により撮影して取得された投射像の撮像画像に基づいて、その投射像の投射面における映り具合を調整するためのキャリブレーション動作を実行するキャリブレーション制御装置とを備える。そして、投射像を撮像装置により撮影する際、色合い調節装置は、光源の色合い特性に応じて予め定められた所定の色変換法則に基づいて、取得された撮像画像の色合いを調節する。

上記のプロジェクタ装置にぉ、て、投射像を撮像装置によって撮影する前の色合い調節装置における色変換法則の状態を記憶する状態記憶装置をプロジェクタ装置がさらに備え、投射像を撮像装置によって撮影しない場合には、色合い調節装置におヽて所定の色変換法則とは異なる色変換法則に基づヽて撮像画像の色合、を調節し、投射像生成装置による投射像の生成を止めた後、またはキャリブレーション制御装置によるキャリブレーション動作の実行を止めた後に、状態記憶装置により記憶された状態へと色合、調節装置における色変換法則の状態を戻すことが好ま、または、本発明のプロジェクタ装置は、画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、撮像装置の撮像方向を変化させるための撮像方向変化機構と、撮像装置により撮影して取得された投射像の撮像画像に基づヽて、その投射像の投射面における映り具合を調整するためのキャリブレーション動作を実行するキャリブレーション制御装置と、投射像生成装置の投射方向と撮像装置の撮像方向が同一方向であるか否かを判定する判定装置と、判定装置により投射方向と撮像方向が同一方向ではないと判定された場合には警告を発する警告装置とを備える。

あるいは、本発明のプロジェクタ装置は、画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、撮像装置の撮像方向を変化させるための撮像方向変化機構と、撮像装置により撮影して取得された投射像の撮像画像に基づヽて、その投射像の投射面における映り具合を調整するためのキャリブレーション動作を実行するキャリブレーション制御装置と、投射像生成装置の投射方向と撮像装置の撮像方向が同一方向であるか否かを判定する判定装置と、判定装置により投射方向と撮像方向が同一方向であると判定された場合にのみ、投射像生成装置の動作を許可する動作許可装置とを備える。

[0014] 本発明による携帯電話は、上記の、ずれかのプロジェクタ装置と、外部の無線通信設備を介して他の端末との通信を行うための無線通信装置とを備える。また、本発明によるカメラは、上記の、ずれかのプロジェクタ装置を備える。

[0015] なお、上記の各装置は、同様の機能を実現するための手段に置き換えることもできる。すなわち、投射像生成装置を投射手段に置き換えてもよい。また、撮像装置に代えて撮像手段を用いてもよい。同様に、キャリブレーション制御装置をキヤリブレーシヨン制御手段としてもよいし、操作入力装置を操作入力手段としてもよい。設定装置の代わりに設定手段を使用してもょ、。

[0016] 上記と同様に、フォーカシング装置に代えてフォーカシング手段としてもよい。明るさ調節装置に代えて明るさ調節手段としてもよい。色合い調節装置に代えて色合い調節手段としてもよい。台形補正装置に代えて台形補正手段としてもよい。検出装置に代えて検出手段としてもょ、。ズーミング制御装置に代えてズーミング制御手段としてもよい。状態記憶装置に代えて状態記憶手段としてもよい。判定装置に代えて判定手段としてもよい。警告装置に代えて警告手段としてもよい。動作許可装置に代えて動作許可手段としてもよい。無線通信装置に代えて無線通信手段としてもよい。発明の効果

[0017] 本発明によれば、従来の据え置き型の投射型液晶プロジェクタには無力つた様々な動作を行うことにより、使、やす、ノヽンディタイプの投射型液晶プロジェクタを実現することができる。

図面の簡単な説明

[0018] [図 1]本発明の一実施形態によるプロジェクタ付き携帯電話機の外観図である。

[図 2]プロジェクタ付き携帯電話機のブロック図である。

[図 3]プロジェクタモジュールの断面図である。

[図 4]投射対象画像にコントラスト算出用画像を重畳した様子を示す図である。

[図 5]コントラスト算出用画像の重畳タイミングを示すタイミングチャートである。

[図 6]投射対象画像に明るさ検出用画像を重畳した様子を示す図である。圆 7]投射対象画像に形状特定用図形を重畳した様子を示す図である。

[図 8]折りたたみ角度 Θと台形歪みとの関係を示した図である。

[図 9]回転角度 φと台形歪みとの関係を示した図である。

圆 10]同焦点移動方式を用いて撮像画像のピント調節と投射像のフォーカス状態の調節を同時に行う様子を示した図である。

圆 11]カメラ固定方式を用いて撮像画像のピント調節と投射像のフォーカス状態の調節を別々に行う様子を示した図である。

圆 12]撮影範囲が投射範囲を含むようにズーム位置を制御するときの様子を示した図である。

圆 13]本発明の他の実施形態によるプロジェクタ付き携帯電話機の外観図である。符号の説明

1 ：操作部 2:表示部

3 ：折りたたみヒンジ部 4:メイン液晶表示器

5 ：サブ液晶表示器 6：プロジェクタモジユーノレ

7 ：カメラモジュール 10：プロジェクタ付き携帯電話機

61: ：投影レンズ 62:液晶パネル

63: ： LED光源 64: LED駆動部

65: ：液晶駆動部 66：レンズ駆動部

71: ：撮影レンズ 72:イメージセンサ

73: ：レンズ駆動部 74:カメラ制御 CPU

101: ： CPU 102:メモリ

103: ：近距離通信部 104:メモリカード

105: ：マイク 106：外咅インターフェイス

107: ：電源 108:通信制御部

109: ：アンテナ 110:操作キー群

111: ：スピーカー 112:開閉角度センサ

発明を実施するための最良の形態

第 1の実施の形態以下、図面を参照して本発明を実施するための第 1の形態について説明する。図 1 は、本発明の一実施の形態による携帯可能なハンディタイプのプロジェクタ付き携帯電話機 10の外観図である。（a)は正面図、（b)は側面図、（c)は背面図をそれぞれ表している。図 1において、プロジェクタ付き携帯電話機 10の筐体は操作部 1と表示部 2によって構成されており、操作部 1と表示部 2は回動可能な折りたたみヒンジ部 3 を介して連結されている。すなわち、プロジェクタ付き携帯電話機 10は折りたたみヒンジ部 3を回動中心に折りたたみ可能な構造を有している。

[0021] 操作部 1には、ユーザ力もの操作入力を受け付けるための各種の操作キーが配設されている。この操作キーには、カメラ機能やメール送受信機能、インターネットへの接続機能などを備えた一般的な携帯電話機と同様のキーが含まれている。たとえば、通話を開始または終了するための操作キー、電話番号や文字等を入力するための操作キー、画面操作用のカーソルキー、カメラ撮影モードやメール送受信モード、ィンターネットへの接続モードなど各種の動作モードへ移行するための操作キーなどが含まれている。操作部 1にはさらにこうした一般的な携帯電話機と同様の操作キーに加えて、後述するプロジェクタモジュール 6を用いて画像を投射するモード（プロジェクタモード)へ移行するための操作キーが配設されている。たとえば、符号 21に示す操作キーが押されるとプロジェクタモードへ移行し、プロジェクタモジュール 6によつて後で説明するようにして画像力 Sスクリーンや壁面などの投射面に投射されて、その画像の投射像が生成される。

[0022] 表示部 2には、正面側にメイン液晶表示器 4が配設され、背面側にサブ液晶表示器 5が配設されている。表示部 2の背面側にはさらに、プロジェクタモジュール 6とカメラモジュール 7が配設されて!/、る。

[0023] 図 2は、図 1のプロジェクタ付き携帯電話機 10の構成を説明するブロック図である。

図 2において、操作部 1側には CPU101と、メモリ 102と、近距離通信部 103と、マイク 105と、外部インターフェイス（IZF) 106と、電源 107と、通信制御部 108と、アンテナ 109と、操作キー群 110と、スピーカー 111と、開閉角度センサ 112とが備えられ、着脱可能なメモリカード 104が実装されている。

[0024] 表示部 2側にはメイン液晶表示器 4と、サブ液晶表示器 5と、プロジェクタモジユール (プロジェクタ部） 6と、カメラモジュール (カメラ部） 7と、スピーカー 201とが備えられている。

[0025] CPU101は、制御プログラムに基づいて、プロジェクタ付き携帯電話機 10を構成する各部力入力される信号を用いて所定の演算を行うなどして、プロジェクタ付き携帯電話機 10の各部に対する制御信号を送出することにより、電話機動作、カメラ動作、プロジェクタ動作をそれぞれ制御する。なお、制御プログラムは CPU101内の不図示の不揮発性メモリに格納されている。

[0026] メモリ 102は CPU101の作業用エリアとして使用される。近距離通信部 103は、たとえば、赤外線通信回路によって構成され、 CPU101の指令により外部機器との間でデータを送受信する。また外部インターフェイス 106は、 CPU101の指令により不図示のケーブルまたはクレードルを介して外部機器との間でデータを送受信する。近距離通信部 103または外部インターフェイス 106を用いることにより、各種の映像'音声データを外部機器力入力することが可能である。

[0027] メモリカード 104は不揮発性メモリによって構成され、 CPU101の指令により、たとえば、カメラモジュール 7より出力される画像データや、近距離通信部 103または外部インターフェイス 106を介して外部機器カゝら入力される映像'音声データなどのデータの保存および読み出しが可能である。

[0028] マイク 105は、集音した音声を電気信号に変換して CPU101へ送出する。音声信号は、録音時にはメモリカード 104に記録され、通話時には通信制御部 108へ送られる。スピーカー 111は、 CPU101から出力された音声信号による音声を再生する。操作キー群 110は、前述した各種の操作キーを 1つのブロックにまとめて表したものであり、押下された操作キーに対応する操作信号を CPU101へ送出する。通信制御部 108は無線送受信回路を含み、 CPU101の指令により不図示の基地局を介して他の電話機との間で通信を行う。通信制御部 108は、電話音声の他にもカメラモジュール 7で撮影された画像データや、プロジェクタモジュール 6で投射するための画像データなどを送受信可能に構成されている。アンテナ 109は通信制御部 110の送受信アンテナである。

[0029] 電源 107は、たとえば、着脱可能な電池パックおよび DCZDC変換回路などで構成され、携帯電話機 10内の各部に必要な電力を供給する。開閉角度センサ 112は、折り畳みヒンジ部 3の回動角、すなわちプロジェクタ付き携帯電話機 10の折りたたみ角度 Θを検出して、 CPU101へ送出する。

[0030] メイン液晶表示器 4とサブ液晶表示器 5は、 CPU101の指令により画像やテキストなどの情報をそれぞれ表示する。スピーカー 201は、通話時に CPU101から出力された音声信号による音声を再生する。

[0031] プロジェクタモジュール 6は、投影レンズ 61と、液晶ノネル 62と、 LED光源 63と、 L ED駆動部 64と、液晶駆動部 65と、レンズ駆動部 66とを含む。 LED駆動部 64は、 C PU101から出力される LED駆動信号に応じて LED光源 63に電流を供給する。 LE D光源 63は、供給電流に応じた出力で R (赤）、 G (緑)および B (青）の 3原色光をそれぞれ照射して液晶パネル 62を照明する。これら各色の光が合成されることにより、 LED光源 63から白色光が照射される。なお、 RGB各色の光の強度は、 LED駆動部 64からの電流強度によってそれぞれ個別に調節することができる。

[0032] 液晶駆動部 65は、画像データに応じて液晶パネル駆動信号を生成し、生成した駆動信号で液晶パネル 62を駆動することにより、液晶パネル 62上に画像を表示する。具体的には、液晶層に対して画像信号に応じた電圧を画素ごとに印加する。電圧が印加された液晶層は液晶分子の配列が変わり、当該液晶層の光の透過率が変化する。この透過率の変化によって画像が表される。なお、液晶パネル 62はカラーフィルタを有しており、各画素が RGBいずれかの色に対応している。これにより、液晶パネル 62には RGB各色の画素を組み合わせたカラー画像が表示される。

[0033] 液晶パネル 62に表示する画像は、メモリカード 104に保存されている画像や、外部機器力入力された画像、後述するようにしてカメラモジュール 7によって撮像された画像など、様々な画像の中から選択することができる。メイン液晶表示器 4やサブ液晶表示器 5に表示されてヽる画像と同じものであってもよ!/、し、動画像であってもよヽ。また、メール文章などを選択して表示するようにしてもよい。

[0034] 以上説明したように選択された画像を液晶パネル 62に表示した後、 LED光源 63 力照射された RGB各色の光を合成した白色光を通過させることにより、液晶パネル 62に表示された画像の光像が生成される。レンズ駆動部 66は、 CPU101から出力される制御信号に基づいて、投影レンズ 61を光軸方向に進退駆動する。こうして投影レンズ 61の焦点位置を変化させることにより、後述する投射像のフォーカス状態の調節が行われる。投影レンズ 61は、液晶パネル 62から射出される光像をスクリーンなどの投射面へ向けて投射する。このようにして、 RGB各色の光を合成した白色光を用いて、選択された画像を投射面に投射して、その画像の投射像を生成する。

[0035] カメラモジュール 7は、撮景レンズ 71と、イメージセンサ 72と、レンズ駆動部 73と、力メラ制御 CPU74とを含む。イメージセンサ 72としては CCDや CMOS撮像素子などが用いられる。カメラ制御 CPU74は、 CPU101の指令によりイメージセンサ 72およびレンズ駆動部 73を駆動制御する。レンズ駆動部 73は、カメラ制御 CPU74からの制御信号に応じて、撮影レンズ 71を構成する焦点調節レンズ (不図示)を光軸に沿つて前後方向へ駆動することにより、撮影レンズ 71の焦点位置を変化させる。これにより、被写体像のピント調節が行われる。

[0036] 撮影レンズ 71は、イメージセンサ 72の撮像面上に被写体像を結像させる。カメラ制御 CPU74はイメージセンサ 72に撮像を開始させ、撮像終了後にイメージセンサ 72 力蓄積電荷信号を読み出し、所定の信号処理を施した上で画像データとして CPU 101へ送出する。なお、カメラモジュール 7で撮影した画像データを送信する場合には CPU101から通信制御部 108へ画像データが送出される。また、撮影画像を投射する場合にはカメラ制御 CPU74から CPU101を経由してプロジェクタモジュール 6 へ画像データが送出される。このようにして、カメラモジュール 7において撮影した被写体の撮像画像を取得する。

[0037] 図 3はプロジェクタモジュール 6の断面図である。（a)は携帯電話機 10の側面図中にプロジェクタモジュール 6の断面図を示したものであり、 (b)はその拡大図である。図 2のレンズ駆動部 73は、レンズ支持部 731と駆動モータ 732を有している。レンズ支持部 731は、投影レンズ 61の上下に配設されて投影レンズ 61を支持している。駆動モータ 732は、その駆動動作によってレンズ支持部 731の位置を図の左右方向に移動することにより、液晶パネル 62および LED光源 63と投影レンズ 61との間隔を調節することができる。これにより、投射像のフォーカス状態を調節することができる。なお、図 2の LED駆動部 64と液晶駆動部 65については、図 3において図示を省略している。

[0038] 次に、プロジェクタ付き携帯電話機 10において画像を投射するときの動作内容について説明する。プロジェクタ付き携帯電話機 10は、プロジェクタモジュール 6によつて生成される投射像の投射面における映り具合を調整するための動作 (以下、キヤリブレーシヨン動作という）を、その投射像の投射中に繰り返し実行する。このキヤリブレーシヨン動作は、（1)フォーカス状態の調節、（2)明るさの調節、（3)ホワイトバランスの調節、および (4)台形歪みの補正の各動作に分類される。以下、これらの各動作について順に説明する。

[0039] (1)フォーカス状態の調節

プロジェクタモジュール 6にお、て投射像のフォーカス状態が適切でな、場合、すなわち投射面までの距離に対して投射像の焦点が正しく合って、な、場合には、ピントがずれてボケた投射像が映し出されてしまう。ピントが合った投射像を映すためには、適切なフォーカス状態に調節する必要がある。この投射像のフォーカス状態の調節は、カメラモジュール 7により撮影して取得された投射像の撮像画像に基づヽて、次のようにして行われる。

[0040] プロジェクタ付き携帯電話機 10は、プロジェクタモジュール 6によって画像を投射している間、カメラモジュール 7を用いてその投射像を撮像する。カメラモジュール 7において取得された投射像の撮像画像は、 CPU101〖こ出力される。 CPU101は、カメラモジュール 7から出力された撮像画像のボケ具合を検出することにより、投射像のフォーカス状態が適切であるか否かを判断する。撮像画像がボケて、る場合はフォ一カス状態が適切でな、と判断し、レンズ駆動部 66を用いて投影レンズ 61を駆動させる。このようにして、撮像画像がボケなくなるまで投影レンズ 61を駆動させることにより、投射像のフォーカス状態を調節して適切なフォーカス状態となるようにする。

[0041] 上記のフォーカス状態の調節は、デジタルカメラにおいて焦点位置を調節する際に広く用いられているコントラスト検出方式と同様の方法によって行うことができる。すなわち、投影レンズ 61の焦点位置を様々に変化させて撮像画像を取得し、その撮像画像のそれぞれについてコントラスト量を算出する。そして、各撮像画像のコントラスト量を比較し、投影レンズ 61の焦点位置をコントラスト量が最大である撮像画像が取得されたときの位置に合わせる。これにより、投射像のフォーカス状態を適切に調節することができる。なお、このときカメラモジュール 7において撮影画像のピント調節ゃホワイトバランス調節を行う必要がある力この点については後で説明する。

[0042] しかし、投射像のフォーカス状態の調節中にその投射像自体が変化すると、それによって撮像画像のコントラスト量が変化してしまうため、適切な調節結果が得られなくなる。特に動画を投射している場合は投射像が常に変化しているため、投射像のフオーカス状態を調節することができない。そこでプロジェクタ付き携帯電話機 10においては、投射対象として選択された画像に、コントラスト量を算出するための所定の画像 (以下、コントラスト算出用画像という）を重畳した後、それをプロジェクタモジュール 6により投射して投射像をカメラモジュール 7により撮像する。このようにすると、元の投射対象画像が変化しても、重畳されたコントラスト算出用画像の部分は変化しない。したがって、コントラスト算出用画像についてコントラスト量を算出し、そのコントラスト量に基づいて投射像のフォーカス状態を調節することで、動画を投射中であっても投射像のフォーカス状態を適切に調節することができる。

[0043] 図 4は、投射対象画像にコントラスト算出用画像を重畳した様子を示す図である。 ( a)は元の投射対象画像を示し、 (b)は（a)の投射対象画像にコントラスト算出用画像を重畳した画像を示している。（b)の画像では、下端部にファイル名と日付情報にカロえて、符号 21に示すコントラスト算出用画像が重畳されている。このコントラスト算出用画像 21は、コントラスト量が算出しやすいように縦ラインを複数連ねた所定の形状パターンを有して、る。このような所定の形状パターンによって形成されるコントラスト算出用画像 21を含む画像が、プロジェクタモジュール 6によって投射面に投射され、その投射像がカメラモジュール 7によって撮像される。こうして取得された撮像画像を用いて、コントラスト算出用画像 21に基づいてコントラスト量が算出され、投射像のフオーカス状態の調節が行われる。なお、ここで示したコントラスト算出用画像 21の形状パターンは一例であって、コントラスト量が算出できるものであればどのような形状パターンでもよ、ことは言うまでもな!/、。

[0044] なお、上記のようなコントラスト量の演算には、カメラモジュール 7のイメージセンサ 7 2より画素単位で出力される撮像信号 (蓄積電荷信号)のうち、コントラスト算出用画像 21と対応する領域の画素より出力される撮像信号のみが用いられる。

[0045] ここで、以上説明したようなコントラスト算出用画像の重畳は必ずしも常時行う必要はなぐ所定の短時間だけ行うようにしてもよい。このようにすると、投射像を見ている者に対してコントラスト算出用画像を重畳していることを気づかれにくくすることができる。図 5は、その様子を説明するためのタイミングチャートである。液晶パネル 62に表示する画像は、符号 31に示すタイミングで 1Z30秒ごとに更新する。すなわち、 1秒間に 30フレームの画像表示を行う。

[0046] コントラスト算出用画像の重畳は、符号 32に示すタイミングで一定のフレーム間隔ごとに行う。このタイミングでコントラスト算出用画像を含む画像が投射され、その他のタイミングではコントラスト算出用画像を含まない画像が投射される。さらにこのとき、カメラモジュール 7による撮像画像の取得を符号 33に示すタイミングで行う。すなわち、コントラスト算出用画像を含む画像が投射されるタイミングに同期して、カメラモジユール 7におヽて投射像を撮像する。こうして撮像された撮像画像におけるコントラスト算出用画像の部分の形状パターンに基づいて、符号 34に示すタイミングでコントラスト量の計算および投射像のフォーカス状態の調節が行われる。

[0047] さらに、投射像のフォーカス状態の調節は、以上説明したように一定周期ごとに繰り返し行うようにしてもよい。または、プロジェクタ付き携帯電話機 10に対して操作キーへの入力操作が行われるごとに繰り返し行うようにしてもよい。操作キーへの入力操作が行われると、それによつてプロジェクタ付き携帯電話機 10の位置や向きが変化して投射像がぶれる場合がある。したがって、操作キーへの入力操作が行われるごとに投射像のフォーカス状態の調節を行うようにすると、投射像がぶれてしまった場合でもそれを補正して見やす、投射像とすることができる。

[0048] あるいは、フォーカス状態の調節頻度を設定できるようにしてもょ、。たとえば、 3種類の調節頻度を設定できるようにして、最も高い調節頻度が設定された場合は、上記のように投射像の投射中にフォーカス状態の調節を繰り返し行う。一方、中間の調節頻度が設定された場合は、最初の 1回だけ投射像の投射中にフォーカス状態の調節を行い、最も低い調節頻度が設定された場合は、投射像のフォーカス状態の調節を行わないようにする。このようにすると、投射像のフォーカス状態の調節が不要である場合において電力消費を抑えることができる。なお、調節頻度の設定は操作キーの入力操作などによって行うようにすることができる。

[0049] 上記の説明では、コントラスト算出用画像を重畳することにより、動画を投射中であつても投射像のフォーカス状態を調節することとしていた。しかし、投射されている画像が静止画であれば、その静止画に基づいてコントラスト量を算出し、投射像のフォ一カス状態を適切に調節することができる。したがって、コントラスト算出用画像の重畳は行わず、静止画を投射してヽるときのみ投射像のフォーカス状態を調節するようにしてもよい。さらに、動画を投射中の場合にはコントラスト算出用画像を重畳し、静止画を投射中の場合にはコントラスト算出用画像を重畳しないようにして、コントラスト算出用画像または静止画のいずれかに基づいてコントラスト量を算出し、投射像のフオーカス状態を調節するようにしてもょ、。

[0050] (2)明るさの調節

次に、明るさの調節について説明する。プロジェクタモジュール 6において適切な明るさで投射が行われないと、投射像が暗すぎたり明るすぎたりして見えづらくなつてしまうため、投射像の明るさを適切に調節する必要がある。この投射像の明るさの調節は、前述したフォーカス状態の調節と同様に、カメラモジュール 7によって撮影して取得された投射像の撮像画像に基づ、て行われる。

[0051] プロジェクタ付き携帯電話機 10は、カメラモジュール 7から出力された撮像画像の明るさを CPU101において検出することにより、投射像の明るさが適切であるか否かを判断する。撮像画像が全体的に暗すぎたり明るすぎる場合は、投射像の明るさが適切でな!、と判断し、 LED駆動部 64から LED光源 63への供給電流を増加または減少させる。 LED駆動部 64からの供給電流量に応じて LED光源 63の発光強度が変化し、投射像の明るさが変わる。このようにして、投射像の明るさが適切となるように調節する。

[0052] なお、 LED光源 63が PWM点灯を行って、る場合には、そのデューティ比を変えることで投射像の明るさを調節するようにしてもよい。すなわち、 LED光源がパルス状に発光する光源である場合は、そのノルス幅を広げることにより投射像を明るくし、逆にパルス幅を狭めることにより投射像を暗くすることができる。さらに、 LED光源 63が RGB各色の光を複数組発光し、各組ごとに点灯のオンオフを個別に制御できるような場合には、その点灯組数を変えることで投射像の明るさを調節することもできる。以上説明したような方法により、 LED光源 63の発光量を変化させて投射像の明るさを調節することができる。

[0053] プロジェクタ付き携帯電話機 10は、上記のようにして撮像画像に基づいて投射像の明るさを調節する場合、投射対象として選択された画像に、明るさを検出するための所定の画像 (以下、明るさ検出用画像という）を重畳した後、それをプロジェクタモジュール 6により投射してその投射像をカメラモジュール 7により撮像する。このようにすると、元の投射対象画像が変化しても、重畳された明るさ検出用画像の部分の明るさに基づいて、投射像の明るさを適切に調節することができる。

[0054] 図 6は、投射対象画像に明るさ検出用画像を重畳した様子を示す図である。（a)は元の投射対象画像を示し、 (b)は（a)の投射対象画像に明るさ検出用画像を重畳した画像を示している。（b)の画像では、図 4 (b)のコントラスト算出用画像が重畳された画像と同様に、下端部にファイル名と日付情報に加えて、符号 22に示す明るさ検出用画像が重畳されている。この明るさ検出用画像 22は、明るさを検出しやすいように全体が無色（白色)である所定の形状パターンを有している。このような所定の形状パターンによって形成される明るさ検出用画像 22を含む画像力プロジェクタモジユール 6によって投射面に投射され、その投射像がカメラモジュール 7によって撮像される。こうして取得された撮像画像を用いて、明るさ検出用画像 22に基づいて明るさが検出され、投射像の明るさの調節が行われる。なお、ここで示した明るさ検出用画像 22の形状パターンは一例であって、明るさが検出できるものであればどのような形状パターンでもよ、ことは言うまでもな、。

[0055] なお、上記のような明るさの検出には、カメラモジュール 7のイメージセンサ 72より画素単位で出力される撮像信号 (蓄積電荷信号)のうち、明るさ検出用画像 22と対応する領域の画素より出力される撮像信号のみが用いられる。

[0056] 以上説明したような明るさ検出用画像の重畳を、前述したコントラスト算出用画像と同様に所定の短時間だけ行うようにしてもよい。その場合には、明るさ検出用画像を含む画像が投射されるタイミングに同期して、カメラモジュール 7において投射像を撮像する。

[0057] また、前述したフォーカス状態の調節と同様に、この投射像の明るさの調節についても、一定周期ごとに繰り返し行うようにしてもよいし、またはプロジェクタ付き携帯電話機 10に対して操作キーへの入力操作が行われるごとに繰り返し行うようにしてもよい。操作キーへの入力操作が行われと、それによつてプロジェクタ付き携帯電話機 1 0の位置や向きが変化して投射面との距離が変化し、投射像の明るさが変化してしまう場合がある。したがって、操作キーへの入力操作が行われるごとに投射像の明るさの調節を行うようにすると、その入力操作によって投射像の明るさが変化してしまった場合でも、明るさを補正して見やすヽ投射像とすることができる。

[0058] あるいは、フォーカス状態の調節と同様に、操作キーの入力操作によって明るさの調節頻度を 3種類の中から設定できるようにしてもよい。すなわち、最も高い調節頻度が設定された場合は、投射像の投射中に明るさの調節を繰り返し行い、中間の調節頻度が設定された場合は、最初の 1回だけ投射像の投射中に明るさの調節を行い、最も低い調節頻度が設定された場合は、投射像の明るさの調節を行わないようにする。このようにすると、投射像の明るさの調節が不要である場合において電力消費を抑えることができる。

[0059] 上記の説明では、 LED光源 63の発光量を変化させて投射像の明るさを調節することとしていた。しかし、発光量を上げることは電力消費量や発熱量の増加につながるため、できるだけ発光量を抑えることが望ましい。したがって、投射像の明るさに対して所定の基準値を予め設定しておき、その基準値よりも暗くするときにだけ発光量を低下させて投射像の明るさを調節するようにしてもよい。その場合、基準値よりも明るくする際には、液晶パネル 62に表示する投射対象画像自体の明るさを変えることによって投射像の明るさを調節する。このときの色合いの変化には、 LUT(Look U p Table)処理やガンマ補正処理と呼ばれる方法などを用いることができる。 LUT処理では、テーブルィ匕された対応関係に従って、画像データにおける各画素の色情報値を補正する。ガンマ補正処理では、ガンマカーブと呼ばれる変換曲線に従って、画像データにおける各画素の色情報値を補正する。なお、これ以外の方法を用いて投射対象画像の明るさを変化させるようにしてもよい。 [0060] (3)ホワイトバランスの調節

次に、ホワイトバランスの調節について説明する。プロジェクタモジュール 6において投射像の色合、を調節して、な、と、周囲の配光状況や投射面の色合、によっては、投射像の見た目が本来の色合いとは異なるものとなってしまう場合がある。したがつて、投射像が本来の色合、で見えるようにホワイトバランス調節を行う必要がある。この投射像のホワイトバランスの調節は、前述したフォーカス状態の調節や明るさの調節と同様に、カメラモジュール 7によって撮影して取得された投射像の撮像画像に基づいて行われる。

[0061] プロジェクタ付き携帯電話機 10は、カメラモジュール 7から出力された撮像画像の色合、を CPU101にお、て検出することにより、投射像のホワイトバランスが適切である力否かを判断する。検出した色合いが本来の色合いと異なる場合は、 LED駆動部 64から LED光源 63への供給電流を RGB各色ごとに増加または減少させる。 LE D駆動部 64からの供給電流量に応じて、 LED光源 63において RGB各色の発光強度がそれぞれ変化し、投射像の色合いが変わる。このようにして色合いを調節することにより、投射像のホワイトバランスが適切となるように調節する。

[0062] なお、前述した明るさ調節の場合と同様に、 LED光源 63が PWM点灯を行っている場合には、 RGB各色ごとにデューティ比を変えることで投射像の色合いを調節するよう〖こしてもよい。すなわち、 LED光源が RGB各色ごとにパルス状に発光する光源である場合は、パルス幅を広げることによってその発光色の色合いを強くし、逆にパルス幅を狭めることによってその発光色の色合いを弱くすることができる。さらに、 LE D光源 63が RGB各色の光を複数組発光するような場合には、その点灯数を色によつて変えることで投射像の色合いを調節することもできる。以上説明したような方法により、 LED光源 63の発光量をその発光色ごとに変化させて投射像の色合いを調節し、投射像のホワイトバランスの調節を行うことができる。

[0063] プロジェクタ付き携帯電話機 10は、上記のようにして撮像画像に基づいて投射像のホワイトバランスを調節する場合、投射対象として選択された画像に、色合いを検出するための所定の画像 (以下、色合い検出用画像という）を重畳した後、それをプロジェクタモジュール 6により投射して投射像をカメラモジュール 7により撮像する。このようにすると、元の投射対象画像が変化しても、重畳された色合い検出用画像の部分の色合、に基づ、て、投射像のホワイトバランスを適切に調節することができる

[0064] 上記の色合い検出用画像は、図 6 (b)に示す明るさ検出用画像 22と兼用することができる。色合い検出用画像（明るさ検出用画像） 22は、全体が白色である所定の形状パターンを有している。したがって、カメラモジュール 7によって取得された撮像画像において、色合い検出用画像（明るさ検出用画像) 22に基づいて色合いを検出し、その色合いを本来の白色と比較することで、ホワイトバランス調節を行うことができる。なお、これ以外にもホワイトバランス調節を行うことができるようなものであればどのような形状パターンでもよいことは言うまでもない。投射像のフォーカス状態の調節に用いたコントラスト算出用画像のうち白色の部分を、色合い検出用画像や明るさ検出用画像として用いるようにしてもょ、。

[0065] なお、上記のような色合いの検出には、カメラモジュール 7のイメージセンサ 72より画素単位で出力される撮像信号 (蓄積電荷信号)のうち、色合い検出用画像 22と対応する領域の画素より出力される撮像信号のみが用いられる。

[0066] 以上説明したような色合い検出用画像の重畳を、前述したコントラスト算出用画像や明るさ検出用画像と同様に、所定の短時間だけ行うようにしてもよい。その場合には、色合い検出用画像を含む画像が投射されるタイミングに同期して、カメラモジュール 7にお、て投射像を撮像する。

[0067] また、前述したフォーカス状態の調節や明るさの調節と同様に、このホワイトバランスの調節についても、一定周期ごとに繰り返し行うようにしてもよいし、またはプロジェクタ付き携帯電話機 10に対して操作キーへの入力操作が行われるごとに繰り返し行うようにしてもよい。操作キーへの入力操作が行われと、それによつてプロジェクタ付き携帯電話機 10の位置や向きが変化して、投射像の位置が変わる場合がある。このとき、投射像の位置が変わったことで周囲の配光状況や投射面の色合いが変化し、その結果、投射像の見た目の色あいが変化してしまう場合がある。したがって、操作キーへの入力操作が行われるごとに投射像のホワイトバランスの調節を行うようにすると、その入力操作によって投射像の見た目の色合いが変化してしまった場合でも、色合、を補正して見やす、投射像とすることができる。

[0068] あるいは、フォーカス状態の調節や明るさの調節と同様に、操作キーの入力操作によってホワイトバランスの調節頻度を 3種類の中力も設定できるようにしてもよ、。すなわち、最も高い調節頻度が設定された場合は、投射像の投射中にホワイトバランスの調節を繰り返し行い、中間の調節頻度が設定された場合は、最初の 1回だけ投射像の投射中にホワイトバランスの調節を行、、最も低、調節頻度が設定された場合は、投射像のホワイトバランスの調節を行わないようにする。このよう〖こすると、投射像のホワイトバランスの調節が不要である場合において電力消費を抑えることができる。

[0069] 上記の説明では、投射像の色合いを調節する例としてホワイトバランスの調節につ V、て説明して、たが、白以外の色を基準として色合、を調節する場合に適用してもよい。

[0070] (4)台形歪みの補正

最後に、台形歪みの補正について説明する。台形歪みとは、プロジェクタモジユール 6による投射方向と投射面との角度に応じて生じる投射像の台形状の歪みのことをいう。投射方向が投射面に正対していない場合には、こうした台形歪みが生じることが知られている。この台形歪みの補正は、前述した各種の調節と同様に、カメラモジユール 7によって撮影して取得された投射像の撮像画像に基づいて行われる。

[0071] プロジェクタ付き携帯電話機 10は、カメラモジュール 7から出力された撮像画像の形状を CPU101において検出することにより、投射像に台形歪みが生じている力否かを判断する。台形歪みが生じている場合は、液晶駆動部 65を制御して、その台形歪みとは逆の方向に液晶パネル 62上に表示する画像を歪ませ、台形歪みを打ち消すようにする。この画像を投射することにより、台形歪みを補正する。

[0072] プロジェクタ付き携帯電話機 10は、上記のようにして撮像画像に基づいて台形歪みを補正する場合、投射対象として選択された画像に、投射像の形状を特定するための所定の図形 (以下、形状特定用図形という）を重畳した後、それをプロジェクタモジュール 6により投射して投射像をカメラモジュール 7により撮像する。このようにすると、どのような内容の投射対象画像であっても、重畳された形状特定用図形に基づいて台形歪みを補正することができる。 [0073] 図 7は、投射対象画像に形状特定用図形を重畳した様子を示す図である。（a)は元の投射対象画像を示し、 (b)は (a)の投射対象画像に形状特定用図形を重畳した画像を示して!/、る。 (b)の画像では、投射対象画像の周囲に太枠状の形状特定用図形 23が重畳されている。このような形状特定用図形 23を含む画像力プロジェクタモジュール 6によって投射面に投射され、その投射像がカメラモジュール 7によって撮像される。こうして取得された撮像画像を用いて、形状特定用図形 23に基づいて投射像の形状が特定され、台形歪みの補正が行われる。なお、ここで示した形状特定用図形 23は一例であって、投射像の形状を特定できるものであればどのような図形でもよいことは言うまでもない。あるいは、図形ではなく記号や文字などを用いてもよい。

[0074] 以上説明したような形状特定用図形の重畳を、前述したコントラスト算出用画像や明るさ検出用画像、色合い検出用画像と同様に、所定の短時間だけ行うようにしてもよい。その場合には、形状特定用図形を含む画像が投射されるタイミングに同期して、カメラモジュール 7において投射像を撮像する。

[0075] また、前述した各種の調節と同様に、この台形歪みの補正についても、一定周期ごとに繰り返し行うようにしてもよいし、またはプロジェクタ付き携帯電話機 10に対して操作キーへの入力操作が行われるごとに繰り返し行うようにしてもよい。操作キーへの入力操作が行われと、それによつてプロジェクタ付き携帯電話機 10の位置や向きが変化して、投射像の投射方向と投射面との角度が変わり、その結果、台形歪みの形状が変化してしまう場合がある。したがって、操作キーへの入力操作が行われるごとに台形歪みの補正を行うようにすると、その入力操作によって台形歪みの形状が変化してしまった場合でも、台形歪みを補正して見やす!/ヽ投射像とすることができる。

[0076] あるいは、前述の各種の調節と同様に、操作キーの入力操作によって台形歪みの補正頻度を 3種類の中から設定できるようにしてもよい。すなわち、最も高い補正頻度が設定された場合は、投射像の投射中に台形歪みの補正を繰り返し行い、中間の補正頻度が設定された場合は、最初の 1回だけ投射像の投射中に台形歪みの補正を行い、最も低い補正頻度が設定された場合は、台形歪みの補正を行わないよう〖こする。このようにすると、台形歪みの補正が不要である場合において電力消費を抑えることがでさる。

[0077] 上記の説明では、形状特定用図形を重畳した画像を撮像し、その形状特定用図形に基づいて投射像の形状を特定することにより、台形歪みの補正を行うこととしていた。しかし、開閉角度センサ 112によって検出された折りたたみ角度 0に基づいて、台形歪みの補正を行うようにしてもよい。このとき、プロジェクタモジュール 6による投射像の投射方向が表示部 2に対して固定されているものとする。このようにすると、操作部 1の底面部分を机上などに設置して投射する場合に、撮像を行わなくても簡単に台形歪みを補正することができる。

[0078] 図 8は、水平面上に操作部 1を設置して垂直な投射面に投射したときの、折りたたみ角度 Θと台形歪みとの関係を示した図である。 (a)は、折りたたみ角度 Θ力^ 0° よりも小さい場合の投射の様子を側面図によって示した図であり、（b)は、（a)のときの台形歪みの様子を正面図によって示した図である。（c)は、 0 = 90° である場合の投射の様子を側面図によって示した図であり、（d)は、（b)のときの台形歪みの様子を正面図によって示した図である。

[0079] 図 8 (a)、 (b)に示すように、折りたたみ角度 Θ力^ 0° よりも小さい場合には台形歪みが発生する。また、これとは逆に折りたたみ角度 Θ力^ 0° よりも大きい場合にも、台形歪みが発生する。この台形歪みの程度 (歪み具合）は、折りたたみ角度 Θによつて変化し、その変化の割合は決まっている。したがって、折りたたみ角度 Θの値に応じて、台形歪みを打ち消すために液晶パネル 62上に表示する画像を歪ませるときの歪ませ具合を予め設定しておくことで、台形歪みを補正することができる。なお、図 8 ( c)、（d)に示すように、 0 = 90° である場合には台形歪みが発生しないため、台形歪みの補正は必要ない。

[0080] または、プロジェクタ付き携帯電話機 10において、表示部 2の左右の中心軸を回転軸とし、その回転軸を中心として表示部 2を回転可能な構造として、所定の基準位置に対するその回転角度を検出し、検出された回転角度 φに基づいて台形歪みの補正を行うこととしてもよい。なお、この場合にもプロジェクタモジュール 6による投射像の投射方向は表示部 2に対して固定されているものとする。

[0081] 図 9は、水平面上に操作部 1を設置して垂直な投射面に投射したときの、表示部 2 の回転角度 φと台形歪みとの関係を示した図である。 (a)は、回転角度 φが 90° よりも小さい場合の投射の様子を平面図によって示した図であり、（b)は、（a)のときの台形歪みの様子を正面図によって示した図である。（c)は、 φ = 90° である場合の投射の様子を平面図によって示した図であり、（d)は、（b)のときの台形歪みの様子を正面図によって示した図である。なお、図 9において回転角度 φの基準位置は操作部 1の左右の中心軸とし、折りたたみ角度 Θは 90° であるものとする。回転角度 φが 90° のとき、表示部 2の背面は投射面に正対している。

[0082] 図 9 (a)、（b)に示すように、回転角度 φが 90° よりも小さい場合には台形歪みが発生する。また、これとは逆に回転角度 φが 90° よりも大きい場合にも、台形歪みが発生する。この台形歪みの程度 (歪み具合）は、回転角度 φによって変化し、その変化の割合は決まっている。したがって、折りたたみ角度 Θの場合と同様に、回転角度 Φの値に応じて、台形歪みを打ち消すために液晶パネル 62上に表示する画像を歪ませるときの歪ませ具合を予め設定しておくことで、台形歪みを補正することができる。なお、図 9 (c)、（d)に示すように、 = 90° である場合には台形歪みが発生しないため、台形歪みの補正は必要ない。

[0083] さらに、以上説明した折りたたみ角度 Θに基づく台形歪みの補正と、回転角度 φに基づく台形歪みの補正とを、組み合わせて用いるようにしてもよ!/、。

[0084] 以上説明したようにして、フォーカス状態の調節、明るさの調節、ホワイトバランスの調節および台形歪みの補正の各動作を行うことにより、キャリブレーション動作を実行する。なお、これらの各動作は必ずしも全て行う必要はなぐ選択した動作のみを実行するようにしてちょい。

[0085] 次に、カメラモジュール 7にお、て撮像画像のピントを調節する方法にっ、て説明する。撮像画像のピント調節には、コントラスト検出方式と呼ばれる方法が用いられる。具体的には、撮影レンズ 71の焦点位置を様々に変化させて撮像画像を取得し、その撮像画像のそれぞれについてコントラスト量を算出する。そして、 CPU101において各撮像画像のコントラスト量を比較し、撮影レンズ 71の焦点位置をコントラスト量が最大である撮像画像が取得されたときの位置に合わせて駆動するように、カメラ制御 CPU74に対して制御信号を出力する。投射像の撮像画像を適切に撮影してキヤリブレーシヨン動作を行うためには、このような撮影画像のピント調節を行う必要がある

[0086] 撮像画像のピント調節は、プロジェクタモジュール 6において実行する投射像のフォ一カス状態の調節と同時に行ってもよいし、別々に行ってもよい。同時に行う場合には同焦点移動方式と呼ばれる制御方法が用いられ、別々に行う場合にはカメラ固定方式と呼ばれる制御方法が用いられる。以下、これらの制御方法の内容について順に説明する。

[0087] 一同焦点移動方式

この制御方法では、カメラモジュール 7の撮像焦点位置、すなわち撮像画像に対する撮影レンズ 71の焦点位置と、プロジェクタモジュール 6の投射焦点位置、すなわち投射像に対する投影レンズ 61の焦点位置とを、同じ位置関係に保ちつつ変化させる。ここで撮像焦点位置と投射焦点位置が同じ位置関係であるとは、プロジェクタ付き携帯電話機 10に対する距離が両焦点位置でほぼ等しいことをいう。そして、プロジェクタモジュール 6により異なる複数の投射焦点位置において投射像をそれぞれ生成し、その複数の投射像の撮像画像をカメラモジュール 7により、その複数の投射焦点位置とそれぞれ同じ位置関係に保たれている複数の撮像焦点位置においてそれぞれ取得する。こうして取得された複数の投射像の撮像画像にっヽてコントラスト量をそれぞれ算出し、コントラスト量が最大となったときの位置に合わせるように撮像焦点位置と投射焦点位置を調節する。このようにして、撮像画像のピント調節と投射像のフォーカス状態の調節とを同時に行う。さらにこの際に、取得された複数の撮像画像に基づ!/、て、投射像のフォーカス状態の調節以外のキャリブレーション動作も合わせて実行してもよい。

[0088] 図 10は、以上説明した同焦点移動方式を用いて、撮像画像のピント調節と投射像のフォーカス状態の調節を同時に行う様子を示した図である。図 10 (a)〜（e)では、投射面力も約 50cmの位置にプロジェクタ付き携帯電話機 10が設置されている。なお、プロジェクタモジュール 6における最適な投射距離は 50cm程度であるものとする

[0089] 初めに（a)のように、カメラモジュール 7の撮像焦点位置とプロジェクタモジュール 6 の投射焦点位置を、共にプロジェクタ付き携帯電話機 10から 60cm離れた位置に合わせる。この状態で、プロジェクタモジュール 6によって生成される投射像をカメラモジユール 7において撮影し、その撮像画像についてコントラスト量を算出する。次に (b) のように、カメラモジュール 7の撮像焦点位置とプロジェクタモジュール 6の投射焦点位置を共にプロジェクタ付き携帯電話機 10から 55cm離れた位置に合わせて、その投射像の撮像画像についてコントラスト量を算出する。

[0090] その後（c)〜（e)のように、カメラモジュール 7の撮像焦点位置とプロジェクタモジュール 6の投射焦点位置をプロジェクタ付き携帯電話機 10から 50cm、 45cm, 40cm 離れた位置に順に合わせ、その位置における投射像の撮像画像にっヽてコントラスト量を算出する。そして、最大のコントラスト量が得られたときの位置に合わせて、カメラモジュール 7の撮像焦点位置とプロジェクタモジュール 6の投射焦点位置を調節する。このようにして、撮像画像のピント調節を行うと共に、投射像のフォーカス状態の調節を行う。

[0091] 以上説明したような同焦点移動方式を用いると、カメラモジュール 7の撮像焦点位置とプロジェクタモジュール 6の投射焦点位置がプロジェクタ付き携帯電話機 10に対してほぼ同じ距離に保たれる。ここで、投射焦点位置が投射面に近いほど高いコントラストの投射像が生成され、撮像焦点位置が投射面に近ヽほど投射像の撮像画像を高いコントラストで取得できる。したがって、同焦点移動方式を用いることにより、合焦状態とそうでない状態において算出されるコントラスト量の差を大きく取ることができ、撮像焦点位置と投射焦点位置をともに正確に調節することができる。そのため、カメラモジュール 7において投射像を適切に撮影できるようにすることができる。なお、より一層の高精度を必要とする場合には、上記のような方法で求められた撮像焦点位置と投射焦点位置に一旦合わせた後、そこを中心としてさらに細力べ刻んだ焦点位置の範囲において撮像焦点位置および投射焦点位置を変化させ、同様の処理を繰り返せばよい。

[0092] 一力メラ固定方式

この制御方法では、カメラモジュール 7の撮像焦点位置を固定させた状態で、プロジェクタモジュール 6の投射焦点位置のみを変化させる。そして、異なる複数の投射焦点位置にお!、て投射像の撮像画像を生成し、その複数の投射像の撮像画像を固定された 1つの撮像焦点位置にお!ヽて取得する。こうして取得された複数の投射像の撮像画像についてコントラスト量をそれぞれ算出し、コントラスト量が最大となったときの位置に合わせてプロジェクタモジュール 6の投射焦点位置を調節する。

[0093] このようにして投射焦点位置を調節した後さらに、カメラモジュール 7により 1つの撮像焦点位置において取得された上記の複数の投射像の撮像画像が所定の条件を満たす場合、具体的には、その複数の投射像の撮像画像によって算出された最大コントラスト量が所定のしきい値よりも小さかった場合には、その複数の投射像の撮像画像に基づいて、算出された最大コントラスト量を用いて、撮像焦点位置を投射焦点位置と同 Cf立置に合わせるように調節する。その後、再びその調節後の撮像焦点位置において投射焦点位置のみを変化させ、上記と同様にして、プロジェクタモジユール 6による複数の投射像の生成と、カメラモジュール 7による複数の投射像の撮像画像の取得とを再び行う。こうして取得された各撮像画像についてコントラスト量を算出して、その最大コントラスト量の位置に合わせて投射焦点位置を調節する。このような処理を繰り返すことにより、撮像画像のピント調節と投射像のフォーカス状態の調節とを別々に行う。さらにこの際に、取得された複数の撮像画像に基づいて、投射像のフオーカス状態の調節以外のキャリブレーション動作も合わせて実行してもよい。

[0094] 図 11は、以上説明したカメラ固定方式を用いて、撮像画像のピント調節と投射像のフォーカス状態の調節を別々に行う様子を示した図である。図 11 (a)〜（e)では図 1 0と同様に、投射面力も約 50cmの位置にプロジェクタ付き携帯電話機 10が設置されており、プロジェクタモジュール 6における最適な投射距離は 50cm程度であるものとする。

[0095] 初めに（a)のように、カメラモジュール 7の撮像焦点位置をプロジェクタ付き携帯電話機 10から 50cm離れた位置に固定した状態で、プロジェクタモジュール 6の投射焦点位置をプロジェクタ付き携帯電話機 10から 60cm離れた位置に合わせる。この状態で、プロジェクタモジュール 6によって生成される投射像をカメラモジュール 7において撮像し、その撮像画像についてコントラスト量を算出する。次に (b)のように、撮像焦点位置は (a)と同 Cf立置に固定したままで、投射焦点位置をプロジェクタ付き携帯電話機 10から 55cm離れた位置に合わせ、その投射像の撮像画像についてコントラスト量を算出する。

[0096] その後（c)〜（e)のように、カメラモジュール 7の撮像焦点位置をプロジェクタ付き携帯電話機 10から 50cmの位置に固定したままで、プロジェクタモジュール 6の投射焦点位置のみをプロジェクタ付き携帯電話機 10から 50cm、 45cm, 40cm離れた位置に順に合わせ、その位置における投射像の撮像画像についてコントラスト量を算出する。そして、最大のコントラスト量が得られたときの位置に合わせて、プロジェクタモジュール 6の投射焦点位置を調節し、その最大コントラスト量の値が予め定められた所定のしきい値以上である力否かを判定する。しきい値以上であれば、投射像のフォ一カス状態の調節を完了する。なお、この後さらにカメラモジュール 7において撮像画像のピント調節を行うようにしてもよい。

[0097] 最大コントラスト量がしきい値よりも小さい場合は、その最大コントラスト量が得られた位置に合わせて撮像焦点位置を調節した後、再び (a)〜 (e)のようにして投射焦点位置を順に変化させ、その投射像の撮像画像をカメラモジュール 7にお、て取得する。取得された撮像画像についてコントラスト量を算出し、最大コントラスト量が得られた位置に合わせて投射焦点位置を調節してから、その最大コントラスト量としきい値との比較を再度行う。このような処理を繰り返すことにより、撮像画像のピント調節と投射像のフォーカス状態の調節を別々に行う。

[0098] 以上説明したようなカメラ固定方式を用いると、カメラモジュール 7における撮像画像のピント調節と、プロジェクタモジュール 6における投射像のフォーカス状態の調節とを別々に実行するため、同焦点移動方式よりも簡単な処理でこれらの調節を行うことができる。したがって、処理能力の低い CPUなどを用いた場合にも、カメラモジユール 7にお、て投射像を適切に撮影できるようにすることができる。

[0099] なお、以上説明したカメラ固定方式において、投射像のフォーカス状態の調節を 1 回だけ行うようにしてもよい。すなわち、最初に固定した撮像焦点位置において取得された複数の撮像画像に基づいて、投射焦点位置を最終的に決定し、再び処理を繰りかえさなヽようにしてもょヽ。投射像のボケ具合や撮像画像の被写界深度によつては、このようにしても投射像のフォーカス状態を適切に調節できる。さらにこの場合、取得される撮像画像のピントが近くから無限遠まで合ってヽるパンフォーカス状態となるように、カメラモジュール 7において撮像焦点位置を固定することが好ましい。このようにすれば、投射焦点位置の調節処理を複数回繰り返す必要がなぐ短時間で投射像のフォーカス状態を調節して投射像を適切に撮影できるようにすることができる。なお、このような投射像のフォーカス状態の調節方法は、カメラモジュール 7が焦点調節機能を有しない単焦点カメラのようなものである場合にも適用することができる

[0100] 次に、カメラモジュール 7における撮像画像のホワイトバランス調節方法について説明する。被写体を撮影してその撮像画像を取得する電子式カメラでは通常、様々なシーンの撮影にぉ、て取得された撮像画像の色合!、を人間の見た目に合わせるために、ホワイトバランス調節が行われる。すなわち、撮影時に周囲の配光状況によつて生じる被写体像の色合い変化を抑えて、その被写体像から得られる撮像画像が自然な色合ヽで表現されるように、予め定められた色変換法則などに基づヽて撮像画像の色情報値を異なる値へと変換する。この変換後の色情報値によって、撮像画像における色合いが表される。

[0101] 本実施形態のプロジェクタ付き携帯電話機 10では、カメラモジュール 7によって取得された撮像画像が前述のように画像データとして CPU101に出力され、この画像データに基づ、て CPU101にお、て上記のような色情報値の変換処理を実行することにより、撮像画像の色合いを調節する。このようにして、撮像画像のホワイトバランス調節が行われる。なお、このときに用いられる色変換法則の内容は、ユーザが撮影シーンの種類を設定することで切り替えられる。

[0102] さらに、プロジェクタモジュール 6によって生成された投射像をカメラモジュール 7により撮影する際には、以上説明したような撮像画像のホワイトバランス調節が自動的に実行される。すなわち、プロジェクタモジュール 6を使用して投射像を生成する際には、自動的にカメラモジュール 7において撮像画像を取得し、その撮像画像に対してホワイトバランス調節を行う。この投射時における撮像画像のホワイトバランス調節では、撮影シーンの種類がどの状態に設定されているかに関わらず、投射像の撮影用に予め定められた所定の色変換法則に基づいて、カメラモジュール 7において取得された撮像画像の色合いを調節する。なお、ここで述べた所定の色変換法則については後で説明する。

[0103] 上記のようにして投射時における撮像画像のホワイトバランス調節を行う場合、プロジェクタモジュール 6の LED光源 63は初めに、予め設定された所定の色合いに調節した光を出力する。このときの投射像をカメラモジュール 7において撮影し、投射時における撮像画像のホワイトバランス調節を行った後に、そのホワイトバランス調節後の撮像画像に基づいて、前述したようなキャリブレーション動作を実行する。キヤリブレーシヨン動作において既に説明した投射像のホワイトバランス調節が行われることにより、 LED光源 63の発光色が上記の所定の色合いから変化して、投射像の色合いが調節される。

[0104] ここでプロジェクタモジュール 6の LED光源 63は、発光時の色合い特性に個体差があり、上記のように予め設定された所定の色合いに調節した光を出力しても、その出力光の実際の色合いは個体ごとに微妙に異なる。また、プロジェクタ付き携帯電話機 10として仕様の異なる複数の機種が存在する場合は、機種ごとに異なる仕様の光源が LED光源 63として用いられる場合がある。このような場合にも発光時の色合!ヽ特性が異なるため、出力光の色合いに差が生じる。

[0105] そのため、本実施形態のプロジェクタ付き携帯電話機 10では、投射時における撮像画像のホワイトバランス調節を、 LED光源 63の色合い特性に応じて予め定められた所定の色変換法則に基づいて実行する。この所定の色変換法則には、上記で説明したような LED光源 63における色合い特性の差が補正されるようなものが設定される。すなわち、個体や機種ごとに LED光源 63の色合い特性を予め測定しておき、その測定結果に基づいて、出力される光の色合いの差を打ち消すような色変換法則をプロジェクタ付き携帯電話機 10の製造時に CPU101に記憶させておく。このような色変換法則を用いることにより、 LED光源 63における色合い特性の差を補正し、カメラモジュール 7において投射像を適切に撮影できるようにすることができる。

[0106] なお、上記のような色変換法則をプロジェクタ付き携帯電話機 10の製造後に設定できるようにしてもよい。たとえば、プロジェクタモジュール 6を使用して画像を投射する前に、白色の投射面に対して LED光源 63からの出力光自体、すなわち無色透明の画像を前述した所定の色合、で投射し、その投射像をカメラモジュール 7にお、て撮影する。こうして取得された撮像画像に基づいて、基準特性に対する LED光源 63 の色合い特性の差を検出し、その検出結果に応じて、投射時における撮像画像のホワイトバランス調節に使用する色変換法則を設定することができる。

[0107] 以上説明した第 1の実施の形態によれば、次の作用効果を奏する。

(1)カメラモジュール 7により撮影して取得された投射像の撮像画像に基づ、て、プロジェクタモジュール 6におけるキャリブレーション動作を投射像の投射中に繰り返し実行することとした。具体的には、投射像のフォーカス状態の調節や、投射像の明るさの調節や、投射像の色合いの調節や、投射像の台形歪みの補正を、投射像の投射中に繰り返し実行することとした。このようしたので、プロジェクタ付き携帯電話機 1 0を持っている手の向きが変化したりすることで投射中に投射像がぶれた場合にも、投射像の映り具合を適切に調節することができる。

[0108] (2)キャリブレーション動作、すなわち投射像のフォーカス状態の調節や、投射像の明るさの調節や、投射像の色合いの調節や、投射像の台形歪みの補正を、一定周期ごとに繰り返し実行することとすれば、投射中において投射像の映り具合を常時調節することができる。

[0109] (3)キャリブレーション動作、すなわち投射像のフォーカス状態の調節や、投射像の明るさの調節や、投射像の色合いの調節や、投射像の台形歪みの補正を、操作キ一への操作入力が行われるごとに繰り返し実行することもできる。このようにすれば、操作キーへの操作入力によってプロジェクタ付き携帯電話機 10の位置や向きが変化し、投射像がぶれてしまった場合でも、それを補正して見やすい投射像とすることができる。

[0110] (4)投射像の撮像画像中に含まれている所定の形状パターンに基づいて、キヤリブレーシヨン動作のうち投射像のフォーカス状態の調節と、投射像の明るさの調節と、投射像の色合いの調節とを行うこととした。具体的には、所定の形状パターンを有するコントラスト算出用画像に基づいて投射像のフォーカス状態を調節し、所定の形状ノターンを有する明るさ検出用画像に基づいて投射像の明るさを調節し、所定の形状パターンを有する色合、検出用画像に基づ 1、て投射像の色合!、を調節することとした。このようにしたので、投射像のフォーカス状態、明るさおよび色合いを投射中にぉ、て調節することができる。

[0111] (5)また、投射像の撮像画像中に含まれている投射像の形状を特定するための所定の図形または記号に基づいて、キャリブレーション動作のうち投射像の台形歪みの補正を行うこととした。このようにしたので、投射中においても投射像の台形歪みを補正することができる。

[0112] (6)所定の形状パターンを含む画像や、所定の図形または記号を含む画像を所定の短時間だけ投射するようにし、その画像の投射タイミングに同期して投射像を被写体として撮影することとすれば、投射像を見て!、る者に対してその形状パターンや図形または記号を気づかれに《することができる。

[0113] (7)キャリブレーション動作、すなわち投射像のフォーカス状態の調節や、投射像の明るさの調節や、投射像の色合いの調節や、投射像の台形歪みの補正について、その頻度を設定することもできる。そして、 3種類の頻度を設定可能とし、最も高い頻度が設定された場合はこれらのキャリブレーション動作を投射像の投射中に繰り返し実行し、中間の頻度が設定された場合はこれらのキャリブレーション動作を投射像の投射中に 1回だけ実行し、最も低、頻度が設定された場合はこれらのキヤリブレーション動作を行わないようにすることができる。このようにすれば、上記のようなキヤリブレーシヨン動作が不要である場合に電力消費を抑えることができる。

[0114] (8)静止画像が投射されているときには、その投射像を撮影して取得された撮像画像に基づいて、投射像のフォーカス状態を調節することもできる。このようにしても、投射像のフォーカス状態を投射中におヽて調節することができる。

[0115] (9)さらに上記の場合において、動画像が投射されているときには、所定の形状バターンを有するコントラスト算出用画像を含む画像を投射することもできる。このようにすれば、動画像を投射中のときにも投射像のフォーカス状態を投射中におヽて調節することがでさる。

[0116] (10) LED光源 63からの発光量を変化させることにより投射像の明るさを調節することとしているので、簡単な処理で投射像の明るさを調節できる。さらにこのとき、所定の基準値よりも暗くする場合には LED光源 63からの発光量を低下させて投射像の明るさを調節し、所定の基準値よりも明るくする場合には液晶パネル 62に表示する画像自体の明るさを変えることによって投射像の明るさを調節することもできる。このようにすれば、発光量を抑えて電力消費量や発熱量を低減することができる。

[0117] (l l) LED光源 63からの発光量を RGB各発光色ごとに変化させることにより投射像の色合、を調節することとして、るので、簡単な処理で投射像の色合、を調節できる

[0118] (12)操作部 1と表示部 2の折りたたみ角度 Θを検出し、その折りたたみ角度 Θに基づいて台形歪みを補正することとした。または、表示部 2の回転角度 φを検出し、その回転角度 Φに基づいて台形歪みを補正することとした。このようにしたので、カメラモジュール 6を用いた投射像の撮像を行わなくても、簡単な制御で台形歪みを補正することができる。

[0119] (13)撮像画像のピント調節において同焦点移動方式を用いた場合には、プロジェクタモジュール 6によって異なる複数の投射焦点位置において投射像をそれぞれ生成し、その複数の投射像の撮像画像をカメラモジュール 7によって取得する。このとき、その複数の投射像の撮像画像を、プロジェクタ付き携帯電話 10に対する距離が投射像を生成した複数の投射焦点位置とそれぞれほぼ等しい複数の撮像焦点位置においてそれぞれ取得することとした。このようにしたので、カメラモジュール 7において投射像を適切に撮影できるようにすることができる。

[0120] (14)撮像画像のピント調節においてカメラ固定方式を用いた場合には、プロジェクタモジュール 6によって異なる複数の投射焦点位置において投射像をそれぞれ生成し、その複数の投射像の撮像画像をカメラモジュール 7によって取得する。このとき、その複数の投射像の撮像画像を、固定された 1つの撮像焦点位置にぉヽてそれぞれ取得することとした。このようにしても、カメラモジュール 7において投射像を適切に撮影でさるよう〖こすることがでさる。

[0121] (15)カメラ固定方式を用いた場合はさらに、 1つの撮像焦点位置において取得された複数の投射像の撮像画像が所定の条件を満たす場合には、その複数の投射像の撮像画像に基づヽて撮像焦点位置を調節した後、その調節後の撮像焦点位置において、プロジェクタモジュール 6による複数の投射像の生成と、カメラモジュール 7による複数の投射像の撮像画像の取得とを再び行うこととした。このようにしたので、最初に固定された撮像焦点位置が適切ではな力つた場合でも、調節後の撮像焦点位置において投射像を適切に撮影できるようにすることができる。

[0122] (16)また、カメラ固定方式を用いる場合において、取得される撮像画像のピントが近く力も無限遠まで合っているパンフォーカス状態となるように、カメラモジュール 7にお V、て撮像焦点位置を固定し、その撮像焦点位置にぉ、て複数の投射像の撮像画像を取得することとすれば、投射焦点位置の調節処理を複数回繰り返す必要がなぐ短時間で投射像を適切に撮影できるようにすることができる。

[0123] (17)投射時における撮像画像のホワイトバランス調節において、投射像をカメラモジユール 7により撮影する際、 LED光源 63の色合い特性に応じて予め定められた所定の色変換法則に基づいて、取得された撮像画像の色合いを調節することとした。このようにしたので、撮像画像のホワイトバランス調節、すなわち撮像画像の色合い調節を行う場合にも、カメラモジュール 7において投射像を適切に撮影できるようにすることがでさる。

[0124] 第 2の実施の形態

本発明の第 2の実施の形態について説明する。この実施形態ではカメラモジュール 7にズーム機能が付いており、撮影時にユーザの操作によって任意のズーム位置へと動かすことができる。これにより、ユーザは被写体を拡大または縮小して撮影することができる。なお、本実施形態の外観および構成は第 1の実施の形態と同じであるため、ここでは説明を省略する。

[0125] 本実施形態において、カメラモジュール 7の撮影レンズ 71はズーミング可能なズームレンズであり、カメラ制御 CPU 74の制御に基づ、てレンズ駆動部 73によって駆動されることでそのズーム位置が制御される。カメラ制御 CPU74は、投射像をカメラモジュール 7により撮影する際には、予め設定された所定のズーム位置となるように撮影レンズ 71のズーム位置を制御する。すなわち、プロジェクタモジュール 6を使用して投射像を生成する際には、自動的にカメラモジュール 7にお、て撮影レンズ 71を所定のズーム位置へと制御して撮像画像を取得する。このときの所定のズーム位置は、カメラモジュール 7における撮影範囲がプロジェクタモジュール 6による投射像の投射範囲を少なくとも含むように設定される。なお、投射像の投射範囲は、プロジェクタ付き携帯電話機 10と投射面の距離によって変動する。したがって、その変動量を考慮して撮影範囲の方が大きくなるように所定のズーム位置を設定しておくことが好ましい。

[0126] カメラモジュール 7は、上記の所定のズーム位置としたときの撮影範囲により、プロジェクタモジュール 6によって生成される投射像を撮像する。この撮像画像に基づ!/ヽて、 CPU101とプロジェクタモジュール 6において前述したようなキャリブレーション動作を行い、投射像の映り具合を調節する。

[0127] 図 12は、撮影範囲が投射範囲を含むようにカメラモジュール 7のズーム位置を制御するときの様子を示した図である。 (a)の平面図と（b)の正面図は、ズーム位置を制御する前の撮影範囲と投射範囲の関係を示した図である。このときのカメラモジユール 7による撮影範囲は、プロジェクタモジュール 6による投射範囲よりも狭くなつている。このままでは投射像の全体を撮影することができないため、投射時にはズーム位置を制御して撮影範囲を拡大する。

[0128] (c)の平面図と (d)の正面図は、所定のズーム位置へと制御した後の撮影範囲と投射範囲の関係を示した図である。このとき、（a)および (b)の状態よりもズーム位置を後退させることによりカメラモジュール 7の撮影範囲を拡大して、その撮影範囲がプロジェクタモジュール 6による投射範囲を含むように拡大する。このようにしてズーム位置を制御する。なお、ズーム位置が前述の所定のズーム位置よりも撮影範囲が拡大する側にあった場合には、上記と同様に所定のズーム位置となるように制御してもよ V、し、そのままズーム位置を変えな!/、こととしてもよ!/、。

[0129] 以上説明した第 2の実施の形態によれば、投射像をカメラモジュール 7により撮影する際、カメラ制御 CPU74によって、カメラモジュール 7における撮影範囲が投射像の投射範囲を少なくとも含むように予め設定された所定のズーム位置に、カメラモジユール 7のズーム位置を制御することとした。このようにしたので、カメラモジュール 7 にズーム機構が付いている場合でも投射像を適切に撮影できるようにすることができる。

[0130] なお、上記の第 1および第 2の実施の形態において、投射像をカメラモジュール 7によって撮影する前のカメラモジュール 7における各種の設定状態を CPU101において記憶し、プロジェクタモジュール 6による投射像の生成を止めた後、またはキヤリブレーシヨン動作の実行を止めた後に、その記憶された状態へと各種の設定状態を戻すこととしてもよい。ここでいう各種の設定状態には、第 1の実施の形態では撮像焦点位置の状態や、撮像画像のホワイトバランス調節時に用いられる色変換法則の状態が該当し、第 2の実施形態ではズーム位置の状態が該当する。なおこの場合において、投射像をカメラモジュール 7により撮影する場合とそうでない場合とで、撮像画像のホワイトバランス調節時に用いられる色変換法則が異なることは言うまでもない。

[0131] 第 3の実施の形態

本発明の第 3の実施の形態について説明する。図 13は、本実施形態によるプロジクタ付き携帯電話機 10Aの外観図である。（a)と (b)は側面図、（c)は背面図を表している。このプロジェクタ付き携帯電話機 10Aは、第 1の実施の形態と同じ操作部 1 と、表示部 2Aによって構成されている。表示部 2Aは、図に示す位置にプロジェクタモジュール 6とカメラモジュール 7が配設されており、図 1のサブ液晶表示器 5は有していない。これ以外の点については、第 1の実施の形態における表示部 2と同一である。

[0132] カメラモジュール 7は、表示部 2Aのカメラ取付機構部 2Bに配設されている。この力メラ取付機構部 2Bは、カメラモジュール 6の撮像方向を変化させるために回転可能な機構を有している。そのため、カメラモジュール 7の撮像方向とプロジェクタモジュール 6の投射方向は、（b)に示すよう同一方向である場合と、（a)に示すように同一方向でな、場合とがある。 (a)のように一致しな、場合にプロジェクタモジュール 6によつて画像を投射すると、その投射像をカメラモジュール 7におヽて撮像することができな、ため、前述したようなキャリブレーション動作を実行できな、。

[0133] そのため本実施形態では、カメラ取付機構部 2Bの回転角度を検出するための回転角度検出部（不図示）を表示部 2Aに備えるようにし、その回転角度によってカメラモジュール 7の撮像方向を判断する。そして、カメラモジュール 7の撮像方向とプロジェクタモジュール 6の投射方向が同一方向であるか否かを CPU101において判定し、同一方向であると判定された場合にのみ、 CPU101においてプロジェクタモジユール 6の動作を許可する。

[0134] 上記の判定の結果、撮像方向と投射方向が同一方向でないと判定された場合には、 CPU101においてプロジェクタモジュール 6の動作を禁止するとともに、カメラモジユール 7の撮像方向を変更するようユーザに促すための警告を発する。この警告は、警告メッセージとしてメイン液晶表示器 4に表示したり、あるいはスピーカー 111から警告音として出力したりすることができる。なお、上記のようなプロジェクタモジュール 6の動作の許可または禁止の制御と、警告音の出力とは、どちらか一方のみを実行するようにしてちょい。

[0135] 以上説明した第 3の実施の形態によれば、次の作用効果を奏する。

( 1 )プロジェクタモジュール 6の投射方向とカメラモジュール 7の撮像方向が同一方向であるか否かを判定し、同一方向ではないと判定された場合には警告を発することとしたので、カメラモジュール 7の撮像方向が可変な場合でも投射像を適切に撮影できるよう〖こすることがでさる。

[0136] (2)また、プロジェクタモジュール 6の投射方向とカメラモジュール 7の撮像方向が同一方向であると判定された場合にのみ、プロジェクタモジュール 6の動作を許可することとした。このようにしても、カメラモジュール 7の撮像方向が可変な場合に投射像を適切に撮影できるようにすることができる。

[0137] なお、上記の各実施の形態では、プロジェクタ機能が携帯電話機に組み込まれたプロジェクタ付き携帯電話機を例に説明した。しかし、上記に説明したような動作を行うプロジェクタ装置であれば、携帯電話機に組み込まれたものに限らず、プロジェクタ機能とカメラ機能を有する小型の携帯型電子機器であればどのようなものでもよい。あるいは、デジタルスチルカメラなどの電子式カメラにプロジェクタ機能を組み込み、上記のような動作を実行させるようにしてもよい。

[0138] 上記の各実施の形態において説明した内容はあくまで一例であって、本発明はこの内容に限定されるものではない。本発明の技術的思想の範囲内で考えられるその他の態様も、本発明の範囲内に含まれる。

[0139] 次の優先権基礎出願の開示内容は引用文としてここに組み込まれる。

日本国特許出願 2004年第 273417号（2004年 9月 21日出願）日本国特許出願 2004年第 273427号（2004年 9月 21日出願) 日本国特許出願 2004年第 273428号（2004年 9月 21日出願) 日本国特許出願 2004年第 273429号（2004年 9月 21日出願) 日本国特許出願 2004年第 273433号（2004年 9月 21日出願) 日本国特許出願 2004年第 273435号（2004年 9月 21日出願)

Claims

請求の範囲

[1] 投射像を生成し、その投射像を撮影して投射像の種々の調節を行うプロジェクタ装置。

[2] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像に基づヽて、その投射像の前記投射面における映り具合を調整するためのキャリブレーション動作をその投射像の投射中に繰り返し実行するキャリブレーション制御装置とを備える。

[3] 請求項 2のプロジェクタ装置において、

前記キャリブレーション制御装置は、前記キャリブレーション動作を一定周期ごとに繰り返し実行する。

[4] 請求項 2のプロジェクタ装置において、

プロジェクタ装置は、ユーザ力の操作入力を受け付けるための操作入力装置をさらに備え、

前記キャリブレーション制御装置は、前記キャリブレーション動作を前記操作入力装置への操作入力が行われるごとに繰り返し実行する。

[5] 請求項 2〜4の!、ずれかのプロジェクタ装置にお!、て、

前記投射像生成装置は、所定の形状パターンを含む画像を投射し、

前記キャリブレーション制御装置は、その投射像の撮像画像中に含まれて、る前記所定の形状パターンに基づ、て、前記キャリブレーション動作を実行する。

[6] 請求項 5のプロジェクタ装置において、

前記投射像生成装置は、前記所定の形状パターンを含む画像を所定の短時間だけ投射し、

前記撮像装置は、その画像の投射タイミングに同期して、前記投射像を被写体として撮影する。

[7] 請求項 2〜6の!、ずれかのプロジェクタ装置にお!、て、プロジェクタ装置は、前記キャリブレーション動作の実行頻度を設定するための設定装置をさらに備え、

前記キャリブレーション制御装置は、

前記設定装置により第 1の実行頻度が設定された場合は、前記キャリブレーション動作を前記投射像の投射中に繰り返し実行し、

第 2の実行頻度が設定された場合は、前記キャリブレーション動作を前記投射像の投射中に 1回だけ実行し、

第 3の実行頻度が設定された場合は、前記キャリブレーション動作を実行しな!、。請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

所定の形状パターンを含む画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、

撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像中に含まれて、る前記所定の形状パターンに基づ、て、前記投射像のフォーカス状態を調節するフォ一力シング装置とを備える。

請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

静止画像および動画像のいずれかを投射面に投射してその静止画像または動画像の投射像を生成する投射像生成装置と、

撮影した被写体の撮像画像を取得する撮像装置と、

前記投射像生成装置により静止画像が投射されているときには、前記撮像装置により撮影して取得された前記投射像の撮像画像に基づヽて、前記投射像のフォー力ス状態を調節するフォーカシング装置とを備える。

請求項 9のプロジェクタ装置において、

前記投射像生成装置は、動画像を投射する場合には、その動画像に所定の形状パターンを含めて投射し、

前記フォーカシング装置は、前記投射像生成装置により前記所定の形状パターンが含められた動画像が投射されているときには、その投射像の撮像画像中に含まれて、る前記所定の形状パターンに基づ、て、前記投射像のフォーカス状態を調節する。

[11] 請求項 8〜10の!、ずれか一項のプロジェクタ装置にお!ヽて、

前記フォーカシング装置は、前記投射像のフォーカス状態の調節をその投射像の投射中に繰り返し行う。

[12] 請求項 11のプロジェクタ装置において、

前記フォーカシング装置は、前記投射像のフォーカス状態の調節を一定周期ごとに繰り返し行う。

[13] 請求項 11のプロジェクタ装置において、

前記フォーカシング装置は、前記投射像のフォーカス状態の調節を前記操作入力装置への操作入力が行われるごとに繰り返し行う。

[14] 請求項 8または 10のプロジェクタ装置において、

[15] 請求項 11〜13の!、ずれか一項のプロジェクタ装置にお!ヽて、

プロジェクタ装置は、前記投射像のフォーカス状態の調節頻度を設定するための設定装置をさらに備え、

前記フォーカシング装置は、

前記設定装置により第 1の調節頻度が設定された場合は、前記投射像のフォー力ス状態の調節をその投射像の投射中に繰り返し行、、

第 2の調節頻度が設定された場合は、前記投射像のフォーカス状態の調節をその投射像の投射中に 1回だけ行!、、

第 3の調節頻度が設定された場合は、前記投射像のフォーカス状態の調節を行わない。

[16] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像中に含まれて、る前記所定の形状パターンに基づいて、前記投射像の明るさを調節する明るさ調節装置とを備える。

[17] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

光源を有し、その光源カゝら発せられる光を用いて画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、

撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像に基づヽて、前記光源からの発光量を変化させることにより、前記投射像の明るさを調節する明るさ調節装置とを備える。

[18] 請求項 17のプロジェクタ装置において、

前記明るさ調節装置は、

前記投射像の明るさを所定の基準値よりも暗くする場合には、前記光源力もの発光量を低下させて前記投射像の明るさを調節し、

前記投射像の明るさを前記基準値よりも明るくする場合には、前記画像自体の明るさを変えることにより、前記投射像の明るさを調節する。

[19] 請求項 16〜18のいずれか一項のプロジェクタ装置において、

前記明るさ調節装置は、前記投射像の明るさの調節をその投射像の投射中に繰り返し行う。

[20] 請求項 19のプロジェクタ装置において、

前記明るさ調節装置は、前記投射像の明るさの調節を一定周期ごとに繰り返し行う [21] 請求項 19のプロジェクタ装置において、

前記明るさ調節装置は、前記投射像の明るさの調節を前記操作入力装置への操作入力が行われるごとに繰り返し行う。

[22] 請求項 16のプロジェクタ装置において、

[23] 請求項 19〜21のいずれか一項のプロジェクタ装置において、

プロジェクタ装置は、前記投射像の明るさの調節頻度を設定するための設定装置をさらに備え、

前記明るさ調節装置は、

前記設定装置により第 1の調節頻度が設定された場合は、前記投射像の明るさの調節をその投射像の投射中に繰り返し行!、、

第 2の調節頻度が設定された場合は、前記投射像の明るさの調節をその投射像の投射中に 1回だけ行い、

第 3の調節頻度が設定された場合は、前記投射像の明るさの調節を行わない。

[24] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像中に含まれて、る前記所定の形状パターンに基づ!、て、前記投射像の色合、を調節する色合、調節装置とを備える。 [25] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

複数の色の光を発光する光源を有し、その光源から発せられる各色の光を合成した光を用いて画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、

撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像に基づヽて、前記光源からの発光量をその発光色ごとに変化させることにより、前記投射像の色合いを調節する色合!ゝ調節装置とを備える。

[26] 請求項 24または 25のプロジェクタ装置において、

前記色合!、調節装置は、前記投射像の色合!、の調節をその投射像の投射中に繰り返し行う。

[27] 請求項 26のプロジェクタ装置において、

前記色合い調節装置は、前記投射像の色合いの調節を一定周期ごとに繰り返し行

[28] 請求項 26のプロジェクタ装置において、

前記色合!、調節装置は、前記投射像の色合!、の調節を前記操作入力装置への操作入力が行われるごとに繰り返し行う。

[29] 請求項 24のプロジェクタ装置において、

[30] 請求項 26〜28のいずれか一項のプロジェクタ装置において、

プロジェクタ装置は、前記投射像の色合いの調節頻度を設定するための設定装置をさらに備え、前記色合い調節装置は、

前記設定装置により第 1の調節頻度が設定された場合は、前記投射像の色合いの調節をその投射像の投射中に繰り返し行!、、

第 2の調節頻度が設定された場合は、前記投射像の色合!、の調節をその投射像の投射中に 1回だけ行い、

第 3の調節頻度が設定された場合は、前記投射像の色合!、の調節を行わな!/、。

[31] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

投射像の形状を特定するための所定の図形または記号を含む画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、

撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像中に含まれて、る前記図形または記号に基づいて、前記投射像生成装置の投射方向と前記投射面との角度に応じて生じる投射像の台形状の歪みを補正する台形補正装置とを備える。

[32] 請求項 31のプロジェクタ装置において、

前記台形補正装置は、前記台形状の歪みの補正を前記投射像の投射中に繰り返し行う。

[33] 請求項 32のプロジェクタ装置において、

前記台形補正装置は、前記台形状の歪みの補正を一定周期ごとに繰り返し行う。

[34] 請求項 32のプロジェクタ装置において、

前記台形補正装置は、前記台形状の歪みの補正を前記操作入力装置への操作入力が行われるごとに繰り返し行う。

[35] 請求項 31のプロジェクタ装置において、

前記投射像生成装置は、前記図形または記号を含む画像を所定の短時間だけ投射し、

[36] 請求項 32〜34のいずれか一項のプロジェクタ装置において、

プロジェクタ装置は、前記台形状の歪みの補正頻度を設定するための設定装置をさらに備え、

前記台形補正装置は、

前記設定装置により第 1の補正頻度が設定された場合は、前記台形状の歪みの補正を前記投射像の投射中に繰り返し行、、

第 2の補正頻度が設定された場合は、前記台形状の歪みの補正を前記投射像の投射中に 1回だけ行い、

第 3の補正頻度が設定された場合は、前記台形状の歪みの補正を行わな!/、。

[37] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

画像を投射面に投射してその画像の投射像を生成する投射焦点位置が可変な投射像生成装置と、

撮影した被写体の撮像画像を取得する撮像焦点位置が可変な撮像装置と、前記撮像装置により撮影して取得された前記投射像の撮像画像に基づヽて、その投射像の前記投射面における映り具合を調整するためのキャリブレーション動作を実行するキャリブレーション制御装置とを備え、

前記投射像生成装置は、異なる複数の投射焦点位置にぉ、て前記投射像をそれぞれ生成し、

前記撮像装置は、前記投射像生成装置により前記複数の投射焦点位置において生成された複数の投射像の撮像画像を、前記プロジェクタ装置に対する距離が前記複数の投射焦点位置とそれぞれほぼ等し、複数の撮像焦点位置にぉ、てそれぞれ取得し、

前記キャリブレーション制御装置は、前記撮像装置により前記複数の撮像焦点位置にお、て取得された複数の投射像の撮像画像に基づ、て、前記キヤリブレーション動作を実行する。

[38] 請求項 1のプロジェクタ装置において、プロジェクタ装置は、

前記撮像装置は、前記投射像生成装置により前記複数の投射焦点位置において生成された複数の投射像の撮像画像を、固定された 1つの撮像焦点位置にぉ、てそれぞれ取得し、

前記キャリブレーション制御装置は、前記撮像装置により前記 1つの撮像焦点位置にお、て取得された複数の投射像の撮像画像に基づ、て、前記キャリブレーション動作を実行する。

[39] 請求項 38のプロジェクタ装置において、

前記撮像装置により前記 1つの撮像焦点位置において取得された複数の投射像の撮像画像が所定の条件を満たす場合には、その複数の投射像の撮像画像に基づヽて前記撮像焦点位置を調節した後、その調節後の撮像焦点位置において、前記投射像生成装置による前記複数の投射像の生成と、前記撮像装置による前記複数の投射像の撮像画像の取得とを再び行う。

[40] 請求項 38のプロジェクタ装置において、

前記撮像装置は、取得される撮像画像のピントが近くから無限遠まで合ってヽるパンフォーカス状態となるように前記撮像焦点位置を固定し、その撮像焦点位置にお V、て前記複数の投射像の撮像画像をそれぞれ取得する。

[41] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得するズーミング可能な撮像装置と、前記撮像装置のズーム位置を制御するズーミング制御装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像に基づヽて、その投射像の前記投射面における映り具合を調整するためのキャリブレーション動作を実行するキャリブレーション制御装置とを備え、

前記投射像を前記撮像装置により撮影する際、前記ズーミング制御装置は、前記撮像装置における撮影範囲が前記投射像の投射範囲を少なくとも含むように予め設定された所定のズーム位置に、前記撮像装置のズーム位置を制御する。

[42] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

所定の色合い特性で発光する光源を有し、その光源カゝら発せられる光を用いて画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、

撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像画像の色合!ヽを調節する色合!ヽ調節装置と、

前記投射像を前記撮像装置により撮影する際、前記色合い調節装置は、前記光源の色合い特性に応じて予め定められた所定の色変換法則に基づいて、取得された撮像画像の色合!、を調節する。

[43] 請求項 37〜40のいずれか一項のプロジェクタ装置において、

プロジェクタ装置は、前記投射像を前記撮像装置によって撮影する前の前記撮像焦点位置の状態を記憶する状態記憶装置をさらに備え、

前記投射像生成装置による投射像の生成を止めた後、または前記キヤリブレーション制御装置によるキャリブレーション動作の実行を止めた後に、前記状態記憶装置により記憶された状態へと前記撮像焦点位置を戻す。

[44] 請求項 41のプロジェクタ装置において、

プロジェクタ装置は、前記投射像を前記撮像装置によって撮影する前の前記ズーム位置の状態を記憶する状態記憶装置をさらに備え、

前記投射像生成装置による投射像の生成を止めた後、または前記キヤリブレーション制御装置によるキャリブレーション動作の実行を止めた後に、前記状態記憶装置により記憶された状態へと前記ズーム位置を戻す。

[45] 請求項 42のプロジェクタ装置において、

プロジェクタ装置は、前記投射像を前記撮像装置によって撮影する前の前記色合い調節装置における色変換法則の状態を記憶する状態記憶装置をさらに備え、前記投射像を前記撮像装置によって撮影しなヽ場合には、前記色合ヽ調節装置において前記所定の色変換法則とは異なる色変換法則に基づいて撮像画像の色合いを調節し、

前記投射像生成装置による投射像の生成を止めた後、または前記キヤリブレーション制御装置によるキャリブレーション動作の実行を止めた後に、前記状態記憶装置により記憶された状態へと前記色合い調節装置における色変換法則の状態を戻す。

[46] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

前記撮像装置の撮像方向を変化させるための撮像方向変化機構と、

前記撮像装置により撮影して取得された前記投射像の撮像画像に基づヽて、その投射像の前記投射面における映り具合を調整するためのキャリブレーション動作を実行するキャリブレーション制御装置と、

前記投射像生成装置の投射方向と前記撮像装置の撮像方向が同一方向であるか否かを判定する判定装置と、

前記判定装置により前記投射方向と前記撮像方向が同一方向ではないと判定された場合には警告を発する警告装置とを備える。

[47] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

前記判定装置により前記投射方向と前記撮像方向が同一方向であると判定された場合にのみ、前記投射像生成装置の動作を許可する動作許可装置とを備える。

[48] プロジェクタ装置は、

ヒンジ部を中心に折りたたみ可能な構造を有し、前記ヒンジ部を介して連結された第 1の部位と第 2の部位を有する筐体部と、

前記筐体部の折りたたみ角度を検出する検出装置と、

画像を投射面に投射してその画像の投射像を生成し、その投射方向が前記第 1の部位に対して固定されている投射像生成装置と、

前記検出装置によって検出された折りたたみ角度に基づいて、前記投射像生成装置の投射方向と前記投射面との角度に応じて生じる投射像の台形状の歪みを補正する台形補正装置とを備える。

[49] プロジェクタ装置は、

所定の回転軸を中心として回転可能な構造を有する第 1の部位と、その第 1の部位に連結された第 2の部位とを有する筐体部と、

所定の基準位置に対する前記第 1の部位の回転角度を検出する検出装置と、画像を投射面に投射してその画像の投射像を生成し、その投射方向が前記第 1の部位に対して固定されている投射像生成装置と、

前記検出装置によって検出された回転角度に基づいて、前記投射像生成装置の投射方向と前記投射面との角度に応じて生じる投射像の台形状の歪みを補正する台形補正装置とを備える。

[50] 請求項 48または 49のプロジェクタ装置において、前記台形補正装置は、前記台形状の歪みの補正を前記投射像の投射中に繰り返し行う。

[51] 請求項 50のプロジェクタ装置において、

[52] 請求項 50のプロジェクタ装置において、

[53] 請求項 50〜52のいずれか一項のプロジェクタ装置において、

前記台形補正装置は、

[54] 請求項 1〜53のいずれか一項に記載のプロジェクタ装置と、

外部の無線通信設備を介して他の端末との通信を行うための無線通信装置とを備えた携帯電話。

[55] 請求項 1〜53のいずれか一項に記載のプロジェクタ装置を備えたカメラ。