JP6436430B2

JP6436430B2 - 画像撮影表示装置および画像撮影表示装置の動作方法

Info

Publication number: JP6436430B2
Application number: JP2015091825A
Authority: JP
Inventors: 熊本　義則; 義則熊本
Original assignee: Panasonic Intellectual Property Management Co Ltd
Current assignee: Panasonic Intellectual Property Management Co Ltd
Priority date: 2014-05-16
Filing date: 2015-04-28
Publication date: 2018-12-12
Anticipated expiration: 2035-04-28
Also published as: JP2016136710A; US10742863B2; US20150332090A1; US20190335076A1; US10469724B2

Description

本願は、画像撮影表示装置および画像撮影表示装置の動作方法に関する。

近年、屋内外で画像撮影表示装置が普及し始めている。画像撮影表示装置の典型例は、電子鏡、テレビ電話、およびデジタルサイネージを含む。これらの装置では、まず、利用者の画像が撮影される。そして、左右反転処理、明るさおよび色の調整、加工処理等が施され、利用者の画像がディスプレイに表示される。

画像撮影表示装置は、電子鏡機能を有し得る。電子鏡機能によれば、利用者は、ディスプレイで自身の姿を見ることができる。インタラクティブミラーが特許文献１に開示されている。

特開２００９−２８４３６１号公報特開２００２−２３２８５６号公報特許第３１２２５３１号公報特開２０１１−１１８３３０号公報特開２００４−２９７７３３号公報特開２００４−２９７７３４号公報特開２０１２−６０５４７号公報

南敏：「人間−機械インタフェース特集/4.2 テレビ電話機」電子通信学会誌、56、pp.1485-1590、1973年11月号

本開示の実施形態は、実用性の向上された画像撮影表示装置を提供する。

本開示の例示的な実施形態として以下が提供される。

利用者を撮影する撮像装置と、ディスプレイと、前記撮像装置によって取得された被写体像のデータを受け取り、前記ディスプレイに画像を表示させる画像処理装置とを備え、前記撮像装置は、撮像面の法線が水平方向を向くように配置された撮像素子と、前記撮像面上に被写体の像を形成するレンズを有する光学系と、前記撮像素子および前記レンズのうちの少なくとも一方を前記撮像面に平行な方向に沿って移動可能に支持し、移動可能に支持された前記撮像素子またはレンズを前記撮像面に平行な方向に沿ってシフトさせる光軸シフト装置とを有する、画像撮影表示装置。

本開示の画像撮影表示装置によれば、実用性の向上された画像撮影表示装置が提供される。

図１Ａは、実施の形態１における画像撮影表示装置１００ａの上面図である。図１Ｂは、画像撮影表示装置１００ａの正面図である。図１Ｃは、画像撮影表示装置１００ａの側面図である。図１Ｄは、光学系の概略を示す斜視図である。図１Ｅは、画像撮影表示装置１００ａの概略的な構成の例を示すブロック図である。図１Ｆは、測距装置３４を有する画像撮影表示装置１００ｂの構成例を示すブロック図である。図２Ａは、鏡筒１８が２つの部分１８Ａおよび１８Ｂに分割可能に構成された光学系の例を示す模式図である。図２Ｂは、撮像素子１３が光学系１２の光軸ＣＯＦと垂直方向に移動可能に構成された例を示す模式図である。図３Ａは、実施の形態１における画像撮影表示装置１００ａのディスプレイ２０の正面図である。図３Ｂは、図３Ａに対応する側面図である。図３Ｃは、図３Ｂに示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図３Ｄは、実施の形態１における画像撮影表示装置１００ａのディスプレイ２０の正面図である。図３Ｅは、図３Ｄに対応する側面図である。図３Ｆは、図３Ｅに示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図３Ｇは、実施の形態１における画像撮影表示装置１００ａのディスプレイ２０の正面図である。図３Ｈは、図３Ｇに対応する側面図である。図３Ｉは、図３Ｈに示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図４Ａは、鏡に対する、利用者とその像の位置の関係を示す模式図である。図４Ｂは、鏡と利用者との間の距離が２倍になった状態を示す模式図である。図４Ｃは、従来の画像撮影表示装置を用いた電子鏡に表示される利用者の像の例を示す模式図である。図４Ｄは、電子鏡と利用者との間の距離が２倍になった状態を示す模式図である。図４Ｅは、本開示の画像撮影表示装置を用いて、利用者との間の距離に関わらず、画面に等身大の像を表示させた例を示す模式図である。図５Ａは、ハーフミラー２６を備える画像撮影表示装置１００ｃの上面図である。図５Ｂは、画像撮影表示装置１００ｃの正面図である。図５Ｃは、画像撮影表示装置１００ｃの側面図である。図５Ｄは、光軸シフト装置におけるシフト量を視覚的に表した図である。図６Ａは、実施の形態２における画像撮影表示装置１００ｄのディスプレイ２０の正面図である。図６Ｂは、図６Ａに対応する側面図である。図６Ｃは、図６Ｂに示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図６Ｄは、実施の形態２における画像撮影表示装置１００ｄのディスプレイ２０の正面図である。図６Ｅは、図６Ｄに対応する側面図である。図６Ｆは、図６Ｅに示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図６Ｇは、画像撮影表示装置１００ｄの概略的な構成の例を示すブロック図である。図７Ａは、ハーフミラー２６を備える画像撮影表示装置１００ｅの上面図である。図７Ｂは、画像撮影表示装置１００ｅの正面図である。図７Ｃは、画像撮影表示装置１００ｅの側面図である。図７Ｄは、光軸シフト装置におけるシフト量を視覚的に表した図である。図８Ａは、実施の形態３における画像撮影表示装置１００ｆのディスプレイ２０の正面図である。図８Ｂは、図８Ａに対応する側面図である。図８Ｃは、図８Ｂに示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図８Ｄは、実施の形態３における画像撮影表示装置１００ｆのディスプレイ２０の正面図である。図８Ｅは、図８Ｄに対応する側面図である。図８Ｆは、図８Ｅに示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図８Ｇは、画像撮影表示装置１００ｆの概略的な構成の例を示すブロック図である。図９Ａは、画像撮影表示装置１００ｆのディスプレイ２０の正面図である。図９Ｂは、図９Ａに対応する側面図である。図９Ｃは、図９Ｂに示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図９Ｄは、画像撮影表示装置１００ｆのディスプレイ２０の正面図である。図９Ｅは、図９Ｄに対応する側面図である。図９Ｆは、図９Ｅに示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図９Ｇは、画像撮影表示装置１００ｆのディスプレイ２０の正面図である。図９Ｈは、図９Ｇに対応する側面図である。図９Ｉは、図９Ｈに示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図１０Ａは、画像の切り出しを説明するための模式的な図である。図１０Ｂは、切り出しの範囲の一例を示す図である。図１０Ｃは、画像撮影表示装置１００ｇの概略的な構成の例を示すブロック図である。図１１Ａは、画像撮影表示装置１００ｇのディスプレイ２０の正面図である。図１１Ｂは、図１１Ａに対応する側面図である。図１１Ｃは、図１１Ｂに示す状態において取得された画像における、人物の像の切り出し範囲を視覚的に表した図である。図１１Ｄは、画像撮影表示装置１００ｇのディスプレイ２０の正面図である。図１１Ｅは、図１１Ｄに対応する側面図である。図１１Ｆは、図１１Ｅに示す状態において取得された画像における、人物の像の切り出し範囲を視覚的に表した図である。図１１Ｇは、画像撮影表示装置１００ｇのディスプレイ２０の正面図である。図１１Ｈは、図１１Ｇに対応する側面図である。図１１Ｉは、図１１Ｈに示す状態において取得された画像における、人物の像の切り出し範囲を視覚的に表した図である。図１２Ａは、カメラ移動装置１４を備える画像撮影表示装置１００ｈのディスプレイ２０の正面図である。図１２Ｂは、図１２Ａに対応する側面図である。図１２Ｃは、図１２Ｂに示す状態において取得された画像における、人物の像の切り出し範囲を視覚的に表した図である。図１２Ｄは、カメラ移動装置１４を備える画像撮影表示装置１００ｈのディスプレイ２０の正面図である。図１２Ｅは、図１２Ｄに対応する側面図である。図１２Ｆは、図１２Ｅに示す状態において取得された画像における、人物の像の切り出し範囲を視覚的に表した図である。図１２Ｇは、画像撮影表示装置１００ｈの概略的な構成の例を示すブロック図である。図１３Ａは、ディスプレイ移動装置２４を備える画像撮影表示装置１００ｉのディスプレイ２０の正面図である。図１３Ｂは、図１３Ａに対応する側面図である。図１３Ｃは、図１３Ｂに示す状態において取得された画像における、人物の像の切り出し範囲を視覚的に表した図である。図１３Ｄは、ディスプレイ移動装置２４を備える画像撮影表示装置１００ｉのディスプレイ２０の正面図である。図１３Ｅは、図１３Ｄに対応する側面図である。図１３Ｆは、図１３Ｅに示す状態において取得された画像における、人物の像の切り出し範囲を視覚的に表した図である。図１３Ｇは、画像撮影表示装置１００ｉの概略的な構成の例を示すブロック図である。図１４Ａは、画像処理装置３１が数値演算を用いてズーム処理を行うように構成された画像撮影表示装置１００ｊの例を示すブロック図である。図１４Ｂは、画像処理装置３１が数値演算を用いてズーム処理を行うように構成された画像撮影表示装置１００ｋの例を示すブロック図である。図１４Ｃは、画像処理装置３１が数値演算を用いてズーム処理を行うように構成された画像撮影表示装置１００ｌの例を示すブロック図である。図１５Ａは、ある地点Ａに設置された画像撮影表示装置１００ｍの正面図である。図１５Ｂは、ある地点Ａに設置された画像撮影表示装置１００ｍの側面図である。図１５Ｃは、図１５Ｂに示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図１５Ｄは、地点Ａとは異なる地点Ｂに設置された画像撮影表示装置１００ｎの正面図である。図１５Ｅは、地点Ａとは異なる地点Ｂに設置された画像撮影表示装置１００ｎの側面図である。図１５Ｆは、図１５Ｅに示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図１５Ｇは、地点Ａに設置された画像撮影表示装置１００ｍの概略的な構成の例を示すブロック図である。図１６Ａは、ある地点Ａに設置された画像撮影表示装置１００ｍの正面図である。図１６Ｂは、ある地点Ａに設置された画像撮影表示装置１００ｍの側面図である。図１６Ｃは、図１６Ｂに示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図１６Ｄは、地点Ａとは異なる地点Ｂに設置された画像撮影表示装置１００ｎの正面図である。図１６Ｅは、地点Ａとは異なる地点Ｂに設置された画像撮影表示装置１００ｎの側面図である。図１６Ｆは、図１６Ｅに示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図１６Ｇは、地点Ａに設置された画像撮影表示装置１００ｍの概略的な構成の例を示すブロック図である。図１７Ａは、ディスプレイ２０の正面図である。図１７Ｂは、図１７Ａに対応する側面図である。図１７Ｃは、図１７Ｂにおけるカメラの向きを示す図である。図１７Ｄは、ディスプレイ２０の正面図である。図１７Ｅは、図１７Ｄに対応する側面図である。図１７Ｆは、図１７Ｅにおけるカメラの向きを示す図である。図１７Ｇは、ディスプレイ２０の正面図である。図１７Ｈは、図１７Ｇに対応する側面図である。図１７Ｉは、図１７Ｈにおけるカメラの向きを示す図である。図１８Ａは、利用者と画像撮影表示装置のカメラ１０Ｒとの配置を示す模式図である。図１８Ｂは、ディスプレイ２０に表示される利用者の理想的な像の例を示す図である。図１８Ｃは、利用者の、歪みを有する像の例を示す図である。図１８Ｄは、格子状模様の衝立を示す図である。図１８Ｅは、格子状模様の、歪みを有する像の例を示す図である。図１９は、撮像装置１０が備える光軸シフト装置１５の構成の例を示す概略図である。図２０は、本開示の画像撮影表示装置の例示的な動作方法の概要を示すフローチャートである。図２１は、本開示の画像撮影表示装置の他の例示的な動作方法の概要を示すフローチャートである。

本開示の実施形態を説明する前に、本発明者が見出した具体的な課題を説明する。

例えば電子鏡機能を実現しようとするとき、自身の画像との間で視線が一致しない課題があった。それは、ディスプレイ上において自身の顔が映っている位置にカメラを置けない物理的制約に起因する。特許文献１のインタラクティブミラーでは、カメラをディスプレイの横に設置しているため、視線は一致しない。画像撮影表示装置をテレビ電話機能として利用する場合も同様に、相手の画像との間で視線は一致しない。

視線不一致の課題を解決するには、顔の正面（視線）の位置にカメラを設置すればよい。利用者からカメラへ向かう光と、ディスプレイから利用者へ向かう光を、空間的もしくは時間的に分離する方法がある。

空間的に分離する方法として、ハーフミラーを用いる方法（例えば特許文献２）、プロジェクタの投影先にホログラムスクリーンを用いる方法（例えば特許文献３）、細孔の開いたディスプレイの後部に撮像素子を配置する方法（例えば特許文献４）があった。

時間的に分離する方法として、透過型液晶を用いる方法（例えば特許文献５）があった。なお、視線の位置にカメラを設置せず、多視点のカメラの画像から正面画像を合成する方法（例えば特許文献６、７）も知られている。

視線不一致の課題は、上記従来技術によって解決し得るかもしれないが、相対的に大きなディスプレイに利用者の全身を表示させると、像が歪むという別の課題が発生する。従来のテレビ電話では、利用者の全身を表示することはほとんどない。おおよそ胸よりも上が映ればよかった。しかし、電子鏡またはデジタルサイネージでは、利用者の全身が撮影され、大きなディスプレイに表示され得る。このような場合において、撮像装置がディスプレイの外側に配置されると、利用者の体形が歪んで表示されるという問題がある。

図１７Ａ〜図１７Ｉを参照する。図１７Ａ〜図１７Ｉは、比較例にかかる画像撮影表示装置１００Ｒ、１００Ｓおよび１００Ｔにおける、利用者、ディスプレイおよびカメラの配置の例を示す模式図である。図１７Ａおよび図１７Ｂに示す画像撮影表示装置１００Ｒでは、ディスプレイ２０の上部にカメラ１０Ｒが固定されている。図１７Ｄおよび図１７Ｅに示す画像撮影表示装置１００Ｓ、ならびに図１７Ｇおよび図１７Ｈに示す画像撮影表示装置１００Ｔでは、ディスプレイ２０の左右にカメラ１０１および１０２がそれぞれ固定されている。図１７Ａ、図１７Ｄおよび図１７Ｇは、ディスプレイ２０の正面図である。図１７Ｂ、図１７Ｅおよび図１７Ｈは、図１７Ａ、図１７Ｄおよび図１７Ｇにそれぞれ対応する側面図である。図１７Ｃ、図１７Ｆおよび図１７Ｉは、図１７Ｂ、図１７Ｅおよび図１７Ｈにおけるカメラの向きをそれぞれ示す図である。

人間の目の高さは、通常、身長の９割の高さよりも上に位置する。したがって、身長とほぼ同じ大きさのディスプレイを有する画像撮影表示装置であれば、画面の２／３よりも高い位置にカメラが設置される。そうすると、利用者の全身像を捉えるためには、カメラを下方に向ける必要がある。例えば、図１７Ａおよび図１７Ｂに示すように、ディスプレイの上部にカメラ１０Ｒを設置した画像撮影表示装置１００Ｒであれば、カメラ１０Ｒを、より下方に向ける必要がある。

カメラを下方に向けると、人物の像は、下にすぼまったように撮影される。下半身はかなり短足となり、全身のバランスは大きく崩れる。このような像を表示する画像撮影表示装置は、姿見として使用するには不適である。

図１８Ａ〜図１８Ｅを参照して、カメラによって取得される像の歪みをより詳細に説明する。図１８Ａに示す例では、身長１８０ｃｍ、股下８２ｃｍの人が、画像撮影表示装置のカメラ１０Ｒから２００ｃｍ離れて立っている。ここでは、カメラ１０Ｒは、ほぼ視線と同じ高さである、床から１６５ｃｍの高さに設置されている。利用者の像は、ディスプレイ２０の画面の上下いっぱいに表示されているとする。利用者の股は、図１８Ａに示す線分ＡＢ中のＣ点の位置にあるとする。カメラ１０Ｒのレンズを介して撮像素子上に結像される、線分ＡＢの像を線分ＤＥ（股の像はＦの位置）とする。線分ＥＤと平行に点Ａから線を引き、線分ＢＥとの交点をＧ、線分ＡＧと線分ＣＦとの交点をＨとする。すると、撮像素子がとらえる、利用者の股の位置は、線分ＡＧ中の点Ｈの位置である。例えば、実際の股下の比率（ＢＣ／ＡＢ）が４５．６％であったとすると、撮像素子が取得する像における股下の比率（ＥＦ／ＤＥ＝ＧＨ／ＡＧ）は、例えば３９．３％ほどであり得る。この場合、ディスプレイ２０に表示される利用者の画像は、かなり短足に見える。すなわち、本来図１８Ｂに示すように利用者の像がディスプレイ２０に映るべきであるのに、図１８Ｃに示すように利用者の像が映る。人の代わりに図１８Ｄに示すような格子状模様の衝立を撮影した場合には、図１８Ｅに示すように、ディスプレイ２０に表示される格子状模様は、下方がすぼまって見える。

電子鏡機能またはテレビ電話機能を利用する場面においては、利用者の視線と、ディスプレイに表示される人物の視線とを一致できると有益である。なお、視線一致は保ちつつ、画質を向上させたいという要求もある。従来の技術では、視線を一致させることは可能であるものの、画質は劣る。例えば、ハーフミラーまたは透過液晶を用いる方式、細孔を有するディスプレイを用いる方式では、撮像素子に入射する光量が低下するためにノイズが多くなる。また、ホログラムスクリーン、透過液晶等を用いる方式では、スクリーンまたは液晶における透過または反射によって、画像がぼやける。

なお、特許文献７のように、多視点のカメラの画像から正面画像を合成する方式においても、このような課題は生じ得る。図１７Ｄ、図１７Ｅおよび図１７Ｆに示すように、カメラ１０１および１０２が目の高さに設置される場合であっても、利用者の全身を撮影するために、通常、カメラ（ここではカメラ１０１および１０２）はやや下方に向けられる。したがって、下にすぼまった画像を元に画像合成を行うので、高画質はさほど期待できない。

また、図１７Ｇおよび図１７Ｈに示すように、カメラ１０１および１０２を画面の中央に設置した場合は、図１７Ｉに示すように、カメラ（ここではカメラ１０１および１０２）の光軸を床面に平行にできる。しかしながら、視線の一致を実現するためには補正処理が必要である。この補正処理は、画質の劣化を生む。また、オクルージョン（カメラから見て手前側にある部位または物体によってその物体の背後にある他の部位または物体が見えなくなること）の影響を受けたり、肌や髪の毛の細かい再現が困難であったりする。よって、高画質はさほど期待できない。

利用者の体形を少ない歪みで表示することが望まれている。

本開示における実施の形態の概要は、以下である。

本開示の一態様である画像撮影表示装置は、撮像装置と、ディスプレイと、画像処理装置とを備える。撮像装置は、利用者を撮影するように配置されている。画像処理装置は、撮像装置によって取得された被写体像のデータを受け取り、ディスプレイに画像を表示させる。撮像装置は、撮像面の法線が水平方向を向くように配置された撮像素子と、撮像面上に被写体の像を形成する光学系と、光軸シフト装置とを有する。光学系は、撮像面に平行な方向に沿って移動可能に支持されたレンズを有する。光軸シフト装置は、レンズを撮像面に平行な方向に沿ってシフトさせるように構成されている。

本開示の他の一態様である画像撮影表示装置は、撮像装置と、ディスプレイと、画像処理装置とを備える。撮像装置は、利用者を撮影するように配置されている。画像処理装置は、撮像装置によって取得された被写体像のデータを受け取り、ディスプレイに画像を表示させる。撮像装置は、撮像面の法線が水平方向を向くように配置された撮像素子と、撮像面上に被写体の像を形成する光学系と、光軸シフト装置とを有する。撮像素子は、撮像面に平行な方向に沿って移動可能に支持されている。光軸シフト装置は、撮像素子を撮像面に平行な方向に沿ってシフトさせるように構成されている。

画像撮影表示装置は、身長情報取得装置と、身長情報取得装置からの情報に基づいて制御を行う制御部とを備えていてもよい。身長情報取得装置は、利用者の身長または利用者の特定部位の高さの情報を取得してもよい。

ある態様において、撮像装置は、ディスプレイの上部に固定されている。制御部は、身長情報取得装置からの情報に基づいて、利用者の身長または特定部位の高さが低くなるに従って光軸シフト装置のシフト量が大きくなるように光軸シフト装置を制御するように構成されていてもよい。

画像撮影表示装置は、制御部の指示に応じて撮像装置を上下方向に移動させるカメラ移動装置を更に備えていてもよい。制御部は、利用者の身長または特定部位の高さが低くなるに従って撮像装置の高さが低くなるようにカメラ移動装置を制御してもよい。

制御部は、撮像装置の高さが低くなるに従って光軸シフト装置のシフト量が小さくなるように光軸シフト装置を制御してもよい。

画像撮影表示装置は、ディスプレイを上下方向に移動させるディスプレイ移動装置を更に備えていてもよい。撮像装置は、ディスプレイの上部に固定されていてもよい。制御部は、身長情報取得装置からの情報に基づいてディスプレイの高さを変更するようにディスプレイ移動装置を制御してもよい。

本開示の更に他の一態様である画像撮影表示装置の動作方法は、上記のいずれかに記載された画像撮影表示装置の動作方法である。画像撮影表示装置の動作方法は、利用者の身長または特定部位の高さの情報を取得する身長情報取得ステップと、身長情報取得ステップからの情報に基づいて、制御を行う制御ステップとを含む。

制御ステップは、身長情報取得ステップにおいて取得された情報に基づいて、利用者の身長または特定部位の高さが低くなるに従って光軸シフト装置のシフト量が大きくなるように光軸シフト装置を制御するステップを含んでいてもよい。

制御ステップは、身長情報取得ステップにおいて取得された情報に基づいて、利用者の身長または特定部位の高さに応じて撮像装置の高さを設定するステップを含んでいてもよい。

制御ステップは、身長情報取得ステップにおいて取得された情報に基づいて、撮像装置の高さが低くなるに従って光軸シフト装置のシフト量が小さくなるように処理が実行されるステップであってもよい。

制御ステップは、身長情報取得ステップにおいて取得された情報に基づいて、利用者の身長または特定部位の高さに応じてディスプレイの高さを設定するステップを含んでいてもよい。

本開示の更に他の一態様である画像撮影表示装置は、撮像装置と、画像処理装置と、ディスプレイと、身長情報取得装置と、制御部とを備える。撮像装置は、入力光の光軸が床面と平行であり、利用者を撮影する。画像処理装置は、撮像装置からの画像を加工する。ディスプレイは、画像処理装置からの出力を表示する。身長情報取得装置は、利用者の身長または特定部位の高さの情報を取得する。制御部は、身長情報取得装置からの情報に基づいて制御を行う。画像処理装置は、制御部の指示に基づいて、撮像装置によって得られた画像から人物の像を切り出す処理を実行する。

ある態様において、撮像装置は、ディスプレイの上部に固定されている。制御部は、利用者の身長または特定部位の高さが低くなるに従って画像の切り出し位置が低くなるように画像処理装置に処理を実行させてもよい。

画像撮影表示装置は、撮像装置を上下方向に移動させるカメラ移動装置を更に備えていてもよい。制御部は、利用者の身長または特定部位の高さが低くなるに従って撮像装置の高さが低くなるようにカメラ移動装置を制御してもよい。

制御部は、撮像装置の高さが低くなるに従って画像の切り出し位置が高くなるように画像処理装置に処理を実行させてもよい。

画像撮影表示装置は、ディスプレイを上下方向に移動させるディスプレイ移動装置を更に備えていてもよい。撮像装置は、ディスプレイの上部に固定されていてもよい。制御部は、利用者の身長または特定部位の高さに応じてディスプレイの高さを変更するようにディスプレイ移動装置を制御してもよい。

本開示の更に他の一態様である画像撮影表示装置の動作方法は、上記のいずれかに記載の画像撮影表示装置の動作方法である。画像撮影表示装置の動作方法は、利用者の身長または特定部位の高さの情報を取得する身長情報取得ステップと、身長情報取得ステップからの情報に基づいて制御を行う制御ステップと、撮像装置によって得られた画像から人物の像を切り出す画像切り出しステップとを含む。

画像切り出しステップは、利用者の身長または特定部位の高さが低くなるに従い画像の切り出し位置が低くなるように処理が実行されるステップであってもよい。

画像切り出しステップは、身長情報取得ステップにおいて取得された情報に基づいて、撮像装置の高さが低くなるに従って画像の切り出し位置が高くなるように処理が実行されるステップであってもよい。

ある態様において、画像撮影表示装置は、利用者との距離を測定する測距装置を更に備える。撮像装置および画像処理装置の少なくとも一つは、測定された距離と比例関係にある倍率で拡大処理または縮小処理を行ってもよい。

ある態様において、画像処理装置は、利用者の下半身の特定部位を検出し、特定部位の位置を基に倍率を設定する。撮像装置および画像処理装置の少なくとも一つは、その倍率で拡大処理または縮小処理を行ってもよい。

上記の倍率は、利用者が等身大で表示されるように定められてもよい。

ある態様において、画像撮影表示装置は、他の画像撮影表示装置との間で画像データの通信を行う通信装置を更に備える。画像処理装置は、第１の画像処理ブロックと第２の画像処理ブロックとを含んでいてもよい。通信装置は、第１の画像処理ブロックから出力される画像データを他の画像撮影表示装置に送信する。また、通信装置は、他の画像撮影表示装置からの画像データを受信し、他の画像撮影表示装置からの画像データを第２の画像処理ブロックへ与える。

ある態様において、画像撮影表示装置の動作方法は、利用者との間の距離を測定する測距ステップと、測定された距離と比例の関係にある倍率で撮像装置によって得られた画像を拡大または縮小するステップとを含む。

ある態様において、画像撮影表示装置の動作方法は、利用者の下半身の特定部位を検出し、特定部位の位置を基に倍率を設定し、撮像装置によって得られた画像をその倍率で拡大または縮小するステップを含む。

ある態様において、画像撮影表示装置の動作方法は、他の画像撮影表示装置と通信する通信ステップを含む。通信ステップは、画像データを他の画像撮影表示装置に送信すること、および、他の画像撮影表示装置において得られた画像データを受信することの少なくとも一方を含んでいてもよい。

画像処理装置における処理および制御部における制御の少なくとも一方は、プロセッサによって実行されてもよい。

以下、図面を参照しながら、本開示の実施の形態を詳細に説明する。以下で説明する実施形態は、いずれも包括的または具体的な例を示す。以下の実施形態で示される数値、形状、材料、構成要素、構成要素の配置、位置および接続形態、ステップ、ステップの順序等は、一例であり、本開示を限定する主旨ではない。また、以下の実施形態における構成要素のうち、最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。以下の説明において、実質的に同じ機能を有する構成要素は共通の参照符号で示し、同じ説明の繰り返しを省略することがある。

これらの包括的または具体的な態様は、システム、方法、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能なＣＤ−ＲＯＭ等の記録媒体で実現されてもよい。あるいは、システム、装置、方法、集積回路、コンピュータプログラムおよび記録媒体の任意の組み合わせによって実現されてもよい。

（実施の形態１）
本開示の実施の形態１を図１Ａ〜図５Ｄを参照して説明する。図１Ａ〜図１Ｆは、実施の形態１における画像撮影表示装置の例示的な構成を示す模式的な図である。図１Ａは、実施の形態１による画像撮影表示装置１００ａの上面図である。図１Ｂは、画像撮影表示装置１００ａの正面図である。図１Ｃは、画像撮影表示装置１００ａの側面図である。図１Ｄは、光学系の概略を示す斜視図である。図１Ｅは、画像撮影表示装置１００ａの概略的な構成の例を示すブロック図である。以下では、特に断りのない限り、画像撮影表示装置を電子鏡として用いる例を説明する。

図１Ａ、図１Ｂおよび図１Ｃに例示する構成において、電子鏡の利用者を撮影する撮像装置１０がディスプレイ２０の上部に固定されている。図示する例では、ディスプレイ２０は、スタンド２５に固定されている。ディスプレイ２０は、液晶表示装置等の公知の表示装置であってよい。撮像装置１０は、撮像素子と、撮像素子の撮像面上に被写体（ここでは電子鏡の利用者）の像を形成する光学系と、光軸シフト装置とを有する。撮像素子は、撮像装置１０内において、撮像面の法線が概ね水平方向を向くように配置される。撮像素子の例は、ＣＣＤ（Charge Coupled Device）イメージセンサ、ＣＭＯＳ（Complementary Metal-Oxide Semiconductor）イメージセンサである。図１Ｄに示すように、光学系１２は、被写体側（図１Ｄにおいて左側）と撮像素子側（図１Ｄにおいて右側）とに分割可能な機構を有し得る。図１Ｄに示す例では、光学系１２における鏡筒の被写体側の一部分が、後述する光軸シフト装置によって撮像素子の撮像面に平行な方向に沿って移動可能に支持されている。この鏡筒の被写体側の一部分は、典型的には、レンズを含んでいる。光軸シフト装置によって光学系１２における被写体側の一部分をスライドさせることにより、光学系１２における光軸をシフトさせることが可能である。

図２Ａおよび図２Ｂを参照して、光学シフトの原理を説明する。ここでは２通りの例を示す。図２Ａは、鏡筒１８が２つの部分１８Ａおよび１８Ｂに分割可能に構成された例を示す。図示する例において、鏡筒の一部分１８Ａは、撮像素子１３に対して、撮像素子１３の撮像面と垂直方向にずれている。鏡筒の一部分１８Ａは、典型的には、レンズを含む。図２Ａ中の線分ＣＯＦは、鏡筒の一部分１８Ａに含まれるレンズの光軸を模式的に表している。図２Ｂは、撮像面に平行な方向に沿って移動可能に支持された撮像素子を有する撮像装置を用いる例を示す。ここでは、撮像素子は、不図示の光軸シフト装置によって移動可能に支持される。図２Ｂに示す例では、撮像素子１３が光学系１２の光軸ＣＯＦと垂直方向にずれている。このように、光学系１２に対して、光軸シフト装置により撮像素子１３を移動させてもよい。光学系１２の少なくとも一部分と撮像素子１３との相対的な配置を変化させることにより、光軸をシフトさせることができる。このとき、図２Ａ、図２Ｂ共に、被写体（面ＡＣＢ）と撮像面である面ＤＦＥとが平行になるため、被写体と撮像面上に形成される像とが相似となる。すなわち、像の歪みが生じない。よって、かかる構成によれば、短足化のような歪みが生じない、バランスの良い像を表示できる。

図１９は、撮像装置１０が備える光軸シフト装置１５の構成の例を示す概略図である。図示する例では、光軸シフト装置１５は、モータ１５Ａと、ギアの組を有している。例えばモータ（例えばステッピングモータ）１５Ａの軸にウォームギア１５Ｂが取り付けられる。また、例えば分割可能に構成された鏡筒１８の一方（被写体側の一部分１８Ａ）にラック１５Ｃが設けられる。ウォームギア１５Ｂおよびラック１５Ｃは、互いの歯がかみ合うように配置されている。例えば後述する制御部等のコンピュータの制御によってモータ１５Ａに所定の信号を与え、モータの軸を必要な量だけ回転させる。これにより、鏡筒の一部分１８Ａを必要な量だけスライドさせることができる。これにより、鏡筒の一部分１８Ａに支持されたレンズＬを撮像素子（図１９において不図示）に対して必要な量だけ移動させることができる。レンズＬは、撮像素子の撮像面上に被写体の像を形成する。図２Ｂを参照して説明したように、光学系１２の一部（例えば鏡筒の一部分１８Ａに支持されたレンズＬ）に代えて、撮像素子をスライドさせてもよい。なお、光軸をシフトさせるための機構は、図１９に示す例に限定されず、公知の種々の構成を採用し得る。例えば、ラックアンドピニオン式のギアの組、ボールねじ等を使用してレンズまたは撮像素子を移動させてもよい。

図１Ｅを参照する。図１Ｅのブロック図を参照して、実施の形態１における画像撮影表示装置１００ａにおける制御の流れの例を説明する。図示する例において、撮像装置１０は、光学ズーム装置１１、光軸シフト装置１５、撮像素子１３を含んでいる。なお、図１Ｅにおいては、前述の光学系１２の図示が省略されている。他のブロック図においても、光学系１２の図示を省略することがある。

被写体からの光が撮像装置１０に入射する。被写体の像は、光学ズーム装置１１によって光学的にズーム率が調整される。ズーム率の調整は、後述する制御部の制御に基づいて実行され得る。例えば図１Ｅに示す制御部３２は、光学ズーム装置１１における倍率（拡大率または縮小率）を決定し、光学シフト装置１５にシフト量を指示する。倍率の決定方法の具体例は後述する。光軸シフト装置１５によって光軸がシフトされた光学系を介して、撮像素子１３に光が入射する。撮像素子１３において、被写体からの光が電気的な信号に変換される。撮像素子１３から出力された画像信号（または映像信号）は、画像処理装置３１に送られる。画像処理装置３１において左右反転処理等が行われた後、画像信号（または映像信号）がディスプレイ２０へと出力される。後述するように、画像処理装置３１における処理は、専用のプロセッサによって実行され得る。そして、ディスプレイ２０に被写体（ここでは画像撮影表示装置１００ａの利用者）の像が表示される。

画像処理装置３１は、ＤＳＰ（Digital Signal Processor）、ＡＳＳＰ（Application Specific Standard Produce）、ＡＳＩＣ（Application Specific Integrated Circuits）、ＦＰＧＡ（Field Programmable Gate Array）等の専用のプロセッサ（コンピュータ）によって実現されてもよいし、汎用のプロセッサ（コンピュータ）によって実現されてもよい。例えば、画像処理装置３１は、１以上のプロセッサを有し、不図示のメモリまたはＣＤ−ＲＯＭ等の記録媒体から読み出したプログラムを読み出して実行するように構成されていてもよい。プログラムを格納したメモリは、画像処理装置３１とは別個の記憶装置であってもよいし、画像処理装置３１の一部として画像処理装置３１内に配置されていてもよい。

ディスプレイ２０に映し出される、利用者の像における顔の高さは、光軸シフト装置１５を利用した光軸のシフト量で決まる。このシフト量を定めるため、身長情報取得装置３３により利用者の身長を取得してもよい。身長情報取得装置３３によって取得された、利用者の身長に関する情報は、制御部３２に送られる。制御部３２は、例えば身長情報取得装置３３によって取得された情報に基づいて、シフト量を決定する。このシフト量は、制御部３２から光軸シフト装置１５に送られる。光軸シフト装置１５は、制御部３２の制御に基づき、光学系における光軸を指定されたシフト量だけシフトさせる。

制御部３２における制御は、専用のプロセッサによって実行され得る。制御部３２は、上述の画像処理装置３１と同様に、専用のプロセッサ（例えばＤＳＰ、ＡＳＳＰ、ＡＳＩＣまたはＦＰＧＡ）によって実現され得る。制御部３２は、汎用のプロセッサ（コンピュータ）によって実現されてもよい。制御部３２は、１以上のプロセッサを有し、不図示のメモリまたは記録媒体から読み出したプログラムを読み出して実行するように構成されていてもよい。プログラムを格納したメモリは、制御部３２とは別個の記憶装置であってもよいし、制御部３２の一部として制御部３２内に配置されていてもよい。なお、制御部３２と画像処理装置３１とが単一のプロセッサ内の機能ブロックとして実現されてもよい。

身長情報取得装置３３の構成は、特定の構成に限定されない。身長情報取得装置３３は、電波、超音波、赤外光等を利用した種々のセンサーであり得る。身長情報取得装置３３は、利用者による身長の値の入力を受け付けるインターフェースであってもよい。このようなインターフェースの例は、キーボード、タッチパネル、音声入力装置等である。直接身長を取得することに代えて、身長情報取得装置３３は、利用者の特定部位の高さを取得してもよい。例えば、目、鼻、口、耳、首、肩等の位置を検出することにより、これらのうちの少なくとも１つの高さの情報を取得してもよい。

次に、図３Ａ〜図３Ｉを参照して、光軸のシフト量の求め方の例を説明する。シフト量は、例えば、利用者が、ディスプレイに表示された自己の像と視線が一致していると感じる大きさに設定される。

図３Ａ、図３Ｄおよび図３Ｇは、ディスプレイ２０の正面図である。図３Ｂ、図３Ｅおよび図３Ｈは、図３Ａ、図３Ｄおよび図３Ｇにそれぞれ対応する側面図である。図３Ｃ、図３Ｆおよび図３Ｉは、図３Ｂ、図３Ｅおよび図３Ｈにそれぞれ示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。

図３Ａ、図３Ｂおよび図３Ｃは、シフト量が０の場合を示している。このとき、ディスプレイ２０に表示される利用者の像は、表示面のかなり下の方に位置する。当然、利用者の視線は下向きであり、視線も合わない。図３Ｂに示す角βは、利用者の目の位置と撮像装置１０の中心を結ぶ線分、および、利用者の目の位置とディスプレイ２０に表示された利用者の目の位置とを結ぶ線分がなす角を模式的に示している。以下では、この角βを「ずれ角β」と呼ぶことがある。なお、図３中、矢印Ａｒ１は、撮像装置１０またはディスプレイ２０と利用者との間の距離を模式的に示し、矢印Ａｒ２は、ディスプレイ２０に表示された利用者の目の位置と撮像装置１０の中心との間のずれの大きさを模式的に示している。

次に、図３Ｆに例示するように、撮像素子に対して被写体側のレンズが相対的に下方に移動するように、光軸をシフトさせたとする。すると、図３Ｄに示すように、ディスプレイ２０に映る像が上方に上がってくる。図３Ｄ、図３Ｅおよび図３Ｆは、ちょうど利用者の目の高さと、ディスプレイに表示された画像における目の高さとが一致した場合を示している。身長の高い利用者の場合は、このままでもほぼ視線が一致する。ただし、身長の低い利用者であると、図に示すずれ角βが大きいため、視線が合わないことがある。この場合、図３Ｇ、図３Ｈおよび図３Ｉに示すように、更にシフト量を増大させればよい。これにより、ディスプレイ２０に表示される利用者の画像を更に上方にシフトさせることができる。こうすると、利用者の視線が撮像装置１０の近くを向き、ずれ角が小さくなる。したがって、視線を一致させやすい。

このように、ディスプレイ２０の上部に撮像装置１０が固定されている構成においては、撮像素子に対して被写体側のレンズを相対的に下方に移動させると、ディスプレイ２０に映る像が上方に移動する。このとき、ディスプレイ２０に映る像の移動量は、光軸のシフト量が大きいほど大きい。したがって、図１Ａ〜図１Ｃに例示するように、ディスプレイ２０の上部に撮像装置１０が固定されている構成においては、例えば利用者の身長が低くなるに従って、シフト量を増大させればよい。例えば利用者の身長に応じて定められるシフト量に基づいて、制御部３２（図１Ｅ参照）が光軸シフト装置１５の動作を制御してもよい。

下記の表１に、ずれ角βの具体的な数値例を示す。表１は、撮像装置１０またはディスプレイ２０（カメラまたはディスプレイ）からの利用者の距離と、中心からのずれがある場合におけるそのずれ角を示している。

ここで、「中心からのずれ」は、ディスプレイに表示された画像における目の高さと撮像装置の中心の高さとの差を意味する。また、表１中の「ずれ角」は、上述のずれ角βを意味する。「ずれ角」の大きさは、視線のずれの程度を表すといえる。ずれ角の上方向への許容限は１２°であることが知られている（非特許文献１）。つまり、ずれ角βが、許容限である１２°以下であると、利用者は、視線が一致していると感じやすい。本発明者は、ずれ角βを９°程度とすれば、ほとんどの場合において、視線が一致していると利用者に認識され得ることを見出した。この値を考慮すると、例えば、利用者が撮像装置１０またはディスプレイ２０から２ｍ離れている場合には、３０ｃｍ程度までのずれが許容される。つまり、利用者が撮像装置１０またはディスプレイ２０から２ｍ離れている場合、ディスプレイ２０に表示された画像における目の高さと撮像装置１０の中心の高さとの差が３０ｃｍ程度であれば、利用者は、視線が一致していると認識する。これは、十分に実現可能な値である。すなわち、例えば制御部３２は、ディスプレイ２０に表示される画像における利用者の目の高さと、撮像装置１０の中心の高さとの差が３０ｃｍよりも小さくなるように、光軸シフト装置１５を動作させ、シフト量を増大させる制御を実行すればよい。もちろん、このずれが小さいほど、ディスプレイ２０に表示される自分の姿がより自然に感じられることは、言うまでもない。なお、上述の９°との値は一例に過ぎない。ずれ角βの大きさが１２°以下となるような制御が実行されればよい。

このように、本実施の形態によれば、光軸シフト装置１５を用いることで、人物の像を歪みなく表示し得る。また、ディスプレイに表示される利用者の像を、ディスプレイの前の利用者と同じ高さ、または若干上方に表示させることができる。すなわち、視線が一致する全身姿見を実現することが可能になる。

利用者と画像撮影表示装置１００ａとの間の距離に応じて、映し出される利用者の像の大きさの補正を施してもよい。これにより、画像撮影表示装置１００ａに対する利用者の前後の移動に伴う違和感を軽減できる。図４Ａ〜図４Ｅを参照しながらその原理を説明する。

図４Ａおよび図４Ｂは、鏡Ｍｒに映った利用者の像を模式的に示す。実際の鏡では、図４Ａに示すように、鏡Ｍｒを対称面として鏡の反対側に、利用者と同じ大きさ（等身大）の像が存在するとみなせる。このとき、像の大きさを見込む角度の大きさは、図に示すθａである。図４Ｂは、鏡Ｍｒと利用者との間の距離が２倍になった状態を示している。このとき、像の大きさを見込む角度の大きさは、図に示すθｂである。

図４Ｃおよび図４Ｄは、従来の画像撮影表示装置を用いた電子鏡Ｅｍにおける利用者の見え方を比較例として示している。画像撮影表示装置を用いる場合、鏡とは異なり、撮影によって得られた画像がディスプレイに表示される。例えば、図４Ｃに示すように、利用者の像がディスプレイ上に等身大で表示されているとする。このとき、ディスプレイに表示された像の大きさを見込む角度の大きさは、図に示すθｃである。ここでは、θｃの値はθａと同じであるとする。図４Ｃに示す状態から利用者が後ろに下がり、図４Ｄに示すように、電子鏡との間の距離が２倍になったとする。このとき、撮像装置で撮影される利用者の像の大きさは、図４Ｃの場合と比較して１／２になる。そのため、画像撮影表示装置のディスプレイには、図４Ｃに示す像の１／２の大きさで利用者の像が表示される。ディスプレイに表示された像の大きさを見込む角度の大きさは、図に示すθｄである。この値はθｂよりも小さい。すなわち、図４Ｄに示す状態においては、ディスプレイに表示される利用者自身の像は、図４Ｂに示す場合よりも小さい。言い換えれば、電子鏡の場合は実際の鏡よりも、前後の移動の変化に伴う像の大きさの変化が大きい。

そこで、電子鏡との間の距離に関わらず、画面に等身大の像を表示させるようにしてもよい。すなわち、図４Ｅに示すように、電子鏡との間の距離に応じて、ディスプレイ２０に表示させる像の大きさを変化させてもよい。例えば、画像撮影表示装置１００ａと利用者との間の距離が２倍になれば、拡大率を２倍にすればよい。このとき、画面上の像の大きさは等身大で一定となり、角度θｅは実際の鏡を用いたときの角度θｂと同じ大きさになる。すなわち、画像撮影表示装置１００ａと利用者との間の距離に比例するように拡大率を定めればよい。

画像撮影表示装置は、利用者との間の距離を測定する測距装置を有し得る。図１Ｆは、測距装置３４を有する画像撮影表示装置１００ｂの構成例を示している。測距装置３４としては、レーザ距離計等、公知の装置を応用することができる。撮像装置１０にオートフォーカスセンサが組み込まれている場合には、そのオートフォーカスセンサを測距装置３４として使用してもよい。

測距装置３４は、画像撮影表示装置１００ｂと利用者との間の距離を測定する。測距装置３４は、画像撮影表示装置１００ｂと利用者との間の距離を示す情報を制御部３２に送る。制御部３２は、画像撮影表示装置１００ｂと利用者との間の距離に応じて倍率（拡大率または縮小率）を決定する。この倍率は、例えば、画像撮影表示装置と利用者との間の距離が大きくなるほど大きな値に設定される。この倍率は、画像撮影表示装置と利用者との間の距離が小さくなるほど小さな値に設定されてもよい。この倍率は、画像撮影表示装置１００ｂと利用者との間の距離と比例関係にある値であってもよい。制御部３２は、決定した倍率に応じて光学ズーム装置１１を動作させる。光学ズーム装置１１は、制御部３２の制御に基づいて光学的に拡大処理または縮小処理を行う。制御部３２の制御により、画像処理装置３１が、撮像装置１０によって得られた画像の拡大処理または縮小処理を行ってもよい。この場合は、制御部３２によって決定された倍率が制御部３２から画像処理装置３１に送られる（図１Ｆ）。画像処理装置３１は、制御部３２から取得した倍率（例えば拡大率）に基づいて画像の拡大処理（または縮小処理）を実行する。なお、利用者の身長に関する情報に基づいて倍率を決定し、その倍率が制御部３２から画像処理装置３１に送られてもよい（図１Ｅ、図１Ｆ）。このような画像補正は、例えば制御部３２によって実行されてもよい。ここでは、距離に基づいて倍率（拡大率または縮小率）を定めたが、利用者の足元を検出し、利用者の足元が画面最下部に表示されるように倍率を決定してもよい。

なお、ハーフミラーを用いた画像撮影表示装置においても、同様に本開示の技術を適用できる。

図５Ａ〜図５Ｄは、ハーフミラー２６を備える画像撮影表示装置１００ｃの構成例を示す。図５Ａは、画像撮影表示装置１００ｃの上面図である。図５Ｂは、画像撮影表示装置１００ｃの正面図である。図５Ｃは、画像撮影表示装置１００ｃの側面図である。図５Ａ、図５Ｂおよび図５Ｃに示すように、画像撮影表示装置１００ｃは、暗箱（dark box）２７を有する。暗箱２７内に、撮像装置１０、ディスプレイ２０およびハーフミラー２６が配置されている。図５Ｄは、光軸シフト装置におけるシフト量を視覚的に表した図である。

画像撮影表示装置１００ｃでは、撮像装置１０の高さは物理的に自由に設定できる。撮像装置１０の高さは、例えば、平均的な人の目の高さ（例えば床から１６０ｃｍ）に設定してよい。ハーフミラー２６に代えて、透過型液晶表示装置、ホログラムスクリーン等を用いてもよい。そのような画像撮影表示装置も本開示の適用範囲となり得る。

（実施の形態２）
本開示の実施の形態２を図６Ａ〜図６Ｇおよび図７Ａ〜図７Ｄを参照して説明する。図６Ａ〜図６Ｇは、実施の形態２における画像撮影表示装置１００ｄの例示的な構成を示す図である。図６Ａおよび図６Ｄは、ディスプレイ２０の正面図である。図６Ｂおよび図６Ｅは、図６Ａおよび図６Ｄにそれぞれ対応する側面図である。図６Ｃおよび図６Ｆは、図６Ｂおよび図６Ｅにそれぞれ示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図６Ｇは、画像撮影表示装置１００ｄの概略的な構成の例を示すブロック図である。また、図６Ａ、図６Ｂおよび図６Ｃは、利用者の身長が高い場合を示し、図６Ｄ、図６Ｅおよび図６Ｆは、利用者の身長が低い場合を示している。

本実施の形態による画像撮影表示装置１００ｄは、カメラ移動装置１４を備えている。カメラ移動装置１４は、画像撮影表示装置１００ｄでは、利用者の身長に合わせてディスプレイ２０の画面のすぐ手前で撮像装置１０を上下させるように構成されている。利用者の身長よりわずかに高い位置に撮像装置１０を配置すると、視線一致の観点から有益である。カメラ移動装置１４は、例えば、モータとボールねじとの組み合わせによって実現され得る。伸縮アーム、多関節アーム等を用いてもよい。撮像装置１０を所望の高さに移動できれば、カメラ移動装置１４の構成は特定の構成に限定されない。

制御部３２は、身長の情報に合わせてカメラ移動装置１４を制御するように構成されていてもよい。図６Ｇに例示する構成では、制御部３２は、例えば身長情報取得装置３３から、利用者の身長を示す情報を取得し、取得した情報に基づいて撮像装置１０の高さを決定する。撮像装置１０の高さを示す情報は、制御部３２からカメラ移動装置１４に送られる。カメラ移動装置１４は、制御部３２から受け取った情報に基づいて撮像装置１０の高さを変更する。このように、制御部３２は、利用者の身長、または目等の特定部位の高さに応じてカメラ移動装置１４を制御してもよい。撮像装置１０の高さが低くなるほど、ディスプレイ２０上の利用者の像は上方に移動する。したがって、例えば、利用者の身長、または利用者の身体の特定部位（例えば目）の高さが低くなるに従って、撮像装置１０の位置が低くなるように制御が実行される。なお、以下に説明するように、身長の情報に応じて制御部３２が光軸シフト装置１５のシフト量を設定してもよい。

なお、光軸シフト装置１５のシフト量は、撮像装置１０の床からの高さに依存し得る。典型的には、撮像装置１０の床からの高さが高いとシフト量は大きく、床からの高さが低いとシフト量は小さい。例えば、利用者の身長が高い場合には、図６Ａおよび図６Ｂに示すように、撮像装置１０も高い位置にある。そのため、ディスプレイ２０に表示される利用者の像の位置が低いことがある。このとき、図６Ｃに示すように、光軸シフト装置１５のシフト量を比較的大きくすれば、ディスプレイ２０に表示される利用者の像が上方に移動するので、視線の一致を実現させやすい。一方、利用者の身長が低い場合には、図６Ｄおよび図６Ｅに示すように、撮像装置１０も低い位置にある。そのため、ディスプレイ２０に表示される利用者の像の位置は比較的高く、図６Ｆに示すように、光軸シフト装置１５のシフト量は比較的小さくて済む。つまり、ここでは、実施の形態１と異なり、利用者の身長とシフト量との関係が反対になっている。このように、制御部３２は、撮像装置１０の高さが低くなるに従ってシフト量が小さくなるように光軸シフト装置１５を制御するように構成されていてもよい。

本実施の形態によれば、短足化のような歪みを有しない、バランスの良い像を表示できる。また、利用者の身長の高さのすぐ上の位置に撮像装置１０を移動できるので、特に低身長の利用者に対しても視線を一致させることが比較的容易である。

なお、図７Ａ〜図７Ｃに示すように、ハーフミラーを利用してもよい。図７Ａは、ハーフミラー２６を備える画像撮影表示装置１００ｅの上面図である。図７Ｂは、画像撮影表示装置１００ｅの正面図である。図７Ｃは、画像撮影表示装置１００ｅの側面図である。図７Ｄは、光軸シフト装置におけるシフト量を視覚的に表した図である。図７Ａ〜図７Ｄに例示する構成によっても、利用者と画面中の像の視線を比較的容易に一致させ得る。ハーフミラーに代えて、透過型液晶表示装置、ホログラムスクリーン等を用いてもよい。そのような画像撮影表示装置も本開示の適用範囲となり得る。

（実施の形態３）
本開示の実施の形態３を図８Ａ〜図８Ｇおよび図９Ａ〜図９Ｉを参照して説明する。図８Ａ〜図８Ｇは、実施の形態３における画像撮影表示装置１００ｆの例示的な構成を示す図である。図８Ａおよび図８Ｄは、ディスプレイ２０の正面図である。図８Ｂおよび図８Ｅは、図８Ａおよび図８Ｄにそれぞれ対応する側面図である。図８Ｃおよび図８Ｆは、図８Ｂおよび図８Ｅにそれぞれ示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図８Ｇは、画像撮影表示装置１００ｆの概略的な構成の例を示すブロック図である。また、図８Ａ、図８Ｂおよび図８Ｃは、利用者の身長が高い場合を示し、図８Ｄ、図８Ｅおよび図８Ｆは、利用者の身長が低い場合を示している。

本実施の形態では、ディスプレイ２０の上部に撮像装置１０が固定されている。本実施の形態による画像撮影表示装置１００ｆは、ディスプレイ移動装置２４を備える。ディスプレイ移動装置２４は、ディスプレイ２０を上下するように構成されている。ディスプレイ移動装置２４は、例えば、モータとボールねじまたは歯付きベルトとの組み合わせによって実現され得る。ディスプレイ２０を所望の高さに移動できれば、ディスプレイ移動装置２４の構成は特定の構成に限定されない。ディスプレイ２０の高さは、例えば利用者の身長に合わせて設定される。利用者の身長よりわずかに上の位置に撮像装置１０が位置するようにディスプレイ２０の高さを設定すると、視線一致の観点から有益である。

制御部３２は、利用者の身長を示す情報に合わせてディスプレイ移動装置２４を制御するように構成されていてもよい。図８Ｇに例示する構成では、制御部３２は、例えば身長情報取得装置３３から、利用者の身長を示す情報を取得し、取得した情報に基づいてディスプレイ２０の高さを決定する。ディスプレイ２０の高さを示す情報は、制御部３２からディスプレイ移動装置２４に送られる。ディスプレイ移動装置２４は、制御部３２から受け取った情報に基づいてディスプレイ２０の高さを変更する。このように、制御部３２は、利用者の身長、または目等の特定部位の高さに応じてディスプレイ移動装置２４を制御してもよい。

例えば、ディスプレイ２０を上方に移動させると、ディスプレイ２０に固定された撮像装置１０もディスプレイ２０の移動に伴って上方に移動する。すると、ディスプレイ２０上に表示された利用者の像はディスプレイ２０上において下方に移動する。ただし、ここではディスプレイ２０自体が上方に移動しているため、床を基準としたときの利用者の像おける目の高さの変化は比較的小さい。ディスプレイ２０の高さは、像の歪みが許容できる範囲で適宜決定することができる。光軸シフト装置１５のシフト量は一定であってもよい。すなわち、ディスプレイ２０が上下に移動できる範囲において、利用者の身長に関わらず、図８Ｃおよび図８Ｆに例示するように光軸シフト装置１５のシフト量は一定であってもよい。

ディスプレイ２０が比較的小型であれば、ディスプレイ２０が上下移動できる範囲は広い。ディスプレイ２０が大型であると、ディスプレイ２０の移動の下限は、ディスプレイ２０が床に接触する位置である。つまり、ディスプレイ２０が大型であると、上下移動できる範囲は狭い。ディスプレイ２０の移動範囲が不十分である場合には、以下に説明するように、前述の実施の形態１の動作を一部取り入れてもよい。

画像撮影表示装置１００ｆの動作の一例を図９Ａ〜図９Ｉを参照しながら説明する。図９Ａ、図９Ｄおよび図９Ｇは、ディスプレイ２０の正面図である。図９Ｂ、図９Ｅおよび図９Ｈは、図９Ａ、図９Ｄおよび図９Ｇにそれぞれ対応する側面図である。図９Ｃ、図９Ｆおよび図９Ｉは、図９Ｂ、図９Ｅおよび図９Ｈにそれぞれ示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。

図９Ａ、図９Ｂおよび図９Ｃは、利用者に対して相対的に高い位置にディスプレイ２０が位置している状態を示している。ここでは利用者が低身長の場合を想定する。制御部３２は、例えば、身長情報取得装置３３から利用者の身長に関する情報を取得する（図８Ｇ参照）。制御部３２は、取得した情報に基づいてディスプレイ２０の高さを決定する。制御部３２の制御に基づいて、ディスプレイ移動装置２４は、ディスプレイ２０の位置を下げていく。このとき、光軸シフト装置１５のシフト量は変化しない。図９Ｄ、図９Ｅおよび図９Ｆは、ディスプレイ２０が床に到達した状態を示している。ディスプレイ２０は、図示する状態からこれ以上下がらない。ディスプレイ２０の移動量が不十分である場合（つまり、ずれ角が比較的大きい場合）には、制御部３２は、光軸シフト装置１５を制御し、図９Ｉに示すように、光軸シフト装置１５のシフト量を大きくする。そうすると、図９Ｇに示すように、ディスプレイ２０に映し出される利用者の像が更に上方に上がる。したがって、ずれ角が小さくなり、視線が一致する。

このように、本実施形態によれば、ディスプレイ２０が大型かつ十分な移動量が確保できない場合であっても、視線の一致を実現し得る。

図２０は、本開示の画像撮影表示装置の例示的な動作方法の概要を示すフローチャートである。図２０に例示する動作方法は、身長情報取得ステップＳ１０と、制御ステップＳ２０とを含んでいる。身長情報取得ステップＳ１０では、利用者の身長または特定部位の高さの情報を取得する。制御ステップＳ２０では、身長情報取得ステップＳ１０において取得された情報に基づいて、制御を行う。制御ステップＳ２０において、光軸シフト装置１５におけるシフト量、ディスプレイ移動装置２４におけるディスプレイ移動量、カメラ移動装置１４におけるカメラ移動量の少なくとも１つが設定され得る。

（実施の形態４）
本開示の実施の形態４を図１０Ａ〜図１４Ｃおよび図２１を参照して説明する。概略的には、実施の形態４では、より広範囲を撮影可能な撮像装置を用い、画像処理装置３１によって画像中の人物の像を切り出す。

図１０Ａ〜図１０Ｃを参照する。図１０Ａは、画像の切り出しを説明するための模式的な図である。図１０Ｂは、切り出しの範囲の一例を示す図である。図１０Ｃは、本実施形態による画像撮影表示装置１００ｇの概略的な構成の例を示すブロック図である。

図１０Ａに示すように、光軸が床と平行に設置された撮像装置１０ｇを用いて利用者の全身を撮影すれば、利用者と撮像面上の像とが平行になるため、撮像面上に形成される利用者の姿は相似になる。したがって、形の歪みは生じない。本実施の形態では、利用者の全身を撮影可能な十分に大きい撮像面を有する撮像素子１３ｇを使用する。

図１０Ｂは、撮像素子１３ｇによって取得される画像の一例を模式的に示している。図１０Ｂ中、破線の長方形ＡＢＣＤは、撮像素子１３ｇによって撮像される範囲を模式的に示している。図１０Ｂに示すように、撮像装置１０からの画像は、長方形ＡＢＣＤのように広い範囲が撮影された画像となる。本実施形態では、広い範囲が撮影された画像から人物を含む範囲ＥＦＧＨを切り出す。この切り出し処理は、画像処理装置３１によって実行され得る。なお、長方形ＡＢＣＤおよび長方形ＥＦＧＨの頂点の位置は、図１０Ａ中にも示されている。

図１０Ｃを参照する。図１０Ｃに例示する構成において、撮像装置１０ｇは、実施の形態１による画像撮影表示装置と同様にディスプレイ２０に固定されている。画像撮影表示装置１００ｇでは、撮像装置１０ｇは、光軸シフト装置を有しない。画像撮影表示装置１００ｇでは、撮像素子１３ｇから出力された画像信号（または映像信号）が画像処理装置３１に送られ、制御部３２が、画像中における人物の像の切り出し位置を決定する。切り出し位置を指定する情報は、制御部３２から画像処理装置３１に送られる。画像処理装置３１は、制御部３２によって指示された切り出し位置に基づいて人物の像を切り出す。

切り出し位置とディスプレイ２０上における利用者の像の位置との関係を、図１１Ａ〜図１１Ｉを参照しながら説明する。図１１Ａ〜図１１Ｉは、切り出し位置の例を説明するための図である。図１１Ａ、図１１Ｄおよび図１１Ｇは、ディスプレイ２０の正面図である。図１１Ｂ、図１１Ｅおよび図１１Ｈは、図１１Ａ、図１１Ｄおよび図１１Ｇにそれぞれ対応する側面図である。図１１Ｃ、図１１Ｆおよび図１１Ｉは、図１１Ｂ、図１１Ｅおよび図１１Ｈにそれぞれ示す状態において取得された画像における、人物の像の切り出し範囲を視覚的に表した図である。

図１１Ａ、図１１Ｂおよび図１１Ｃは、撮影された範囲（図１０Ｂに示す長方形ＡＢＣＤを参照）の中央の領域を切り出した場合を示す。この場合、ディスプレイ２０のかなり下の方に利用者の像が映し出される。当然、利用者の視線は下向きになり、視線も合わない。ここで、図１１Ｄ、図１１Ｅおよび図１１Ｆに示すように、切り出し位置を下げたとする。すると、ディスプレイ２０に映る人物の像は上方に移動する。図１１Ｄ、図１１Ｅおよび図１１Ｆは、ちょうど利用者の目の高さと人物の像の目の高さとが一致した場合を示している。身長の高い利用者であれば、このままでもほぼ視線が一致する。しかしながら、利用者の身長が低いとずれ角が大きいため、視線が合わないことがある。この場合は、図１１Ｇ、図１１Ｈおよび図１１Ｉに示すように更に切り出し位置を下げればよい。これにより、ディスプレイ２０に表示される人物の像を更に上方に移動できる。ディスプレイ２０に表示される人物の像を更に上方に移動させることにより、利用者が撮像装置１０の方向を向くようになり、ずれ角が小さくなる。したがって、視線が一致する。このように、利用者の身長（または目等の特定部位の高さ）が低くなるに従って画像の切り出し位置を低くしてもよい。

画像撮影表示装置１００ｇは、実施の形態２と同様に、カメラ移動装置１４を備え得る。すなわち、画像撮影表示装置１００ｇにおいて撮像装置１０が上下に移動するように構成されていてもよい。

図１２Ａ〜図１２Ｇを参照して、カメラ移動装置１４を備える画像撮影表示装置１００ｈの動作の一例を説明する。図１２Ａおよび図１２Ｄは、ディスプレイ２０の正面図である。図１２Ｂおよび図１２Ｅは、図１２Ａおよび図１２Ｄにそれぞれ対応する側面図である。図１２Ｃおよび図１２Ｆは、図１２Ｂおよび図１２Ｅにそれぞれ示す状態において取得された画像における、人物の像の切り出し範囲を視覚的に表した図である。図１２Ｇは、画像撮影表示装置１００ｈの概略的な構成の例を示すブロック図である。

利用者の身長が高い場合には、図１２Ａおよび図１２Ｂに例示するように、撮像装置１０は高い位置にある。このとき、図１２Ｃに示すように、取得された画像中の比較的下方の領域が切り出される。利用者の身長が低い場合には、図１２Ｄおよび図１２Ｅに例示するように、カメラ移動装置１４によって撮像装置１０が低い位置に移動させられる。このとき、図１２Ｆに示すように、取得された画像中の人物の位置は、撮像装置１０が高い位置にあった場合と比較して上方に移動する。すなわち、図１２Ｃに示す例と比較して、より上方の領域を切り出せばよい。このように、撮像装置１０が上下に移動可能である場合には、撮像装置１０の位置が低くなるに従って画像の切り出し位置を高くしてもよい。例えば制御部３２は、身長情報取得装置３３から、利用者の身長を示す情報を取得し、取得した情報に基づいて画像処理装置３１に切り出し位置を指示する。

画像撮影表示装置は、実施の形態３と同様に、ディスプレイ移動装置２４を備え得る。すなわち、画像撮影表示装置においてディスプレイ２０が上下に移動するように構成されていてもよい。

図１３Ａ〜図１３Ｇを参照して、ディスプレイ移動装置２４を備える画像撮影表示装置１００ｉの動作の一例を説明する。図１３Ａおよび図１３Ｄは、ディスプレイ２０の正面図である。図１３Ｂおよび図１３Ｅは、図１３Ａおよび図１３Ｄにそれぞれ対応する側面図である。ここでは、撮像装置１０は、ディスプレイ２０に固定されている。図１３Ｃおよび図１３Ｆは、図１３Ｂおよび図１３Ｅにそれぞれ示す状態において取得された画像における、人物の像の切り出し範囲を視覚的に表した図である。図１３Ｇは、画像撮影表示装置１００ｉの概略的な構成の例を示すブロック図である。

この場合は、例えば利用者の身長に応じた高さにディスプレイ２０を配置できるので、図１３Ｃおよび図１３Ｆに示す例のように、利用者の身長、すなわち撮像装置１０の高さに関わらず、切り出し位置を一定にすることもできる。なお、ディスプレイ２０が床に付いた場合（下限位置に達した場合）には、切り出し位置を下げることにより、ディスプレイ２０に表示される人物の像の位置を上げることができる。これにより、利用者の視線を撮像装置１０に近い方向に向けることができる。

このように、本実施の形態では、より大きな撮像面を有する撮像素子１３ｇを用いるものの、より簡易な構成により、人物の像を歪みなく表示できる。画像撮影表示装置において撮像装置１０とディスプレイ２０とが共に上下に移動可能に構成されていてもよい。

なお、画像撮影表示装置において光学ズーム装置１１は必須ではない。例えば、画像処理装置３１が数値演算を用いてズーム処理を行ってもよい。図１４Ａ、図１４Ｂおよび図１４Ｃは、それぞれ、そのような構成を有する画像撮影表示装置１００ｊ、１００ｋおよび１００ｌの例を示すブロック図である。図１４Ａ、図１４Ｂおよび図１４Ｃは、それぞれ、図１０Ｃ、図１２Ｇおよび図１３Ｇに例示する構成から光学ズーム装置１１を除いた構成に対応する。これらの構成においては、制御部３２が、例えば切り出し位置と倍率とを画像処理装置３１に指示する。このような構成によれば、より簡単な構造を有する撮像装置１０ｇを用いて、人物の歪みのない像を映しだす画像撮影表示装置を提供することができる。

図２１は、本開示の画像撮影表示装置の他の例示的な動作方法の概要を示すフローチャートである。図２１に例示する動作方法は、身長情報取得ステップＳ１０と、制御ステップＳ２０と、画像切り出しステップＳ３０とを含んでいる。身長情報取得ステップＳ１０では、利用者の身長または特定部位の高さの情報を取得する。制御ステップＳ２０では、身長情報取得ステップＳ１０において取得された情報に基づいて、制御を行う。画像切り出しステップＳ３０では、撮像装置によって得られた画像から人物の像を切り出す。制御ステップＳ２０において、ディスプレイ移動装置２４におけるディスプレイ移動量、カメラ移動装置１４におけるカメラ移動量の少なくとも１つが設定されてもよい。画像切り出しステップＳ３０においては、利用者の身長または特定部位の高さが低くなるに従って画像の切り出し位置が低くなるように処理が実行され得る。また、画像切り出しステップＳ３０においては、撮像装置１０の高さが低くなるに従って画像の切り出し位置が高くなるように処理が実行され得る。

（実施の形態５）
本開示の実施の形態５を、図１５Ａ〜図１５Ｇを参照して説明する。本実施の形態では、画像撮影表示装置を用いた遠隔コミュニケーションシステムを例示する。図１５Ａ〜図１５Ｇは、遠隔コミュニケーションシステム２００の構成例を説明するための模式図である。図１５Ａおよび図１５Ｂは、ある地点Ａに設置された画像撮影表示装置１００ｍを示している。図１５Ｄおよび図１５Ｅは、地点Ａとは異なる地点Ｂに設置された画像撮影表示装置１００ｎを示している。図１５Ａおよび図１５Ｄは、ディスプレイ２０の正面図である。図１５Ｂおよび図１５Ｅは、図１５Ａおよび図１５Ｄにそれぞれ対応する側面図である。図１５Ｃおよび図１５Ｆは、図１５Ｂおよび図１５Ｅにそれぞれ示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図１５Ｇは、地点Ａに設置された画像撮影表示装置１００ｍの概略的な構成の例を示すブロック図である。

ここでは、実施の形態２のように、カメラ移動装置１４を備え、撮像装置１０が上下に移動可能である画像撮影表示装置１００ｍおよび１００ｎを用いる。また、そのような画像撮影表示装置１００ｍおよび１００ｎを用いて、身長が異なる二人が遠隔コミュニケーションを行う例を説明する。例えば、地点Ａに低身長、地点Ｂに高身長の人がいるとする。

地点Ａでは、図１５Ａに示すように、画像撮影表示装置１００ｍのディスプレイ２０に、地点Ｂの高身長の人が映っている。画像撮影表示装置１００ｍのディスプレイ２０に映し出される映像は、地点Ｂにおいて画像撮影表示装置１００ｎによって撮影された映像である。このとき、地点Ａに設置された画像撮影表示装置１００ｍでは、制御部３２は、図１５Ｂに示すように、ディスプレイ２０に映し出された高身長の人の頭の位置の少し上に撮像装置１０が位置するようにカメラ移動装置１４を制御する。一方、地点Ｂでは、図１５Ｄに示すように、画像撮影表示装置１００ｎのディスプレイ２０に、地点Ａの低身長の人が映っている。画像撮影表示装置１００ｎのディスプレイ２０に映し出される映像は、地点Ａにおいて画像撮影表示装置１００ｍによって撮影された映像である。このとき、地点Ｂに設置された画像撮影表示装置１００ｎでは、制御部３２は、図１５Ｅに示すように、ディスプレイ２０に映し出された低身長の人の頭の位置の少し上に撮像装置１０が位置するようにカメラ移動装置１４を制御する。すなわち、一方の利用者の所にある画像撮影表示装置の撮像装置１０の高さは、相手の身長に依存する。

制御の流れの具体例を、図１５Ｇのブロック図を用いて説明する。なお、地点Ｂに設置された画像撮影表示装置１００ｎは、地点Ａに設置された画像撮影表示装置１００ｍと同様の構成を有し得る。そのため、図示および説明を省略する。図示する例において、画像撮影表示装置１００ｍは、他の画像撮影表示装置（ここでは地点Ｂの画像撮影表示装置１００ｎ）との間で画像データ等の通信を行う通信装置（典型的には通信回路）３５を備えている。ここでは、撮像装置１０は、光学ズーム装置１１、光軸シフト装置１５、撮像素子１３を含んでいる。

被写体からの光が撮像装置１０に入射する。被写体の像は、光学ズーム装置１１によって光学的にズーム率が調整される。光学ズーム装置１１におけるズーム率は、測距装置３４からの距離情報に基づいて、制御部３２によって決定され得る。光軸シフト装置１５によって光軸がシフトされた光学系を介して、撮像素子１３に光が入射する。撮像素子１３において被写体からの光が電気的な信号に変換される。撮像素子１３から出力された映像信号（または画像信号）は、画像処理装置３１に入力される。図１５Ｇに例示する構成では、画像処理装置３１は、第１の画像処理ブロック３１Ａおよび第２の画像処理ブロック３１Ｂを含む。画像処理装置３１に入力された信号は、第１の画像処理ブロック３１Ａにおいて画質補正等の画像処理が行われる。第１の画像処理ブロック３１Ａが、制御部３２によって決定された倍率に基づいて画像の拡大処理または縮小処理を実行してもよい。第１の画像処理ブロック３１Ａは、画像データの送信用の信号処理を実行する信号処理回路であり得る。画像処理が施された画像データは、通信装置３５を介して、例えば光通信により他の画像撮影表示装置へと送信される。ここでは、身長情報取得装置３３によって取得される、地点Ａの利用者の身長に関する情報も、制御部３２および通信装置３５を介して画像撮影表示装置へと送信される。

また、通信装置３５は、他の画像撮影表示装置（ここでは地点Ｂの画像撮影表示装置１００ｎ）から送信された情報を受信する。画像撮影表示装置１００ｎから送信される情報には、画像撮影表示装置１００ｎによって取得された画像データと、地点Ｂの利用者の身長に関する情報とが含まれ得る。画像撮影表示装置１００ｎから送られてきた画像データは、通信装置３５を介して画像処理装置３１に入力される。画像撮影表示装置１００ｎからの画像データは、第２の画像処理ブロック３１Ｂにおいて、画質補正、ディスプレイのサイズに応じた拡大処理、縮小処理等の画像処理が行われる。第２の画像処理ブロック３１Ｂは、受信した信号に対する処理を実行する信号処理回路であり得る。画像処理後のデータ（例えば映像信号）はディスプレイ２０へと出力され、ディスプレイ２０に地点Ｂの利用者の画像が表示される。なお、地点Ｂの利用者の身長に関する情報は、通信装置３５を介して制御部３２に送られる。制御部３２は、その身長に関する情報に応じてカメラ移動装置１４を制御する。これにより、撮像装置１０の高さを変更する。また、制御部３２は、撮像装置１０の高さに応じて光軸シフト装置１５のシフト量を制御する。

本実施形態によれば、遠隔地にいる利用者の体形を少ない歪みで表示することができる。また、ディスプレイ２０に映し出される相手の顏のすぐ上側に撮像装置１０を移動させることが可能である。ディスプレイ２０に映し出される相手の顏のすぐ上側に撮像装置１０が位置するように制御することにより、ずれ角を１２°以下にできる。したがって、お互いの視線を一致させることが可能である。

画像撮影表示装置１００ｍおよび１００ｎの構成は、実施の形態２のように撮像装置１０が上下に移動可能な構成に限定されない。実施の形態１のように、撮像装置１０が固定された画像撮影表示装置を用いてもよい。実施の形態３のように、撮像装置１０がディスプレイ２０に固定され、ディスプレイ２０が上下に移動可能な画像撮影表示装置を用いてもよい。例えば、制御部３２は、他の画像撮影表示装置から送信される、相手の身長に関する情報に基づいて、光軸シフト装置１５におけるシフト量、ディスプレイ移動装置２４におけるディスプレイ移動量、カメラ移動装置１４におけるカメラ移動量の少なくとも１つを設定するように構成されていてもよい。

（実施の形態６）
本開示の実施の形態６を、図１６Ａ〜図１６Ｇを参照して説明する。本実施の形態も、画像撮影表示装置を用いた遠隔コミュニケーションシステムの例である。画像撮影表示装置としては、実施の形態５と同様の構成を有する画像撮影表示装置を用い得る。

図１６Ａ〜図１６Ｇは、遠隔コミュニケーションシステムの他の構成例を説明するための模式図である。図１６Ａおよび図１６Ｂは、ある地点Ａに設置された画像撮影表示装置１００ｍを示している。図１６Ｄおよび図１６Ｅは、地点Ａとは異なる地点Ｂに設置された画像撮影表示装置１００ｎを示している。図１６Ａおよび図１６Ｄは、ディスプレイ２０の正面図である。図１６Ｂおよび図１６Ｅは、図１６Ａおよび図１６Ｄにそれぞれ対応する側面図である。図１６Ｃおよび図１６Ｆは、図１６Ｂおよび図１６Ｅにそれぞれ示す状態における、光軸シフト装置におけるシフト量を視覚的に表した図である。図１６Ｇは、地点Ａに設置された画像撮影表示装置１００ｍの概略的な構成の例を示すブロック図である。地点Ｂに設置された画像撮影表示装置１００ｎは、地点Ａに設置された画像撮影表示装置１００ｍと同様の構成を有し得る。そのため、図示および説明を省略する。

実施の形態５との相違点は、相手の身長に関わらず、画面に映る相手の顔の高さを、自分の顔と同じ高さに表示することである。本実施形態では、制御部３２は、利用者の身長よりわずかに上の位置に撮像装置１０が位置するように、カメラ移動装置１４を制御する。

制御の流れの具体例を、図１６Ｇのブロック図を用いて説明する。本実施形態では、身長情報取得装置３３によって得られた利用者の身長情報を、制御部３２によるカメラ移動装置１４の制御に利用する。例えば、地点Ａに設置された画像撮影表示装置１００ｍは、身長情報取得装置３３により、地点Ａの利用者の身長に関する情報を取得する。画像撮影表示装置１００ｍにおける制御部３２は、地点Ａの利用者の身長に関する情報に基づき、画像撮影表示装置１００ｍにおけるカメラ移動装置１４を制御する。これにより、地点Ａの利用者の身長よりわずかに上の位置に撮像装置１０が移動する。このとき、光軸シフト装置１５のシフト量は、利用者の身長に依らない一定値であってもよい。

画像撮影表示装置１００ｍのディスプレイ２０には、画像撮影表示装置１００ｎによって撮影された地点Ｂの利用者の画像が表示される。このとき、制御部３２は、地点Ａの利用者の身長に関する情報に基き、地点Ｂの利用者の顔が地点Ａの利用者の顔とほぼ同じ高さに表示されるように画像処理装置３１を制御する。地点Ｂの利用者の像の表示に際して、地点Ｂの利用者の像の切り出しが実行されてもよい。これにより、図１６Ａに示すように、相手の顔が利用者の顔と同じ高さに映し出される。

地点Ａの画像撮影表示装置１００ｍにおける処理と同様の処理が、地点Ｂの画像撮影表示装置１００ｎにおいても実行される。すなわち、画像撮影表示装置１００ｎにおける制御部３２は、地点Ｂの利用者の身長に関する情報に基き、地点Ａの利用者の顔が地点Ｂの利用者の顔とほぼ同じ高さに表示されるように画像処理装置３１を制御する。これにより、図１６Ｄに示すように、相手の顔を利用者の顔と同じ高さに映し出すことが可能である。

本実施形態によれば、遠隔地にいる利用者の体形を少ない歪みで表示することができる。また、利用者の身長よりわずかに上の位置に撮像装置１０が配置されるので、ずれ角を１２°以下にできる。したがって、お互いの視線を一致させることが可能である。

なお、前述した種々の態様は、矛盾が生じない限り互いに組み合わせることが可能である。

本開示にかかる画像撮影表示装置は、電子鏡、試着シミュレーションシステム等として有用である。また、本開示にかかる画像撮影表示装置は、遠隔コミュニケーション装置等としても利用できる。

１０撮像装置
１０１カメラ
１０２カメラ
１１光学ズーム装置
１２光学系
１３撮像素子
１４カメラ移動装置
１５光軸シフト装置
２０ディスプレイ
２４ディスプレイ移動装置
２５スタンド
２６ハーフミラー
２７暗箱
３１画像処理装置
３２制御部
３３身長情報取得装置
３４測距装置
３５通信装置

Claims

利用者を撮影する撮像装置と、
ディスプレイと、
前記撮像装置によって取得された被写体像のデータを受け取り、前記ディスプレイに画像を表示させる画像処理装置と、
前記利用者の身長または前記利用者の特定部位の高さの情報を取得する身長情報取得装置と、
前記身長情報取得装置からの情報に基づいて制御を行う制御部と、
を備え、
前記撮像装置は、
撮像面の法線が水平方向を向くように配置された撮像素子と、
前記撮像面上に被写体の像を形成するレンズを有する光学系と、
前記撮像素子および前記レンズのうちの少なくとも一方を前記撮像面に平行な方向に沿って移動可能に支持し、移動可能に支持された前記撮像素子またはレンズを前記撮像面に平行な方向に沿ってシフトさせる光軸シフト装置と、
を有し、
前記撮像装置は、前記ディスプレイの上部に固定されており、
前記制御部は、前記身長情報取得装置からの情報に基づいて、前記利用者の身長または前記特定部位の高さが低くなるに従って前記光軸シフト装置のシフト量が大きくなるように前記光軸シフト装置を制御する、画像撮影表示装置。
前記制御部の指示に応じて前記撮像装置を上下方向に移動させるカメラ移動装置を更に備え、
前記制御部は、前記利用者の身長または前記特定部位の高さが低くなるに従って前記撮像装置の高さが低くなるように前記カメラ移動装置を制御する、請求項１に記載の画像撮影表示装置。
利用者を撮影する撮像装置と、
ディスプレイと、
前記撮像装置によって取得された被写体像のデータを受け取り、前記ディスプレイに画像を表示させる画像処理装置と、
前記利用者の身長または前記利用者の特定部位の高さの情報を取得する身長情報取得装置と、
前記身長情報取得装置からの情報に基づいて制御を行う制御部と、
前記制御部の指示に応じて前記撮像装置を上下方向に移動させるカメラ移動装置と、
を備え、
前記撮像装置は、
撮像面の法線が水平方向を向くように配置された撮像素子と、
前記撮像面上に被写体の像を形成するレンズを有する光学系と、
前記撮像素子および前記レンズのうちの少なくとも一方を前記撮像面に平行な方向に沿って移動可能に支持し、移動可能に支持された前記撮像素子またはレンズを前記撮像面に平行な方向に沿ってシフトさせる光軸シフト装置と、
を有し、
前記制御部は、前記利用者の身長または前記特定部位の高さが低くなるに従って前記撮像装置の高さが低くなるように前記カメラ移動装置を制御し、かつ、前記撮像装置の高さが低くなるに従って前記光軸シフト装置のシフト量が小さくなるように前記光軸シフト装置を制御する、画像撮影表示装置。
前記ディスプレイを上下方向に移動させるディスプレイ移動装置を更に備え、
前記撮像装置は、前記ディスプレイの上部に固定されており、
前記制御部は、前記身長情報取得装置からの情報に基づいて前記ディスプレイの高さを変更するように前記ディスプレイ移動装置を制御する、請求項１から３いずれかに記載の画像撮影表示装置。
前記画像処理装置における処理および前記制御部における制御の少なくとも一方は、プロセッサによって実行される、請求項１から４のいずれかに記載の画像撮影表示装置。
利用者を撮影する撮像装置と、
ディスプレイと、
前記撮像装置によって取得された被写体像のデータを受け取り、前記ディスプレイに画像を表示させる画像処理装置と、
を備え、
前記撮像装置は、
撮像面の法線が水平方向を向くように配置された撮像素子と、
前記撮像面上に被写体の像を形成するレンズを有する光学系と、
前記撮像素子および前記レンズのうちの少なくとも一方を前記撮像面に平行な方向に沿って移動可能に支持し、移動可能に支持された前記撮像素子またはレンズを前記撮像面に平行な方向に沿ってシフトさせる光軸シフト装置と、
を有し、
前記光軸シフト装置は、前記撮像装置の中心の高さと、前記ディスプレイに表示される利用者の画像の目の高さとの差が３０ｃｍよりも小さくなるようにシフト量を調節し、これにより、前記ディスプレイは、撮影された前記利用者の全身を歪みなく表示する、画像撮影表示装置。
前記ディスプレイは、前記利用者を等身大で表示する、請求項６に記載の画像撮影表示装置。
入力光の光軸が床面と平行であり、利用者の全身を撮影する撮像装置と、
前記撮像装置からの画像を加工する画像処理装置と、
前記画像処理装置からの出力を表示するディスプレイと、
前記利用者の身長または特定部位の高さの情報を取得する身長情報取得装置と、
前記身長情報取得装置からの情報に基づいて制御を行う制御部と、
を備え、
前記画像処理装置は、前記制御部の指示に基づき、前記利用者の身長または前記特定部位の高さに応じて、前記撮像装置の中心の高さと、前記ディスプレイに表示される利用者の画像の目の高さとの差が３０ｃｍよりも小さくなるように、前記撮像装置によって得られた画像から人物の像を切り出す処理を実行し、これにより、前記ディスプレイは、前記画像処理装置からの出力に基づき、前記利用者の全身を歪みなく表示する、画像撮影表示装置。
前記撮像装置は、前記ディスプレイの上部に固定されており、
前記制御部は、前記利用者の身長または前記特定部位の高さが低くなるに従って画像の切り出し位置が低くなるように前記画像処理装置に前記処理を実行させる、請求項８に記載の画像撮影表示装置。
前記撮像装置を上下方向に移動させるカメラ移動装置を更に備え、
前記制御部は、前記利用者の身長または前記特定部位の高さが低くなるに従って前記撮像装置の高さが低くなるように前記カメラ移動装置を制御する、請求項８に記載の画像撮影表示装置。
前記制御部は、前記撮像装置の高さが低くなるに従って画像の切り出し位置が高くなるように前記画像処理装置に前記処理を実行させる、請求項１０に記載の画像撮影表示装置。
前記ディスプレイを上下方向に移動させるディスプレイ移動装置を更に備え、
前記撮像装置は、前記ディスプレイの上部に固定されており、
前記制御部は、前記利用者の身長または前記特定部位の高さに応じて前記ディスプレイの高さを変更するように前記ディスプレイ移動装置を制御する、請求項８に記載の画像撮影表示装置。
前記画像処理装置における前記処理および前記制御部における制御の少なくとも一方は、プロセッサによって実行される、請求項８に記載の画像撮影表示装置。
利用者を撮影する撮像装置と、
ディスプレイと、
前記撮像装置によって取得された被写体像のデータを受け取り、前記ディスプレイに画像を表示させる画像処理装置と、
を備え、
前記撮像装置は、
撮像面の法線が水平方向を向くように配置された撮像素子と、
前記撮像面上に被写体の像を形成するレンズを有する光学系と、
前記撮像素子および前記レンズのうちの少なくとも一方を前記撮像面に平行な方向に沿って移動可能に支持し、移動可能に支持された前記撮像素子またはレンズを前記撮像面に平行な方向に沿ってシフトさせる光軸シフト装置と、
を有し、
前記画像処理装置は、前記利用者の下半身の特定部位を検出し、前記特定部位の位置を基に倍率を設定し、
前記撮像装置および前記画像処理装置の少なくとも一つは、前記倍率で拡大処理または縮小処理を行う、画像撮影表示装置。
前記利用者との距離を測定する測距装置を更に備え、
前記撮像装置および前記画像処理装置の少なくとも一つは、測定された距離と比例関係にある倍率で拡大処理または縮小処理を行う、請求項１、２、６、７または１４に記載の画像撮影表示装置。
前記倍率は、前記利用者が等身大で表示される大きさを有する、請求項１５に記載の画像撮影表示装置。
他の画像撮影表示装置との間で画像データの通信を行う通信装置を更に備え、
前記画像処理装置は、第１の画像処理ブロックと第２の画像処理ブロックとを含み、
前記通信装置は、
前記第１の画像処理ブロックから出力される画像データを前記他の画像撮影表示装置に送信し、
前記他の画像撮影表示装置からの画像データを受信し、前記他の画像撮影表示装置からの前記画像データを前記第２の画像処理ブロックへ与える、請求項１に記載の画像撮影表示装置。
請求項１に記載された画像撮影表示装置の動作方法であって、
前記利用者の身長または特定部位の高さの情報を取得する身長情報取得ステップと、
前記身長情報取得ステップからの情報に基づいて、制御を行う制御ステップと、
を含む、画像撮影表示装置の動作方法。
請求項８に記載の画像撮影表示装置の動作方法であって、
前記利用者の身長または特定部位の高さの情報を取得する身長情報取得ステップと、
前記身長情報取得ステップからの情報に基づいて制御を行う制御ステップと、
前記撮像装置によって得られた画像から人物の像を切り出す画像切り出しステップと、を含む、画像撮影表示装置の動作方法。