JP2014212473A - 通信装置、及び頭部装着表示装置 - Google Patents

Abstract

【課題】撮像画像に含まれるマスクすべき対象物を適切にマスクする。
【解決手段】通信装置は、画像を撮像する撮像部と、撮像部が撮像した撮像画像を所定の期間遅延させた遅延画像を出力する遅延部と、遅延部から出力された遅延画像のうちの指定された領域をマスクするマスク処理部と、少なくともマスク処理部によってマスクされた遅延画像を送信する通信部と、撮像部が撮像した撮像画像を表示部に表示させるとともに、マスク処理部にマスクさせる領域を指定された領域として取得し、遅延画像における指定された領域をマスク処理部にマスクさせる制御部とを備える。
【選択図】図８

Description

本発明は、通信装置、及び頭部装着表示装置に関する。

近年、テレビ電話やテレビ会議など、撮像した撮像画像（動画像）を見ながらコミュニケーションを行う技術が知られている（例えば、特許文献１を参照）。特許文献１に記載の技術では、相手に画像を送信することが好ましくない対象物が含まれた撮像画像を送信しないように、一部の領域の指定を受け付けて、受け付けられた領域に基づいて、撮像画像における一部の領域をマスクしている。

特開２０１１−２２３６２７号公報

しかしながら、特許文献１に記載の技術では、例えば、突然にマスクすべき対象物が撮像画像に写りこんだ場合に、マスクすべき対象物をマスクすることが困難であった。また、例えば、複数の送信先に、撮像画像を送信する場合に、特許文献１に記載の技術では、送信先に応じて適切にマスクを行うことが困難であった。
このように、特許文献１に記載の技術では、撮像画像に含まれるマスクすべき対象物を適切にマスクすることができない場合がある。

本発明は、上記問題を解決すべくなされたもので、その目的は、撮像画像に含まれるマスクすべき対象物を適切にマスクすることができる通信装置、及び頭部装着表示装置を提供することにある。

上記問題を解決するために、本発明の一態様は、画像を撮像する撮像部と、前記撮像部が撮像した撮像画像を所定の期間遅延させた遅延画像を出力する遅延部と、前記遅延部から出力された前記遅延画像のうちの指定された領域をマスクするマスク処理部と、少なくとも前記マスク処理部によってマスクされた前記遅延画像を送信する通信部と、前記撮像部が撮像した前記撮像画像を前記表示部に表示させるとともに、前記マスク処理部にマスクさせる領域を前記指定された領域として取得し、前記遅延画像における前記指定された領域を前記マスク処理部にマスクさせる制御部とを備えることを特徴とする通信装置である。

また、本発明の一態様は、画像を撮像する撮像部と、前記撮像部が撮像した撮像画像のうちの指定された領域をマスクするマスク処理部と、マスクが必要か否かを示すマスク要否情報と、前記指定された領域に対応する前記マスクに関する情報とを関連付けたマスク情報を生成するマスク情報生成部と、少なくとも前記マスク処理部によってマスクされた前記撮像画像とともに、前記マスク情報を送信する通信部と、前記マスク処理部にマスクさせる領域を前記指定された領域として取得し、前記撮像画像における前記指定された領域を前記マスク処理部にマスクさせる制御部とを備えることを特徴とする通信装置である。

また、本発明の一態様は、画像を撮像する撮像部と、マスクが必要か否かを示すマスク要否情報と、前記撮像部が撮像した撮像画像のうちのマスクする領域として指定された領域に対応するマスクに関する情報とを関連付けたマスク情報を生成するマスク情報生成部と、少なくとも前記撮像画像とともに、前記マスク情報を送信する通信部とを備えることを特徴とする通信装置である。

また、本発明の一態様は、画像を撮像する撮像部と、前記撮像部が撮像した撮像画像のうちの指定された領域をマスクするマスク処理部と、少なくとも前記マスク処理部によってマスクされた前記撮像画像を送信する通信部と、前記撮像部が撮像した前記撮像画像に含まれる２次元コードを検出するコード検出部と、前記コード検出部によって検出された前記２次元コードに基づいて、前記マスク処理部にマスクさせる領域を前記指定された領域として取得し、前記撮像画像における前記指定された領域を前記マスク処理部にマスクさせる制御部とを備えることを特徴とする通信装置である。

また、本発明の一態様は、画像を撮像する撮像部と、前記撮像部が撮像した撮像画像のうちのマスクする対象物を含まない範囲の領域を切り出した画像を生成することにより、前記対象物をマスクするマスク処理部と、少なくとも前記マスク処理部によってマスクされた前記撮像画像を送信する通信部と、前記対象物を含まない範囲の領域を取得し、取得した前記対象物を含まない範囲の領域に基づいて、前記マスク処理部に前記撮像画像をマスクさせる制御部とを備えることを特徴とする通信装置である。

また、本発明の一態様は、上記に記載の通信装置と、少なくとも前記撮像部が撮像した前記撮像画像を表示する表示部と、少なくとも前記撮像部及び前記表示部を使用者の頭部に装着する装着部とを備えることを特徴とする頭部装着表示装置である。

本発明によれば、撮像画像に含まれるマスクすべき対象物を適切にマスクすることができる。

本実施形態によるヘッドマウントディスプレイの斜視図である。 本実施形態におけるヘッドマウントディスプレイのディスプレイ本体とヘッドバンドとを分離して背面側から見た斜視図である。 本実施形態におけるヘッドマウントディスプレイの装着形態を示す図である。 本実施形態におけるディスプレイ本体の水平断面図である。 本実施形態におけるリモコンを示す斜視図である。 本実施形態におけるステレオイヤホンを示す斜視図である。 本実施形態におけるヘッドマウントディスプレイの機能ブロック図である。 第１実施形態における処理部の機能ブロック図である。 本実施形態におけるヘッドマウントディスプレイのネットワーク接続の一例を示す図である。 本実施形態におけるヘッドマウントディスプレイの動作の一例を示す状態遷移図である。 本実施形態におけるマスク指定、及びマスク処理の一例を示す図である。 本実施形態におけるマスク指定の別の一例を示す図である。 本実施形態におけるマスク処理の別の一例を示す図である。 本実施形態におけるマスク指定、及びマスク処理の別の一例を示す第２の図である。 第１実施形態における撮像画像を送信する処理の一例を示すフローチャートである。 第２実施形態における処理部の機能ブロック図である。 第２実施形態における撮像画像を送信、及び受信する処理の一例を示すフローチャートである。 第２実施形態におけるマスクを解除した撮像画像の表示例を示す図である。 第３実施形態における処理部の機能ブロック図である。 第３実施形態における撮像画像を送信、及び受信する処理の一例を示すフローチャートである。 第４実施形態における処理部の機能ブロック図である。 第４実施形態における２次元コードに基づくマスク指定、及びマスク処理の一例を示す図である。 第４実施形態における２次元コードに基づくマスク指定、及びマスク処理の別の一例を示す図である。 第４実施形態における撮像画像を送信する処理の一例を示すフローチャートである。 第５実施形態における２次元コードに基づくマスク指定、及びマスク処理の一例を示す図である。 第５実施形態における撮像画像及び音声を送信する処理の一例を示すフローチャートである。

以下、本発明の一実施形態による情報入出力装置及び頭部装着表示装置について、図面を参照して説明する。
以下の説明においては、必要に応じてＸＹＺ直交座標系を設定し、このＸＹＺ直交座標系を参照しつつ各部の位置関係について説明する。水平面内の所定方向をＸ軸方向、水平面内においてＸ軸方向と直交する方向をＹ軸方向、Ｘ軸方向及びＹ軸方向のそれぞれと直交する方向（すなわち鉛直方向）をＺ軸方向とする。また、Ｘ軸、Ｙ軸、及びＺ軸まわりの回転（傾斜）方向をそれぞれ、θＸ、θＹ、及びθＺ方向とする。

［第１実施形態］
図１は、本実施形態のヘッドマウントディスプレイの斜視図である。図２は、ヘッドマウントディスプレイを背面側から見た斜視図である。図３は、本実施形態のヘッドマウントディスプレイの装着形態を示す図である。

ヘッドマウントディスプレイ１（頭部装着表示装置）は、ディスプレイ本体２０と、ユーザー（使用者）の頭部に装着されディスプレイ本体２０を支持するヘッドバンド４０（装着部）と、を備えた単眼式のヘッドマウントディスプレイである。本実施形態のヘッドマウントディスプレイ１は、図３に示すように、両眼どちらでも使用可能である。図３（Ａ）には、ユーザーが右眼（右目）で表示部６０を見ている状態、図３（Ｂ）には左眼（左目）で見ている状態が示されている。ここで、ヘッドバンド４０は、ディスプレイ本体２０をユーザーの頭部に装着する。
また、図２に示すように、ディスプレイ本体２０とヘッドバンド４０とは、連結ピン４１を介して着脱可能に構成されている。
なお、図１及び図２では、ディスプレイ本体２０の長手方向をＹ軸方向、ヘッドバンド４０がユーザーの頭部を挟持する方向をＸ軸方向としている。

以下、ヘッドマウントディスプレイ１の各部の構成について詳細に説明する。
ディスプレイ本体２０は、主要回路を内蔵するとともに操作部や各種インタフェースを備えた装置本体部２１と、装置本体部２１の先端に連結された表示部６０とを有する。

装置本体部２１は、概略板状の筐体２１Ａ（図４）を有する。本実施形態では、装置本体部２１においてヘッドバンド４０との接続部が設けられている側の端部（＋Ｙ側の端部）を基端部とし、この基端部と反対側の端部（−Ｙ側の端部）を先端部とする。また、装置本体部２１をヘッドバンド４０に装着した状態で、装置本体部２１のヘッドバンド４０側（＋Ｘ側）を内側、ヘッドバンド４０と反対側（−Ｘ側）を外側とする。

装置本体部２１の外面には、図１に示すように、メインスイッチ２８と、タッチスイッチ３４と、集音マイク２４とが、筐体２１Ａの長手方向に沿って配置されている。
メインスイッチ２８は、ディスプレイ本体２０の電源のオンオフ操作を行うスイッチである。タッチスイッチ３４は、表面に手指等で触れることによりヘッドマウントディスプレイ１の各種操作を行うことができるタッチパネルである。集音マイク２４は、環境音を収集する外部マイクである。

装置本体部２１内面の基端部側に、図２に示すように、耳元スピーカー２３と、オーディオコネクター２６と、連結孔３１を有するヘッドバンドヒンジ３２とが設けられている。装置本体部２１内面の中央部に心拍数センサー１３７が設けられている。装置本体部２１の内側面の先端部には通話マイク３７が設けられている。

耳元スピーカー２３は、ユーザーの耳の近傍に配置される。耳元スピーカー２３からユーザーに音声情報が伝えられる。オーディオコネクター２６は、例えば図６に示すイヤホンが接続される音声入出力端子である。ヘッドバンドヒンジ３２は、ヘッドバンド４０とのジョイント部である。通話マイク３７にはユーザーの音声が入力される。

心拍数センサー１３７は、ユーザーの顔の表面に接触させることでユーザーの心拍数を測定するセンサーである。心拍数センサー１３７は、発光ダイオード等を備えた発光部と、ユーザーの皮膚内部で反射した光を検知する受光部とを有する。心拍数センサー１３７は、血流の変化による反射光量の変化を検出することで心拍数をカウントする。心拍数センサー１３７はユーザーの目の近くに配置されるが、発光部から赤外域の光を射出させる構成とすればユーザーにまぶしさを感じさせることはない。

装置本体部２１の基端部側の側端面には、ＵＳＢコネクター２５と、操作スイッチ３０と、ビデオコネクター２７とが設けられている。
ＵＳＢコネクター２５はＵＳＢ（Universal Serial Bus）デバイスの接続端子である。本実施形態では、例えば、図５に示すリモコン（リモートコントローラー）１４０が接続される。

操作スイッチ３０は、例えばトラックボールやスティックなどのポインティングデバイスである。操作スイッチ３０は表示部６０に表示される画面に正対するように設けられている。これにより、操作スイッチ３０における操作の左右方向と、上記画面の左右方向とが一致するので、ユーザーは画面を見ながら直感的に操作スイッチ３０を操作することが可能である。
ビデオコネクター２７は映像入出力端子である。

ヘッドバンド４０は、図２に示すように、ユーザーの頭部を挟持する一対のヘッドパット（装着部材）４６、４７と、第１ヘッドバンド４３と、第２ヘッドバンド４４と、回動機構５６、５７とを備えている。

第１ヘッドバンド４３は、全体として円弧状を成す弾性部材である。第１ヘッドバンド４３の頂部に、第１ヘッドバンド４３を折り曲げるためのジョイント部４３ａが設けられている。第１ヘッドバンド４３の両端には、回動機構５６、５７を構成する軸受部４３ｂ、４３ｃがそれぞれ設けられている。軸受部４３ｂ、４３ｃよりもさらにバンド先端側に、ヘッドパット４６、４７が接続される軸受部４３ｄ、４３ｅが設けられている。

第２ヘッドバンド４４は、全体として円弧状を成す弾性部材である。第２ヘッドバンド４４の頂部には、第２ヘッドバンド４４を折り曲げるためのジョイント部４４ａが設けられている。第２ヘッドバンド４４の両端には、それぞれ回動機構５６、５７を構成する軸部材４４ｂ、４４ｃが設けられている。

また本実施形態において、第２ヘッドバンド４４は、ステンレス等の金属からなるバネ部材４８の表面を樹脂等の柔軟な材料で被覆した構成を有する。この第２ヘッドバンド４４のバネ部材４８においてユーザーの頭部を挟持するバネ力を発生させる。また第２ヘッドバンド４４は第１ヘッドバンド４３と比較して広い幅に形成されている。ジョイント部４４ａの形成部分は他のバンド部分よりもさらに広く形成された標章表示部４９とされている。標章表示部４９には、シールや印刷により製品タグ等が付される。なお、第２ヘッドバンド４４の全体を金属で形成してもよい。

ヘッドパット４６は、板状の支持板４６ａと、支持板４６ａの一面側に設けられた断面アーチ状の弾性部材４６ｂとを有する。支持板４６ａの弾性部材４６ｂと反対側の面に、当該面に垂直な姿勢で概略六角柱状の連結ピン４１が立設されている。連結ピン４１は、第１ヘッドバンド４３の一方の先端に設けられた軸受部４３ｄに軸支されている。これにより、ヘッドパット４６は連結ピン４１回りに回転可能である。

ヘッドパット４７は、板状の支持板４７ａと、支持板４７ａの一方の面に設けられた断面アーチ状の弾性部材４７ｂとを有する。支持板４７ａの弾性部材４７ｂと反対側の面には、軸部材４７ｃが設けられている。軸部材４７ｃは、第１ヘッドバンド４３の先端に設けられた軸受部４３ｅに軸支されている。これにより、ヘッドパット４７は、軸部材４７ｃ回りに回転可能である。

図４は、ディスプレイ本体２０の水平断面図である。
図４に示すように、装置本体部２１には、筐体２１Ａの長手方向に沿って延びる板状の回路基板２９と、バッテリー３３とが内蔵されている。回路基板２９には、不図示の制御回路、電源回路等が実装されており、不図示の配線を介してディスプレイ本体２０の各部と電気的に接続されている。

装置本体部２１の外面に露出するタッチスイッチ３４の内側には、液晶パネルからなる表示パネル３６と、バックライト３５とが配置されている。本実施形態では、表示パネル３６の表示画像がタッチスイッチ３４を透過して表示される。表示パネル３６及びバックライト３５を、有機ＥＬパネルや電気泳動パネルとしてもよい。

ヘッドバンドヒンジ３２は、筐体２１Ａに設けられた凹曲面状の収容部３２ａと、収容部３２ａに嵌合された球状部３２ｂとからなるボールジョイントである。球状部３２ｂは、球面状の側面部と、この側面部を挟むように互いに平行に形成された２つの平面部を有する。２つの平面部を垂直に貫くように連結孔３１が形成されている。連結孔３１は軸方向視で六角形状に形成されている。連結孔３１にヘッドバンド４０の連結ピン４１が挿入されることによりディスプレイ本体２０とヘッドバンド４０とが連結される。

ヘッドバンドヒンジ３２を備えていることで、ディスプレイ本体２０は、図１に示したＡ方向（ヘッドバンドヒンジ３２を中心とするＸ軸回り）に回動させることができる。本実施形態において、ディスプレイ本体２０の回転可能範囲は２７０°程度とされる。このＸ軸回りの回転動作により、図３（Ａ）に示す右目で画像を観察する形態と、図３（Ｂ）に示す左目で画像を観察する形態との切替機能が実現される。

また、ヘッドバンドヒンジ３２は、ボールジョイントであるため、ディスプレイ本体２０は図１に示すＢ方向（ヘッドバンドヒンジ３２を中心とするＺ軸回り）に揺動させることもできる。この揺動操作により、ディスプレイ本体２０のユーザーの目や耳に対する位置を調整することができる。

ヘッドバンドヒンジ３２近傍の心拍数センサー１３７は、装置本体部２１の内面から突出するように設けられ、ヘッドマウントディスプレイ１の装着時にユーザーの顔の表面に当接可能とされている。バッテリー３３は、充電式電池、使い捨て電池のいずれであってもよい。

表示部６０は、図１及び図２に示すように、装置本体部２１の先端部に連結されている。本実施形態において、表示部６０のヘッドバンド４０側を内側、ヘッドバンド４０と反対側を外側とする。表示部６０は、上面視（Ｚ軸視）において湾曲した形状を有するアーム部材であり、装置本体部２１との連結部から先端側へ向かうに従って内側へ湾曲する形状を有する。表示部６０の内面に、ファインダー開口部６７が設けられている。表示部６０の外面には、カメラ６４が設けられている。

図４に示すように、表示部６０は、ディスプレイヒンジ６１を介して装置本体部２１と連結されている。ディスプレイヒンジ６１は、表示部６０の筐体６０Ａに形成された凹曲面状の収容部６１ａと、装置本体部２１に形成され収容部６１ａに嵌合された球状部６１ｂとからなるボールジョイントである。

装置本体部２１の球状部６１ｂは、装置本体部２１の外面先端部に形成された筐体２１Ａの長手方向に対して斜めに延びる傾斜面に、この傾斜面の法線方向（図４のＹ’軸方向）に突出するようにして設けられている。表示部６０は、ディスプレイヒンジ６１の球状部６１ｂに対してＹ’軸回りに自由に回転させることができる。

ディスプレイヒンジ６１の球状部６１ｂには、球状部６１ｂを高さ方向（Ｙ’軸方向）に貫通する貫通孔６１ｃが形成されている。貫通孔６１ｃを介して、表示部６０の内部と装置本体部２１の内部とが連通されている。貫通孔６１ｃには不図示のケーブルが挿通される。挿通されたケーブルを介して回路基板２９と表示部６０の各部とが電気的に接続される。

表示部６０の内部には、バックライト６２と、表示パネル６３と、カメラ６４と、プリズム６５と、反射ミラー６６と、前方ライト６８と、前方スピーカー７０と、結像レンズ７１と、撮像素子７２とが設けられている。すなわち、表示部６０は、バックライト６２、表示パネル６３、カメラ６４、プリズム６５、反射ミラー６６、前方ライト６８、前方スピーカー７０、結像レンズ７１、及び撮像素子７２を備えている。

プリズム６５は、上面視（Ｚ軸視）で略三角形状の第１プリズム６５ａと第２プリズム６５ｂとを互いの面で貼り合わせた構成を有する。この貼り合わせ面以外の第１プリズム６５ａの他の二面のうち、一方の面に対向する位置に、液晶パネルからなる表示パネル６３が設けられている。表示パネル６３の背面に表示パネル６３を透過照明するバックライト６２が配置されている。第１プリズム６５ａの他方の面に対向する位置に反射ミラー６６が配置されている。反射ミラー６６は、ファインダー開口部６７の略正面に位置する。

第２プリズム６５ｂの貼り合わせ面以外の他の二面のうち、一方の面はファインダー開口部６７に配置されたファインダー接眼面である。第２プリズム６５ｂの他方の面に対向する位置には結像レンズ７１を介して撮像素子７２が対向配置されている。

表示部６０において、表示パネル６３に表示された画像は、第１プリズム６５ａ、反射ミラー６６、第２プリズム６５ｂを介してファインダー開口部６７から射出され、ユーザーに観察される。また、ファインダー開口部６７を見ているユーザーの目元は、第２プリズム６５ｂ及び結像レンズ７１を介して撮像素子７２上に結像される。撮像素子７２を介して取得された目元の画像は、ユーザーの視線の方向や瞬き、表情の解析に用いられる。すなわち、撮像素子７２は、ユーザーの目元を撮像する撮像部として機能する。バックライト６２は、撮像素子７２による目元撮像の照明装置としても利用される。

カメラ６４（撮像部）は、例えば、５００万画素〜１０００万画素の撮像素子を有し、オートフォーカス動作が可能に構成される。
本実施形態の場合、カメラ６４の撮像方向は、ユーザーの視線方向と一致するように設定される。すなわち、カメラ６４は、ヘッドマウントディスプレイ１を装着したユーザーの視線方向の画像（映像）を撮像する。なお、撮像方向と視線方向との調整は、機械的に行ってもよく、画像処理により行ってもよい。例えば、カメラ６４を広角の映像を取得可能に構成し、ユーザーの目元画像から取得した視線方向の情報に基づいて、電気的に捕らえた映像の一部を、視線方向の映像として抜き出して表示パネル６３に表示させる。これにより、カメラ６４に調整機構を設けることなくユーザー正面の映像（画像）の撮像、表示が可能となる。

前方ライト６８は、例えば、ＬＥＤ（Light Emitting Diode）ライトである。前方ライト６８は、赤、緑、青の各色の発光素子を有し、任意の色を任意のタイミングで発光させることが可能に構成してもよい。前方ライト６８は、発光色や発光タイミングにより外部に対して情報を表示する装置として用いてもよく、カメラ６４で撮像する際の照明装置として用いてもよい。

図５は、本実施形態のヘッドマウントディスプレイ１に付属のリモコンを示す斜視図である。
リモコン１４０は、筐体１４０Ａと、タッチパッド１４１と、操作スイッチ１４７と、ＵＳＢコネクター１４２と、インジケーター１４３ａ、１４３ｂ、１４３ｃと、取付クリップ１４４と、インジケータースイッチ１５０と、を備えている。

リモコン１４０は、ＵＳＢケーブル１４８の一方の端子をＵＳＢコネクター１４２に接続し、他方の端子を装置本体部２１のＵＳＢコネクター２５に接続することで、装置本体部２１と電気的に接続される。ＵＳＢケーブル１４８としては市販のＵＳＢケーブルを用いることができる。本実施形態の場合、ＵＳＢケーブル１４８の途中に複数のクリップ１４９が設けられている。複数のクリップ１４９は、例えばＵＳＢケーブル１４８を第２ヘッドバンド４４に沿わせた状態で固定するために用いることができる。

リモコン１４０には、ディスプレイ本体２０や他の電子機器と無線通信を行うための通信回路が内蔵されている。通信回路の通信方式としては、例えば、Bluetooth（登録商標）、無線ＬＡＮ、赤外線通信、ＵＷＢ（Ultra Wide Band）、Transfer Jetなどを用いることができる。かかる通信回路により、ＵＳＢケーブル１４８を接続していなくてもディスプレイ本体２０との通信が可能である。

リモコン１４０には、Ｇセンサーや加速度センサー、方位センサーが内蔵されていてもよい。これらのセンサーで検出した情報についても、上記した通信回路を介してディスプレイ本体２０へ通信可能である。

タッチパッド１４１は、筐体１４０Ａの一方の主面に設けられている。タッチパッド１４１は、ユーザーがタッチすることによりディスプレイ本体２０を操作するための操作部である。タッチパッド１４１の背面側の筐体１４０Ａ内部には、装置本体部２１のタッチスイッチ３４と同様に表示パネルやバックライトが設けられていてもよい。

操作スイッチ１４７は、リモコン１４０やディスプレイ本体２０を手動操作するためのスイッチである。操作スイッチ１４７は、必要に応じて設けられていればよい。筐体１４０Ａの側面に設けられたインジケータースイッチ１５０は、インジケーター１４３ａ〜１４３ｃを利用した所定動作を行わせるためのスイッチである。

ＵＳＢコネクター１４２は、装置本体部２１との接続のほか、リモコン１４０が充電式のバッテリーを内蔵している場合にはリモコン１４０の充電端子や、ＰＣとの接続にも用いられる。
また、ＵＳＢコネクター１４２は、リモコン１４０がバッテリーを内蔵している場合には、装置本体部２１への給電端子として用いることもできる。リモコン１４０のバッテリーを補助電源として使用可能にすることで、ヘッドマウントディスプレイ１は、装置本体部２１のバッテリー容量を小さくでき、装置本体部２１を小型軽量化することができる。

インジケーター１４３ａ、１４３ｂ、１４３ｃは、タッチパッド１４１の周囲に配置されている。本実施形態では、タッチパッド１４１の一辺に沿う位置にインジケーター１４３ａが配置され、インジケーター１４３ａに対してタッチパッド１４１を挟んだ反対側にインジケーター１４３ｂとインジケーター１４３ｃとが配置されている。

インジケーター１４３ａ〜１４３ｃはＬＥＤ等の発光素子を備えている。本実施形態では、インジケーター１４３ａは緑色の発光素子、インジケーター１４３ｂはオレンジ色の発光素子、インジケーター１４３ｃは青色の発光素子をそれぞれ備えている。これらの発光素子は制御されたタイミングでパターン発光可能に構成されている。インジケーター１４３ａ〜１４３ｃの上記パターン発光は、筐体１４０Ａ側面のインジケータースイッチ１５０を操作することでオンオフすることができる。

取付クリップ１４４は、筐体１４０Ａのタッチパッド１４１と反対側の面に設けられている。本実施形態の場合、取付クリップ１４４は、一端を筐体１４０Ａに固定された側面視Ｓ形のバネ板部材である。取付クリップ１４４により、リモコン１４０をユーザーの衣服やベルト等に装着することができる。

また、ヘッドマウントディスプレイ１は、取付クリップ１４４によりヘッドパット４７の近傍を挟むことで、ヘッドバンド４０にリモコン１４０を取り付けてもよい。ヘッドバンド４０のヘッドパット４６にディスプレイ本体２０を取り付ける一方、ヘッドパット４７側にリモコン１４０を取り付けることで、ヘッドマウントディスプレイ１における重量バランスの不均衡を低減することができる。

また、リモコン１４０をユーザーが手に持って操作スイッチ１４７を操作することで、インジケーター１４３ａ〜１４３ｃは、所定のパターンで点滅するように構成されている。例えば、インジケーター１４３ａの色は緑、インジケーター１４３ｂはオレンジ、インジケーター１４３ｃは青色となっており、この３つのインジケーターの発光パターンを表示部６０に設けられたカメラ６４で捕らえることにより、リモコン１４０の上下左右の傾きを認識することが可能となっている。ここ結果、リモコン１４０とディスプレイ本体２０とで後述するBluetooth（登録商標）による通信を行うことなく、すなわち消費電力を最小に押さえつつリモコン１４０の操作状態を本体側に伝えることが可能である。

図６は、本実施形態のヘッドマウントディスプレイに付属のステレオイヤホンを示す斜視図である。
ステレオイヤホン１００は、コネクター１０１と、ケーブル１０２と、第１スピーカー１０３と、第２スピーカー１０４と、集音マイク１０５と、複数のクリップ１０６とを有している。

コネクター１０１は、ケーブル１０２の一方の端部に設けられている。コネクター１０１は、例えば、一般的な４極φ３．５ｍｍのミニプラグである。４極の内訳は、集音マイク１０５、第１スピーカー１０３、第２スピーカー１０４、グランド（ＧＮＤ）である。ケーブル１０２は、コネクター１０１の近傍において二分岐され、分岐されたケーブルの先端に第１スピーカー１０３が設けられている。ケーブル１０２の他方の端部には、第２スピーカー１０４と集音マイク１０５とが設けられている。複数のクリップ１０６は、ケーブル１０２上に所定の間隔で配置されている。

ステレオイヤホン１００の第１スピーカー１０３は、ディスプレイ本体２０が配置された側のユーザーの耳に装着され、第２スピーカー１０４は第１スピーカー１０３と反対側の耳に装着される。このとき、ケーブル１０２は、クリップ１０６によって第２ヘッドバンド４４に固定することができる。

また、ステレオイヤホン１００の集音マイク１０５と、ディスプレイ本体２０において筐体２１Ａの外側面に設けられた集音マイク２４とにより、ステレオ録音が可能である。例えば、図３（Ａ）に示すようにディスプレイ本体２０が右眼側に配置されているとすれば、ディスプレイ本体２０の集音マイク２４はユーザーの右側の音を収集し、左耳に装着された集音マイク１０５はユーザーの左側の音を収集する。なお、ステレオイヤホン１００の第１スピーカー１０３から右チャンネルの音声が出力され、第２スピーカー１０４からは左チャンネルの音声が出力される。

一方、図３（Ｂ）に示すように左眼側にディスプレイ本体２０が配置されている場合には、ディスプレイ本体２０の集音マイク２４がユーザーの左側の音を収集し、右耳に装着された集音マイク１０５がユーザーの右側の音を収集する。ステレオイヤホン１００の第１スピーカー１０３から左チャンネルの音声が出力され、第２スピーカー１０４からは右チャンネルの音声が出力される。

図７は、ヘッドマウントディスプレイ１の機能ブロック図である。
ヘッドマウントディスプレイ１は、処理部１２３を中心として種々の電気回路を備えている。ヘッドマウントディスプレイ１は、例えば、バックライト６２、表示パネル６３、カメラ６４、撮像素子７２、デコーダー１２１、フラッシュメモリー１２２、処理部１２３、ＬＣＤドライバ１２５、ＢＬドライバ１２６、メモリー１２７、エンコーダー１２９、スピーカーアンプ１６２、耳元スピーカー２３、集音マイク２４、メインスイッチ２８、操作スイッチ３０、タッチスイッチ３４、通話マイク３７、ＢＴ通信回路１３０、ＷｉＦｉ通信回路１３１、及び３Ｇ／ＬＴＥ通信回路１３８を備えている。

なお、本実施形態において、カメラ６４、撮像素子７２、デコーダー１２１、処理部１２３、メモリー１２７、エンコーダー１２９、メインスイッチ２８、操作スイッチ３０、タッチスイッチ３４、ＢＴ通信回路１３０、ＷｉＦｉ通信回路１３１、及び３Ｇ／ＬＴＥ通信回路１３８が通信装置２００に対応する。すなわち、通信装置２００は、カメラ６４、撮像素子７２、デコーダー１２１、フラッシュメモリー１２２、処理部１２３、メモリー１２７、エンコーダー１２９、メインスイッチ２８、操作スイッチ３０、タッチスイッチ３４、ＢＴ通信回路１３０、ＷｉＦｉ通信回路１３１、及び３Ｇ／ＬＴＥ通信回路１３８を備えている。
また、本実施形態において、ＢＴ通信回路１３０、ＷｉＦｉ通信回路１３１、及び３Ｇ／ＬＴＥ通信回路１３８は、通信部１３に対応する。

処理部１２３は、例えば、ＣＰＵ（Central Processing Unit）であり、ヘッドマウントディスプレイ１の各種回路と接続されるとともに、ヘッドマウントディスプレイ１を総合的に制御する。処理部１２３の詳細については、後述する。
本実施形態の場合、エンコーダー１２９、デコーダー１２１、電源回路１２０、操作スイッチ３０、フラッシュメモリー１２２、ＢＴ通信回路１３０、ＷｉＦｉ通信回路１３１、加速度センサー１３２、地磁気センサー１３３、前方ライト６８、３Ｇ／ＬＴＥ通信回路１３８、レーザー発振器７３、角速度センサー１３４、ＧＰＳセンサー１３５、温湿度センサー１３６、心拍数センサー１３７、ＢＬドライバ１２６、メモリー１２７、メインスイッチ２８、及びタッチスイッチ３４は、処理部１２３に接続されている。

エンコーダー１２９は、音声信号及び映像信号を所定方式の音声データ及び映像データにエンコード（符号化）する。エンコーダー１２９には、カメラ６４、撮像素子７２、集音マイク２４、通話マイク３７、オーディオコネクター２６、ビデオコネクター２７が接続されている。

エンコーダー１２９は、集音マイク２４、通話マイク３７、及び、オーディオコネクター２６から供給される音声信号をエンコード（符号化）し、エンコードした音声信号を処理部１２３に供給する。また、エンコーダー１２９は、カメラ６４、ユーザーの目元を撮像する撮像素子７２、及びビデオコネクター２７から入力される映像（画像）信号をエンコード（符号化）し、エンコードした映像（画像）信号を処理部１２３に供給する。

デコーダー１２１は、音声データ及び映像データを音声信号及び映像信号にデコード（復号化）する。デコーダー１２１には、ＬＣＤドライバ１２５、スピーカーアンプ１６２、オーディオコネクター２６、及びビデオコネクター２７が接続されている。すなわち、デコーダー１２１は、音声データを音声信号にデコード（復号化）し、デコードした音声信号をスピーカーアンプ１６２又はオーディオコネクター２６に供給する。また、デコーダー１２１は、映像（画像）データを映像（画像）信号にデコード（復号化）し、デコードした映像信号をＬＣＤドライバ１２５又はビデオコネクター２７に供給する。

ＬＣＤドライバ１２５は、例えば、液晶パネル用の駆動信号を生成する回路であり、表示パネル３６及び表示パネル６３に接続されている。すなわち、ＬＣＤドライバ１２５は、処理部１２３からデコーダー１２１を介して供給された映像（画像）信号に基づいて液晶パネル用の駆動信号を生成し、生成した液晶パネル用の駆動信号を表示パネル３６又は表示パネル６３に供給する。
表示パネル６３（表示部）は、例えば、液晶表示パネルであり、ＬＣＤドライバ１２５から供給される駆動信号に基づいて、映像（画像）を表示する。表示パネル６３は、例えば、カメラ６４によって撮像された画像、及びメニュー画面などを表示する。

ＢＬドライバ１２６は、例えば、バックライト用の駆動信号を生成する回路であり、バックライト３５及びバックライト６２に接続されている。すなわち、ＢＬドライバ１２６は、処理部１２３から供給された制御信号に基づいて、バックライト用の駆動信号を生成し、生成したバックライト用の駆動信号をバックライト３５及びバックライト６２に供給する。

バッテリー３３は、電源回路１２０を介してヘッドマウントディスプレイ１の各部に電力を供給する。
電源回路１２０は、処理部１２３から供給される制御信号に基づいて、バッテリー３３から供給された電力の制御（例えば、電圧の変換、供給オンオフ）を行う。

スピーカーアンプ１６２は、例えば、音声信号を増幅してスピーカーに出力する回路であり、耳元スピーカー２３及び前方スピーカー７０に接続されている。スピーカーアンプ１６２は、処理部１２３からデコーダー１２１を介して供給された音声信号を増幅し、増幅した音声信号を耳元スピーカー２３又は前方スピーカー７０に供給する。

本実施形態の場合、耳元スピーカー２３及び前方スピーカー７０は、モノラル音声の使用を想定しており、耳元スピーカー２３及び前方スピーカー７０は、左右の音声信号が合成された音を出力する。
メモリー１２７は、処理部１２３によって実行される制御プログラムを記憶している。

メインスイッチ２８は、全体の電源のオンオフを行うスイッチであり、ユーザーが操作することにより、操作に基づく制御信号を処理部１２３に供給する。
操作スイッチ３０は、画面内でのポインティング操作を行うためのスイッチであり、ユーザーが操作することにより、操作に基づく制御信号を処理部１２３に供給する。
タッチスイッチ３４は、タッチ操作により各種操作を行うスイッチであり、ユーザーが操作することにより、操作に基づく制御信号を処理部１２３に供給する。
なお、ディスプレイ本体２０は、メインスイッチ２８、操作スイッチ３０、及びタッチスイッチ３４を備えており、ディスプレイ本体２０は、ユーザーの身体における右側及び左側のいずれかの位置に装着可能である。そのため、ディスプレイ本体２０は、メインスイッチ２８、操作スイッチ３０、及びタッチスイッチ３４は、ユーザーの身体における右側及び左側のいずれかの位置に装着可能であって、情報入出力装置を操作する。

ＢＴ通信回路１３０は、他の機器とのBluetooth（登録商標）通信を行うための通信回路である。
ＷｉＦｉ通信回路１３１（通信部）は、他の機器との無線ＬＡＮ通信（IEEE 802.11）を行うための通信回路である。
３Ｇ／ＬＴＥ通信回路１３８は、他の機器との移動通信を行うための通信回路である。
ＢＴ通信回路１３０、ＷｉＦｉ通信回路１３１、及び３Ｇ／ＬＴＥ通信回路１３８は、他の機器との間で、音声データや映像（画像）データなどの情報の送信／受信を行う。

加速度センサー１３２（Ｇセンサー）は、加速度情報（例えば、加速度及び重力）を検出し、ヘッドマウントディスプレイ１の傾き検出に用いられる。加速度センサー１３２は、検出した加速度情報を処理部１２３に供給する。
地磁気センサー１３３は、地磁気に基づいて方位情報を検出し、ヘッドマウントディスプレイ１の方角検出に用いられる。地磁気センサー１３３は、検出した方位情報を処理部１２３に供給する。

角速度センサー１３４（ジャイロセンサー）は、角速度を検出し、ヘッドマウントディスプレイ１の回転検出に用いられる。角速度センサー１３４は、検出した角速度を処理部１２３に供給する。
ＧＰＳセンサー１３５は、ＧＰＳ（Global Positioning System）を利用した測位検出に用いられ、ヘッドマウントディスプレイ１の緯度経度を測定する。ＧＰＳセンサー１３５は、測定したヘッドマウントディスプレイ１の緯度経度を処理部１２３に供給する。

温湿度センサー１３６は、環境の温度、及び湿度を検出する。温湿度センサー１３６は、検出した環境の温度、及び湿度を処理部１２３に供給する。
心拍数センサー１３７は、ユーザーの頬に接触し、ユーザーの心拍数を検出する。すなわち、心拍数センサー１３７は、ヘッドマウントディスプレイ１がユーザーに装着されているか否かを検出する。心拍数センサー１３７は、検出したユーザーの心拍数を処理部１２３に供給する。
レーザー発振器７３は、上述したように表示パネル６３に表示された画像内の所定の位置に対応するターゲット（対象物）にレーザー光（スポット光）を照射する。

処理部１２３は、上述したようにヘッドマウントディスプレイ１を総合的に制御する。処理部１２３は、例えば、集音マイク２４、通話マイク３７、又はオーディオコネクター２６からエンコーダー１２９を介して供給された音声データをフラッシュメモリー１２２に記憶させる。処理部１２３は、例えば、集音マイク２４、通話マイク３７、又はオーディオコネクター２６からエンコーダー１２９を介して供給された音声データを通信部１３のＢＴ通信回路１３０、ＷｉＦｉ通信回路１３１、又は３Ｇ／ＬＴＥ通信回路１３８を介して他の機器に送信する。
また、処理部１２３は、例えば、カメラ６４、撮像素子７２、又はビデオコネクター２７からエンコーダー１２９を介して供給された映像（画像）データをフラッシュメモリー１２２に記憶させる。処理部１２３は、例えば、カメラ６４、撮像素子７２、又はビデオコネクター２７からエンコーダー１２９を介して供給された映像（画像）データを、ＬＣＤドライバ１２５を介して表示パネル６３に表示させる。処理部１２３は、例えば、カメラ６４、撮像素子７２、又はビデオコネクター２７からエンコーダー１２９を介して供給された映像（画像）データを通信部１３のＢＴ通信回路１３０、ＷｉＦｉ通信回路１３１、又は３Ｇ／ＬＴＥ通信回路１３８を介して他の機器に送信する。

また、映像データを再生する場合、処理部１２３は、フラッシュメモリー１２２に記録された映像（画像）データ、あるいはエンコーダー１２９から入力される映像（画像）データを、デコーダー１２１及びＬＣＤドライバ１２５を介して表示パネル３６、６３に供給する。これにより、映像信号が入力された表示パネル３６又は表示パネル６３に映像データに基づく映像が表示される。また、処理部１２３は、デコーダー１２１からビデオコネクター２７に出力される映像信号を、ビデオコネクター２７を介して外部機器に出力させる。

また、映像の表示に際して、処理部１２３は、必要に応じて表示パネル３６用のバックライト３５、及び表示パネル６３用のバックライト６２を点灯させる。すなわち、処理部１２３は、ＢＬドライバ１２６に制御信号を供給し、ＢＬドライバ１２６はバックライト（３５，６２）を個々に点灯させる。
また、処理部１２３は、例えば、制御信号により操作を検出し、上記の制御プログラムに規定された動作を実行する。

また、処理部１２３は、例えば、カメラ６４が撮像した撮像画像を、通信部１３を介して他の機器に送信する際に、撮像画像に相手に画像を送信することが好ましくない対象物が含まれている場合に、この対象物をマスクする制御を行う。なお、本実施形態では、カメラ６４が撮像した画像（映像）を撮像画像（撮像映像）として以下説明する。
以下、撮像画像に含まれるマスクすべき対象物をマスクする制御を実行するための処理部１２３の構成について説明する。

図８は、第１実施形態における処理部１２３の機能ブロック図である。
この図において、処理部１２３は、遅延部２０１、切替部２１０、マスク処理部２２０、入力処理部２０６、及びマスク制御部２０７を備えている。

遅延部２０１は、カメラ６４が撮像した撮像画像を所定の期間遅延させた遅延画像を出力する。ここで、所定の期間とは、例えば、３秒〜５秒の期間であり、表示パネル６３による撮像画像の表示から、後述するマスク制御部２０７がマスクさせる領域を取得し、マスク処理部２２０が指定された領域をマスクするまでの期間よりも長い期間である。すなわち、所定の期間は、人間がマスクの要否、マスク箇所の特定ないし選択を行うことに要する時間から設定される。
なお、本実施形態では、遅延部２０１によって、撮像画像は遅延されるが、ユーザーの会話などの音声は、良好なコミュニケーションを行うために遅延されない。

切替部２１０は、後述するマスク制御部２０７の制御（指示）に基づいて、カメラ６４が撮像した撮像画像と、フラッシュメモリー１２２、メモリー１２７、又は通信部１３などから出力された画像（例えば、メモリー画像）とを切り替えて、マスク処理部２２０に出力する。切替部２１０は、２つの画像切替部（２０２，２０３）を備えている。

画像切替部２０２は、表示パネル６３に画像を表示させるために、カメラ６４が撮像した撮像画像と、上述したメモリー画像とを切り替えて、後述するマスク処理部２２０の画像処理部２０４に出力する。
画像切替部２０３は、通信部１３により画像を送信させるために、遅延部２０１によって所定の期間遅延された撮像画像と、上述したメモリー画像とを切り替えて、後述するマスク処理部２２０の画像処理部２０５に出力する。

マスク処理部２２０は、後述するマスク制御部２０７の制御（指示）に基づいて、例えば、遅延部２０１から出力された遅延画像のうちの指定された領域をマスクする処理などの各種画像処理を実行する。マスク処理部２２０は、２つの画像処理部（２０４，２０５）を備えている。ここで、遅延画像とは、遅延部２０１によって所定の期間遅延された撮像画像のことである。

画像処理部２０４は、画像切替部２０２から出力された画像に対して、各種画像処理を実行し、画像処理した画像をデコーダー１２１に出力する。画像処理部２０４は、例えば、画像の一部領域を切り出して拡大・縮小する処理や、アバター画像などの合成処理や、上述したマスク処理などの画像処理を実行する。なお、画像処理部２０４からデコーダー１２１に出力された画像は、例えば、ＬＣＤドライバ１２４を介して表示パネル６３に表示される。なお、画像処理部２０４は、後述するマスク制御部２０７の指示により、画像処理を実行せずに、画像切替部２０２から出力された画像をそのままデコーダー１２１に出力してもよい。

画像処理部２０５は、画像切替部２０３から出力された画像に対して、各種画像処理を実行し、画像処理した画像を通信部１３に出力する。画像処理部２０５は、例えば、画像の一部領域を切り出して拡大・縮小する処理や、アバター画像などの合成処理や、上述したマスク処理などの画像処理を実行する。なお、画像処理部２０５から通信部１３に出力された画像は、例えば、ネットワークを解して他の機器（他装置）に送信される。なお、画像処理部２０５は、後述するマスク制御部２０７の指示により、画像処理を実行せずに、画像切替部２０３から出力された画像をそのまま通信部１３に出力してもよい。このように、通信部１３は、少なくともマスク処理部２２０によってマスクされた遅延画像を送信する。

入力処理部２０６は、例えば、表示パネル６３が表示する表示画像に基づいて、情報の入力を処理する。入力処理部２０６は、例えば、タッチスイッチ３４又は操作スイッチ３０からの入力信号と表示画像とに基づいて、表示画像のうちのマスクすべき対象物の領域情報を取得し、取得した領域情報をマスク制御部２０７に出力する。なお、入力処理部２０６は、操作スイッチ３０からの入力信号だけでなく、撮像画像に含まれる手などの指示部による入力や、撮像素子７２によって撮像された目元の画像に基づく視線入力に基づいて、マスクすべき対象物の領域情報を取得してもよい。

マスク制御部２０７（制御部）は、カメラ６４が撮像した撮像画像を表示パネル６３に表示させるとともに、遅延画像における指定された領域をマスク処理部２２０にマスクさせる。なお、マスク制御部２０７は、マスク処理部２２０の画像処理部２０５にマスクさせる領域を上述の指定された領域として取得し、遅延画像における指定された領域をマスク処理部２２０の画像処理部２０５にマスクさせる。マスク制御部２０７は、入力処理部２０６によって入力された領域情報に基づいて、マスクさせる領域を取得する。

次に、本実施形態におけるヘッドマウントディスプレイ１が通信を行う場合のシステム構成の一例について説明する。
図９は、ヘッドマウントディスプレイ１のネットワーク接続の一例を示す図である。
この図においてヘッドマウントディスプレイをＨＭＤと表記する。なお、ＨＭＤ１は、ユーザー（本人）が使用するヘッドマウントディスプレイであり、ＨＭＤ５００は、他人が使用するヘッドマウントディスプレイである。この図において、接続に関して必要な要素のみを記載し、他は省略している。

図９において、ヘッドマウントディスプレイ１（ＨＭＤ１）は、ネットワーク２３０を介して、ＨＭＤ５００と、ＰＣ（パーソナルコンピュータ）２５０とに接続されている。ここで、ＨＭＤ１は、タッチスイッチ３４、表示パネル６３、カメラ６４、処理部１２３、フラッシュメモリー１２２、及び通信部１３（１３１，１３８）を備えている。ここで、通信部１３は、例えば、ＷｉＦｉ通信回路１３１及び３Ｇ／ＬＴＥ通信回路１３８である。

また、ＨＭＤ５００は、ＨＭＤ１と同様の通信手段を有するヘッドマウントディスプレイである。ＨＭＤ５００は、ＨＭＤ１と同様に、タッチスイッチ５３４、表示パネル５６３（表示部）、カメラ５６４、処理部５２３、フラッシュメモリー５２２、及び通信部５１３（５３１，５３８）を備えている。ＨＭＤ５００の各機能部は、ＨＭＤ１の各機能部と同等である。

ＰＣ２５０は、処理部２５１、記憶部２５２、通信部２５３、入力部２５４、表示部２５５、及びカメラ２５６を備えている。
処理部２５１は、ＣＰＵ（中央演算装置）及びＧＰＵ（Graphics Processing Unit）等である。処理部２５１は、通信部２５３、入力部２５４、表示部２５５、及びカメラ２５６を制御する。処理部２５１は、例えば、記憶部２５２に記憶されている画像データと、通信部２５３を介して取得した画像データと、カメラ２５６で撮像された画像データとを切り替えて、表示部２５５に表示させる。また、処理部２５１は、例えば、記憶部２５２に記憶されている画像データ（例えば、アバター画像）と、カメラ２５６で撮像された画像データとを切り替えて、通信部２５３から送信させる。処理部２５１は、例えば、画像の一部領域を切り出して拡大・縮小する処理や、アバター画像などの合成処理や、上述したマスク処理などの画像処理を実行する。

記憶部２５２は、例えば、メモリー、ＨＤＤ（ハードディスク）である。記憶部２５２には、ＰＣ２５０のＯＳ（オペレーション・システム）、ＨＭＤ１、及びＨＭＤ５００と通話を行うためのアプリケーション、ＰＣ２５０のユーザーに対して予め設定されているアバター画像データ等が記憶されている。

通信部２５３は、例えば、無線ＬＡＮ、または有線ＬＡＮ、３Ｇ回線、ＬＴＥ回線等の通信を行うインタフェースである。通信部２５３は、ネットワーク２３０を介して受信した情報を処理部２５１に出力する。通信部２５３は、処理部２５１が出力した情報を、ネットワーク２３０を介して、ＨＭＤ１、及びＨＭＤ５００に送信する。

入力部２５４は、例えば、キーボード、マウス、タブレットと操作ペン等である。入力部２５４は、入力された情報を、処理部２５１に出力する。なお、表示部２５５がタッチパネル機能を有する場合、表示部２５５は入力部２５４の機能を兼ねるようにしてもよい。

表示部２５５は、処理部２５１が出力した画像データに基づく画像を表示する。
一例として、表示部２５５には、ＨＭＤ１が撮像した撮像画像であって、マスクすべき対象物がマスクされた撮像画像が表示される。
カメラ２５６は、カメラ６４と同様の、例えば、５００万画素〜１０００万画素の撮像素子を有する撮像部である。

次に、本実施形態におけるヘッドマウントディスプレイ１の動作について説明する。
図１０は、本実施形態におけるヘッドマウントディスプレイ１の動作の一例を示す状態遷移図である。

この図において、まず、ヘッドマウントディスプレイ１は、待ち受け状態ＳＴ１０において、タッチスイッチ３４又は操作スイッチ３０によって、通信相手が選択、又は通信相手の識別番号（例えば、電話番号など）が入力された場合に、呼び出し状態ＳＴ２０に遷移する。
次に、呼び出し状態ＳＴ２０において、ヘッドマウントディスプレイ１は、通信相手が応答した場合に、通信相手（例えば、ＨＭＤ５００やＰＣ２５０など）と接続し、相手と接続した状態ＳＴ４１に遷移する。

また、待ち受け状態ＳＴ１０において、他の端末からの着信があった場合に、ヘッドマウントディスプレイ１は、音と光、振動などを出力して、相手を確認する状態ＳＴ３０に遷移し、相手の識別番号（例えば、電話番号など）や相手のアイコンを表示する。
次に、相手を確認する状態ＳＴ３０において、タッチスイッチ３４又は操作スイッチ３０によって、着信に応じる入力がされた場合に、ヘッドマウントディスプレイ１は、相手と接続した状態ＳＴ４１に遷移する。

相手と接続した状態ＳＴ４１において、ヘッドマウントディスプレイ１は、通信相手との対話を行うとともに、上述したメモリー画像を表示パネル６３に表示する。また、ヘッドマウントディスプレイ１は、例えば、メモリー１２７に記憶されているアバター画像を表示パネル６３に表示するとともに、通信相手（例えば、図９のＨＭＤ５００やＰＣ２５０など）に通信部１３を介してアバター画像を送信する。
また、相手と接続した状態ＳＴ４１において、タッチスイッチ３４又は操作スイッチ３０によって、カメラ６４の撮像動作を開始する操作がされた場合に、ヘッドマウントディスプレイ１は、カメラ６４の撮像動作を開始（ＯＮ（オン））し、カメラ映像表示状態ＳＴ４２に遷移する。

カメラ映像表示状態ＳＴ４２において、ヘッドマウントディスプレイ１は、例えば、カメラ６４により撮像した撮像画像を上述したマスク処理部２２０及びマスク制御部２０７によってマスクされた撮像画像を、通信部１３を介して通信相手（例えば、図９のＨＭＤ５００やＰＣ２５０など）に送信する。ここで処理部１２３によって実行されるマスク指定、及びマスク処理の動作の詳細については、後述する。
また、カメラ映像表示状態ＳＴ４２において、タッチスイッチ３４又は操作スイッチ３０によって、カメラ６４の撮像動作を停止する操作がされた場合に、ヘッドマウントディスプレイ１は、カメラ６４の撮像動作を停止（ＯＦＦ（オフ））し、上述した相手と接続した状態ＳＴ４１に遷移する。

なお、上述した相手と接続した状態ＳＴ４１、及びカメラ映像表示状態ＳＴ４２は、図９のＨＭＤ５００やＰＣ２５０など他の端末と通信するコミュニケーション動作状態ＳＴ４０を示している。

また、コミュニケーション動作状態ＳＴ４０において、タッチスイッチ３４又は操作スイッチ３０によって、通信の接続を切断する操作がされた場合に、ヘッドマウントディスプレイ１は、通信の接続を切断し、上述した待ち受け状態ＳＴ１０に遷移する。

次に、本実施形態における処理部１２３によるマスク指定、及びマスク処理の動作について説明する。
＜第１のマスク処理方法＞
図１１は、本実施形態におけるマスク指定、及びマスク処理の一例を示す図である。
図１１（ａ）において、画像Ｇ１は、撮像画像にマスクする対象物を指定した場合の一例を示している。ここで、マークＭＰ１〜ＭＰ４は、マスクする対象物を指定するマークを示している。

例えば、上述した相手と接続した状態ＳＴ４１からカメラ映像表示状態ＳＴ４２に遷移する際に、ヘッドマウントディスプレイ１のユーザーは、通信部１３を介して、撮像画像を他の端末に送信する前に、表示パネル６３に表示されている撮像画像に含まれるマスクする対象物を指定（マーキング）する。すなわち、マスク制御部２０７は、入力処理部２０６によって取得したマークＭＰ１〜ＭＰ４が示すマスクさせる領域を、指定された領域として取得する。マスクする対象物は、例えば、人間、顔、その他の背景に存在する固有名詞などの受信者に見せたくないものである。

また、図１１（ｂ）において、画像Ｇ２は、上述の画像Ｇ１において指定された領域をマスクした撮像画像の一例を示している。マスク制御部２０７は、上述した画像Ｇ１のような指定された領域を取得し、取得した領域をマスクする処理を、マスク処理部２２０の画像処理部２０５に実行させる。ここで画像Ｇ２において、領域Ｍ１〜Ｍ４は、それぞれマークＭＰ１〜ＭＰ４に対応するマスクされた領域を示している。画像処理部２０５は、マスク領域Ｍ１〜Ｍ４に示すように、マスク制御部２０７が取得したマークＭＰ１〜ＭＰ４に対応する領域をマスクする。なお、この例では、画像処理部２０５は、マスク領域Ｍ１〜Ｍ４におけるマスクを無地（白色のパターン領域）としているが、周囲画像の平均色、平均階調としてもよいし、マスク範囲の隣接部からマスクサイズと同一サイズの領域を切り出して置き換えるなどによりマスクしてもよい。

また、画像処理部２０５は、人物の顔をマスクする場合には、アバターで置き換えることによりマスクしてもよい。この場合、アバターで置き換えることで、ヘッドマウントディスプレイ１は、画像全体の状況を変化させずに受信者に撮像画像（遅延画像）を送信することができるので、無地によるマスクに比べて受信者がマスクを不自然に感じない自然なコミュニケーションが可能になる。

なお、画像処理部２０４は、表示パネル６３に表示させる撮像画像において、画像処理部２０５と同様のマスクをする処理を実行してもよいし、撮像画像をマスクせずにそのままデコーダー１２１に出力してもよい。また、画像処理部２０４は、マスクされた撮像画像（画像Ｇ２）を通信部１３が送信している間においても、撮像画像に上述したマークＭＰ１〜ＭＰ４を合成した画像Ｇ１を生成し、デコーダー１２１を介して表示パネル６３に表示させてもよい。この場合、ユーザーは、送信先においてマスクされている領域を常に認識することができるので、ヘッドマウントディスプレイ１は、マスクの領域を共有した上で良好なコミュニケーションが可能になる。

＜第２のマスク処理方法＞
また、図１２は、本実施形態におけるマスク指定の別の一例を示す図である。
この図において、画像Ｇ３は、撮像画像を示しており、範囲Ｒ１〜Ｒ３は、予め定められた表示の切り取り範囲を示している。この図１２における一例では、マスク処理部２２０は、撮像画像のうちのマスクさせる領域を含まない範囲の領域を切り出して、マスクされた撮像画像（遅延画像）を生成する。
この場合、例えば、入力処理部２０６は、ユーザーによって範囲Ｒ１〜Ｒ３のうちのいずれの範囲を切り出して表示させるかを指定する情報を取得し、マスク制御部２０７に出力する。マスク制御部２０７は、入力処理部２０６を介して取得した範囲Ｒ１〜Ｒ３のうちのいずれかを示す情報に基づいて、画像処理部２０５に範囲Ｒ１〜Ｒ３のうちのいずれかの範囲を切り出して拡大した撮像画像を生成させて、生成した撮像画像を通信部１３に送信させる。

図１３は、上述した図１２の範囲Ｒ１〜Ｒ３を切り出してマスク処理した場合の画像例を示している。図１３（ａ）の画像Ｇ３１は、上述した画像Ｇ３の範囲Ｒ１が指定された場合に、画像処理部２０５によって生成される画像を示している。また、図１３（ｂ）の画像Ｇ３２は、上述した画像Ｇ３の範囲Ｒ２が指定された場合に、画像処理部２０５によって生成される画像を示している。また、図１３（ｃ）の画像Ｇ３３は、上述した画像Ｇ３の範囲Ｒ３が指定された場合に、画像処理部２０５によって生成される画像を示している。

図１２の画像Ｇ３では、マスクする対象物を含まない表示可能な範囲は、例えば、範囲Ｒ２であり、範囲Ｒ２の外にマスクすべき対象が存在している。この場合、ユーザーは、タッチスイッチ３４又は操作スイッチ３０により範囲Ｒ２を指定する。これにより、マスク制御部２０７は、入力処理部２０６を介して、範囲Ｒ２を示す情報を取得し、画像処理部２０５に範囲Ｒ２を切り出して拡大した撮像画像（図１３（ｂ）の画像Ｇ３２）を生成させる。画像処理部２０５は、生成した画像Ｇ３２をマスクした画像として、通信部１３を介して他の端末（図９のＨＭＤ５００やＰＣ２５０など）に送信する。
これにより、ヘッドマウントディスプレイ１は、マスクしているという印象を感じさせない状態で、受信側の他の端末とコミュニケーションすることができる。

なお、上述の例では、範囲Ｒ２が選択される場合を説明したが、マスクする対象物の領域を含まない範囲であれば、範囲Ｒ１又は範囲Ｒ３が選択されてもよい。また、マスク制御部２０７は、最初に中央部分の範囲Ｒ１が自動で指定し、ユーザーによって指定されたマスクする対象物を含まない範囲まで、徐々に表示範囲を広げていく処理を行ってもよい。

＜第３のマスク処理方法＞
また、図１４は、本実施形態におけるマスク指定、及びマスク処理の別の一例を示す図である。
図１４（ａ）において、画像Ｇ４は、表示パネル６３に表示しているマスクする前の撮像画像の一例を示している。この例では、画像処理部２０４は、撮像画像を分割領域ＳＧ１〜ＳＧ１２に分割するグリッド線を合成した画像Ｇ４を生成し、表示パネル６３は、この画像Ｇ４を表示する。この場合、ユーザーは、タッチスイッチ３４又は操作スイッチ３０により分割領域ＳＧ１〜ＳＧ１２のうちのマスクすべき領域を指定する。これにより、マスク制御部２０７は、入力処理部２０６を介して、分割領域ＳＧ１〜ＳＧ１２のうちのマスクすべき領域を指定された領域として取得し、画像処理部２０５に指定された領域をマスクさせる。画像処理部２０５は、マスクした撮像画像（遅延画像）を、通信部１３を介して他の端末（図９のＨＭＤ５００やＰＣ２５０など）に送信する。

例えば、図１４（ｂ）は、上述の画像Ｇ４において、分割領域ＳＧ１及び分割領域ＳＧ１がマスクする領域として指定された場合に、画像処理部２０５によってマスクされた画像Ｇ５を示している。この場合、画像処理部２０５は、分割領域ＳＧ１及び分割領域ＳＧ１に対応する領域（マスク領域Ｍ５及びマスク領域Ｍ６）をマスクする。

このように、本実施形態における処理部１２３は、上述した第１〜第３のマスク処理方法のいずれか、又は、組み合わせによりマスクすべき対象物をマスクする。

次に、本実施形態におけるヘッドマウントディスプレイ１が、撮像画像を送信する動作について説明する。
図１５は、本実施形態における撮像画像を送信する処理の一例を示すフローチャートである。
この図において、まず、ヘッドマウントディスプレイ１は、メモリー画像を表示し、メモリー画像の送信を開始する（ステップＳ１０１）。例えば、マスク制御部２０７は、画像切替部２０２及び画像切替部２０３に対して、メモリー画像（例えば、アバター画像）に切り替えて出力させる。また、マスク制御部２０７は、マスク処理部２２０の画像処理部２０４に、メモリー画像をマスクせずにそのままデコーダー１２１に出力させる。これにより、表示パネル６３は、メモリー画像を表示する。また、マスク制御部２０７は、マスク処理部２２０の画像処理部２０５に、メモリー画像をマスクせずにそのまま通信部１３に出力させる。これにより、通信部１３は、メモリー画像を他の端末に送信する。なお、この状態は、図１０の相手と接続した状態ＳＴ４１に対応する。

次に、ヘッドマウントディスプレイ１は、撮像画像の表示を開始する（ステップＳ１０２）。処理部１２３は、タッチスイッチ３４又は操作スイッチ３０によって、カメラ６４の撮像動作を開始する操作がされた場合に、ヘッドマウントディスプレイ１は、カメラ６４の撮像動作を開始（ＯＮ（オン））する。マスク制御部２０７は、画像切替部２０２を撮像画像に切り替えて出力させて、表示パネル６３に撮像画像を表示させる。なお、この状態において、画像切替部２０３は、メモリー画像を出力したままであるので、通信部１３は、メモリー画像を他の端末に送信している。

次に、ヘッドマウントディスプレイ１は、マスク指定の処理をする（ステップＳ１０３）。ここで、マスク制御部２０７は、例えば、上述した第１〜第３のマスク処理方法のいずれか、又は、組み合わせによるマスク指定の処理を行う。すなわち、マスク制御部２０７は、上述した第１〜第３のマスク処理方法のいずれか、又は、組み合わせにより、マスクする領域を取得する。

次に、ヘッドマウントディスプレイ１は、撮像画像のマスク処理を開始する（ステップＳ１０４）。マスク制御部２０７は、画像切替部２０３に、遅延部２０１により所定の期間遅延された撮像画像に切り替えて出力させる。そして、マスク制御部２０７は、画像処理部２０５に、取得したマスクする領域をマスクする処理を実行させて、マスクされた遅延画像（撮像画像）を通信部１３に出力させる。

次に、ヘッドマウントディスプレイ１は、マスクされた撮像画像の送信を開始する（ステップＳ１０５）。マスク制御部２０７は、通信部１３にマスクされた遅延画像（撮像画像）を他の端末に送信させる。なお、この状態は、図１０のカメラ映像表示状態ＳＴ４２に対応する。

次に、ヘッドマウントディスプレイ１は、ユーザーからマスク指定要求があるか否かを判定する（ステップＳ１０６）。例えば、ユーザーが表示パネル６３に表示されている撮像画像に新たにマスクすべき対象物を発見した場合に、ヘッドマウントディスプレイ１は、タッチスイッチ３４又は操作スイッチ３０によりマスク指定を要求する指示が入力される。マスク制御部２０７は、入力処理部２０６を介して、ユーザーからのマスク指定の要求があるか否かを判定する。マスク制御部２０７は、ユーザーからのマスク指定の要求がある場合（ステップＳ１０６：Ｙｅｓ）に、処理をステップＳ１０７に進める。また、マスク制御部２０７は、ユーザーからのマスク指定の要求がない場合（ステップＳ１０６：Ｎｏ）に、処理をステップＳ１０８に進める。

次に、ステップＳ１０７において、ヘッドマウントディスプレイ１は、マスク指定を追加する。すなわち、マスク制御部２０７は、上述のステップＳ１０３の処理と同様の処理を行い、マスクする領域（新たにマスクすべき対象物に対応する領域）を取得する。マスク制御部２０７は、画像処理部２０５に、取得した領域をマスクする処理を実行させて、マスクされた遅延画像（撮像画像）を通信部１３に出力させる。
なお、表示パネル６３に表示されている撮像画像は、遅延部２０１により遅延される前の撮像画像であり、ステップＳ１０６において、ユーザーが新たにマスクすべき対象物を発見した時刻では、ユーザーが新たにマスクすべき対象物を含んだ撮像画像は、通信部１３から送信されない。そこで、遅延部２０１により遅延される所定の期間の間に、ステップＳ１０７の処理を実行することにより、画像処理部２０５は、新たに発見されたマスクすべき対象物をマスクして、通信部１３に出力する。

次に、ステップＳ１０８において、ヘッドマウントディスプレイ１は、送信終了か否かを判定する。すなわち、処理部１２３は、タッチスイッチ３４又は操作スイッチ３０によりユーザーから撮像画像の送信を終了（停止）する指示が入力されたか否かを判定する。処理部１２３は、送信終了である場合（ステップＳ１０８：Ｙｅｓ）に処理を終了させる。また、処理部１２３は、送信終了でない場合（ステップＳ１０８：Ｎｏ）に処理をステップＳ１０６に戻す。

以上説明したように、本実施形態における通信装置２００は、カメラ６４と、遅延部２０１と、マスク処理部２２０と、通信部１３と、マスク制御部２０７とを備えている。
カメラ６４が、画像を撮像し、遅延部２０１が、カメラ６４が撮像した撮像画像を所定の期間遅延させた遅延画像を出力する。マスク処理部２２０は、遅延部２０１から出力された遅延画像のうちの指定された領域をマスクする。通信部１３は、少なくともマスク処理部２２０によってマスクされた遅延画像を送信する。そして、マスク制御部２０７は、カメラ６４が撮像した撮像画像を表示パネル６３に表示させるとともに、マスク処理部２２０にマスクさせる領域を指定された領域として取得し、遅延画像における指定された領域をマスク処理部２２０にマスクさせる。
これにより、例えば、ユーザーが撮像画像に新たにマスクすべき対象物を発見した場合に、遅延部２０１による遅延される所定の期間の間に、マスクする領域を追加することができる。そのため、本実施形態における通信装置２００は、撮像画像に含まれるマスクすべき対象物を適切にマスクすることができる。また、このことにより、本実施形態における通信装置２００は、マスクすべき対象物が撮像画像に写り込むことによる心理的な負担を低減することができる。

また、本実施形態では、上述の所定の期間は、例えば、表示パネル６３による撮像画像の表示から、マスク制御部２０７がマスクさせる領域を取得し、マスク処理部２２０が指定された領域をマスクするまでの期間よりも長い期間である。これにより、遅延部２０１による撮像画像が遅延している間に、確実にマスクする領域を追加指定することができるので、本実施形態における通信装置２００は、撮像画像に含まれるマスクすべき対象物を確実にマスクすることができる。

また、本実施形態における通信装置２００は、表示パネル６３が表示する表示画像に基づいて、情報の入力を処理する入力処理部２０６を備えている。マスク制御部２０７は、入力処理部２０６によって入力された情報に基づいて、マスクさせる領域を取得する。これにより、表示画像を確認しながら簡易な手段によりマスクする領域を指定することができるので、本実施形態における通信装置２００は、利便性を向上させつつ、撮像画像に含まれるマスクすべき対象物を適切にマスクすることができる。

また、本実施形態では、マスク処理部２２０は、撮像画像のうちの指定された領域（マスクする領域）を含まない範囲の領域を切り出して、マスクされた遅延画像を生成してもよい。すなわち、本実施形態における通信装置２００は、カメラ６４と、マスク処理部２２０と、通信部１３と、マスク制御部２０７とを備え、マスク処理部２２０は、カメラ６４が撮像した撮像画像のうちのマスクする対象物を含まない範囲の領域を切り出した画像を生成することにより、対象物をマスクする。また、マスク制御部２０７は、対象物を含まない範囲の領域を取得し、取得した対象物を含まない範囲の領域に基づいて、マスク処理部２２０に撮像画像をマスクさせる。
これにより、本実施形態における通信装置２００は、マスクしているという印象を感じさせない状態で、受信側の他の端末とコミュニケーションすることができる。

また、本実施形態におけるヘッドマウントディスプレイ１は、上述した通信装置２００と、少なくともカメラ６４及び表示パネル６３をユーザーの頭部、又は頭部の近傍に装着するヘッドバンド４０とを備えている。
これにより、本実施形態におけるヘッドマウントディスプレイ１は、上述した通信装置２００と同様の効果を奏する。例えば、本実施形態におけるヘッドマウントディスプレイ１は、撮像画像に含まれるマスクすべき対象物を適切にマスクすることができる。

次に、第２実施形態について、図面を参照して説明する。
［第２実施形態］
図１６は、第２実施形態における処理部１２３ａの機能ブロック図である。
なお、第２実施形態では、第１実施形態における処理部１２３が、処理部１２３ａに置き換わる点を除いて、第１実施形態における図１〜図７、及び図９の構成と同様である。

図１６において、処理部１２３ａは、遅延部２０１、切替部２１０、マスク処理部２２０ａ、入力処理部２０６、マスク制御部２０７ａ、及びマスク情報生成部２０８を備えている。なお、本実施形態では、受信側の装置において、マスクを解除する処理が追加されるため、処理部１２３ａを備えているヘッドマウントディスプレイ１と同様の構成を備えるヘッドマウントディスプレイ５００（ＨＭＤ５００）がネットワーク２３０を介して接続されている構成により説明する。
ヘッドマウントディスプレイ５００は、処理部１２３ａと同一の構成である処理部５２３を備えている。
なお、この図において、図８と同一の構成については同一の符号を付し、その説明を省略する。

マスク情報生成部２０８は、マスクが必要か否かを示すマスク要否情報と、マスクさせる領域に対応するマスクに関する情報とを関連付けたマスク情報を生成する。ここで、マスク要否情報とは、受信側がマスクする必要のあるユーザーか否かに対応する情報であり、複数のレベルに分類されたレベル情報を含んでいてもよい。例えば、ヘッドマウントディスプレイ１がネットワーク２３０を介して他の端末（例えば、ＨＭＤ５００など）に接続されている場合に、ヘッドマウントディスプレイ１のユーザーとＨＭＤ５００のユーザーが同一の会社の人間であれば、撮像画像をマスクする必要はない場合が考えられる。また、ＨＭＤ５００のユーザーが、例えば、他の会社の人間などであれば、秘密保持やセキュリティ上、撮像画像をマスクする必要が生じる場合がある。このような場合に対応するため、本実施形態では、マスク情報生成部２０８が、マスクが必要か否かを示すマスク要否情報をマスクに関する情報に付加してマスク情報を生成する。

なお、このレベル情報は、例えば、「社内」、「グループ会社内」、「他社」などのように、３つ以上のレベルに分類されてもよい。このレベル情報は、例えば、レベル情報の値が高いほど、秘密性又はセキュリティが高く、レベル情報の値が低いほど、秘密性又はセキュリティが低く設定されてもよい。また、他の端末におけるマスク要否情報のレベルは、予め設定されていてもよいし、受信側の他の端末と通信を行う際に、撮像画像の送信側であるヘッドマウントディスプレイ１が設定し、設定したレベル情報を他の端末に通信部１３を介して送信してもよい。
また、マスクに関する情報とは、マスクを解除するための情報であり、例えば、マスクの位置、サイズ、形状、マスク処理方法などの情報である。

マスク処理部２２０ａは、上述したマスク処理部２２０と同様の処理の他に、上述したマスク情報に基づいて、マスクされている画像のマスクを解除する処理を実行する。なお、本実施形態におけるマスク処理方法は、マスクを解除することができる必要がある。マスク処理部２２０ａは、例えば、所定のアルゴリズムや関数により、指定された領域の画像を置換又は変換し、可逆変換可能なモザイク模様のようなマスク処理を行ってもよい。また、例えば、マスク情報にマスクした領域のマスク前の部分画像が含まれており、マスク処理部２２０ａは、マスク前の部分画像に基づいて、マスクされている画像のマスクを解除する処理を実行してもよい。
また、マスク処理部２２０ａは、２つの画像処理部（２０４ａ，２０５）を備えている。

画像処理部２０４ａは、画像切替部２０２から出力された画像に対して、各種画像処理を実行し、画像処理した画像をデコーダー１２１に出力する。画像処理部２０４ａは、例えば、画像の一部領域を切り出して拡大・縮小する処理や、アバター画像などの合成処理や、上述したマスク処理などの画像処理を実行する。また、画像処理部２０４ａは、後述するマスク制御部２０７ａの指示により、マスク情報に基づいて、マスクされた画像のマスクを解除する処理を実行する。また、画像処理部２０４ａは、後述するマスク制御部２０７ａの指示により、画像処理を実行せずに、画像切替部２０２から出力された画像をそのままデコーダー１２１に出力する。

マスク制御部２０７ａ（制御部）は、撮像画像を送信する場合に、上述したマスク制御部２０７と同様の処理を実行するとともに、マスク情報生成部２０８にマスク情報を生成させる。なお、マスク制御部２０７ａは、マスクする領域の取得の際に、入力処理部２０６を介して、マスク要否情報に含まれるレベル情報を取得し、取得したマスクする領域、及びレベル情報に基づいて、マスク情報生成部２０８にマスク情報を生成させる。また、マスク制御部２０７ａは、画像処理部２０４ａがマスクした遅延画像（撮像画像）とともにマスク情報を、通信部１３を介して他の端末（例えば、ＨＭＤ５００）に送信させる。

また、マスク制御部２０７ａは、通信部１３（通信部５１３）を介して他の端末から受信したマスク情報に基づいて、マスクを解除して表示パネル６３に表示させるか否かを判定する。マスク制御部２０７ａは、例えば、受信側で設定されているレベルの値が、受信したレベル情報の値以上である場合に、マスクを解除すると判定する。マスク制御部２０７ａは、マスクを解除すると判定した場合に、マスク処理部２２０ａに、受信したマスクされた画像に含まれるマスクを、受信したマスク情報に基づいてマスク解除する処理を実行させる。また、マスク制御部２０７ａは、マスクを解除しないと判定した場合に、マスク処理部２２０ａに、受信したマスクされた画像をそのままデコーダー１２１に出力させる。

次に、第２実施形態におけるヘッドマウントディスプレイ１の動作について説明する。
本実施形態におけるヘッドマウントディスプレイ１の動作における状態遷は、図１０と同様であるので、ここでは説明を省略する。また、本実施形態におけるマスク処理方法（マスク指定、及びマスク処理）は、第１実施形態における第１〜第３のマスク処理方法と同様であり、ここでは説明を省略する。

次に、本実施形態におけるヘッドマウントディスプレイ１が、撮像画像を送信、及び受信する動作について説明する。
図１７は、本実施形態における撮像画像を送信、及び受信する処理の一例を示すフローチャートである。
図１７において、ステップＳ２０１〜ステップＳ２０９の処理は、ヘッドマウントディスプレイ１（ＨＭＤ１）による送信側の処理を示している。また、ステップＳ５０１〜ステップＳ５０７の処理は、ヘッドマウントディスプレイ５００（ＨＭＤ５００）による受信側の処理を示している。

まず、ヘッドマウントディスプレイ１の送信側の処理について説明する。
ステップＳ２０１〜ステップＳ２０４の処理は、図１５に示される第１実施形態におけるステップＳ１０１〜ステップＳ１０４の処理と同様であるので、ここでは説明を省略する。

次に、ステップＳ２０５において、ヘッドマウントディスプレイ１は、マスク情報の生成を開始する。マスク制御部２０７ａは、取得したマスクする領域、及びレベル情報に基づいて、マスク情報生成部２０８にマスク情報を生成させる。マスク情報生成部２０８は、レベル情報を含むマスク要否情報と、マスクさせる領域に対応するマスクに関する情報とを関連付けたマスク情報を生成する。

次に、ヘッドマウントディスプレイ１は、マスクされた撮像画像、及びマスク情報の送信を開始する（ステップＳ２０６）。マスク制御部２０７ａは、通信部１３にマスクされた遅延画像（撮像画像）とともにマスク情報を他の端末（例えば、ＨＭＤ５００）に送信させる。

続くステップＳ２０７〜ステップＳ２０９の処理は、図１５に示される第１実施形態におけるステップＳ１０６〜ステップＳ１０８の処理と同様であるので、ここでは説明を省略する。

次に、ヘッドマウントディスプレイ５００（ＨＭＤ５００）の受信側の処理について説明する。
まず、ヘッドマウントディスプレイ１において、ステップＳ２０１の処理が実行された場合に、ヘッドマウントディスプレイ５００は、メモリー画像の受信を開始する（ステップＳ５０１）。すなわち、ヘッドマウントディスプレイ５００の通信部５１３は、ヘッドマウントディスプレイ１から送信されたメモリー画像を受信し、処理部１２３ａ（処理部５２３）に供給する。

次に、ヘッドマウントディスプレイ５００は、受信したメモリー画像の表示を開始する（ステップＳ５０２）。ヘッドマウントディスプレイ５００のマスク制御部２０７ａは、画像切替部２０２に通信部５１３が受信したメモリー画像を画像処理部２０４ａに出力させる。また、マスク制御部２０７ａは、画像処理部２０４ａにそのままメモリー画像をデコーダー１２１に出力させて、表示パネル５６３に表示させる。

次に、ヘッドマウントディスプレイ１において、ステップＳ２０６の処理が実行された場合に、ヘッドマウントディスプレイ５００は、マスクされた撮像画像、及びマスク情報の受信を開始する（ステップＳ５０３）。すなわち、ヘッドマウントディスプレイ５００の通信部５１３は、ヘッドマウントディスプレイ１から送信された、マスクされた撮像画像、及びマスク情報を受信し、受信したマスクされた撮像画像、及びマスク情報を処理部１２３ａに供給する。

次に、ヘッドマウントディスプレイ５００は、受信したレベル情報がマスク解除のレベルに対応するか否かを判定する（ステップＳ５０４）。マスク制御部２０７ａは、例えば、予め設定されているヘッドマウントディスプレイ５００のレベルの値が、受信したマスク情報に含まれるレベル情報の値以上である場合にマスク解除に対応すると判定し、レベル情報の値未満である場合にマスク解除に対応しないと判定する。
マスク制御部２０７ａは、受信したレベル情報がマスク解除に対応する場合（ステップＳ５０４：Ｙｅｓ）に、処理をステップＳ５０５に進める。また、マスク制御部２０７ａは、受信したレベル情報がマスク解除に対応しない場合（ステップＳ５０４：Ｎｏ）に、処理をステップＳ５０６に進める。

次に、ステップＳ５０５において、ヘッドマウントディスプレイ５００は、マスクされた撮像画像のマスク解除を開始する。マスク制御部２０７ａは、マスク処理部２２０ａの画像処理部２０４ａに、受信したマスクされた画像に含まれるマスクを、受信したマスク情報に基づいてマスク解除する処理を実行させる。なお、このマスクを解除する際に、画像処理部２０４ａは、後述する図１８に示すように、マスクを解除した撮像画像にマスクを解除したことを示す情報（例、図１８のマスク範囲情報ＭＩ１〜ＭＩ４）を合成（重畳）してもよい。

次に、ステップＳ５０６において、ヘッドマウントディスプレイ５００は、撮像画像の表示を開始する。すなわち、画像処理部２０４ａがデコーダー１２１に撮像画像を出力し、表示パネル６３が、撮像画像を表示する。

次に、ステップＳ５０７において、ヘッドマウントディスプレイ５００は、送信終了か否かを判定する。すなわち、処理部１２３ａは、撮像画像の送信を終了（停止）か否かを判定する。処理部１２３ａは、送信終了である場合（ステップＳ５０７：Ｙｅｓ）に処理を終了させる。また、処理部１２３ａは、送信終了でない場合（ステップＳ５０７：Ｎｏ）に処理をステップＳ５０７に戻して、送信が終了するまで繰り返す。
なお、上述の例では、受信側の端末をヘッドマウントディスプレイ５００としたが、ＰＣ２５０としてもよい。また、ヘッドマウントディスプレイ１が、他の端末（例えば、ＨＭＤ５００、ＰＣ２５０など）が撮像した撮像画像を受信する場合の処理は、上述したヘッドマウントディスプレイ５００の処理と同様である。

以上説明したように、本実施形態における通信装置２００は、マスクが必要か否かを示すマスク要否情報と、マスクさせる領域に対応するマスクに関する情報とを関連付けたマスク情報を生成するマスク情報生成部２０８を備えている。そして、通信部１３は、マスクされた遅延画像（撮像画像）とともに、マスク情報を送信する。
これにより、受信側の他の端末（他装置）において、マスクを解除することができるので、本実施形態における通信装置２００は、受信側に応じて、撮像画像に含まれるマスクすべき対象物を適切にマスクすることができる。また、このことにより、本実施形態における通信装置２００は、マスクすべき対象物が撮像画像に写り込むことによる心理的な負担を低減することができる。

例えば、本実施形態におけるヘッドマウントディスプレイ１（通信装置２００）を用いて、社内と社外とでテレビ電話による打合せをする場合に、社内向けにはマスクをせずにすべての状況を確認させ、社外向けには「社外秘」をマスクした画像を提供することが可能である。すなわち、本実施形態における通信装置２００は、複数の送信先に、撮像画像を送信する場合に、送信先に応じて適切にマスクを行うことができる。
このように、本実施形態における通信装置２００は、マスクをしない共有範囲を受信先の相手に応じて、切り替えることにより、同時にコミュニケーションを行いながらも、社内の人間相手には、社外より情報量を多く発信することができる。

また、本実施形態では、通信部１３（通信部５１３）は、他装置によってマスクされた画像及びマスク情報を受信し、マスク処理部２２０ａは、マスク制御部２０７ａの指示により、マスクされた画像に含まれるマスクをマスク情報に基づいて解除する。マスク制御部２０７ａは、通信部１３が他装置からマスクされた画像を受信した場合に、マスク要否情報に基づいて、マスクされた画像のマスクを解除するか否かを判定する。マスク制御部２０７ａは、マスクされた画像のマスクを解除すると判定した場合に、マスクされた画像に含まれるマスクをマスク処理部２２０ａに解除させるとともに、マスクを解除させた画像を表示パネル６３（表示パネル５６３）に表示させる。
これにより、本実施形態における通信装置２００は、撮像画像を受信する際に、適切にマスクを解除することができる。

また、本実施形態では、マスク制御部２０７ａは、マスクを解除したことを示す情報（例、図１８のマスク範囲情報ＭＩ１〜ＭＩ４）を、マスクを解除させた画像とともに表示パネル６３に表示させてもよい。
ここで、図１８は、本実施形態におけるマスクを解除した撮像画像の表示例を示す図である。この図において、画像Ｇ６は、表示パネル６３（表示パネル５６３）に表示されるマスクを解除した撮像画像を示している。また、マスク範囲情報ＭＩ１〜ＭＩ４は、上述したマスクを解除したことを示す情報である。
これにより、マスクを解除された撮像画像を見ているユーザーが、マスクされている撮像画像においてマスクされている領域を知ることができる。そのため、本実施形態における通信装置２００は、ユーザーがどこまでが共有されている情報であるかを認識しながらコミュニケーションを図ることができる。

また、上述したマスク要否情報は、複数のレベルに分類されたレベル情報を含んでもよい。
これにより、複数段階に分けてマスクをかける（又は解除する）ことが可能になるので、本実施形態における通信装置２００は、複数の他装置と接続する場合に、撮像画像を受信する相手先に応じて、撮像画像に含まれるマスクすべき対象物を適切にマスクすることができる。

なお、本実施形態における通信装置２００は、遅延部２０１を備えない形態であってもよい。すなわち、本実施形態における通信装置２００は、カメラ６４と、マスク処理部２２０ａと、マスク情報生成部２０８と、通信部１３と、マスク制御部２０７ａとを備え、マスク情報生成部２０８は、マスクが必要か否かを示すマスク要否情報と、指定された領域に対応するマスクに関する情報とを関連付けたマスク情報を生成する。通信部１３は、少なくともマスク処理部２２０ａによってマスクされた撮像画像とともに、マスク情報を送信する。そして、マスク制御部２０７ａは、マスク処理部２２０ａにマスクさせる領域を指定された領域として取得し、撮像画像における指定された領域をマスク処理部２２０ａにマスクさせる。
これにより、本実施形態における通信装置２００は、受信側に応じて、撮像画像に含まれるマスクすべき対象物を適切にマスクすることができる。

なお、本実施形態におけるヘッドマウントディスプレイ１は、本実施形態における通信装置２００を備えているので、本実施形態におけるヘッドマウントディスプレイ１においても、本実施形態における通信装置２００と同様の効果を奏する。

次に、第３実施形態について、図面を参照して説明する。
［第３実施形態］
図１９は、第３実施形態における処理部１２３ｂの機能ブロック図である。
なお、第３実施形態では、第２実施形態における処理部１２３ａが、処理部１２３ｂに置き換わる点を除いて、第２実施形態の構成と同様である。

図１９において、処理部１２３ｂは、遅延部２０１、切替部２１０、マスク処理部２２０ｂ、入力処理部２０６、マスク制御部２０７ｂ、及びマスク情報生成部２０８を備えている。なお、上述した第２実施形態では、マスク処理部２２０ａが送信側でマスク処理を行う形態であったが、第３実施形態では、マスク処理部２２０ｂが受信側でマスク処理を行う。また、本実施形態において、マスクに関する情報とは、マスク処理を行うための情報であり、例えば、マスクの位置、サイズ、形状、マスク処理方法などの情報である。
また、この図において、図１６と同一の構成については同一の符号を付し、その説明を省略する。

マスク処理部２２０ｂは、上述したマスク処理部２２０ｂと同様の処理の他に、上述したマスク情報に基づいて、マスクされている画像のマスクを解除する処理を実行する。マスク処理部２２０ｂは、２つの画像処理部（２０４ｂ，２０５）を備えている。

画像処理部２０４ｂは、画像切替部２０２から出力された画像に対して、各種画像処理を実行し、画像処理した画像をデコーダー１２１に出力する。画像処理部２０４ｂは、例えば、画像の一部領域を切り出して拡大・縮小する処理や、アバター画像などの合成処理や、上述したマスク処理などの画像処理を実行する。また、画像処理部２０４ｂは、後述するマスク制御部２０７ｂの指示により、マスク情報に基づいて、受信した画像をマスクする処理を実行する。また、画像処理部２０４ｂは、後述するマスク制御部２０７ｂの指示により、画像処理を実行せずに、画像切替部２０２から出力された画像をそのままデコーダー１２１に出力する。

マスク制御部２０７ｂ（制御部）は、撮像画像を送信する場合に、上述した画像処理部２０４ｂに画像処理を実行せずに、画像切替部２０２から出力された画像をそのままデコーダー１２１に出力させるとともに、マスク情報生成部２０８にマスク情報を生成させる。なお、マスク制御部２０７ｂは、マスクする領域の取得の際に、入力処理部２０６を介して、マスク要否情報に含まれるレベル情報を取得し、取得したマスクする領域、及びレベル情報に基づいて、マスク情報生成部２０８にマスク情報を生成させる。また、マスク制御部２０７ｂは、画像処理部２０５にマスク処理を実行させずにそのまま遅延画像（撮像画像）を、通信部１３を介して他の端末（例えば、ＨＭＤ５００）に送信させるとともに、マスク情報を、通信部１３を介して他の端末（例えば、ＨＭＤ５００）に送信させる。

また、マスク制御部２０７ｂは、通信部１３（通信部５１３）を介して他の端末から受信したマスク情報に基づいて、マスク処理を実行して表示パネル６３に表示させるか否かを判定する。マスク制御部２０７ｂは、例えば、受信側で設定されているレベルの値が、受信したレベル情報の値以上である場合に、マスク処理を実行しないと判定し、例えば、受信側で設定されているレベルの値が、受信したレベル情報の値未満である場合に、マスク処理を実行すると判定する。マスク制御部２０７ｂは、マスク処理を実行すると判定した場合に、マスク処理部２２０ｂに、受信したマスク情報に基づいて、受信した撮像画像をマスクする処理を実行させる。また、マスク制御部２０７ｂは、マスク処理をしないと判定した場合に、マスク処理部２２０ｂに、受信した撮像画像をそのままデコーダー１２１に出力させる。

次に、第３実施形態におけるヘッドマウントディスプレイ１の動作について説明する。
本実施形態におけるヘッドマウントディスプレイ１の動作における状態遷は、図１０と同様であるので、ここでは説明を省略する。また、本実施形態におけるマスク処理方法（マスク指定、及びマスク処理）は、第１実施形態における第１〜第３のマスク処理方法と同様であり、ここでは説明を省略する。

次に、本実施形態におけるヘッドマウントディスプレイ１が、撮像画像を送信、及び受信する動作について説明する。
図２０は、本実施形態における撮像画像を送信、及び受信する処理の一例を示すフローチャートである。
図２０において、ステップＳ３０１〜ステップＳ３０８の処理は、ヘッドマウントディスプレイ１（ＨＭＤ１）による送信側の処理を示している。また、ステップＳ６０１〜ステップＳ６０７の処理は、ヘッドマウントディスプレイ５００（ＨＭＤ５００）による受信側の処理を示している。

まず、ヘッドマウントディスプレイ１の送信側の処理について説明する。
ステップＳ３０１〜ステップＳ３０３の処理は、図１７に示される第２実施形態におけるステップＳ２０１〜ステップＳ２０３の処理と同様であるので、ここでは説明を省略する。

また、本実施形態では、送信側において、マスク処理が実行されないため、ステップＳ３０５において、ヘッドマウントディスプレイ１は、撮像画像、及びマスク情報の送信を開始する。すなわち、マスク制御部２０７ｂは、通信部１３に遅延画像（撮像画像）とともにマスク情報を他の端末（例えば、ＨＭＤ５００）に送信させる。

続くステップＳ３０６〜ステップＳ３０８の処理は、図１７に示される第２実施形態におけるステップＳ２０７〜ステップＳ２０９の処理と同様であるので、ここでは説明を省略する。但し、ステップＳ３０８において、マスク制御部２０７ｂは、画像処理部２０５にマスク処理を実行させずに、撮像画像をそのまま、通信部１３に送信させる。

次に、ヘッドマウントディスプレイ５００（ＨＭＤ５００）の受信側の処理について説明する。
まず、ヘッドマウントディスプレイ１において、ステップＳ３０１の処理が実行された場合に、ヘッドマウントディスプレイ５００は、メモリー画像の受信を開始する（ステップＳ６０１）。なお、ステップＳ６０１〜ステップＳ６０２の処理は、図１７に示される第２実施形態におけるステップＳ５０１〜ステップＳ５０３の処理と同様であるので、ここでは説明を省略する。

次に、ヘッドマウントディスプレイ１において、ステップＳ３０５の処理が実行された場合に、ヘッドマウントディスプレイ５００は、撮像画像、及びマスク情報の受信を開始する（ステップＳ６０３）。すなわち、ヘッドマウントディスプレイ５００の通信部５１３は、ヘッドマウントディスプレイ１から送信された、撮像画像、及びマスク情報を受信し、受信した撮像画像、及びマスク情報を処理部１２３ｂに供給する。

次に、ヘッドマウントディスプレイ５００は、受信したレベル情報がマスク処理を実行するレベルに対応するか否かを判定する（ステップＳ６０４）。マスク制御部２０７ｂは、例えば、予め設定されているヘッドマウントディスプレイ５００のレベルの値が、受信したマスク情報に含まれるレベル情報の値以上である場合にマスク処理を実行しないレベルに対応すると判定し、レベル情報の値未満である場合にマスク処理を実行するレベルに対応しないと判定する。
マスク制御部２０７ｂは、受信したレベル情報がマスク処理を実行するレベルに対応する場合（ステップＳ６０４：Ｙｅｓ）に、処理をステップＳ６０５に進める。また、マスク制御部２０７ｂは、受信したレベル情報がマスク処理を実行しないレベル対応しない場合（ステップＳ６０４：Ｎｏ）に、処理をステップＳ６０６に進める。
なお、このマスク処理をしない場合（ステップＳ６０４：Ｎｏ）に、画像処理部２０４ｂは、図１８に示すマスク範囲情報ＭＩ１〜ＭＩ４と同様に、撮像画像の指定された領域にマスク処理を行わないことを示す情報を合成（重畳）してもよい。

次に、ステップＳ６０５において、ヘッドマウントディスプレイ５００は、受信したマスク情報に基づいて、撮像画像のマスク処理を開始する。マスク制御部２０７ｂは、マスク処理部２２０ｂの画像処理部２０４ｂに、受信したマスク情報に基づいて、受信した撮像画像をマスクする処理を実行させる。

続くステップＳ６０６〜ステップＳ６０７の処理は、図１７に示される第２実施形態におけるステップＳ５０６〜ステップＳ５０７の処理と同様であるので、ここでは説明を省略する。

以上説明したように、本実施形態における通信装置２００は、カメラ６４と、マスク情報生成部２０８と、通信部１３とを備えている。カメラ６４は、画像を撮像し、マスク情報生成部２０８は、マスクが必要か否かを示すマスク要否情報と、カメラ６４が撮像した撮像画像のうちのマスクする領域として指定された領域に対応するマスクに関する情報とを関連付けたマスク情報を生成する。通信部１３は、少なくとも撮像画像とともに、マスク情報を送信する。
これにより、受信側の他の端末（他装置）において、マスクが必要か否かを示すマスク要否情報に基づいてマスク処理をすることができるので、本実施形態における通信装置２００は、第２実施形態と同様に、受信側に応じて、撮像画像に含まれるマスクすべき対象物を適切にマスクすることができる。

また、本実施形態における通信装置２００は、マスク処理部２２０ｂと、マスク制御部２０７ｂとを備えている。マスク制御部２０７ｂは、通信部１３を介して受信した撮像画像をマスク要否情報に基づいて指定された領域をマスクするか否かを判定する。マスク制御部２０７ｂは、指定された領域をマスクする場合に、マスク処理部２２０ｂに、受信した撮像画像をマスク情報に基づいて指定された領域をマスクさせるとともに、マスクした画像を表示パネル６３に表示させる。
これにより、本実施形態における通信装置２００は、撮像画像を受信する場合に、適切にマスクした画像を表示パネル６３に表示させることができる。

なお、本実施形態におけるヘッドマウントディスプレイ１は、本実施形態における通信装置２００を備えているので、本実施形態におけるヘッドマウントディスプレイ１においても、本実施形態における通信装置２００と同様の効果を奏する。

次に、第４実施形態について、図面を参照して説明する。
［第４実施形態］
図２１は、第４実施形態における処理部１２３ｃの機能ブロック図である。
なお、第４実施形態では、第１実施形態における処理部１２３が、処理部１２３ｃに置き換わる点を除いて、第１実施形態の構成と同様である。

図２１において、処理部１２３ｃは、遅延部２０１、切替部２１０、マスク処理部２２０、入力処理部２０６、マスク制御部２０７ｃ、及びコード検出部２０９を備えている。
なお、この図において、図８と同一の構成については同一の符号を付し、その説明を省略する。

本実施形態では、処理部１２３ｃがコード検出部２０９を備えている点が、第１実施形態と異なる。
コード検出部２０９は、カメラ６４が撮像した撮像画像に含まれる２次元コードを検出する。ここで、２次元コードは、例えば、ＱＲコード（登録商標）などであり、バーコードであってもよい。また、２次元コードは、予めマスクすべき対象物に印刷又は貼り付けられている。２次元コードに含まれる情報には、例えば、マスクする対象物の形状、サイズなどが含まれている。

マスク制御部２０７ｃ（制御部）は、撮像画像を送信する場合に、上述したマスク制御部２０７と同様の処理を実行するとともに、コード検出部２０９によって検出された２次元コードに基づいて、マスクさせる領域を取得する。マスク制御部２０７ｃは、例えば、コード検出部２０９が検出した２次元コードに含まれる対象物の形状、及びサイズと、撮像画像内における２次元コードの大きさとに基づいて、マスクさせる領域を取得する。なお、マスク制御部２０７ｃは、例えば、コード検出部２０９が検出した２次元コードに含まれる対象物の形状、及びサイズと、カメラ６４が測距した２次元コードまでの距離とに基づいて、マスクさせる領域を取得してもよい。
マスク制御部２０７ｃは、取得したマスクさせる領域を指定された領域として、マスク処理部２２０の画像処理部２０５に、遅延画像における指定された領域をマスクさせる。

図２２は、本実施形態における２次元コードに基づくマスク指定、及びマスク処理の一例を示す図である。
図２２（ａ）において、画像Ｇ７は、マスクする対象物に貼り付けられた２次元コードＣ１を含んでいる撮像画像を示している。また、図２２（ｂ）において、画像Ｇ８は、２次元コードＣ１が貼り付けられた対象物をマスクした撮像画像を示している。画像Ｇ８において、領域Ｍ７は、２次元コードＣ１に基づいてマスクされた領域を示している。
図２２の場合、コード検出部２０９は、画像Ｇ７から２次元コードＣ１を検出し、２次元コードＣ１に含まれる情報をマスク制御部２０７ｃに出力する。マスク制御部２０７ｃは、２次元コードＣ１に含まれる情報（マスクする対象物の形状及びサイズ）に基づいて、マスクする領域を取得する。マスク制御部２０７ｃは、図２２（ｂ）の領域Ｍ７に示すように、取得したマスクする領域をマスク処理部２２０の画像処理部２０５にマスクさせる。

なお、マスク制御部２０７ｃは、図２３に示すように、複数の２次元コードによって囲まれた領域をマスクする領域として取得してもよい。
図２３は、本実施形態における２次元コードに基づくマスク指定、及びマスク処理の別の一例を示す図である。
図２３（ａ）において、画像Ｇ９は、マスクする対象物に貼り付けられた２次元コードＣ２〜Ｃ５を含んでいる撮像画像を示している。また、図２３（ｂ）において、画像Ｇ１０は、２次元コードＣ２〜Ｃ５によって囲まれた領域をマスクした撮像画像を示している。画像Ｇ１０において、領域Ｍ８は、２次元コードＣ１に基づいてマスクされた領域を示している。
この図２３の場合、コード検出部２０９は、画像Ｇ９から２次元コードＣ２〜Ｃ５を検出し、例えば、２次元コードＣ２〜Ｃ５の位置情報をマスク制御部２０７ｃに出力する。マスク制御部２０７ｃは、２次元コードＣ２〜Ｃ５の位置情報に基づいて、マスクする領域（２次元コードＣ２〜Ｃ５によって囲まれた領域）を取得する。マスク制御部２０７ｃは、図２３（ｂ）の領域Ｍ８に示すように、取得したマスクする領域をマスク処理部２２０の画像処理部２０５にマスクさせる。

次に、第４実施形態におけるヘッドマウントディスプレイ１の動作について説明する。
本実施形態におけるヘッドマウントディスプレイ１の動作における状態遷は、図１０と同様であるので、ここでは説明を省略する。また、本実施形態におけるマスク処理方法（マスク指定、及びマスク処理）は、第１実施形態における第１〜第３のマスク処理方法と同様であり、ここでは説明を省略する。

次に、本実施形態におけるヘッドマウントディスプレイ１が、撮像画像を送信、及び受信する動作について説明する。
図２４は、本実施形態における撮像画像を送信する処理の一例を示すフローチャートである。
この図において、ステップＳ４０１〜ステップＳ４０５の処理は、図１５に示される第１実施形態におけるステップＳ１０１〜ステップＳ１０５の処理と同様であるので、ここでは説明を省略する。
なお、ステップＳ４０３の処理には、上述した２次元コードに基づいて、マスクする領域を指定する処理も含まれる。

次に、ヘッドマウントディスプレイ１は、ユーザーからマスク指定要求があるか否か、又は、撮像画像に２次元コードがあるか否かを判定する（ステップＳ４０６）。例えば、ユーザーが表示パネル６３に表示されている撮像画像に新たにマスクすべき対象物を発見した場合に、ヘッドマウントディスプレイ１は、タッチスイッチ３４又は操作スイッチ３０によりマスク指定を要求する指示が入力される。マスク制御部２０７ｃは、入力処理部２０６を介して、ユーザーからのマスク指定の要求があるか否かを判定する。また、マスク制御部２０７ｃは、撮像画像に２次元コードが写り込んだことにより、コード検出部２０９が２次元コードを検出したか否かを判定する。マスク制御部２０７ｃは、ユーザーからのマスク指定の要求がある場合、又はコード検出部２０９が２次元コードを検出した場合（ステップＳ４０６：Ｙｅｓ）に、処理をステップＳ４０７に進める。また、マスク制御部２０７ｃは、ユーザーからのマスク指定の要求がない場合、且つ、コード検出部２０９が２次元コードを検出していない場合（ステップＳ４０６：Ｎｏ）に、処理をステップＳ４０８に進める。

次に、ステップＳ４０７において、ヘッドマウントディスプレイ１は、マスク指定を追加する。すなわち、マスク制御部２０７ｃは、上述のステップＳ４０３の処理と同様の処理を行い、マスクする領域（新たにマスクすべき対象物に対応する領域）を取得する。また、コード検出部２０９が２次元コードを検出した場合には、マスク制御部２０７ｃは、２次元コードに基づいて、マスクする領域を取得する。マスク制御部２０７ｃは、画像処理部２０５に、取得した領域をマスクする処理を実行させて、マスクされた遅延画像（撮像画像）を通信部１３に出力させる。

次に、ステップＳ４０８において、ヘッドマウントディスプレイ１は、送信終了か否かを判定する。すなわち、処理部１２３ｃは、タッチスイッチ３４又は操作スイッチ３０によりユーザーから撮像画像の送信を終了（停止）する指示が入力されたか否かを判定する。処理部１２３ｃは、送信終了である場合（ステップＳ４０８：Ｙｅｓ）に処理を終了させる。また、処理部１２３ｃは、送信終了でない場合（ステップＳ４０８：Ｎｏ）に処理をステップＳ４０６に戻す。

以上説明したように、本実施形態における通信装置２００は、カメラ６４が撮像した撮像画像に含まれる２次元コードを検出するコード検出部２０９を備えている。マスク制御部２０７ｃは、コード検出部２０９によって検出された２次元コードに基づいて、マスクさせる領域を取得する。ここで、２次元コードは、マスクすべき対象物に予め印刷又は貼り付けられている。
これにより、本実施形態における通信装置２００は、例えば、突然にマスクすべき対象物が撮像画像に写りこんだ場合であっても、マスクすべき対象物を適切にマスクすることができる。また、このことにより、本実施形態における通信装置２００は、マスクすべき対象物が撮像画像に写り込むことによる心理的な負担を低減することができる。

また、本実施形態では、２次元コードは、マスクする対象物の形状及び大きさを示す情報を含んでいる。そして、マスク制御部２０７ｃは、２次元コードに含まれる対象物の形状及び大きさを示す情報に基づいて、マスクさせる領域を取得する。
これにより、本実施形態における通信装置２００は、マスクする対象物が複雑な形状や様々な大きさであっても、撮像画像に含まれるマスクすべき対象物を適切にマスクすることができる。

また、本実施形態では、マスク制御部２０７ｃは、２次元コードによって囲まれた領域をマスクさせる領域として検出してもよい。
これにより、本実施形態における通信装置２００は、簡易な手段により、撮像画像に含まれるマスクすべき対象物を適切にマスクすることができる。

なお、本実施形態における通信装置２００は、遅延部２０１を備えない形態であってもよい。すなわち、本実施形態における通信装置２００は、カメラ６４と、マスク処理部２２０と、通信部１３と、マスク制御部２０７ｃと、コード検出部２０９とを備え、コード検出部２０９は、カメラ６４が撮像した撮像画像に含まれる２次元コードを検出する。マスク制御部２０７ｃは、コード検出部２０９によって検出された２次元コードに基づいて、マスク処理部２２０にマスクさせる領域を指定された領域として取得し、撮像画像における指定された領域をマスク処理部２２０にマスクさせる。
これにより、本実施形態における通信装置２００は、遅延部２０１を備える場合と同様に、突然にマスクすべき対象物が撮像画像に写りこんだ場合であっても、マスクすべき対象物を適切にマスクすることができる。

また、本実施形態におけるヘッドマウントディスプレイ１は、本実施形態における通信装置２００を備えているので、本実施形態におけるヘッドマウントディスプレイ１においても、本実施形態における通信装置２００と同様の効果を奏する。

次に、第５実施形態について、図面を参照して説明する。
［第５実施形態］
図２５は、第５実施形態における処理部１２３ｄの機能ブロック図である。
なお、第５実施形態では、第１実施形態における処理部１２３が、処理部１２３ｄに置き換わる点を除いて、第１実施形態の構成と同様である。

図２５において、処理部１２３ｄは、遅延部２０１、切替部２１０ａ、マスク処理部２２０、入力処理部２０６、マスク制御部２０７ｄ、音声遅延部２１１、及び音声合成部（２１３，２１４）を備えている。
なお、この図において、図８と同一の構成については同一の符号を付し、その説明を省略する。

本実施形態では、通信装置２００が、処理部１２３ｄが音声遅延部２１１、及び音声合成部（２１３，２１４）を備え、撮像画像とともに、音の遅延処理を行う点が、第１実施形態と異なる。
音声遅延部２１１（音遅延部）は、集音マイク２４が取得した音（例えば、環境音）を所定の期間遅延させた遅延音を出力する。ここで、所定の期間とは、例えば、３秒〜５秒の期間であり、遅延部２０１と同様の期間である。

切替部２１０ａは、マスク制御部２０７ｄの制御（指示）に基づいて、カメラ６４が撮像した撮像画像と、フラッシュメモリー１２２、メモリー１２７、又は通信部１３などから出力された画像（例えば、メモリー画像）とを切り替えて、マスク処理部２２０に出力する。また、切替部２１０ａは、集音マイク２４が取得した音と、音声遅延部２１１が遅延した遅延音とを切り替えて、音声合成部２１４に出力する。
また、切替部２１０ａは、２つの画像切替部（２０２，２０３）及び音声切替部２１２を備えている。
音声切替部２１２は、集音マイク２４が取得した音と、音声遅延部２１１が遅延した遅延音とを切り替えて、音声合成部２１４に出力する。

音声合成部２１３は、通話マイク３７が取得したユーザーの音声（例えば、ユーザーの会話音声など）と、集音マイク２４が取得した音とを合成し、合成した音データをデコーダー１２１に出力する。音声合成部２１３が出力する音は、例えば、スピーカーアンプを介して、耳元スピーカー２３に出力される。
音声合成部２１４は、通話マイク３７が取得したユーザーの音声（例えば、ユーザーの会話音声など）と、切替部２１０ａの音声切替部２１２が出力する音（環境音など）とを合成し、合成した音データを通信部１３に出力する。

マスク制御部２０７ｄ（制御部）は、撮像画像を送信する場合に、上述したマスク制御部２０７と同様の処理を実行するとともに、ヘッドマウントディスプレイ１の周囲の音である環境音などを遅延させて通信部１３に出力するか否かの切り替え制御を行う。すなわち、マスク制御部２０７ｄは、音声切替部２１２に対して、集音マイク２４が取得した音と、音声遅延部２１１が遅延した遅延音とを切り替えて出力させる。例えば、マスク制御部２０７ｄは、遅延画像を通信部１３に出力する場合に、音声切替部２１２に対して遅延音に切り替えて音声合成部２１４に出力させる。また、例えば、マスク制御部２０７ｄは、メモリー画像を通信部１３に出力する場合に、音声切替部２１２に対して集音マイク２４が取得した遅延なしの音に切り替えて音声合成部２１４に出力させる。

次に、第５実施形態におけるヘッドマウントディスプレイ１の動作について説明する。
本実施形態におけるヘッドマウントディスプレイ１の動作における状態遷は、図１０と同様であるので、ここでは説明を省略する。また、本実施形態におけるマスク処理方法（マスク指定、及びマスク処理）は、第１実施形態における第１〜第３のマスク処理方法と同様であり、ここでは説明を省略する。

次に、本実施形態におけるヘッドマウントディスプレイ１が、撮像画像及び音声を送信、する動作について説明する。
図２６は、本実施形態における撮像画像及び音声を送信する処理の一例を示すフローチャートである。

この図において、まず、ヘッドマウントディスプレイ１は、メモリー画像を表示し、メモリー画像の送信を開始する（ステップＳ７０１）。例えば、マスク制御部２０７ｄは、画像切替部２０２及び画像切替部２０３に対して、メモリー画像（例えば、アバター画像）に切り替えて出力させる。また、マスク制御部２０７は、マスク処理部２２０の画像処理部２０４に、メモリー画像をマスクせずにそのままデコーダー１２１に出力させる。これにより、表示パネル６３は、メモリー画像を表示する。また、マスク制御部２０７は、マスク処理部２２０の画像処理部２０５に、メモリー画像をマスクせずにそのまま通信部１３に出力させる。また、マスク制御部２０７ｄは、音声切替部２１２に、集音マイク２４が取得した遅延なしの音（音声）を、音声合成部２１４に出力させる。
これにより、通信部１３は、メモリー画像及び遅延していない音声を他の端末に送信する。

続く、ステップＳ７０２〜ステップＳ７０３の処理は、図１５に示される第１実施形態におけるステップＳ１０２〜ステップＳ１０３の処理と同様であるので、ここでは説明を省略する。

次に、ステップＳ７０４において、ヘッドマウントディスプレイ１は、撮像画像のマスク処理及び音声遅延を開始する（ステップＳ７０４）。マスク制御部２０７ｄは、画像切替部２０３に、遅延部２０１により所定の期間遅延された撮像画像に切り替えて出力させる。そして、マスク制御部２０７ｄは、画像処理部２０５に、取得したマスクする領域をマスクする処理を実行させて、マスクされた遅延画像（撮像画像）を通信部１３に出力させる。また、マスク制御部２０７ｄは、音声切替部２１２に、遅延音（遅延音声）を、音声合成部２１４に出力させる。

続く、ステップＳ７０５〜ステップＳ７０８の処理は、図１５に示される第１実施形態におけるステップＳ１０５〜ステップＳ１０８の処理と同様であるので、ここでは説明を省略する。

なお、本実施形態では、通信装置２００が、ユーザー側に面している通話マイク３７と、ユーザー側でない外側に面している集音マイク２４を備えており、集音マイク２４から取得した音（環境音）のみ遅延させる場合について説明したが、以下のようにしてもよい。
例えば、通信装置２００は、撮像画像とともに取得した音を、バンドパスフィルタなどを用いて、環境音と通話などの会話音声とに分離し、分離した環境音を遅延させて、通信部１３に送信させてもよい。この場合、ヘッドマウントディスプレイ１は、会話音声と環境音とを個別の音データとして、送信してもよいし、図２４に示すように、音声合成部２１４により、遅延した環境音と会話音声とを合成した音データを送信してもよい。

以上説明したように、本実施形態における通信装置２００は、撮像画像とともに取得された音のうちの、少なくともユーザーの会話音声を除く環境音を所定の期間遅延させた遅延音を出力する音声遅延部２１１を備えている。そして、通信部１３は、遅延画像とともに、会話音声、及び音声遅延部２１１が遅延させた遅延音（遅延した環境音）を送信する。
これにより、本実施形態における通信装置２００は、撮像画像に関連する環境音を撮像画像とともに遅延して送信し、通話に関する会話音声の遅延を行わないので、受信者が音声を不自然に感じない自然なコミュニケーションが可能になる。

また、本実施形態におけるヘッドマウントディスプレイ１は、本実施形態における通信装置２００を備えているので、本実施形態におけるヘッドマウントディスプレイ１においても、本実施形態における通信装置２００と同様の効果を奏する。

なお、本発明は、上記の各実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で変更可能である。
例えば、上記の各実施形態は、組み合わせて実施してもよい。また、上記の第２実施形態〜第４実施形態は、遅延部２０１を備える第１実施形態を基に実施する形態を説明したが、それぞれが遅延部２０１を備えない独立した形態であってもよい。
また、上記の第５実施形態は、第２実施形態〜第４実施形態と組み合わせて実施してもよい。

また、上記の第４実施形態において、２次元コードの一例としてＱＲコード（登録商標）を用いる例を説明したが、バーコードなどの他の２次元コードを用いる形態でもよい。また、上記の第４実施形態では、コード検出部２０９は、カメラ６４により撮像した撮像画像に基づいて、２次元コードを検出する形態を説明したが、レーザースキャナーなどにより、バーコードなどの２次元コードを検出する形態であってもよい。

また、上記の各実施形態において、マスク指定、及びマスク処理として、第１〜第３のマスク処理方法を用いる例を説明したが、これに限定されるものではない。例えば、撮像画像を指によりペイントブラシのように、塗りつぶすことにより、マスクする領域を指定してもよい。また、マスクする領域は、指定した対象物のエッジを検出し、収縮して膨張するオープニング処理や膨張して収縮するクロージング処理などを用いて、検出されてもよい。

また、上記の各実施形態において、通信装置２００をヘッドマウントディスプレイ１に適用する例を説明したが、これに限定されるものではなく、例えば、携帯電話、スマートフォン、ＰＣ（パーソナルコンピュータ）、タブレット端末などの電子機器に適用してもよい。

上述のヘッドマウントディスプレイ１及び通信装置２００は内部に、コンピュータシステムを有している。そして、上述した通信装置２００の処理過程は、プログラムの形式でコンピュータ読み取り可能な記録媒体に記憶されており、このプログラムをコンピュータが読み出して実行することによって、上記処理が行われる。ここでコンピュータ読み取り可能な記録媒体とは、磁気ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、半導体メモリー等をいう。また、このコンピュータプログラムを通信回線によってコンピュータに配信し、この配信を受けたコンピュータが当該プログラムを実行するようにしてもよい。

１，５００…ヘッドマウントディスプレイ、１３…通信部、４０…ヘッドバンド、６３…表示パネル、６４…カメラ、１２３…処理部、１２７…メモリー、１３１…ＷｉＦｉ通信回路、２００…通信装置、２０１…遅延部、２０６…入力処理部、２０７，２０７ａ，２０７ｂ，２０７ｃ，２０７ｄ…マスク制御部、２０８…マスク情報生成部、２０９…コード検出部、２１１…音声遅延部、２２０，２２０ａ，２２０ｂ…マスク処理部

Claims (17)

1. 画像を撮像する撮像部と、
   前記撮像部が撮像した撮像画像を所定の期間遅延させた遅延画像を出力する遅延部と、
   前記遅延部から出力された前記遅延画像のうちの指定された領域をマスクするマスク処理部と、
   少なくとも前記マスク処理部によってマスクされた前記遅延画像を送信する通信部と、
   前記撮像部が撮像した前記撮像画像を表示部に表示させるとともに、前記マスク処理部にマスクさせる領域を前記指定された領域として取得し、前記遅延画像における前記指定された領域を前記マスク処理部にマスクさせる制御部と
   を備えることを特徴とする通信装置。
2. 前記所定の期間は、前記表示部による前記撮像画像の表示から、前記制御部が前記マスクさせる領域を取得し、前記マスク処理部が前記指定された領域をマスクするまでの期間よりも長い
   ことを特徴とする請求項１に記載の通信装置。
3. 前記表示部が表示する表示画像に基づいて、情報の入力を処理する入力処理部を備え、
   前記制御部は、
   前記入力処理部によって入力された情報に基づいて、前記マスクさせる領域を取得する
   ことを特徴とする請求項１又は請求項２に記載の通信装置。
4. マスクが必要か否かを示すマスク要否情報と、前記マスクさせる領域に対応する前記マスクに関する情報とを関連付けたマスク情報を生成するマスク情報生成部を備え、
   前記通信部は、
   マスクされた前記遅延画像とともに、前記マスク情報を送信する
   ことを特徴とする請求項１から請求項３のいずれか一項に記載の通信装置。
5. 前記通信部は、
   他装置によってマスクされた画像及び前記マスク情報を受信し、
   前記マスク処理部は、
   前記制御部の指示により、前記マスクされた画像に含まれるマスクを前記マスク情報に基づいて解除し、
   前記制御部は、
   前記通信部が前記他装置から前記マスクされた画像を受信した場合に、前記マスク要否情報に基づいて、前記マスクされた画像のマスクを解除するか否かを判定し、
   前記マスクされた画像のマスクを解除すると判定した場合に、前記マスクされた画像に含まれるマスクを前記マスク処理部に解除させるとともに、前記マスクを解除させた画像を前記表示部に表示させる
   ことを特徴とする請求項４に記載の通信装置。
6. 前記制御部は、マスクを解除したことを示す情報を、前記マスクを解除させた画像とともに前記表示部に表示させる
   ことを特徴とする請求項５に記載の通信装置。
7. 前記マスク要否情報は、複数のレベルに分類されたレベル情報を含む
   ことを特徴とする請求項４から請求項６のいずれか一項に記載の通信装置。
8. 前記撮像部が撮像した前記撮像画像に含まれる２次元コードを検出するコード検出部を備え、
   前記制御部は、
   前記コード検出部によって検出された前記２次元コードに基づいて、前記マスクさせる領域を取得する
   ことを特徴とする請求項１から請求項７のいずれか一項に記載の通信装置。
9. 前記２次元コードは、マスクする対象物の形状及び大きさを示す情報を含み、
   前記制御部は、
   前記２次元コードに含まれる前記対象物の形状及び大きさを示す情報に基づいて、前記マスクさせる領域を取得する
   ことを特徴とする請求項８に記載の通信装置。
10. 前記制御部は、前記２次元コードによって囲まれた領域を前記マスクさせる領域として検出する
    ことを特徴とする請求項９に記載の通信装置。
11. 前記マスク処理部は、前記撮像画像のうちの前記マスクさせる領域を含まない範囲の領域を切り出して、マスクされた前記遅延画像を生成する
    ことを特徴とする請求項１から請求項１０のいずれか一項に記載の通信装置。
12. 前記撮像画像とともに取得された音のうちの、少なくとも使用者の会話音声を除く環境音を前記所定の期間遅延させた遅延音を出力する音遅延部を備え、
    前記通信部は、
    前記遅延画像とともに、前記会話音声、及び前記音遅延部が遅延させた前記遅延音を送信する
    ことを特徴とする請求項１から請求項１１のいずれか一項に記載の通信装置。
13. 画像を撮像する撮像部と、
    前記撮像部が撮像した撮像画像のうちの指定された領域をマスクするマスク処理部と、
    マスクが必要か否かを示すマスク要否情報と、前記指定された領域に対応する前記マスクに関する情報とを関連付けたマスク情報を生成するマスク情報生成部と、
    少なくとも前記マスク処理部によってマスクされた前記撮像画像とともに、前記マスク情報を送信する通信部と、
    前記マスク処理部にマスクさせる領域を前記指定された領域として取得し、前記撮像画像における前記指定された領域を前記マスク処理部にマスクさせる制御部と
    を備えることを特徴とする通信装置。
14. 画像を撮像する撮像部と、
    マスクが必要か否かを示すマスク要否情報と、前記撮像部が撮像した撮像画像のうちのマスクする領域として指定された領域に対応するマスクに関する情報とを関連付けたマスク情報を生成するマスク情報生成部と、
    少なくとも前記撮像画像とともに、前記マスク情報を送信する通信部と
    を備えることを特徴とする通信装置。
15. 画像を撮像する撮像部と、
    前記撮像部が撮像した撮像画像のうちの指定された領域をマスクするマスク処理部と、
    少なくとも前記マスク処理部によってマスクされた前記撮像画像を送信する通信部と、
    前記撮像部が撮像した前記撮像画像に含まれる２次元コードを検出するコード検出部と、
    前記コード検出部によって検出された前記２次元コードに基づいて、前記マスク処理部にマスクさせる領域を前記指定された領域として取得し、前記撮像画像における前記指定された領域を前記マスク処理部にマスクさせる制御部と
    を備えることを特徴とする通信装置。
16. 画像を撮像する撮像部と、
    前記撮像部が撮像した撮像画像のうちのマスクする対象物を含まない範囲の領域を切り出した画像を生成することにより、前記対象物をマスクするマスク処理部と、
    少なくとも前記マスク処理部によってマスクされた前記撮像画像を送信する通信部と、
    前記対象物を含まない範囲の領域を取得し、取得した前記対象物を含まない範囲の領域に基づいて、前記マスク処理部に前記撮像画像をマスクさせる制御部と
    を備えることを特徴とする通信装置。
17. 請求項１から請求項１６のいずれか一項に記載の通信装置と、
    少なくとも前記撮像部が撮像した前記撮像画像を表示する表示部と、
    少なくとも前記撮像部及び前記表示部を使用者の頭部に装着する装着部と
    を備えることを特徴とする頭部装着表示装置。