JP6197849B2 - 画像表示装置及びプログラム - Google Patents
画像表示装置及びプログラム Download PDFInfo
- Publication number
- JP6197849B2 JP6197849B2 JP2015208573A JP2015208573A JP6197849B2 JP 6197849 B2 JP6197849 B2 JP 6197849B2 JP 2015208573 A JP2015208573 A JP 2015208573A JP 2015208573 A JP2015208573 A JP 2015208573A JP 6197849 B2 JP6197849 B2 JP 6197849B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- information
- additional information
- movement
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Details Of Cameras Including Film Mechanisms (AREA)
- Indication In Cameras, And Counting Of Exposures (AREA)
- Closed-Circuit Television Systems (AREA)
- Studio Devices (AREA)
Description
ところで、人物などの被写体を撮影した場合に、その撮影画像内の被写体の位置に任意の情報を付加して合成表示するようにすれば、色々な楽しみ方や活用の仕方が増えるが、ライブビュー画像内の被写体に情報を対応付けて付加したとしても、カメラの向きが僅かにでも傾いてしまうと、被写体と付加情報との対応関係がずれてしまい、情報を付加した意図が損なわれてしまう可能性がある。このことは撮影画像に限らず、テレビ映像や投影画像などの画像であっても同様であり、画像内の人物に任意の情報を付加したとしても、画像内でその人物が移動してしまうと、被写体と付加情報との対応関係がずれてしまい、情報を付加した意図が損なわれてしまう可能性がある。
(実施形態1)
先ず、図1〜図8を参照して本発明の第1実施形態を説明する。
本実施形態は、画像表示装置としてカメラ機能付きタブレット端末装置1に適用した場合を例示したもので、図1は、電気製品を訪問修理する場合の現場側のタブレット端末装置1と本部側のパーソナルコンピュータ(本部側PC)2との間で業務連絡を行う場合の通信システム(業務連絡システム)を示した図である。
タブレット端末装置1は、その全体が薄型の直方体で、例えば、A5サイズの携帯型情報端末装置であり、この業務連絡システムにおいては電気製品を訪問修理する修理担当者が所持するもので、タッチ入力表示機能、無線通信機能などの基本機能のほか、その背面側(タッチ入力画面の反対側)にはカメラ(図1では図示省略)が備えられている。
CPU11は、電源部(二次電池)12からの電力供給によって動作し、記憶部13内の各種のプログラムに応じてこのタブレット端末装置1の全体動作を制御する中央演算処理装置である。記憶部13は、例えば、ROM、フラッシュメモリなどを有する構成で、図4及び図5に示した動作手順に応じて本実施形態を実現するためのプログラムや各種のアプリケーションなどが格納されているプログラムメモリ13aと、このタブレット端末装置1が動作するために必要となる各種の情報(例えば、フラグなど)を一時的に記憶するワークメモリ13bなどを有している。なお、記憶部13は、例えば、SDカード、ICカードなど、着脱自在な可搬型メモリ(記録メディア)を含む構成であってもよく、図示しないが、通信機能を介してネットワークに接続されている状態においては所定のサーバ装置側の記憶領域を含むものであってもよい。
いま、現場と本部とが共通の撮影画像を確認し合いながら修理上の打ち合わせなどを行うために、合成撮影モードに切り替えられると、タブレット端末装置1のCPU11は、カメラ部16を動作させて撮影を開始させる(図4のステップA1)。そして、カメラ部16から撮影画像を取得してタッチ表示部15にプレビュー画像として表示させるプレビュー表示を開始すると共に(ステップA2)、この撮影画像(プレビュー画像)を相手端末である本部側PC2に送信する動作を開始する(ステップA3)。この場合、本部側PC2では、タブレット端末装置1からの撮影画像を受信して自己の画面に順次表示させる表示動作を開始する。
図示の例は、プレビュー画面内の右端部に3種類(円形、四角、三角)マークをタグ選択候補として配列表示させた状態を示している。このタグ候補の中から任意の候補の位置、例えば、“三角形”マークの位置がタッチされると、この“三角形”マークのタグ情報が着目被写体(B部品P3)の付加情報Aとして合成表示される。そして、CPU11は、この付加情報Aの表示位置をワークメモリ13bに一時記憶させると共に(ステップA9)、モーションセンサ18の出力結果を取得して後述する移動基準値としてワークメモリ13bに一時記憶させる(ステップA10)。
図6は、着目被写体の位置変化に応じてその付加情報Aを追従させるために表示パネル15aの画面サイズ、ドットピッチ、カメラ部16の画角を考慮して付加情報Aの表示位置を算出する処理であり、図8に示した具体例に応じた補正処理を示している。図8は、画面サイズなどを具体的に示した図で、画面サイズを“320×240ドット”、ドットピッチを“1ドット/mm”、カメラ画角を“50°”とし、表示パネル15aの画面の中央部を二次元座標の原点(0、0)とした場合に、その画面の四隅の位置座標、すなわち、左上座標は(−159.120)、右上座標は(160.120)、左下座標は(−159.−119)、右下座標は(160.−119)となる。なお、図中、(a、b)は、付加情報Aの表示位置を示している。
以下、この発明の第2実施形態について図9〜図13を参照して説明する。
なお、上述した第1実施形態においては、カメラ部16からの撮影画像をプレビュー画面に表示している状態において、カメラ部16の撮影方向の変化に応じて着目被写体の位置変化を検出すると共に、その位置変化に応じて付加情報Aの表示位置を変更するようにしたが、この第2実施形態においては、動画(撮影画像)の再生中にその画像を解析しながら着目対象物(後述する登録人物)を認識してその位置変化を検出すると共に、この位置変化に応じて付加情報Aの表示位置を変更するようにしたものである。ここで、両実施形態において基本的あるいは名称的に同一のものは、同一符号を付して示し、その説明を省略すると共に、以下、第2実施形態の特徴部分を中心に説明するものとする。
人物紹介テーブルPTは、動画再生中に登場する人物を友人や知人などに紹介するためのテーブルであり、「キー画像」、「付加情報」の項目を有し、その内容はユーザ操作によって予め任意に設定された情報である。「キー画像」は、例えば、家族を構成する各人の顔画像あるいはその特徴部分の画像であり、動画再生中に家族が登場したか否かを検索するためのキーとして使用される。「付加情報」は、複数の項目を有し、例えば、その先頭項目から“名前”、“趣味”、“職業”などの人物紹介情報であり、各項目はユーザ操作による任意のタイミング、あるいは一定時間毎のタイミングで項目(1)、(2)、(3)の順序で選択指定されて再生画面内に順次合成表示される。
この人物紹介モードは、友人や知人に自己の家族などを紹介するための再生モードであり、上述のモード切替キーの操作により再生モードの一つとして人物紹介モードに切り替え可能となっている。この人物紹介モードに切り替えられると、タブレット端末装置1のCPU11は、タッチ表示部15に動画一覧を表示させて再生対象の動画を任意に選択可能な状態とし、その一覧の中からユーザ操作によって再生対象が選択されると(図10のステップC1)、選択された動画の再生動作を開始する(ステップC2)。そして、再生開始した動画を相手側端末(図示省略)に送信する動作を開始する(ステップC3)。この場合、相手側端末では、タブレット端末装置1から受信した動画を自己の画面に順次表示させる動作を開始する。
以下、本願出願の特許請求の範囲に記載された発明を付記する。
(付記)
(請求項1)
請求項1に記載の発明は、
表示部に画像を表示する画像表示装置であって、
前記表示部に表示されている画像内の着目対象物に対応付けてその対象物に関する付加情報を当該画像内に合成表示する第1の表示制御手段と、
前記画像内での着目対象物の位置変化を検出する検出手段と、
前記検出手段によって検出された着目対象物の位置変化に応じて前記付加情報の表示位置を変更してその付加情報を当該画像内に合成表示する第2の表示制御手段と、
を備えたことを特徴とする画像表示装置である。
(請求項2)
請求項2に記載の発明は、請求項1記載の画像表示装置において、
画像を撮影する撮影手段を更に備え、
前記第1の表示制御手段は、前記撮影手段により撮影された撮影画像が前記表示部にライブビュー画像として表示されているライブビュー画面上において、その撮影画像内の着目対象物である着目被写体に対応付けてその被写体に関する付加情報を当該撮影画像内に合成表示する、
ようにしたことを特徴とする画像表示装置である。
(請求項3)
請求項3に記載の発明は、請求項2に記載の画像表示装置において、
前記検出手段は、前記撮影手段による撮影方向の変化を検出することによって前記撮影画像内での前記被写体の位置変化を検出する、
ようにしたことを特徴とする画像表示装置である。
(請求項4)
請求項4に記載の発明は、請求項3に記載の画像表示装置において、
前記検出手段は、少なくとも左右方向への移動、上下方向への移動、左右方向への傾き、前後方向への傾きのいずれかを検出することにより前記撮影手段による撮影方向の変化を検出する、
ようにしたことを特徴とする画像表示装置である。
(請求項5)
請求項5に記載の発明は、請求項1〜請求項4のいずれかに記載の画像表示装置において、
前記検出手段は、前記画像を解析しながら着目対象物を認識してその位置を追跡検出することによりその対象物の当該画像内での位置変化を検出する、
ようにしたことを特徴とする画像表示装置である。
(請求項6)
請求項6に記載の発明は、請求項5に記載の画像表示装置において、
前記検出手段は、前記画像内に複数の着目対象物が含まれている場合に各着目対象物の位置を追跡検出することにより複数の着目対象物の中から位置が変化した着目対象物を特定してその位置変化を検出する、
ようにしたことを特徴とする画像表示装置である。
(請求項7)
請求項7に記載の発明は、請求項1〜請求項6のいずれかに記載の画像表示装置において、
前記表示部は、タッチ入力が可能なタッチ画面を備えたタッチ表示手段であり、
前記第1の表示制御手段は、前記タッチ表示手段のタッチ画面内に画像が表示されている状態において、前記タッチ画面内の着目対象物に対応付けて任意に描画された情報をその着目対象物に関する付加情報として当該画像内に合成表示する、
ようにしたことを特徴とする画像表示装置である。
(請求項8)
請求項8に記載の発明は、請求項1〜請求項7のいずれかに記載の画像表示装置において、
前記第1の表示制御手段は、前記表示部の画面内に複数のタグ情報が配置表示されている状態において、前記表示部の画面内に配置表示されている複数のタグ情報のうち、前記画像内の着目対象物に対応付けてユーザ操作により任意に選択されたタグ情報をその対象物に関する付加情報として当該画像内に合成表示する、
ようにしたことを特徴とする画像表示装置である。
(請求項9)
請求項9に記載の発明は、請求項1〜請求項8のいずれかに記載の画像表示装置において、
前記第1の表示制御手段は、ユーザ操作によって任意に指定された着目対象物に対応付けて前記付加情報を当該画像内に合成表示する、
ようにしたことを特徴とする画像表示装置である。
(請求項10)
請求項10に記載の発明は、請求項1〜請求項9のいずれかに記載の画像表示装置において、
前記付加情報の表示位置を一時記憶する記憶手段を更に備え、
前記第2の表示制御手段は、前記一時記憶されている付加情報の表示位置を前記検出手段によって検出された前記着目対象物の位置変化に応じて補正することにより前記付加情報の表示位置を変更する、
ようにしたことを特徴とする画像表示装置である。
(請求項11)
請求項11に記載の発明は、請求項1に記載の画像表示装置において、
予め着目対象物に対応付けてその対象物に関する付加情報を記憶する付加情報記憶手段を更に備え、
前記第1の表示制御手段は、前記画像を解析することによって着目対象物を特定すると共に、その対象物に対応する前記付加情報を前記付加情報記憶手段から読み出して、該当対象物に対応付けて当該画像内に合成表示する、
ようにしたことを特徴とする画像表示装置である。
(請求項12)
請求項12に記載の発明は、請求項11に記載の画像表示装置において、
前記付加情報記憶手段は、複数の着目対象物に対応付けてその個々の対象物に関する付加情報をそれぞれ記憶し、
前記第1の表示制御手段は、前記画像を解析することによって複数の着目対象物を特定した場合に、その着目対象物毎に前記付加情報記憶手段から対応する付加情報を読み出して合成表示させる動作を繰り返す、
ようにしたことを特徴とする画像表示装置である。
(請求項13)
請求項13に記載の発明は、請求項11あるいは請求項12に記載の画像表示装置において、
前記付加情報記憶手段は、着目対象物毎に複数項目の付加情報をそれぞれ記憶し、
前記第1の表示制御手段は、前記特定した着目対象物に対応する複数項目の前記付加情報を前記付加情報記憶手段から順次読み出すことによって、該当対象物に対応付けて順次合成表示する、
ようにしたことを特徴とする画像表示装置である。
(請求項14)
請求項14に記載の発明は、請求項1〜請求項13のいずれかに記載の画像表示装置において、
前記第2の表示制御手段により前記着目対象物の位置変化に応じて前記付加情報の表示位置を変更することによってその変更後の位置が前記表示部の画面内から外れた場合には、少なくともその対象物の一部が前記表示部の画面内に存在していることを条件に当該付加情報が前記画面内に収まるようにその表示位置を再変更する、
ようにしたことを特徴とする画像表示装置である。
(請求項15)
請求項15に記載の発明は、請求項1〜請求項14のいずれかに記載の画像表示装置において、
着目対象物に対応付けて前記付加情報を合成させた画像を、通信相手側の外部表示装置に対して送信する送信手段を更に備える、
ようにしたことを特徴とする画像表示装置である。
(請求項16)
請求項16に記載の発明は、
コンピュータに対して、
表示部に表示されている画像内の着目対象物に対応付けてその対象物に関する付加情報を当該画像内に合成表示する機能と、
前記画像内での着目対象物の位置変化を検出する機能と、
前記検出された着目対象物の位置変化に応じて前記付加情報の表示位置を変更してその付加情報を当該画像内に合成表示する機能と、
を実現させるためのプログラムである。
2 通信相手の本部側PC
3 公衆通信網
11 CPU
13 記憶部
13a プログラムメモリ
13b ワークメモリ
14 操作部
15 タッチ表示部
16 カメラ部
17 無線LAN通信部
18 モーションセンサ
PT 人物紹介テーブル
Claims (8)
- 表示画面に画像を表示する画像表示装置であって、
当該装置本体の移動又は姿勢を検出する検出手段と、
前記表示画面内に表示される画像上の任意の表示位置をユーザ操作により指定し、その表示位置に対して任意の情報をユーザ操作により付加する付加手段と、
前記付加手段により任意の情報が付加された際は、その付加時における当該装置本体の移動又は姿勢を基準として記憶すると共に、当該情報を付加した前記画像上における表示位置を記憶し、当該画像上における前記表示位置に前記情報を付加して合成表示する第1制御手段と、
前記表示画面内に前記情報が合成表示されている状態にあって、前記検出手段による当該装置本体の移動又は姿勢の変化を検出した際は、前記記憶の基準の移動又は姿勢との差分に応じて前記表示画面内における前記情報の表示位置を変更して、その表示位置の変更された前記情報を当該表示画面内において合成表示し直すよう制御する第2制御手段と、
を具備したことを特徴とする画像表示装置。 - 前記第2制御手段は、当該装置本体の移動又は姿勢の変化に応じて前記表示画面内において変化する画像内において、前記表示位置の変更された前記情報を合成表示し直すよう制御する、
ことを特徴とする請求項1に記載の画像表示装置。 - 前記第2制御手段は、当該装置本体の移動又は姿勢の変化に応じた画像の変化に応じて、当該画像の変化に追従するように前記情報の表示位置を変更する、
ことを特徴とする請求項2に記載の画像表示装置。 - 前記第2制御手段は、前記検出手段で検出された当該装置本体の移動又は姿勢の移動方向の変化又は姿勢方向の変化とは逆方向に、前記情報の表示位置の方向が変化するようにその表示位置を変更する、
ことを特徴とする請求項1〜3の何れかに記載の画像表示装置。 - 前記検出手段は、当該装置本体の少なくとも左右方向への移動、上下方向への移動、左右方向への姿勢、前後方向への姿勢のいずれかを検出する、
ようにしたことを特徴とする請求項1〜4の何れかに記載の画像表示装置。 - 前記第1制御手段は、撮影手段で撮影されるライブビュー撮像画像を前記表示画面内における画像として表示する撮像画像上において前記情報を合成表示し、
前記第2制御手段は、当該装置本体の移動又は姿勢に応じて前記撮影手段の撮影方向が変化する場合にその撮影方向が変化して撮像されるライブビュー撮像画像内において、当該移動又は姿勢に応じて表示位置の変更された前記情報を合成表示し直すよう制御する、
ことを特徴とする請求項1〜5の何れかに記載の画像表示装置。 - 前記情報は、前記表示画面内の任意表示位置において任意に描画された描画情報、あるいは予め用意された複数のタグ情報の内で任意に選択されたタグ情報である、
ことを特徴とする請求項1〜6の何れかに記載の画像表示装置。 - 表示画面に画像を表示する画像表示装置のコンピュータを制御するためのプログラムであって、
前記コンピュータを、
当該装置本体の移動又は姿勢を検出する検出手段、
前記表示画面内に表示される画像上の任意の表示位置をユーザ操作により指定し、その表示位置に対して任意の情報をユーザ操作により付加する付加手段、
前記付加手段により任意の情報が付加された際は、その付加時における当該装置本体の移動又は姿勢を基準として記憶すると共に、当該情報を付加した前記画像上における表示位置を記憶し、当該画像上における前記表示位置に前記情報を付加して合成表示する第1制御手段、
前記表示画面内に前記情報が合成表示されている状態にあって、前記検出手段による当該装置本体の移動又は姿勢の変化を検出した際は、前記記憶の基準の移動又は姿勢との差分に応じて前記表示画面内における前記情報の表示位置を変更して、その表示位置の変更された前記情報を当該表示画面内において合成表示し直すよう制御する第2制御手段、
として機能させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015208573A JP6197849B2 (ja) | 2015-10-23 | 2015-10-23 | 画像表示装置及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015208573A JP6197849B2 (ja) | 2015-10-23 | 2015-10-23 | 画像表示装置及びプログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012236390A Division JP5831764B2 (ja) | 2012-10-26 | 2012-10-26 | 画像表示装置及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016034138A JP2016034138A (ja) | 2016-03-10 |
JP6197849B2 true JP6197849B2 (ja) | 2017-09-20 |
Family
ID=55452836
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015208573A Active JP6197849B2 (ja) | 2015-10-23 | 2015-10-23 | 画像表示装置及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6197849B2 (ja) |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5244012B2 (ja) * | 2009-03-31 | 2013-07-24 | 株式会社エヌ・ティ・ティ・ドコモ | 端末装置、拡張現実感システム及び端末画面表示方法 |
JP5343676B2 (ja) * | 2009-04-08 | 2013-11-13 | ソニー株式会社 | 画像処理装置、画像処理方法およびコンピュータプログラム |
JP5677055B2 (ja) * | 2010-12-01 | 2015-02-25 | 三菱電機株式会社 | 監視映像表示装置 |
JP6011072B2 (ja) * | 2012-06-29 | 2016-10-19 | 株式会社ニコン | 制御装置、及びプログラム |
-
2015
- 2015-10-23 JP JP2015208573A patent/JP6197849B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2016034138A (ja) | 2016-03-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4991458B2 (ja) | 画像表示装置及びその制御方法 | |
US20190333478A1 (en) | Adaptive fiducials for image match recognition and tracking | |
JP6470356B2 (ja) | 仮想空間を提供するコンピュータで実行されるプログラム、方法、および当該プログラムを実行する情報処理装置 | |
US9392248B2 (en) | Dynamic POV composite 3D video system | |
JP6392945B1 (ja) | 仮想空間を提供するコンピュータで実行されるプログラム、方法、および当該プログラムを実行する情報処理装置 | |
JP5831764B2 (ja) | 画像表示装置及びプログラム | |
JP2013162487A (ja) | 画像表示装置及び撮像装置 | |
US9591149B2 (en) | Generation of a combined image of a presentation surface | |
JP2010147769A (ja) | 撮像システム、画像提示方法、プログラム | |
CN112689854A (zh) | 动画合成装置、动画合成方法以及记录介质 | |
US11625858B2 (en) | Video synthesis device, video synthesis method and recording medium | |
JP2024088711A (ja) | 画像処理装置 | |
JPWO2018025825A1 (ja) | 撮像システム | |
JP6635573B2 (ja) | 画像処理システム、画像処理方法、及びプログラム | |
KR102159803B1 (ko) | 촬영 가이드 제공 장치 및 프로그램 | |
JP2013004001A (ja) | 表示制御装置、表示制御方法、およびプログラム | |
US20220244788A1 (en) | Head-mounted display | |
US20200342833A1 (en) | Head mounted display system and scene scanning method thereof | |
CN108896035B (zh) | 通过影像信息实现导航的方法、设备以及导航机器人 | |
JP6197849B2 (ja) | 画像表示装置及びプログラム | |
JP2019021324A (ja) | 仮想空間を提供するコンピュータで実行されるプログラム、方法、および当該プログラムを実行する情報処理装置 | |
US20150022559A1 (en) | Method and apparatus for displaying images in portable terminal | |
WO2018168825A1 (ja) | 画像処理装置および電子機器 | |
KR101860215B1 (ko) | 프로젝터 자세에 연동하는 콘텐츠 디스플레이 시스템 및 방법 | |
JP6689492B2 (ja) | 端末装置、データ処理システム及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160825 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161018 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161201 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170725 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170807 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6197849 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |