JP7203255B1 - 画像表示プログラム、画像表示装置、画像表示システム及び画像表示方法 - Google Patents
画像表示プログラム、画像表示装置、画像表示システム及び画像表示方法 Download PDFInfo
- Publication number
- JP7203255B1 JP7203255B1 JP2022034122A JP2022034122A JP7203255B1 JP 7203255 B1 JP7203255 B1 JP 7203255B1 JP 2022034122 A JP2022034122 A JP 2022034122A JP 2022034122 A JP2022034122 A JP 2022034122A JP 7203255 B1 JP7203255 B1 JP 7203255B1
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- imaging
- moving image
- image display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 8
- 230000000694 effects Effects 0.000 claims abstract description 94
- 238000003384 imaging method Methods 0.000 claims abstract description 67
- 239000003550 marker Substances 0.000 claims description 38
- 238000004891 communication Methods 0.000 claims description 35
- 238000001514 detection method Methods 0.000 claims description 18
- 238000000605 extraction Methods 0.000 claims description 5
- 230000006870 function Effects 0.000 description 5
- 238000004519 manufacturing process Methods 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
Description
このような画像表示システムによれは、撮像された画像中の対象物について、ARエフェクト等の演出効果を付した上で、画像表示装置に表示させることが可能となる。
コンピュータを、
対象物に備えられた記憶媒体に記憶された識別情報を読み取る読取手段、
前記読取手段が読み取った前記識別情報を用いて、前記識別情報に対応するマーカを特定する特定手段、
撮像手段によって前記対象物の動画を撮像させる撮像制御手段、
前記撮像手段によって撮像された前記動画中を動く前記対象物に設けられた前記マーカを検出する検出手段、
前記検出手段が検出した前記マーカを追尾するようにして、演出画像を前記動画に重ねて、表示手段に表示させる表示制御手段、
として機能させ、
前記検出手段は、前記特定手段による特定結果を用いて、前記特定手段が特定した前記マーカを、前記動画中から検出することを特徴とする。
前記マーカは発光体であり、
前記特定手段は、前記識別情報に対応する前記マーカの発光色を特定し、
前記検出手段は、前記特定手段が特定した発光色の発光体を、前記動画中から検出することを特徴とする。
前記コンピュータを、
前記識別情報と、前記演出画像の画像データと、が紐付けて記憶された記憶手段から、前記読取手段が読み取った前記識別情報に対応する前記画像データを抽出する抽出手段、
としてさらに機能させ、
前記表示制御手段は、前記抽出手段が抽出した前記画像データに係る前記演出画像を、前記表示手段に表示させることを特徴とする。
前記記憶媒体は、近距離無線通信タグであることを特徴とする。
前記コンピュータを、
前記表示制御手段が前記演出画像を前記表示手段に表示させた表示態様を基に、所定の基準に従って数値を決定する数値決定手段、
としてさらに機能させ、
前記表示態様は、前記表示制御手段が前記演出画像を前記表示手段に表示させた時間、前記演出画像が前記動画中を移動した速さ、及び前記演出画像が前記動画中を移動した移動距離のうち、少なくとも一つを含むことを特徴とする。
対象物に備えられた記憶媒体に記憶された識別情報を読み取る読取手段と、
前記読取手段が読み取った前記識別情報を用いて、前記識別情報に対応するマーカを特定する特定手段と、
撮像手段によって前記対象物の動画を撮像させる撮像制御手段と、
前記撮像手段によって撮像された前記動画中を動く前記対象物に設けられた前記マーカを検出する検出手段と、
前記検出手段が検出した前記マーカを追尾するようにして、演出画像を前記動画に重ねて、表示手段に表示させる表示制御手段と、
を備え、
前記検出手段は、前記特定手段による特定結果を用いて、前記特定手段が特定した前記マーカを、前記動画中から検出することを特徴とする。
請求項6に記載の画像表示装置と、
マーカが設けられ、前記画像表示装置による撮像対象となる対象物と、
を備えることを特徴とする。
対象物に備えられた記憶媒体に記憶された識別情報を読み取る読取ステップと、
前記読取ステップにおいて読み取った前記識別情報を用いて、前記識別情報に対応するマーカを特定する特定ステップと、
撮像手段によって前記対象物の動画を撮像させる撮像ステップと、
前記撮像ステップにおいて撮像された前記動画中を動く前記対象物に設けられた前記マーカを検出する検出ステップと、
前記検出ステップにおいて検出した前記マーカを追尾するようにして、演出画像を前記動画に重ねて、表示手段に表示させる表示ステップと、
を含み、
前記検出ステップにおいては、前記特定ステップにおける特定結果を用いて、前記特定ステップにおいて特定した前記マーカを、前記動画中から検出することを特徴とする。
画像表示システム100は、撮像された物体について演出効果を付した上で表示するためのシステムであり、図1及び図2に示すように、撮像対象物1と、画像表示装置2と、を備えて構成されている。
撮像対象物1は、画像表示装置2による撮像対象となる動く物体であり、ここでは、図1及び図3に示すように、回転体1aが紐1bの先に取り付けられた一般的な玩具としてのヨーヨーである。
撮像対象物1は、図2及び図3に示すように、近距離無線通信タグ11と、発光体12と、を備える。
近距離無線通信タグ11は、撮像対象物1に備えられた近距離無線通信(NFC)タグであり、例えば、アンテナと、情報を記憶するICチップとを備える。
発光体12は、例えば、LED(light-emitting diode)等の発光する半導体素子である。
識別コードデータD1に係る識別情報と、発光体12の発光色とは、1:1に対応しており、発光体12は、識別コードデータD1に係る識別情報毎に予め定められた所定の発光色で発光する。
図3においては、発光体12がヨーヨーの回転体1aの周囲を周回するように環状に備えられている場合について図示しており、このような形状及び配置は、撮像された動画中からこれを検出し易くするための発光体12の好ましい形状及び配置の一例である。
画像表示装置2は、例えば、スマートフォン、タブレット端末等の情報機器であり、後述のように、撮像対象物1の動画の撮像、撮像された動画の表示等を行う。
画像表示装置2は、図2に示すように、制御部21と、記憶部22と、無線通信部23と、表示部24と、操作部25と、撮像部26と、を備える。
制御部21は、画像表示装置2の動作を制御する部分であり、例えば、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)等を備えて構成され、記憶部22に記憶されたプログラムデータとCPUとの協働により、画像表示装置2の各部を統括制御する。
記憶部22は、画像表示装置2の運用に必要となる各種情報が記憶される部分であり、例えば半導体メモリ等により構成され、画像表示装置2の動作に必要となるデータを、制御部21から読み書き可能に記憶する。
画像表示装置用アプリケーション221は、画像表示装置2を動作させるための制御部21への各種命令を含むプログラムであり、後述の動作の説明において述べる画像表示装置2の動作は、画像表示装置用アプリケーション221に従って実行されることとなる。
発光色データD2としては、具体的には、RGB色空間における座標に係る情報が記憶されている。
無線通信部23は、画像表示装置2と、撮像対象物1に備えられた近距離無線通信タグ11との間の通信に用いられる部分であり、所定の周波数の電波を発信し、かつ所定の周波数の電波を受信することができるアンテナを備え、当該アンテナによって撮像対象物1に備えられた近距離無線通信タグ11から発せられた電波を受信する。
表示部24は、例えば、LCD(Liquid Crystal Display)等のディスプレイを備え、制御部21から出力された表示制御信号に基づいた画像を当該ディスプレイに表示する。
操作部25は、例えば、文字入力キー、数字入力キー、その他各種機能に対応付けられたキーを有するキーボード等を備え、これらのキーを用いた操作入力に応じた操作信号を制御部21へと出力する。操作部25は、例えば、表示部24と一体的に形成されたタッチパネル等であってもよい。
撮像部26は、例えば、レンズ等の光学系と、CMOS(Complementary Metal Oxide Semiconductor)センサ、CCD(Charge Coupled Device)センサ等の撮像素子と、を有し、レンズの光軸方向の画像(静止画及び動画)を撮像する。撮像部26は、撮像した画像のデータを、制御部21へと出力する。
画像表示システム100を利用することで、図1に示すように、ユーザの一人が撮像対象物1を使用する際(ヨーヨーを使用してトリックを実施する際)に、他のユーザが画像表示装置2を操作して、撮像対象物1が使用されている様子を撮像することで、撮像対象物1を追尾するようにして演出画像を重ね、演出効果を付した動画を、画像表示装置2の表示部24に表示させることができる。
この際の画像表示システム100の動作について、図4のフローチャートに従って説明する。
なお、図1に示すように、撮像対象物1を使用するユーザ(ヨーヨーを使用してトリックを実施するユーザ)を第1ユーザU1とし、画像表示装置2を操作して、撮像対象物1が使用されている様子を撮像するユーザを第2ユーザU2とする。
撮像部26に撮像させる動画としては、静止画が連続して撮像されることで、撮像対象物1の動きを判別できるものであればよく、具体的なフレームレート等は特に限定されない。
また、各フレームにおいて発光体12が検出された位置と、前の複数のフレームにおいて発光体12が検出された位置の両者に演出画像データD3に係る演出画像が表示されるようにしてもよい。図1においてはこの場合について図示している。
いずれの場合についても、マーカとしての発光体12を追尾するようにして、演出画像データD3に係る演出画像が表示されている場合に含まれるものとする。
次に、本実施形態に係る画像表示システム100の効果について説明する。
これによって、撮像対象物1が動画中を動く(動画を構成するフレーム毎にフレーム中の位置が変わる)物体であっても、撮像対象物1を追尾するようにして演出画像データD3に係る演出画像を表示させ、演出効果を付与することができる。
次に、本実施形態に係る画像表示システム100の変形例について説明する。
上記の実施形態の説明においては、撮像対象物1がヨーヨーである場合について図示の上説明したが、撮像対象物1はヨーヨーに限られない。
上記の実施形態の説明においては、使用する演出画像データの決定(ステップS3)を、ユーザの選択に従って行う場合について説明したが、使用する演出画像データD3の決定を、ステップS1で読み取った識別コードデータD1に係る識別情報に応じて、自動的に行うようにしてもよい。
これによって、識別コードデータD1毎に予め定められた異なる演出画像を表示させることができる。
上記の実施形態の説明においては、撮像対象物1を検出するためのマーカとして、LED等の発光体12を使用する場合について説明したが、使用するマーカは、撮像対象物1を検出するための目印となるものであればよく、このような発光体12には限られない。
例えば、撮像対象物1に、これを検出するためのマーカとして反射板を備えるようにした上で、画像表示装置2から光を発するようにし、反射板によって反射された光を、動画データD4に係る動画中から検出するようにしてもよい。
ステップS3においてユーザが使用する演出画像データD3を選択する場合には、ユーザが選択できる種類が、ユーザが本システムを使用するにつれて増加するようにしてもよい。
この場合、例えば、画像表示装置2の表示部24に表示されたエフェクト(演出画像データD3に係る演出画像)の表示態様、例えば、演出画像データD3に係る演出画像の表示時間、演出画像データD3に係る演出画像が動画データD4に係る動画中を移動した速さ、演出画像データD3に係る演出画像が動画データD4に係る動画中を移動した移動距離等を計測し、その結果を基に所定の基準に従って数値化した上で、当該数値が蓄積され、記憶部22に記憶されるようにする。
その上で、蓄積された数値に応じて、ステップS3の使用する演出画像の決定時に選択できる演出画像データD3に係る演出画像が増加するようにすればよい。
上記の実施形態の説明においては、撮像対象物1に備えられ、識別コードデータD1を記憶させる記憶媒体として、近距離無線通信タグ11を用いる場合について説明した。
この点、識別コードデータD1を記憶させる記憶媒体としては、画像表示装置2による読み取りに要する時間が短い点等から近距離無線通信タグ11を使用することが好ましいものの、識別コードデータD1を記憶すると共に、記憶された識別コードデータD1を画像表示装置2によって読み取ることができるものであればよく、必ずしも近距離無線通信タグ11には限られない。
1 撮像対象物(対象物)
11 近距離無線通信タグ(記憶媒体)
12 発光体(マーカ)
2 画像表示装置
21 制御部(撮像制御手段、検出手段、表示制御手段、読取手段、特定手段、抽出手段)
22 記憶部
221 画像表示装置用アプリケーション(画像表示プログラム)
222 発光色データベース
223 演出画像データベース
23 無線通信部
24 表示部(表示手段)
25 操作部
26 撮像部(撮像手段)
D1 識別コードデータ(識別情報)
D2 発光色データ
D3 演出画像データ(画像データ)
D4 動画データ
Claims (8)
- コンピュータを、
対象物に備えられた記憶媒体に記憶された識別情報を読み取る読取手段、
前記読取手段が読み取った前記識別情報を用いて、前記識別情報に対応するマーカを特定する特定手段、
撮像手段によって前記対象物の動画を撮像させる撮像制御手段、
前記撮像手段によって撮像された前記動画中を動く前記対象物に設けられた前記マーカを検出する検出手段、
前記検出手段が検出した前記マーカを追尾するようにして、演出画像を前記動画に重ねて、表示手段に表示させる表示制御手段、
として機能させ、
前記検出手段は、前記特定手段による特定結果を用いて、前記特定手段が特定した前記マーカを、前記動画中から検出することを特徴とする画像表示プログラム。 - 前記マーカは発光体であり、
前記特定手段は、前記識別情報に対応する前記マーカの発光色を特定し、
前記検出手段は、前記特定手段が特定した発光色の発光体を、前記動画中から検出することを特徴とする請求項1に記載の画像表示プログラム。 - 前記コンピュータを、
前記識別情報と、前記演出画像の画像データと、が紐付けて記憶された記憶手段から、前記読取手段が読み取った前記識別情報に対応する前記画像データを抽出する抽出手段、
としてさらに機能させ、
前記表示制御手段は、前記抽出手段が抽出した前記画像データに係る前記演出画像を、前記表示手段に表示させることを特徴とする請求項1又は2に記載の画像表示プログラム。 - 前記記憶媒体は、近距離無線通信タグであることを特徴とする請求項1から3のいずれか一項に記載の画像表示プログラム。
- 前記コンピュータを、
前記表示制御手段が前記演出画像を前記表示手段に表示させた表示態様を基に、所定の基準に従って数値を決定する数値決定手段、
としてさらに機能させ、
前記表示態様は、前記表示制御手段が前記演出画像を前記表示手段に表示させた時間、前記演出画像が前記動画中を移動した速さ、及び前記演出画像が前記動画中を移動した移動距離のうち、少なくとも一つを含むことを特徴とする請求項1から4のいずれか一項に記載の画像表示プログラム。 - 対象物に備えられた記憶媒体に記憶された識別情報を読み取る読取手段と、
前記読取手段が読み取った前記識別情報を用いて、前記識別情報に対応するマーカを特定する特定手段と、
撮像手段によって前記対象物の動画を撮像させる撮像制御手段と、
前記撮像手段によって撮像された前記動画中を動く前記対象物に設けられた前記マーカを検出する検出手段と、
前記検出手段が検出した前記マーカを追尾するようにして、演出画像を前記動画に重ねて、表示手段に表示させる表示制御手段と、
を備え、
前記検出手段は、前記特定手段による特定結果を用いて、前記特定手段が特定した前記マーカを、前記動画中から検出することを特徴とする画像表示装置。 - 請求項6に記載の画像表示装置と、
マーカが設けられ、前記画像表示装置による撮像対象となる対象物と、
を備えることを特徴とする画像表示システム。 - 対象物に備えられた記憶媒体に記憶された識別情報を読み取る読取ステップと、
前記読取ステップにおいて読み取った前記識別情報を用いて、前記識別情報に対応するマーカを特定する特定ステップと、
撮像手段によって前記対象物の動画を撮像させる撮像ステップと、
前記撮像ステップにおいて撮像された前記動画中を動く前記対象物に設けられた前記マーカを検出する検出ステップと、
前記検出ステップにおいて検出した前記マーカを追尾するようにして、演出画像を前記動画に重ねて、表示手段に表示させる表示ステップと、
を含み、
前記検出ステップにおいては、前記特定ステップにおける特定結果を用いて、前記特定ステップにおいて特定した前記マーカを、前記動画中から検出することを特徴とする画像表示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022034122A JP7203255B1 (ja) | 2022-03-07 | 2022-03-07 | 画像表示プログラム、画像表示装置、画像表示システム及び画像表示方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022034122A JP7203255B1 (ja) | 2022-03-07 | 2022-03-07 | 画像表示プログラム、画像表示装置、画像表示システム及び画像表示方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP7203255B1 true JP7203255B1 (ja) | 2023-01-12 |
JP2023129837A JP2023129837A (ja) | 2023-09-20 |
Family
ID=84887137
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022034122A Active JP7203255B1 (ja) | 2022-03-07 | 2022-03-07 | 画像表示プログラム、画像表示装置、画像表示システム及び画像表示方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7203255B1 (ja) |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012037919A (ja) | 2010-08-03 | 2012-02-23 | Doshisha | 拡張現実感技術を利用した情報家電操作システム |
-
2022
- 2022-03-07 JP JP2022034122A patent/JP7203255B1/ja active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012037919A (ja) | 2010-08-03 | 2012-02-23 | Doshisha | 拡張現実感技術を利用した情報家電操作システム |
Also Published As
Publication number | Publication date |
---|---|
JP2023129837A (ja) | 2023-09-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9257035B2 (en) | Remote control device, remote control system, and storage medium storing control program, and medium to be attached to electrical device | |
JP4765027B2 (ja) | 情報処理装置及び情報処理システム | |
US8913885B2 (en) | Information provision system, server, terminal device, information provision method, display control method and recording medium | |
EP2126675B1 (en) | System and method for tracking an electronic device | |
CN106538064B (zh) | 照明系统 | |
KR20080080665A (ko) | 엔터테인먼트 시스템 | |
US20130307772A1 (en) | Interactive projection system with light spot identification and control method thereof | |
CN111766937A (zh) | 虚拟内容的交互方法、装置、终端设备及存储介质 | |
US8897567B2 (en) | Information processor, device, and information processing system | |
JP5556481B2 (ja) | 付加情報提供システム及び撮像装置 | |
US10218439B2 (en) | Optical communication device, optical communication method, and non-transitory recording medium | |
CN102375564A (zh) | 使用光学指示器的交互方法、光学指示器、展示方法和系统 | |
CN111766936A (zh) | 虚拟内容的控制方法、装置、终端设备及存储介质 | |
US20130342554A1 (en) | Method, system and electronic device for association based identification | |
JP7203255B1 (ja) | 画像表示プログラム、画像表示装置、画像表示システム及び画像表示方法 | |
JP2008117083A (ja) | 座標指示装置、電子機器、座標指示方法、座標指示プログラム、及び座標指示プログラムを記録した記録媒体 | |
CN111913560B (zh) | 虚拟内容的显示方法、装置、系统、终端设备及存储介质 | |
JP2008059253A (ja) | 表示撮像装置、物体検出プログラムおよび物体の検出方法 | |
CN111913564B (zh) | 虚拟内容的操控方法、装置、系统、终端设备及存储介质 | |
US20200059603A1 (en) | A method of providing information about an object | |
CN115393962A (zh) | 动作识别方法、头戴显示设备和存储介质 | |
US11877098B2 (en) | Information processing apparatus, lighting device, and non-transitory computer readable medium storing program | |
CN103049105A (zh) | 光学笔及应用该光学笔的互动式投影系统 | |
JP2016184850A (ja) | プロジェクターおよび検出方法 | |
US10902501B2 (en) | Method of storing object identifiers |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220414 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20220421 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220719 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220915 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221213 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221226 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7203255 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |