JP7119384B2 - 情報処理装置、情報処理システム及びプログラム - Google Patents
情報処理装置、情報処理システム及びプログラム Download PDFInfo
- Publication number
- JP7119384B2 JP7119384B2 JP2018009007A JP2018009007A JP7119384B2 JP 7119384 B2 JP7119384 B2 JP 7119384B2 JP 2018009007 A JP2018009007 A JP 2018009007A JP 2018009007 A JP2018009007 A JP 2018009007A JP 7119384 B2 JP7119384 B2 JP 7119384B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- aerial image
- person
- aerial
- images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 30
- 230000015572 biosynthetic process Effects 0.000 claims description 62
- 238000010586 diagram Methods 0.000 description 65
- 238000001514 detection method Methods 0.000 description 41
- 238000000034 method Methods 0.000 description 37
- 230000003287 optical effect Effects 0.000 description 22
- 238000012545 processing Methods 0.000 description 18
- 238000007639 printing Methods 0.000 description 17
- 238000012790 confirmation Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 12
- 230000008859 change Effects 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 238000003384 imaging method Methods 0.000 description 7
- 238000013459 approach Methods 0.000 description 6
- 230000007246 mechanism Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 239000011521 glass Substances 0.000 description 4
- 235000019646 color tone Nutrition 0.000 description 3
- 239000011347 resin Substances 0.000 description 3
- 229920005989 resin Polymers 0.000 description 3
- 239000003086 colorant Substances 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 238000011960 computer-aided design Methods 0.000 description 2
- 230000008021 deposition Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 239000000853 adhesive Substances 0.000 description 1
- 230000001070 adhesive effect Effects 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000000843 powder Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
- G03H1/22—Processes or apparatus for obtaining an optical image from holograms
- G03H1/2202—Reconstruction geometries or arrangements
- G03H1/2205—Reconstruction geometries or arrangements using downstream optical component
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/50—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a 3D volume, e.g. voxels
- G02B30/56—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a 3D volume, e.g. voxels by projecting aerial or floating images
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/60—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images involving reflecting prisms and mirrors only
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0261—Targeted advertisements based on user location
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0276—Advertisement creation
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
- G03H1/22—Processes or apparatus for obtaining an optical image from holograms
- G03H1/2202—Reconstruction geometries or arrangements
- G03H2001/2223—Particular relationship between light source, hologram and observer
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H2226/00—Electro-optic or electronic components relating to digital holography
- G03H2226/05—Means for tracking the observer
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Optics & Photonics (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Engineering & Computer Science (AREA)
- Strategic Management (AREA)
- Entrepreneurship & Innovation (AREA)
- Game Theory and Decision Science (AREA)
- Economics (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- User Interface Of Digital Computer (AREA)
Description
請求項2に記載の発明は、前記他の像は、全体が均一な色又はパターンの画像である、請求項1に記載の情報処理装置である。
請求項3に記載の発明は、前記他の画像は、前記像のコントラストを高める画像である、請求項1に記載の情報処理装置である。
請求項4に記載の発明は、前記制御手段は、ユーザが予め定めた範囲よりも内側にいる場合に、前記像を形成する方向の変更を実行する、請求項1に記載の情報処理装置である。
請求項5に記載の発明は、前記制御手段は、ユーザの移動に追従して各ユーザに対応する前記像を形成する向きを変更する、請求項1に記載の情報処理装置である。
請求項6に記載の発明は、前記制御手段は、ユーザの移動に追従して各ユーザに対応する前記像の表示の内容を変化させる、請求項1に記載の情報処理装置である。
請求項7に記載の発明は、空気中に像を形成する像形成手段と、前記像に対するユーザの移動の方向を検知する検知手段と、検知された方向に応じて前記像の形成を制御する制御手段とを有し、前記制御手段は、接近する方向が異なる複数のユーザと正対する位置に複数の前記像を形成する場合に、当該複数の前記像の間に、各ユーザによる前記像の視認性を高める他の像を形成する、情報処理システムである。
請求項8に記載の発明は、コンピュータに、空気中に形成される像に対するユーザの移動の方向を検知する機能と、検知された方向に応じて前記像の形成を制御する機能と、を実現させるためのプログラムであり、前記制御する機能は、接近する方向が異なる複数のユーザと正対する位置に複数の前記像を形成する場合に、当該複数の前記像の間に、各ユーザによる前記像の視認性を高める他の像を形成するプログラムである。
請求項2記載の発明によれば、複数の像の干渉を低減して視認性を高めることができる。
請求項3記載の発明によれば、複数の像の干渉を低減して視認性を高めることができる。
請求項4記載の発明によれば、像の近くにいるユーザの視認性を高めることができる。
請求項5記載の発明によれば、ユーザがどこに移動してもユーザの視認性を高めることができる。
請求項6記載の発明によれば、ユーザの注意を引き続けることができる。
請求項7記載の発明によれば、複数の像の干渉を低減して視認性を高めることができる。
請求項8記載の発明によれば、複数の像の干渉を低減して視認性を高めることができる。
<実施の形態1>
<空中画像形成システムの概略構成>
図1は、実施の形態1に係る空中画像形成システム1Aの概略構成を説明する図である。空中画像形成システム1Aは、情報処理システムの一例である。
本実施の形態において、空中画像10とは、物体からの反射光と同等の光の状態を再現するように空気中に形成される像をいう。
空中画像10は、空気中に浮かぶように形成されるので、人は、空中画像10を通り抜けることも可能である。
なお、空中画像10には、静止画像だけでなく、動画像が表示されることもある。
また、各実施の形態では、矩形形状の全体を空中画像10として表現するが、空中画像10の外縁を規定する形状は矩形に限らず、任意でよい。例えば物体(オブジェクト)の像が形成される空間を、空中画像10が形成される空間の全てとしてもよい。例えば操作用のボタンの像、人の像、動物の像、製品の像、果物の像なども、ここでの空中画像10の一例である。図1では、空中画像10が平面形状であるが、曲面、球体、立方体などの立体的な形状でもよい。
本実施の形態では、この関係を逆転し、人20の位置に応じて空中画像10を形成する位置や角度を調整する。また、本実施の形態では、必要に応じて、表示の内容や表示の仕方も変更する。
ここで、空中画像形成装置31は像形成手段の一例であり、像制御装置32Aは制御手段の一例である。なお、像制御装置32Aは情報処理装置の一例でもある。また、位置検知センサ33は検知手段の一例である。
ここで、像制御装置32Aは、位置検知センサ33から出力される信号に基づいて人20の位置を取得し、特定された人20の位置の履歴を通じて人20が接近する方向を取得する。人20の位置は、厳密な座標点として特定される必要はなく、おおよその位置を特定できればよい。
ここで、おもて面とは、例えば文字が正しい向きとして視認される面や顔の左右が正しい向きで観察される面をいう。また、空中画像10が立体像の場合には、正面に定めた面が観察される方向をおもて面という。
距離の測定には、例えば対象物での光の反射により距離を測定する光学式、20kHz以上の超音波を使用する超音波式、2台の撮像カメラを用いてステレオ撮影した2枚の画像から視差を利用して距離を求める方式、1台の撮像カメラを用いて距離に応じたボケと色ズレが発生する画像を撮影し、ボケと色ズレを画像処理して距離を検出する方式等を用いてもよい。
図2~図6を用いて、空中画像10の形成原理を説明する。以下に説明する原理は、いずれも既知である。
図2は、表示デバイス41から出力される光を専用の光学プレート42を透過させることで空中画像10を形成する空中画像形成装置31Aの原理図である。(A)は各部材と空中画像10との位置関係を示し、(B)は光学プレート42の断面構造の一部を示す。ここでの表示デバイス41と光学プレート42は、光学部品の一例である。
光学プレート42は、壁面を鏡として使用する短冊状のガラス42Aを配列したプレートと、ガラス42Aに対して直交する向きに短冊状のガラス42Bを配列したプレートを上下に重ねた構造を有する。
光学プレート42は、表示デバイス41から出力される光を短冊状のガラス42A及び42Bで2回反射して空気中で結像させることで、表示デバイス41に表示されている画像を空気中に再現する。なお、表示デバイス41と光学プレート42の距離と、光学プレート42と空中画像10の距離は同じである。また、表示デバイス41に表示される画像の寸法と空中画像10の寸法は同じである。
空中画像形成装置31Dの場合、表示デバイス45から出力される光は、ビームスプリッタ46によって再帰反射シート47の方向に反射され、次に再帰反射シート47で再帰反射され、ビームスプリッタ46を透過して空中で結像される。光が結像する位置に空中画像10が形成される。
空中画像形成装置31Eの場合、赤外パルスレーザ48がパルス状のレーザ光を出力し、XYZスキャナ49がパルス状のレーザ光を空気中で集光する。このとき、焦点近傍の気体が瞬間的にプラズマ化し、発光する。パルス周波数は、例えば100Hz以下であり、パルス発光時間は、例えばナノ秒オーダである。ここでの赤外パルスレーザ48とXYZスキャナ49は、光学部品の一例である。
図7は、実施の形態1に係る像制御装置32Aのハードウェア構成の一例を説明する図である。
像制御装置32Aは、ファームウェアやアプリケーションプログラムの実行を通じて各種の機能を提供するCPU(Central Processing Unit)51と、ファームウェアやBIOS(Basic Input Output System)を格納する記憶領域であるROM(Read Only Memory)52と、プログラムの実行領域であるRAM(Random Access Memory)53とを有している。ここでのCPU51、ROM52、RAM53は、いわゆるコンピュータの一例である。
また、像制御装置32Aは、アプリケーションプログラム等のデータを格納する記憶装置54を有している。記憶装置54は、例えば書き換え可能な不揮発性の記憶媒体を情報の格納に使用する。
なお、像制御装置32Aは、インタフェース(IF)56を使用して位置検知センサ33と通信する。
ここで、CPU51と各部はバス57を通じて接続されている。
図8に示す機能構成は、CPU51(図7参照)によるプログラムの実行を通じて実現される。
CPU51は、空中画像10(図1参照)が形成されている空間内における人20(図1参照)の位置を検知する位置検知部60と、検知された人20の位置の履歴から人20が移動する方向を検知する移動方向検知部61と、検知された方向に応じて空中画像10の形成を制御する像形成制御部62として機能する。
移動方向検知部61は、位置検知部60によって検知された位置の情報の履歴などに基づいて、空中画像10に対する移動の方向を検知する。なお、位置検知センサ33が撮像カメラである場合には、画像データを処理して人20が移動する方向を検知してもよい。
人20が移動する方向には、例えば空中画像10に接近する方向、空中画像10の前方を横切る方向、空中画像10から遠ざかる方向が含まれる。
なお、人20が立ち止まっている場合には、立ち止まるまでに検知された移動の方向を使用してもよい。また、移動する方向は、データ処理によって予測される方向でもよい。
空中画像10が形成される位置の情報は、初期位置から累積された制御の履歴に基づいて推定してもよいし、空中画像形成装置31との通信を通じて推定してもよいし、他のセンサ類から与えられてもよい。
図9は、実施の形態1に係る像形成制御部62(図8参照)が実行する処理動作の概要を説明するフローチャートである。概要であるので、細部については、個別の使用の形態に応じて異なる。
まず、像形成制御部62は、人を検知したか否かを判定する(ステップ1)。
ステップ1で否定結果が得られた場合、像形成制御部62は、人が検知されるまで判定を繰り返す。
ここでの特定は、厳密な意味での特定を必要としない。
続いて、像形成制御部62は、特定された移動の方向に応じて空中画像の向きや内容を変更する(ステップ4)。
空中画像の移動には、例えば平行移動や回転移動がある。これらの移動では、空中画像の寸法は保たれる。ここで、平行移動とは、移動の前後で表示面の傾きを変えずに実行される直線的な移動である。回転移動とは、予め定めた仮想的な軸を中心とした回転を伴う移動である。
<移動例1>
ここでは、人20が空中画像10に近づいてくる場合について説明する。
図10は、人20に対して空中画像10が正対するように空中画像10の形成を制御する例を説明する図である。(A)は人20が方向1に移動する場合、(B)は人20が方向2に移動する場合、(C)は人20が方向3に移動する場合における空中画像10の位置を表している。
いずれの方向に移動する場合にも、人20と正対するように空中画像10が形成されるので、空中画像10の位置が固定される場合に比して、人20による空中画像10の視認性が高くなる。換言すると、視認性の低下が回避される。
ここで、方向4は、方向2の反対である。従って、人20が方向4から空中画像10に接近する場合には、おもて面が方向2から接近する場合と入れ替わっている。このため、人20が接近してくる方向に関わらず、人20は、正しい向きで空中画像10を視認することができる。
ここでは、空中画像10の前方を人20が横切るように移動する場合について説明する。
図12は、人20が空中画像10から離れた位置を一方向に横切る場合における空中画像10の形成例を説明する図である。(A)は時点T1における空中画像10と人20の位置の関係を示し、(B)は時点T2における空中画像10と人20の位置の関係を示し、(C)は時点T3における空中画像10と人20の位置の関係を示す。
本実施の形態では、空中画像10の短辺を与える上辺の中点と下辺の中点を通る線を回転軸とする。すなわち、空中画像10はXY平面内で回転される。
このため、空中画像10は、時点T1の人20の位置からも、時点T2の人20の位置からも、時点T3の人20の位置からも正対するように視認される。このため、移動の間中、人20による空中画像10の視認が容易な状態に維持される。
例えば時点T1の位置からは「AAAA/AAAA/AAAA/AAAA」(ここで/は改行を意味する。以下同じ。)を内容とする空中画像10が視認されているが、時点T2の位置からは「BBBB/BBBB/BBBB/BBBB」を内容とする空中画像10が視認され、時点T3の位置からは「CCCC/CCCC/CCCC/CCCC」を内容とする空中画像10が視認されている。
表示の内容の切り替わりは、ある時点を境に切り替えられる。人20の移動に応じて空中画像10の表示の内容が変化することで多様な表現が可能になる。
<空中画像形成システムの概略構成>
図13は、実施の形態2に係る空中画像形成システム1Bの概略構成を説明する図である。空中画像形成システム1Bは、情報処理システムの一例である。
図13には、図1との対応部分に対応する符号を付して示している。
本実施の形態では、空中画像10の周囲に、複数名の人20A~20Cが位置する場合における像制御装置32Bの動作について説明する。なお、図13に示す人20A~20Cは、それぞれ異なる方向に移動している。
図13では、人20Aが他の誰よりも空中画像10の近くに位置している。ここでは、人20Aと空中画像10との距離をLAで表し、人20Bと空中画像10との距離をLBで表し、人20Cと空中画像10との距離をLCで表している。
本実施の形態における像制御装置32Bは、図7に示すハードウェア構成を有している。なお、像制御装置32Bは、制御手段の一例であると共に情報処理装置の一例でもある。
図14には、図8との対応部分に対応する符号を付して示している。
図14に示す機能構成は、CPU51によるプログラムの実行を通じて実現される。
本実施の形態の場合、位置検知部60と移動方向検知部61との間に、対象者特定部64が配置されている点で実施の形態1と相違し、その他の点は実施の形態1と共通する。
なお、対象者が複数名いる場合、対象者特定部64は、複数名のうちの1人を予め定めた規則に従い決定する。
もっとも、空中画像10に対する距離がより近い人が検知されても、対象者を即座に切り替えなくてもよい。例えば予め定めた時間長(例えば15秒)の広告や案内の表示が終わる前に対象者が切り替わると、それまで空中画像10を注視していた人の視認性が損なわれ兼ねないためである。
なお、対象者特定部64は、移動方向検知部61と像形成制御部62の間に配置してもよい。この場合、対象者特定部64は、複数名について検知された位置と移動の方向の情報に基づいて対象者を特定する。
まず、像形成制御部62は、人を検知したか否かを判定する(ステップ11)。
ステップ11で否定結果が得られた場合、像形成制御部62は、人が検知されるまで判定を繰り返す。
次に、像形成制御部62は、他者よりも空中画像に近い人を特定する(ステップ13)。検知されている人が1名の場合には、この処理は不要である。
続いて、像形成制御部62は、特定された人の位置の情報に基づいて移動の方向を特定する(ステップ14)。
図16は、実施の形態2における空中画像10の形成の手法を説明する図である。
図16では、空中画像10が形成されている空間を上空側から見た様子を表している。図16の例では、3名の人20A~20Cが空中画像10の周囲に存在している。3名のうち人20Aが他の2名よりも空中画像10に近い。このため、空中画像10は、人20Aと正対する向きに形成されている。
<空中画像形成システムの概略構成>
図17は、実施の形態3に係る空中画像形成システム1Cの概略構成を説明する図である。空中画像形成システム1Cは、情報処理システムの一例である。
図17には、図1との対応部分に対応する符号を付して示している。
本実施の形態では、検知された人20が空中画像10の周囲に設定された範囲34の内側に位置するか外側に位置するかに応じて、空中画像10の向きや内容に対する制御が変更される場合について説明する。
また、図17の場合、範囲34を規定する円の中心と空中画像10の中心とが概略一致しているので、範囲34は中心からいずれの方向にも均等であるが、範囲34は特定の方向に広く他の方向に狭くてもよい。例えば特定の方向から接近する人20に対しては、他の方向から接近する人20よりも遠くの位置から視認性を高めたい場合には、想定する方向について範囲34を広く設定する。
この実施の形態における像制御装置32Cには、予め設定された範囲34の情報が保存されている。
本実施の形態における像制御装置32Cも、図7に示すハードウェア構成を有している。なお、像制御装置32Cは、制御手段の一例であると共に情報処理装置の一例でもある。
図18には、図8との対応部分に対応する符号を付して示している。
図18に示す機能構成は、CPU51によるプログラムの実行を通じて実現される。
本実施の形態の場合、位置検知部60と移動方向検知部61との間に、範囲内判定部65が配置されている点で実施の形態1と相違し、その他の点は実施の形態1と共通する。
なお、範囲内判定部65は、移動方向検知部61と像形成制御部62の間に配置してもよい。
まず、像形成制御部62は、人を検知したか否かを判定する(ステップ21)。
ステップ21で否定結果が得られた場合、像形成制御部62は、人が検知されるまで判定を繰り返す。
次に、像形成制御部62は、特定された人の位置は範囲34(図17参照)の内側か否かを判定する(ステップ23)。
ステップ23で否定結果が得られた場合、像形成制御部62は、後続する処理を実行せず、一連の処理を終了する。
一方、ステップ23で肯定結果が得られた場合、像形成制御部62は、特定された人の位置の情報に基づいて移動の方向を特定する(ステップ24)。
図20は、実施の形態3における空中画像10の形成の手法を説明する図である。
図20では、空中画像10が形成されている空間を上空側から見た様子を表している。図20の例では、3名の人20A~20Cが空中画像10の周囲に存在している。3名のうち人20Aが範囲34の内側に位置しており、人20Bと人20Cは範囲34の外側に位置している。
この例の場合、範囲34は楕円形状であり、空中画像10の表示面に対して人20Aの方向に広く、人20Cの方向に狭くなっている。このため、空中画像10との距離は人20Cの方が近いにも関わらず、人20Aと正対するように空中画像10が形成されている。
<空中画像形成システムの概略構成>
図21は、実施の形態4に係る空中画像形成システム1Dの概略構成を説明する図である。空中画像形成システム1Dは、情報処理システムの一例である。
図21には、図1との対応部分に対応する符号を付して示している。
本実施の形態では、2台の空中画像形成装置311及び312を使用して2つの空中画像10A及び10Bを形成する場合について説明する。
本実施の形態における空中画像形成システム1Dは、空気中に空中画像10Aを形成する空中画像形成装置311と、空気中に空中画像10Bを形成する空中画像形成装置312と、空中画像形成装置311及び312を制御する像制御装置32Dと、人20A及び20Bの位置を検知する位置検知センサ33とを有している。
本実施の形態における像制御装置32Dも、図7に示すハードウェア構成を有している。なお、像制御装置32Dは、制御手段の一例であると共に情報処理装置の一例でもある。
図22には、図14との対応部分に対応する符号を付して示している。
図22に示す機能構成は、CPU51によるプログラムの実行を通じて実現される。
本実施の形態に係る像制御装置32Dは、位置検知部60と、対象者特定部64A及び64Bと、移動方向検知部61A及び61Bと、像形成制御部62A及び62Bとして機能する。
対象者特定部64Aと対象者特定部64Bは、互いに特定された対象者の情報を受け渡しし、情報を共有している。なお、位置検知部60で検知された人が1名の場合には、空中画像10A用の対象者と空中画像10B用の対象者とは一致する。
また、位置検知部60で検知された人が2名以上の場合には、空中画像10A用の対象者と空中画像10B用の対象者とが異なるように特定する。
もっとも、位置検知部60で検知された人が2名以上の場合でも、空中画像10Aの対象者と空中画像10Bの対象者とを同一人とすることは可能である。例えば空中画像10A及び10Bに視線を向けているのが1名の場合などである。
まず、像形成制御部62A及び62Bは、人を検知したか否かを判定する(ステップ31)。
ステップ31で否定結果が得られた場合、像形成制御部62A及び62Bは、人が検知されるまで判定を繰り返す。
次に、像形成制御部62A及び62Bは、空中画像10Aに対応づける人と空中画像10Bに対応付ける人を特定する(ステップ33)。実施の形態2の場合のように、他者よりも空中画像に近い人を対象者として特定してもよいし、予め定めた条件を満たすことを条件としてもよい。なお、検知されている人が1名の場合には、この処理は不要である。
続いて、像形成制御部62A及び62Bは、特定された各人について移動の方向を特定する(ステップ34)。
この後、像形成制御部62A及び62Bは、特定された移動の方向に応じて空中画像10A及び10Bのそれぞれについて向きや内容を変更する(ステップ35)。
<形成例1>
図24は、実施の形態4における空中画像10A及び10Bの形成例の1つを説明する図である。
図24では、空中画像10A及び10Bが形成されている空間を上空側から見た様子を表している。図24の例では、空中画像10A及び10Bの周囲に人20A及び20Bが存在している。このうち、人20Aは、人20Bよりも空中画像10Aに近く、人20Bは、人20Aよりも空中画像Bに近い。このため、空中画像10Aは、X軸の方向に移動する人20Aと正対する向きに形成され、空中画像10Bは、Y軸の方向に移動する人20Bと正対する向きに形成されている。
図25の例では、空中画像10Aと空中画像10Bが並んで形成され、2つの表示面を合わせて1枚の絵を構成するように形成されている。2つの表示面に1枚の絵を描画することで、人20Aが視認できる面積が2倍となり、視認性を高めることができる。
図26は、実施の形態4における空中画像10A及び10Bの他の形成例を説明する図である。(A)は人20Aと人20Bが空中画像10A及び10Bを挟んで対面する位置にある状態を表し、(B)は空中画像10A及び10Bが形成されている空間を上空側から見た様子を表している。
人20Aと人20Bが対面する位置にある場合、空中画像10Aと空中画像10Bも対面する位置に形成される。
例えば人20Aの位置から見ると、手前側に位置する空中画像10Aの内容に、背景側に位置する空中画像10Bの内容が重なって視認される。例えば人20Bの位置から見ると、手前側に位置する空中画像10Bの内容に、背景側に位置する空中画像10Aの内容が重なって視認される。
図27では、空中画像20Aと空中画像20Bとの間に、第3の空中画像20Cを形成して、空中画像20Aと空中画像20Bの視認性を高める手法を表している。
また、空中画像20Cには、空中画像20A及び20Bのコントラストを高める画像を使用してもよい。ここで、コントラストを高める画像にも、例えば空中画像20A及び20Bの色調に対して補色(反対色)の関係にある色調の画像が望ましい。
なお、図27では、空中画像10Cの寸法が、空中画像10A及び10Bよりも大きい場合を示している。空中画像10Cの寸法が大きいことで、空中画像10A及び10Bの位置関係にズレがあっても、一方側から見た他方側を空中画像10Cで隠すことができる。
また、空中画像10Cの寸法が空中画像10A及び10Bの寸法よりも大きいことで、額縁のような視覚効果が生じ、空中画像10A及び10Bの視認性を高められる。
(B)に示す例は、空中画像10Aの視認性を低下させる原因が、空間内に実在する物体(ここでは植木21)である場合に、空中画像10Aの背後に第3の空中画像10Cを配置する例を表している。
<空中画像形成システムの概略構成>
図29は、実施の形態5に係る空中画像形成システム1Eの概略構成を説明する図である。空中画像形成システム1Eは、情報処理システムの一例である。
図29には、図1との対応部分に対応する符号を付して示している。
本実施の形態では、3つの空中画像10A~10Cが配置される場合に、人20Aの移動に追従して表示の内容が変化する場合を説明する。
図29に示す例では、3つの空中画像10A~10Cが天井側から見てコ字状に配置されている。空中画像10A~10Cの形成には、空中画像形成装置311~313が使用される。
図29では、人20が、空中画像10Aに対面している。
また、図29では、人20による視認性を高めるために、空中画像10Bと空中画像10Cの輝度を低下させた様子を表現している。もっとも、人20と対面している空中画像10Aの輝度を、空中画像10B及び10Cの輝度よりも高めてもよい。
図30では、空中画像10Bの内容が「BBBB/BBBB/BBBB/BBBB」の静止画像に切り替わっている。
なお、空中画像10Cの内容は初期の状態と同じであるが、空中画像10Bの内容に合わせて変更してもよい。
図31では、空中画像10Bの内容が「CCCC/CCCC/CCCC/CCCC」の静止画像に切り替わっている。
換言すると、空中画像形成システム1Eは、人20の移動に伴い、視認の対象である空中画像10A~10Cの視認性を順次高めるように制御する。
図32は、人20の移動に伴い、各空中画像10A~10Cで再生される動画像の内容を説明する図である。(A)は、空中画像10A~10Cの位置関係と人20の移動の経路を表し、(B)~(D)は、人20の移動の速度に応じた表示の内容の切り替わりの時点を説明する図である。
因みに、記号のSは、移動が開始される地点を示し、記号のEは、移動が終了する地点を示す。記号のP1は、空中画像10Aと空中画像10Bの境界を示し、記号のP2は、空中画像10Bと空中画像10Cの境界を示す。
(C)に示す例は、人20が、空中画像10A~10Cの前に均等に位置する場合である。このため、空中画像10A~10Cのそれぞれに表示される動画像は、いずれも10秒程度である。
(D)に示す例は、人20が、空中画像10Aと空中画像10Bの前をゆっくり移動した場合である。このため、空中画像10Cに表示される動画像は、全編30秒のうちの終わりの5秒程度である。
動画像を表示する場合も、人20と対面する位置の空中画像の視認性を高めるように、各空中画像の輝度が制御されることが望ましい。
図33に示す例での制御は、3つの空中画像10A~10Cが横方向に配置されている以外は、図29~図32を用いて説明した制御と同様である。
<空中画像形成システムの概略構成>
本実施の形態では、前述した空中画像形成システムに、空中画像の出力を受け付ける機能を付加する場合について説明する。
図34は、実施の形態6に係る空中画像形成システム1Fの概略構成を説明する図である。空中画像形成システム1Fは、情報処理システムの一例である。
図34には、図1との対応部分に対応する符号を付して示している。
ここでの像制御装置32Fは、図7に示すハードウェア構成を有している。なお、像制御装置32Fは、制御手段の一例であると共に情報処理装置の一例でもある。
画像形成装置36は、用紙などの記録材に画像を形成する装置である。画像形成装置36には、レーザ方式やインクジェット方式で用紙に画像を印刷する印刷装置がある。
図35には、図8との対応部分に対応する符号を付して示している。
図35に示す機能構成は、CPU51によるプログラムの実行を通じて実現される。
本実施の形態に係る像制御装置32Fは、位置検知部60と、移動方向検知部61と、像形成制御部62と、空中画像に対する出力の指示を受け付ける出力受付部66と、出力の指示の対象となった空中画像の種類を認識する対象認識部67と、認識の結果に基づいて出力を制御する出力制御部68として機能する。
このうち、本実施の形態に特有な機能は、出力受付部66と、対象認識部67と、出力制御部68である。
例えば2次元の情報で規定される文書の場合、電子ファイルとしての出力や紙への印刷の蓋然性が高い。
例えば3次元の情報で規定される立体物の場合、3次元での造形や特定の方向についての外周面を連続的に用紙に印刷する蓋然性が高い。
因みに、3次元データには、例えば3次元の形状を三角形の集合体として表現するSTL(Standard Triangulated Language)に準拠したデータ、3次元の形状を正規格子(ボクセル)の集合体として表現するデータ、CAD(Computer Aided Design)データがある。
出力制御部68は、認識された結果や人による追加の指示に基づいて出力の形式を特定し、特定された形式による出力を制御する機能部である。
出力受付部66(図35参照)は、人による出力の指示があったか否かを判定する(ステップ41)。
ステップ41で否定結果が得られた場合、出力受付部66は、処理を終了する。もっとも、出力受付部66は、肯定結果が得られるまで判定を繰り返してもよい。
例えば空中画像の形成に2次元データが用いられている場合、対象認識部67は、空中画像は文書であると認定する。すなわち、ステップ42で肯定結果を得る。
ステップ42で肯定結果が得られた場合、対象認識部67は、文書用の確認画面を提示する(ステップ43)。本実施の形態の場合、確認画面は、空中画像として形成されるが、情報処理装置に設けられている表示デバイスに表示してもよい。
空中画像10が文書の場合、確認画面W1には候補が提示される。すなわち、電子ファイルとしての出力と用紙への印刷との2種類が、選択の候補として提示される。候補を選択する手法は様々であるが、例えば候補が表示されている領域を指や手で指定する。
電子ファイルとしての出力が選択された場合、対象認識部67は、電子ファイル100としての出力を指示する。電子ファイル100の生成は、像制御装置32F(図34参照)が実行してもよいし、空中画像形成装置31(図34参照)が実行してもよいし、空中画像形成装置31に2次元データを与えている不図示の情報処理装置(例えばコンピュータ)が実行してもよい。
なお、出力の形式が事前に設定されている場合、対象認識部67は、確認画面W1を表示することなく、電子ファイル100の出力又は用紙101への画像の印刷を指示してもよい。
なお、確認画面W1に希望する候補が存在しない場合、対象認識部67は、さらに別の確認画面W2を通じて別の候補を提示する。図37では、3次元での出力やパノラマ画像としての印刷が候補として提示されている。
ステップ43で提示された確認画面に対する指示を受け付けると、出力制御部68は、出力の実行を指示する(ステップ44)。
一方、ステップ42で否定結果が得られた場合、対象認識部67は、空中画像が立体物か否かを判定する(ステップ45)。
ステップ45で肯定結果が得られた場合、対象認識部67は、立体用の確認画面を提示する(ステップ46)。
空中画像10が立体物の場合、確認画面W3には立体物の出力を確認する文面が提示される。
ここで、YESが選択された場合、対象認識部67は、立体物110の形成を指示する。すなわち、ステップ44(図36参照)の処理に移行する。この場合、3次元像形成装置35が、対応する方式に基づいて立体物を形成する。一方、NOが選択された場合、対象認識部67は、別の確認画面W4を通じ、別の候補を提示する。図38では、電子ファイルとしての出力や用紙への印刷が候補として提示されている。
ステップ46で提示された確認画面に対する指示を受け付けると、出力制御部68は、出力の実行を指示する(ステップ44)。
ステップ45で否定結果が得られた場合、対象認識部67は、その他用の確認画面を提示する(ステップ47)。
その他とは、例えば空中画像10に2次元データと3次元データが混在するような場合をいう。
図39は、空中画像10が文書とも立体物とも認定できない場合における出力の実行例を説明する図である。
空中画像10が文書とも立体物とも認定できない場合、確認画面W5には候補が提示される。すなわち、電子ファイルとしての出力と、用紙への印刷と、立体物の出力との3種類が選択の候補として提示される。
図36の説明に戻る。
ステップ47で提示された確認画面に対する指示を受け付けると、出力制御部68は、出力の実行を指示する(ステップ44)。
図40では、空中画像10A及び10Bの視認性を高めるための第3の空中画像10Cが、空中画像10Aと空中画像10Bの中間に形成されている場合における用紙101への印刷例を表している。
空中画像10C無しの印刷が選択された場合、空中画像10Aと空中画像10Bに対応する画像が2枚の用紙101に印刷される。
一方、空中画像10C有りの印刷が選択された場合、図40の例では、空中画像10Cが、空中画像10Aや空中画像10Bに対する縁取り102として印刷している。額縁として印刷されることで、その内側に印刷される空中画像10Aや空中画像10Bが目立ち易くなる。
前述した対象認識部66(図35参照)は、ここでの認識手段及び特定手段の一例である。
この技術を用いれば、空気中に形成された空中画像の種類に応じた形式による出力が簡便に実現される。なお、空中画像の種類は、空気中で視認される形態で認識してもよいし、空中画像の形成に使用されたデータの構造に基づいて認識してもよい。
以上、本発明の実施の形態について説明したが、本発明の技術的範囲は上述の実施の形態に記載の範囲に限定されない。上述の実施の形態に、種々の変更又は改良を加えたものも、本発明の技術的範囲に含まれることは、特許請求の範囲の記載から明らかである。
前述の実施の形態1~5においては、空中画像10が専ら平面状に形成される場合について説明しているが、実施の形態6において説明したように空中画像10が立体的に形成される場合にも応用が可能である。
Claims (8)
- 空気中に形成される像に対するユーザの移動の方向を検知する検知手段と、
検知された方向に応じて前記像の形成を制御する制御手段と
を有し、
前記制御手段は、接近する方向が異なる複数のユーザと正対する位置に形成される複数の前記像の間に、各ユーザによる前記像の視認性を高める他の像を形成する情報処理装置。 - 前記他の像は、全体が均一な色又はパターンの画像である、請求項1に記載の情報処理装置。
- 前記他の画像は、前記像のコントラストを高める画像である、請求項1に記載の情報処理装置。
- 前記制御手段は、ユーザが予め定めた範囲よりも内側にいる場合に、前記像を形成する方向の変更を実行する、請求項1に記載の情報処理装置。
- 前記制御手段は、ユーザの移動に追従して各ユーザに対応する前記像を形成する向きを変更する、請求項1に記載の情報処理装置。
- 前記制御手段は、ユーザの移動に追従して各ユーザに対応する前記像の表示の内容を変化させる、請求項1に記載の情報処理装置。
- 空気中に像を形成する像形成手段と、
前記像に対するユーザの移動の方向を検知する検知手段と、
検知された方向に応じて前記像の形成を制御する制御手段と
を有し、
前記制御手段は、接近する方向が異なる複数のユーザと正対する位置に複数の前記像を形成する場合に、当該複数の前記像の間に、各ユーザによる前記像の視認性を高める他の像を形成する、情報処理システム。 - コンピュータに、
空気中に形成される像に対するユーザの移動の方向を検知する機能と、
検知された方向に応じて前記像の形成を制御する機能と、
を実現させるためのプログラムであり、
前記制御する機能は、接近する方向が異なる複数のユーザと正対する位置に複数の前記像を形成する場合に、当該複数の前記像の間に、各ユーザによる前記像の視認性を高める他の像を形成するプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018009007A JP7119384B2 (ja) | 2018-01-23 | 2018-01-23 | 情報処理装置、情報処理システム及びプログラム |
US16/051,557 US11415938B2 (en) | 2018-01-23 | 2018-08-01 | Information processing apparatus, information processing system, and non-transitory computer readable medium storing program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018009007A JP7119384B2 (ja) | 2018-01-23 | 2018-01-23 | 情報処理装置、情報処理システム及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019128723A JP2019128723A (ja) | 2019-08-01 |
JP7119384B2 true JP7119384B2 (ja) | 2022-08-17 |
Family
ID=67299929
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018009007A Active JP7119384B2 (ja) | 2018-01-23 | 2018-01-23 | 情報処理装置、情報処理システム及びプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US11415938B2 (ja) |
JP (1) | JP7119384B2 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021144260A (ja) * | 2018-06-15 | 2021-09-24 | ソニーグループ株式会社 | 情報処理装置、情報処理方法、プログラム、および情報処理システム |
JP7447507B2 (ja) * | 2020-01-27 | 2024-03-12 | 富士フイルムビジネスイノベーション株式会社 | 情報処理装置及びプログラム |
JP7380253B2 (ja) * | 2020-01-27 | 2023-11-15 | 富士フイルムビジネスイノベーション株式会社 | 情報処理装置及びプログラム |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002123237A (ja) | 2000-10-16 | 2002-04-26 | Sharp Corp | 画像表示装置 |
JP2009532745A (ja) | 2006-04-06 | 2009-09-10 | スリーエム イノベイティブ プロパティズ カンパニー | 浮動する合成画像を有するシーティング |
JP2011068456A (ja) | 2009-09-25 | 2011-04-07 | Mitsubishi Electric Building Techno Service Co Ltd | 乗客コンベア |
JP2012221249A (ja) | 2011-04-08 | 2012-11-12 | Sony Corp | 表示制御装置、表示制御方法、およびプログラム |
JP2013069332A (ja) | 2012-12-14 | 2013-04-18 | Canon Inc | 情報処理装置及び情報処理方法 |
US20140168210A1 (en) | 2012-01-20 | 2014-06-19 | Nicholas Sheppard Bromer | Mirror array display system |
US20150138613A1 (en) | 2013-11-06 | 2015-05-21 | Electronics And Telecommunications Research Institute | Apparatus and method for displaying pseudo-hologram image based on pupil tracking |
WO2016047173A1 (ja) | 2014-09-24 | 2016-03-31 | オリンパス株式会社 | 医療システム |
WO2017141511A1 (ja) | 2016-02-17 | 2017-08-24 | ソニー株式会社 | 情報処理装置、情報処理システム、および情報処理方法、並びにプログラム |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5635736B2 (ja) * | 2009-02-19 | 2014-12-03 | 株式会社ソニー・コンピュータエンタテインメント | 情報処理装置および情報処理方法 |
US8854424B2 (en) * | 2011-06-08 | 2014-10-07 | City University Of Hong Kong | Generating an aerial display of three-dimensional images from a single two-dimensional image or a sequence of two-dimensional images |
JP2013109421A (ja) | 2011-11-17 | 2013-06-06 | Toshiba Corp | 電子機器、電子機器の制御方法、電子機器の制御プログラム |
JP5696908B2 (ja) | 2013-02-15 | 2015-04-08 | コニカミノルタ株式会社 | 操作表示システム |
KR102126503B1 (ko) * | 2013-11-26 | 2020-06-25 | 삼성전자주식회사 | 디스플레이 장치 및 그 제어 방법 |
US9489724B2 (en) * | 2014-03-31 | 2016-11-08 | The Boeing Company | Three-dimensional stereoscopic projection on complex surfaces |
KR101611484B1 (ko) * | 2014-08-20 | 2016-04-12 | 울산대학교 산학협력단 | 의료영상의 제공방법 |
JP2017062709A (ja) | 2015-09-25 | 2017-03-30 | 新光商事株式会社 | ジェスチャー操作装置 |
-
2018
- 2018-01-23 JP JP2018009007A patent/JP7119384B2/ja active Active
- 2018-08-01 US US16/051,557 patent/US11415938B2/en active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002123237A (ja) | 2000-10-16 | 2002-04-26 | Sharp Corp | 画像表示装置 |
JP2009532745A (ja) | 2006-04-06 | 2009-09-10 | スリーエム イノベイティブ プロパティズ カンパニー | 浮動する合成画像を有するシーティング |
JP2011068456A (ja) | 2009-09-25 | 2011-04-07 | Mitsubishi Electric Building Techno Service Co Ltd | 乗客コンベア |
JP2012221249A (ja) | 2011-04-08 | 2012-11-12 | Sony Corp | 表示制御装置、表示制御方法、およびプログラム |
US20140168210A1 (en) | 2012-01-20 | 2014-06-19 | Nicholas Sheppard Bromer | Mirror array display system |
JP2013069332A (ja) | 2012-12-14 | 2013-04-18 | Canon Inc | 情報処理装置及び情報処理方法 |
US20150138613A1 (en) | 2013-11-06 | 2015-05-21 | Electronics And Telecommunications Research Institute | Apparatus and method for displaying pseudo-hologram image based on pupil tracking |
WO2016047173A1 (ja) | 2014-09-24 | 2016-03-31 | オリンパス株式会社 | 医療システム |
WO2017141511A1 (ja) | 2016-02-17 | 2017-08-24 | ソニー株式会社 | 情報処理装置、情報処理システム、および情報処理方法、並びにプログラム |
Also Published As
Publication number | Publication date |
---|---|
US11415938B2 (en) | 2022-08-16 |
US20190227491A1 (en) | 2019-07-25 |
JP2019128723A (ja) | 2019-08-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2144448B1 (en) | Floating Image Interaction Device | |
US11385720B2 (en) | Picture selection method of projection touch | |
JP7119384B2 (ja) | 情報処理装置、情報処理システム及びプログラム | |
JP7040041B2 (ja) | 情報処理装置、情報処理システム及びプログラム | |
US9805509B2 (en) | Method and system for constructing a virtual image anchored onto a real-world object | |
WO2018067333A1 (en) | System and method for projecting graphical objects | |
TW201214245A (en) | Touch system using optical components to image multiple fields of view on an image sensor | |
US11048363B2 (en) | Floating display device and method for a floating display device to indicate touch position | |
JP5016443B2 (ja) | カメラ設置シミュレータプログラム | |
JP7135324B2 (ja) | 情報処理装置、情報処理システム及びプログラム | |
WO2022138297A1 (ja) | 空間浮遊映像表示装置 | |
RU2604430C2 (ru) | Взаимодействие с трехмерным виртуальным динамическим отображением | |
KR101698779B1 (ko) | 마이크로 미러 어레이 및 그 제조 방법, 그리고 이러한 마이크로 미러 어레이를 포함하는 플로팅 디스플레이 | |
EP4364396A1 (en) | Augmented reality eyewear with x-ray effect | |
JP2019046320A (ja) | 情報処理装置、画像形成装置、および、プログラム | |
JP6895846B2 (ja) | 表示装置 | |
JP6233941B1 (ja) | 非接触式の三次元タッチパネル、非接触式の三次元タッチパネルシステム、非接触式の三次元タッチパネルの制御方法、プログラム及び記録媒体 | |
JP2021071944A (ja) | 画像表示装置 | |
EP2643812B1 (en) | Method for displaying an item on a display unit | |
WO2023248381A1 (ja) | 映像表示システム、映像制御方法、及び映像制御プログラム | |
JP7505112B2 (ja) | ウェアラブル端末装置、プログラムおよび報知方法 | |
WO2020240835A1 (ja) | 空中映像表示装置 | |
JPH11174375A (ja) | 3次元画像表示装置 | |
JP2013047899A (ja) | 入力装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201218 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20211101 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220105 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220304 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220705 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220718 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7119384 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |