JP2015018567A - 現実の物理的な対象物を、仮想世界にトランスポートするシステムおよび方法 - Google Patents
現実の物理的な対象物を、仮想世界にトランスポートするシステムおよび方法 Download PDFInfo
- Publication number
- JP2015018567A JP2015018567A JP2014185085A JP2014185085A JP2015018567A JP 2015018567 A JP2015018567 A JP 2015018567A JP 2014185085 A JP2014185085 A JP 2014185085A JP 2014185085 A JP2014185085 A JP 2014185085A JP 2015018567 A JP2015018567 A JP 2015018567A
- Authority
- JP
- Japan
- Prior art keywords
- physical object
- virtual world
- imaged
- detected
- unique
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
- A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/29—Geographical information databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/001—Texturing; Colouring; Generation of texture or colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/20—Drawing from basic elements, e.g. lines or circles
- G06T11/206—Drawing of charts or graphs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
Abstract
Description
[項目1]
物理的な対象物を仮想世界の対象物に変換する方法であって、
相互接続された複数のモジュールコンポーネントにより形成された物理的な対象物の近傍に配置されたセンサから、検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの各々について、対応するモジュールコンポーネントの外部表面から検知された固有のIDとを含む検知データを受信する段階と、
検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記複数のモジュールコンポーネントの外部表面から検知された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成する段階と、
前記物理的な対象物を表す前記仮想世界の対象物を表示する段階と
を備える方法。
[項目2]
前記相互接続された複数のモジュールコンポーネントにより形成された物理的な対象物の近傍に配置されたセンサから検知データを受信する段階は、前記複数のモジュールコンポーネントを持つ構築キットを用いてユーザにより構築される物理的な対象物の近傍に配置されたセンサから前記検知データを受信し、前記複数のモジュールコンポーネントは互いに接続されることで前記物理的な対象物を生じる項目1に記載の方法。
[項目3]
前記固有のIDは、前記複数のモジュールコンポーネントの各々の外部表面に外面的に注釈付けされたテクスチャ、パターン、色、および、可視のまたは赤外線の塗料を付されたコーナマークのうちの少なくとも1つを含む項目1または2に記載の方法。
[項目4]
前記物理的な対象物の近傍に配置されたセンサから検知データを受信する段階は、前記物理的な対象物の近傍に配置された視覚センサ、温度センサ、動きセンサ、音響ベースのセンサ、レーザセンサ、または赤外線センサから前記検知データを受信する項目1から3のいずれか1項に記載の方法。
[項目5]
前記物理的な対象物の近傍に配置されたセンサから検知データを受信する段階は、物理的な対象物の近傍に配置された複数のセンサから、前記検知データを受信する、項目1から4のいずれか1項に記載の方法。
[項目6]
前記検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から検知された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成する段階は、検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から検知された複数の固有のIDとに応じて、仮想世界においてインスタンス化されると前記物理的な対象物を表す仮想世界の対象物を生成するコードを生成し、
前記物理的な対象物を表す前記仮想世界の対象物を表示する段階は、前記仮想世界において前記生成されたコードをインスタンス化する、項目1から5のいずれか1項に記載の方法。
[項目7]
物理的な対象物を仮想世界の対象物に変換するコンピューティングデバイスであって、
相互接続された複数のモジュールコンポーネントにより形成された物理的な対象物の近傍に配置されたセンサから、検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、相互接続された複数のモジュールコンポーネントの各々について、対応するモジュールコンポーネントの外部表面から検知された固有のIDとを含む検知データを受信し、
検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から検知された固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成し、
前記物理的な対象物を表す前記仮想世界の対象物を表示する制御ロジック
を備えるコンピューティングデバイス。
[項目8]
前記固有のIDは、前記複数のモジュールコンポーネントの各々の外部表面に外面的に注釈付けされたテクスチャ、パターン、色、および、可視のまたは赤外線の塗料を付されたコーナマークのうちの少なくとも1つを含む項目7に記載のコンピューティングデバイス。
[項目9]
前記物理的な対象物の近傍に配置されたセンサから検知データを受信することは、物理的な対象物の近傍に配置された視覚センサ、温度センサ、動きセンサ、音響ベースのセンサ、レーザセンサ、または赤外線センサから前記検知データを受信する項目7または8に記載のコンピューティングデバイス。
[項目10]
前記物理的な対象物の近傍に配置されたセンサから検知データを受信することは、物理的な対象物の近傍に配置された複数のセンサから、前記検知データを受信する、項目7から9のいずれか1項に記載のコンピューティングデバイス。
[項目11]
前記検知された物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から検知された固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成することは、検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から検知された複数の固有のIDとに応じて、仮想世界においてインスタンス化されると前記物理的な対象物を表す仮想世界の対象物を生成するコードを生成し、
前記物理的な対象物を表す前記仮想世界の対象物を表示することは、前記仮想世界において前記生成されたコードをインスタンス化する、項目7から10のいずれか1項に記載のコンピューティングデバイス。
[項目12]
相互接続された複数のモジュールコンポーネントにより形成された物理的な対象物の近傍に配置されたセンサから、検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの各々について、対応するモジュールコンポーネントの外部表面から検知された固有のIDとを含む検知データを受信する段階と、
検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から検知された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成する段階と、
前記物理的な対象物を表す前記仮想世界の対象物を表示する段階と
をコンピュータに実行させるためのプログラム。
[項目13]
前記固有のIDは、前記複数のモジュールコンポーネントの各々の外部表面に外面的に注釈付けされたテクスチャ、パターン、色、および、可視のまたは赤外線の塗料を付されたコーナマークのうちの少なくとも1つを含み、
前記物理的な対象物の近傍に配置されたセンサから検知データを受信する段階は、物理的な対象物の近傍に配置された視覚センサ、温度センサ、動きセンサ、音響ベースのセンサ、レーザセンサ、または赤外線センサから前記検知データを受信する項目12に記載のプログラム。
[項目14]
前記検知された物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から検知された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成する段階は、検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から検知された複数の固有のIDとに応じて、仮想世界においてインスタンス化されると前記物理的な対象物を表す仮想世界の対象物を生成するコードを生成し、
前記物理的な対象物を表す前記仮想世界の対象物を表示する段階は、前記仮想世界において前記生成されたコードをインスタンス化する、項目12または13に記載のプログラム。
[項目15]
物理的な対象物を仮想世界の対象物に変換する方法であって、
相互接続された複数のモジュールコンポーネントにより形成された物理的な対象物の撮像画像であって、撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの各々について、対応するモジュールコンポーネントの外部表面から撮像された固有のIDとを含む撮像画像を受信する段階と、
撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成する段階と、
前記物理的な対象物を表す前記仮想世界の対象物を表示する段階と
を備える方法。
[項目16]
前記相互接続された複数のモジュールコンポーネントにより形成された物理的な対象物の撮像画像を受信する段階は、複数のモジュールコンポーネントを持つ構築キットを用いてユーザにより構築される物理的な対象物の撮像画像を受信し、前記複数のモジュールコンポーネントは互いに接続されることで前記物理的な対象物を生じる項目15に記載の方法。
[項目17]
前記固有のIDは、前記複数のモジュールコンポーネントの各々の外部表面に外面的に注釈付けされたテクスチャ、パターン、色、および、可視のまたは赤外線の塗料を付されたコーナマークのうちの少なくとも1つを含む項目15または16に記載の方法。
[項目18]
前記物理的な対象物の撮像画像を受信する段階は、カメラから物理的な対象物の撮像画像を受信する、項目15から17のいずれか1項に記載の方法。
[項目19]
前記撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成する段階は、前記撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された複数の固有のIDとに応じて、仮想世界においてインスタンス化されると前記物理的な対象物を表す仮想世界の対象物を生成するコードを生成し、
前記物理的な対象物を表す前記仮想世界の対象物を表示する段階は、前記仮想世界において前記生成されたコードをインスタンス化する、項目15から18のいずれか1項に記載の方法。
[項目20]
物理的な対象物を仮想世界の対象物に変換するコンピューティングデバイスであって、
相互接続された複数のモジュールコンポーネントにより形成された物理的な対象物の撮像画像であって、撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの各々について、対応するモジュールコンポーネントの外部表面から撮像された固有のIDとを含む撮像画像を受信し、
撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成し、
前記物理的な対象物を表す前記仮想世界の対象物を表示する制御ロジック
を備えるコンピューティングデバイス。
[項目21]
前記固有のIDは、前記複数のモジュールコンポーネントの各々の外部表面に外面的に注釈付けされたテクスチャ、パターン、色、および、可視のまたは赤外線の塗料を付されたコーナマークのうちの少なくとも1つを含む項目20に記載のコンピューティングデバイス。
[項目22]
前記物理的な対象物の撮像画像を受信することは、カメラから前記物理的な対象物の撮像画像を受信する、項目20または21に記載のコンピューティングデバイス。
[項目23]
前記撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成することは、撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された複数の固有のIDとに応じて、仮想世界においてインスタンス化されると前記物理的な対象物を表す仮想世界の対象物を生成するコードを生成し、
前記物理的な対象物を表す前記仮想世界の対象物を表示することは、前記仮想世界において前記生成されたコードをインスタンス化する、項目20から22のいずれか1項に記載のコンピューティングデバイス。
[項目24]
相互接続された複数のモジュールコンポーネントにより形成された物理的な対象物の撮像画像であって、撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの各々について、対応するモジュールコンポーネントの外部表面から撮像された固有のIDとを含む撮像画像を受信する段階と、
撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成する段階と、
前記物理的な対象物を表す前記仮想世界の対象物を表示する段階と
をコンピュータに実行させるためのプログラム。
[項目25]
前記固有のIDは、前記複数のモジュールコンポーネントの各々の外部表面に外面的に注釈付けされたテクスチャ、パターン、色、および、可視のまたは赤外線の塗料を付されたコーナマークのうちの少なくとも1つを含み、
前記物理的な対象物の撮像画像を受信する段階は、カメラから前記物理的な対象物の撮像画像を受信し、
前記撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成する段階は、撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された複数の固有のIDとに応じて、仮想世界においてインスタンス化されると前記物理的な対象物を表す仮想世界の対象物を生成するコードを生成し、
前記物理的な対象物を表す前記仮想世界の対象物を表示する段階は、前記仮想世界において前記生成されたコードをインスタンス化する、項目24に記載のプログラム。
Claims (25)
- 物理的な対象物を仮想世界の対象物に変換する方法であって、
相互接続された複数のモジュールコンポーネントにより形成された物理的な対象物の近傍に配置されたセンサから、検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの各々について、対応するモジュールコンポーネントの外部表面から検知された固有のIDとを含む検知データを受信する段階と、
検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記複数のモジュールコンポーネントの外部表面から検知された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成する段階と、
前記物理的な対象物を表す前記仮想世界の対象物を表示する段階と
を備える方法。 - 前記相互接続された複数のモジュールコンポーネントにより形成された物理的な対象物の近傍に配置されたセンサから検知データを受信する段階は、前記複数のモジュールコンポーネントを持つ構築キットを用いてユーザにより構築される物理的な対象物の近傍に配置されたセンサから前記検知データを受信し、前記複数のモジュールコンポーネントは互いに接続されることで前記物理的な対象物を生じる請求項1に記載の方法。
- 前記固有のIDは、前記複数のモジュールコンポーネントの各々の外部表面に外面的に注釈付けされたテクスチャ、パターン、色、および、可視のまたは赤外線の塗料を付されたコーナマークのうちの少なくとも1つを含む請求項1または2に記載の方法。
- 前記物理的な対象物の近傍に配置されたセンサから検知データを受信する段階は、前記物理的な対象物の近傍に配置された視覚センサ、温度センサ、動きセンサ、音響ベースのセンサ、レーザセンサ、または赤外線センサから前記検知データを受信する請求項1から3のいずれか1項に記載の方法。
- 前記物理的な対象物の近傍に配置されたセンサから検知データを受信する段階は、物理的な対象物の近傍に配置された複数のセンサから、前記検知データを受信する、請求項1から4のいずれか1項に記載の方法。
- 前記検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から検知された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成する段階は、検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から検知された複数の固有のIDとに応じて、仮想世界においてインスタンス化されると前記物理的な対象物を表す仮想世界の対象物を生成するコードを生成し、
前記物理的な対象物を表す前記仮想世界の対象物を表示する段階は、前記仮想世界において前記生成されたコードをインスタンス化する、請求項1から5のいずれか1項に記載の方法。 - 物理的な対象物を仮想世界の対象物に変換するコンピューティングデバイスであって、
相互接続された複数のモジュールコンポーネントにより形成された物理的な対象物の近傍に配置されたセンサから、検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、相互接続された複数のモジュールコンポーネントの各々について、対応するモジュールコンポーネントの外部表面から検知された固有のIDとを含む検知データを受信し、
検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から検知された固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成し、
前記物理的な対象物を表す前記仮想世界の対象物を表示する制御ロジック
を備えるコンピューティングデバイス。 - 前記固有のIDは、前記複数のモジュールコンポーネントの各々の外部表面に外面的に注釈付けされたテクスチャ、パターン、色、および、可視のまたは赤外線の塗料を付されたコーナマークのうちの少なくとも1つを含む請求項7に記載のコンピューティングデバイス。
- 前記物理的な対象物の近傍に配置されたセンサから検知データを受信することは、物理的な対象物の近傍に配置された視覚センサ、温度センサ、動きセンサ、音響ベースのセンサ、レーザセンサ、または赤外線センサから前記検知データを受信する請求項7または8に記載のコンピューティングデバイス。
- 前記物理的な対象物の近傍に配置されたセンサから検知データを受信することは、物理的な対象物の近傍に配置された複数のセンサから、前記検知データを受信する、請求項7から9のいずれか1項に記載のコンピューティングデバイス。
- 前記検知された物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から検知された固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成することは、検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から検知された複数の固有のIDとに応じて、仮想世界においてインスタンス化されると前記物理的な対象物を表す仮想世界の対象物を生成するコードを生成し、
前記物理的な対象物を表す前記仮想世界の対象物を表示することは、前記仮想世界において前記生成されたコードをインスタンス化する、請求項7から10のいずれか1項に記載のコンピューティングデバイス。 - 相互接続された複数のモジュールコンポーネントにより形成された物理的な対象物の近傍に配置されたセンサから、検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの各々について、対応するモジュールコンポーネントの外部表面から検知された固有のIDとを含む検知データを受信する段階と、
検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から検知された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成する段階と、
前記物理的な対象物を表す前記仮想世界の対象物を表示する段階と
をコンピュータに実行させるためのプログラム。 - 前記固有のIDは、前記複数のモジュールコンポーネントの各々の外部表面に外面的に注釈付けされたテクスチャ、パターン、色、および、可視のまたは赤外線の塗料を付されたコーナマークのうちの少なくとも1つを含み、
前記物理的な対象物の近傍に配置されたセンサから検知データを受信する段階は、物理的な対象物の近傍に配置された視覚センサ、温度センサ、動きセンサ、音響ベースのセンサ、レーザセンサ、または赤外線センサから前記検知データを受信する請求項12に記載のプログラム。 - 前記検知された物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から検知された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成する段階は、検知された前記物理的な対象物の特性と、検知された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から検知された複数の固有のIDとに応じて、仮想世界においてインスタンス化されると前記物理的な対象物を表す仮想世界の対象物を生成するコードを生成し、
前記物理的な対象物を表す前記仮想世界の対象物を表示する段階は、前記仮想世界において前記生成されたコードをインスタンス化する、請求項12または13に記載のプログラム。 - 物理的な対象物を仮想世界の対象物に変換する方法であって、
相互接続された複数のモジュールコンポーネントにより形成された物理的な対象物の撮像画像であって、撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの各々について、対応するモジュールコンポーネントの外部表面から撮像された固有のIDとを含む撮像画像を受信する段階と、
撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成する段階と、
前記物理的な対象物を表す前記仮想世界の対象物を表示する段階と
を備える方法。 - 前記相互接続された複数のモジュールコンポーネントにより形成された物理的な対象物の撮像画像を受信する段階は、複数のモジュールコンポーネントを持つ構築キットを用いてユーザにより構築される物理的な対象物の撮像画像を受信し、前記複数のモジュールコンポーネントは互いに接続されることで前記物理的な対象物を生じる請求項15に記載の方法。
- 前記固有のIDは、前記複数のモジュールコンポーネントの各々の外部表面に外面的に注釈付けされたテクスチャ、パターン、色、および、可視のまたは赤外線の塗料を付されたコーナマークのうちの少なくとも1つを含む請求項15または16に記載の方法。
- 前記物理的な対象物の撮像画像を受信する段階は、カメラから物理的な対象物の撮像画像を受信する、請求項15から17のいずれか1項に記載の方法。
- 前記撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成する段階は、前記撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された複数の固有のIDとに応じて、仮想世界においてインスタンス化されると前記物理的な対象物を表す仮想世界の対象物を生成するコードを生成し、
前記物理的な対象物を表す前記仮想世界の対象物を表示する段階は、前記仮想世界において前記生成されたコードをインスタンス化する、請求項15から18のいずれか1項に記載の方法。 - 物理的な対象物を仮想世界の対象物に変換するコンピューティングデバイスであって、
相互接続された複数のモジュールコンポーネントにより形成された物理的な対象物の撮像画像であって、撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの各々について、対応するモジュールコンポーネントの外部表面から撮像された固有のIDとを含む撮像画像を受信し、
撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成し、
前記物理的な対象物を表す前記仮想世界の対象物を表示する制御ロジック
を備えるコンピューティングデバイス。 - 前記固有のIDは、前記複数のモジュールコンポーネントの各々の外部表面に外面的に注釈付けされたテクスチャ、パターン、色、および、可視のまたは赤外線の塗料を付されたコーナマークのうちの少なくとも1つを含む請求項20に記載のコンピューティングデバイス。
- 前記物理的な対象物の撮像画像を受信することは、カメラから前記物理的な対象物の撮像画像を受信する、請求項20または21に記載のコンピューティングデバイス。
- 前記撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成することは、撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された複数の固有のIDとに応じて、仮想世界においてインスタンス化されると前記物理的な対象物を表す仮想世界の対象物を生成するコードを生成し、
前記物理的な対象物を表す前記仮想世界の対象物を表示することは、前記仮想世界において前記生成されたコードをインスタンス化する、請求項20から22のいずれか1項に記載のコンピューティングデバイス。 - 相互接続された複数のモジュールコンポーネントにより形成された物理的な対象物の撮像画像であって、撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの各々について、対応するモジュールコンポーネントの外部表面から撮像された固有のIDとを含む撮像画像を受信する段階と、
撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成する段階と、
前記物理的な対象物を表す前記仮想世界の対象物を表示する段階と
をコンピュータに実行させるためのプログラム。 - 前記固有のIDは、前記複数のモジュールコンポーネントの各々の外部表面に外面的に注釈付けされたテクスチャ、パターン、色、および、可視のまたは赤外線の塗料を付されたコーナマークのうちの少なくとも1つを含み、
前記物理的な対象物の撮像画像を受信する段階は、カメラから前記物理的な対象物の撮像画像を受信し、
前記撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された前記固有のIDとに応じて、前記物理的な対象物を表す仮想世界の対象物を生成する段階は、撮像された前記物理的な対象物の特性と、撮像された前記物理的な対象物の外形と、前記相互接続された複数のモジュールコンポーネントの外部表面から撮像された複数の固有のIDとに応じて、仮想世界においてインスタンス化されると前記物理的な対象物を表す仮想世界の対象物を生成するコードを生成し、
前記物理的な対象物を表す前記仮想世界の対象物を表示する段階は、前記仮想世界において前記生成されたコードをインスタンス化する、請求項24に記載のプログラム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US12/317,737 | 2008-12-29 | ||
US12/317,737 US8754886B2 (en) | 2008-12-29 | 2008-12-29 | Systems and methods for transporting physical objects from real physical life into virtual worlds |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013021811A Division JP2013152720A (ja) | 2008-12-29 | 2013-02-06 | 現実の物理的な対象物を、仮想世界にトランスポートするシステムおよび方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015018567A true JP2015018567A (ja) | 2015-01-29 |
JP5869640B2 JP5869640B2 (ja) | 2016-02-24 |
Family
ID=42061113
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009293556A Expired - Fee Related JP5198423B2 (ja) | 2008-12-29 | 2009-12-24 | 現実の物理的な対象物を、仮想世界にトランスポートするシステムおよび方法 |
JP2013021811A Pending JP2013152720A (ja) | 2008-12-29 | 2013-02-06 | 現実の物理的な対象物を、仮想世界にトランスポートするシステムおよび方法 |
JP2014185085A Expired - Fee Related JP5869640B2 (ja) | 2008-12-29 | 2014-09-11 | 現実の物理的な対象物を、仮想世界にトランスポートするシステムおよび方法 |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009293556A Expired - Fee Related JP5198423B2 (ja) | 2008-12-29 | 2009-12-24 | 現実の物理的な対象物を、仮想世界にトランスポートするシステムおよび方法 |
JP2013021811A Pending JP2013152720A (ja) | 2008-12-29 | 2013-02-06 | 現実の物理的な対象物を、仮想世界にトランスポートするシステムおよび方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US8754886B2 (ja) |
EP (1) | EP2202608B1 (ja) |
JP (3) | JP5198423B2 (ja) |
KR (1) | KR101087390B1 (ja) |
CN (2) | CN103488275B (ja) |
Families Citing this family (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8754886B2 (en) | 2008-12-29 | 2014-06-17 | Intel Corporation | Systems and methods for transporting physical objects from real physical life into virtual worlds |
CN103702726B (zh) * | 2011-05-23 | 2016-01-13 | 乐高公司 | 玩具搭建系统、产生构建指令的方法和数据处理系统 |
EP3042704B1 (en) * | 2011-05-23 | 2019-03-06 | Lego A/S | A toy construction system |
EP2783340A4 (en) * | 2011-11-21 | 2015-03-25 | Nant Holdings Ip Llc | SUBSCRIPTION ACCOUNTING SERVICE AND SYSTEMS AND METHOD THEREFOR |
US9400569B2 (en) | 2011-11-23 | 2016-07-26 | At&T Intellectual Property I, L.P. | Three dimensional building blocks |
US9443353B2 (en) * | 2011-12-01 | 2016-09-13 | Qualcomm Incorporated | Methods and systems for capturing and moving 3D models and true-scale metadata of real world objects |
FR2984561B1 (fr) * | 2011-12-15 | 2014-01-10 | Commissariat Energie Atomique | Procede et dispositif de conception solide d'un systeme |
US9501700B2 (en) | 2012-02-15 | 2016-11-22 | Xactware Solutions, Inc. | System and method for construction estimation using aerial images |
GB201209176D0 (en) * | 2012-05-25 | 2012-07-04 | Lunar Lime Ltd | Model card |
JP6073110B2 (ja) * | 2012-11-12 | 2017-02-01 | 株式会社ヴェルト | 3次元データ生成システム |
CA2920251A1 (en) | 2013-08-02 | 2015-02-05 | Xactware Solutions, Inc. | System and method for detecting features in aerial images using disparity mapping and segmentation techniques |
KR102197504B1 (ko) * | 2013-12-18 | 2020-12-31 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | 사전 계산된 조명으로 증강 현실 환경을 구성하는 기법 |
WO2015185629A2 (en) | 2014-06-06 | 2015-12-10 | Lego A/S | Interactive game apparatus and toy construction system |
US20160085518A1 (en) * | 2014-09-21 | 2016-03-24 | Jang Hee I | Systems and methods for imaging and generation of executable processor instructions based on ordered objects |
EP3200886B1 (en) | 2014-10-02 | 2023-09-20 | Lego A/S | Game system |
US9728010B2 (en) | 2014-12-30 | 2017-08-08 | Microsoft Technology Licensing, Llc | Virtual representations of real-world objects |
US10552550B2 (en) | 2015-09-26 | 2020-02-04 | Intel Corporation | Technologies for physical programming |
US10037085B2 (en) * | 2015-12-21 | 2018-07-31 | Intel Corporation | Techniques for real object and hand representation in virtual reality content |
US10275222B2 (en) | 2016-03-15 | 2019-04-30 | Intel Corporation | Technologies for physical programming |
DK3436773T3 (da) | 2016-04-01 | 2021-07-12 | Lego As | Legetøjsscanner |
CN105978959B (zh) * | 2016-04-29 | 2019-08-30 | 腾讯科技(深圳)有限公司 | 虚拟模型展示方法、装置以及系统 |
GB2550911B (en) | 2016-05-27 | 2021-02-10 | Swap Bots Ltd | Augmented reality toy |
WO2018007369A1 (en) * | 2016-07-05 | 2018-01-11 | Lego A/S | Method for creating a virtual object |
US10074205B2 (en) | 2016-08-30 | 2018-09-11 | Intel Corporation | Machine creation of program with frame analysis method and apparatus |
US10720082B1 (en) | 2016-09-08 | 2020-07-21 | Ctskh, Llc | Device and system to teach stem lessons using hands-on learning method |
KR101911686B1 (ko) * | 2016-11-16 | 2018-10-25 | (주)파인원커뮤니케이션즈 | 디바이스 가상화 시스템 및 방법 |
CN108245894B (zh) * | 2017-12-29 | 2019-04-30 | 网易(杭州)网络有限公司 | 信息处理方法及装置、存储介质、电子设备 |
US10500496B2 (en) | 2018-01-12 | 2019-12-10 | International Business Machines Corporation | Physical obstacle avoidance in a virtual reality environment |
US11010986B2 (en) * | 2018-08-30 | 2021-05-18 | Apple Inc. | Virtual object kit |
US10888777B2 (en) | 2018-10-01 | 2021-01-12 | International Business Machines Corporation | Deep learning from real world and digital exemplars |
JP6609363B1 (ja) * | 2018-11-12 | 2019-11-20 | みんとる合同会社 | 建造物設計支援装置、建造物設計支援方法、及び建造物設計支援システム |
US10994201B2 (en) * | 2019-03-21 | 2021-05-04 | Wormhole Labs, Inc. | Methods of applying virtual world elements into augmented reality |
US11094113B2 (en) | 2019-12-04 | 2021-08-17 | Geomni, Inc. | Systems and methods for modeling structures using point clouds derived from stereoscopic image pairs |
JP7071454B2 (ja) * | 2020-08-27 | 2022-05-19 | 株式会社バンダイ | ゲーム支援システム、プログラム及び情報通信端末 |
US20220383601A1 (en) * | 2021-05-25 | 2022-12-01 | Samsung Electronics Co., Ltd. | Virtual avatars and physical object interaction in augmented reality applications |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000306122A (ja) * | 1999-04-23 | 2000-11-02 | Mitsubishi Electric Inf Technol Center America Inc | 仮想世界モデルを装飾する方法 |
JP2003132373A (ja) * | 2001-06-20 | 2003-05-09 | Gateway Inc | 仮想表示及びコンテンツ作成のための構成素子組立体 |
JP2003216981A (ja) * | 2002-01-25 | 2003-07-31 | Iwane Kenkyusho:Kk | 自動作業システム |
JP2004519034A (ja) * | 2001-02-05 | 2004-06-24 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 物理的構成部品を介しての仮想モデルの発生 |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2642491B2 (ja) | 1989-10-25 | 1997-08-20 | 株式会社日立製作所 | 商品仕様決定方法、並びに商品仕様決定見積方法とその装置 |
JPH09330336A (ja) * | 1996-06-11 | 1997-12-22 | Sony Corp | 情報処理装置 |
JP3611239B2 (ja) | 1999-03-08 | 2005-01-19 | 富士通株式会社 | 三次元cgモデル作成装置および処理プログラムを記録した記録媒体 |
WO2002035909A2 (en) | 2000-11-03 | 2002-05-10 | Siemens Corporate Research, Inc. | Video-supported planning and design with physical marker objects sign |
WO2002102484A1 (en) * | 2001-06-15 | 2002-12-27 | Walker Digital, Llc | Method and apparatus for planning and customizing a gaming experience |
JP2004326384A (ja) | 2003-04-24 | 2004-11-18 | Mitsubishi Electric Corp | データ変換装置及びデータ変換方法及びデータ変換プログラム |
CN1657884A (zh) | 2004-02-20 | 2005-08-24 | 林金 | 一种物位传感器的测量方法及其装置 |
US20050280534A1 (en) * | 2004-06-16 | 2005-12-22 | Navarro Pamela W | Clothing item registration system |
JP2006230603A (ja) | 2005-02-23 | 2006-09-07 | Canon Inc | 撮像装置、生体認証システム及び画像取得方法 |
CN100465999C (zh) | 2006-10-26 | 2009-03-04 | 上海交通大学 | 基于激光扫描的沉箱三维场景重建与挖掘机避碰系统 |
JP2008261755A (ja) * | 2007-04-12 | 2008-10-30 | Canon Inc | 情報処理装置、情報処理方法 |
CN201111049Y (zh) * | 2007-06-27 | 2008-09-03 | 中国科学院遥感应用研究所 | 一种数字地球原型系统 |
CN101127657B (zh) * | 2007-07-16 | 2011-01-05 | 江南大学 | 自主移动传感器网络动态建模与控制技术 |
CN101118654B (zh) * | 2007-09-19 | 2010-09-08 | 中国科学院上海微系统与信息技术研究所 | 基于传感器网络的机器视觉计算机模拟仿真系统 |
US8159662B2 (en) * | 2007-10-24 | 2012-04-17 | Exelis Inc. | Systems and methods for remote unmanned raman spectroscopy |
CN101174332B (zh) * | 2007-10-29 | 2010-11-03 | 张建中 | 一种将真实世界实时场景与虚拟现实场景结合交互的方法和装置以及系统 |
US8228170B2 (en) | 2008-01-10 | 2012-07-24 | International Business Machines Corporation | Using sensors to identify objects placed on a surface |
US8754886B2 (en) | 2008-12-29 | 2014-06-17 | Intel Corporation | Systems and methods for transporting physical objects from real physical life into virtual worlds |
EP3042704B1 (en) | 2011-05-23 | 2019-03-06 | Lego A/S | A toy construction system |
CN103702726B (zh) | 2011-05-23 | 2016-01-13 | 乐高公司 | 玩具搭建系统、产生构建指令的方法和数据处理系统 |
-
2008
- 2008-12-29 US US12/317,737 patent/US8754886B2/en not_active Expired - Fee Related
-
2009
- 2009-12-15 EP EP09252782.9A patent/EP2202608B1/en not_active Not-in-force
- 2009-12-23 KR KR1020090130141A patent/KR101087390B1/ko not_active IP Right Cessation
- 2009-12-24 JP JP2009293556A patent/JP5198423B2/ja not_active Expired - Fee Related
- 2009-12-28 CN CN201310425775.9A patent/CN103488275B/zh active Active
- 2009-12-28 CN CN2009102668219A patent/CN101794423B/zh not_active Expired - Fee Related
-
2013
- 2013-02-06 JP JP2013021811A patent/JP2013152720A/ja active Pending
-
2014
- 2014-09-11 JP JP2014185085A patent/JP5869640B2/ja not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000306122A (ja) * | 1999-04-23 | 2000-11-02 | Mitsubishi Electric Inf Technol Center America Inc | 仮想世界モデルを装飾する方法 |
JP2004519034A (ja) * | 2001-02-05 | 2004-06-24 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 物理的構成部品を介しての仮想モデルの発生 |
JP2003132373A (ja) * | 2001-06-20 | 2003-05-09 | Gateway Inc | 仮想表示及びコンテンツ作成のための構成素子組立体 |
JP2003216981A (ja) * | 2002-01-25 | 2003-07-31 | Iwane Kenkyusho:Kk | 自動作業システム |
Non-Patent Citations (2)
Title |
---|
JPN6015028801; David Anderson: 'Tangible Interaction + Graphical Interpretation: A New Approach to 3D Modeling' Proceedings of SIGGRAPH 2000 , 200004 * |
JPN6015028802; Matthew G. Gorbet: 'Triangles: Tangible Interface for Manipulation and Exploration of Digital Information Topography' CHI 98 , 19980418, P.49-56 * |
Also Published As
Publication number | Publication date |
---|---|
KR20100080386A (ko) | 2010-07-08 |
JP2010231764A (ja) | 2010-10-14 |
US20100164953A1 (en) | 2010-07-01 |
JP5198423B2 (ja) | 2013-05-15 |
US8754886B2 (en) | 2014-06-17 |
EP2202608A1 (en) | 2010-06-30 |
JP2013152720A (ja) | 2013-08-08 |
KR101087390B1 (ko) | 2011-11-25 |
CN101794423B (zh) | 2013-10-23 |
EP2202608B1 (en) | 2016-08-24 |
CN103488275A (zh) | 2014-01-01 |
CN103488275B (zh) | 2018-10-16 |
JP5869640B2 (ja) | 2016-02-24 |
CN101794423A (zh) | 2010-08-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5869640B2 (ja) | 現実の物理的な対象物を、仮想世界にトランスポートするシステムおよび方法 | |
JP6951400B2 (ja) | コンテンツ認識フォトフィルタを供給するための装置および方法 | |
AU2016349518B2 (en) | Edge-aware bilateral image processing | |
JP4032776B2 (ja) | 複合現実感表示装置及び方法、記憶媒体、並びにコンピュータ・プログラム | |
KR20160062294A (ko) | 지도 서비스를 제공하는 전자 장치 및 방법 | |
JP6466347B2 (ja) | 個人情報コミュニケータ | |
CN106991723A (zh) | 立体虚拟实境的互动房屋浏览方法及其系统 | |
JP2011018313A (ja) | モデルを定義するコンピュータ実行方法、システムおよび方法 | |
CN103329147A (zh) | 基于智能手机的方法和系统 | |
CN107402779A (zh) | 用于云和预置应用集成的兼容框架 | |
CN104081307A (zh) | 图像处理装置、图像处理方法和程序 | |
US9607094B2 (en) | Information communication method and information communication apparatus | |
EP3438888A1 (en) | Information processing device, information processing method, and information provision method | |
US8941767B2 (en) | Mobile device and method for controlling the same | |
KR101425672B1 (ko) | Bim 기반 커뮤니케이션 시스템, bim 기반 커뮤니케이션 서버, 및 모바일 단말기에서의 bim 기반 커뮤니케이션 방법 및 그 기록매체 | |
KR20230124878A (ko) | 부동산 정보 제공방법 및 그를 위한 어플리케이션 | |
CN114170366B (zh) | 基于点线特征融合的三维重建方法及电子设备 | |
Kember | The Becoming-Photographer in Technoculture | |
JP2019101494A (ja) | データ処理装置、データ構造及びデータ処理方法 | |
JP2023082830A (ja) | 建築予定建物確認システム | |
CN109672798A (zh) | 信息处理装置以及存储媒体 | |
Jankūnas | Application of Augmented Reality in BIM | |
CN116319391A (zh) | 可视化管理界面的构建方法、装置、电子设备及存储介质 | |
CN117974880A (zh) | 三维彩色地图构建方法及装置、存储介质、电子设备 | |
KR20220078886A (ko) | 촬영된 영상에 기반하여 증강 현실 이미지를 생성하는 방법 및 그 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150710 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150721 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151021 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20151110 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20151209 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160107 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5869640 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |