JP2013529097A - 仮想世界の情報処理装置及び方法 - Google Patents
仮想世界の情報処理装置及び方法 Download PDFInfo
- Publication number
- JP2013529097A JP2013529097A JP2013504804A JP2013504804A JP2013529097A JP 2013529097 A JP2013529097 A JP 2013529097A JP 2013504804 A JP2013504804 A JP 2013504804A JP 2013504804 A JP2013504804 A JP 2013504804A JP 2013529097 A JP2013529097 A JP 2013529097A
- Authority
- JP
- Japan
- Prior art keywords
- value
- metadata
- data
- flag
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 41
- 238000000034 method Methods 0.000 title claims abstract description 17
- 238000012545 processing Methods 0.000 claims description 10
- 238000003672 processing method Methods 0.000 claims description 10
- 230000003993 interaction Effects 0.000 abstract description 5
- 230000003044 adaptive effect Effects 0.000 description 59
- 230000033001 locomotion Effects 0.000 description 20
- 230000005540 biological transmission Effects 0.000 description 15
- 230000006978 adaptation Effects 0.000 description 14
- 238000001514 detection method Methods 0.000 description 14
- 238000010276 construction Methods 0.000 description 13
- 230000001133 acceleration Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 8
- 238000012937 correction Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 4
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 description 3
- 229910052760 oxygen Inorganic materials 0.000 description 3
- 239000001301 oxygen Substances 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000001953 sensory effect Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000005865 ionizing radiation Effects 0.000 description 2
- 230000003155 kinesthetic effect Effects 0.000 description 2
- 230000005389 magnetism Effects 0.000 description 2
- 239000002184 metal Substances 0.000 description 2
- 229910052751 metal Inorganic materials 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000002245 particle Substances 0.000 description 2
- 230000005855 radiation Effects 0.000 description 2
- 239000000126 substance Substances 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 230000004071 biological effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 239000012530 fluid Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 150000002739 metals Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
- A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/23—Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console
- A63F13/235—Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console using a wireless connection, e.g. infrared or piconet
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
- A63F13/32—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers using local area network [LAN] connections
- A63F13/327—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers using local area network [LAN] connections using wireless networks, e.g. Wi-Fi® or piconet
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
- A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/004—Artificial life, i.e. computing arrangements simulating life
- G06N3/006—Artificial life, i.e. computing arrangements simulating life based on simulated virtual individual or collective life forms, e.g. social simulations or particle swarm optimisation [PSO]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/0035—User-machine interface; Control console
- H04N1/00352—Input means
- H04N1/00381—Input by recognition or interpretation of visible user gestures
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/60—Methods for processing data by generating or executing the game program
- A63F2300/6045—Methods for processing data by generating or executing the game program for mapping control signals received from the input arrangement into game commands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2215/00—Indexing scheme for image rendering
- G06T2215/16—Using real world measurements to influence rendering
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Computer Graphics (AREA)
- Software Systems (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Mathematical Physics (AREA)
- Computing Systems (AREA)
- Life Sciences & Earth Sciences (AREA)
- Artificial Intelligence (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Evolutionary Computation (AREA)
- Computer Networks & Wireless Communication (AREA)
- Social Psychology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Psychiatry (AREA)
- Computer Hardware Design (AREA)
- User Interface Of Digital Computer (AREA)
- Image Processing (AREA)
- Arrangements For Transmission Of Measured Signals (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
仮想世界の情報処理装置及び方法が開示される。実施形態は、センサの特性に関する情報であるセンサ特性を用いて現実世界から測定した情報を仮想世界に送信して現実世界と仮想世界の相互作用を実現することができる。前記測定された情報のうち、以前に測定された情報と相異なるものだけを選択的に送信する仮想世界の情報処理装置及び方法が開示される。前記測定された情報が以前に測定された情報と多くの差がある場合、前記測定された情報全体を送信し、差の大きくない場合に前記測定された情報のうち、前記以前に測定された情報と相異なるものだけを選択的に送信する仮想世界の情報処理装置及び方法が開示される。
Description
実施形態は仮想世界の情報処理装置及び方法に関し、より具体的には、現実世界の情報を仮想世界に適用する装置及び方法に関する。
最近、体感型ゲームに関する関心が高まっている。マイクロソフト社は「Ｅ３ ２００９」の記者会見においてゲームコンソールであるＸｂｏｘ３６０に深度／色彩カメラとマイクアレイから構成された別途のセンサ・デバイスを結合し、ユーザの全身モーションキャプチャ、顔認識、音声認識技術を提供して別途のコントローラなしで仮想世界と相互作用させる「Ｐｒｏｊｅｃｔ Ｎａｔａｌ」を発表した。また、ソニー社は、自社ゲームコンソールである「Ｐｌａｙ Ｓｔａｔｉｏｎ３」にカラーカメラとマーカー、超音波センサを結合した位置／方向センシング技術を適用して、コントローラのモーション軌跡を入力することで仮想世界と相互作用できる体感型ゲームモーションコントローラ「Ｗａｎｄ」を発表した。
現実世界と仮想世界の相互作用は２種類の方向を有する。第１に、現実世界のセンサから得られたデータ情報を仮想世界に反映する方向、第２に、仮想世界から得られたデータ情報をアクチュエータ（ａｃｔｕａｔｏｒ）を介して現実世界に反映する方向である。実施形態は、現実世界と仮想世界の相互作用を実現するため、現実世界のセンサから得られたデータを仮想世界に適用する制御システム、制御方法及び命令構造を提供する。
センサの特性に関する情報であるセンサ特性を用いて現実世界から測定した情報を仮想世界に送信して現実世界と仮想世界の相互作用を実現する実施形態を提供する。
前記測定された情報のうち、以前に測定された情報と相異なるものだけを選択的に送信する実施形態を提供する。
前記測定された情報が以前に測定された情報と多くの差がある場合、前記測定された情報全体を送信し、差の大きくない場合に前記測定された情報のうち、前記以前に測定された情報と相異なるものだけを選択的に送信する実施形態を提供する。
一実施形態に係る仮想世界の情報処理装置は、センサ特性に関する情報を出力するセンサと、前記情報に基づいてバイナリ形式のメタデータを出力するエンコーダとを含み、前記エンコーダは前記バイナリ形式のメタデータをモードに応じて第１形態または第２形態に符号化して出力し、前記第１形態のメタデータは前記情報内の項目を含み、前記第２形態のメタデータは前記情報内の項目のうち以前と異なる値を有する項目を含むことが可能である。
一実施形態に係る仮想世界の情報処理装置は、バイナリ形式のメタデータに基づいて情報を出力するデコーダと、前記情報に基づいて仮想世界に適用される情報を生成する処理部とを備え、前記デコーダは前記バイナリ形式のメタデータをモードに応じて第１形態または第２形態に復号化して出力し、前記第１形態のメタデータは前記情報内の項目を含み、前記第２形態のメタデータは前記情報内の項目のうち以前と異なる値を有する項目を含むことが可能である。
一実施形態に係る仮想世界の情報処理方法は、センサ特性に関する情報を出力するセンシングステップと、前記情報に基づいてバイナリ形式のメタデータを出力する符号化ステップとを含み、前記符号化ステップは前記バイナリ形式のメタデータをモードに応じて第１形態または第２形態に符号化して出力し、前記第１形態のメタデータは前記情報内の項目を含み、前記第２形態のメタデータは前記情報内の項目のうち以前と異なる値を有する項目を含むことが可能である。
一実施形態に係る仮想世界の情報処理方法は、バイナリ形式のメタデータに基づいて情報を出力する復号化ステップと、前記情報に基づいて仮想世界に適用される情報を生成する処理ステップとを含み、前記復号化ステップは前記バイナリ形式のメタデータをモードに応じて第１形態または第２形態に復号化して出力し、前記第１形態のメタデータは前記情報内の項目を含み、前記第２形態のメタデータは前記情報内の項目のうち以前と異なる値を有する項目を含むことが可能である。
本発明によると、実施形態は、センサの特性に関する情報であるセンサ特性を用いて現実世界から測定した情報を仮想世界に送信して現実世界と仮想世界の相互作用を実現することができる。
本発明によると、実施形態は、前記測定された情報のうち、以前に測定された情報と相異なるものだけを選択的に送信することができる。
本発明によると、実施形態は、前記測定された情報が以前に測定された情報と多くの差がある場合、前記測定された情報全体を送信し、差が大きくない場合に前記測定された情報のうち、前記以前に測定された情報と相異なるものだけを選択的に送信することができる。
以下、本発明に係る実施形態を添付する図面を参照しながら詳説する。しかし、本発明が実施形態によって制限されたり限定されることはない。各図面に提示された同一の参照符号は同一の部材を示す。
本明細書で用いられる「オブジェクト（ｏｂｊｅｃｔ）」は仮想世界で実現及び表現される事物、物体、アバター（ａｖａｔａｒ）などを含んでもよい。
以下、実施形態を添付する図面を参照しながら詳細に説明する。
図１は、一実施形態に係るセンサを用いて仮想世界のオブジェクトを操作する動作を示す図である。図１を参照すれば、一実施形態に係るセンサ１００を用いて現実世界のユーザ１１０は、仮想世界のオブジェクト１２０を操作する。現実世界のユーザ１１０は、センサ１００を通して自身の動作、状態、意図、形態などを入力し、センサ１００は、ユーザ１１０の動作、状態、意図、形態などに関する制御情報（ｃｏｎｔｒｏｌ ｉｎｆｏｒｍａｔｉｏｎ、ＣＩ）をセンサ信号に含めて仮想世界の情報処理装置送信する。
実施形態に係る現実世界のユーザ１１０は、人間、動物、植物、および無生物（例えば、物）とすることも可能であり、また、ユーザの周辺環境まで含むことも可能である。
図２は、一実施形態に係るセンサを用いて仮想世界のオブジェクトを操作するシステムを示す図である。図２を参照すれば、一実施形態に係る現実世界２１０の装置のセンサを介して入力された、現実世界２１０のユーザの動作、状態、意図、形態などに関する制御情報２０１を含むセンサ信号は仮想世界の情報処理装置に送信される。実施形態に係る現実世界２１０のユーザの動作、状態、意図、形態などに関する制御情報２０１は、センサ特性、センサ適応選好および検出情報を含む。
一実施形態に係る仮想世界の情報処理装置は、適応ＲＶ（ａｄａｐｔａｔｉｏｎ ｒｅａｌ ｗｏｒｌｄ ｔｏ ｖｉｒｔｕａｌ ｗｏｒｌｄ）２２０を含む。実施形態に係る適応ＲＶ２２０は、ＲＶエンジン（ｒｅａｌ ｗｏｒｌｄ ｔｏ ｖｉｒｔｕａｌ ｗｏｒｌｄ ｅｎｇｉｎｅ、ＲＶ ｅｎｇｉｎｅ）で実現されてもよい。適応ＲＶ２２０は、センサ信号に含まれている現実世界２１０のユーザの動作、状態、意図、形態などに関する制御情報（ＣＩ）２０１を用いて、現実世界２１０の情報を仮想世界２４０に適用され得る情報に変換する。
実施形態に係る適応ＲＶ２２０は、現実世界２１０のユーザの動作、状態、意図、形態などに関する制御情報２０１を用いてＶＷＩ（ｖｉｒｔｕａｌ ｗｏｒｌｄ ｉｎｆｏｒｍａｔｉｏｎ、仮想世界情報）２０２を変換してもよい。
ＶＷＩ２０２は、仮想世界２４０に関する情報である。例えば、ＶＷＩ２０２は、仮想世界２４０のオブジェクトまたは前記オブジェクトを構成する要素に関する情報を含んでもよい。
仮想世界の情報処理装置は、適応ＲＶ２２０によって変換された情報２０３を、適応ＲＶ／ＶＲ（ａｄａｐｔａｔｉｏｎ ｒｅａｌ ｗｏｒｌｄ ｔｏ ｖｉｒｔｕａｌ ｗｏｒｌｄ／ｖｉｒｔｕａｌ ｗｏｒｌｄ ｔｏ ｒｅａｌ ｗｏｒｌｄ）２３０を介して仮想世界２４０に送信する。
一実施形態に係る仮想世界の情報処理装置は、適応ＲＶ（ａｄａｐｔａｔｉｏｎ ｒｅａｌ ｗｏｒｌｄ ｔｏ ｖｉｒｔｕａｌ ｗｏｒｌｄ）２２０を含んでもよい。実施形態に係る適応ＲＶ２２０は、ＲＶエンジン（ｒｅａｌ ｗｏｒｌｄ ｔｏ ｖｉｒｔｕａｌ ｗｏｒｌｄ ｅｎｇｉｎｅ、ＲＶ ｅｎｇｉｎｅ）に実現されてもよい。適応ＲＶ２２０は、センサ信号に含まれている現実世界２１０のユーザの動作、状態、意図、形態などに関する制御情報（ＣＩ）２０１を用いて現実世界２１０の情報を仮想世界２４０に適用できる情報に変換する。
実施形態に係る適応ＲＶ２２０は、現実世界２１０のユーザの動作、状態、意図、形態などに関する制御情報２０１を用いてＶＷＩ（ｖｉｒｔｕａｌ ｗｏｒｌｄ ｉｎｆｏｒｍａｔｉｏｎ、仮想世界情報）２０２を変換する。
ＶＷＩ２０２は仮想世界２４０に関する情報である。例えば、ＶＷＩ２０２は、仮想世界２４０のオブジェクトまたはオブジェクトを構成する要素に関する情報を含んでもよい。
仮想世界の情報処理装置は適応ＲＶ２２０によって変換された情報２０３を適応ＲＶ／ＶＲ（ａｄａｐｔａｔｉｏｎ ｒｅａｌ ｗｏｒｌｄ ｔｏ ｖｉｒｔｕａｌ ｗｏｒｌｄ／ｖｉｒｔｕａｌ ｗｏｒｌｄ ｔｏ ｒｅａｌ ｗｏｒｌｄ）２３０を介して仮想世界２４０に送信する。
表１は図２に表示されている構成について説明する。
実施形態に係るセンサ２５０は入力部を備えてもよい。入力部はセンサ適応選好を現実世界のユーザから入力される。
センサ２５０は、収集された情報をメタデータに符号化するメタデータエンコーダ（ｍｅｔａｄａｔａ ｅｎｃｏｄｅｒ）２５１を含む。
メタデータエンコーダ２５１は、収集された情報を第１メタデータに符号化し、センサ２５０は第１メタデータを適応ＲＶ２５５に送信する。
適応ＲＶ２５５に含まれたメタデータデコーダ２５６は、センサ２５０から受信した第１メタデータを復号化する。
実施形態に係るメタデータエンコーダ２５１は、収集された情報をＸＭＬ形態のデータに符号化するＸＭＬエンコーダまたは２進（Ｂｉｎａｒｙ）形態のデータに符号化するバイナリ形式エンコーダのうち少なくとも１つを含んでもよい。また、メタデータデコーダ２５６は、受信したＸＭＬ形態のデータを復号化するＸＭＬデコーダ、または受信したバイナリ形式のデータを復号化するバイナリ形式デコーダのうち少なくとも１つを含む。
以下、図４〜図６を参照して、センサ２５０が収集した情報を符号化する実施形態及び適応ＲＶ２５５が受信したデータを復号化する実施形態について説明する。
図４〜図６は、本発明の一実施形態に係るセンサ及び適応ＲＶを示す図である。
図４を参照すると、本発明の一実施形態に係るセンサ２７１はＸＭＬエンコーダ２７２を含む。ＸＭＬエンコーダ２７２は、センサ２７１が収集した情報（例えば、検出情報）をＸＭＬ形態のデータに符号化してもよい。
また、センサ２７１は、ＸＭＬエンコーダ２７２が符号化したデータを適応ＲＶ２７４に送信する。
適応ＲＶ２７４はＸＭＬデコーダ２７３を含んでもよく、ＸＭＬデコーダ２７３はセンサ２７１から受信したデータを復号化してもよい。
図５を参照すると、本発明の一実施形態に係るセンサ２７５は、ＸＭＬエンコーダ２７６及びバイナリ形式エンコーダ２７７を含む。ＸＭＬエンコーダ２７６は、センサ２７５が収集した情報（例えば、検出情報）をＸＭＬ形態のデータに符号化してもよい。バイナリ形式エンコーダ２７７は、ＸＭＬエンコーダ２７６が符号化したデータをバイナリ形式のデータに符号化してもよい。
また、センサ２７５は、ＸＭＬエンコーダ２７６及びバイナリ形式エンコーダ２７７が符号化したデータを適応ＲＶ２８０に送信する。
適応ＲＶ２８０はバイナリ形式デコーダ２７８及びＸＭＬデコーダ２７９を含んでもよく、バイナリ形式デコーダ２７８はセンサ２７５から受信したデータをＸＭＬ形態のデータに復号化してもよい。また、ＸＭＬデコーダ２７９は、バイナリ形式デコーダ２７８がＸＭＬ形態のデータに復号化したデータを再び復号化してもよい。
図６を参照すると、本発明の一実施形態に係るセンサ２８１はバイナリ形式エンコーダ２８２を含む。バイナリ形式エンコーダ２８２は、センサ２８１が収集した情報（例えば、検出情報）を２進形態のデータに符号化してもよい。
また、センサ２８１は、バイナリ形式エンコーダ２８２が符号化したデータを適応ＲＶ２８４に送信する。
適応ＲＶ２８４はバイナリ形式デコーダ２８３を含んでもよく、バイナリ形式デコーダ２８３はセンサ２８１から受信したデータを復号化してもよい。
再び図３を参照すると、適応ＲＶ２５５に含まれたメタデータデコーダ２５８は、適応ＶＲ２６０から受信した第２メタデータを復号化する。第２メタデータは、適応ＶＲ２６０に含まれたメタデータエンコーダ２６２が仮想世界２６５に関する情報を符号化したメタデータであってもよい。
実施形態に係るメタデータエンコーダ２６２は、仮想世界２６５に関する情報をＸＭＬ形態のメタデータに符号化するＸＭＬエンコーダ、または２進（Ｂｉｎａｒｙ）形態のメタデータに符号化するバイナリ形式エンコーダのうち少なくとも１つを含んでもよい。
実施形態に係るメタデータエンコーダ２６２はＸＭＬエンコーダを含み、ＸＭＬエンコーダは仮想世界２６５に関する情報をＸＭＬ形態のデータに符号化してもよい。
また、メタデータエンコーダ２６２はＸＭＬエンコーダ及びバイナリ形式エンコーダを含み、ＸＭＬエンコーダ仮想世界２６５に関する情報をＸＭＬ形態のデータに符号化し、バイナリ形式エンコーダがＸＭＬ形態のデータを再びバイナリ形式のデータに符号化してもよい。
また、メタデータエンコーダ２６２はバイナリ形式エンコーダを含み、バイナリ形式エンコーダは仮想世界２６５に関する情報をバイナリ形式のデータに符号化してもよい。
適応ＲＶ２５５は、メタデータデコーダ２５６が第１メタデータを復号化した情報及びメタデータデコーダ２５８が第２メタデータを復号化した情報に基づいて、仮想世界２６５に適用される情報を生成する。ここで、適応ＲＶ２５５は、第２メタデータに含まれる仮想世界オブジェクト属性（ｖｉｒｔｕａｌ ｗｏｒｌｄ ｏｂｊｅｃｔ ｃｈａｒａｃｔｅｒｉｓｔｉｃｓ）及び検出情報に対応するように、仮想世界２６５に適用される情報を生成する。
メタデータエンコーダ２５７は、適応ＲＶ２５５が生成した仮想世界２６５に適用される情報を第３メタデータに符号化する。また、適応ＲＶ２５５は第３メタデータを適応ＶＲ２６０に送信する。
適応ＶＲ２６０に含まれたメタデータデコーダ２６１は第３メタデータを復号化する。適応ＶＲ２６０は、デコードされた情報に基づいて仮想世界２６５のオブジェクトの属性を変換してもよい。また、適応ＶＲ２６０は変換された属性を仮想世界２６５に適用してもよい。
本発明の一側面によれば、仮想世界の情報処理のシステムは、仮想世界２６５に関する情報を現実世界のアクチュエータに送信し、仮想世界２６５の情報が現実世界に反映されるようにする。以下、図７〜図９を参照して仮想世界２６５の情報が現実世界に反映される実施形態について詳細に説明する。
図７〜図９は、本発明の一実施形態に係る適応ＶＲエンジン及びアクチュエータを示す図である。
図７を参照すると、本発明の一実施形態に係る適応ＶＲエンジン２８５はＸＭＬエンコーダ２８６を含む。適応ＶＲエンジン２８５は、図３に示す適応ＲＶ２５５の一実施形態として、仮想世界２６５に関する情報が現実世界に反映されるように仮想世界２６５に関する情報を現実世界のアクチュエータ２８８に送信する。
適応ＶＲ２６０は、仮想世界２６５のオブジェクトの属性の変化に関する情報を収集し、収集された情報を適応ＶＲエンジン２８５に送信してもよい。適応ＶＲエンジン２８５はＸＭＬエンコーダ２８６を含み、ＸＭＬエンコーダ２８６は、受信した仮想世界２６５に関する情報をＸＭＬ形態のデータに符号化してもよい。また、適応ＶＲエンジン２８５は、ＸＭＬエンコーダ２８６が符号化したデータをアクチュエータ２８８に送信してもよい。
アクチュエータ２８８はＸＭＬデコーダ２８７を含み、ＸＭＬデコーダ２８７は、適応ＶＲエンジン２８５から受信したＸＭＬ形態のデータを復号化してもよい。
アクチュエータ２８８は、ＸＭＬデコーダ２８７が復号化した情報に対応して動作する。
図８を参照すると、本発明の一実施形態に係る適応ＶＲエンジン２９０は、ＸＭＬエンコーダ２９１及びバイナリ形式エンコーダ２９２を含む。
適応ＶＲ２６０は、仮想世界２６５のオブジェクトの属性の変化に関する情報を収集し、収集された情報を適応ＶＲエンジン２９０に送信してもよい。適応ＶＲエンジン２９０は、ＸＭＬエンコーダ２９１及びバイナリ形式エンコーダ２９２を含み、ＸＭＬエンコーダ２９１は、受信した仮想世界２６５に関する情報をＸＭＬ形態のデータに符号化してもよく、バイナリ形式エンコーダ２９２は、ＸＭＬエンコーダ２９１が符号化したデータを再びバイナリ形式のデータに符号化してもよい。また、適応ＶＲエンジン２９０は、バイナリ形式エンコーダ２９２が符号化したデータをアクチュエータ２９５に送信してもよい。
アクチュエータ２９５は、バイナリ形式デコーダ２９３及びＸＭＬデコーダ２９４を含み、バイナリ形式デコーダ２９３は適応ＶＲエンジン２９０から受信したバイナリ形式のデータをＸＭＬ形態のデータに復号化してもよく、ＸＭＬデコーダ２９４は、バイナリ形式デコーダ２９３がＸＭＬ形態に復号化したデータを復号化してもよい。
アクチュエータ２９５は、ＸＭＬデコーダ２９４が復号化した情報に対応して動作する。
図９を参照すると、本発明の一実施形態に係る適応ＶＲエンジン２９６はバイナリ形式エンコーダ２９７を含む。
適応ＶＲ２６０は、仮想世界２６５のオブジェクトの属性の変化に関する情報を収集し、収集された情報を適応ＶＲエンジン２９６に送信してもよい。適応ＶＲエンジン２９６はバイナリ形式エンコーダ２９７を含み、バイナリ形式エンコーダ２９７は、受信した仮想世界２６５に関する情報をバイナリ形式のデータに符号化してもよい。また、適応ＶＲエンジン２９６は、バイナリ形式エンコーダ２９７が符号化したデータをアクチュエータ２９９に送信してもよい。
アクチュエータ２９９はバイナリ形式デコーダ２９８を含み、バイナリ形式デコーダ２９８は、適応ＶＲエンジン２９６から受信したバイナリ形式のデータを復号化してもよい。
アクチュエータ２９９は、バイナリ形式デコーダ２９８が復号化した情報に対応して動作する。
図１０は、一実施形態に係る仮想世界の情報処理装置の構成を示す図である。図１０を参照すると、一実施形態に係る仮想世界の情報処理装置３００は格納部３１０及び処理部３２０を備える。格納部３１０はセンサの特性に関するセンサ特性を格納する。
センサは現実世界のユーザの動作、状態、意図または形態などを測定する装置である。センサはセンサ入力装置のように表してもよい。実施形態に係るセンサを（１）音響、音声、振動、（２）自動車、運送手段、（３）化学物、（４）電流、電位、磁気、ラジオ、（５）環境、天気、（６）フロー、（７）電離放射線、亜原子粒子、（８）ナビゲーション装置、（９）位置、角度、変位、距離、速度、加速度、（１０）視覚、光、映像、（１１）圧力、力、密度、レベル、（１２）熱、ヒート、温度、（１３）近接、存在、（１４）センサ技術のようにタイプごとに分類してもよい。
表２は、センサタイプに係るセンサの実施形態を示す。下記の表に示すセンサは一実施形態に過ぎず、本発明が下記の表に示すセンサのみによって実現されるものと制限されて解釈されてはならない。
図１１は、本発明の一実施形態に係る仮想世界の情報処理装置の構成を示す図である。図１１を参照すれば、一実施形態に係る入力装置３６０は、現実世界のユーザからセンサ適応選好３６１が入力される。実施形態に係る入力装置３６０は、センサ３７０または仮想世界の情報処理装置３５０にモジュールの形態に挿入されるよう実現されてもよい。センサ適応選好３６１について図７から図９を参照して後述する。
センサ３７０は、センサ特性３７１および検出情報３７２を仮想世界の情報処理装置３５０に送信してもよい。
本発明の一実施形態に係る仮想世界の情報処理装置３５０は信号処理部３５１および適応部３５２を備える。
信号処理部３５１は、センサ３７０からセンサ特性３７１および検出情報３７２を受信し、受信したセンサ特性３７１および検出情報３７２に対する信号処理作業を行う。実施形態に係る信号処理部３５１は、センサ特性３７１および検出情報３７２に対してフィルタリング作業および検証作業を行う。
適応部３５２は入力装置３６０からセンサ適応選好３６１を受信し、受信したセンサ適応選好３６１に基づいて仮想世界３８０に適用されるように信号処理部３５１で信号処理した情報について適応作業を行う。また、仮想世界の情報処理装置３５０は、適応部３５２で適応作業を行った情報を仮想世界３８０に適用する。
センサ特性はセンサの特性に関する情報である。センサ特性基本タイプはセンサ特性の基本タイプである。実施形態に係るセンサ特性基本タイプはセンサ特性に対するメタデータの一部分として、全てのセンサに共通して適用されるセンサ特性に関するメタデータの基本タイプである。
仮想世界と現実世界との間の情報送信において、ある時点で送信されなければならない現在情報が既に送信された過去情報と大きく相異しなければ、前記現在情報のうち、前記過去情報と相異なる部分のみが送信されてもよい。一方、前記現在情報が前記過去情報と多くの部分で異なると、前記現在情報の全体が送信されてもよい。このような方式は、前記仮想世界及び前記現実世界間で送信される全体情報量を減らすための方法である。
例えば、ユーザがモーションセンサを装着した場合、前記モーションセンサに関する情報が無線に送信されることになる。ここで、ユーザが動かなければ、すなわち、前記モーションセンサに対する現在情報及び過去情報は互いに大きく異ならない。ここで、前記モーションセンサに対する全ての現在情報が送信されれば、フレームごとに前記モーションセンサに関連する全ての情報が送信されなければならない。しかし、アップデートスキーム（ｕｐｄａｔｅ ｓｃｈｅｍｅ）、すなわち、前記現在情報及び前記過去情報間に互いに相異なる部分のみが送信される方式が使用されれば、前記モーションセンサは動かないため、前記モーションセンサに関連する命令（ｃｏｍｍａｎｄ）のうち、タイムスタンプを除いた異なる情報は送信されないことがある。すなわち、フレームごとにｐｏｓｉｔｉｏｎ、ｏｒｉｅｎｔａｔｉｏｎ、ｖｅｌｏｃｉｔｙ、ａｎｇｕｌａｒｖｅｌｏｃｉｔｙ及びａｃｃｅｌｅｒａｔｉｏｎ、ａｎｇｕｌａｒａｃｃｅｌｅｒａｔｉｏｎに関連する情報は送信されない。したがって、無線通信送信ロード（ｌｏａｄ）が相当減少し得る。
前述の本発明の実施形態において、前記バイナリ形式エンコーダ２７７、２８２、２９２及び２９７は、前記バイナリ形式デコーダ２７８、２８３、２９３及び２９８に仮想世界と現実世界との間の情報を送信する。
前記バイナリ形式エンコーダ２７７、２８２、２９２及び２９７は前記ノーマルモード及び前記アップデートモードで作動する。
前記ノーマルモードで前記バイナリ形式エンコーダ２７７、２８２、２９２及び２９７は自身が送信された全ての情報を符号化して出力してもよい。
前記アップデートモードで前記バイナリ形式エンコーダ２７７、２８２、２９２及び２９７は、自身が送信された現在情報のうち、過去情報と相異なる部分のみを符号化して出力してもよい。
また、前記アップデートモードで前記以前形態エンコーダ２７７、２８２、２９２及び２９７は、自身が送信された現在情報と自身が以前に送信された過去情報とを比較して、前記現在情報と前記過去情報が大きく異なる場合、前記現在情報の全体を符号化して出力し、前記現在情報と前記過去情報が大きく異ならない場合、前記現在情報のうち、前記過去情報と相異なる部分のみを符号化して出力してもよい。
前記バイナリ形式デコーダ２７８、２８３、２９３及び２９８は前記ノーマルモード及び前記アップデートモードで作動する。
前記ノーマルモードで前記バイナリ形式デコーダ２７８、２８３、２９３及び２９８は、前記バイナリ形式エンコーダ２７７、２８２、２９２及び２９７から全ての情報が送信されたため、前記全ての情報を復号化して出力する。
前記アップデートモードで前記バイナリ形式デコーダ２７８、２８３、２９３及び２９８は、前記バイナリ形式エンコーダ２７７、２８２、２９２及び２９７から現在情報のうち、過去情報と相異なる部分のみが送信されてもよい。このような場合、前記バイナリ形式デコーダ２７８、２８３、２９３及び２９８は自身が送信された一部情報のみを復号化して出力してもよい。この場合、前記情報の送信された本発明の実施形態に係るシステムの他の部分が自身が以前に送信された残りの情報を用いて必要な機能を行うことになる。
また、前記バイナリ形式デコーダ２７８、２８３、２９３及び２９８は、自身が送信された一部情報を復号化し、これに自身が以前に送信された異なる情報を付加して出力してもよい。この場合、前記情報を送信される本発明の実施形態に係るシステムの他の部分は、前記ノーマルモード及び前記アップデートモードに応じる送信情報の差に対して透明に作動する。
また、前述したように、前記エンコーダ２７７、２８２、２９２及び２９７は前記アップデートモードでも現在情報の全体を出力できるため、前記デコーダ２７８、２８３、２９３及び２９８も前記アップデートモードにおいても前記現在情報の全体を復号化して出力してもよい。
図１２は、本発明の一実施形態に係る前記ノーマルモード及び前記アップデートモードをサポートするバイナリ形式エンコーダ及びバイナリ形式デコーダの構造図である。
前記バイナリ形式エンコーダ４１０は、スイッチ４２０、ノーマルモード２進形態エンコード部４３０及びアップデートモード２進形態エンコード部４４０を備える。
前記スイッチ４２０は複数の出力ポートを備える。前記出力ポートのうちの１つは前記ノーマルモード２進形態エンコード部４３０の入力に、他の１つは前記アップデートモード２進形態エンコード部４３０の入力に接続される。前記スイッチ４２０は、前記バイナリ形式エンコーダ部４１０から入力される情報を現在のモードに応じて、前記ノーマルモード２進形態エンコード部４３０または前記アップデートモード２進形態エンコード部４４０にスイッチング（ｓｗｉｔｃｈｉｎｇ）して送信する。
前記ノーマルモード２進形態エンコード部４３０は、前述したノーマルモードにおける前記バイナリ形式エンコーダ２７７、２８２、２９２及び２９７の動作を行う。すなわち、前記ノーマルモード２進形態エンコード部４３０は入力された情報をノーマルモードに符号化して出力する。前記アップデートモード２進形態エンコード部４４０は、前述したアップデートモードにおける前記バイナリ形式エンコーダ２７７、２８２、２９２及び２９７の動作を行う。すなわち、前記アップデートモード２進形態エンコード部４３０は入力された情報をアップデートモードに符号化して出力する。
前記バイナリ形式デコーダ４５０は、ノーマルモード２進形態デコード部４６０、アップデートモード２進形態デコード部４７０及びスイッチ４８０を備える。
前記ノーマルモード２進形態デコード部４３０は、前述したノーマルモードにおける前記バイナリ形式デコーダ２７８、２８３、２９３及び２９８の動作を行う。すなわち、前記ノーマルモード２進形態デコード部４６０は、前記ノーマルモード２進形態エンコード部４３０から入力された情報をノーマルモードに復号化して出力する。前記アップデートモード２進形態デコード部４７０は、前述したアップデートモードにおける前記バイナリ形式デコーダ２７８、２８３、２９３及び２９８の動作を行う。すなわち、前記アップデートモード２進形態デコード部４７０は、前記ノーマルモード２進形態エンコード部４４０から入力された情報をアップデートモードに復号化して出力する。前記スイッチ４８０は複数の入力ポートを備えてもよい。前記入力ポートのうち１つは前記ノーマルモード２進形態デコード部４６０の出力に、他の１つは前記アップデートモード２進形態デコード部４７０の出力に接続される。前記スイッチ４８０は、現在のモードに応じて前記ノーマルモード２進形態デコード部４６０出力及び前記アップデートモード２進形態デコード部４７０の出力のうちの１つにスイッチングして出力する。
図１３は、本発明の一実施形態に係る前記バイナリ形式エンコーダ２７７、２８２、２９２、２９７及び４３０から前記バイナリ形式デコーダ２７８、２８３、２９３、２９８及び４６０に送信される情報メタデータ５００の構造を示す。前記メタデータはセンサによって収集された情報のアップデートを示すセンサアップデートメタデータであってもよい。前記メタデータは、装置によって収集された情報のアップデートを示すセンサリ（ｓｅｎｓｏｒｙ）アップデートメタデータであってもよい。
前記メタデータ５００は、命令タイプ（ｃｏｍｍａｎｄ ｔｙｐｅ）５１０、個別タイプ（ｉｎｄｉｖｉｄｕａｌ ｔｙｐｅ）５２０、更新モード（ｕｐｄａｔｉｎｇ ｍｏｄｅ）５３０、リストアップデート（ｌｉｓｔ ｕｐｄａｔｅ）５４０、フラグフィールド（ｆｌａｇ ｆｉｅｌｄ）５５０及びデータフィールド（ｄａｔａ ｆｉｅｌｄ）５６０を含んでもよい。
前記命令タイプ５１０は、前記メタデータのタイプ（ｔｙｐｅ ｏｆ ｍｅｔａｄａｔａ）を示す。前記命令タイプは、例えば、４ビットの固定された長さを有してもよい。
前記個別タイプ５２０は、個別装置及びセンサのタイプを示す。前記個別タイプは、例えば、５ビットの固定された長さを有してもよい。
前記更新モード５３０は、前記バイナリ形式エンコーダ２７８、２８３、２９３、２９８及び４６０、及び前記バイナリ形式デコーダのモード２７８、２８３、２９３、２９８及び４６０を示す。すなわち、前記更新モード５３０の値によって前記バイナリ形式エンコーダ２７８、２８３、２９３、２９８及び４６０及び前記バイナリ形式デコーダのモード２７８、２８３、２９３、２９８及び４６０が変更される。前記モードは、ノーマルモードまたはアップデートモードであるため、１ビットの情報でモードが区分され得る。
前記更新モード５３０は、前記命令タイプ５１０の一部として含まれてもよい。すなわち、前記命令タイプ５１０が特定値を有する場合、前記更新モード５３０の役割を行うようにした実施形態が構成されてもよく、前記命令タイプ５１０のうち、特定ビットが前記更新モード５３０のビットとしての役割を行うようにした実施形態が構成されてもよい。
前記フラグフィールド５５０は、前記メタデータ５００に含まれるフラグフィールドを示す。前記データフィールド５６０は、前記メタデータ５００に含まれるデータフィールドを示す。
前記データは、必須（ｍａｎｄａｔｏｒｙ）または選択的（ｏｐｔｉｏｎａｌ）であってもよい。選択的なデータの場合、前記データがメタデータに含まれるか否かが示されなければならない。前記フラグは、特定データがメタデータに含まれたか否かを示す。すなわち、フラグＡの値が１であれば、それに対応するデータＢがメタデータＣに含まれ、前記フラグＡの値が０であれば、前記データＢがメタデータＣに含まれないことがある。
前述した表現を２進表現シンタックスに表すと、下記の数式（１）の通りである。
例えば、メタデータＣのフラグＡにデータＢが対応し、前記データＢが下位フィールドとしてフラグＤを有し、前記フラグＤはデータＥに対応する場合に下記の数式（３）のような２進表現シンタックスに示す。
同じ名前のフラグまたはデータが前記メタデータ５００内に複数存在してもよい。このような場合、フラグまたはデータはアレイ（ａｒｒａｙ）して存在して、アレイ内でエレメント（ｅｌｅｍｅｎｔ）を特定するためのインデックス（ｉｎｄｅｘ）を用いる。また、前記インデックスには初期化及び加減演算が適用される。
数式（４）はフラグアレイＡ、Ａ［０］に対応するデータＢ及びＡ［１］に対応するデータＣを含むメタデータＤを示す。
本発明の一実施形態に係る第１ノーマルモードは下記の説明の通りである。
送信側では全てのフラグ及び全ての必須データを含むメタデータを送信する。選択的データの場合、前記選択的データに対応するフラグの値が１である場合のみ前記メタデータに含まれて送信される。受信側では、受信した前記メタデータで全てのフラグ及び全ての必須データを抽出する。選択的データの場合、それに対応するフラグの値を検査して前記フラグの値が１である場合のみ前記選択的データを抽出する。前記フラグ、必須データ、及び選択的データの相対的な順序は予め決定されている。
本発明の一実施形態に係る第２ノーマルモードは下記の説明の通りである。
送信側では、全てのフラグ、全ての必須データ及び全ての選択的データを含むメタデータを送信する。
もし、対応するフラグの値からみると、実際に存在しない選択的データは、固定された値または任意の値を有するまま送信されるのであろう。受信側では前記選択的データのうち実際に存在しないものなどを区分して廃棄する。
本発明の一実施形態に係る第１アップデートモードは下記の説明の通りである。
送信側では、まず前記リストアップデート５４０のビット数を決定する。
前記ビット数は全てのフラグ及び全てのデータの個数の和になり得る。すなわち、フラグが３個、データが４個がある場合、前記リストアップデート５４０は７ビットで構成される。各ビットは前記フラグまたはデータに対応する。但し、常にメタデータに含まれなければならないフラグまたはデータがある場合、前記フラグまたはデータに対応するビットは除外されてもよい。
送信側では、フラグが過去の値に変更された場合、前記フラグをメタデータ５００のフラグフィールド５５０に含ませ、リストアップデート５４０の前記フラグに対応するビットを１にする。前記フラグが過去の値と同じである場合、前記リストアップデート５４０の対応するビットは０になる。送信側では必須データが過去の値に変更された場合、前記必須データをメタデータ５００のデータフィールド５６０に含ませ、リストアップデート５４０の前記必須データに対応するビットを１にする。前記必須データが過去の値と同じである場合、前記リストアップデート５４０の対応するビットは０になる。また、送信側では選択的データが存在して（すなわち、対応するフラグが１であり）過去の値に変更されれば、前記選択的データを前記データフィールド５６０に含ませ、リストアップデート５４０の前記選択的データに対応するビットを１にする。前記必須データが過去の値と同じである場合、前記リストアップデート５４０の対応するビットは０になる。
送信側は上記のように構成されたメタデータ５００を受信側に送信する。
受信側ではフラグまたはデータに対応するリストアップデート５４０のビットが１であるかを確認する。前記ビットが１であれば、前記フラグまたはデータは変更され、前記フラグまたはデータをフラグフィールド５５０またはデータフィールド５６０で抽出する。但し、前記データが選択的データの場合、まず、前記選択的データに対応するリストアップデート５４０のビットが１であるかを確認した後、前記ビットが１であれば、再び前記選択的データに対応するフラグが１であるかを確認する。前記フラグの値が１であれば、受信側は前記データフィールド５６０から前記選択的データを抽出する。
上記のような過程において受信側は、値の変更されたフラグまたはデータを判別してもよく、前記変更されたフラグまたはデータの以前値との組合によってフラグまたはデータの値を出力する。
この場合、常に変更されたり変更が多いなどの理由によって常にメタデータに含まれなければならないフラグまたはデータ（例えば、タイムスタンプ）は、前記リストアップデート５４０のビットを占めることなく、常に前記フラグフィールド５５０またはデータフィールド５６０から抽出されてもよく、または、前記リストアップデート５４０のビットを占めるものの、前記送信側及び前記受信側は前記ビットの値を無視して常に前記フラグまたはデータが前記フラグフィールド５５０またはデータフィールド５６０に含まれたものと見なすことができる。
本発明の一実施形態に係る第２アップデートモードは下記の説明の通りである。
前記第２アップデートモードは、現在のフラグ及び過去のフラグとが一致することを前提とする。すなわち、フラグのうち、過去の値と異なるものがある場合に前述したノーマルモードに変更され、送信側及び受信側は前記ノーマルモードとして動作する。また、前記メタデータ５００に含まれる選択的データは、ノーマルモードからアップデートモードに進入する時点に決定される。
フラグ及び必須データは、前記フラグフィールド５５０またはデータフィールド５６０に含まれる。ここで、フラグは、それに対応する選択的データが含まれるか否かを示すために前記フラグフィールド５５０に含まれるものの、前述したように前記アップデートモード中には続けて過去の値と一致するため（すなわち、変更されないため）、リストアップデート５４０のビットを占めない。必須データは変更されるためにリストアップデート５４０のビットを取得してもよく、選択的データのうち対応するフラグの値が１であることは、変更有無を示すために前記リストアップデート５４０のビットを占めることができる。前記ビット数は、アップデートモード進入時点で１の値を有するフラグの個数に必須データの個数を加えた数になり得る。
送信側は前記フラグを前記フラグフィールド５５０に含む。また、必須データのうち値が変更されたものを前記データフィールド５６０に含み、前記必須データに対応する前記リストアップデート５４０のビットを１にする。必須データのうち、値が変更されないものは前記データフィールド５６０に含むことなく、前記必須データに対応する前記リストアップデート５４０のビットは０になる。
送信側は、対応するフラグの値が１である選択的データのうち値が変更されたものを前記データフィールド５６０に含み、前記選択的データに対応する前記リストアップデート５４０のビットを１にする。前記対応するフラグの値が１である選択的データのうち、値が変更されないものは前記データフィールド５６０に含むことなく、前記選択的データに対応する前記リストアップデート５４０のビットは０になる。
受信側は、前記メタデータ５００のフラグフィールド５５０からフラグの値を抽出する。前記抽出されたフラグの値から前記受信側は前記リストアップデート５４０のビットを占めるデータを確認することができる。また、受信側は、前記リストアップデート５４０のビットの値によって値の変更された必須データが確認され、前記リストアップデート５４０のビットの値及び前記抽出されたフラグの値によって値の変更された選択的データが確認される。
上記のような過程において受信側は、値が変更されたフラグまたはデータを判別してもよく、前記変更されたフラグまたはデータの以前値との組合によってフラグまたはデータの値を出力する。
図１４は、本発明の一実施形態に係る仮想世界の情報処理方法の手続を説明する。まず、送信側は２進形態エンコードを行うために、現在の２進形態エンコードモードがノーマルモードであるか否かを判断する（Ｓ６１０）。もし、前記モードがノーマルモードであれば、前記送信側はノーマルモード２進形態符号化を行い（Ｓ６２０）、前記モードがアップデートモードであれば、アップデートモード２進形態符号化を行なう（Ｓ６３０）。送信側は前記符号化の結果であるメタデータを受信側に送信する（Ｓ６４０）。
受信側は、前記メタデータを受信する（Ｓ６５０）。受信側は、２進形態デコードがノーマルモードで行われるべきかを判断する（Ｓ６６０）。前記判断は前記メタデータの内容に基づく。もし、ノーマルモードで行われなければならない場合、前記受信側はノーマルモード２進形態復号化を行い（Ｓ６７０）、アップデートモードで行われなければならない場合はアップデートモード２進形態復号化（Ｓ６８０）を行ってその結果を出力する。
前述の前記送信側は、前記バイナリ形式エンコーダ２７８、２８３、２９３、２９８及び４６０、または前記バイナリ形式エンコーダ２７８、２８３、２９３、２９８及び４６０を含む仮想世界の情報処理装置であってもよく、前述の前記受信側は、前記バイナリ形式デコーダ２７８、２８３、２９３、２９８及び４６０または前記バイナリ形式デコーダ２７８、２８３、２９３、２９８及び４６０を含む仮想世界の情報処理装置であってもよい。
以下で、本発明の一実施形態で用いるメタデータの例示的な構造を記述する。前記構造は、ＸＭＬ表現シンタックス及び２進表現シンタックスとして記述されてもよく、前記ＸＭＬ表現シンタックス及び２進表現シンタックス内のエントリ（ｅｎｔｒｙ）は記述語構成セマンティック（ｄｅｓｃｒｉｐｔｏｒ ｃｏｍｐｏｎｅｎｔｓ ｓｅｍａｎｔｉｃｓ）で説明される。
下記の表３は、前記命令タイプ５１０の用語情報及び２進表現を例示する。
前述したように、前記の表３のＲｅｓｅｒｖｅｄの２進表現のうち一部がモードを示すために用いられてもよい。すなわち、前記命令タイプ５１０が２進表現として０１１１から１１１１の間の特定値を有すれば、前記モードが指定されることによって本発明の一実施形態が構成される。
下記の表４は、前記命令タイプ５１０が装置命令、センサ特性、またはユーザセンサ選好であるとき、前記個別タイプ５２０が示す装置を例示する。
次に、ノーマルモードでの個別装置に対するメタデータについて説明する。下記の表８、表９及び表１０はそれぞれ装置命令ベースタイプ（ｄｅｖｉｃｅ ｃｏｍｍａｎｄ ｂａｓｅ ｔｙｐｅ）のＸＭＬ表現シンタックス（ＸＭＬ ｒｅｐｒｅｓｅｎｔａｔｉｏｎ ｓｙｎｔａｘ）、２進表現シンタックス及び記述語構成セマンティック（ｄｅｓｃｒｉｐｔｏｒ ｃｏｍｐｏｎｅｎｔｓ ｓｅｍａｎｔｉｃｓ）を例示する。
前記の表９の形式で、ｂｓｌｂｆはビットストリング左側ビット優先（ｂｉｔ ｓｔｒｉｎｇ ｌｅｆｔ ｂｉｔ ｆｉｒｓｔ）を示す。ここで、左側はビットがＩＳＯ／ＩＥＣ１５９３８−３で用いられる順序である。ＵＴＦ−８（Ｕｎｉｃｏｄｅ Ｔｒａｎｓｆｏｒｍａｔｉｏｎ Ｆｏｒｍａｔ−８は、ユニコードのための可変長手文字の符号化方式によりＩＳＯ１０６４６／ＩＥＴＦ ＲＦＣ ２２７９に定義された。ＵＴＦ−８は、ユニコード一文字を示すために１バイト〜４バイトを用いる。その他に、ｖｌｕｉｍｓｂｆ５は２つの部分に構成される最上位ビット優先可変長手の自然数（ｖａｒｉａｂｌｅ ｌｅｎｇｔｈ ｕｎｓｉｇｎｅｄ ｉｎｔｅｇｅｒ ｍｏｓｔ ｓｉｇｎｉｆｉｃａｎｔ ｂｉｔ ｆｉｒｓｔ）である。第１部分は、値の表現のために用いられる４−ビットビットフィールドの個数ｎを定義する。前記個数は「０」が最後にくるｎ−１個の連続的な「１」として符号化される。第２部分は、前記第１部分で特定された個数のビットフィールドを用いて符号化された整数である。ｕｉｍｂｓｆは、最上位ビット優先自然数（ｕｎｓｉｇｎｅｄ ｉｎｔｅｇｅｒ、ｍｏｓｔ ｓｉｇｎｉｆｉｃａｎｔ ｂｉｔ ｆｉｒｓｔ）である。ｆｓｂｆは浮動小数（ｆｌｏａｔ）（３２ビット）であり、サイン（ｓｉｇｎ）ビットが最初にくる。ｆｌｏａｔ内のビットのセマンティックスはＡＮＳＩ／ＩＥＥＥ標準７５４−１９８５によるものである。
下記の表１４、表１５及び表１６は、それぞれ色訂正タイプ（ｃｏｌｏｒ ｃｏｒｒｅｃｔｉｏｎ ｔｙｐｅ）のＸＭＬ表現シンタックス、２進表現シンタックス及び記述語構成セマンティックを例示する。
下記の表２６、表２７及び表２８は、それぞれセンサ情報ベースタイプ（ｓｅｎｓｅｄ ｉｎｆｏｒｍａｔｉｏｎ ｂａｓｅ ｔｙｐｅ）のＸＭＬ表現シンタックス、２進表現シンタックス及び記述語構成セマンティックを例示する。
装置命令ボキャブラリー（ｄｅｖｉｃｅ ｃｏｍｍａｎｄ ｖｏｃａｂｕｌａｒｙ）について説明する。
下記の表５６は色訂正タイプの例示である。
また、ＳｐｉｔｉａｌＬｏｃａｔｏｒの場合、ＬｏｏｐＳｐａｔｉａｌＬｏｃａｔｏｒの値に応じて複数が存在することがあるが、複数のＳｐｉｔｉａｌＬｏｃａｔｏｒそれぞれを含む否かを示すためにＵｐｄａｔｅＭａｓｋが含まれた。すなわち、前記ＵｐｄａｔａＭａｓｋの複数のビットのうち、その値が１であるｋ番目ビットに対応するＳｐａｔｉａｌＬｏｃａｔｉｏｒ［ｋ］が前記ＣｏｌｏｒＣｏｒｒｅｃｔｉｏｎＤｅｖｉｃｅＵｐｄａｔｅに含まれる。
下記の表５７は剛体胴体モーションタイプの例示である。
下記の表５８は触覚タイプ例示である。
下記の表６０は位置センサタイプの例示である。
装置命令ボキャブラリー（ｄｅｖｉｃｅ ｃｏｍｍａｎｄ ｖｏｃａｂｕｌａｒｙ）について説明する。
下記の表６８は色訂正タイプの例示である。
ｉｄデータがＣｏｌｏｒＣｏｒｒｅｃｔｉｏｎＤｅｖｉｃｅＵｐｄａｔｅＭｏｄｅＴｙｐｅに含まれたかの可否を判断しなければならない。前記ｉｄＦｌａｇの値が１であれば、前記ｉｄＦｌａｇ及び前記ｉｄＦｌａｇに対応するｉｄデータのためにＬｉｓｔＵｐｄａｔｅ５４０で１ビットが割り当てられたものである。したがって、まず前記ｉｄＦｌａｇが１であるか否かが検査される。次に、前記ｉｄデータが変更されたか否かを判断するために前記ｉｄＦｌａｇに対応するＬｉｓｔＵｐｄａｔｅ５４０のビットが１であるか否かを検査する。すなわち、前記ｉｄＦｌａｇが１であり、前記ｉｄＦｌａｇに対応するＬｉｓｔＵｐｄａｔｅ５４０のビットが１であれば、前記ｉｄＦｌａｇに対応する前記ｉｄデータの値がメタデータに含まれる。ＬｉｓｔＵｐｄａｔｅのビット列のうちの１つを示すために０に初期化されたＬｉｓｔＩｔｅｍＮｕｍが用いられた。
また、前記ｉｄＦｌａｇが１であれば、前記ｉｄＦｌａｇのために割り当てられた前記ＬｉｓｔＵｐｄａｔｅ５４０の１ビットが検査されたものであるため、前記ＬｉｓｔＵｐｄａｔｅ５４０の次のビットを検査対象にするため前記ＬｉｓｔＩｔｅｍＮｕｍの値を１つ増加させる。もし、前記ｉｄＦｌａｇが０であれば、前記ＬｉｓｔＵｐｄａｔｅ５４０には初めから前記ｉｄＦｌａｇのために割り当てられたビットがないものであるため、前記ＬｉｓｔＩｔｅｍＮｕｍが増加しない。
下記の表６９は剛体胴体モーションタイプの例示である。
下記の表７２は位置センサタイプの例示である。
上述したように、本発明を限定された実施形態と図面によって説明したが、本発明は、上記の実施形態に限定されることなく、本発明が属する分野における通常の知識を有する者であれば、このような実施形態から多様な修正及び変形が可能である。
したがって、本発明の範囲は、開示された実施形態に限定されるものではなく、特許請求の範囲だけではなく特許請求の範囲と均等なものなどによって定められるものである。
１００ センサ
１１０ ユーザ
１２０ 仮想世界のオブジェクト
１１０ ユーザ
１２０ 仮想世界のオブジェクト
Claims (17)
- センサ特性に関する情報を出力するセンサと、
前記情報に基づいてバイナリ形式のメタデータを出力するエンコーダと、
を含み、
前記エンコーダは前記バイナリ形式のメタデータをモードに応じて第１形態または第２形態に符号化して出力し、前記第１形態のメタデータは前記情報内の項目を含み、前記第２形態のメタデータは前記情報内の項目のうち以前と異なる値を有する項目を含むことを特徴とする仮想世界の情報処理装置。 - 前記エンコーダは、
前記情報が入力されて前記モードに応じて複数の出力ポートのうちの１つに前記情報を出力するスイッチと、
前記スイッチの出力ポートのうちの１つに接続されて前記第１形態のメタデータを出力する第１エンコーダ部と、
前記スイッチに出力ポートのうちの１つに接続されて前記第２形態のメタデータを出力する第２エンコーダ部と、
を備えることを特徴とする請求項１に記載の仮想世界の情報処理装置。 - 前記項目はフラグ及び前記フラグに対応するデータを含み、前記第２形態のメタデータは、前記フラグ及びデータそれぞれの値が変更されたか否かを示すビットを含み、
前記フラグは、対応するデータが存在すれば第１値を有し、そうでなければ第２値を有し、
前記ビットは、対応する前記フラグまたは前記データが変更されれば第３値を有し、そうでなければ第４値を有し、
前記第２形態のメタデータは対応する前記ビットの値が第３値であるフラグを含み、前記第２形態のメタデータは対応する前記ビットの値が第３値であり、対応する前記フラグの値が第１値である前記データを含むことを特徴とする請求項１に記載の仮想世界の情報処理装置。 - 前記項目はフラグ及び前記フラグに対応するデータを含み、
前記フラグは、対応するデータが存在すれば第１値を有し、そうでなければ第２値を有し、
前記第２形態のメタデータは前記フラグを含み、前記第２形態のメタデータは前記データのうち自身に対応するフラグが第１値を有するデータに対応するビットを含み、
前記ビットは、対応する前記データが変更されれば第３値を有し、そうでなければ第４値を有し、
前記第２形態のメタデータは、前記データのうち対応するビットが第３値を有するデータを含むことを特徴とする請求項１に記載の仮想世界の情報処理装置。 - バイナリ形式のメタデータに基づいて情報を出力するデコーダと、
前記情報に基づいて仮想世界に適用される情報を生成する処理部と、
を備え、
前記デコーダは前記バイナリ形式のメタデータをモードに応じて第１形態または第２形態に復号化して出力し、前記第１形態のメタデータは前記情報内の項目を含み、前記第２形態のメタデータは前記情報内の項目のうち以前と異なる値を有する項目を含むことを特徴とする仮想世界の情報処理装置。 - 前記デコーダは、
前記バイナリ形式のメタデータが入力されて前記第１形態に復号化して出力する第１デコーダ部と、
前記バイナリ形式のメタデータが入力されて前記第２形態に復号化して出力する第２デコーダ部と、
前記第１デコーダ部及び前記第２デコーダ部の出力が入力されて前記モードに応じて両出力のうちの１つを出力するスイッチと、
を備えることを特徴とする請求項５に記載の仮想世界の情報処理装置。 - 前記項目はフラグ及び前記フラグに対応するデータを含み、前記第２形態のメタデータは、前記フラグ及びデータそれぞれの値が変更されたか否かを示すビットを含み、
前記フラグは、対応するデータが存在すれば第１値を有し、そうでなければ第２値を有し、
前記ビットは、対応する前記フラグまたは前記データが変更されれば第３値を有し、そうでなければ第４値を有し、
前記第２形態のメタデータは対応する前記ビットの値が第３値であるフラグを含み、前記第２形態のメタデータは対応する前記ビットの値が第３値であり、対応する前記フラグの値が第１値である前記データを含むことを特徴とする請求項５に記載の仮想世界の情報処理装置。 - 前記項目はフラグ及び前記フラグに対応するデータを含み、
前記フラグは、対応するデータが存在すれば第１値を有し、そうでなければ第２値を有し、
前記第２形態のメタデータは前記フラグを含み、前記第２形態のメタデータは前記データのうち自身に対応するフラグが第１値を有するデータに対応するビットを含み、
前記ビットは、対応する前記データが変更されれば第３値を有し、そうでなければ第４値を有し、
前記第２形態のメタデータは、前記データのうち対応するビットが第３値を有するデータを含むことを特徴とする請求項５に記載の仮想世界の情報処理装置。 - センサ特性に関する情報を出力するセンシングステップと、
前記情報に基づいてバイナリ形式のメタデータを出力する符号化ステップと、
を含み、
前記符号化ステップは前記バイナリ形式のメタデータをモードに応じて第１形態または第２形態に符号化して出力し、前記第１形態のメタデータは前記情報内の項目を含み、前記第２形態のメタデータは前記情報内の項目のうち以前と異なる値を有する項目を含むことを特徴とする仮想世界の情報処理方法。 - 前記符号化ステップは、
前記情報が入力されて前記モードに応じて複数の出力ポートのうちの１つに前記情報を出力するスイッチングステップと、
前記出力された情報に基づいて前記第１形態のメタデータを出力する第１符号化ステップと、
前記出力された情報に基づいて前記第２形態のメタデータを出力する第２符号化ステップと、
を含むことを特徴とする請求項９に記載の仮想世界の情報処理方法。 - 前記項目はフラグ及び前記フラグに対応するデータを含み、前記第２形態のメタデータは、前記フラグ及びデータそれぞれの値が変更されたか否かを示すビットを含み、
前記フラグは、対応するデータが存在すれば第１値を有し、そうでなければ第２値を有し、
前記ビットは、対応する前記フラグまたは前記データが変更されれば第３値を有し、そうでなければ第４値を有し、
前記第２形態のメタデータは対応する前記ビットの値が第３値であるフラグを含み、前記第２形態のメタデータは対応する前記ビットの値が第３値であり、対応する前記フラグの値が第１値である前記データを含むことを特徴とする請求項９に記載の仮想世界の情報処理方法。 - 前記項目はフラグ及び前記フラグに対応するデータを含み、
前記フラグは、対応するデータが存在すれば第１値を有し、そうでなければ第２値を有し、
前記第２形態のメタデータは前記フラグを含み、前記第２形態のメタデータは前記データのうち自身に対応するフラグが第１値を有するデータに対応するビットを含み、
前記ビットは、対応する前記データが変更されれば第３値を有し、そうでなければ第４値を有し、
前記第２形態のメタデータは、前記データのうち対応するビットが第３値を有するデータを含むことを特徴とする請求項９に記載の仮想世界の情報処理方法。 - バイナリ形式のメタデータに基づいて情報を出力する復号化ステップと、
前記情報に基づいて仮想世界に適用される情報を生成する処理ステップと、
を含み、
前記復号化ステップは前記バイナリ形式のメタデータをモードに応じて第１形態または第２形態に復号化して出力し、前記第１形態のメタデータは前記情報内の項目を含み、前記第２形態のメタデータは前記情報内の項目のうち以前と異なる値を有する項目を含むことを特徴とする仮想世界の情報処理方法。 - 前記復号化ステップは、
前記バイナリ形式のメタデータが入力されて前記第１形態に復号化して出力する第１復号化ステップと、
前記バイナリ形式のメタデータが入力されて前記第２形態に復号化して出力する第２復号化ステップと、
前記第１復号化ステップの出力及び前記第２復号化ステップの出力が入力され、前記モードに応じて両出力のうちの１つを出力するスイッチングステップと、
を含むことを特徴とする請求項１３に記載の仮想世界の情報処理方法。 - 前記項目はフラグ及び前記フラグに対応するデータを含み、前記第２形態のメタデータは、前記フラグ及びデータそれぞれの値が変更されたか否かを示すビットを含み、
前記フラグは、対応するデータが存在すれば第１値を有し、そうでなければ第２値を有し、
前記ビットは、対応する前記フラグまたは前記データが変更されれば第３値を有し、そうでなければ第４値を有し、
前記第２形態のメタデータは対応する前記ビットの値が第３値であるフラグを含み、前記第２形態のメタデータは対応する前記ビットの値が第３値であり、対応する前記フラグの値が第１値である前記データを含むことを特徴とする請求項１３に記載の仮想世界の情報処理方法。 - 前記項目はフラグ及び前記フラグに対応するデータを含み、
前記フラグは、対応するデータが存在すれば第１値を有し、そうでなければ第２値を有し、
前記第２形態のメタデータは前記フラグを含み、前記第２形態のメタデータは、前記データのうち自身に対応するフラグが第１値を有するデータに対応するビットを含み、
前記ビットは、対応する前記データが変更されれば第３値を有し、そうでなければ第４値を有し、
前記第２形態のメタデータは、前記データのうち対応するビットが第３値を有するデータを含むことを特徴とする請求項１３に記載の仮想世界の情報処理方法。 - 請求項９〜請求項１６のいずれか一項の方法を行うプログラムを記録したコンピュータで読み出し可能な記録媒体。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR10-2010-0034125 | 2010-04-14 | ||
| KR1020100034125A KR101677718B1 (ko) | 2010-04-14 | 2010-04-14 | 가상 세계 처리 장치 및 방법 |
| PCT/KR2011/002407 WO2011129542A2 (ko) | 2010-04-14 | 2011-04-06 | 가상 세계 처리 장치 및 방법 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2013529097A true JP2013529097A (ja) | 2013-07-18 |
| JP5838196B2 JP5838196B2 (ja) | 2016-01-06 |
Family
ID=44799126
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2013504804A Active JP5838196B2 (ja) | 2010-04-14 | 2011-04-06 | 仮想世界の情報処理装置及び方法 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US9612737B2 (ja) |
| EP (1) | EP2559462A4 (ja) |
| JP (1) | JP5838196B2 (ja) |
| KR (1) | KR101677718B1 (ja) |
| CN (2) | CN102869415B (ja) |
| WO (1) | WO2011129542A2 (ja) |
Families Citing this family (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20100138700A (ko) * | 2009-06-25 | 2010-12-31 | 삼성전자주식회사 | 가상 세계 처리 장치 및 방법 |
| KR101746453B1 (ko) * | 2010-04-12 | 2017-06-13 | 삼성전자주식회사 | 실감 효과 처리 시스템 및 방법 |
| KR101410410B1 (ko) * | 2011-12-21 | 2014-06-27 | 주식회사 케이티 | 체감형 학습 장치 및 방법 |
| TW201329877A (zh) * | 2012-01-05 | 2013-07-16 | 李福文 | 執行虛擬人物的執行方法及應用該方法的可攜式電子裝置 |
| US10133470B2 (en) | 2012-10-09 | 2018-11-20 | Samsung Electronics Co., Ltd. | Interfacing device and method for providing user interface exploiting multi-modality |
| US10861221B2 (en) * | 2017-07-14 | 2020-12-08 | Electronics And Telecommunications Research Institute | Sensory effect adaptation method, and adaptation engine and sensory device to perform the same |
| CN108121405B (zh) * | 2018-01-19 | 2023-09-19 | 深圳市亿道数码技术有限公司 | 360度二合一笔记本控制系统 |
| CN111507361B (zh) * | 2019-01-30 | 2023-11-21 | 富士通株式会社 | 基于微波雷达的动作识别装置、方法及系统 |
| KR20200131641A (ko) | 2019-05-14 | 2020-11-24 | (주) 풀다이브테크놀로지 | 가상 현실 시스템의 촉감 피드백 장치 |
| KR20200131626A (ko) | 2019-05-14 | 2020-11-24 | (주) 풀다이브테크놀로지 | 가상현실 촉감 전달 글러브 |
| KR20200131651A (ko) | 2019-05-14 | 2020-11-24 | (주) 풀다이브테크놀로지 | 가상현실 반력 제공장치 |
| KR20200131607A (ko) | 2019-05-14 | 2020-11-24 | (주) 풀다이브테크놀로지 | 가상현실 촉감 전달 글러브 |
| KR20200131630A (ko) | 2019-05-14 | 2020-11-24 | (주) 풀다이브테크놀로지 | 가상현실 시스템용 글러브 |
| KR20200131615A (ko) | 2019-05-14 | 2020-11-24 | (주) 풀다이브테크놀로지 | 가상현실 촉감 전달 글러브의 위치측정장치 |
| KR20200131637A (ko) | 2019-05-14 | 2020-11-24 | (주) 풀다이브테크놀로지 | 가상 현실 시스템의 피드백 장치 |
| KR20200131596A (ko) | 2019-05-14 | 2020-11-24 | (주) 풀다이브테크놀로지 | 가상현실 반력 제공장치 |
| KR20200131601A (ko) | 2019-05-14 | 2020-11-24 | (주) 풀다이브테크놀로지 | 가상 현실 글러브의 반력 제어 액츄에이터 |
| KR20200131647A (ko) | 2019-05-14 | 2020-11-24 | (주) 풀다이브테크놀로지 | 가상현실 촉감 전달 장치 |
| KR20200131591A (ko) | 2019-05-14 | 2020-11-24 | (주) 풀다이브테크놀로지 | 가상현실 촉감 전달 장치 |
| KR20200131587A (ko) | 2019-05-14 | 2020-11-24 | (주) 풀다이브테크놀로지 | 가상현실 촉감 전달 글러브 |
| KR20220153396A (ko) * | 2021-05-11 | 2022-11-18 | 삼성전자주식회사 | Ar 원격 렌더링 프로세스를 위한 방법 및 장치 |
| CN114770571B (zh) * | 2022-04-01 | 2024-01-05 | 苏州大学 | 气动反馈机械手 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003525719A (ja) * | 2000-03-06 | 2003-09-02 | イレヴン エンジニアリング インコーポレイテッド | 無線周波数遠隔ゲームコントローラ |
| WO2009146250A1 (en) * | 2008-05-27 | 2009-12-03 | Qualcomm Incorporated | Method and system for automatically updating avatar status to indicate user's status |
| JP2010086400A (ja) * | 2008-10-01 | 2010-04-15 | Sharp Corp | 情報処理装置、情報処理方法、および情報処理プログラム |
Family Cites Families (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1995020788A1 (en) * | 1994-01-27 | 1995-08-03 | Exos, Inc. | Intelligent remote multimode sense and display system utilizing haptic information compression |
| JP3631151B2 (ja) * | 2000-11-30 | 2005-03-23 | キヤノン株式会社 | 情報処理装置、複合現実感提示装置及びその方法並びに記憶媒体 |
| KR100965881B1 (ko) * | 2003-10-10 | 2010-06-24 | 삼성전자주식회사 | 비디오 데이터 인코딩 시스템 및 디코딩 시스템 |
| US8547401B2 (en) * | 2004-08-19 | 2013-10-01 | Sony Computer Entertainment Inc. | Portable augmented reality device and method |
| US20060262120A1 (en) * | 2005-05-19 | 2006-11-23 | Outland Research, Llc | Ambulatory based human-computer interface |
| US7806777B2 (en) * | 2006-04-18 | 2010-10-05 | World Golf Tour, Inc. | Automatically adapting virtual equipment model |
| US7636645B1 (en) * | 2007-06-18 | 2009-12-22 | Ailive Inc. | Self-contained inertial navigation system for interactive control using movable controllers |
| US20080125224A1 (en) * | 2006-09-26 | 2008-05-29 | Pollatsek David | Method and apparatus for controlling simulated in flight realistic and non realistic object effects by sensing rotation of a hand-held controller |
| US7460725B2 (en) * | 2006-11-09 | 2008-12-02 | Calista Technologies, Inc. | System and method for effectively encoding and decoding electronic information |
| US8675017B2 (en) | 2007-06-26 | 2014-03-18 | Qualcomm Incorporated | Real world gaming framework |
| US8902227B2 (en) * | 2007-09-10 | 2014-12-02 | Sony Computer Entertainment America Llc | Selective interactive mapping of real-world objects to create interactive virtual-world objects |
| US20090221368A1 (en) * | 2007-11-28 | 2009-09-03 | Ailive Inc., | Method and system for creating a shared game space for a networked game |
| US8386918B2 (en) * | 2007-12-06 | 2013-02-26 | International Business Machines Corporation | Rendering of real world objects and interactions into a virtual universe |
| CN101520884A (zh) * | 2008-02-29 | 2009-09-02 | 国际商业机器公司 | 获取和回放虚拟世界中发生的事件的方法和系统 |
| CN101639974B (zh) * | 2008-07-31 | 2011-06-22 | 鸿富锦精密工业（深圳）有限公司 | 遥控器、电视系统及利用电视系统进行游戏的方法 |
| US20100268745A1 (en) * | 2009-04-16 | 2010-10-21 | Bum-Suk Choi | Method and apparatus for representing sensory effects using sensory device capability metadata |
| US8448153B1 (en) * | 2009-10-29 | 2013-05-21 | Ning Wang | Encoding data and metadata for run-time checking of computer code and data serialization |
-
2010
- 2010-04-14 KR KR1020100034125A patent/KR101677718B1/ko active IP Right Grant
-
2011
- 2011-04-06 JP JP2013504804A patent/JP5838196B2/ja active Active
- 2011-04-06 CN CN201180018544.5A patent/CN102869415B/zh active Active
- 2011-04-06 CN CN201410588651.7A patent/CN104391638B/zh active Active
- 2011-04-06 EP EP11769008.1A patent/EP2559462A4/en not_active Ceased
- 2011-04-06 WO PCT/KR2011/002407 patent/WO2011129542A2/ko active Application Filing
- 2011-04-06 US US13/640,658 patent/US9612737B2/en active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003525719A (ja) * | 2000-03-06 | 2003-09-02 | イレヴン エンジニアリング インコーポレイテッド | 無線周波数遠隔ゲームコントローラ |
| WO2009146250A1 (en) * | 2008-05-27 | 2009-12-03 | Qualcomm Incorporated | Method and system for automatically updating avatar status to indicate user's status |
| JP2010086400A (ja) * | 2008-10-01 | 2010-04-15 | Sharp Corp | 情報処理装置、情報処理方法、および情報処理プログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| CN104391638B (zh) | 2018-05-08 |
| KR101677718B1 (ko) | 2016-12-06 |
| CN104391638A (zh) | 2015-03-04 |
| US9612737B2 (en) | 2017-04-04 |
| EP2559462A2 (en) | 2013-02-20 |
| EP2559462A4 (en) | 2017-05-31 |
| WO2011129542A2 (ko) | 2011-10-20 |
| US20130088424A1 (en) | 2013-04-11 |
| KR20110114793A (ko) | 2011-10-20 |
| CN102869415A (zh) | 2013-01-09 |
| JP5838196B2 (ja) | 2016-01-06 |
| WO2011129542A3 (ko) | 2012-02-02 |
| CN102869415B (zh) | 2014-12-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5838196B2 (ja) | 仮想世界の情報処理装置及び方法 | |
| JP6216512B2 (ja) | 仮想世界処理装置および方法 | |
| US10529197B2 (en) | Offline haptic conversion system | |
| US20120239396A1 (en) | Multimodal remote control | |
| US20050233859A1 (en) | Electronic apparatus, input device, and input method | |
| JP2016026342A (ja) | 仮想世界処理装置及び方法 | |
| JP2008516478A (ja) | データストリーム内のデータを認識して処理するシステム及び方法 | |
| KR20110111781A (ko) | 가상 세계 처리 장치 및 방법 | |
| EP2193427A2 (en) | Platform independent communication protocol | |
| KR101686139B1 (ko) | 가상 세계 처리 장치 및 방법 | |
| WO2021205742A1 (ja) | 情報処理装置及び情報処理方法、並びにコンピュータプログラム | |
| CN108550088A (zh) | 基于虚拟现实的虚拟旅游管理方法和系统 | |
| CN107071541A (zh) | 用于外围上下文管理的方法和设备 | |
| KR20160133305A (ko) | 제스쳐 인식 방법, 컴퓨팅 장치 및 제어 장치 | |
| Sivakumar et al. | Virtual vision architecture for VIP in ubiquitous computing | |
| Alam et al. | Designing and implementation of a wireless gesture controlled robot for disabled and elderly people | |
| US20080186220A1 (en) | Terminal apparatus, electronic apparatus and multi-byte character code transmission system | |
| CN110720089B (zh) | 由用户的物理环境所触发的空间音频 | |
| KR101211622B1 (ko) | 햅틱 피드백 생성장치, 햅틱 피드백 제공장치, 햅틱 피드백 제공방법, 이를 이용한 휴대용 기기 및 그 기록매체 | |
| KR101986608B1 (ko) | 가상 세계 처리 장치 및 방법 | |
| Son et al. | Proposal of Descriptive Approach for XR Device Sensor Data Handling and Compatibility | |
| KR20070050283A (ko) | 지능형 서비스 로봇 및 지능형 서비스 로봇의 음성 데이터전송 방법 | |
| KR20110108060A (ko) | 가상 세계 처리 장치 및 방법 | |
| KR101748194B1 (ko) | 통신 시스템에서 멀티미디어 서비스 제공 시스템 및 방법 | |
| Farella | Ambient Intelligence, Smart Objects and Sensor Networks: Practical Experiences |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140213 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150114 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150120 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150420 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150519 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150819 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20151013 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20151109 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5838196 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |