CN103477365B - 信息处理装置、服务器装置以及信息处理方法 - Google Patents

信息处理装置、服务器装置以及信息处理方法 Download PDF

Info

Publication number
CN103477365B
CN103477365B CN201380001030.8A CN201380001030A CN103477365B CN 103477365 B CN103477365 B CN 103477365B CN 201380001030 A CN201380001030 A CN 201380001030A CN 103477365 B CN103477365 B CN 103477365B
Authority
CN
China
Prior art keywords
information
group
reference point
object management
virtual object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201380001030.8A
Other languages
English (en)
Other versions
CN103477365A (zh
Inventor
西川敬之
横山亮
早田启介
高桥正树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Publication of CN103477365A publication Critical patent/CN103477365A/zh
Application granted granted Critical
Publication of CN103477365B publication Critical patent/CN103477365B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/216Input arrangements for video game devices characterised by their sensors, purposes or types using geographical information, e.g. location of the game device or player using GPS
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/52Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525Changing parameters of virtual cameras
    • A63F13/5258Changing parameters of virtual cameras by dynamically adapting the position of the virtual camera to keep a game object or game character in its viewing frustum, e.g. for tracking a character or a ball
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1087Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
    • A63F2300/1093Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera using visible light
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/20Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of the game platform
    • A63F2300/205Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of the game platform for detecting the geographical location of the game platform
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/303Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device for displaying additional data, e.g. simulating a Head Up Display
    • A63F2300/306Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device for displaying additional data, e.g. simulating a Head Up Display for displaying a marker associated to an object or location in the game field
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/50Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers
    • A63F2300/55Details of game data or player data management
    • A63F2300/5546Details of game data or player data management using player registration data, e.g. identification, account, preferences, game history
    • A63F2300/5573Details of game data or player data management using player registration data, e.g. identification, account, preferences, game history player location
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/66Methods for processing data by generating or executing the game program for rendering three dimensional images
    • A63F2300/6661Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera
    • A63F2300/6684Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera by dynamically adapting its position to keep a game object in its viewing frustrum, e.g. for tracking a character or a ball
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/69Involving elements of the real world in the game world, e.g. measurement in live races, real video

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Environmental & Geological Engineering (AREA)
  • Processing Or Creating Images (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供当在预先共享相互不同的增强现实空间的多个组之间将增强现实空间共享时,能够迅速地开始共享的信息处理装置。该装置中,虚拟对象管理单元(104)对与本装置所属的组中共享的增强现实空间所配置的虚拟对象有关的、本装置的虚拟对象管理信息进行管理。通信单元(107)从属于其他组的其他信息处理装置接收与在其他组中共享的增强现实空间所配置的虚拟对象有关的、其他装置的虚拟对象管理信息。参照点设定单元(103)基于本装置的虚拟对象管理信息和其他装置的虚拟对象管理信息,设定其他组与本装置所属的组共同利用的共同参照点。

Description

信息处理装置、服务器装置以及信息处理方法
技术领域
本发明涉及通过使用增强现实技术将计算机图形重叠于现实空间的图像进行显示的信息处理装置、服务器装置、信息处理方法以及程序。
背景技术
近年来,作为增强现实(AR:Augmented Reality)技术的一例,开展如下的技术:对利用摄像机拍摄到的现实空间的图像重叠计算机图形(ComputerGraphics:以下称为CG)进行显示。即,将利用CG描绘的对象(object)(以下称为虚拟对象)配置在与现实空间的位置建立了关系的虚拟空间内,从而以与用户的视点一致的方式在现实空间的图像上重叠显示。由此,用户能够感觉到虚拟对象犹如存在于现实空间。以下,将与现实空间的位置建立有关系并配置虚拟对象的虚拟空间称为“增强现实空间”。
例如在专利文献1中公开了增强现实技术中多个用户共享增强现实空间的技术。在专利文献1中,公开了用于将作为构建增强现实空间时的基准的参照点的位置信息在多个用户之间共享的技术(以下,称为共享过程)。该专利文献1的技术能够形成用户的组,该用户共享基于规定的参照点而构建的增强现实空间。
在专利文献1的技术中,假定了通过汇集多个所形成的组,属于各组的所有用户共享增强现实空间。例如设为,属于家族A的多个用户在增强现实空间A上共享了虚拟宠物A。另一方面,属于家族B的多个用户在增强现实空间B上共享着虚拟宠物B。这种情况下,可以考虑如下的利用方法:属于家族A和家族B的全部用户共享虚拟宠物A和虚拟宠物B。
现有技术文献
专利文献
专利文献1:美国专利申请公开第2011/0216002号说明书
发明内容
发明要解决的问题
但是,为了如上所述,在属于不同组的全部用户之间共享各组的虚拟对象,各用户需要将专利文献1所公开的共享过程进行与希望共享的组的数相同的次数。因此,专利文献1公开的技术中存在以下的问题:不仅是用户进行的操作要增加,用户使用的信息处理装置的处理也花费时间,因此无法迅速地开始共享。
本发明的目的是实现在属于不同组的全部用户之间共享各组的虚拟对象时,能够迅速地开始共享。
解决问题的方案
本发明一形态的信息处理装置属于共享增强现实空间的组,该增强现实空间是基于规定的参照点构建的,且与现实空间的位置建立关系并配置虚拟对象,该信息处理装置包括:虚拟对象管理单元,其对本装置的虚拟对象管理信息进行管理,该本装置的虚拟对象管理信息包含与在本装置所属的组中共享的增强现实空间所配置的虚拟对象有关的信息;图像获取单元,其从摄像装置获取现实空间的图像、以及属于其他组且与本装置共享扩展现实空间的其他信息处理装置的图像;其他终端检测单元,其基于从所述图像获取单元所获取的所述其他信息处理装置的图像,获取所述其他信息处理装置相对于本装置的相对位置;通信单元,其从属于所述其他组的所述其他信息处理装置接收其他装置的虚拟对象管理信息,该其他装置的虚拟对象管理信息包含与在所述其他组中共享的增强现实空间所配置的虚拟对象有关的信息;以及参照点设定单元,其基于所述本装置的虚拟对象管理信息和所述其他装置的虚拟对象管理信息,设定在所述其他组与所述本装置所属的组之间共同利用的共同参照点,所述共同参照点的设定在所述本装置所属的组的代表装置与所述其他组的代表装置之间进行,所述共同参照点基于所述其他信息处理装置的相对位置来选择。
本发明一形态的服务器装置与属于共享增强现实空间的组的多个信息处理装置通过网络进行通信,该增强现实空间是基于规定的参照点构建的,且与现实空间的位置建立关系并配置虚拟对象,该服务器装置包括:虚拟对象管理单元,对第一虚拟对象管理信息和第二虚拟对象管理信息进行管理,该第一虚拟对象管理信息包含与在第一信息处理装置所属的第一组中共享的第一增强现实空间所配置的虚拟对象有关的信息,该第二虚拟对象管理信息包含与在第二信息处理装置所属的第二组中共享的第二增强现实空间所配置的虚拟对象有关的信息;以及参照点设定单元,基于所述第一虚拟对象管理信息以及所述第二虚拟对象管理信息,设定在所述第一组与所述第二组之间共同利用的共同参照点,所述共同参照点的设定在所述第一组的代表装置与所述第二组的代表装置之间进行。
本发明一形态的信息处理方法是属于共享增强现实空间的组的信息处理装置进行的信息处理方法,该增强现实空间是基于规定的参照点构建的,且与现实空间的位置建立关系并配置虚拟对象,该信息处理方法包括:对本装置的虚拟对象管理信息进行管理的步骤,该本装置的虚拟对象管理信息包含与在本装置所属的组中共享的增强现实空间所配置的虚拟对象有关的信息;从属于其他组的其他信息处理装置接收其他装置的虚拟对象管理信息的步骤,该其他装置的虚拟对象管理信息包含与在所述其他组中共享的增强现实空间所配置的虚拟对象有关的信息;以及基于所述本装置的虚拟对象管理信息和所述其他装置的虚拟对象管理信息,设定在所述其他组与所述本装置所属的组之间共同利用的共同参照点的步骤,所述共同参照点的设定在所述本装置所属的组的代表装置与所述其他组的代表装置之间进行。
发明的效果
根据本发明,当在属于不同组的全部用户之间共享各组的虚拟对象时,能够迅速地开始共享。
附图说明
图1是表示本发明实施方式1的信息处理装置的结构例的方框图。
图2A是表示一例本发明实施方式1的虚拟对象管理信息的图。
图2B是表示一例本发明实施方式1的组管理信息的图。
图2C是表示一例本发明实施方式1的本装置管理信息的图。
图3是用于说明本发明实施方式1的信息处理装置在两个组之间共享增强现实空间的动作的图。
图4是表示本发明实施方式1的信息处理装置在两个组之间共享增强现实空间的处理的时序图。
图5是表示本发明实施方式1的信息处理装置设定在两个组之间共同利用的参照点的处理的时序图。
图6是表示本发明实施方式1的信息处理装置将空间信息进行共享的处理的时序图。
图7是表示本发明实施方式1的信息处理装置将空间信息进行共享的处理的时序图。
图8是表示本发明实施方式1的信息处理装置将空间信息进行共享的处理的时序图。
图9是用于说明表示本发明实施方式2的信息处理装置的动作的图。
图10是表示本发明实施方式1和2的信息处理装置结束增强现实空间的共享的处理的时序图。
图11是表示本发明实施方式4的信息处理装置和服务器装置的结构例的方框图。
图12A是表示一例本发明实施方式4的组管理信息的图。
图12B是表示一例本发明实施方式4的共享组管理信息的图。
图13是用于说明本发明实施方式4的信息处理装置在两个组之间将增强现实空间进行共享的动作的图。
图14是表示本发明实施方式4的信息处理装置在两个组之间共享增强现实空间的处理的时序图。
标号说明
100、211、212、213、311、312、911、912、1011、1012 信息处理装置
101 图像获得单元
102 其他终端检测单元
103 参照点设定单元
104 虚拟对象管理单元
105 组管理单元
106 本终端管理单元
107 通信单元
108 位置姿势测量单元
109 自己位置估计单元
110 坐标系生成单元
111 输出图像制成单元
112 图像输出单元
200、300、900、1000 预先共享增强现实空间的组
201、301、901、1001 参照点
221、222、223、321、322、921、922、1021 虚拟对象
1300 服务器
1301 组管理单元
1302 共享组管理单元
1303 虚拟对象管理单元
1304 参照点设定单元
1305 坐标系生成单元
1306 通信单元
具体实施方式
以下,参照附图详细地说明本发明的实施方式。
(实施方式1)
首先,说明本实施方式的信息处理装置100的结构。
<信息处理装置的构成>
图1是表示本实施方式的信息处理装置100的结构的方框图。如图1所示,信息处理装置100包括图像获得单元101、其他终端检测单元102、参照点设定单元103、虚拟对象管理单元104、组管理单元105、本终端管理单元106、通信单元107、位置姿势测量单元108、自己位置估计单元109、坐标系生成单元110、输出图像制成单元111以及图像输出单元112。
图像获得单元101获得现实空间的图像。所谓现实空间的图像是通过摄像机等摄像装置拍摄到的风景等的图像。
其他终端检测单元102获得共享增强现实空间的其他信息处理装置的相对于本装置的相对位置。而且,其他终端检测单元102生成表示所获得的相对位置的相对位置信息。用于获得上述相对位置的方法有以下的方法。作为相对位置的获得方法,例如从由图像获得单元101获得的图像中检测其他信息处理装置的图像,并确定在现实空间上的位置。另外,相对位置的获得方法中,使用能够测量现实空间上的纵深信息的深度相机作为摄像装置。
参照点设定单元103从虚拟对象管理单元104获取各组正在管理的虚拟对象的数。而且,参照点设定单元103基于所获得的虚拟对象的数,设定在共享增强现实空间的多个组之间共同利用的参照点(以下称为共同参照点)。并且,参照点设定单元103基于通过后述的通信单元107从其他信息处理装置获得的参照点设定信息设定共同参照点。此外,参照点设定单元103生成包含其他终端检测单元102生成的相对位置信息和后述的自己位置估计单元109生成的装置位置信息的参照点设定信息。
虚拟对象管理单元104对本装置所生成的虚拟对象管理信息、以及通过通信单元107所获得的其他信息处理装置的虚拟对象管理信息进行管理。
<虚拟对象管理信息的说明>
在此说明虚拟对象管理信息。图2A是表示一例虚拟对象管理信息的图。如图2A所示,虚拟对象管理信息以表格形式被管理,作为记录具有虚拟对象ID400、形状数据401、管理装置ID402、管理组ID403以及位置信息404。
虚拟对象ID400是对每个虚拟对象分配的特有的ID。形状数据401是表示虚拟对象的形状的数据。管理装置ID402是制成虚拟对象的信息处理装置的ID。管理组ID403是信息处理装置所属的组的ID。位置信息404是表示增强现实空间的空间坐标系下的虚拟对象的位置的信息。空间坐标系由坐标系生成单元110生成,并由X轴、Y轴、Z轴定义。
虚拟对象管理单元104执行虚拟对象的生成、删除、移动等,对本装置持有的虚拟对象管理信息进行更新。另外,虚拟对象管理单元104与属于本装置所属的组以及共享增强现实空间的其他组的其他信息处理装置,共享虚拟对象管理信息。虚拟对象管理单元104基于后述的组管理信息,对属于组的其他信息处理装置通知虚拟对象管理信息的更新内容,以使各信息处理装置之间共享虚拟对象管理信息。
此外,图2A所示的虚拟对象管理信息表示在预先共享相互不同的增强现实空间的组200和组300之间,进一步将增强现实空间共享后的状态。在共享前,属于组200的信息处理装置只持有虚拟对象管理信息a,属于组300的信息处理装置只持有虚拟对象管理信息b。
组管理单元105对本装置所属的组的组管理信息、以及正在共享增强现实空间的其他组的组管理信息进行管理。此外,组管理单元105通过通信单元107获得其他组的组管理信息。
<组管理信息的说明>
在此说明组管理信息。图2B是表示一例组管理信息的图。如图2B所示,组管理信息以表格形式被管理,作为记录具有组ID405以及信息处理装置数406。
组ID405是对每个组分配的特有的ID。信息处理装置数406是属于组的信息处理装置的数。在图2B的例中表示,属于组200的信息处理装置数为3个,属于组300的信息处理装置数为2个。
在本装置新加入了组、或者从组脱离的情况下,组管理单元105对本装置所属的组的信息处理装置数406进行更新。另外,组管理单元105对属于本装置所属的组以及正在共享增强现实空间的组的其他信息处理装置,通知组管理信息的更新内容。由此,组管理单元105在属于本装置所属的组和正在共享增强现实空间的组的信息处理装置之间,使组管理信息同步。
此外,图2B所示的组管理信息表示在预先共享相互不同的增强现实空间的组200和组300之间,进一步将增强现实空间共享后的状态。在共享前,属于组200的信息处理装置只持有组管理信息c,属于组300的信息处理装置只持有组管理信息d。
本终端管理单元106对本装置管理信息进行管理。图2C是表示一例本装置管理信息的图。如图2C所示,本装置管理信息以表格形式被管理,作为记录具有信息处理装置ID407以及所属组ID408。
信息处理装置ID407是对每个信息处理装置分配的特有的ID。所属组ID408是信息处理装置所属的组的ID。在图2C的例中表示,信息处理装置211属于组200。
通信单元107在与其他信息处理装置之间,将参照点设定信息、虚拟对象管理信息、以及组管理信息进行发送和接收。
位置姿势测量单元108对本装置的位置姿势的变化量进行测量。为了位置姿势的变化量的测量,使用加速度传感器、磁传感器、陀螺传感器等。而且,位置姿势测量单元108生成表示测量到的位置姿势的变化量的位置姿势变化量信息。
自己位置估计单元109基于位置姿势测量单元108所生成的位置姿势变化量信息和坐标系生成单元110所生成的空间坐标系信息,估计当前的本装置相对于参照点的位置。而且,自己位置估计单元109生成表示当前的本装置的相对于参照点的位置的装置位置信息。
坐标系生成单元110基于参照点设定单元103所生成的参照点设定信息,生成以所设定的参照点为原点的增强现实空间的空间坐标系。而且,坐标系生成单元110生成表示所生成的增强现实空间的空间坐标系的空间坐标系信息。
输出图像制成单元111基于自己位置估计单元109所生成的本装置位置信息、坐标系生成单元110所生成的空间坐标系信息以及从虚拟对象管理单元104获得的虚拟对象管理信息,生成要重叠显示的CG、即虚拟对象。而且,输出图像制成单元111制成将所生成的虚拟对象重叠于从图像获得单元101获得的现实空间的图像后的图像。
图像输出单元112将输出图像制成单元111所制成的图像输出到信息处理装置100具备的显示器等。
这样的信息处理装置100能够获得共享不同的增强现实空间的组的虚拟对象管理信息和组管理信息。其结果,信息处理装置100能够共享不同组的增强现实空间以及虚拟对象。
以上,说明了本实施方式的信息处理装置100的结构。
下面,分别参照图3~图8说明在预先共享相互不同的增强现实空间的多个组之间,进一步共享增强现实空间时的动作例。
<多个组的结构>
首先,使用图3说明多个组的结构。
图3是表示预先共享相互不同的增强现实空间的组200和组300的示意图。
组200由共享着以参照点201为空间坐标原点的增强现实空间的用户构成。构成组200的各用户分别具有信息处理装置211、212、213。这些信息处理装置是上述的信息处理装置100。而且,各信息处理装置的各用户在增强现实空间中共享虚拟对象221、222、223。
组300由信息处理装置311、312构成,它们共享着以参照点301为空间坐标原点的增强现实空间。各用户分别具有构成组300的信息处理装置311、312。这些信息处理装置是上述的信息处理装置100。而且,各用户使用各自的信息处理装置共享着虚拟对象321、322。
此外,在图3的例中,为了便于说明,假设组200的信息处理装置为3个,虚拟对象为3个进行说明。并且,假设组300的信息处理装置为2个,虚拟对象为2个进行说明。但信息处理装置数以及虚拟对象数各自的数不限于此。
以上,结束对于多个组的结构的说明。
<信息处理装置的动作说明>
下面,使用图4说明在上述图3的结构中,组200和组300进一步共享增强现实空间时的整体的动作例。
图4是表示分别属于组200和组300的各信息处理装置的动作例的时序图。这里,作为例子,信息处理装置211的用户和信息处理装置311的用户协商尝试进一步共享增强现实空间。
在步骤S401中,组200和组300的分别作为代表的信息处理装置彼此进行参照点设定处理。参照点设定处理是设定在组200和组300的双方共同利用的参照点(以下,称为共同参照点)的处理。这里,作为组200的代表的装置是信息处理装置211,作为组300的代表的装置是信息处理装置311。以下,将代表组的装置称为“代表装置”。
这里,从参照点201和参照点301中的任意一个设定共同参照点。此外,在后面使用图5说明步骤S401的参照点设定处理的细节。
此外,这里分别将作为组200和组300的代表的信息处理装置设为信息处理装置211、信息处理装置311,但是,不限于此,各组内的哪个信息处理装置作为代表装置都可以。
在步骤S402中,信息处理装置211和信息处理装置311进行空间信息共享化处理。空间信息共享化处理是信息处理装置相互交换并共享彼此的空间信息的处理。通过共享空间信息,各信息处理装置能够共享增强现实空间。空间信息是后述的虚拟对象管理信息和组管理信息。此外,以下将各组的代表装置彼此进行的空间信息共享化处理称为“空间信息共享化处理1”。在后面使用图6说明该空间信息共享化处理1的细节。
在上述的步骤S402的空间信息共享化处理1之后,对每个组进行空间信息共享化处理。即,在组200和组300的每个组中,各信息处理装置彼此进行空间信息共享化处理。根据在步骤S401中将参照点201或参照点301的哪个参照点设定为共同参照点,该每个组的空间信息共享化处理在每个组中其内容不同。这里假设在步骤401中将组200的参照点201设定为共同参照点。因此,组200无需改变参照点,组300需要改变参照点。此外,以下将不改变参照点的组进行的空间信息共享化处理称为“空间信息共享化处理2”。另一方面,以下将改变参照点的组进行的空间信息共享化处理称为“空间信息共享化处理3”。
在步骤S403a中,在不改变参照点的组200中,信息处理装置211和除此以外的信息处理装置212、213进行空间信息共享处理2。在后面使用图7说明该空间信息共享化处理2的细节。
在步骤S403b中,在改变参照点的组300中,信息处理装置311和除此以外的信息处理装置312进行空间信息共享化处理3。在后面使用图8说明该空间信息共享化处理3的细节。
在多个组之间将增强现实空间共享时,这样的图4所示的动作能够将对每个组设定的参照点共同化为一个。因此,用户无需将专利文献1中记载的共享过程进行与希望共享的组的数相同的次数。因此,本实施方式的共享过程不会增加用户进行的操作,用户使用的信息处理装置的处理也不花费时间。其结果,在本实施方式中,能够在属于不同组的全部用户之间,迅速地开始共享各组的虚拟对象。
以上,结束对于组200和组300进一步共享增强现实空间时的整体的动作例的说明。
<参照点设定处理的说明>
下面,使用图5说明在各组的代表装置之间进行的参照点设定处理的细节。
图5是表示在信息处理装置211和信息处理装置311之间进行的共同参照点设定处理的时序图。
在步骤S501中,信息处理装置211获得信息处理装置311的相对于信息处理装置211的相对位置,生成表示该相对位置的相对位置信息。作为相对位置的获得方法,例如,信息处理装置211的用户使用信息处理装置211具备的摄像装置拍摄信息处理装置311,根据拍摄到的图像获得相对位置。
在步骤S502b中,信息处理装置311将在组300中正在管理的虚拟对象的数(以下,称为管理对象数)通知给信息处理装置211。信息处理装置311根据本装置所持有的虚拟对象管理信息把握组300的管理对象数。
在步骤S502a中,信息处理装置211从信息处理装置311获得管理对象数。
在步骤S503中,信息处理装置211对在步骤S502a中获得的组300的管理对象数和组200的管理对象数进行比较。信息处理装置211根据本装置所持有的虚拟对象管理信息把握组200的管理对象数。
在步骤S504中,信息处理装置211将作为步骤S503的比较结果管理对象数较多的组中设定的参照点设定为共同参照点。在图3的例子中,组200的管理对象数是3个,组300的管理对象数是2个。因此,信息处理装置211将管理对象数较多的组200中设定的参照点201设定为共同参照点。
在步骤S505a中,信息处理装置211生成与设定为共同参照点的参照点201有关的参照点设定信息,通知给信息处理装置311。该参照点设定信息包含步骤S501中生成的相对位置信息、以及信息处理装置211的相对于参照点201的装置位置信息(以下,称为装置位置信息A)。此外,这里使用的装置位置信息A是在信息处理装置211的自己位置估计单元109中预先生成的信息。在该步骤S505a之后,信息处理装置211进至图6所示的流程。
在步骤S505b中,信息处理装置311从信息处理装置211获得参照点设定信息。在该步骤S505b之后,信息处理装置311进至图6所示的流程。
在如在图4中说明过的那样将参照点共同化为一个的情况下,根据组不同,需要再设定参照点。而且,属于需要再设定参照点的组的信息处理装置,必须将在该组中正在管理的全部的虚拟对象的位置信息改变为相对于再设定的参照点的位置信息。因此,信息处理装置中,更新虚拟对象的位置信息所需的处理量多。
因此,图5所示的动作中,在将对每个组所设定的参照点共同化为一个时,比较各组的管理对象数,并将该数较多的组所利用的参照点设定为共同参照点。由此,在管理对象数多的组中,无需重新设定参照点,只是管理对象数较少的组基于新设定的参照点改变虚拟对象的位置信息。其结果,能够抑制更新虚拟对象的位置信息所需的处理量。此外,这里所说的虚拟对象的位置信息例如是图2A所示的位置信息404。
此外,在上述图5的说明中,从信息处理装置211开始进行处理,但是也可以从信息处理装置311开始进行处理。此时,调换上述的信息处理装置211的处理和信息处理装置311的处理即可。
另外,在上述图5的说明中假设了信息处理装置211将参照点201设定为共同参照点的情况,但是,也有时将参照点301设定为共同参照点。以下说明这种情况。首先,信息处理装置211的参照点设定单元103生成包含了将参照点301设定为共同参照点的通知的设定通知信息,通过通信单元107发送到信息处理装置311。信息处理装置311的参照点设定单元103在通过通信单元107接收到设定通知信息后,生成有关参照点301的参照点设定信息。然后,信息处理装置311的参照点设定单元103将所生成的有关参照点301的参照点设定信息通过通信单元107发送到信息处理装置211。该有关参照点301的参照点设定信息包含表示信息处理装置311的相对于参照点301的位置的装置位置信息。之后,信息处理装置211进行与后述的图6的步骤S602~S605相同的处理。此时,信息处理装置211使用有关参照点301的参照点设定信息所包含的、信息处理装置311的相对于参照点301的装置位置信息。由此,信息处理装置211的虚拟对象管理单元104能够以参照点301为基准更新预先持有的虚拟对象管理信息。之后,信息处理装置211进行与后述的图8的步骤S801a相同的处理。
以上,结束对于在各组的代表装置之间进行的参照点设定处理的细节的说明。
<空间信息共享化处理1的说明>
下面,使用图6说明在各组的代表装置之间进行的空间信息共享化处理1的细节。
图6是表示在信息处理装置211和信息处理装置311之间进行的空间信息共享化处理的时序图。
在步骤S601a中,信息处理装置211将本装置所持有的组管理信息发送到信息处理装置311。这里发送的信息是图2B所示的组管理信息c。
在步骤S601b中,信息处理装置311将本装置所持有的组管理信息发送到信息处理装置211。这里发送的信息是图2B所示的组管理信息d。
这样,信息处理装置211和信息处理装置311交换各自所属的组的组管理信息。而且,信息处理装置211和信息处理装置311分别对交换之前组管理单元105所管理的组管理信息,追加交换得到的组管理信息。其结果,信息处理装置211和信息处理装置311共享图2B所示的组管理信息。
在步骤S602中,信息处理装置311基于在图5的步骤S505b中获得的参照点设定信息,将信息处理装置311的位置更新为以参照点201为原点的坐标。如上所述,这里使用的参照点设定信息包含相对位置信息和装置位置信息A。
在步骤S603中,信息处理装置311基于相对位置信息和相对于参照点301的装置位置信息(以下,称为装置位置信息B),将参照点301的位置更新为以参照点201为原点的坐标。这里,信息处理装置311生成表示参照点301的相对于参照点201的位置的参照点位置信息。由参照点设定单元103进行该生成。此外,这里使用的装置位置信息B是在信息处理装置311的自己位置估计单元109中预先生成的信息。
在步骤S604中,信息处理装置311基于所生成的参照点位置信息,更新在组300中使用的增强现实空间的空间坐标系。即,信息处理装置311从以参照点301为原点的空间坐标系变换为以参照点201为原点的空间坐标系。这里所说的空间坐标系的变换是指将由X轴、Y轴、Z轴定义的空间的方位从参照点301改变为参照点201。
在步骤S605中,信息处理装置311基于所生成的参照点位置信息,将组300正在管理的全部的虚拟对象的位置信息(图2A所示的位置信息404)更新为以参照点201为原点的坐标。
在步骤S606a中,信息处理装置211将本装置所持有的虚拟对象管理信息发送到信息处理装置311。这里发送的信息是图2A所示的虚拟对象管理信息a。
在步骤S606b中,信息处理装置311将本装置所持有的组管理信息发送到信息处理装置211。这里发送的信息是图2A所示的虚拟对象管理信息b。
这样,信息处理装置211和信息处理装置311交换有关各自所属的组中正在管理的虚拟对象的虚拟对象管理信息。而且,信息处理装置211和信息处理装置311对每个交换之前虚拟对象管理单元104管理的虚拟对象管理信息追加交换得到的虚拟对象管理信息。其结果,信息处理装置211和信息处理装置311都共享图2A所示的虚拟对象管理信息。
完成了这样的虚拟对象管理信息的交换后,信息处理装置211进至图7所示的流程,信息处理装置311进至图8所示的流程。
此外,当在图5的步骤S504中参照点301被设定为共同参照点的情况下,在图6中调换信息处理装置211的处理和信息处理装置311的处理即可。
以上,结束对于在各组的代表装置之间进行的空间信息共享化处理1的细节的说明。
<空间信息共享化处理2的说明>
下面,使用图7说明在不改变参照点的组200中进行的空间信息共享化处理2的细节。
图7是表示在信息处理装置211和信息处理装置212、213之间进行的空间信息共享化处理的时序图。这里,作为例子,说明信息处理装置211和信息处理装置212之间的处理,但是信息处理装置211和213之间的处理内容也相同。
在步骤S701b中,信息处理装置211将通过与信息处理装置311进行信息交换而完成更新的组管理信息和虚拟对象的管理信息通知给信息处理装置212。这里所通知的信息是图2A所示的虚拟对象管理信息和图2B所示的组管理信息。
在步骤S701a中,信息处理装置212从信息处理装置211获得组管理信息以及虚拟对象的管理信息。
在步骤S702中,信息处理装置212将组管理单元105正在管理的组管理信息更新为在步骤S701a中获得的组管理信息。由此,信息处理装置212共享与信息处理装置211所持有的组管理信息相同的组管理信息。
在步骤S703中,信息处理装置212将虚拟对象管理单元104正在管理的虚拟对象管理信息更新为在步骤S701a中获得的虚拟对象管理信息(步骤S703)。由此,信息处理装置212共享与信息处理装置211所持有的虚拟对象管理信息相同的虚拟对象管理信息。
结束了图7的流程后,属于组200的各信息处理装置结束从图5开始的一系列的处理。即,属于组200的信息处理装置211、212、213开始共享组300的各信息处理装置正在管理的空间信息。由此,信息处理装置211、212、213开始共享在组300中预先共享的增强现实空间和虚拟对象。其结果,信息处理装置211、212、213的各用户可以通过各自的信息处理装置目视确认在组200和组300中预先共享的增强现实空间及虚拟对象的两者。
以上,结束对于在不改变参照点的组200中进行的空间信息共享化处理2的细节的说明。
<空间信息共享化处理3的说明>
下面,使用图8说明在改变参照点的组300中进行的空间信息共享化处理3的细节。
图8是表示在信息处理装置311和信息处理装置312之间进行的空间信息共享化处理的时序图。
在步骤S801a中,信息处理装置311将通过与信息处理装置211之间的信息交换而完成了更新的组管理信息和虚拟对象的管理信息通知给信息处理装置312。进而,信息处理装置311将从信息处理装置211获得的参照点设定信息通知给信息处理装置312。这里所通知的信息是图2A所示的虚拟对象管理信息和图2B所示的组管理信息。另外,这里所通知的参照点设定信息中,除了相对位置信息和装置位置信息A以外,还包含在图6的步骤S603中所设定的、参照点301的相对于参照点201的参照点位置信息。
在步骤S801b中,信息处理装置312从信息处理装置311获得组管理信息、虚拟对象的管理信息以及参照点设定信息。
在步骤S802中,信息处理装置312将组管理单元105正在管理的组管理信息更新为在步骤S801a中获得的组管理信息。由此,信息处理装置312共享与信息处理装置311所持有的组管理信息相同的组管理信息。
在步骤S803中,信息处理装置312获得在步骤S801a中获得的参照点设定信息所包含的参照点位置信息以及信息处理装置312的相对于参照点301的装置位置信息(以下,称为装置位置信息C)。而且,信息处理装置312基于所获得的参照点位置信息和装置位置信息C、将信息处理装置312的位置更新为以参照点201为原点的坐标。此外,由信息处理装置312的自己位置估计单元109生成这里使用的装置位置信息C。
在步骤S804中,信息处理装置312基于在步骤S801a中获得的参照点设定信息所包含的参照点位置信息,更新增强现实空间的空间坐标系。即,信息处理装置312将在组300中正在使用的增强现实空间的空间坐标系从以参照点301为原点的空间坐标系变换为以参照点201为原点的空间坐标系。该变换是与上述的图6的步骤S604相同的处理。
在步骤S805中,信息处理装置312将虚拟对象管理单元104正在管理的虚拟对象管理信息更新为在步骤S801a中获得的虚拟对象管理信息。由此,信息处理装置312共享与信息处理装置311所持有的虚拟对象管理信息相同的虚拟对象管理信息。
结束了图8的流程后,属于组300的各信息处理装置结束从图5开始的一系列的处理。即,属于组300的信息处理装置311、312开始共享组200的各信息处理装置正在管理的空间信息。由此,信息处理装置311、312开始共享在组200中预先共享的增强现实空间和虚拟对象。其结果,信息处理装置311、312的各用户可以通过各自的信息处理装置目视确认在组300和组200中预先共享的增强现实空间和虚拟对象的两者。
以上,结束对于在改变参照点的组300中进行的空间信息共享化处理3的细节的说明。
在图7和图8的流程之后,属于组200或组300的信息处理装置在重新进行了虚拟对象的制成、删除、移动等时,首先,更新本装置所持有的虚拟对象管理信息。接下来,信息处理装置参照组管理信息,确定作为共享关系而记录的组ID。然后,信息处理装置对于属于所确定的组ID所示的组的信息处理装置,通知虚拟对象管理信息的更新内容。另一方面,接收了该通知的信息处理装置基于被通知的更新内容,更新本装置的虚拟对象管理单元104正在管理的虚拟对象管理信息。
这样,在多个组之间共享增强现实空间时,本实施方式的信息处理装置能够将对每个组设定的参照点共同化为一个。因此,用户无需将专利文献1中记载的共享过程进行与希望共享的组的数相同的次数。因此,在本实施方式中,关于共享过程,不会增加用户进行的操作,用户使用的信息处理装置的处理也不花费时间。其结果,在本实施方式中,能够在属于不同组的全部用户之间,迅速地开始共享各组的虚拟对象。
另外,本实施方式的信息处理装置将进行增强现实空间的共享两个组正在管理的虚拟对象的数、即管理对象数进行比较。而且,信息处理装置将作为比较结果管理对象数较多的组中使用的参照点设定为在两个组中共同利用的共同参照点。因此,在本实施方式的信息处理装置中,管理对象数较少的组改变参照点。由此,在本实施方式的信息处理装置中,只是属于管理对象数较少的组的信息处理装置基于改变后的参照点,进行改变虚拟对象的位置信息的处理。另一方面,管理对象数较多的组无需改变参照点。因此,属于管理对象数较多的组的信息处理装置不进行改变虚拟对象的位置信息的处理。因此,在本实施方式中,能够抑制伴随参照点的改变的、虚拟对象的位置信息的更新所需的处理量。
(实施方式2)
在实施方式1中说明了在预先没有与其他组共享增强现实空间的单一的组彼此之间,将增强现实空间共享时的动作。在本实施方式中,说明在预先与其他组共享增强现实空间的组彼此之间,将增强现实空间共享时的动作。
<多个组的结构的说明>
首先,使用图9说明多个组的结构。
图9是表示预先共享相互不同的增强现实空间的组200、组300、组900和组1000的示意图。在图9中,对与图2共同的部分附加与图2相同的标号并省略其说明。
如图9所示,在本实施方式中,除了在实施方式1中说明过的组200和组300以外,还存在组900和组1000。作为在实施方式1中说明过的动作的结果,这里的组200和组300共享着以参照点201为共同参照点的增强现实空间。而且,在本实施方式中,作为在实施方式1中说明过的动作的结果,组900和组1000也共享着以参照点901为共同参照点的增强现实空间。
组900由共享着以参照点901为空间坐标原点的增强现实空间的用户构成。构成组900的各用户分别具有信息处理装置911、912。这些信息处理装置是实施方式1中说明的信息处理装置100。而且,各用户使用各自的信息处理装置,在增强现实空间对虚拟对象921、922进行管理。
组1000由如下的用户构成,该用户在与组900共享增强现实空间之前,共享以参照点1001为空间坐标原点的增强现实空间。构成组1000的各用户分别具有信息处理装置1011、1012。这些信息处理装置是实施方式1中说明的信息处理装置100。而且,各用户使用各自的信息处理装置,在增强现实空间对虚拟对象1021进行管理。
此外,为了便于说明,假设组900中信息处理装置为2个,虚拟对象为2个进行说明。并且,假设组1000的信息处理装置为2个,虚拟对象为1个进行说明。但信息处理装置及虚拟对象各自的数不被限定。另外,在图9中,各组分别与一个其他组共享一个增强现实空间。但是,各组将增强现实空间共享的组的数不被限定。
以上,结束对多个组的结构的说明。
下面,说明在上述图9的结构中,组200、组300、组900、组1000共享增强现实空间时的动作例。该动作例与在实施方式1中说明过的两个组之间的动作大致相同。因此,下面,参照图4~图8说明与实施方式1不同的方面。
<整体动作的说明>
首先,参照图4说明本实施方式的整体的动作例。
在代表组200和组300两者的信息处理装置和代表组900和组1000两者的信息处理装置之间实施步骤S401和S402。这里,将组200和组300的代表装置设为信息处理装置211。并且,将组900和组1000的代表装置设为信息处理装置1011。因此,在信息处理装置211和信息处理装置1011之间进行步骤S401和S402。此外,在以下,为了便于说明,将预先处于共享关系的组200和组300合起来称为“共享关系组X”。并且,将预先处于共享关系的组900和组1000合起来称为“共享关系组Y”。
在每个共享关系组中,在代表装置和代表装置以外的所有信息处理装置之间实施步骤S403a和步骤S403b。即,在共享关系组X中,在作为代表装置的信息处理装置211和除此以外的信息处理装置212、213、311、312之间进行步骤S403a或步骤S403b。另外,在共享关系组Y中,在作为代表装置的信息处理装置1011和除此以外的信息处理装置1012、911、912之间,进行步骤S403a或步骤S403b。
<参照点设定处理的说明>
下面,使用图5说明在各组的代表装置之间进行的参照点设定处理的细节。
在图5中,在实施方式1中说明过的信息处理装置311的各步骤,在本实施方式中与信息处理装置1011的各步骤相当。
在步骤S502a中,信息处理装置211从信息处理装置1011获得共享关系组Y的管理对象数。
在步骤S503中,信息处理装置211对在步骤S502a中获得的共享关系组Y的管理对象数和共享关系组X的管理对象数进行比较。信息处理装置211能够根据本装置的虚拟对象管理单元104正在管理的虚拟对象管理信息,把握共享关系组X的管理对象数。
在步骤S504中,信息处理装置211基于管理对象数的比较结果,设定在组200、组300、组900、组1000之间共同利用的共同参照点。也就是说,信息处理装置211将管理对象数较多的组中利用的参照点设定为共同参照点。这里,如图9所示,共享关系组X的管理对象数是5个,而共享关系组Y的管理对象数是3个。因此,信息处理装置211将在共享关系组X中共同利用的参照点201设定为共同参照点。因此,共享关系组X不进行参照点的改变,但是,共享关系组Y进行参照点的改变。
这样,本实施方式与上述的实施方式同样,对共享关系组的管理对象数进行比较,基于其结果,设定全部组中利用的共同参照点。
在步骤S505a中,信息处理装置211生成与作为共同参照点的参照点201有关的参照点设定信息,通知给信息处理装置1011。这里所通知的参照点设定信息与在实施方式1中说明过的内容相同。
在步骤S505a和步骤S505b之后,信息处理装置211和信息处理装置1011进至图6所示的流程。
<空间信息共享化处理1的说明>
下面,使用图6说明在各组的代表装置之间进行的空间信息共享化处理1的细节。
在图6中,在实施方式1中说明过的信息处理装置311的各步骤,在本实施方式中与信息处理装置1011的各步骤相当。
在步骤S601a中,信息处理装置211将本装置所持有的组管理信息发送到信息处理装置1011。如图2B所示,这里所发送的信息是有关共享关系组X的组管理信息。
在步骤S601b中,信息处理装置1011将本装置所持有的组管理信息发送到信息处理装置211。这里所发送的信息是有关共享关系组Y的组管理信息。
这样,各共享关系组的代表装置交换本装置所持有的组管理信息。而且,信息处理装置211和信息处理装置1011分别对交换之前组管理单元105所管理的组管理信息,追加交换得到的组管理信息。其结果,信息处理装置211和信息处理装置1011共享同一组管理信息。
在步骤S606a中,信息处理装置211将本装置所持有的虚拟对象管理信息发送到信息处理装置1011。如图2A所示,这里所发送的信息是有关共享关系组X的虚拟对象管理信息。
在步骤S606b中,信息处理装置1011将本装置所持有的组管理信息发送到信息处理装置211。这里所发送的信息是有关共享关系组Y的虚拟对象管理信息。
这样,各共享关系组的代表装置交换本装置所持有的虚拟对象管理信息。而且,信息处理装置211和信息处理装置1011对每个交换之前虚拟对象管理单元104管理的虚拟对象管理信息追加交换得到的虚拟对象管理信息。其结果,信息处理装置211和信息处理装置1011共享同一虚拟对象管理信息。
在步骤S606a和步骤S606b之后,信息处理装置211进至图7所示的流程,信息处理装置1011进至图8所示的流程。
在不改变参照点的共享关系组X中,信息处理装置211进行空间信息共享化处理2。在图7中,在实施方式1中说明过的信息处理装置212、213的各步骤,与本实施方式的信息处理装置212、213、311、312的各步骤相当。
在改变参照点的共享关系组Y中,信息处理装置1011进行空间信息共享化处理3。在图8中,在实施方式1中说明过的信息处理装置311的各步骤,与本实施方式的信息处理装置1011的各步骤相当。另外,在图8中,信息处理装置312的各步骤与本实施方式的信息处理装置911、912、1012的各步骤相当。
以上,完成了在组200、组300、组900、组1000之间的增强现实空间的共享处理。
这样,在本实施方式中,即使在预先与其他组共享增强现实空间的共享关系组彼此之间进行增强现实空间的共享的情况下,也与实施方式1同样地动作。也就是说,在多个组之间将增强现实空间共享时,信息处理装置能够将对每个组设定的参照点共同化为一个。因此,用户无需将专利文献1中记载的共享过程进行与希望共享的组的数相同的次数。因此,在本实施方式中,关于共享过程,不会增加用户进行的操作,用户使用的信息处理装置的处理也不花费时间。其结果,在本实施方式中,能够在属于不同组的全部用户之间,迅速地开始共享各组的虚拟对象。
另外,信息处理装置对共享关系组的管理对象数进行比较,将该数较多的共享关系组所利用的参照点设定为在全部组中利用的共同参照点。因此,在本实施方式中,管理对象数较少的共享关系组改变参照点。由此,在本实施方式中,只是属于管理对象数较少的共享关系组的信息处理装置基于改变后的参照点,进行改变虚拟对象的位置信息的处理。另一方面,管理对象数较多的共享关系组无需改变参照点。因此,属于管理对象数较多的共享关系组的信息处理装置不进行改变虚拟对象的位置信息的处理。因此,在本实施方式中,能够抑制伴随参照点的改变的、虚拟对象的位置信息的更新所需的处理量。
另外,在属于规定的组的信息处理装置对于共享关系组尝试共享增强现实空间的情况下,用户必须将用于获得相对位置的操作实施与构成共享关系组的组的数相同的次数。该操作例如是拍摄各组的代表装置的操作。在本实施方式中,用户只对属于希望共享增强现实空间的组的一个信息处理装置进行用于获得相对位置的操作即可。由此,在本实施方式中,能够汇集构成共享关系组的多个组来共享增强现实空间,能够减轻用户的操作。
(实施方式3)
在实施方式1、2中,说明了多个组共享增强现实空间的处理,但是设想在这样共享增强现实空间后出现要结束共享的组。本实施方式中说明要结束增强现实空间的共享时的动作。
在本实施方式中,参照图9和图10,说明用于结束增强现实空间的共享的处理(以下,称为共享结束处理)。在本实施方式中,例如,以作为实施方式2的结果,组200、组300、组900、组1000将参照点201作为共同的参照点进行利用为前提。而且设为,组200要结束与组300、组900、组1000之间的增强现实空间的共享。另一方面,对于组300、组900、组1000,设为继续共享增强现实空间。
图10是表示组200要结束与其他组之间的增强现实空间的共享时的、属于组200、组300、组900、组1000的各信息处理装置的处理的时序图。这里假设由信息处理装置211代表组200实施共享结束处理。
在步骤S1101中,信息处理装置211对属于组200、组300、组900、以及组1000的全部的信息处理装置通知组200要结束共享的意旨。
在步骤S1102a中,信息处理装置212和213从信息处理装置211接收共享结束通知后,进行虚拟对象管理信息的更新。即,信息处理装置212和213从虚拟对象管理单元104正在管理的虚拟对象管理信息中,删除管理组ID为组200以外的虚拟对象管理信息。
信息处理装置211将共享结束通知发送到信息处理装置212和213后,在步骤S1102b中,进行虚拟对象管理信息的更新。即,信息处理装置211从虚拟对象管理单元104正在管理的虚拟对象管理信息中,删除管理组ID为组200以外的虚拟对象管理信息。
在步骤S1102c中,属于组200以外的组的各信息处理装置从信息处理装置211接收共享结束通知后,进行虚拟对象管理信息的更新。即,各信息处理装置从虚拟对象管理单元104正在管理的虚拟对象管理信息中,删除管理组ID为组200的虚拟对象管理信息。
在步骤S1103a中,信息处理装置212、213对组管理信息进行更新。即,信息处理装置212、213从组管理单元105正在管理的组管理信息中,删除组ID为组300、组900以及组1000的组管理信息。
在步骤S1103b中,信息处理装置211也从组管理单元105正在管理的组管理信息中,删除组ID为组300、组900以及组1000的组管理信息。
在步骤S1103c中,属于组200以外的组的各信息处理装置对组管理信息进行更新。即,各信息处理装置从组管理单元105正在管理的组管理信息中,删除组ID为组200的组管理信息。
以上,完成了组200的共享结束处理。由此,属于组200的各信息处理装置结束组300、组900以及组1000的空间信息的共享。因此,属于组200的各信息处理装置结束在组300、组900以及组1000中预先共享的增强现实空间及虚拟对象的共享。其结果,属于组200的各信息处理装置的各用户不再能够通过各自的信息处理装置目视确认在组300、组900以及组1000中预先共享的增强现实空间及虚拟对象。同样,属于组300、组900以及组1000的各信息处理装置结束组200的空间信息的共享。因此,属于组300、组900和组1000的各信息处理装置结束在组200中预先共享的增强现实空间及虚拟对象的共享。其结果,属于组300、组900以及组1000的各信息处理装置的各用户不再能够通过各自的信息处理装置目视确认在组200中预先共享的增强现实空间及虚拟对象。
在本实施方式中,各信息处理装置将共同参照点的位置信息与组管理信息及虚拟对象管理信息独立地进行管理。因此,在上述的组200的共享结束处理后,属于组200的信息处理装置能够利用参照点201作为共同参照点。另外,属于组300、组900以及组1000的信息处理装置同样能够继续利用参照点201作为组300、组900以及组1000的共同参照点。因此,在本实施方式中,不再需要进行伴随组的共享结束处理的用于重新设定共同参照点的处理,或者,与此相伴的、各组管理的虚拟对象的位置信息的更新处理。其结果,在本实施方式中,能够抑制组的共享结束时的各信息处理装置的处理量。
此外,在上述的说明中,设为属于组200的各信息处理装置汇集进行共享结束处理而进行了说明,但是,属于组200的各信息处理装置也可以个别地实施共享结束处理。例如,在信息处理装置211单独地结束共享时,接收到共享结束通知的信息处理装置212、213在步骤S1102a中,删除管理装置ID为信息处理装置211的虚拟对象管理信息。接着,在步骤S1103a中信息处理装置212、213对组200的信息处理装置数进行更新。另外,接收到共享结束通知的、属于组200以外的组的各信息处理装置在步骤S1102c中,删除管理装置ID为信息处理装置211的虚拟对象管理信息。接着,在步骤S1103c中,属于组200以外的组的各信息处理装置对组200的信息处理装置数进行更新。在作为该更新结果组200的信息处理装置数为零的情况下,各信息处理装置从组管理信息中删除组200的组ID。
(实施方式4)
在实施方式1、2、3中,说明了在各信息处理装置上实施全部的处理,但是,也可以在通过网络连接的服务器中执行各实施方式中的信息处理装置的处理的一部分。在本实施方式中,说明使用通过网络与信息处理装置连接的服务器实现与实施方式1同样的共享过程时的动作。
<信息处理装置的构成>
首先,说明本实施方式的信息处理装置100A及本实施方式的服务器1300的结构。信息处理装置100A和服务器1300例如通过互联网或LAN(Local Area Network,局域网)等网络被连接。
图11是表示信息处理装置100A及服务器1300的结构的方框图。另外,在图11中,对于与图1共同的结构部分,附加与图1相同的标号,对于在处理内容上有变更的部分以外的结构部分省略说明。
信息处理装置100A包括图像获得单元101、其他终端检测单元102、虚拟对象管理单元104、本终端管理单元106、通信单元107、位置姿势测量单元108、自己位置估计单元109、坐标系生成单元110、输出图像制成单元111以及图像输出单元112。
通信单元107在与服务器1300之间,将其他终端检测单元102生成的相对位置信息、自己位置估计单元109生成的装置位置信息、虚拟对象管理信息、组管理信息、以及后述的空间坐标系更新信息进行发送和接收。
坐标系生成单元110基于从服务器1300经由通信单元107被通知的空间坐标系更新信息,生成增强现实空间的空间坐标系。而且,坐标系生成单元110生成表示所生成的增强现实空间的空间坐标系的空间坐标系信息。
以上,说明了本实施方式的信息处理装置100A的结构。
接着,说明服务器1300的结构。
<服务器的结构>
服务器1300包括组管理单元1301、共享组管理单元1302、虚拟对象管理单元1303、参照点设定单元1304、坐标系生成单元1305、以及通信单元1306。
组管理单元1301对有关与服务器1300连接的全部的信息处理装置所属的组的信息(以下,称为组管理信息)进行管理。图12A是表示一例组管理单元1301所管理的组管理信息的图。
如图12A所示,组管理信息以表格形式被管理,作为记录具有信息处理装置ID409、所属组ID410。信息处理装置ID409是对每个信息处理装置分配的特有的ID。所属组ID是信息处理装置所属的组的ID。在图12A的例中表示,信息处理装置211、212、213属于组200,信息处理装置311、312属于组300。
在信息处理装置新连接到服务器1300时,组管理单元1301将其信息处理装置ID及所属组ID追加到组管理信息。另外,在从已与服务器1300连接的信息处理装置通知了结束共享时,组管理单元1301从组管理信息中删除其信息处理装置ID及所属组ID。
共享组管理单元1302对有关与服务器1300连接的各信息处理装置所属的各组之间的、虚拟对象的共享关系的信息(以下,称为共享组管理信息)进行管理。图12B是表示一例共享组管理单元1302所管理的共享组管理信息的图。
如图12B所示,共享组管理信息以表格形式被管理,作为记录具有组ID411、共享组ID412。组ID411是与服务器1300连接的各信息处理装置所属的组的ID。共享组ID412是处于共享虚拟对象的关系的组的ID。在图12B的例中表示,组200和组300处于共享关系。
此外,图12B所示的共享组管理信息表示在预先共享相互不同的增强现实空间的组200和组300之间,进一步将增强现实空间共享后的状态。在共享之前,组ID是200的记录的共享组ID、以及组ID是300的记录的共享组ID都未被设定。
虚拟对象管理单元1303对有关与服务器连接的全部的信息处理装置的已生成的虚拟对象的信息、即虚拟对象管理信息进行管理。虚拟对象管理单元1303所管理的虚拟对象的管理信息例如与图2A所示的信息相同。
在与服务器1300连接的各信息处理装置执行了虚拟对象的生成、删除、移动等操作的情况下,虚拟对象管理单元1303接受来自执行了操作的信息处理装置的通知,对虚拟对象管理信息进行更新。
另外,虚拟对象管理单元1303在更新了虚拟对象管理信息的情况下,基于组管理信息和共享组管理信息对与服务器1300连接的各信息处理装置发送各信息处理装置中所共享的虚拟对象的信息。由此,在各信息处理装置之间,虚拟对象管理信息同步。对于其例,以服务器1300所持有的组管理信息是图12A、共享组管理信息是图12B、虚拟对象管理信息是图2A的情况进行说明。信息处理装置211、212、213属于组200,组200与组300处于共享关系。因此,服务器1300将虚拟对象管理信息a和b发送到信息处理装置211、212、213。
参照点设定单元1304从虚拟对象管理单元1303获取各组正在管理的虚拟对象的数。而且,参照点设定单元1304基于所获得的虚拟对象的数,设定在共享增强现实空间的多个组之间共同利用的参照点(以下称为共同参照点)。
另外,参照点设定单元1304从信息处理装置100A通过通信单元1306获得相对位置信息和装置位置信息。相对位置信息是信息处理装置100A的其他终端检测单元102生成的信息,是表示共享增强现实空间的其他信息处理装置的相对于信息处理装置100A的相对位置的信息。装置位置信息是信息处理装置100A的自己位置估计单元109生成的信息,是表示当前的信息处理装置100A的相对于参照点的位置的信息。而且,参照点设定单元1304基于相对位置信息和装置位置信息生成参照点设定信息。参照点设定信息是表示要共享增强现实空间的各组的参照点之间的位置关系的信息。
坐标系生成单元1305基于由参照点设定单元1304生成的参照点设定信息,对各组中正在使用的增强现实空间的空间坐标系进行更新。另外,坐标系生成单元1305生成表示空间坐标系更新时的处理内容的信息、即空间坐标系更新信息。空间坐标系更新信息换言之是表示对对象进行怎样的平行移动和/或旋转的信息(表示变换规则的信息)。
通信单元1306在与信息处理装置100A之间,将其他终端检测单元102生成的相对位置信息、自己位置估计单元109生成的装置位置信息、虚拟对象管理信息、组管理信息、以及空间坐标系更新信息进行发送和接收。
以上,说明了本实施方式的服务器1300的结构。
下面,分别参照图13~图14说明在预先共享相互不同的增强现实空间的多个组之间,进一步将增强现实空间共享时的动作例。
<多个组的结构的说明>
首先,使用图13说明多个组的结构。
图13是表示预先共享相互不同的增强现实空间的组200和组300的示意图。
组200由共享着以参照点201为空间坐标原点的增强现实空间的用户构成。构成组200的各用户分别具有信息处理装置211A、212A、213A。这些信息处理装置是上述的信息处理装置100A。而且,各用户使用各自的信息处理装置,在增强现实空间共享虚拟对象221、222、223。
组300由共享着以参照点301为空间坐标原点的增强现实空间的用户构成。构成组300的各用户分别具有信息处理装置311A、312A。这些信息处理装置是上述的信息处理装置100A。而且,各用户使用各自的信息处理装置共享着虚拟对象321、322。
进而,信息处理装置211A、212A、213A、311A、312A分别通过网络与服务器1300连接。
此外,在图13的例中,为了方便说明,假设在组200中,信息处理装置为3个,虚拟对象为3个,在组300中,信息处理装置为2个,虚拟对象为2个来进行说明,但是各个数不限定于图13。
以上,结束对多个组的结构的说明。
<信息处理装置及服务器的动作说明>
图14是表示在服务器1300与信息处理装置211A、212A、213A、311A、312A之间进行的增强现实空间的共享处理的时序图。
在步骤S1401中,信息处理装置211A获得信息处理装置311A的相对于信息处理装置211A的相对位置,生成表示该相对位置的相对位置信息。另外,此时,信息处理装置211A也生成表示当前的信息处理装置211A的相对于参照点201的位置的装置位置信息(以下,称为装置位置信息A)。
在步骤S1402中,信息处理装置211A将所生成的相对位置信息以及装置位置信息A通知给服务器1300。另外,在步骤S1402中,信息处理装置311A生成表示当前的信息处理装置311A的相对于参照点301的位置的装置位置信息(以下,称为装置位置信息B),并将其通知给服务器1300。
在步骤S1403中,服务器1300基于组管理信息从虚拟对象管理信息获得管理组ID200下所管理的虚拟对象的数、以及管理组ID300下所管理的虚拟对象的数,并将两者进行比较。
在步骤S1404中,服务器1300将作为步骤S1403的比较结果管理对象数较多的组中设定的参照点设定为共同参照点。在图13的例子中,组200的管理对象数是3个,组300的管理对象数是2个。因此,服务器1300将管理对象数较多的组200中设定的参照点201设定为共同参照点。
在步骤S1405中,服务器1300基于在步骤S1402中接收到的装置位置信息A、相对位置信息、以及装置位置信息B,将参照点301的位置更新为以参照点201为原点的坐标。这里,信息处理装置1300生成表示参照点301的相对于参照点201的位置的参照点设定信息。由参照点设定单元1304进行该生成。
在步骤S1406中,服务器1300基于在步骤S1405中生成的参照点设定信息,对组300中正在使用的增强现实空间的空间坐标系进行更新。即,服务器1300从以参照点301为原点的空间坐标系变换为以参照点201为原点的空间坐标系。这里所说的空间坐标系的变换是指将由X轴、Y轴、Z轴定义的空间的方位从参照点301A改变为参照点201A。这里,服务器1300生成组300A的空间坐标系更新信息。由坐标系生成单元1305进行该生成。
在步骤S1407中,服务器1300向属于组300的信息处理装置311A、312A发送在步骤S1406中生成的空间坐标系更新信息。
在步骤S1408中,信息处理装置311A和312A基于在步骤S1407中接收到的空间坐标系更新信息,对在组300中正在使用的增强现实空间的空间坐标系进行更新。
在步骤S1409中,信息处理装置311A和312A基于在步骤S1407中接收到的空间坐标系更新信息,对本终端的位置信息进行更新。
在步骤S1410中,服务器1300将由改变了参照点的组300所管理的虚拟对象的位置信息(图2A所示的位置信息404)更新为以参照点201为原点的坐标。
在步骤S1411中,服务器1300对共享组管理信息进行更新。在图13的例中,在组ID为200的记录中设定了共享组ID300,另外,在组ID为300的记录中设定了共享组ID200。
在步骤S1412中,服务器1300基于组管理信息和共享组管理信息,向与服务器1300连接的各信息处理装置通知在各信息处理装置中所共享的虚拟对象的信息,在各信息处理装置之间使虚拟对象管理信息同步。在图13的例中,信息处理装置211A、212A、213A属于组200,组200与组300处于共享关系。因此,服务器1300向信息处理装置211A、212A、213A发送在组300中管理的虚拟对象321、322的信息。另外,服务器1300向信息处理装置311A、312A发送在组200中管理的虚拟对象221、222、223的信息。由此,属于组200和组300的各信息处理装置共享在彼此的组中管理的虚拟对象的信息。
以上,结束对于使用信息处理装置和通过网络与信息处理装置连接的服务器来实现与实施方式1同样的空间信息共享化处理的情况下的动作的说明。对于实施方式2、3,也能够与本实施方式同样地使用服务器来实现。此外,当在实施方式2中使用服务器1300的情况下,在图14的步骤S1403中,服务器1300基于组管理信息和共享组管理信息获得各共享组的管理对象的数,并进行比较。
这样,在本实施方式中,通过由服务器执行在实施方式1、2中信息处理装置进行的处理的一部分,能够削减各信息处理装置的功耗,能够节约信息处理装置中需要的硬件资源。另外,在本实施方式中,通过在服务器中对组管理信息、共享组管理信息、虚拟对象管理信息进行统一管理,从而共享增强现实空间所需要的信息的管理变得容易。
<变形例的说明>
以上,说明了本发明的实施方式1~4,但是,上述说明是一例,可以进行各种变形。以下,对变形例进行说明。
例如,参照点设定单元103、1304、坐标系生成单元110、1305等各功能块通常被作为集成电路或LSI(Large Scale Integration,大规模集成电路)来实现。这些功能块既可以被单独地集成为单芯片,也可以包含一部分或全部地被集成为单芯片。另外,根据集成程度的不同,LSI有时也被称为IC、系统LSI、超大LSI(Super LSI)、或特大LSI(Ultra LSI)。
另外,实现集成电路化的方法不限于LSI,也可使用专用电路或通用处理器来实现。另外,实现集成电路化的方法也可以使用可在LSI制造后编程的FPGA(Field Programmable Gate Array:现场可编程门阵列),或者可重构LSI内部的电路单元的连接和设定的可重构处理器。
再者,随着半导体的技术进步或随之派生的其它技术的出现,如果出现能够替代LSI的集成电路化的新技术,当然可利用该新技术进行功能块的集成化。还存在着适应生物技术等的可能性。
此外,在上述实施方式1~4中,以通过硬件来构成本发明的情况为例进行了说明,但是本发明还可以在与硬件的协作下通过软件来实现。
如上所述,本发明的信息处理装置属于共享增强现实空间的组,该增强现实空间是基于规定的参照点构建的,且与现实空间的位置建立关系并配置虚拟对象,该信息处理装置包括:虚拟对象管理单元,其对本装置的虚拟对象管理信息进行管理,该本装置的虚拟对象管理信息包含与在本装置所属的组中共享的增强现实空间所配置的虚拟对象有关的信息;通信单元,其从属于其他组的其他信息处理装置接收其他装置的虚拟对象管理信息,该其他装置的虚拟对象管理信息包含与在所述其他组中共享的增强现实空间所配置的虚拟对象有关的信息;以及参照点设定单元,其基于所述本装置的虚拟对象管理信息和所述其他装置的虚拟对象管理信息,设定在所述其他组与所述本装置所属的组之间共同利用的共同参照点。
另外,本发明的信息处理装置中,所述参照点设定单元对作为所述其他装置的虚拟对象管理信息而接收到的虚拟对象的数和作为所述本装置的虚拟对象管理信息而管理的虚拟对象的数进行比较,将作为比较结果所述虚拟对象的数较多的组正在利用的参照点设定为所述共同参照点。
另外,本发明的信息处理装置中,所述参照点设定单元在将所述本装置所属的组正在利用的参照点设定为共同参照点的情况下,将与该共同参照点有关的参照点设定信息通过所述通信单元发送到所述其他信息处理装置,所述虚拟对象管理单元通过所述通信单元从所述其他信息处理装置接收基于所述共同参照点而被更新的所述其他装置的虚拟对象管理信息,将该其他装置的虚拟对象管理信息与所述本装置的虚拟对象管理信息合并进行持有。
另外,本发明的信息处理装置中,所述虚拟对象管理单元将对所述其他装置的虚拟对象管理信息合并所述本装置的对象管理信息而得到的虚拟对象管理信息通过所述通信单元发送到所述本装置所属的组内的其他信息处理装置。
另外,本发明的信息处理装置中,所述参照点设定单元在将所述其他组正在利用的参照点设定为共同参照点的情况下,将表示将该参照点设定为共同参照点的意旨的设定通知信息通过所述通信单元发送到所述其他信息处理装置,通过所述通信单元从所述其他信息处理装置接收与所述共同参照点有关的参照点设定信息,所述虚拟对象管理单元基于所述参照点设定信息更新所述本装置的虚拟对象管理信息。
另外,本发明的信息处理装置中,所述虚拟对象管理单元将基于从所述其他信息处理装置获得的参照点设定信息而更新的所述本装置的虚拟对象管理信息、以及所述参照点设定信息,通过所述通信单元发送到所述本装置所属的组内的其他信息处理装置。
另外,本发明的信息处理装置中,所述参照点设定单元在所述本装置所属的组或所述其他组预先与另外的组处于共享同一增强现实空间的关系的情况下,基于所述同一增强现实空间所配置的虚拟对象的合计数进行所述比较。
本发明的服务器装置与属于共享增强现实空间的组的多个信息处理装置通过网络进行通信,该增强现实空间是基于规定的参照点构建的,且与现实空间的位置建立关系并配置虚拟对象,该服务器装置包括:虚拟对象管理单元,对第一虚拟对象管理信息和第二虚拟对象管理信息进行管理,该第一虚拟对象管理信息包含与在第一信息处理装置所属的第一组中共享的第一增强现实空间所配置的虚拟对象有关的信息,该第二虚拟对象管理信息包含与在第二信息处理装置所属的第二组中共享的第二增强现实空间所配置的虚拟对象有关的信息;以及参照点设定单元,基于所述第一虚拟对象管理信息和所述第二虚拟对象管理信息,设定在所述第一组与所述第二组之间共同利用的共同参照点。
另外,本发明的服务器装置中,所述参照点设定单元对作为所述第一虚拟对象管理信息而管理的虚拟对象的数和作为所述第二虚拟对象管理信息而管理的虚拟对象的数进行比较,将作为比较结果所述虚拟对象的数较多的组正在利用的参照点设定为所述共同参照点。
另外,本发明的服务器装置中,所述参照点设定单元在所述第一信息处理装置所属的所述第一组或所述第二信息处理装置所属的所述第二组预先与另外的组处于共享同一增强现实空间的关系的情况下,基于所述同一增强现实空间所配置的虚拟对象的合计数进行所述比较。
本发明的信息处理方法是属于共享增强现实空间的组的信息处理装置进行的信息处理方法,该增强现实空间是基于规定的参照点构建的,且与现实空间的位置建立关系并配置虚拟对象,该信息处理方法包括:对本装置的虚拟对象管理信息进行管理的步骤,该本装置的虚拟对象管理信息包含与在本装置所属的组中共享的增强现实空间所配置的虚拟对象有关的信息;从属于其他组的其他信息处理装置接收其他装置的虚拟对象管理信息的步骤,该其他装置的虚拟对象管理信息包含与在所述其他组中共享的增强现实空间所配置的虚拟对象有关的信息;以及基于所述本装置的虚拟对象管理信息和所述其他装置的虚拟对象管理信息,设定在所述其他组与所述本装置所属的组之间共同利用的共同参照点的步骤。
本发明的程序是使属于共享增强现实空间的组的信息处理装置的计算机执行的程序,该增强现实空间是基于规定的参照点构建的,且与现实空间的位置建立关系并配置虚拟对象,该程序执行的处理包括:对本装置的虚拟对象管理信息进行管理的处理,该本装置的虚拟对象管理信息包含与在本装置所属的组中共享的增强现实空间所配置的虚拟对象有关的信息;从属于其他组的其他信息处理装置接收其他装置的虚拟对象管理信息的处理,该其他装置的虚拟对象管理信息包含与在所述其他组中共享的增强现实空间所配置的虚拟对象有关的信息;以及基于所述本装置的虚拟对象管理信息和所述其他装置的虚拟对象管理信息,设定在所述其他组与所述本装置所属的组之间共同利用的共同参照点的处理。
2012年3月27日提交的日本专利申请特愿2012-071031号所包含的说明书、说明书附图和说明书摘要的公开内容全部引用于本申请。
工业实用性
本发明涉及的信息处理装置、服务器装置、信息处理方法以及程序对于在增强现实技术的利用中,通过在组之间共享相互不同的增强现实空间,能够抑制用户所具有的信息处理装置的处理量的智能手机、移动电话、移动终端、以及数字照相机等极其有用。

Claims (11)

1.信息处理装置,属于共享增强现实空间的组,该增强现实空间是基于规定的参照点构建的,且与现实空间的位置建立关系并配置虚拟对象,该信息处理装置包括:
虚拟对象管理单元,其对本装置的虚拟对象管理信息进行管理,该本装置的虚拟对象管理信息包含与在本装置所属的组中共享的增强现实空间所配置的虚拟对象有关的信息;
图像获取单元,其从摄像装置获取现实空间的图像、以及属于其他组且与本装置共享扩展现实空间的其他信息处理装置的图像;
其他终端检测单元,其基于从所述图像获取单元所获取的所述其他信息处理装置的图像,获取所述其他信息处理装置相对于本装置的相对位置;
通信单元,其从属于所述其他组的所述其他信息处理装置接收其他装置的虚拟对象管理信息,该其他装置的虚拟对象管理信息包含与在所述其他组中共享的增强现实空间所配置的虚拟对象有关的信息;以及
参照点设定单元,其基于所述本装置的虚拟对象管理信息和所述其他装置的虚拟对象管理信息,设定在所述其他组与所述本装置所属的组之间共同利用的共同参照点,
所述共同参照点的设定在所述本装置所属的组的代表装置与所述其他组的代表装置之间进行,
所述共同参照点基于所述其他信息处理装置的相对位置来选择。
2.如权利要求1所述的信息处理装置,
所述参照点设定单元对作为所述其他装置的虚拟对象管理信息而接收到的虚拟对象的数和作为所述本装置的虚拟对象管理信息而管理的虚拟对象的数进行比较,
将作为比较结果所述虚拟对象的数较多的组正在利用的参照点设定为所述共同参照点。
3.如权利要求1所述的信息处理装置,
所述参照点设定单元在将所述本装置所属的组正在利用的参照点设定为共同参照点的情况下,将与该共同参照点有关的参照点设定信息通过所述通信单元发送到所述其他信息处理装置,
所述虚拟对象管理单元通过所述通信单元从所述其他信息处理装置接收基于所述共同参照点而被更新的所述其他装置的虚拟对象管理信息,将该其他装置的虚拟对象管理信息与所述本装置的虚拟对象管理信息合并进行持有。
4.如权利要求3所述的信息处理装置,
所述虚拟对象管理单元将对所述其他装置的虚拟对象管理信息合并所述本装置的对象管理信息而得到的虚拟对象管理信息通过所述通信单元发送到所述本装置所属的组内的其他信息处理装置。
5.如权利要求1所述的信息处理装置,
所述参照点设定单元在将所述其他组正在利用的参照点设定为共同参照点的情况下,将表示将该参照点设定为共同参照点的意旨的设定通知信息通过所述通信单元发送到所述其他信息处理装置,通过所述通信单元从所述其他信息处理装置接收与所述共同参照点有关的参照点设定信息,
所述虚拟对象管理单元基于所述参照点设定信息更新所述本装置的虚拟对象管理信息。
6.如权利要求5所述的信息处理装置,
所述虚拟对象管理单元将基于从所述其他信息处理装置获得的参照点设定信息而更新的所述本装置的虚拟对象管理信息、以及所述参照点设定信息,通过所述通信单元发送到所述本装置所属的组内的其他信息处理装置。
7.如权利要求2所述的信息处理装置,
所述参照点设定单元在所述本装置所属的组或所述其他组预先与另外的组处于共享同一增强现实空间的关系的情况下,基于所述同一增强现实空间所配置的虚拟对象的合计数进行所述比较。
8.服务器装置,与属于共享增强现实空间的组的多个信息处理装置通过网络进行通信,该增强现实空间是基于规定的参照点构建的,且与现实空间的位置建立关系并配置虚拟对象,该服务器装置包括:
虚拟对象管理单元,对第一虚拟对象管理信息和第二虚拟对象管理信息进行管理,该第一虚拟对象管理信息包含与在第一信息处理装置所属的第一组中共享的第一增强现实空间所配置的虚拟对象有关的信息,该第二虚拟对象管理信息包含与在第二信息处理装置所属的第二组中共享的第二增强现实空间所配置的虚拟对象有关的信息;以及
参照点设定单元,基于所述第一虚拟对象管理信息和所述第二虚拟对象管理信息,设定在所述第一组与所述第二组之间共同利用的共同参照点,
所述共同参照点的设定在所述第一组的代表装置与所述第二组的代表装置之间进行。
9.如权利要求8所述的服务器装置,
所述参照点设定单元对作为所述第一虚拟对象管理信息而管理的虚拟对象的数和作为所述第二虚拟对象管理信息而管理的虚拟对象的数进行比较,将作为比较结果所述虚拟对象的数较多的组正在利用的参照点设定为所述共同参照点。
10.如权利要求9所述的服务器装置,
所述参照点设定单元在所述第一信息处理装置所属的所述第一组或所述第二信息处理装置所属的所述第二组预先与另外的组处于共享同一增强现实空间的关系的情况下,基于所述同一增强现实空间所配置的虚拟对象的合计数进行所述比较。
11.信息处理方法,是属于共享增强现实空间的组的信息处理装置进行的信息处理方法,该增强现实空间是基于规定的参照点构建的,且与现实空间的位置建立关系并配置虚拟对象,该信息处理方法包括:
对本装置的虚拟对象管理信息进行管理的步骤,该本装置的虚拟对象管理信息包含与在本装置所属的组中共享的增强现实空间所配置的虚拟对象有关的信息;
从属于其他组的其他信息处理装置接收其他装置的虚拟对象管理信息的步骤,该其他装置的虚拟对象管理信息包含与在所述其他组中共享的增强现实空间所配置的虚拟对象有关的信息;以及
基于所述本装置的虚拟对象管理信息和所述其他装置的虚拟对象管理信息,设定在所述其他组与所述本装置所属的组之间共同利用的共同参照点的步骤,
所述共同参照点的设定在所述本装置所属的组的代表装置与所述其他组的代表装置之间进行。
CN201380001030.8A 2012-03-27 2013-03-15 信息处理装置、服务器装置以及信息处理方法 Expired - Fee Related CN103477365B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012071031 2012-03-27
JP2012-071031 2012-03-27
PCT/JP2013/001775 WO2013145614A1 (ja) 2012-03-27 2013-03-15 情報処理装置、サーバ装置、情報処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
CN103477365A CN103477365A (zh) 2013-12-25
CN103477365B true CN103477365B (zh) 2016-08-31

Family

ID=49258928

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380001030.8A Expired - Fee Related CN103477365B (zh) 2012-03-27 2013-03-15 信息处理装置、服务器装置以及信息处理方法

Country Status (4)

Country Link
US (1) US9240076B2 (zh)
JP (1) JPWO2013145614A1 (zh)
CN (1) CN103477365B (zh)
WO (1) WO2013145614A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170337745A1 (en) 2016-05-23 2017-11-23 tagSpace Pty Ltd Fine-grain placement and viewing of virtual objects in wide-area augmented reality environments
US10403044B2 (en) * 2016-07-26 2019-09-03 tagSpace Pty Ltd Telelocation: location sharing for users in augmented and virtual reality environments
JP6541704B2 (ja) * 2017-03-27 2019-07-10 Kddi株式会社 仮想物体を表示する端末装置とサーバ装置とを含むシステム
CN106997281A (zh) * 2017-04-10 2017-08-01 北京小米移动软件有限公司 共享虚拟对象的方法及智能设备
US10848335B1 (en) * 2018-12-11 2020-11-24 Amazon Technologies, Inc. Rule-based augmentation of a physical environment
US10803669B1 (en) * 2018-12-11 2020-10-13 Amazon Technologies, Inc. Rule-based augmentation of a physical environment
JP7163855B2 (ja) * 2019-04-16 2022-11-01 日本電信電話株式会社 情報処理システム、情報処理端末、サーバ装置、情報処理方法およびプログラム
US20220284620A1 (en) * 2019-09-20 2022-09-08 Maxell, Ltd. Information terminal apparatus and position recognition sharing method
JP7486180B2 (ja) * 2020-07-04 2024-05-17 Graffity株式会社 情報処理システム、情報処理装置、情報処理方法、及びプログラム

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6058397A (en) * 1997-04-08 2000-05-02 Mitsubishi Electric Information Technology Center America, Inc. 3D virtual environment creation management and delivery system
CN102142005A (zh) * 2010-01-29 2011-08-03 株式会社泛泰 提供增强现实的系统、终端、服务器及方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3517639B2 (ja) 2000-09-27 2004-04-12 キヤノン株式会社 複合現実感提示装置及びその方法並びに記憶媒体
SE0203908D0 (sv) * 2002-12-30 2002-12-30 Abb Research Ltd An augmented reality system and method
US8730156B2 (en) 2010-03-05 2014-05-20 Sony Computer Entertainment America Llc Maintaining multiple views on a shared stable virtual space
DE102009037835B4 (de) * 2009-08-18 2012-12-06 Metaio Gmbh Verfahren zur Darstellung von virtueller Information in einer realen Umgebung
US20110161875A1 (en) * 2009-12-29 2011-06-30 Nokia Corporation Method and apparatus for decluttering a mapping display
EP2393056A1 (en) * 2010-06-02 2011-12-07 Layar B.V. Acquiring, ranking and displaying points of interest for use in an augmented reality service provisioning system and graphical user interface for displaying such ranked points of interests
US8963954B2 (en) * 2010-06-30 2015-02-24 Nokia Corporation Methods, apparatuses and computer program products for providing a constant level of information in augmented reality
EP2600316A1 (en) * 2011-11-29 2013-06-05 Inria Institut National de Recherche en Informatique et en Automatique Method, system and software program for shooting and editing a film comprising at least one image of a 3D computer-generated animation

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6058397A (en) * 1997-04-08 2000-05-02 Mitsubishi Electric Information Technology Center America, Inc. 3D virtual environment creation management and delivery system
CN102142005A (zh) * 2010-01-29 2011-08-03 株式会社泛泰 提供增强现实的系统、终端、服务器及方法

Also Published As

Publication number Publication date
US20140063065A1 (en) 2014-03-06
CN103477365A (zh) 2013-12-25
JPWO2013145614A1 (ja) 2015-12-10
US9240076B2 (en) 2016-01-19
WO2013145614A1 (ja) 2013-10-03

Similar Documents

Publication Publication Date Title
CN103477365B (zh) 信息处理装置、服务器装置以及信息处理方法
JP6824433B2 (ja) カメラ姿勢情報の決定方法、決定装置、モバイル端末及びコンピュータプログラム
CA2988821C (en) Method and terminal for locking target in game scene
CN110276840B (zh) 多虚拟角色的控制方法、装置、设备及存储介质
CN105339987B (zh) 针对陆地、空中和/或众包可视化的流形的图像提取和基于图像的渲染
WO2018119889A1 (zh) 三维场景定位方法和装置
CN109949422A (zh) 用于虚拟场景的数据处理方法以及设备
WO2019096027A1 (zh) 一种通信处理方法、终端及存储介质
KR20140130675A (ko) 화상 처리 디바이스, 및 컴퓨터 프로그램 제품
CN104252712B (zh) 图像生成装置、图像生成方法和记录介质
JP2014112302A (ja) 所定領域管理システム、通信方法、及びプログラム
CN103197980B (zh) 一种呈现增强现实技术内容的方法、装置及系统
CN106327589A (zh) 基于Kinect的3D虚拟试衣镜的实现方法及系统
WO2022052620A1 (zh) 图像生成方法及电子设备
CN110136228A (zh) 虚拟角色的面部替换方法、装置、终端及存储介质
CN109214876A (zh) 一种基于增强现实的试衣方法和系统
CN108986110A (zh) 图像处理方法、装置、移动终端及存储介质
CN106201259A (zh) 一种虚拟现实系统中分享全景影像的方法和装置
TW202009682A (zh) 基於擴增實境的互動方法及裝置
CN107818595A (zh) 穿戴式即时互动系统
CN113705520A (zh) 动作捕捉方法、装置及服务器
CN112308977A (zh) 视频处理方法、视频处理装置和存储介质
CN108921898A (zh) 摄像机位姿确定方法、装置、电子设备和计算机可读介质
CN110349504A (zh) 一种基于ar的博物馆导览系统
CN110490389A (zh) 点击率预测方法、装置、设备及介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20160125

Address after: Osaka Japan

Applicant after: PANASONIC INTELLECTUAL PROPERTY MANAGEMENT Co.,Ltd.

Address before: Osaka Japan

Applicant before: Matsushita Electric Industrial Co.,Ltd.

C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160831

Termination date: 20190315

CF01 Termination of patent right due to non-payment of annual fee