CN110059524A - 计算机可读存储介质、信息处理装置以及信息处理方法 - Google Patents

计算机可读存储介质、信息处理装置以及信息处理方法 Download PDF

Info

Publication number
CN110059524A
CN110059524A CN201810639126.1A CN201810639126A CN110059524A CN 110059524 A CN110059524 A CN 110059524A CN 201810639126 A CN201810639126 A CN 201810639126A CN 110059524 A CN110059524 A CN 110059524A
Authority
CN
China
Prior art keywords
display image
display
user
information
terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810639126.1A
Other languages
English (en)
Inventor
糸井重里
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hebao Co Ltd
Original Assignee
Hebao Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hebao Co Ltd filed Critical Hebao Co Ltd
Publication of CN110059524A publication Critical patent/CN110059524A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/51Indexing; Data structures therefor; Storage structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/52Network services specially adapted for the location of the user terminal
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30204Marker
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Primary Health Care (AREA)
  • Computer Hardware Design (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)
  • Liquid Crystal Substances (AREA)

Abstract

本发明提供一种各个用户能够自由地设定内容的计算机可读存储介质等。计算机可读存储介质上存储有信息处理程序,该程序使计算机(2)执行下述处理:受理对显示图像的选择,所述显示图像用于在表面附有标识的球体(3)的拍摄图像上重叠显示,取得所述显示图像对应的位置信息,将受理的所述显示图像以及取得的所述位置信息与用户ID相关联地发送。根据以上所述,各个用户可以自由地设定内容。

Description

计算机可读存储介质、信息处理装置以及信息处理方法
技术领域
本发明涉及计算机可读存储介质、信息处理装置以及信息处理方法。
背景技术
近年,开发了利用AR(Augmented Reality)系统的商品。AR系统是指,在智能电话、平板终端、便携式游戏机等具有相机以及显示部的信息设备上,事先安装有用于识别AR标识的应用程序。通过利用这样的信息设备,当拍摄附有AR标识的被摄体的时候,信息设备识别AR标识,在拍摄画像上重叠显示与识别的AR标识相对应的内容。由此,用户可以通过显示部看见在作为拍摄对象的被摄体上重叠有内容的图像。专利文献1公开了一种系统,该系统拍摄立体对象物,将图像或者文字等附加信息重叠显示在所拍摄的图像中的立体对象物上。
专利文献1:日本特开2013-92407号公报
发明内容
然而,现有技术中存在如下问题:在被摄体的拍摄图像上重叠显示的内容只不过是由开发商或者运营商单方面提供的。
本发明鉴于上述问题而作出,其目的在于提供一种各个用户能够自由地设定内容的计算机可读存储介质等。
本发明的计算机可读存储介质,其上存储有信息处理程序,其特征在于,该程序使计算机执行下述处理:受理对显示图像的选择,所述显示图像用于在表面附有标识的球体的拍摄图像上重叠显示,取得所述显示图像对应的位置信息,将受理的所述显示图像以及取得的所述位置信息与用户ID相关联地发送。
根据本发明,可以提供各个用户能够自由地设定内容的计算机可读存储介质等。
附图说明
图1是表示AR系统的结构例的示意图。
图2是表示实施方式1的服务器的构成例的框图。
图3是表示实施方式1的用户DB的数据布局的一例的说明图。
图4是表示显示图像DB的数据布局的一例的说明图。
图5是表示说明信息DB的数据布局的一例的说明图。
图6是表示公开信息DB的数据布局的一例的说明图。
图7是表示终端的构成例的框图。
图8A是说明实施方式1的AR系统的动作的说明图。
图8B是说明实施方式1的AR系统的动作的说明图。
图9A是表示位置信息的取得例的示意图。
图9B是表示位置信息的取得例的示意图。
图10是表示终端取得用户ID的例子的示意图。
图11是表示实施方式1的终端发送显示图像时的处理步骤的流程图。
图12是表示实施方式1的终端接收显示图像时的处理步骤的流程图。
图13A是表示实施方式1的终端的说明信息的示意图。
图13B是表示实施方式1的终端的说明信息的示意图。
图14是表示实施方式1的终端发送说明信息时的处理步骤的流程图。
图15是表示实施方式1的终端接收说明信息时的处理步骤的流程图。
图16是表示实施方式1的终端发送公开信息时的处理步骤的流程图。
图17是表示实施方式1的终端基于公开信息接收显示图像时的处理步骤的流程图。
图18是表示实施方式1的公开范围判定的子例程的处理步骤的流程图。
图19是实施方式2的终端的顺序显示的动作说明图。
图20是表示实施方式2的终端接收多个显示图像时的以日期和时间的顺序排序的处理步骤的流程图。
图21是表示实施方式2的终端进行切换显示时的处理步骤的流程图。
图22是表示实施方式2的终端的排序处理步骤的流程图。
图23是实施方式2的终端的包含轨迹信息的动作说明图。
图24是表示实施方式2的终端进行包含轨迹信息的切换显示时的处理步骤的流程图。
图25是表示实施方式3的服务器1的构成例的框图。
图26是表示实施方式3的用户DB的数据布局的一例的说明图。
图27是表示音乐DB的数据布局的一例的说明图。
图28是实施方式3的AR系统的动作说明图。
图29是表示实施方式3的终端发送显示图像以及音乐时的处理步骤的流程图。
图30是表示实施方式3的终端接收显示图像以及音乐时的处理步骤的流程图。
图31是表示实施方式3的游戏的处理步骤的流程图。
图32是表示实施方式4的服务器的构成例的框图。
图33是表示实施方式4的用户DB的数据布局的一例的说明图。
图34是表示球体DB的数据布局的一例的说明图。
图35是实施方式4的AR系统的动作说明图。
图36是表示实施方式4的终端基于球体ID发送显示图像时的处理步骤的流程图。
图37是表示实施方式4的终端基于球体ID接收显示图像时的处理步骤的流程图。
图38是表示实施方式5的服务器的构成例的框图。
图39是表示实施方式5的显示图像DB的数据布局的一例的说明图。
图40是表示奖牌DB的数据布局的一例的说明图。
图41是表示奖牌的显示图像的显示例的示意图。
图42是表示实施方式5的终端按国家发送每种奖牌的获得数量时的处理步骤的流程图。
图43是表示实施方式5的终端按国家接收每种奖牌的获得数量时的处理步骤的流程图。
图44是表示奖牌显示的子例程的处理步骤的流程图。
图45是表示各种类的奖牌的显示处理步骤的流程图。
图46是表示实施形式5的说明信息DB的数据布局的一例的说明图。
图47是表示与国家的显示图像相关联的说明信息的显示例的示意图。
附图标记说明:
1 信息处理装置(服务器)
11 控制部
12 存储部
13 通信部
14 大容量存储部
141 用户DB
142 显示图像DB
143 说明信息DB
144 公开信息DB
145 音乐DB
146 球体DB
147 奖牌DB
1a 移动型存储介质
1b 半导体存储器
1P 控制程序
2 信息处理终端(终端、计算机)
21 控制部
22 存储部
23 通信部
24 相簿
25 输入部
26 显示部
27 拍摄部
28 时钟部
29 麦克
20 扬声器
2P 控制程序
3 地球仪(球体)
B 总线
N 网络
具体实施方式
以下,基于示意实施方式的附图详细说明本发明。
实施方式1
图1是AR系统的结构示意图。本实施方式的AR系统包括:信息处理装置1、信息处理终端2、以及表面上附有AR标识(标识)的球体型的地球仪3。信息处理装置1和信息处理终端2通过互联网等网络N进行信息的收发。
信息处理装置1,是进行各种信息处理、信息存储以及信息收发的信息处理装置,例如服务器装置、个人计算机等。本实施方式中,以服务器装置作为信息处理装置1,以下为了说明简洁,简称服务器1。
信息处理终端2,是各用户的终端装置,例如智能手机、非智能手机、平板电脑、个人计算机终端、游戏机等的信息处理设备。以下为了说明简洁,信息处理终端2简称为终端2。
地球仪3作为拍摄对象物,通过终端2拍摄并使用。地球仪3,例如是一种通过填充空气而成为球体的PVC(Polyvinyl chloride:聚氯乙烯)材料制成的球,但并不受限于此。在地球仪3的表面,印刷有地球上的地图,在地图中的适当位置附有AR标识。例如如图1所示,对于地图中的海洋以及大陆分别地赋予名称,对于各个国家以及城市分别赋予国名以及城市名。这些文字构成了AR标识。另外,虽然图1中省略了描述,但是地图中包括各个国家的国境线,国境线也构成了AR标识。另外,可以用规定的颜色区分地图中的河川、平原、山脉等地形,各种颜色也构成了AR标识。更进一步,为了识别地图中的各个海、海域等,对于地图中的海赋予规定的标识M1~M4(例如船的标识M1、M2,乌龟或海鸥等的动物的标识M3、M4)。另外,为了识别地图中的各个大陆、地域等,对于地图中的大陆赋予了规定的标识M5~M7。这些标识M1~M7也构成了AR标识。
图2是实施方式1的服务器1的构成例的框图。服务器1包括,控制部11、存储部12、通信部13、大容量存储部14、读取部15。各种构成由总线B连接在一起。
控制部11包括CPU(Central Processing Unit:中央处理器)、MPU(Micro-Processing Unit:微处理器)等运算处理装置,通过读出并执行存储部12里存储的控制程序1P,进行服务器1相关联的各种信息处理、控制处理等。此外,图2中控制部11是以单一的处理器为例进行了说明,也可以采用多处理器。存储部12包括RAM(Random Access Memory:随机存储器)、ROM(Read Only Memory:只读存储器)等存储器元件,存储用于控制部11执行各种处理时所需的控制程序1P或者数据等。此外,存储部12临时存储控制部11执行运算处理所需的数据。通信部13包括用于进行与通信相关的处理的处理电路等,经由网络N,和终端2等进行信息的收发。
大容量存储部14,例如为包括硬盘等的大容量存储装置。大容量存储部14存储用户DB141、显示图像DB142、说明信息DB143、公开信息DB144。用户DB141,存储与各个用户相关的用户信息、显示图像ID以及位置信息。显示图像DB142,存储用于在地球仪3的拍摄图像上重叠显示的各种显示图像。说明信息DB143,存储显示图像的声音或者文本形式的说明信息。公开信息DB144,存储显示图像的公开信息。
此外,本实施方式中存储部12以及大容量存储部14也可以是由一体化的存储装置构成。另外,大容量存储部14也可以由多个存储装置构成。大容量存储部14也可以是和服务器1连接的外部存储装置。
读取部15,读取包括CD(Compact Disc:光盘)-ROM或DVD(Digital VersatileDisc:数字多功能光盘)-ROM的移动型存储介质1a。控制部11也可以通过读取部15从移动型存储介质1a中读取控制程序1P,将读取的控制程序1P存储到大容量存储部14中。另外,控制部11也可以通过网络N等从其他的计算机下载控制程序1P,存储到大容量存储部14中。更进一步,控制部11也可以从半导体存储器1b读入控制程序1P。
此外,本实施方式中,服务器不受上述构成的限制,例如也可以包含接收输入操作的输入部、显示服务器1的相关信息的显示部等。另外,本实施方式中,是以单独的服务器1为例进行说明,服务器1的构成不受上述限制。例如,服务器1可以由多台物理服务器构成,也可以由多台虚拟设备构成。
图3是表示实施方式1的用户DB141的数据布局的一例的说明图。用户DB141包括:用户ID列、用户等级列、图像ID列、位置(纬度、经度)列。用户ID列,存储用于识别各用户而唯一指定的用户的ID。用户等级列,存储用户账号的等级信息。例如,用户的等级设计为“普通用户”、“银用户”、“金用户”三个等级。对用户等级导入积分制,根据购买次数、购买金额等累计积分,当积分达到一定分值时,按照“普通用户”、“银用户”、“金用户”的顺序进行用户等级升级。图像ID列,存储用于在地球仪3的拍摄图像上重叠显示的显示图像的ID。位置(纬度、经度)列,存储与显示图像相关联的位置信息。位置信息包括纬度、经度。此外,位置信息也可以是邮政编码、地址或者设施名等。
图4是表示显示图像DB142的数据布局的一例的说明图。显示图像DB142包括图像ID列、类型列、图像列、说明信息ID列、公开信息ID列。图像ID列,存储为识别显示图像而唯一指定的显示图像的ID。类型列,存储显示图像的种类。显示图像的种类包括静止图像、立体图像、动态图像。图像列,存储与图像ID相对应的显示图像的数据。说明信息ID列,存储与显示图像相关联的说明信息的ID。公开信息ID列,存储与显示图像相关联的公开信息的ID。此外,不受限于只对于每个显示图像设定公开信息,也可以对整体内容设定公开信息。例如,对于用户的朋友,可以公开该用户的所有显示图像。
图5是表示说明信息DB143的数据布局的一例的说明图。说明信息DB143包括说明信息ID列、类型列、说明信息列。说明信息ID列,存储用于识别与显示图像相关联的说明信息而唯一指定的说明信息的ID。类型列,存储说明信息的种类。说明信息的种类包括声音信息或者文本信息。文本信息可以是单纯的文字,也可以是包含URL(Uniform ResourceLocator:统一资源定位器)等的文字。说明信息列,存储与说明信息ID相对应的声音数据或者文本数据。
图6是表示公开信息DB144的数据布局的一例的说明图。公开信息DB144包括公开信息ID列、类型列、公开范围列。公开信息ID列,存储用于识别公开信息而唯一指定的公开信息的ID。类型列,存储公开的种类。本实施方式中,公开的种类包括公开、非公开以及部分公开。公开范围列,存储与公开信息ID对应的公开范围的信息。本实施方式中,公开类型分为“公开”、“非公开”、“部分公开”。当公开类型设定为“公开”的时候,公开范围列设定为“全员”。当公开类型设定为“非公开”的时候,公开范围列设定为“-”。当公开类型设定为“部分公开”的时候,公开范围列设定为用户的等级。用户的等级例如为与用户DB141的用户等级相同的等级,分为“普通用户”、“银用户”、“金用户”三个等级。通过按用户的等级设定公开范围,能够仅对特别的用户公开提前销售信息、促销品信息或者优惠信息等。
此外,公开范围不受限于上述的构成,例如也可以根据世界区域设定公开范围。具体方式为,根据地理区域,划分为非洲、亚洲、欧洲、北美、中南美、大洋洲六个区域。更进一步细化,例如对于非洲,可以划分为东非、中非、北非、南非、西非。通过根据地理区域进行公开范围的设定,能够提供提前销售区域、网上购物禁止区域或者销售终止区域等各种服务。更进一步,用户也可以自由地设定公开范围。例如,用户可以设定只对指定的朋友公开。
图7是表示终端2的构成例的框图。终端2包括控制部21、存储部22、通信部23、相簿24、输入部25、显示部26、拍摄部27、时钟部28、麦克29、扬声器20。各部分构成由总线B连接。
控制部21包括CPU、MPU等运算处理装置,通过读出并执行存储部22里存储的控制程序2P,进行终端2相关的各种信息处理、控制处理等。此外,图7中控制部21是以单一的处理器为例进行了说明,也可以采用多处理器。存储部22包括RAM、ROM等存储器元件,存储有控制部21执行处理时所需的控制程序2P或者数据等。此外,存储部22临时存储控制部21执行运算处理所需的数据等。通信部23包括用于进行与通信相关的处理的处理电路等,经由网络N,和服务器1进行信息的收发。相簿24包括显示图像和音乐。输入部25是键盘或者鼠标。显示部26是液晶显示装置。另外,输入部25和显示部26也可以是一体化的触摸屏。
拍摄部27例如是CCD(Charge Coupled Device:电荷耦合元件)相机、CMOS(Complementary metal Oxide Semiconductor:互补金属氧化物半导体)相机等拍摄装置。控制部21,能够通过拍摄部27识别地球仪3的拍摄图像中的球体表面的标识信息或者QR码(注册商标)。另外,拍摄部27也可以不内置于终端2中,而是在外部直接与终端2相连接的能够拍摄的结构。
时钟部28是对时刻或者经过时间等进行计时并根据控制部21的请求将计时结果发给控制部21的电路。另外,时钟部28提供定时器功能。定时器功能是指,从指示开始计时起经过了预先设定的时间后将结果通知控制部21。或者,定时器功能是指,针对控制部21的询问,回答从指示开始计时起是否经过了预先设定的时间。
麦克29是将声音转换为电信号的装置。扬声器20是将电信号转换为声音的装置。此外,麦克29以及扬声器20,也可以是通过蓝牙(注册商标)那样的短距离无线通信方式与终端2连接的耳机(headset)。
图8A以及图8B是实施方式1的AR系统的动作说明图。本实施方式中,作为AR系统的实施方式的一例,以咖啡农园销售系统为例进行说明。图8A是示意全体的动作的说明图。咖啡农园的终端2的控制部21受理对显示图像的选择,该显示图像用于在地球仪3的拍摄画像上重叠显示。显示图像包括静止图像、立体图像和动态图像。显示图像可以从咖啡农园的终端2的相簿24中取得,也可以通过咖啡农园的终端2的拍摄部27进行拍摄。更进一步,也可以通过咖啡农园的终端2的通信部23从未图示的外部装置接收。例如,受理的显示图像为农园中盛开的咖啡的花的照片、咖啡果实丰收的照片或者咖啡豆上市的照片等。
咖啡农园的终端2的控制部21取得受理的显示图像的位置信息。此外,在服务器1端也可以取得位置信息。这种情况,只要取得图像附带的纬度、经度信息即可。关于位置信息的取得处理,当用带有GPS(全球定位系统)功能的数码相机或者智能手机等拍摄图像的时候,也可以从利用GPS功能赋予纬度、经度信息拍摄的图像中提取出位置信息。另外,也可以通过咖啡农园的终端2的输入部25手动输入位置信息。
另外,也可以通过谷歌(注册商标)地图服务取得位置信息。例如,利用谷歌地图接口(Google Maps API),基于谷歌地图数据将地图嵌入在终端2的应用程序里。终端2受理地图上画面被点击处的场所信息或者被输入的地址的关键字信息,经由谷歌地图接口,向谷歌地图服务器发送受理的信息。谷歌地图服务器取得与终端2发送的信息相对应的纬度以及经度等位置信息,向终端2发送。终端2的通信部23,接收从谷歌地图服务器发送的位置信息。
更进一步,也可以根据地球仪3的拍摄图像中的标识信息提取位置信息。图9A以及图9B是表示位置信息的取得例的示意图。是基于地球仪3的拍摄图像中的AR标识信息取得位置信息的例子。
图9A是通过拖放操作取得位置信息的取得例的示意图。终端2的控制部21,根据拖放操作,将被选择的显示图像移动到地球仪3的拍摄图像中的设定目的地。终端2的控制部21,识别与地球仪3的拍摄图像中的设定目的地相对应的AR标识信息,根据识别的AR标识信息提取位置信息。
图9B是通过菜单操作取得位置信息的取得例的示意图。终端2的控制部21,根据对地球仪3的拍摄图像中的设定目的地的点击操作,识别与拍摄图像中的设定目的地相对应的AR标识信息。终端2的控制部21,根据识别的AR标识信息提取出位置信息,根据提取的位置信息,生成位置选择用的菜单。终端2的控制部21,通过终端2的显示部26将生成的位置选择用的菜单重叠显示在地球仪3的拍摄图像上。例如,终端2的控制部21,受理对拍摄图像中的“南非”区域的点击操作,识别被点击处或者被点击处周围的AR标识。终端2的控制部21,根据识别的AR标识信息取得“南非”区域的分类信息,根据取得的“南非”区域的分类信息生成菜单。例如,生成的菜单项为“斯威士兰王国”、“纳米比亚共和国”、“博茨瓦纳共和国”、“南非共和国”、“莱索托王国”。终端2的控制部21,通过终端2的显示部26将生成的菜单在地球仪3的拍摄图像上重叠显示。终端2的控制部21,也可以受理对菜单项的点击操作,取得与受理的菜单项相对应的位置信息。此外,关于显示形式,不受限于菜单,也可以是对话框或者下拉列表框等。
咖啡农园的终端2的控制部21,将被选择的显示图像以及与显示图像相关联的位置信息与咖啡农园的用户ID相关联。咖啡农园的终端2的通信部23,向服务器1发送咖啡农园的用户ID、显示图像以及与显示图像相关联的位置信息。本实施方式中,终端2的控制部21,以先受理显示图像的选择、然后受理位置信息的取得为例进行说明,但不受上述顺序的限制。例如,终端2的控制部21,可以先受理位置信息的取得,然后受理与位置信息相对应的显示图像的选择。
服务器1的通信部13,接收从咖啡农园的终端2发送的咖啡农园的用户ID、用于在地球仪3的拍摄图像上重叠显示的显示图像以及与显示图像相关联的位置信息。服务器1的控制部11,将接收的显示图像以及与显示图像关联的位置信息与咖啡农园的用户ID相关联,存储到大容量存储部14中。具体方式为,服务器1的控制部11,对显示图像分配唯一的显示图像ID,并将咖啡农园的用户ID、该显示图像ID以及位置信息作为一条记录存储到用户DB141中。服务器1的控制部11,将显示图像ID以及显示图像的数据作为一条记录存储到显示图像DB142中。
下面对关于咖啡农园的用户发送的显示图像的显示处理进行说明。此外,重叠显示在地球仪3的拍摄图像上的内容的种类,除了咖啡农园,还可以包括游轮航行、寻宝游戏、飞机航行、世界音乐以及世界遗产。本实施方式中,利用咖啡农园的内容举例说明。为了在地球仪3的拍摄图像上重叠显示与咖啡农园的用户ID相对应的显示图像,顾客的终端2的通信部23向服务器1发送咖啡农园的用户ID。图10是终端2取得用户ID的示意图。具体方式为,顾客的终端2的控制部21取得通过顾客的终端2的拍摄部27拍摄的地球仪3的拍摄图像。顾客的终端2的控制部21,通过顾客的终端2的输入部25受理对“咖啡农园”的点击操作,取得咖啡农园的用户ID。顾客的终端2的通信部23将取得的咖啡农园的用户ID向服务器1发送。此外,关于用户ID的取得处理,不限于上述的方式,例如,也可以通过手动输入取得。本实施方式中,以发送咖啡农园的用户ID为例进行了说明,但不受此限制。也可以发送能够指定在地球仪3的拍摄图像上重叠显示的内容的种类的URL或者内容ID等信息。
服务器1的通信部13,接收从顾客的终端2发送的咖啡农园的用户ID。服务器1的控制部11,根据接收的咖啡农园的用户ID在大容量存储部14的用户DB141中检索,取得与咖啡农园的用户ID相对应的显示图像的显示图像ID以及位置信息。控制部11,从显示图像DB142中取得与所取得的显示图像ID相对应的显示图像。服务器1的通信部13,将取得的显示图像以及与显示图像相关联的位置信息向顾客的终端2发送。
顾客的终端2的通信部23,接收从服务器1中发送的与咖啡农园的用户ID相对应的显示图像以及与显示图像相关联的位置信息。如图8B所示,顾客的终端2的控制部21,指定与接收到的位置信息相对应的地球仪3的拍摄图像中的球体位置。通过顾客的终端2的显示部26,顾客的终端2的控制部21将接收到的显示图像的缩略图在指定的球体位置上重叠显示。另外,顾客的终端2的控制部21,通过顾客的终端2的输入部25受理对显示图像的点击操作的时候,进行显示图像的放大处理。通过顾客的终端2的显示部26,顾客的终端2的控制部21能够将放大的显示图像在地球仪3的拍摄图像上重叠显示。此外,不受限于上述的显示形式,也可以将接收的显示图像以全屏方式显示在顾客的终端2的显示部26上。另外,如果接收到的显示图像是动态图像的时候,也可以通过点击操作开始播放动态图像。
此外,本实施方式中,虽以顾客的终端2接收并显示咖啡农园的用户的显示图像为例进行了说明,但不受此限制。也可以接收用户自己发送的显示图像。例如,咖啡农园的终端2,通过向服务器1发送自己的用户ID,接收服务器1发送的与自己的用户ID相对应的显示图像以及与显示图像相关联的位置信息。咖啡农园的终端2的控制部21,指定与接收的位置信息相对应的地球仪3的拍摄图像中的球体位置。通过咖啡农园的终端2的显示部26,咖啡农园的终端2的控制部21也可以将接收的显示图像重叠显示在指定的球体位置上。
图11是表示实施方式1的终端2发送显示图像时的处理步骤的流程图。终端2的控制部21通过终端2的输入部25受理用户ID等认证信息的输入。终端2的通信部23,向服务器1发送受理的认证信息(步骤S201)。服务器1的控制部11,对通过服务器1的通信部13接收的用户ID等认证信息进行认证处理(步骤S101)。服务器1的控制部11判断用户认证是否成功(步骤S102)。若判断用户认证成功(步骤S102为YES),服务器1的通信部13向终端2发送成功的指令。若判断用户认证失败(步骤S102为NO),服务器1的控制部11结束处理。当终端2的通信部23接收到用户认证成功的指令时,终端2的控制部21受理对显示图像的选择,该显示图像用于在地球仪3的拍摄图像上重叠显示(步骤S202)。终端2的控制部21,取得与选择的显示图像相对应的位置信息(步骤S203),将选择的显示图像以及取得的位置信息与用户ID相关联。终端2的通信部23,将用户ID、显示图像以及位置信息向服务器1发送(步骤S204)。服务器1的通信部13,接收从终端2发送的用户ID、显示图像以及与显示图像相关联的位置信息(步骤S103)。服务器1的控制部11,将接收的显示图像以及与显示图像相关联的位置信息与用户ID相关联,将用户ID、显示图像以及位置信息存储到大容量存储部14中(步骤S104)。此外,虽然步骤S204是用户ID和显示图像共同发送的示例,但不受此限制。也可以根据在步骤S101中接收的用户ID与显示图像相关联。
图12是表示实施方式1的终端2接收显示图像时的处理步骤的流程图。关于和图11重复的内容,赋予同一符号并省略说明。终端2的控制部21,取得通过终端2的拍摄部27拍摄的地球仪3的拍摄图像(步骤S205)。终端2的通信部23,向服务器1发送与用于在地球仪3的拍摄图像中重叠显示的显示图像相对应的用户ID(步骤S206)。服务器1的通信部13,接收从终端2发送的用户ID(步骤S105)。服务器1的控制部11,将接收的用户ID和大容量存储部14的用户DB141中存储的用户ID相比较,取得与相同的用户ID相对应的显示图像ID以及位置信息(步骤S106)。服务器1的控制部11,从大容量存储部14的显示图像DB142中取得与所取得的显示图像ID相对应的显示图像(步骤S107)。服务器1的通信部13,向终端2发送取得的显示图像以及与显示图像相关联的位置信息(步骤S108)。终端2的通信部23,接收从服务器1发送的显示图像以及与显示图像相关联的位置信息(步骤S207)。此外,若存在多个显示图像,可以同时接收,也可以分为数次接收。终端2的控制部21,指定与接收的位置信息相对应的地球仪3的拍摄图像中的球体位置(步骤S208)。通过终端2的显示部26,终端2的控制部21将接收的显示图像重叠显示在指定的拍摄图像中的球体位置(步骤S209)。
接下来,说明与地球仪3的拍摄图像上重叠显示的显示图像对应的说明信息的设定处理。说明信息包括声音信息或者文本信息。终端2的控制部21可以通过终端2的麦克29受理声音信息。也可以通过终端2的通信部23从外部装置接收声音信息。终端2的控制部21,通过终端2的输入部25受理文本信息。说明信息可以和显示图像同时设定,也可以和显示图像分别进行设定。与显示图像分别进行设定的时候,取得与用户ID相对应的显示图像的显示图像ID,对取得的显示图像ID设定说明信息。
本实施方式中,说明对于咖啡农园的终端2发送的显示图像设定说明信息时的处理。咖啡农园的终端2的通信部23向服务器1发送咖啡农园的用户ID。服务器1的控制部11,取得与通过服务器的通信部13接收的咖啡农园的用户ID相对应的显示图像的显示图像ID。服务器1的通信部13,将取得的显示图像ID发送到咖啡农园的终端2。
咖啡农园的终端2的通信部23,接收从服务器1发送的显示图像ID。咖啡农园的终端2的控制部21,受理说明信息的输入,将受理的说明信息和咖啡农园的用户ID以及显示图像ID相关联。咖啡农园的终端2的通信部23,向服务器1发送咖啡农园的用户ID、显示图像ID以及说明信息。服务器1的通信部13,接收从咖啡农园的终端2发送的咖啡农园的用户ID、显示图像ID以及说明信息。服务器1的控制部11,将接收的说明信息和咖啡农园的用户ID以及显示图像ID相关联,存储到大容量存储部14中。具体方式为,服务器1的控制部11,对于说明信息分配唯一的说明信息ID,将该说明信息ID存储于与接收的咖啡农园的用户ID以及显示图像ID相对应的用户DB141的记录里。服务器1的控制部11,将说明信息ID以及说明信息的数据以一条记录存储在说明信息DB143中。
根据以上所述,能够在咖啡农园的终端2或者顾客的终端2的显示部26将与显示图像相关联的说明信息重叠显示在地球仪3的拍摄图像上。例如,顾客的终端2的通信部23向服务器1发送咖啡农园的用户ID。服务器1的控制部11,取得与通过服务器1的通信部13接收的咖啡农园的用户ID相对应的显示图像、该显示图像相关联的位置信息以及说明信息。服务器1的通信部13,将取得的显示图像、该显示图像相关联的位置信息以及说明信息向顾客的终端2发送。
图13A以及图13B是表示实施方式1的终端2的说明信息的说明图。顾客的终端2的通信部23,接收从服务器1发送的显示图像、该显示图像相关联的位置信息以及说明信息。
图13A是文本形式的说明信息的示意图。顾客的终端2的控制部21,指定与接收的位置信息相对应的地球仪3的拍摄图像中的球体位置。通过顾客的终端2的显示部26,顾客的终端2的控制部21将显示图像重叠显示在指定的球体位置上。另外,顾客的终端2的控制部21,在通过顾客的终端2的输入部25受理了对显示图像的点击操作的时候,进行显示图像的放大处理。通过顾客的终端2的显示部26,顾客的终端2的控制部21能够将放大的显示图像以及与显示图像相关联的说明信息在地球仪3的拍摄图像上重叠显示。此外,不受限于上述的显示形式,也可以将接收的显示图像以及与显示图像相关联的说明信息在顾客的终端2的显示部26中全屏覆盖显示。
图13B是声音形式的说明信息的示意图。顾客的终端2的控制部21,指定与接收的位置信息相对应的地球仪3的拍摄图像中的球体位置。通过顾客的终端2的显示部26,顾客的终端2的控制部21将显示图像重叠显示在指定的球体位置上。另外,顾客的终端2的控制部21,在通过顾客的终端2的输入部25受理了对显示图像的点击操作的时候,进行显示图像的放大处理,生成说明信息播放按钮BTN1。通过顾客的终端2的显示部26,顾客的终端2的控制部21将放大的显示图像以及生成的说明信息播放按钮BTN1在地球仪3的拍摄图像上重叠显示。顾客的终端2的控制部21,在通过顾客的终端2的输入部25受理了对说明信息播放按钮BTN1的点击操作的时候,能够通过顾客的终端2的扬声器20播放接收的声音信息。此外,关于声音信息的播放,不受上述形式的限制。例如,也可以不生成说明信息播放按钮BTN1,而是当显示图像在地球仪3的拍摄图像上重叠显示时,顾客的终端2的控制部21通过顾客的终端2的扬声器20自动播放声音信息。
图14是表示实施方式1的终端2发送说明信息时的处理步骤的流程图。关于和图11、图12重复的内容,赋予同一符号并省略说明。服务器1的控制部11,从大容量存储部14的用户DB141中取得与终端2发送的用户ID相对应的显示图像ID(步骤S109)。服务器1的通信部13,将取得的显示图像ID向终端2发送(步骤S110)。终端2的通信部23,接收从服务器1发送的显示图像ID(步骤S210)。终端2的控制部21,与用户ID以及接收的显示图像ID相关联地设定包含声音信息或者文本信息的说明信息(步骤S211)。终端2的通信部23,向服务器1发送用户ID、显示图像ID以及说明信息(步骤S212)。服务器1的通信部13,接收从终端2发送的用户ID、显示图像ID以及说明信息(步骤S111)。服务器1的控制部11,将接收的说明信息与接收的用户ID以及显示图像ID相关联,存储到大容量存储部14的说明信息DB143中(步骤S112)。
图15是表示实施方式1的终端2接收说明信息时的处理步骤的流程图。关于和图12重复的内容,赋予同一符号并省略说明。服务器1的控制部11,从大容量存储部14的用户DB141中取得与接收的用户ID相对应的显示图像ID以及位置信息(步骤S113)。控制部11,从大容量存储部14的显示图像DB142中取得与所取得的显示图像ID相对应的显示图像以及说明信息ID(步骤S114)。控制部11,从大容量存储部14的说明信息DB143中取得与所取得的说明信息ID相对应的说明信息(步骤S115)。服务器1的通信部23,向终端2发送取得的显示图像、与显示图像相关联的位置信息以及说明信息(步骤S116)。终端2的通信部23,接收从服务器1发送的显示图像、与显示图像相关联的位置信息以及说明信息(步骤S213)。终端2的控制部21,指定与接收的位置信息相对应的地球仪3的拍摄图像中的球体位置。通过终端2的显示部26,终端2的控制部21将接收的显示图像以及与显示图像相关联的说明信息重叠显示在指定的球体位置(步骤S214)。
下面,说明与地球仪3的拍摄图像上重叠显示的显示图像对应的公开信息的设定处理进行说明。公开信息包括公开、非公开、部分公开。公开的情形是指,没有任何限制将显示图像向全员公开。非公开的情形是指,只对拥有显示图像的用户公开,不对其他用户公开。部分公开的情形是指,对满足公开范围内的条件的用户公开。本实施方式中,可设定为部分公开的公开范围,是与用户DB141的用户等级相同的等级,有“普通用户”、“银用户”、“金用户”三种。即,向设定为被指定的等级以上的等级的用户公开。具体方式为,当对部分公开设定“普通用户”的时候,对所有属于“普通用户”、“银用户”以及“金用户”等级的用户公开显示图像。当对部分公开设定“银用户”的时候,对所有属于“银用户”以及“金用户”等级的用户公开显示图像。当对部分公开设定“金用户”的时候,只对属于“金用户”等级的用户公开显示图像。另外,关于公开信息,可以在选择显示图像的时候设定公开信息,与显示图像同时向服务器1发送,也可以对已经发送的显示图像追加设定公开信息,并发送到服务器1。服务器1的控制部11,将终端2发送的公开信息存储到大容量存储部14的公开信息DB144中。
图16是表示实施方式1的终端2发送公开信息时的处理步骤的流程图。关于和图14重复的内容,赋予同一符号并省略说明。终端2的控制部21,与用户ID以及接收的显示图像ID相关联地设定公开信息(步骤S215)。终端2的通信部23,向服务器1发送用户ID、显示图像ID以及公开信息(步骤S216)。服务器1的通信部13,接收从终端2发送的用户ID、显示图像ID以及公开信息(步骤S117)。服务器1的控制部11,将接收的公开信息与接收的用户ID以及显示图像ID相关联,存储在大容量存储部14的公开信息DB144中(步骤S118)。
图17是表示实施方式1的终端2基于公开信息接收显示图像时的处理步骤的流程图。关于和图12、图14重复的内容,赋予同一符号并省略说明。服务器1的控制部11,从大容量存储部14的显示图像DB142中取得与所取得的显示图像ID相对应的公开信息ID(步骤S119)。控制部11,根据取得的公开信息ID判定显示图像的公开范围(步骤S120)。关于公开范围判定的子例程后面进行说明。服务器1的控制部11判断公开范围的判定结果是否为公开(步骤S121)。若判断公开范围结果为公开(步骤S121为YES),服务器1的控制部11取得显示图像以及与显示图像相关联的位置信息。若判断公开范围结果为非公开(步骤S121为NO),服务器1的控制部11结束处理。
图18是表示实施方式1的公开范围判定的子例程的处理步骤的流程图。服务器1的控制部11,判断接收的用户ID和登录的用户ID是否相同(步骤S1801),若判断接收的用户ID和登录的用户ID相同(步骤S1801为YES),由于对于用户自己已经发送的显示图像是没有显示限制的,控制部11将判定结果设定为公开(步骤S1809)。若判断接收的用户ID和登录的用户ID不相同(步骤S1801为NO),控制部11从大容量存储部14的公开信息DB144中取得与公开信息ID相对应的公开的类型(步骤S1802)。控制部11,判定公开的类型是否为非公开(步骤S1803)。若判断公开的类型是非公开(步骤S1803为YES),控制部11设定判定结果为非公开(步骤S1810)。若判断公开类型不是非公开(步骤S1803为NO),控制部11判定公开的类型是否是公开(步骤S1804)。若判断公开的类型为公开(步骤S1804为YES),控制部11将判定结果设定为公开(步骤S1809)。若判断公开的类型不是公开(步骤S1804为NO),控制部11判定公开的类型是否为部分公开(步骤S1805)。若判断公开的类型为部分公开(步骤S1805为YES),控制部11从服务器1的大容量存储部14的用户DB141中取得与登录用户ID相对应的用户的等级(步骤S1806)。控制部11,将取得的用户的等级和公开范围的等级进行比较(步骤S1807)。控制部11,判定用户的等级是否在公开范围的等级以上(步骤S1808)。若判断用户的等级在公开范围的等级以上(步骤S1808为YES),控制部11将判定结果设定为公开(步骤S1809)。若判定用户的等级低于公开范围的等级(步骤S1808为NO),控制部11将判定结果设定为非公开(步骤S1810)。若判断公开信息不是部分公开(步骤S1805为NO),控制部11判定结果设定为非公开(步骤S1810)。步骤S1809以及步骤S1810的处理结束后,控制部11返回公开范围判定结果(步骤S1811)。
根据本实施方式,通过用户自由设定显示图像,能够调动用户的积极性。
根据本实施方式,能够将与显示图像相关联的说明信息重叠显示在球体的拍摄图像上。
根据本实施方式,能够与公开的对象用户共享显示图像。此外,通过设定公开、非公开以及部分公开,可以提高安全水平。更进一步,能够适当地设定公开范围,实现多目的的AR系统。
实施方式2
本实施方式中,作为AR系统的实施方式的一例,以游轮航行系统为例进行说明。旅行社的终端2的控制部21,基于游轮航行路线,受理对多个观光地点的显示图像的选择,该观光地点的显示图像用于在地球仪3的拍摄图像上重叠显示。观光地点的显示图像,可以通过旅行社的终端2的拍摄部27拍摄,也可以从旅行社的终端2的相簿24中选择,还可以通过旅行社的终端2的通信部23从未图示的外部装置接收。旅行社的终端2的控制部21,取得受理的与多个显示图像相对应的各自的位置信息,将受理的多个显示图像以及取得的位置信息与用户ID相关联。关于位置信息的取得处理,由于和实施方式1的位置信息的取得处理相同,故省略说明。旅行社的终端2的通信部23,向服务器1发送用户ID、受理的多个显示图像以及与显示图像相关联的位置信息。服务器1,存储从旅行社的终端2发送的用户ID、多个显示图像以及与显示图像相关联的位置信息到大容量存储部14中。
根据以上所述,通过旅行社的终端2的显示部26,能够在地球仪3的拍摄图像上重叠显示旅行社提供的关于游轮的航行信息的显示图像。旅游者的终端2的控制部21,取得通过旅游者的终端2的拍摄部27拍摄的地球仪3的拍摄图像。旅游者的终端2的通信部23,向服务器1发送旅行社的用户ID。
服务器1的通信部13,接收旅游者的终端2发送的旅行社的用户ID。服务器1的控制部11,从大容量存储部14的用户DB141中取得与旅行社的用户ID相对应的多个显示图像以及与显示图像相关联的位置信息。服务器1的通信部13,向旅游者的终端2发送取得的多个显示图像以及与显示图像相关联的位置信息。
旅游者的终端2的通信部23,接收从服务器1发送的关于旅行社的游轮航行信息的多个显示图像以及与显示图像相关联的位置信息。对于接收的多个显示图像,能够以日期和时间的顺序或者显示顺序的顺序在地球仪3的拍摄图像上切换重叠显示。日期和时间的顺序,是指日期和时间的升序或者降序。显示顺序的顺序,可以手动输入设定,也可以用其他的方式设定。例如,控制部21也可以对于多个显示图像随机设定显示顺序。
图19是实施方式2的终端2的顺序显示的动作说明图。以下,以日期和时间的顺序显示为例进行说明。例如,如图所示,P1、P2、P3以及P4代表关于游轮的航行路线的观光地。旅游者的终端2的通信部23,接收P1、P2、P3以及P4的显示图像。接收的P1、P2、P3以及P4的显示图像,是基于游轮的航行路线的行进方向按照日期和时间的升序做成的图像。例如P1是出发地的时候,P1的显示图像的日期和时间是最旧的日期和时间,P4是最终目的地的时候,P4的显示图像的日期和时间是最新的日期和时间。旅游者的终端2的控制部21,从接收的P1、P2、P3以及P4的显示图像分别提取出日期和时间信息。旅游者的终端2的控制部21,按提取出的日期和时间信息所示的日期和时间的升序对P1、P2、P3以及P4的显示图像进行排序。例如,显示图像的排序结果为P1、P2、P3、P4的顺序。旅游者的终端2的控制部21,对进行了排序的多个显示图像设定5秒的显示时间间隔。此外,显示时间间隔可以设定为任意的时间间隔。
旅游者的终端2的控制部21,从进行了排序的多个显示图像中取得第一个显示图像。旅游者的终端2的控制部21,指定与第一个显示图像相关联的位置信息相对应的拍摄图像中的球体位置。通过旅游者的终端2的显示部26,旅游者的终端2的控制部21在指定的球体位置上重叠显示第一个显示图像。起动旅游者的终端2的时钟部28的定时器,计算经过时间。5秒经过后,旅游者的终端2的控制部21,从地球仪3的拍摄图像中清除正在显示的第一个显示图像,从多个显示图像中取得第二个显示图像。旅游者的终端2的控制部21,指定与第二个显示图像相关联的位置信息相对应的拍摄图像中的球体位置。通过旅游者的终端2的显示部26,旅游者的终端2的控制部21在指定的球体位置上重叠显示第二个显示图像。此外,从多个显示图像中取得下一个显示图像之前,也可以不清空拍摄图像中的球体位置上正在显示的显示图像。第三个或第四个显示处理,由于和第二个显示处理相同,省略说明。在与第四个显示图像相关联的位置信息相对应的拍摄图像中的球体位置上重叠显示第四个显示图像后结束定时。另外,也可以不结束定时,而是继续执行上述的处理。在这个情况下,例如,通过再次从多个显示图像中取得第一个显示图像并将其在与第一个显示图像相关联的位置信息相对应的拍摄图像中的球体位置上重叠显示,能够反复地切换显示多个显示图像。
图20是表示实施方式2的终端2接收多个显示图像时的以日期和时间的顺序排序的处理步骤的流程图。关于和图12重复的内容,赋予同一符号并省略说明。服务器1的控制部11,从大容量存储部14的用户DB141中取得与接收的用户ID相对应的多个显示图像ID以及位置信息(步骤S131)。服务器1的控制部11,从大容量存储部14的显示图像DB142中取得与所取得的各个显示图像ID相对应的各个显示图像(步骤S132)。服务器1的通信部13,向终端2发送取得的多个显示图像以及与显示图像相关联的位置信息(步骤S133)。终端2的通信部23,接收从服务器1发送的多个显示图像以及与显示图像相关联的位置信息(步骤S231)。终端2的控制部21,基于取得的地球仪3的拍摄图像中的AR标识信息指定显示范围,从接收的多个显示图像中提取指定的显示范围内的显示图像(步骤S232)。关于显示范围的指定处理,例如,终端2的控制部21,提取出地球仪3的拍摄图像中的显示中心点以及显示半径,识别与提取出的显示中心点相对应的纬度、经度位置信息。终端2的控制部21,可以以识别的纬度、经度的点为中心根据提取出的半径内的位置信息指定显示范围。终端2的控制部21,根据提取出的多个显示图像按顺序提取日期和时间信息(步骤S233),判断是否是最后的显示图像(步骤S234)。若判断不是最后的显示图像(步骤S234为NO),终端2的控制部21返回至显示图像的日期和时间信息的提取处理,提取下一个显示图像的日期和时间信息(步骤S233)。若判断是最后的显示图像(步骤234为YES),终端2的控制部21根据提取的多个日期和时间信息,以日期和时间的升序或者降序对多个显示图像进行排序(步骤S235)。终端2的控制部21,设定进行了排序的多个显示图像的切换显示的时间间隔(步骤S236)。
图21是表示实施方式2的终端2进行切换显示时的处理步骤的流程图。为了监视时间间隔,由终端2的时钟部28起动运行定时器(步骤S237)。终端2的控制部21,从进行了排序的多个显示图像中按顺序取得显示图像以及与显示图像相关联的位置信息(步骤S238),指定与取得的位置信息相对应的拍摄图像中的球体位置(步骤S239)。通过终端2的显示部26,终端2的控制部21将显示图像在指定的拍摄图像中的球体位置上重叠显示(步骤S240)。终端2的控制部21,判断取得的显示图像是否是最后的显示图像(步骤S241)。若判断是最后的显示图像(步骤S241为YES),终端2的控制部21停止定时器(步骤S244)。若判断不是最后的显示图像(步骤S241为NO),终端2的控制部21判定是否经过了设定的时间间隔(步骤S242)。若判断没有经过设定的时间间隔(步骤S242为NO),终端2的控制部21利用定时器继续监视时间。若判断经过了设定的时间间隔(步骤S242为YES),终端2的控制部21清除拍摄图像中正在显示的显示图像(步骤S243)。终端2的控制部21,返回至显示图像以及位置信息的取得处理,从多个显示图像中取得下一个显示图像以及与显示图像相关联的位置信息(步骤S238)。
图22是表示实施方式2的终端2的排序处理步骤的流程图。关于和图20重复的内容,赋予同一符号并省略说明。终端2的控制部21,受理对于接收的多个显示图像的显示顺序的输入(步骤S245)。终端2的控制部21,按照受理的显示顺序的顺序对多个显示图像进行排序(步骤S246)。后续的处理,由于与图21的处理相同故省略说明。
图23是实施方式2的终端2的包含轨迹信息的动作说明图。以上述多个显示图像按照日期和时间的顺序重叠显示的例子为基础,加上轨迹信息在地球仪3的拍摄图像上重叠显示为例进行说明。旅游者的终端2的控制部21,对多个观光地点的显示图像P1、P2、P3以及P4按照日期和时间的升序进行排序。例如,观光地点的显示图像的排序结果为P1、P2、P3、P4的顺序。旅游者的终端2的控制部21,设定多个显示图像的切换显示的时间间隔。例如,时间间隔设定为5秒。
如图23A所示,旅游者的终端2的控制部21,从多个显示图像中取得第一个显示图像P1以及与第一个显示图像P1相关联的位置信息。旅游者的终端2的控制部21,基于取得的与第一个显示图像P1相关联的位置信息,生成轨迹信息T1。旅游者的终端2的控制部21,指定与取得的第一个显示图像P1相关联的位置信息相对应的地球仪3的拍摄图像中的球体位置。通过旅游者的终端2的显示部26,旅游者的终端2的控制部21将取得的第一个显示图像P1以及生成的轨迹信息T1重叠显示在指定的球体位置。
接下来,如图23B所示,沿着游轮航行路线,经过设定的5秒时间间隔后,旅游者的终端2的控制部21,依次从多个显示图像中取得下一个显示图像P2以及与下一个显示图像P2相关联的位置信息。旅游者的终端2的控制部21,基于与第一个显示图像P1相关联的位置信息以及下一个显示图像P2相关联的位置信息,更新已有的轨迹信息T1。旅游者的终端2的控制部21,从地球仪3的拍摄图像中清除正在显示的第一个显示图像P1。旅游者的终端2的控制部21,指定与取得的下一个显示图像P2相关联的位置信息相对应的地球仪3的拍摄图像中的球体位置。通过旅游者的终端2的显示部26,旅游者的终端2的控制部21将取得的下一个显示图像P2以及更新的轨迹信息T1重叠显示在指定的球体位置。
接下来,如图23C所示,沿着游轮航行路线,经过设定的5秒时间间隔后,旅游者的终端2的控制部21,依次从多个显示图像中取得下一个显示图像P3以及与下一个显示图像P3相关联的位置信息。旅游者的终端2的控制部21,基于与显示图像P1、显示图像P2以及显示图像P3相关联的位置信息,更新已有的轨迹信息T1。旅游者的终端2的控制部21,从地球仪3的拍摄图像中清除正在显示的显示图像P2。旅游者的终端2的控制部21,指定与取得的下一个显示图像P3相关联的位置信息相对应的地球仪3的拍摄图像中的球体位置。通过旅游者的终端2的显示部26,旅游者的终端2的控制部21将取得的下一个显示图像P3以及更新的轨迹信息T1重叠显示在指定的球体位置。
接下来,如图23D所示,沿着游轮航行路线,经过设定的5秒时间间隔后,旅游者的终端2的控制部21,依次从多个显示图像中取得下一个显示图像P4以及与下一个显示图像P4相关联的位置信息。旅游者的终端2的控制部21,基于与显示图像P1、显示图像P2、显示图像P3以及显示图像P4相关联的位置信息,更新已有的轨迹信息T1。旅游者的终端2的控制部21,从地球仪3的拍摄图像中清除正在显示的显示图像P3。旅游者的终端2的控制部21,指定与取得的下一个显示图像P4相关联的位置信息相对应的地球仪3的拍摄图像中的球体位置。通过旅游者的终端2的显示部26,旅游者的终端2的控制部21将取得的下一个显示图像P4以及更新的轨迹信息T1重叠显示在指定的球体位置,停止定时器。此外,也可以不停止定时器,而是继续执行上述处理。在这个情况下,例如,通过再次从多个显示图像中取得第一个显示图像,清除已有的轨迹信息后再重新生成,能够反复地切换显示轨迹信息和多个显示图像。
此外,关于轨迹信息的显示形式,不受限于沿着游轮航行路线每隔设定的时间间隔更新轨迹信息。例如,旅游者的终端2的控制部21,取得全部与多个显示图像相关联的位置信息,生成全体航行路线的轨迹信息。通过旅游者的终端2的显示部26,旅游者的终端2的控制部21可以在与位置信息对应的拍摄图像中的球体位置重叠显示生成的全体航行路线的轨迹信息。另外,也可以不将显示图像显示在旅游者的终端2的显示部26上,而是只重叠显示生成的轨迹信息。
图24是表示实施方式2的终端2进行包含轨迹信息的切换显示时的处理步骤的流程图。关于多个显示图像的接收处理以及按照日期和时间的顺序进行排序的处理,由于是与图20相同的处理故省略说明。此外,图24中,关于和图21重复的内容,赋予同一符号并省略说明。终端2的控制部21判断是否存在轨迹信息(步骤S247)。若判断不存在轨迹信息(步骤S247为NO),终端2的控制部21基于取得的与显示图像相关联的位置信息生成轨迹信息(步骤S248)。若判断存在轨迹信息(步骤S247为YES),终端2的控制部21基于取得的与显示图像相关联的位置信息更新已有的轨迹信息(步骤S249)。终端2的控制部21,指定与显示图像相关联的位置信息相对应的拍摄图像中的球体位置。通过终端2的显示部26,终端2的控制部21将显示图像以及轨迹信息重叠显示在指定的球体位置(步骤S250)。
根据本实施方式,能够按照日期和时间信息所示的日期和时间的顺序,在与显示图像相关联的位置信息相对应的拍摄图像中的球体位置重叠显示。
根据本实施方式,能够按照显示顺序的顺序,在与显示图像相关联的位置信息相对应的拍摄图像中的球体位置重叠显示。
根据本实施方式,能够基于与多个显示图像相关联的位置信息生成轨迹信息,在与显示图像相关联的位置信息相对应的拍摄图像中的球体位置重叠显示生成的轨迹信息。
根据本实施方式,能够提供关于游轮航行的观光地点的图像、停留日程表等各种信息。通过航行路线的可视化,能够提供航行路径或者行进方向等服务。
根据本实施方式,也能够利用登山路线或者航空公司的飞行路线。例如,利用登山路线的时候,以颜色区分并用3D对象等的描画手法描画山的高度、河流、湖泊或者海洋等,生成立体图像,将生成的立体图像重叠显示在地球仪3的拍摄图像上。
实施方式3
本实施方式中,作为AR系统实施方式的一例,对寻宝游戏系统进行说明。
图25是表示实施方式3的服务器1的构成例的框图。关于和图2重复的内容,赋予同一符号并省略说明。大容量存储部14包括音乐DB145。音乐DB145,存储音乐或者效果音等的数据。
图26是表示实施方式3的用户DB141的数据布局的一例的说明图。省略说明关于和图3重复的内容。用户DB141包括音乐ID列。音乐ID列与用户ID相关联地存储音乐ID,该音乐ID可唯一指定从终端2发送的音乐。
图27是表示音乐DB145的数据布局的一例的说明图。音乐DB145包括音乐ID列、音乐列。音乐ID列,存储用于识别音乐的唯一指定的音乐的ID。音乐列,存储与音乐ID相对应的音乐的数据。
寻宝游戏的游戏内容包括,显示图像以及音乐。提供寻宝游戏的游戏公司的终端2,将寻宝游戏的显示图像、和显示图像相关联的位置信息以及音乐与游戏公司的用户ID相关联,向服务器1发送。本实施方式中,例如,音乐是关于游戏的剧情的效果音。服务器1的控制部11,将游戏公司的终端2发送的显示图像、位置信息以及效果音与游戏公司的用户ID相关联,存储到大容量存储部14中。具体方式为,服务器1的控制部11,对于显示图像分配唯一的显示图像ID,对于效果音分配唯一的音乐ID。服务器1的控制部11,将游戏公司的用户ID、该显示图像ID,该音乐ID以及位置信息作为一条记录存储到用户DB141中。服务器1的控制部11,将显示图像ID以及显示图像的数据作为一条记录存储到显示图像DB142中。服务器1的控制部11,将音乐ID以及音乐的数据作为一条记录存储到音乐DB145中。
根据以上所述,能够通过游戏者的终端2的显示部26在地球仪3的拍摄图像上重叠显示游戏公司提供的游戏内容。游戏者的终端2的通信部23,接收从服务器1发送的与游戏公司的用户ID相对应的显示图像、和显示图像相关联的位置信息以及效果音。游戏者的终端2的控制部21,指定与接收的位置信息相对应的地球仪3的拍摄图像中的球体位置。通过游戏者的终端2的显示部26,游戏者的终端2的控制部21将接收的显示图像重叠显示在指定的球体位置。游戏者的终端2的控制部21,通过游戏者的终端2的扬声器20播放接收的效果音。
图28是实施方式3的AR系统的动作说明图。例如,图示的G1、G2以及G3是示意有可能埋藏宝藏地点的显示图像。图示的G4是提示地图的显示图像。图示的G5是财宝的显示图像。
如图28A所示,游戏者的终端2的控制部21,指定与接收的显示图像G1、G2以及G3相关联的位置信息相对应的地球仪3的拍摄图像中的球体位置。通过游戏者的终端2的显示部26,游戏者的终端2的控制部21将显示图像G1、G2以及G3重叠显示在指定的球体位置。游戏者的终端2的控制部21通过游戏者的终端2的输入部25受理显示图像G2的点击操作的时候,基于游戏的剧情,取得与显示图像G2相对应的指示。例如,游戏者的终端2的控制部21,若判断与显示图像G2相对应的指示为提示地图的指示,则取得显示图像G4。此外,关于游戏的剧情,可以内置在应用程序的内部,也可以通过终端2的通信部23从服务器1或者未图示的外部装置接收。
接下来,如图28B所示,游戏者的终端2的控制部21,指定与显示图像G4相关联的位置信息相对应的地球仪3的拍摄图像中的球体位置。通过游戏者的终端2的显示部26,游戏者的终端2的控制部21,将显示图像G4重叠显示在指定的球体位置。游戏者的终端2的控制部21,通过游戏者的终端2的扬声器20播放未图示的提示地图的效果音。将显示图像G4重叠显示后,能够切换显示为显示图像G4的缩略图。例如,游戏者的终端2的控制部21,通过游戏者的终端2的输入部25再次受理对显示图像G4的点击操作。游戏者的终端2的控制部21,也可以将地球仪3的拍摄图像中的显示图像G4切换显示为显示图像G4的缩略图。另外,可以利用定时器功能。利用定时器功能的时候,游戏者的终端2的控制部21通过游戏者的终端2的时钟部28起动定时器,计算经过时间。例如,游戏者的终端2的控制部21也可以经过5秒后自动地将地球仪3的拍摄图像中的显示图像G4切换显示为显示图像G4的缩略图。游戏者的终端2的控制部21,在切换显示为显示图像G4的缩略图后,停止定时器。此外,本实施方式中,以显示图像的缩略图为例进行了示意说明,但不受此限制。例如,可以清除地球仪3的拍摄图像中的显示图像G4,也可以将显示图像G4继续显示在地球仪3的拍摄图像上。
接下来,如图28C所示,根据提示的暗示,继续探索其他的可能埋藏宝藏的地点。例如,游戏者的终端2的控制部21,通过游戏者的终端2的输入部25受理对其他示意可能埋藏宝藏的地点的显示图像G3的点击操作。游戏者的终端2的控制部21,基于游戏的剧情,取得与显示图像G3相对应的指示。例如,游戏者的终端2的控制部21,判断与显示图像G3相对应的指示为财宝的指示的时候,取得显示图像G5。
接下来,如图28D所示,游戏者的终端2的控制部21,指定与显示图像G5相关联的位置信息相对应的拍摄图像中的球体位置。通过游戏者的终端2的显示部26,游戏者的终端2的控制部21将显示图像G5重叠显示在指定的球体位置。游戏者的终端2的控制部21,通过游戏者的终端2的扬声器20播放未图示的发现财宝的效果音。此外,提示地图的显示图像G4或者财宝的显示图像G5可以在游戏者终端2的显示部26上全屏显示,也可以在屏幕的一部分区域显示。
另外,显示图像有关联的说明信息的时候,通过游戏者的终端2的显示部26,游戏者的终端2的控制部21也可以将显示图像以及与显示图像相关联的说明信息重叠显示在地球仪3的摄像图像中。例如,如图28B所示,与提示地图的显示图像G4相关联的说明信息是“暗示:去海边探索!”。如图28D所示,与财宝的显示图像G5相关联的说明信息是“恭喜!获得财宝!”。
图29是表示实施方式3的终端2发送显示图像以及音乐时的处理步骤的流程图。关于和图11重复的内容,赋予同一符号并省略说明。终端2的控制部21受理对音乐的选择,该音乐用于与地球仪3的拍摄图像中的指定的位置显示相应的播放(步骤S261)。终端2的控制部21,将选择的显示图像、音乐以及取得的位置信息与用户ID相关联。终端2的通信部23,向服务器1发送用户ID、显示图像、音乐以及位置信息(步骤S262)。服务器1的通信部13,接收从终端2发送的用户ID、显示图像、音乐以及位置信息(步骤S161)。服务器1的控制部11,将接收的显示图像、音乐以及位置信息与用户ID相关联,存储到大容量存储部14中(步骤S162)。
图30是表示实施方式3的终端2接收显示图像以及音乐时的处理步骤的流程图。关于和图12重复的内容,赋予同一符号并省略说明。服务器1的控制部11,从大容量存储部14的用户DB141中取得与终端2发送的用户ID相对应的显示图像ID、音乐ID以及位置信息(步骤S163)。服务器1的控制部11,从大容量存储部14的音乐DB145中取得与所取得的音乐ID相对应的音乐(步骤S164)。服务器1的通信部13,将取得的显示图像、音乐以及与显示图像相关联的位置信息向终端2发送(步骤S165)。终端2的通信部23,接收从服务器1发送的显示图像、音乐以及与显示图像相关联的位置信息(步骤S263)。终端2的控制部21,根据接收的显示图像、音乐以及与显示图像相关联的位置信息,进行游戏处理(步骤S264)。关于游戏的处理流程后面记述。
图31是表示实施方式3的游戏的处理步骤的流程图。终端2的控制部21,指定与示意可能埋藏宝藏地点的显示图像相关联的位置信息相对应的拍摄图像中的球体位置(步骤S901)。以下为了说明简洁,将示意可能埋藏宝藏地点的显示图像称为地点的显示图像。终端2的控制部21,通过终端2的显示部26将地点的显示图像在指定的球体位置上重叠显示(步骤S902)。终端2的控制部21,通过终端2的输入部25受理对地点的显示图像的选择(步骤S903)。基于游戏的剧情,终端2的控制部21根据选择的地点的显示图像判断指示是否是财宝的指示(步骤S904)。终端2的控制部21,若判断指示为财宝的指示(步骤S904为YES),则指定与财宝的显示图像相关联的位置信息相对应的拍摄图像中的球体位置(步骤S905)。终端2的控制部21,通过终端2的显示部26将财宝的显示图像重叠显示在指定的球体位置(步骤S906)。终端2的控制部21,通过终端2的扬声器20播放发现财宝的效果音(步骤S907)。终端2的控制部21,通过终端2的显示部26将与财宝的显示图像相关联的说明信息重叠显示在指定的球体位置(步骤S908),结束处理。终端2的控制部21,若判断指示不是财宝的指示(步骤S904为NO),则判断与选择的地点的显示图像相对应的指示是否是提示地图的指示(步骤S909)。终端2的控制部21,若判断指示是提示地图的指示(步骤S909为YES),指定与提示地图的显示图像相关联的位置信息相对应的拍摄图像中的球体位置(步骤S910)。终端2的控制部21,通过终端2的显示部26,将提示地图的显示图像重叠显示在指定的球体位置(步骤S911)。终端2的控制部21,通过终端2的扬声器20播放提示地图的效果音(步骤S912)。终端2的控制部21,通过终端2的显示部26将与提示地图的显示图像相关联的说明信息重叠显示在指定的球体位置(步骤S913)。终端2的控制部21,在经过步骤S913处理后,以及在判断指示不是提示地图的指示(步骤S909为NO)的时候,返回对地点的显示图像的选择的受理处理(步骤S903)。
根据本实施方式,可以一并享受显示图像和音乐。当寻宝游戏等有剧情的时候,利用效果音能够很容易地令气氛高涨起来。另外,也可以只提供音乐服务。例如,如果取得世界各国的歌手的出生地的位置信息并向服务器1发送歌手的音乐以及取得的位置信息,那么利用者能够取得并且播放与世界各国的歌手的出生地的位置信息相对应的音乐。
实施方式4
本实施方式中,关于不同种类的球体的AR系统的实施方式的一例进行说明。根据显示语言、球体的型号、生产厂商等,存在着各种不同种类的球体。对于不同种类的球体,用不同的标识识别系统对标识进行识别。
图32是表示实施方式4的服务器1的构成例的框图。关于和图2重复的内容,赋予同一符号并省略说明。大容量存储部14包括球体DB146。球体DB146存储球体信息。
图33是表示实施方式4的用户DB141的数据布局的一例的说明图。省略说明关于和图3重复的内容。用户DB141包括球体ID列。球体ID列,存储可以用于唯一指定球体信息的球体的ID。
图34是球体DB146的数据布局的一例的说明图。球体DB146包括球体ID列、生产厂商列、大小列、语言列。球体ID列,存储为识别球体而唯一指定的球体ID。生产厂商列,存储生产厂商的名称。型号列,存储球体的型号。语言列,存储印记于球体上的文字语言的种类。
图35是实施方式4的AR系统的动作说明图。例如,面向国外旅游或者国内旅游,航空公司向旅客提供电影、音乐等视听服务。航空公司,基于旅客的国籍、年龄、性别等属性,给旅客分发或者贩卖不同种类的地球仪3。例如,给欧美国家的旅客分发英语版的地球仪3,给日本的旅客分发日语版的地球仪3。另外,也可以向小朋友分发小号的地球仪3。
具体的方式为,航空公司的终端2的控制部21,读取通过航空公司的终端2的拍摄部27拍摄的QR码,指定地球仪3的球体ID。此外,关于球体ID的指定手段,不受限于QR码,也可以根据一维码或者其他的二维码指定,也可以根据手动输入指定。还可以根据地球仪3的拍摄图像中的AR标识信息指定。例如,航空公司的终端2的控制部21,取得通过航空公司的终端2的拍摄部27拍摄的附有AR标识的地球仪3的拍摄图像。航空公司的终端2的控制部21,可以识别取得的拍摄图像中的AR标识,根据识别的AR标识指定球体ID。地图中的海洋、大陆、各个国家或者都市等被赋予名称的文字构成AR标识的时候,能够由大容量存储部14的球体DB146根据文字的语言种类指定球体ID。此外,虽然对基于地球仪3中被赋予的QR码、文字或者AR标识判别球体ID的例子进行了说明,但不受上述限制。也可以根据球体的种类分别准备独立的应用程序。在这种情况下,可以根据从终端2发送的应用程序ID指定球体ID。
航空公司的终端2,将航空公司的用户ID、显示图像以及和显示图像相关联的位置信息与指定的地球仪3的球体ID相关联,向服务器1发送。服务器1,将航空公司的终端2发送的航空公司的用户ID、显示图像以及和显示图像相关联的位置信息与球体ID相关联,存储到大容量存储部14中。
根据以上所述,能够通过旅客的终端2的显示部26在分发的地球仪3的拍摄图像上重叠显示航空公司提供的显示图像。例如,旅客的终端2的拍摄部27,拍摄被分发的地球仪3的球体表面的QR码。旅客的终端2的控制部21,读取拍摄的QR码,指定球体ID。旅客的终端2的通信部23,将指定的球体ID以及航空公司的用户ID向服务器1发送。服务器1的控制部11,取得与接收的球体ID以及航空公司的用户ID相对应的显示图像以及和显示图像相关联的位置信息。服务器1的通信部13,将显示图像以及与显示图像相关联的位置信息向旅客的终端2发送。旅客的终端2的通信部23,接收从服务器1发送的显示图像以及与显示图像相关联的位置信息。旅客的终端2的控制部21,指定与接收的显示图像相关联的位置信息相对应的地球仪3的拍摄图像中的球体位置。通过旅客的终端2的显示部26,旅客的终端2的控制部21将接收的显示图像重叠显示在指定的球体位置。
图36是表示实施方式4的终端2基于球体ID发送显示图像时的处理步骤的流程图。关于和图11重复的内容,赋予同一符号并省略说明。终端2的控制部21指定球体ID(步骤S281),将用户ID、选择的显示图像以及和显示图像相关联的位置信息与指定的球体ID相关联。终端2的通信部23,将球体ID、用户ID、显示图像以及与显示图像相关联的位置信息向服务器1发送(步骤S282)。服务器1的通信部13,接收从终端2发送的球体ID、用户ID、显示图像以及与显示图像相关联的位置信息(步骤S181)。服务器1的控制部11,将接收的用户ID、显示图像以及和显示图像相关联的位置信息与接收的球体ID相关联,存储到大容量存储部14中(步骤S182)。
图37是表示实施方式4的终端2基于球体ID接收显示图像时的处理步骤的流程图。关于和图12重复的内容,赋予同一符号并省略说明。此外,以根据QR码指定球体ID为例说明处理流程。终端2的拍摄部27,拍摄地球仪3的球体表面的QR码。终端2的控制部21,从拍摄的地球仪3的球体表面的QR码的拍摄图像中取得QR码(步骤S283)。终端2的控制部21,根据取得的QR码指定球体ID(步骤S284)。终端2的通信部23,将指定的球体ID以及用户ID向服务器1发送(步骤S285)。服务器1的通信部13,接收从终端2发送的球体ID以及用户ID(步骤S183)。服务器1的控制部11,从大容量存储部14的用户DB141中取得与接收的球体ID以及用户ID相对应的显示图像ID和位置信息(步骤S184)。
根据本实施方式,能够对于多个种类的球体利用AR系统。通过按每个球体ID与服务器进行发送和接收显示图像或者音乐,能够提供多样化或者多用途的服务。能够提供独有的地球仪3作为其他的企业以宣传等目的分发的纪念品或者商品。
实施方式5
本实施方式中,作为显示图像的一例以奖牌举例说明。举办奥运会或者运动竞技比赛的时候,按选手、国家公布统计的每种奖牌的获得数量。本实施方式中,奖牌重叠显示在地球仪3的拍摄图像上。
图38是表示实施方式5的服务器1的构成例的框图。关于和图2重复的内容,赋予同一符号并省略说明。大容量存储部14包括奖牌DB147。奖牌DB147按国家存储每种奖牌的获得数量。
图39是表示实施方式5的显示图像DB142的数据布局的一例的说明图。省略说明关于和图4重复的内容。本实施方式中,显示图像DB142,存储代表国家的国旗、建筑物或者风景等的显示图像以及奖牌的显示图像等。例如,P6是奖牌的立体显示图像,P7是日本国旗的显示图像。
图40是表示奖牌DB147的数据布局的一例的说明图。奖牌DB147包括国家列和奖牌列。国家列包括名称列、图像ID1列。名称列,存储国家的名称。此外,名称列也可以存储国家的代码用于取代国家的名称。图像ID1列,存储代表各个国家的显示图像的ID。奖牌列包括,金牌列、银牌列、铜牌列以及图像ID2列。金牌列,存储获得的金牌的数量。银牌列,存储获得的银牌的数量。铜牌列,存储获得的铜牌的数量。图像ID2列,存储奖牌的显示图像的ID。
下面,用用户终端2对奖牌的获得数量以及国名的发送处理的概要进行说明。终端2的控制部21,受理对奖牌的显示图像以及获得奖牌的各个国家的显示图像的选择,该奖牌的显示图像以及各个国家的显示图像用于在地球仪3的拍摄图像上重叠显示。控制部21,通过输入部25取得输入的每种奖牌的获得数量以及国名。此外,控制部21也可以通过通信部23从未图示的外部装置接收每种奖牌的获得数量以及国名。终端2的控制部21,基于国名取得国家的位置信息。另外,关于位置信息的取得处理,也可以和实施方式1的位置信息的取得处理相同。例如,也可以通过终端2的输入部25对国家的显示图像手动输入位置信息。控制部21,将受理的显示图像、取得的各国的位置信息、每种奖牌的获得数量以及国名与用户ID相关联,通过通信部23向服务器1发送。
此外,本实施方式中,终端2向服务器1发送各个国家的显示图像以及位置信息,但不受此限制。例如,终端2也可以只将每种奖牌的获得数量以及国名向服务器1发送。在这种情况下,服务器1可以基于接收的国名取得国家的位置信息以及事先准备的各个国家的显示图像。
服务器1,将终端2发送的显示图像、国家的位置信息、每种奖牌的获得数量以及国名存储到大容量存储部14中。具体方式为,服务器1的控制部11,对奖牌的显示图像分配唯一的显示图像ID,将用户ID、该奖牌的显示图像ID作为一条记录存储到用户DB141中。控制部11,按国家对国家的显示图像分配唯一的显示图像ID,将用户ID、该国的显示图像ID以及国家的位置信息作为一条记录存储到用户DB141中。控制部11,将显示图像ID以及显示图像的数据作为一条记录存储到显示图像DB142中。服务器1的控制部11,按国家将每种奖牌的获得数量作为一条数据存储到奖牌DB147中。
接下来,用按国家阅览每种奖牌的获得数量的用户终端2,对上述用户已经发送的显示图像的显示处理进行说明。终端2的控制部21,取得按国家登记每种奖牌的获得数量的用户ID,通过通信部23向服务器1发送该用户ID。此外,关于用户ID的取得处理,由于与实施方式1的用户ID的取得处理相同,省略说明。
服务器1的通信部13,接收从终端2发送的用户ID。服务器1的控制部11,基于接收的用户ID检索大容量存储部14的用户DB141,取得与用户ID相对应的显示图像的显示图像ID以及位置信息。控制部11,从显示图像DB142中取得与显示图像ID相对应的显示图像。控制部11,从奖牌DB147中按国家取得每种奖牌的获得数量。通信部13,将取得的显示图像、国家的位置信息、每种奖牌的获得数量以及国名向终端2发送。
终端2的通信部23,接收从服务器1发送的与用户ID相对应的显示图像、国家的位置信息、每种奖牌的获得数量以及国名。图41是表示奖牌的显示图像的显示例的示意图。此外,如图所示,白色空心的圆圈代表金牌,带有右斜纹的圆圈代表银牌,带有左斜纹的圆圈代表铜牌。终端2的控制部21,指定与接收的国家的位置信息相对应的地球仪3的拍摄图像中的球体位置。控制部21,按国家根据奖牌的种类并基于奖牌的获得数量将奖牌的显示图像用颜色区分并向上堆叠,通过显示部26重叠显示在指定的球体位置。
下面,对铜牌的显示处理例进行说明。控制部21,取得接收的铜牌的获得数量以及奖牌的显示图像。控制部21,以该奖牌的显示图像为原型,复制和铜牌的获得数量同等数量的奖牌的显示图像。例如,铜牌的获得数量为三个的时候,复制三个奖牌的显示图像。控制部21,给复制的铜牌的显示图像赋予铜色,沿着和地球仪3的拍摄图像中的球体的表面大致垂直的方向向上堆叠,重叠显示在与该国家的位置信息相对应的拍摄图像的球体位置。此外,也可以分别准备铜牌、银牌、金牌的显示图像数据。
铜牌的显示图像的显示处理结束后,按照银牌的显示图像、金牌的显示图像的顺序进行显示处理。关于银牌以及金牌的显示处理,由于和铜牌的显示处理相同故省略说明。控制部21,在金牌的显示处理结束后,将国旗的显示图像在金牌的显示图像的上方堆叠显示。此外,国旗的显示图像的显示位置不受限于金牌的显示图像的上方,例如也可以在奖牌的显示图像之间进行显示。更进一步,也可以用国名的文字列代替国旗的显示图像。此外,本实施方式中,以铜牌、银牌、金牌的顺序进行显示处理,但不受此限制。例如,除了可以以金牌、银牌、铜牌的顺序进行显示处理外,还可以以随机的顺序进行显示处理。
本实施方式中,虽然对奖牌的显示图像赋予了颜色,但不受此限制。例如,也可以在奖牌的显示图像中,写入“金”、“银”或者“铜”的文字进行显示。此外,本实施方式中,根据奖牌的获得数量向上堆叠奖牌的显示图像,重叠显示在地球仪3的拍摄图像中,但不受此限制。例如,终端2也可以用长方体的显示图像代替奖牌的显示图像,根据奖牌的获得数量调整长方体的显示图像的高度来显示。
图42是表示实施方式5的终端2按国家发送每种奖牌的获得数量时的处理步骤的流程图。关于和图11重复的内容,赋予同一符号并省略说明。终端2的控制部21,通过输入部25按国家取得每种奖牌的获得数量(步骤S291)。控制部21,基于国名取得国家的位置信息(步骤S292)。控制部21,将显示图像、国家的位置信息、每种奖牌的获得数量以及国名与用户ID相关联,通过通信部23向服务器1发送(步骤S293)。服务器1的通信部13,接收从终端2发送的用户ID、显示图像、国家的位置信息、每种奖牌的获得数量以及国名(步骤S191)。服务器1的控制部11,将接收的显示图像、国家的位置信息、每种奖牌的获得数量以及国名与用户ID相关联,存储到大容量存储部14中(步骤S192)。
图43是表示实施方式5的终端2按国家接收每种奖牌的获得数量时的处理步骤的流程图。关于和图12重复的内容,赋予同一符号并省略说明。服务器1的控制部11,从大容量存储部14的奖牌DB147中取得每种奖牌的获得数量以及国名(步骤S193)。服务器1的通信部13,将取得的显示图像、国家的位置信息、每种奖牌的获得数量以及国名向终端2发送(步骤S194)。终端2的通信部23,接收从服务器1发送的显示图像、国家的位置信息、每种奖牌的获得数量以及国名(步骤S294)。终端2的控制部21,基于接收的显示图像以及国家的位置信息,将奖牌的显示图像以及国旗的显示图像在地球仪3的拍摄图像上向上堆叠显示(步骤S295)。此外,后面记述关于奖牌的显示的子例程。
图44是表示奖牌显示的子例程的处理步骤的流程图。终端2的控制部21,从接收的显示图像中取得与地球仪3的拍摄图像相对应区域的各个国家的显示图像(步骤Sa01)。例如,控制部21,可以从接收的显示图像中提取出与地球仪3的拍摄图像的纬度以及经度相对应的区域的显示图像。控制部21,从取得的各个国家的显示图像中取得一个国家的显示图像(步骤Sa02)。控制部21,指定与该国的位置信息相对应的地球仪3的拍摄图像中的球体位置(步骤Sa03)。
接下来,控制部21进行铜牌、银牌以及金牌的显示处理(步骤Sa04~步骤Sa06)。此外,后面记述关于各种类的奖牌的显示处理。控制部21将该国的显示图像重叠显示在指定的球体位置(步骤Sa07)。控制部21,判断在与地球仪3的拍摄图像对应的区域中该国的显示图像是否是最后的国家的显示图像(步骤Sa08)。若判断该国的显示图像不是最后的国家的显示图像(步骤Sa08为NO),控制部21返回国家的显示图像的取得处理,取得下一个国家的显示图像(步骤Sa02)。若判断该国的显示图像是最后的国家的显示图像(步骤Sa08为YES),控制部21处理结束。
图45是表示各种类的奖牌的显示处理步骤的流程图,适用于金牌、银牌或铜牌的任何一个的显示处理。控制部21取得接收的奖牌的显示图像(步骤Sb01),取得接收的奖牌的获得数量(步骤Sb02)。例如,金牌的显示处理的时候,取得与该国相对应的金牌的获得数量。控制部21,以奖牌的显示图像为原型,复制和奖牌的获得数量同等数量的奖牌的显示图像(步骤Sb03)。例如,金牌的获得数量为三个的时候,复制三个奖牌的显示图像。控制部21,给复制的奖牌的显示图像赋予颜色(步骤Sb04)。例如,金牌的情况下,给奖牌的显示图像赋予金色。控制部21,将被赋予颜色的奖牌的显示图像沿着与地球仪3的拍摄图像中的球体的表面大致垂直的方向向上堆叠(步骤Sb05),和国旗的显示图像同时重叠显示在指定的球体位置(步骤Sb06)。
另外,也可以对显示图像设定说明信息。以下,对与国家的显示图像相关联的说明信息的显示的概要进行说明。
图46是表示实施形式5的说明信息DB143的数据布局的一例的说明图。省略说明关于和图5重复的内容。本实施方式中,说明信息DB143存储奖牌的显示图像以及与各个国家的显示图像相关联的说明信息。
图47是与国家的显示图像相关联的说明信息的显示例的示意图。本实施方式中,例如说明信息DB143存储与“日本”的显示图像相对应的URL形式的说明信息“http://www.sports.japanInfo.co.jp”。服务器1的控制部11,通过通信部13可以从未图示的外部装置中取得与该URL相对应的说明信息的内容。此外,不受限于上述的形式,例如也可以事先把说明信息以文本的形式存储在说明信息DB143中。服务器1的控制部11,通过通信部13向终端2发送取得的与“日本”的显示图像相关联的说明信息。终端2的控制部21,通过通信部23接收与“日本”的显示图像相关联的说明信息。终端2的控制部21,通过输入部25受理对“日本”的显示图像的点击操作的时候,通过显示部26将取得的说明信息重叠显示在地球仪3的拍摄图像上。
另外,本实施方式中,虽然服务器1向终端2发送与URL相对应的说明信息的内容,但不受此限制。例如,服务器1也可以向终端2发送URL形式的说明信息本身,终端2取得与接收的URL相对应的说明信息的内容。
根据本实施方式,对于奥运会或者运动竞技比赛能够随时反映奖牌的获得数量以及竞技状况。此外,由于奖牌的显示图像在地球仪3的拍摄图像上堆叠显示,按国家可以一目了然的把握每种奖牌的获得数量。另外,也能够提供奥运会或者运动竞技比赛的比赛项目信息、运动的视听内容以及选手的介绍等服务。
应该认为,这次公开的实施方式的所有点都是示例,不是限制性的。本发明的范围,不是上述的意思而是由权利要求所示,包含与权利要求书等同的意思和范围内的所有变更。

Claims (20)

1.一种计算机可读存储介质,其上存储有程序,其特征在于,该程序使计算机执行下述处理:
受理对显示图像的选择,所述显示图像用于在表面附有标识的球体的拍摄图像上重叠显示,
取得所述显示图像对应的位置信息,
将受理的所述显示图像以及取得的所述位置信息与用户ID相关联地发送。
2.根据权利要求1所述的计算机可读存储介质,其特征在于,所述程序使计算机执行下述处理:
取得所述位置信息对应的所述球体的所述拍摄图像,
接收所述用户ID对应的所述显示图像以及所述显示图像相关联的所述位置信息,
在与所述位置信息相对应的所述拍摄图像中的球体位置,重叠显示接收的所述显示图像。
3.根据权利要求1或2所述的计算机可读存储介质,其特征在于,所述程序使计算机执行下述处理:
受理对显示图像的说明信息的输入,所述说明信息包括声音信息或者文本信息,
将受理的所述说明信息与所述用户ID以及所述显示图像相关联地发送。
4.根据权利要求3所述的计算机可读存储介质,其特征在于,所述程序使计算机执行下述处理:
接收与所述用户ID以及所述显示图像相关联的所述说明信息,
在与所述显示图像相关联的所述位置信息相对应的所述拍摄图像中的球体位置,重叠显示接收的所述说明信息。
5.根据权利要求1至4中任一项所述的计算机可读存储介质,其特征在于,所述程序使计算机执行下述处理:
受理对所述显示图像的公开信息的设定,所述公开信息包括公开、非公开或者部分公开,
将所述公开信息与所述用户ID以及所述显示图像相关联地发送。
6.根据权利要求1至5中任一项所述的计算机可读存储介质,其特征在于,所述程序使计算机执行下述处理:
从多个包含有日期和时间信息的所述显示图像中,提取出所述日期和时间信息,
在与所述显示图像相关联的所述位置信息相对应的所述拍摄图像中的球体位置,按照提取出的所述日期和时间信息表示的日期和时间的顺序,重叠显示多个所述显示图像。
7.根据权利要求1至5中任一项所述的计算机可读存储介质,其特征在于,所述程序使计算机执行下述处理:
受理对多个所述显示图像的显示顺序的输入,
在与所述显示图像相关联的所述位置信息相对应的所述拍摄图像中的球体位置,按照受理的所述显示顺序的顺序,重叠显示多个所述显示图像。
8.根据权利要求1至7中任一项所述的计算机可读存储介质,其特征在于,所述程序使计算机执行下述处理:
基于多个与所述显示图像相关联的所述位置信息,生成位置轨迹信息,
在与所述位置信息相对应的所述拍摄图像中的球体位置,重叠显示取得的所述位置轨迹信息。
9.根据权利要求1至8中任一项所述的计算机可读存储介质,其特征在于,所述程序使计算机执行下述处理:
受理对音乐的选择,所述音乐用于与所述球体的所述拍摄图像中的指定的位置显示相对应的播放,
取得所述音乐对应的所述位置信息,
将受理的所述音乐以及取得的所述位置信息与所述用户ID相关联地发送。
10.根据权利要求1至9中任一项所述的计算机可读存储介质,其特征在于,
所述球体有多个种类,
所述程序使计算机执行下述处理:
指定用于识别球体的球体ID,
将所述用户ID、所述显示图像以及所述位置信息与指定的所述球体ID关联地发送。
11.根据权利要求1至10中任一项所述的计算机可读存储介质,其特征在于,所述程序使计算机执行下述处理:
按国家取得每种奖牌的获得数量,
将取得的所述每种奖牌的获得数量以及国名与所述用户ID相关联地发送。
12.根据权利要求11所述的计算机可读存储介质,其特征在于,所述程序使计算机执行下述处理:
接收与所述用户ID相关联的所述每种奖牌的获得数量以及所述国名,
在与国家的位置信息相对应的所述拍摄图像中的球体位置,按国家堆叠显示接收的每种奖牌的显示图像。
13.一种计算机可读存储介质,其上存储有程序,其特征在于,该程序使计算机使计算机执行下述处理:
接收用户ID、在表面附有标识的球体的拍摄图像上重叠显示的显示图像以及与所述显示图像相关联的位置信息,
将所述显示画像以及所述位置信息与接收的所述用户ID相关联地存储,
当接收到用户ID的时候,读取与所述用户ID相对应的所述显示图像以及与所述显示图像相关联的所述位置信息,
发送读取的所述显示图像以及所述位置信息。
14.根据权利要求13所述的计算机可读存储介质,其特征在于,所述程序使计算机执行下述处理:
接收用户ID以及与所述显示图像相关联的说明信息,
将接收的说明信息与所述用户ID以及所述显示图像相关联地存储,
当接收到用户ID的时候,读取与所述用户ID对应的所述显示图像相关联的所述说明信息,
发送读取的所述说明信息。
15.根据权利要求13或14所述的计算机可读存储介质,其特征在于,所述程序使计算机执行下述处理:
接收用户ID以及与所述显示图像相关联的公开信息,所述公开信息包括:公开、非公开或部分公开,
将接收的所述公开信息与所述用户ID以及所述显示图像相关联地存储,
当接收到第二用户ID的时候,读取与所述第二用户ID对应的所述显示图像相关联的所述公开信息,
根据读取的所述公开信息判断是否公开,
读取满足公开或者部分公开条件的所述显示图像以及与所述显示图像相关联的所述位置信息,
发送读取的所述显示图像以及所述位置信息。
16.根据权利要求13至15中任一项所述的计算机可读存储介质,其特征在于,
所述球体有多个种类,
所述程序使计算机执行下述处理:
接收用于识别球体的球体ID、与所述球体ID相关联的所述用户ID、与所述球体ID相关联的所述显示图像以及与所述球体ID相关联的所述位置信息,
将所述用户ID、所述显示画像以及所述位置信息与接收的所述球体ID相关联地存储,
当接收到球体ID以及用户ID的时候,读取与所述球体ID以及所述用户ID对应的所述显示图像、和与所述显示图像相关联的所述位置信息,
发送读取的所述显示画像以及所述位置信息。
17.根据权利要求13至16中任一项所述的计算机可读存储介质,其特征在于,所述程序使计算机执行下述处理:
接收用户ID、每种奖牌的获得数量以及国名,
将接收的所述每种奖牌的获得数量以及所述国名与所述用户ID相关联地存储,
当接收到用户ID的时候,读取所述用户ID对应的所述每种奖牌的获得数量以及所述国名,
发送读取的所述获得数量以及所述国名。
18.一种信息处理装置,其特征在于,所述信息处理装置包括:
接收部,所述接收部接收用户ID、用于在表面附有标识的球体的拍摄图像上重叠显示的显示图像以及与所述显示图像相关联的位置信息;
存储部,所述存储部将所述接收部接收的所述显示图像以及所述位置信息与接收的所述用户ID相关联地存储;
第二接收部,所述第二接收部接收用户ID;
读取部,所述读取部基于所述第二接收部接收的所述用户ID,读取所述存储部存储的所述显示图像以及与所述显示图像相关联的所述位置信息;和
发送部,所述发送部发送所述读取部读取的所述显示图像以及所述位置信息。
19.一种信息处理方法,其特征在于,使计算机执行下述处理:
受理对显示图像的选择,所述显示图像用于在表面附有标识的球体的拍摄图像上重叠显示,
取得所述显示图像对应的位置信息,
将受理的所述显示图像以及取得的所述位置信息与用户ID相关联地发送。
20.根据权利要求19所述的信息处理方法,其特征在于,执行下述处理:
取得所述位置信息对应的所述球体的所述拍摄图像,
接收与所述用户ID对应的所述显示图像以及与所述显示图像相关联的所述位置信息,
在与所述位置信息相对应的所述拍摄图像中的球体位置,重叠显示接收的所述显示图像。
CN201810639126.1A 2018-01-18 2018-06-20 计算机可读存储介质、信息处理装置以及信息处理方法 Pending CN110059524A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-006763 2018-01-18
JP2018006763A JP6413035B1 (ja) 2018-01-18 2018-01-18 プログラム、情報処理装置及び情報処理方法

Publications (1)

Publication Number Publication Date
CN110059524A true CN110059524A (zh) 2019-07-26

Family

ID=63920545

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810639126.1A Pending CN110059524A (zh) 2018-01-18 2018-06-20 计算机可读存储介质、信息处理装置以及信息处理方法

Country Status (9)

Country Link
US (1) US10885688B2 (zh)
EP (1) EP3537385A4 (zh)
JP (1) JP6413035B1 (zh)
KR (1) KR20190089117A (zh)
CN (1) CN110059524A (zh)
BR (1) BR102018013612A2 (zh)
SG (1) SG11201810348XA (zh)
TW (1) TW201933274A (zh)
WO (1) WO2019142369A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USD762692S1 (en) * 2014-09-02 2016-08-02 Apple Inc. Display screen or portion thereof with graphical user interface
JP2018005091A (ja) * 2016-07-06 2018-01-11 富士通株式会社 表示制御プログラム、表示制御方法および表示制御装置
KR102598082B1 (ko) * 2016-10-28 2023-11-03 삼성전자주식회사 영상 표시 장치, 모바일 장치 및 그 동작방법
USD900830S1 (en) * 2018-09-10 2020-11-03 Apple Inc. Electronic device with graphical user interface
US11579750B2 (en) * 2018-12-14 2023-02-14 Perksy, Inc. Methods, systems, and apparatus, for receiving persistent responses to online surveys
USD941829S1 (en) 2018-12-31 2022-01-25 Perksy, Inc. Display screen with graphical user interface
JP2021039663A (ja) * 2019-09-05 2021-03-11 株式会社アイ・オー・データ機器 情報取得装置、情報取得システム及び情報取得方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1992012496A1 (en) * 1991-01-09 1992-07-23 Du Pont Pixel Systems Limited Computer system with enhanced image and graphics capabilities
US20040070602A1 (en) * 2002-08-05 2004-04-15 Sony Corporation Electronic guide system, contents server for electronic guide system, portable electronic guide device, and information processing method for electronic guide system
CN103081454A (zh) * 2010-08-30 2013-05-01 乐天株式会社 商品摄影装置、商品摄影方法、图像变换装置、图像处理装置、图像处理系统、程序及信息记录介质
JP2013140547A (ja) * 2012-01-06 2013-07-18 Kddi Corp カメラ姿勢推定装置、プログラム
CN104463975A (zh) * 2013-09-13 2015-03-25 富士通株式会社 设置方法以及信息处理装置
US20150153934A1 (en) * 2012-10-23 2015-06-04 Google Inc. Associating a photo with a geographic place
CN107018254A (zh) * 2015-10-26 2017-08-04 株式会社理光 信息处理系统、信息处理终端以及信息处理方法

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7148898B1 (en) * 2000-03-29 2006-12-12 Sourceprose Corporation System and method for synchronizing raster and vector map images
CN100407782C (zh) * 2002-09-27 2008-07-30 富士胶片株式会社 相册制作方法及其装置
JP4109075B2 (ja) * 2002-10-10 2008-06-25 Sriスポーツ株式会社 球体の回転特性と飛行特性の測定方法及び球体の回転特性と飛行特性の測定装置
US20040145602A1 (en) * 2003-01-24 2004-07-29 Microsoft Corporation Organizing and displaying photographs based on time
JP4550460B2 (ja) * 2004-03-30 2010-09-22 シャープ株式会社 コンテンツ表現制御装置およびコンテンツ表現制御プログラム
US8311733B2 (en) * 2005-02-15 2012-11-13 The Invention Science Fund I, Llc Interactive key frame image mapping system and method
US7617246B2 (en) * 2006-02-21 2009-11-10 Geopeg, Inc. System and method for geo-coding user generated content
US7853296B2 (en) * 2007-10-31 2010-12-14 Motorola Mobility, Inc. Mobile virtual and augmented reality system
EP2274711A4 (en) * 2008-03-31 2012-12-19 Univ Southern California ESTIMATING THE INSTALLATION OF PHOTOGRAPHIC IMAGES IN A 3D MODEL OF EARTH WITH HUMAN ASSISTANCE
KR101623041B1 (ko) 2008-08-19 2016-05-23 광주과학기술원 혼합 공간에 공존하는 마커들을 관리하는 마커 관리 시스템과 그 방법, 및 상기 방법을 구현하는 프로그램이 기록된 기록매체
US8600098B2 (en) * 2008-09-25 2013-12-03 Volkswagen Ag Method for processing a satellite image and/or an aerial image
US8311556B2 (en) * 2009-01-22 2012-11-13 Htc Corporation Method and system for managing images and geographic location data in a mobile device
JP5716383B2 (ja) * 2009-12-28 2015-05-13 株式会社ニコン 情報処理装置、および情報処理プログラム
US20110199286A1 (en) * 2010-02-13 2011-08-18 Robin Dziama Spherical Electronic LCD Display
JP5250598B2 (ja) * 2010-10-05 2013-07-31 株式会社ソニー・コンピュータエンタテインメント 画像表示装置および画像表示方法
KR101083245B1 (ko) * 2011-01-31 2011-11-14 주식회사 서전지구 지역정보 추출방법, 지역정보 출력방법, 및 이를 위한 장치
JP5855416B2 (ja) 2011-10-25 2016-02-09 Kddi株式会社 3次元座標取得装置、カメラ姿勢推定装置、プログラム
US9911209B2 (en) * 2011-12-14 2018-03-06 Christopher V. Beckman System and method for improving video and other media playback
JP2013161103A (ja) * 2012-02-01 2013-08-19 Tmdance Corp 情報処理システム、及び情報処理方法
US20140040774A1 (en) * 2012-08-01 2014-02-06 Google Inc. Sharing photos in a social network system
US9691128B2 (en) * 2012-09-20 2017-06-27 Facebook, Inc. Aggregating and displaying social networking system user information via a map interface
US10084994B2 (en) * 2012-12-12 2018-09-25 Verint Systems Ltd. Live streaming video over 3D
US20140229862A1 (en) 2013-02-14 2014-08-14 Luke St. Clair Launching Friends
US20140267226A1 (en) * 2013-03-13 2014-09-18 Harry Yoon Method and System for Geographic-Oriented Graphical Representation of Multivariable Input Data Set
JP6184840B2 (ja) * 2013-11-07 2017-08-23 株式会社Nttドコモ 情報処理装置及び表示優先度決定方法
US9207780B2 (en) * 2014-01-27 2015-12-08 Fuji Xerox Co., Ltd. Systems and methods for hiding and finding digital content associated with physical objects via coded lighting
CN104102412B (zh) 2014-07-24 2017-12-12 央数文化(上海)股份有限公司 一种基于增强现实技术的手持式阅览设备及其方法
JP6716906B2 (ja) * 2015-12-22 2020-07-01 コニカミノルタ株式会社 アルバム作成装置、アルバム作成方法、およびアルバム作成プログラム
US10091318B2 (en) * 2016-03-30 2018-10-02 Facebook, Inc. Content-based notification delivery
US10127637B2 (en) * 2016-08-30 2018-11-13 Adobe Systems Incorporated Automatic orientation adjustment of spherical panorama digital images
US10140739B1 (en) * 2016-11-29 2018-11-27 Palantir Technologies Inc. User interface for automatically generating charts
US10437545B2 (en) * 2016-12-28 2019-10-08 Ricoh Company, Ltd. Apparatus, system, and method for controlling display, and recording medium
JP6919334B2 (ja) * 2017-05-26 2021-08-18 株式会社リコー 画像処理装置、画像処理方法、プログラム
JP2019091203A (ja) * 2017-11-14 2019-06-13 株式会社ほぼ日 プログラム、情報処理装置及び情報処理方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1992012496A1 (en) * 1991-01-09 1992-07-23 Du Pont Pixel Systems Limited Computer system with enhanced image and graphics capabilities
US20040070602A1 (en) * 2002-08-05 2004-04-15 Sony Corporation Electronic guide system, contents server for electronic guide system, portable electronic guide device, and information processing method for electronic guide system
CN103081454A (zh) * 2010-08-30 2013-05-01 乐天株式会社 商品摄影装置、商品摄影方法、图像变换装置、图像处理装置、图像处理系统、程序及信息记录介质
JP2013140547A (ja) * 2012-01-06 2013-07-18 Kddi Corp カメラ姿勢推定装置、プログラム
US20150153934A1 (en) * 2012-10-23 2015-06-04 Google Inc. Associating a photo with a geographic place
CN104463975A (zh) * 2013-09-13 2015-03-25 富士通株式会社 设置方法以及信息处理装置
CN107018254A (zh) * 2015-10-26 2017-08-04 株式会社理光 信息处理系统、信息处理终端以及信息处理方法

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
SANGCHUL AHN等: "Webizing mobile augmented reality content", 《THE NEW REVIEW OF HYPERMEDIA AND MULTIMEDIA》 *
YU WANG等: "Study on key technologies of AR system with image acquisition system and head-mounted display are separately", 《2011 CHINESE CONTROL AND DECISION CONFERENCE (CCDC)》 *
刘分等: "移动通信网络位置群体关联用户挖掘", 《计算机应用》 *
吴利明: "能显示昼夜的地球仪", 《中国科技教育》 *
奶爸DE自我修养: "地球仪结合最新AR技术,让地球仪鲜活起来,每个孩子都爱玩", 《HTTPS://WWW.163.COM/DY/ARTICLE/CRVI5RAH0526D6ML.HTML》 *

Also Published As

Publication number Publication date
WO2019142369A1 (ja) 2019-07-25
JP2019125271A (ja) 2019-07-25
KR20190089117A (ko) 2019-07-30
BR102018013612A2 (pt) 2019-07-30
EP3537385A4 (en) 2020-02-26
TW201933274A (zh) 2019-08-16
US20190221019A1 (en) 2019-07-18
US10885688B2 (en) 2021-01-05
JP6413035B1 (ja) 2018-10-24
EP3537385A1 (en) 2019-09-11
SG11201810348XA (en) 2019-08-27

Similar Documents

Publication Publication Date Title
CN110059524A (zh) 计算机可读存储介质、信息处理装置以及信息处理方法
CN102763404B (zh) 摄影装置、信息取得系统及程序
US20070253025A1 (en) Image viewer
CN110008300A (zh) Poi别名的确定方法、装置、计算机设备和存储介质
US20220232236A1 (en) Geospatial Media Recording System
CN104794171B (zh) 标记图片地理位置信息的方法及装置
CN101836210A (zh) 虚拟世界中的数字多媒体共享
JP5467177B2 (ja) 情報提供装置、情報提供方法、情報提供処理プログラム、情報提供処理プログラムを記録した記録媒体、及び情報提供システム
US8949238B2 (en) Information processing device, method, and computer program product
US20020059207A1 (en) Information search/presentation system
JP2007011391A (ja) 主観的地図作成システム
JP2007058088A (ja) 情報シンボルマッピング装置
CN114610198A (zh) 基于虚拟资源的交互方法、装置、设备和存储介质
CN103226559B (zh) 用于组合的soi对象与内容的空间信息索引系统
JP5237724B2 (ja) 画像検索システム
JP6413042B1 (ja) プログラム、情報処理装置及び情報処理方法
JP2019125342A (ja) プログラム、情報処理装置及び情報処理方法
JP3878979B2 (ja) 主観的地図作成システム
JP6063697B2 (ja) 画像表示のための装置、方法及びプログラム
JP6276375B2 (ja) 画像検索装置、画像表示装置、画像検索方法、および画像表示方法
JP2018055730A (ja) 画像検索装置および画像検索方法
JP5807090B2 (ja) 画像検索方法、画像検索システム、画像検索装置、およびプログラム
CN114912007A (zh) 个性化推荐方法、装置、终端和存储介质
JP2019212267A (ja) プログラム、情報処理装置及び情報処理方法
JP2002223432A (ja) 在宅旅行システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20190726

WD01 Invention patent application deemed withdrawn after publication