CN102893129B - 终端位置确定系统、移动终端以及终端位置确定方法 - Google Patents

终端位置确定系统、移动终端以及终端位置确定方法 Download PDF

Info

Publication number
CN102893129B
CN102893129B CN201180024163.8A CN201180024163A CN102893129B CN 102893129 B CN102893129 B CN 102893129B CN 201180024163 A CN201180024163 A CN 201180024163A CN 102893129 B CN102893129 B CN 102893129B
Authority
CN
China
Prior art keywords
mobile terminal
information
location
terrestrial reference
landmark
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201180024163.8A
Other languages
English (en)
Other versions
CN102893129A (zh
Inventor
太田学
森永康夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Docomo Inc
Original Assignee
NTT Docomo Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NTT Docomo Inc filed Critical NTT Docomo Inc
Publication of CN102893129A publication Critical patent/CN102893129A/zh
Application granted granted Critical
Publication of CN102893129B publication Critical patent/CN102893129B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/005Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 with correlation of navigation data from several sources, e.g. map or contour matching
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20Instruments for performing navigational calculations
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20Instruments for performing navigational calculations
    • G01C21/206Instruments for performing navigational calculations specially adapted for indoor navigation
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/28Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network with correlation of data from several navigational instruments
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3602Input other than that of destination using image analysis, e.g. detection of road signs, lanes, buildings, real preceding vehicles using a camera
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3679Retrieval, searching and output of POI information, e.g. hotels, restaurants, shops, filling stations, parking facilities
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/0009Transmission of position information to remote stations
    • G01S5/0018Transmission from mobile station to base station
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/005Traffic control systems for road vehicles including pedestrian guidance indicator
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/123Traffic control systems for road vehicles indicating the position of vehicles, e.g. scheduled vehicles; Managing passenger vehicles circulating according to a fixed timetable, e.g. buses, trains, trams
    • G08G1/127Traffic control systems for road vehicles indicating the position of vehicles, e.g. scheduled vehicles; Managing passenger vehicles circulating according to a fixed timetable, e.g. buses, trains, trams to a central station ; Indicators in a central station
    • G08G1/13Traffic control systems for road vehicles indicating the position of vehicles, e.g. scheduled vehicles; Managing passenger vehicles circulating according to a fixed timetable, e.g. buses, trains, trams to a central station ; Indicators in a central station the indicator being in the form of a map
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/02Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using radio waves
    • G01S5/0257Hybrid positioning
    • G01S5/0258Hybrid positioning by combining or switching between measurements derived from different systems
    • G01S5/02585Hybrid positioning by combining or switching between measurements derived from different systems at least one of the measurements being a non-radio measurement

Abstract

终端位置确定系统,其中,根据移动终端的概略位置信息,检索与该概略位置相距预定的距离以内的地标的地标信息,并将检索到的地标信息发送到移动终端。由此,移动终端能够取得关于在移动终端的周围存在的地标的地标信息。此外,将服务器中预先存储的地标信息发送到移动终端,因此能够可靠地进行基于地标图像的移动终端的位置确定。而且,根据地标图像分析该图像的摄影位置,将该摄影位置作为移动终端的所在位置在移动终端中进行管理,用于位置的校正,因此能够高精度地确定移动终端的位置。

Description

终端位置确定系统、移动终端以及终端位置确定方法
技术领域
本发明涉及终端位置确定系统、移动终端以及终端位置确定方法。
背景技术
近年来,开发/提供使用了AR(Augmented Reality:增强现实)技术的服务。例如,已知有如下技术,取得在移动终端的所在位置的周围配置的物体(object),并在由移动终端所具有的照相机取得的图像上重叠显示包含各种信息和图像的物体的技术。在该技术中,根据移动终端的所在位置选择重叠的物体。此外,移动终端根据自身终端的所在位置与物体的位置之间的位置关系来显示物体。因此,在本技术中,高精度地检测移动终端的所在位置非常重要。例如已知有如下技术,从预先存储了目标物的位置信息的数据库中取得由终端装置具有的照相机捕获的任意的目标物的位置,根据取得的该目标物的位置,计算终端装置的位置(例如,参照专利文献1)。
现有技术文献
专利文献
专利文献1:日本特开2001-235534号公报
发明内容
发明要解决的问题
然而,在以往技术中,如果与终端装置拍摄的目标物有关的信息在数据库中不存在,则无法确定终端装置的位置。此外,如果为了能够根据任意地拍摄的目标物确定终端装置的位置,而具备存储了与可成为目标物的所有结构物等有关的信息的数据库,则数据库的容量将变得及其庞大。
因此,本发明正是鉴于上述问题点而完成的,其目的在于,提供一种在AR技术中可以高精度且可靠地确定移动终端的位置的终端位置确定系统、移动终端以及终端位置确定方法。
用于解决问题的手段
为了解决上述课题,本发明的一个实施方式的终端位置确定系统是如下终端位置确定系统,该终端位置确定系统具有移动终端和可与该移动终端通信的服务器,并且确定移动终端的位置,其特征在于,移动终端具有:概略位置测位单元,其对移动终端所在的概略位置进行测位;概略位置信息发送单元,其将由概略位置测位单元测位得到的关于概略位置的概略位置信息发送到服务器;地标信息接收单元,其从服务器接收与为了确定移动终端的位置而使移动终端拍摄的摄影对象物即地标(landmark)有关的地标信息;地标摄影单元,其用于对由地标信息接收单元接收到的地标信息表示的地标进行拍摄;地标图像发送单元,其将由地标摄影单元拍摄的地标的图像即地标图像发送到服务器;位置信息接收单元,其从服务器接收表示拍摄地标图像时移动终端的位置的终端位置信息;以及位置信息管理单元,其将由位置信息接收单元接收到的终端位置信息表示的位置作为移动终端的所在位置进行管理,服务器具有:概略位置信息接收单元,其接收从移动终端发送的概略位置信息;地标信息存储单元,其存储多个地标信息;地标检索单元,其根据由概略位置信息接收单元接收到的概略位置信息,从地标信息存储单元中检索与概略位置相距预先设定的预定距离以内的地标的地标信息;地标信息发送单元,其将由地标检索单元检索到的地标信息发送到移动终端;地标图像接收单元,其接收从移动终端发送的地标图像;终端位置分析单元,其根据由地标图像接收单元接收到的地标图像,分析拍摄地标图像时的移动终端的位置;以及终端位置信息发送单元,其将由终端位置分析单元分析的移动终端的位置作为终端位置信息发送到移动终端。
为了解决上述课题,本发明的一个实施方式的移动终端是终端位置确定系统中的移动终端,该终端位置确定系统具有移动终端和可与该移动终端通信的服务器,并且确定移动终端的位置,其特征在于,该移动终端具有:概略位置测位单元,其对移动终端所在的概略位置进行测位;概略位置信息发送单元,其将由概略位置测位单元测位得到的关于概略位置的概略位置信息发送到服务器;地标信息接收单元,其从服务器接收与为了确定移动终端的位置而使移动终端拍摄的摄影对象即地标有关的地标信息;地标摄影单元,其用于对由地标信息接收单元接收到的地标信息表示的地标进行拍摄;地标图像发送单元,其将由地标摄影单元拍摄的地标的图像即地标图像发送到服务器;位置信息接收单元,其从服务器接收表示拍摄地标图像时的移动终端的位置的终端位置信息;以及位置信息管理单元,其将由位置信息接收单元接收到的终端位置信息表示的位置作为移动终端的所在位置进行管理。
此外,为了解决上述课题,本发明的一个实施方式的终端位置确定方法是终端位置确定系统中的终端位置确定方法,该终端位置确定系统具有移动终端和可与该移动终端通信的服务器,并且确定移动终端的位置,其特征在于,该终端位置确定方法具有以下步骤:概略位置测位步骤,移动终端对移动终端所在的概略位置进行测位;概略位置信息发送步骤,移动终端将在概略位置测位步骤中测位得到的关于概略位置的概略位置信息发送到服务器;概略位置信息接收步骤,服务器接收在概略位置信息发送步骤中发送的概略位置信息;地标检索步骤,服务器参照存储着多个与为了确定所述移动终端的位置而使移动终端拍摄的摄影对象物即地标有关的地标信息的地标信息存储单元,根据在概略位置信息接收步骤中接收到的概略位置信息,检索与概略位置相距预先设定的预定距离以内的地标的地标信息;地标信息发送步骤,服务器将在地标检索步骤中检索到的地标信息发送到移动终端;地标信息接收步骤,移动终端从服务器接收地标信息;地标摄影步骤,移动终端对在地标信息接收步骤中接收到的地标信息表示的地标进行拍摄;地标图像发送步骤,移动终端将在地标摄影步骤中拍摄的地标的图像即地标图像发送到服务器;地标图像接收步骤,服务器接收在地标图像发送步骤中发送的地标图像;终端位置分析步骤,服务器根据在地标图像接收步骤中接收到的地标图像,分析拍摄地标图像时移动终端的位置;终端位置信息发送步骤,服务器将在终端位置分析步骤中分析出的移动终端的位置作为终端位置信息发送到移动终端;位置信息接收步骤,移动终端接收在终端位置信息发送步骤中发送的终端位置信息;以及位置信息管理步骤,移动终端将由在位置信息接收步骤中接收到的终端位置信息表示的位置作为移动终端的所在位置进行管理。
根据终端位置确定系统、移动终端以及终端位置确定方法,基于移动终端的概略位置信息,检索与该概略位置相距预定的距离以内的地标的地标信息,将检索到的地标信息发送到移动终端。由此,移动终端能够取得关于存在于移动终端周围的地标的地标信息。此外,将服务器中预先存储的地标信息发送到移动终端,因此可以可靠地进行基于地标图像的移动终端的位置确定。而且,根据地标图像来分析该图像的摄影位置,将该摄影位置作为移动终端的所在位置在移动终端中进行管理,因此可以高精度地确定移动终端的位置。
此外,在本发明的一个实施方式的终端位置确定系统中,移动终端还具有方位测位单元,该方位测位单元对地标摄影单元中的视野的方向即视野方位进行测位,概略位置信息发送单元将由方位测位单元测位得到的关于视野方位的信息作为方位信息,与概略位置信息一起发送到服务器,地标检索单元从地标信息存储单元中检索与概略位置信息表示的概略位置相距预先设定的预定距离以内、且存在于以方位信息表示的视野方位为中心的预定的角度范围内的地标的地标信息。
该情况下,将移动终端的地标摄影单元中的视野方位发送到服务器,提取存在于以视野方位为中心的预定的角度范围的地标的地标信息,并发送到移动终端。由此,将在移动终端中可以摄影的地标的地标信息从服务器发送到移动终端。因此,能够可靠地取得地标图像,因此可以可靠地确定移动终端的位置。
此外,在本发明的一个实施方式的终端位置确定系统中,服务器具有存储地图数据的地图数据存储单元,地标检索单元可以参照地图数据存储单元,从地标信息存储单元检索与概略位置信息表示的概略位置相距预先设定的预定的距离以内、且与概略位置之间不存在遮蔽物的地标的地标信息。
该情况下,根据地图数据,提取与移动终端的所在位置之间不存在遮蔽物的地标的地标信息,并发送到移动终端。由此,将在移动终端中可以摄影的地标的地标信息从服务器发送到移动终端。因此,能够可靠地取得地标图像,因此可以可靠地确定移动终端的位置。
此外,在本发明的一个实施方式的终端位置确定系统中,地标信息包含可视角度,该可视角度是表示可以看到地标的、以该地标的正对方向为基准的角度的范围的信息,在概略位置存在于地标的可视角度表示的角度的范围内的情况下,地标检索单元可以从地标信息存储单元中检索该地标的地标信息。
该情况下,可以将从移动终端能看到的地标的地标信息从服务器发送到移动终端。因此,能够可靠地取得地标图像,因此能可靠地确定移动终端的位置。
此外,在本发明的一个实施方式的终端位置确定系统中,地标检索单元可以从地标信息存储单元中检测如下地标的地标信息:在由地标摄影单元对该地标进行了拍摄的情况下,该地标的图像的区域占所拍摄的图像整体的尺寸在预先设定的尺寸的范围内。
该情况下,从服务器向移动终端发送在移动终端中显示为适当的大小的地标的地标信息。因此,移动终端中的地标的摄影和基于地标图像的移动终端的位置的分析变得容易。
此外,在本发明的一个实施方式的终端位置确定系统中,地标信息包含表示地标的所在位置的地标位置信息,移动终端还可以具有地标引导单元,该地标引导单元根据该移动终端的概略位置与地标位置信息表示的地标的所在位置之间的位置关系,将用于引导地标的位置的引导信息显示在该移动终端具有的显示单元中。
该情况下,经由移动终端的显示单元将向用户引导地标的所在位置,用户能够可靠地识别地标的位置。因此,地标图像的摄影和取得变得容易。
此外,在本发明的一个实施方式的终端位置确定系统中,地标信息包含关于地标存在的位置的高度的信息,地标引导单元可以将地标的位置和高度作为引导信息在显示单元中显示。
该情况下,还经由移动终端的显示单元向用户引导关于存在地标的高度的信息,用户能够更可靠地识别地标的位置。因此,能够可靠地实施地标图像的摄影和取得。
此外,在本发明的一个实施方式的终端位置确定系统中,终端位置分析单元可以根据现实空间中的地标的位置、大小及形状与在地标图像中的地标的位置、大小及形状的不同,来分析拍摄地标图像时移动终端的位置。由此,可以高精度地分析移动终端的位置。
此外,为了解决上述课题,本发明的一个实施方式的终端位置确定系统,该终端位置确定系统具有移动终端和可与该移动终端通信的服务器,并且确定移动终端的位置,其特征在于,移动终端具有:概略位置测位单元,其对移动终端所在的概略位置进行测位;概略位置信息发送单元,其将由概略位置测位单元测位得到的关于概略位置的概略位置信息发送到服务器;地标信息接收单元,其从服务器接收与为了确定移动终端的位置而使移动终端拍摄的摄影对象物即地标有关的地标信息;地标摄影单元,其用于对由地标信息接收单元接收到的地标信息表示的地标进行拍摄;摄影位置分析单元,其根据由地标摄影单元拍摄的地标的图像即地标图像,分析拍摄地标图像时的移动终端的所在位置;以及位置信息管理单元,其管理由终端位置分析单元分析的关于移动终端的所在位置的信息,服务器具有:概略位置信息接收单元,其接收从移动终端发送的概略位置信息;地标信息存储单元,其存储多个地标信息;地标检索单元,其根据由概略位置信息接收单元接收到的概略位置信息,从地标信息存储单元中检索与概略位置相距预先设定的预定距离以内的地标的地标信息;地标信息发送单元,其将由地标检索单元检索到的地标信息发送到移动终端;以及地标图像接收单元,其接收从移动终端发送的地标图像。
为了解决上述课题,本发明的一个实施方式的移动终端是终端位置确定系统中的移动终端,该终端位置确定系统具有移动终端和可与该移动终端通信的服务器,并且确定移动终端的位置,其特征在于,该移动终端具有:概略位置测位单元,其对移动终端所在的概略位置进行测位;概略位置信息发送单元,其将由概略位置测位单元测位得到的关于概略位置的概略位置信息发送到服务器;地标信息接收单元,其从服务器接收与为了确定移动终端的位置而使移动终端拍摄的摄影对象即地标的地标信息;地标摄影单元,其用于对由地标信息接收单元接收到的地标信息表示的地标进行拍摄;摄影位置分析单元,其根据由地标摄影单元拍摄的地标的图像即地标图像,分析拍摄地标图像时的移动终端的所在位置;以及位置信息管理单元,其管理由终端位置分析单元分析的关于移动终端的所在位置的信息。
此外,为了解决上述课题,本发明的个一实施方式的终端位置确定方法是终端位置确定系统中的终端位置确定方法,该终端位置确定系统具有移动终端和可与该移动终端通信的服务器,并且确定移动终端的位置,其特征在于,该终端位置确定方法具有以下步骤:概略位置测位步骤,移动终端对移动终端所在的概略位置进行测位;概略位置信息发送步骤,移动终端将在概略位置测位步骤中测位得到的关于概略位置的概略位置信息发送到服务器;概略位置信息接收步骤,服务器接收在概略位置信息发送步骤中发送的概略位置信息;地标检索步骤,服务器参照存储着多个与为了确定移动终端的位置而使移动终端拍摄的摄影对象物即地标有关的地标信息的地标信息存储单元,根据在概略位置信息接收步骤中接收到的概略位置信息,检索与概略位置相距预先设定的预定的距离以内的地标的地标信息;地标信息发送步骤,服务器将在地标检索步骤中检索到的地标信息发送到移动终端;地标信息接收步骤,移动终端从服务器接收地标信息;地标摄影步骤,移动终端对在地标信息接收步骤中接收到的地标信息表示的地标进行拍摄;摄影位置分析步骤,移动终端根据在地标摄影步骤中所拍摄的地标的图像即地标图像,分析拍摄地标图像时移动终端的所在位置;以及位置信息管理步骤,移动终端对在终端位置分析步骤中分析的关于移动终端的所在位置的信息进行管理。
根据终端位置确定系统、移动终端以及终端位置确定方法,基于移动终端的概略位置信息,检索存在于距离该概略位置预定的距离以内的地标的地标信息,将检索到的地标信息发送到移动终端。由此,移动终端能够取得关于存在于移动终端的周围的地标的地标信息。此外,将在服务器中预先存储的地标信息发送到移动终端,因此能可靠地进行基于地标图像的移动终端的位置确定。而且,在移动终端中,根据地标图像来分析该图像的摄影位置,将该摄影位置作为移动终端的所在位置进行管理,因此可以高精度且容易地确定移动终端的位置。
发明效果
在AR技术中,能够高精度且可靠地确定移动终端的位置。
附图说明
图1是示出终端位置确定系统的装置结构的图。
图2是示出第1实施方式中的移动终端的功能结构的框图。
图3是示出移动终端的硬件框图。
图4是示出第1实施方式中的服务器的功能结构的框图。
图5是示出地标信息存储部的结构和存储的数据的例子的图。
图6是示出保持有移动终端的用户与地标之间的位置关系的图。
图7是示出第1实施方式中的终端位置确定方法的处理内容的时序图。
图8是示出图7中的地标检索处理的处理内容的流程图。
图9是示出第2实施方式中的移动终端的功能的结构的框图。
图10是示出显示部19中显示的引导信息的例子图。
图11是示出第2实施方式中的终端位置确定方法的处理内容的时序图。
图12是示出第3实施方式中的移动终端的功能的结构的框图。
图13是示出第3实施方式中的终端位置确定方法的处理内容的时序图。
具体实施方式
参照附图对本发明的终端位置确定系统、移动终端以及终端位置确定方法的实施方式进行说明。另外,在可能的情况下,对相同的部分标注相同的标号,省略重复的说明。
(第1实施方式)
图1是示出第1实施方式的终端位置确定系统7的装置结构框图。如图1所示,终端位置确定系统7包含移动终端1和可以与该移动终端1通信的服务器3。移动终端1例如是可以经由移动通信网进行通信的便携电话。因此,移动终端1经由移动通信网的基站5进行与服务器的通信。
图2是示出第1实施方式的移动终端1的功能结构的框图。本实施方式的移动终端1是例如进行配置在现实空间或虚拟空间中的物体的显示控制的装置,具有以下功能:从服务器取得在现实空间或虚拟空间中配置在移动终端1的所在位置的周围的物体,在由移动终端1具有的照相机取得的现实空间的图像上重叠显示包含各种信息或图像的物体。在本实施方式中,为了高精度地控制移动终端1的显示器即显示单元中的物体的显示位置,需要高精度地检测移动终端1的所在位置。
如图2所示,移动终端1在功能上具有:概略位置测位部10(概略位置测位单元);方位测位部11(方位测位单元);概略位置信息发送部12(概略位置信息发送单元);地标信息接收部13(地标信息接收单元);地标摄影部14(地标摄影单元);地标图像发送部15(地标图像发送单元);位置信息接收部16(位置信息接收单元)以及位置信息管理部17(位置信息管理单元)。
图3是移动终端1的硬件结构图。如图3所示,移动终端1由计算机系统构成,该计算机系统在物理上包含以下部分等:CPU101;作为主存储装置的RAM102和ROM103;作为数据送接收设备的通信模块104;硬盘;闪速存储器等辅助存储装置105;作为输入设备的键盘等输入装置106;以及显示器等输出装置107。在图3所示的CPU101、RAM102等硬件上读入预定的计算机软件,由此在CPU101的控制下使通信模块104、输入装置106、输出装置107动作,并且,进行RAM102和辅助存储装置105中的数据的读出和写入,由此实现图2所示的各功能。再次参照图2,对终端位置确定系统7的各功能部详细地进行说明。
概略位置测位部10是对移动终端1所在的概略位置进行测位的部分。概略位置测位部10例如由GPS装置构成。在GPS进行的位置计测中包含因测定原理而造成的误差。因此,由概略位置测位部10测位得到的位置仅是概略的位置。概略位置测位部10将关于概略位置的概略位置信息发送到概略位置信息发送部12。
方位测位部11是对地标摄影部14中的视野的方向即视野方位进行测位的部分。方位测位部11将测位得到的关于视野方位的信息作为方位信息发送到概略位置信息发送部12。
概略位置信息发送部12是将由概略位置测位部10测位得到的关于概略位置的概略位置信息发送到服务器3的部分。此外,在进行了方位测位部11的视野方位的测位的情况下,概略位置信息发送部12将概略位置信息与方位信息一起发送到服务器3。
地标信息接收部13是从服务器接收关于地标的地标信息的部分。地标是在现实空间中存在的、为了确定移动终端1的位置而由移动终端1摄影的摄影对象物。例如,地标是预定的建物或广告牌这样的构造物。此外,地标信息是关于地标的所在位置的信息,包含可以识别地标的外观的物体信息。后面会详细叙述关于地标信息。
地标摄影部14是用于对由地标信息示出的地标进行摄影的部分,由例如照相机构成。移动终端1的用户可以根据地标信息识别地标的所在位置等,因此,通过使地标摄影部14工作能够对地标进行摄影。地标摄影部14将所摄影的地标的图像发送到地标图像发送部15。
地标图像发送部15是将从地标摄影部14取得的地标图像发送到服务器3的部分。
位置信息接收部16是从服务器3接收由服务器3分析的终端位置信息的部分。终端位置信息是表示拍摄地标图像时的移动终端的位置的信息。关于终端位置信息的分析将在后面叙述。
位置信息管理部17是将由位置信息接收部16接收到的终端位置信息示出的位置作为移动终端1的所在位置进行管理的部分。具体而言,位置信息管理部17使用由终端位置信息示出的位置,作为在移动终端1中使在现实空间或虚拟空间中配置的物体在由照相机取得的现实空间的图像中重叠显示时的基准位置。移动终端1将由终端位置信息示出的位置作为基准位置,取得在现实空间或虚拟空间中在移动终端1的周围配置的物体,根据移动终端1的基准位置与物体的位置的位置关系来显示物体。
接着,对服务器3的功能详细地进行说明。图4是示出第1实施方式的服务器3的功能的结构的框图。本实施方式的服务器3具有概略位置信息接收部30(概略位置信息接收单元)、地标信息存储部31(地标信息存储单元)、地标检索部32(地标检索单元)、地标信息发送部38(地标信息发送单元)、地标图像接收部39(地标图像接收单元)、终端位置分析部40(终端位置分析单元)、终端位置信息发送部41(终端位置信息发送单元)以及地图数据存储部42(地图数据存储单元)。服务器3也是具有与图3所示的移动终端1的硬件结构同样的硬件结构的计算机。参照图4对服务器3的各功能部详细地进行说明。
概略位置信息接收部30是接收从移动终端1发送的概略位置信息的部分。此外,在从概略位置信息发送部12一起发送了概略位置信息和方位信息的情况下,概略位置信息接收部30接收概略位置信息和方位信息。概略位置信息接收部30将接收到的概略位置信息和方位信息发送到地标检索部32。
地标信息存储部31是存储了地标信息的部分。图5是示出地标信息存储部31的结构和存储的数据的例子图。如图5所示,地标信息存储部31将位置、名称、物体信息、高度信息、朝向、可视角度以及大小的信息对应,作为地标信息,按照每个编号进行存储。
“位置”是表示地标的二维的所在位置的信息。“名称”是表示地标的名称的信息。“物体信息”是在地标中视觉地示出形状的二维或三维的数据。“高度信息”是表示地标所在的位置的高度的信息。“朝向”是表示地标的正对方向的朝向的角度的信息,以北方向为0度,随着向顺时针旋转而增加。“可视角度”是表示地标的可视角度范围的信息。可视角度中的“水平”的角度范围以地标的正对方向为基准。此外,可视角度中的“铅直”的角度范围以水平方向为基准。“大小”是表示地标的外形的大小的信息。
地标检索部32是从地标信息存储部31检索作为适于移动终端1的位置确定的摄影对象的地标的地标信息的部分。如图4所示,地标检索部32具有地标提取部33、便携电话方位对照部34、可视角度对照部35、显示尺寸对照部36以及遮蔽物检索部37。
地标提取部33是根据移动终端1的概略位置信息和地标信息存储部31中的“位置”的信息,从地标信息存储部31中提取与概略位置相距预先设定的预定的距离以内的地标的地标信息的部分。
便携电话方位对照部34是根据来自移动终端1的方位信息、概略位置信息以及地标信息存储部31中的“位置”的信息,对照由地标提取部33提取的地标是否位于以移动终端1的视野方位为中心的预定的角度范围的部分。
可视角度对照部35是根据概略位置信息和地标信息存储部31中的“可视角度”,对照由地标提取部33提取的地标是否为从移动终端1的所在位置观察可以看到的地标的部分。图6是示出保持有移动终端1的用户P与地标的位置关系的图。用户P保持有移动终端1,因此用户P的所在位置大致与移动终端1的概略位置相等。在图6中,用户P的所在位置包含在地标LC的可视角度中,但是不包含在地标LB的可视角度中。因此,可视角度对照部35将地标LC判定为是从移动终端1的所在位置观察可以看到的地标,将地标LB判定为是从移动终端1的所在位置观察不能看到的地标。
显示尺寸对照部36是对照由地标提取部33提取的地标,在将移动终端1的地标摄影部14捕捉到的地标在移动终端1的显示部(未图示)显示的情况下,是否是显示部中的地标的图像占图像整体的区域的尺寸在预先设定的尺寸的范围内的地标的部分。在显示部中,地标的图像所占的区域的尺寸取决于移动终端1与地标的距离以及地标摄影部14捕捉地标时的倍率。用于确定移动终端1的位置的地标图像优选在显示部中显示为适当的大小。因此,通过显示尺寸对照部36提取适合摄影的地标的地标信息。
遮蔽物检索部37是根据在地图数据存储部42中存储的地图数据和概略位置信息,对照由地标提取部33提取的地标是否是在与移动终端1的概略位置之间不存在遮蔽物的地标的部分。参照图6进行说明,在地标LC与用户P之间不存在遮蔽物,但是在地标LA与用户P之间存在遮蔽物CA。因此,遮蔽物检索部37将地标LC判定为是在与移动终端1的概略位置之间不存在遮蔽物的地标,将地标LA判定为是在与移动终端1的概略位置之间存在遮蔽物的地标。
在进行了基于显示尺寸对照部36和可视角度对照部35的地标信息的对照和提取的情况下,移动终端1可以将地标摄影部14捕捉地标的图像时的关于摄影视野角度、焦点距离、倍率等的摄影信息发送到服务器3。该情况下,地标检索部32取得从移动终端1发送的摄影信息。而且,地标检索部32能够根据摄影信息来变更关于可视角度对照部35在对照中使用的“可视角度”以及显示尺寸对照部36在对照中使用的显示尺寸的阈值。另外,摄影信息可以预先保持在服务器3中。
地标检索部32将由功能部33~37提取的地标信息发送到地标信息发送部38。另外,本实施方式的地标检索部32按照地标提取部33、便携电话方位对照部34、可视角度对照部35、显示尺寸对照部36、遮蔽物检索部37的顺序实施地标信息的对照和提取,但是不限于该顺序。
地标信息发送部38是将由地标检索部32检索到的地标信息发送到移动终端1的部分。
地标图像接收部39是接收从移动终端1发送的地标图像的部分。
终端位置分析部40是根据由地标图像接收部39接收到的地标图像,分析/计算拍摄地标图像时的移动终端1的位置的部分。具体而言,终端位置分析部40根据从地标信息存储部31提取的现实空间中的地标的位置、大小及形状与地标图像中的地标的位置、大小及形状的不同,分析拍摄地标图像时的移动终端1的位置。
终端位置信息发送部41是将由终端位置分析部40分析的移动终端1的位置作为终端位置信息发送到移动终端的部分。
地图数据存储部42是存储着地图数据的部分。地图数据包含现实空间中的道路形状、地形、建物等构造物的位置以及形状。
接着,参照图7,对本实施方式的终端位置确定方法中的终端位置确定系统7的动作进行说明。图7是示出在终端位置确定系统7中实施的处理内容的流程图。
首先,移动终端1使概略位置测位部10起动(S1)。另外,此处,移动终端1也可以使方位测位部11一同起动。接着,概略位置测位部10对移动终端1所在的概略位置进行测位(S2,概略位置测位步骤)。另外,在步骤S2中,方位测位部11也可以对地标摄影部14中的视野方位进行测位。然后,概略位置信息发送部12将概略位置信息发送到服务器3(S3,概略位置信息发送步骤)。此外,在进行了方位测位部11的视野方位的测位的情况下,概略位置信息发送部12可以在步骤S3中,将概略位置信息与方位信息一起发送到服务器3。
在从移动终端1发送了概略位置信息等后,概略位置信息接收部30接收从移动终端1发送的概略位置信息(S4,概略位置信息接收步骤)。另外,在从概略位置信息发送部12一起发送了概略位置信息和方位信息的情况下,在步骤S4中,概略位置信息接收部30接收概略位置信息和方位信息。
接着,地标检索部32从地标信息存储部31检索地标信息(S5,地标检索步骤)。此处,参照图8,详细地对地标检索处理的详细进行说明。图8是示出地标检索处理的内容的流程图。
首先,地标提取部33根据移动终端1的概略位置信息和地标信息存储部31中的“位置”的信息,从地标信息存储部31提取与概略位置相距预先设定的预定的距离以内的地标的地标信息(S20)。在步骤S20中,在提取了一个以上的地标的情况下,处理步骤进入步骤S22。另一方面,在步骤S20中,距离概略位置预先设定的预定的距离以内不存在地标的情况下,处理步骤进入步骤S31(S21)。
在步骤S22中,地标检索部32从由地标提取部33提取的地标中提取与概略位置距离最近的地标(S22)。
接着,便携电话方位对照部34根据来自移动终端1的方位信息、概略位置信息以及地标信息存储部31中的“位置”的信息,对照在步骤S22中提取的地标是否位于以移动终端1的视野方位为中心的预定的角度范围内(S23)。在判定为对照对象的地标位于以移动终端1的视野方位为中心的预定的角度范围内的情况下,处理步骤进入步骤S24。另一方面,在判定为对照对象的地标不在位于以移动终端1的视野方位为中心的预定的角度范围内的情况下,处理步骤进入步骤S28。
在步骤S24中,可视角度对照部35根据概略位置信息和地标信息存储部31中的“可视角度”,对照在步骤S22中由地标提取部33提取的地标是否是从移动终端1的所在位置观察可以看到的地标(S24)。在判定为对照对象的地标是从移动终端1的所在位置观察可以看到的地标的情况下,处理步骤进入步骤S25。另一方面,在判定为对照对象的地标不是从移动终端1的所在位置观察可以看到的地标的情况下,处理步骤进入步骤S28。
在步骤S25中,显示尺寸对照部36对照由地标提取部33提取的地标,在由移动终端1的地标摄影部14捕捉的地标被显示在移动终端1的显示部(未图示)中的情况下,是否是显示部中的地标的图像所占的区域的尺寸在预先设定的尺寸的范围内的地标(S25)。在判定为对照对象的地标在移动终端1中显示的情况下是在预定尺寸范围内显示的地标的情况下,处理步骤进入步骤S26。另一方面,在判定为对照对象的地标在移动终端1中显示的情况下不是在预定尺寸范围内显示的地标的情况下,处理步骤进入步骤S28。
在步骤S26中,遮蔽物检索部37根据在地图数据存储部42中存储的地图数据和概略位置信息,对照由地标提取部33提取的地标是否是在与移动终端1的概略位置之间不存在遮蔽物的地标(S26)。在判定为对照对象的地标是在与移动终端1的概略位置之间不存在遮蔽物的地标的情况下,地标检索部32将该地标的地标信息发送到地标信息发送部38,结束地标检索处理(S27)。另一方面,在判定为对照对象的地标是在与移动终端1的概略位置之间存在遮蔽物的地标的情况下,处理步骤进入步骤S28。
在步骤S28中,地标检索部32从由地标提取部33提取的地标中,检索接着在步骤S22中提取的地标之后距离概略位置的距离最近的地标(S28)。
在步骤S28中提取了一个以上的地标的情况下,处理步骤进入步骤S30(S29)。另一方面,在步骤S28中,在没有提取一个以上的地标的情况下,处理步骤进入步骤S31(S29)。
在步骤S29中,地标检索部32判定步骤S22和步骤S28中的地标的检索的次数是否达到预先设定的预定次数(N次)。在地标的检索的次数达到N次的情况下,处理步骤进入步骤S31。另一方面,在地标的检索的次数未达到N次的情况下,处理步骤进入步骤S23。
在步骤S31中,地标检索部32经由地标信息发送部38,将不存在要向移动终端1发送的地标信息的情况通知给移动终端1。该情况下,在图7中的步骤S5的处理结束后,不实施步骤S6以后的处理,终端位置确定方法的处理步骤结束。
此处再次参照图7。在步骤S6中,地标信息发送部38将由地标检索部32检索到的地标信息发送到移动终端1(S6,地标信息发送步骤)。
接着,地标信息接收部13从服务器3接收地标信息(S7,地标信息接收步骤)。接着,移动终端1使地标摄影部14起动(S8)。另外,在本实施方式中,在步骤S8中起动地标摄影部14,但是,也可以在图7的流程图所示的终端位置确定方法的处理开始的时刻,或在开始前的时刻起动。
接着,根据地标信息,识别了地标的所在位置等的用户使地标摄影部14工作,由此,地标摄影部14摄影/取得地标的图像(S9,地标摄影步骤)。
另外,在移动终端1的周围没有发现步骤S7中接收到的地标信息示出的地标的情况下,移动终端1可以向服务器1发送作为摄影的候补的其他的地标的地标信息的发送要求。该情况下,服务器1的地标检索部32再次实施步骤S23~S30的处理,由此提取其他的地标信息。
接着,地标图像发送部15将从地标摄影部14取得的地标图像发送到服务器3(S10,地标图像发送步骤)。
在步骤S11中,地标图像接收部39接收从移动终端1发送的地标图像(S11,地标图像接收步骤)。接着,终端位置分析部40根据在步骤S11中由地标图像接收部39接收到的地标图像,分析拍摄地标图像时的移动终端1的位置(S12,终端位置分析步骤)。然后,终端位置信息发送部41将由终端位置分析部40分析的移动终端1的位置作为终端位置信息发送到移动终端(S13,终端位置信息发送步骤)。
接着,位置信息接收部16从服务器3接收由服务器3分析的终端位置信息(S14,位置信息接收步骤)。然后,位置信息管理部17将由位置信息接收部16接收到的终端位置信息示出的位置作为移动终端1的所在位置进行管理,并且,将终端位置信息用于自身终端的位置的校正(S15,位置信息管理步骤)。这样,本实施方式的处理结束。
另外,在本实施方式的地标检索处理中,如图8所示,在步骤S23~S27中进行地标的对照/提取处理,但是步骤S23、S24、S25、(S26、S27)的处理顺序不同。
此外,在地标检索处理中,也可以不实施步骤S23的处理。即,在地标检索处理中,地标检索部32可以不使用方位信息。该情况下,移动终端1可以不具有方位测位部11。此外,服务器3可以不具有便携电话方位对照部34。
此外,在地标检索处理中,也可不实施步骤S26、S27的处理。即,在地标检索处理中,地标检索部32可以不判断遮蔽物的有无。该情况下,服务器3可以不具有遮蔽物检索部37。
此外,在地标检索处理中,可以不实施步骤S24的处理。即,在地标检索处理中,地标检索部32可以不考虑地标的可视角度。该情况下,服务器3可以不具有可视角度对照部35。
此外,在地标检索处理中,可以不实施步骤S25的处理。即,在地标检索处理中,地标检索部32可以不考虑移动终端1中的地标图像的尺寸。该情况下,服务器3可以不具有显示尺寸对照部36。
此外,由概略位置测位部10测位得到的概略位置中包含因测定原理而造成的测位误差,因此,概略位置信息可以包含概略位置的测位误差信息。该情况下,概略位置信息发送部12将包含测位误差信息的概略位置信息发送到服务器3,接收到测位误差信息的服务器3能够根据测位误差的大小,变更地标检索部32中的用于检索地标的条件。例如,在测位误差信息示出的误差比预先设定的预定的值大的情况下,地标检索部32将在地标提取部33中提取地标时的“预定的距离”变更为更大的值。
此外,位置信息管理部17可以计算在步骤S15中取得的终端位置信息和概略位置信息的误差,并将计算出的误差信息通知给服务器3。接收到误差信息的服务器3能够根据误差的大小,变更地标检索部32中的用于检索地标的条件。例如,在误差信息示出的误差比预先设定的第1预定的值大且比第2预定的值小的情况下,为了防止提取地标的摄影和移动终端1的位置分析较困难的地标,地标检索部32将在地标提取部33中提取地标时的“预定的距离”变更为更小的值。此外,在误差信息示出的误差比预先设定的第2预定的值大的情况下,为了防止在移动终端1的周围无法发现摄影对象的地标,地标检索部32将在地标提取部33中提取地标时的“预定的距离”变更为更大的值。
在以上说明的第1实施方式的终端位置确定系统7、移动终端1以及终端位置确定方法中,根据移动终端1的概略位置信息,检索存在于距离该概略位置预定的距离以内的地标的地标信息,将检索到的地标信息发送到移动终端1。由此,移动终端1能够取得关于在移动终端的周围存在的地标的地标信息。此外,将在服务器3中预先存储的地标信息发送到移动终端1,因此可以可靠地进行基于地标图像的移动终端1的位置确定。而且,根据地标图像分析该图像的摄影位置,将该摄影位置作为移动终端1的所在位置在移动终端1中进行管理,用于位置的校正,因此可以高精度地确定移动终端1的位置。
(第2实施方式)
图9是示出第2实施方式的移动终端1的功能的结构的框图。第2实施方式中的移动终端1除第1实施方式的移动终端1具有的各功能部10~17外,还具有地标引导部18(地标引导单元)和显示部19(显示单元)。
地标引导部18是根据移动终端1的概略位置与地标位置信息示出的地标的所在位置的位置关系,将用于引导地标的位置的引导信息显示在移动终端1具有的显示部19中的部分。显示部19是显示有地标引导部生成的引导信息的部分。地标信息包含表示地标的所在位置的地标位置信息和关于地标存在的位置的高度的信息。
具体而言,地标引导部18将以移动终端1的概略位置为基准的地标的相对位置、地标存在的方向以及到地标的距离作为引导信息进行计算。然后,地标引导部18将计算出的引导信息在显示部19中显示。图10是示出显示部19中显示的引导信息的例子的图。如图10(a)所示,显示部19将引导信息I1与在移动终端1具有的照相机所捕捉到的现实空间的图像重叠而进行显示。引导信息I1示出到地标“XXX的广告牌”的位置的距离、地标“XXX的广告牌”存在的方向及高度、以及为了对地标进行摄影而应该使移动终端1旋转的方向。
此外,如图10(b)所示,显示部19将引导信息I2与在移动终端1的正面捕捉到的现实空间的地标“XXX的广告牌”的图像重叠而进行显示。引导信息I2示出到地标“XXX的广告牌”的位置的距离、地标“XXX的广告牌”存在的方向及高度、以及为了对地标进行摄影而应该使移动终端1旋转的方向。
接着,参照图11对第2实施方式的终端位置确定方法中的终端位置确定系统7的动作进行说明。图11是示出第2实施方式中的终端位置确定系统7的处理内容的流程图。
步骤S60~S66的处理内容分别与第1实施方式(图7)中的步骤S1~S7的处理内容同样。在步骤S67中,地标引导部18根据移动终端1的概略位置与地标位置信息示出的地标的所在位置之间的位置关系,生成引导信息,并将生成的引导信息显示在显示部19中。通过显示引导信息可以使移动终端1的用户容易地识别地标的所在位置。
步骤S68~S75的处理内容分别与第1实施方式(图7)中的步骤S8~S15的处理内容同样。
在以上说明的第2实施方式的终端位置确定系统7中,经由移动终端1的显示部19对用户引导地标的所在位置,因此用户能够可靠地识别地标的位置。因此,地标图像的摄影和取得变得容易。此外,还经由移动终端1的显示部19对用户引导关于地标存在的高度的信息,用户能够更可靠地识别地标的位置。因此,能够可靠地实施地标图像的摄影和取得。
(第3实施方式)
第3实施方式与第1实施方式的不同点在于,拍摄地标图像时的移动终端1的位置的分析不是在服务器3中,而是在通过移动终端1来实施。图12是示出第3实施方式的移动终端1的功能的结构的框图。第3实施方式中的移动终端1除第1实施方式的移动终端1具有的各功能部10、12~14、17外,还具有摄影位置分析部20(摄影位置分析单元)。
摄影位置分析部20是根据由地标摄影部14摄影的地标图像,分析拍摄地标图像时的移动终端1的位置的部分。具体而言,摄影位置分析部20根据由地标信息接收部接收到的地标信息中包含的关于现实空间中的地标的位置、大小及形状的信息与地标图像中地标的位置、大小及形状的不同,分析拍摄地标图像时的移动终端1的位置。
接着,参照图13对第3实施方式的终端位置确定方法中的终端位置确定系统7的动作分析说明。图13是示出第3实施方式中的终端位置确定系统7的处理内容的流程图。
步骤S80~S88的处理内容分别与第1实施方式(图7)中的步骤S1~S9的处理内容同样。
在步骤S89中,摄影位置分析部20根据由地标摄影部14摄影的地标图像,分析拍摄地标图像时的移动终端1的位置(S89,摄影位置分析步骤)。
然后,位置信息管理部17将由摄影位置分析部20分析的终端位置信息示出的位置作为移动终端1的所在位置分析管理,并且,将终端位置信息用于自身终端的位置的校正(S90,位置信息管理步骤)。这样,本实施方式的处理结束。
在以上说明的第3实施方式的终端位置确定系统7、移动终端1以及终端位置确定方法中,根据移动终端的概略位置信息,检索存在于距离该概略位置预定的距离以内的地标的地标信息,并将检索到的地标信息发送到移动终端1。由此,移动终端1能够取得关于在移动终端1的周围存在的地标的地标信息。此外,将在服务器3中预先存储的地标信息发送到移动终端1,因此能够可靠地进行基于地标图像的移动终端1的位置确定。而且,在移动终端1中,根据地标图像分析该图像的摄影位置,将该摄影位置作为移动终端1的所在位置进行管理,因此能够高精度且容易地确定移动终端的位置。
以上,根据本发明的实施方式对本发明详细地进行了说明。但是,本发明不限于上述实施方式。本发明可以在不脱离其宗旨的范围内进行各种变形。
产业上的可用性
本发明在AR技术中能够高精度且可靠地确定移动终端的位置。
标号说明
1…移动终端,3…服务器,5…基站,7…终端位置确定系统,10…概略位置测位部,11…方位测位部,12…概略位置信息发送部,13…地标信息接收部,14…地标摄影部,15…地标图像发送部,16…位置信息接收部,17…位置信息管理部,18…地标引导部,19…显示部,20…摄影位置分析部,30…概略位置信息接收部,31…地标信息存储部,32…地标检索部,33…地标提取部,34…便携电话方位对照部,35…可视角度对照部,36…显示尺寸对照部,37…遮蔽物检索部,38…地标信息发送部,39…地标图像接收部,40…终端位置分析部,41…终端位置信息发送部,42…地图数据存储部,CA…遮蔽物,I1、I2…引导信息,LA、LB、LC…地标,P…用户。

Claims (13)

1.一种终端位置确定系统,该终端位置确定系统具有移动终端和可与该移动终端通信的服务器,并且确定所述移动终端的位置,其中,
所述移动终端具有:
概略位置测位单元,其对所述移动终端所在的概略位置进行测位;
概略位置信息发送单元,其将由所述概略位置测位单元测位得到的关于概略位置的概略位置信息发送到所述服务器;
地标信息接收单元,其从所述服务器接收与为了确定所述移动终端的位置而使所述移动终端拍摄的摄影对象物即地标有关的地标信息;
地标摄影单元,其用于对由所述地标信息接收单元接收到的所述地标信息表示的所述地标进行拍摄;
地标图像发送单元,其将由所述地标摄影单元拍摄的地标的图像即地标图像发送到所述服务器;
位置信息接收单元,其从所述服务器接收表示拍摄所述地标图像时所述移动终端的位置的终端位置信息;以及
位置信息管理单元,其将由所述位置信息接收单元接收到的所述终端位置信息表示的位置作为所述移动终端的所在位置进行管理,
所述服务器具有:
概略位置信息接收单元,其接收从所述移动终端发送的所述概略位置信息;
地标信息存储单元,其存储多个所述地标信息;
地标检索单元,其根据由所述概略位置信息接收单元接收到的所述概略位置信息,从所述地标信息存储单元中检索与所述概略位置相距预先设定的预定距离以内的所述地标的所述地标信息;
地标信息发送单元,其将由所述地标检索单元检索到的所述地标信息发送到所述移动终端;
地标图像接收单元,其接收从所述移动终端发送的所述地标图像;
终端位置分析单元,其根据由所述地标图像接收单元接收到的所述地标图像,分析拍摄所述地标图像时所述移动终端的位置;以及
终端位置信息发送单元,其将由所述终端位置分析单元分析出的所述移动终端的位置作为终端位置信息发送到所述移动终端。
2.根据权利要求1所述的终端位置确定系统,其中,
所述移动终端还具有对所述地标摄影单元中的视野的方向即视野方位进行测位的方位测位单元,
所述概略位置信息发送单元将由所述方位测位单元测位得到的关于所述视野方位的信息作为方位信息,与所述概略位置信息一起发送到所述服务器,
所述地标检索单元从所述地标信息存储单元中检索与所述概略位置信息表示的所述概略位置相距预先设定的预定距离以内、且存在于以所述方位信息表示的所述视野方位为中心的预定的角度范围内的所述地标的所述地标信息。
3.根据权利要求1或2所述的终端位置确定系统,其中,
所述服务器具有用于存储地图数据的地图数据存储单元,
所述地标检索单元参照所述地图数据存储单元,从所述地标信息存储单元中检索与所述概略位置信息表示的所述概略位置相距预先设定的预定距离以内、且与所述概略位置之间不存在遮蔽物的所述地标的所述地标信息。
4.根据权利要求1或2所述的终端位置确定系统,其中,
所述地标信息包含可视角度,该可视角度是表示可以看到所述地标的、以该地标的正对方向为基准的角度的范围的信息,
所述地标检索单元在所述概略位置存在于所述地标的所述可视角度表示的角度的范围内的情况下,从所述地标信息存储单元中检索该地标的所述地标信息。
5.根据权利要求1或2所述的终端位置确定系统,其中,
所述地标检索单元从所述地标信息存储单元中检索如下地标的所述地标信息:在由所述地标摄影单元对所述地标进行了拍摄的情况下,该地标的图像的区域占所拍摄的图像整体的尺寸在预先设定的尺寸范围内。
6.根据权利要求1或2所述的终端位置确定系统,其中,
所述地标信息包含表示所述地标的所在位置的地标位置信息,
所述移动终端还具有地标引导单元,该地标引导单元根据该移动终端的所述概略位置与地标位置信息表示的所述地标的所在位置之间的位置关系,使用于引导所述地标的位置的引导信息显示在该移动终端具有的显示单元中。
7.根据权利要求6所述的终端位置确定系统,其中,
所述地标信息包含关于所述地标所在的位置的高度的信息,
所述地标引导单元使所述地标的位置和高度作为所述引导信息显示在所述显示单元中。
8.根据权利要求1或2所述的终端位置确定系统,其中,
所述终端位置分析单元根据现实空间中的所述地标的位置、大小及形状与所述地标图像中的所述地标的位置、大小及形状的不同,分析拍摄所述地标图像时所述移动终端的位置。
9.一种终端位置确定系统,该终端位置确定系统具有移动终端和可与该移动终端通信的服务器,并且确定所述移动终端的位置,其中,
所述移动终端具有:
概略位置测位单元,其对所述移动终端所在的概略位置进行测位;
概略位置信息发送单元,其将由所述概略位置测位单元测位得到的关于概略位置的概略位置信息发送到所述服务器;
地标信息接收单元,其从所述服务器接收与为了确定所述移动终端的位置而使所述移动终端拍摄的摄影对象物即地标有关的地标信息;
地标摄影单元,其用于对由所述地标信息接收单元接收到的所述地标信息表示的所述地标进行拍摄;
摄影位置分析单元,其根据由所述地标摄影单元拍摄的地标的图像即地标图像,分析拍摄所述地标图像时所述移动终端的所在位置;以及
位置信息管理单元,其对由所述终端位置分析单元分析的关于所述移动终端的所在位置的信息进行管理,
所述服务器具有:
概略位置信息接收单元,其接收从所述移动终端发送的所述概略位置信息;
地标信息存储单元,其存储多个所述地标信息;
地标检索单元,其根据由所述概略位置信息接收单元接收到的所述概略位置信息,从所述地标信息存储单元中检索与所述概略位置相距预先设定的预定距离以内的所述地标的所述地标信息;以及
地标信息发送单元,其将由所述地标检索单元检索到的所述地标信息发送到所述移动终端。
10.一种终端位置确定系统中的移动终端,该终端位置确定系统具有移动终端和可与该移动终端通信的服务器,并且确定所述移动终端的位置,该移动终端具有:
概略位置测位单元,其对所述移动终端所在的概略位置进行测位;
概略位置信息发送单元,其将由所述概略位置测位单元测位得到的关于概略位置的概略位置信息发送到所述服务器;
地标信息接收单元,其从所述服务器接收与为了确定所述移动终端的位置而使所述移动终端拍摄的摄影对象物即地标有关的地标信息;
地标摄影单元,其用于对由所述地标信息接收单元接收到的所述地标信息表示的所述地标进行拍摄;
地标图像发送单元,其将由所述地标摄影单元拍摄的地标的图像即地标图像发送到所述服务器;
位置信息接收单元,其从所述服务器接收表示拍摄所述地标图像时的所述移动终端的位置的终端位置信息;以及
位置信息管理单元,其将由所述位置信息接收单元接收到的所述终端位置信息表示的位置作为所述移动终端的所在位置进行管理。
11.一种终端位置确定系统中的移动终端,该终端位置确定系统具有移动终端和可与该移动终端通信的服务器,并且确定所述移动终端的位置,该移动终端具有:
概略位置测位单元,其对所述移动终端所在的概略位置进行测位;
概略位置信息发送单元,其将由所述概略位置测位单元测位得到的关于概略位置的概略位置信息发送到所述服务器;
地标信息接收单元,其从所述服务器接收与为了确定所述移动终端的位置而使所述移动终端拍摄的摄影对象物即地标有关的地标信息;
地标摄影单元,其用于对由所述地标信息接收单元接收到的所述地标信息表示的所述地标进行拍摄;
摄影位置分析单元,其根据由所述地标摄影单元拍摄的地标的图像即地标图像,分析拍摄所述地标图像时的所述移动终端的所在位置;以及
位置信息管理单元,其对由所述终端位置分析单元分析的关于所述移动终端的所在位置的信息进行管理。
12.一种终端位置确定系统中的终端位置确定方法,该终端位置确定系统具有移动终端和可与该移动终端通信的服务器,并且确定所述移动终端的位置,该终端位置确定方法具有以下步骤:
概略位置测位步骤,所述移动终端对所述移动终端所在的概略位置进行测位;
概略位置信息发送步骤,所述移动终端将在所述概略位置测位步骤中测位得到的关于概略位置的概略位置信息发送到所述服务器;
概略位置信息接收步骤,所述服务器接收在所述概略位置信息发送步骤中发送的所述概略位置信息;
地标检索步骤,所述服务器参照存储着多个与为了确定所述移动终端的位置而使所述移动终端拍摄的摄影对象物即地标有关的地标信息的地标信息存储单元,根据在所述概略位置信息接收步骤中接收到的所述概略位置信息,检索与所述概略位置相距预先设定的预定距离以内的所述地标的所述地标信息;
地标信息发送步骤,所述服务器将在所述地标检索步骤中检索到的所述地标信息发送到所述移动终端;
地标信息接收步骤,所述移动终端从所述服务器接收所述地标信息;
地标摄影步骤,所述移动终端对在所述地标信息接收步骤中接收到的所述地标信息表示的所述地标进行拍摄;
地标图像发送步骤,所述移动终端将在所述地标摄影步骤中拍摄的地标的图像即地标图像发送到所述服务器;
地标图像接收步骤,所述服务器接收在所述地标图像发送步骤中发送的所述地标图像;
终端位置分析步骤,所述服务器根据在所述地标图像接收步骤中接收到的所述地标图像,分析拍摄所述地标图像时所述移动终端的位置;
终端位置信息发送步骤,所述服务器将在所述终端位置分析步骤中分析的所述移动终端的位置作为终端位置信息发送到所述移动终端;
位置信息接收步骤,所述移动终端接收在所述终端位置信息发送步骤中发送的所述终端位置信息;以及
位置信息管理步骤,所述移动终端将在所述位置信息接收步骤中接收到的所述终端位置信息表示的位置作为所述移动终端的所在位置进行管理。
13.一种终端位置确定系统中的终端位置确定方法,该终端位置确定系统具有移动终端和可与该移动终端通信的服务器,并且确定所述移动终端的位置,该终端位置确定方法具有以下步骤:
概略位置测位步骤,所述移动终端对所述移动终端所在的概略位置进行测位;
概略位置信息发送步骤,所述移动终端将在所述概略位置测位步骤中测位得到的关于概略位置的概略位置信息发送到所述服务器;
概略位置信息接收步骤,所述服务器接收在所述概略位置信息发送步骤中发送的所述概略位置信息;
地标检索步骤,所述服务器参照存储着多个与为了确定所述移动终端的位置而使所述移动终端拍摄的摄影对象物即地标有关的地标信息的地标信息存储单元,根据在所述概略位置信息接收步骤中接收到的所述概略位置信息,检索与所述概略位置相距预先设定的预定距离以内的所述地标的所述地标信息;
地标信息发送步骤,所述服务器将在所述地标检索步骤中检索到的所述地标信息发送到所述移动终端;
地标信息接收步骤,所述移动终端从所述服务器接收所述地标信息;
地标摄影步骤,所述移动终端对在所述地标信息接收步骤中接收到的所述地标信息表示的所述地标进行拍摄;
摄影位置分析步骤,所述移动终端根据在所述地标摄影步骤中拍摄的地标的图像即地标图像,分析拍摄所述地标图像时所述移动终端的所在位置;以及
位置信息管理步骤,所述移动终端对在所述终端位置分析步骤中分析的关于所述移动终端的所在位置的信息进行管理。
CN201180024163.8A 2010-05-17 2011-05-10 终端位置确定系统、移动终端以及终端位置确定方法 Expired - Fee Related CN102893129B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010113304A JP5255595B2 (ja) 2010-05-17 2010-05-17 端末位置特定システム、及び端末位置特定方法
JP2010-113304 2010-05-17
PCT/JP2011/060779 WO2011145482A1 (ja) 2010-05-17 2011-05-10 端末位置特定システム、移動端末及び端末位置特定方法

Publications (2)

Publication Number Publication Date
CN102893129A CN102893129A (zh) 2013-01-23
CN102893129B true CN102893129B (zh) 2015-08-19

Family

ID=44991591

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180024163.8A Expired - Fee Related CN102893129B (zh) 2010-05-17 2011-05-10 终端位置确定系统、移动终端以及终端位置确定方法

Country Status (5)

Country Link
US (1) US9154742B2 (zh)
EP (1) EP2573518A4 (zh)
JP (1) JP5255595B2 (zh)
CN (1) CN102893129B (zh)
WO (1) WO2011145482A1 (zh)

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5371523B2 (ja) 2009-04-14 2013-12-18 東芝機械株式会社 フィルム延伸装置およびフィルムの延伸方法
US9606992B2 (en) * 2011-09-30 2017-03-28 Microsoft Technology Licensing, Llc Personal audio/visual apparatus providing resource management
CN104254826A (zh) * 2012-02-27 2014-12-31 株式会社尼康 图像显示程序和图像显示装置
CN102607579A (zh) * 2012-03-14 2012-07-25 深圳市赛格导航科技股份有限公司 一种车载导航终端及系统
CN107205269B (zh) * 2012-04-27 2020-06-16 华为技术有限公司 定位终端的方法、装置和系统
KR101184799B1 (ko) 2012-05-10 2012-09-24 상명대학교 산학협력단 Gps 측위 보정 서비스 방법 및 시스템
CN102736060A (zh) * 2012-05-17 2012-10-17 陈荻 定位装置、定位系统和定位方法
JP6165422B2 (ja) * 2012-06-28 2017-07-19 株式会社ナビタイムジャパン 情報処理システム、情報処理装置、サーバ、端末装置、情報処理方法、及びプログラム
GB2507510B (en) * 2012-10-31 2015-06-24 Sony Comp Entertainment Europe Apparatus and method for augmented reality
US20150310313A1 (en) * 2012-12-18 2015-10-29 Mitsubishi Electric Corporation Visibility estimation device, visibility estimation method, and safe driving support system
US9679414B2 (en) 2013-03-01 2017-06-13 Apple Inc. Federated mobile device positioning
US9928652B2 (en) 2013-03-01 2018-03-27 Apple Inc. Registration between actual mobile device position and environmental model
US10175050B2 (en) 2013-06-17 2019-01-08 Sony Corporation Image processing device, image processing method, and program
JP6225538B2 (ja) * 2013-07-24 2017-11-08 富士通株式会社 情報処理装置、システム、情報提供方法および情報提供プログラム
JP6222440B2 (ja) * 2013-10-07 2017-11-01 コニカミノルタ株式会社 Ar表示システム、およびar表示装置、情報処理装置、プログラム
TWI537580B (zh) * 2013-11-26 2016-06-11 財團法人資訊工業策進會 定位控制方法
JPWO2015145544A1 (ja) * 2014-03-24 2017-04-13 パイオニア株式会社 表示制御装置、制御方法、プログラム及び記憶媒体
US9818196B2 (en) 2014-03-31 2017-11-14 Xiaomi Inc. Method and device for positioning and navigating
JP6303890B2 (ja) * 2014-07-22 2018-04-04 日産自動車株式会社 位置検出装置及び位置検出方法
US10146999B2 (en) 2015-10-27 2018-12-04 Panasonic Intellectual Property Management Co., Ltd. Video management apparatus and video management method for selecting video information based on a similarity degree
JP6169742B2 (ja) * 2016-03-08 2017-07-26 株式会社Bs—Tbs 画像処理方法および画像処理装置
FR3050053B1 (fr) * 2016-04-06 2018-05-04 L'air Liquide, Societe Anonyme Pour L'etude Et L'exploitation Des Procedes Georges Claude Procede de calcul de l'autonomie d'un ensemble de distribution de gaz
JP6288166B2 (ja) * 2016-06-14 2018-03-07 カシオ計算機株式会社 携帯端末及びプログラム
US10209081B2 (en) * 2016-08-09 2019-02-19 Nauto, Inc. System and method for precision localization and mapping
CN107179080B (zh) * 2017-06-07 2020-07-24 纳恩博(北京)科技有限公司 电子设备的定位方法和装置、电子设备、电子定位系统
CN108051836B (zh) * 2017-11-02 2022-06-10 中兴通讯股份有限公司 一种定位方法、装置、服务器及系统
CN108471533B (zh) * 2018-03-21 2020-11-27 万物共算(成都)科技有限责任公司 一种适用于ar的高精度定位方法
JP2020003377A (ja) * 2018-06-29 2020-01-09 株式会社ソーシャル・キャピタル・デザイン 案内システム
JP7192704B2 (ja) * 2018-08-31 2022-12-20 株式会社デンソー 地図生成装置及び地図生成プログラム
JP7250499B2 (ja) * 2018-12-12 2023-04-03 西日本旅客鉄道株式会社 設備位置管理システム
WO2020144844A1 (ja) * 2019-01-11 2020-07-16 三菱電機株式会社 移動体の自己位置補正装置
US11025837B2 (en) 2019-03-27 2021-06-01 ROVl GUIDES, INC. Replacing a background portion of an image
US10944921B2 (en) 2019-03-27 2021-03-09 Rovi Guides, Inc. Replacing a background portion of an image
US10887531B2 (en) 2019-03-27 2021-01-05 Rovi Guides, Inc. Replacing a background portion of an image
EP4332506A3 (en) * 2019-05-24 2024-03-20 Google Llc Method and device for navigating two or more users to a meeting location
CN110516647A (zh) * 2019-09-02 2019-11-29 中国矿业大学(北京) 基于图像识别的移动目标定位方法及系统
CN114207475A (zh) * 2019-11-02 2022-03-18 游戏橘子数位科技股份有限公司 虚实结合的定位方法
JP7290104B2 (ja) * 2019-12-23 2023-06-13 株式会社デンソー 自己位置推定装置、方法及びプログラム
KR102443016B1 (ko) * 2020-03-02 2022-09-15 주식회사 하이퍼클라우드 증강 기술을 이용하여 광고를 구현하는 장치 및 방법
CN116222545B (zh) * 2023-05-10 2023-07-25 北京白水科技有限公司 用于群组导航定位的智能地标设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001235534A (ja) * 2000-02-25 2001-08-31 Nippon Telegr & Teleph Corp <Ntt> 位置情報補正装置と方法及び位置情報補正プログラムを記録した記録媒体
JP2003240593A (ja) * 2002-02-20 2003-08-27 National Institute Of Advanced Industrial & Technology 携帯者の現在位置および方位推定方法
CN101091103A (zh) * 2005-01-28 2007-12-19 爱信艾达株式会社 图像识别装置和方法以及使用该图像识别装置或方法的定位装置、车辆控制装置和导航装置
CN101221049A (zh) * 2006-12-04 2008-07-16 韩国电子通信研究院 车辆位置估计装置及其方法
CN101469998A (zh) * 2007-12-27 2009-07-01 爱信艾达株式会社 地物信息收集装置及程序、自车位置识别装置和导航装置

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003263104A (ja) * 2002-03-11 2003-09-19 Mitsubishi Electric Corp 撮像情報認識システム
US7127082B2 (en) * 2002-09-27 2006-10-24 Hrl Laboratories, Llc Active fiducials for augmented reality
WO2006035476A1 (ja) * 2004-09-27 2006-04-06 Mitsubishi Denki Kabushiki Kaisha 位置特定サーバ及び移動体端末
JP2006322832A (ja) * 2005-05-19 2006-11-30 Ntt Docomo Inc 通信端末、輪郭情報管理サーバ、情報提供システム、及び、情報提供方法
JP4300199B2 (ja) * 2005-06-13 2009-07-22 株式会社東芝 移動ロボット、移動ロボットの位置姿勢算出方法、移動ロボットの自律走行システム
JP2007067487A (ja) * 2005-08-29 2007-03-15 Hitachi Ltd 情報処理システム、および位置情報提示方法
DE102006007283B4 (de) * 2006-02-16 2018-05-03 Airbus Operations Gmbh Landmarken-Informationssystem in einem Flugzeug
KR100785784B1 (ko) * 2006-07-27 2007-12-13 한국전자통신연구원 인공표식과 오도메트리를 결합한 실시간 위치산출 시스템및 방법
JP4682217B2 (ja) * 2007-03-07 2011-05-11 パナソニック株式会社 行動制御装置、方法、プログラム
US8368759B2 (en) * 2007-03-13 2013-02-05 Research Institute Of Industrial Science & Technology Landmark for position determination of mobile robot and apparatus and method using it
BRPI0812782B1 (pt) * 2007-05-31 2019-01-22 Panasonic Corp aparelho de captura de imagem, aparelho de provisão de informação adicional e método para uso em um aparelho de provisão de informação adicional
US9582937B2 (en) * 2008-01-02 2017-02-28 Nokia Technologies Oy Method, apparatus and computer program product for displaying an indication of an object within a current field of view
JP5056469B2 (ja) * 2008-02-22 2012-10-24 富士通株式会社 画像管理装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001235534A (ja) * 2000-02-25 2001-08-31 Nippon Telegr & Teleph Corp <Ntt> 位置情報補正装置と方法及び位置情報補正プログラムを記録した記録媒体
JP2003240593A (ja) * 2002-02-20 2003-08-27 National Institute Of Advanced Industrial & Technology 携帯者の現在位置および方位推定方法
CN101091103A (zh) * 2005-01-28 2007-12-19 爱信艾达株式会社 图像识别装置和方法以及使用该图像识别装置或方法的定位装置、车辆控制装置和导航装置
CN101221049A (zh) * 2006-12-04 2008-07-16 韩国电子通信研究院 车辆位置估计装置及其方法
CN101469998A (zh) * 2007-12-27 2009-07-01 爱信艾达株式会社 地物信息收集装置及程序、自车位置识别装置和导航装置

Also Published As

Publication number Publication date
EP2573518A1 (en) 2013-03-27
WO2011145482A1 (ja) 2011-11-24
US20130107038A1 (en) 2013-05-02
EP2573518A4 (en) 2016-03-16
JP2011242207A (ja) 2011-12-01
JP5255595B2 (ja) 2013-08-07
US9154742B2 (en) 2015-10-06
CN102893129A (zh) 2013-01-23

Similar Documents

Publication Publication Date Title
CN102893129B (zh) 终端位置确定系统、移动终端以及终端位置确定方法
US20180188033A1 (en) Navigation method and device
US9699375B2 (en) Method and apparatus for determining camera location information and/or camera pose information according to a global coordinate system
KR101350033B1 (ko) 증강 현실 제공 단말기 및 방법
CN107845114B (zh) 地图的构建方法、装置及电子设备
KR20160122383A (ko) 무인항공기를 이용한 실시간 골프공 위치 추적 시스템 및 방법
US9836826B1 (en) System and method for providing live imagery associated with map locations
CN105159958A (zh) 一种基于移动终端的图片信息处理的方法及系统
US20170132840A1 (en) Providing mounting information
JP2019163998A (ja) 情報提供システム、サーバ装置、及び情報提供方法
CN111225340A (zh) 一种景区寻物方法、装置及存储介质
CN106462750B (zh) 用于确定并且提供用来对车辆进行定位的地面标志的方法
JP2010272054A (ja) 建築物関連情報提供装置、建築物関連情報提供方法および建築物関連情報提供プログラム
KR101601726B1 (ko) 복수의 영상 획득 장치를 포함하는 모바일 단말기의 위치 및 자세 결정 방법 및 시스템
US20120155708A1 (en) Apparatus and method for measuring target point in video
JP2016133701A (ja) 情報提供システム、及び情報提供方法
JP6591594B2 (ja) 情報提供システム、サーバ装置、及び情報提供方法
KR20160141087A (ko) 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템 및 방법
CN113063421A (zh) 导航方法及相关装置、移动终端、计算机可读存储介质
CN110287872A (zh) 一种基于移动终端的兴趣点视线方向识别方法及装置
KR20150106621A (ko) 단말, 서비스 제공 장치, 그 제어 방법, 컴퓨터 프로그램이 기록된 기록 매체 및 이미지 검색 시스템
JP2010044630A (ja) 建築物関連情報提供システム
CN110674322A (zh) 多媒体内容整合方法、系统及介质
KR101480300B1 (ko) 메인 스크린과 제2 스크린 간의 상대 위치를 이용한 인터랙티브 콘텐트 제공 시스템 및 그 방법
JP2006350879A (ja) 情報提供システム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150819

Termination date: 20190510