CN107870961A - 空间物件搜寻排序方法、系统与计算机可读取存储装置 - Google Patents
空间物件搜寻排序方法、系统与计算机可读取存储装置 Download PDFInfo
- Publication number
- CN107870961A CN107870961A CN201710562031.XA CN201710562031A CN107870961A CN 107870961 A CN107870961 A CN 107870961A CN 201710562031 A CN201710562031 A CN 201710562031A CN 107870961 A CN107870961 A CN 107870961A
- Authority
- CN
- China
- Prior art keywords
- space object
- space
- information
- user
- mobile device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 70
- 230000000007 visual effect Effects 0.000 claims description 11
- 238000001914 filtration Methods 0.000 claims description 9
- 238000011156 evaluation Methods 0.000 claims description 7
- 230000004044 response Effects 0.000 claims description 4
- 230000005540 biological transmission Effects 0.000 claims description 3
- 230000000694 effects Effects 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 15
- 238000005516 engineering process Methods 0.000 description 9
- 238000012545 processing Methods 0.000 description 7
- XEEYBQQBJWHFJM-UHFFFAOYSA-N Iron Chemical compound [Fe] XEEYBQQBJWHFJM-UHFFFAOYSA-N 0.000 description 6
- 230000003190 augmentative effect Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 239000011521 glass Substances 0.000 description 4
- 230000007306 turnover Effects 0.000 description 4
- 230000006399 behavior Effects 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 229910052742 iron Inorganic materials 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 235000013399 edible fruits Nutrition 0.000 description 2
- 230000007717 exclusion Effects 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 238000012163 sequencing technique Methods 0.000 description 2
- AXDJCCTWPBKUKL-UHFFFAOYSA-N 4-[(4-aminophenyl)-(4-imino-3-methylcyclohexa-2,5-dien-1-ylidene)methyl]aniline;hydron;chloride Chemical compound Cl.C1=CC(=N)C(C)=CC1=C(C=1C=CC(N)=CC=1)C1=CC=C(N)C=C1 AXDJCCTWPBKUKL-UHFFFAOYSA-N 0.000 description 1
- 241001269238 Data Species 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 235000021152 breakfast Nutrition 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000013481 data capture Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000037221 weight management Effects 0.000 description 1
- 238000013316 zoning Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/587—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2457—Query processing with adaptation to user needs
- G06F16/24578—Query processing with adaptation to user needs using ranking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/53—Querying
- G06F16/532—Query formulation, e.g. graphical querying
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9537—Spatial or temporal dependent retrieval, e.g. spatiotemporal queries
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
- H04W4/029—Location-based management or tracking services
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Library & Information Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Mathematical Physics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Processing Or Creating Images (AREA)
- Information Transfer Between Computers (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
一种空间物件搜寻排序方法与系统,运行于移动装置中,方法包括先启动移动装置的摄影单元,以取得实景影像,系统取得影像信息,系统同时取得移动装置运行时产生的空间信息,其中程序比对数据库中各空间物件的空间信息,或可加上影像信息,所产生的初步搜寻结果将经排序后产生提供给移动装置的空间物件,其中排序考虑的依据的一个能根据使用者关联信息提供关联性较高的空间物件,或者可依据时间、各空间物件的客观数据,或是系统设定的权重进行排序,最后由移动装置显示排序较高的空间物件,并与当下实景的影像结合。
Description
技术领域
本发明公开一种有关搜寻立体空间中物件的方法与系统,特别涉及让使用者通过移动装置搜寻所处环境中符合定位信息的空间物件,并且针对搜寻结果排序的方法与相关系统。
背景技术
通过网页浏览器,使用者可以利用文字搜寻的方式搜寻存在于因特网中各种信息,甚至也有现有技术发展出以图找图的功能,使用者在搜寻的过程可以使用一或多个关键词,以及网站提供的过滤条件收敛搜寻结果,可以得出使用者有兴趣的结果。
进一步地,搜索引擎还能根据各样使用者关联的信息提供与使用者有关的搜寻结果,例如根据使用者个人数据、喜好设定以及过去的行为,包括搜寻历史、点入有兴趣内容的行为等偏好,进行排序,让使用者有兴趣的搜寻结果优先列于搜寻结果页面上,其他则可以辅以信息的时间性、更新率、其他人的评价等客观信息过滤搜寻结果,或是成为排序的依据。
更者,广告业主可以向搜索引擎经营业者购买广告以影响搜寻结果的排序,包括向搜寻使用者提供关联性广告。
发明内容
有鉴于现有技术缺少能够根据空间定位的方式搜寻位置相关物件的技术,本发明公开书提出一种空间物件搜寻排序方法、系统与计算机可读取存储装置,其中特别应用了扩增实境技术与适地性空间物件搜寻的技术,让使用者可以在所处位置上操作移动装置朝向有兴趣的空间中某个方位,以搜寻这个方向的空间物件。
优选地,根据实施例,空间物件搜寻排序方法主要运行于一移动装置中,使其与一云端系统共同处理空间物件搜寻排序的步骤,执行在移动装置的步骤包括启动移动装置的一个摄影单元,以取得一实景的影像,并经分析产生影像信息,如实景影像的色块与线条,同时,也能取得移动装置产生的空间信息,包括对应移动装置的地面位置信息与空间角度信息。这些信息将上传至云端系统中的服务器,经服务器比对空间信息(可包括影像信息)所产生的一个初步搜寻结果,初步搜寻结果包括多个对应空间信息的空间物件。
进一步地,之后,移动装置自服务器接收对前述初步搜寻结果执行一排序后输出的一或多个空间物件,特别是,排序可依据使用者关联信息,将关联性较高的空间物件设较高优先级,将关联性较低的空间物件设较低优先级。
进一步地,排序的依据还可包括时间,空间物件可具有一时间特性,排序包括以服务器的系统时间过滤初步搜寻结果,能排除时间参数不符合的空间物件。或者,空间物件设有一有效显示时间,排序时还可排除有效显示期限超出系统时间的空间物件。
进一步地,上述使用者关联信息为服务器取得一伴随前述空间信息的一使用者的使用者识别数据,能够排除不提供使用者观看的空间物件,并可得到应使用者识别数据的一个人空间物件;使用者关联信息可为使用者设定的喜好设定与历史数据。排序的依据也可为一客观数据,如各空间物件建立的时间、更新时间、有效时间、点阅率与/或评价决定排序时的优先级。
排序还可依据空间物件提供者对个别空间物件设定的权重,使得云端系统对所接收的多个空间物件个别所接收的权重运算系统权重,系统权重愈大者,具有较高优先级。
优选地,空间物件搜寻排序方法运行于云端系统的步骤包括,以提出的服务器接收移动装置产生的定位信息与通过摄影单元取得的实景影像所产生的影像信息,因此,于服务器中,能以所接收的定位信息比对一数据库中的定位信息,或加上影像信息,可以产生初步搜寻结果,经以上各种依据后输出空间物件的结果,能提供使用者端移动装置经排序后的空间物件。
进一步地,在云端系统中,根据实施例的一个,云端系统包括有搜寻数据库,用以记载多个空间物件中个别空间物件对应的地位信息与/或影像信息,以及对应各空间物件的搜寻条件;有一空间物件数据库,用以存储多个空间物件,各空间物件设有一识别数据,以链接搜寻数据库中对应各空间物件的定位信息与/或影像信息,以及搜寻条件;系统提供一服务器,具有一或多个处理器,用以执行空间物件搜寻排序方法。
进一步地,根据公开书记载,还提供一种计算机可读取存储装置,用以记载运行于移动装置的程序集,程序集经移动装置的一个处理器执行后,执行空间物件搜寻排序方法。
附图说明
图1A至图1C显示使用者操作移动装置建立空间物件的情境示意图;
图2A显示取得空间角度信息的示意图;
图2B显示取得空间物件的背景影像信息的示意图;
图3显示使用者操作移动装置实施本发明空间物件搜寻排序方法的情境示意图;
图4显示本发明系统中移动装置中硬件与软件模块的实施例图;
图5显示本发明系统中服务器中功能模块的实施例图;
图6显示为本发明空间物件搜寻排序方法的实施例流程;
图7A与图7B显示系统提供搜寻结果的实施例示意图;
图8显示为本发明空间物件搜寻排序方法的实施例流程;
图9显示为本发明空间物件搜寻排序方法的实施例流程。
具体实施方式
本发明公开书公开一种空间物件搜寻排序方法与系统,以及一种计算机可读取存储装置,所提出的系统包括一云端系统,以及载于移动装置的计算机可读取媒体中的软件程序。云端系统设有服务器以及数据库,提供使用者管理接口,让使用者使用移动装置上传与位置、空间有关的空间信息,使得系统记载了各端使用者上传的适地性空间物件数据,形成一提供搜寻服务的数据库,进而建立搜索引擎,能提供使用者依照地理位置搜寻对应的空间物件。
之后,系统即提供使用者操作移动装置搜寻所处位置的空间物件,操作移动装置时,将可自移动装置内传感器产生的定位信息传送到云端系统,同时,可以启动照相功能,取得所处位置的实景影像,其中影像信息也成为辅助定位的信息,使得系统可以根据定位信息与影像信息提供对应的空间物件搜寻结果,并能依照排序的结果提供给使用者。
欲实现本发明公开书提出的空间物件搜寻排序方法,云端系统须先建立空间物件的相关数据库,数据库的建立方式的一个是让使用者可以操作移动装置自行建立空间物件,例如,可通过以下情境示意图所描述使用者操作移动装置建立适地性空间物件的方法。
如图1A所示,示意显示使用者操作一移动装置10,先让使用者操作移动装置10下载并安装应用系统提供的软件程序,如智能行装置内的APP,经执行此软件程序后,可进入一数据建立模式,开启移动装置10的照相模块,操作移动装置10朝向欲加注数据的物件,如建筑物、商店、景点、物品等目标物件,通过移动装置10的显示器可以看到这些目标物件的实景101。之后,通过如扩增实境(Augmented Reality,AR)的技术,提供使用者利用移动装置10的触控显示器,或是其他输入方式,在实境101的某个部位上新增一个信息,不排除可为文字、图片、影片、声音等信息。
此例显示使用者就站在知名景点「巴黎铁塔(实境101)」的前方,使用者操作移动装置10朝向此实境101,并加注此为「巴黎铁塔」的信息,此加注内容在本发明提出的系统中称为空间物件103。
之后,当使用者确认在实境101上加注的信息(空间物件103)后,移动装置10内的软件程序可以通过程序将产生此空间物件103对应的空间信息传送到应用系统的服务器,例如传送到应用系统的某个伺服主机上。上述信息(空间物件103)的内容可为文字、图片、影片或声音,或其组合,上传到服务器的空间信息则可包括空间物件103的数据,以及建立此空间物件103当下的移动装置10的地面位置信息、空间角度信息,以及拍摄实境101的影像信息等。其中空间角度为方位角(azimuth angle)与仰角(elevationangle)的组合。
在搜寻与显示模式下,此例中实境101的影像信息如空间物件103背后巴黎铁塔的组成色块,以及色块之间的线条。以上地面位置信息、空间角度信息、色块信息与线条信息即为呈现空间物件103的参数,一并存储在应用系统中的云端服务器上,当有使用者操作移动装置10产生以上参数,云端服务器即可比对而取得并呈现出空间物件103。在一般运行下,云端服务器至少需要地面位置信息与空间角度信息来比对得出空间物件103,若有需要,则可继续比对移动装置10所传送的色块信息,以及/或再加上线条信息;或先考虑线条信息,当有无法确认空间物件103的时候,再继续参考色块信息。最后产生传送到移动装置10的搜寻结果。
更进一步地,当使用者通过移动装置10显示空间物件103时,可以通过软件程序提供的接口,如一个链接图案,或是空间物件103显示时也成为一个链接按钮,让使用者点入后继续得到有关此空间物件103的更多信息,这些信息为系统提供,或是在建立此空间物件已经加入的信息。举例来说,当空间物件表示一个景点的信息,点入后可以得到景点介绍、交通信息、附近店家等;当空间物件为一个店家,点入后可以得到店家的进一步信息,如店家联络方式、优惠方案,让软件程序可以提供联系的功能。
图1B显示另一建立适地性空间物件的情境示意图。此例显示使用者操作移动装置10启动软件程序,在数据建立模式下,开启照相模块,朝向一个实境102(此例为大楼),可以准确地对着某个楼层范围以扩增实境的技术叠加空间物件105,此例为图片信息,此图片信息可以传达对应的楼层或是这个实境102的内容,例如为该楼层有一个公司,空间物件106可以为介绍该公司的文字、影音内容、图片等,或可为商品广告、招募信息等。同样地,将此加注的信息(空间物件105)的空间信息传送到系统的服务器。此例的空间信息可包括空间物件105的影像信息,以及建立此空间物件105时的移动装置10的地面位置信息、空间角度信息与实境102的影像信息。此例中的实境102影像信息如作为空间物件105背景的大楼组成的色块信息以及色块之间形成的线条信息。
当完成建立此空间物件105的空间信息后,上述对应此空间物件105的地面位置信息、空间角度信息与影像信息即上传应用系统的数据库,作为搜寻空间物件105的参数。
更进一步地,此空间物件105建立时,使用者可以赋予空间物件105更多功能,例如建立一个连结,如URL,让其他使用者搜寻得到此空间物件105时,可以获取进一步信息,如链接到另一个网页,提供使用者进一步的互动服务,如提供影音通信、信息交谈、购买交易的接口。
再如图1C显示的情境示意图,在此例图中,实境104显示有一摆设于室内的桌子,使用者可操作移动装置10先取得并显示实境104的影像,并可操作其中程序接口在实境104影像上叠加一空间物件107,此例显示在一张桌子上加入一个花瓶,另不排除可为一段文字信息、影音内容或图片,或是各种信息的组合。同样地,经使用者确认空间物件107在此桌子的位置后,移动装置10的软件程序将此叠加的空间物件107的空间信息传送到系统的服务器。此例的空间信息可包括空间物件107的影像信息,以及对应此空间物件107的地面位置信息、空间位置信息与实境104的影像信息。
值得一提的是,当实境104为室内物件时,移动装置10不容易获得全球定位系统(GPS)的信号时,移动装置10中的软件程序可以采用移动装置10最近一次的全球定位信息,应用系统将可以根据此最近的位置信息判断移动装置10所处位置,例如可能是在某个建筑物内,或在某个景点范围内。不过,却因此无法精准定位所建立的空间物件,因此本发明还提出可以实境的影像信息作为定位的依据的技术,而所述影像信息,根据一实施例,可以为空间物件背景(即某个实境)的色块信息以及/或线条信息。
根据一实施例,上述实境104的影像一般为加入空间物件的背景影像,如图1C所示范例中的桌面,桌面影像可先经移动装置10内的软件程序前置处理成色块信息与线条信息,或许拥有强大运算能力的云端服务器可以直接进行影像辨识,可以准确得到空间物件的所在位置,但是,优选地,将原本的影像信息经前置处理能形成容易存储、比对的数字信息。理由的一个是,当系统欲提供快速搜寻的服务,不论系统是否拥有强大的运算能力,都不需要对整个实境影像进行影像辨识,而仅需要以经过前置处理的数字信息进行比对,就可准确而快速地搜寻到对应的空间物件。
也就是说,本发明提出的云端系统为了要提供空间物件搜寻与排序的服务,其中在服务器端的运算程序初步可以从地面位置信息与空间角度信息定位得出空间物件,例如,其中可以从全球定位系统得出的地面位置信息,由陀螺仪信号取得移动装置在此空间的水平方位与俯仰角度等信息,也就是形成所述的空间角度信息。但是,在搜寻与显示模式下,当地面位置信息与空间角度信息仍无法准确定位某个空间物件,云端服务器将继续比对色块信息,看服务器中的数据库是否可以对应得到某个空间物件;若加入色块信息仍无法确认对应的空间物件,则继续比对线条信息,如此,应用系统将提供最终搜寻结果,包括对应的唯一空间物件,或是提供选择的项目。
以上所述的地面位置信息一般由移动装置中的全球定位系统(GPS)等的定位电路读出,或可辅以行动基地台信号或是无线区域网络信号辅助定位。当移动装置处于无法接收到定位卫星的信号时,除了可以其他信号辅助定位外,应用系统可以将自该移动装置接收的最后定位信号作为所述地面位置信息。接着,再取得移动装置中陀螺仪(gyroscope)等空间定位电路产生的信号,以此作为所述空间角度信息。
空间角度信息的取得可参考图2A所示的示意图,所示的空间坐标是以一个水平方位角(Azimuthal angle)φ与俯仰角(vertical angle)θ定义位置,根据本发明的实施概念,移动装置20发展这个空间坐标是,中间原点即为使用者所持的移动装置20,水平表示一个东西南北的方位坐标,根据一个基准轴(此例为朝北的轴)可以取得移动装置20的朝向(如移动装置20背面镜头所指的方向A),此方向A形成一个水平方位角φ以及一个垂直方向的俯仰角θ,方位角φ与俯仰角θ可由移动装置20内的空间定位单元决定,两者的组合即形成方向A的空间角度信息。当配合定位卫星201在移动装置20内形成的水平位置信息,即可适当地定位移动装置20所指的位置与方向,这个空间信息将提供给应用系统的服务器,由服务器中的运算程序比对判断得出显示在移动装置20上的空间物件。
图2B显示取得空间物件背景的影像信息的示意图。此例图中显示有一空间物件203,以一虚线外框表示,座落在一个背景影像205上,当建立此空间物件203时,服务器可自使用者端的移动装置上取得空间物件203的影像,以及所处的地面位置信息与空间角度信息,还包括此背景影像205的影像信息,这些空间信息即形成定位此空间物件203的参数。进一步地,使用者建立此空间物件203时,可以加注更多信息,建立一个链接,让后续使用者搜寻到此空间物件203时,可以取得进一步信息、链接到另一网页或购买接口,提供更多互动服务。
此例显示背景影像205的影像信息包括了经过影像前置处理形成的色块信息与线条信息。根据实施例的一个,影像前置处理可于移动装置上执行软件程序运算,亦不排除由云端服务器运算,影像的色块之间形成边缘线条,线条之间就是色块,都是成为辨识空间物件所处位置的参数。
前置处理可先辨识将背景影像205中的线条(如图示上的线条221,222,223,224,225,226),线条之间形成区域,计算区域(211,212,213,214,215,216,217)中的影像像素的平均值,形成对应的色块信息。在另一实施例中,可对各区域(211,212,213,214,215,216,217)中的影像像素执行一正规化运算(normalization),计算每个区域的特征值,作为该区域的色块信息。影像前置处理方法并不限于以上列举方法,且影像所处色度空间亦不受限于特定色度空间,可如RGB(红、绿、蓝)、HSV(色相(Hue)、饱和度(Saturation)、明度(Value))、CMYK(青(Cyan)、洋红(Magenta)、黄(Yellow)、黑)等。
值得一提的是,当经图像处理后,得出上述背景影像205上的线条221,222,223,224,225,226的信息,线条信息可以提供显示的空间物件203的依据,能经图像处理后让空间物件203确实地座落在应该呈现的平面上。
图3显示使用者操作移动装置实施本发明空间物件搜寻排序方法的情境示意图。
移动装置30如使用者手持的手机、平板计算机等,而实现本发明空间物件搜寻排序的载体不排除可以智能眼镜(intelligent glasses)、扩增或虚拟现实眼镜(AR/VRglasses)或是其他随着使用者移动的电子装置,其主要目的是通过移动装置30上的显示屏幕301看到实景32的影像,同时能够与云端系统联机,取得相关位置与空间的空间物件。
如此例显示,使用者操作移动装置30在一空间上移动,包括水平方位角度(azimuthal angle)上的移动,以及俯仰角度(elevation angle)的移动,如图2A显示,这样的空间信息将传递给云端系统,由云端系统经比对后回传对应这些空间信息的空间物件;进一步者,执行于移动装置30内的软件程序可以自所取得的实景32影像中获取辅助定位的信息,亦传给云端系统进行比对,最后,可以扩增实境(AR)的技术将所搜寻得到的空间物件迭合于目前显示屏幕301所呈现的实景32影像。
再如图4显示本发明空间物件搜寻排序系统与终端移动装置中软件模块的实施例图。
此例系统包括设于云端的服务器41,以一计算机系统实现,不排除由执行不同工作的计算机系统所组成,主要工作在于接收使用者端移动装置400所上传的空间物件数据,以及空间物件对应的空间信息,以建立数据库(搜寻数据库43、空间物件数据库45),数据库(搜寻数据库43、空间物件数据库45)用以记载经服务器取得使用者端的移动装置产生的数据,特别是包括移动装置400产生对应特定空间物件的空间信息。
数据库为一个数据存储媒体,可以根据功能区分为搜寻数据库43与空间物件数据库45,两者可以设于同一服务器内,或是设于不同的位置。其中空间物件数据库45主要为记载移动装置400上传的空间物件的数据,空间物件可以为使用者通过移动装置400建立的文字、图片、影片与声音其中的一个,或其组合,其中影片还广泛地包括平面、立体动画;空间物件数据库45同时也成为使用者通过操作移动装置400选择空间物件的数据源。搜寻数据库43主要为记载移动装置400上传的数据中对应空间物件的其他信息,如空间物件的定位信息(地面位置信息、空间角度信息),以及对应空间物件的色块信息与线条信息,色块信息与线条信息主要是取自空间物件的背景实景影像,成为定位空间物件的依据的一个。当服务器41中运行运算程序,比对搜寻数据库43记载的空间信息,可以得到一或多个空间物件,每个空间物件各有识别信息(ID),通过空间物件数据库45提供给使用者端装置。
根据再一实施例,当使用者操作移动装置400形成空间物件的空间信息同时,可以设定一搜寻条件,也是上传至搜寻数据库43中,搜寻条件如一时间范围、一可视范围与一使用者范围其中的一个,或其组合,成为搜寻比对的依据。
举例来说,使用者在某个实景上(包括实景前、后以及其他与实景有关连的位置)建立空间物件时,可以设定一时间范围,也就是设定使用者在本发明空间物件搜寻排序系统中执行信息搜寻时,除了需要符合上述定位信息与影像信息外,在此时间范围内才能搜寻到此空间物件。可视范围则是规范一个可视某空间物件的可视地面位置范围与可视空间角度范围,或是设定与某实景的某一距离范围与空间角度范围,让使用者操作移动装置400时要在这个可视范围内才能看到对应的空间物件。使用者范围则是让使用者可以设定可以看到空间物件的对象,可以为一或多个人,每个人操作移动装置400搜寻空间物件时,同时也会传送每个人的使用者识别数据(user ID),服务器同样将此纳入搜寻条件的一个。
因此,空间物件搜寻排序系统借着大量使用者上传的数据建立数据库(搜寻数据库43、空间物件数据库45),可以建立一搜索引擎,提供使用者操作移动装置搜寻空间物件的服务。
运行本发明适地性空间物件数据建立方法与显示方法的移动装置400通过网络40联机于服务器41,移动装置400主要电路组件如处理各电路组件产生的信号的数据处理单元401,以及与数据处理单元401电性连接的电路组件,如建立与外部装置联机的通信单元402、感测移动装置400位置的地面定位单元403、感测移动装置400在空间位置的空间定位单元404、取得实景影像的摄影单元405以及提供使用者操作手势输入指令的触控显示单元406。
其中地面定位单元403如全球定位系统的相关电路,通过接收定位卫星信号产生地面位置信息,而定位的技术仍可辅以其他无线基地台信号执行定位;空间定位单元404则如载于移动装置400内的陀螺仪,利用陀螺仪感测到移动装置在空间的位置,形成空间角度信息,主要由方位角φ与俯仰角θ组成。
系统还包括载于移动装置400的记忆单元407(一种计算机可读取媒体)的程序集,程序集经移动装置400的处理器(一或多个)执行后,可以执行适地性空间物件数据建立与显示的程序。程序集执行主要功能的指令如下描述。
影像获取指令471,运行移动装置400的摄影单元405取得实景的影像,并显示于移动装置400上;空间物件处理指令472,用以处理使用者操作移动装置400上的触控显示单元406建立与某个实景附近的位置上(前、后、上、下、左、右等)的空间物件,空间物件可由使用者自行建立,或是选自系统提供的空间物件数据库45,并形成传送到服务器41的空间物件的数据,空间物件为文字、图片、影片与声音其中的一个,或其组合;定位信息产生指令473,能够取得移动装置400中定位电路产生的信号,如取得移动装置400中地面定位单元403与空间定位单元404产生的定位信息;影像信息产生指令474,用以处理实景影像,产生对应空间物件的影像信息,如上述实施例公开的图像处理方法,可以产生可用以定位空间物件的色块信息与线条信息;搜寻处理指令475,用以取得移动装置400于一搜寻与显示模式下产生的定位信息与影像信息,并于定位信息与影像信息传送到服务器41后接收服务器41产生的搜寻结果;数据传送与接收指令476则是建立移动装置400与服务器41之间的联机,用以传送与接收信号,特别是传送使用者端产生的定位信息,或包括影像信息,再接收服务器41产生的搜寻结果;以及空间物件显示指令477,当移动装置400接收到服务器41产生的搜寻结果后,如有一空间物件被搜寻到,可以根据此搜寻结果显示空间物件,根据实施例的一个,将在移动装置400上显示的实景附近叠加此空间物件。
以上所述的空间物件除了可由系统提供外,还可以由使用者自行通过其他软件工具产生,包括拍摄的照片,亦可自所提供的系统取得,系统可以提供图库、影片库、声音库等让使用者选择使用。
接着,如图5所示的本发明系统中服务器中功能模块的实施例图,其中以电路或是搭配软件的功能模块描述云端系统,云端系统主要包括一搜寻数据库43,其中记载多个空间物件中个别空间物件对应的一空间信息(包括地面位置信息、空间角度信息,或加上色块信息与线条信息),每个空间物件将设有一识别数据(ID),作为搜寻索引,各空间物件还对应有个别的搜寻条件,如设定有可以观看此空间物件的一时间范围、一可视范围(水平角度与俯仰角度)与使用者范围(指定可观看的使用者)其中的一个,或其组合,成为搜寻比对的依据。
另设有空间物件数据库45,用以存储空间物件的数据,依照空间物件的形式存储在数据库中,空间物件可为文字、图片、影片或声音,或是各种形式的组合,可以依照各空间物件的识别数据链路搜寻数据库43中对应各空间物件的空间信息以及搜寻条件。
服务器41则是具有一或多个处理器的计算机系统,用以执行空间物件搜寻排序方法,通过网络40提供各端使用者操作移动装置搜寻空间物件,服务器41则是根据移动装置所上传的空间信息提供搜寻与排序的结果。服务器41可以硬件或搭配软件方式实现此方法。
服务器41设有数据获取单元411,可以电路实现数据获取的目的,通过服务器41主机上的网络接口联机至网络40,能以接收各端使用者操作移动装置所产生的定位信息与影像信息等搜寻空间物件所需的数据。
使用者管理单元412,可以一内存配合相关程序实现使用者管理的目的,用以记载每个使用者的使用者识别数据、密码管理等安全性数据,还能据此将从使用者端移动装置持续传送的搜寻数据记录起来,形成使用者的历史记录,作为日后提供使用者信息的参考,例如作为搜寻结果排序的依据的一个。特别的是,使用者识别数据是系统对搜寻结果进行排序的重要依据的一个,可以将与使用者个人相关的搜寻结果列于最高排序优先级。
数据比对单元413则是能够根据移动装置上传的定位信息比对搜寻数据库43中的数据,并由空间物件数据库45取得空间物件的文件,回传给移动装置上。经数据比对单元413比对得出的结果视为一初步搜寻结果,系统进一步对此排序,以提供使用者相对有兴趣的结果。
初步搜寻结果将经搜寻条件过滤单元414处理后,提供经排序的搜寻结果,排序时包括引入一些过滤条件,使得搜寻结果可以收敛至一定数量内的空间物件,且能使得结果是对使用者有意义的内容。
举例来说,排序可依据一使用者关联信息,使用者关联信息为服务器41取得一伴随空间信息(定位信息,或加上影像信息)的使用者的使用者识别数据,可以此取得存储于数据库中的使用者关联信息。当系统取得使用者识别数据,可以先提供与使用者个人有关的空间物件,如有人建立此空间物件是指定要给某个(或某个使用者范围)使用者看,此为一种个人空间物件,经使用者识别数据过滤后,个人空间物件对于所指定的使用者(一或多个)可设为最高的排序优先级;反之,无关而不属于使用者范围的其他人将不会看到此空间物件,此能排除不提供某些使用者观看的空间物件。
更者,使用者关联信息可为使用者设定的一喜好设定与一历史数据,数据库中各空间物件可以设定关联一或多个内容分类,使用者可以在使用此系统时设定其喜好设定,此为使用者主动设定一或多个有兴趣的内容分类。历史信息包括系统收集每个使用者对各种空间物件所关联的内容的停留时间与访问次数,系统可以将相对停留时间较久的内容(与其分类)视为该使用者较为喜好的内容分类,同理,访问次数也可以作为判断使用者喜好的依据,因此,云端系统将可根据历史数据判断得出关于该使用者的一或多个有兴趣的内容分类。
于是,系统可将关联性较高的空间物件设较高优先级,将关联性较低的空间物件设较低优先级,提供给使用者的搜寻结果可据此排序。
在一实施例中,空间物件可具有一时间特性,建立空间物件的空间物件提供者可以对所建立的空间物件设一时间参数,包括可以显示的时间(可设定时间范围、早上、中午或晚上等),或是设定空间物件被搜寻的有效显示时间,因此依照服务器的系统时间,系统可以时间作为参数过滤初步搜寻结果,排除时间参数不符合的空间物件,包括排除显示时间不符的空间物件,以及排序时排除有效显示期限超出系统时间的空间物件。
搜寻条件过滤单元414还可依据客观数据排序空间物件,客观数据如各空间物件建立的时间、更新时间、有效时间、点阅率与/或评价等参数,系统可根据这些参数决定排序时的优先级。例如,空间物件的建立时间愈新者,可以具有较高的优先级;或是更新率愈高者,可以具有较高的优先级;或是某个空间物件所关联的内容被访问率愈高,也可具有较高的优先级;或可参考其他人对空间物件所关联的内容的评价,评价愈高者,也可具有较高的优先级。
另外,除了以上时间、使用者关联信息与客观数据作为排序的依据外,系统可对数据库中的空间物件赋予一系统权重,系统权重主要是由一空间物件提供者于云端系统对所提供的个别空间物件设定一权重,由云端系统对所接收的多个空间物件个别所接收的权重运算所述的系统权重,系统权重愈大者,具有较高优先级。
举例来说,系统权重可以为广告,空间物件提供者如广告业主,可以一价格要求系统提供较高的排序,成为设定系统权重的依据。其他不排除政府政令倡导、对大众有关的信息等,可以通过设定系统权重而改变排序优先级。
之后,云端系统通过排序单元415对以上各种排序的依据作出一排序决定,其中不外乎是系统设定的排序策略(scenario),并可以依据实际需要调整。
最后,数据传送单元416对各产生搜寻请求的移动装置传送搜寻与排序的结果,当移动装置接收自服务器41传送经排序后输出的一或多个空间物件时,以显示屏幕显示具有最高优先级的空间物件,或根据一选择指令显示经选择的空间物件,显示各空间物件时,与最初拍得的实景的影像结合。
本发明空间物件搜寻排序方法的实施例可参考图6所示的流程。
开始如步骤S601,使用者操作移动装置执行一启动程序,同时如步骤S603,启动移动装置上的摄影单元,并能取得实景影像,软件程序可以先处理此影像,获取当中影像特征,产生影像信息,如步骤S605。
之后,如步骤S607,使用者操作移动装置,其中传感器对应产生空间信息,软件程序取得移动装置中相关定位电路产生的地面位置信息与空间角度信息,接着如步骤S609,上传空间影像与影像信息至云端系统提出的服务器,由服务器比对空间信息(定位信息或是加上影像信息)。其中,比对空间信息时,还考虑了各空间物件的一时间范围、一可视范围(包括一可视地面位置范围与一可视空间角度范围)与一使用者范围其中的一个,或其组合。
再如如步骤S611,服务器于是产生初步搜寻结果,这个初步搜寻结果仅是根据移动装置上传的空间信息比对得出。系统接着对此初步搜寻结果进行排序,包括以搜寻条件过滤搜寻结果。
在步骤S613中,服务器对初步搜寻结果进行排序,排序方法可参考图5中云端系统以搜寻条件过滤单元414执行的排序策略,包括可以根据使用者识别数据,以使用者关联信息得出与使用者相关的空间物件,包括针对该使用者或某个使用者范围内的个人空间物件、个人过去的历史数据或喜好等,这类结果一般来说是有较高的排序优先级。另有实施例则是以时间作为过滤搜寻结果的条件,或包括参考一些有关搜寻得到的空间物件的客观数据,以及系统所设定的空间物件。
最后,如步骤S615,传送排序后搜寻结果,由移动装置显示最高排序结果,或是通过选项让使用者决定欲观看的空间物件,显示空间物件时,显示屏幕上可以列出其他经排序的空间物件的选择。空间物件可为文字、图片、影片与声音其中的一个,或其组合。
显示时的实施方式实施方式可参考图7A所示系统提供搜寻结果的实施例示意图。图中显示有一移动装置70,产生由软件程序启始的图形使用者接口701,其中显示使用者操作移动装置70拍摄实时得到的实景影像703,在此状态下,软件程序将产生这个时刻对应移动装置的地面位置信息与空间角度信息,并能包括实景的影像信息,这些空间信息上传服务器时,经比对数据库可以得到对应此实景的空间物件,并可经特定搜寻条件过滤,之后将搜寻结果传送到移动装置70上,显示如图所示的空间物件705。
当搜寻产生多种结果,可以如此图例显示的方式,在图形使用者接口701一侧显示一个搜寻结果选单707,此搜寻结果选单707所列出的结果是经云端系统根据以上各种排序实施例产生的结果,当中包括经过排序的空间物件1、空间物件2、空间物件3、空间物件4与空间物件5,供使用者选择观看。其中排序的依据可以根据使用者的朋友圈、喜好、关联性、等方式排列搜寻结果。
而显示以上多个空间物件的搜寻结果的方式并不限于示意图所示的方式,另可包括左右滑动切换空间物件(1,2,3,4,5,705),还不排除可以叠加方式显示多个空间物件,提供使用者通过触控显示器选择与切换。还者,每个空间物件都可以为一个链接的按钮,让使用者点入后获取更多信息,或是通过其他图案提供使用者链接到其他信息页面上,以提供后续互动的内容。
图7B显示左右滑动切换空间物件的实施例示意图。
图中显示移动装置70的图形使用者接口701’仍显示上述的实景影像703与对应的空间物件705,然后可以在图形使用者接口701’形成引导使用者以手势左右(滑动)切换的控制标示711,712,然而在特定实施例可以不用使用控制标示711,712,此例下方显示预览图示709提示使用者在目前看到的影像(实景影像703、空间物件705)之前或之后的搜寻结果,提供滑动切换的影像提示。
图8接着显示运行于云端系统的物件搜寻排序方法的实施例流程,相对于图6所示运行在移动装置上的流程,此流程描述云端系统的主要步骤。
开始如步骤S801,云端系统中的特定服务器接收终端移动装置上传的空间信息,包括移动装置内定位电路产生的地面位置信息与空间角度信息,并可加上从实景影像获取的色块信息与线条信息,之后,如步骤S803,由系统端比对数据库中所记载的空间信息。值得一提的是,当地面位置信息与空间角度信息并未明确定位而准确得到某个空间物件时,移动装置将拍摄的实景影像运算得到的色块信息上传应用系统的服务器,成为比对的另一参数,或可继续上传实景形成的线条信息,也为比对的参数的一个。
比对后,如步骤S805,系统产生初步搜寻结果,初步搜寻结果主要是根据移动装置上传的空间信息比对得出,其中符合地面位置信息与空间角度信息的空间物件应是落于一可搜寻范围(可视范围)内的空间物件,再如步骤S807,对此初步搜寻结果套入搜寻条件,初步可以根据各空间物件的时间范围与使用者范围进行过滤。
当系统取得使用者识别数据,可以据此执行过滤,得出与使用者关联的空间物件,包括给使用者或某个使用者范围内的个人空间物件、个人过去的历史数据或喜好等,当接着如步骤S809排序时,这类有关个人的搜寻结果通常可赋予较高的排序优先级。其他排序条件如参考初步搜寻结果中的空间物件的时间特性、客观数据,以及系统针对各空间物件所设定的权重。
最后,如步骤S811,系统将输出经排序的搜寻结果。
图9显示为本发明空间物件搜寻排序方法的再一实施例流程。
继续前述实施例流程,如步骤S901,当系统中根据接收的空间信息(定位信息、影像信息)比对数据库而得出初步搜寻结果时,其中所采用的定位信息涵盖某个空间范围,包括水平与垂直角度的范围,系统即根据这个空间范围比对数据库,取得符合在此空间范围内的空间物件。选择性地,可看搜寻的范围准确度,搜寻排序方法可再辅以拍摄到实景的影像信息,同样比对各笔空间物件对应的影像信息,可以取得更符合搜寻条件的空间物件,过滤掉不符合定位信息与影像信息的空间物件。
在步骤S903中,可以系统时间过滤搜寻结果,排除当下不会显示的空间物件,亦须排除已经超过有效期限的空间物件(如果设有信息有效时间)。时间也为一过滤条件,搜寻结果中的空间物件可能已经设定允许显示的时间,如早餐店的广告信息就仅有早上时段显示;商店的优惠信息仅在下午的某个时段显示;提供给个人的信息仅在设定时间内才会显示等。
接着如步骤S905,系统以使用者识别数据过滤搜寻结果,排除不提供该使用者观看的空间物件,包括如步骤S907所述,当系统比对使用者关联信息后取得使用者个人信息,此类空间物件可设为最高的排序优先级。
其他使用者关联信息的排序如步骤S909所述,系统依据使用者关联信息计算与各空间物件的关联度,例如将个人设定的喜好设较高权重,具有较高关联度、系统根据历史数据判断的喜好设较低权重,具有较低关联度。更者,从使用者识别数据可以得出与使用者关联的搜寻条件,除了直接对应使用者识别数据的搜寻结果外(如他人留下针对该使用者的个人信息),还可从使用者管理单元取得对应使用者识别数据的使用者喜好设定与从历史数据判断的喜好,如对各空间物件对应的内容的停留时间、访问次数等。
排序的条件还可如步骤S911所述,系统可依据客观数据排序,包括与时间相关的内容,如空间物件建立的时间、更新时间与有效时间(过期的空间物件可能被搜寻到,可以列为优先级最低的结果),成为形成搜寻结果的排序依据的一个。其他客观数据亦可成为搜寻结果排序的依据,例如,空间物件的更新率、点阅率、其他使用者对空间物件的评价,评价愈高、更新率愈高、点阅率愈高,排序的优先级愈高。
在步骤S913中,排序时可以依据系统设定的空间物件权重排序,权重愈高者可以拥有较高的排序优先级,此类空间物件可能非使用者有兴趣的内容,例如广告(包含价格因素)、政府政令倡导、快信等。若以广告而言,系统可以根据空间物件的提供者的要求(提出广告费用)施以不同的权重,成为排序的依据的一个。
最后,如步骤S915,将上述各种排序的参数(使用者关联信息、时间、客观数据、系统权重)作出权重管理,依据实际需求调整权重,可以据此决定优先级。由云端系统对所接收的多个空间物件个别所接收的权重运算该系统权重,系统权重愈大者,具有较高优先级。
根据一实施例,经过上述流程排序后的搜寻结果,显示得出的顺序可以将个人信息列为最高优先级(权重最高);其次是与使用者关联度最高的空间物件;再其次是客观数据排序较高的空间物件。
显示时,因为每次(每页)显示的数量有限,因此会将排序较高者的选项列为第一页,预设将排序最高的空间物件显示在显示屏幕上,再提供使用者选择其他内容。同页可以将系统设定权重较高者加入,当数量超过一次(或一页)可以显示的数量时,可以提供使用者操作查阅下一页内容,此时可以将排序较低者列入选项。
发明还涉及一种计算机可读取存储装置,用以记载运行于移动装置的程序集,程序集经移动装置的一个处理器执行后,执行的空间物件搜寻与排序的方法步骤如上述各实施例所述,程序集主要是包括启动移动装置的一个摄影单元的指令、取得实景的影像以产生影像信息的指令、取得移动装置产生的定位信息的指令,以及上传定位信息与影像信息至云端系统的指令,之后经服务器比对定位信息,以及/或比对影像信息所产生的一个初步搜寻结果,程序集再包括自服务器接收对初步搜寻结果执行一排序后输出的一或多个空间物件的指令。
是以,根据公开书所载实施例,本发明提出一种空间物件搜寻排序方法与系统,在系统所运行的搜寻与排序的步骤中,除了可以根据多个使用者上传定位信息与实景的影像信息搜寻数据库中符合条件的空间物件外,还以使用者关联信息、时间、客观数据与系统设定权重等参数过滤搜寻结果,并进行排序,有效提供使用者有兴趣或是相关的空间物件。
而以上所述仅为本发明的优选可行实施例,非因此即局限本发明的权利要求,故举凡运用本发明说明书及图示内容所为的等效结构变化,均同理包含于本发明的范围内,合予陈明。
Claims (25)
1.一种运行于一移动装置的空间物件搜寻排序方法,其特征在于所述的方法包括:
以该移动装置的一摄影单元取得一实景的影像,产生影像信息;
取得该移动装置内定位电路产生的定位信息,包括一地面位置信息与一空间角度信息;
上传定位信息与影像信息至一云端系统提出的一服务器,经该服务器比对该定位信息,以及/或比对该影像信息所产生的一初步搜寻结果,该初步搜寻结果包括多个对应该定位信息与/或该影像信息的空间物件;以及
自该服务器接收对该初步搜寻结果执行一排序后输出的一或多个空间物件;
其中,该排序依据一使用者关联信息,将关联性较高的空间物件设较高优先级,将关联性较低的空间物件设较低优先级。
2.如权利要求1所述的空间物件搜寻排序方法,其特征在于所述的空间物件具有一时间特性,该排序包括以该服务器的一系统时间过滤该初步搜寻结果,排除时间参数不符合的空间物件。
3.如权利要求2所述的空间物件搜寻排序方法,其特征在于所述的空间物件设有一有效显示时间,排序时还排除该有效显示期限超出该系统时间的空间物件。
4.如权利要求1所述的空间物件搜寻排序方法,其特征在于所述的使用者关联信息为该服务器取得一伴随该定位信息与该影像信息的一使用者的使用者识别数据,以此取得存储于该数据库中的使用者关联信息。
5.如权利要求4所述的空间物件搜寻排序方法,其特征在于,依据该使用者识别数据排除不提供该使用者观看的空间物件。
6.如权利要求4所述的空间物件搜寻排序方法,其特征在于,依据该使用者识别数据比对该数据库后,得出提供对应该使用者识别数据的一个人空间物件,该个人空间物件设为最高的排序优先级。
7.如权利要求4所述的空间物件搜寻排序方法,其特征在于所述的使用者关联信息为该使用者设定的一喜好设定与一历史数据。
8.如权利要求7所述的空间物件搜寻排序方法,其特征在于所述的历史信息包括对各空间物件所关联的内容的停留时间与访问次数。
9.如权利要求7所述的空间物件搜寻排序方法,其特征在于所述的数据库中各空间物件关联一或多个内容分类,该喜好设定为该使用者主动设定一或多个有兴趣的内容分类,以及/或由该云端系统根据该历史数据判断得出关于该使用者的一或多个有兴趣的内容分类。
10.如权利要求1所述的空间物件搜寻排序方法,其特征在于所述的一或多个空间物件的排序依据一客观数据,根据各空间物件建立的时间、更新时间、有效时间、点阅率与/或评价决定该排序时的优先级。
11.如权利要求1所述的空间物件搜寻排序方法,其特征在于所述的一或多个空间物件的排序依据一系统权重,由一空间物件提供者于该云端系统对所提供的个别空间物件设定一权重,由该云端系统对所接收的多个空间物件个别所接收的权重运算该系统权重,该系统权重愈大者,具有较高优先级。
12.如权利要求1至11中任一权利要求所述的空间物件搜寻排序方法,其特征在于所述的移动装置接收自该服务器传送经该排序后输出的该一或多个空间物件时,以一显示屏幕显示具有最高优先级的空间物件,或根据一选择指令显示经选择的空间物件,显示各空间物件时,与该实景的影像结合。
13.如权利要求12所述的空间物件搜寻排序方法,其特征在于,经该移动装置的该显示屏幕显示该空间物件时,并列出其他经该排序的空间物件的选择。
14.如权利要求12所述的空间物件搜寻排序方法,其特征在于所述的实景的影像信息为经图像处理后产生对应该空间物件的一色块信息与一线条信息。
15.如权利要求12所述的空间物件搜寻排序方法,其特征在于,于该服务器中比对该定位信息以及/或比对该影像信息所产生该初步搜寻结果时,还比对该数据库中各空间物件的一时间范围、一可视范围与一使用者范围其中的一个,或其组合。
16.如权利要求12所述的空间物件搜寻排序方法,其特征在于所述的空间物件为一文字、一图片、一影片与一声音其中的一个,或其组合。
17.一种运行于一云端系统的空间物件搜寻排序方法,其特征在于所述的方法包括:
以一服务器接收一移动装置内定位电路产生的地面位置信息与空间角度信息;
该服务器接收该移动装置启动一摄影单元取得一实景影像所产生的影像信息;
于该服务器中,以所接收的定位信息比对一数据库中的定位信息,以及/或以所接收的影像信息比对该数据库中的影像信息,以产生一初步搜寻结果,该初步搜寻结果包括多个对应该定位信息与/或该影像信息的空间物件;
对该初步搜寻结果执行排序,输出一或多个空间物件;其中,该排序依据一使用者关联信息,将关联性较高的空间物件设较高优先级,将关联性较低的空间物件设较低优先级;以及
传送经排序的该一或多个空间物件至该移动装置。
18.如权利要求17所述的空间物件搜寻排序方法,其特征在于所述的空间物件具有一时间特性,该排序包括以该服务器的一系统时间过滤该初步搜寻结果,排除时间参数不符合的空间物件。
19.如权利要求17所述的空间物件搜寻排序方法,其特征在于所述的使用者关联信息为该服务器取得一伴随该定位信息与该影像信息的一使用者的使用者识别数据,以此取得存储于该数据库中的使用者关联信息。
20.如权利要求17所述的空间物件搜寻排序方法,其特征在于所述的一或多个空间物件的排序依据一客观数据,根据各空间物件建立的时间、更新时间、有效时间、点阅率与/或评价决定该排序时的优先级。
21.如权利要求17所述的空间物件搜寻排序方法,其特征在于所述的一或多个空间物件的排序依据一系统权重,由一空间物件提供者于该云端系统对所提供的个别空间物件设定一权重,由该云端系统对所接收的多个空间物件个别所接收的权重运算该系统权重,该系统权重愈大者,具有较高优先级。
22.如权利要求17所述的空间物件搜寻排序方法,其特征在于所述的实景的影像信息为经图像处理后产生对应该空间物件的一色块信息与一线条信息。
23.如权利要求17至22中任一权利要求所述的空间物件搜寻排序方法,其特征在于,于该服务器中比对该定位信息以及/或比对该影像信息所产生该初步搜寻结果时,还比对该数据库中各空间物件的一时间范围、一可视范围与一使用者范围其中的一个,或其组合。
24.一种云端系统,其特征在于所述的系统包括:
一搜寻数据库,记载多个空间物件中个别空间物件对应的一定位信息与/或一影像信息,以及对应各空间物件的搜寻条件;
一空间物件数据库,用以存储多个空间物件,各空间物件设有一识别数据,以链接该搜寻数据库中对应各空间物件的该定位信息与/或影像信息,以及搜寻条件;
一服务器,具有一或多个处理器,用以执行一空间物件搜寻排序方法,包括以下步骤:
接收一移动装置产生的定位信息;
接收该移动装置启动一摄影单元取得一实景影像所产生的影像信息;
以所接收的定位信息比对一数据库中的定位信息,以及/或以所接收的影像信息比对该数据库中的影像信息,以产生一初步搜寻结果,该初步搜寻结果包括多个对应所接收的该定位信息与/或该影像信息的空间物件;
对该初步搜寻结果执行排序,输出一或多个空间物件;其中,该排序依据一使用者关联信息,将关联性较高的空间物件设较高优先级,将关联性较低的空间物件设较低优先级;以及
传送经排序的该一或多个空间物件至该移动装置。
25.一种计算机可读取存储装置,用以记载运行于一移动装置的程序集,其特征在于所述的程序集经该移动装置的一处理器执行后,执行以下步骤:
启动该移动装置的一摄影单元;
取得一实景的影像,产生影像信息;
取得该移动装置产生的定位信息;
上传定位信息与影像信息至一云端系统提出的一服务器,经该服务器比对该定位信息,以及/或比对该影像信息所产生的一初步搜寻结果,该初步搜寻结果包括多个对应该定位信息与/或该影像信息的空间物件;以及
自该服务器接收对该初步搜寻结果执行一排序后输出的一或多个空间物件;
其中,该排序依据一使用者关联信息,将关联性较高的空间物件设较高优先级,将关联性较低的空间物件设较低优先级。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW105130821 | 2016-09-23 | ||
TW105130821A TWI617930B (zh) | 2016-09-23 | 2016-09-23 | 空間物件搜尋排序方法、系統與電腦可讀取儲存裝置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107870961A true CN107870961A (zh) | 2018-04-03 |
CN107870961B CN107870961B (zh) | 2020-09-18 |
Family
ID=59713812
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710562031.XA Active CN107870961B (zh) | 2016-09-23 | 2017-07-11 | 空间物件搜寻排序方法、系统与计算机可读取存储装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US10528621B2 (zh) |
EP (1) | EP3299970A1 (zh) |
JP (1) | JP6530794B2 (zh) |
KR (1) | KR102014761B1 (zh) |
CN (1) | CN107870961B (zh) |
TW (1) | TWI617930B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110874703A (zh) * | 2018-08-31 | 2020-03-10 | 财团法人工业技术研究院 | 储物装置及储物方法 |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6548241B1 (ja) * | 2018-07-14 | 2019-07-24 | 株式会社アンジー | 拡張現実プログラム及び情報処理装置 |
US10956487B2 (en) | 2018-12-26 | 2021-03-23 | Industrial Technology Research Institute | Method for establishing and processing cross-language information and cross-language information system |
US20220092105A1 (en) * | 2020-09-18 | 2022-03-24 | Google Llc | Intelligent Systems and Methods for Visual Search Queries |
TWI779375B (zh) * | 2020-10-28 | 2022-10-01 | 開曼群島商粉迷科技股份有限公司 | 條件式數位內容顯示方法、系統與電腦可讀取媒體 |
CN112597361B (zh) * | 2020-12-16 | 2023-12-12 | 北京五八信息技术有限公司 | 一种排序处理方法、装置、电子设备及存储介质 |
JP7133005B2 (ja) * | 2020-12-25 | 2022-09-07 | ソフトバンク株式会社 | 眼鏡型デバイス、プログラム、及び制御方法 |
JP7116200B2 (ja) * | 2021-01-06 | 2022-08-09 | 株式会社三井住友銀行 | Arプラットフォームシステム、方法およびプログラム |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101965576A (zh) * | 2008-03-03 | 2011-02-02 | 视频监控公司 | 用于追踪、索引及搜寻的物件匹配 |
US20110199479A1 (en) * | 2010-02-12 | 2011-08-18 | Apple Inc. | Augmented reality maps |
US20130073988A1 (en) * | 2010-06-02 | 2013-03-21 | Layar B.V. | Acquiring, ranking and displaying points of interest for use in an augmented reality service provisioning system and graphical user interface for displaying such ranked points of interest |
CN103678610A (zh) * | 2013-12-16 | 2014-03-26 | 浙江大学 | 一种基于智能手机传感器的物体识别方法 |
US20160071319A1 (en) * | 2014-09-09 | 2016-03-10 | Schneider Electric It Corporation | Method to use augumented reality to function as hmi display |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9626824B2 (en) * | 2000-10-11 | 2017-04-18 | Igt | Game result graphical verification on remote clients |
US20150154799A1 (en) * | 2013-11-29 | 2015-06-04 | At&T Intellectual Property I, L.P. | Replacing A Physical Object Perception With A Modified Perception |
CN101266696B (zh) * | 2008-04-07 | 2011-07-13 | 中兴通讯股份有限公司 | 一种监控系统和门禁控制系统的集成控制方法及其系统 |
US8388233B2 (en) * | 2009-07-22 | 2013-03-05 | Schaeffler Technologies AG & Co. KG | Axial bearing arrangement and method for manufacturing same |
JP4560128B1 (ja) * | 2009-08-13 | 2010-10-13 | 株式会社パスコ | 地図画像統合データベース生成システム及び地図画像統合データベース生成プログラム |
US8400548B2 (en) * | 2010-01-05 | 2013-03-19 | Apple Inc. | Synchronized, interactive augmented reality displays for multifunction devices |
US8392450B2 (en) | 2011-02-08 | 2013-03-05 | Autonomy Corporation Ltd. | System to augment a visual data stream with user-specific content |
JP2012209833A (ja) | 2011-03-30 | 2012-10-25 | Panasonic Corp | 施設情報表示装置及び施設情報表示システム |
JP5738657B2 (ja) * | 2011-04-08 | 2015-06-24 | オリンパス株式会社 | 撮像装置 |
TW201324389A (zh) * | 2011-12-05 | 2013-06-16 | Smart Personalized Service Technology Inc | 多功能雲端服務系統、方法與一記憶媒體 |
JP2013149073A (ja) | 2012-01-19 | 2013-08-01 | Toshiba Corp | 拡張現実装置、方法、及びプログラム |
TWI475474B (zh) | 2012-07-30 | 2015-03-01 | Mitac Int Corp | Gesture combined with the implementation of the icon control method |
US20140188648A1 (en) * | 2012-12-28 | 2014-07-03 | Wal-Mart Stores, Inc. | Searching Digital Receipts At A Mobile Device |
JP6210807B2 (ja) | 2013-09-13 | 2017-10-11 | キヤノン株式会社 | 表示制御装置及び表示制御装置の制御方法 |
US10134296B2 (en) * | 2013-10-03 | 2018-11-20 | Autodesk, Inc. | Enhancing movement training with an augmented reality mirror |
-
2016
- 2016-09-23 TW TW105130821A patent/TWI617930B/zh active
- 2016-12-12 US US15/375,883 patent/US10528621B2/en active Active
-
2017
- 2017-07-11 CN CN201710562031.XA patent/CN107870961B/zh active Active
- 2017-08-10 KR KR1020170101599A patent/KR102014761B1/ko active IP Right Grant
- 2017-08-21 EP EP17187055.3A patent/EP3299970A1/en not_active Ceased
- 2017-09-22 JP JP2017182943A patent/JP6530794B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101965576A (zh) * | 2008-03-03 | 2011-02-02 | 视频监控公司 | 用于追踪、索引及搜寻的物件匹配 |
US20110199479A1 (en) * | 2010-02-12 | 2011-08-18 | Apple Inc. | Augmented reality maps |
US20130073988A1 (en) * | 2010-06-02 | 2013-03-21 | Layar B.V. | Acquiring, ranking and displaying points of interest for use in an augmented reality service provisioning system and graphical user interface for displaying such ranked points of interest |
CN103678610A (zh) * | 2013-12-16 | 2014-03-26 | 浙江大学 | 一种基于智能手机传感器的物体识别方法 |
US20160071319A1 (en) * | 2014-09-09 | 2016-03-10 | Schneider Electric It Corporation | Method to use augumented reality to function as hmi display |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110874703A (zh) * | 2018-08-31 | 2020-03-10 | 财团法人工业技术研究院 | 储物装置及储物方法 |
CN110874703B (zh) * | 2018-08-31 | 2023-07-14 | 财团法人工业技术研究院 | 储物装置及储物方法 |
Also Published As
Publication number | Publication date |
---|---|
KR102014761B1 (ko) | 2019-10-21 |
JP6530794B2 (ja) | 2019-06-12 |
US20180089229A1 (en) | 2018-03-29 |
US10528621B2 (en) | 2020-01-07 |
JP2018049623A (ja) | 2018-03-29 |
CN107870961B (zh) | 2020-09-18 |
EP3299970A1 (en) | 2018-03-28 |
TW201814552A (zh) | 2018-04-16 |
KR20180100074A (ko) | 2018-09-07 |
TWI617930B (zh) | 2018-03-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107870961A (zh) | 空间物件搜寻排序方法、系统与计算机可读取存储装置 | |
US9542778B1 (en) | Systems and methods related to an interactive representative reality | |
US8954853B2 (en) | Method and system for visualization enhancement for situational awareness | |
CN107957775B (zh) | 虚拟现实空间环境中的数据对象交互方法及装置 | |
CN107870962A (zh) | 适地性空间物件远距管理方法与系统 | |
CN101142595B (zh) | 影集产生设备、影集产生方法及程序 | |
US9841877B2 (en) | Utilizing color descriptors to determine color content of images | |
US20130257858A1 (en) | Remote control apparatus and method using virtual reality and augmented reality | |
CN108733272A (zh) | 适地性空间物件可视范围管理方法与系统 | |
CN101164083A (zh) | 影集产生设备、影集产生方法及程序 | |
CN107111740A (zh) | 用于使用增强现实和对象辨别来检索内容项并使之与真实世界对象相关联的方案 | |
JP2018106696A (ja) | 移動オブジェクトの仮想情報構築方法、移動オブジェクトの仮想情報検索方法及びアプリケーションシステム | |
CN101256679A (zh) | 信息处理装置,信息显示装置,及其控制方法 | |
CN102496131A (zh) | 酒店客房室外景观展示系统及方法、数据生成系统及方法 | |
JP5987357B2 (ja) | サーバ、電子機器システムおよびプログラム | |
CN112989214A (zh) | 一种旅游信息展示方法及相关设备 | |
CN109416693A (zh) | 服务器装置、终端装置以及信息处理方法 | |
CN108241726B (zh) | 移动物件的虚拟信息远距管理方法与应用系统 | |
US11847180B2 (en) | Method and system for recommending location-based digital content | |
CN113298867A (zh) | 基于线匹配的地物目标位置精准定位方法、装置及存储介质 | |
CN107784060A (zh) | 适地性空间对象数据建立方法、显示方法与应用系统 | |
CN114153214B (zh) | 一种mr/ar/vr留言和创作场景控制方法、移动终端与可读存储介质 | |
WO2021090714A1 (ja) | 情報提供サービスプログラム及び情報提供サービス用情報端末装置 | |
CN113916236B (zh) | 一种基于三维实物模型的航天器全景视图导航方法 | |
US20240232277A9 (en) | A system for accessing a web page |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |