CN108616563B - 移动物件的虚拟信息建立方法、搜寻方法与应用系统 - Google Patents

移动物件的虚拟信息建立方法、搜寻方法与应用系统 Download PDF

Info

Publication number
CN108616563B
CN108616563B CN201710590365.8A CN201710590365A CN108616563B CN 108616563 B CN108616563 B CN 108616563B CN 201710590365 A CN201710590365 A CN 201710590365A CN 108616563 B CN108616563 B CN 108616563B
Authority
CN
China
Prior art keywords
information
virtual information
virtual
mobile device
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710590365.8A
Other languages
English (en)
Other versions
CN108616563A (zh
Inventor
李雨暹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fanfan Technology Co ltd
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Publication of CN108616563A publication Critical patent/CN108616563A/zh
Application granted granted Critical
Publication of CN108616563B publication Critical patent/CN108616563B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/52—Network services specially adapted for the location of the user terminal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53—Querying
    • G06F16/532—Query formulation, e.g. graphical querying
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/50—Extraction of image or video features by performing operations within image blocks; by using histograms, e.g. histogram of oriented gradients [HoG]; by summing image-intensity values; Projection analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/758—Involving statistics of pixels or of feature values, e.g. histogram matching
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/44504—Circuit details of the additional information generator, e.g. details of the character or graphics signal generator, overlay mixing circuits
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20084—Artificial neural networks [ANN]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02—Terminal devices

Abstract

本发明关于一种移动物件的虚拟信息建立方法、搜寻方法与应用系统，于数据建立模式下，使用者操作移动装置选定虚拟信息，接着使用移动装置拍摄一移动物件，以取得此移动物件的影像信号，于是可以设定虚拟信息在移动物件的位置，此时，系统将可取得虚拟信息，以及解析移动物件产生的影像信息，并取得设定显示此虚拟信息的可视范围。在此方法中，即以移动物件的影像信息作为定位虚拟信息的定位信息，当于搜寻模式下，系统将可根据移动物件的影像信息，再比对移动装置的位置是否落于可视范围内，以此搜寻移动物件上的虚拟信息。

Description

移动物件的虚拟信息建立方法、搜寻方法与应用系统
技术领域
本发明公开一种有关空间中虚拟信息建立与搜寻方法与系统，特别涉及在一移动物件上建立让使用者通过移动装置可以搜寻而显示的虚拟信息的方法，以及实现这个方法的应用系统。
背景技术
在现有应用中，使用者可以操作移动装置，执行一特定软件程序，开启其中照相模块，在移动装置上显示实景的情况下，可以搭配使用扩增实境(augmented reality)技术，呈现出在此实景前的特定影像物件。
根据现有技术，利用移动装置显示扩增实境影像的技术常是设定软件程序可以辨识出某个场景内的标记(marker)，因而触发某个影像物件，其中标记与此影像物件的关联已经默认在软件程序中。
另有方式是根据移动装置的位置，触发其中软件程序产生对应某个位置的影像物件，让移动装置显示出对应某个位置范围的影像。其中全球定位系统产生的全球定位信号，或可搭配方位角(azimuth angle)的信号，即为触发软件程序经联系某个服务器产生特定影像物件的依据。
常见现有使用扩增实境或是依照地点显示影像的技术多用于体验或娱乐的用途。
发明内容
本发明说明书提出一种移动物件的虚拟信息建立方法、搜寻方法与应用系统，应用系统提供使用者操作移动装置下载一软件程序，经执行此软件程序后，可选择进入一数据建立模式或是一搜寻模式。在数据建立模式下，系统提供使用者可以通过每个执行此软件程序的移动装置在特定移动物件上建立虚拟信息，因此在系统端可以建立一个移动物件、可视范围与虚拟信息对应的搜索引擎。于是，在搜寻模式下，使用者仍然操作着移动装置，系统端服务器取得移动装置的位置信息后，可配合移动物件的影像信息，进而能搜寻对应的虚拟信息，达到搜寻与显示虚拟信息的目的。
优选地，根据实施例，在发明所提出的移动物件的虚拟信息建立方法中，于数据建立模式下，运作于移动装置内的软件程序取得移动装置选定的虚拟信息，并接收移动装置所选定的移动物件的影像信号，产生对应虚拟信息的定位信息，定位信息即为移动物件的影像信号。接着，上传此虚拟信息的数据以及对应虚拟信息的定位信息至一服务器，同时设定一可视范围，建立提供搜寻虚拟信息的数据库。虚拟信息为一文字、一图片、一影片与一声音其中的一个，或其组合。
进一步地，在一实施例中，其中对应虚拟信息的定位信息主要为置放虚拟信息的移动物件的影像信息。而移动物件的影像信息则可为经图像处理后产生的色块信息与线条信息。之后与设定虚拟信息的可视范围检视移动装置的位置信息，与影像信息形成定位虚拟信息的依据。
优选地，根据发明的再一实施方案，移动物件的虚拟信息搜寻方法包括于搜寻模式下，运作于移动装置内的软件程序接收移动装置取得一移动物件的影像信号，并运算取得影像信息，同时移动装置产生与此移动物件相关的位置信息，主要为地面位置信息。有关虚拟信息的定位信息包括位置信息与影像信息，接着上传至一系统提供的服务器，经服务器中运算程序比对当中数据库后，可以接收符合搜寻条件，且对应此定位信息的搜寻结果，并显示搜寻结果表示的虚拟信息。
进一步地，若经比对产生对应这个定位信息的虚拟信息，将可直接于移动装置显示上述移动物件时，同时显示迭加与移动物件有关连的位置的虚拟信息，完成搜寻有关此移动物件上虚拟信息的目的。
进一步地，根据发明提出的应用系统实施例，应用系统包括设于云端的服务器与数据库，并包括载于移动装置的计算机可读取媒体的程序集，经处理器执行后可以执行以上移动物件的虚拟信息建立与搜寻的程序，程序集包括：
一影像撷取指令，用以取得移动物件的影像，并显示于移动装置上；一虚拟信息处理指令，用以处理建立于移动装置上与移动物件有关连的位置的一虚拟信息，以及形成传送到服务器的虚拟信息的数据；一位置信息产生指令，用以取得移动装置的一个地面定位单元产生的位置信息；一影像信息产生指令，用以处理移动物件的影像，产生对应虚拟信息置放位置的影像信息；一搜寻处理指令，用以取得移动装置于一搜寻模式下产生的位置信息与影像信息，将位置信息与影像信息传送到服务器，接收服务器产生符合一搜寻条件的搜寻结果；一数据传送与接收指令，建立移动装置与服务器之间的联机，用以传送与接收信号；以及一虚拟信息显示指令，用以根据搜寻结果显示虚拟信息。
附图说明
图1A至图1B显示使用者操作移动装置在移动物件上建立虚拟信息的情境示意图；
图2A显示取得位置信息的示意图；
图2B显示取得虚拟信息的背景影像信息的示意图；
图3显示实现本发明移动物件的虚拟信息建立与搜寻系统的网络架构实施例图；
图4A显示本发明应用系统中终端移动装置中软件模块的实施例图；
图4B显示本发明系统中服务器中功能模块的实施例图；
图5显示为描述本发明移动物件的虚拟信息建立方法的实施例流程之一；
图6显示为描述本发明移动物件的虚拟信息建立方法的实施例流程之二；
图7显示为描述本发明移动物件的虚拟信息搜寻方法的实施例流程；
图8显示本发明移动物件的虚拟信息显示时的情境示意图；
图9显示本发明移动物件的虚拟信息显示时的情境示意图；
图10显示应用系统提供终端移动装置显示搜寻结果的实施例示意图之一；
图11显示应用系统提供终端移动装置显示搜寻结果的实施例示意图之二。
具体实施方式
本发明说明书公开一种移动物件的虚拟信息建立方法、搜寻方法与应用系统，所提出的应用系统包括一云端系统，以及载于移动装置的计算机可读取媒体中的软件程序，云端系统设有服务器以及数据库，提供使用者管理接口，让使用者使用移动装置上传位置信息，以及拍摄到的移动物件有关的影像信息，使得应用系统记载了各端使用者上传的与移动物件关联的虚拟信息的数据，形成一提供搜寻服务的数据库，进而建立搜索引擎，能提供使用者依照拍摄到的移动物件有关虚拟信息。
通过以下情境示意图描述使用者操作移动装置在移动物件上建立虚拟信息的方法。
如图1A所示，示意显示使用者操作一移动装置10，移动装置10可涵盖任何可以取得实景影像、产生位置信息与具有运算能力的便携设备，例如智能型手机、平板计算机与智能眼镜等。
开始时，使用者操作移动装置10下载并安装应用系统提供的软件程序，如智能型装置内的APP，经执行此软件程序后，可进入一数据建立模式，开启移动装置10的照相模块，操作移动装置10朝向欲加注虚拟信息103的移动物件101进行拍摄，如此例的人，移动物件还可为车辆或航空器等。在移动物件101上加注虚拟信息103时，先通过移动装置10的显示屏幕看到这些移动物件101，之后，通过如扩增实境(Augmented Reality,AR)的技术，提供使用者利用移动装置10的触控显示器，或是智慧眼镜的浮空手势(air gesture)等其他输入方式，在移动物件101的某个部位上新增一个信息，不排除可为文字、图片、影片、声音等信息。
此例显示移动物件101为一人，当一个人的装扮成为一种识别标记时，将可能吸引使用者将虚拟信息103安置在此人的身上或是附近，比如成为摆设广告的位置，此历险式使用者操作移动装置10朝向此移动物件101，在显示的移动物件101上加注虚拟信息103，可能是一个广告内容、优惠方案，或是针对个人或特定群组的信息。
之后，当使用者确认在移动物件101某个位置上加注的虚拟信息103后，移动装置10内的软件程序可以通过程序将产生此虚拟信息103对应在背景的移动物件101的影像信息传送到应用系统的服务器，例如传送到应用系统的某个伺服主机上。上述移动物件101的影像信息包括色块与线条，成为定位虚拟信息103的依据，而虚拟信息103的内容可为文字、图片、影片或声音，或其组合，上传到服务器的信息还可包括建立此虚拟信息103当下的移动装置10的地面位置信息，或可加上空间角度信息。其中地面位置信息如移动装置10内全球定位系统感测到的位置，而空间角度信息则陀螺仪所感测到移动装置10的方位角(azimuth angle)与仰角(elevation angle)的组合。值得一提的是，移动装置10当下的位置信息则可以衍生成为可以看到虚拟信息103的一个可视范围。
在搜寻模式下，此例中移动物件101的影像信息如虚拟信息103所安置的人身上的衣饰花纹的组成色块，以及色块之间的线条。因此，移动装置10的位置信息与移动物件101的色块信息与线条信息即为呈现虚拟信息103的参数，一并存储在应用系统中的云端服务器上。当有使用者操作移动装置10产生以上参数，云端服务器即可比对而取得并呈现出虚拟信息103，虚拟信息103坐落的位置将由移动物件101的影像信息所决定。在一般运作下，云端服务器至少需要地面位置信息与影像信息(色块、线条)来比对得出虚拟信息103。最后产生传送到移动装置10的搜寻结果。
以上设定虚拟信息103的可视范围的参数的一个为操作移动装置10的使用者与移动物件101之间的距离，如何取得移动装置10与移动物件101的距离，其一方式可以由移动装置10上的接近传感器，或通过影像信息判断距离，另一方式则是根据移动物件101的定位信息与使用者的位置信息运算得到两者之间的距离。举例来说，当移动物件101为在应用系统注册表有账号的另一人，持有移动装置，使用者在移动物件101上建立虚拟信息时，应用系统可以同时取得上传虚拟信息的使用者的帐户信息，以及移动物件101的帐户信息，因此，系统可以根据移动物件101的位置判断是否使用者落于可视范围内，也就是移动物件101与使用者之间的距离为可运算得到的参数，成为系统判断是否可以看到虚拟信息103的依据。
在一实施例中，如果移动物件101如图中所示为一个人，除了上述由移动物件101的色块信息与线条信息定位的方式外，人脸亦可成为辨识此人的重要信息的一个，为登录于系统的人脸辨识信息。在数据建立模式下，当使用者设定某个信息(如虚拟信息103)在某个人(如移动物件101)身上的某个位置时，此时，使用移动装置10拍摄人脸，人脸在软件程序中运算解析产生影像信息，并同样传送到应用系统的服务器登录信息，人脸识别信息成为其他使用者在搜寻模式下取得虚拟信息103的参考的一个。
前述移动物件的色块信息、线条信息，或是直接用来识别人脸的影像信息等，提供服务器执行颖辨识而得到对应特定虚拟信息的移动物件。根据一实施例，于服务器中，可以一人工智能(Artificial Intelligence)深度学习(Deep Learning)的影像辨识程序处理自移动装置10传送的移动物件的影像信息，在服务器中的运算程序识别出移动物件。
更进一步地，当使用者通过移动装置10显示虚拟信息103时，可以通过软件程序提供的接口，如一个链接图案，或是虚拟信息103显示时也成为一个链接按钮，让使用者点入后继续得到有关此虚拟信息103的更多信息，这些信息为系统提供，或是在建立此虚拟信息已经加入的信息。举例来说，当虚拟信息表示一个广告内容，点入后可以得到某个产品的介绍、店面交通信息，或有促销与优惠活动等；当虚拟信息为一个私人信息，将有特定使用者或是某群组内的使用者才能搜寻得到。
图1B显示另一建立移动物件的虚拟信息的情境示意图。此例显示使用者操作移动装置10启动软件程序，在数据建立模式下，开启照相模块，朝向一个移动物件102(此例为车)，可以准确地对着移动物件102的某个位置以扩增实境的技术迭加虚拟信息105，此例为图片信息，此图片信息可以传达某个广告营销的内容，虚拟信息105可以为介绍某产品的文字、影音内容、图片等。之后，除了上传虚拟信息105的数据外，还将此加注的虚拟信息105相关位置的影像信息传送到系统的服务器。此例中的移动物件102的影像信息如作为虚拟信息105背景的车辆涂装组成的色块信息以及色块之间形成的线条信息。当完成建立此虚拟信息105后，移动装置10的位置信息也可形成可以搜寻到此虚拟信息105的依据，不过这是辅助性的信息，实际实施时可以忽略。
举例来说，当移动物件102位于室内而无法取得卫星定位的信息时，除了可以利用室内各种无线信号辅助定位外，应用系统仍可以仅根据移动装置10上传的影像信息判断对应的虚拟信息105，并不受限无法能够取得移动装置10的位置信息的情况。
更进一步地，此虚拟信息105建立时，使用者可以赋予虚拟信息105更多功能，例如建立一个连结，如URL，让其他使用者搜寻得到此虚拟信息105时，可以获取进一步信息，如链接到另一个网页，提供使用者进一步的互动服务，如提供影音通信、信息交谈、购买交易的接口。
在本发明中，除了主要取得移动装置产生的地面位置信息外，亦可以采用空间角度信息，例如移动物件具有一个高度，当虚拟信息置放于移动物件上的某个高度的部分，虚拟信息的可视范围可以包括空间角度。空间角度信息的取得可参考图2A所示的示意图，所示的空间坐标是以一个水平方位角(Azimuthal angle)φ与俯仰角(vertical angle)θ定义位置，根据本发明的实施概念，移动装置20发展这个空间坐标是，中间原点即为使用者所持的移动装置20，水平表示一个东西南北的方位坐标，根据一个基准轴(此例为朝北的轴)可以取得移动装置20的朝向(如移动装置20背面镜头所指的方向A)，此方向A形成一个水平方位角φ以及一个垂直方向的俯仰角θ，方位角φ与俯仰角θ可由移动装置20内的空间定位单元决定，两者的组合即形成方向A的空间角度信息。当配合定位卫星201在移动装置20内形成的水平位置信息，即可适当地定位移动装置20所指的位置与方向，这个空间信息将提供给应用系统的服务器，由服务器中的运算程序比对判断得出显示在移动装置20上的虚拟信息。
图2B显示取得虚拟信息背景的影像信息的示意图。此例图中显示有一虚拟信息203，以一虚线外框表示，座落在一个背景影像205上，本发明指一移动物件，当建立此虚拟信息203时，服务器可自使用者端的移动装置上取得虚拟信息203的数据，以及所处的地面位置信息，或包括空间角度信息，还包括此背景影像205的影像信息，这些空间信息即形成定位此虚拟信息203的参数。更进一步地，使用者建立此虚拟信息203时，可以加注更多信息，建立一个链接，让后续使用者搜寻到此虚拟信息203时，可以取得进一步信息、链接到另一网页或购买接口，提供更多互动服务。
此例显示背景影像205的影像信息包括了经过影像前置处理形成的色块信息与线条信息。根据实施例的一个，影像前置处理可于移动装置上执行软件程序运算，亦不排除由云端服务器运算，影像的色块之间形成边缘线条，线条之间就是色块，都是成为辨识虚拟信息所处位置的参数。
前置处理可先辨识将背景影像205中的线条(如图示上的线条221,222,223,224,225,226)，线条之间形成区块，计算区块(211,212,213,214,215,216,217)中的影像像素的平均值，形成对应的色块信息。在另一实施例中，可对各区块(211,212,213,214,215,216,217)中的影像像素执行一正规化运算(normalization)，计算每个区块的特征值，作为该区块的色块信息。影像前置处理方法并不限于以上列举方法，且影像所处色度空间亦不受限于特定色度空间，可如RGB(红、绿、蓝)、HSV(色相(Hue)、饱和度(Saturation)、明度(Value))、CMYK(青(Cyan)、洋红(Magenta)、黄(Yellow)、黑)等。
值得一提的是，当经图像处理后，得出上述背景影像205上的线条221,222,223,224,225,226的信息，线条信息可以提供显示的虚拟信息203的依据，能经图像处理后让虚拟信息203确实地座落在应该呈现的平面上，如移动物件的某个部位。
图3显示实现本发明移动物件的虚拟信息建立与搜寻的系统网络架构实施例图。
说明书所公开的移动物件的虚拟信息建立与搜寻服务建构在网络上，此例显示系统端设有服务器301与数据库302，形成一个云端系统，数据库302记载虚拟信息与对应定位信息，主要为置放虚拟信息的移动物件的影像信息，亦可包括应用系统自行建制的数据。数据库302作为搜寻虚拟信息的数据源。在一实施例中，数据库302包括记载虚拟信息的数据的一虚拟信息数据库，以及记载虚拟信息的定位信息以及对应各虚拟信息的搜寻条件的一搜寻数据库。
服务器301主要是处理使用者端移动装置所传送的信号，例如搜寻虚拟信息的参数，并进行数据库302内数据比对，提供搜寻结果。应用系统通过网络30提供搜寻服务，云端系统的数据库302的数据源主要来自终端使用者建立的虚拟信息数据，通过软件接口提供使用者端搜寻当中数据库302的虚拟信息。
终端使用者如所示建立者装置303,304，使用者操作移动装置，可以此用移动装置的触控显示器，以手势操做的方式，或是其他输入方式，例如使用智能眼镜，再以挥动手势的输入方式，以决定在某移动物件上置放虚拟信息，虚拟信息如文字、图片、影片或声音等，或其组合，与所置放虚拟信息的移动物件两者的结合形成定位此虚拟信息的定位信息，特别的是，而移动物件形成了定位此虚拟信息的影像信息，如前述经图像处理产生的色块信息与线条信息。
当利用建立者装置303,304建立虚拟信息与相关定位信息后，通过网络30上传到应用系统的服务器301，服务器301将数据存储在数据库302中。应用系统经网络30提供搜寻者装置306,307,308通过操作移动装置与其中软件程序搜寻数据库302中的虚拟信息。举例来说，使用者操作移动装置，启动软件程序，启动照相模块拍摄某移动物件，并撷取当中影像信息，软件程序取得移动装置中相关定位电路产生的地面位置信息，或包括空间角度信息，这些信息可先传送到服务器301，经比对后，传回搜寻结果，搜寻结果为对应移动物件的影像信息(色块信息、线条信息与/或人脸辨识信息)，以及移动装置的位置信息的虚拟信息，最后可显示在移动装置的显示器上。
值得一提的是，应用系统取得到建立者装置303,304等使用者端通过软件程序产生的虚拟信息与对应的定位信息，主要为移动物件的影像信息，并可以设定搜寻条件，或可由使用者提供，或可由系统根据建立者装置303,304与移动物件之间的空间关系设定此搜寻条件，例如可以看到这个虚拟信息的一时间范围、一可视范围与一使用者范围其中的一个，或其组合。
例如，当初建立此虚拟信息时的建立者装置303,304与虚拟信息所关联的移动物件(两者之间有一距离关系，或是俯仰角关系)的位置差异形成一个可视范围，设定一个可以看到虚拟信息的距离范围，应用系统即能设一个搜寻者装置306,307,308与虚拟信息显示的移动物件之间可以看到虚拟信息的距离门槛，在此距离门槛之外，不论太近或太远都不能看到虚拟信息。
再如图4A显示本发明应用系统与终端移动装置中软件模块的实施例图。
应用系统包括设于云端的服务器41，以一计算机系统实现，不排除由执行不同工作的计算机系统所组成，主要工作在于接收使用者端移动装置400所上传的虚拟信息数据，以及虚拟信息对应的定位信息，以建立数据库(搜寻数据库43、虚拟信息数据库45)，数据库(搜寻数据库43、虚拟信息数据库45)用以记载经服务器41取得使用者端的移动装置产生的数据，特别是包括移动装置400产生对应特定虚拟信息的位置信息。
数据库为一个数据存储媒体，可以根据功能区分为搜寻数据库43与虚拟信息数据库45，两者可以设于同一服务器内，或是设于不同的位置。其中虚拟信息数据库45主要为记载移动装置400上传的虚拟信息的数据，虚拟信息可以为使用者通过移动装置400建立的文字、图片、影片与声音其中的一个，或其组合，其中影片还广泛地包括平面、立体动画；虚拟信息数据库45同时也成为使用者通过操作移动装置400选择虚拟信息的数据源。搜寻数据库43主要为记载移动装置400上传的数据中对应虚拟信息的其他信息，如虚拟信息的定位信息，主要为影像信息，其中主要为对应虚拟信息的色块信息与线条信息，色块信息与线条信息主要是取自虚拟信息的背景影像，成为定位虚拟信息的主要依据。当服务器41中运行运算程序，比对搜寻数据库43记载的虚拟信息，可以得到一或多个虚拟信息，每个虚拟信息各有识别信息(ID)，通过虚拟信息数据库45提供给使用者端装置。
根据一实施例，于服务器41执行的运算程序为一以人工智能深度学习的影像辨识程序，并经过多次处理与学习后，对移动物件的辨识度愈高。
根据再一实施例，当使用者操作移动装置400形成虚拟信息的定位信息同时，可以设定一搜寻条件，也是上传至搜寻数据库43中，搜寻条件如一时间范围、一可视范围与一使用者范围其中的一个，或其组合，成为搜寻比对的依据。
举例来说，使用者在某个移动物件上建立虚拟信息时，可以设定一时间范围，也就是设定使用者在本发明应用系统中执行信息搜寻时，除了需要符合用来定位虚拟信息的影像信息外，在此时间范围内才能搜寻到此虚拟信息。可视范围则是规范一个可视某虚拟信息的距离范围，让使用者操作移动装置400时要在这个可视范围内才能看到符合移动物件的影像信息的虚拟信息。使用者范围则是让使用者可以设定可以看到虚拟信息的对象，可以为一或多个人，每个人操作移动装置400搜寻虚拟信息时，同时也会传送每个人的使用者识别数据(user ID)，服务器同样将此纳入搜寻条件的一个。
因此，应用系统借着大量使用者上传的数据建立数据库(搜寻数据库43、虚拟信息数据库45)，可以建立一搜索引擎，提供使用者操作移动装置搜寻虚拟信息的服务。
运作本发明移动物件上虚拟信息建立方法与搜寻方法的移动装置400通过网络40联机于服务器41，移动装置400主要电路组件如处理各电路组件产生的信号的数据处理单元401，以及与数据处理单元401电性连接的电路组件，如建立与外部装置联机的通信单元402、感测移动装置400位置的地面定位单元403、感测移动装置400在空间位置的空间定位单元404、取得实景(移动物件)影像的摄影单元405以及提供使用者操作手势输入指令的触控显示单元406。
其中地面定位单元403如全球定位系统的相关电路，通过接收定位卫星信号产生地面位置信息，而定位的技术仍可辅以其他无线基地台信号执行定位；空间定位单元404则如载于移动装置400内的陀螺仪，利用陀螺仪感测到移动装置在空间的位置，形成空间角度信息，主要由方位角φ与俯仰角θ组成。
应用系统还包括载于移动装置400的记忆单元407(一种计算机可读取媒体)的程序集，程序集经移动装置400的处理器(一或多个)执行后，可以执行移动物件的虚拟信息建立与搜寻的程序。程序集执行主要功能的指令如下描述。
影像撷取指令471，运作移动装置400的摄影单元405取得移动物件的影像，可包括人脸，并显示于移动装置400上；虚拟信息处理指令472，用以处理使用者操作移动装置400上的触控显示单元406建立与某个移动物件上的虚拟信息，虚拟信息可由使用者自行建立，或是选自系统提供的虚拟信息数据库45，并形成传送到服务器41的虚拟信息的数据，虚拟信息为文字、图片、影片与声音其中的一个，或其组合；位置信息产生指令473，能够取得移动装置400中定位电路产生的信号，如取得移动装置400中地面定位单元403与空间定位单元404产生的定位信息，而本发明主要取得移动装置400的GPS位置信息即可；影像信息产生指令474，用以处理移动物件影像，产生对应虚拟信息的影像信息，如上述实施例公开的图像处理方法，可以产生可用以定位虚拟信息的色块信息与线条信息，或可包括人脸辨识信息；搜寻处理指令475，用以取得移动装置400于一搜寻模式下产生的位置信息与影像信息，并于位置信息与影像信息传送到服务器41后接收服务器41产生符合一搜寻条件的搜寻结果；数据传送与接收指令476则是建立移动装置400与服务器41之间的联机，用以传送与接收信号，特别是传送使用者端产生的位置信息，或包括影像信息，再接收服务器41产生的搜寻结果；以及虚拟信息显示指令477，当移动装置400接收到服务器41产生的搜寻结果后，如有一虚拟信息被搜寻到，可以根据此搜寻结果显示虚拟信息，根据实施例的一个，将在移动装置400上显示的移动物件迭加此虚拟信息。
以上所述的虚拟信息除了可由系统提供外，还可以由使用者自行通过其他软件工具产生，包括拍摄的照片，亦可自所提供的系统取得，系统可以提供图库、影片库、声音库等让使用者选择使用。
接着，如图4B所示的本发明系统中服务器中功能模块的实施例图，其中以电路或是搭配软件的功能模块描述云端系统，云端系统主要包括一搜寻数据库43，其中记载多个虚拟信息中个别虚拟信息对应的一定位信息(主要为色块信息与线条信息等影像信息)，每个虚拟信息将设有一识别数据(ID)，作为搜寻索引，各虚拟信息还对应有个别的搜寻条件，如设定有可以观看此虚拟信息的一时间范围、一可视范围(主要为距离范围)与使用者范围(指定可观看的使用者)其中的一个，或其组合，成为搜寻比对的依据。
另设有虚拟信息数据库45，用以存储虚拟信息的数据，依照虚拟信息的形式存储在数据库中，虚拟信息可为文字、图片、影片或声音，或是各种形式的组合，可以依照各虚拟信息的识别数据链路搜寻数据库43中对应各虚拟信息的定位信息以及搜寻条件。
服务器41则是具有一或多个处理器的计算机系统，用以执行虚拟信息搜寻排序方法，通过网络40提供各端使用者操作移动装置搜寻虚拟信息，服务器41则是根据移动装置所上传的影像信息提供搜寻与排序的结果。服务器41可以硬件或搭配软件方式实现此方法。
服务器41设有数据撷取单元411，可以电路实现数据撷取的目的，通过服务器41主机上的网络接口联机至网络40，能以接收各端使用者操作移动装置所产生的位置信息与影像信息等搜寻虚拟信息所需的数据。
使用者管理单元412，可以一内存配合相关程序实现使用者管理的目的，用以记载每个使用者的使用者识别数据、密码管理等安全性数据，还能据此将从使用者端移动装置持续传送的搜寻数据记录起来，形成使用者的历史记录，作为日后提供使用者信息的参考，例如作为搜寻结果排序的依据的一个。特别的是，使用者识别数据是系统对搜寻结果进行排序的重要依据的一个，可以将与使用者个人相关的搜寻结果列于最高排序优先级。
数据比对单元413则是能够根据移动装置上传的移动物件的影像信息与位置信息比对搜寻数据库43中的数据，并由虚拟信息数据库45取得虚拟信息的文件，回传给移动装置上。经数据比对单元413比对得出的结果视为一初步搜寻结果，系统进一步对此排序，以提供使用者相对有兴趣的结果。
初步搜寻结果将经搜寻条件过滤单元414处理后，提供经排序的搜寻结果，排序时包括引入一些过滤条件，使得搜寻结果可以收敛至一定数量内的虚拟信息，且能使得结果是对使用者有意义的内容。
举例来说，排序可依据一使用者关联信息，使用者关联信息为服务器41取得一伴随虚拟信息的使用者的使用者识别数据，可以此取得存储于数据库中的使用者关联信息。当系统取得使用者识别数据，可以先提供与使用者个人有关的虚拟信息，如有人建立此虚拟信息是指定要给某个(或某个使用者范围)使用者看，此为一种个人虚拟信息，经使用者识别数据过滤后，个人虚拟信息对于所指定的使用者(一或多个)可设为最高的排序优先级；反之，无关而不属于使用者范围的其他人将不会看到此虚拟信息，此能排除不提供某些使用者观看的虚拟信息。
更者，使用者关联信息可为使用者设定的一喜好设定与一历史数据，数据库中各虚拟信息可以设定关联一或多个内容分类，使用者可以在使用此系统时设定其喜好设定，此为使用者主动设定一或多个有兴趣的内容分类。历史信息包括系统收集每个使用者对各种虚拟信息所关联的内容的停留时间与访问次数，系统可以将相对停留时间较久的内容(与其分类)视为该使用者较为喜好的内容分类，同理，访问次数也可以作为判断使用者喜好的依据，因此，云端系统将可根据历史数据判断得出关于该使用者的一或多个有兴趣的内容分类。
于是，系统可将关联性较高的虚拟信息设较高优先级，将关联性较低的虚拟信息设较低优先级，提供给使用者的搜寻结果可据此排序。
在一实施例中，虚拟信息可具有一时间特性，建立虚拟信息的虚拟信息提供者可以对所建立的虚拟信息设一时间参数，包括可以显示的时间(可设定时间范围、早上、中午或晚上等)，或是设定虚拟信息被搜寻的有效显示时间，因此依照服务器的系统时间，系统可以时间作为参数过滤初步搜寻结果，排除时间参数不符合的虚拟信息，包括排除显示时间不符的虚拟信息，以及排序时排除有效显示期限超出系统时间的虚拟信息。
搜寻条件过滤单元414还可依据客观数据排序虚拟信息，客观数据如各虚拟信息建立的时间、更新时间、有效时间、点阅率与/或评价等参数，系统可根据这些参数决定排序时的优先级。例如，虚拟信息的建立时间愈新者，可以具有较高的优先级；或是更新率愈高者，可以具有较高的优先级；或是某个虚拟信息所关联的内容被访问率愈高，也可具有较高的优先级；或可参考其他人对虚拟信息所关联的内容的评价，评价愈高者，也可具有较高的优先级。
另外，除了以上时间、使用者关联信息与客观数据作为排序的依据外，系统可对数据库中的虚拟信息赋予一系统权重，系统权重主要是由一虚拟信息提供者于云端系统对所提供的个别虚拟信息设定一权重，由云端系统对所接收的多个虚拟信息个别所接收的权重运算所述的系统权重，系统权重愈大者，具有较高优先级。
举例来说，系统权重可以为广告，虚拟信息提供者如广告业主，可以一价格要求系统提供较高的排序，成为设定系统权重的依据。其他不排除政府政令倡导、对大众有关的信息等，可以通过设定系统权重而改变排序优先级。
之后，云端系统通过排序单元415对以上各种排序的依据作出一排序决定，其中不外乎是系统设定的排序策略(scenario)，并可以依据实际需要调整。
最后，数据传送单元416对各产生搜寻请求的移动装置传送搜寻与排序的结果，当移动装置接收自服务器41传送经排序后输出的一或多个虚拟信息时，以显示屏幕显示具有最高优先级的虚拟信息，或根据一选择指令显示经选择的虚拟信息，显示各虚拟信息，与取得的移动物件的影像结合。
图5接着显示为描述本发明移动物件的虚拟信息建立方法的实施例流程。
在此流程中，使用者操作移动装置启动建议虚拟信息的软件程序，如步骤S501，藉此可以同时启动摄影单元，如步骤S503。于一数据建立模式下，使用者可以自行制作如图片、文字、影像、声音等多媒体虚拟信息，亦可通过软件程序联机服务器选取数据库中的虚拟信息，如步骤S505。因此，应用系统中的服务器将接收移动装置所选定的虚拟信息。
在此实施例中，使用者操作移动装置，以摄影单元拍摄一移动物件，选定移动物件，如步骤S507，同时可以取得移动物件的影像信号，并能以软件程序中的解析程序将影像信号解析得出其中影像信息，移动物件的影像信息为经图像处理后产生定位虚拟信息的一色块信息与一线条信息，如以上实施例描述，此影像信息为可以辨识出移动物件的影像特征。
再如步骤S509，当使用用者操作移动装置决定虚拟信息在移动物件上的位置，关联此虚拟信息的移动物件的影像信息即为虚拟信息的定位信息，并由服务器接收此由移动装置产生置放虚拟信息在移动物件上的影像信息，如步骤S511。
接着，如步骤S513，使用者可以通过软件程序提供的接口设定让其他人搜寻到此虚拟信息的可视范围，此可视范围主要包括与移动物件的一距离范围，不排除可以加上一个视角范围，或是一个俯仰角的范围。再如步骤S515，使用移动装置上传虚拟信息与对应的可视范围与影像信息至服务器。同时，系统还可让使用者设定其他使用者搜寻与显示虚拟信息的一时间范围与/或一使用者范围。
图6显示的流程为移动物件的虚拟信息建立方法的另一实施例。在此流程中，如步骤S601，当应用系统接收使用者端上传的虚拟信息与对应的可视范围与影像信息时，可以同时取得使用者识别数据，包括可以识别使用者的各种信息，如启动软件程序与使用系统服务的使用者账号、移动装置识别序号等，除了可以管理使用者外，还藉此可以设定与使用者有关的搜寻条件，如步骤S605，建立虚拟信息的搜寻条件，搜寻条件可以设定搜寻与观看此虚拟信息的使用者范围。
之后，如步骤S607，应用系统接收到终端所上传的虚拟信息、可视范围、影像信息、使用者识别数据与搜寻条件等，建议提供搜寻虚拟信息服务的数据库。
根据再一实施例，亦参考图6显示的实施例流程，使用者在移动物件上建立虚拟信息时，应用系统除了接收到上传虚拟信息的使用者的账号外，若移动物件为另一系统的使用者，亦具有登录于应用系统的服务账号，应用系统可以在得到使用者账号与位置时，同时得知作为移动物件的使用者的服务账号与位置(软件程序要求取得移动装置的位置信息)。之后，系统除了如之前实施例所述通过影像信息辨识移动物件与所关联的虚拟信息外，仍可以根据使用者账号确认移动物件身份，以及关联的虚拟信息，进一步取得移动物件的位置，如此，成为建立此移动物件上虚拟信息的可视范围，系统可以得到搜寻虚拟信息的使用者与此移动物件两个人彼此之间的距离。于是，此距离信息成为系统判断是否可以看到虚拟信息的依据的一个，或者成为设定虚拟信息可视范围的依据。
图7所示为显示搜寻得到的虚拟信息的方法流程。
上述应用系统提供使用者搜寻虚拟现实的服务，当使用者在终端操作执行使用此服务的软件程序时(步骤S701)，在一搜寻模式下，软件程序启动摄影单元，并取得由移动装置摄影单元拍摄取得的物件影像(步骤S703)，特别是置放虚拟信息的物体，如本发明所应用的移动物件。运作中，软件程序持续地得到移动装置的位置信息(步骤S705)，主要为GPS模块产生的地面位置数据，但也不排除取得陀螺仪得到的空间角度数据。
软件程序除了得到移动物件的影像信号外(步骤S707)，还可以影像运算手段解析得到移动物件的影像信息(步骤S709)，上述实施例所述，取得移动物件的色块信息与线条信息，这些影像信息，或加上移动装置的位置信息，足以判断得出置放虚拟信息的位置，以作为搜寻虚拟信息的依据，当数据库中虚拟信息中有符合移动物件的影像信息与上述各种搜寻条件时，即可显示在移动物件上的虚拟信息。在另一实施例中，若移动物件为登录服务账号的另一人，所持有的移动装置产生的定位信息为定位移动物件的重要依据的一个，可以藉此取得移动物件与搜寻虚拟信息的移动装置之间的距离。
值得一提的是，所述移动物件的影像信息包括色块信息与线条信息之外，若移动物件为人，通过图像处理取得的人脸辨识信息亦成为辨识移动物件与定位虚拟信息的重要依据的一个，可藉以以得出搜寻结果。
当在终端移动装置上形成位置信息与移动物件的影像信息，实时上传服务器(步骤S711)，服务器中有数据库，记载由多个使用者操作各自的移动装置所上传的虚拟信息与对应的可视范围与影像信息，提供服务器执行一运算程序比对数据库，以得出符合对应虚拟信息的可视范围与影像信息的搜寻结果，并传回移动装置(步骤S713)，搜寻结果若显示有至少一虚拟信息，即在移动装置上显示在一可视范围内符合影像信息的虚拟信息(步骤S715)。
图8显示本发明移动物件的虚拟信息显示时的情境示意图。
在此情境示意图中，移动物件80如一部车，车上显示不只一个虚拟信息，当使用者操作移动装置拍摄此移动车辆时，同时撷取当中的影像信号，并解析取得影像特征，成为定位各种虚拟信息的信息，上传服务器，服务器中的软件程序将比对数据库，得到如图显示在移动物件80上的虚拟信息一801，其中示意显示「欢迎光临XX餐厅」的信息，以及虚拟信息二802，其中示意显示「XX商品」与可播放内容的信息。
图9则是表示另一显示虚拟信息的情境示意图，此图显示移动物件90为一个人，人本身有些特征，经取得影像信息后，上传服务器可以得到符合这个影像信息以及可视范围的虚拟信息，如图中虚拟信息三901显示的「促销价XXX」，有文字与图形，以及胸前的虚拟信息四902，此信息可能为针对某个搜寻使用者的个人信息。
图10显示当应用系统提供终端移动装置有多笔虚拟信息时的显示搜寻结果的实施例示意图。
其中显示有一移动装置100，当中呈现一个实时得到的移动物件106的影像，当服务器比对数据库中符合此移动物件106影像信息的虚拟信息有多笔时，或者已经经过搜寻条件过滤后，仍有多笔虚拟信息时，可以此图例方式显示，包括先显示一个主要排序第一的虚拟信息107，使用者接口提供滑动切换标示111,112让使用者可以在此例的触控显示器上以左右滑动的手势切换虚拟信息，下方的虚拟信息预览区108则提供其他信息以供选择。
图11接着显示可利用如智能眼镜的载体呈现搜寻结果的实施例示意图。
图例中的移动装置110如一智能眼镜，当中同样以摄影机取得移动物件106’的影像，同样以图像处理手段取得移动物件106’的影像信息，上传伺服气候，立即可显示排序第一的虚拟信息117，同样也包括提示使用者可以切换信息的手势切换标示118,119，此例显示使用者在此应用的载体上可以挥动手势切换虚拟信息，下方同样提示有虚拟信息预览区120。
是以，根据说明书所载实施例，本发明提出一种移动物件的虚拟信息建立方法、空间物件搜寻方法与应用系统，在此系统架构下，可以根据多个使用者上传在不同或相同移动物件的虚拟信息建立提供搜寻服务的数据库，所依据的定位信息主要为移动物件的影像信息，当有使用者欲搜寻此移动物件下的虚拟信息时，服务器同样依照移动装置上传的影像信息与移动装置的位置信息进行搜寻虚拟信息，达到在移动物件上搜寻与显示虚拟信息的目的。
而以上所述仅为本发明的较佳可行实施例，非因此即局限本发明的专利范围，故举凡运用本发明说明书及图示内容所为的等效结构变化，均同理包含于本发明的范围内，合予陈明。

Claims (17)

1.一种移动物件的虚拟信息建立方法，其特征在于所述的方法包括：
于一数据建立模式下，接收以一移动装置选定的一个虚拟信息；
接收以该移动装置设定该虚拟信息在一移动物件的位置时产生的影像信息，该影像信息由该移动物件的影像信号解析得到的；
设定显示该虚拟信息的一可视范围，其中该可视范围包括与该移动物件的一距离范围，于上传该虚拟信息的数据时，还上传该可视范围至一服务器；以及
接收该移动装置选定的该虚拟信息的数据与该虚拟信息的定位信息、该可视范围至该服务器，建立一提供搜寻该虚拟信息的数据库。
2.如权利要求1所述的移动物件的虚拟信息建立方法，其特征在于所述的移动物件的影像信息为经图像处理后产生定位该虚拟信息的一色块信息与一线条信息。
3.如权利要求1所述的移动物件的虚拟信息建立方法，其特征在于所述的移动物件的影像信息为一人脸辨识信息。
4.如权利要求1所述的移动物件的虚拟信息建立方法，其特征在于所述的该服务器中，以一人工智能深度学习的影像辨识程序处理该移动物件的影像信息。
5.如权利要求1所述的移动物件的虚拟信息建立方法，其特征在于，于上传该虚拟信息的数据的步骤中，还设定显示该虚拟信息的一时间范围与/或一使用者范围。
6.如权利要求1所述的移动物件的虚拟信息建立方法，其特征在于所述的移动物件为持有另一移动装置的另一人，该服务器取得该移动物件的移动装置产生的定位信息，用以取得与建立该虚拟信息的该移动装置之间的一距离。
7.一种移动物件的虚拟信息搜寻方法，用于搜寻根据权利要求1所述的移动物件的虚拟信息建立方法所建立的虚拟信息，其特征在于，所述的移动物件的虚拟信息搜寻方法包括：
于一搜寻模式下，取得一移动装置的位置信息，以及该移动装置取得一移动物件的影像信号；
运算取得该移动物件的影像信息；
上传该移动物件的影像信息与该位置信息至一服务器；以及
于该服务器接收到该位置信息与该影像信息后，判断该位置信息是否落于相对该移动物件的该可视范围内，其中自该服务器接收于相对该移动物件的一可视范围内并符合该影像信息的一搜寻结果，其中该可视范围为与该移动物件的一距离范围；
其中，该服务器设有一数据库，记载由多个使用者操作各自的移动装置所上传的虚拟信息与对应的可视范围与影像信息，提供该服务器执行一运算程序比对该数据库，以得出符合对应该虚拟信息的该可视范围与该影像信息的搜寻结果。
8.如权利要求7所述的移动物件的虚拟信息搜寻方法，其特征在于所述的移动装置产生的该位置信息为一地面位置信息，该地面位置信息由该移动装置内一地面定位单元产生。
9.如权利要求7所述的移动物件的虚拟信息搜寻方法，其特征在于所述的移动物件的影像信息为经图像处理后产生的一色块信息与一线条信息。
10.如权利要求7所述的移动物件的虚拟信息搜寻方法，其特征在于所述的移动物件的影像信息为一人脸辨识信息。
11.如权利要求7所述的移动物件的虚拟信息搜寻方法，其特征在于所述的服务器执行的该运算程序为一以人工智能深度学习的影像辨识程序。
12.如权利要求7所述的移动物件的虚拟信息搜寻方法，其特征在于，于该服务器比对该数据库时，还比对显示该虚拟信息的一时间范围与/或一使用者范围。
13.如权利要求7所述的移动物件的虚拟信息搜寻方法，其特征在于所述的移动物件为持有另一移动装置的另一人，该服务器取得该移动物件的移动装置产生的定位信息，用以取得与搜寻该虚拟信息的该移动装置之间的一距离，以判断该位置信息是否落于相对该移动物件的该可视范围内。
14.一种应用系统，其特征在于所述的系统包括：
一服务器，包括一数据库；
载于一移动装置的计算机可读取媒体的一程序集，该程序集经该移动装置的一个处理器执行后，执行根据权利要求1所述的移动物件的虚拟信息建立方法与搜寻的程序，该程序集包括：
一影像撷取指令，用以取得一移动物件的影像，并显示于该移动装置上；
一虚拟信息处理指令，用以处理建立于该移动装置上与该移动物件有关连的一虚拟信息，以及形成传送到该服务器的虚拟信息的数据；
一位置信息产生指令，用以取得该移动装置的一个地面定位单元产生的一位置信息；
一影像信息产生指令，用以处理该移动物件的影像，产生定位该虚拟信息的影像信息；
一搜寻处理指令，用以取得该移动装置于一搜寻模式下产生的该位置信息与该影像信息，并于将该位置信息与该影像信息传送到该服务器后，接收该服务器产生符合一搜寻条件的搜寻结果，所述的搜寻条件为搜寻该虚拟信息的一可视范围、一时间范围与/或一使用者范围；
一数据传送与接收指令，建立该移动装置与该服务器之间的联机，用以传送与接收信号；以及
一虚拟信息显示指令，用以根据该搜寻结果显示该虚拟信息。
15.如权利要求14所述的应用系统，其特征在于所述的数据库包括记载该虚拟信息的数据的一虚拟信息数据库，以及记载显示该虚拟信息的影像信息，以及对应各虚拟信息的搜寻条件的一搜寻数据库。
16.如权利要求14所述的应用系统，其特征在于所述的移动物件的影像经图像处理后，形成对应该虚拟信息或执行搜寻的一色块信息与一线条信息。
17.如权利要求14所述的应用系统，其特征在于所述的移动物件的影像为一人脸，该影像信息还包括一人脸辨识信息。
CN201710590365.8A 2016-12-23 2017-07-19 移动物件的虚拟信息建立方法、搜寻方法与应用系统 Active CN108616563B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
TW105143001A TWI615776B (zh) 2016-12-23 2016-12-23 移動物件的虛擬訊息建立方法、搜尋方法與應用系統
TW105143001 2016-12-23

Publications (2)

Publication Number Publication Date
CN108616563A CN108616563A (zh) 2018-10-02
CN108616563B true CN108616563B (zh) 2021-05-14

Family

ID=59982226

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710590365.8A Active CN108616563B (zh) 2016-12-23 2017-07-19 移动物件的虚拟信息建立方法、搜寻方法与应用系统

Country Status (5)

Country Link
US (1) US10264207B2 (zh)
EP (1) EP3340177B1 (zh)
JP (1) JP2018106696A (zh)
CN (1) CN108616563B (zh)
TW (1) TWI615776B (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105338117B (zh) * 2015-11-27 2018-05-29 亮风台（上海）信息科技有限公司 用于生成ar应用和呈现ar实例的方法、设备与系统
TWI690826B (zh) * 2018-05-23 2020-04-11 國立臺灣師範大學 擴增內容的產生方法
EP3780575B1 (en) 2018-05-23 2022-11-16 Huawei Technologies Co., Ltd. Photographing method and terminal device
JP7056500B2 (ja) * 2018-10-04 2022-04-19 トヨタ自動車株式会社 画像生成装置、画像生成方法、およびプログラム
JP6754815B2 (ja) * 2018-11-07 2020-09-16 スカパーＪｓａｔ株式会社 拡張現実システム、拡張現実端末および方法
WO2020181517A1 (zh) * 2019-03-13 2020-09-17 桂林理工大学 基于多媒体数字化技术的传统古村落传播系统及方法
JP2020166555A (ja) * 2019-03-29 2020-10-08 株式会社三井住友銀行 Ａｒプラットフォームシステム、方法およびプログラム
WO2021163373A1 (en) * 2020-02-14 2021-08-19 Magic Leap, Inc. 3d object annotation
JP6889304B1 (ja) * 2020-03-31 2021-06-18 株式会社博報堂Ｄｙホールディングス 拡張現実表示システム、拡張現実表示方法、及びコンピュータプログラム
CN114077310B (zh) * 2020-08-14 2023-08-25 宏达国际电子股份有限公司 提供虚拟环境的方法与系统及非暂态电脑可读取储存介质
US11341728B2 (en) 2020-09-30 2022-05-24 Snap Inc. Online transaction based on currency scan
US11386625B2 (en) * 2020-09-30 2022-07-12 Snap Inc. 3D graphic interaction based on scan
US11620829B2 (en) 2020-09-30 2023-04-04 Snap Inc. Visual matching with a messaging application
US20220358176A1 (en) * 2021-05-08 2022-11-10 Greenburger Noah System and method of merging online search and consolidation

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102708355A (zh) * 2011-02-15 2012-10-03 索尼公司 信息处理装置、信息处理方法及程序
CN103107938A (zh) * 2013-01-25 2013-05-15 腾讯科技（深圳）有限公司 信息交互方法、服务器及终端
CN104580299A (zh) * 2013-10-17 2015-04-29 拓景科技股份有限公司 信息产生与分享方法及其相关装置
CN106101115A (zh) * 2009-07-30 2016-11-09 Sk普兰尼特有限公司 用于提供增强现实的方法、服务器和便携终端
CN106203292A (zh) * 2016-06-28 2016-12-07 广东欧珀移动通信有限公司 一种图像的增强现实处理的方法、装置及移动终端

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4207256B2 (ja) * 1998-08-24 2009-01-14 コニカミノルタビジネステクノロジーズ株式会社 カラー画像の領域分割方法およびプログラム記憶媒体
US7720436B2 (en) * 2006-01-09 2010-05-18 Nokia Corporation Displaying network objects in mobile devices based on geolocation
JP4770178B2 (ja) * 2005-01-17 2011-09-14 ソニー株式会社 カメラ制御装置、カメラシステム、電子会議システムおよびカメラ制御方法
US20060190812A1 (en) * 2005-02-22 2006-08-24 Geovector Corporation Imaging systems including hyperlink associations
JP2008124309A (ja) * 2006-11-14 2008-05-29 Toyota Motor Corp 半導体装置とその製造方法
US8098881B2 (en) * 2008-03-11 2012-01-17 Sony Ericsson Mobile Communications Ab Advertisement insertion systems and methods for digital cameras based on object recognition
US20100257252A1 (en) * 2009-04-01 2010-10-07 Microsoft Corporation Augmented Reality Cloud Computing
US9286624B2 (en) 2009-09-10 2016-03-15 Google Inc. System and method of displaying annotations on geographic object surfaces
JP4816789B2 (ja) * 2009-11-16 2011-11-16 ソニー株式会社 情報処理装置、情報処理方法、プログラムおよび情報処理システム
JP2011118834A (ja) * 2009-12-07 2011-06-16 Sony Corp 情報処理装置、情報処理方法およびプログラム
JP5616622B2 (ja) 2009-12-18 2014-10-29 アプリックスＩｐホールディングス株式会社 拡張現実感提供方法及び拡張現実感提供システム
US8400548B2 (en) * 2010-01-05 2013-03-19 Apple Inc. Synchronized, interactive augmented reality displays for multifunction devices
JP5271965B2 (ja) 2010-05-21 2013-08-21 株式会社エヌ・ティ・ティ・ドコモ オブジェクト配信範囲設定装置及びオブジェクト配信範囲設定方法
CN102194007B (zh) * 2011-05-31 2014-12-10 中国电信股份有限公司 获取移动增强现实信息的系统和方法
JP5885480B2 (ja) 2011-12-01 2016-03-15 キヤノン株式会社 情報処理装置、情報処理装置の制御方法、プログラム
US9066200B1 (en) 2012-05-10 2015-06-23 Longsand Limited User-generated content in a virtual reality environment
JP6286123B2 (ja) 2012-12-27 2018-02-28 サターン ライセンシング エルエルシーＳａｔｕｒｎ Ｌｉｃｅｎｓｉｎｇ ＬＬＣ 情報処理装置、コンテンツ提供方法及びコンピュータプログラム
EP3101392B1 (en) * 2013-03-15 2021-12-15 Apple Inc. Mapping application with turn-by-turn navigation mode for output to vehicle display
US9953446B2 (en) * 2014-12-24 2018-04-24 Sony Corporation Method and system for presenting information via a user interface
JP6492673B2 (ja) 2015-01-15 2019-04-03 セイコーエプソン株式会社 頭部装着型表示装置、頭部装着型表示装置を制御する方法、コンピュータープログラム
CN104616190A (zh) * 2015-03-05 2015-05-13 广州新节奏智能科技有限公司 基于互联网和移动互联网的多终端3d体感购物方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106101115A (zh) * 2009-07-30 2016-11-09 Sk普兰尼特有限公司 用于提供增强现实的方法、服务器和便携终端
CN102708355A (zh) * 2011-02-15 2012-10-03 索尼公司 信息处理装置、信息处理方法及程序
CN103107938A (zh) * 2013-01-25 2013-05-15 腾讯科技（深圳）有限公司 信息交互方法、服务器及终端
CN104580299A (zh) * 2013-10-17 2015-04-29 拓景科技股份有限公司 信息产生与分享方法及其相关装置
CN106203292A (zh) * 2016-06-28 2016-12-07 广东欧珀移动通信有限公司 一种图像的增强现实处理的方法、装置及移动终端

Also Published As

Publication number Publication date
CN108616563A (zh) 2018-10-02
EP3340177B1 (en) 2020-04-29
TW201823983A (zh) 2018-07-01
US10264207B2 (en) 2019-04-16
JP2018106696A (ja) 2018-07-05
US20180184038A1 (en) 2018-06-28
EP3340177A1 (en) 2018-06-27
TWI615776B (zh) 2018-02-21

Similar Documents

Publication Publication Date Title
CN108616563B (zh) 移动物件的虚拟信息建立方法、搜寻方法与应用系统
CN107870961B (zh) 空间物件搜寻排序方法、系统与计算机可读取存储装置
US9275079B2 (en) Method and apparatus for semantic association of images with augmentation data
CN107870962B (zh) 适地性空间物件远距管理方法与系统
CN108241726B (zh) 移动物件的虚拟信息远距管理方法与应用系统
US20200257121A1 (en) Information processing method, information processing terminal, and computer-readable non-transitory storage medium storing program
CN105373929A (zh) 提供拍照推荐信息的方法及装置
CN108733272B (zh) 适地性空间物件可视范围管理方法与系统
JP4427714B2 (ja) 画像認識装置、画像認識処理方法および画像認識プログラム
CN108896035B (zh) 通过影像信息实现导航的方法、设备以及导航机器人
CN108092950B (zh) 一种基于位置的ar或mr社交方法
CN107016351A (zh) 拍摄指导信息的获取方法以及装置
EP3287912A1 (en) Method for creating location-based space object, method for displaying space object, and application system thereof
KR102074621B1 (ko) 개인의 신체와 성향을 고려한 홈웨어 추천 방법 및 장치
KR20150106243A (ko) 이동단말기 및 그 제어방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20211202

Address after: Grand Cayman, Cayman Islands

Patentee after: Fanfan Technology Co.,Ltd.

Address before: Taiwan, Taipei, China

Patentee before: Li Yuxian

TR01 Transfer of patent right