CN105323252A - 基于增强现实技术实现互动的方法、系统和终端 - Google Patents

基于增强现实技术实现互动的方法、系统和终端 Download PDF

Info

Publication number
CN105323252A
CN105323252A CN201510785428.6A CN201510785428A CN105323252A CN 105323252 A CN105323252 A CN 105323252A CN 201510785428 A CN201510785428 A CN 201510785428A CN 105323252 A CN105323252 A CN 105323252A
Authority
CN
China
Prior art keywords
information
image
augmented reality
image information
terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510785428.6A
Other languages
English (en)
Inventor
赵亮
俞志杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Ar Baseworld Digital Solution Co Ltd
Original Assignee
Shanghai Ar Baseworld Digital Solution Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Ar Baseworld Digital Solution Co Ltd filed Critical Shanghai Ar Baseworld Digital Solution Co Ltd
Priority to CN201510785428.6A priority Critical patent/CN105323252A/zh
Publication of CN105323252A publication Critical patent/CN105323252A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/131Protocols for games, networked simulations or virtual reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/14Session management

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明涉及一种基于增强现实技术实现互动的方法、系统和终端,其中所述方法包括以下步骤:服务器接收第一终端上传的第一图像和互动信息,提取第一图像中的第一图像信息,并保存第一图像信息和互动信息;第二终端获取第二图像,并实时提取第二图像信息,将第二图像信息发送至服务器;服务器查找与第二图像信息相匹配的第一图像信息和互动信息,以及将互动信息返回至第二终端;第二终端接通过增强现实将互动信息与第二图像叠加以获得增强现实信息;以及,第二终端显示增强现实信息。本发明的基于增强现实技术实现互动的方法,满足用户从全方位多角度地了解取景事物的相关信息,使得用户获取的互动信息更具有画面感,用户体验好。

Description

基于增强现实技术实现互动的方法、系统和终端
技术领域
本发明涉及信息技术领域,特别涉及一种基于增强现实技术实现互动的方法、系统和终端。
背景技术
增强现实(AugmentedReality,简称AR),是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术,是把原本在现实世界的一定时间空间范围内很难体验到的实体信息(视觉信息,声音,味道,触觉等),通过电脑等科学技术,模拟仿真后再叠加,将虚拟的信息应用到真实世界,被人类感官所感知,从而达到超越现实的感官体验。真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在。
增强现实技术,不仅展现了真实世界的信息,而且将虚拟的信息同时显示出来,两种信息相互补充、叠加。在视觉化的增强现实中,用户利用头盔显示器,把真实世界与电脑图形多重合成在一起,便可以看到真实的世界围绕着它。
增强现实技术包含了多媒体、三维建模、实时视频显示及控制、多传感器溶合、实时跟踪及注册、场景融合等新技术与新手段。
然而,目前的增强现实技术大多还只停留在单向信息提供的层面,缺乏互动与传播性,导致其应用范围受到很大的限制。
发明内容
本发明的目的在于克服现有技术的不足,提供一种基于增强现实技术实现互动的方法、系统和终端。
本发明的目的通过以下技术方案来实现:
本发明的第一目的在于提供一种基于增强现实技术实现互动的方法,包括以下步骤:
服务器接收第一终端上传的第一图像和互动信息,提取所述第一图像中的第一图像信息,并保存第一图像信息和与第一图像信息对应的互动信息,其中所述互动信息包括文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种;所述第一图像信息包括第一图像中物体表面的图像特征点、第一图像中三维物体的轮廓特征点、第一图像中环境的特征点中的一种或几种;
第二终端获取第二图像,并实时提取第二图像信息,将所述第二图像信息发送至所述服务器;所述第二图像信息包括第二图像中物体表面的图像特征点、第二图像中三维物体的轮廓特征点、第二图像中环境的特征点中的一种或几种;
所述服务器接收所述第二图像信息,并查找与所述第二图像信息相匹配的第一图像信息和所述与第一图像信息对应的互动信息,以及将所述与第一图像信息对应的互动信息返回至所述第二终端;
所述第二终端接收所述服务器返回的所述互动信息,并通过增强现实将所述互动信息与所述第二图像叠加以获得增强现实信息;以及,
所述第二终端显示所述增强现实信息。
本发明的第二目的在于提供一种基于增强现实技术实现互动的系统,包括:第一终端,用于将第一图像和互动信息上传至服务器,其中所述互动信息包括文字信息、视频信息、动画特效、图片信息、音频信息中的一种或几种;所述第一图像信息包括第一图像中物体表面的图像特征点、第一图像中三维物体的轮廓特征点、第一图像中环境的特征点中的一种或几种;
服务器,用于接收第一图像和互动信息,提取所述第一图像中的第一图像信息,并保存第一图像信息和与第一图像信息对应的互动信息;所述第一图像信息包括第一图像中物体表面的图像特征点、第一图像中三维物体的轮廓特征点、第一图像中环境的特征点中的一种或几种;
第二终端,用于获取第二图像,并实时提取第二图像信息,将所述第二图像信息发送至所述服务器;所述第二图像信息包括第二图像中物体表面的图像特征点、第二图像中三维物体的轮廓特征点、第二图像中环境的特征点中的一种或几种;所述服务器进一步用于接收所述第二图像信息,并查找与所述第二图像信息相匹配的第一图像信息和与第一图像信息对应的互动信息,以及将所述与第一图像信息对应的互动信息返回至所述第二终端;
所述第二终端进一步用于接收所述服务器返回的所述互动信息,并通过增强现实将所述互动信息与所述第二图像叠加以获得增强现实信息;以及渲染显示所述增强现实信息。
本发明的第三目的在于提供一种终端,包括:
图像采集模块,用于获取图像;
图像特征点识别模块,用于实时提取所述图像的图像信息;所述图像信息包括图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点中的一种或几种;
互动信息识别模块,用于将所述图像信息发送至服务器,并接收所述服务器返回的互动信息,其中所述互动信息包括文字信息、视频信息、动画特效、图片信息、音频信息中的一种或几种;
增强现实模块,用于将所述互动信息与所述图像叠加以获得增强现实信息;以及,
显示模块,用于渲染显示所述增强现实信息。
与现有技术相比,本发明的积极效果如下:
1、本发明的基于增强现实技术实现互动的方法,终端用户在分享互动信息的过程中,当一用户身处相同场景或取景相同事物时,即可在终端所显示的场景或事物上直接浮现出其他用户对于该场景或事物的相关注释,并且注释呈现的形式也多种多样,包括了图像、文字、视频、音频、动画特效等,满足用户从全方位多角度地了解取景事物的相关信息,使得用户获取的互动信息更具有画面感,用户体验好。
2、用户可以直接在所展现的增强现实信息内容上添加评论,回复和收藏,无须另外开启页面操作,让用户的操作体验更真实、便捷。
3、本发明还设计了三维虚拟物体的渲染呈现,将场景中的二维图像渲染成三维造型,并可根据终端取景角度的倾斜和移动进行实施追踪呈现,增加了画面感,提升用户体验。
附图说明
图1为实施例1的基于增强现实技术实现互动的方法的流程图;
图2为实施例2的基于增强现实技术实现互动的方法的流程图;
图3为实施例3的基于增强现实技术实现互动的方法的流程图;
图4为实施例4的基于增强现实技术实现互动的方法的流程图;
图5为实施例5的基于增强现实技术实现互动的方法的流程图;
图6为实施例6的基于增强现实技术实现互动的方法的流程图;
图7为实施例7的基于增强现实技术实现互动的系统的结构框图;
图8为实施例8的基于增强现实技术实现互动的系统的结构框图;
图9为实施例9的基于增强现实技术实现互动的终端的结构框图;
图10为实施例10的基于增强现实技术实现互动的终端的结构框图。
具体实施方式
下面结合具体实施例,进一步阐述本发明。应理解,这些实施例仅用于说明本发明而不用于限制本发明的范围。此外应理解,在阅读了本发明讲授的内容之后,本领域技术人员可以对本发明作各种改动或修改,这些等价形式同样落于本申请所附权利要求书所限定的范围。
关于实施例的场景说明如下:
用户A:拍摄了M公司的办公场景,包括桌椅排列、办公环境等;
同事B(用户A的同事):拍摄了贴于墙上的公司logo;
同事C(用户A的同事):拍摄了自己办公桌上的小汽车模型;
同事D(用户A的同事):拍摄了办公室照片d,照片d中包含了办公场景、贴于办公桌围栏上的文件,文件中带有公司logo,以及,同事E的办公桌,该办公桌上放有与同事C一样的小汽车模型;
同事E(用户A的同事)具有与C同款的小汽车模型;
同事F(用户A的同事):拍摄了自己办公桌上的某饮料瓶;
同事G(用户A的同事):拍摄了同事E办公桌上的小汽车模型;
同事H(用户A的同事):拍摄了某模型店中的小汽车模型,该小汽车与同事E的小汽车为同款;
同事I(用户A的同事):用手机的摄像头对焦自己名片,提取名片上的公司logo。
实施例1
如图1所示,一个实施方式的基于增强现实技术实现互动的方法,包括以下步骤:
步骤S101,服务器接收第一终端上传的第一图像和互动信息,提取第一图像中的第一图像信息,并保存第一图像信息和与第一图像信息对应的互动信息,其中互动信息包括文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种;第一图像信息包括第一图像中物体表面的图像特征点、第一图像中三维物体的轮廓特征点、第一图像中环境的特征点中的一种或几种。
在本实施方式中,用户开启第一终端的摄像头,将第一终端的摄像头面对的事物拍摄下来,并对拍摄的照片加以带有文字、图片、视频、音频的相关描述和/或评论后,作为互动信息;然后将拍摄的照片作为第一图像及互动信息上传至服务器,服务器根据上传的第一图像提取图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等并存储,同时一并存储该第一图像信息对应的互动信息。
例如,当用户A身处某办公室中,用手机拍摄了其办公室的场景作为照片a,并给办公室的场景作了一段配音描述;其同事B用手机拍摄了贴于墙上的公司logo作为照片b,并添加了关于该公司的图文描述;其同事C用平板拍摄了自己办公桌上的小汽车模型作为照片c,并添加了关于该小汽车性能的文字描述。然后A、B、C分别将他们拍摄的照片和添加的描述信息上传至服务器,服务器提取照片中的图像信息并存储,如用户A拍摄的办公场景的桌椅排列特征信息(即环境的特征点),同事B拍摄的公司logo(即物体表面的图像特征点,主要为平面物体),同事C拍摄的小汽车模型(即三维物体的轮廓特征点),同时一并存储A、B、C对于拍摄照片的描述信息。
步骤S102,第二终端获取第二图像,并实时提取第二图像信息,将第二图像信息发送至服务器;第二图像信息包括第二图像中物体表面的图像特征点、第二图像中三维物体的轮廓特征点、第二图像中环境的特征点中的一种或几种。
在本实施方式中,用户可以开启第二终端的摄像头,对感兴趣的事物进行对焦以获取第二图像,或者对感兴趣的事物进行拍照或摄影以获取第二图像,同时第二终端实时提取图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等,然后第二终端自动将第二图像中物体表面的图像特征点、三维物体的轮廓特征点、图像中环境的特征点等发送至服务器。
例如,同事D身处该办公室中,用手机对办公室场景进行拍摄,拍摄的照片d中还包含了其贴于办公桌围栏上的文件,文件中带有公司logo;以及,同事E的办公桌,该办公桌上放有与同事C一样的小汽车模型。拍摄完毕后,手机实时自动提取照片d中的图像信息并发送至服务器。
步骤S103,服务器接收第二图像信息,并查找与第二图像信息相匹配的第一图像信息和与第一图像信息对应的互动信息。
在本实施方式中,当服务器接收到第二图像信息后,就会根据第二图像信息查找与之匹配的其他图像信息,并查找该图像信息所包含的互动信息。
例如,服务器接收到同事D的手机发送的图像信息后,开始比对找到,然后查找到由用户A、同事B、同事C手机上传后经服务器提取的、与之匹配的图像信息,以及对应这些图像信息的相关描述。
步骤S104,服务器将查找到的与第一图像信息对应的互动信息返回至第二终端。
例如,服务器将查找到的对应这些图像信息的相关描述返回至同事D的手机。
步骤S105,第二终端接收服务器返回的互动信息,并通过增强现实将互动信息与第二图像叠加以获得增强现实信息。
在本实施方式中,第二终端可以通过增强现实模块将互动信息与第二图像叠加,获得增强现实信息,增强现实信息可以提供用户全方位多角度地了解取景事物的相关信息,使画面增加立体感,提升用户体验。
步骤S106,第二终端显示增强现实信息。
例如,同事D的手机接收服务器返回的对应该些图像信息的相关描述,将相关描述与其拍摄的照片d叠加后,将增强现实信息显示在手机屏上,同事D就可以看到其拍摄的照片d中所包含的相关信息。
本实施方式的基于增强现实技术实现互动的方法,终端用户在分享互动信息的过程中,通过增强现实技术将图片信息、文字、视频、音频、动画特效与图像叠加,满足用户从全方位多角度地了解取景事物的相关信息,使得用户获取的互动信息更具有画面感,用户体验好。
关于动画特效作补充说明:例如当摄像头取景一朵鲜花,用户可以对其添加动画特效作为一种互动信息,该动画特效可以是该朵鲜花盛开的动态过程,用户可将该特效及相关文字说明作为互动信息一并上传至服务器。
实施例2
如图2所示,另一个实施方式的基于增强现实技术实现互动的方法,包括以下步骤:
步骤S201,服务器接收第一终端上传的第一图像和互动信息,提取第一图像中的第一图像信息,并保存第一图像信息和与第一图像信息对应的互动信息,其中互动信息包括文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种;第一图像信息包括第一图像中物体表面的图像特征点、第一图像中三维物体的轮廓特征点、第一图像中环境的特征点中的一种或几种。
在本实施方式中,用户开启第一终端的摄像头,将第一终端的摄像头面对的事物拍摄下来,并对拍摄的照片加以带有文字、图片、视频、音频的相关描述和/或评论后,作为互动信息;然后将拍摄的照片作为第一图像及互动信息上传至服务器,服务器根据上传的第一图像提取图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等并存储,同时一并存储该第一图像信息对应的互动信息。
例如,当用户A身处某办公室中,用手机拍摄了其办公室的场景作为照片a,并给办公室的场景作了一段配音描述;其同事B用手机拍摄了贴于墙上的公司logo作为照片b,并添加了关于该公司的图文描述;其同事C用平板拍摄了自己办公桌上的小汽车模型作为照片c,并添加了关于该小汽车性能的文字描述。然后A、B、C分别将他们拍摄的照片和添加的描述信息上传至服务器,服务器提取照片中的图像信息并存储,如用户A拍摄的办公场景的桌椅排列特征信息(即环境的特征点),同事B拍摄的公司logo(即物体表面的图像特征点,主要为平面物体),同事C拍摄的小汽车模型(即三维物体的轮廓特征点),同时一并存储A、B、C对于拍摄照片的描述信息。
步骤S202,第二终端获取第二图像,并实时提取第二图像信息,将第二图像信息发送至服务器;第二图像信息包括第二图像中物体表面的图像特征点、第二图像中三维物体的轮廓特征点、第二图像中环境的特征点中的一种或几种。
在本实施方式中,用户可以开启第二终端的摄像头,对感兴趣的事物进行对焦以获取第二图像,或者对感兴趣的事物进行拍照或摄影以获取第二图像,同时第二终端实时提取图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等,然后第二终端自动将第二图像中物体表面的图像特征点、三维物体的轮廓特征点、图像中环境的特征点等发送至服务器。
例如,同事D身处该办公室中,用手机对办公室场景进行拍摄,拍摄的照片d中还包含了其贴于办公桌围栏上的文件,文件中带有公司logo;以及,同事E的办公桌,该办公桌上放有与同事C一样的小汽车模型。拍摄完毕后,手机实时自动提取照片d中的图像信息并发送至服务器。
步骤S203,服务器接收第二图像信息,并查找与第二图像信息相匹配的第一图像信息和与第一图像信息对应的互动信息。
在本实施方式中,当服务器接收到第二图像信息后,就会根据第二图像信息查找与之匹配的其他图像信息,并查找该图像信息所包含的互动信息。
例如,服务器接收到同事D的手机发送的图像信息后,开始比对找到,然后查找到由用户A、同事B、同事C手机上传后经服务器提取的、与之匹配的图像信息,以及对应这些图像信息的相关描述。
步骤S204,如果服务器未查找到与第二终端发送的第二图像信息相匹配的第一图像信息,则服务器根据第二图像建立新的互动信息,以供将来其他用户查找。
例如,如果服务器接收到同事F的手机发送的其桌上某饮料的图像信息后,没有查找到与其相关的描述信息,则服务器可以继续接收同事F手机发送的照片f,并提取和存储照片f中的图像信息(如某饮料的包装logo和/或饮料瓶的三维轮廓),一并存储同事F对于该饮料的相关描述。
步骤S205,如果服务器查找到了与第二终端发送的第二图像信息相匹配的第一图像信息和与第一图像信息对应的互动信息,则将互动信息返回至第二终端。
例如,服务器接收到同事D的手机发送的图像信息后,开始比对找到,然后查找到由用户A、同事B、同事C手机上传后经服务器提取的、与之匹配的图像信息,以及对应这些图像信息的相关描述;然后服务器将查找到的对应这些图像信息的相关描述返回至同事D的手机。
步骤S206,第二终端接收服务器返回的互动信息,并通过增强现实将互动信息与第二图像叠加以获得增强现实信息。
在本实施方式中,第二终端可以通过增强现实模块将互动信息与第二图像叠加,获得增强现实信息,增强现实信息可以提供用户全方位多角度地了解取景事物的相关信息,使画面增加立体感,提升用户体验。
步骤S207,第二终端显示增强现实信息。
例如,同事D的手机接收服务器返回的对应该些图像信息的相关描述,将相关描述与其拍摄的照片d叠加后,将增强现实信息显示在手机屏上,同事D就可以看到其拍摄的照片d中所包含的相关信息。
本实施方式的基于增强现实技术实现互动的方法,终端用户在分享互动信息的过程中,通过增强现实技术将图片、文字、视频、音频、动画特效与图像叠加,满足用户从全方位多角度地了解取景事物的相关信息,使得用户获取的互动信息更具有画面感,用户体验好。
根据本发明实施例的用于移动终端的增强现实方法,服务器在未能查找到与用户取景事物的互动信息时,可以根据用户提交的图像提取图像中的特征以建立新的互动信息,不断丰富服务器上的互动信息,方便用户查找,提升了用户体验。
实施例3
如图3所示,再一个实施方式的基于增强现实技术实现互动的方法,包括以下步骤:
步骤S301,服务器接收第一终端上传的第一图像和互动信息,提取第一图像中的第一图像信息,并保存第一图像信息和与第一图像信息对应的互动信息,其中互动信息包括文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种;第一图像信息包括第一图像中物体表面的图像特征点、第一图像中三维物体的轮廓特征点、第一图像中环境的特征点中的一种或几种。
在本实施方式中,用户开启第一终端的摄像头,将第一终端的摄像头面对的事物拍摄下来,并对拍摄的照片加以带有文字、图片、视频、音频的相关描述和/或评论后,作为互动信息;然后将拍摄的照片作为第一图像及互动信息上传至服务器,服务器根据上传的第一图像提取图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等并存储,同时一并存储该第一图像信息对应的互动信息。
例如,当同事C用平板拍摄了自己办公桌上的小汽车模型作为照片c,并添加了关于该小汽车性能的文字描述。然后同事C将拍摄的照片和添加的描述信息上传至服务器,服务器提取照片中的图像信息并存储,如同事C拍摄的小汽车模型(即三维物体的轮廓特征点),同时一并存储C对于拍摄照片的描述信息。
步骤S302,第二终端获取第二图像,并实时提取第二图像信息,将第二图像信息发送至服务器;第二图像信息包括第二图像中物体表面的图像特征点、第二图像中三维物体的轮廓特征点、第二图像中环境的特征点中的一种或几种。
在本实施方式中,用户可以开启第二终端的摄像头,对感兴趣的事物进行对焦以获取第二图像,或者对感兴趣的事物进行拍照或摄影以获取第二图像,同时第二终端实时提取图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等,然后第二终端自动将第二图像中物体表面的图像特征点、三维物体的轮廓特征点、图像中环境的特征点等发送至服务器。
例如,同事G身处该办公室中,用手机对同事E办公桌上的小汽车模型进行拍摄。拍摄完毕后,手机实时自动提取照片g中的图像信息(小汽车模型的轮廓特征点)并发送至服务器。
步骤S303,服务器接收第二图像信息,并查找与第二图像信息相匹配的第一图像信息和与第一图像信息对应的互动信息。
在本实施方式中,当服务器接收到第二图像信息后,就会根据第二图像信息查找与之匹配的其他图像信息,并查找该图像信息所包含的互动信息。
例如,服务器接收到同事G的手机发送的图像信息后,开始比对找到,然后查找到由同事C手机上传后经服务器提取的、与之匹配的图像信息,以及对应这些图像信息的相关描述;然后服务器将查找到的对应这些图像信息的相关描述返回至同事G的手机。
步骤S304,服务器将查找到的与第一图像信息对应的互动信息返回至第二终端。
步骤S305,第二终端接收服务器返回的互动信息,并通过增强现实将互动信息与第二图像叠加以获得增强现实信息。
在本实施方式中,第二终端可以通过增强现实模块将互动信息与第二图像叠加,获得增强现实信息,增强现实信息可以提供用户全方位多角度地了解取景事物的相关信息,使画面增加立体感,提升用户体验。
步骤S306,第二终端显示增强现实信息。
例如,同事G的手机接收服务器返回的对应小汽车模型的相关描述,将相关描述与其拍摄的照片g叠加后,将增强现实信息显示在手机屏上,同事G就可以看到其拍摄的照片g中所包含的相关信息。
步骤S307,第二终端对增强现实信息进行操作,其中操作包括查看、评论、回复、收藏中的一种或几种;所述操作直接在所述第二终端所显示的增强现实信息的画面上进行;以及将操作后的社交信息发送至服务器。
例如,同事G对手机上显示的增强现实信息给予相关操作,包括进一步评论该小汽车模型的外观情况、回复同事C对于小汽车相关描述等,并且该操作直接在小汽车模型的画面中进行,不再另外开启页面,并将操作后的相关内容作为社交信息发送至服务器。
在本实施方式中,当用户查看第二终端上显示的增强现实信息时,可以对所展现的内容直接添加评论,回复和收藏,且在执行相关操作时,直接在所展现内容的画面上进行,无须另外开启页面操作。然后将该相关操作上传至服务器,以提供后续其他用户参考。
本实施方式的基于增强现实技术实现互动的方法,当用户查看终端上显示的增强现实信息时,可以对所展现的内容进一步添加评论,回复和收藏,然后将该相关操作上传至服务器,以提供后续其他用户参考,丰富互动信息的内容,并且由于所执行的操作直接在画面上进行,因此画面感生动真实,用户体验好。
实施例4
如图4所示,又一个实施方式的基于增强现实技术实现互动的方法,包括以下步骤:
步骤S401,服务器接收第一终端上传的第一图像和互动信息,提取第一图像中的第一图像信息,并保存第一图像信息和与第一图像信息对应的互动信息,其中互动信息包括文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种;第一图像信息包括第一图像中物体表面的图像特征点、第一图像中三维物体的轮廓特征点、第一图像中环境的特征点中的一种或几种。
在本实施方式中,用户开启第一终端的摄像头,将第一终端的摄像头面对的事物拍摄下来,并对拍摄的照片加以带有文字、图片、视频、音频的相关描述和/或评论后,作为互动信息;然后将拍摄的照片作为第一图像及互动信息上传至服务器,服务器根据上传的第一图像提取图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等并存储,同时一并存储该第一图像信息对应的互动信息。
例如,当同事C用平板拍摄了自己办公桌上的小汽车模型作为照片c,并添加了关于该小汽车性能的文字描述。然后同事C将拍摄的照片和添加的描述信息上传至服务器,服务器提取照片中的图像信息并存储,如同事C拍摄的小汽车模型(即三维物体的轮廓特征点),同时一并存储C对于拍摄照片的描述信息。
步骤S402,第二终端获取第二图像,并实时提取第二图像信息,将第二图像信息发送至服务器;第二图像信息包括第二图像中物体表面的图像特征点、第二图像中三维物体的轮廓特征点、第二图像中环境的特征点中的一种或几种。
在本实施方式中,用户可以开启第二终端的摄像头,对感兴趣的事物进行对焦以获取第二图像,或者对感兴趣的事物进行拍照或摄影以获取第二图像,同时第二终端实时提取图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等,然后第二终端自动将第二图像中物体表面的图像特征点、三维物体的轮廓特征点、图像中环境的特征点等发送至服务器。
例如,同事G身处该办公室中,用手机对同事E办公桌上的小汽车模型进行拍摄。拍摄完毕后,手机实时自动提取照片g中的图像信息(小汽车模型的轮廓特征点)并发送至服务器。
步骤S403,服务器接收第二图像信息,并查找与第二图像信息相匹配的第一图像信息和与第一图像信息对应的互动信息。
在本实施方式中,当服务器接收到第二图像信息后,就会根据第二图像信息查找与之匹配的其他图像信息,并查找该图像信息所包含的互动信息。
步骤S404,服务器将查找到的与第一图像信息对应的互动信息返回至第二终端。
例如,服务器接收到同事G的手机发送的图像信息后,开始比对找到,然后查找到由同事C手机上传后经服务器提取的、与之匹配的图像信息,以及对应这些图像信息的相关描述;然后服务器将查找到的对应这些图像信息的相关描述返回至同事G的手机。
步骤S405,第二终端接收服务器返回的互动信息,并通过增强现实将互动信息与第二图像叠加以获得增强现实信息。
在本实施方式中,第二终端可以通过增强现实模块将互动信息与第二图像叠加,获得增强现实信息,增强现实信息可以提供用户全方位多角度地了解取景事物的相关信息,使画面增加立体感,提升用户体验。
步骤S406,第二终端显示增强现实信息。
例如,同事G的手机接收服务器返回的对应该些图像信息的相关描述,将相关描述与其拍摄的照片g叠加后,将增强现实信息显示在手机屏上,同事G就可以看到其拍摄的照片g中所包含的相关信息。
步骤S407,第二终端对增强现实信息进行操作,其中操作包括查看、评论、回复、收藏中的一种或几种;所述操作直接在所述第二终端所显示的增强现实信息的画面上进行;以及将操作后的社交信息发送至服务器。
在本实施方式中,当用户查看第二终端上显示的增强现实信息时,可以对所展现的内容直接添加评论,回复和收藏,且在执行相关操作时,直接在所展现内容的画面上进行,无须另外开启页面操作。然后将该相关操作上传至服务器,以提供后续其他用户参考。
例如,同事G对手机上显示的增强现实信息给予相关操作,包括进一步评论该小汽车模型的外观情况、回复同事C对于小汽车相关描述等,并且该操作直接在小汽车模型的画面中进行,不再另外开启页面,并将操作后的相关内容作为社交信息发送至服务器。
步骤S408,第三终端获取第三图像,并实时提取第三图像信息,将第三图像信息发送至服务器;第三图像信息包括第三图像中物体表面的图像特征点、第三图像中三维物体的轮廓特征点、第三图像中环境的特征点中的一种或几种。
例如,同事H在某模型店中,用手机对模型店的小汽车模型进行拍摄,该小汽车与同事E的小汽车为同型号同款。拍摄完毕后,手机实时自动提取照片h中的图像信息(小汽车模型的轮廓特征点)并发送至服务器。
步骤S409,服务器接收第三图像信息,并查找与第三图像信息相匹配的第一图像信息和与第一图像信息对应的互动信息,以及进一步查询与第一图像信息相关的社交信息。
步骤S410,服务器将查找到的与第一图像信息对应的互动信息以及与第一图像信息相关的社交信息返回至第三终端。
例如,服务器接收到同事H的手机发送的图像信息后,开始比对找到,然后查找到由同事C手机上传后经服务器提取的、与之匹配的图像信息,以及对应这些图像信息的相关描述,进一步地查找到由同事G上传的关于该小汽车的相关评论和回复信息;然后服务器将查找到的对应该小汽车的相关描述、评论、回复等信息返回至同事H的手机。
步骤S411,第三终端接收服务器返回的互动信息和社交信息,并通过增强现实将互动信息和社交信息与第三图像叠加以获得增强现实信息;
步骤S412,第三终端显示增强现实信息。
例如,同事H的手机接收服务器返回的对应该图像信息的相关描述、评论、回复等信息,将相关描述、评论、回复的信息与其拍摄的照片h叠加后,将增强现实信息显示在手机屏上,同事H就可以看到其拍摄的照片h中所包含的相关信息,对于浮现照片h上的社交信息,同事H只需在屏幕上作出左右滑动的手势即可切换查看不同用户给予的评论和回复。
本实施方式的基于增强现实技术实现互动的方法,当取景事物已被其他用户添加评论、回复等社交信息时,则当前用户即可收到关于该事物的所有社交信息,且该社交信息与互动信息一并叠加在取景画面上,查看时只需在画面上直接滑动切换,用户体验好。
实施例5
如图5所示,一个实施方式的基于增强现实技术实现互动的方法,包括以下步骤:
步骤S501,服务器接收第一终端上传的第一图像和互动信息,提取第一图像中的第一图像信息,并保存第一图像信息和与第一图像信息对应的互动信息,其中互动信息包括文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种;第一图像信息包括第一图像中物体表面的图像特征点、第一图像中三维物体的轮廓特征点、第一图像中环境的特征点中的一种或几种。
在本实施方式中,用户开启第一终端的摄像头,将第一终端的摄像头面对的事物拍摄下来,并对拍摄的照片加以带有文字、图片、视频、音频的相关描述和/或评论后,作为互动信息;然后将拍摄的照片作为第一图像及互动信息上传至服务器,服务器根据上传的第一图像提取图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等并存储,同时一并存储该第一图像信息对应的互动信息。
例如,当同事B用手机拍摄了贴于墙上的公司logo作为照片b,并添加了关于该公司的图文介绍描述;然后B将其拍摄的照片和添加的描述信息上传至服务器,服务器提取照片中的图像信息并存储,如同事B拍摄的公司logo(即物体表面的图像特征点,主要为平面物体),同时一并存储B对于拍摄照片的描述信息。
步骤S502,服务器根据第一图像信息设置一个标识信息,每个标识信息对应一个三维模型。
例如,服务器根据公司logo的图像信息设置一个标示信息,该标示信息对应一个三维模型,即该公司logo的立体三维模型。
步骤S503,第二终端获取第二图像,并实时提取第二图像信息,将第二图像信息发送至服务器;第二图像信息包括第二图像中物体表面的图像特征点、第二图像中三维物体的轮廓特征点、第二图像中环境的特征点中的一种或几种。
在本实施方式中,用户可以开启第二终端的摄像头,对感兴趣的事物进行对焦以获取第二图像,或者对感兴趣的事物进行拍照或摄影以获取第二图像,同时第二终端实时提取图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等,然后第二终端自动将第二图像中物体表面的图像特征点、三维物体的轮廓特征点、图像中环境的特征点等发送至服务器。
例如,同事I用手机的摄像头对焦其名片,对焦后,手机实时自动提取对焦图像i中的图像信息(名片上的公司logo)并发送至服务器。
步骤S504,当服务器接收第二图像信息,并查找与第二图像信息相匹配的第一图像信息和与第一图像信息对应的互动信息的同时,服务器的信息处理模块识别出第一图像信息的标识信息,并分析出标识信息对应的三维模型;
例如,服务器接收到同事I的手机发送的图像信息后,开始比对找到,然后查找到由同事B手机上传后经服务器提取的、与之匹配的图像信息,以及对应这些图像信息的相关描述;同时,服务器的信息处理模块识别出该图像信息的标示信息,分析出该标示信息对应的公司logo三维立体模型;
步骤S505,信息处理模块获取标识信息对应的三维模型,将三维模型返回至第二终端;
步骤S506,第二终端接收服务器返回的三维模型和互动信息,并将三维模型渲染生成对应的虚拟物体,通过增强现实将虚拟物体与第二图像、互动信息叠加以获得增强现实信息;
步骤S507,第二终端显示增强现实信息。
例如,同事I的手机接收服务器返回的对应该图像信息的相关描述及公司logo三维立体模型,手机将公司logo三维立体模型渲染生成三维虚拟logo,然后将关于公司的相关介绍、三维虚拟logo与其拍摄的照片i叠加后,将增强现实信息显示在手机屏上,同事I就可以看到其拍摄的照片i中所包含的相关信息。
实施例6
如图6所示,又一个实施方式的基于增强现实技术实现互动的方法,包括以下步骤:
步骤S601,服务器接收第一终端上传的第一图像和互动信息,提取第一图像中的第一图像信息,并保存第一图像信息和与第一图像信息对应的互动信息,其中互动信息包括文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种;第一图像信息包括第一图像中物体表面的图像特征点、第一图像中三维物体的轮廓特征点、第一图像中环境的特征点中的一种或几种。
在本实施方式中,用户开启第一终端的摄像头,将第一终端的摄像头面对的事物拍摄下来,并对拍摄的照片加以带有文字、图片、视频、音频的相关描述和/或评论后,作为互动信息;然后将拍摄的照片作为第一图像及互动信息上传至服务器,服务器根据上传的第一图像提取图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等并存储,同时一并存储该第一图像信息对应的互动信息。
例如,当同事B用手机拍摄了贴于墙上的公司logo作为照片b,并添加了关于该公司的图文介绍描述;然后B将其拍摄的照片和添加的描述信息上传至服务器,服务器提取照片中的图像信息并存储,如同事B拍摄的公司logo(即物体表面的图像特征点,主要为平面物体),同时一并存储B对于拍摄照片的描述信息。
步骤S602,服务器根据第一图像信息设置一个标识信息,每个标识信息对应一个三维模型。
例如,服务器根据公司logo的图像信息设置一个标示信息,该标示信息对应一个三维模型,即该公司logo的立体三维模型。
步骤S603,第二终端获取第二图像,并实时提取第二图像信息,将第二图像信息发送至服务器;第二图像信息包括第二图像中物体表面的图像特征点、第二图像中三维物体的轮廓特征点、第二图像中环境的特征点中的一种或几种。
在本实施方式中,用户可以开启第二终端的摄像头,对感兴趣的事物进行对焦以获取第二图像,或者对感兴趣的事物进行拍照或摄影以获取第二图像,同时第二终端实时提取图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等,然后第二终端自动将第二图像中物体表面的图像特征点、三维物体的轮廓特征点、图像中环境的特征点等发送至服务器。
例如,同事I用手机的摄像头对焦其名片,对焦后,手机实时自动提取对焦图像i中的图像信息(名片上的公司logo)并发送至服务器。
步骤S604,服务器接收第二图像信息,并查找与第二图像信息相匹配的第一图像信息和与第一图像信息对应的互动信息。
在本实施方式中,当服务器接收到第二图像信息后,就会根据第二图像信息查找与之匹配的其他图像信息,并查找该图像信息所包含的互动信息。
例如,服务器接收到同事I的手机发送的图像信息后,开始比对找到,然后查找到由同事B手机上传后经服务器提取的、与之匹配的图像信息,以及对应这些图像信息的相关公司介绍。
步骤S605,服务器将查找到的与第一图像信息对应的互动信息返回至第二终端。
步骤S606,第二终端接收服务器返回的互动信息,并通过增强现实将互动信息与第二图像叠加以获得增强现实信息。
在本实施方式中,第二终端可以通过增强现实模块将互动信息与第二图像叠加,获得增强现实信息,增强现实信息可以提供用户全方位多角度地了解取景事物的相关信息,该信息以文字、图片、视频等方式呈现,使画面增加立体感,提升用户体验。
步骤S607,第二终端显示增强现实信息。
例如,同事I的手机接收服务器返回的对应该图像信息的相关描述,手机将公司logo三维立体模o,然后将关于公司的相关介绍与其拍摄的照片i叠加后,将增强现实信息显示在手机屏上,同事I就可以看到其拍摄的照片i中该公司的相关介绍。
步骤S608,第二终端对增强现实信息进行操作,其中操作包括查看、评论、回复、收藏中的一种或几种;所述操作直接在所述第二终端所显示的增强现实信息的画面上进行;以及将操作后的社交信息发送至服务器。
在本实施方式中,当用户查看第二终端上显示的增强现实信息时,可以对所展现的内容直接添加评论,回复和收藏,且在执行相关操作时,直接在所展现内容的画面上进行,无须另外开启页面操作。然后将该相关操作上传至服务器,以提供后续其他用户参考。
例如,同事I对手机上显示的增强现实信息进行相关操作,包括进一步补充完善该公司的产品介绍,对手机上显示的增强现实信息进行收藏等,并且该操作直接在公司logo的画面中进行不再另外开启页面,并将操作后的内容作为社交信息发送至服务器。
步骤S609,第三终端获取第三图像,并实时提取第三图像信息,将第三图像信息发送至服务器;第三图像信息包括第三图像中物体表面的图像特征点、第三图像中三维物体的轮廓特征点、第三图像中环境的特征点中的一种或几种。
例如,客户Z在某商场看到了该公司的宣传海报,用手机对海报中的公司logo进行对焦,对焦完成后,手机实时自动提取照片z中的图像信息(及公司logo)并发送至服务器。
步骤S610,服务器接收第三图像信息,并查找与第三图像信息相匹配的第一图像信息、与第一图像信息对应的互动信息、以及与第一图像信息相关的社交信息的同时,服务器的信息处理模块识别出第一图像信息的标识信息,并分析出标识信息对应的三维模型;
例如,服务器接收到客户Z的手机发送的图像信息后,开始比对找到,然后查找到由同事B手机上传后经服务器提取的、与之匹配的图像信息,对应这些图像信息的相关公司介绍,以及查找到由同事I手机上传的关于该公司的相关产品补充说明;同时,服务器的信息处理模块识别出该图像信息的标示信息,分析出该标示信息对应的公司logo三维立体模型;
步骤S611,信息处理模块获取标识信息对应的三维模型,将三维模型返回至第三终端。
步骤S612,第三终端接收服务器返回的三维模型、互动信息和社交信息,并将三维模型渲染生成对应的虚拟物体;
步骤S613,虚拟物体根据第三图像信息的方位,在方位上实时追踪呈现;
步骤S614,第三终端通过增强现实将虚拟物体与第三图像、互动信息、社交信息叠加以获得增强现实信息。
步骤S615,第三终端显示增强现实信息。
例如,客户Z的手机接收服务器返回的对应该图像信息的相关描述、产品补充介绍、以及logo三维立体模型,手机将公司logo三维立体模型渲染生成三维虚拟logo,该三维虚拟logo呈现在手机对焦的logo上,当手机上下左右前后不同角度移动或海报被移动时,只要手机的对焦画面中包含公司logo,该三维虚拟logo始终追踪呈现在手机对焦的的logo上。然后将关于公司的相关介绍、产品补充介绍、三维虚拟logo与其拍摄的照片z加后,将增强现实信息显示在手机屏上,客户Z就可以看到其拍摄的照片z中所包含的相关信息。
本实施方式的基于增强现实技术实现互动的方法,针对取景事物的图像信息添加了标识信息,对应一个三维模型,当呈现增强现实信息时,画面上渲染生成三维虚拟物体,并且根据图像信息的移动,三维虚拟物体可实现实时追踪,使画面感更生动立体。
实施例7
如图7所示,一个实施方式的基于增强现实技术实现互动的系统,包括第一终端100,服务器200和第二终端300。
第一终端100,用于将第一图像和互动信息上传至服务器,其中互动信息包括文字信息、视频信息、动画特效、图片信息、音频信息中的一种或几种;第一图像信息包括第一图像中物体表面的图像特征点、第一图像中三维物体的轮廓特征点、第一图像中环境的特征点中的一种或几种;
在本实施方式中,用户开启第一终端100的摄像头,将第一终端100的摄像头面对的事物拍摄下来,并对拍摄的照片加以带有文字、图片、视频、音频的相关描述和/或评论后,作为互动信息;然后将拍摄的照片作为第一图像及互动信息上传至服务器服务器200。
例如,当同事C用平板拍摄了自己办公桌上的小汽车模型作为照片c,并添加了关于该小汽车性能的文字描述。然后同事C将拍摄的照片和添加的描述信息上传至服务器。
服务器200,用于接收第一图像和互动信息,提取第一图像中的第一图像信息,并保存第一图像信息和与第一图像信息对应的互动信息;
在本实施方式中,服务器200接收第一终端100上传的第一图像和互动信息,根据上传的第一图像提取图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等并存储,同时一并存储该第一图像信息对应的互动信息。
例如,服务器提取照片C中的图像信息并存储,如同事C拍摄的小汽车模型(即三维物体的轮廓特征点),同时一并存储C对于拍摄照片的描述信息。
第二终端300,用于获取第二图像,并实时提取第二图像信息,将第二图像信息发送至服务器;第二图像信息包括第二图像中物体表面的图像特征点、第二图像中三维物体的轮廓特征点、第二图像中环境的特征点中的一种或几种;
在本实施方式中,用户可以开启第二终端的摄像头,对感兴趣的事物进行对焦以获取第二图像,或者对感兴趣的事物进行拍照或摄影以获取第二图像,同时第二终端实时提取第二图像信息,包括:图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等;然后第二终端自动将第二图像信息发送至服务器。
例如,同事G身处该办公室中,用手机对同事E办公桌上的小汽车模型进行拍摄。拍摄完毕后,手机实时自动提取照片g中的图像信息(小汽车模型的轮廓特征点)并发送至服务器。
服务器200进一步还包括信息处理模块201,服务器根据第一图像信息设置一个标识信息,每个标识信息对应一个三维模型;信息处理模块201,用于当服务器接收第二图像信息,并查找与第二图像信息相匹配的第一图像信息和与第一图像对应的互动信息的同时,识别出第一图像信息的标识信息,并分析出标识信息对应的三维模型;
例如,服务器200的信息处理模块201根据小汽车模型的图像信息设置一个标示信息,该标示信息对应一个三维模型,即小汽车模型的立体三维模型。当服务器接收到同事G的手机发送的图像信息后,开始比对找到,然后查找到由同事C手机上传后经服务器提取的、与之匹配的图像信息,以及对应这些图像信息的相关描述;同时,服务器的信息处理模块识别出该图像信息的标示信息,分析出该标示信息对应的小汽车模型的三维立体模型。
信息处理模块201进一步用于获取标识信息对应的三维模型,将三维模型返回至第二终端;
第二终端300进一步用于接收服务器返回的三维模型和互动信息,并将三维模型渲染生成对应的虚拟物体,通过增强现实将虚拟物体与第二图像、互动信息叠加以获得增强现实信息;以及显示增强现实信息,并对增强现实信息进行操作,其中操作包括查看、评论、回复、收藏中的一种或几种;以及将操作后的社交信息发送至服务器。
例如,同事G的手机接收服务器返回的对应该图像信息的相关描述及小汽车模型的三维立体模型,手机将小汽车三维立体模型渲染生成三维虚拟汽车,然后将关于小汽车的介绍、三维虚拟汽车与其拍摄的照片g叠加后,将增强现实信息显示在手机屏上,同事G就可以看到其拍摄的照片g中所包含的相关信息。同事G对手机上显示的增强现实信息给予相关操作,包括进一步评论该小汽车模型的外观情况、回复同事C对于小汽车相关描述等,并将操作后的相关内容作为社交信息发送至服务器。
实施例8
如图8所示,一个实施方式的基于增强现实技术实现互动的系统,包括第一终端100,服务器200,第二终端300和第三终端400。
第一终端100,用于将第一图像和互动信息上传至服务器,其中互动信息包括文字信息、视频信息、动画特效、图片信息、音频信息中的一种或几种;第一图像信息包括第一图像中物体表面的图像特征点、第一图像中三维物体的轮廓特征点、第一图像中环境的特征点中的一种或几种;
在本实施方式中,用户开启第一终端100的摄像头,将第一终端100的摄像头面对的事物拍摄下来,并对拍摄的照片加以带有文字、图片、视频、音频的相关描述和/或评论后,作为互动信息;然后将拍摄的照片作为第一图像及互动信息上传至服务器服务器200。
例如,当同事C用平板拍摄了自己办公桌上的小汽车模型作为照片c,并添加了关于该小汽车性能的文字描述。然后同事C将拍摄的照片和添加的描述信息上传至服务器。
服务器200,用于接收第一图像和互动信息,提取第一图像中的第一图像信息,并保存第一图像信息和与第一图像信息对应的互动信息;
在本实施方式中,服务器200接收第一终端100上传的第一图像和互动信息,根据上传的第一图像提取图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等并存储,同时一并存储该第一图像信息对应的互动信息。
例如,服务器提取照片c中的图像信息并存储,如同事C拍摄的小汽车模型(即三维物体的轮廓特征点),同时一并存储C对于拍摄照片的描述信息。
第二终端300,用于获取第二图像,并实时提取第二图像信息,将第二图像信息发送至服务器;第二图像信息包括第二图像中物体表面的图像特征点、第二图像中三维物体的轮廓特征点、第二图像中环境的特征点中的一种或几种;
在本实施方式中,用户可以开启第二终端的摄像头,对感兴趣的事物进行对焦以获取第二图像,或者对感兴趣的事物进行拍照或摄影以获取第二图像,同时第二终端实时提取图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等,然后第二终端自动将第二图像中物体表面的图像特征点、三维物体的轮廓特征点、图像中环境的特征点等发送至服务器。
例如,同事G身处该办公室中,用手机对同事E办公桌上的小汽车模型进行拍摄。拍摄完毕后,手机实时自动提取照片g中的图像信息(小汽车模型的轮廓特征点)并发送至服务器。
服务器200进一步用于接收第二图像信息,并查找与第二图像信息相匹配的第一图像信息和与第一图像信息对应的互动信息,如果服务器未查找到与第二终端发送的第二图像信息相匹配的第一图像信息,则服务器根据第二图像建立新的互动信息,以供将来其他用户查找;如果查找到与第二图像信息相匹配的第一图像信息和与第一图像信息对应的互动信息,则将与第一图像信息对应的互动信息返回至第二终端;
例如,服务器接收到同事G的手机发送的图像信息后,开始比对找到,没有查找到与其相关的描述信息,则服务器可以继续接收同事G手机发送的照片g,并提取和存储照片g中的图像信息(如小汽车模型的三维轮廓),一并存储同事G对于该小汽车模型的相关描述。当其他用户需要了解小汽车模型的相关信息,就可以通过服务器查找到。如果服务器找到了由同事C手机上传后经服务器提取的、与之匹配的图像信息,以及对应这些图像信息的相关描述,则将查找到的对应这些图像信息的相关描述返回至同事G的手机。
第二终端300进一步用于接收服务器返回的互动信息,并通过增强现实将互动信息与第二图像叠加以获得增强现实信息;以及显示增强现实信息,并对增强现实信息进行操作,其中操作包括查看、评论、回复、收藏中的一种或几种;所述操作直接在所述第二终端所显示的增强现实信息的画面上进行;以及将操作后的社交信息发送至服务器。
在本实施方式中,当用户查看第二终端上显示的增强现实信息时,可以对所展现的内容直接添加评论,回复和收藏,且在执行相关操作时,直接在所展现内容的画面上进行,无须另外开启页面操作。然后将该相关操作上传至服务器,以提供后续其他用户参考。
例如,同事G对手机上显示的增强现实信息给予相关操作,包括进一步评论该小汽车模型的外观情况、回复同事C对于小汽车相关描述等,并且该操作直接在小汽车模型的画面中进行不再另外开启页面,然后将操作后的相关内容作为社交信息发送至服务器。
第三终端400用于获取第三图像,并实时提取第三图像信息,将第三图像信息发送至服务器;第三图像信息包括第三图像中物体表面的图像特征点、第三图像中三维物体的轮廓特征点、第三图像中环境的特征点中的一种或几种。
在本实施方式中,用户可以开启第三终端的摄像头,对感兴趣的事物进行对焦以获取第二图像,或者对感兴趣的事物进行拍照或摄影以获取第三图像,同时第三终端实时提取第三图像信息,包括:图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点等;然后第三终端自动将第二图像信息发送至服务器。
例如,同事H在某模型店中,用手机对模型店的小汽车模型进行拍摄,该小汽车与同事E的小汽车为同型号同款。拍摄完毕后,手机实时自动提取照片h中的图像信息(小汽车模型的轮廓特征点)并发送至服务器。
服务器200进一步还包括信息处理模块201,服务器根据第一图像信心设置一个标识信息,每个标识信息对应一个三维模型;信息处理模块,用于当服务器接收第三图像信息,并查找与第三图像信息相匹配的第一图像信息、与第一图像信息对应的互动信息,以及与第一图像信息相关的社交信息的同时,识别出第一图像信息的标识信息,并分析出标识信息对应的三维模型;
例如,服务器200的信息处理模块201根据小汽车模型的图像信息设置一个标示信息,该标示信息对应一个三维模型,即小汽车模型的立体三维模型。当服务器接收到同事H的手机发送的图像信息后,开始比对找到,然后查找到由同事C手机上传后经服务器提取的、与之匹配的图像信息,以及对应这些图像信息的相关描述,进一步地查找到由同事G上传的关于该小汽车的相关评论和回复信息;同时,服务器的信息处理模块识别出该图像信息的标示信息,分析出该标示信息对应的小汽车模型的三维立体模型。
信息处理模块201进一步用于获取标识信息对应的三维模型,将三维模型返回至第三终端;
本实施例中,服务器200的信息处理模块201将查找到的对应该小汽车模型的三维立体模型返回至同事H的手机。
第三终端400进一步用于接收服务器返回的三维模型、互动信息和社交信息,并将三维模型渲染生成对应的虚拟物体,通过增强现实将虚拟物体与第三图像、互动信息、社交信息叠加以获得增强现实信息;以及显示增强现实信息。
例如,同事H的手机接收服务器返回的对应小汽车模型的相关描述、评论、回复,以及三维立体模型等信息,手机将小汽车三维立体模型渲染生成三维虚拟汽车,然后将关于小汽车的介绍、三维虚拟汽车与其拍摄的照片h叠加后,将增强现实信息显示在手机屏上,同事H就可以看到其拍摄的照片h中所包含的相关信息。
第三终端400还进一步用于根据虚拟物体在第三图像或者环境的特征点或者物体的轮廓的方位,将虚拟物体在方位上实时追踪呈现,并与第三图像、互动信息、社交信息叠加以获得增强现实信息。
例如,该三维虚拟汽车呈现在手机拍摄的照片h的小汽车模型上,当手机中的照片h放大、缩小或旋转以至小汽车模型的位置发生变化时时,只要手机照片h中包含小汽车模型,该三维虚拟汽车始终追踪呈现在手机照片的小汽车模型上。然后将关于小汽车模型的相关介绍、同事G的相关评论、三维虚拟汽车与其拍摄的照片h加后,将增强现实信息显示在手机屏上,同事H就可以看到其拍摄的照片h中所包含的相关信息。
本实施例中所提及的第一终端、第二终端、第三终端可以为手机、平板电脑、笔记本电脑、电子阅读器、智能手表、智能车载等。
实施例9
如图9所示,一个实施方式的基于增强现实技术实现互动的终端,包括:图像采集模块301、图像特征点识别模块302、互动信息识别模块303、增强现实模块304、显示模块305和社交信息操作模块306。
图像采集模块301,用于获取图像;
在本实施方式中,图像采集模块301可以为摄像头,通过对焦、拍照、摄像功能获取用户所在场景和/或场景中的图像;
图像特征点识别模块302,用于实时提取图像的图像信息;图像信息包括图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点中的一种或几种;
互动信息识别模块303,用于将图像信息发送至服务器,并接收服务器返回的互动信息,其中互动信息包括文字信息、视频信息、动画特效、图片信息、音频信息中的一种或几种;
增强现实模块304,用于将互动信息与图像叠加以获得增强现实信息;
显示模块305,用于显示增强现实信息;
在本实施方式中,移动终端可以通过增强现实模块304将互动信息与终端所获取的图像叠加,获得增强现实信息,满足用户从全方位多角度地了解取景事物的相关信息,使得用户获取的互动信息更具有画面感和真实感,用户体验好。
社交信息操作模块306,用于对增强现实信息进行操作,其中操作包括查看、评论、回复、收藏中的一种或几种,所述操作直接在所述第二终端所显示的增强现实信息的画面上进行;并将操作后的社交信息发送至服务器。
在本实施方式中,用户可通过终端上的社交信息操作模块306,对所展现的增强现实信息内容直接添加评论,回复和收藏,且在执行相关操作时,直接在所展现内容的画面上进行,无须另外开启页面操作。然后将该相关操作上传至服务器,以提供后续其他用户参考。
实施例10
如图10所示,一个实施方式的基于增强现实技术实现互动的终端,在图9所示的基础上还包括:三维渲染模块307和虚拟物体追踪模块308。
三维渲染模块307,用于接收服务器的信息处理模块201返回的三维模型,并将三维模型渲染生成对应的虚拟物体;增强现实模块进一步用于将虚拟物体与图像、互动信息、社交信息叠加以获得增强现实信息。
在本实施方式中,三维渲染模块307将三维模型渲染生成虚拟物体,使其与终端所获取的图像叠加,使图像充满立体感和趣味性,提升用户体验。
虚拟物体追踪模块308,用于根据虚拟物体在图像信息的方位,将虚拟物体在方位上实时追踪呈现。
在本实施方式中,虚拟物体追踪模块308根据终端所获取图像中对应图像信息进行实施追踪,多角度多方位的呈现虚拟物体,增加了画面感,用户体验好。
虽然本发明已将较佳实施例揭示如上,然其并非用以限定本发明的内容,任何熟悉此技艺者,在不脱离本发明的主要精神和内容范围内,当可作各种更动与润饰,因此发明的保护范围应以申请专利的实际权利要求范围为准。

Claims (20)

1.一种基于增强现实技术实现互动的方法,其特征在于,包括以下步骤:
服务器接收第一终端上传的第一图像和互动信息,提取所述第一图像中的第一图像信息,并保存第一图像信息和与第一图像信息对应的互动信息,其中所述互动信息包括文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种;所述第一图像信息包括第一图像中物体表面的图像特征点、第一图像中三维物体的轮廓特征点、第一图像中环境的特征点中的一种或几种;
第二终端获取第二图像,并实时提取第二图像信息,将所述第二图像信息发送至所述服务器;所述第二图像信息包括第二图像中物体表面的图像特征点、第二图像中三维物体的轮廓特征点、第二图像中环境的特征点中的一种或几种;
所述服务器接收所述第二图像信息,并查找与所述第二图像信息相匹配的第一图像信息和所述与第一图像信息对应的互动信息,以及将所述与第一图像信息对应的互动信息返回至所述第二终端;
所述第二终端接收所述服务器返回的所述互动信息,并通过增强现实将所述互动信息与所述第二图像叠加以获得增强现实信息;以及,
所述第二终端显示所述增强现实信息。
2.根据权利要求1所述的一种基于增强现实技术实现互动的方法,其特征在于,还包括以下步骤:
如果所述服务器未查找到与所述第二终端发送的第二图像信息相匹配的第一图像信息,则所述服务器根据所述第二图像建立新的互动信息。
3.根据权利要求1所述的一种基于增强现实技术实现互动的方法,其特征在于,还包括以下步骤:
所述第二终端对所述增强现实信息进行操作,其中所述操作包括查看、评论、回复、收藏中的一种或几种;所述操作直接在所述第二终端所显示的增强现实信息的画面上进行;
所述第二终端将所述操作后的社交信息发送至服务器。
4.根据权利要求3所述的一种基于增强现实技术实现互动的方法,其特征在于,还包括以下步骤:
第三终端获取第三图像,并实时提取所述第三图像信息,将所述第三图像信息发送至所述服务器;所述第三图像信息包括第三图像中物体表面的图像特征点、第三图像中三维物体的轮廓特征点、第三图像中环境的特征点中的一种或几种;
所述服务器接收所述第三图像信息,并查找与所述第三图像信息相匹配的第一图像信息和所述与第一图像信息对应的互动信息,以及进一步查询与所述第一图像信息相关的社交信息,然后将所述与第一图像信息对应的互动信息以及与所述第一图像信息相关的社交信息返回至所述第三终端;
所述第三终端接收所述服务器返回的所述互动信息和所述社交信息,并通过增强现实将所述互动信息、所述社交信息与所述第三图像叠加以获得增强现实信息;以及,
所述第三终端显示所述增强现实信息。
5.根据权利要求1-3中任一项所述的一种基于增强现实技术实现互动的方法,其特征在于,还包括以下步骤:
根据所述第一图像信息设置一个标识信息,每个所述标识信息对应一个三维模型;
当所述服务器接收所述第二图像信息,并查找与所述第二图像信息相匹配的第一图像信息和与第一图像信息对应的互动信息的同时,所述服务器的信息处理模块识别出所述第一图像信息的标识信息,并分析出所述标识信息对应的所述三维模型;
所述信息处理模块获取所述标识信息对应的所述三维模型,将所述三维模型返回至所述第二终端;
所述第二终端接收所述信息处理模块返回的所述三维模型,并将所述三维模型渲染生成对应的虚拟物体,通过增强现实将所述虚拟物体与所述第二图像、所述互动信息叠加以获得增强现实信息;以及,
所述第二终端显示所述增强现实信息。
6.根据权利要求5所述的一种基于增强现实技术实现互动的方法,其特征在于,还包括以下步骤:
所述虚拟物体根据所述第二图像信息的方位,在所述方位上实时追踪呈现,并与所述第二图像、所述互动信息叠加以获得增强现实信息。
7.根据权利要求4所述的一种基于增强现实技术实现互动的方法,其特征在于,还包括以下步骤:
根据所述第一图像信息设置一个标识信息,每个所述标识信息对应一个三维模型;
当所述服务器接收所述第三图像信息,并查找与所述第三图像信息相匹配的第一图像信息、与第一图像信息对应的互动信息和与所述第一图像信息相关的社交信息的同时,所述服务器的信息处理模块识别出所述第一图像信息的标识信息,并分析出所述标识信息对应的所述三维模型;
所述信息处理模块获取所述标识信息对应的所述三维模型,将所述三维模型返回至所述第三终端;
所述第三终端接收所述信息处理模块返回的所述三维模型,并将所述三维模型渲染生成对应的虚拟物体,通过增强现实将所述虚拟物体与所述第三图像、所述互动信息、所述社交信息叠加以获得增强现实信息;以及,
所述第三终端显示所述增强现实信息。
8.根据权利要求7所述的一种基于增强现实技术实现互动的方法,其特征在于,还包括以下步骤:
所述虚拟物体根据所述第三图像信息的方位,在所述方位上实时追踪呈现,并与所述第三图像、所述互动信息、所述社交信息叠加以获得增强现实信息。
9.一种基于增强现实技术实现互动的系统,其特征在于,包括:
第一终端,用于将第一图像和互动信息上传至服务器,其中所述互动信息包括文字信息、视频信息、动画特效、图片信息、音频信息中的一种或几种;所述第一图像信息包括第一图像中物体表面的图像特征点、第一图像中三维物体的轮廓特征点、第一图像中环境的特征点中的一种或几种;
服务器,用于接收第一图像和互动信息,提取所述第一图像中的第一图像信息,并保存第一图像信息和与第一图像信息对应的互动信息;所述第一图像信息包括第一图像中物体表面的图像特征点、第一图像中三维物体的轮廓特征点、第一图像中环境的特征点中的一种或几种;
第二终端,用于获取第二图像,并实时提取第二图像信息,将所述第二图像信息发送至所述服务器;所述第二图像信息包括第二图像中物体表面的图像特征点、第二图像中三维物体的轮廓特征点、第二图像中环境的特征点中的一种或几种;所述服务器进一步用于接收所述第二图像信息,并查找与所述第二图像信息相匹配的第一图像信息和与第一图像信息对应的互动信息,以及将所述与第一图像信息对应的互动信息返回至所述第二终端;
所述第二终端进一步用于接收所述服务器返回的所述互动信息,并通过增强现实将所述互动信息与所述第二图像叠加以获得增强现实信息;以及渲染显示所述增强现实信息。
10.根据权利要求9所述的一种基于增强现实技术实现互动的系统,其特征在于,
所述服务器还用于在未查找到与所述第二终端发送的第二图像信息相匹配的第一图像信息时,根据所述第二图像建立新的互动信息。
11.根据权利要求9所述的一种基于增强现实技术实现互动的系统,其特征在于,
所述第二终端还用于对所述增强现实信息进行操作,其中所述操作包括查看、评论、回复、收藏中的一种或几种;所述操作直接在所述第二终端所显示的增强现实信息的画面上进行;以及将所述操作后的社交信息发送至服务器。
12.根据权利要求11所述的一种基于增强现实技术实现互动的系统,其特征在于,还包括第三终端,用于获取第三图像,并实时提取所述第三图像信息,将所述第三图像信息发送至所述服务器;所述第三图像信息包括第三图像中物体表面的图像特征点、第三图像中三维物体的轮廓特征点、第三图像中环境的特征点中的一种或几种;
所述服务器进一步用于接收所述第三图像信息,并查找与所述第三图像信息相匹配的第一图像信息和与第一图像信息对应的互动信息,以及进一步查询与所述第一图像信息相关的社交信息,然后将所述与第一图像信息对应的互动信息以及与所述第一图像信息相关的社交信息返回至所述第三终端;
所述第三终端进一步用于接收所述服务器返回的所述互动信息和所述社交信息,并通过增强现实将所述互动信息和所述社交信息与所述第三图像叠加以获得增强现实信息;以及显示所述增强现实信息。
13.根据权利要求9-11中任一项所述的一种基于增强现实技术实现互动的系统,其特征在于,所述服务器还包括信息处理模块;
所述第一图像信息设有一个标识信息,每个所述标识信息对应一个三维模型;
所述信息处理模块,用于当服务器接收所述第二图像信息,并查找与所述第二图像信息相匹配的第一图像信息和与第一图像对应的互动信息的同时,识别出所述第一图像信息的标识信息,并分析出所述标识信息对应的所述三维模型;
所述信息处理模块进一步用于获取所述标识信息对应的所述三维模型,将所述三维模型返回至所述第二终端;
所述第二终端用于接收所述信息处理模块返回的所述三维模型,并将所述三维模型渲染生成对应的虚拟物体,通过增强现实将所述虚拟物体与所述第二图像、所述互动信息叠加以获得增强现实信息;以及显示所述增强现实信息。
14.根据权利要求13所述的一种基于增强现实技术实现互动的系统,其特征在于,
所述第二终端还用于根据所述虚拟物体在所述第二图像信息的方位,将所述虚拟物体在所述方位上实时追踪呈现,并与所述第二图像或者环境或者物体、所述互动信息叠加以获得增强现实信息。
15.根据权利要求12所述的一种基于增强现实技术实现互动的系统,其特征在于,所述服务器还包括信息处理模块;
所述第一图像信息设有一个标识信息,每个所述标识信息对应一个三维模型;
所述信息处理模块,用于当服务器接收所述第三图像信息,并查找与所述第三图像信息相匹配的第一图像信息、与第一图像信息对应的互动信息和与所述第一图像信息相关的社交信息的同时,识别出所述第一图像信息的标识信息,并分析出所述标识信息对应的所述三维模型;
所述信息处理模块进一步用于获取所述标识信息对应的所述三维模型,将所述三维模型返回至所述第三终端;
所述第三终端用于接收所述信息处理模块返回的所述三维模型,并将所述三维模型渲染生成对应的虚拟物体,通过增强现实将所述虚拟物体与所述第三图像、所述互动信息、所述社交信息叠加以获得增强现实信息;以及显示所述增强现实信息。
16.根据权利要求15所述的一种基于增强现实技术实现互动的系统,其特征在于,
所述第三终端还用于根据所述虚拟物体在所述第三图像信息的方位,将所述虚拟物体在所述方位上实时追踪呈现,并与所述第三图像、所述互动信息、所述社交信息叠加以获得增强现实信息。
17.一种终端,其特征在于,包括:
图像采集模块,用于获取图像;
图像特征点识别模块,用于实时提取所述图像的图像信息;所述图像信息包括图像中物体表面的图像特征点、图像中三维物体的轮廓特征点、图像中环境的特征点中的一种或几种;
互动信息识别模块,用于将所述图像信息发送至服务器,并接收所述服务器返回的互动信息,其中所述互动信息包括文字信息、视频信息、动画特效、图片信息、音频信息中的一种或几种;
增强现实模块,用于将所述互动信息与所述图像叠加以获得增强现实信息;以及,
显示模块,用于渲染显示所述增强现实信息。
18.根据权利要求17所述的一种终端,其特征在于,还包括:
社交信息操作模块,用于对所述增强现实信息进行操作,其中所述操作包括查看、评论、回复、收藏中的一种或几种,并将所述操作后的社交信息发送至所述服务器。
19.根据权利要求17所述的一种终端,其特征在于,还包括:
三维渲染模块,用于接收所述服务器的信息处理模块返回的三维模型,并将所述三维模型渲染生成对应的虚拟物体;
所述增强现实模块进一步用于将所述虚拟物体与所述图像或者环境或者物体、所述互动信息、所述社交信息叠加以获得增强现实信息。
20.根据权利要求17所述的一种终端,其特征在于,还包括:
虚拟物体追踪模块,用于根据所述虚拟物体在所述图像信息的方位,将所述虚拟物体在所述方位上实时追踪呈现。
CN201510785428.6A 2015-11-16 2015-11-16 基于增强现实技术实现互动的方法、系统和终端 Pending CN105323252A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510785428.6A CN105323252A (zh) 2015-11-16 2015-11-16 基于增强现实技术实现互动的方法、系统和终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510785428.6A CN105323252A (zh) 2015-11-16 2015-11-16 基于增强现实技术实现互动的方法、系统和终端

Publications (1)

Publication Number Publication Date
CN105323252A true CN105323252A (zh) 2016-02-10

Family

ID=55249847

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510785428.6A Pending CN105323252A (zh) 2015-11-16 2015-11-16 基于增强现实技术实现互动的方法、系统和终端

Country Status (1)

Country Link
CN (1) CN105323252A (zh)

Cited By (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106023692A (zh) * 2016-05-13 2016-10-12 广东博士早教科技有限公司 一种基于娱乐交互的ar趣味学习系统及方法
CN106060655A (zh) * 2016-08-04 2016-10-26 腾讯科技(深圳)有限公司 一种视频处理方法、服务器及终端
CN106341621A (zh) * 2016-10-24 2017-01-18 福建北极光虚拟视觉展示科技有限公司 一种增强现实交互方法、系统及装置
CN106484118A (zh) * 2016-10-24 2017-03-08 福建北极光虚拟视觉展示科技有限公司 一种基于固定触发源的增强现实交互方法及系统
CN106780754A (zh) * 2016-11-30 2017-05-31 福建北极光虚拟视觉展示科技有限公司 一种混合现实方法及系统
CN106934693A (zh) * 2017-03-06 2017-07-07 浙江传媒学院 基于ar产品模型在vr场景中显示的瓷砖选型方法和系统
CN107066102A (zh) * 2017-05-09 2017-08-18 北京奇艺世纪科技有限公司 支持多个vr用户同时观影的方法及装置
CN107168619A (zh) * 2017-03-29 2017-09-15 腾讯科技(深圳)有限公司 用户生成内容处理方法和装置
CN107194817A (zh) * 2017-03-29 2017-09-22 腾讯科技(深圳)有限公司 用户社交信息的展示方法、装置和计算机设备
CN107247510A (zh) * 2017-04-27 2017-10-13 成都理想境界科技有限公司 一种基于增强现实的社交方法、终端、服务器和系统
CN107320955A (zh) * 2017-06-23 2017-11-07 武汉秀宝软件有限公司 一种基于多客户端的ar场馆界面交互方法及系统
CN107358657A (zh) * 2017-06-30 2017-11-17 海南职业技术学院 基于增强现实技术实现互动的方法和系统
CN107480160A (zh) * 2016-12-22 2017-12-15 福建蓝帽子互动娱乐科技股份有限公司 一种增强现实的个性化名片展示方法和系统
CN107493228A (zh) * 2017-08-29 2017-12-19 北京易讯理想科技有限公司 一种基于增强现实的社交互动方法和系统
CN108063936A (zh) * 2017-12-29 2018-05-22 光锐恒宇(北京)科技有限公司 增强现实ar的实现方法、装置和计算机可读存储介质
CN108092950A (zh) * 2016-11-23 2018-05-29 金德奎 一种基于位置的ar或mr社交方法
CN108108012A (zh) * 2016-11-25 2018-06-01 腾讯科技(深圳)有限公司 信息交互方法和装置
CN108182228A (zh) * 2017-12-27 2018-06-19 北京奇虎科技有限公司 利用增强现实技术实现的用户社交方法、装置及计算设备
CN108364504A (zh) * 2018-01-23 2018-08-03 浙江中新电力发展集团有限公司萧山科技分公司 增强现实三维互动学习系统及控制方法
CN108713313A (zh) * 2018-05-31 2018-10-26 优视科技新加坡有限公司 多媒体数据处理方法、装置和设备/终端/服务器
CN108924510A (zh) * 2018-08-06 2018-11-30 百度在线网络技术(北京)有限公司 实时图像的数据处理方法、装置、终端与网络设备
CN109005285A (zh) * 2018-07-04 2018-12-14 百度在线网络技术(北京)有限公司 增强现实处理方法、终端设备及存储介质
CN109636922A (zh) * 2018-08-28 2019-04-16 亮风台(上海)信息科技有限公司 一种用于呈现增强现实内容的方法与设备
WO2019100234A1 (zh) * 2017-11-22 2019-05-31 腾讯科技(深圳)有限公司 实现信息互动的方法和装置
WO2019114464A1 (zh) * 2017-12-11 2019-06-20 北京京东尚科信息技术有限公司 增强现实方法和装置
CN110020340A (zh) * 2017-08-22 2019-07-16 阿里巴巴集团控股有限公司 一种数据处理的方法、装置和客户端
CN110298925A (zh) * 2019-07-04 2019-10-01 珠海金山网络游戏科技有限公司 一种增强现实图像处理方法、装置、计算设备及存储介质
CN111064894A (zh) * 2019-12-26 2020-04-24 上海传英信息技术有限公司 图像处理方法、终端设备及计算机可读存储介质
CN111163264A (zh) * 2019-12-31 2020-05-15 维沃移动通信有限公司 一种信息显示方法及电子设备
CN111277486A (zh) * 2020-01-07 2020-06-12 莫元劲 一种根据视觉图像识别技术进行内容分享的方法
CN112218027A (zh) * 2020-09-29 2021-01-12 北京字跳网络技术有限公司 信息交互方法、第一终端设备、服务器及第二终端设备
WO2021057243A1 (zh) * 2019-09-29 2021-04-01 维沃移动通信有限公司 便签信息显示方法、便签信息发送方法及电子设备
CN113691796A (zh) * 2021-08-16 2021-11-23 福建凯米网络科技有限公司 通过二维模拟的三维场景互动方法及计算机可读存储介质
CN114745515A (zh) * 2022-04-02 2022-07-12 云南腾云信息产业有限公司 互动信息显示方法、装置、移动终端和存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2432209A1 (en) * 2010-09-15 2012-03-21 Samsung Electronics Co., Ltd. Apparatus and method for managing image data and metadata
CN102495959A (zh) * 2011-12-05 2012-06-13 无锡智感星际科技有限公司 一种基于位置映射的增强现实平台系统及应用方法
CN102903144A (zh) * 2012-08-03 2013-01-30 樊晓东 一种基于云计算的交互式增强现实系统实现方法
CN103002410A (zh) * 2012-11-21 2013-03-27 北京百度网讯科技有限公司 用于移动终端的增强现实方法、系统和移动终端
CN103105993A (zh) * 2013-01-25 2013-05-15 腾讯科技(深圳)有限公司 基于增强现实技术实现互动的方法和系统
CN103366610A (zh) * 2013-07-03 2013-10-23 熊剑明 基于增强现实的三维互动学习系统及方法
CN104575132A (zh) * 2015-01-14 2015-04-29 蝶恋花动漫(天津)有限公司 基于自然图像识别与增强现实技术的互动教育方法和系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2432209A1 (en) * 2010-09-15 2012-03-21 Samsung Electronics Co., Ltd. Apparatus and method for managing image data and metadata
CN102495959A (zh) * 2011-12-05 2012-06-13 无锡智感星际科技有限公司 一种基于位置映射的增强现实平台系统及应用方法
CN102903144A (zh) * 2012-08-03 2013-01-30 樊晓东 一种基于云计算的交互式增强现实系统实现方法
CN103002410A (zh) * 2012-11-21 2013-03-27 北京百度网讯科技有限公司 用于移动终端的增强现实方法、系统和移动终端
CN103105993A (zh) * 2013-01-25 2013-05-15 腾讯科技(深圳)有限公司 基于增强现实技术实现互动的方法和系统
CN103366610A (zh) * 2013-07-03 2013-10-23 熊剑明 基于增强现实的三维互动学习系统及方法
CN104575132A (zh) * 2015-01-14 2015-04-29 蝶恋花动漫(天津)有限公司 基于自然图像识别与增强现实技术的互动教育方法和系统

Cited By (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106023692A (zh) * 2016-05-13 2016-10-12 广东博士早教科技有限公司 一种基于娱乐交互的ar趣味学习系统及方法
CN106060655A (zh) * 2016-08-04 2016-10-26 腾讯科技(深圳)有限公司 一种视频处理方法、服务器及终端
CN106341621A (zh) * 2016-10-24 2017-01-18 福建北极光虚拟视觉展示科技有限公司 一种增强现实交互方法、系统及装置
CN106484118A (zh) * 2016-10-24 2017-03-08 福建北极光虚拟视觉展示科技有限公司 一种基于固定触发源的增强现实交互方法及系统
CN106484118B (zh) * 2016-10-24 2020-01-14 福建北极光虚拟视觉展示科技有限公司 一种基于固定触发源的增强现实交互方法及系统
CN108092950A (zh) * 2016-11-23 2018-05-29 金德奎 一种基于位置的ar或mr社交方法
CN108108012B (zh) * 2016-11-25 2019-12-06 腾讯科技(深圳)有限公司 信息交互方法和装置
CN108108012A (zh) * 2016-11-25 2018-06-01 腾讯科技(深圳)有限公司 信息交互方法和装置
CN106780754A (zh) * 2016-11-30 2017-05-31 福建北极光虚拟视觉展示科技有限公司 一种混合现实方法及系统
CN107480160A (zh) * 2016-12-22 2017-12-15 福建蓝帽子互动娱乐科技股份有限公司 一种增强现实的个性化名片展示方法和系统
CN106934693A (zh) * 2017-03-06 2017-07-07 浙江传媒学院 基于ar产品模型在vr场景中显示的瓷砖选型方法和系统
CN107194817A (zh) * 2017-03-29 2017-09-22 腾讯科技(深圳)有限公司 用户社交信息的展示方法、装置和计算机设备
CN107168619A (zh) * 2017-03-29 2017-09-15 腾讯科技(深圳)有限公司 用户生成内容处理方法和装置
CN107194817B (zh) * 2017-03-29 2023-06-23 腾讯科技(深圳)有限公司 用户社交信息的展示方法、装置和计算机设备
CN107168619B (zh) * 2017-03-29 2023-09-19 腾讯科技(深圳)有限公司 用户生成内容处理方法和装置
CN107247510A (zh) * 2017-04-27 2017-10-13 成都理想境界科技有限公司 一种基于增强现实的社交方法、终端、服务器和系统
CN107066102A (zh) * 2017-05-09 2017-08-18 北京奇艺世纪科技有限公司 支持多个vr用户同时观影的方法及装置
CN107320955B (zh) * 2017-06-23 2021-01-29 武汉秀宝软件有限公司 一种基于多客户端的ar场馆界面交互方法及系统
CN107320955A (zh) * 2017-06-23 2017-11-07 武汉秀宝软件有限公司 一种基于多客户端的ar场馆界面交互方法及系统
CN107358657A (zh) * 2017-06-30 2017-11-17 海南职业技术学院 基于增强现实技术实现互动的方法和系统
CN107358657B (zh) * 2017-06-30 2019-01-15 海南职业技术学院 基于增强现实技术实现互动的方法和系统
CN110020340A (zh) * 2017-08-22 2019-07-16 阿里巴巴集团控股有限公司 一种数据处理的方法、装置和客户端
CN107493228A (zh) * 2017-08-29 2017-12-19 北京易讯理想科技有限公司 一种基于增强现实的社交互动方法和系统
CN110089076B (zh) * 2017-11-22 2021-04-09 腾讯科技(深圳)有限公司 实现信息互动的方法和装置
CN110089076A (zh) * 2017-11-22 2019-08-02 腾讯科技(深圳)有限公司 实现信息互动的方法和装置
WO2019100234A1 (zh) * 2017-11-22 2019-05-31 腾讯科技(深圳)有限公司 实现信息互动的方法和装置
WO2019114464A1 (zh) * 2017-12-11 2019-06-20 北京京东尚科信息技术有限公司 增强现实方法和装置
US11257293B2 (en) 2017-12-11 2022-02-22 Beijing Jingdong Shangke Information Technology Co., Ltd. Augmented reality method and device fusing image-based target state data and sound-based target state data
CN108182228A (zh) * 2017-12-27 2018-06-19 北京奇虎科技有限公司 利用增强现实技术实现的用户社交方法、装置及计算设备
CN108063936A (zh) * 2017-12-29 2018-05-22 光锐恒宇(北京)科技有限公司 增强现实ar的实现方法、装置和计算机可读存储介质
CN108364504A (zh) * 2018-01-23 2018-08-03 浙江中新电力发展集团有限公司萧山科技分公司 增强现实三维互动学习系统及控制方法
CN108364504B (zh) * 2018-01-23 2019-12-27 浙江中新电力工程建设有限公司自动化分公司 增强现实三维互动学习系统及控制方法
CN108713313A (zh) * 2018-05-31 2018-10-26 优视科技新加坡有限公司 多媒体数据处理方法、装置和设备/终端/服务器
CN109005285A (zh) * 2018-07-04 2018-12-14 百度在线网络技术(北京)有限公司 增强现实处理方法、终端设备及存储介质
CN108924510A (zh) * 2018-08-06 2018-11-30 百度在线网络技术(北京)有限公司 实时图像的数据处理方法、装置、终端与网络设备
CN108924510B (zh) * 2018-08-06 2020-12-22 百度在线网络技术(北京)有限公司 实时图像的数据处理方法、装置、终端与网络设备
CN109636922A (zh) * 2018-08-28 2019-04-16 亮风台(上海)信息科技有限公司 一种用于呈现增强现实内容的方法与设备
CN109636922B (zh) * 2018-08-28 2023-07-11 亮风台(上海)信息科技有限公司 一种用于呈现增强现实内容的方法与设备
CN110298925A (zh) * 2019-07-04 2019-10-01 珠海金山网络游戏科技有限公司 一种增强现实图像处理方法、装置、计算设备及存储介质
CN110298925B (zh) * 2019-07-04 2023-07-25 珠海金山数字网络科技有限公司 一种增强现实图像处理方法、装置、计算设备及存储介质
WO2021057243A1 (zh) * 2019-09-29 2021-04-01 维沃移动通信有限公司 便签信息显示方法、便签信息发送方法及电子设备
CN111064894A (zh) * 2019-12-26 2020-04-24 上海传英信息技术有限公司 图像处理方法、终端设备及计算机可读存储介质
CN111163264B (zh) * 2019-12-31 2022-02-01 维沃移动通信有限公司 一种信息显示方法及电子设备
CN111163264A (zh) * 2019-12-31 2020-05-15 维沃移动通信有限公司 一种信息显示方法及电子设备
CN111277486A (zh) * 2020-01-07 2020-06-12 莫元劲 一种根据视觉图像识别技术进行内容分享的方法
WO2022068364A1 (zh) * 2020-09-29 2022-04-07 北京字跳网络技术有限公司 信息交互方法、第一终端设备、服务器及第二终端设备
CN112218027A (zh) * 2020-09-29 2021-01-12 北京字跳网络技术有限公司 信息交互方法、第一终端设备、服务器及第二终端设备
CN113691796B (zh) * 2021-08-16 2023-06-02 福建凯米网络科技有限公司 通过二维模拟的三维场景互动方法及计算机可读存储介质
CN113691796A (zh) * 2021-08-16 2021-11-23 福建凯米网络科技有限公司 通过二维模拟的三维场景互动方法及计算机可读存储介质
CN114745515A (zh) * 2022-04-02 2022-07-12 云南腾云信息产业有限公司 互动信息显示方法、装置、移动终端和存储介质

Similar Documents

Publication Publication Date Title
CN105323252A (zh) 基于增强现实技术实现互动的方法、系统和终端
US11488355B2 (en) Virtual world generation engine
CN105468142A (zh) 基于增强现实技术的互动方法、系统和终端
Langlotz et al. Sketching up the world: in situ authoring for mobile augmented reality
USRE43545E1 (en) Virtual skywriting
JP3603118B2 (ja) 擬似3次元空間表現システム、擬似3次元空間構築システム、ゲームシステム、及び電子地図提供システム
CN107798932A (zh) 一种基于ar技术的早教训练系统
CN105719343A (zh) 一种构建虚拟街景地图的方法
CN111638796A (zh) 虚拟对象的展示方法、装置、计算机设备及存储介质
US20150187139A1 (en) Apparatus and method of providing augmented reality
KR20140082610A (ko) 휴대용 단말을 이용한 증강현실 전시 콘텐츠 재생 방법 및 장치
KR20140038355A (ko) 뷰이미지의 적어도 하나의 피처에 주석을 달기 위한 컴퓨터화 방법 및 장치
US10074216B2 (en) Information processing to display information based on position of the real object in the image
CN107193904A (zh) 一种图书vr和ar体验交互系统
CN104380346A (zh) 针对视频透视扩增现实将3d空间信息转变为屏幕对准信息
FR2998080A1 (fr) Procede d'augmentation de la realite
Hoberman et al. Immersive training games for smartphone-based head mounted displays
CN103455142A (zh) 图像识别实时三维交互装置及图像识别实时三维交互方法
Kim et al. Development of mobile AR tour application for the national palace museum of Korea
CN108961375A (zh) 一种根据二维图像生成三维图像的方法及装置
JP2022507502A (ja) 拡張現実(ar)のインプリント方法とシステム
KR101197126B1 (ko) 인쇄물과 동영상의 증강현실 시스템 및 방법
Kwiatek et al. Photogrammetric applications of immersive video cameras
CN105138763A (zh) 一种增强现实中实景与现实信息叠加的方法
Asraf et al. Mobile application outdoor navigation using location-based augmented reality (AR)

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160210

RJ01 Rejection of invention patent application after publication