CN112068704A - 一种在目标对象上显示增强现实效果的方法 - Google Patents

一种在目标对象上显示增强现实效果的方法 Download PDF

Info

Publication number
CN112068704A
CN112068704A CN202010945687.1A CN202010945687A CN112068704A CN 112068704 A CN112068704 A CN 112068704A CN 202010945687 A CN202010945687 A CN 202010945687A CN 112068704 A CN112068704 A CN 112068704A
Authority
CN
China
Prior art keywords
target object
augmented reality
trigger
picture
picture group
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010945687.1A
Other languages
English (en)
Other versions
CN112068704B (zh
Inventor
徐张杰
季晓枫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MOTION MAGIC DIGITAL ENTERTAINMENT Inc
Original Assignee
MOTION MAGIC DIGITAL ENTERTAINMENT Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MOTION MAGIC DIGITAL ENTERTAINMENT Inc filed Critical MOTION MAGIC DIGITAL ENTERTAINMENT Inc
Priority to CN202010945687.1A priority Critical patent/CN112068704B/zh
Publication of CN112068704A publication Critical patent/CN112068704A/zh
Application granted granted Critical
Publication of CN112068704B publication Critical patent/CN112068704B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明涉及一种在目标对象上显示增强现实效果的方法，包括以下步骤：获取目标图片并识别目标对象和背景；设计并添加标识点得到图片组；测试图片组的识别性能，若不合格则重新设计并添加标识点；导入增强现实效果和图片组，获取图片组的特征参数，生成第一触发器并设于摄像头的前部，生成第二触发器并设于目标对象处；将增强现实效果设为透明模式，设置两个触发器接触时的接触效果为增强现实效果调至不透明模式；摄像头扫描图片组。与现有技术相比，本发明对增强现实应用不能识别的较小的或简单的目标对象，添加标识点，并设置用于控制增强现实效果显示的触发器，不需要放大目标图片或拉近距离就可以识别较小的或简单的目标对象，用户体验感高。

Description

一种在目标对象上显示增强现实效果的方法
技术领域
本发明涉及增强现实技术领域，尤其是涉及一种在目标对象上显示增强现实效果的方法。
背景技术
增强现实技术(Augmented Reality Technique，简称AR)是在虚拟现实基础上发展起来的技术，它借助于可视化技术，将计算机生成的虚拟物体、场景或装置提示信息叠加到真实场景的目标对象上。
目前，在使用任何增强现实开发平台的平面图像追踪功能时，对于目标对象都有着严苛的要求，目标对象可以是一本书、一张名片、一副海报甚或是一面涂鸦墙这类具有平坦表面的物品或事物，但是，目标对象必须要具有丰富且不重复的纹理，这样目标对象才能有足够的锚点提供给增强现实应用，从而定位真实场景中目标对象相对于摄像头的位置和距离。
一般来讲，美术设计往往不会使用花哨、复杂的图案，而是使用更贴切场景、违和感较小的图案，因此，增强现实应用的目标对象在摄像头屏幕中往往是简单的几何图形，而这种简单的目标对象无法为增强现实应用提供足够的用于定位的锚点。
其次，在实际使用中，目标对象需要占屏幕大约60％才能被增强现实应用稳定识别。如果目标对象面积很小或者目标对象与摄像机距离较远，都会导致目标对象在摄像机中的占屏比不足，增强现实应用无法正确读取到目标对象上的锚点，只能通过放大摄像头或者拉近摄像头与目标对象的距离，用户体验感较差。而且在实际场景中，很多情况下用户与目标对象的距离在设计上是硬性需求，无法得到妥善解决。
发明内容
本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种在目标对象上显示增强现实效果的方法，对增强现实应用不能识别的较小的或简单的目标对象，添加标识点，并设置用于控制增强现实效果显示的触发器，不需要放大目标图片或拉近距离就可以识别较小的或简单的目标对象，用户体验感高。
本发明的目的可以通过以下技术方案来实现：
一种在目标对象上显示增强现实效果的方法，包括以下步骤：
S1：获取含有目标对象的目标图片并识别目标图片中的目标对象和背景；
S2：设计标识点并在目标图片中添加标识点，得到图片组；
S3：在模拟器中测试图片组的识别性能，若识别性能合格，则执行步骤S4，否则，执行步骤S2；
S4：在增强现实应用中，导入增强现实效果和图片组，获取图片组的特征参数，生成第一触发器并将其设于摄像头的前部，生成第二触发器并将其设于图片组的目标对象处；
S5：在增强现实应用中，将增强现实效果设为透明模式，并设置第一触发器与第二触发器接触时的接触效果为：当第一触发器与第二触发器接触时，增强现实效果调为不透明模式；
S6：增强现实应用中的摄像头扫描图片组。
进一步地，所述步骤S2中，标识点为与背景画面中色彩、纹理、形状中一者或多者不一致的点。
进一步地，所述步骤S2中，标识点位于目标图片中目标对像的周边区域。
进一步地，所述步骤S3中，模拟器用于模拟增强现实效果在图片组上的显示效果，步骤S3包括以下步骤：
S301：在模拟器中导入图片组和增强现实效果，图片组中的目标对象和标识点构成待测试目标对象；
S302：调节模拟器的参数，直至达到预设置的测试标准；
S303：模拟器中的模拟摄像头扫描图片组，若增强现实效果能在图片组上稳定显示，则图片组的识别性能合格，否则，图片组的识别性能不合格。
更进一步地，所述步骤S302中，预设置的测试标准为待测试目标对象占模拟器中模拟摄像头屏幕面积的60％以上。
进一步地，所述步骤S4中，图片组的特征参数包括：目标对象在图片组上的位置、目标对象的长度值、目标对象的宽度值。
进一步地，所述步骤S4中，所述第一触发器为3D触发器，第一触发器的长度值和宽度值均与目标对象的长度值和宽度值一致，第一触发器的高度值设置为最大高度值。
进一步地，所述步骤S4中，所述第二触发器为3D触发器，第二触发器的长度值和宽度值均与目标对象的长度值和宽度值一致。
进一步地，所述步骤S5中，透明模式为增强现实效果的透明度等于0。
进一步地，所述步骤S5中，不透明模式为增强现实效果的透明度等于255。
与现有技术相比，本发明具有以下有益效果：
(1)对增强现实应用不能识别的较小的或简单的目标对象，添加标识点，并设置用于控制增强现实效果显示的触发器，不需要放大目标图片或拉近距离就可以识别较小的或简单的目标对象，用户体验感高。
(2)根据目标图片的背景灵活设计标识点，并添加至目标对象的周边区域，不影响目标对象，标识点和目标对象构成了更易被识别的新的目标对象。
(3)在模拟器中模拟增强现实效果在图片组上的显示效果，能更直观的判断图片组的识别性能，确定标识点的设计与添加位置是否合理。
(4)根据目标对象的位置和大小在摄像头和目标对象处分别设置触发器，能控制增强现实效果在较小的或简单的目标对象上精确显示，通过设置触发器的高度，可以使用户扫描距离更远、更简单的目标对象，且增强现实效果的显示更加稳定、可靠。
附图说明
图1为本发明的流程图；
图2为实施例中的目标图片；
图3为实施例中的图片组。
具体实施方式
下面结合附图和具体实施例对本发明进行详细说明。本实施例以本发明技术方案为前提进行实施，给出了详细的实施方式和具体的操作过程，但本发明的保护范围不限于下述的实施例。
实施例1：
如图1所示，一种在目标对象上显示增强现实效果的方法，包括以下步骤：
S1：获取含有目标对象的目标图片并识别目标图片中的目标对象和背景；
S2：设计标识点并在目标图片中添加标识点，得到图片组；
S3：在模拟器中测试图片组的识别性能，若识别性能合格，则执行步骤S4，否则，执行步骤S2；
S301：在模拟器中导入图片组和增强现实效果，图片组中的目标对象和标识点构成待测试目标对象；
S302：调节模拟器的参数，直至达到预设置的测试标准；
S303：模拟器中的模拟摄像头扫描图片组，若增强现实效果能在图片组上稳定显示，则图片组的识别性能合格，否则，图片组的识别性能不合格。
S4：在增强现实应用中，导入增强现实效果和图片组，获取图片组的特征参数，生成第一触发器并将其设于摄像头的前部，生成第二触发器并将其设于图片组的目标对象处；
S5：在增强现实应用中，将增强现实效果设为透明模式，并设置第一触发器与第二触发器接触时的接触效果为：当第一触发器与第二触发器接触时，增强现实效果调为不透明模式；
S6：增强现实应用中的摄像头扫描图片组。
本实施例中，目标图片如图2所示，识别目标对象和背景，背景为白色，故添加黑色点作为标识点，在目标图片的基础上在距离目标对象合适距离处添加标识点。
如图3所示，标识点可以是一个难以被注意到的白点或黑点(主要是要与目标图片背景画面有所区分)，而这些标识点和目标对象构成的新的目标对象可以为增强现实应用提供数量不等的锚点，并且这些锚点由于相对距离较远，位置固定成一定形状，在扫描时可以提升模型的稳定性。
这样，虽然目标图片没有放大，但是标识点与目标对象组成的图片组已经扩展到了较远处，可以类似的将其视为目标图片的放大，这一措施解决了目标对象过小以及目标对象过远导致的问题。
为了方便，本实施例中以unity引擎+easyar增强现实平台作为模拟器和增强现实应用的开发平台。
首先在unity引擎中测试图片组的识别性能。主要测试过程如下：
(1)先在unity中将easyar平台提供的unitypackage导入unity中，并为camera添加相关代码使之支持ar摄像头。
(2)再将制作的图片组以png格式导入StreamingAssets文件夹中。在场景中添加ImageTarget并添加相关代码Image Target Controller，将代码中的Target Path更换为图片组。
(3)将测试模型或其他增强现实效果添加至Image Target下，测试模型或其他增强现实效果可任选，本实施例以方块Cube为例。
图片组中标识点和目标对象构成了待测试目标对象，若摄像头与图片组的距离为较远距离或规定距离，且扫描图片组后能在待测试目标对象上稳定显现方块Cube，则认为图片组设计合理，图片组的识别性能合格，若无法稳定显现方块或靠近才能显示则认为图片组的识别性能不合格，重新制作图片组。
控制图片组与摄像头之间的距离为较远距离或规定距离具体表现为控制图片组中待测试目标对象占摄像头屏幕面积的60％以上。
若图片组的识别性能合格，则在unity引擎中为增强现实应用添加触发器并设置触发效果，主要过程如下：
(1)先在unity中将easyar平台提供的unitypackage导入unity中，并为camera添加相关代码使之支持ar摄像头。
(2)再将制作的图片组以png格式导入StreamingAssets文件夹中。在场景中添加ImageTarget并添加相关代码Image Target Controller，将代码中的Target Path更换为图片组。
(3)获取图片组中目标对象的位置和大小，为camera和ImageTarget分别添加第一触发器Trigger1和第二触发器Trigger2，第一触发器Trigger1的长度值和宽度值与目标对象的长度值和宽度值相同，高度值设为最大值，从而保证即使摄像头与目标图片距离很远，两个触发器也能互相接触。第二触发器Trigger2和图片组中的目标对象的大小位置保持一致，这样可以保证只有在摄像头扫描到图片组中的目标对象，也就是两个触发器接触时才会显示增强现实效果。
(4)选择模型或其他增强现实效果导入场景中，并置于ImageTarget下，选择的模型或其他增强现实效果将在目标对象上显示。将模型或其他增强现实效果的透明度调至0，也就是透明模式，以避免扫描到图片组但尚未扫描到目标对象时误显示增强现实效果。为第一触发器Trigger1和第二触发器Trigger2添加接触效果代码，接触效果代码为在第一触发器Trigger1和第二触发器Trigger2接触时，模型或其他增强现实效果的透明度调至255，即不透明模式，达成显示增强现实效果的目的。而触发器离开时透明度调至0，即透明模式，达成不显示增强现实效果的目的。
完成上述操作后，用户可以在更远的距离扫描更加简洁的图片，得到的增强现实效果的显示效果是与扫描目标图片无异的，甚至是更稳定，更可靠的。

Claims (10)

1.一种在目标对象上显示增强现实效果的方法，其特征在于，包括以下步骤：
S1：获取含有目标对象的目标图片并识别目标图片中的目标对象和背景；
S2：设计标识点并在目标图片中添加标识点，得到图片组；
S3：在模拟器中测试图片组的识别性能，若识别性能合格，则执行步骤S4，否则，执行步骤S2；
S4：在增强现实应用中，导入增强现实效果和图片组，获取图片组的特征参数，生成第一触发器并将其设于摄像头的前部，生成第二触发器并将其设于图片组的目标对象处；
S5：在增强现实应用中，将增强现实效果设为透明模式，并设置第一触发器与第二触发器接触时的接触效果为：当第一触发器与第二触发器接触时，增强现实效果调至不透明模式；
S6：增强现实应用中的摄像头扫描图片组。
2.根据权利要求1所述的一种在目标对象上显示增强现实效果的方法，其特征在于，所述步骤S2中，标识点为与背景画面中色彩、纹理、形状中一者或多者不一致的点。
3.根据权利要求1所述的一种在目标对象上显示增强现实效果的方法，其特征在于，所述步骤S2中，标识点位于目标图片中目标对像的周边区域。
4.根据权利要求1所述的一种在目标对象上显示增强现实效果的方法，其特征在于，所述步骤S3中，模拟器用于模拟增强现实效果在图片组上的显示效果，步骤S3包括以下步骤：
S301：在模拟器中导入图片组和增强现实效果，图片组中的目标对象和标识点构成待测试目标对象；
S302：调节模拟器的参数，直至达到预设置的测试标准；
S303：模拟器中的模拟摄像头扫描图片组，若增强现实效果能在图片组上稳定显示，则图片组的识别性能合格，否则，图片组的识别性能不合格。
5.根据权利要求4所述的一种在目标对象上显示增强现实效果的方法，其特征在于，所述步骤S302中，预设置的测试标准为待测试目标对象占模拟器中模拟摄像头屏幕面积的60％以上。
6.根据权利要求1所述的一种在目标对象上显示增强现实效果的方法，其特征在于，所述步骤S4中，图片组的特征参数包括：目标对象在图片组上的位置、目标对象的长度值、目标对象的宽度值。
7.根据权利要求1所述的一种在目标对象上显示增强现实效果的方法，其特征在于，所述步骤S4中，所述第一触发器为3D触发器，第一触发器的长度值和宽度值均与目标对象的长度值和宽度值一致，第一触发器的高度值设置为最大高度值。
8.根据权利要求1所述的一种在目标对象上显示增强现实效果的方法，其特征在于，所述步骤S4中，所述第二触发器为3D触发器，第二触发器的长度值和宽度值均与目标对象的长度值和宽度值一致。
9.根据权利要求1所述的一种在目标对象上显示增强现实效果的方法，其特征在于，所述步骤S5中，透明模式为增强现实效果的透明度等于0。
10.根据权利要求1所述的一种在目标对象上显示增强现实效果的方法，其特征在于，所述步骤S5中，不透明模式为增强现实效果的透明度等于255。
CN202010945687.1A 2020-09-10 2020-09-10 一种在目标对象上显示增强现实效果的方法 Active CN112068704B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010945687.1A CN112068704B (zh) 2020-09-10 2020-09-10 一种在目标对象上显示增强现实效果的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010945687.1A CN112068704B (zh) 2020-09-10 2020-09-10 一种在目标对象上显示增强现实效果的方法

Publications (2)

Publication Number Publication Date
CN112068704A true CN112068704A (zh) 2020-12-11
CN112068704B CN112068704B (zh) 2023-12-08

Family

ID=73663500

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010945687.1A Active CN112068704B (zh) 2020-09-10 2020-09-10 一种在目标对象上显示增强现实效果的方法

Country Status (1)

Country Link
CN (1) CN112068704B (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8845107B1 (en) * 2010-12-23 2014-09-30 Rawles Llc Characterization of a scene with structured light
CN106125932A (zh) * 2016-06-28 2016-11-16 广东欧珀移动通信有限公司 一种增强现实中目标对象的识别方法、装置及移动终端
US20170330481A1 (en) * 2014-04-18 2017-11-16 Chef Koochooloo, Inc. Interactive culinary game applications
CN107589846A (zh) * 2017-09-20 2018-01-16 歌尔科技有限公司 场景切换方法、装置及电子设备
CN108038459A (zh) * 2017-12-20 2018-05-15 深圳先进技术研究院 一种水下生物的检测识别方法、终端设备及存储介质
US20180144458A1 (en) * 2016-11-21 2018-05-24 Seiko Epson Corporation Multiple Hypotheses Segmentation-Guided 3D Object Detection and Pose Estimation
CN108369482A (zh) * 2015-12-14 2018-08-03 索尼公司 信息处理设备、信息处理方法和程序
CN110119194A (zh) * 2018-02-06 2019-08-13 广东虚拟现实科技有限公司 虚拟场景处理方法、装置、交互系统、头戴显示装置、视觉交互装置及计算机可读介质
CN110335292A (zh) * 2019-07-09 2019-10-15 北京猫眼视觉科技有限公司 一种基于图片跟踪实现模拟场景跟踪的方法及系统
CN110716645A (zh) * 2019-10-15 2020-01-21 北京市商汤科技开发有限公司 一种增强现实数据呈现方法、装置、电子设备及存储介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8845107B1 (en) * 2010-12-23 2014-09-30 Rawles Llc Characterization of a scene with structured light
US20170330481A1 (en) * 2014-04-18 2017-11-16 Chef Koochooloo, Inc. Interactive culinary game applications
CN108369482A (zh) * 2015-12-14 2018-08-03 索尼公司 信息处理设备、信息处理方法和程序
CN106125932A (zh) * 2016-06-28 2016-11-16 广东欧珀移动通信有限公司 一种增强现实中目标对象的识别方法、装置及移动终端
US20180144458A1 (en) * 2016-11-21 2018-05-24 Seiko Epson Corporation Multiple Hypotheses Segmentation-Guided 3D Object Detection and Pose Estimation
CN107589846A (zh) * 2017-09-20 2018-01-16 歌尔科技有限公司 场景切换方法、装置及电子设备
CN108038459A (zh) * 2017-12-20 2018-05-15 深圳先进技术研究院 一种水下生物的检测识别方法、终端设备及存储介质
CN110119194A (zh) * 2018-02-06 2019-08-13 广东虚拟现实科技有限公司 虚拟场景处理方法、装置、交互系统、头戴显示装置、视觉交互装置及计算机可读介质
CN110335292A (zh) * 2019-07-09 2019-10-15 北京猫眼视觉科技有限公司 一种基于图片跟踪实现模拟场景跟踪的方法及系统
CN110716645A (zh) * 2019-10-15 2020-01-21 北京市商汤科技开发有限公司 一种增强现实数据呈现方法、装置、电子设备及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
徐泽星;毛飞;: "基于单摄像机的户外人机交互影像系统浅析", 软件产业与工程, no. 02 *

Also Published As

Publication number Publication date
CN112068704B (zh) 2023-12-08

Similar Documents

Publication Publication Date Title
Oufqir et al. ARKit and ARCore in serve to augmented reality
CN106355153A (zh) 一种基于增强现实的虚拟对象显示方法、装置以及系统
CN110119258B (zh) 一种显示屏与光学系统位置测试与调整方法和系统
CN111833454B (zh) 展示方法、装置、设备和计算机可读存储介质
CN109636893A (zh) 三维OBJ模型及MTL材质在iPhone中的解析与渲染方法
CN113648655B (zh) 虚拟模型的渲染方法、装置、存储介质和电子设备
CN108986577A (zh) 一种基于前置式的移动增强现实型实验的设计方法
CN110266970A (zh) 一种短视频制作方法和系统
Firdaus et al. Augmented reality for interactive promotion media at Faculty of Computer Science and Information Technology Mulawarman University
CN111862340A (zh) 增强现实数据呈现方法、装置、显示设备和存储介质
US10909752B2 (en) All-around spherical light field rendering method
CN112068704B (zh) 一种在目标对象上显示增强现实效果的方法
CN113470190A (zh) 场景显示方法及装置、设备、车辆、计算机可读存储介质
CN110163952A (zh) 室内图的展示方法、装置、终端和存储介质
CN111773683B (zh) 一种基于移动终端的文字显示方法及装置
CN112915536A (zh) 虚拟模型的渲染方法和装置
CN110390710B (zh) 一种渲染器代理文件的处理方法
Girašek et al. Visualization of temperature fields distribution on power module within web interface
CN111625103A (zh) 雕塑展示方法、装置、电子设备及存储介质
KR102419290B1 (ko) 동영상 데이터에 3차원 가상객체를 합성하는 방법 및 장치
CN116617658B (zh) 一种图像渲染方法及相关装置
JP4436101B2 (ja) ロボット
CN113689549B (zh) 一种建模方法及数字化设计系统
CN109002271A (zh) 用于演出现场播放控制方法、装置、存储介质及电子设备
CN114998086B (zh) 屏幕隐形水印嵌入程序测试样本制作方法以及测试方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: No.13, Lane 777, Guangzhong West Road, Jing'an District, Shanghai 200072

Applicant after: Shanghai magic Digital Creative Technology Co.,Ltd.

Address before: No.13, Lane 777, Guangzhong West Road, Jing'an District, Shanghai 200072

Applicant before: MOTION MAGIC DIGITAL ENTERTAINMENT Inc.

GR01 Patent grant
GR01 Patent grant