CN110381210A - 一种虚拟现实交互方法及装置 - Google Patents

一种虚拟现实交互方法及装置 Download PDF

Info

Publication number
CN110381210A
CN110381210A CN201910661131.7A CN201910661131A CN110381210A CN 110381210 A CN110381210 A CN 110381210A CN 201910661131 A CN201910661131 A CN 201910661131A CN 110381210 A CN110381210 A CN 110381210A
Authority
CN
China
Prior art keywords
image
information
virtual
target object
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910661131.7A
Other languages
English (en)
Inventor
张台峰
周凡贻
肖龙安
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Transsion Holdings Co Ltd
Original Assignee
Shenzhen Transsion Holdings Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Transsion Holdings Co Ltd filed Critical Shenzhen Transsion Holdings Co Ltd
Priority to CN201910661131.7A priority Critical patent/CN110381210A/zh
Publication of CN110381210A publication Critical patent/CN110381210A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/55Clustering; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72439User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Library & Information Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明公开了一种虚拟现实交互方法及装置,所述方法包括:获取目标图像;获取目标图像的特征信息;根据目标图像的特征信息和预设的处理规则得到优化图像信息。本发明增加了用户体验以及趣味性。

Description

一种虚拟现实交互方法及装置
技术领域
本发明涉及多媒体信息技术领域,特别涉及一种虚拟现实交互方法及装 置。
背景技术
增强现实(Augmented Reality,简称AR)是通过摄像头、传感器、实时计 算以及智能匹配技术,将真实世界信息与虚拟世界信息“无缝”融合的一种 技术。它通过计算机系统提供的信息增加用户对现实世界感知的技术,将虚 拟的信息应用到真实世界,并将计算机生成的虚拟物体、场景或系统提示信 息叠加到真实场景中,两种信息相互补充、叠加,实现真实的环境和虚拟的 物体在同一个画面或空间的同时存在。其基本特点是:一是真实世界和虚拟 的信息集成,二是具有实时交互性,三是在三维尺度空间中增添定位虚拟物 体。
增强现实技术最早于1990年提出,随着随身电子设备运算能力的提升, 输入和输出设备价格的不断下降、视频显示质量的提高以及功能很强大但易 于使用的软件的实用化,AR的应用日益广泛。由于增强现实技术具有能够 对真实环境进行增强显示输出的特性,在娱乐与艺术、飞行器研制与开发、 虚拟训练、医疗研究与解剖训练、精密仪器制造和维修、军用飞机导航、工 程设计和远程机器人控制等领域有着广泛应用,同时对人工智能、CAD、图 形仿真、虚拟通讯、遥感、娱乐、模拟训练等许多领域带来了革命性的变化。
但现有技术在手机端实现虚拟现实方法中,大多功能较为单一,例如, 其功能用于测试量或者动画模拟,分类局限性,虚拟模型类型局限性导致缺 少更多的可操作性,对于用户而言缺少新奇体验,趣味性不强。
发明内容
本发明的目的在于提供一种虚拟现实交互方法及装置,以解决由于现有 技术在手机端实现虚拟现实方法中,大多功能较为单一,虚拟模型类型局限 性导致缺少更多的可操作性,趣味性不强的问题。
为了解决上述问题,本发明通过以下技术方案实现:
一种虚拟现实交互方法,包含以下过程:
获取目标图像;
获取所述目标图像的特征信息;
根据所述目标图像的特征信息和预设的处理规则得到优化图像信息。
进一步的,所述根据所述目标图像的特征信息和预设的处理规则得到优 化图像信息的步骤具体为:根据所述目标图像的特征信息匹配至少一个特效 数据;以及将所述特效数据与所述目标图像进行集成以得到所述优化图像信 息。
进一步的,所述获取所述目标图像的特征信息包含:将所述目标图像分 离成目标对象图像以及真实场景图像,以及对所述目标对象进行分类,得到 所述目标对象的类别信息。
进一步的,对所述目标对象进行分类包含:提取所述目标对象的特征点, 并调用特征数据库根据所述目标对象的特征点对所述目标对象进行分类,得 到所述类别信息。
进一步的,所述获取所述目标图像的特征信息还包含:对所述目标对象 的行为进行捕捉定位以得到所述目标对象的运动轨迹信息。
进一步的,对所述优化图像信息进行存储和/或显示。
进一步的,所述特征数据库包含人类、动物类、昆虫类、建筑类、植物 类,自然地理类、家居类和玩具类。
进一步的,所述根据所述目标图像的特征信息匹配至少一个特效数据进 一步包含以下过程:根据所述目标对象的类别信息和/或其运动轨迹信息调用 虚拟特效模型库,所述虚拟特效模型库中预先设有包含对应所述特征数据库 中所有目标对象类型的第一虚拟特效模型。
进一步的,所述根据所述目标图像的特征信息匹配至少一个特效数据还 包含以下过程:
根据获取的所述目标图像自定义第二虚拟特效模型。
进一步的,所述自定义第二虚拟特效模型包含以下过程:
预先建立目标对象图像与具备自定义虚拟特效的虚拟对象间的关联关 系;
获取预先建立的目标对象图像与具备自定义虚拟特效的虚拟对象间的关 联关系;
当接收到呈现自定义虚拟特效的请求时,调起移动终端的图像采集器; 利用图像采集器采集现实场景中的当前场景画面,并将采集的当前场景画面 与目标图像进行比对;若比对一致,则根据上述关联关系获取目标图像关联 的虚拟对象;将目标图像关联的虚拟对象与当前场景画面进行合成,得到合 成图像,并显示。
进一步的,所述第一虚拟特效模型和第二虚拟特效模型均包括动态虚拟 特效模型和静态虚拟特效模型。
另一方面,本发明还提供一种虚拟现实交互装置,包含:
第一获取模块,其被配置为获取目标图像;
第二获取模块,其被配置为获取所述目标图像的特征信息;
优化模块,其被配置为根据所述目标图像的特征信息和预设的处理规则 得到优化图像信息。
进一步的,所述优化模块包括:匹配单元,其被配置为根据所述目标图 像的特征信息匹配至少一个特效数据;集成单元,其被配置为将所述特效数 据与所述目标图像进行集成以得到优化图像信息。
进一步的,还包含:用于获取所述目标图像的特征信息中的目标对象的 类别信息的提取模块和分类模块;
所述提取模块,具体用于,将所述目标图像分离成目标对象图像以及真 实场景图像,并提取所述目标对象的特征点;
所述分类模块,具体用于,调用特征数据库根据所述目标对象的特征点 对所述目标对象进行分类,以得到所述目标对象的类别信息。
进一步的,还包含:用于获取所述目标图像的特征信息中的目标对象的 运动轨迹信息的传感器模块;
所述传感器模块,具体用于,对所述目标对象的行为进行捕捉定位,以 得到所述目标对象的运动轨迹信息。
进一步的,所述匹配单元,具体用于,根据所述目标对象的类别信息和/ 或其运动轨迹信息调用虚拟特效模型库,所述虚拟特效模型库中预先设有包 含对应所述特征数据库中所有目标对象类型的第一虚拟特效模型。
进一步的,还包含:生成模块,其被配置为根据获取的目标图像自定义 第二虚拟特效模型。
本发明与现有技术相比具有以下优点:
本发明通过获取目标图像;获取所述目标图像的特征信息;根据所述目 标图像的特征信息和预设的处理规则得到优化图像信息,具体的是通过预先 建立特征数据库,之后获取目标图像;将所述目标图像分离成目标对象图像 以及真实场景图像,并提取所述目标对象图像的特征点;调用特征数据库根 据所述目标对象的特征点对所述目标对象进行分类,得到所述目标对象的类 别信息;对所述目标对象的行为进行捕捉定位,得到所述目标对象的运动轨 迹信息。根据所述目标对象的类别信息和/或其运动轨迹信息匹配至少一个第 一虚拟特效模型;将所述第一虚拟特效模型与所述真实场景图像进行集成, 得到优化图像信息;以及显示所述优化图像信息。由于预先建立的特征数据 库包含很多类型的客观物体的特征点,解决了现有技术中在手机端实现虚拟 现实方法中,大多功能较为单一,客观物体分类不全面,给出的新奇体验较 少的问题;以及增加了自定义虚拟特征模型这一方法,解决了由于现有技术 中虚拟模型类型局限性导致缺少更多的可操作性,趣味性不强的问题。
附图说明
图1为本发明一实施例提供的一种虚拟现实交互方法的流程示意图;
图2为本发明一实施例提供的一种虚拟现实交互装置的结构示意图;
图3为本发明一实施例提供的一种电子终端设备的结构示意图。
具体实施方式
承如背景技术所述,现有技术在手机端实现虚拟现实方法中,大多功能 较为单一,例如,其功能用于测试量或者动画模拟,分类局限性,虚拟模型 类型局限性导致缺少更多的可操作性,对于用户而言缺少新奇体验,趣味性 不强。
为了解决上述问题,本实施例提供了一种虚拟现实交互方法,包含:获 取目标图像;获取所述目标图像的特征信息;根据所述目标图像的特征信息 和预设的处理规则得到优化图像信息;所述根据所述目标图像的特征信息和 预设的处理规则得到优化图像信息的步骤具体为:根据所述目标图像的特征 信息匹配至少一个特效数据(特效模型);以及将所述特效数据与所述目标图 像进行集成以得到优化图像信息(集成图像数据)。所述目标图像的特征信息 包括所述目标图像中的目标对象的类别信信息和/或目标对象的运动轨迹信 息。具体的是通过预先建立特征数据库,之后获取目标图像;将所述目标图 像分离成目标对象图像以及真实场景图像,并提取所述目标对象图像的特征 点;调用特征数据库根据所述目标对象的特征点对所述目标对象进行分类, 得到所述目标对象所属类别;对所述目标对象的行为进行捕捉定位,得到所 述目标对象的运动轨迹信息。根据所述目标对象的类别信息和/或其运动轨迹 信息匹配至少一个第一虚拟特效模型;将所述第一虚拟特效模型与所述真实 场景图像进行集成,得到优化图像信息;以及显示所述优化图像信息。由于预先建立的特征数据库包含很多类型的客观物体的特征点,解决了现有技术 中在手机端实现虚拟现实方法中,大多功能较为单一,客观物体分类不全面, 给出的新奇体验较少的问题;以及增加了自定义虚拟特征模型这一方法,解 决了由于现有技术中虚拟模型类型局限性导致缺少更多的可操作性,趣味性 不强的问题。
下面将结合示意图对本发明的具体实施方式进行更详细的描述。根据下 列描述和权利要求书,本发明的优点和特征将更清楚。需说明的是,附图均 采用非常简化的形式且均使用非精准的比例,仅用以方便、明晰地辅助说明 本发明实施例的目的。
为了清楚,不描述实际一实施例的全部特征。在下列描述中,不详细描 述公知的功能和结构,因为它们会使本发明由于不必要的细节而混乱。应当 认为在任何实际一实施例的开发中,必须作出大量实施细节以实现开发者的 特定目标,例如按照有关系统或有关商业的限制,由一个一实施例改变为另 一个一实施例。另外,应当认为这种开发工作可能是复杂和耗费时间的,但 是对于本领域技术人员来说仅仅是常规工作。
需说明的是,附图均采用非常简化的形式且均使用非精准的比率,仅用 以方便、明晰地辅助说明本发明一实施例的目的。
实施例一
如图1所示,本实施例一种虚拟现实交互方法,包含以下过程步骤S1、 获取目标图像;
步骤S2、将所述目标图像分离成目标对象图像以及真实场景图像,并提 取所述目标对象图像的特征点;
步骤S3、调用特征数据库根据所述目标对象的特征点对所述目标对象进 行分类,以得到所述目标对象的类别信息(即其所属类别);
步骤S4、对所述目标对象的行为进行捕捉定位,以得到所述目标对象的 运动轨迹信息;
步骤S5.1、根据所述目标对象的类别信息和/或其运动轨迹信息匹配至少 一个第一虚拟特效模型;
步骤S6、将所述第一虚拟特效模型与所述真实场景图像进行集成,得到 优化图像信息;
步骤S7、显示和/或存储所述优化图像信息。
在本实施例中,所述预设的处理规则包含但不限于为步骤S3、S4、S5.1 和S6所述的内容。
所述步骤S5.1包括:根据所述目标对象所属类别以及其运动轨迹调用虚 拟特效模型库,所述虚拟特效模型库中预先设有包含对应所述特征数据库中 所有目标对象类型的虚拟特效模型。
在本实施例中,所述特征数据库为预先建立的,所述特征数据库包含人 类、动物类、昆虫类、建筑类、植物类,自然地理类、家居类和玩具类。所 述第一虚拟特效模型包括动态虚拟特效模型和静态虚拟特效模型。由于预先 建立的特征数据库包含很多类型的客观物体的特征点,解决了现有技术中在 手机端实现虚拟现实方法中,大多功能较为单一,客观物体分类不全面,给 出的新奇体验较少的问题,丰富了用户体验,增加了体验趣味性。
继续参考图1,本实施例一种虚拟现实交互方法,包含以下过程:
步骤S1、获取目标图像;
步骤S2、将所述目标图像分离成目标对象图像以及真实场景图像,并提 取所述目标对象图像的特征点;
步骤S3、调用特征数据库根据所述目标对象的特征点对所述目标对象进 行分类,得到所述目标对象的类别信息;
步骤S4、对所述目标对象的行为进行捕捉定位,以得到所述目标对象的 运动轨迹信息;
步骤S5.2、根据所述目标对象的类别信息和/或其运动轨迹信息匹配至少 一个第二虚拟特效模型;
步骤S6、将所述第二虚拟特效模型与所述真实场景图像进行集成,得到 优化图像信息;
步骤S7、显示和/或存储所述优化图像信息。
在本实施例中,所述预设的处理规则包含但不限于为步骤S3、S4、S5.2 和S6所述的内容。
在本实施例中,所述特征数据库为预先建立的,所述特征数据库包含人 类、动物类、昆虫类、建筑类、植物类,自然地理类、家居类和玩具类。所 述第二虚拟特效模型包括动态虚拟特效模型和静态虚拟特效模型。由于预先 建立的特征数据库包含很多类型的客观物体的特征点,解决了现有技术中在 手机端实现虚拟现实方法中,大多功能较为单一,客观物体分类不全面,给 出的新奇体验较少的问题,以及增加了自定义虚拟特征模型这一方法。
所述步骤S5.2进一步包含:预先建立目标对象图像与具备自定义虚拟特 效的虚拟对象间的关联关系;获取预先建立的目标对象图像与具备自定义虚 拟特效的虚拟对象间的关联关系;当接收到呈现自定义虚拟特效的请求时, 调起移动终端的图像采集器;利用图像采集器采集现实场景中的当前场景画 面,并将采集的当前场景画面与目标对象图像进行比对;若比对一致,则根 据上述关联关系获取目标对象图像关联的虚拟对象;将目标对象图像关联的 虚拟对象与当前场景画面进行合成,得到合成图像,并显示。解决了由于现 有技术中虚拟模型类型局限性导致缺少更多的可操作性,趣味性不强的问题。
根据所述步骤S5.2方法所述自定义出来的第二虚拟特效模型,可以实现 夸张特效,例如,当所获取的目标图像为一静态的实物花朵时,经过本方法 处理用户所看到的为可以让改静态的实物花朵模拟成动态画面,即开花画面。
当所获取的目标图像为动态的静静流淌的河流时,其可以自定义该河流 使其夸张化处理,将该动态的静静流淌的河流虚拟成动态的波涛汹涌的河流。
存储上述实施例中所述得到的优化图像信息。
实施例二
基于上述实施例所述的一种虚拟现实交互方法,本实施例公开了一种虚 拟现实交互装置,包括:第一获取模块100,其被配置为获取目标图像;第 二获取模块101,其被配置为获取所述目标图像的特征信息;优化模块(图 中未示出),其被配置为根据所述目标图像的特征信息和预设的处理规则得到 优化图像信息。具体的,所述优化模块包括:匹配单元102和集成单元103
所述匹配单元102被配置为根据所述目标图像的特征信息匹配至少一个 特效数据;所述集成单元103被配置为将所述特效数据与所述目标图像进行 集成以得到优化图像信息。
进一步的,本实施例所述的虚拟现实交互装置还包含:用于获取所述目 标图像的特征信息中的目标对象的类别信息的提取模块(图中未示出)和分 类模块(图中未示出);
所述提取模块,具体用于,将所述目标图像分离成目标对象图像以及真 实场景图像,并提取所述目标对象的特征点;
所述分类模块,具体用于,调用特征数据库根据所述目标对象的特征点 对所述目标对象进行分类,以得到所述目标对象的类别信息。
进一步的,还包含:用于获取所述目标图像的特征信息中的目标对象的 运动轨迹信息的传感器模块(图中未示出);
所述传感器模块,具体用于,对所述目标对象的行为进行捕捉定位,以 得到所述目标对象的运动轨迹信息。
进一步的,所述匹配单元102,具体用于,根据所述目标对象的类别信 息和/或其运动轨迹信息调用虚拟特效模型库,所述虚拟特效模型库中预先设 有包含对应所述特征数据库中所有目标对象类型的第一虚拟特效模型。
进一步的,还包含:生成模块(图中未示出),其被配置为根据获取的目 标图像自定义第二虚拟特效模型。
进一步的,还包含:存储模块(图中未示出),其被配置为存储所述优化 图像信息。
进一步的,还包含:显示模块(图中未示出),其被配置为显示所述优化 图像信息。
在本实施例中,所述特征数据库为预先建立的,所述特征数据库包含人 类、动物类、昆虫类、建筑类、植物类,自然地理类、家居类和玩具类。所 述第二虚拟特效模型包括动态虚拟特效模型和静态虚拟特效模型。由于预先 建立的特征数据库包含很多类型的客观物体的特征点,解决了现有技术中在 手机端实现虚拟现实方法中,大多功能较为单一,客观物体分类不全面,给 出的新奇体验较少的问题,以及增加了自定义虚拟特征模型这一方法,解决 了由于现有技术中虚拟模型类型局限性导致缺少更多的可操作性,趣味性不 强的问题。
基于实施例二的一种虚拟现实交互装置,与所述实施例三的一种虚拟现 实交互装置唯一不同的是增加了存储模块,其被配置为存储所述优化图像信 息。
实施例三
如图3所示,基于上述实施例所述的虚拟现实交互方法,本实施例公开 了一种电子终端设备,包含:处理器200,存储器201以及存储在所述存储 器上并可在所述处理器上运行的计算机程序,所述处理器200执行所述程序 时实现上文实施例一~实施例二中任意一实施例虚拟现实交互方法。
所述电子终端设备可以是移动电话,游戏控制台,电脑、平板设备,个 人数字助理等。
所述电子终端设备还包括:电源模块202,交互组件203,通信模块204, 传感器组件205以及接口206。处理器200通常电子终端设备的整体操作,诸如 与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理器 200可以包括一个或多个模块,便于处理器200和其他模块之间的交互。例如, 处理器200可以包括多媒体模块,以方便交互组件203和处理器200之间的交 互。存储器201被配置为存储各种类型的数据以支持在电子终端设备的操作。 这些数据的示例包括用于在电子终端设备上操作的任何应用程序或方法的指 令,联系人数据,电话簿数据,消息,图片,视频等。存储器201可以由任何 类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存 储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存 储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器, 快闪存储器,磁盘或光盘。
电源模块202为电子终端设备的各种模块提供电力。电源模块202可以包 括电源管理系统,一个或多个电源,及其他与为电子终端设备生成、管理和 分配电力相关联的模块。交互组件203包括在电子终端设备和用户之间的提供 一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和 触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收 来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑 动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与触摸或滑动操作相关的持续时间和压力。在一些实施例中,交 互组件203包括一个前置摄像头和/或后置摄像头。当电子终端设备处于操作 模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部 的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系 统或具有焦距和光学变焦能力。
交互组件203还包括音频模块被配置为输出和/或输入音频信号。例如, 音频模块包括一个麦克风(MIC),当电子终端设备处于操作模式,如呼叫模 式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接 收的音频信号可以被进一步存储在存储器201或经由通信模块204发送。在一 些实施例中,音频模块还包括一个扬声器,用于输出音频信号。接口206为I/O 的接口为处理器200和外围接口模块之间提供接口,上述外围接口模块可以是 键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、 启动按钮和锁定按钮。
传感器组件205包括一个或多个传感器,用于为电子终端设备提供各个方 面的状态评估。例如,传感器组件205可以检测到电子终端设备的打开/关闭 状态,模块的相对定位,例如组件为电子终端设备的显示器和小键盘,传感 器组件205还可以检测电子终端设备或电子终端设备一个组件的位置改变,用 户与电子终端设备接触的存在或不存在,电子终端设备方位或加速/减速和其 温度变化。传感器组件205可以包括接近传感器,被配置用来在没有任何的物 理接触时检测附近物体的存在。传感器组件205还可以包括光传感器,如 CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传 感器组件205还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感 器或温度传感器。通信模块204被配置为便于电子终端设备和其他设备之间有 线或无线方式的通信。电子终端设备可以接入基于通信标准的无线网络,如 WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信模块204经由 广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示 例性实施例中,通信模块204还包括近场通信(NFC)模块,以促进短程通信。 例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术, 超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
尽管本发明的内容已经通过上述优选实施例作了详细介绍,但应当认识 到上述的描述不应被认为是对本发明的限制。在本领域技术人员阅读了上述 内容后,对于本发明的多种修改和替代都将是显而易见的。因此,本发明的 保护范围应由所附的权利要求来限定。

Claims (17)

1.一种虚拟现实交互方法,其特征在于,包含以下过程:
获取目标图像;
获取所述目标图像的特征信息;
根据所述目标图像的特征信息和预设的处理规则得到优化图像信息。
2.如权利要求1所述的虚拟现实交互方法,其特征在于,所述根据所述目标图像的特征信息和预设的处理规则得到优化图像信息的步骤具体为:
根据所述目标图像的特征信息匹配至少一个特效数据;以及
将所述特效数据与所述目标图像进行集成以得到所述优化图像信息。
3.如权利要求2所述的虚拟现实交互方法,其特征在于,所述获取所述目标图像的特征信息包含:将所述目标图像分离成目标对象图像以及真实场景图像,以及对所述目标对象进行分类,得到所述目标对象的类别信息。
4.如权利要求3所述的虚拟现实交互方法,其特征在于,对所述目标对象进行分类包含:提取所述目标对象的特征点,并调用特征数据库根据所述目标对象的特征点对所述目标对象进行分类,得到所述类别信息。
5.如权利要求4所述的虚拟现实交互方法,其特征在于,所述获取所述目标图像的特征信息还包含:对所述目标对象的行为进行捕捉定位以得到所述目标对象的运动轨迹信息。
6.如权利要求1~5中任意一项所述的虚拟现实交互方法,其特征在于,对所述优化图像信息进行存储和/或显示。
7.如权利要求6所述的虚拟现实交互方法,其特征在于,所述特征数据库包含人类、动物类、昆虫类、建筑类、植物类,自然地理类、家居类和玩具类。
8.如权利要求7所述的虚拟现实交互方法,其特征在于,所述根据所述目标图像的特征信息匹配至少一个特效数据进一步包含以下过程:根据所述目标对象的类别信息和/或其运动轨迹信息调用虚拟特效模型库,所述虚拟特效模型库中预先设有包含对应所述特征数据库中所有目标对象类型的第一虚拟特效模型。
9.如权利要求8所述的虚拟现实交互方法,其特征在于,所述根据所述目标图像的特征信息匹配至少一个特效数据还包含以下过程:
根据获取的所述目标图像自定义第二虚拟特效模型。
10.如权利要求9所述的虚拟现实交互方法,其特征在于,所述自定义第二虚拟特效模型包含以下过程:
预先建立目标对象图像与具备自定义虚拟特效的虚拟对象间的关联关系;
获取预先建立的目标对象图像与具备自定义虚拟特效的虚拟对象间的关联关系;
当接收到呈现自定义虚拟特效的请求时,调起移动终端的图像采集器;利用图像采集器采集现实场景中的当前场景画面,并将采集的当前场景画面与目标图像进行比对;若比对一致,则根据上述关联关系获取目标图像关联的虚拟对象;将目标图像关联的虚拟对象与当前场景画面进行合成,得到合成图像,并显示。
11.如权利要求10所述的虚拟现实交互方法,其特征在于,
所述第一虚拟特效模型和第二虚拟特效模型均包括动态虚拟特效模型和静态虚拟特效模型。
12.一种虚拟现实交互装置,其特征在于,包含:
第一获取模块,其被配置为获取目标图像;
第二获取模块,其被配置为获取所述目标图像的特征信息;
优化模块,其被配置为根据所述目标图像的特征信息和预设的处理规则得到优化图像信息。
13.如权利要求12所述的虚拟现实交互方法,其特征在于,所述优化模块包括:
匹配单元,其被配置为根据所述目标图像的特征信息匹配至少一个特效数据;
集成单元,其被配置为将所述特效数据与所述目标图像进行集成以得到优化图像信息。
14.如权利要求13所述的虚拟现实交互装置,其特征在于,
还包含:用于获取所述目标图像的特征信息中的目标对象的类别信息的提取模块和分类模块;
所述提取模块,具体用于,将所述目标图像分离成目标对象图像以及真实场景图像,并提取所述目标对象的特征点;
所述分类模块,具体用于,调用特征数据库根据所述目标对象的特征点对所述目标对象进行分类,以得到所述目标对象的类别信息。
15.如权利要求14所述的虚拟现实交互装置,其特征在于,还包含:用于获取所述目标图像的特征信息中的目标对象的运动轨迹信息的传感器模块;
所述传感器模块,具体用于,对所述目标对象的行为进行捕捉定位,以得到所述目标对象的运动轨迹信息。
16.如权利要求15所述的虚拟现实交互装置,其特征在于,所述匹配单元,具体用于,根据所述目标对象的类别信息和/或其运动轨迹信息调用虚拟特效模型库,所述虚拟特效模型库中预先设有包含对应所述特征数据库中所有目标对象类型的第一虚拟特效模型。
17.如权利要求16所述的虚拟现实交互装置,其特征在于,还包含:生成模块,其被配置为根据获取的目标图像自定义第二虚拟特效模型。
CN201910661131.7A 2019-07-22 2019-07-22 一种虚拟现实交互方法及装置 Pending CN110381210A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910661131.7A CN110381210A (zh) 2019-07-22 2019-07-22 一种虚拟现实交互方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910661131.7A CN110381210A (zh) 2019-07-22 2019-07-22 一种虚拟现实交互方法及装置

Publications (1)

Publication Number Publication Date
CN110381210A true CN110381210A (zh) 2019-10-25

Family

ID=68254709

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910661131.7A Pending CN110381210A (zh) 2019-07-22 2019-07-22 一种虚拟现实交互方法及装置

Country Status (1)

Country Link
CN (1) CN110381210A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112035041A (zh) * 2020-08-31 2020-12-04 北京字节跳动网络技术有限公司 一种图像处理方法、装置、电子设备和存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB201503114D0 (en) * 2015-02-25 2015-04-08 Bae Systems Plc Information system and method
US20150104061A1 (en) * 2005-07-29 2015-04-16 Nokia Corporation Method and device for augmented reality message hiding and revealing
US20160026253A1 (en) * 2014-03-11 2016-01-28 Magic Leap, Inc. Methods and systems for creating virtual and augmented reality
JP2016057758A (ja) * 2014-09-08 2016-04-21 富士通株式会社 表示制御方法、情報処理プログラム、及び情報処理装置
CN105824412A (zh) * 2016-03-09 2016-08-03 北京奇虎科技有限公司 在移动终端上呈现自定义虚拟特效的方法及装置
CN107481327A (zh) * 2017-09-08 2017-12-15 腾讯科技(深圳)有限公司 关于增强现实场景的处理方法、装置、终端设备及系统
CN108604118A (zh) * 2016-03-07 2018-09-28 谷歌有限责任公司 在增强/虚拟现实环境中的智能对象大小调整和布置
CN109035421A (zh) * 2018-08-29 2018-12-18 百度在线网络技术(北京)有限公司 图像处理方法、装置、设备及存储介质
CN109420336A (zh) * 2017-08-30 2019-03-05 深圳市掌网科技股份有限公司 基于增强现实的游戏实现方法和装置
CN110020185A (zh) * 2017-12-29 2019-07-16 国民技术股份有限公司 智能搜索方法、终端及服务器

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150104061A1 (en) * 2005-07-29 2015-04-16 Nokia Corporation Method and device for augmented reality message hiding and revealing
US20160026253A1 (en) * 2014-03-11 2016-01-28 Magic Leap, Inc. Methods and systems for creating virtual and augmented reality
JP2016057758A (ja) * 2014-09-08 2016-04-21 富士通株式会社 表示制御方法、情報処理プログラム、及び情報処理装置
GB201503114D0 (en) * 2015-02-25 2015-04-08 Bae Systems Plc Information system and method
CN108604118A (zh) * 2016-03-07 2018-09-28 谷歌有限责任公司 在增强/虚拟现实环境中的智能对象大小调整和布置
CN105824412A (zh) * 2016-03-09 2016-08-03 北京奇虎科技有限公司 在移动终端上呈现自定义虚拟特效的方法及装置
CN109420336A (zh) * 2017-08-30 2019-03-05 深圳市掌网科技股份有限公司 基于增强现实的游戏实现方法和装置
CN107481327A (zh) * 2017-09-08 2017-12-15 腾讯科技(深圳)有限公司 关于增强现实场景的处理方法、装置、终端设备及系统
CN110020185A (zh) * 2017-12-29 2019-07-16 国民技术股份有限公司 智能搜索方法、终端及服务器
CN109035421A (zh) * 2018-08-29 2018-12-18 百度在线网络技术(北京)有限公司 图像处理方法、装置、设备及存储介质

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112035041A (zh) * 2020-08-31 2020-12-04 北京字节跳动网络技术有限公司 一种图像处理方法、装置、电子设备和存储介质
CN112035041B (zh) * 2020-08-31 2022-05-31 北京字节跳动网络技术有限公司 一种图像处理方法、装置、电子设备和存储介质
US11776209B2 (en) 2020-08-31 2023-10-03 Beijing Bytedance Network Technology Co., Ltd. Image processing method and apparatus, electronic device, and storage medium

Similar Documents

Publication Publication Date Title
CN109819313B (zh) 视频处理方法、装置及存储介质
CN111726536A (zh) 视频生成方法、装置、存储介质及计算机设备
CN108510597A (zh) 虚拟场景的编辑方法、装置及非临时性计算机可读存储介质
CN104700353B (zh) 图像滤镜生成方法及装置
CN111368796B (zh) 人脸图像的处理方法、装置、电子设备及存储介质
CN107018333A (zh) 拍摄模板推荐方法、装置及拍摄设备
CN109729372B (zh) 直播间切换方法、装置、终端、服务器及存储介质
CN114205324B (zh) 消息显示方法、装置、终端、服务器及存储介质
CN105138962A (zh) 图像显示方法及装置
CN109660728B (zh) 一种拍照方法及装置
CN108270794B (zh) 内容发布方法、装置及可读介质
CN107730350A (zh) 基于增强现实的产品展示方法、装置及存储介质
CN106571136A (zh) 一种语音输出装置和方法
CN107832746A (zh) 表情识别方法及装置
CN105635452A (zh) 移动终端及其联系人标识方法
CN107766820A (zh) 图像分类方法及装置
CN106648098A (zh) 一种自定义场景的ar投影方法及系统
CN115718913B (zh) 一种用户身份识别方法及电子设备
CN105898573A (zh) 多媒体文件播放方法及装置
CN108108671A (zh) 产品说明信息获取方法及装置
CN110366050A (zh) 视频数据的处理方法、装置、电子设备及存储介质
CN114741559A (zh) 确定视频封面的方法、设备及存储介质
CN105095213B (zh) 信息关联方法及装置
CN110381210A (zh) 一种虚拟现实交互方法及装置
CN108322673A (zh) 视频生成方法和视频生成装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination