CN108063936A - 增强现实ar的实现方法、装置和计算机可读存储介质 - Google Patents
增强现实ar的实现方法、装置和计算机可读存储介质 Download PDFInfo
- Publication number
- CN108063936A CN108063936A CN201711481173.XA CN201711481173A CN108063936A CN 108063936 A CN108063936 A CN 108063936A CN 201711481173 A CN201711481173 A CN 201711481173A CN 108063936 A CN108063936 A CN 108063936A
- Authority
- CN
- China
- Prior art keywords
- character
- elements
- character type
- input
- type
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Processing Or Creating Images (AREA)
Abstract
本发明公开了增强现实AR的实现方法、装置和计算机可读存储介质。所述方法包括:获取摄像头采集的视频流;接收输入的一个或多个字符;从字符型AR元素库中确定使用的字符型AR元素,将所述一个或多个字符填充到所述字符型AR元素中;将填充后的字符型AR元素部署至所述视频流,生成AR视频流并在显示界面进行展示。该技术方案为用户提供了一种可编辑的AR展示效果,解决了现有技术中AR效果固定单一,用户只能看或者按照预设的方式进行交互的问题,提高了用户的参与度,可玩性更高,用户体验更好。
Description
技术领域
本发明涉及增强现实领域,具体涉及增强现实AR的实现方法、装置和计算机可读存储介质。
背景技术
AR(Augmented Reality,增强现实),是一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3D模型的技术,这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。一般AR都是预先设置有AR模型,也就是用户只能观看,参与度并没有得到完全的开发。
发明内容
鉴于上述问题,提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的增强现实AR的实现方法、装置和计算机可读存储介质。
依据本发明的一个方面,提供了一种增强现实AR的实现方法,包括:
获取摄像头采集的视频流;
接收输入的一个或多个字符;
从字符型AR元素库中确定使用的字符型AR元素,将所述一个或多个字符填充到所述字符型AR元素中;
将填充后的字符型AR元素部署至所述视频流,生成AR视频流并在显示界面进行展示。
可选地,该方法还包括:
对所述一个或多个字符进行语义分析,得到语义分析结果;
所述从字符型AR元素库中确定使用的字符型AR元素包括:
从所述字符型AR元素库中选取属性与所述语义分析结果相匹配的字符型AR元素。
可选地,所述字符型AR元素库包括对应于单个字符的第一类字符型AR元素,以及对应于多个字符的第二类字符型AR元素;
所述第一类字符型AR元素包括独立属性的字符型AR元素和模板属性的字符型AR元素,其中,多个模板属性相同的字符型AR元素隶属于同一字符模板。
可选地,所述从字符型AR元素库中确定使用的字符型AR元素,将所述一个或多个字符填充到所述字符型AR元素中包括如下的一种或多种:
根据输入的字符的数量,选取对应的字符数量上限不小于输入的字符的数量的第二类字符型AR元素,将输入的全部字符填充中选取的第二类字符型AR元素中;
根据输入的字符的数量,选取包含的模板属性的字符型AR元素数量不小于输入的字符的数量的字符模板,从选取的字符模板下选取与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中;
根据输入的字符的数量,选取与输入的字符的数量匹配的独立属性的字符型AR元素,将输入的各字符分别填充至选取的独立属性的字符型AR元素中;
选取字符模板,若该字符模板包含的模板属性的字符型AR元素数量小于输入的字符的数量,则对该字符模板中部分目标属性的字符型AR元素进行复用,得到与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中;若该字符模板包含的模板属性的字符型AR元素数量不小于输入的字符的数量,则从选取的字符模板下选取与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中。
可选地,所述字符型AR元素包括字符展示子元素和支撑子元素。
可选地,该方法还包括:
从所述视频流中识别出平面;
所述将填充后的字符型AR元素部署至所述视频流包括:将填充后的字符型AR元素部署在所述平面上。
可选地,该方法还包括:
先将所述视频流在所述显示界面进行展示;
所述将填充后的字符型AR元素部署在所述平面上包括:在识别出的平面有多个时,响应于所述显示界面上的选取指令,确定与所述选取指令最接近的平面,将填充后的字符型AR元素部署在该最接近的平面上。
依据本发明的另一方面,提供了一种增强现实AR的实现装置,包括:
视频流获取单元,适于获取摄像头采集的视频流;
字符接收单元,适于接收输入的一个或多个字符;
填充单元,适于从字符型AR元素库中确定使用的字符型AR元素,将所述一个或多个字符填充到所述字符型AR元素中;
AR单元,适于将填充后的字符型AR元素部署至所述视频流,生成AR视频流并在显示界面进行展示。
可选地,该装置还包括:
语义分析单元,适于对所述一个或多个字符进行语义分析,得到语义分析结果;
所述填充单元,适于从所述字符型AR元素库中选取属性与所述语义分析结果相匹配的字符型AR元素。
可选地,所述字符型AR元素库包括对应于单个字符的第一类字符型AR元素,以及对应于多个字符的第二类字符型AR元素;
所述第一类字符型AR元素包括独立属性的字符型AR元素和模板属性的字符型AR元素,其中,多个模板属性相同的字符型AR元素隶属于同一字符模板。
可选地,所述填充单元,适于以如下的一种或多种方式执行将所述一个或多个字符填充到所述字符型AR元素中的步骤:根据输入的字符的数量,选取对应的字符数量上限不小于输入的字符的数量的第二类字符型AR元素,将输入的全部字符填充中选取的第二类字符型AR元素中;根据输入的字符的数量,选取包含的模板属性的字符型AR元素数量不小于输入的字符的数量的字符模板,从选取的字符模板下选取与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中;根据输入的字符的数量,选取与输入的字符的数量匹配的独立属性的字符型AR元素,将输入的各字符分别填充至选取的独立属性的字符型AR元素中;选取字符模板,若该字符模板包含的模板属性的字符型AR元素数量小于输入的字符的数量,则对该字符模板中部分目标属性的字符型AR元素进行复用,得到与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中;若该字符模板包含的模板属性的字符型AR元素数量不小于输入的字符的数量,则从选取的字符模板下选取与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中。
可选地,所述字符型AR元素包括字符展示子元素和支撑子元素。
可选地,该装置还包括:
识别单元,适于从所述视频流中识别出平面;
所述AR单元,适于将填充后的字符型AR元素部署在所述平面上。
可选地,所述AR单元,适于先将所述视频流在所述显示界面进行展示,在识别出的平面有多个时,响应于所述显示界面上的选取指令,确定与所述选取指令最接近的平面,将填充后的字符型AR元素部署在该最接近的平面上。
依据本发明的又一方面,提供了一种计算机可读存储介质,其中,所述计算机可读存储介质存储一个或多个程序,所述一个或多个程序当被处理器执行时,实现如上述任一项所述的方法。
由上述可知,本发明的技术方案,获取摄像头采集的视频流作为真实场景的数据内容,并接收用户输入的若干个字符,从字符型AR元素库中确定使用的字符型AR元素,将输入的字符填充到确定的字符型AR元素中,基于这些字符型AR元素和视频流生成AR视频流并在显示界面进行展示。该技术方案为用户提供了一种可编辑的AR展示效果,解决了现有技术中AR效果固定单一,用户只能看或者按照预设的方式进行交互的问题,提高了用户的参与度,可玩性更高,用户体验更好。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1示出了根据本发明一个实施例的一种增强现实AR的实现方法的流程示意图;
图2示出了根据本发明一个实施例的一种增强现实AR的实现装置的结构示意图;
图3示出了根据本发明一个实施例的计算机可读存储介质的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
图1示出了根据本发明一个实施例的一种增强现实AR的实现方法的流程示意图。如图1所示,该方法包括:
步骤S110,获取摄像头采集的视频流。
以用户以手机作为运行AR应用的设备为例,则手机的摄像头采集视频流作为现实世界的数据。
步骤S120,接收输入的一个或多个字符。
字符可以是英文字母、汉字、标点、数字等等。具体来说,可以在显示界面上提供一个可编辑区域,用户通过点击该可编辑区域,通过手写、键盘输入或是语音输入等方式来输入字符。
步骤S130,从字符型AR元素库中确定使用的字符型AR元素,将一个或多个字符填充到字符型AR元素中。
这里的字符型AR元素是一种可被用户编辑的AR元素,当然,具体可以是用户只能对这类AR元素的一部分进行编辑,具体来说,展示效果可以包含3D的文字、表情等等。
步骤S140,将填充后的字符型AR元素部署至视频流,生成AR视频流并在显示界面进行展示。
可见,图1所示的方法,获取摄像头采集的视频流作为真实场景的数据内容,并接收用户输入的若干个字符,从字符型AR元素库中确定使用的字符型AR元素,将输入的字符填充到确定的字符型AR元素中,基于这些字符型AR元素和视频流生成AR视频流并在显示界面进行展示。该技术方案为用户提供了一种可编辑的AR展示效果,解决了现有技术中AR效果固定单一,用户只能看或者按照预设的方式进行交互的问题,提高了用户的参与度,可玩性更高,用户体验更好。
在本发明的一个实施例中,上述方法还包括:对一个或多个字符进行语义分析,得到语义分析结果;从字符型AR元素库中确定使用的字符型AR元素包括:从字符型AR元素库中选取属性与语义分析结果相匹配的字符型AR元素。
例如,输入“生日快乐”,则根据语义分析,选取与带有生日祝福属性的字符型AR元素,例如蛋糕、蜡烛等等。这样使得使用的字符型AR元素更符合用户的场景需求。
在本实施例中给出了基于语义确定使用的字符型AR元素的示例,而字符型AR元素的属性除了可以与语义相关,还可以与字符的数量相关,下面给出了一种示例。
在本发明的一个实施例中,上述方法中,字符型AR元素库包括对应于单个字符的第一类字符型AR元素,以及对应于多个字符的第二类字符型AR元素;第一类字符型AR元素包括独立属性的字符型AR元素和模板属性的字符型AR元素,其中,多个模板属性相同的字符型AR元素隶属于同一字符模板。
其中,第一类字符型AR元素只能用于展示一个字符,例如“A”、“我”,“!”等等。而第二类字符型AR元素可以展示多个字符,但能够展示的字符数量可以是有限制的,例如能够展示四个字符的卡片,则可以展示“生日快乐”但不能展示“生日快乐!”。
除此之外,对于第一类字符型AR元素还可以分为独立属性的字符型AR元素和模板属性的字符型AR元素。举例来说,只能展示一个字符的小卡片AR元素,可以有红橙黄绿青蓝紫七种颜色,这七个卡片AR元素组成了一套字符模板,只能在一起使用,不能与其他独立属性的字符型AR元素,例如树叶AR元素混用。
在本发明的一个实施例中,上述方法中,从字符型AR元素库中确定使用的字符型AR元素,将一个或多个字符填充到字符型AR元素中包括如下的一种或多种:根据输入的字符的数量,选取对应的字符数量上限不小于输入的字符的数量的第二类字符型AR元素,将输入的全部字符填充中选取的第二类字符型AR元素中;根据输入的字符的数量,选取包含的模板属性的字符型AR元素数量不小于输入的字符的数量的字符模板,从选取的字符模板下选取与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中;根据输入的字符的数量,选取与输入的字符的数量匹配的独立属性的字符型AR元素,将输入的各字符分别填充至选取的独立属性的字符型AR元素中;选取字符模板,若该字符模板包含的模板属性的字符型AR元素数量小于输入的字符的数量,则对该字符模板中部分目标属性的字符型AR元素进行复用,得到与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中;若该字符模板包含的模板属性的字符型AR元素数量不小于输入的字符的数量,则从选取的字符模板下选取与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中。
本实施例给出了在字符型AR元素具有第一类字符型AR元素、第二类字符型AR元素,模板属性的AR元素和独立属性的AR元素的分类基础上,具体如何根据字符数量确定使用的字符型AR元素。例如:
上面“生日快乐”和“生日快乐!”的示例就很好地说了,在使用第二类字符型AR元素时,需要根据输入的字符的数量,选取对应的字符数量上限不小于输入的字符的数量的第二类字符型AR元素。之后直接将字符全部填充至二类字符型AR元素即可。
在使用第一类字符型AR元素时,针对模板属性的字符型AR元素,则需要先选择字符模板,例如,上面示出的七种颜色的小卡片AR元素组成的模板在这种示例中就只能适用于输入的字符数不超过7的场景。
而在另一示例中,上面的七种颜色的小卡片AR元素组成的模板也可以适用于输入的字符数大于7的场景,此时只需要将其中的某些颜色的小卡片进行复用即可。
而针对独立属性的字符型AR元素,则只需要保证数量相匹配即可,其中既可以使得选取的各字符型AR元素互不相同,也可以有重复。
在本发明的一个实施例中,上述方法中,字符型AR元素包括字符展示子元素和支撑子元素。
例如,上面的小卡片AR元素具体可以是由小人儿举着小卡片。这时候小卡片就是字符展示子元素,用于展示具体的字符;而小人儿就是支撑子元素。
在本发明的一个实施例中,上述方法还包括:从视频流中识别出平面;将填充后的字符型AR元素部署至视频流包括:将填充后的字符型AR元素部署在平面上。
由于AR与VR(虚拟现实)不同,体现的是真实场景与虚拟场景的融合,因此如何使得融合更自然,用户体验更流畅是需要解决的问题。在本实施例中采取了以真实场景中的平面作为纽带,例如,地面,桌面等水平方向上的平面,或者墙面,镜面等垂直方向上的平面,滑梯,斜坡等倾斜的平面等等。
在本发明的一个实施例中,上述方法还包括:先将视频流在显示界面进行展示;将填充后的字符型AR元素部署在平面上包括:在识别出的平面有多个时,响应于显示界面上的选取指令,确定与选取指令最接近的平面,将填充后的字符型AR元素部署在该最接近的平面上。
有时候视频流中会识别出多个平面,例如桌面和地面,而如果想实现将AR元素固定在平面上的效果,就需要用户选择具体将其放在桌面上还是地面上,此时,用户可以点击显示出的桌面或是地面,后台会自动根据用户的点击确定相应的平面作为AR元素部署的平面。
图2示出了根据本发明一个实施例的一种增强现实AR的实现装置的结构示意图。如图2所示,增强现实AR的实现装置200包括:
视频流获取单元210,适于获取摄像头采集的视频流。
以用户以手机作为运行AR应用的设备为例,则手机的摄像头采集视频流作为现实世界的数据。
字符接收单元220,适于接收输入的一个或多个字符。
字符可以是英文字母、汉字、标点、数字等等。具体来说,可以在显示界面上提供一个可编辑区域,用户通过点击该可编辑区域,通过手写、键盘输入或是语音输入等方式来输入字符。
填充单元230,适于从字符型AR元素库中确定使用的字符型AR元素,将一个或多个字符填充到字符型AR元素中。
这里的字符型AR元素是一种可被用户编辑的AR元素,当然,具体可以是用户只能对这类AR元素的一部分进行编辑,具体来说,展示效果可以包含3D的文字、表情等等。
AR单元240,适于将填充后的字符型AR元素部署至视频流,生成AR视频流并在显示界面进行展示。
可见,图2所示的装置,通过各单元的相互配合,获取摄像头采集的视频流作为真实场景的数据内容,并接收用户输入的若干个字符,从字符型AR元素库中确定使用的字符型AR元素,将输入的字符填充到确定的字符型AR元素中,基于这些字符型AR元素和视频流生成AR视频流并在显示界面进行展示。该技术方案为用户提供了一种可编辑的AR展示效果,解决了现有技术中AR效果固定单一,用户只能看或者按照预设的方式进行交互的问题,提高了用户的参与度,可玩性更高,用户体验更好。
在本发明的一个实施例中,上述装置还包括:语义分析单元(图未示),适于对一个或多个字符进行语义分析,得到语义分析结果;填充单元230,适于从字符型AR元素库中选取属性与语义分析结果相匹配的字符型AR元素。
例如,输入“生日快乐”,则根据语义分析,选取与带有生日祝福属性的字符型AR元素,例如蛋糕、蜡烛等等。这样使得使用的字符型AR元素更符合用户的场景需求。
在本实施例中给出了基于语义确定使用的字符型AR元素的示例,而字符型AR元素的属性除了可以与语义相关,还可以与字符的数量相关,下面给出了一种示例。
在本发明的一个实施例中,上述装置中,字符型AR元素库包括对应于单个字符的第一类字符型AR元素,以及对应于多个字符的第二类字符型AR元素;第一类字符型AR元素包括独立属性的字符型AR元素和模板属性的字符型AR元素,其中,多个模板属性相同的字符型AR元素隶属于同一字符模板。
其中,第一类字符型AR元素只能用于展示一个字符,例如“A”、“我”,“!”等等。而第二类字符型AR元素可以展示多个字符,但能够展示的字符数量可以是有限制的,例如能够展示四个字符的卡片,则可以展示“生日快乐”但不能展示“生日快乐!”。
除此之外,对于第一类字符型AR元素还可以分为独立属性的字符型AR元素和模板属性的字符型AR元素。举例来说,只能展示一个字符的小卡片AR元素,可以有红橙黄绿青蓝紫七种颜色,这七个卡片AR元素组成了一套字符模板,只能在一起使用,不能与其他独立属性的字符型AR元素,例如树叶AR元素混用。
在本发明的一个实施例中,上述装置中,填充单元230,适于以如下的一种或多种方式执行将一个或多个字符填充到字符型AR元素中的步骤:根据输入的字符的数量,选取对应的字符数量上限不小于输入的字符的数量的第二类字符型AR元素,将输入的全部字符填充中选取的第二类字符型AR元素中;根据输入的字符的数量,选取包含的模板属性的字符型AR元素数量不小于输入的字符的数量的字符模板,从选取的字符模板下选取与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中;根据输入的字符的数量,选取与输入的字符的数量匹配的独立属性的字符型AR元素,将输入的各字符分别填充至选取的独立属性的字符型AR元素中;选取字符模板,若该字符模板包含的模板属性的字符型AR元素数量小于输入的字符的数量,则对该字符模板中部分目标属性的字符型AR元素进行复用,得到与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中;若该字符模板包含的模板属性的字符型AR元素数量不小于输入的字符的数量,则从选取的字符模板下选取与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中。
本实施例给出了在字符型AR元素具有第一类字符型AR元素、第二类字符型AR元素,模板属性的AR元素和独立属性的AR元素的分类基础上,具体如何根据字符数量确定使用的字符型AR元素。例如:
上面“生日快乐”和“生日快乐!”的示例就很好地说了,在使用第二类字符型AR元素时,需要根据输入的字符的数量,选取对应的字符数量上限不小于输入的字符的数量的第二类字符型AR元素。之后直接将字符全部填充至二类字符型AR元素即可。
在使用第一类字符型AR元素时,针对模板属性的字符型AR元素,则需要先选择字符模板,例如,上面示出的七种颜色的小卡片AR元素组成的模板在这种示例中就只能适用于输入的字符数不超过7的场景。
而在另一示例中,上面的七种颜色的小卡片AR元素组成的模板也可以适用于输入的字符数大于7的场景,此时只需要将其中的某些颜色的小卡片进行复用即可。
而针对独立属性的字符型AR元素,则只需要保证数量相匹配即可,其在本发明的一个实施例中,上述装置中,字符型AR元素包括字符展示子元素和支撑子元素。
例如,上面的小卡片AR元素具体可以是由小人儿举着小卡片。这时候小卡片就是字符展示子元素,用于展示具体的字符;而小人儿就是支撑子元素。
在本发明的一个实施例中,上述装置还包括:识别单元(图未示),适于从视频流中识别出平面;AR单元240,适于将填充后的字符型AR元素部署在平面上。
由于AR与VR(虚拟现实)不同,体现的是真实场景与虚拟场景的融合,因此如何使得融合更自然,用户体验更流畅是需要解决的问题。在本实施例中采取了以真实场景中的平面作为纽带,例如,地面,桌面等水平方向上的平面,或者墙面,镜面等垂直方向上的平面,滑梯,斜坡等倾斜的平面等等。
在本发明的一个实施例中,上述装置中,AR单元240,适于先将视频流在显示界面进行展示,在识别出的平面有多个时,响应于显示界面上的选取指令,确定与选取指令最接近的平面,将填充后的字符型AR元素部署在该最接近的平面上。
有时候视频流中会识别出多个平面,例如桌面和地面,而如果想实现将AR元素固定在平面上的效果,就需要用户选择具体将其放在桌面上还是地面上,此时,用户可以点击显示出的桌面或是地面,后台会自动根据用户的点击确定相应的平面作为AR元素部署的平面。
综上所述,本发明的技术方案,获取摄像头采集的视频流作为真实场景的数据内容,并接收用户输入的若干个字符,从字符型AR元素库中确定使用的字符型AR元素,将输入的字符填充到确定的字符型AR元素中,基于这些字符型AR元素和视频流生成AR视频流并在显示界面进行展示。该技术方案为用户提供了一种可编辑的AR展示效果,解决了现有技术中AR效果固定单一,用户只能看或者按照预设的方式进行交互的问题,提高了用户的参与度,可玩性更高,用户体验更好。
需要说明的是:
在此提供的算法和显示不与任何特定计算机、虚拟装置或者其它设备固有相关。各种通用装置也可以与基于在此的示教一起使用。根据上面的描述,构造这类装置所要求的结构是显而易见的。此外,本发明也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说,如下面的权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如,在下面的权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
本发明的各个部件实施例可以以硬件实现,或者以在一个或者多个处理器上运行的软件模块实现,或者以它们的组合实现。本领域的技术人员应当理解,可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的增强现实AR的实现装置中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如,计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上,或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到,或者在载体信号上提供,或者以任何其他形式提供。
图3示出了根据本发明一个实施例的一种计算机可读存储介质的结构示意图。该计算机可读存储介质300存储有用于执行根据本发明的方法步骤的计算机可读程序代码310,例如可以被电子设备的处理器读取的程序代码,当这些程序代码由电子设备运行时,导致该电子设备执行上面所描述的方法中的各个步骤。程序代码可以以适当形式进行压缩。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中,这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
本发明的实施例公开了A1、一种增强现实AR的实现方法,包括:
获取摄像头采集的视频流;
接收输入的一个或多个字符;
从字符型AR元素库中确定使用的字符型AR元素,将所述一个或多个字符填充到所述字符型AR元素中;
将填充后的字符型AR元素部署至所述视频流,生成AR视频流并在显示界面进行展示。
A2、如A1所述的方法,其中,该方法还包括:
对所述一个或多个字符进行语义分析,得到语义分析结果;
所述从字符型AR元素库中确定使用的字符型AR元素包括:
从所述字符型AR元素库中选取属性与所述语义分析结果相匹配的字符型AR元素。
A3、如A1所述的方法,其中,所述字符型AR元素库包括对应于单个字符的第一类字符型AR元素,以及对应于多个字符的第二类字符型AR元素;
所述第一类字符型AR元素包括独立属性的字符型AR元素和模板属性的字符型AR元素,其中,多个模板属性相同的字符型AR元素隶属于同一字符模板。
A4、如A3所述的方法,其中,所述从字符型AR元素库中确定使用的字符型AR元素,将所述一个或多个字符填充到所述字符型AR元素中包括如下的一种或多种:
根据输入的字符的数量,选取对应的字符数量上限不小于输入的字符的数量的第二类字符型AR元素,将输入的全部字符填充中选取的第二类字符型AR元素中;
根据输入的字符的数量,选取包含的模板属性的字符型AR元素数量不小于输入的字符的数量的字符模板,从选取的字符模板下选取与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中;
根据输入的字符的数量,选取与输入的字符的数量匹配的独立属性的字符型AR元素,将输入的各字符分别填充至选取的独立属性的字符型AR元素中;
选取字符模板,若该字符模板包含的模板属性的字符型AR元素数量小于输入的字符的数量,则对该字符模板中部分目标属性的字符型AR元素进行复用,得到与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中;若该字符模板包含的模板属性的字符型AR元素数量不小于输入的字符的数量,则从选取的字符模板下选取与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中。
A5、如A1所述的方法,其中,所述字符型AR元素包括字符展示子元素和支撑子元素。
A6、如A1所述的方法,其中,该方法还包括:
从所述视频流中识别出平面;
所述将填充后的字符型AR元素部署至所述视频流包括:将填充后的字符型AR元素部署在所述平面上。
A7、如A6所述的方法,其中,该方法还包括:
先将所述视频流在所述显示界面进行展示;
所述将填充后的字符型AR元素部署在所述平面上包括:在识别出的平面有多个时,响应于所述显示界面上的选取指令,确定与所述选取指令最接近的平面,将填充后的字符型AR元素部署在该最接近的平面上。
本发明的实施例还公开了B8、一种增强现实AR的实现装置,包括:
视频流获取单元,适于获取摄像头采集的视频流;
字符接收单元,适于接收输入的一个或多个字符;
填充单元,适于从字符型AR元素库中确定使用的字符型AR元素,将所述一个或多个字符填充到所述字符型AR元素中;
AR单元,适于将填充后的字符型AR元素部署至所述视频流,生成AR视频流并在显示界面进行展示。
B9、如B8所述的装置,其中,该装置还包括:
语义分析单元,适于对所述一个或多个字符进行语义分析,得到语义分析结果;
所述填充单元,适于从所述字符型AR元素库中选取属性与所述语义分析结果相匹配的字符型AR元素。
B10、如B8所述的装置,其中,所述字符型AR元素库包括对应于单个字符的第一类字符型AR元素,以及对应于多个字符的第二类字符型AR元素;
所述第一类字符型AR元素包括独立属性的字符型AR元素和模板属性的字符型AR元素,其中,多个模板属性相同的字符型AR元素隶属于同一字符模板。
B11、如B10所述的装置,其中,所述填充单元,适于以如下的一种或多种方式执行将所述一个或多个字符填充到所述字符型AR元素中的步骤:根据输入的字符的数量,选取对应的字符数量上限不小于输入的字符的数量的第二类字符型AR元素,将输入的全部字符填充中选取的第二类字符型AR元素中;根据输入的字符的数量,选取包含的模板属性的字符型AR元素数量不小于输入的字符的数量的字符模板,从选取的字符模板下选取与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中;根据输入的字符的数量,选取与输入的字符的数量匹配的独立属性的字符型AR元素,将输入的各字符分别填充至选取的独立属性的字符型AR元素中;选取字符模板,若该字符模板包含的模板属性的字符型AR元素数量小于输入的字符的数量,则对该字符模板中部分目标属性的字符型AR元素进行复用,得到与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中;若该字符模板包含的模板属性的字符型AR元素数量不小于输入的字符的数量,则从选取的字符模板下选取与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中。
B12、如B8所述的装置,其中,所述字符型AR元素包括字符展示子元素和支撑子元素。
B13、如B8所述的装置,其中,该装置还包括:
识别单元,适于从所述视频流中识别出平面;
所述AR单元,适于将填充后的字符型AR元素部署在所述平面上。
B14、如B13所述的装置,其中,
所述AR单元,适于先将所述视频流在所述显示界面进行展示,在识别出的平面有多个时,响应于所述显示界面上的选取指令,确定与所述选取指令最接近的平面,将填充后的字符型AR元素部署在该最接近的平面上。
本发明的实施例还公开了C15、一种计算机可读存储介质,其中,所述计算机可读存储介质存储一个或多个程序,所述一个或多个程序当被处理器执行时,实现如A1-A7中任一项所述的方法。
Claims (10)
1.一种增强现实AR的实现方法,包括:
获取摄像头采集的视频流;
接收输入的一个或多个字符;
从字符型AR元素库中确定使用的字符型AR元素,将所述一个或多个字符填充到所述字符型AR元素中;
将填充后的字符型AR元素部署至所述视频流,生成AR视频流并在显示界面进行展示。
2.如权利要求1所述的方法,其中,该方法还包括:
对所述一个或多个字符进行语义分析,得到语义分析结果;
所述从字符型AR元素库中确定使用的字符型AR元素包括:
从所述字符型AR元素库中选取属性与所述语义分析结果相匹配的字符型AR元素。
3.如权利要求1所述的方法,其中,所述字符型AR元素库包括对应于单个字符的第一类字符型AR元素,以及对应于多个字符的第二类字符型AR元素;
所述第一类字符型AR元素包括独立属性的字符型AR元素和模板属性的字符型AR元素,其中,多个模板属性相同的字符型AR元素隶属于同一字符模板。
4.如权利要求3所述的方法,其中,所述从字符型AR元素库中确定使用的字符型AR元素,将所述一个或多个字符填充到所述字符型AR元素中包括如下的一种或多种:
根据输入的字符的数量,选取对应的字符数量上限不小于输入的字符的数量的第二类字符型AR元素,将输入的全部字符填充中选取的第二类字符型AR元素中;
根据输入的字符的数量,选取包含的模板属性的字符型AR元素数量不小于输入的字符的数量的字符模板,从选取的字符模板下选取与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中;
根据输入的字符的数量,选取与输入的字符的数量匹配的独立属性的字符型AR元素,将输入的各字符分别填充至选取的独立属性的字符型AR元素中;
选取字符模板,若该字符模板包含的模板属性的字符型AR元素数量小于输入的字符的数量,则对该字符模板中部分目标属性的字符型AR元素进行复用,得到与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中;若该字符模板包含的模板属性的字符型AR元素数量不小于输入的字符的数量,则从选取的字符模板下选取与输入的字符的数量匹配的模板属性的字符型AR元素,将输入的各字符分别填充至选取的模板属性的字符型AR元素中。
5.如权利要求1所述的方法,其中,所述字符型AR元素包括字符展示子元素和支撑子元素。
6.如权利要求1所述的方法,其中,该方法还包括:
从所述视频流中识别出平面;
所述将填充后的字符型AR元素部署至所述视频流包括:将填充后的字符型AR元素部署在所述平面上。
7.如权利要求6所述的方法,其中,该方法还包括:
先将所述视频流在所述显示界面进行展示;
所述将填充后的字符型AR元素部署在所述平面上包括:在识别出的平面有多个时,响应于所述显示界面上的选取指令,确定与所述选取指令最接近的平面,将填充后的字符型AR元素部署在该最接近的平面上。
8.一种增强现实AR的实现装置,包括:
视频流获取单元,适于获取摄像头采集的视频流;
字符接收单元,适于接收输入的一个或多个字符;
填充单元,适于从字符型AR元素库中确定使用的字符型AR元素,将所述一个或多个字符填充到所述字符型AR元素中;
AR单元,适于将填充后的字符型AR元素部署至所述视频流,生成AR视频流并在显示界面进行展示。
9.如权利要求8所述的装置,其中,该装置还包括:
语义分析单元,适于对所述一个或多个字符进行语义分析,得到语义分析结果;
所述填充单元,适于从所述字符型AR元素库中选取属性与所述语义分析结果相匹配的字符型AR元素。
10.一种计算机可读存储介质,其中,所述计算机可读存储介质存储一个或多个程序,所述一个或多个程序当被处理器执行时,实现如权利要求1-7中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711481173.XA CN108063936B (zh) | 2017-12-29 | 2017-12-29 | 增强现实ar的实现方法、装置和计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711481173.XA CN108063936B (zh) | 2017-12-29 | 2017-12-29 | 增强现实ar的实现方法、装置和计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108063936A true CN108063936A (zh) | 2018-05-22 |
CN108063936B CN108063936B (zh) | 2020-11-03 |
Family
ID=62140882
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711481173.XA Active CN108063936B (zh) | 2017-12-29 | 2017-12-29 | 增强现实ar的实现方法、装置和计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108063936B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109920065A (zh) * | 2019-03-18 | 2019-06-21 | 腾讯科技(深圳)有限公司 | 资讯的展示方法、装置、设备及存储介质 |
Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102082933A (zh) * | 2009-11-30 | 2011-06-01 | 新奥特(北京)视频技术有限公司 | 一种字幕制作系统 |
CN103050025A (zh) * | 2012-12-20 | 2013-04-17 | 广东欧珀移动通信有限公司 | 一种移动终端的学习方法及其学习系统 |
CN103929653A (zh) * | 2014-04-30 | 2014-07-16 | 成都理想境界科技有限公司 | 增强现实视频生成器、播放器及其生成方法、播放方法 |
US20150040074A1 (en) * | 2011-08-18 | 2015-02-05 | Layar B.V. | Methods and systems for enabling creation of augmented reality content |
CN104641413A (zh) * | 2012-09-18 | 2015-05-20 | 高通股份有限公司 | 利用头戴式显示器来实现人际交互 |
CN104866266A (zh) * | 2015-04-30 | 2015-08-26 | 北京农业智能装备技术研究中心 | 农作物性状展示方法及装置 |
CN105210117A (zh) * | 2013-05-14 | 2015-12-30 | 高通股份有限公司 | 增强现实(ar)俘获和播放 |
CN105224069A (zh) * | 2014-07-03 | 2016-01-06 | 王登高 | 一种增强现实虚拟键盘输入方法及使用该方法的装置 |
CN105323252A (zh) * | 2015-11-16 | 2016-02-10 | 上海璟世数字科技有限公司 | 基于增强现实技术实现互动的方法、系统和终端 |
CN105989132A (zh) * | 2015-02-17 | 2016-10-05 | 上海触趣网络科技有限公司 | 图像文件处理及语音控制方法 |
CN106022873A (zh) * | 2016-05-17 | 2016-10-12 | 暨南大学 | 一种基于增强现实的自助点餐系统 |
CN106162325A (zh) * | 2015-04-10 | 2016-11-23 | 北京云创视界科技有限公司 | 一种增强现实视频生成方法 |
CN106210901A (zh) * | 2014-11-13 | 2016-12-07 | Lg电子株式会社 | 显示装置 |
CN106200917A (zh) * | 2016-06-28 | 2016-12-07 | 广东欧珀移动通信有限公司 | 一种增强现实的内容显示方法、装置及移动终端 |
CN106408480A (zh) * | 2016-11-25 | 2017-02-15 | 山东孔子文化产业发展有限公司 | 基于增强现实、语音识别的国学三维交互学习系统及方法 |
CN107247510A (zh) * | 2017-04-27 | 2017-10-13 | 成都理想境界科技有限公司 | 一种基于增强现实的社交方法、终端、服务器和系统 |
CN107390871A (zh) * | 2017-07-21 | 2017-11-24 | 上海白泽网络科技有限公司 | 增强现实设备的控制方法和系统 |
CN107423392A (zh) * | 2017-07-24 | 2017-12-01 | 上海明数数字出版科技有限公司 | 基于ar技术的字、词典查询方法、系统及装置 |
CN107493228A (zh) * | 2017-08-29 | 2017-12-19 | 北京易讯理想科技有限公司 | 一种基于增强现实的社交互动方法和系统 |
-
2017
- 2017-12-29 CN CN201711481173.XA patent/CN108063936B/zh active Active
Patent Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102082933A (zh) * | 2009-11-30 | 2011-06-01 | 新奥特(北京)视频技术有限公司 | 一种字幕制作系统 |
US20150040074A1 (en) * | 2011-08-18 | 2015-02-05 | Layar B.V. | Methods and systems for enabling creation of augmented reality content |
CN104641413A (zh) * | 2012-09-18 | 2015-05-20 | 高通股份有限公司 | 利用头戴式显示器来实现人际交互 |
CN103050025A (zh) * | 2012-12-20 | 2013-04-17 | 广东欧珀移动通信有限公司 | 一种移动终端的学习方法及其学习系统 |
CN105210117A (zh) * | 2013-05-14 | 2015-12-30 | 高通股份有限公司 | 增强现实(ar)俘获和播放 |
CN103929653A (zh) * | 2014-04-30 | 2014-07-16 | 成都理想境界科技有限公司 | 增强现实视频生成器、播放器及其生成方法、播放方法 |
CN105224069A (zh) * | 2014-07-03 | 2016-01-06 | 王登高 | 一种增强现实虚拟键盘输入方法及使用该方法的装置 |
CN106210901A (zh) * | 2014-11-13 | 2016-12-07 | Lg电子株式会社 | 显示装置 |
CN105989132A (zh) * | 2015-02-17 | 2016-10-05 | 上海触趣网络科技有限公司 | 图像文件处理及语音控制方法 |
CN106162325A (zh) * | 2015-04-10 | 2016-11-23 | 北京云创视界科技有限公司 | 一种增强现实视频生成方法 |
CN104866266A (zh) * | 2015-04-30 | 2015-08-26 | 北京农业智能装备技术研究中心 | 农作物性状展示方法及装置 |
CN105323252A (zh) * | 2015-11-16 | 2016-02-10 | 上海璟世数字科技有限公司 | 基于增强现实技术实现互动的方法、系统和终端 |
CN106022873A (zh) * | 2016-05-17 | 2016-10-12 | 暨南大学 | 一种基于增强现实的自助点餐系统 |
CN106200917A (zh) * | 2016-06-28 | 2016-12-07 | 广东欧珀移动通信有限公司 | 一种增强现实的内容显示方法、装置及移动终端 |
CN106408480A (zh) * | 2016-11-25 | 2017-02-15 | 山东孔子文化产业发展有限公司 | 基于增强现实、语音识别的国学三维交互学习系统及方法 |
CN107247510A (zh) * | 2017-04-27 | 2017-10-13 | 成都理想境界科技有限公司 | 一种基于增强现实的社交方法、终端、服务器和系统 |
CN107390871A (zh) * | 2017-07-21 | 2017-11-24 | 上海白泽网络科技有限公司 | 增强现实设备的控制方法和系统 |
CN107423392A (zh) * | 2017-07-24 | 2017-12-01 | 上海明数数字出版科技有限公司 | 基于ar技术的字、词典查询方法、系统及装置 |
CN107493228A (zh) * | 2017-08-29 | 2017-12-19 | 北京易讯理想科技有限公司 | 一种基于增强现实的社交互动方法和系统 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109920065A (zh) * | 2019-03-18 | 2019-06-21 | 腾讯科技(深圳)有限公司 | 资讯的展示方法、装置、设备及存储介质 |
WO2020186988A1 (zh) * | 2019-03-18 | 2020-09-24 | 腾讯科技(深圳)有限公司 | 资讯的展示方法、装置、终端及存储介质 |
CN109920065B (zh) * | 2019-03-18 | 2023-05-30 | 腾讯科技(深圳)有限公司 | 资讯的展示方法、装置、设备及存储介质 |
US11790612B2 (en) | 2019-03-18 | 2023-10-17 | Tencent Technology (Shenzhen) Company Limited | Information display method and device, terminal, and storage medium |
Also Published As
Publication number | Publication date |
---|---|
CN108063936B (zh) | 2020-11-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20200356350A1 (en) | Methods and Systems for Visual Programming using Polymorphic, Dynamic Multi-Dimensional Structures | |
CN108038892A (zh) | 表情包制作方法、装置、电子设备和计算机可读存储介质 | |
Deitel et al. | Android for programmers: an app-driven approach | |
CN108573516B (zh) | 绘本文件的生成方法、计算设备及计算机存储介质 | |
Pratas | Creating flat design websites | |
CN107633541A (zh) | 一种图像特效的生成方法和装置 | |
US20120229391A1 (en) | System and methods for generating interactive digital books | |
Pajankar | Raspberry Pi Image Processing Programming | |
CN110096275A (zh) | 一种页面处理方法及装置 | |
CN108090968A (zh) | 增强现实ar的实现方法、装置和计算机可读存储介质 | |
CN107992465A (zh) | 一种阅读内容分享的方法、装置和终端设备 | |
CN109960549A (zh) | 一种gif图片的生成方法和装置 | |
Verou | CSS Secrets: Better Solutions to Everyday Web Design Problems | |
CN108063936A (zh) | 增强现实ar的实现方法、装置和计算机可读存储介质 | |
US11809688B1 (en) | Interactive prompting system for multimodal personalized content generation | |
CN108230448A (zh) | 增强现实ar的实现方法、装置和计算机可读存储介质 | |
CN106033412A (zh) | 一种文本转换方法及装置 | |
Dalal et al. | Instant OpenCV Starter | |
Khorasani et al. | Web Application Development with Streamlit | |
Roosendaal | The Official Blender Game Kit: Interactive 3d for Artists | |
CN107665439A (zh) | 广告模板的配置方法及装置 | |
Jackson | Pro android wearables: Building apps for smartwatches | |
Runberg | The SparkFun Guide to Processing: Create Interactive Art with Code | |
CN103733221B (zh) | 通过对不可分离的fir滤波器进行划分的图像模糊 | |
Ward | React Native Cookbook: Recipes for solving common React Native development problems |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |