CN113778218A - 基于虚拟电子墙的虚拟涂鸦方法和系统 - Google Patents

基于虚拟电子墙的虚拟涂鸦方法和系统 Download PDF

Info

Publication number
CN113778218A
CN113778218A CN202010518975.9A CN202010518975A CN113778218A CN 113778218 A CN113778218 A CN 113778218A CN 202010518975 A CN202010518975 A CN 202010518975A CN 113778218 A CN113778218 A CN 113778218A
Authority
CN
China
Prior art keywords
electronic wall
virtual electronic
graffiti
wall
target virtual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010518975.9A
Other languages
English (en)
Other versions
CN113778218B (zh
Inventor
季贇杰
戴永成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Bilibili Technology Co Ltd
Original Assignee
Shanghai Bilibili Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Bilibili Technology Co Ltd filed Critical Shanghai Bilibili Technology Co Ltd
Priority to CN202010518975.9A priority Critical patent/CN113778218B/zh
Publication of CN113778218A publication Critical patent/CN113778218A/zh
Application granted granted Critical
Publication of CN113778218B publication Critical patent/CN113778218B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/14Travel agencies
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Human Computer Interaction (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Primary Health Care (AREA)
  • Marketing (AREA)
  • General Health & Medical Sciences (AREA)
  • Economics (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请公开了一种基于虚拟电子墙的虚拟涂鸦方法,包括:获取与计算机设备的设备坐标关联的目标虚拟电子墙;获取所述计算机设备采集的现实世界的实时视图;在计算机设备的屏幕上显示实时视图和目标虚拟电子墙,目标虚拟电子墙被摆放在实时视图中的相应位置处;检测用户在屏幕上的涂鸦操作;及将涂鸦操作得到的涂鸦内容与目标虚拟电子墙进行关联,以得到携带涂鸦内容的目标虚拟电子墙。基于本申请,人们可以随时随地地找到附近的目标虚拟电子墙,从而可以将自己创作的涂鸦内容“粘贴”到这个目标虚拟电子墙上,实现了以下技术效果:使得人们在旅游途中可以随时随地与以前和以后来到此地的人进行信息交流。

Description

基于虚拟电子墙的虚拟涂鸦方法和系统
技术领域
本申请实施例涉及计算机技术领域,尤其涉及一种基于虚拟电子墙的虚拟涂鸦方法、系统、计算机设备及计算机可读存储介质。
背景技术
旅游打卡成为现代人的时尚之一。在旅游打卡的过程中,人们喜欢在旅游途中留下个人涂鸦以给后来者分享。留下个人涂鸦的主要方式是:刻字到墙壁上,或者将涂鸦贴纸粘贴到墙壁上。刻字到墙壁上,会对墙壁造成永久性损害。将贴纸粘贴到墙壁上,缺点如下:专门用于粘贴贴纸的墙壁一般存在于特殊地点,在地点上收到严格限制;贴纸本身也不容易保存,也容易遭人撕毁。
因此,有必要提供这样一种技术,在不对实体墙进行破坏的前提下,人们可以随时随地的在其附近找到这样一面墙:人们可以通过这面墙看到前人的涂鸦内容,亦可以通过这面墙将自己的涂鸦内容分享给后来者,以使得人们在旅游途中可以随时随地与以前和以后来到此地的人进行信息交流。
发明内容
本申请实施例的目的是提供一种基于虚拟电子墙的虚拟涂鸦方法、系统、计算机设备及计算机可读存储介质,在于解决通过实体墙进行涂鸦导致的实体墙损坏和涂鸦地点被严格制约、涂鸦内容容易找到损毁的问题。
本申请实施例的一个方面提供了一种基于虚拟电子墙的虚拟涂鸦方法,包括:获取与所述计算机设备的设备坐标关联的目标虚拟电子墙;获取所述计算机设备采集的现实世界的实时视图;在所述计算机设备的屏幕上显示所述实时视图和所述目标虚拟电子墙,所述目标虚拟电子墙被摆放在所述实时视图中的相应位置处;检测用户在所述屏幕上的涂鸦操作;及将所述涂鸦操作得到的涂鸦内容关联到所述目标虚拟电子墙上,以得到关联所述涂鸦数据的目标虚拟电子墙。
可选的,所述目标虚拟电子墙包括新的虚拟电子墙;获取与所述计算机设备的设备坐标关联的目标虚拟电子墙,包括:将所述设备坐标发送至服务器中,以通过所述服务器判断所述设备坐标是否适合创建新的虚拟电子墙;及如果所述设备坐标适合创建新的虚拟电子墙,则在所述设备坐标的周围预设区域内创建所述新的虚拟电子墙。
可选的,在所述设备坐标的周围预设区域内创建所述新的虚拟电子墙,包括:创建一个初始虚拟电子墙并将所述初始虚拟电子墙显示在所述实时视图中;接收所述用户输入到所述计算机设备中的控制指令;及根据所述控制指令,调整所述初始虚拟电子墙在所述实时视图中的位置、尺寸和/或方向,以得到所述新的虚拟电子墙。
可选的,所述目标虚拟电子墙包括预先存储的虚拟电子墙;获取与所述计算机设备的设备坐标关联的目标虚拟电子墙,包括:将所述设备坐标发送至服务器中,以便所述服务器返回与所述设备坐标关联的一个或多个虚拟电子墙的电子墙数据,其中,每个虚拟电子墙的电子墙数据包括相应虚拟电子墙的电子墙坐标;接收所述一个或多个虚拟电子墙的电子墙数据;根据所述设备坐标和各个虚拟电子墙的电子墙坐标,计算所述计算机设备和各个虚拟电子墙之间的位置关系;根据所述计算机设备和各个虚拟电子墙之间的位置关系,从所述一个或多个虚拟电子墙中选择所述目标虚拟电子墙。
可选的,还包括:将标识有所述各个虚拟电子墙的电子墙坐标的电子地图显示到所述计算机设备的屏幕上。
可选的,在所述计算机设备的屏幕上显示所述实时视图和所述目标虚拟电子墙,包括:获取所述目标虚拟电子墙的电子墙数据,所述电子墙数据包括电子墙坐标、电子墙方向和/或电子墙尺寸;计算根据所述设备坐标和所述电子墙坐标之间在现实世界中的物理距离;根据所述物理距离,计算所述设备坐标和所述电子墙坐标在屏幕内的相对距离;及根据所述相对距离和所述电子墙数据,渲染所述目标虚拟电子墙并将所述目标虚拟电子墙显示在所述实时视图的所述相应位置处。
可选的,所述电子墙数据包括作为锚点的参考图片,该参考图片为创建所述目标虚拟电子墙时对应的在现实世界的视图;在所述计算机设备的屏幕上显示所述实时视图和所述目标虚拟电子墙,包括:将所述参考图片作为锚点,判断所述目标虚拟电子墙的当前放置位置与创建时的放置位置之间是否有偏移;及如果出现偏移,则对所述目标虚拟电子墙的当前放置进行调整,直至所述偏移消失或偏移在预设范围之内。
可选的,将所述涂鸦操作得到的涂鸦内容关联到所述目标虚拟电子墙上,以得到关联所述涂鸦内容的目标虚拟电子墙,包括:根据所述涂鸦内容生成涂鸦图片;及将所述涂鸦图片配置到所述目标虚拟电子墙上,并确定所述涂鸦图片与所述目标虚拟电子墙之间的关联关系。
可选的,所述目标虚拟电子墙包括其他涂鸦图片;将所述涂鸦操作得到的涂鸦内容关联到所述目标虚拟电子墙上,以得到关联所述涂鸦内容的目标虚拟电子墙,包括:根据所述涂鸦内容生成涂鸦图片;及将所述涂鸦图片覆盖到所述其他涂鸦图片中至少一部分区域上,以得到携带所述涂鸦内容的目标虚拟电子墙。
可选的,还包括:将所述涂鸦内容和所述涂鸦内容与所述目标虚拟电子墙之间的关联信息发送至所述服务器中,以便所述服务器在其他计算机设备进入所述设备的预设范围时将所述涂鸦图片和所述配置信息下发到其他计算机设备。
本申请实施例的一个方面又提供了一种虚拟涂鸦系统,包括:第一获取模块,用于获取与所述计算机设备的设备坐标关联的目标虚拟电子墙;第二获取模块,用于获取所述计算机设备采集的现实世界的实时视图;显示模块,用于在所述计算机设备的屏幕上显示所述实时视图和所述目标虚拟电子墙,所述目标虚拟电子墙被摆放在所述实时视图中的相应位置处;检测模块,用于检测用户在所述屏幕上的涂鸦操作;及关联模块,将所述涂鸦操作得到的涂鸦内容关联到所述目标虚拟电子墙上,以得到关联所述涂鸦内容的目标虚拟电子墙。
本申请实施例的一个方面又提供了一种计算机设备,包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述基于虚拟电子墙的虚拟涂鸦方法的步骤。
本申请实施例的一个方面又提供了一种计算机可读存储介质,包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述基于虚拟电子墙的虚拟涂鸦方法的步骤。
基于本申请实施例提供的基于虚拟电子墙的虚拟涂鸦方法、系统、计算机设备及计算机可读存储介质,人们可以通过随身携带的计算机设备(如智能手机)的设备坐标,找到附近的目标虚拟电子墙,从而可以将自己创作的涂鸦内容“粘贴”到这个目标虚拟电子墙上,实现了以下技术效果:在不对实体墙进行破坏的前提下,人们可以随时随地的在其附近的目标虚拟电子墙:人们可以通过这个目标虚拟电子墙可以看到前人的涂鸦内容,亦可以通过这个目标虚拟电子墙将自己的涂鸦内容分享给后来者,以使得人们在旅游途中可以随时随地与以前和以后来到此地的人进行信息交流。此外,该目标虚拟电子墙是被放置在实时视图中的相应位置处,与现实世界的实时视图和谐融为一体,极大地增加了目标虚拟电子墙在实时视图中的真实感,极大地增强对实体墙的替代感,增加增强现实应用的用户体验,让用户在涂鸦过程中获得虚拟和现实更好的交互体验。
附图说明
图1示意性示出了根据本申请实施例的基于虚拟电子墙的虚拟涂鸦方法的应用环境图;
图2示意性示出了根据本申请实施例一的基于虚拟电子墙的虚拟涂鸦方法的流程图;
图3为图2中步骤S200的子流程图;
图4为虚拟电子墙的创建过程中的效果图;
图5为图2中步骤S302的子流程图;
图6为图2中步骤S200的另一子流程图;
图7为图2中步骤S200的另一子流程图;
图8为图2中步骤S204的子流程图;
图9为虚拟电子墙被创建完成之后的效果图;
图10为图2中步骤S204的另一子流程图;
图11为涂鸦操作的用户图像界面;
图12为涂鸦内容的粘贴过程中的效果图;
图13为图2中步骤S208的子流程图;
图14为图2中步骤S208的另一子流程图;
图15示意性示出了根据本申请实施例一的基于虚拟电子墙的虚拟涂鸦方法的另一流程图;
图16示意性示出了涂鸦、粘贴和显示的效果图;
图17示意性示出了涂鸦、粘贴和显示的另一效果图;
图18示意性示出根据本申请实施例二的虚拟涂鸦系统的框图;及
图19示意性示出了根据本申请实施例三的适于实现基于虚拟电子墙的虚拟涂鸦方法的计算机设备的硬件架构示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本申请,并不用于限定本申请。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
需要说明的是,在本申请实施例中涉及“第一”、“第二”等的描述仅用于描述目的,而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。另外,各个实施例之间的技术方案可以相互结合,但是必须是以本领域普通技术人员能够实现为基础,当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在,也不在本申请要求的保护范围之内。
图1示意性示出了根据本申请实施例的环境应用示意图。
服务器2可以通过网络9连接多个计算机设备10。服务器2可以位于诸如单个场所之类的数据中心,或者分布在不同的物理位置(例如,在多个场所)中。服务器2可以经由一个或多个网络9提供服务。网络9包括各种网络设备,例如路由器,交换机,多路复用器,集线器,调制解调器,网桥,中继器,防火墙,代理设备和/或类似。网络9可以包括物理链路,例如同轴电缆链路,双绞线电缆链路,光纤链路,其组合等。网络9可以包括无线链路,诸如蜂窝链路,卫星链路,Wi-Fi链路等。
服务器2可以作为数据中心,用于接收和更新虚拟电子墙及在虚拟电子墙上的涂鸦数据。响应于某个请求,服务器2亦可以将相应的虚拟电子墙以及关联的涂鸦数据下发到相应的计算机设备10中。
服务器2可以包括消息服务5。消息服务5可以被配置为接收多个消息。所述多个消息可以是新虚拟电子墙的数据、与新虚拟电子墙关联的新涂鸦数据、与旧虚拟电子墙关联的新涂鸦数据等。所述涂鸦数据可以包括涂鸦图片和所述涂鸦图片在相应的虚拟电子墙中的配置信息,如相对坐标信息、相对尺寸信息、编号等。所述编号用于表示每张涂鸦图片在相应的虚拟电子墙的涂鸦顺序。所述编号可以用于确定每张涂鸦图片和其他图片之间的覆盖与被覆盖的关系。
消息服务5可以被配置为基于虚拟电子墙或坐标位置进行消息管理。用户在不同的地点访问服务器5,可以得到不同的虚拟电子墙及涂鸦数据,以查看与特定位置关联的特定虚拟电子墙上的涂鸦内容,例如其他用户在该特定虚拟电子墙发布的涂鸦内容。用户亦可以在该特定虚拟电子墙上发布新的涂鸦内容,该新的涂鸦内容可以实时或接近实时地输出访问该特定虚拟电子墙的其他用户的客户端,亦可以异步输出访问该特定虚拟电子墙的其他用户的客户端,使得用户在该特定虚拟电子墙上的涂鸦内容可在此后任意时间内,均可以被其他用户所看见。
消息服务5可以被配置为处理多个消息。消息服务5可以基于同一虚拟电子墙上的不同涂鸦数据中的信息(例如,时间戳,标识符)来实现对多个消息的队列或以其他方式优先处理。例如,时间戳早的涂鸦数据具有较高的处理优先级。消息服务5也可以基于不同涂鸦数据关联的虚拟电子墙,来对多个消息的队列或以其他方式优先处理。例如,关联于与热门虚拟电子墙的涂鸦数据,具有较高的处理优先级。关联于冷门虚拟电子墙的涂鸦数据,则具有较低的处理优先级。消息服务5可以被配置为使用负载平衡来处理多个消息。例如,消息服务5可以被配置为使用多个处理节点中的一个或多个来处理多个消息,对消息进行优先级排序,对消息进行负载平衡等。
消息服务5可以被配置为通过执行分组过程来处理消息。分组过程可以包括基于虚拟电子墙等对多个消息进行分组。如果两个消息关于与同一个虚拟电子墙,则可以将这两个消息分为一组。
消息服务5可以进一步被配置为通过执行筛选过程来处理消息。筛选过程可以包括拒绝或标记与筛选标准匹配的消息。筛选标准可以指定术语和/或短语,例如亵渎,仇恨言论,不雅语言等。筛选标准可以指定字符,例如符号,字体等。筛选标准可以指定语言,计算机可读代码模式等。
服务器2可以进一步包括处理服务6。处理服务6可以被配置为提供对各种服务的处理,例如服务器2的服务。处理服务6可以包括多个网络节点8。多个网络节点8可以处理与消息服务5相关联的任务。多个网络节点8可以被实现为一个或多个计算设备,一个或多个处理器,一个或多个虚拟计算实例,它们的组合,和/或类似的东西。多个网络节点8可以由一个或多个计算机设备实现。一个或多个计算机设备可以包括虚拟化的计算实例。虚拟化的计算实例可以包括虚拟机,例如计算机系统,操作系统,服务器等的仿真。计算机设备可以基于虚拟映像和/或定义用于仿真的特定软件(例如,操作系统,专用应用程序,服务器)的其他数据,由计算机设备加载虚拟机。随着对不同类型的处理服务的需求改变,可以在一个或多个计算机设备上加载和/或终止不同的虚拟机。可以实现管理程序来管理同一计算机设备上不同虚拟机的使用。
多个计算机设备10可以被配置为访问服务器2的内容和服务。多个计算机设备10可以包括任何类型的电子设备,诸如移动设备、平板设备、膝上型计算机、虚拟现实设备,车辆终端(如,行车记录仪)等。
多个计算机设备10可以与一个或多个用户相关联。单个用户可以使用多个计算机设备10中的一个或多个来访问服务器2。多个计算机设备10可以旅行到各种位置并使用不同的网络来访问服务器2。
计算机设备10可以包括具有AR或VR功能的客户端12。客户端12将内容输出(例如,显示、渲染、呈现)给用户。所述客户端12可以是AR(Augmented Reality,增强现实)相机APP、VR(Virtual Reality,虚拟现实)相机APP或浏览器等。内容可以包括现实世界的实时视图(即,实景图像)、虚拟电子墙、位于虚拟电子墙上的涂鸦内容。
作为示例,客户端12可以基于用户输入生成涂鸦图片并确定生成的涂鸦图片在相应的虚拟电子墙上的相对大小、相对位置等。客户端12可以将生成的涂鸦图片和其在相应的虚拟电子墙上的相对大小、相对位置等信息作为涂鸦数据上传到服务器2中,以通过服务器6将用户的“粘贴”在相应的虚拟电子墙上的涂鸦图片分享给观看这个相应的虚拟电子墙的其他用户。
实施例一
图2示意性示出了根据本申请实施例一的基于虚拟电子墙的虚拟涂鸦方法的流程图。可以理解,本方法实施例可以被执行在计算机设备10中,且本方法实施例的流程图不用于对执行步骤的顺序进行限定。
如图2所示,该基于虚拟电子墙的虚拟涂鸦方法可以包括步骤S200~S208,其中:
步骤S200,获取与所述计算机设备的设备坐标关联的目标虚拟电子墙。
计算机设备10可以通过多种方式获取所述目标虚拟电子墙。
在一种情形中,没有其他用户创建与所述设备坐标关联的虚拟电子墙,即,服务器2没有存储与所述设备坐标关联的虚拟电子墙。在这种情形下,计算机设备10可以创建一个新的虚拟电子墙。
在示例性的实施例中,所述目标虚拟电子墙包括新的虚拟电子墙。如图3所示,所述步骤S200可以通过步骤S300~S302实现,其中:步骤S300,将所述设备坐标发送至服务器中,以通过所述服务器判断所述设备坐标是否适合创建新的虚拟电子墙;步骤S302,如果所述设备坐标适合创建新的虚拟电子墙,则在所述设备坐标的周围预设区域内创建所述新的虚拟电子墙。在本实施例具有以下好处。(1)新的虚拟电子墙是由用户通过计算机设备10创建的,而不是通过服务器2创建的,有效地减轻了服务器2的工作负担。(2)新的虚拟电子墙是由用户通过计算机设备10创建的,有效保证了每个新的虚拟电子墙都是根据用户的实际需求创建的,避免了由运营人员通过服务器2预先创建大量的虚拟电子墙中可能出现大量无人使用的虚拟电子墙。(3)通过服务器2判断所述设备坐标是否适合创建所述新的虚拟电子墙,确保所述新的虚拟电子墙仅能在合适的位置创建,并且有效控制虚拟电子墙的密度。(4)在用户创建一个虚拟电子墙时,所述计算机设备10的屏幕上同时显示有这个创建的虚拟电子墙和计算机设备拍摄的现实世界的实时视图(实景图像)。因此,用户可以在计算机设备10的屏幕上进行滑动等操作,来调整这个创建的虚拟电子墙和所述实景图像之间的比例关系、角度关系、碰撞关系,从而得到符合用户预期的虚拟电子墙。这个创建的虚拟电子墙可以符合与周围环境正确的大小比例、透视关系,且不产生穿插、重叠,如图4所示。所述现实世界的实时视图可以是指计算机设备10通过摄像元件(摄像头)采集的所述设备坐标周围的图片。
在示例性的实施例中,所述在所述设备坐标的周围预设区域内创建所述新的虚拟电子墙的步骤,可以通过如图5所示的步骤实现。其中,步骤S500,创建一个初始虚拟电子墙并将所述初始虚拟电子墙显示在所述实时视图中;步骤S502,接收所述用户输入到所述计算机设备中的控制指令;及步骤S504,根据所述控制指令,调整所述初始虚拟电子墙在所述实时视图中的位置、尺寸和/或方向,以得到所述新的虚拟电子墙。如图4所示,所述控制指令可以包括:(1)用于调整所述初始虚拟电子墙(即图中所示的“涂鸦墙”)尺寸的尺寸调整指令,该尺寸调整指令可以是在相关区域的点击或拖曳操作;(2)用于调整所述初始虚拟电子墙(即图中所示的“涂鸦墙”)方向的方向调整指令,该方向调整指令可以是在相关区域的点击或拖曳操作;(3)用于调整所述初始虚拟电子墙(即图中所示的“涂鸦墙”)的坐标的坐标调整指令,该坐标调整指令可以是在相关区域的点击或拖曳操作。在本实施例中,当所述初始虚拟电子墙和实时视图显示在计算机设备10中的屏幕中时,用户可以通过在屏幕上的点击或拖曳等动作调整所述初始虚拟电子墙在所述实时视图中的坐标、大小和/或方向,从而得到符合预期大小比例关系、方向关系、位置关系和透视关系的所述新的虚拟电子墙。需要说明的是,所述新的虚拟电子墙的相关信息可以存储于服务器2中,所述相关信息可以包括所述新的虚拟电子墙在现实世界的电子墙坐标、体积信息、碰撞信息、尺寸信息等各类信息。
在另一种情形中,其他用户可能已经创建了与所述设备坐标关联的虚拟电子墙,即,服务器2已经存储有与所述设备坐标关联的虚拟电子墙。在这种情形下,计算机设备10则不需要创建新的虚拟电子墙。
在示例性的实施例中,如果所述设备坐标的周围预设区域有预先存储的虚拟电子墙,则禁止所述用户创建所述新的虚拟电子墙,并提供已有的虚拟电子墙给用户涂鸦操作。这样做的好处在于:(1)避免虚拟电子墙的创建操作,节省计算机设备10的计算资源;(2)防止虚拟电子墙的泛滥和过多的虚拟电子墙之间互相影响,以及降低过多的虚拟电子墙导致的服务器管理负担。
在示例性的实施例中,所述目标虚拟电子墙包括预先存储的虚拟电子墙。如图6所示,所述步骤S200可以通过步骤S600~S606实现,其中:步骤S600,将所述设备坐标发送至服务器中,以便所述服务器返回与所述设备坐标关联的一个或多个虚拟电子墙的电子墙数据,其中,每个虚拟电子墙的电子墙数据包括相应虚拟电子墙的电子墙坐标;步骤S602,接收所述一个或多个虚拟电子墙的电子墙数据;步骤S604,根据所述设备坐标和各个虚拟电子墙的电子墙坐标,计算所述计算机设备和各个虚拟电子墙之间的位置关系;步骤S606,根据所述计算机设备和各个虚拟电子墙之间的位置关系,从所述一个或多个虚拟电子墙中选择所述目标虚拟电子墙。这样做的好处在于:(1)避免虚拟电子墙的创建操作,节省计算机设备10的计算资源;(2)防止虚拟电子墙的泛滥和过多的虚拟电子墙之间互相影响,以及降低过多的虚拟电子墙导致的服务器管理负担;(3)使得用户可以看到其他用户在预先存储的虚拟电子墙上的涂鸦内容,促进了基于虚拟电子墙的信息共享和信息交互,从而提升用户体验。需要说明的是,“关联”可以是基于位置关系的。所述各个虚拟电子墙的电子墙坐标均需要在所述设备坐标的周围预设范围之内,如:位于以所述设备坐标为中心并以100米为半径的圆形区域内。
通常来说,计算机设备10可以将位置最近的虚拟电子墙作为所述目标虚拟电子墙。
但是,并不排除以下几种情况;(1)各个虚拟电子墙在现实世界的电子墙坐标与所述设备坐标之间均存在较大的距离;(2)用户并不想选择位置最近的虚拟电子墙作为目标虚拟电子墙;(2)位置最近的虚拟电子墙的涂鸦内容太多,不适合涂鸦。无论基于上述任何哪一种情况,计算机设备10都有必要进一步提供其他可选方案。
在示例性的实施例中,如图7所示,所述步骤S200还可以包括步骤S700,其中:步骤S700,将标识有所述各个虚拟电子墙的电子墙坐标的电子地图显示到所述计算机设备10的屏幕上。当用户希望某个虚拟电子墙作为所述目标虚拟电子墙时,用户可以根据所述电子地图移动,使得计算机设备10的设备坐标更新并逐渐靠近这个用户希望的虚拟电子墙在现实世界的坐标,从而使得计算机设备10可以将这个用户希望的虚拟电子墙作为所述目标虚拟电子墙。
步骤S202,获取所述计算机设备采集的现实世界的实时视图。
所述实时视图可以计算机设备通过客户端(AR相机APP)调用摄像元件获取的用户所在地的真实图像。
步骤S204,在所述计算机设备的屏幕上显示所述实时视图和所述目标虚拟电子墙,所述目标虚拟电子墙被摆放在所述实时视图中的相应位置处。
计算机设备10在屏幕上进行虚实结合,把所述目标虚拟电子墙融合到所述实时视图中,以实现虚拟现实或增强现实的效果。
在示例性的实施例中,如图8所示,所述步骤S204还可以包括步骤S800~S806,其中:步骤S800,获取所述目标虚拟电子墙的电子墙数据,所述电子墙数据包括电子墙坐标、电子墙方向和/或电子墙尺寸;步骤S802,计算根据所述设备坐标和所述电子墙坐标之间在现实世界中的物理距离;步骤S804,根据所述物理距离,计算所述设备坐标和所述电子墙坐标在屏幕内的相对距离;步骤S806,根据所述相对距离和所述电子墙数据,渲染所述目标虚拟电子墙并将所述目标虚拟电子墙显示在所述实时视图的所述相应位置处。本实施例在于在计算机设备10的屏幕内生成一面与与放置时位置相同且与周围环境符合各种关系的虚拟电子墙。
示例性的计算机设备10执行以下操作:
(1)计算所述设备坐标和目标虚拟电子墙对应于真实世界的物理坐标之间的实际距离(所述实际距离为GPS数据测算所得真实世界的距离);
(2)通过ARcore的特性计算出所述设备坐标和目标虚拟电子墙的电子墙坐标在计算机设备10的屏幕内的相对距离;
(3)根据所述实际距离和所述相对距离之间的比例关系,在所述屏幕内展示目标虚拟电子墙。如图9所示,在屏幕中显示的所述目标虚拟电子墙与创建时的位置与周围环境符合透视关系。
在示例性的实施例中,所述电子墙数据包括作为锚点的参考图片,该参考图片为创建所述目标虚拟电子墙时对应的在现实世界的视图。如图10所示,所述步骤S204还可以包括步骤S808~S810,其中:步骤S808,将所述参考图片作为锚点,判断所述目标虚拟电子墙的当前放置位置与创建时的放置位置之间是否有偏移;步骤S810,如果出现偏移,则对所述目标虚拟电子墙的当前放置进行调整,直至所述偏移消失或偏移在预设范围之内。本实施例在于进一步调整所述目标虚拟电子墙的位置。
可知知道,该目标虚拟电子墙是被放置在实时视图中的相应位置处,与现实世界的实时视图和谐融为一体,极大地增加了目标虚拟电子墙在实时视图中的真实感,极大地增强对实体墙的替代感,增加增强现实应用的用户体验,让用户在涂鸦过程中获得虚拟和现实更好的交互体验。
步骤S206,检测用户在所述屏幕上的涂鸦操作。
如图11所示,计算机设备10可以将所述屏幕切换至显示涂鸦界面。用户可以在所述涂鸦界面上进行涂鸦操作,以生成涂鸦图片。所述涂鸦操作可以包括基于菜单栏的选择操作、文字输入操作以及点击、滑动等绘制操作。
步骤S208,将所述涂鸦操作得到的涂鸦内容关联到所述目标虚拟电子墙上,以得到关联所述涂鸦内容的目标虚拟电子墙。
如图12所示,计算机设备10可以将所述屏幕切换至显示实时视图。计算机设备10基于用户操作可以将所述涂鸦图片“粘贴”到所述目标虚拟电子墙上,并可以基于用户操作使得所述涂鸦图片在所述目标虚拟电子墙上在预定范围内进行位移、旋转、以及有最大值的缩放等操作。
在示例性的实施例中,如图13所示,步骤S208可以包括:步骤S1300,根据所述涂鸦内容生成涂鸦图片;及步骤S1302,将所述涂鸦图片配置到所述目标虚拟电子墙上,并确定所述涂鸦图片与所述目标虚拟电子墙之间的关联关系。
在示例性的实施例中,所述目标虚拟电子墙包括其他涂鸦图片。如图14所示,步骤S208可以包括:步骤S1400,根据所述涂鸦内容生成涂鸦图片;及步骤S1402,将所述涂鸦图片覆盖到所述其他涂鸦图片中至少一部分区域上,以得到携带所述涂鸦内容的目标虚拟电子墙。这样做的好处在于,模仿真实的墙和墙上的贴纸,从而使得虚拟电子墙的体验更加真实,从而提升用户体验。
当然,所述涂鸦图片也可以以半透明的方式覆盖在其他涂鸦图片上。在用户有特定权限的情形下,其他涂鸦图片可以被用户修改配置信息或被用户删除,以提升目标虚拟电子墙的可管理性。
在示例性的实施例中,如图15所示,所述方法还包括步骤S210,将所述涂鸦内容和所述涂鸦内容与所述目标虚拟电子墙之间的关联信息发送至所述服务器中,以便所述服务器在其他计算机设备进入所述设备的预设范围时将所述涂鸦图片和所述关联信息同步到其他计算机设备。在本实施例中,用户可使用内置绘图工具绘制涂鸦,并“粘贴”于所述目标虚拟电子墙上,涂鸦内容以及涂鸦内容与所述目标虚拟之间的关联信息(如,相对坐标、相对尺寸等)皆存储于服务器2中。本实施例基于地点并利用云存储技术,使用户之间的涂鸦内容相互可见,且可以产生“重叠”,在接近于“街头涂鸦”形式的同时,也为群体合作创意提供可能。在景区及相关公共场所加以应用,可在一定程度上疏导游客的纪念及艺术创作欲望,创造一个文明规范的交流分享形式。
下面提供一个用户A创建新的虚拟电子墙Y的具体示例。
S1600,用户A通过计算机设备10注册或登录AR相机应用,并通过AR相机应用将以下内容提交给服务器2中:用户ID及设备坐标(如,计算机设备10的GPS或北斗等定位元件获取的地理位置)。
S1602,服务器2判断该用户ID是否具有虚拟电子墙的创建权限。如果是,进入步骤S1604,否则发出拒绝创建的信息。
判断该用户ID是否具有虚拟电子墙的创建权限,可以通过如下步骤实现:判断所述用户ID是否与服务器2预先录入的白名单匹配,以及判断所述设备坐标是否可以放置虚拟电子墙。如果判断所用户ID与服务器2预先录入的白名单匹配且所述设备坐标可以放置虚拟电子墙,则说明该用户ID具有虚拟电子墙的创建权限;否则,说明该用户ID不具有虚拟电子墙的创建权限。
需要说明的是,计算机设备10以预定时间间隔(如,1秒)更新所述设备坐标,并将更新的设备坐标更新至服务器2,以使服务器2可以实时确定该用户ID是否具有虚拟电子墙的创建权限。
S1604,计算机设备10通过AR相机应用的虚拟增强现实功能放置虚拟电子墙Y,并进行移动、旋转、横线及纵向拉伸等操作,以使虚拟电子墙Y矗立于在所述AR相机应用显示的实时视图中恰当的位置(见图4)。
S1606,计算机设备10将虚拟电子墙Y的电子墙数据(电子墙坐标、电子墙大小、作为锚点的图片等)上传至服务器2中。
需要说明的是,虚拟电子墙Y的形状可以是二维平面,但符合一般虚拟增强现实的放置与触碰规则:即虚拟电子墙Y以符合自然重力的规律与地面/其他水平面保持垂直,且不会与周围环境产生重叠与穿插。以上涉及到通过镜头判断位置与物体的碰撞事件,通过调用ARcore(或ARkit等)实现上述放置功能。
需要说明的是,虚拟电子墙Y的实际坐标并不客观存在,而是相对于“所述设备坐标”的偏移坐标,故在记录虚拟电子墙Y的电子墙坐标时,可以利用ARcore的特性,同时调用计算机设备10的内传感器(如陀螺仪),计算屏幕中虚拟电子墙Y与所述设备坐标的距离(如北偏西20°,在屏幕内距离为40px),并换算为物理世界中的距离关系(将屏幕内40px计算为真实的距离,如500cm),并通过偏移角度与距离计算该点的坐标,记录x(设置为经度)、y(设置为纬度)、z(设置为高度)。
需要说明的是,在虚拟电子墙Y创建(即,放置)完成之后,计算机设备10可以记录所述新的虚拟电子墙Y左下角端点x1、y1与右下角端点x2、y2,及所述虚拟电子墙Y的高z,以及所述设备坐标的所处的位置x0、y0,由此计算出所述虚拟电子墙Y在现实世界中的准确坐标及海报高度;此外,在放置过程中的图片及放置完成后的图片同样也会被保存,作为二维图片定位的锚点,用以虚拟电子墙Y的还原显示。
需要说明的是,考虑到虚拟电子墙本身可能会引起群众聚集,对公共秩序产生一定的影响,故有必要对虚拟电子墙的创建进行一定的的限制:即步骤S1400中的权限进行限制。在示例性的实施例中,虚拟电子墙Y的电子墙坐标会存储在服务器2中,以该电子墙坐标为中心以500米为半径的区域内,将被禁止创建其他的虚拟电子墙。即,当设备坐标处于该区域内的其他用户请求创建虚拟电子墙Z时,服务器2将禁用该其他用户虚拟电子墙的创建权限。上述做法可以控制虚拟电子墙的位置及密度。
结合图16,下面提供一个用户B基于服务器2中已有的虚拟电子墙的涂鸦操作的具体示例。
S1700,用户B通过计算机设备10注册或登录AR相机应用,并通过AR相机应用将以下内容提交给服务器2中:用户ID及设备坐标(如,计算机设备10中的GPS或北斗等定位元件获取的地理位置)。
S1702,服务器2根据该设备坐标,获取该设备坐标的周围预设范围内(如,半径2公里范围)的多个虚拟电子墙的电子墙数据,并将所述多个虚拟电子墙的电子墙数据下发到计算机设备10中。
所述电子墙数据包括:电子墙坐标、用以作为定位锚点的图片等。
S1704,计算机设备10接收所述多个虚拟电子墙的电子墙数据,并在屏幕上显示一张电子地图,该电子地图上具有多个虚拟电子墙的位置标示,该位置标示是根据各个虚拟电子墙的电子墙坐标得到的。
需要说明的是,若用户拖动所述电子地图以查看其它区域的虚拟电子墙,则在保留当前定位的前提下,在所述电子地图中心创建一个虚拟定位点,并依据如上规则加载这个虚拟定位点临近的多个虚拟电子墙的电子墙坐标(此情况下只下发电子墙坐标,而不下发用以作为定位锚点的图片)。
S1706,当用户移动至一虚拟电子墙Y附近(可视距离)并开启AR相机应用时,则计算这个虚拟电子墙Y的电子墙坐标和计算机设备10的最新设备坐标之间的“实际”的距离(GPS数据测算所得现实世界的距离),然后利用ARcore的特性计算用户B(假设用户B和计算机设备10在同一位置)和这个虚拟电子墙Y在计算机设备10的屏幕内的相对距离,由此在屏幕内生成一面与与放置时位置相同且与周围环境符合透视关系的虚拟电子墙Y;同时将电子墙数据中的图片作为锚点,使用图片识别的方法将虚拟电子墙Y显示在与放置时相同的位置,并且当判断出现偏移时进行重置,以使之固定。
需要说明的是,当用户B处于虚拟电子墙Y一定范围(如直线距离500M),并开启AR相机应用时,S1706步骤同样可以执行,并以相同的方法计算并生成电子墙在屏幕的形象,但若超出一定范围(如直线距离1公里),则认为超出可视范围,此时即便开启AR相机也不执行该S1706步骤。
S1708,计算机设备10在虚拟电子墙Y的半径300M内可使用AR应用内的绘制工具绘制图像(文字),如图16所示。
绘制工具可以包括使用笔刷、调整颜色、修改叠加方式、图层管理、历史回溯等各类功能组件。
所述绘制步骤在于计算机设备10完成,用户仅可绘制涂鸦而不能调用本地相册上传图片。
S1710,计算机设备10将涂鸦图片“粘贴”到虚拟电子墙Y上,如图16所示。
虚拟电子墙Y为二维平面,则涂鸦图片的放置可以包括在有限平面的位移、旋转、以及有最大值的缩放操作。
计算机设备10以虚拟电子墙Y左下角端点为原点建立虚拟坐标轴,涂鸦图片可以包含整个画布(即包含透明像素的矩形),记录该矩形画布左上角的坐标(x,y)、宽与高的尺寸(w,h)以及旋转角度z°(旋转中心为画布中心点),坐标与宽高单位为相对于电子墙宽与高的比例。
所述涂鸦图片可以为PNG格式,支持透明度,并且可以设置“叠加模式”,即使用算法来使前景颜色与后景颜色混合,从而产生新的效果,叠加模式包括但不限于“正片叠底、线性减淡、取色……”。
在现实世界的墙上,后来者可以将贴纸覆盖在前人的贴纸上。虚拟电子墙Y同样可以符合这一规律,利用记录涂鸦图片ID的方式来实现:涂鸦图片将会自0001开始递增记录ID(即0001、0002、0003…),在多图情况下,高ID将会覆盖显示在低ID上方(如ID为0003的涂鸦会覆盖在ID为0001的涂鸦图片上方,产生如两张纸片覆盖的效果。
S1712,在“粘贴”操作完成之后,计算机设备10可以保存以下内容中一项或多项:该涂鸦图片的坐标、尺寸、旋转角度、透明度、叠加模式、涂鸦图片ID,以及该涂鸦与周围环境合成的图片(用作定位锚点),由涂鸦内容本身合成的PNG图片等。以上内容将被上传到服务器2中。
S1714,服务器2接收以上内容之后,进入图片审核流程进行审核,审核期间仅该用户自己可见,仅当审核通过后会储存并可以被下发(即可被其他用户看见);若被判定为非法,则将被加入另一列表并告知该用户。
用户B的涂鸦操作,所呈现的效果如图16所示,在虚拟电子墙Y上粘贴有一个笑脸。后面的其他用户获取该虚拟电子墙Y时,将看到粘贴在虚拟电子墙Y的这个笑脸(在这个笑脸没有被其他涂鸦覆盖的情形下)。
结合图17,下面提供一个多用户涂鸦的具体示例。
假定上述“用户A”已经完成一次涂鸦的绘制,以此为前提设定另一“用户B”来到此虚拟电子墙前,进行另一次涂鸦过程,以此概述多用户涂鸦,则第N个用户的使用过程可由此推知。
S1800,用户B通过计算机设备10注册或登录AR相机应用,由服务器2校验其用户ID及设备坐标。
S1802,用户B向服务器请求获取虚拟电子墙Y(该虚拟电子墙上已经粘贴有用户A涂鸦的一张笑脸)。
S1804,服务器2读取虚拟电子墙Y关联的的合法涂鸦列表,并将虚拟电子墙的电子墙数据和关联的涂鸦数据下发给计算机设备10。所述涂鸦数据包括:坐标、尺寸、图片、透明度、叠加方式、涂鸦图片ID(即“用户A”上传的涂鸦数据)。
需要注意的是,步骤S1600~1606描述了虚拟电子墙Y生成的过程,没有描述在生成的虚拟电子墙Y上的涂鸦过程。实际上,用户A在创建完虚拟电子墙Y之后,是可以基于该生成的虚拟电子墙Y进行涂鸦操作的,即在成虚拟电子墙Y的过程同时加载并绘制其上的涂鸦内容。
S1806,计算机设备10利用ARCore的特性在屏幕内生成虚拟电子墙Y以及粘贴于其上的涂鸦内容(一张笑脸)。
S1808,用户B可以通过AR相机应用内的绘制工具绘制涂鸦。
S1810,用户将绘制完成的图片(眼镜图片)放置与虚拟电子墙Y上,在此例中为演示多人交互之效果,故此用户B会将图片(眼镜图片)叠加于“用户A”所绘制的图片(笑脸图片),从而形成戴墨镜的笑脸,如图17所示。
需要说明的是,用户B可以通过使用图片叠加效果,使得二者重叠的部分产生特别的显示效果,例如,使用“颜色加深”效果后使得二者重叠的部分显示为红色。
需要说明的是,用户B也可以通过AR相机应用中的工具集对虚拟电子墙上已存在的涂鸦内容,再次进行绘制。
S1812,用户B可以通过计算机设备10将眼镜图片和眼镜图片和虚拟电子墙Y之间的关联关系提交到服务器2。
本实施例所述的虚拟涂鸦方法:
第一、在某地完成的涂鸦创造,可以在AR相机应用内为其他人以非实时同步的形式可见;
第二、通过以虚拟电子墙为载体,将涂鸦数据加以储存,使得任意用户在该地点的涂鸦创作可在此后任意时间内,为安装有AR相机应用的用户所见;
第三、由用户(或限定权限人员)在任意地点创建并放置虚拟电子墙,虚拟电子墙符合放置类AR基本的碰撞及体积关系,其位置、大小等信息储存于服务器;
第四、用户可使用内置绘图工具绘制涂鸦,并“粘贴”于虚拟电子墙,涂鸦内容、与电子墙的相对坐标及相对尺寸皆存一同存储于服务器;
第五、用户可通过AR相机应用浏览虚拟电子墙上已存在的涂鸦内容,并参与绘制;
第六、基于地点并利用云存储技术,使用户之间的涂鸦相互可见,且可以产生“重叠”,在接近于“街头涂鸦”形式的同时,也为群体合作创意提供可能。在景区及相关公共场所加以应用,可在一定程度上疏导游客的纪念及艺术创作欲望,创造一个文明规范的交流分享形式,且涂鸦体验感真实。
实施例二
图18示意性示出了根据本申请实施例二的基于虚拟电子墙的虚拟涂鸦系统的框图,该基于虚拟电子墙的虚拟涂鸦系统可以被分割成一个或多个程序模块,一个或者多个程序模块被存储于存储介质中,并由一个或多个处理器所执行,以完成本申请实施例。本申请实施例所称的程序模块是指能够完成特定功能的一系列计算机程序指令段,以下描述将具体介绍本实施例中各程序模块的功能。
如图18所示,该基于虚拟电子墙的虚拟涂鸦系统1800可以包括第一获取模块1810、第二获取模块1820、显示模块1830、检测模块1840及关联模块1850,其中:
第一获取模块1810,用于获取与所述计算机设备的设备坐标关联的目标虚拟电子墙;
第二获取模块1820,用于获取所述计算机设备采集的现实世界的实时视图;
显示模块1830,用于在所述计算机设备的屏幕上显示所述实时视图和所述目标虚拟电子墙,所述目标虚拟电子墙被摆放在所述实时视图中的相应位置处;
检测模块1840,用于检测用户在所述屏幕上的涂鸦操作;及
关联模块1850,用于将所述涂鸦操作得到的涂鸦内容关联到所述目标虚拟电子墙上,以得到关联所述涂鸦内容的目标虚拟电子墙
可选的,所述目标虚拟电子墙包括新的虚拟电子墙;所述第一获取模块1810还用于:将所述设备坐标发送至服务器中,以通过所述服务器判断所述设备坐标是否适合创建新的虚拟电子墙;及如果所述设备坐标适合创建新的虚拟电子墙,则在所述设备坐标的周围预设区域内创建所述新的虚拟电子墙。
可选的,所述第一获取模块1810还用于:创建一个初始虚拟电子墙并将所述初始虚拟电子墙显示在所述实时视图中;接收所述用户输入到所述计算机设备中的控制指令;及根据所述控制指令,调整所述初始虚拟电子墙在所述实时视图中的位置、尺寸和/或方向,以得到所述新的虚拟电子墙。
可选的,所述目标虚拟电子墙包括预先存储的虚拟电子墙;所述第一获取模块1810还用于:将所述设备坐标发送至服务器中,以便所述服务器返回与所述设备坐标关联的一个或多个虚拟电子墙的电子墙数据,其中,每个虚拟电子墙的电子墙数据包括相应虚拟电子墙的电子墙坐标;接收所述一个或多个虚拟电子墙的电子墙数据;根据所述设备坐标和各个虚拟电子墙的电子墙坐标,计算所述计算机设备和各个虚拟电子墙之间的位置关系;根据所述计算机设备和各个虚拟电子墙之间的位置关系,从所述一个或多个虚拟电子墙中选择所述目标虚拟电子墙。
可选的,所述显示模块1830,还用于:将标识有所述各个虚拟电子墙的电子墙坐标的电子地图显示到所述计算机设备的屏幕上。
可选的所述显示模块1830,还用于:获取所述目标虚拟电子墙的电子墙数据,所述电子墙数据包括电子墙坐标、电子墙方向和/或电子墙尺寸;计算根据所述设备坐标和所述电子墙坐标之间在现实世界中的物理距离;根据所述物理距离,计算所述设备坐标和所述电子墙坐标在屏幕内的相对距离;及根据所述相对距离和所述电子墙数据,渲染所述目标虚拟电子墙并将所述目标虚拟电子墙显示在所述实时视图的所述相应位置处。
可选的,所述电子墙数据包括作为锚点的参考图片,该参考图片为创建所述目标虚拟电子墙时对应的在现实世界的视图;所述显示模块1830,还用于:将所述参考图片作为锚点,判断所述目标虚拟电子墙的当前放置位置与创建时的放置位置之间是否有偏移;及如果出现偏移,则对所述目标虚拟电子墙的当前放置进行调整,直至所述偏移消失或偏移在预设范围之内。
可选的,所述关联模块1850,还用于:根据所述涂鸦内容生成涂鸦图片;及将所述涂鸦图片配置到所述目标虚拟电子墙上,并确定所述涂鸦图片与所述目标虚拟电子墙之间的关联关系。
可选的,所述目标虚拟电子墙包括其他涂鸦图片;所述关联模块1850,还用于:根据所述涂鸦内容生成涂鸦图片;及将所述涂鸦图片覆盖到所述其他涂鸦图片中至少一部分区域上,以得到携带所述涂鸦内容的目标虚拟电子墙。
可选的,所述系统还包括发送模块(未标识),所述发送模块用于:将所述涂鸦内容和所述涂鸦内容与所述目标虚拟电子墙之间的关联信息发送至所述服务器中,以便所述服务器在其他计算机设备进入所述设备的预设范围时将所述涂鸦图片和所述配置信息下发到其他计算机设备。
实施例三
图19示意性示出了根据本申请实施例三的适于实现基于虚拟电子墙的虚拟涂鸦方法的计算机设备的硬件架构示意图。本实施例中,计算机设备10是一种能够按照事先设定或者存储的指令,自动进行数值计算和/或信息处理的设备。例如,可以是智能手机、平板设备、膝上型计算机、虚拟现实设备,车辆终端(如,行车记录仪)等。如图19所示,计算机设备10至少包括但不限于:可通过系统总线相互通信链接存储器1910、处理器1920、网络接口1930。其中:
存储器1910至少包括一种类型的计算机可读存储介质,可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等。在一些实施例中,存储器1910可以是计算机设备10的内部存储模块,例如该计算机设备10的硬盘或内存。在另一些实施例中,存储器1910也可以是计算机设备10的外部存储设备,例如该计算机设备10上配备的插接式硬盘,智能存储卡(Smart Media Card,简称为SMC),安全数字(Secure Digital,简称为SD)卡,闪存卡(Flash Card)等。当然,存储器1910还可以既包括计算机设备10的内部存储模块也包括其外部存储设备。本实施例中,存储器1910通常用于存储安装于计算机设备10的操作系统和各类应用软件,例如基于虚拟电子墙的虚拟涂鸦方法的程序代码等。此外,存储器1910还可以用于暂时地存储已经输出或者将要输出的各类数据。
处理器1920在一些实施例中可以是中央处理器(Central Processing Unit,简称为CPU)、控制器、微控制器、微处理器、或其他数据处理芯片。该处理器1920通常用于控制计算机设备10的总体操作,例如执行与计算机设备10进行数据交互或者通信相关的控制和处理等。本实施例中,处理器1920用于运行存储器1910中存储的程序代码或者处理数据。
网络接口1930可包括无线网络接口或有线网络接口,该网络接口1930通常用于在计算机设备10与其他计算机设备之间建立通信链接。例如,网络接口1930用于通过网络将计算机设备10与外部终端相连,在计算机设备10与外部终端之间的建立数据传输通道和通信链接等。网络可以是企业内部网(Intranet)、互联网(Internet)、全球移动通讯系统(Global System of Mobile communication,简称为GSM)、宽带码分多址(Wideband CodeDivision Multiple Access,简称为WCDMA)、4G网络、5G网络、蓝牙(Bluetooth)、Wi-Fi等无线或有线网络。
需要指出的是,图19仅示出了具有部件1910-1930的计算机设备,但是应理解的是,并不要求实施所有示出的部件,可以替代的实施更多或者更少的部件。
在本实施例中,存储于存储器1910中的基于虚拟电子墙的虚拟涂鸦方法还可以被分割为一个或者多个程序模块,并由一个或多个处理器(本实施例为处理器1920)所执行,以完成本申请。
实施例四
本实施例还提供一种计算机可读存储介质,计算机可读存储介质其上存储有计算机程序,计算机程序被处理器执行时实现实施例中的基于虚拟电子墙的虚拟涂鸦方法的步骤。
本实施例中,计算机可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等。在一些实施例中,计算机可读存储介质可以是计算机设备的内部存储单元,例如该计算机设备的硬盘或内存。在另一些实施例中,计算机可读存储介质也可以是计算机设备的外部存储设备,例如该计算机设备上配备的插接式硬盘,智能存储卡(Smart Media Card,简称为SMC),安全数字(Secure Digital,简称为SD)卡,闪存卡(Flash Card)等。当然,计算机可读存储介质还可以既包括计算机设备的内部存储单元也包括其外部存储设备。本实施例中,计算机可读存储介质通常用于存储安装于计算机设备的操作系统和各类应用软件,例如实施例中的基于虚拟电子墙的虚拟涂鸦方法的程序代码等。此外,计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的各类数据。
显然,本领域的技术人员应该明白,上述的本申请实施例的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本申请实施例不限制于任何特定的硬件和软件结合。
以上仅为本申请的优选实施例,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利保护范围内。

Claims (13)

1.一种基于虚拟电子墙的虚拟涂鸦方法,用于计算机设备中,其特征在于,包括:
获取与所述计算机设备的设备坐标关联的目标虚拟电子墙;
获取所述计算机设备采集的现实世界的实时视图;
在所述计算机设备的屏幕上显示所述实时视图和所述目标虚拟电子墙,所述目标虚拟电子墙被摆放在所述实时视图中的相应位置处;
检测用户在所述屏幕上的涂鸦操作;及
将所述涂鸦操作得到的涂鸦内容关联到所述目标虚拟电子墙上,以得到关联所述涂鸦内容的目标虚拟电子墙。
2.根据权利要求1所述的基于虚拟电子墙的虚拟涂鸦方法,其特征在于,所述目标虚拟电子墙包括新的虚拟电子墙;获取与所述计算机设备的设备坐标关联的目标虚拟电子墙,包括:
将所述设备坐标发送至服务器中,以通过所述服务器判断所述设备坐标是否适合创建新的虚拟电子墙;及
如果所述设备坐标适合创建新的虚拟电子墙,则在所述设备坐标的周围预设区域内创建所述新的虚拟电子墙。
3.根据权利要求2所述的基于虚拟电子墙的虚拟涂鸦方法,其特征在于,在所述设备坐标的周围预设区域内创建所述新的虚拟电子墙,包括:
创建一个初始虚拟电子墙并将所述初始虚拟电子墙显示在所述实时视图中;
接收所述用户输入到所述计算机设备中的控制指令;及
根据所述控制指令,调整所述初始虚拟电子墙在所述实时视图中的位置、尺寸和/或方向,以得到所述新的虚拟电子墙。
4.根据权利要求1所述的基于虚拟电子墙的虚拟涂鸦方法,其特征在于,所述目标虚拟电子墙包括预先存储的虚拟电子墙;获取与所述计算机设备的设备坐标关联的目标虚拟电子墙,包括:
将所述设备坐标发送至服务器中,以便所述服务器返回与所述设备坐标关联的一个或多个虚拟电子墙的电子墙数据,其中,每个虚拟电子墙的电子墙数据包括相应虚拟电子墙的电子墙坐标;
接收所述一个或多个虚拟电子墙的电子墙数据;
根据所述设备坐标和各个虚拟电子墙的电子墙坐标,计算所述计算机设备和各个虚拟电子墙之间的位置关系;
根据所述计算机设备和各个虚拟电子墙之间的位置关系,从所述一个或多个虚拟电子墙中选择所述目标虚拟电子墙。
5.根据权利要求4所述的基于虚拟电子墙的虚拟涂鸦方法,其特征在于,还包括:
将标识有所述各个虚拟电子墙的电子墙坐标的电子地图显示到所述计算机设备的屏幕上。
6.根据权利要求1所述的基于虚拟电子墙的虚拟涂鸦方法,其特征在于,在所述计算机设备的屏幕上显示所述实时视图和所述目标虚拟电子墙,包括:
获取所述目标虚拟电子墙的电子墙数据,所述电子墙数据包括电子墙坐标、电子墙方向和/或电子墙尺寸;
计算根据所述设备坐标和所述电子墙坐标之间在现实世界中的物理距离;
根据所述物理距离,计算所述设备坐标和所述电子墙坐标在屏幕内的相对距离;及
根据所述相对距离和所述电子墙数据,渲染所述目标虚拟电子墙并将所述目标虚拟电子墙显示在所述实时视图的所述相应位置处。
7.根据权利要求6所述的基于虚拟电子墙的虚拟涂鸦方法,其特征在于,所述电子墙数据包括作为锚点的参考图片,该参考图片为创建所述目标虚拟电子墙时对应的在现实世界的视图;
在所述计算机设备的屏幕上显示所述实时视图和所述目标虚拟电子墙,包括:
将所述参考图片作为锚点,判断所述目标虚拟电子墙的当前放置位置与创建时的放置位置之间是否有偏移;及
如果出现偏移,则对所述目标虚拟电子墙的当前放置进行调整,直至所述偏移消失或偏移在预设范围之内。
8.根据权利要求1所述的基于虚拟电子墙的虚拟涂鸦方法,其特征在于,将所述涂鸦操作得到的涂鸦内容关联到所述目标虚拟电子墙上,以得到关联所述涂鸦内容的目标虚拟电子墙,包括:
根据所述涂鸦内容生成涂鸦图片;及
将所述涂鸦图片配置到所述目标虚拟电子墙上,并确定所述涂鸦图片与所述目标虚拟电子墙之间的关联关系。
9.根据权利要求1所述的基于虚拟电子墙的虚拟涂鸦方法,其特征在于,所述目标虚拟电子墙包括其他涂鸦图片;
将所述涂鸦操作得到的涂鸦内容关联到所述目标虚拟电子墙上,以得到关联所述涂鸦内容的目标虚拟电子墙,包括:
根据所述涂鸦内容生成涂鸦图片;及
将所述涂鸦图片覆盖到所述其他涂鸦图片中至少一部分区域上,以得到携带所述涂鸦内容的目标虚拟电子墙。
10.根据权利要求1至9中任意一项所述的基于虚拟电子墙的虚拟涂鸦方法,其特征在于,还包括:
将所述涂鸦内容和所述涂鸦内容与所述目标虚拟电子墙之间的关联信息发送至所述服务器中,以便所述服务器在其他计算机设备进入所述设备的预设范围时将所述涂鸦图片和所述配置信息下发到其他计算机设备。
11.一种虚拟涂鸦系统,其特征在于,包括:
第一获取模块,用于获取与所述计算机设备的设备坐标关联的目标虚拟电子墙;
第二获取模块,用于获取所述计算机设备采集的现实世界的实时视图;
显示模块,用于在所述计算机设备的屏幕上显示所述实时视图和所述目标虚拟电子墙,所述目标虚拟电子墙被摆放在所述实时视图中的相应位置处;
检测模块,用于检测用户在所述屏幕上的涂鸦操作;及
关联模块,用于将所述涂鸦操作得到的涂鸦内容关联到所述目标虚拟电子墙上,以得到关联所述涂鸦内容的目标虚拟电子墙。
12.一种计算机设备,包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至10中任一项所述方法的步骤。
13.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序可被至少一个处理器所执行,以使所述至少一个处理器执行如权利要求1至10中任一项所述方法的步骤。
CN202010518975.9A 2020-06-09 2020-06-09 基于虚拟电子墙的虚拟涂鸦方法和系统 Active CN113778218B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010518975.9A CN113778218B (zh) 2020-06-09 2020-06-09 基于虚拟电子墙的虚拟涂鸦方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010518975.9A CN113778218B (zh) 2020-06-09 2020-06-09 基于虚拟电子墙的虚拟涂鸦方法和系统

Publications (2)

Publication Number Publication Date
CN113778218A true CN113778218A (zh) 2021-12-10
CN113778218B CN113778218B (zh) 2024-07-02

Family

ID=78834367

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010518975.9A Active CN113778218B (zh) 2020-06-09 2020-06-09 基于虚拟电子墙的虚拟涂鸦方法和系统

Country Status (1)

Country Link
CN (1) CN113778218B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023202445A1 (zh) * 2022-04-20 2023-10-26 华为技术有限公司 演示系统、方法、图形界面及相关装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102308599A (zh) * 2009-02-04 2012-01-04 摩托罗拉移动公司 在移动虚拟和增强现实系统中创建虚拟涂鸦的方法和装置
KR101210282B1 (ko) * 2011-12-16 2012-12-11 동국대학교 경주캠퍼스 산학협력단 위치기반 가상 낙서판 인터페이스 제공 시스템 및 방법
US20140225922A1 (en) * 2013-02-11 2014-08-14 Rocco A. Sbardella System and method for an augmented reality software application
KR101641944B1 (ko) * 2015-01-26 2016-07-25 한국기술교육대학교 산학협력단 위치를 기반으로 한 낙서 서비스 제공 방법
CN109325080A (zh) * 2018-07-05 2019-02-12 桐乡市乌镇人家网络科技股份有限公司 电子地图上电子标签的显示方法、移动终端、服务器

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102308599A (zh) * 2009-02-04 2012-01-04 摩托罗拉移动公司 在移动虚拟和增强现实系统中创建虚拟涂鸦的方法和装置
KR101210282B1 (ko) * 2011-12-16 2012-12-11 동국대학교 경주캠퍼스 산학협력단 위치기반 가상 낙서판 인터페이스 제공 시스템 및 방법
US20140225922A1 (en) * 2013-02-11 2014-08-14 Rocco A. Sbardella System and method for an augmented reality software application
KR101641944B1 (ko) * 2015-01-26 2016-07-25 한국기술교육대학교 산학협력단 위치를 기반으로 한 낙서 서비스 제공 방법
CN109325080A (zh) * 2018-07-05 2019-02-12 桐乡市乌镇人家网络科技股份有限公司 电子地图上电子标签的显示方法、移动终端、服务器

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023202445A1 (zh) * 2022-04-20 2023-10-26 华为技术有限公司 演示系统、方法、图形界面及相关装置

Also Published As

Publication number Publication date
CN113778218B (zh) 2024-07-02

Similar Documents

Publication Publication Date Title
CN112396686B (zh) 三维场景工程模拟与实景融合系统及方法
CN107450088B (zh) 一种基于位置的服务lbs的增强现实定位方法及装置
US11776185B2 (en) Server, user terminal, and service providing method, and control method thereof for displaying photo images within a map
CN103335657B (zh) 一种基于图像捕获和识别技术增强导航功能的方法和系统
US20160344783A1 (en) Content provision system, information processing apparatus and content reproduction method
US9525964B2 (en) Methods, apparatuses, and computer-readable storage media for providing interactive navigational assistance using movable guidance markers
CN103812931A (zh) 一种用户信息共享方法、装置及系统
CN103116451A (zh) 一种智能终端的虚拟角色交互方法、装置和系统
CN110553651A (zh) 一种室内导航方法、装置、终端设备及存储介质
CN105574102A (zh) 一种电子地图数据加载的方法及装置
US9488489B2 (en) Personalized mapping with photo tours
CN112330819A (zh) 基于虚拟物品的交互方法、装置及存储介质
US20220138467A1 (en) Augmented reality utility locating and asset management system
WO2019032184A1 (en) ANNOTATION GENERATION FOR IMAGE NETWORK
JP2022507502A (ja) 拡張現実(ar)のインプリント方法とシステム
CN115439635A (zh) 一种呈现目标对象的标记信息的方法与设备
CN113778218B (zh) 基于虚拟电子墙的虚拟涂鸦方法和系统
CN114928718A (zh) 视频监控方法、装置、电子设备及存储介质
JP2017108356A (ja) 画像管理システム、画像管理方法、プログラム
CN110969704B (zh) 一种基于ar导视的标记生成跟踪方法及装置
CN110942521A (zh) 一种ar信息点显示方法及装置
WO2015131837A1 (en) Picture processing method and apparatus, and picture generating method and apparatus
CN113452842B (zh) 航班ar显示方法、系统、计算机设备及存储介质
CN110660313A (zh) 信息呈现方法和装置
CN109325080A (zh) 电子地图上电子标签的显示方法、移动终端、服务器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant