CN107391060B - 图像显示方法、装置、系统及设备、可读介质 - Google Patents
图像显示方法、装置、系统及设备、可读介质 Download PDFInfo
- Publication number
- CN107391060B CN107391060B CN201710266388.3A CN201710266388A CN107391060B CN 107391060 B CN107391060 B CN 107391060B CN 201710266388 A CN201710266388 A CN 201710266388A CN 107391060 B CN107391060 B CN 107391060B
- Authority
- CN
- China
- Prior art keywords
- image
- basic
- interactive
- display
- display device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请提供一种图像显示方法、装置、系统及设备、可读介质，所述方法运行于基本显示设备，基本显示设备关联有增强显示设备，增强显示设备具有摄像模块，包括：显示基本图像，以供摄像模块拍摄给所述增强显示设备进行增强显示，增强显示的图像包括基本图像、以及与基本图像相关的相关图像；接收互动消息，并根据互动消息调整基本图像的显示效果；互动消息是增强显示设备在预定的互动事件发生后对应确定的消息。实施本申请，增强显示设备能根据发生的互动事件发送对应的互动消息，通知基本显示设备根据互动消息，调整其所呈现的图像的显示效果。
Description
技术领域
本申请涉及计算机技术领域，尤其涉及图像显示方法、装置、系统及设备、可读介质。
背景技术
目前，相关应用会采用AR(Augmented Reality，增强现实)技术向用户呈现增强现实的图像。呈现增强现实的图像时，一般会涉及到两个终端设备，其中一终端设备内安装有相关应用，可以称作增强显示设备，一般具有摄像模块(内置的摄像头，或外置的摄像设备)，另一终端设备用于显示预定的基本图像(原本的图像)，可以称作基本显示设备。
相关应用在增强显示设备内运行时，会调用摄像模块进行拍摄，并显示拍摄的图像。如果摄像模块拍摄到的图像表明，基本显示设备当前显示的是基本图像(如：二维小熊图像)，相关应用可以将相对于基本图像更逼真的图像(如：三维小熊图像)，叠加到当前拍摄的图像内，然后显示叠加的图像，向用户呈现增强现实的图像。
增强显示设备显示的图像可以跟随摄像模块摄取的图像变化，用户通过观看增强显示设备显示的图像，可以达到超越现实的感官体验。但，基本显示设备始终只呈现相同的基本图像，会影响相关应用的现实增强效果。
发明内容
有鉴于此，本申请提供一种图像显示方法、装置、系统及设备、可读介质。
根据本申请实施例的第一方面，提供一种图像显示方法，运行于增强显示设备，所述增强显示设备关联有基本显示设备，具有摄像模块，所述方法包括步骤：
调用所述摄像模块进行拍摄，并且显示当前拍摄的图像；
如果当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括预定的基本图像，则确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置；
基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像；
在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置；
基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像；
发送所述互动消息，以使所述基本显示设备根据所述互动消息调整基本图像的显示效果。
根据本申请实施例的第二方面，提供一种图像显示方法，运行于基本显示设备，所述基本显示设备关联有增强显示设备，所述增强显示设备具有摄像模块，所述方法包括步骤：
显示预定的基本图像，以供所述摄像模块拍摄给所述增强显示设备进行增强显示，增强显示的图像包括与所述基本图像相关的相关图像；
接收互动消息，并根据所述互动消息调整基本图像的显示效果；所述互动消息是所述增强显示设备对应发生的互动事件所确定的消息。
根据本申请实施例的第三方面，提供一种图像显示方法，包括步骤：
在基本显示设备侧，显示预定的基本图像；所述基本显示设备关联有增强显示设备，所述增强显示设备具有摄像模块；
在所述增强显示设备侧：
调用所述摄像模块进行拍摄，并且显示当前拍摄的图像；如果当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括所述基本图像，则确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置；
基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像；
在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置；
基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像，并发送所述互动消息；
在所述基本显示设备侧，接收所述互动消息，并根据所述互动消息调整基本图像的显示效果。
根据本申请实施例的第四方面，提供一种图像显示方法，包括步骤：
在基本显示设备侧，显示预定的基本图像；所述基本显示设备通过服务器与增强显示设备关联，所述增强显示设备具有摄像模块；
在所述增强显示设备侧：
调用所述摄像模块进行拍摄，并且显示当前拍摄的图像；如果当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括所述基本图像，则确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置；
基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像；
在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置；
基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像，并向服务器发送所述互动消息；
在所述服务器侧，接收所述互动消息，并向所述基本显示设备转发所述互动消息；
在所述基本显示设备侧，接收所述互动消息，并根据所述互动消息调整基本图像的显示效果。
根据本申请实施例的第五方面，提供一种电子设备，包括：
处理器；
存储处理器可执行指令的存储器；
其中，所述处理器耦合于所述存储器，用于读取所述存储器存储的程序指令，并作为响应，执行如下操作：
调用所述摄像模块进行拍摄，并且显示当前拍摄的图像；
如果当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括预定的基本图像，则确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置；
基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像；
在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置；
基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像；
发送所述互动消息，以使所述基本显示设备根据所述互动消息调整基本图像的显示效果。
根据本申请实施例的第六方面，提供一种电子设备，包括：
处理器；
存储处理器可执行指令的存储器；
其中，所述处理器耦合于所述存储器，用于读取所述存储器存储的程序指令，并作为响应，执行如下操作：
显示预定的基本图像；
接收互动消息，并根据所述互动消息调整基本图像的显示效果；所述互动消息是所述增强显示设备对应发生的互动事件所确定的消息。
根据本申请实施例的第七方面，提供一种图像显示装置，应用于增强显示设备上，所述增强显示设备关联有基本显示设备，具有摄像模块，所述装置包括：
拍摄显示模块，用于调用所述摄像模块进行拍摄，并且显示当前拍摄的图像；
相关图像确定模块，用于在当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括预定的基本图像时，确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置；
增强图像显示模块，用于基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像；
互动图像确定模块，用于在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置；
互动图像显示模块，用于基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像；
互动消息发送模块，用于发送所述互动消息，以使所述基本显示设备根据所述互动消息调整基本图像的显示效果。
根据本申请实施例的第八方面，提供一种图像显示装置，应用在基本显示设备上，所述基本显示设备关联有增强显示设备，所述增强显示设备具有摄像模块，所述装置包括：
基本图像显示模块，用于显示预定的基本图像，以供所述摄像模块拍摄给所述增强显示设备进行增强显示，增强显示的图像包括与所述基本图像相关的相关图像；
互动消息接收模块，用于接收互动消息；所述互动消息是所述增强显示设备对应发生的互动事件所确定的消息；
显示效果调整模块，用于根据所述互动消息调整基本图像的显示效果。
根据本申请实施例的第九方面，提供一种图像显示系统，包括关联的基本显示设备和增强显示设备，所述增强显示设备具有摄像模块；
所述基本显示设备包括：
基本图像显示模块，用于显示预定的基本图像；
所述增强显示设备包括：
拍摄显示模块，用于调用所述摄像模块进行拍摄，并且显示当前拍摄的图像；
相关图像确定模块，用于在当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括所述基本图像时，确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置；
增强图像显示模块，用于基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像；
互动图像确定模块，用于在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置；
互动图像显示模块，用于基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像；
互动消息发送模块，用于发送所述互动消息；
所述基本显示设备还包括：
互动消息接收模块，用于接收互动消息；
显示效果调整模块，用于根据所述互动消息调整基本图像的显示效果。
根据本申请实施例的第十方面，提供一种图像显示系统，包括服务器、以及通过所述服务器关联的基本显示设备和增强显示设备，所述增强显示设备具有摄像模块；
所述基本显示设备包括：
基本图像显示模块，用于显示预定的基本图像；
所述增强显示设备包括：
拍摄显示模块，用于调用所述摄像模块进行拍摄，并且显示当前拍摄的图像；
相关图像确定模块，用于在当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括所述基本图像时，确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置；
增强图像显示模块，用于基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像；
互动图像确定模块，用于在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置；
互动图像显示模块，用于基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像；
互动消息发送模块，用于向所述服务器发送所述互动消息；
所述服务器包括互动消息转发模块，用于接收所述互动消息，并向所述基本显示设备转发所述互动消息；
所述基本显示设备还包括：
互动消息接收模块，用于接收互动消息；
显示效果调整模块，用于根据所述互动消息调整基本图像的显示效果。
根据本申请实施例的第十一方面，提供一个或多个机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得终端设备执行以上所述的方法。
实施本申请提供的实施例，增强显示设备通过调用摄像模块进行拍摄，可以随着摄像模块所拍摄的图像的变化，显示不同的图像，并且可以在拍摄的图像基本显示设备显示的基本图像时，将与基本图像相关的图像叠加在当前拍摄的图像内达到增强显示的目的。在预定的互动事件发生后，还能根据互动事件将互动图像叠加显示到当前拍摄的图像内，达到变化增强显示的图像。并且随着增强显示图像的变化，可以通过发送与互动事件对应的互动消息，通知基本显示设备根据互动消息调整基本图像的显示效果。因此，在增强显示设备显示的图像进行变化的同时，可以在基本显示设备进行相应变化，调整基本显示图像的显示效果，向用户提供更逼真的增强图像，提高现实增强效果。
附图说明
图1是本申请一示例性实施例示出的实现图像显示的系统架构图；
图2a是本申请一示例性实施例示出的图像显示方法的流程示意图；
图2b-图2e是本申请另一示例性实施例示出的图像显示方法的应用场景示意图；
图3是本申请另一示例性实施例示出的图像显示方法的流程示意图；
图4是本申请另一示例性实施例示出的图像显示方法的时序图；
图5是本申请另一示例性实施例示出的图像显示方法的时序图；
图6是本申请一示例性实施例示出的图像显示装置的逻辑框图；
图7是本申请另一示例性实施例示出的图像显示装置的逻辑框图；
图8是本申请一示例性实施例示出的图像显示系统的逻辑框图；
图9是本申请另一示例性实施例示出的图像显示系统的逻辑框图；
图10是本申请一示例性实施例示出的图像显示装置的硬件结构图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解，尽管在本申请可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本申请范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
请参阅图1，图1是根据一示例性实施例示出的实现图像显示的系统架构图，该系统可以包括通过网络互连的服务器、以及关联的基本显示设备和增强显示设备，增强显示设备具有摄像模块，该摄像模块可以是内置于设备内的摄像头，也可以是外置于设备的摄像机等具有摄像功能的设备。
基本显示设备，安装有一软件应用A，用于呈现预定的基本图像。基本显示设备可以是个人计算机、膝上型计算机、蜂窝电话、掌上电脑、相机电话、智能电话、个人数字助理、媒体显示器、导航设备、游戏机等电子设备，本实施例附图仅以个人计算机进行示例展示。
增强显示设备，安装的软件应用B与基本显示设备安装的软件应用A配套，用于呈现增强现实的图像，两个配套的软件应用A、B，可以用于关联基本显示设备和增强显示设备。增强显示设备可以是个人计算机、膝上型计算机、蜂窝电话、掌上电脑、相机电话、智能电话、个人数字助理、媒体显示器、导航设备、游戏机等电子设备，本实施例附图仅以掌上电脑进行示例展示。
服务器，装设有服务端，该服务端为基本显示设备和增强显示设备内安装的配套应用提供服务，如：为两个应用转发信息，为两个应用提供计算支持等。
考虑到目前的AR(Augmented Reality，增强现实)技术，一般只在增强显示设备上，跟随摄像模块摄取的图像呈现变化的增强现实的图像，难以在基本显示设备上，随着变化的增强现实的图像呈现变化的图像，会影响相关应用的现实增强效果。本申请技术方案，针对这个问题，提出一种解决方案，在基本显示设备上运行软件应用A，呈预定的基本图像，在增强显示设备上运行软件应用B，调用摄像模块进行拍摄，可以随着摄像模块所拍摄的图像的变化，显示不同的图像，并且可以在当前拍摄的图像中含有基本显示设备所显示的基本图像时，将与基本图像相关的图像叠加在当前拍摄的图像内，达到增强显示的目的。在预定的互动事件发生后，还能响应互动事件，将互动图像叠加显示到当前拍摄的图像内，对增强现实的图像进行更新。并且随着增强显示图像的变化，可以通过发送与互动事件对应的互动消息，通知基本显示设备根据互动消息调整基本图像的显示效果。因此，在增强显示设备显示的图像进行变化的同时，可以在基本显示设备进行相应变化，调整基本显示图像的显示效果，提高现实增强效果。
实际应用中，本申请设计人员可以根据软件应用A和软件应用B的实际应用场景，预先设置基本图像、相关图像、相关图像在拍摄的图像内的增强显示位置、互动事件、互动消息、互动图像、互动图像在拍摄的图像内的叠加位置、以及调整基本图像后的显示效果，还可以预先设置互动事件、互动消息、互动图像这三者间的对应关系，以及互动消息与调整基本图像后的显示效果之间的对应关系，如图1所示的表1和表2，可以按数据表的形式，分别将预置的对应关系存储在增强显示设备和基本显示设备内。
以下例举一个具体的例子对需预先设置的内容进行详细说明：
本例子中，软件应用A和软件应用B要模拟展示现实世界中水壶向水杯倒水的画面，基本图像为包含水杯这一元素的图像，相关图像为包含水壶这一元素的图像，互动事件由增强显示设备与基本显示设备的相对距离、相对角度触发，互动图像为展示水壶向水杯动态倒水的视频所含的各帧图像，互动消息为互动图像的描述信息，如：水量变化速率(单位时间的加水量)，基本图像中被调整的对象是水杯所含的水量，能达到水杯所含的水量随增强现实的图像的变化而变化的显示效果。
而针对软件应用A和软件应用B实现的其他场景，如投篮球，砸金蛋等，本申请设计人员可以根据具体的应用场景，对需预先设置的内容进行其他设定，本申请对此不做限制。
例如：呈现增强现实的图像时，可以固定呈现预定的静态画面，那么相关图像是预定的静态图像；呈现的增强现实的图像时，也可以连续呈现预定的动态视频的各帧图像，那么相关图像是预定的动态视频内的一帧图像。
而互动事件，可以由预定的互动按钮、目标对象的姿态变化信息、对显示屏幕的按压操作触发，这里提到的目标对象可以是用户身体的目标部位、增强显示设备和基本显示设备中的至少一个。而互动图像，可以是预定的静态图像，也可以是预定的动态视频的各帧图像。不同的互动事件可以对应不同的静态图像、或者不同的动态视频所含的各帧图像。此外，不同的互动事件还可以对应播放帧率不同的动态视频所含的各帧图像。例如：上述模拟现实世界中水壶向水杯倒水的画面的例子中，增强显示设备与基本显示设备的相对角度，在0度到90度间分别对应不同的水量变化速率，不同的水量变化速率对应的动态视频的帧率不同，基本图像被调整后的显示效果不同。
对应于互动事件，互动消息，可以仅包括一个通知，用于告知基本显示设备互动事件已发生，并且触发基本显示设备按预设的规则，调整显示效果，具体调整时，可以调整时可以调整当前显示的基本图像的图像参数，如所含的某个元素的位置、尺寸、颜色、形态等，或将当前显示的基本图像切换为其他预定的基本图像。此外，互动消息也可包括相关图像的描述信息，该描述信息可以包括相关图像的特征信息，用于触发基本显示设备按该描述信息去调整显示效果，如将当前显示的基本图像切换为与相关图像的描述信息对应存储的图像。
在本申请的实施例中，如果互动事件需要服务器提供帮助才能确定是否发生，那么服务器内可以存储不同的互动事件的判断规则，在增强显示设备和基本显示设备间传递信息，如：确认互动事件已发生的通知、互动消息等。
在其他实施例中，增强显示设备和基本显示设备可以直接通过红外、蓝牙等通信媒介，进行信息交互，那么实现本申请实施例的图像显示方法的系统可以仅包括增强显示设备和基本显示设备。以下结合附图对本申请的图像显示方法进行详细说明。
请参阅图2a，图2a是根据一示例性实施例示出的一种图像显示方法的流程示意图，该方法可以运行于增强显示设备，所述增强显示设备关联有基本显示设备，具有摄像模块，该方法可以包括步骤S201-S206：
步骤S201、调用所述摄像模块进行拍摄，并且显示当前拍摄的图像。
步骤S202、如果当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括预定的基本图像，则确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置。
步骤S203、基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像。
步骤S204、在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置。
步骤S205、基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像。
步骤S206、发送所述互动消息，以使所述基本显示设备根据所述互动消息调整基本图像的显示效果。
本申请实施例的步骤编号并非用于限定步骤的执行次序，在其他实施例中，步骤S205可以在步骤S206之后执行，具体的执行次序，可以参照增强显示设备和基本显示设备的图像处理能力，尽量减少两个设备所显示的图像之间的时延。
实际应用中，增强显示设备和基本显示设备可以通过图1所述的实施例中的配套应用对应的服务器进行关联，也可以通过蓝牙、红外等通信媒介进行关联，为了便于增强显示设备内安装的软件应用，从摄像模块拍摄的图像中识别基本显示设备，两个设备内安装的应用可以预先设置关联密码、关联标志等关联信息，如：在基本图像内设置能被唯一的设备标识，或者在通过蓝牙、红外通信媒介关联时，发送设备的唯一的关联密码。
在增强显示设备和基本显示设备建立关联关系后，用户可以运行两个设备内的配套应用，然后基本显示设备内运行的软件应用A会调取预设的基本图像进行显示，增强显示设备内运行的软件应用B会调用摄像模块进行拍摄。为了拍摄到基本显示设备的屏幕图像，用户可以通过转动增强显示设备，将摄像模块对准基本显示设备的屏幕进行拍摄，这样拍摄的图像会包含基本显示设备显示的基本图像。此后，增强显示设备内运行的软件应用B便可以确定相关图像、以及相关图像在拍摄的图像内的增强显示位置。
考虑到相关图像、互动图像的叠加是为了达到增强现实的目的，所以，所述增强显示位置、所述叠加位置与所述基本图像在当前拍摄的图像内的位置相关，在叠加图像前，需要参照基本图像在拍摄的图像内的位置，确定增强显示位置和叠加位置，以便达到增强现实的目的。例如：可以预定相关图像与基本图像间的位置关系，以便预定图像内的元素与基本图像内的元素间的距离与实际场景相应。
将相关图像叠加显示到拍摄的图像内，达到增强现实的目的后，本申请实施例，为进一步模拟现实世界的一些互动场景，还需进一步确定预定的互动事件是否发生，在实际的确定过程中，针对不同的应用场景，可以由服务器、增强显示设备、基本显示设备中的任一设备来确定互动事件是否发生，然后确定事件发生后，再通知其他设备。针对不同的互动事件，可以采用不同的确定方式，以下例举几种:
确定方式一：判断目标对象的姿态变化信息是否满足预设姿态条件，如果满足，则确定预定的互动事件发生。该确定操作可以由服务器内安装的服务端、增强显示设备内运行的软件应用、或者基本显示设备内运行的软件应用来执行。
本方式中，目标对象可以是用户身体的目标部位，如手，可以通过摄像模块来识别用户手部的姿态变化，如手部呈预定的手势，则确定预定的互动事件发生。
其例子中，目标对象还可以增强显示设备和/或基本显示设备的姿态变化信息，如：移动距离，移动方向，旋转角度，线速度，角速度，加速度等，这些姿态变化信息可以由增强显示设备和/或基本显示设备内设置的三轴陀螺仪、重力感应器、加速度计、磁传感器、GPS芯片等检测设备实时检测。检测完成后，将检测结果传送到用来确定预定的互动事件发生的设备，如：增强现实设备、基本显示设备或服务器。
此外，姿态变化信息还可以是设备间的相对距离、相对角度等。例如，软件应用A和软件应用B要模拟展示现实世界中水壶向水杯倒水的画面时，可以通过以下操作判断目标对象的姿态变化信息是否满足预设姿态条件：
获取增强显示设备和基本显示设备的相对距离、相对角度。
判断所述相对距离是否在预定的距离范围内；如果在预定的距离范围内，判断所述相对角度是否在预定的角度范围内。
如果在预定的角度范围内，确定所述互动事件发生。
实际应用中，可以由增强显示设备内设置的位置检测设备(如三轴陀螺仪、GPS芯片等)，实时检测自身的位置信息，由基本显示设备内设置的位置检测设备(如三轴陀螺仪、GPS芯片等)，实时检测自身的位置信息，基本显示设备将检测的位置信息传送到增强显示设备，由增强显示设备根据接收的位置信息和自身的内置设备检测的位置信息，计算相对距离和相对角度，然后根据计算结果判断互动事件是否发生。
如果由服务器确定互动事件是否发生，可以由增强显示设备和基本显示设备，分别将自身的内置设备检测的位置信息传送到服务器，由服务器根据接收的位置信息计算相对距离和相对角度，然后根据计算结果判断互动事件是否发生，然后服务器分别通知增强显示设备和基本显示设备互动事件发生，该通知可以携带有互动图像的描述信息(如水壶向水杯倒水的例子中涉及的水量变化速率)。
而且，为了丰富增强显示效果，对于预定的角度范围内的相对角度，不同数值的相对角度，对应的互动图像的数目不同，单位时间内叠加显示的图像数目也不同。例如，单位时间内叠加显示的互动图像的数目，可以与所述相对角度正相关(成正比)。
在其他例子中，可以每隔预定时段，获取一次增强显示设备和基本显示设备的相对距离、相对角度，在新获取的相对距离不在预定的距离范围内时，即不在呈现增强现实的图像。在新获取的相对距离在预定的距离范围内，但新获取的相对角度不在预定的角度范围内时，不呈现互动图像，基本显示设备也不调整显示效果。
确定方式二：检测预定的互动按钮是否被触击，如果是，则确定预定的互动事件发生。该确定操作一般由增强显示设备内运行的软件应用执行。
本方式中，对应不同的互动事件设置不同的互动按钮，例如：软件应用A和软件应用B要模拟展示现实世界中水壶向水杯倒水的画面时，可以设置多个加水按钮，不同的加水按钮对应的水量变化速率不同。
确定方式三：检测屏幕承受的压力数值，如果压力数值在预定的压力范围内，则确定预定的互动事件发生。该确定操作一般由增强显示设备内运行的软件应用执行。
本方式中，对应不同的压力数值，可以触发不同的互动事件，例如：软件应用A和软件应用B要模拟展示现实世界中水壶向水杯倒水的画面时，可以设置多个互动事件，不同的互动事件对应不同的压力数值、不同的水量变化速率。
以下结合图2b至图2e列举一个应用实例，本应用实例中，软件应用A和软件应用B要模拟展示现实世界中水壶向水杯倒水的画面，增强显示设备为如图2b至图2e所示的掌上电脑，基本显示设备为如图2b至图2e所示的个人计算机，基本图像为含有水杯的图像，相关图像为含有水壶的图像，互动事件由增强显示设备与基本显示设备的相对距离、相对角度触发，互动图像为水壶倒水的动画视频的各帧图像，互动消息为水量变化速率，基本图像被调整的对象是水杯所含的水量，能达到水杯所含的水量随互动图像变化的显示效果。
在增强显示设备和基本显示设备建立关联关系后，用户运行两个设备内的配套应用后，基本显示设备内运行的软件应用A会调取如图2b所示的含水杯(本图中的虚线标示水杯中的初始水量)的图像进行显示，增强显示设备内运行的软件应用B会调用摄像模块进行拍摄，如图2b所示，增强显示设备与基本显示平行放置，此时，拍摄的图像不含基本显示设备显示的基本图像，增强显示设备不会呈现相关图像。
如果用户移动增强显示设备，将摄像模块对准基本显示设备进行拍摄，这样拍摄的图像会包含基本显示设备显示的基本图像。此后，增强显示设备内运行的软件应用B便可以确定相关图像、以及相关图像在拍摄的图像内的增强显示位置，然后叠加显示，显示的增强现实图像如图2c所示，掌上电脑的屏幕图像包括水杯和水壶。
然后用户向图2d所示的箭头方向，调整增强显示设备，调整到如图2d所示的位置，同时设备内的三轴陀螺仪、速度传感器等可以实时检测计算出设备的移动距离和转动角度，根据移动距离和转动角度，可以获得增强显示设备与基本显示设备的相对距离和相对角度，如果相对距离在预定的距离范围内、且相对角度都大于0度小于90度，可以确定预定的互动事件发生，由软件应用B根据检测的相对角度确定水量变化速率，根据水量变化速率获取对应帧率的水壶倒水的动画视频的各帧图像，然后依次叠加显示各帧图像到当前拍摄的图像内，向用户呈现水壶倒水的动画，如图2d所示。同时，将水量变化速率打包到互动消息中并发出，可以直接发送到基本显示设备，或者通过服务器转发到基本显示设备。
基本显示设备内的软件应用A，可以根据互动消息内的水量变化速率，实时调整基本图像中水杯所含的水量，随互动图像变化增加水杯所含的水量，如图2d所示，由标示水杯含水量的虚线可知，相对图2c,个人计算机的屏幕图像中的水杯所含的水量(本图中的虚线标示水杯中的当前水量)变多。
如果增强显示设备正呈现图2d所示的图像时，用户再次转动增强显示设备，转动后，相对距离在预定的距离范围内，但相对角度为0度，那么如图2e所示，增强显示设备仅叠加显示相关图像，所呈现的增强显示图像中，水杯的含水量与图2d所示相同。
在其他应用示例中，用户也可以同时移动或转动基本显示设备来改变设备间的相对距离、相对角度，达到触发预定的互动事件的目的。
请参阅图3，图3是根据一示例性实施例示出的一种图像显示方法的流程示意图，该方法可以运行于基本显示设备，所述基本显示设备关联有增强显示设备，所述增强显示设备具有摄像模块，该方法可以包括步骤S301-S303：
步骤S301、显示预定的基本图像，以供所述摄像模块拍摄给所述增强显示设备进行增强显示，增强显示的图像包括与所述基本图像相关的相关图像。
步骤S302、接收互动消息，所述互动消息是所述增强显示设备对应发生的互动事件所确定的消息。
步骤S303、根据所述互动消息调整基本图像的显示效果。
本申请实施例的涉及的技术内容，与图1至图2e所涉及的实施例的技术内容相应，在此不再赘述。
以下针对增强显示设备410与基本显示设备420通过红外、蓝牙等通信媒介直接连接的场景，介绍图像显示方法的具体实现过程，增强显示设备410和基本显示设备420内装设的配套应用运行后，具体实现过程可以参阅图4，图4是根据一示例性实施例示出的一种图像显示方法的时序图，该方法可以包括步骤S401-S410：
步骤S401、基本显示设备420显示预定的基本图像。
步骤S402、增强显示设备410调用所述摄像模块进行拍摄。
步骤S403、增强显示设备410显示当前拍摄的图像。
步骤S404、增强显示设备410在当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括所述基本图像是，确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置。
步骤S405、增强显示设备410基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像。
步骤S406、增强显示设备410在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置。
步骤S407、增强显示设备410基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像。
步骤S408、增强显示设备410发送所述互动消息。
步骤S409、基本显示设备420接收所述互动消息。
步骤S410、基本显示设备420根据所述互动消息调整基本图像的显示效果。
本申请实施例的涉及的技术内容，与图1至图3涉及的实施例的技术内容相应，在此不再赘述。
以下针对增强显示设备510与基本显示设备530通过服务器520互联的场景，介绍图像显示方法的具体实现过程，增强显示设备510和基本显示设备530内装设的配套应用运行后，具体实现过程可以参阅图5，图5是根据一示例性实施例示出的一种图像显示方法的时序图，该方法可以包括步骤S501-S511：
步骤S501、基本显示设备530显示预定的基本图像。
步骤S502、增强显示设备510调用所述摄像模块进行拍摄。
步骤S503、增强显示设备510显示当前拍摄的图像。
步骤S504、增强显示设备510在当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括所述基本图像是，确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置。
步骤S505、增强显示设备510基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像。
步骤S506、增强显示设备510在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置。
步骤S507、增强显示设备510基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像。
步骤S508、增强显示设备510向服务器520发送所述互动消息。
步骤S509、服务器520向基本显示设备530转发所述互动消息。
步骤S510、基本显示设备530接收所述互动消息。
步骤S511、基本显示设备530根据所述互动消息调整基本图像的显示效果。
本申请实施例的涉及的技术内容与图1至图4所涉及的实施例的技术内容相应，在此不再赘述。
与前述方法的实施例相对应，本申请还提供了装置的实施例。
参见图6，图6是本申请一示例性实施例示出的图像显示装置的逻辑框图，该装置600可以应用于增强显示设备上，所述增强显示设备关联有基本显示设备，具有摄像模块，该装置600包括：拍摄显示模块610、相关图像确定模块620、增强图像显示模块630、互动图像确定模块640、互动图像显示模块650和互动消息发送模块660。
其中，拍摄显示模块610，用于调用所述摄像模块进行拍摄，并且显示当前拍摄的图像。
相关图像确定模块620，用于在当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括预定的基本图像时，确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置。
增强图像显示模块630，用于基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像。
互动图像确定模块640，用于在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置。
互动图像显示模块650，用于基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像。
互动消息发送模块660，用于发送所述互动消息，以使所述基本显示设备根据所述互动消息调整基本图像的显示效果。
一些例子中，所述增强显示位置与所述叠加位置，分别与所述基本图像在当前拍摄的图像内的位置相关。
另一些例子中，所述预定的互动事件由目标设备的姿态变化信息触发，所述目标设备包括所述增强显示设备和/或所述基本显示设备。
作为例子，所述姿态变化信息包括以下一种或多种：
移动距离，移动方向，旋转角度，线速度，角速度，加速度。
作为例子，所述姿态变化信息包括增强显示设备和基本显示设备的相对距离、相对角度，本申请实施例的图像显示装置600还可以包括(图6中未示出)：
相对信息获取模块，用于获取增强显示设备和基本显示设备的相对距离、相对角度。
距离判断模块，用于判断所述相对距离是否在预定的距离范围内。
角度判断模块，用于在所述相对距离在预定的距离范围内，判断所述相对角度是否在预定的角度范围内。
互动事件确定模块，用于在所述相对角度在预定的角度范围内时，确定所述互动事件发生。
作为例子，单位时间内叠加显示的互动图像的数目，与所述相对角度正相关。
参见图7，图7是本申请另一示例性实施例示出的图像显示装置的逻辑框图，该装置700可以应用于基本显示设备上，所述基本显示设备关联有增强显示设备，所述增强显示设备具有摄像模块，该装置700包括：基本图像显示模块710、互动消息接收模块720和显示效果调整模块730。
其中，基本图像显示模块710，用于显示预定的基本图像，以供所述摄像模块拍摄给所述增强显示设备进行增强显示，增强显示的图像包括与所述基本图像相关的相关图像。
互动消息接收模块720，用于接收互动消息，所述互动消息是所述增强显示设备对应发生的互动事件所确定的消息。
显示效果调整模块730，用于根据所述互动消息调整基本图像的显示效果。
参见图8，图8是本申请一示例性实施例示出的图像显示系统的逻辑框图，该系统800可以包括关联的基本显示设备820和增强显示设备810，增强显示设备810具有摄像模块，可以包括：拍摄显示模块811、相关图像确定模块812、增强显示模块增强图像显示模块813、互动图像确定模块814、互动图像显示模块815和互动消息发送模块816；基本显示设备820可以包括基本图像显示模块821、互动消息接收模块822和显示效果调整模块823。
其中，拍摄显示模块811，用于调用所述摄像模块进行拍摄，并且显示当前拍摄的图像。
相关图像确定模块812，用于在当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括预定的基本图像时，确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置。
增强图像显示模块813，用于基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像。
互动图像确定模块814，用于在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置。
互动图像显示模块815，用于基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像。
互动消息发送模块816，用于发送所述互动消息。
基本图像显示模块821，用于显示预定的基本图像。
互动消息接收模块822，用于接收互动消息。
显示效果调整模块823，用于根据所述互动消息调整基本图像的显示效果。
参见图9，图9是本申请另一示例性实施例示出的图像显示系统的逻辑框图，该系统900可以包括服务器920、以及通过服务器920关联的基本显示设备930和增强显示设备910，增强显示设备910具有摄像模块，可以包括：拍摄显示模块911、相关图像确定模块912、增强图像显示模块913、互动图像确定模块914、互动图像显示模块915和互动消息发送模块916；服务器920可以包括互动消息转发模块921；基本显示设备930可以包括基本图像显示模块931、互动消息接收模块932和显示效果调整模块933。
其中，拍摄显示模块911，用于调用所述摄像模块进行拍摄，并且显示当前拍摄的图像。
相关图像确定模块912，用于在当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括预定的基本图像时，确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置。
增强图像显示模块913，用于基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像。
互动图像确定模块914，用于在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置。
互动图像显示模块915，用于基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像。
互动消息发送模块916，用于发送所述互动消息。
互动消息转发模块921，用于转发所述互动消息。
基本图像显示模块931，用于显示预定的基本图像。
互动消息接收模块932，用于接收互动消息。
显示效果调整模块933，用于根据所述互动消息调整基本图像的显示效果。
上述装置中各个单元(或模块)的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程，在此不再赘述。
对于装置实施例而言，由于其基本对应于方法实施例，所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元或模块可以是或者也可以不是物理上分开的，作为单元或模块显示的部件可以是或者也可以不是物理单元或模块，即可以位于一个地方，或者也可以分布到多个网络单元或模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本申请方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
本申请图像显示装置的实施例可以应用在电子设备上。具体可以由计算机芯片或实体实现，或者由具有某种功能的产品来实现。一种典型的实现中，电子设备为计算机，计算机的具体形式可以是个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体显示器、导航设备、电子邮件收发设备、游戏控制台、平板计算机、可穿戴设备、互联网电视、智能机车、无人驾驶汽车、智能冰箱、其他智能家居设备或者这些设备中的任意几种设备的组合。
装置实施例可以通过软件实现，也可以通过硬件或者软硬件结合的方式实现。以软件实现为例，作为一个逻辑意义上的装置，是通过其所在电子设备的处理器将非易失性存储器等可读介质中对应的计算机程序指令读取到内存中运行形成的。从硬件层面而言，如图10所示，为本申请图像显示装置所在电子设备的一种硬件结构图，除了图10所示的处理器、内存、网络接口、以及非易失性存储器之外，实施例中装置所在的电子设备通常根据该电子设备的实际功能，还可以包括其他硬件，对此不再赘述。电子设备的内存可以是能存储处理器可执行程序指令的存储器；处理器可以耦合存储器，用于读取所述存储器存储的程序指令，并作为响应，执行如下操作：调用所述摄像模块进行拍摄，并且显示当前拍摄的图像；如果当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括预定的基本图像，则确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置；基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像；在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置；基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像；发送所述互动消息，以使所述基本显示设备根据所述互动消息调整基本图像的显示效果。
在另一实施例中，处理器可以耦合存储器，用于读取所述存储器存储的程序指令，并作为响应，执行如下操作：显示预定的基本图像；接收互动消息，并根据所述互动消息调整基本图像的显示效果；所述互动消息是所述增强显示设备对应发生的互动事件所确定的消息。
在其他实施例中，处理器所执行的操作可以参考上文方法实施例中相关的描述，在此不予赘述。
以上所述仅为本申请的较佳实施例而已，并不用以限制本申请，凡在本申请的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本申请保护的范围之内。
Claims (19)
1.一种图像显示方法，其特征在于，运行于增强显示设备，所述增强显示设备关联有基本显示设备，具有摄像模块，所述方法包括步骤：
调用所述摄像模块进行拍摄，并且显示当前拍摄的图像；
如果当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括预定的基本图像，则确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置；
基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像；
在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置；所述预定的互动事件由目标设备的姿态变化信息触发，所述目标设备包括所述增强显示设备和/或所述基本显示设备；
基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像；
发送所述互动消息，以使所述基本显示设备根据所述互动消息调整基本图像的显示效果。
2.根据权利要求1所述的方法，其特征在于，所述增强显示位置与所述叠加位置，分别与所述基本图像在当前拍摄的图像内的位置相关。
3.根据权利要求1所述的方法，其特征在于，所述姿态变化信息包括以下一种或多种：
移动距离，移动方向，旋转角度，线速度，角速度，加速度。
4.根据权利要求1所述的方法，其特征在于，所述姿态变化信息包括增强显示设备和基本显示设备的相对距离、相对角度，所述方法还包括以下步骤：
获取增强显示设备和基本显示设备的相对距离、相对角度；
判断所述相对距离是否在预定的距离范围内；
如果在预定的距离范围内，判断所述相对角度是否在预定的角度范围内；
如果在预定的角度范围内，确定所述互动事件发生。
5.根据权利要求4所述的方法，其特征在于，单位时间内叠加显示的互动图像的数目，与所述相对角度正相关。
6.一种图像显示方法，其特征在于，运行于基本显示设备，所述基本显示设备关联有增强显示设备，所述增强显示设备具有摄像模块，所述方法包括步骤：
显示预定的基本图像，以供所述摄像模块拍摄给所述增强显示设备进行增强显示，增强现实的图像包括与所述基本图像相关的相关图像；
接收互动消息，并根据所述互动消息调整基本图像的显示效果；所述互动消息是所述增强显示设备对应发生的互动事件所确定的消息；所述互动事件由目标设备的姿态变化信息触发，所述目标设备包括所述增强显示设备和/或所述基本显示设备。
7.一种图像显示方法，其特征在于，包括步骤：
在基本显示设备侧，显示预定的基本图像；所述基本显示设备关联有增强显示设备，所述增强显示设备具有摄像模块；
在所述增强显示设备侧：
调用所述摄像模块进行拍摄，并且显示当前拍摄的图像；如果当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括所述基本图像，则确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置；
基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像；
在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置；所述预定的互动事件由目标设备的姿态变化信息触发，所述目标设备包括所述增强显示设备和/或所述基本显示设备；
基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像，并发送所述互动消息；
在所述基本显示设备侧，接收所述互动消息，并根据所述互动消息调整基本图像的显示效果。
8.一种图像显示方法，其特征在于，包括步骤：
在基本显示设备侧，显示预定的基本图像；所述基本显示设备通过服务器与增强显示设备关联，所述增强显示设备具有摄像模块；
在所述增强显示设备侧：
调用所述摄像模块进行拍摄，并且显示当前拍摄的图像；如果当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括所述基本图像，则确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置；
基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像；
在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置；所述预定的互动事件由目标设备的姿态变化信息触发，所述目标设备包括所述增强显示设备和/或所述基本显示设备；
基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像，并向服务器发送所述互动消息；
在所述服务器侧，接收所述互动消息，并向所述基本显示设备转发所述互动消息；
在所述基本显示设备侧，接收所述互动消息，并根据所述互动消息调整基本图像的显示效果。
9.一种电子设备，其特征在于，所述电子设备关联有基本显示设备，具有摄像模块，所述电子设备包括：
处理器；
存储处理器可执行指令的存储器；
其中，所述处理器耦合于所述存储器，用于读取所述存储器存储的程序指令，并作为响应，执行如下操作：
调用所述摄像模块进行拍摄，并且显示当前拍摄的图像；
如果当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括预定的基本图像，则确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置；
基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像；
在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置；所述预定的互动事件由目标设备的姿态变化信息触发，所述目标设备包括所述电子设备和/或所述基本显示设备；
基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像；
发送所述互动消息，以使所述基本显示设备根据所述互动消息调整基本图像的显示效果。
10.一种电子设备，其特征在于，所述电子设备关联有增强显示设备，所述增强显示设备具有摄像模块，所述电子设备包括：
处理器；
存储处理器可执行指令的存储器；
其中，所述处理器耦合于所述存储器，用于读取所述存储器存储的程序指令，并作为响应，执行如下操作：
显示预定的基本图像；
接收互动消息，并根据所述互动消息调整基本图像的显示效果；所述互动消息是所述增强显示设备对应发生的互动事件所确定的消息，所述互动事件由目标设备的姿态变化信息触发，所述目标设备包括所述增强显示设备和/或所述电子设备。
11.一种图像显示装置，其特征在于，应用于增强显示设备上，所述增强显示设备关联有基本显示设备，具有摄像模块，所述装置包括：
拍摄显示模块，用于调用所述摄像模块进行拍摄，并且显示当前拍摄的图像；
相关图像确定模块，用于在当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括预定的基本图像时，确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置；
增强图像显示模块，用于基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像；
互动图像确定模块，用于在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置；所述预定的互动事件由目标设备的姿态变化信息触发，所述目标设备包括所述增强显示设备和/或所述基本显示设备；
互动图像显示模块，用于基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像；
互动消息发送模块，用于发送所述互动消息，以使所述基本显示设备根据所述互动消息调整基本图像的显示效果。
12.根据权利要求11所述的装置，其特征在于，所述增强显示位置与所述叠加位置，分别与所述基本图像在当前拍摄的图像内的位置相关。
13.根据权利要求11所述的装置，其特征在于，所述姿态变化信息包括以下一种或多种：
移动距离，移动方向，旋转角度，线速度，角速度，加速度。
14.根据权利要求11所述的装置，其特征在于，所述姿态变化信息包括增强显示设备和基本显示设备的相对距离、相对角度，所述装置还包括：
相对信息获取模块，用于获取增强显示设备和基本显示设备的相对距离、相对角度；
距离判断模块，用于判断所述相对距离是否在预定的距离范围内；
角度判断模块，用于在所述相对距离在预定的距离范围内，判断所述相对角度是否在预定的角度范围内；
互动事件确定模块，用于在所述相对角度在预定的角度范围内时，确定所述互动事件发生。
15.根据权利要求14所述的装置，其特征在于，单位时间内叠加显示的互动图像的数目，与所述相对角度正相关。
16.一种图像显示装置，其特征在于，应用在基本显示设备上，所述基本显示设备关联有增强显示设备，所述增强显示设备具有摄像模块，所述装置包括：
基本图像显示模块，用于显示预定的基本图像，以供所述摄像模块拍摄给所述增强显示设备进行增强显示，增强现实的图像包括与所述基本图像相关的相关图像；
互动消息接收模块，用于接收互动消息；
显示效果调整模块，用于根据所述互动消息调整基本图像的显示效果；所述互动消息是所述增强显示设备对应发生的互动事件所确定的消息，所述互动事件由目标设备的姿态变化信息触发，所述目标设备包括所述增强显示设备和/或所述基本显示设备。
17.一种图像显示系统，其特征在于，包括关联的基本显示设备和增强显示设备，所述增强显示设备具有摄像模块；
所述基本显示设备包括：
基本图像显示模块，用于显示预定的基本图像；
所述增强显示设备包括：
拍摄显示模块，用于调用所述摄像模块进行拍摄，并且显示当前拍摄的图像；
相关图像确定模块，用于在当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括所述基本图像时，确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置；
增强图像显示模块，用于基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像；
互动图像确定模块，用于在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置；所述预定的互动事件由目标设备的姿态变化信息触发，所述目标设备包括所述增强显示设备和/或所述基本显示设备；
互动图像显示模块，用于基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像；
互动消息发送模块，用于发送所述互动消息；
所述基本显示设备还包括：
互动消息接收模块，用于接收互动消息；
显示效果调整模块，用于根据所述互动消息调整基本图像的显示效果。
18.一种图像显示系统，其特征在于，包括服务器、以及通过所述服务器关联的基本显示设备和增强显示设备，所述增强显示设备具有摄像模块；
所述基本显示设备包括：
基本图像显示模块，用于显示预定的基本图像；
所述增强显示设备包括：
拍摄显示模块，用于调用所述摄像模块进行拍摄，并且显示当前拍摄的图像；
相关图像确定模块，用于在当前拍摄的图像包括所述基本显示设备的屏幕图像，且所述屏幕图像包括所述基本图像时，确定与所述基本图像相关的相关图像、以及所述相关图像在当前拍摄的图像内的增强显示位置；
增强图像显示模块，用于基于所述增强显示位置，将所述相关图像叠加显示到当前拍摄的图像；
互动图像确定模块，用于在预定的互动事件发生后，确定与所述互动事件对应的互动消息、互动图像、以及互动图像在当前拍摄的图像内的叠加位置；所述预定的互动事件由目标设备的姿态变化信息触发，所述目标设备包括所述增强显示设备和/或所述基本显示设备；
互动图像显示模块，用于基于所述叠加位置，将所述互动图像叠加显示到当前拍摄的图像；
互动消息发送模块，用于向所述服务器发送所述互动消息；
所述服务器包括互动消息转发模块，用于接收所述互动消息，并向所述基本显示设备转发所述互动消息；
所述基本显示设备还包括：
互动消息接收模块，用于接收互动消息；
显示效果调整模块，用于根据所述互动消息调整基本图像的显示效果。
19.一个或多个机器可读介质，其特征在于，其上存储有指令，当由一个或多个处理器执行时，使得终端设备执行如权利要求1-9中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710266388.3A CN107391060B (zh) | 2017-04-21 | 2017-04-21 | 图像显示方法、装置、系统及设备、可读介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710266388.3A CN107391060B (zh) | 2017-04-21 | 2017-04-21 | 图像显示方法、装置、系统及设备、可读介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN107391060A CN107391060A (zh) | 2017-11-24 |
| CN107391060B true CN107391060B (zh) | 2020-05-29 |
Family
ID=60338343
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710266388.3A Active CN107391060B (zh) | 2017-04-21 | 2017-04-21 | 图像显示方法、装置、系统及设备、可读介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107391060B (zh) |
Families Citing this family (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108109209A (zh) * | 2017-12-11 | 2018-06-01 | 广州市动景计算机科技有限公司 | 一种基于增强现实的视频处理方法及其装置 |
| CN108197621A (zh) * | 2017-12-28 | 2018-06-22 | 北京金堤科技有限公司 | 企业信息获取方法及系统和信息处理方法及系统 |
| CN108280420A (zh) * | 2018-01-19 | 2018-07-13 | 百度在线网络技术（北京）有限公司 | 用于处理图像的系统、方法和装置 |
| CN110618775B (zh) * | 2018-06-19 | 2022-10-14 | 宏碁股份有限公司 | 用于互动控制的电子装置 |
| CN109491561B (zh) * | 2018-09-27 | 2021-02-12 | 维沃移动通信有限公司 | 一种图像显示方法及终端 |
| CN109831423A (zh) * | 2019-01-22 | 2019-05-31 | 阿依瓦（北京）技术有限公司 | 一种基于增强现实的互动系统及互动方法 |
| CN110377764B (zh) * | 2019-07-19 | 2022-10-11 | 芋头科技（杭州）有限公司 | 信息显示方法 |
| CN113853577A (zh) * | 2020-04-28 | 2021-12-28 | 深圳市大疆创新科技有限公司 | 图像的处理方法及装置、可移动平台及其控制终端、计算机可读存储介质 |
| CN114363705A (zh) * | 2021-05-17 | 2022-04-15 | 海信视像科技股份有限公司 | 一种增强现实设备及交互增强方法 |
| CN113360805B (zh) * | 2021-06-03 | 2023-06-20 | 北京市商汤科技开发有限公司 | 数据展示方法、装置、计算机设备以及存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103365572A (zh) * | 2012-03-26 | 2013-10-23 | 联想(北京)有限公司 | 一种电子设备的远程操控方法及电子设备 |
| CN103631471A (zh) * | 2012-08-20 | 2014-03-12 | 华为技术有限公司 | 媒体交互方法、装置和系统，以及用户设备 |
| CN104134229A (zh) * | 2014-08-08 | 2014-11-05 | 李成 | 实时交互的增强现实系统以及方法 |
| CN106157077A (zh) * | 2015-02-26 | 2016-11-23 | 宅妆股份有限公司 | 切换虚拟现实模式与扩增现实模式的管理方法以及系统 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10511895B2 (en) * | 2015-10-09 | 2019-12-17 | Warner Bros. Entertainment Inc. | Cinematic mastering for virtual reality and augmented reality |
-
2017
- 2017-04-21 CN CN201710266388.3A patent/CN107391060B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103365572A (zh) * | 2012-03-26 | 2013-10-23 | 联想(北京)有限公司 | 一种电子设备的远程操控方法及电子设备 |
| CN103631471A (zh) * | 2012-08-20 | 2014-03-12 | 华为技术有限公司 | 媒体交互方法、装置和系统，以及用户设备 |
| CN104134229A (zh) * | 2014-08-08 | 2014-11-05 | 李成 | 实时交互的增强现实系统以及方法 |
| CN106157077A (zh) * | 2015-02-26 | 2016-11-23 | 宅妆股份有限公司 | 切换虚拟现实模式与扩增现实模式的管理方法以及系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN107391060A (zh) | 2017-11-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107391060B (zh) | 图像显示方法、装置、系统及设备、可读介质 | |
| US9973677B2 (en) | Refocusable images | |
| US9325961B2 (en) | Computer-readable storage medium having information processing program stored therein, information processing method, information processing apparatus, and information processing system | |
| CN112039937B (zh) | 一种显示方法、位置确定方法及装置 | |
| CN110351480B (zh) | 用于电子设备的图像处理方法、装置及电子设备 | |
| GB2525232A (en) | A device orientation correction method for panorama images | |
| US20120327091A1 (en) | Gestural Messages in Social Phonebook | |
| US20240066404A1 (en) | Perspective rotation method and apparatus, device, and storage medium | |
| CN107562189B (zh) | 一种基于双目摄像头的空间定位方法及服务设备 | |
| US20210042980A1 (en) | Method and electronic device for displaying animation | |
| CN109743892A (zh) | 虚拟现实内容的显示方法和装置 | |
| US20140270693A1 (en) | Information processing device, storage medium having moving image data stored thereon, information processing system, storage medium having moving image reproduction program stored thereon, and moving image reproduction method | |
| US11212501B2 (en) | Portable device and operation method for tracking user's viewpoint and adjusting viewport | |
| US11521346B2 (en) | Image processing apparatus, image processing method, and storage medium | |
| CN105939497A (zh) | 媒体串流系统及媒体串流方法 | |
| US9478068B2 (en) | Computer-readable medium, image processing device, image processing system, and image processing method | |
| JP2012216074A (ja) | 画像処理装置、画像処理装置の制御方法、及びプログラム | |
| EP3805899A1 (en) | Head mounted display system and scene scanning method thereof | |
| TWI680005B (zh) | 移動追蹤方法及移動追蹤系統 | |
| CN113870213A (zh) | 图像显示方法、装置、存储介质以及电子设备 | |
| JP2018094086A (ja) | 情報処理装置および画像生成方法 | |
| US20230326147A1 (en) | Helper data for anchors in augmented reality | |
| CN106713893B (zh) | 手机3d立体拍照方法 | |
| CN107038746B (zh) | 一种信息处理方法及电子设备 | |
| US20120162199A1 (en) | Apparatus and method for displaying three-dimensional augmented reality |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 1247308 Country of ref document: HK |
|
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20200922 Address after: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands Patentee after: Innovative advanced technology Co.,Ltd. Address before: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands Patentee before: Advanced innovation technology Co.,Ltd. Effective date of registration: 20200922 Address after: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands Patentee after: Advanced innovation technology Co.,Ltd. Address before: A four-storey 847 mailbox in Grand Cayman Capital Building, British Cayman Islands Patentee before: Alibaba Group Holding Ltd. |
|
| TR01 | Transfer of patent right |