CN115842908A - 图像获取方法及装置 - Google Patents
图像获取方法及装置 Download PDFInfo
- Publication number
- CN115842908A CN115842908A CN202211351868.7A CN202211351868A CN115842908A CN 115842908 A CN115842908 A CN 115842908A CN 202211351868 A CN202211351868 A CN 202211351868A CN 115842908 A CN115842908 A CN 115842908A
- Authority
- CN
- China
- Prior art keywords
- terminal
- image
- intelligent head
- preview data
- mounted equipment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
本申请提供一种图像获取方法及装置。所述方法包括:智能头戴设备接收终端发送的图像预览数据,并把图像预览数据对应的图像画面显示给智能头戴设备的用户;智能头戴设备接收针对图像画面进行拍摄的交互命令,并将交互命令发送至终端,以使终端的图像获取应用基于交互命令进行拍照并获取目标图像。本申请提供的图像获取方法及装置,通过智能头戴设备接收终端发送的图像预览数据,实现了在智能头戴设备中对终端中图像获取应用的拍摄画面的实时查看。智能头戴设备将针对图像画面进行拍摄的交互命令发送至终端,实现了智能头戴设备协助终端拍摄的控制,方便用户基于终端拍摄高质量、高难度和高创意等场景的图像,提升了用户图像获取的灵活性。
Description
技术领域
本申请涉及扩展现实技术领域,具体涉及一种图像获取方法及装置。
背景技术
现有的基于手机等终端进行获取图像时,可能存在无法直接查看手机屏幕中的画面。例如,当手机支架在拍摄集体照片的时候,有人眨眼,有人歪头,不是每个人都处在最佳状态,无法拍出让所有人满意的照片。或者,举起手机拍照时,无法直接看到手机屏幕,导致无法拍出合适图片。传统的手机拍照方式,难以满足对于高质量、高难度和高创意等场景的照片和视频的需求。
发明内容
本申请提供一种图像获取方法及装置,用以解决手机等终端进行获取图像时,难以满足对于高质量、高难度和高创意等场景的照片和视频的需求的技术问题。
第一方面,本申请提实施例供一种图像获取方法,所述方法包括:
智能头戴设备接收终端发送的图像预览数据,并对所述图像预览数据对应的图像画面显示给所述智能头戴设备的用户,所述图像预览数据是所述终端的图像获取应用获取的;
所述智能头戴设备接收所述用户针对所述图像画面进行拍摄的交互命令,并将所述交互命令发送至所述终端,以使所述终端的图像获取应用基于所述交互命令进行拍照并获取目标图像。
在一个实施例中,所述智能头戴设备接收终端发送的图像预览数据之前,还包括:
智能头戴设备接收终端发送的配对指令,并基于所述配对指令,与所述终端进行配对;
所述智能头戴设备与所述终端配对成功后,所述智能头戴设备建立与所述终端进行数据传输的无线网络通信技术WiFi点对点传输通道以及与所述终端进行命令传输的蓝牙通道。
在一个实施例中,所述智能头戴设备接收终端发送的图像预览数据,包括:
所述智能头戴设备基于所述WiFi点对点传输通道,接收终端发送的图像预览数据。
在一个实施例中,所述智能头戴设备接收所述用户针对所述图像画面进行拍摄的交互命令,包括:
所述智能头戴设备接收基于所述智能头戴设备的输入模块获取到的所述用户针对所述图像画面进行拍摄的交互命令,所述输入模块包括触控模块、语音输入模块以及手势识别模块中的至少一种。
第二方面,本申请实施例还提供一种图像获取方法,所述方法包括:
基于终端的图像获取应用获取图像预览数据;
所述终端将所述图像预览数据发送至智能头戴设备,以使所述智能头戴设备将所述图像预览数据对应的图像画面显示给所述智能头戴设备的用户;
所述终端接收所述智能头戴设备发送的所述用户针对所述图像画面进行拍摄的交互命令,并基于所述交互命令进行拍照并获取目标图像。
在一个实施例中,所述终端将所述图像预览数据发送至智能头戴设备之前,还包括:
所述终端向所述智能头戴设备发送配对指令,并基于所述配对指令,与所述智能头戴设备进行配对;
所述终端与所述智能头戴设备配对成功后,所述终端建立与所述智能头戴设备进行数据传输的WiFi点对点传输通道以及与所述智能头戴设备进行命令传输的蓝牙通道。
在一个实施例中,所述终端将所述图像预览数据发送至智能头戴设备,包括:
所述终端基于所述WiFi点对点传输通道,将所述图像预览数据发送至智能头戴设备。
在一个实施例中,所述终端接收所述智能头戴设备发送的所述用户针对所述图像画面进行拍摄的交互命令,包括:
所述终端基于所述蓝牙通道,接收所述智能头戴设备发送的所述用户针对所述图像画面进行拍摄的交互命令。
第三方面,本申请实施例还提供一种智能头戴设备,所述智能头戴设备包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述任一种的图像获取方法。
第四方面,本申请实施例还提供一种终端,所述终端包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述任一种的图像获取方法。
第五方面,本申请实施例还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述任一种的图像获取方法。
附图说明
为了更清楚地说明本申请或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的图像获取方法的流程示意图之一;
图2为本申请实施例提供的图像获取方法的流程示意图之二;
图3为应用本申请实施例提供的图像获取方法的流程示意图;
图4为应用本申请实施例提供的图像获取方法的装置结构示意图。
具体实施方式
下面将结合本申请中的附图,对本申请中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
图1为本申请实施例提供的图像获取方法的流程示意图之一,参照图1,本申请实施例提供的图像获取方法,包括以下步骤:
步骤110、智能头戴设备接收终端发送的图像预览数据,并对所述图像预览数据对应的图像画面显示给智能头戴设备的用户,所述图像预览数据是所述终端的图像获取应用获取的;
步骤120、所述智能头戴设备接收所述用户针对所述图像画面进行拍摄的交互命令,并将所述交互命令发送至所述终端,以使所述终端的图像获取应用基于所述交互命令进行拍照并获取目标图像。
本申请实施例中的终端包括各种具有无线通信功能的手持设备、车载设备、可穿戴设备、计算设备、或连接到无线调制解调器的其它处理设备,例如,手机、平板、台式笔记本以及可以运行应用程序的智能设备,包括智能汽车的中央控制台等。具体可以指用户设备(user equipment,UE)、接入终端、用户单元、用户站、移动站、移动台、远方站、远程终端、移动设备、用户终端、终端、无线通信设备、用户代理或用户装置。终端设备还可以是卫星电话、蜂窝电话、智能手机、无线数据卡、无线调制解调器、机器类型通信设备、可以是无绳电话、会话启动协议(session initiation protocol,SIP)电话、无线本地环路(wirelesslocal loop,WLL)站、个人数字处理(personal digital assistant,PDA)、具有无线通信功能的手持设备、计算设备或连接到无线调制解调器的其它处理设备、车载设备或可穿戴设备,虚拟现实(virtual reality,VR)终端设备、增强现实(augmented reality,AR)终端设备、工业控制(industrial control)中的无线终端、无人驾驶(self-driving)中的无线终端、远程医疗(remote medical)中的无线终端、智能电网(smart grid)中的无线终端、运输安全(transportation safety)中的无线终端、智慧城市(smart city)中的无线终端、智慧家庭(smart home)中的无线终端、5G网络或者未来通信网络中的终端设备等。移动终端可以由电池供电,还可以附接到车辆或者船舶的电源系统,并由车辆或者船舶的电源系统供电。车辆或者船舶的电源系统还可以为移动终端的电池充电,以延长移动终端通信时间。
需要说明的是,智能头戴设备可以是增强现实AR(Augmented Reality,增强现实)眼镜,也可以是虚拟现实VR(Virtual Reality)眼镜。其中,AR技术是一种将虚拟信息与真实世界巧妙融合的技术,广泛运用了多媒体、三维建模、实时跟踪及注册、智能交互、传感等多种技术手段,将计算机生成的文字、图像、三维模型、音乐、视频等虚拟信息模拟仿真后,应用到真实世界中,两种信息互为补充,从而实现对真实世界的“增强”。在一个实施例中,智能头戴设备是作为增强现实的显示器,显示增强现实中的画面场景,并与佩戴AR眼镜的用户进行交互。VR是利用并综合三维图形技术、多媒体技术、仿真技术、显示技术、伺服技术等多种高科技的最新发展成果,借助计算机等设备产生一个逼真的三维视觉、触觉、嗅觉等多种感官体验的虚拟世界,从而使处于虚拟世界中的人产生一种身临其境的感觉。
下面以智能头戴设备执行本申请实施例提供的图像获取方法为例,详细说明本申请的技术方案。
具体地,在步骤110中,终端获取图像预览数据,并将获取的图像预览数据发送给智能头戴设备。智能头戴设备接收终端发送的图像预览数据,并在智能头戴设备的显示区域显示图像预览数据对应的图像画面。
图像预览数据是基于终端的图像获取应用获取的。图像获取应用是终端中涉及获取图像的应用程序。例如,手机中相关的应用程序、手机中图像识别认证相关的应用程序等。基于终端的图像获取应用可以获取图像预览数据,例如,基于在打开手机的拍照应用程序时,可以获取手机拍照应用程序的画面作为图像预览数据。
终端在获取图像预览数据之后,基于预先建立的终端与智能头戴设备的数据传输通道,将获取的图像预览数据发送至智能头戴设备。智能头戴设备接收图像预览数据后,将获取的图像预览数据对应的图像画面实时显示在智能头戴设备的显示区域,从而实现将图像画面显示给智能头戴设备的用户。
可选的,在智能头戴设备接收图像预览数据后,可以将图像预览数据发送给智能头戴设备中的影像应用,影像应用接收图像预览数据后,对图像预览数据进行解析,得到对应的图像画面,显示在智能头戴设备的显示区域。
其中,图像预览数据可以是图片数据,也可以是实时视频流数据。在图像预览数据为图片数据时,在智能头戴设备接收图像预览数据后,将图片显示在智能头戴设备的显示区域。在图像预览数据为实时视频流数据时,在智能头戴设备接收图像预览数据后,将对应的视频实时显示在智能头戴设备的显示区域。
可以理解的是,在将获取的图像预览数据对应的图像画面实时显示在智能头戴设备的显示区域后,用户可以查看智能头戴设备显示的图像预览数据对应的图像画面。用户在佩戴智能头戴设备时,可以实时查看终端中的图像预览数据,实现了终端中图像获取应用获取的图像与智能头戴设备中显示区域显示画面的同步。
其中,终端将获取的图像预览数据发送给智能头戴设备之前,需要建立终端与智能头戴设备的设备互信。可以将智能头戴设备与终端进行设备配对,完成设备的互信。可以通过蓝牙、Wi-Fi或UWB(Ultra Wide Band,超宽带)完成终端与智能头戴设备的设备配对,比如,可以用终端扫描智能头戴设备中的二维码来完成配对过程。
在步骤120中,智能头戴设备在显示图像预览数据对应的图像画面时,可以接收用户针对图像画面进行拍摄的交互命令。其中,交互命令可以是佩戴智能头戴设备的用户发出的。在接收交互命令后,智能头戴设备将交互命令发送至终端,以使终端的图像获取用于基于接收的交互命令进行拍照并获取目标图像。
其中,目标图像为佩戴智能头戴设备的用户想获取的图像。
在用户佩戴智能头戴设备,在智能头戴设备的显示区域查看图像预览数据对应的图像画面时,用户可以针对当前图像画面进行交互操作。例如,用户在智能头戴设备的显示区域查看到终端的图像获取应用实时返回的终端设备头拍摄的画面时,用户可以发出拍照的交互命令给智能头戴设备。智能头戴设备将获取的交互命令发送至终端,驱动终端的图像获取应用进行拍照,获取当前时刻拍摄的照片。
交互命令可以是佩戴智能头戴设备的用户发送的。例如,基于触控智能头戴设备,将用户触控指令生成对应的交互命令。或者,基于语音控制智能头戴设备,将用户语音控制命令通过NLP(Natural Language Processing,自然语言处理)处理后生成对应的交互命令。又或者,手势控制智能头戴设备,将用户手势控制通过手势识别处理后生成对应的交互命令。
智能头戴设备在获取用户针对图像画面进行拍摄的交互命令后,将交互命令发送至终端。终端的图像获取应用基于交互命令进行拍照并获取目标图像。其中,获取的目标图像可以是图片也可以是视频。例如,当交互命令为拍照时,图像获取应用基于交互命令进行拍照。当交互命令为获取一段两分钟的视频时,图像获取应用基于交互命令,获取从当前时刻开始的一段两分钟视频。
可以理解的是,基于智能头戴设备协助终端进行拍照的方式,可以有助于终端拍摄高质量、高难度和高创意等场景的图像。例如,在基于终端拍摄全家福的时候,智能头戴设备的近眼现实可以看到全家福中每一个人的姿势和表情,戴智能头戴设备的用户可以指导大家拍摄出最美的全家福照片;A用户戴上智能头戴设备,可以看到B用户基于终端进行拍摄中的自己,无论远近,都可以很好地调节姿势,并准确在第一时间自己完成拍摄任务;戴上智能头戴设备,在一些特殊场景,举得高高的终端画面可以清晰地呈现在智能头戴设备前面的光学镜片上,引导用户全程拍摄出不被遮挡的图像或者视频。
与此同时,一般智能头戴设备本身配置的摄像头像素较低,或者根本没有配置摄像头,无法仅基于智能头戴设备获取高质量的图像。而终端的图像采集装置一般像素高,采集的图像画面质量搞。基于智能头戴设备协助终端进行拍照的方式,可以基于智能头戴设备协助终端,基于终端的高质量摄像头,获取高质量图像。
其中,在智能头戴设备为AR眼镜时,通过AR眼镜接收终端发送的图像预览数据,并在AR眼镜的显示区域显示图像预览数据对应的图像画面,使得用户可以从AR眼镜的显示区域实时查看终端传输的图像预览数据的图像画面。
在智能头戴设备为VR眼镜时,通过VR眼镜接收终端发送的图像预览数据,并在VR眼镜的显示区域显示图像预览数据对应的图像画面,使得佩戴VR眼镜的用户可以沉浸在VR眼镜的显示区域实时查看终端传输的图像预览数据的图像画面。
本申请实施例提供的图像获取方法,通过智能头戴设备接收终端发送的图像预览数据,并在智能头戴设备的显示区域显示图像预览数据对应的图像画面,实现了在智能头戴设备中对终端中图像获取应用的拍摄画面的实时查看。与此同时,智能头戴设备将针对图像画面进行拍摄的交互命令发送至终端,以使终端进行拍照并获取目标图像,实现了智能头戴设备协助终端拍摄的控制,方便了用户基于终端拍摄高质量、高难度和高创意等场景的图像,提升了用户图像获取的灵活性。
基于上述实施例,步骤110包括:
智能头戴设备接收终端发送的配对指令,并基于所述配对指令,与所述终端进行配对;
所述智能头戴设备与所述终端配对成功后,所述智能头戴设备建立与所述终端进行数据传输以及命令传输的通道。
在智能头戴设备与终端实现数据通信前,需要建立智能头戴设备与终端的连接。
在智能头戴设备与终端进行配对、数据传输以及命令传输时,可以基于WiFi、蓝牙或者UWB中的任意一种方式实现。例如,基于蓝牙的方式,实现智能头戴设备与终端之间的配对,并在配对完成后,建立智能头戴设备与终端进行数据传输以及命令传输的蓝牙通道,以实现智能头戴设备与终端之间的数据传输以及命令传输。
在终端发起配对,向智能头戴设备发送配对指令。智能头戴设备接收的终端发送的配对指令,并基于配对指令,与终端进行配对。
在完成智能头戴设备与终端的配对后,智能头戴设备可以建立与终端进行数据传输的WiFi点对点传输通道以及与终端进行命令传输的蓝牙通道。
可以理解的是,在针对智能头戴设备与终端进行数据通信的过程中,包含图像预览数据以及交互命令两种数据形式的传输。建立智能头戴设备与终端之间进行图像预览数据传输的WiFi点对点传输通道,以及交互命令数据传输的蓝牙通道,实现了图像预览数据与交互命令的分开传输。图像预览数据与交互命令的分开传输,保障了数据传输之间互不干扰,提升了数据传输的可靠性。
可选的,智能头戴设备与终端之间的配对,数据和/或命令也可以用UWB无线连接通道、蓝牙通道或者WiFi点对点传输通道传输。
本申请实施例提供的图像获取方法,通过在智能头戴设备接收终端发送的图像预览数据之前,完成智能头戴设备与终端的配对,并建立与终端进行数据传输的WiFi点对点传输通道以及与终端进行命令传输的蓝牙通道,实现了图像预览数据与交互命令的分开传输,保障了数据传输之间互不干扰,提升了数据传输的可靠性。
基于上述实施例,步骤110包括:
所述智能头戴设备基于所述WiFi、蓝牙或UWB传输通道,接收终端发送的图像预览数据。
智能头戴设备基于WiFi点对点传输通道,实现与终端之间图像预览数据的传输。智能头戴设备基于WiFi点对点传输通道,接收终端的图像预览数据。
在确定WiFi点对点传输通道后,终端的图像预览数据可以实时基于WiFi点对点传输通道传输到智能头戴设备,以使得智能头戴设备能实时获取终端传输的图像预览数据,从而实现实时显示终端的图像获取应用的图像获取画面。
可选的,智能头戴设备在获取交互命令后,对获取的交互命令进行转化,转化为JSON数据格式的交互命令,并将转化后得到的JSON数据格式的交互命令发送至终端。
在智能头戴设备将JSON数据格式的交互命令发送至终端的过程中,基于建立的蓝牙通道进行传输。避免了与图像预览数据共用传输通道,提升了数据传输的可靠性。
终端在接收到JSON数据格式的交互命令后,将JSON数据格式的交互命令进行解析,得到交互命令,并将得到的交互命令转发给图像获取应用。
本申请实施例提供的图像获取方法,通过建立智能头戴设备与终端进行数据传输的WiFi点对点传输通道,并基于建立的WiFi点对点传输通道,接收终端的图像预览数据,实现了智能头戴设备能实时获取终端传输的图像预览数据,为后续实现实时显示终端的图像获取应用的图像获取画面提供了基础。
基于上述实施例,步骤120包括:
智能头戴设备接收基于所述智能头戴设备的输入模块获取到的用户针对所述图像画面进行拍摄的交互命令,所述输入模块包括触控模块、语音输入模块以及手势识别模块中的至少一种。
用户在佩戴智能头戴设备之后,基于智能头戴设备的显示区域,可以查看智能头戴设备的显示区域显示的图像预览数据对应的图像画面并可以针对查看的图像画面进行交互操作。例如,用户可以针对该图像画面进行拍照或者视频录制。
基于智能头戴设备,获取用户的交互命令。可以基于智能头戴设备的输入模块,获取用户针对图像画面进行拍摄的交互命令。输入模块包括触控模块、语音输入模块以及手势识别模块中的至少一种。
在输入模块为触控模块的情况下,智能头戴设备接收用户基于触控操作生成的触控指令,并将触控指令生成对应的交互命令,从而实现交互命令的获取。
在输入模块为语音输入模块的情况下,智能头戴设备接收用户语音控制命令,并将语音控制命令通过NLP处理后生成对应的交互命令,从而实现交互命令的获取。
在输入模块为手势识别模块的情况下,智能头戴设备接收用户的手势,并基于手势识别模块对用户的手势进行识别,得到用户的手势对于的交互命令,从而实现交互命令的获取。
可选的,交互命令的获取还可以基于更多的交互方式,包括眼睛控制,如眨眼表示确认。也可以包括肌电手环等更加革命性的交互方式。
本申请实施例提供的图像获取方法,通过可以基于智能头戴设备的输入模块,获取针对图像画面进行拍摄的交互命令,实现了多种方式的交互命令的获取,提升了用户与智能头戴设备交互的灵活性。
图2为本申请实施例提供的图像获取方法的流程示意图之二,参照图2,本申请实施例提供的图像获取方法包括以下步骤:
步骤210,基于终端的图像获取应用获取图像预览数据;
步骤220,所述终端将所述图像预览数据发送至智能头戴设备,以使所述智能头戴设备将所述图像预览数据对应的图像画面显示给所述智能头戴设备的用户;
步骤230,所述终端接收所述智能头戴设备发送的所述用户针对所述图像画面进行拍摄的交互命令,并基于所述交互命令进行拍照并获取目标图像。
本申请实施例中的终端包括各种具有无线通信功能的手持设备、车载设备、可穿戴设备、计算设备、或连接到无线调制解调器的其它处理设备,例如,手机、平板、台式笔记本以及可以运行应用程序的智能设备,包括智能汽车的中央控制台等。具体可以指用户设备(user equipment,UE)、接入终端、用户单元、用户站、移动站、移动台、远方站、远程终端、移动设备、用户终端、终端、无线通信设备、用户代理或用户装置。终端设备还可以是卫星电话、蜂窝电话、智能手机、无线数据卡、无线调制解调器、机器类型通信设备、可以是无绳电话、会话启动协议(session initiation protocol,SIP)电话、无线本地环路(wirelesslocal loop,WLL)站、个人数字处理(personal digital assistant,PDA)、具有无线通信功能的手持设备、计算设备或连接到无线调制解调器的其它处理设备、车载设备或可穿戴设备,虚拟现实(virtual reality,VR)终端设备、增强现实(augmented reality,AR)终端设备、工业控制(industrial control)中的无线终端、无人驾驶(self-driving)中的无线终端、远程医疗(remote medical)中的无线终端、智能电网(smart grid)中的无线终端、运输安全(transportation safety)中的无线终端、智慧城市(smart city)中的无线终端、智慧家庭(smart home)中的无线终端、5G网络或者未来通信网络中的终端设备等。移动终端可以由电池供电,还可以附接到车辆或者船舶的电源系统,并由车辆或者船舶的电源系统供电。车辆或者船舶的电源系统还可以为移动终端的电池充电,以延长移动终端通信时间。
需要说明的是,智能头戴设备可以是增强现实AR(Augmented Reality,增强现实)眼镜,也可以是虚拟现实VR(Virtual Reality)眼镜。其中,AR技术是一种将虚拟信息与真实世界巧妙融合的技术,广泛运用了多媒体、三维建模、实时跟踪及注册、智能交互、传感等多种技术手段,将计算机生成的文字、图像、三维模型、音乐、视频等虚拟信息模拟仿真后,应用到真实世界中,两种信息互为补充,从而实现对真实世界的“增强”。智能头戴设备是主要是作为增强现实的显示器,显示增强现实中的画面场景,并与佩戴智能头戴设备的用户进行交互。VR是利用并综合三维图形技术、多媒体技术、仿真技术、显示技术、伺服技术等多种高科技的最新发展成果,借助计算机等设备产生一个逼真的三维视觉、触觉、嗅觉等多种感官体验的虚拟世界,从而使处于虚拟世界中的人产生一种身临其境的感觉。
下面以终端执行本申请实施例提供的图像获取方法为例,详细说明本申请的技术方案。
具体地,在步骤210中,基于终端的图像获取应用获取图像预览数据。
图像预览数据是基于终端的图像获取应用获取的。图像获取应用是终端中涉及获取图像的应用程序。例如,手机中相关的应用程序、手机中图像识别认证相关的应用程序等。基于终端的图像获取应用可以获取图像预览数据,例如,基于在打开手机的拍照应用程序时,可以获取手机拍照应用程序的画面作为图像预览数据。
其中,图像预览数据可以是图片数据,也可以是实时视频流数据。
在步骤220中,终端获取图像预览数据之后,将获取的图像预览数据发送至智能头戴设备。智能头戴设备接收终端发送的图像预览数据,并在智能头戴设备的显示区域显示图像预览数据对应的图像画面。
终端在获取图像预览数据之后,基于预先建立的终端与智能头戴设备的数据传输通道,将获取的图像预览数据发送至智能头戴设备。智能头戴设备接收图像预览数据后,将获取的图像预览数据对应的图像画面实时显示在智能头戴设备的显示区域。
可选的,在智能头戴设备接收图像预览数据后,可以将图像预览数据发送给智能头戴设备中的影像应用,影像应用接收图像预览数据后,对图像预览数据进行解析,得到对应的图像画面,显示在智能头戴设备的显示区域。
其中,图像预览数据可以是图片数据,也可以是实时视频流数据。在图像预览数据为图片数据时,在智能头戴设备接收图像预览数据后,将图片显示在智能头戴设备的显示区域。在图像预览数据为实时视频流数据时,在智能头戴设备接收图像预览数据后,将对应的视频实时显示在智能头戴设备的显示区域。
可以理解的是,在将获取的图像预览数据对应的图像画面实时显示在智能头戴设备的显示区域后,智能头戴设备可以基于获取的图像预览数据。用户在佩戴智能头戴设备时,可以实时查看终端中的图像预览数据,实现了终端中图像获取应用获取的图像与智能头戴设备中显示区域显示画面的同步。
其中,终端将获取的图像预览数据发送给智能头戴设备之前,需要建立终端与智能头戴设备的设备互信。可以将智能头戴设备与终端进行设备配对,完成设备的互信。可以通过蓝牙完成终端与智能头戴设备的设备配对,也可以终端扫描智能头戴设备中的二维码的方式完成配对过程。
在步骤230中,智能头戴设备在显示图像预览数据对应的图像画面时,可以接收针对图像画面进行拍摄的交互命令。其中,交互命令可以是佩戴智能头戴设备的用户发出的。在获取交互命令后,智能头戴设备将交互命令发送至终端。终端在接收智能头戴设备发送的交互命令后,基于接收的交互命令,进行拍照并获取目标图像。
在用户佩戴智能头戴设备,在智能头戴设备的显示区域查看图像预览数据对应的图像画面时,用户可以针对当前图像画面进行交互操作。例如,用户在智能头戴设备的显示区域查看到终端的图像获取应用实时返回的终端设备头拍摄的画面时,用户可以发出拍照的交互命令给智能头戴设备。智能头戴设备将获取的交互命令发送至终端,驱动终端的图像获取应用进行拍照,获取当前时刻拍摄的照片。
交互命令可以是佩戴智能头戴设备的用户发送的。例如,用户基于触控智能头戴设备,将触控指令生成对应的交互命令。用户基于语音控制智能头戴设备,将语音控制命令通过NLP处理后生成对应的交互命令。用户手势控制智能头戴设备,将手势控制通过手势识别处理后生成对应的交互命令。
智能头戴设备在获取针对图像画面进行拍摄的交互命令后,将交互命令发送至终端。交互命令用于终端的图像获取应用从图像预览数据中获取目标图像。其中,获取的目标图像可以是图片也可以是视频。例如,当交互命令为拍照时,终端的图像获取应用基于交互命令进行拍照。当交互命令为获取一段两分钟的视频时,终端的图像获取应用基于交互命令,获取从当前时刻开始的一段两分钟视频。
可以理解的是,基于智能头戴设备协助终端进行拍照的方式,可以有助于终端拍摄高质量、高难度和高创意等场景的图像。例如,在基于终端拍摄全家福的时候,智能头戴设备的近眼现实可以看到全家福中每一个人的姿势和表情,戴智能头戴设备的用户可以指导大家拍摄出最美的全家福照片;A用户戴上智能头戴设备,可以看到用B用户基于终端进行拍摄中的自己,无论远近,都可以很好地调节姿势,并准确在第一时间自己完成拍摄任务;戴上智能头戴设备,在一些特殊场景,举得高高的终端画面可以清晰地呈现在智能头戴设备前面的光学镜片上,引导用户全程拍摄出不被遮挡的图像或者视频。
与此同时,一般智能头戴设备本身配置的摄像头像素较低,或者根本没有配置摄像头,无法仅基于智能头戴设备获取高质量的图像。而终端的图像采集装置一般像素高,采集的图像画面质量搞。基于智能头戴设备协助终端进行拍照的方式,可以基于智能头戴设备协助终端,基于终端的高质量摄像头,获取高质量图像。
其中,在智能头戴设备为AR眼镜时,通过AR眼镜接收终端发送的图像预览数据,并在AR眼镜的显示区域显示图像预览数据对应的图像画面,使得用户可以从AR眼镜的显示区域实时查看终端传输的图像预览数据的图像画面。
在智能头戴设备为VR眼镜时,通过VR眼镜接收终端发送的图像预览数据,并在VR眼镜的显示区域显示图像预览数据对应的图像画面,使得佩戴VR眼镜的用户可以沉浸在VR眼镜的显示区域实时查看终端传输的图像预览数据的图像画面。
本申请实施例提供的图像获取方法,终端将获取的图像预览数据发送给智能头戴设备,并在智能头戴设备的显示区域显示图像预览数据对应的图像画面,实现了在智能头戴设备中对终端中图像获取应用的拍摄画面的实时查看。与此同时,智能头戴设备将针对图像画面进行拍摄的交互命令发送至终端,以使终端进行拍照并获取目标图像,实现了智能头戴设备协助终端拍摄的控制,方便了用户基于终端拍摄高质量、高难度和高创意等场景的图像,提升了用户图像获取的灵活性。
基于上述实施例,步骤220包括:
所述终端向所述智能头戴设备发送配对指令,并基于所述配对指令,与所述智能头戴设备进行配对;
所述终端与所述智能头戴设备配对成功后,所述终端建立与所述智能头戴设备进行数据传输的WiFi点对点传输通道以及与所述智能头戴设备进行命令传输的蓝牙通道。
在智能头戴设备与终端实现数据通信前,需要建立终端与智能头戴设备的连接。
终端发起配对,向智能头戴设备发送配对指令,并基于配对指令,与智能头戴设备完成配对。
在完成终端与智能头戴设备的配对后,建立与智能头戴设备进行数据传输的WiFi点对点传输通道以及与智能头戴设备进行命令传输的蓝牙通道。
可以理解的是,在针对终端与智能头戴设备进行数据通信的过程中,包含图像预览数据以及交互命令两种数据形式的传输。建立终端与智能头戴设备之间进行图像预览数据传输的WiFi点对点传输通道,以及交互命令数据传输的蓝牙通道,实现了图像预览数据与交互命令的分开传输。图像预览数据与交互命令的分开传输,保障了数据传输之间互不干扰,提升了数据传输的可靠性。
本申请实施例提供的图像获取方法,通过在终端向智能头戴设备发送图像预览数据之前,完成终端与智能头戴设备的配对,并建立与智能头戴设备进行数据传输的WiFi点对点传输通道以及与智能头戴设备进行命令传输的蓝牙通道,实现了图像预览数据与交互命令的分开传输,保障了数据传输之间互不干扰,提升了数据传输的可靠性。
基于上述实施例,步骤220包括:
所述终端基于所述WiFi点对点传输通道,将所述图像预览数据发送至智能头戴设备。
终端基于WiFi点对点传输通道,实现与智能头戴设备之间图像预览数据的传输。终端基于WiFi点对点传输通道,将图像预览数据发送至智能头戴设备。
在确定WiFi点对点传输通道后,终端的图像预览数据可以实时基于WiFi点对点传输通道传输到智能头戴设备,以使得智能头戴设备能实时获取终端传输的图像预览数据,从而实现实时显示终端的图像获取应用的图像获取画面。
本申请实施例提供的图像获取方法,通过建立终端与智能头戴设备进行数据传输的WiFi点对点传输通道,并基于建立的WiFi点对点传输通道,接收终端的图像预览数据,实现了智能头戴设备能实时获取终端传输的图像预览数据,为后续实现实时显示终端的图像获取应用的图像获取画面提供了基础。
基于上述实施例,步骤220包括:
所述终端基于所述蓝牙通道,接收所述智能头戴设备发送的所述用户针对所述图像画面进行拍摄的交互命令。
在终端接收智能头戴设备发送的交互命令的过程中,基于建立的蓝牙通道进行传输。避免了与图像预览数据共用传输通道,提升了数据传输的可靠性。
可以理解的是,在针对终端与智能头戴设备进行数据通信的过程中,包含图像预览数据以及交互命令两种数据形式的传输。建立终端与智能头戴设备之间进行图像预览数据传输的WiFi点对点传输通道,以及交互命令数据传输的蓝牙通道,实现了图像预览数据与交互命令的分开传输。图像预览数据与交互命令的分开传输,保障了数据传输之间互不干扰,提升了数据传输的可靠性。
本申请实施例提供的图像获取方法,通过建立终端与智能头戴设备进行通信的蓝牙通道,并基于建立的蓝牙通道,终端接收智能头戴设备传输的交互命令,实现了图像预览数据与交互命令的分开传输,保障了数据传输之间互不干扰,提升了数据传输的可靠性。
下面以一应用本申请实施例提供的图像获取方法的流程示意图图3为例,说明本申请实施例提供的技术方案:
步骤310,建立终端与AR眼镜的设备互信。可以将AR眼镜与终端进行设备配对,完成设备的互信。可以通过蓝牙完成终端与AR眼镜的设备配对,也可以终端扫描AR眼镜中的二维码的方式完成配对过程。
步骤320,用户打开终端的图像获取应用,并选择图像获取应用中的AR拍摄。
步骤330,建立AR眼镜与终端进行数据传输的WiFi点对点传输通道以及进行命令传输的蓝牙通道。
步骤340,终端基于图像获取应用获取图像预览数据,并将图像预览数据发送给终端的AR连接服务。
步骤350,终端的AR连接服务将接收的图像预览数据发送至AR眼镜的AR影像应用,并在AR眼镜的显示区域显示图像预览数据对应的图像画面。
步骤360,从触控命令、语音控制或手势操作中获取交互命令。在用户基于输入模块中的触控子模块获取交互命令情况下,AR眼镜接收用户基于触控操作生成的触控命令,并将触控命令生成对应的交互命令,从而实现交互命令的获取。在用户基于输入模块中的语音输入子模块的情况下,AR眼镜接收用户语音控制命令,并将语音控制命令通过NLP处理后生成对应的交互命令,从而实现交互命令的获取。在用户基于输入模块中的手势识别子模块的情况下,AR眼镜基于手势识别子模块获取用户的手势,并基于手势识别子模块对用户的手势进行识别,得到用户的手势对应的交互命令,从而实现交互命令的获取。
步骤370,在生成交互命令后,AR眼镜将交互命令发送至AR眼镜的AR连接服务。AR连接服务接收交互命令后,传输至终端的AR连接服务。
步骤380,终端的AR连接服务接收交互命令后,传输至终端的图像获取应用,以使图像获取应用基于交互命令进行拍照并获取目标图像。
下面以一应用本申请实施例提供的图像获取方法的装置结构示意图为例,说明本申请提供的技术方案:
如图4所示,该装置可以包括:
终端拍照应用模块410,用于负责发起AR拍摄命令的动作发起,建立数据传输通道。同时,当终端拍照应用模块410接收到AR眼镜端传来的交互指令中的拍摄命令时,完成最终的拍摄任务。
终端连接模块420,用于负责建立和维护数据传输通道,负责将终端拍摄的图像预览数据传输到AR眼镜端,以及将AR眼镜端的交互命令传递给终端的图像获取应用。
AR眼镜端连接模块430,用于负责建立和维护数据传输通道,负责接收来自终端的图像预览数据并上传给上层的AR影像应用;同时,负责将来自AR眼镜的触控命令、语音控制、手势操作等交互命令传递给终端。
AR触控模块440,用于用户点击的触控响应事件集中到交互命令服务中处理。
AR语音模块450,用户的语音控制命令,通过NLP处理后集中到交互命令服务中处理。
AR手势操作模块460,用于用户的手势操作命令,通过手势识别模块处理后集中到交互命令服务中处理。
AR交互命令服务模块470,用于集中处理来自用户的触控、语音模块命令,并进一步传递给AR眼镜端连接模块430处理。
本申请实施例还提供一种终端,所述终端包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述各方法实施例所提供的图像获取方法,例如包括:
增强现实AR眼镜接收终端发送的图像预览数据,并对所述图像预览数据对应的图像画面显示给智能头戴设备的用户,所述图像预览数据是所述终端的图像获取应用获取的;
所述AR眼镜接收用户针对所述图像画面进行拍摄的交互命令,并将所述交互命令发送至所述终端,以使所述终端的图像获取应用基于所述交互命令进行拍照并获取目标图像。
另一方面,本申请实施例还提供一种可穿戴设备,所述可穿戴设备包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述各方法实施例所提供的图像获取方法,例如包括:
增强现实AR眼镜接收终端发送的图像预览数据,并对所述图像预览数据对应的图像画面显示给智能头戴设备的用户,所述图像预览数据是所述终端的图像获取应用获取的;
所述AR眼镜接收用户针对所述图像画面进行拍摄的交互命令,并将所述交互命令发送至所述终端,以使所述终端的图像获取应用基于所述交互命令进行拍照并获取目标图像。
又一方面,本申请实施例还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现上述各方法实施例提供的图像获取方法,例如包括:
增强现实AR眼镜接收终端发送的图像预览数据,并对所述图像预览数据对应的图像画面显示给智能头戴设备的用户,所述图像预览数据是所述终端的图像获取应用获取的;
所述AR眼镜接收用户针对所述图像画面进行拍摄的交互命令,并将所述交互命令发送至所述终端,以使所述终端的图像获取应用基于所述交互命令进行拍照并获取目标图像。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。
Claims (11)
1.一种图像获取方法,其特征在于,所述方法包括:
智能头戴设备接收终端发送的图像预览数据,并把所述图像预览数据对应的图像画面显示给所述智能头戴设备的用户,所述图像预览数据是所述终端的图像获取应用获取的;
所述智能头戴设备接收所述用户针对所述图像画面进行拍摄的交互命令,并将所述交互命令发送至所述终端,以使所述终端的图像获取应用基于所述交互命令进行拍照并获取目标图像。
2.根据权利要求1所述的图像获取方法,其特征在于,所述智能头戴设备接收终端发送的图像预览数据之前,还包括:
智能头戴设备接收终端发送的配对指令,并基于所述配对指令,与所述终端进行配对;
所述智能头戴设备与所述终端配对成功后,所述智能头戴设备建立与所述终端进行数据传输的无线网络通信技术WiFi点对点传输通道以及与所述终端进行命令传输的蓝牙通道。
3.根据权利要求2所述的图像获取方法,其特征在于,所述智能头戴设备接收终端发送的图像预览数据,包括:
所述智能头戴设备基于所述WiFi点对点传输通道,接收终端发送的图像预览数据。
4.根据权利要求1所述的图像获取方法,其特征在于,所述智能头戴设备接收所述用户针对所述图像画面进行拍摄的交互命令,包括:
所述智能头戴设备接收基于所述智能头戴设备的输入模块获取到的所述用户针对所述图像画面进行拍摄的交互命令,所述输入模块包括触控模块、语音输入模块以及手势识别模块中的至少一种。
5.一种图像获取方法,其特征在于,所述方法包括:
基于终端的图像获取应用获取图像预览数据;
所述终端将所述图像预览数据发送至智能头戴设备,以使所述智能头戴设备将所述图像预览数据对应的图像画面显示给所述智能头戴设备的用户;
所述终端接收所述智能头戴设备发送的所述用户针对所述图像画面进行拍摄的交互命令,并基于所述交互命令进行拍照并获取目标图像。
6.根据权利要求5所述的图像获取方法,其特征在于,所述终端将所述图像预览数据发送至智能头戴设备之前,还包括:
所述终端向所述智能头戴设备发送配对指令,并基于所述配对指令,与所述智能头戴设备进行配对;
所述终端与所述智能头戴设备配对成功后,所述终端建立与所述智能头戴设备进行数据传输的WiFi点对点传输通道以及与所述智能头戴设备进行命令传输的蓝牙通道。
7.根据权利要求6所述的图像获取方法,其特征在于,所述终端将所述图像预览数据发送至智能头戴设备,包括:
所述终端基于所述WiFi点对点传输通道,将所述图像预览数据发送至智能头戴设备。
8.根据权利要求6所述的图像获取方法,其特征在于,所述终端接收所述智能头戴设备发送的所述用户针对所述图像画面进行拍摄的交互命令,包括:
所述终端基于所述蓝牙通道,接收所述智能头戴设备发送的所述用户针对所述图像画面进行拍摄的交互命令。
9.一种智能头戴设备,所述智能头戴设备包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至4任一项所述的图像获取方法。
10.一种终端,所述终端包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求5至8任一项所述的图像获取方法。
11.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至4或者实现如权利要求5至8任一项所述的图像获取方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211351868.7A CN115842908A (zh) | 2022-10-31 | 2022-10-31 | 图像获取方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211351868.7A CN115842908A (zh) | 2022-10-31 | 2022-10-31 | 图像获取方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115842908A true CN115842908A (zh) | 2023-03-24 |
Family
ID=85576700
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211351868.7A Pending CN115842908A (zh) | 2022-10-31 | 2022-10-31 | 图像获取方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115842908A (zh) |
-
2022
- 2022-10-31 CN CN202211351868.7A patent/CN115842908A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109952759B (zh) | 用于具有hmd的视频会议的改进的方法和系统 | |
WO2020203999A1 (ja) | コミュニケーション支援システム、コミュニケーション支援方法、および画像制御プログラム | |
EP3777087B1 (en) | Viewing a virtual reality environment on a user device | |
CN110266992A (zh) | 一种基于增强现实的远程视频交互系统以及方法 | |
CN110413108B (zh) | 虚拟画面的处理方法、装置、系统、电子设备及存储介质 | |
WO2013027893A1 (ko) | 통신단말장치의 감정 컨텐츠 서비스 장치 및 방법, 이를 위한 감정 인지 장치 및 방법, 이를 이용한 감정 컨텐츠를 생성하고 정합하는 장치 및 방법 | |
CN108762501B (zh) | Ar显示方法、智能终端、ar设备及系统 | |
EP2731348A2 (en) | Apparatus and method for providing social network service using augmented reality | |
JP4144492B2 (ja) | 画像表示装置 | |
CN112199016B (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
KR102382521B1 (ko) | 아바타를 이용하여 영상 통화를 수행하는 사용자 단말, 통화 중계 서버 및 방법 | |
CN111064919A (zh) | 一种vr远程会议方法及装置 | |
CN112839196B (zh) | 一种实现在线会议的方法、装置以及存储介质 | |
JP2009089324A (ja) | テレビ会議システムおよびプログラム、記録媒体 | |
CN108702482A (zh) | 信息处理设备、信息处理系统、信息处理方法和程序 | |
JP2009246408A (ja) | 対話装置、画像処理モジュール、画像処理方法およびプログラム | |
JP2020064426A (ja) | コミュニケーションシステム及びプログラム | |
US20190066378A1 (en) | Personal communication via immersive computing environment | |
CN107070784A (zh) | 一种基于WebGL和VR技术的3D即时通讯系统 | |
CN115842908A (zh) | 图像获取方法及装置 | |
KR102357262B1 (ko) | 통신 장치 및 그 영상통화 방법 | |
JP2005142765A (ja) | 撮像装置及び方法 | |
CN114374880A (zh) | 联合直播方法、装置、电子设备及计算机可读存储介质 | |
CN117041670B (zh) | 图像处理方法及相关设备 | |
KR20170115390A (ko) | 3차원 가상현실 구현 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information | ||
CB02 | Change of applicant information |
Address after: No. B1337, Chuanggu Initiation Zone, Taizihu Cultural Digital Creative Industry Park, No. 18 Shenlong Avenue, Wuhan Economic and Technological Development Zone, Hubei Province, 430058 Applicant after: Hubei Xingji Meizu Technology Co.,Ltd. Address before: 430014 No. b1337, chuanggu startup area, taizihu cultural Digital Creative Industry Park, No. 18, Shenlong Avenue, Wuhan Economic and Technological Development Zone, Wuhan, Hubei Province Applicant before: Hubei Xingji times Technology Co.,Ltd. |