CN108476305A - 一种图像传输方法、装置及设备 - Google Patents

一种图像传输方法、装置及设备 Download PDF

Info

Publication number
CN108476305A
CN108476305A CN201780004469.4A CN201780004469A CN108476305A CN 108476305 A CN108476305 A CN 108476305A CN 201780004469 A CN201780004469 A CN 201780004469A CN 108476305 A CN108476305 A CN 108476305A
Authority
CN
China
Prior art keywords
image
region
information
topography
interest information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201780004469.4A
Other languages
English (en)
Inventor
吴军
刘怀宇
高修峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SZ DJI Technology Co Ltd
Shenzhen Dajiang Innovations Technology Co Ltd
Original Assignee
Shenzhen Dajiang Innovations Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Dajiang Innovations Technology Co Ltd filed Critical Shenzhen Dajiang Innovations Technology Co Ltd
Publication of CN108476305A publication Critical patent/CN108476305A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64C—AEROPLANES; HELICOPTERS
    • B64C39/00—Aircraft not otherwise provided for
    • B64C39/02—Aircraft not otherwise provided for characterised by special use
    • G06T5/80—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32106—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title separate from the image data, e.g. in a different computer file
    • H04N1/32117—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title separate from the image data, e.g. in a different computer file in a separate transmission or protocol signal prior to or subsequent to the image data transmission, e.g. in digital identification signal [DIS], in non standard setup [NSS] or in non standard field [NSF]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/04—Systems for the transmission of one television signal, i.e. both picture and sound, by a single carrier
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2101/00—UAVs specially adapted for particular uses or applications
    • B64U2101/30—UAVs specially adapted for particular uses or applications for imaging, photography or videography
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10032—Satellite or aerial image; Remote sensing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20092—Interactive image processing based on input by user
    • G06T2207/20104—Interactive definition of region of interest [ROI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/325—Modified version of the image, e.g. part of the image, image reduced in size or resolution, thumbnail or screennail

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Geometry (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)

Abstract

一种图像传输方法、装置及设备，所述方法包括：接收显示设备发送的关于待显示图像的关注区域信息(S201)；根据关注区域信息对采集到的图像进行图像处理，以便从采集到的图像中截取关注区域信息所指示的局部图像(S202)；将局部图像发送给显示设备(S203)。所述方法通过将从采集到的图像中截取的局部图像发送给显示设备，可提高图像传输速率。

Description

一种图像传输方法、装置及设备
本专利文件披露的内容包含受版权保护的材料。该版权为版权所有人所有。版权所有人不反对任何人复制专利与商标局的官方记录和档案中所存在的该专利文件或者该专利披露。
技术领域
本申请涉及图像处理技术领域，尤其涉及一种图像传输方法、装置及设备。
背景技术
相机设备可以通过超广角采集图像，例如相机设备可通过鱼眼镜头达到最大的摄影视角(例如220°或者230°)。相机设备也可以由至少2个镜头集成得到，通过将各个镜头采集到的图像进行合成得到全局图像，进而将合成得到的全景图像发送给显示设备，以便显示设备显示该全景图像。通过上述方式采集到的图像具有较高的分辨率，则对传输带宽的需求较高，例如分辨率为4096×2048的30Fps全景图像，采用H.264编码，至少需要20Mbps的传输带宽。而传统的无线传输系统通过调制解调技术以电磁波为媒介进行数据信息的传递，由于调制解调技术、物理电磁波带宽、通讯距离和环境干扰的限制，无线传输系统在几百到几公里距离内仅能够提供2～4Mbps的带宽，传输带宽较小将导致图像传输延迟、在显示设备上显示的图像卡顿以及显示不流畅等。
发明内容
本申请提供一种图像传输方法、装置及设备，通过将从采集到的图像中截取的局部图像发送给显示设备，可提高图像传输速率。
第一方面提供了一种图像传输方法，相机设备可以接收显示设备发送的关于待显示图像的关注区域信息，根据关注区域信息对采集到的图像进行图像处理，以便从采集到的图像中截取关注区域信息所指示的局部图像，将局部图像发送给显示设备。
在该技术方案中，显示设备可以确定用户当前对待显示图像感兴趣的区域，进而生成关注区域信息，将关注区域信息发送给相机设备，则相机设备可以从采集到的图像中截取关注区域信息所指示的局部图像，并将局部图像发送给显示设备，以便显示设备显示该局部图像。例如，采集到的图像分辨率较高，同时用户需要查看该图像的部分区域，则显示设备可以生成该部分区域的关注区域信息，并将该关注区域信息发送给相机设备，相机设备可以在采集到的图像中截取上述部分区域，将包含上述部分区域的图像作为局部图像，并将该局部图像发送给显示设备，以便显示设备向用户显示该局部图像。相对传统的图像传输方法中将采集到的完整图像发送给显示设备，本发明实施例仅将从采集到的图像中截取的局部图像发送给显示设备，可提高图像传输速率。
在一个可能的设计中，关注区域信息可以包括：需要关注的图像区域的尺寸信息，以及需要关注的图像区域的方位信息。
在一个可能的设计中，方位信息可以包括：通过预置传感器采集得到的方向信息和位置信息。
在一个可能的设计中，方位信息可以是显示设备检测到用户对显示设备中显示屏幕所显示的预置界面进行滑动操作时，根据滑动操作确定得到的。
在一个可能的设计中，相机设备根据关注区域信息对采集到的图像进行图像处理，以便从采集到的图像中截取关注区域信息所指示的局部图像，具体可以为：
根据关注区域信息，从采集到的图像中确定出局部图像坐标信息。
在采集到的图像中截取局部图像坐标信息所指示区域，并将截取到的区域作为局部图像。
在一个可能的设计中，相机设备根据关注区域信息对采集到的图像进行图像处理，以便从采集到的图像中截取关注区域信息所指示的局部图像，具体可以为：
对采集到的图像进行去畸变处理，得到修正后的图像。
根据关注区域信息对修正后的图像进行图像处理，以便从修正后的图像中截取关注区域信息所指示的局部图像。
第二方面提供了一种图像传输装置，包括信息接收模块、局部图像截取模块以及局部图像发送模块，其中：
信息接收模块，用于接收显示设备发送的关于待显示图像的关注区域信息。
局部图像截取模块，用于根据关注区域信息对采集到的图像进行图像处理，以便从采集到的图像中截取关注区域信息所指示的局部图像。
局部图像发送模块，用于将局部图像发送给显示设备。
在一个可能的设计中，第二方面所述的图像传输装置可以用于实施结合第一方面的部分或全部步骤。
第三方面提供了一种存储一个或多个程序的计算机可读存储介质，所述一个或多个程序包括指令，所述指令当被相机设备执行时使所述相机设备执行第一方面以及第一方面的所有可能设计中提供的任意一种方法。
第四方面提供了一种相机设备，其特征在于，相机设备包括处理器、存储器以及网络接口，其中，存储器中存储一组程序代码，且处理器调用存储器中存储的程序代码，用于执行以下操作：
接收显示设备发送的关于待显示图像的关注区域信息。
根据关注区域信息对采集到的图像进行图像处理，以便从采集到的图像中截取关注区域信息所指示的局部图像。
将局部图像发送给显示设备。
在一个可能的设计中，第四方面所述的相机设备可以用于实施结合第一方面的部分或全部步骤。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例中提供的一种图像传输系统的架构示意图；
图2是本发明实施例中提供的一种图像传输方法的流程示意图；
图3是本发明实施例中提供的一种相机设备的结构示意图；
图4是本发明实施例中提供的一种图像传输装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚地描述。
请参见图1，图1是本发明实施例中提供的一种图像传输系统的架构示意图，该图像传输系统可以包括至少一个相机设备以及至少一个显示设备，其中：
相机设备和显示设备之间可以建立无线连接，例如通过调制解调技术以电磁波为媒介进行图像传输，又如通过WI-FI连接进行图像传输，又如通过无线网卡连接到同一无线局域网络(Wireless Local Area Networks，WLAN)中以进行图像传输，等等。示例性的，对于无人机系统，相机设备可以是飞机上搭载的高分辨率全景相机，地面端可以将移动设备或者视频眼镜作为显示设备，显示设备分辨率低于飞机端全景相机分辨率，相机设备可以将局部图像通过无线连接传输到显示设备进行显示，以辅助拍摄和飞行。
相机设备可以配置有摄像装置，具体用于采集图像。例如，该摄像装置可以包括超广角镜头，超广角镜头的视角范围较广，可采集摄影视角为220°或者230°的图像。又如，摄像装置可以由至少两个镜头集成得到，可以将通过各个镜头采集到的单元图像进行拼接处理，得到全景图像，以实现摄影视角为360°的图像采集。
显示设备可以配置有显示屏幕，显示设备可以通过与相机设备之间的无线连接，接收相机设备发送的局部图像，并通过显示屏幕显示该局部图像。
具体实现中，显示设备可以生成关于待显示图像的关注区域信息，将该关注区域信息发送给相机设备，则相机设备可以根据关注区域信息对采集到的图像进行图像处理，以便从采集到的图像中截取关注区域信息所指示的局部图像，将局部图像发送给显示设备。
其中，关注区域信息可以包括：需要关注的图像区域的尺寸信息，以及需要关注的图像区域的方位信息。
可选的，显示设备还可以配置有预置传感器，通过预置传感器可以获取需要关注的图像区域的方位信息，例如方位信息可以包括需要关注的图像区域的方向信息和位置信息。其中预置传感器可以包括惯性测量单元(Inertial measurement unit，IMU)或者重力传感器等。
基于图1所示的图像传输系统的架构示意图，请参见图2，图2是本发明实施例中提供的一种图像传输方法的流程示意图，如图所示本发明实施例中的图像传输方法至少可以包括：
S201，接收显示设备发送的关于待显示图像的关注区域信息。
相机设备可以接收显示设备发送的关于待显示图像的关注区域信息。其中，待显示图像可以为相机设备采集到的图像，例如全景图像或者通过超广角镜头拍摄到的图像等。示例性的，相机设备将图像发送给显示设备之前，可以向显示设备发送区域请求信息，显示设备可以根据该区域请求信息提示用户选择需要在显示设备的显示屏幕中显示的待显示图像的部分区域，基于此，用户可以对显示设备进行相应操作，显示设备检测到用户的操作时可以生成关于待显示图像的关注区域信息，并将该关注区域信息发送给相机设备。示例性的，用户可以对显示设备进行相应操作，显示设备检测到用户的操作时可以确定用户需要在显示设备的显示屏幕中显示的待显示图像的区域，进而生成关于待显示图像的关注区域信息，并将该关注区域信息发送给相机设备。
其中，关注区域信息可以包括：需要关注的图像区域的尺寸信息，以及需要关注的图像区域的方位信息。
具体实现中，显示设备可以按照显示设备的特性和用户体验来确定需要关注的图像区域的尺寸信息。例如，显示设备中显示屏幕的屏幕尺寸为15英寸，基于用户的视觉体验，用户会第一时间浏览显示屏幕的中间位置，则显示设备可以确定需要关注的图像区域的尺寸信息为5英寸。需要说明的是，需要关注的图像区域的尺寸信息为5英寸仅为示例，终端可以设置需要关注的图像区域的尺寸信息为7英寸等，具体不受本发明实施例的限定。又如，虚拟现实(Virtual Reality，VR)眼镜的视觉范围一般为100°，则显示设备可以根据显示屏幕的屏幕尺寸和预置视觉范围确定需要关注的图像区域的尺寸。
可选的，显示设备可以通过预置传感器采集得到需要关注的图像区域的方向信息和位置信息。例如，显示设备可以基于IMU的体感方式，依据人体的姿态来确定需要关注的图像区域的方向信息和位置信息。又如，显示设备可以基于VR眼镜获取用户的眼睛的朝向，将该朝向作为需要关注的图像区域的方向信息；显示设备还可以基于VR眼镜获取用户的眼睛的朝向，将该朝向作为需要关注的图像区域的方向信息，由于VR眼镜的视觉范围一般为100°，显示设备还可以根据该方向信息和视觉范围确定需要关注的图像区域的位置信息。
可选的，方位信息可以是显示设备检测到用户对显示设备中显示屏幕所显示的预置界面进行滑动操作时，根据滑动操作确定得到的。预置界面可以是预先设定的图像界面或者地图等。例如，用户可以通过手指滑动显示屏幕的方式，将需要关注的图像区域显示在显示屏幕中，则显示设备可以根据显示屏幕显示的图像区域，确定待显示图像中需要关注的图像区域的方向信息和位置信息。又如，显示设备在显示屏幕中显示预置界面之后，用户可以在显示屏幕中点击或者框定需要关注的图像区域，则显示设备可以根据用户的操作，确定待显示图像中需要关注的图像区域的方向信息和位置信息。
S202，根据关注区域信息对采集到的图像进行图像处理，以便从采集到的图像中截取关注区域信息所指示的局部图像。
相机设备接收到显示设备发送的关注区域信息之后，可以根据关注区域信息对采集到的图像进行图像处理，以便从采集到的图像中截取关注区域信息所指示的局部图像。
具体实现中，相机设备可以根据需要关注的图像区域的方位信息，在采集到的图像中确定局部图像所属位置，并根据需要关注的图像区域的尺寸信息，在局部图像所属位置确定局部图像的尺寸，进而基于局部图像所属位置以及局部图像的尺寸，对采集到的图像进行截取，将截取得到的区域作为局部图像。
可选的，当相机设备配置的摄像装置由至少两个镜头集成得到时，相机设备可以将各个镜头采集到的单元图像按照全景方式进行拼接，在拼接得到的全景图像中截取关注区域信息指示的局部图像。
可选的，相机设备可以根据关注区域信息，从采集到的图像中确定出局部图像坐标信息，在采集到的图像中截取局部图像坐标信息所指示区域，并将截取到的区域作为局部图像。
可选的，相机设备可以对采集到的图像进行去畸变处理，得到修正后的图像，根据关注区域信息对修正后的图像进行图像处理，以便从修正后的图像中截取关注区域信息所指示的局部图像。
S203，将局部图像发送给显示设备。
相机设备从采集到的图像中截取关注区域信息所指示的局部图像之后，可以将该局部图像发送给显示设备，以便显示设备在该显示设备的显示屏幕中显示该局部图像。
具体实现中，相机设备可以将局部图像进行压缩编码，以利于使用较小的空间和带宽来存储和传输。相机设备可以通过与显示设备之间的无线连接，将压缩编码后的局部图像发送给显示设备，则显示设备可以将压缩编码后的局部图像进行解压缩，并显示解压缩后的局部图像。本发明实施例通过将用户感兴趣区域的图像进行截取和传输，从而达到以有限的无线带宽实现高分辨率图像显示体验的效果。
在图2所示的图像传输方法中，接收显示设备发送的关于待显示图像的关注区域信息，根据关注区域信息对采集到的图像进行图像处理，以便从采集到的图像中截取关注区域信息所指示的局部图像，将局部图像发送给显示设备，可提高图像传输效率。
请参见图3，图3是本发明实施例中提供的一种相机设备的结构示意图。如图3所示，该相机设备可以包括处理器311、存储器312以及一个或者多个网络接口313。
其中，处理器311可以是一个，也可以是多个，处理器311可以是CPU，网络处理器(network processor，NP)等。
其中，网络接口313可以是网络适配器或物理网卡，用于跟任何可连接的网络进行连接，例如互联网(Internet)、企业网等。
其中，存储器312具体可以用于存储图像以及关注区域信息等。存储器312可以包括易失性存储器(volatile memory)，例如随机存取存储器(random-access memory，RAM)；存储器也可以包括非易失性存储器(non-volatile memory)，例如只读存储器(read-onlymemory，ROM)，快闪存储器(flash memory)，硬盘(hard disk drive，HDD)或固态硬盘(solid-state drive，SSD)；存储器还可以包括上述种类的存储器的组合。
处理器311调用存储器312中存储的程序代码，可以执行以下操作：
通过网络接口313接收显示设备发送的关于待显示图像的关注区域信息。
根据所述关注区域信息对采集到的图像进行图像处理，以便从所述采集到的图像中截取所述关注区域信息所指示的局部图像。
通过所述网络接口313将所述局部图像发送给所述显示设备。
可选的，所述关注区域信息可以包括：需要关注的图像区域的尺寸信息，以及需要关注的图像区域的方位信息。
可选的，所述方位信息可以包括：通过预置传感器采集得到的方向信息和位置信息。
可选的，所述方位信息可以是所述显示设备检测到用户对所述显示设备中显示屏幕所显示的预置界面进行滑动操作时，根据所述滑动操作确定得到的。
可选的，所述处理器311根据所述关注区域信息对采集到的图像进行图像处理，以便从所述采集到的图像中截取所述关注区域信息所指示的局部图像，具体用于：
根据所述关注区域信息，从所述采集到的图像中确定出局部图像坐标信息。
在所述采集到的图像中截取所述局部图像坐标信息所指示区域，并将截取到的区域作为所述局部图像。
可选的，所述处理器311根据所述关注区域信息对采集到的图像进行图像处理，以便从所述采集到的图像中截取所述关注区域信息所指示的局部图像，具体用于：
对所述采集到的图像进行去畸变处理，得到修正后的图像。
根据所述关注区域信息对所述修正后的图像进行图像处理，以便从所述修正后的图像中截取所述关注区域信息所指示的局部图像。
具体的，本发明实施例中介绍的相机设备可以用以实施本发明结合图2介绍的图像传输方法实施例中的部分或全部流程。
请参见图4，图4是本发明实施例中提供的一种图像传输装置的结构示意图，其中本发明实施例提供的图像传输装置可以用于相机设备，本发明实施例提供的图像传输装置结合图3中的处理器311，如图所示本发明实施例中的图像传输装置至少可以包括信息接收模块401、局部图像截取模块402以及局部图像发送模块403，其中：
信息接收模块401，用于接收显示设备发送的关于待显示图像的关注区域信息。
局部图像截取模块402，用于根据所述关注区域信息对采集到的图像进行图像处理，以便从所述采集到的图像中截取所述关注区域信息所指示的局部图像。
局部图像发送模块403，用于将所述局部图像发送给所述显示设备。
可选的，所述关注区域信息可以包括：需要关注的图像区域的尺寸信息，以及需要关注的图像区域的方位信息。
可选的，所述方位信息可以包括：通过预置传感器采集得到的方向信息和位置信息。
可选的，所述方位信息可以是所述显示设备检测到用户对所述显示设备中显示屏幕所显示的预置界面进行滑动操作时，根据所述滑动操作确定得到的。
可选的，所述局部图像截取模块402，具体用于：
根据所述关注区域信息，从所述采集到的图像中确定出局部图像坐标信息。
在所述采集到的图像中截取所述局部图像坐标信息所指示区域，并将截取到的区域作为所述局部图像。
可选的，所述局部图像截取模块402，具体用于：
对所述采集到的图像进行去畸变处理，得到修正后的图像。
根据所述关注区域信息对所述修正后的图像进行图像处理，以便从所述修正后的图像中截取所述关注区域信息所指示的局部图像。
具体的，本发明实施例中介绍的图像传输装置可以用以实施本发明结合图2介绍的图像传输方法实施例中的部分或全部流程。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包括于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不是必须针对相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的程序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，"计算机可读介质"可以是任何可以包括、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器，只读存储器，可擦除可编辑只读存储器，光纤装置，以及便携式光盘只读存储器。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。
应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列，现场可编程门阵列等。
此外，在本发明各个实施例中的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。
尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (18)

1.一种图像传输方法，其特征在于，所述方法包括：
接收显示设备发送的关于待显示图像的关注区域信息；
根据所述关注区域信息对采集到的图像进行图像处理，以便从所述采集到的图像中截取所述关注区域信息所指示的局部图像；
将所述局部图像发送给所述显示设备。
2.如权利要求1所述的方法，其特征在于，所述关注区域信息包括：需要关注的图像区域的尺寸信息，以及需要关注的图像区域的方位信息。
3.如权利要求2所述的方法，其特征在于，所述方位信息包括：通过预置传感器采集得到的方向信息和位置信息。
4.如权利要求2所述的方法，其特征在于，所述方位信息是所述显示设备检测到用户对所述显示设备中显示屏幕所显示的预置界面进行滑动操作时，根据所述滑动操作确定得到的。
5.如权利要求1所述的方法，其特征在于，所述根据所述关注区域信息对采集到的图像进行图像处理，以便从所述采集到的图像中截取所述关注区域信息所指示的局部图像，包括：
根据所述关注区域信息，从所述采集到的图像中确定出局部图像坐标信息；
在所述采集到的图像中截取所述局部图像坐标信息所指示区域，并将截取到的区域作为所述局部图像。
6.如权利要求1所述的方法，其特征在于，所述根据所述关注区域信息对采集到的图像进行图像处理，以便从所述采集到的图像中截取所述关注区域信息所指示的局部图像，包括：
对所述采集到的图像进行去畸变处理，得到修正后的图像；
根据所述关注区域信息对所述修正后的图像进行图像处理，以便从所述修正后的图像中截取所述关注区域信息所指示的局部图像。
7.一种图像传输装置，其特征在于，所述装置包括：
信息接收模块，用于接收显示设备发送的关于待显示图像的关注区域信息；
局部图像截取模块，用于根据所述关注区域信息对采集到的图像进行图像处理，以便从所述采集到的图像中截取所述关注区域信息所指示的局部图像；
局部图像发送模块，用于将所述局部图像发送给所述显示设备。
8.如权利要求7所述的装置，其特征在于，所述关注区域信息包括：需要关注的图像区域的尺寸信息，以及需要关注的图像区域的方位信息。
9.如权利要求8所述的装置，其特征在于，所述方位信息包括：通过预置传感器采集得到的方向信息和位置信息。
10.如权利要求8所述的装置，其特征在于，所述方位信息是所述显示设备检测到用户对所述显示设备中显示屏幕所显示的预置界面进行滑动操作时，根据所述滑动操作确定得到的。
11.如权利要求7所述的装置，其特征在于，所述局部图像截取模块，具体用于：
根据所述关注区域信息，从所述采集到的图像中确定出局部图像坐标信息；
在所述采集到的图像中截取所述局部图像坐标信息所指示区域，并将截取到的区域作为所述局部图像。
12.如权利要求7所述的装置，其特征在于，所述局部图像截取模块，具体用于：
对所述采集到的图像进行去畸变处理，得到修正后的图像；
根据所述关注区域信息对所述修正后的图像进行图像处理，以便从所述修正后的图像中截取所述关注区域信息所指示的局部图像。
13.一种相机设备，其特征在于，包括处理器、存储器以及网络接口，所述存储器中存储一组程序代码，且所述处理器调用所述存储器中存储的程序代码，用于执行以下操作：
通过所述网络接口接收显示设备发送的关于待显示图像的关注区域信息；
根据所述关注区域信息对采集到的图像进行图像处理，以便从所述采集到的图像中截取所述关注区域信息所指示的局部图像；
通过所述网络接口将所述局部图像发送给所述显示设备。
14.如权利要求13所述的相机设备，其特征在于，所述关注区域信息包括：需要关注的图像区域的尺寸信息，以及需要关注的图像区域的方位信息。
15.如权利要求14所述的相机设备，其特征在于，所述方位信息包括：通过预置传感器采集得到的方向信息和位置信息。
16.如权利要求14所述的相机设备，其特征在于，所述方位信息是所述显示设备检测到用户对所述显示设备中显示屏幕所显示的预置界面进行滑动操作时，根据所述滑动操作确定得到的。
17.如权利要求13所述的相机设备，其特征在于，所述处理器根据所述关注区域信息对采集到的图像进行图像处理，以便从所述采集到的图像中截取所述关注区域信息所指示的局部图像，具体用于：
根据所述关注区域信息，从所述采集到的图像中确定出局部图像坐标信息；
在所述采集到的图像中截取所述局部图像坐标信息所指示区域，并将截取到的区域作为所述局部图像。
18.如权利要求13所述的相机设备，其特征在于，所述处理器根据所述关注区域信息对采集到的图像进行图像处理，以便从所述采集到的图像中截取所述关注区域信息所指示的局部图像，具体用于：
对所述采集到的图像进行去畸变处理，得到修正后的图像；
根据所述关注区域信息对所述修正后的图像进行图像处理，以便从所述修正后的图像中截取所述关注区域信息所指示的局部图像。
CN201780004469.4A 2017-03-21 2017-03-21 一种图像传输方法、装置及设备 Pending CN108476305A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2017/077463 WO2018170725A1 (zh) 2017-03-21 2017-03-21 一种图像传输方法、装置及设备

Publications (1)

Publication Number Publication Date
CN108476305A true CN108476305A (zh) 2018-08-31

Family

ID=63266511

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780004469.4A Pending CN108476305A (zh) 2017-03-21 2017-03-21 一种图像传输方法、装置及设备

Country Status (3)

Country Link
US (1) US20200007794A1 (zh)
CN (1) CN108476305A (zh)
WO (1) WO2018170725A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112399052A (zh) * 2020-11-06 2021-02-23 深圳慧源创新科技有限公司 画面切换方法、装置及电子设备
CN113242386A (zh) * 2021-05-26 2021-08-10 北京京东方光电科技有限公司 图像传输控制装置、显示装置及图像传输控制方法
CN113906727A (zh) * 2020-08-13 2022-01-07 深圳市大疆创新科技有限公司 全景回放的方法、装置和系统、拍摄设备、可移动平台
WO2022033311A1 (zh) * 2020-08-11 2022-02-17 北京芯海视界三维科技有限公司 图像处理装置及虚拟现实设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100955026B1 (ko) * 2009-12-23 2010-04-27 (주)미드텍스 감시영상의 선택적 화면분할 표시장치 및 그 방법
CN102572217A (zh) * 2011-12-29 2012-07-11 华为技术有限公司 基于视觉关注的多媒体处理方法及装置
CN105915937A (zh) * 2016-05-10 2016-08-31 上海乐相科技有限公司 一种全景视频播放方法及设备

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020021353A1 (en) * 2000-06-09 2002-02-21 Denies Mark Streaming panoramic video
US6882755B2 (en) * 2001-10-19 2005-04-19 Hewlett-Packard Development Company, L.P. Image transmission for low bandwidth with region of interest
JP2017022529A (ja) * 2015-07-09 2017-01-26 キヤノン株式会社 通信システム、通信装置、通信方法、及び、プログラム
CN105323552B (zh) * 2015-10-26 2019-03-12 北京时代拓灵科技有限公司 一种全景视频播放方法及系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100955026B1 (ko) * 2009-12-23 2010-04-27 (주)미드텍스 감시영상의 선택적 화면분할 표시장치 및 그 방법
CN102572217A (zh) * 2011-12-29 2012-07-11 华为技术有限公司 基于视觉关注的多媒体处理方法及装置
CN105915937A (zh) * 2016-05-10 2016-08-31 上海乐相科技有限公司 一种全景视频播放方法及设备

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022033311A1 (zh) * 2020-08-11 2022-02-17 北京芯海视界三维科技有限公司 图像处理装置及虚拟现实设备
CN113906727A (zh) * 2020-08-13 2022-01-07 深圳市大疆创新科技有限公司 全景回放的方法、装置和系统、拍摄设备、可移动平台
CN112399052A (zh) * 2020-11-06 2021-02-23 深圳慧源创新科技有限公司 画面切换方法、装置及电子设备
CN113242386A (zh) * 2021-05-26 2021-08-10 北京京东方光电科技有限公司 图像传输控制装置、显示装置及图像传输控制方法

Also Published As

Publication number Publication date
US20200007794A1 (en) 2020-01-02
WO2018170725A1 (zh) 2018-09-27

Similar Documents

Publication Publication Date Title
CN108476305A (zh) 一种图像传输方法、装置及设备
US11092787B2 (en) Optical lens assembly and electronic apparatus having the same
CN107169924B (zh) 三维全景图像的建立方法和系统
AU2020256776B2 (en) Method and device for observing virtual article in virtual environment, and readable storage medium
CN105916060A (zh) 数据传输的方法、装置及系统
JP2015176560A (ja) 情報処理方法、情報処理装置、およびプログラム
EP3511755A1 (en) Fisheye lens assembly, and electronic device comprising same
CN107464265A (zh) 一种双目全景相机的参数标定系统及方法
CN110769156A (zh) 图片显示方法及电子设备
CN105007399B (zh) 双摄像头移动终端
CN107071279A (zh) 一种全景图像画面稳定的方法及系统
US20180047140A1 (en) Imaging device, image processing device, image processing method, program, and recording medium
JP2001136514A (ja) カメラ制御システム及びその制御方法及び記憶媒体
JP6350695B2 (ja) 装置、方法、およびプログラム
US8451346B2 (en) Optically projected mosaic rendering
CN107592520A (zh) Ar设备的成像装置及成像方法
CN111292424A (zh) 多视点360度vr内容提供系统
CN104062758B (zh) 图像显示的方法和显示设备
CN112532886B (zh) 全景拍摄方法、装置及计算机可读存储介质
TW201543890A (zh) 擷取多重子影像以產生影像的相機
WO2017159014A1 (ja) 画像処理装置、画像処理方法及び画像処理システム
JP6128185B2 (ja) 装置、方法、およびプログラム
CN108476291A (zh) 图像生成方法、图像生成装置和机器可读存储介质
CN104239877A (zh) 图像处理的方法和图像采集设备
WO2018186168A1 (ja) 映像生成装置、映像生成方法および映像生成プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180831