CN109168007A - 一种标定焦点及其图像传输的方法 - Google Patents

一种标定焦点及其图像传输的方法 Download PDF

Info

Publication number
CN109168007A
CN109168007A CN201811074900.5A CN201811074900A CN109168007A CN 109168007 A CN109168007 A CN 109168007A CN 201811074900 A CN201811074900 A CN 201811074900A CN 109168007 A CN109168007 A CN 109168007A
Authority
CN
China
Prior art keywords
image
variance
focus
fritter
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811074900.5A
Other languages
English (en)
Other versions
CN109168007B (zh
Inventor
孟宪民
李小波
赵德贤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hengxin Oriental Culture Ltd By Share Ltd
Original Assignee
Hengxin Oriental Culture Ltd By Share Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hengxin Oriental Culture Ltd By Share Ltd filed Critical Hengxin Oriental Culture Ltd By Share Ltd
Priority to CN201811074900.5A priority Critical patent/CN109168007B/zh
Publication of CN109168007A publication Critical patent/CN109168007A/zh
Application granted granted Critical
Publication of CN109168007B publication Critical patent/CN109168007B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)

Abstract

本申请公开了一种标定焦点及其图像传输的方法,具体包括以下步骤:读取图像;响应于读取图像后,比较图像相似度并确定相似图像;在相似图像中确定焦点区域。本申请提供的标定焦点及其图像传输的方法能够利用一种简单的方法便能在整个视频流中确定出现的焦点,令焦点区域为高清图像,而背景图像清晰度则较低,在很大程度上降低了图传传输时所带来的网络传输数据量,提高了图像传输的速度。

Description

一种标定焦点及其图像传输的方法
技术领域
本申请涉及图像处理技术领域,尤其涉及一种标定焦点及其图像传输的方法。
背景技术
当今对图像传输过程中对分辨率的要求越来越高,尤其是在VR图像传输领域,因为VR需要双目输出,所以在传输上就有双倍大小图像输出的需求,比如一幅4k的图在普通网络传输上就有(3840*2160*4)字节大小的传输量也就有32M的需求,而传输一段每秒24帧的视频图像更是需要每秒32M*24=759M的大量数据,而VR的双目输出就需要759M*2=1518M每秒的数据。根据目前的可行性方案上如果发送端使用X264编码压缩然后在接收端使用h264解码可以实时传输压缩后的视频流数据,并能有效降低网络传输数据量。但是网路传输领域还是存在传输高清、特高清视频会导致延迟加重的情况和无法即时性观察的可能性,特别是这种4K或者8K的视频传输压力则更大,况且相对应的视频编码领域压缩率越高则清晰度就越低,无法满足又能即时传输又能让客户观看高清视频的可能性,也无法满足VR的双目输出全景高清图的需求。用户体验上在带上VR头盔之后,用户所能观察到的往往是他目前所能见到的有限区域,而视频是一个完整的不限量图像的序列化传输,其他不可见区域的一同传输编解码又带来了巨大的网络带宽传输要求和机器编解码性能的要求。
发明内容
本申请的目的在于提供一种标定焦点及其图像传输的方法,能够在很大程度上降低了图传时所带来的网络传输数据量,提高了图像传输的速度。
为达到上述目的,本申请提供一种标定焦点的方法,具体包括以下步骤:读取图像;响应于读取图像后,比较图像相似度并确定相似图像;在相似图像中确定焦点区域。
如上的,其中,比较图像相似度具体包括如下子步骤:缩放图像,将每一幅图像分割成小块;计算处理后图像的平均值;根据平均值计算处理后图像的方差;比较图像方差,若方差差值较小则图像相似。
如上的,其中,小块的数量为2000到3000之间随机取值。
如上的,其中,平均值的计算方法为分别依次计算图像每行像素点的平均值,平均值对应每行像素点的特征。
如上的,其中,方差的计算法包括根据平均值计算每行像素的方差,对每行像素的方差进行计算得到整个图像的方差。
如上的,其中,确定焦点具体包括以下子步骤:计算每一幅图像中小块的方差;合并小块,计算合并后区域块的方差;比较区域块与小块的方差,确定与区域块近似的小块;确定近似块出现次数最多的区域,并将该区域作为焦点。
如上的,其中,若图像A与图像B相似,在图像A中合并预定数量的区域小块,并计算区域小块的方差。
如上的,其中,将区域小块与图像B每个小块的方差分别进行比较,若小块方差与区域小块方差差值越小,则代表越近似,与区域块相似的小块为近似块。
如上的,其中,在预定数量的图像中,出现近似块次数最多的小块及其周围区域作为焦点。
一种图像传输方法,其特征在于,具体包括以下步骤:将读取的所有图像作为背景图像,并转换为较低分辨率;将确定的焦点所在的区域使用高清分辨率;将焦点所在的区域与背景图像进行融合;将焦点与背景图像融合后的所有图像传输给VR头盔。
本申请实现的有益效果如下:
(1)本申请实施例提供的标定焦点及其图像传输的方法能够利用一种简单的方法便能在整个视频流中确定出现的焦点,令焦点区域为高清图像,而背景图像清晰度则交底,在很大程度上降低了图传传输时所带来的网络传输数据量,提高了图像传输的速度。
(2)本申请实施例提供的标定焦点及其图像传输的方法能够在VR领域实现非可视区域模糊而局部焦点清晰化,很大程度上缩短了图像传输的时间,使得在降低网络传输数据量的同时,也让用户能实时观察到高清视频,能让用户在使用VR头盔时获得更良好的体验感。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请中记载的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的标定焦点的方法流程图;
图2为本申请实施例提供的比较图片相似度的子步骤流程图;
图3为本申请实施例提供的确定焦点的子步骤流程图;
图4为本申请实施例提供的图像传输流程图的方法流程图。
具体实施方式
下面结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本申请的提供了一种标定焦点及其图像传输的方法,能够在很大程度上降低了图传传输时所带来的网络传输数据量,提高了图像传输的速度。
图1为本申请提供的标定焦点的方法流程图,具体包括以下步骤:
步骤S110:读取播放的影片的图像(图片)。
示例地,若计算机正在放映影片,由于影片是由成千上万张图片组成的,因此,读取到了图像也就是读取到了成千上万张图片。
步骤S120:比较图片相似度,确定相似图片。
具体地,对读取的图片分别进行相似度的比较,优选地,根据图片的相似度选取最相似的两幅图,如图2所示,具体包括以下子步骤:
步骤S210:缩放图片,并对图片进行灰度处理。
具体地,将每一幅图片分割成若干小块,对图片进行灰度处理。通常对比图像相似度和颜色关系不是很大,所以处理为灰度图,能够减少后期计算的复杂度,如果有特殊需求则保留图像色彩。
优选地,若干小块的数量为2000到3000之间随机取值。
步骤S220:计算处理后图片的平均值。
具体地,与传统的哈希算法不同,本申请分别依次计算图像每行像素点的平均值,记录每行像素点的平均值。示例性地,每个平均值对应着每行的特征。
步骤S230:计算处理后图片的方差。
具体地,对步骤S220得到每行像素的平均值进行计算方差,得到每行像素的方差,对每行像素的方差进行计算得到整个图片的方差。
示例性地,每行像素的方差能够反映每行像素的波动,记录了图片的主要信息,图片的方差就代表图像的特征值。
步骤S240:比较图片方差。
具体地,比较步骤S230得到的图片方差,若方差越接近则图片越相似。
示例性地,若图片A得到的方差为0.5,图片B的方差为0.7,图片C的方差为1.2,则图片A与B的方差差值为0.2,图片A与图片C方差差值为0.7,图片B与图片C的方差差值为0.5,由此可以得出,图片A与图片B的方差差值最小,图片A与图片B最相似。
方差的大小可以反应图片中数据波动的接近程度,由方差的差值可以得出图片的相似程度,判断最相似的两幅图片。
步骤S130:确定焦点。如图3所示,步骤S130具体包括以下子步骤:
步骤S310:计算每一幅图片中若干小块的方差。
步骤S320:合并小块,计算合并后区域块的方差。
示例性地,在图片A中合并预定数量的小块,并计算区域的小块的方差。
优选地,预定数量包括但不限于2*2、4*4或8*8等区域。
步骤S330:比较区域块与小块的方差,确定与区域块近似的小块。
具体地,若图片B是与图片A最相似的,那么将图片A区域块的方差与图片B的每一个小块的方差进行比较,若两者方差差值小,则代表越近似,则能够确定图片B中哪一个小块与图片A中区域块最近似,将图片B中的小块称为近似块。
步骤S340:确定近似块出现次数最多的区域,并将该区域作为焦点。
示例性地,若图片B被分割成n个小块,其中近似块的数量为m,其中m小于n,分别为近似块1、近似块2…...近似块m,在读取的图片中,连续出现的10幅图片中,在依次比较近似块与其他图片中若干小块的方差,选择近似块1在10幅图中出现的次数为5次,近似块2出现的次数为10次,近似块3—近似块m出现的次数均小于10次,那么,选取近似块2所在的区域为焦点。
判断近似块是否在十幅图中出现的方法可以根据方差的比较或其他现有技术来实现,在一个实施例中,计算十幅图中每个图片的若干小块的方差,十幅图中若干小块的方差分别与图片B的每个近似块进行比较,若方差的差值较小,则认为二者近似。
根据以上方法确定焦点之后,进行非可视区域模糊而拒不焦点清晰化的图像传输,示例性地,接收对象包括但不限于VR头盔。如图4所示,图像传输流程图具体包括以下步骤:
步骤S410:将读取的所有图像作为背景图像,并转换为较低分辨率。
优选地,将整幅图像缩小成1K分辨率的图。
步骤S420:将确定的焦点所在的区域使用高清分辨率。
优选地,将焦点所在的区域使用4K分辨率。
步骤S430:将焦点所在的区域与背景图像进行融合合并。
具体地,背景图像与焦点区域的分辨率不同,那么焦点的边界线则需要与背景图像配合,进行模糊化。
步骤S440:将焦点与背景图像融合后的所有图像传输给VR头盔。
本申请实现的有益效果如下:
(1)本申请实施例提供的标定焦点及其图像传输的方法能够利用一种简单的方法便能在整个视频流中确定出现的焦点,令焦点区域为高清图像,而背景图像清晰度则较低,在很大程度上降低了图传传输时所带来的网络传输数据量,提高了图像传输的速度。
(2)本申请实施例提供的标定焦点及其图像传输的方法能够在VR领域实现非可视区域模糊而局部焦点清晰化,很大程度上缩短了图像传输的时间,使得在降低网络传输数据量的同时,也让用户能实时观察到高清视频,能让用户在使用VR头盔时获得更良好的体验感。
尽管已描述了本申请的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。

Claims (10)

1.一种标定焦点的方法,其特征在于,具体包括以下步骤:
读取图像;
响应于读取所述图像后,比较所述图像相似度并确定相似图像;
在所述相似图像中确定焦点区域。
2.如权利要求1所述的标定焦点的方法,其特征在于,所述比较图像相似度具体包括如下子步骤:
缩放所述图像,将每一幅所述图像分割成小块;
计算处理后所述图像的平均值;
根据所述平均值计算处理后所述图像的方差;
比较所述图像方差,若方差差值较小则图像相似。
3.根据权利要求2所述的标定焦点的方法,其特征在于,所述小块的数量为2000到3000之间随机取值。
4.根据权利要求2所述的标定焦点的方法,其特征在于,所述平均值的计算方法为分别依次计算所述图像每行像素点的平均值,所述平均值对应所述每行像素点的特征。
5.根据权利要求4所述的标定焦点的方法,其特征在于,所述方差的计算法包括根据所述平均值计算所述每行像素的方差,对所述每行像素的所述方差进行计算得到整个所述图像的方差。
6.根据权利要求5所述的标定焦点的方法,其特征在于,所述确定焦点具体包括以下子步骤:
计算每一幅所述图像中所述小块的方差;
合并所述小块,计算合并后区域块的方差;
比较所述区域块与所述小块的方差,确定与所述区域块近似的所述小块;
确定近似块出现次数最多的区域,并将该区域作为焦点。
7.根据权利要求6所述的标定焦点的方法,其特征在于,若图像A与图像B相似,在图像A中合并预定数量的区域小块,并计算区域小块的方差。
8.根据权利要求7所述的标定焦点的方法,其特征在于,将所述区域小块与图像B每个小块的方差分别进行比较,若小块方差与区域小块方差差值越小,则代表越近似,与区域块相似的小块为近似块。
9.根据权利要求8所述的标定焦点的方法,其特征在于,在预定数量的图像中,出现近似块次数最多的小块及近似块周围区域作为焦点。
10.一种图像传输方法,其特征在于,具体包括以下步骤:
将读取的所有图像作为背景图像,并转换为较低分辨率;
将确定的焦点所在的区域使用高清分辨率;
将焦点所在的区域与背景图像进行融合;
将焦点与背景图像融合后的所有图像传输给VR头盔。
CN201811074900.5A 2018-09-14 2018-09-14 一种标定焦点及其图像传输的方法 Active CN109168007B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811074900.5A CN109168007B (zh) 2018-09-14 2018-09-14 一种标定焦点及其图像传输的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811074900.5A CN109168007B (zh) 2018-09-14 2018-09-14 一种标定焦点及其图像传输的方法

Publications (2)

Publication Number Publication Date
CN109168007A true CN109168007A (zh) 2019-01-08
CN109168007B CN109168007B (zh) 2021-11-23

Family

ID=64879480

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811074900.5A Active CN109168007B (zh) 2018-09-14 2018-09-14 一种标定焦点及其图像传输的方法

Country Status (1)

Country Link
CN (1) CN109168007B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103024445A (zh) * 2012-12-13 2013-04-03 北京百度网讯科技有限公司 云端的视频转码方法和云服务器
CN103218609A (zh) * 2013-04-25 2013-07-24 中国科学院自动化研究所 一种基于隐最小二乘回归的多姿态人脸识别方法及其装置
US20160234482A1 (en) * 2015-02-06 2016-08-11 Sony Computer Entertainment Europe Limited Head-mountable display system
CN106157329A (zh) * 2015-04-20 2016-11-23 中兴通讯股份有限公司 一种自适应目标跟踪方法及装置
EP3239929A1 (en) * 2016-04-27 2017-11-01 Canon Kabushiki Kaisha Image processing apparatus, image processing method and program

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103024445A (zh) * 2012-12-13 2013-04-03 北京百度网讯科技有限公司 云端的视频转码方法和云服务器
CN103218609A (zh) * 2013-04-25 2013-07-24 中国科学院自动化研究所 一种基于隐最小二乘回归的多姿态人脸识别方法及其装置
US20160234482A1 (en) * 2015-02-06 2016-08-11 Sony Computer Entertainment Europe Limited Head-mountable display system
CN106157329A (zh) * 2015-04-20 2016-11-23 中兴通讯股份有限公司 一种自适应目标跟踪方法及装置
EP3239929A1 (en) * 2016-04-27 2017-11-01 Canon Kabushiki Kaisha Image processing apparatus, image processing method and program

Also Published As

Publication number Publication date
CN109168007B (zh) 2021-11-23

Similar Documents

Publication Publication Date Title
CN110572579B (zh) 图像处理方法、装置及电子设备
CN105959700B (zh) 视频图像编码的方法、装置、存储介质和终端设备
CN107211193B (zh) 感知体验质量估计驱动的智能适应视频流传输方法和系统
CN110149555B (zh) 视频处理方法和视频接收装置
US20060188014A1 (en) Video coding and adaptation by semantics-driven resolution control for transport and storage
CN110662044A (zh) 一种视频编码方法、视频编码装置及计算机存储介质
WO2022111631A1 (zh) 视频传输方法、服务器、终端和视频传输系统
CN110636294A (zh) 视频解码方法及装置,视频编码方法及装置
CN112954398B (zh) 编码方法、解码方法、装置、存储介质及电子设备
CN106060544B (zh) 一种图像编码方法、相关设备及系统
CN111586412B (zh) 高清视频处理方法、主设备、从设备和芯片系统
CN112584119A (zh) 一种基于强化学习的自适应全景视频传输方法及系统
JP2004534434A (ja) ビデオデータを圧縮および解凍する方法
CN113452996B (zh) 一种视频编码、解码方法及装置
CN110691246B (zh) 视频编码方法、装置及电子设备
Huang et al. A cloud computing based deep compression framework for UHD video delivery
Nur Yilmaz A no reference depth perception assessment metric for 3D video
US20230316464A1 (en) Virtual view drawing method and apparatus, rendering method and apparatus, and decoding method and apparatus, and devices and storage medium
Azzari et al. A modified non-local mean inpainting technique for occlusion filling in depth-image-based rendering
CN109168007A (zh) 一种标定焦点及其图像传输的方法
CN114827617B (zh) 一种基于感知模型的视频编解码方法及系统
CN115665427A (zh) 直播数据的处理方法、装置及电子设备
WO2022141222A1 (zh) 虚拟视点生成、渲染、解码方法及装置、设备、存储介质
CN115314658A (zh) 基于三维显示的视频通信方法及系统
CN114222127A (zh) 一种视频编码方法、视频解码方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant