CN108733202A - 一种基于眼球追踪的数据压缩方法及其装置 - Google Patents
一种基于眼球追踪的数据压缩方法及其装置 Download PDFInfo
- Publication number
- CN108733202A CN108733202A CN201710259036.5A CN201710259036A CN108733202A CN 108733202 A CN108733202 A CN 108733202A CN 201710259036 A CN201710259036 A CN 201710259036A CN 108733202 A CN108733202 A CN 108733202A
- Authority
- CN
- China
- Prior art keywords
- user
- compression
- eyeball tracking
- interested region
- regions
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 210000005252 bulbus oculi Anatomy 0.000 title claims abstract description 49
- 238000000034 method Methods 0.000 title claims abstract description 40
- 238000013144 data compression Methods 0.000 title claims abstract description 25
- 238000007906 compression Methods 0.000 claims abstract description 42
- 230000006835 compression Effects 0.000 claims abstract description 42
- 230000000007 visual effect Effects 0.000 abstract description 5
- 210000001508 eye Anatomy 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 239000011521 glass Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/04—Context-preserving transformations, e.g. by using an importance map
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明公开了一种基于眼球追踪的数据压缩方法及其装置，对用户进行眼球追踪，确定用户感兴趣的区域；对用户感兴趣的区域和其它区域采用不同的压缩方法进行压缩，使得压缩后用户感兴趣的区域的图像质量好于其它区域的图像质量。通过本发明的一种基于眼球追踪的数据压缩方法及其装置，可以大大提高图像或视频数据压缩效率同时不影响人眼的视觉体验。
Description
【技术领域】
本发明涉及图像处理领域，尤其涉及一种基于眼球追踪的数据压缩方法及其装置。
【背景技术】
随着计算机技术的不断发展，VR(虚拟现实)技术有了越来越多地应用。而且VR视频及图像的分辨率也越来越高，使得在数据传输的时候要对VR图像进行压缩，提高传输效率。
使用传统的图像压缩方法对VR图像进行压缩，可以得到一定的效果，但是也会使VR图像的质量下降，影响用户的视觉体验。如果通过对用户进行眼球追踪，确定用户感兴趣的区域，对该区域和其它区域采用不同的压缩方法进行压缩，则可以大大提高用户的视觉体验，使用户几乎感觉不到图像质量的下降。
【发明内容】
本发明要解决的技术问题是：如何在不影响用户视觉体验的基础上提高图像或视频数据压缩效率。
为解决上述的技术问题，本发明提供了一种基于眼球追踪的数据压缩方法及其装置，通过对用户进行眼球追踪，确定用户感兴趣的区域，对用户感兴趣的区域采用高质量的压缩方法，对其它区域采用低质量的压缩方法进行压缩，使得压缩后用户感兴趣的区域的图像质量好于其它区域的图像质量。
本发明是通过以下技术方案来实现的：
提供了一种基于眼球追踪的数据压缩方法，包括以下步骤：对用户进行眼球追踪，确定用户感兴趣的区域；对用户感兴趣的区域和其它区域采用不同的压缩方法进行压缩，使得压缩后用户感兴趣的区域的图像质量好于其它区域的图像质量。
如上所述的基于眼球追踪的数据压缩方法，所述的对用户进行眼球追踪，确定用户感兴趣的区域，包括：确定用户注视点坐标；确定用户感兴趣视场范围；根据用户注视点坐标和用户感兴趣视场范围得到用户感兴趣的区域。
如上所述的基于眼球追踪的数据压缩方法，所述的用户感兴趣视场范围是根据眼球追踪来确定。
如上所述的基于眼球追踪的数据压缩方法，对于所述用户感兴趣的区域采用压缩比为A1的第一压缩方法进行压缩，对于所述其它区域采用压缩比为A2的第二压缩方法进行压缩，且A1小于A2。
本发明还提供了一种基于眼球追踪的数据压缩装置，包括眼球追踪模块和数据压缩模块；所述的眼球追踪模块用于对用户进行眼球追踪，确定用户感兴趣的区域；所述的数据压缩模块用于对用户感兴趣的区域和其它区域采用不同的压缩方法进行压缩，使得压缩后用户感兴趣的区域的图像质量好于其它区域的图像质量。
综上所述，本发明提供了一种基于眼球追踪的数据压缩方法及其装置，对用户进行眼球追踪，确定用户感兴趣的区域；对用户感兴趣的区域和其它区域采用不同的压缩方法进行压缩，使得压缩后用户感兴趣的区域的图像质量好于其它区域的图像质量。通过本发明的一种基于眼球追踪的数据压缩方法及其装置，可以大大提高VR图像的图像压缩效率同时不影响人眼的视觉体验。
【附图说明】
图1是一种基于眼球追踪的数据压缩方法的流程图。
图2是确定用户感兴趣的区域的流程图。
图3是用户感兴趣区域的示意图。
图4是一种基于眼球追踪的数据压缩装置的结构框图。
【具体实施方式】
为进一步阐述本发明达成预定目的所采取的技术手段及功效，以下结合附图及实施例，对本发明的具体实施方式，详细说明如下。
图1为本发明一种基于眼球追踪的数据压缩方法的方法流程图。本发明实施例提供的方法包含如下步骤：
步骤101：对用户进行眼球追踪，确定用户感兴趣的区域。
在本发明实施例可以应用在电子设备上，例如VR眼镜等设备。该电子设备上应具备眼球追踪模块用于确定用户感兴趣的区域。
步骤102：对用户感兴趣的区域和其它区域采用不同的压缩方法进行压缩，使得压缩后用户感兴趣的区域的图像质量好于其它区域的图像质量。
在本发明实施例中，将完整的图像分为用户感兴趣的区域和其它区域，所述用户感兴趣的区域是用户想要的，需要提供高质量图像给用户的，因此在进行数据压缩时对该区域图像不压缩或采用低压缩比的压缩方法进行压缩。而所述其它区域是用户不太关心的，因此用户也不太关心这部分区域的图像质量，所以在需要压缩图像数据的时候，可以对该区域进行高压缩比的压缩，以满足整体图像的数据压缩需要。
如图2所示为确定用户感兴趣的区域的流程图。步骤101还包括如下步骤：
步骤201：确定用户注视点坐标。
在本发明实施例中，眼球追踪模块首先确定用户注视点在图像上的坐标。如图3所示为用户感兴趣区域的示意图。在图3中，用户感兴趣区域303位于图像301内部，用户注视点302在图像301上的坐标为(x，y)。眼球追踪模块通过获取用户眼球的信息来确定用户注视点302的坐标(x，y)。
步骤202：确定用户感兴趣视场范围。
在眼球追踪模块通过获取用户眼球的信息来确定用户注视点302的坐标(x，y)后，眼球追踪模块还需要确定用户感兴趣视场范围，才能确定用户感兴趣区域303。在本发明实施例中，用户感兴趣区域303为一个正方形的区域，当然，用户感兴趣区域也可以为矩形、圆形或椭圆形的区域。在本实施例中，用户感兴趣视场范围即从用户注视点302到用户感兴趣区域303的正方形边缘的距离为一预先设定值R。
用户感兴趣视场范围也可以根据对用户的眼球追踪来确定。当用户注视点302在一定的时间段内并非都落在用户感兴趣区域303内，则扩大用户感兴趣视场范围；当用户注视点302在一定的时间段内都落在用户感兴趣区域303内时，则缩小用户感兴趣视场范围，直到初始设定值R。
步骤203：根据用户注视点坐标和用户感兴趣视场范围得到用户感兴趣的区域。
有了用户注视点302在图像301上的坐标为(x，y)和用户感兴趣视场范围R，眼球追踪模块就可以确定用户感兴趣区域303。在本实施例中，图像301的大小为(X，Y)，如果x≥R且y≥R，则用户感兴趣区域303为正方形，用户注视点302位于用户感兴趣区域303的中心，用户注视点302的坐标为(x，y)，用户注视点302到用户感兴趣区域303的正方形每一边的距离为R。如果x＜R和/或y＜R，则用户感兴趣区域303只到图像301的边缘，不能超出图像301的范围。那么，用户感兴趣区域303的坐标范围横坐标为[max(0，x-R)，min(X，x+R)]，纵坐标为[max(0，y-R)，min(Y，y+R)]。
如图4所示为本发明一种基于眼球追踪的数据压缩装置的结构框图。本发明的一种基于眼球追踪的数据压缩装置包括眼球追踪模块402和数据压缩模块401。眼球追踪模块402用于对用户进行眼球追踪，确定用户感兴趣的区域303；数据压缩模块401用于对用户感兴趣的区域303和其它区域采用不同的压缩方法进行压缩，使得压缩后用户感兴趣的区域303的图像质量好于其它区域的图像质量。
在本发明中，对于用户感兴趣的区域303可以采用压缩比为A1的第一压缩方法进行压缩，对于所述其它区域采用压缩比为A2的第二压缩方法进行压缩，且A1小于A2。这样就可以保证压缩后用户感兴趣的区域303的图像质量好于其它区域的图像质量。甚至，还可以使A1＝1，即对于用户感兴趣的区域303不进行压缩，只对其它区域进行压缩，从而保证用户感兴趣的区域303的图像质量不下降，最大限度的保证用户的视觉体验。
本发明的一种在上述所举的实施例仅用以说明本发明的原理，而非用以限制本发明，凡此种种依据本发明或现有技术的等效变换是本领域的技术人员所显而易见地得知，理应在本发明所公开保护的范畴之内。
Claims (5)
1.一种基于眼球追踪的数据压缩方法，其特征在于，所述的方法包括以下步骤：
对用户进行眼球追踪，确定用户感兴趣的区域；
对用户感兴趣的区域和其它区域采用不同的压缩方法进行压缩，使得压缩后用户感兴趣的区域的图像质量好于其它区域的图像质量。
2.根据权利要求1所述的方法，其特征在于：所述的对用户进行眼球追踪，确定用户感兴趣的区域，包括：
确定用户注视点坐标；
确定用户感兴趣视场范围；
根据用户注视点坐标和用户感兴趣视场范围得到用户感兴趣的区域。
3.根据权利要求2所述的方法，其特征在于：所述的用户感兴趣视场范围是根据眼球追踪来确定。
4.根据权利要求1所述的方法，其特征在于：对于所述用户感兴趣的区域采用压缩比为A1的第一压缩方法进行压缩，对于所述其它区域采用压缩比为A2的第二压缩方法进行压缩，且A1小于A2。
5.一种基于眼球追踪的数据压缩装置，其特征在于，包括眼球追踪模块和数据压缩模块；
所述的眼球追踪模块用于对用户进行眼球追踪，确定用户感兴趣的区域；
所述的数据压缩模块用于对用户感兴趣的区域和其它区域采用不同的压缩方法进行压缩，使得压缩后用户感兴趣的区域的图像质量好于其它区域的图像质量。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710259036.5A CN108733202A (zh) | 2017-04-18 | 2017-04-18 | 一种基于眼球追踪的数据压缩方法及其装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710259036.5A CN108733202A (zh) | 2017-04-18 | 2017-04-18 | 一种基于眼球追踪的数据压缩方法及其装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN108733202A true CN108733202A (zh) | 2018-11-02 |
Family
ID=63925393
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710259036.5A Pending CN108733202A (zh) | 2017-04-18 | 2017-04-18 | 一种基于眼球追踪的数据压缩方法及其装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108733202A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111202663A (zh) * | 2019-12-31 | 2020-05-29 | 浙江工业大学 | 一种基于vr技术的视觉训练学习系统 |
| WO2022021991A1 (zh) * | 2020-07-31 | 2022-02-03 | 京东方科技集团股份有限公司 | 图像压缩方法及装置、图像显示方法及装置和介质 |
-
2017
- 2017-04-18 CN CN201710259036.5A patent/CN108733202A/zh active Pending
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111202663A (zh) * | 2019-12-31 | 2020-05-29 | 浙江工业大学 | 一种基于vr技术的视觉训练学习系统 |
| WO2022021991A1 (zh) * | 2020-07-31 | 2022-02-03 | 京东方科技集团股份有限公司 | 图像压缩方法及装置、图像显示方法及装置和介质 |
| US11917167B2 (en) | 2020-07-31 | 2024-02-27 | Beijing Boe Optoelectronics Technology Co., Ltd. | Image compression method and apparatus, image display method and apparatus, and medium |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10599914B2 (en) | Method and apparatus for human face image processing | |
| EP3739431B1 (en) | Method for determining point of gaze, contrast adjustment method and device, virtual reality apparatus, and storage medium | |
| EP3916627A1 (en) | Living body detection method based on facial recognition, and electronic device and storage medium | |
| CN110610453B (zh) | 一种图像处理方法、装置及计算机可读存储介质 | |
| DE112016006081T5 (de) | Automatische Echtzeit-Fahrzeugkamerakalibrierung | |
| EP3839879A1 (en) | Facial image processing method and apparatus, image device, and storage medium | |
| EP4002290A1 (en) | Three-dimensional facial model generation method and apparatus, computer device and storage medium | |
| US11373337B2 (en) | Image processing method of virtual reality and apparatus thereof | |
| CN103260081A (zh) | 一种视频图像缩放处理方法及装置 | |
| US20160142673A1 (en) | System for enabling eye contact in electronic images | |
| CN108682030B (zh) | 脸皮替换方法、装置及计算机设备 | |
| CN113221767B (zh) | 训练活体人脸识别模型、识别活体人脸的方法及相关装置 | |
| CN110619334A (zh) | 基于深度学习的人像分割方法、架构及相关装置 | |
| CN108733202A (zh) | 一种基于眼球追踪的数据压缩方法及其装置 | |
| CN105931204B (zh) | 图片还原方法及系统 | |
| CN108111747A (zh) | 一种图像处理方法、终端设备及计算机可读介质 | |
| CN113409468B (zh) | 一种图像处理方法、装置、电子设备及存储介质 | |
| CN111652795A (zh) | 脸型的调整、直播方法、装置、电子设备和存储介质 | |
| CN112507766B (zh) | 人脸图像提取方法、存储介质及终端设备 | |
| CN113110733A (zh) | 一种基于远程双工的虚拟现场交互方法及系统 | |
| CN112511890A (zh) | 视频图像处理方法、装置及电子设备 | |
| CN103581602B (zh) | 自动更新联系人头像的方法和系统 | |
| CN110047126B (zh) | 渲染图像的方法、装置、电子设备和计算机可读存储介质 | |
| CN109785418B (zh) | 基于视觉感知模型的注视点渲染优化算法 | |
| CN110415168B (zh) | 人脸局部缩放处理方法、存储介质、电子设备及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| DD01 | Delivery of document by public notice | ||
| DD01 | Delivery of document by public notice |
Addressee: BEIJING CHUANSONG TECHNOLOGY Co.,Ltd. Document name: Notification of before Expiration of Request of Examination as to Substance |
|
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20181102 |