CN115297312A - 一种传输图像透明度信息的方法 - Google Patents
一种传输图像透明度信息的方法 Download PDFInfo
- Publication number
- CN115297312A CN115297312A CN202210934477.1A CN202210934477A CN115297312A CN 115297312 A CN115297312 A CN 115297312A CN 202210934477 A CN202210934477 A CN 202210934477A CN 115297312 A CN115297312 A CN 115297312A
- Authority
- CN
- China
- Prior art keywords
- eye data
- image
- data
- transparency information
- rgb
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 18
- 239000000284 extract Substances 0.000 claims abstract description 8
- 230000005540 biological transmission Effects 0.000 description 5
- 230000002159 abnormal effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000007547 defect Effects 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/139—Format conversion, e.g. of frame-rate or size
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/194—Transmission of image signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
本发明公开一种传输图像透明度信息的方法，包括以下步骤：云端服务器将云端AR图像中的颜色数据RGB、透明度信息A分别取出，并生成左眼数据、右眼数据；通过编码器同时对所述左眼数据、右眼数据进行编码，编码完成后，将其发送给客户端；客户端在接收到编码的左眼数据、右眼数据后，对其进行解码，并将左眼数据内的RGB取出，将其作为客户端AR图像的RGB的值，并将右眼数据中RGB数值为所述云端AR图像的透明度信息A的值的这一个数值取出，并将其作为客户端AR图像的透明度信息A。本发明中不存在因编码而导致云端AR图像的透明度信息A的丢失的问题，保证客户端AR图像的完整性，从而保证其可进行正常显示，提高用户的体验感。
Description
技术领域
本发明涉及AR数据传输领域，尤其涉及一种传输图像透明度信息的方法。
背景技术
AR数据传输时需要很大的带宽，同时对于实时性要求较高，因此传输前需要对数据进行编码，而普通的编解码器(如H264编解码器)一般只能对颜色数据RGB进行编码，而AR数据通常具有透明度信息A、颜色数据RGB，因此经过编解码器编码后，会导致AR数据的透明度信息A的丢失，从而造成接收端解码出的数据没有透明度信息A，造成图像显示异常。而若取出透明度信息A单独进行传输，由于网络等因素，无法保证颜色数据RGB和透明度信息A同时到达接收端，无法保证AR数据的实时接收。
因此，现有技术存在缺陷，需要改进。
发明内容
本发明的目的是克服现有技术的不足，提供一种传输图像透明度信息的方法，解决现有技术中，AR数据传输时，由于编码而导致AR数据的透明度信息A的丢失，最终导致接收端在接收AR数据后，进行图像显示时，图像显示异常的问题；同时解决无法保证AR数据的颜色数据RGB和透明度信息A同时到达接收端的问题。
本发明的技术方案如下：一种传输图像透明度信息的方法，包括以下步骤：
S1：云端服务器获取带有透明度信息A的RGBA格式的云端AR图像。
S2：将所述云端AR图像中的颜色数据RGB、透明度信息A分别取出，并生成左眼数据、右眼数据。
所述左眼数据、右眼数据均为RGBA格式；所述左眼数据的RGB的值为所述云端AR图像的颜色数据RGB对应的RGB的值，所述左眼数据中的透明度信息A的值为X，且0≤X≤255；所述右眼数据中的RGB数据的三个数值中至少有一个数值的值与所述云端AR图像的透明度信息A的值相等，所述右眼数据中的透明度信息A的值为Y，且0≤Y≤255。
S3：通过编码器同时对所述左眼数据、右眼数据进行编码，编码完成后，将编码后的左眼数据、右眼数据发送给客户端。
S4：客户端在接收到编码的左眼数据、右眼数据后，对其进行解码，并将所述左眼数据内的RGB取出，将其作为客户端AR图像的RGB，并将右眼数据的RGB中数值与所述云端AR图像的透明度信息A的值相等的这一个数值取出，并将其作为客户端AR图像的透明度信息A。
进一步地，所述左眼数据中的透明度信息A的值X为0；所述右眼数据中的透明度信息A的值Y为255。
进一步地，所述右眼数据中的RGB数据的三个数值的值均与所述云端AR图像的透明度信息A的值相等。
进一步地，所述编码器为H264编码器或H265或VP8或VP9。
进一步地，在步骤S4中，根据右眼数据中RGB数据的三个数值取值时数值的值与所述云端AR图像的透明度信息A的值相等的这个数值在右眼数据中的位置，客户端在解码左眼数据、右眼数据后，将右眼数据中对应位置的数值取出，并将其作为客户端AR图像的透明度信息A。
进一步地，在步骤S4中，将右眼数据中RGB数值中G值对应的这一个数值取出，并将其作为客户端AR图像的透明度信息A。
采用上述方案，本发明提供一种传输图像透明度信息的方法，具有以下有益效果：
1、通过将云端AR图像的透明度信息A的值作为右眼数据的RGB数据中的至少一个数据的值，使得在通过编码器进行编码时，其不会被丢失，直接将左眼数据内的RGB数据取出作为解码后的客户端AR图像的RGB数据，而由于右眼数据中的RGB数据中存在与原云端AR图像的透明度信息A的数值相等的数据，直接将其取出作为客户端AR图像的透明度信息A即可，使得最终得到的客户端AR图像的RGBA的数据与云端AR图像的RGBA的数据完全一致，不存在因编码而导致云端AR图像的透明度信息A的丢失的问题，保证客户端收到的客户端AR图像的完整性，从而保证客户端AR图像的正常显示，提高用户的体验感；
2、左眼数据、右眼数据作为一个整体同时进行编码、传输、解码，可保证客户端接收到左眼数据、右眼数据时间的一致性，从而实现云端AR图像中的颜色数据RGB、透明度信息A的同时接受。
具体实施方式
以下结合具体实施例，对本发明进行详细说明。
本发明提供一种传输图像透明度信息的方法，包括以下步骤：
S1：云端服务器获取带有透明度信息A的RGBA格式的云端AR图像。
S2：将所述云端AR图像中的颜色数据RGB、透明度信息A分别取出，并生成左眼数据、右眼数据。右眼数据、左眼数据即为两张AR图像；需要说明的是，针对每一个像素点，其中RGB为颜色数据RGB，其占3个字节，RGBA中的A即为透明度信息A，其占1个字节，因此，一个像素占4个字节，如果云端AR图像的宽度为W，高度为H，那么原始图像占用的字节为：W*H*4；由于要将图像分成左眼数据和右眼数据，所形成的两张AR图像的高度和宽带一样，因此发送时的目标图像占用的字节为原始图像的2倍：(W*H*4)*2。此外，在本实施例中，云端AR图像的颜色数据RGB的值为：R＝50、G＝60、B＝70，云端AR图像的透明度信息A的值为128。
具体地，在本实施例中，所述左眼数据、右眼数据均为RGBA格式；所述左眼数据的RGB的值为所述云端AR图像的颜色数据RGB对应的RGB的值，所述左眼数据中的透明度信息A的值为X，且0≤X≤255，在本实施例中X＝0，因此，左眼数据的R、G、B、A的值分别为：50、60、70、0；所述右眼数据中的RGB数据的三个数值中至少有一个数值的值与所述云端AR图像的透明度信息A的值相等，所述右眼数据中的透明度信息A的值为Y，且0≤Y≤255；在本实施例中，右眼数据中的RGB数据的三个值均等于云端AR图像的透明度信息A的值，右眼数据中的透明度信息A的值Y为255，因此，右眼数据中的R、G、B、A值分别为128、128、128、255。
S3：通过编码器同时对所述左眼数据、右眼数据进行编码，编码完成后，将编码后的左眼数据、右眼数据发送给客户端。在本实施例中，编码器为H264编码器。
S4：客户端在接收到编码的左眼数据、右眼数据后，对其进行解码，并将所述左眼数据内的RGB取出，将其作为客户端AR图像的RGB，并将右眼数据的RGB中数值与所述云端AR图像的透明度信息A的值相等的这一个数值取出，并将其作为客户端AR图像的透明度信息A，因此，最终得到的客户端AR图像的R、G、B、A的值分别为50、60、70、128，其刚好与云端AR图像的RGBA数据相同；所述客户端AR图像为RGBA格式。由于采用编码器进行编码时，透明度信息A的值会丢失，因此，客户端在接收到编码后的左眼数据、右眼数据进行解码后，事实上只能获取到左眼数据、右眼数据内的颜色数据RGB对应的数据。此时由于右眼数据内的RGB数值中至少有一个数值是与云端AR图像的透明度信息A的值相等，因此可保证其不会丢失。
本发明中的一种传输图像透明度信息的方法，通过云端服务器将云端AR图像内的颜色数据RGB、透明度信息A拆分，并生成一个左眼数据、一个右眼数据，分别将云端AR图像内的颜色数据RGB、透明度信息A放入至左眼数据、右眼数据内，云端AR图像的透明度信息A的值是与右眼数据中的RGB数据中的至少一个数据相等的，即其位于右眼数据中RGB数据所位于的位置，因此，保证云端AR图像的透明度信息A的值位于右眼数据的RGB数据中，因此在通过编码器进行编码时，其不会被丢失，客户端在接收到编码的左眼数据、右眼数据后，对其进行解码，由于左眼数据内的RGB数据即为原云端AR图像的RGB数据，因此，直接将其取出作为解码后的客户端AR图像的RGB数据即可，而由于右眼数据中的RGB数据中存在原云端AR图像的透明度信息A的数据(数值相等)，直接将其取出作为客户端AR图像的透明度信息A即可，因此，最终得到的客户端AR图像的RGBA的数据与云端AR图像的RGBA的数据一致，不存在因编码而导致云端AR图像的透明度信息A的丢失的问题，保证客户端收到的客户端AR图像的完整性，从而保证客户端在接收AR图像后，AR图像的正常显示，提高用户的体验感；另一方面，由于左眼数据、右眼数据是作为一个整体同时进行编码、传输、解码的，因此，不存在客户端接收颜色数据RGB和透明度信息A时间不一致的问题，实现左眼数据、右眼数据的实时接收。
具体地，在本实施例中，在步骤S4中，根据右眼数据中RGB数据的三个数值取值时数值的值与所述云端AR图像的透明度信息A的值相等的这个数值在右眼数据中的位置，客户端在解码左眼数据、右眼数据后，将右眼数据中对应位置的数值取出，并将其作为客户端AR图像的透明度信息A。云端服务器在进行右眼数据的RGBA的数据设置时，会准确的知道右眼数据中RBG中的哪一个(或多个)数值的值是与云端AR图像的透明度信息A的值相等的，因此，客户端在从右眼数据中取出该云端AR图像的透明度信息A时会知道其在右眼数据中的准确位置，从而保证取值的正确性。
具体地，在本实施例中，在步骤S4中，将右眼数据中RGB数值中G值对应的这一个数值取出，并将其作为客户端AR图像的透明度信息A。作为优选的实施方式，可将右眼数据中的RGB数值中的三个数据的值均设置为与云端AR图像的透明度信息A的值相等，因此，此时客户端在从右眼数据中取值时，可取右眼数据中的RGB数据中的任意一个的数值，可保证取值更加方便，同时精度更高，由于右眼数据中RGB数值中G值位于中间位置，因此，在编码、传输、解码时，其发生变化的可能性最小，因此，取值其值作为客户端AR图像的透明度信息A的精度是最高的，从而保证客户端AR图像显示的精度更高。
综上所述，本发明提供一种传输图像透明度信息的方法，具有以下有益效果：
1、通过将云端AR图像的透明度信息A的值作为右眼数据的RGB数据中的至少一个数据的值，使得在通过编码器进行编码时，其不会被丢失，直接将左眼数据内的RGB数据取出作为解码后的客户端AR图像的RGB数据，而由于右眼数据中的RGB数据中存在与原云端AR图像的透明度信息A的数值相等的数据，直接将其取出作为客户端AR图像的透明度信息A即可，使得最终得到的客户端AR图像的RGBA的数据与云端AR图像的RGBA的数据完全一致，不存在因编码而导致云端AR图像的透明度信息A的丢失的问题，保证客户端收到的客户端AR图像的完整性，从而保证客户端AR图像的正常显示，提高用户的体验感；
2、左眼数据、右眼数据作为一个整体同时进行编码、传输、解码，可保证客户端接收到左眼数据、右眼数据时间的一致性，从而实现云端AR图像中的颜色数据RGB、透明度信息A的同时接受。
以上仅为本发明的较佳实施例而已，并不用于限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。
Claims (6)
1.一种传输图像透明度信息的方法，其特征在于，包括以下步骤：
S1：云端服务器获取带有透明度信息的RGBA格式的云端AR图像；
S2：将所述云端AR图像中的颜色数据RGB、透明度信息A分别取出，并生成左眼数据、右眼数据；
所述左眼数据、右眼数据均为RGBA格式；所述左眼数据的RGB的值与所述云端AR图像的颜色数据RGB的值相等，所述左眼数据中的透明度信息A的值为X，且0≤X≤255；所述右眼数据中的RGB数据的三个数值中至少有一个数值的值与所述云端AR图像的透明度信息A的值相等，所述右眼数据中的透明度信息A的值为Y，且0≤Y≤255；
S3：通过编码器同时对所述左眼数据、右眼数据进行编码，编码完成后，将编码后的左眼数据、右眼数据发送给客户端；
S4：客户端在接收到编码的左眼数据、右眼数据后，对其进行解码，并将所述左眼数据内的RGB取出，将其作为客户端AR图像的RGB，并将右眼数据的RGB中数值与所述云端AR图像的透明度信息A的值相等的这一个数值取出，并将其作为客户端AR图像的透明度信息A；
所述客户端AR图像为RGBA格式。
2.根据权利要求1所述的一种传输图像透明度信息的方法，其特征在于，所述左眼数据中的透明度信息A的值X为0；所述右眼数据中的透明度信息A的值Y为255。
3.根据权利要求1所述的一种传输图像透明度信息的方法，其特征在于，所述右眼数据中的RGB数据的三个数值的值均与所述云端AR图像的透明度信息A的值相等。
4.根据权利要求1所述的一种传输图像透明度信息的方法，其特征在于，所述编码器为H264编码器或H265或VP8或VP9。
5.根据权利要求1所述的一种传输图像透明度信息的方法，其特征在于，在步骤S4中，根据右眼数据中RGB数据的三个数值取值时数值的值与所述云端AR图像的透明度信息A的值相等的这个数值在右眼数据中的位置，客户端在解码左眼数据、右眼数据后，将右眼数据中对应位置的数值取出，并将其作为客户端AR图像的透明度信息A。
6.根据权利要求3所述的一种传输图像透明度信息的方法，其特征在于，在步骤S4中，将右眼数据中RGB数值中G值对应的这一个数值取出，并将其作为客户端AR图像的透明度信息A。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210934477.1A CN115297312A (zh) | 2022-08-04 | 2022-08-04 | 一种传输图像透明度信息的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210934477.1A CN115297312A (zh) | 2022-08-04 | 2022-08-04 | 一种传输图像透明度信息的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115297312A true CN115297312A (zh) | 2022-11-04 |
Family
ID=83826810
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210934477.1A Pending CN115297312A (zh) | 2022-08-04 | 2022-08-04 | 一种传输图像透明度信息的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115297312A (zh) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20090284584A1 (en) * | 2006-04-07 | 2009-11-19 | Sharp Kabushiki Kaisha | Image processing device |
| US20160029030A1 (en) * | 2013-04-05 | 2016-01-28 | Marta MARK | Transmitting and receiving a composite image |
| CN107071515A (zh) * | 2017-04-08 | 2017-08-18 | 腾讯科技（深圳）有限公司 | 一种图片文件处理方法及系统 |
| CN108881920A (zh) * | 2017-05-11 | 2018-11-23 | 腾讯科技（深圳）有限公司 | 一种传输视频信息的方法、终端及服务器 |
| CN109348226A (zh) * | 2017-04-08 | 2019-02-15 | 腾讯科技（深圳）有限公司 | 一种图片文件处理方法及智能终端 |
| US20200365114A1 (en) * | 2019-05-13 | 2020-11-19 | Adobe Inc. | Controlling An Augmented Reality Display With Transparency Control Using Multiple Sets Of Video Buffers |
| CN113938572A (zh) * | 2021-09-29 | 2022-01-14 | 广州虎牙科技有限公司 | 图片传输方法、显示方法、装置、电子设备及存储介质 |
-
2022
- 2022-08-04 CN CN202210934477.1A patent/CN115297312A/zh active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20090284584A1 (en) * | 2006-04-07 | 2009-11-19 | Sharp Kabushiki Kaisha | Image processing device |
| US20160029030A1 (en) * | 2013-04-05 | 2016-01-28 | Marta MARK | Transmitting and receiving a composite image |
| CN107071515A (zh) * | 2017-04-08 | 2017-08-18 | 腾讯科技（深圳）有限公司 | 一种图片文件处理方法及系统 |
| CN109348226A (zh) * | 2017-04-08 | 2019-02-15 | 腾讯科技（深圳）有限公司 | 一种图片文件处理方法及智能终端 |
| CN108881920A (zh) * | 2017-05-11 | 2018-11-23 | 腾讯科技（深圳）有限公司 | 一种传输视频信息的方法、终端及服务器 |
| US20200365114A1 (en) * | 2019-05-13 | 2020-11-19 | Adobe Inc. | Controlling An Augmented Reality Display With Transparency Control Using Multiple Sets Of Video Buffers |
| CN113938572A (zh) * | 2021-09-29 | 2022-01-14 | 广州虎牙科技有限公司 | 图片传输方法、显示方法、装置、电子设备及存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| 何兴恒;陈慧;: "一种非限制行程的行程码图像压缩方法" * |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11252428B2 (en) | Method and device for encoding and decoding parameter sets at slice level | |
| CN109218734B (zh) | 用于提供媒体内容的方法和装置 | |
| CN102204257B (zh) | 低延迟视频编码器 | |
| US10462484B2 (en) | Video encoding method and apparatus with syntax element signaling of employed projection layout and associated video decoding method and apparatus | |
| EP2661090A1 (en) | Bearing method, and processing method, device and system of auxiliary video supplemental information | |
| CN104253996B (zh) | 视频数据的发送、接收方法及其装置以及传输系统 | |
| WO2020135357A1 (zh) | 数据压缩方法及装置、数据编码/解码方法及装置 | |
| Pece et al. | Adapting standard video codecs for depth streaming. | |
| US20240098310A1 (en) | Encoding method, real-time communication method, apparatus, device, and storage medium | |
| CN104754358A (zh) | 码流的生成和处理方法、装置及系统 | |
| WO2021057477A1 (zh) | 视频编解码方法和相关装置 | |
| JP2006505180A (ja) | 高確実性ビデオ伝送を行うデータパーティショニングのための符号化ビデオパケット構造体、デマルチプレクサ、マージャ、方法及び装置 | |
| CN106791829B (zh) | 虚拟参考帧的建立方法及设备 | |
| CN107396082A (zh) | 一种图像数据的处理方法和装置 | |
| US10477246B2 (en) | Method for encoding streams of video data based on groups of pictures (GOP) | |
| CN115297312A (zh) | 一种传输图像透明度信息的方法 | |
| CN110430479B (zh) | 一种视频矩阵的组播组地址分配方法和视频矩阵 | |
| EP4380155A1 (en) | Encoding and decoding method, encoder, decoder, and electronic device | |
| CN111770347A (zh) | 一种视频传输方法及系统 | |
| WO2023071469A1 (zh) | 视频处理方法、电子设备及存储介质 | |
| CN103733615A (zh) | 用于端到端编码的视频传输系统的按需内部更新 | |
| CN115103228A (zh) | 视频流传输方法、装置、电子设备、存储介质及产品 | |
| CN116781907A (zh) | 编解码方法及电子设备 | |
| CN110266911B (zh) | 一种可实现视频矩阵同步切换的解码方法、设备及可读存储介质 | |
| US12034944B2 (en) | Video encoding method and apparatus, video decoding method and apparatus, electronic device and readable storage medium |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20221104 |
|
| RJ01 | Rejection of invention patent application after publication |