KR20210020103A - 데이터 처리 방법 및 장치, 전자 기기 및 저장 매체 - Google Patents
데이터 처리 방법 및 장치, 전자 기기 및 저장 매체 Download PDFInfo
- Publication number
- KR20210020103A KR20210020103A KR1020217000946A KR20217000946A KR20210020103A KR 20210020103 A KR20210020103 A KR 20210020103A KR 1020217000946 A KR1020217000946 A KR 1020217000946A KR 20217000946 A KR20217000946 A KR 20217000946A KR 20210020103 A KR20210020103 A KR 20210020103A
- Authority
- KR
- South Korea
- Prior art keywords
- pixel
- data
- encoding
- video data
- encoded data
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/15—Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/156—Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/164—Feedback from the receiver or from the transmission channel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Processing Or Creating Images (AREA)
Abstract
데이터 처리 방법 및 장치, 전자 기기 및 저장 매체를 제공한다. 상기 데이터 처리 방법은, 단말에 적용되고, 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 인코딩을 수행하여, 픽셀 인코딩된 데이터를 획득하는 단계; 및 모바일 에지 컴퓨팅(MEC) 서버에 상기 픽셀 인코딩된 데이터 - 상기 픽셀 인코딩된 데이터는 상기 MEC 서버가 상기 3차원 비디오 데이터를 복원하기 위한 것임 - 를 송신하는 단계를 포함하며; 여기서, 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행하기 전의 데이터양은 제1 데이터양이고; 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행한 후의 데이터양은 제2 데이터양이며; 상기 제1 데이터양은 상기 제2 데이터양보다 크다.
Description
본 발명은 정보 기술 분야에 관한 것이지만 정보 기술 분야에 한정되지 않으며, 특히 데이터 처리 방법 및 장치(METHODS AND DEVICES FOR DATA PROCESSING), 전자 기기(ELECTRONIC DEVICE) 및 저장 매체(STORAGE MEDIUM)에 관한 것이다.
하나의 이미지는 일반적으로 어느 하나의 픽셀의 컬러, 그레이 스케일, 명도 등 다양한 정보를 하나씩 나타내기 위해 픽셀 값을 사용해야 한다. 일반적으로, 동일한 정보량, 이미지 및/또는 비디오를 전송하는데 소비되는 대역폭은 비교적 크다. 이와 같이, 일부 이미지 전송 시나리오에서, 연속적으로 이미지를 전송하면, 대량의 대역폭을 소모하거나 및/또는 전송 지연이 많은 문제가 발생할 수 있다.
본 발명의 실시예는 데이터 처리 방법 및 장치, 전자 기기 및 저장 매체를 제공한다.
단말에 적용되는 데이터 처리 방법으로서,
3차원 비디오 데이터의 픽셀 값에 따라 픽셀 인코딩을 수행하여, 픽셀 인코딩된 데이터를 획득하는 단계; 및
모바일 에지 컴퓨팅(MEC) 서버에 상기 픽셀 인코딩된 데이터 - 상기 픽셀 인코딩된 데이터는 상기 MEC 서버가 상기 3차원 비디오 데이터를 복원하기 위한 것임 - 를 송신하는 단계를 포함하며;
여기서, 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행하기 전의 데이터양은 제1 데이터양이고; 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행한 후의 데이터양은 제2 데이터양이며; 상기 제1 데이터양은 상기 제2 데이터양보다 크다.
상기 방안에 기반하여, 상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 인코딩을 수행하여, 픽셀 인코딩된 데이터를 획득하는 단계는,
상기 3차원 비디오 데이터의 컬러 픽셀 값에 따라 컬러 인코딩을 수행하여, 컬러 인코딩된 데이터를 획득하는 단계;
및,
상기 3차원 비디오 데이터의 깊이 값 픽셀 값에 따라 깊이 값 인코딩을 수행하여, 깊이 값 인코딩된 데이터를 획득하는 단계 중 적어도 하나를 포함한다.
상기 방안에 기반하여, 상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 인코딩을 수행하여, 픽셀 인코딩된 데이터를 획득하는 단계는,
상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 코드 매핑 관계를 조회하여, 상기 픽셀 인코딩된 데이터를 결정하는 단계를 포함한다.
상기 방안에 기반하여, 상기 데이터 처리 방법은,
기설정된 정보에 따라 픽셀 인코딩 방식 - 상기 기설정된 정보는 네트워크 전송 조건 정보, 상기 단말의 부하 조건 정보 및 상기 MEC 서버의 부하 조건 정보 중 적어도 하나를 포함함 - 을 선택하는 단계를 더 포함하고;
상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 인코딩을 수행하여, 픽셀 인코딩된 데이터를 획득하는 단계는,
선택된 상기 픽셀 인코딩 방식에 따라, 상기 픽셀 값에 대해 픽셀 인코딩을 수행하여 상기 픽셀 인코딩된 데이터를 획득하는 단계를 포함한다.
상기 방안에 기반하여, 상기 선택된 픽셀 인코딩 방식에 따라, 상기 픽셀 값에 대해 픽셀 인코딩을 수행하여 상기 픽셀 인코딩된 데이터를 획득하는 단계는,
단일 픽셀 인코딩 방식에 따라, 상기 3차원 비디오 데이터의 단일 픽셀의 픽셀 값에 대해 단일 픽셀 인코딩을 수행하여, 제1 유형의 인코딩된 데이터 - 상기 제1 유형의 인코딩된 데이터가 차지하는 비트 수는 상기 픽셀 값이 차지하는 비트 수보다 작음 -를 획득하는 단계; 및
통합 픽셀 인코딩 방식에 따라, 상기 3차원 비디오 데이터의 N*M 개의 픽셀의 픽셀 값에 대해 통합 픽셀 인코딩을 수행하여, 제2 유형 픽셀 인코딩 - 상기 N 및 상기 M은 모두 양의 정수임 -를 획득하는 단계 중 적어도 하나를 포함한다.
상기 방안에 기반하여, 상기 N*M 개의 픽셀은 인접하게 분포된다.
또는, 상기 N*M 개의 픽셀은 기설정된 간격 방식에 따라 간격을 두고 분포된다.
상기 방안에 기반하여, 상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 코드 매핑 관계를 조회하여, 상기 픽셀 인코딩된 데이터를 결정하는 단계는,
상기 3차원 비디오 데이터의 픽셀 값에 따라 상기 픽셀 코드 매핑 관계를 조회하는 단계; 및
상기 픽셀 값이 상기 픽셀 코드 매핑 관계에 있으면, 상기 픽셀 값에 대응되는 픽셀 인코딩 값에 따라 상기 픽셀 인코딩된 데이터를 결정하는 단계를 포함한다.
상기 방안에 기반하여, 상기 데이터 처리 방법은,
상기 픽셀 값이 상기 픽셀 코드 매핑 관계에 있지 않으면, 상기 픽셀 값에 따라 상기 픽셀 코드 매핑 관계를 업데이트하여, 업데이트된 픽셀 코드 매핑 관계 또는 상기 픽셀 코드 매핑 관계에서 업데이트된 부분을 상기 MEC 서버에 송신하는 단계를 더 포함한다.
상기 방안에 기반하여, 상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 인코딩을 수행하여, 픽셀 인코딩된 데이터를 획득하는 단계는,
기설정된 정렬 방법에 따라 상기 3차원 비디오 데이터의 픽셀 값을 정렬하여, 상기 3차원 비디오 데이터의 픽셀 값 일련번호를 획득하는 단계를 포함한다.
모바일 에지 컴퓨팅(MEC) 서버에 적용되는 데이터 처리 방법으로서,
단말에 의해 송신된 픽셀 인코딩된 데이터를 수신하는 단계; 및
상기 픽셀 인코딩된 데이터에 따라 3차원 비디오 데이터의 픽셀 값을 복원하는 단계 - 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행하기 전의 데이터양은 제1 데이터양이고; 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행한 후의 데이터양은 제2 데이터양이며; 상기 제1 데이터양은 상기 제2 데이터양보다 큼 - 를 포함한다.
상기 방안에 기반하여, 상기 픽셀 인코딩된 데이터에 따라 3차원 비디오 데이터의 픽셀 값을 복원하는 단계는,
상기 픽셀 인코딩된 데이터의 컬러 인코딩된 데이터에 따라, 상기 3차원 비디오 데이터의 컬러 픽셀 값을 복원하는 단계; 및
상기 픽셀 인코딩된 데이터의 깊이 값 인코딩된 데이터에 따라, 상기 3차원 비디오 데이터의 깊이 값 픽셀 값을 복원하는 단계 중 적어도 하나를 포함한다.
상기 방안에 기반하여, 상기 데이터 처리 방법은,
상기 픽셀 인코딩된 데이터의 픽셀 인코딩 방식을 결정하는 단계를 더 포함하고;
상기 픽셀 인코딩된 데이터에 따라 3차원 비디오 데이터를 복원하는 단계는,
상기 픽셀 인코딩 방식에 따라, 상기 픽셀 인코딩된 데이터에 대해 픽셀 디코딩을 수행하여 상기 3차원 비디오 데이터의 픽셀 값을 획득하는 단계를 포함한다.
상기 방안에 기반하여, 상기 픽셀 인코딩을 결정하는 픽셀 인코딩 방식은,
상기 3차원 비디오 데이터가 포함하는 픽셀 개수를 결정하고, 상기 픽셀 인코딩된 데이터의 데이터 개수를 결정하는 단계; 상기 픽셀 개수 및 상기 데이터 개수에 따라, 상기 픽셀 인코딩 방식을 결정하는 단계; 및
상기 단말과 픽셀 인코딩 파라미터를 인터랙션 하는 단계 - 상기 픽셀 인코딩 파라미터는 적어도 픽셀 인코딩 방식을 포함함 - 중 적어도 하나를 포함한다.
상기 방안에 기반하여, 상기 픽셀 인코딩 방식에 따라, 상기 픽셀 인코딩된 데이터에 대해 픽셀 디코딩을 수행하여 상기 3차원 비디오 데이터의 픽셀 값을 획득하는 단계는,
단일 픽셀 인코딩 방식에 따라, 단일 픽셀의 상기 픽셀 인코딩된 데이터에 대해 디코딩을 수행하여 3차원 비디오 데이터 픽셀 값을 복원하는 단계; 및
통합 픽셀 인코딩 방식에 따라, N*M 개의 픽셀의 상기 픽셀 인코딩된 데이터에 대해 디코딩을 수행하여 상기 3차원 비디오 데이터 픽셀 값을 복원하는 단계 중 적어도 하나를 포함한다.
상기 방안에 기반하여, 상기 픽셀 인코딩된 데이터에 따라 3차원 비디오 데이터의 픽셀 값을 복원하는 단계는,
상기 픽셀 인코딩된 데이터에 따라 픽셀 코드 매핑 관계를 조회하여, 상기 픽셀 인코딩된 데이터와 대응되는 픽셀 값을 획득하는 단계를 포함한다.
상기 방안에 기반하여, 상기 데이터 처리 방법은,
상기 픽셀 인코딩된 데이터에 따라 3차원 비디오 데이터의 픽셀 값을 복원하기 전에, 상기 단말에 의해 송신된 업데이트된 픽셀 코드 매핑 관계 또는 상기 픽셀 코드 매핑 관계에서의 업데이트된 부분을 수신하는 단계를 더 포함한다.
단말에 적용되는 데이터 처리 장치로서,
3차원 비디오 데이터의 픽셀 값에 따라 픽셀 인코딩을 수행하여, 픽셀 인코딩된 데이터를 획득하기 위한 인코딩 모듈; 및
모바일 에지 컴퓨팅(MEC) 서버에 상기 픽셀 인코딩된 데이터 - 상기 픽셀 인코딩된 데이터는 상기 MEC 서버가 상기 3차원 비디오 데이터를 복원하기 위한 것임 - 를 송신하기 위한 송신 모듈을 포함하고;
여기서, 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행하기 전의 데이터양은 제1 데이터양이고; 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행한 후의 데이터양은 제2 데이터양이며; 상기 제1 데이터양은 상기 제2 데이터양보다 크다.
상기 방안에 기반하여, 상기 인코딩 모듈은,
상기 3차원 비디오 데이터의 컬러 픽셀 값에 따라 컬러 인코딩을 수행하여, 컬러 인코딩된 데이터를 획득하기 위한 컬러 인코딩 서브 모듈;
및,
상기 3차원 비디오 데이터의 깊이 값 픽셀 값에 따라 깊이 값 인코딩을 수행하여, 깊이 값 인코딩된 데이터를 획득하기 위한 깊이 값 인코딩 서브 모듈 중 적어도 하나를 포함한다.
상기 방안에 기반하여, 상기 인코딩 모듈은 구체적으로 상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 코드 매핑 관계를 조회하여, 상기 픽셀 인코딩된 데이터를 결정하기 위한 것이다.
상기 방안에 기반하여, 상기 데이터 처리 장치는,
기설정된 정보에 따라 픽셀 인코딩 방식 - 상기 기설정된 정보는 네트워크 전송 조건 정보, 상기 단말의 부하 조건 정보 및 상기 MEC 서버의 부하 조건 정보 중 적어도 하나를 포함함 - 을 선택하기 위한 선택 모듈을 더 포함하고;
상기 인코딩 모듈은 구체적으로 픽셀 인코딩 방식에 따라, 상기 픽셀 값에 대해 픽셀 인코딩을 수행하여 상기 픽셀 인코딩된 데이터를 획득하기 위한 것이다.
상기 방안에 기반하여, 상기 인코딩 모듈은, 단일 픽셀 인코딩 방식에 따라, 상기 3차원 비디오 데이터의 단일 픽셀의 픽셀 값에 대해 단일 픽셀 인코딩을 수행하여, 제1 유형의 인코딩된 데이터 - 상기 제1 유형의 인코딩된 데이터가 차지하는 비트 수는 상기 픽셀 값이 차지하는 비트 수보다 작음 - 를 획득하는 단계; 및 통합 픽셀 인코딩 방식에 따라, 상기 3차원 비디오 데이터의 N*M 개의 픽셀의 픽셀 값에 대해 통합 픽셀 인코딩을 수행하여, 제2 유형 픽셀 인코딩 - 상기 N 및 상기 M은 모두 양의 정수임 - 을 획득하는 단계 중 적어도 하나를 실행하기 위한 것이다.
상기 방안에 기반하여, 상기 N*M 개의 픽셀은 인접하게 분포된다.
또는, 상기 N*M 개의 픽셀은 기설정된 간격 방식에 따라 간격을 두고 분포된다.
상기 방안에 기반하여, 상기 인코딩 모듈은,
상기 3차원 비디오 데이터의 픽셀 값에 따라 상기 픽셀 코드 매핑 관계를 조회하기 위한 조회 서브 모듈; 및
상기 픽셀 값이 상기 픽셀 코드 매핑 관계에 있으면, 상기 픽셀 값에 대응되는 픽셀 인코딩 값에 따라 상기 픽셀 인코딩된 데이터를 결정하기 위한 결정 서브 모듈을 포함한다.
상기 방안에 기반하여, 상기 데이터 처리 장치는,
상기 픽셀 값이 상기 픽셀 코드 매핑 관계에 있지 않으면, 상기 픽셀 값에 따라 상기 픽셀 코드 매핑 관계를 업데이트하여, 업데이트된 픽셀 코드 매핑 관계 또는 상기 픽셀 코드 매핑 관계에서 업데이트된 부분을 상기 MEC 서버에 송신하기 위한 업데이트 모듈을 더 포함한다.
상기 방안에 기반하여, 상기 인코딩 모듈은 구체적으로 기설정된 정렬 방법에 따라 상기 3차원 비디오 데이터의 픽셀 값을 정렬하여, 상기 3차원 비디오 데이터의 픽셀 값 일련번호를 획득하기 위한 것이다.
모바일 에지 컴퓨팅(MEC) 서버에 적용되는 데이터 처리 장치로서,
단말에 의해 송신된 픽셀 인코딩된 데이터를 수신하기 위한 수신 모듈; 및
상기 픽셀 인코딩된 데이터에 따라 3차원 비디오 데이터의 픽셀 값을 복원 - 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행하기 전의 데이터양은 제1 데이터양이고; 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행한 후의 데이터양은 제2 데이터양이며; 상기 제1 데이터양은 상기 제2 데이터양보다 큼 - 하기 위한 복원 모듈을 포함한다.
상기 방안에 기반하여, 상기 복원 모듈은,
상기 픽셀 인코딩된 데이터의 컬러 인코딩된 데이터에 따라, 상기 3차원 비디오 데이터의 컬러 픽셀 값을 복원하기 위한 색상 복원 서브 모듈; 및
상기 픽셀 인코딩된 데이터의 깊이 값 인코딩된 데이터에 따라, 상기 3차원 비디오 데이터의 깊이 값 픽셀 값을 복원하기 위한 깊이 값 복원 서브 모듈 중 적어도 하나를 포함한다.
상기 방안에 기반하여, 상기 데이터 처리 장치는,
상기 픽셀 인코딩된 데이터의 픽셀 인코딩 방식을 결정하기 위한 결정 모듈을 더 포함하고;
상기 복원 모듈은 구체적으로 상기 픽셀 인코딩 방식에 따라, 상기 픽셀 인코딩된 데이터에 대해 픽셀 디코딩을 수행하여 상기 3차원 비디오 데이터의 픽셀 값을 획득하기 위한 것이다.
상기 방안에 기반하여, 상기 결정 모듈은,
상기 3차원 비디오 데이터가 포함하는 픽셀 개수를 결정하고, 상기 픽셀 인코딩된 데이터의 데이터 개수를 결정하며; 상기 픽셀 개수 및 상기 데이터 개수에 따라, 상기 픽셀 인코딩 방식을 결정하기 위한 제1 결정 서브 모듈; 및
상기 단말과 픽셀 인코딩 파라미터를 인터랙션 - 상기 픽셀 인코딩 파라미터는 적어도 픽셀 인코딩 방식을 포함함 - 하기 위한 제2 결정 서브 모듈 중 적어도 하나를 포함한다.
상기 방안에 기반하여, 상기 복원 모듈은 구체적으로,
단일 픽셀 인코딩 방식에 따라, 단일 픽셀의 상기 픽셀 인코딩된 데이터에 대해 디코딩을 수행하여 3차원 비디오 데이터 픽셀 값을 복원하는 단계; 및
통합 픽셀 인코딩 방식에 따라, N*M 개의 픽셀의 상기 픽셀 인코딩된 데이터에 대해 디코딩을 수행하여 상기 3차원 비디오 데이터 픽셀 값을 복원하는 단계 중 적어도 하나를 실행하기 위한 것이다.
상기 방안에 기반하여, 상기 복원 모듈은 구체적으로 상기 픽셀 인코딩된 데이터에 따라 픽셀 코드 매핑 관계를 조회하여, 상기 픽셀 인코딩된 데이터와 대응되는 픽셀 값을 획득하기 위한 것이다.
상기 방안에 기반하여, 상기 데이터 처리 장치는,
상기 픽셀 인코딩된 데이터에 따라 3차원 비디오 데이터의 픽셀 값을 복원하기 전에, 상기 단말에 의해 송신된 업데이트된 픽셀 코드 매핑 관계 또는 상기 픽셀 코드 매핑 관계에서의 업데이트된 부분을 수신하기 위한 수신 모듈을 더 포함한다.
컴퓨터 저장 매체로서, 상기 컴퓨터 저장 매체에는 컴퓨터 명령어가 저장되어 있고, 여기서, 상기 명령어가 프로세서에 의해 실행될 경우 전술한 어느 하나의 단말에 적용되는 데이터 처리 방법의 동작을 구현하며; 또는, 상기 명령어가 프로세서에 의해 실행될 경우 전술한 어느 하나의 MEC 서버에 적용되는 데이터 처리 방법의 동작을 구현한다.
전자 기기로서, 메모리, 프로세서 및 메모리에 저장되고 프로세서에서 작동 가능한 컴퓨터 명령어를 포함하며, 여기서, 상기 프로세서가 상기 명령어를 실행할 경우 전술한 어느 하나의 단말에 적용되는 데이터 처리 방법의 동작을 구현하고, 또는 전술한 어느 하나의 MEC 서버에 적용되는 데이터 처리 방법의 동작을 구현한다.
본 발명의 실시예에서 제공되는 데이터 처리 방법 및 장치, 전자 기기 및 저장 매체에 있어서, 단말은 더 이상 3차원 비디오 데이터의 픽셀 값을 직접 전송하지 않고, 픽셀 값에 대해 픽셀 인코딩을 수행한 후에, 픽셀 인코딩된 데이터 송신을 수행한다. 전송된 픽셀 인코딩된 데이터의 데이터양은 직접 전송된 픽셀 값의 데이터양보다 작으므로, 전송에 필요한 대역폭 및 지연을 줄임으로써, 전송 데이터양이 작고, 필요한 대역폭 및 전송 지연이 작은 특성을 구비한다.
도 1은 본 발명의 실시예에서 제공되는 데이터 전송 방법에서 적용한 시스템 아키텍처 예시도이다.
도 2는 본 발명의 실시예에서 제공되는 데이터 처리 방법의 흐름 예시도이다.
도 3은 본 발명의 실시예에서 제공되는 다른 데이터 처리 방법의 흐름 예시도이다.
도 4는 본 발명의 실시예에서 제공되는 또 다른 데이터 처리 방법의 흐름 예시도이다.
도 5는 본 발명의 실시예에서 제공되는 데이터 처리 장치의 구조 예시도이다.
도 6은 본 발명의 실시예에서 제공되는 다른 데이터 처리 장치의 구조 예시도이다.
도 7은 본 발명의 실시예에서 제공되는 전자 기기의 구조 예시도이다.
도 2는 본 발명의 실시예에서 제공되는 데이터 처리 방법의 흐름 예시도이다.
도 3은 본 발명의 실시예에서 제공되는 다른 데이터 처리 방법의 흐름 예시도이다.
도 4는 본 발명의 실시예에서 제공되는 또 다른 데이터 처리 방법의 흐름 예시도이다.
도 5는 본 발명의 실시예에서 제공되는 데이터 처리 장치의 구조 예시도이다.
도 6은 본 발명의 실시예에서 제공되는 다른 데이터 처리 장치의 구조 예시도이다.
도 7은 본 발명의 실시예에서 제공되는 전자 기기의 구조 예시도이다.
본 발명의 실시예의 기술방안에 대해 상세하게 설명하기 전에, 먼저 본 발명의 실시예의 데이터 처리 방법에서 적용한 시스템 아키텍처에 대해 간단하게 소개한다. 본 발명의 실시예의 데이터 처리 방법은 3차원 비디오 데이터의 관련 서비스에 적용되고, 상기 서비스는 예를 들어 3차원 비디오 데이터 공유의 서비스, 또는 3차원 비디오 데이터에 기반한 라이브 방송 서비스 등이다. 이러한 경우, 3차원 비디오 데이터의 데이터양이 비교적 크기 때문에, 각각 전송되는 깊이 데이터 및 2차원 비디오 데이터는 데이터 전송 과정에서 비교적 높은 기술 지원이 필요하므로, 이동 통신 네트워크가 비교적 빠른 데이터 전송 속도 및 비교적 안정적인 데이터 전송 환경을 구비하는 것이 필요하다.
도 1은 데이터 전송 방법에서 적용한 시스템 아키텍처 예시도이고; 도 1에 도시된 바와 같이, 시스템은 단말, 기지국, MEC 서버, 서비스 처리 MEC 서버, 코어망 및 인터넷(Internet) 등을 포함할 수 있고; MEC 서버와 서비스 처리 MEC 서버 사이는 코어망을 통해 고속 통로를 구축함으로써 데이터 동기화를 구현한다.
도 1에 도시된 두 개의 단말이 인터랙션 되는 응용 시나리오로 예를 들어, MEC 서버 A는 단말 A(송신단) 근처에 배치된 MEC 서버이고, 코어망 A는 단말 A가 위치하는 영역의 코어망이며; 상응하게, MEC 서버 B는 단말 B(수신단) 근처에 배치된 MEC 서버이고, 코어망 B는 단말 B가 위치하는 영역의 코어망이며; MEC 서버 A 및 MEC 서버 B와 서비스 처리 MEC 서버 사이는 각각 코어망 A 및 코어망 B를 통해 고속 통로를 구축함으로써 데이터 동기화를 구현한다.
여기서, 단말 A에 의해 송신된 3차원 비디오 데이터가 MEC 서버 A에 전송된 후, MEC 서버 A가 코어망 A를 통해 서비스 처리 MEC 서버로 데이터를 동기화하고; MEC 서버 B가 다시 서비스 처리 MEC 서버로부터 단말 A에 의해 송신된 3차원 비디오 데이터를 획득하며, 또한 단말 B로 송신하여 나타낸다.
여기서, 단말 B와 단말 A가 동일한 MEC 서버를 통해 전송을 구현할 경우, 이때 단말 B 및 단말 A는 직접 하나의 MEC 서버를 통해 3차원 비디오 데이터의 전송을 구현하고, 서비스 처리 MEC 서버의 참여가 필요 없으며, 이런 방식을 로컬 백홀 방식이라고 지칭한다. 구체적으로, 단말 B와 단말 A가 MEC 서버 A를 통해 3차원 비디오 데이터의 전송을 구현한다고 가정하면, 단말 A에 의해 송신된 3차원 비디오 데이터가 MEC 서버 A에 전송된 후, MEC 서버 A는 3차원 비디오 데이터를 단말 B로 송신하여 표시한다.
여기서, 단말은 네트워크 상태, 또는 단말 자체의 구성 조건, 또는 단말 구성의 알고리즘에 기반하여 4G 네트워크의 진화형 기지국(eNB)에 액세스하거나, 또는 5G 네트워크의 차세대 진화형 기지국(gNB)으로 선택적으로 액세스함으로써, eNB가 롱 텀 에볼루션(Long Term Evolution, LTE) 액세스 네트워크를 통해 MEC 서버와 연결되도록 하고, gNB가 차세대 액세스 네트워크(NG-RAN)를 통해 MEC 서버와 연결되도록 한다.
여기서, MEC 서버는 단말 근처 또는 데이터 소스의 네트워크 에지 측에 배치되고, 이른바 단말 근처 또는 데이터 소스 근처라는 것은 논리적 위치와 지리적 위치 모두에서 단말에 가깝거나 데이터 소스에 가깝다는 것을 의미한다. 기존의 이동 통신 네트워크에서 주요한 서비스 처리 서버가 여러 대도시에 배치되어 있는 것과 달리, 하나의 도시에 복수 개의 MEC 서버를 배치할 수 있다. 예를 들어 특정 사무실 건물에, 많은 사용자가 있는 경우, 상기 사무실 건물 근처에 하나의 MEC 서버를 배치할 수 있다.
여기서, MEC 서버는 네트워크, 컴퓨팅, 저장, 핵심 능력을 적용한 에지 컴퓨팅 게이트웨이로서, 에지 컴퓨팅을 위하여 장치 도메인, 네트워크 도메인, 데이터 도메인 및 애플리케이션 도메인을 포함하는 플랫폼 지원을 제공한다. MEC 서버는 각 타입의 지능형 기기 및 센서와 연결되어, 근처에서 지능형 연결 및 데이터 처리 서비스를 제공하므로, MEC 서버에서 상이한 타입의 애플리케이션과 데이터를 처리하여, 서비스 적시성, 서비스 지능, 데이터 집계와 상호 조작, 보안과 개인 정보 보호 등 관건적인 지능형 서비스를 구현하여, 서비스의 지능적인 의사 결정 효율을 효과적으로 향상시킨다.
도 2에 도시된 바와 같이, 본 실시예는 데이터 처리 방법을 제공하고, 단말에 적용되며, 하기와 같은 단계를 포함한다.
단계 201에 있어서, 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 인코딩을 수행하여, 픽셀 인코딩된 데이터를 획득한다.
단계 203에 있어서, 모바일 에지 컴퓨팅(MEC) 서버에 상기 픽셀 인코딩된 데이터를 송신하고, 상기 픽셀 인코딩된 데이터는 상기 MEC 서버가 상기 3차원 비디오 데이터를 복원하기 위한 것이다.
여기서, 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행하기 전의 데이터양은 제1 데이터양이고; 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행한 후의 데이터양은 제2 데이터양이며; 상기 제1 데이터양은 상기 제2 데이터양보다 크다.
본 실시예에서 제공되는 데이터 처리 방법은 단말에 적용되고, 상기 단말은 예를 들어 휴대폰, 태블릿 또는 웨어러블 기기 또는 고정 이미지 모니터 등 다양한 타입의 단말일 수 있다. 상기 단말은 고정 단말 및/또는 이동 단말일 수 있다.
일부 실시예에 있어서, 상기 3차원 비디오 데이터는 2차원 이미지 및 깊이 이미지를 포함한다. 여기서, 상기 2차원 이미지는 컬러 픽셀을 포함한다. 상기 컬러 픽셀의 픽셀 값은 컬러 값이다. 예를 들어, 상기 컬러 값은 빨강/녹색/파랑(RGB) 값 또는 명도/채도/농도(YUV) 값이다.
상기 깊이 이미지는 깊이 픽셀을 포함하고, 상기 깊이 픽셀의 픽셀 값은 깊이 값이며, 여기서, 상기 깊이 값이 디스플레이하는 것은 수집 대상과 이미지 수집 모듈 사이의 공간적 거리이다. 상기 3차원 비디오 데이터 및 깊이 이미지는 3차원 이미지 공간에서 3차원 이미지를 구축할 수 있다.
일부 실시예에 있어서, 상기 2차원 이미지 및 깊이 이미지의 이미지 사이즈는 일치하고, 예를 들어, 상기 2차원 이미지 및 깊이 이미지에 포함된 픽셀은 모두 W*H 개이며; W는 제1 방향에 포함된 픽셀 개수를 나타내고, H는 제2 방향에 포함된 픽셀 개수를 나타낸다. W 및 H는 모두 양의 정수이다.
일부 실시예에 있어서, 상기 2차원 이미지 및 상기 깊이 이미지는 동일한 시간에 수집된 두 개의 이미지 일 수 있고; 데이터양을 감소하기 위하여, 상기 2차원 이미지 및 상기 깊이 이미지의 이미지 사이는 기설정된 관계를 만족한다. 예를 들어, 깊이 이미지에 포함된 픽셀은 W*H 개이고, 깊이 이미지에 포함된 픽셀은 (W/a)*(H/b)이다. 이와 같이, 하나의 깊이 픽셀은 a*b개의 컬러 픽셀에 대응된다. 3차원 비디오 구축을 수행할 때, 하나의 깊이 픽셀의 픽셀 값에 따라 a*b 개의 인접한 컬러 픽셀의 픽셀 값에 적용될 수 있다. 예를 들면, (W/a)*(H/b)는 (W/2)*(H/2)와 같다. 이와 같이, 하나의 깊이 픽셀은 4개의 컬러 픽셀에 대응된다. 3차원 비디오 구축을 수행할 때, 하나의 깊이 픽셀의 픽셀 값에 따라 4개의 인접한 컬러 픽셀의 픽셀 값에 적용할 수 있고; 이와 같이, 깊이 이미지의 이미지 데이터양을 감소한다. 일반적으로 하나의 물체에 인접한 매우 작은 영역 내의 요철감이 일정하므로, 깊이 이미지의 이미지 사이즈가 상기 2차원 이미지의 이미지 사이즈보다 작으면, 비교적 높은 정밀도의 3차원 비디오 복원 및 구축을 유지할 수도 있고; 동시에 단말 및 MEC 서버의 인터랙션이 필요한 데이터양 및/또는 MEC 서버의 인터랙션이 필요한 데이터양을 감소시킨다. 일부 실시예에 있어서, 생성된 이미지 사이즈가 상기 2차원 이미지보다 작을 때,
상기 깊이 이미지의 이미지 사이즈를 직접 사용하여 상기 깊이 이미지를 수집하는 단계; 및
상기 2차원 이미지의 이미지 사이즈를 사용하여 원시 깊이 이미지를 수집한 후, 깊이 이미지의 이미지 사이즈에 따라, 인접한 a*b 개의 픽셀의 픽셀 값에 따라 상기 깊이 이미지를 생성하는 단계 중 적어도 하나가 제공될 수 있다. 예를 들어, 인접한 a*b 개의 픽셀 값의 평균 값 또는 중간 값에 따라 상기 깊이 이미지를 생성한다.
본 실시예에 있어서, 센서 데이터로부터 픽셀 값으로 전환되는 첫 번째 인코딩을 완료했다. 본 실시예에서 픽셀 값에 대해 두 번째 인코딩을 수행하고, 여기서 제2 인코딩은 즉 상기 픽셀 인코딩이며, 상기 픽셀 인코딩을 완료한 후 상기 픽셀 인코딩된 데이터를 획득할 수 있다.
일부 실시예에 있어서, 상기 픽셀 값에 대해 픽셀 인코딩을 수행하여, 생성된 상기 픽셀 인코딩된 데이터는, 픽셀 값 대신 픽셀 값 코드를 포함할 수 있다. 이와 같이, 픽셀 인코딩된 데이터가 수신단에 의해 수신된 후, 직접 픽셀 인코딩된 데이터에 따라 이미지를 디스플레이하거나 또는 판독할 수 없으며, 먼저 픽셀 값 자체로 복원해야만, 정상적으로 이미지를 나타내거나 또는 판독을 수행할 수 있다.
일부 실시예에 있어서, 상기 첫 번째 인코딩은 많은 이미지 수집 모듈과 함께 제공되는 인코딩일 수 있고, 이와 같이, 이미지 수집 모듈이 광선의 수집을 통해 직접 메모리에 저장하는 것은 상기 센서 데이터 전환이 완료된 픽셀 값이고, 즉 상기 첫 번째 인코딩을 완료한 데이터이다.
상기 픽셀 인코딩을 완료한 후 획득된 픽셀 인코딩된 데이터를 MEC 서버로 전송하여, MEC 서버 3차원 비디오를 생성한다. 본 실시예에 있어서, 2차 픽셀 인코딩 후, 획득된 제2 데이터양은 인코딩 전의 제1 데이터양보다 작기 때문에, 전송된 3차원 비디오 데이터의 데이터양을 감소함으로써, 데이터양에 의해 소모되는 대역폭 및 많은 데이터에 필요한 전송 지연을 감소하여; 전송되는 데이터양이 적고, 소모되는 대역폭이 작으며 전송 지연이 작은 특성을 구비한다. 따라서, MEC 서버에 의해 수신된 데이터의 지연이 작으면, 빠르고 정확하게 3차원 비디오 데이터를 복원하고 또한 3차원 비디오를 구축할 수 있다.
일부 실시예에 있어서, 상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 인코딩을 수행하여, 픽셀 인코딩된 데이터를 획득하는 단계는,
상기 3차원 비디오 데이터의 컬러 픽셀 값에 따라 컬러 인코딩을 수행하여, 컬러 인코딩된 데이터를 획득하는 단계;
및,
상기 3차원 비디오 데이터의 깊이 값 픽셀 값에 따라 깊이 값 인코딩을 수행하여, 깊이 값 인코딩된 데이터를 획득하는 단계 중 적어도 하나를 포함한다.
일부 실시예에 있어서, 픽셀 값의 인코딩은 3차원 비디오 데이터에서의 컬러 픽셀의 컬러 픽셀 값에 대해서만 컬러 인코딩을 수행할 수 있으며, 컬러 인코딩된 데이터를 획득한다.
다른 일부 실시예에 있어서, 픽셀 값에 대한 인코딩은 3차원 비디오 데이터에서의 깊이 값 픽셀 값에만 대해 깊이 값 인코딩을 수행하는 것일 수 있고, 2차 인코딩된 깊이 값 인코딩된 데이터를 획득한다.
컬러 인코딩이든 깊이 값 인코딩이든, 2차 인코딩 후, MEC 서버로 전송되는 데이터양을 감소할 수 있다.
다른 일부 실시예에 있어서, 단계 201에서의 픽셀 인코딩은, 컬러 인코딩 및 깊이 값 인코딩을 동시에 수행할 수 있다.
단계 201은,
상기 3차원 비디오 데이터에서의 픽셀 값과 픽셀 코드 매핑 관계에서의 픽셀 값을 매칭 시키는 단계; 및
매칭 결과에 따라, 상기 픽셀 인코딩된 데이터를 결정하는 단계를 포함할 수 있다. 예를 들어, 어느 하나 또는 복수 개의 3차원 비디오 데이터에서의 픽셀 값 A1과 픽셀 코드 매핑 관계에서 모든 픽셀 값을 매칭시키고, 픽셀 값 A1과 매칭되면, 픽셀 값 A1에 대응되는 픽셀 코드 매핑 관계에서의 픽셀 인코딩된 데이터를 상기 픽셀 값 A1의 픽셀 인코딩 결과로 사용한다.
상기 매칭 결과는, 아래의 두 가지 경우를 포함한다. 즉,
하나는, 매칭 결과가 매칭에 성공한 것으로 나타나는 경우이며; 상기 매칭에 성공한 것은, 매칭 결과가 동일한 조건 또는 유사한 조건을 만족시킨다는 것을 의미한다.
다른 하나는, 매칭 결과가 매칭에 성공하지 못한 것으로 나타나는 경우이며, 상기 매칭 결과는 동일한 조건 및/또는 유사한 조건을 만족하지 않는다.
동일한 조건을 만족시키면, 현재 수집된 3차원 비디오 데이터에서의 픽셀 값이 상기 픽셀 코드 매핑 관계에 위치하는 것을 나타낸다.
유사한 조건을 만족시키면, 현재 수집된 3차원 비디오 데이터의 픽셀 값이 상기 픽셀 코드 매핑 관계에 있음을 나타낸다.
일부 실시예에 있어서, 현재 요구에 따라, 매칭에 성공하는 것은 동일한 조건 또는 유사한 조건을 만족시키는 것으로 결정될 수 있다.
일부 실시예에 있어서, 현재 수집된 3차원 비디오 데이터에서의 N*M 개의 픽셀의 픽셀 값과 상기 픽셀 코드 매핑 관계에서 어느 하나의 기설정된 N*M 개의 픽셀의 픽셀 값의 유사도가 기설정된 유사도 임계 값(예를 들어, 70%, 80%, 90% 또는 85%)보다 큰 것이 스캔 되면, 현재 스캔된 N*M 개의 픽셀의 픽셀 인코딩된 데이터와 픽셀 코드 매핑 관계에서의 N*M 개의 픽셀은 픽셀 인코딩의 유사 조건을 충족시키는 것으로 간주할 수 있고, 픽셀 코드 매핑 관계에서의 N*M 개의 픽셀의 픽셀 인코딩된 데이터를 현재 스캔된 N*M 개의 픽셀의 픽셀 값의 컬러 인코딩된 데이터로 직접 사용할 수 있다.
다른 일부 실시예에 있어서, 현재 수집된 3차원 비디오 데이터에서의 N*M 개의 픽셀의 픽셀 값과 상기 픽셀 코드 매핑 관계에서 어느 하나의 N*M 개의 기설정된 픽셀의 픽셀 값의 유사도가 기설정된 유사도 임계 값(예를 들어, 70%, 80%, 90% 또는 85%)보다 큰 것이 스캔 되면, 스캔된 N*M 개의 픽셀의 픽셀 값과 픽셀 코드 매핑 관계에서의 N*M 개의 픽셀의 픽셀 값에서 상이한 하나 또는 복수 개의 픽셀의 픽셀 값을 추출하고, 추출된 픽셀 값과 픽셀 코드 매핑 관계에서의 N*M 개의 픽셀의 픽셀 값의 픽셀 값 차이를 계산하며, 픽셀 값 차이가 기설정된 차이 범위 내에 있으면, 현재 스캔된 N*M 개의 픽셀의 픽셀 인코딩된 데이터와 픽셀 코드 매핑 관계에서의 N*M 개의 픽셀은 픽셀 인코딩의 유사 조건을 충족시키는 것으로 간주할 수 있고, 픽셀 코드 매핑 관계에서의 N*M 개의 픽셀의 픽셀 인코딩된 데이터를 현재 스캔된 N*M 개의 픽셀의 픽셀 값의 컬러 인코딩된 데이터로 직접 사용할 수 있으며; 그렇지 않은 경우 스캔된 N*M 개의 픽셀의 픽셀 인코딩된 데이터와 픽셀 코드 매핑 관계에서의 N*M 개의 픽셀은 픽셀 인코딩의 유사 조건을 충족시키지 않는 것으로 간주할 수 있다. 예를 들어, 픽셀 값 차이가 기설정된 차이 범위 내에 있으면, 다음 조건이 포함될 수 있다.
예를 들어, 컬러 근사치와 같이, 픽셀 값 차이가 두 개의 픽셀 값이 근사치임을 나타내는 경우, 픽셀 값 차이가 두 개의 컬러가 색 반전임을 나타내는 경우, 상기 기설정된 차이 범위 내에 있지 않은 것으로 간주할 수 있고; 두 개의 깊이 픽셀의 깊이 차이가 두 개의 깊이 값 차이가 기설정된 깊이 값 또는 깊이 비율 이상에 있음을 나타내면, 상기 기설정된 차이 범위 내에 있지 않은 것으로 간주할 수 있고, 그렇지 않은 경우 상기 기설정된 차이 범위 내에 있는 것으로 간주할 수 있다.
다른 일부 실시예에 있어서, 상기 코드 매핑 관계가 코드 매핑 함수인 경우, 상기 픽셀 값을 상기 코드 매핑 함수에 입력하면 자동적으로 픽셀 인코딩된 데이터가 출력된다. 예를 들어, 샘플 이미지에서의 컬러 값을 피팅 하는 것을 통해 상기 코드 매핑 함수를 결정하고, 이와 같이, 각 픽셀 값 또는 픽셀 값 그룹이 상기 코드 매핑 함수에 입력되면 상기 픽셀 인코딩된 데이터를 자동적으로 획득하며, 이와 같이, 매칭의 방법을 통해 상기 픽셀 인코딩된 데이터를 결정할 필요가 없다.
결론적으로 단계 201에서 상기 픽셀 인코딩된 데이터를 결정하는 방법은 다양하고, 구체적인 구현은 임의의 하나에 한정되지 않는다.
일부 실시예에 있어서, 상기 단계 201은,
상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 코드 매핑 관계를 조회하여, 상기 픽셀 인코딩된 데이터를 결정하는 단계를 포함한다.
일부 실시예에 있어서, 상기 단말 및 상기 MEC 서버는 모두 상기 픽셀 코드 매핑 관계를 미리 알 수 있고, 예를 들어, MEC 서버 및 단말에는 모두 픽셀 코드 매핑 테이블이 미리 저장되어 있다.
일부 실시예에 있어서, 상기 단말 및 MEC 서버 사이에서 상기 픽셀 코드 매핑 관계를 미리 협상한다.
상기 픽셀 코드 매핑 관계는,
상기 픽셀 코드 매핑 테이블;
복수 개의 이산 픽셀 코드 매핑 값 쌍; 및
픽셀 값과 픽셀 인코딩된 데이터의 함수 표현식 중 적어도 하나를 포함할 수 있다.
결론적으로, 상기 픽셀 코드 매핑 관계의 표현 방법은 다양하고, 상기 임의의 하나에 한정되지 않는다.
일부 실시예에 있어서, 도 3에 도시된 바와 같이, 상기 데이터 처리 방법은,
기설정된 정보에 따라 픽셀 인코딩 방식 - 상기 기설정된 정보는 네트워크 전송 조건 정보, 상기 단말의 부하 조건 정보 및 상기 MEC 서버의 부하 조건 정보 중 적어도 하나를 포함함 - 을 선택하는 단계 200를 더 포함할 수 있고;
상기 단계 201은, 선택된 상기 픽셀 인코딩 방식에 따라, 상기 픽셀 값에 대해 픽셀 인코딩을 수행하여 상기 픽셀 인코딩된 데이터를 획득하는 단계를 포함할 수 있다.
예를 들어, 네트워크 전송 조건 정보가 현재 사용 가능한 대역폭이 상기 픽셀 값을 직접 전송하는데 필요한 대역폭보다 큰 것으로 나타내면, 상기 픽셀 인코딩을 수행할 필요가 없을 수 있다.
다른 예를 들어, 상기 네트워크 전송 조건 정보가 현재 사용 가능한 대역폭이 상기 픽셀 값을 직접 전송하는데 필요한 대역폭보다 작은 것으로 나타내면, 현재 사용 가능한 대역폭에 따라, 픽셀 인코딩 후 데이터양이 상기 현재 사용 가능한 대역폭보다 작거나 또는 같은 픽셀 인코딩 방식을 선택한다.
다른 예를 들어, 상이한 픽셀 인코딩 방식을 사용하면, 단말 인코딩에 필요한 계산량 및 MEC 서버에 의해 복원된 계산량은 모두 상이하다.
본 실시예에서는 단말의 부하 조건 정보 및/또는 MEC 서버의 부하 조건 정보에 따라 적합한 픽셀 인코딩 방식을 선택할 수도 있다.
상기 부하 조건 정보는, 현재 부하율, 현재 부하량, 최대 부하율 및 최대 부하량 중 적어도 하나를 포함할 수 있다.
현재 부하율이 높거나 또는 현재 부하량이 크면, 인코딩 또는 디코딩의 계산량이 적은 픽셀 인코딩 방식을 먼저 선택하고; 그렇지 않으면 임의로 선택하거나 또는 네트워크 전송 조건 정보 등 다른 참조 요소에 따라 선택할 수 있다.
일부 실시예에 있어서, 상기 선택된 픽셀 인코딩 방식에 따라, 상기 픽셀 값에 대해 픽셀 인코딩을 수행하여 상기 픽셀 인코딩된 데이터를 획득하는 단계는,
단일 픽셀 인코딩 방식에 따라, 상기 3차원 비디오 데이터의 단일 픽셀의 픽셀 값에 대해 단일 픽셀 인코딩을 수행하여, 제1 유형의 인코딩된 데이터 - 상기 제1 유형의 인코딩된 데이터가 차지하는 비트 수는 상기 픽셀 값이 차지하는 비트 수보다 작음 - 를 획득하는 단계; 및
통합 픽셀 인코딩 방식에 따라, 상기 3차원 비디오 데이터의 N*M 개의 픽셀의 픽셀 값에 대해 통합 픽셀 인코딩을 수행하여, 제2 유형 픽셀 인코딩 - 상기 N 및 상기 M은 모두 양의 정수임 - 을 획득하는 단계 중 적어도 하나를 포함한다.
본 실시예에서 단일 픽셀 인코딩은 하나의 픽셀 값이 하나의 픽셀 인코딩된 데이터에 대응되는 것을 의미한다. 예를 들어, 하나의 3차원 비디오 데이터의 이미지가 S 개의 픽셀을 포함하면, 단일 픽셀 인코딩을 통해, S 개의 제1 유형의 인코딩된 데이터를 획득할 수 있다. 데이터양을 감소하기 위하여, 하나의 제1 유형의 인코딩된 데이터가 차지하는 비트 수는 픽셀 값 자체가 차지하는 비트 수보다 작다. 예를 들어, 하나의 픽셀 값은 32개의 비트 또는 16개의 비트를 차지하지만, 제1 유형의 인코딩된 데이터는 8개의 비트 또는 10개의 비트만 차지한다. 이와 같이, 각 단일 픽셀 전송에 필요한 비트 수를 감소함으로써, 전체적으로 필요한 데이터양을 감소한다.
일부 실시예에 있어서 픽셀 인코딩을 통합할 수도 있다.
통합 픽셀 인코딩은 동시에 복수 개의 픽셀에 대해 픽셀 인코딩을 수행한다.
예를 들어, 동시에 인접한 하나의 픽셀 행렬에 대해 인코딩을 수행하거나, 또는, 동시에 행렬 또는 비행렬에 따라서 배열된 복수 개의 픽셀에 대해 픽셀 인코딩을 수행한다..
일부 실시예에 있어서, 3*3개 또는 4*4개의 픽셀로 구성된 픽셀 행렬에 대해 인코딩을 수행한다. 일부 실시예에 있어서, 상기 N*M은 상기 3차원 이미지 데이터의 한 프레임에 포함된 픽셀에 의해 정확하게 나누어질 수 있다.
일부 경우, 이미지 수집을 수행할 때, 이런 인접한 픽셀의 깊이 값 및/또는 컬러 정보는 상대적으로 고정된 것이고, 이런 컬러 또는 깊이를 통합하여, 상기 픽셀 코드 매핑 관계에서 기설정된 인코딩 값을 생성할 수 있으며, 이와 같이, 이후에 상기 픽셀 인코딩을 수행할 때, 대응되는 3차원 비디오 데이터 프레임에서의 컬러 픽셀 값 또는 깊이 픽셀 값을 스캔하는 것을 통해, 특정된 컬러 조합 및/또는 깊이 조합이 포함되는지 여부를 결정함으로써, 대응되는 인코딩 값으로 변환하여, 상기 픽셀 인코딩된 데이터를 획득한다.
일부 실시예에 있어서, 현재 수요에 따라, 상기 단일 픽셀 인코딩 및 통합 픽셀 인코딩을 혼합하여 사용할 수 있다.
상기 픽셀 인코딩된 데이터를 전송하는 동시에, 또는 상기 픽셀 인코딩된 데이터 전송하기 전에, 선택한 인코딩 방식을 미리 알릴 수 있다. 선택한 인코딩 방식은 전술한 단일 픽셀 인코딩, 통합 픽셀 인코딩, 또는 단일 픽셀 인코딩 및 통합 픽셀 인코딩을 혼합한 혼합 픽셀 인코딩일 수 있다.
상기 N*M 개의 픽셀은 인접하게 분포되거나; 또는,
또는, 상기 N*M 개의 픽셀은 기설정된 간격 방식에 따라 간격을 두고 분포된다.
N*M 개의 픽셀이 인접하게 분포되면, 하나의 N*M 개의 픽셀 행렬을 형성한다.
선택적으로, N*M 개의 픽셀은 기설정된 간격 방식에 따라 간격을 두고 분포되고, 예를 들어, 기설정된 수량의 픽셀은 N*M 개의 픽셀에 속하는 두 개의 픽셀에 의해 간격을 둘 수 있고, 예를 들어, 하나 또는 복수 개를 간격을 둔다.
일부 실시예에 있어서, 상기 N*M은 동적으로 결정될 수 있고, 정적으로 설정될 수도 있다.
예를 들어, 3차원 이미지 데이터 프레임에서의 이미지를 제1 영역 및 제2 영역으로 나누고, 제1 영역이 단일 픽셀 인코딩을 사용할 수 있으면, 제2 영역은 통합 픽셀 인코딩을 수행한다.
다른 예를 들어, 3차원 이미지 프레임에서 이미지의 제1 영역의 픽셀 값을 MEC 서버로 직접 전송하고, 제2 영역에 대해 단일 픽셀 인코딩 및/또는 통합 픽셀 인코딩을 수행한다.
이와 같이, 전송된 데이터양 및 이미지 품질 사이의 관계 균형을 잘 잡을 수 있다.
일부 실시예에 있어서, 상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 코드 매핑 관계를 조회하여, 상기 픽셀 인코딩된 데이터를 결정하는 단계는,
상기 3차원 비디오 데이터의 픽셀 값에 따라 상기 픽셀 코드 매핑 관계를 조회하는 단계; 및
상기 픽셀 값이 상기 픽셀 코드 매핑 관계에 있으면, 상기 픽셀 값에 대응되는 픽셀 인코딩 값에 따라 상기 픽셀 인코딩된 데이터를 결정하는 단계를 포함한다.
하나의 3차원 비디오 데이터 프레임의 이미지 데이터의 픽셀 코드 매핑 관계는 미리 결정될 수 있지만, 다른 일부 경우 결정되지 않을 수 있고, 또는 시간의 흐름에 따라 변화가 발생할 수 있다.
예를 들어, 한 아나운서의 3차원 라이브 비디오의 경우, 해당 앵커가 이전에 3차원 비디오 라이브에 참여한 적이 있으면, 상기 앵커가 보유한 단말 또는 MEC 서버에는 상기 앵커 얼굴의 코드 매핑 관계가 저장되어 있을 수 있다. 상기 앵커의 얼굴이 갑자기 보정이 되거나 메이크업이 바뀌었다면, 적어도 얼굴의 컬러 이미지가 변했을 수 있는데, 이때 상기 픽셀 매핑 관계는 상기 픽셀 코드 매핑 관계에 있지 않을 수 있다.
다른 일부 실시예에 있어서, 상기 데이터 처리 방법은,
상기 픽셀 값이 상기 픽셀 코드 매핑 관계에 있지 않으면, 상기 픽셀 값에 따라 상기 픽셀 코드 매핑 관계를 업데이트하여, 업데이트된 픽셀 코드 매핑 관계 또는 상기 픽셀 코드 매핑 관계에서 업데이트된 부분을 상기 MEC 서버에 송신하는 단계를 더 포함한다.
본 실시예에 있어서, 코드 매핑 관계를 편리하게 결정하기 위하여, 공식 생방송 전의 인터랙티브 핸드셰이킹 또는 디버깅 단계에서, 타깃 대상의 하나 또는 복수 개의 3차원 비디오 데이터를 수집할 수 있고, 이런 3차원 비디오 데이터의 픽셀 값 스캔을 통해, 대응되는 타깃 대상의 픽셀 매핑 관계가 구축되었는지 또는 픽셀 매핑 관계 업데이트가 필요 한지 여부를 결정한다. 3차원 매핑 관계 업데이트가 필요하면, 상기 3차원 매핑 관계를 업데이트하고, 필요하지 않으면 3차원 비디오 데이터의 공식 인터랙션에 직접 진입할 수 있다.
일부 실시예에 있어서, 상기 단계 201은,
기설정된 정렬 방법에 따라 상기 3차원 비디오 데이터의 픽셀 값을 정렬하여, 상기 3차원 비디오 데이터의 픽셀 값 일련번호를 획득하는 단계를 포함하는 것을 특징으로 하는 데이터 처리 방법.
예를 들어, 사람 얼굴로 예를 들면, 얼굴의 피부색 및 얼굴의 높낮이 언듈레이팅 형태는 모두 최대치 및 최소치가 있고, 이와 같이, 이미지 수집 모듈을 사용하여 수집한 2차원 이미지 및/또는 깊이 이미지는 모두 특정된 컬러 픽셀 값 또는 깊이 픽셀 값 구간 내에 집중되며, 대부분 경우에, 전체 이미지 수집기의 최대 픽셀 값 및 최소 픽셀 값을 커버하지 않고, 16비트의 컬러 채널에 대응되는 512개의 가능한 픽셀 값에서, 효과적으로 사용할 수 있는 것은 200개의 좌우뿐일 수 있고, 심지어 100여 개의 일 수 있다.
상기 픽셀 값의 정렬을 통해, 현재 생성된 픽셀 값의 개수를 획득할 수 있고, 예를 들어, P 개가 생성되면, log2P의 반올림한 정수 비트 수로 모든 픽셀의 픽셀 인코딩을 완료할 수 있으며, log2P의 반올림한 정수 비트 수만 차지하는 픽셀 인코딩된 데이터를 획득하고; 이와 같이, 필요한 데이터양을 대폭 줄일 수 있다.
타깃 대상이(예를 들어, 다양한 유형의 앵커, 특정 유형의 시나리오가 동영상에 자주 나타남), 이와 같이, 픽셀 값의 상기 통계 개수를 통해 정렬하여, 상기 픽셀 코드 매핑 관계를 생성하거나, 또는, 상기 픽셀 코드 매핑 관계를 업데이트할 수 있음으로써, 인코딩 비디오 관계의 결정 및 생성을 완료한다
일부 실시예에 있어서, 기설정된 정렬 방법에 따라 상기 3차원 비디오 데이터의 픽셀 값에 대해 정렬을 수행하여, 상기 3차원 비디오 데이터의 픽셀 값 일련번호를 획득하는 단계는,
단일 코드 매핑 방법을 사용하면, 기설정된 정렬 방법에 따라 상기 3차원 비디오 데이터의 픽셀 값을 정렬하여, 상기 3차원 비디오 데이터의 픽셀 값 일련번호를 획득하는 단계; 및
상기 픽셀 값과 상기 픽셀 값 일련번호 사이의 매핑 관계를 구축하는 단계를 포함한다.
예를 들어, 상기 픽셀 값 일련번호는,
컬러 값 정렬에 의해 형성된 컬러 값 일련번호; 및
깊이 값 정렬에 의해 형성된 깊이 값 일련번호 중 적어도 하나를 포함한다.
다른 일부 실시예에 있어서, 상기 기설정된 정렬 방법에 따라 상기 3차원 비디오 데이터의 픽셀 값에 대해 정렬을 수행하여, 상기 3차원 비디오 데이터의 픽셀 값 일련번호를 획득하는 단계는,
상기 현재 코드 매핑 방법은 통합 코드 매핑 방법이면, 상기 필요한 정확도 및/또는 타깃 시나리오 등 참조 요소에 따라 통합 코드 매핑 방법의 N*M의 값을 결정 - N 및 M의 값은 양의 정수임 - 하는 단계;
3차원 비디오 데이터의 픽셀 값에 따라, N*M 개의 픽셀의 픽셀 값 조합으로 정렬하여, 상기 3차원 비디오 데이터의 픽셀 조합의 일련번호를 획득하는 단계; 및
상기 픽셀 값과 상기 픽셀 조합의 일련번호 사이의 매핑 관계를 구축하는 단계를 더 포함할 수 있다.
본 실시예에 있어서, 필요한 정확도에 따라 상기 N*M을 결정하고, N은 픽셀 조합에 대응되는 행의 개수일 수 있고, M은 픽셀 조합에 대응되는 열의 개수일 수 있으며; 또는, N은 픽셀 조합에 대응되는 열의 개수일 수 있고, M은 픽셀 조합에 대응되는 행의 개수일 수 있다.
일부 실시예에 있어서, 상기 픽셀 조합의 일련번호는,
컬러 값 통합 정렬에 의해 형성된 컬러 값 통합 일련번호; 및
깊이 값 통합 정렬에 의해 형성된 깊이 값 통합 일련번호 중 적어도 하나를 포함한다.
따라서, 일부 실시예에 있어서, 상기 샘플 3차원 비디오 데이터의 픽셀 값에 따라, N*M 개의 픽셀의 픽셀 값 조합으로 정렬하여, 상기 3차원 비디오 데이터의 픽셀 조합의 일련번호를 획득하는 단계는,
3차원 비디오 데이터에서 컬러 픽셀의 컬러 값에 따라, N*M 개의 픽셀의 컬러 값 조합으로 정렬하여, 3차원 비디오 데이터의 컬러 값 조합의 일련번호를 획득하는 단계를 포함할 수 있다. 예를 들어, 정렬할 때 스캔된 컬러 값 조합의 시간 선후 순서에 따라서 정렬을 수행할 수 있고, 또는, 스캔된 컬러 값 조합이 발생 빈도의 높고 낮음에 기반하여 정렬을 수행할 수 있음으로써, 상기 컬러 값 조합의 일련번호를 획득한다.
일부 실시예에 있어서, 상이한 타깃 대상에 대해 말하자면 획득한 상기 픽셀 코드 매핑 관계는 상이할 수 있기 때문에, 이로써, 데이터의 경우, 상기 픽셀 코드 매핑 관계를 누출하지 않은 조건 하에서, 안정성이 높은 특성을 구비한다. 이와 같이, 타인이 전송 과정에 픽셀 인코딩을 수행한 픽셀 인코딩된 데이터를 탈취하여도, 상기 3차원 비디오 데이터를 정상적으로 디코딩할 수 없으므로, 전송 안전성이 높은 특성을 구비한다.
통계 개수에 따라 정렬하면, 이와 같이, 픽셀 값 발생 빈도가 높은 픽셀 인코딩 값 일련번호가 앞에 나타나고, 이와 같이, 나중에 샘플 3차원 비디오 데이터와 동일한 타깃 시나리오 및 수집 타깃의 3차원 비디오 데이터의 인코딩을 사용할 때, 픽셀 값 매칭의 횟수를 줄일 수 있고, 픽셀 인코딩의 효율을 향상시킨다.
도 4에 도시된 바와 같이, 본 실시예는 데이터 처리 방법을 제공하고, 모바일 에지 컴퓨팅(MEC) 서버에 적용되며,
단말에 의해 송신된 픽셀 인코딩된 데이터를 수신하는 단계(301); 및
상기 픽셀 인코딩된 데이터에 따라 3차원 비디오 데이터의 픽셀 값을 복원하는 단계(303) - 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행하기 전의 데이터양은 제1 데이터양이고; 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행한 후의 데이터양은 제2 데이터양이며; 상기 제1 데이터양은 상기 제2 데이터양보다 큼 - 을 포함한다.
본 실시예에 있어서, 직접 수신된 것은 픽셀 값이 아니라, 픽셀 인코딩된 데이터이다. 픽셀 인코딩된 데이터가 MEC 서버에 의해 수신된 후, 3차원 비디오 데이터의 픽셀 값으로 복원되어야 한다.
MEC 서버에 의해 수신된 픽셀 인코딩된 데이터는, 픽셀 값을 직접 수신하는 데이터양에 비하여 더욱 작고, 소모하는 대역폭도 더욱 작다.
일부 실시예에 있어서, 상기 단계 303은,
상기 픽셀 인코딩된 데이터의 컬러 인코딩된 데이터에 따라, 상기 3차원 비디오 데이터의 컬러 픽셀 값을 복원하는 단계; 및
상기 픽셀 인코딩된 데이터의 깊이 값 인코딩된 데이터에 따라, 상기 3차원 비디오 데이터의 깊이 값 픽셀 값을 복원하는 단계 중 적어도 하나를 포함할 수 있다.
본 실시예에 있어서, 컬러 인코딩된 데이터에 기반하여 컬러 픽셀 값을 복원하고, 깊이 값 인코딩된 데이터에 따라, 깊이 값 픽셀 값을 복원한다.
일부 실시예에 있어서, 상기 데이터 처리 방법은,
상기 픽셀 인코딩된 데이터의 픽셀 인코딩 방식을 결정하는 단계 302를 더 포함하고; 예를 들어, 상기 픽셀 인코딩 방식은 단일 인코딩 방식 및/또는 통합 인코딩 방식을 포함한다.
상기 단계 303은,
상기 픽셀 인코딩 방식에 따라, 상기 픽셀 인코딩된 데이터에 대해 픽셀 디코딩을 수행하여 상기 3차원 비디오 데이터의 픽셀 값을 획득하는 단계를 포함할 수 있다.
일부 실시예에 있어서, 상기 단계 302의 방법은 다양하고, 하기와 같이 선택적인 몇 가지 방식을 제공한다.
선택적인 방식 1에 있어서, 상기 3차원 비디오 데이터가 포함하는 픽셀 개수를 결정하고, 상기 픽셀 인코딩된 데이터의 데이터 개수를 결정하며; 상기 픽셀 개수 및 상기 데이터 개수에 따라, 상기 픽셀 인코딩 방식을 결정한다.
선택적인 방식 2에 있어서, 상기 단말과 픽셀 인코딩 파라미터를 인터랙션 하고, 상기 픽셀 인코딩 파라미터는 적어도 픽셀 인코딩 방식을 포함한다.
일부 실시예에 있어서, 상기 픽셀 인코딩 파라미터는 상기 픽셀 인코딩 방식을 포함하고, 다른 일부 실시예에 있어서, 상기 픽셀 인코딩 파라미터는,
통합 인코딩 방식의 N*M의 값;
단일 인코딩 방식 및/또는 통합 인코딩 방식의 하나의 픽셀 인코딩된 데이터가 차지하는 비트 수; 및
코드 매핑 관계를 더 포함할 수 있다.
일부 실시예에 있어서, 상기 MEC 서버는 단말로부터 상기 매핑 인코딩 파라미터를 수신하지 않을 수도 있고, 예를 들어, 어느 하나의 앵커가 보유한 단말은 생방송에 자주 사용되고, 생방송은 상기 3차원 비디오 데이터를 생성하게 된다. MEC 서버가 특정 단말로부터의 픽셀 인코딩된 데이터임을 발견하면, 디폴트 픽셀 인코딩 파라미터를 사용하여 상기 픽셀 값의 복원을 수행한다. 여기서 디폴트 픽셀 인코딩 파라미터는, 디폴트 인코딩 방식 및/또는 픽셀 인코딩 관계를 포함할 수 있다.
일부 실시예에 있어서, 상기 픽셀 인코딩 방식에 따라, 상기 픽셀 인코딩된 데이터에 대해 픽셀 디코딩을 수행하여 상기 3차원 비디오 데이터의 픽셀 값을 획득하는 단계는,
단일 픽셀 인코딩 방식에 따라, 단일 픽셀의 상기 픽셀 인코딩된 데이터에 대해 디코딩을 수행하여 3차원 비디오 데이터 픽셀 값을 복원하는 단계; 및
통합 픽셀 인코딩 방식에 따라, N*M 개의 픽셀의 상기 픽셀 인코딩된 데이터에 대해 디코딩을 수행하여 상기 3차원 비디오 데이터 픽셀 값을 복원하는 단계 중 적어도 하나를 포함한다.
일부 실시예에 있어서, 상기 단계 302는, 상기 픽셀 인코딩된 데이터에 따라 픽셀 코드 매핑 관계를 조회하여, 상기 픽셀 인코딩된 데이터와 대응되는 픽셀 값을 획득하는 단계를 포함할 수 있다.
일부 실시예에 있어서, 상기 데이터 처리 방법은：
상기 픽셀 인코딩된 데이터에 따라 3차원 비디오 데이터의 픽셀 값을 복원하기 전에, 상기 단말에 의해 송신된 업데이트된 픽셀 코드 매핑 관계 또는 상기 픽셀 코드 매핑 관계에서의 업데이트된 부분을 수신하는 단계를 더 포함한다.
상기 픽셀 코드 매핑 관계의 인터랙션을 통해, 이와 같이, 픽셀 코드 매핑 관계로 하여금 단말 및 MEC 서버에서 동기화를 수행하도록 한다.
도 5에 도시된 바와 같이, 본 실시예는 데이터 처리 장치를 더 제공하고, 단말에 적용되며,
3차원 비디오 데이터의 픽셀 값에 따라 픽셀 인코딩을 수행하여, 픽셀 인코딩된 데이터를 획득하기 위한 인코딩 모듈(401); 및
모바일 에지 컴퓨팅(MEC) 서버에 상기 픽셀 인코딩된 데이터 - 상기 픽셀 인코딩된 데이터는 상기 MEC 서버가 상기 3차원 비디오 데이터를 복원하기 위한 것임 - 를 송신하기 위한 송신 모듈(402)을 포함하고;
여기서, 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행하기 전의 데이터양은 제1 데이터양이고; 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행한 후의 데이터양은 제2 데이터양이며; 상기 제1 데이터양은 상기 제2 데이터양보다 크다.
일부 실시예에 있어서, 상기 인코딩 모듈(401) 및 송신 모듈(402)은 프로그램 모듈일 수 있고, 컴퓨터 실행 가능 코드에 대응되며, 상기 컴퓨터 실행 가능 코드가 실행된 후, 전술한 픽셀 인코딩된 데이터 및 3차원 비디오 데이터의 송신을 구현할 수 있다.
다른 일부 실시예에 있어서, 상기 인코딩 모듈(401) 및 송신 모듈(402)은 하드웨어 모듈 및 프로그램 모듈의 조합일 수도 있고, 예를 들어, 복합 프로그래머블 어레이 또는 필드 프로그래머블 어레이일 수 있다.
다른 일부 실시예에 있어서, 상기 인코딩 모듈(401) 및 송신 모듈(402)은 하드웨어 모듈에 대응될 수 있고, 예를 들어, 상기 인코딩 모듈(401) 및 상기 송신 모듈(402)은 응용 주문형 통합 회로일 수 있다.
일부 실시예에 있어서, 상기 인코딩 모듈(401)은,
상기 3차원 비디오 데이터의 컬러 픽셀 값에 따라 컬러 인코딩을 수행하여, 컬러 인코딩된 데이터를 획득하기 위한 컬러 인코딩 서브 모듈;
및,
상기 3차원 비디오 데이터의 깊이 값 픽셀 값에 따라 깊이 값 인코딩을 수행하여, 깊이 값 인코딩된 데이터를 획득하기 위한 깊이 값 인코딩 서브 모듈 중 적어도 하나를 포함한다.
일부 실시예에 있어서, 상기 인코딩 모듈(401)은 구체적으로 상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 코드 매핑 관계를 조회하여, 상기 픽셀 인코딩된 데이터를 결정하기 위한 것이다.
일부 실시예에 있어서, 상기 데이터 처리 장치는,
기설정된 정보에 따라 픽셀 인코딩 방식 - 상기 기설정된 정보는 네트워크 전송 조건 정보, 상기 단말의 부하 조건 정보 및 상기 MEC 서버의 부하 조건 정보 중 적어도 하나를 포함함 - 을 선택하기 위한 선택 모듈을 더 포함하고;
상기 인코딩 모듈(401)은 구체적으로 픽셀 인코딩 방식에 따라, 상기 픽셀 값에 대해 픽셀 인코딩을 수행하여 상기 픽셀 인코딩된 데이터를 획득하기 위한 것이다.
일부 실시예에 있어서, 상기 방안에 기반하여, 상기 인코딩 모듈은, 단일 픽셀 인코딩 방식에 따라, 상기 3차원 비디오 데이터의 단일 픽셀의 픽셀 값에 대해 단일 픽셀 인코딩을 수행하여, 제1 유형의 인코딩된 데이터 - 상기 제1 유형의 인코딩된 데이터가 차지하는 비트 수는 상기 픽셀 값이 차지하는 비트 수보다 작음 - 를 획득하는 단계; 및 통합 픽셀 인코딩 방식에 따라, 상기 3차원 비디오 데이터의 N*M 개의 픽셀의 픽셀 값에 대해 통합 픽셀 인코딩을 수행하여, 제2 유형 픽셀 인코딩 - 상기 N 및 상기 M은 모두 양의 정수임 - 을 획득하는 단계 중 적어도 하나를 실행하기 위한 것이다.
일부 실시예에 있어서, 상기 N*M 개의 픽셀 인접하게 분포된다.
또는, 상기 N*M 개의 픽셀은 기설정된 간격 방식에 따라 간격을 두고 분포된다.
일부 실시예에 있어서, 상기 인코딩 모듈(401)은,
상기 3차원 비디오 데이터의 픽셀 값에 따라 상기 픽셀 코드 매핑 관계를 조회하기 위한 조회 서브 모듈; 및
상기 픽셀 값이 상기 픽셀 코드 매핑 관계에 있으면, 상기 픽셀 값에 대응되는 픽셀 인코딩 값에 따라 상기 픽셀 인코딩된 데이터를 결정하기 위한 결정 서브 모듈을 포함한다.
일부 실시예에 있어서, 상기 데이터 처리 장치는,
상기 픽셀 값이 상기 픽셀 코드 매핑 관계에 있지 않으면, 상기 픽셀 값에 따라 상기 픽셀 코드 매핑 관계를 업데이트하여, 업데이트된 픽셀 코드 매핑 관계 또는 상기 픽셀 코드 매핑 관계에서 업데이트된 부분을 상기 MEC 서버에 송신하기 위한 업데이트 모듈을 더 포함한다.
일부 실시예에 있어서, 상기 인코딩 모듈(401)은 구체적으로 기설정된 정렬 방법에 따라 상기 3차원 비디오 데이터의 픽셀 값을 정렬하여, 상기 3차원 비디오 데이터의 픽셀 값 일련번호를 획득하기 위한 것이다.
도 6에 도시된 바와 같이, 본 실시예는 데이터 처리 장치를 제공하고, 모바일 에지 컴퓨팅(MEC) 서버에 적용되고,
단말에 의해 송신된 픽셀 인코딩된 데이터를 수신하기 위한 수신 모듈(501); 및
상기 픽셀 인코딩된 데이터에 따라 3차원 비디오 데이터의 픽셀 값을 복원 - 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행하기 전의 데이터양은 제1 데이터양이고; 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행한 후의 데이터양은 제2 데이터양이며; 상기 제1 데이터양은 상기 제2 데이터양보다 큼 - 하기 위한 복원 모듈(502)을 포함한다.
일부 실시예에 있어서, 상기 수신 모듈(501) 및 복원 모듈(502)은 프로그램 모듈일 수 있고, 컴퓨터 실행 가능 코드에 대응되며, 상기 컴퓨터 실행 가능 코드가 실행된 후, 전술한 픽셀 인코딩된 데이터 및 3차원 비디오 데이터의 송신을 구현할 수 있다.
다른 일부 실시예에 있어서, 상기 수신 모듈(501) 및 복원 모듈(502)은 하드웨어 모듈 및 프로그램 모듈의 조합일 수도 있고, 예를 들어, 복합 프로그래머블 어레이 또는 필드 프로그래머블 어레이일 수 있다.
다른 일부 실시예에 있어서, 상기 수신 모듈(501) 및 복원 모듈(502)은 하드웨어 모듈에 대응될 수 있고, 예를 들어, 상기 인코딩 모듈 및 상기 송신 모듈은 응용 주문형 통합 회로일 수 있다.
일부 실시예에 있어서, 상기 복원 모듈(502)은,
상기 픽셀 인코딩된 데이터의 컬러 인코딩된 데이터에 따라, 상기 3차원 비디오 데이터의 컬러 픽셀 값을 복원하기 위한 색상 복원 서브 모듈; 및
상기 픽셀 인코딩된 데이터의 깊이 값 인코딩된 데이터에 따라, 상기 3차원 비디오 데이터의 깊이 값 픽셀 값을 복원하기 위한 깊이 값 복원 서브 모듈 중 적어도 하나를 포함한다.
일부 실시예에 있어서, 상기 데이터 처리 장치는,
상기 픽셀 인코딩된 데이터의 픽셀 인코딩 방식을 결정하기 위한 결정 모듈; 및
구체적으로 상기 픽셀 인코딩 방식에 따라, 상기 픽셀 인코딩된 데이터에 대해 픽셀 디코딩을 수행하여 상기 3차원 비디오 데이터의 픽셀 값을 획득하기 위한 상기 복원 모듈(502)을 더 포함한다.
일부 실시예에 있어서, 상기 결정 모듈은,
상기 3차원 비디오 데이터가 포함하는 픽셀 개수를 결정하고, 상기 픽셀 인코딩된 데이터의 데이터 개수를 결정하며; 상기 픽셀 개수 및 상기 데이터 개수에 따라, 상기 픽셀 인코딩 방식을 결정하기 위한 제1 결정 서브 모듈; 및
상기 단말과 픽셀 인코딩 파라미터를 인터랙션 - 상기 픽셀 인코딩 파라미터는 적어도 픽셀 인코딩 방식을 포함함 - 하기 위한 제2 결정 서브 모듈 중 적어도 하나를 포함한다.
일부 실시예에 있어서, 상기 복원 모듈(502)은,
단일 픽셀 인코딩 방식에 따라, 단일 픽셀의 상기 픽셀 인코딩된 데이터에 대해 디코딩을 수행하여 3차원 비디오 데이터 픽셀 값을 복원하는 단계; 및
통합 픽셀 인코딩 방식에 따라, N*M 개의 픽셀의 상기 픽셀 인코딩된 데이터에 대해 디코딩을 수행하여 상기 3차원 비디오 데이터 픽셀 값을 복원하는 단계 중 적어도 하나를 실행하기 위한 것이다.
일부 실시예에 있어서, 상기 복원 모듈(502)은 구체적으로 상기 픽셀 인코딩된 데이터에 따라 픽셀 코드 매핑 관계를 조회하여, 상기 픽셀 인코딩된 데이터와 대응되는 픽셀 값을 획득하기 위한 것이다.
일부 실시예에 있어서, 상기 데이터 처리 장치는,
상기 픽셀 인코딩된 데이터에 따라 3차원 비디오 데이터의 픽셀 값을 복원하기 전에, 상기 단말에 의해 송신된 업데이트된 픽셀 코드 매핑 관계 또는 상기 픽셀 코드 매핑 관계에서의 업데이트된 부분을 수신하기 위한 수신 모듈(501)을 더 포함한다.
본 실시예는 컴퓨터 저장 매체를 제공하고, 상기 컴퓨터 저장 매체에는 컴퓨터 명령어가 저장되어 있으며, 상기 명령어가 프로세서에 의해 실행될 경우 단말 또는 MEC 서버에 적용되는 데이터 처리 방법의 동작을 구현하고, 예를 들어, 도 2 내지 도 4에 도시된 방법에서의 하나 또는 복수 개이다.
도 7에 도시된 바와 같이, 본 실시예는 메모리(702), 프로세서(704) 및 메모리(702)에 저장되고 프로세서(704)에서 작동 가능한 컴퓨터 명령어를 포함하는 전자 기기(700)를 제공하고, 여기서, 상기 프로세서(704)가 상기 명령어를 실행할 경우 단말 또는 MEC 서버에 적용되는 데이터 처리 방법의 동작을 구현하며, 예를 들어, 도 2 내지 도 4에 도시된 방법에서의 하나 또는 복수 개를 실행할 수 있다.
일부 실시예에 있어서, 상기 전자 기기는 통신 인터페이스(706)를 더 포함하고, 상기 통신 인터페이스(706)는 다른 장비와 정보 인터랙션을 위한 것일 수 있다. 예를 들어, 상기 전자 기기(700)가 단말이면, 상기 통신 인터페이스는 적어도 MEC 서버와 정보 인터랙션을 수행할 수 있다. 상기 전자 기기가 MEC 서버이면, 상기 통신 인터페이스(706)는 적어도 단말과 정보 인터랙션을 수행할 수 있다.
이하, 상기 어느 하나의 실시예와 결부하여 구체적인 예를 제공한다.
흔히 보는 색상에 대해 순서에 따라 넘버링 하고, 핸드폰이 빨간색, 녹색, 파란색(RGB) 데이터 수집을 완료하면, 이미지 각 픽셀의 RGB 데이터를 스캔하며, RGB 데이터가 색상 서열에 있으면, 색상 번호로 RGB 데이터를 대체하고; 구체적으로, 이미지 각 픽셀의 RGB 데이터를 스캔하며, 전체 이미지에서의 모든 RGB 데이터를 통계한 다음, RGB에 대해 순서배열 넘버링하고, 번호로 각 픽셀의 RGB를 대체한 다음, 픽셀 및 통계된 RGB 데이터를 패키지 업로드하며; MEC 서버 및 핸드폰 단말에는 매핑 테이블이 저장되어 있고, RGB 데이터가 전송될 때, 픽셀을 수평 스캔 하며, 픽셀이 매핑 테이블에 없으면, 새로 매핑을 구축(예를 들어, 픽셀 RGB-라벨 A는 [16 비트] 또는 [32 비트] 또는 [8 비트])하고, 매핑 테이블에 저장하며, 동시에 RGB 데이터를 16 비트의 색상 번호로 대체하고, 스캔이 완료된 후, 매핑 테이블에서 변경된 항목 및 RGB 데이터를 업로드 하며, 또는 단일 픽셀의 인코딩을 NХN 개의 픽셀로 연장하여 함께 인코딩할 수 있다.
본 발명에서 제공된 몇 개의 실시예에 있어서, 개시된 방법 및 스마트 기기는 다른 방법을 통해 구현될 수 있음을 이해해야 한다. 전술한 기기 실시예는 다만 예시적일 뿐이고, 예를 들어, 상기 유닛에 대한 분할은 다만 논리적 기능 분할이고, 실제로 구현될 경우 다른 분할 방식이 있을 수 있으며, 예를 들어, 복수 개의 유닛 또는 컴포넌트는 다른 시스템에 결합되거나 통합될 수 있거나, 또는 일부 특징을 무시하거나 실행하지 않을 수 있다. 또한, 나타내거나 또는 논의된 각 구성 부분의 상호간의 결합 또는 직접 결합 또는 통신 연결은 일부 인터페이스, 기기 또는 유닛을 통한 간접 결합 또는 통신 연결일 수 있고, 전기적, 기계적 또는 다른 형태일 수 있다.
상기 분리 부재로서 설명된 유닛은, 물리적으로 분리될 수도, 분리되지 않을 수도 있고, 유닛으로서 나타낸 부재는 물리적 유닛일 수도, 물리적 유닛이 아닐 수도 있으며, 즉 한 곳에 위치할 수 있거나, 복수 개의 네트워크 유닛에 분포될 수도 있으며; 실제 필요에 따라 그중의 일부 또는 전부를 선택하여 본 실시예 방안의 목적을 구현할 수 있다.
또한, 본 발명의 각 실시예에서의 각 기능 유닛은 하나의 제2 처리 유닛에 전부 통합될 수 있고, 각 유닛이 각각 독립적으로 하나의 유닛으로서 존재할 수도 있으며, 두 개의 또는 두 개의 이상의 유닛이 하나의 유닛에 통합될 수도 있고; 상기 통합된 유닛은 하드웨어의 형태로 구현될 수 있을 뿐만 아니라, 하드웨어와 소프트웨어 기능 유닛의 형태로 구현될 수도 있다.
본 기술 분야의 통상의 기술자는 상기 방법 실시예를 구현하기 위한 모든 또는 일부 동작은 프로그램 명령어와 관련되는 하드웨어를 통해 완료되고, 전술한 프로그램은 컴퓨터 판독 가능 저장 매체에 저장될 수 있으며, 상기 프로그램이 실행될 경우, 상기 방법 실시예를 포함하는 동작을 실행하며; 전술한 저장 매체는 모바일 저장 기기, 읽기 전용 메모리(ROM), 랜덤 액세스 메모리(RAM), 디스켓 또는 CD와 같은 프로그램 코드를 저장할 수 있는 다양한 매체를 포함하는 것을 이해할 수 있을 것이다.
또는, 본 발명의 상기 통합된 유닛이 소프트웨어 기능 모듈의 형태로 구현되고 독립적인 제품으로서 판매되거나 사용되는 경우, 컴퓨터 판독 가능 저장 매체에 저장될 수도 있다. 이런 이해에 기반하여, 본 발명의 실시예의 기술 방안은 본질적으로 또는 기존 기술에 대해 기여하는 부분은 소프트웨어 제품의 형태로 구현될 수 있고, 상기 컴퓨터 소프트웨어 제품은 저장 매체에 저장되며, 컴퓨터 기기(개인용 컴퓨터, MEC 서버 또는 네트워크 기기 등일 수 있음)로 하여금 본 발명의 각 실시예의 상기 방법의 전부 또는 일부를 실행하는데 사용되는 복수 개의 명령어를 포함한다. 전술한 저장 매체는 모바일 저장 기기, ROM, RAM, 디스켓 또는 CD와 같은 프로그램 코드를 저장할 수 있는 다양한 매체를 포함한다.
설명해야 할 것은, 본 발명의 실시예에 기재된 기술방안 사이에서, 충돌되지 않는 상황에서, 임의로 조합할 수 있다.
이상의 설명은, 다만 본 발명의 구체적인 실시 방법일 뿐이고, 본 발명의 보호 범위는 이에 한정되지 않으며, 본 기술 분야에 익숙한 통상의 기술자라면 본 발명에서 개시된 기술적 범위 내의 변화 또는 교체가 모두 본 발명의 보호 범위 내에 속해야 함을 쉽게 알 수 있을 것이다.
Claims (30)
- 단말에 적용되는 데이터 처리 방법으로서,
3차원 비디오 데이터의 픽셀 값에 따라 픽셀 인코딩을 수행하여, 픽셀 인코딩된 데이터를 획득하는 단계; 및
모바일 에지 컴퓨팅(MEC) 서버에 상기 픽셀 인코딩된 데이터 - 상기 픽셀 인코딩된 데이터는 상기 MEC 서버가 상기 3차원 비디오 데이터를 복원하기 위한 것임 - 를 송신하는 단계;
를 포함하며;
상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행하기 전의 데이터양은 제1 데이터양이고;
상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행한 후의 데이터양은 제2 데이터양이며;
상기 제1 데이터양은 상기 제2 데이터양보다 큰 것을 특징으로 하는,
데이터 처리 방법. - 제1항에 있어서,
상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 인코딩을 수행하여, 픽셀 인코딩된 데이터를 획득하는 단계는,
상기 3차원 비디오 데이터의 컬러 픽셀 값에 따라 컬러 인코딩을 수행하여, 컬러 인코딩된 데이터를 획득하는 단계; 및
상기 3차원 비디오 데이터의 깊이 값 픽셀 값에 따라 깊이 값 인코딩을 수행하여, 깊이 값 인코딩된 데이터를 획득하는 단계;
중 적어도 하나를 포함하는 것을 특징으로 하는,
데이터 처리 방법. - 제1항 또는 제2항에 있어서,
상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 인코딩을 수행하여, 픽셀 인코딩된 데이터를 획득하는 단계는,
상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 코드 매핑 관계를 조회하여, 상기 픽셀 인코딩된 데이터를 결정하는 단계;
를 포함하는 것을 특징으로 하는,
데이터 처리 방법. - 제3항에 있어서,
기설정된 정보에 따라 픽셀 인코딩 방식 - 상기 기설정된 정보는 네트워크 전송 조건 정보, 상기 단말의 부하 조건 정보 및 상기 MEC 서버의 부하 조건 정보 중 적어도 하나를 포함함 - 을 선택하는 단계;
를 더 포함하고;
상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 인코딩을 수행하여, 픽셀 인코딩된 데이터를 획득하는 단계는,
선택된 상기 픽셀 인코딩 방식에 따라, 상기 픽셀 값에 대해 픽셀 인코딩을 수행하여 상기 픽셀 인코딩된 데이터를 획득하는 단계;
를 포함하는 것을 특징으로 하는,
데이터 처리 방법. - 제4항에 있어서,
상기 선택된 픽셀 인코딩 방식에 따라, 상기 픽셀 값에 대해 픽셀 인코딩을 수행하여 상기 픽셀 인코딩된 데이터를 획득하는 단계는,
단일 픽셀 인코딩 방식에 따라, 상기 3차원 비디오 데이터의 단일 픽셀의 픽셀 값에 대해 단일 픽셀 인코딩을 수행하여, 제1 유형의 인코딩된 데이터 - 상기 제1 유형의 인코딩된 데이터가 차지하는 비트 수는 상기 픽셀 값이 차지하는 비트 수보다 작음 - 를 획득하는 단계; 및
통합 픽셀 인코딩 방식에 따라, 상기 3차원 비디오 데이터의 N*M 개의 픽셀의 픽셀 값에 대해 통합 픽셀 인코딩을 수행하여, 제2 유형 픽셀 인코딩 - 상기 N 및 상기 M은 모두 양의 정수임 - 을 획득하는 단계;
중 적어도 하나를 포함하는 것을 특징으로 하는,
데이터 처리 방법. - 제5항에 있어서,
상기 N*M 개의 픽셀은 인접하게 분포되거나; 또는,
상기 N*M 개의 픽셀은 기설정된 간격 방식에 따라 간격을 두고 분포되는 것을 특징으로 하는,
데이터 처리 방법. - 제3항에 있어서,
상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 코드 매핑 관계를 조회하여, 상기 픽셀 인코딩된 데이터를 결정하는 단계는,
상기 3차원 비디오 데이터의 픽셀 값에 따라 상기 픽셀 코드 매핑 관계를 조회하는 단계; 및
상기 픽셀 값이 상기 픽셀 코드 매핑 관계에 있으면, 상기 픽셀 값에 대응되는 픽셀 인코딩 값에 따라 상기 픽셀 인코딩된 데이터를 결정하는 단계;
를 포함하는 것을 특징으로 하는,
데이터 처리 방법. - 제7항에 있어서,
상기 픽셀 값이 상기 픽셀 코드 매핑 관계에 있지 않으면, 상기 픽셀 값에 따라 상기 픽셀 코드 매핑 관계를 업데이트하여, 업데이트된 픽셀 코드 매핑 관계 또는 상기 픽셀 코드 매핑 관계에서 업데이트된 부분을 상기 MEC 서버에 송신하는 단계;
를 더 포함하는 것을 특징으로 하는,
데이터 처리 방법. - 제1항에 있어서,
상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 인코딩을 수행하여, 픽셀 인코딩된 데이터를 획득하는 단계는,
기설정된 정렬 방법에 따라 상기 3차원 비디오 데이터의 픽셀 값을 정렬하여, 상기 3차원 비디오 데이터의 픽셀 값 일련번호를 획득하는 단계;
를 포함하는 것을 특징으로 하는,
데이터 처리 방법. - 모바일 에지 컴퓨팅(MEC) 서버에 적용되는 데이터 처리 방법으로서,
단말에 의해 송신된 픽셀 인코딩된 데이터를 수신하는 단계; 및
상기 픽셀 인코딩된 데이터에 따라 3차원 비디오 데이터의 픽셀 값을 복원하는 단계 - 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행하기 전의 데이터양은 제1 데이터양이고; 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행한 후의 데이터양은 제2 데이터양이며; 상기 제1 데이터양은 상기 제2 데이터양보다 큼 -;
를 포함하는 것을 특징으로 하는,
데이터 처리 방법. - 제10항에 있어서,
상기 픽셀 인코딩된 데이터에 따라 3차원 비디오 데이터의 픽셀 값을 복원하는 단계는,
상기 픽셀 인코딩된 데이터의 컬러 인코딩된 데이터에 따라, 상기 3차원 비디오 데이터의 컬러 픽셀 값을 복원하는 단계; 및
상기 픽셀 인코딩된 데이터의 깊이 값 인코딩된 데이터에 따라, 상기 3차원 비디오 데이터의 깊이 값 픽셀 값을 복원하는 단계;
중 적어도 하나를 포함하는 것을 특징으로 하는,
데이터 처리 방법. - 제10항 또는 제11항에 있어서,
상기 픽셀 인코딩된 데이터의 픽셀 인코딩 방식을 결정하는 단계;
를 더 포함하고,
상기 픽셀 인코딩된 데이터에 따라 3차원 비디오 데이터를 복원하는 단계는,
상기 픽셀 인코딩 방식에 따라, 상기 픽셀 인코딩된 데이터에 대해 픽셀 디코딩을 수행하여 상기 3차원 비디오 데이터의 픽셀 값을 획득하는 단계
를 포함하는 것을 특징으로 하는,
데이터 처리 방법. - 단말에 적용되는 데이터 처리 장치로서,
3차원 비디오 데이터의 픽셀 값에 따라 픽셀 인코딩을 수행하여, 픽셀 인코딩된 데이터를 획득하기 위한 인코딩 모듈; 및
모바일 에지 컴퓨팅(MEC) 서버에 상기 픽셀 인코딩된 데이터 - 상기 픽셀 인코딩된 데이터는 상기 MEC 서버가 상기 3차원 비디오 데이터를 복원하기 위한 것임 - 를 송신하기 위한 송신 모듈;
을 포함하고;
상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행하기 전의 데이터양은 제1 데이터양이고;
상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행한 후의 데이터양은 제2 데이터양이며;
상기 제1 데이터양은 상기 제2 데이터양보다 큰 것을 특징으로 하는,
데이터 처리 장치. - 제13항에 있어서,
상기 인코딩 모듈은 상기 3차원 비디오 데이터의 컬러 픽셀 값에 따라 컬러 인코딩을 수행하여, 컬러 인코딩된 데이터를 획득하기 위한 컬러 인코딩 서브 모듈; 및
상기 3차원 비디오 데이터의 깊이 값 픽셀 값에 따라 깊이 값 인코딩을 수행하여, 깊이 값 인코딩된 데이터를 획득하기 위한 깊이 값 인코딩 서브 모듈;
중 적어도 하나를 포함하는 것을 특징으로 하는,
데이터 처리 장치. - 제13항 또는 제14항에 있어서,
상기 인코딩 모듈은 구체적으로 상기 3차원 비디오 데이터의 픽셀 값에 따라 픽셀 코드 매핑 관계를 조회하여, 상기 픽셀 인코딩된 데이터를 결정하기 위한 것임을 특징으로 하는,
데이터 처리 장치. - 제15항에 있어서,
상기 데이터 처리 장치는 기설정된 정보에 따라 픽셀 인코딩 방식 - 상기 기설정된 정보는 네트워크 전송 조건 정보, 상기 단말의 부하 조건 정보 및 상기 MEC 서버의 부하 조건 정보 중 적어도 하나를 포함함 - 을 선택하기 위한 선택 모듈;
을 더 포함하고;
상기 인코딩 모듈은 구체적으로 픽셀 인코딩 방식에 따라, 상기 픽셀 값에 대해 픽셀 인코딩을 수행하여 상기 픽셀 인코딩된 데이터를 획득하기 위한 것임을 특징으로 하는,
데이터 처리 장치. - 제16항에 있어서,
상기 인코딩 모듈은 단일 픽셀 인코딩 방식에 따라, 상기 3차원 비디오 데이터의 단일 픽셀의 픽셀 값에 대해 단일 픽셀 인코딩을 수행하여, 제1 유형의 인코딩된 데이터 - 상기 제1 유형의 인코딩된 데이터가 차지하는 비트 수는 상기 픽셀 값이 차지하는 비트 수보다 작음 - 를 획득하는 단계; 및
통합 픽셀 인코딩 방식에 따라, 상기 3차원 비디오 데이터의 N*M 개의 픽셀의 픽셀 값에 대해 통합 픽셀 인코딩을 수행하여, 제2 유형 픽셀 인코딩 - 상기 N 및 상기 M은 모두 양의 정수임 - 을 획득하는 단계;
중 적어도 하나를 실행하기 위한 것임을 특징으로 하는,
데이터 처리 장치. - 제17항에 있어서,
상기 N*M 개의 픽셀은 인접하게 분포되거나; 또는,
상기 N*M 개의 픽셀은 기설정된 간격 방식에 따라 간격을 두고 분포되는 것을 특징으로 하는,
데이터 처리 장치. - 제15항에 있어서,
상기 인코딩 모듈은 상기 3차원 비디오 데이터의 픽셀 값에 따라 상기 픽셀 코드 매핑 관계를 조회하기 위한 조회 서브 모듈; 및
상기 픽셀 값이 상기 픽셀 코드 매핑 관계에 있으면, 상기 픽셀 값에 대응되는 픽셀 인코딩 값에 따라 상기 픽셀 인코딩된 데이터를 결정하기 위한 결정 서브 모듈;
을 포함하는 것을 특징으로 하는,
데이터 처리 장치. - 제19항에 있어서,
상기 픽셀 값이 상기 픽셀 코드 매핑 관계에 있지 않으면, 상기 픽셀 값에 따라 상기 픽셀 코드 매핑 관계를 업데이트하여, 업데이트된 픽셀 코드 매핑 관계 또는 상기 픽셀 코드 매핑 관계에서 업데이트된 부분을 상기 MEC 서버에 송신하기 위한 업데이트 모듈을 더 포함하는 것을 특징으로 하는,
데이터 처리 장치. - 제13항에 있어서,
상기 인코딩 모듈은 구체적으로 기설정된 정렬 방법에 따라 상기 3차원 비디오 데이터의 픽셀 값을 정렬하여, 상기 3차원 비디오 데이터의 픽셀 값 일련번호를 획득하기 위한 것임을 특징으로 하는,
데이터 처리 장치. - 제15항에 있어서,
상기 픽셀 코드 매핑 관계는 픽셀 코드 매핑 테이블;
복수 개의 이산 픽셀 코드 매핑 값 쌍; 및
픽셀 값과 픽셀 인코딩된 데이터의 함수 표현식;
중 적어도 하나를 포함하는 것을 특징으로 하는,
데이터 처리 장치. - 제21항에 있어서,
상기 프로세서는,
단일 코드 매핑 방법을 사용하는 것에 응답하여, 기설정된 정렬 방법에 따라 상기 3차원 비디오 데이터의 픽셀 값을 정렬하여, 상기 3차원 비디오 데이터의 픽셀 값 일련번호를 획득하고;
상기 픽셀 값과 상기 픽셀 값 일련번호 사이의 매핑 관계를 구축하도록 구성되는 것을 특징으로 하는,
데이터 처리 장치. - 모바일 에지 컴퓨팅(MEC) 서버에 적용되는 데이터 처리 장치로서,
단말에 의해 송신된 픽셀 인코딩된 데이터를 수신하기 위한 수신 모듈; 및
상기 픽셀 인코딩된 데이터에 따라 3차원 비디오 데이터의 픽셀 값을 복원 - 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행하기 전의 데이터양은 제1 데이터양이고; 상기 3차원 비디오 데이터에 대해 픽셀 인코딩을 수행한 후의 데이터양은 제2 데이터양이며; 상기 제1 데이터양은 상기 제2 데이터양보다 큼 - 하기 위한 복원 모듈;
을 포함하는 것을 특징으로 하는,
데이터 처리 장치. - 제24항에 있어서,
상기 복원 모듈은,
상기 픽셀 인코딩된 데이터의 컬러 인코딩된 데이터에 따라, 상기 3차원 비디오 데이터의 컬러 픽셀 값을 복원하기 위한 색상 복원 서브 모듈; 및
상기 픽셀 인코딩된 데이터의 깊이 값 인코딩된 데이터에 따라, 상기 3차원 비디오 데이터의 깊이 값 픽셀 값을 복원하기 위한 깊이 값 복원 서브 모듈;
중 적어도 하나를 포함하는 것을 특징으로 하는,
데이터 처리 장치. - 제24항 또는 제25항에 있어서,
상기 픽셀 인코딩된 데이터의 픽셀 인코딩 방식을 결정하기 위한 결정 모듈;
을 더 포함하며;
상기 복원 모듈은, 구체적으로 상기 픽셀 인코딩 방식에 따라, 상기 픽셀 인코딩된 데이터에 대해 픽셀 디코딩을 수행하여 상기 3차원 비디오 데이터의 픽셀 값을 획득하기 위한 것임을 특징으로 하는,
데이터 처리 장치. - 제26항에 있어서,
상기 결정 모듈은,
상기 3차원 비디오 데이터가 포함하는 픽셀 개수를 결정하고, 상기 픽셀 인코딩된 데이터의 데이터 개수를 결정하며; 상기 픽셀 개수 및 상기 데이터 개수에 따라, 상기 픽셀 인코딩 방식을 결정하기 위한 제1 결정 서브 모듈; 및
상기 단말과 픽셀 인코딩 파라미터를 인터랙션 - 상기 픽셀 인코딩 파라미터는 적어도 픽셀 인코딩 방식을 포함함 - 하기 위한 제2 결정 서브 모듈;
중 적어도 하나를 포함하는 것을 특징으로 하는,
데이터 처리 장치. - 제26항에 있어서,
상기 복원 모듈은 구체적으로,
단일 픽셀 인코딩 방식에 따라, 단일 픽셀의 상기 픽셀 인코딩된 데이터에 대해 디코딩을 수행하여 3차원 비디오 데이터 픽셀 값을 복원하는 단계; 및
통합 픽셀 인코딩 방식에 따라, N*M 개의 픽셀의 상기 픽셀 인코딩된 데이터에 대해 디코딩을 수행하여 상기 3차원 비디오 데이터 픽셀 값을 복원하는 단계;
중 적어도 하나를 실행하기 위한 것임을 특징으로 하는,
데이터 처리 장치. - 제24항 또는 제25항에 있어서,
상기 복원 모듈은 구체적으로 상기 픽셀 인코딩된 데이터에 따라 픽셀 코드 매핑 관계를 조회하여, 상기 픽셀 인코딩된 데이터와 대응되는 픽셀 값을 획득하기 위한 것임을 특징으로 하는,
데이터 처리 장치. - 제29항에 있어서,
상기 픽셀 인코딩된 데이터에 따라 3차원 비디오 데이터의 픽셀 값을 복원하기 전에, 상기 단말에 의해 송신된 업데이트된 픽셀 코드 매핑 관계 또는 상기 픽셀 코드 매핑 관계에서의 업데이트된 부분을 수신하기 위한 수신 모듈;
을 더 포함하는 것을 특징으로 하는,
데이터 처리 장치.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811162342.8 | 2018-09-30 | ||
| CN201811162342.8A CN109257609B (zh) | 2018-09-30 | 2018-09-30 | 数据处理方法及装置、电子设备及存储介质 |
| PCT/CN2019/106501 WO2020063422A1 (en) | 2018-09-30 | 2019-09-18 | Methods and devices for data processing, electronic device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20210020103A true KR20210020103A (ko) | 2021-02-23 |
| KR102521595B1 KR102521595B1 (ko) | 2023-04-12 |
Family
ID=65045321
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020217000946A KR102521595B1 (ko) | 2018-09-30 | 2019-09-18 | 데이터 처리 방법 및 장치, 전자 기기 및 저장 매체 |
Country Status (8)
| Country | Link |
|---|---|
| US (1) | US20200107030A1 (ko) |
| EP (1) | EP3629578A1 (ko) |
| JP (1) | JP7105358B6 (ko) |
| KR (1) | KR102521595B1 (ko) |
| CN (1) | CN109257609B (ko) |
| AU (1) | AU2019345715B2 (ko) |
| BR (1) | BR112021001137A2 (ko) |
| WO (1) | WO2020063422A1 (ko) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2022173276A1 (ko) | 2021-02-15 | 2022-08-18 | 주식회사 엘지화학 | 양극 활물질용 전구체 및 그 제조 방법 |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109257609B (zh) * | 2018-09-30 | 2021-04-23 | Oppo广东移动通信有限公司 | 数据处理方法及装置、电子设备及存储介质 |
| CN112672132B (zh) | 2018-09-30 | 2023-12-26 | Oppo广东移动通信有限公司 | 数据处理方法及装置、电子设备及存储介质 |
| CN113900800B (zh) * | 2021-09-17 | 2022-08-19 | 中标慧安信息技术股份有限公司 | 一种边缘计算系统的分配方法 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2013039363A2 (ko) * | 2011-09-16 | 2013-03-21 | 한국전자통신연구원 | 영상 부호화/복호화 방법 및 그 장치 |
| JP2016537871A (ja) * | 2013-10-18 | 2016-12-01 | エルジー エレクトロニクス インコーポレイティド | マルチビュービデオのデコード方法及び装置 |
| US20170244948A1 (en) * | 2015-04-15 | 2017-08-24 | Lytro, Inc. | Spatial random access enabled video system with a three-dimensional viewing volume |
Family Cites Families (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010510558A (ja) * | 2006-10-11 | 2010-04-02 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 三次元グラフィックスのデータの作成 |
| CN102792699A (zh) * | 2009-11-23 | 2012-11-21 | 通用仪表公司 | 作为到视频序列的附加通道的深度代码化 |
| CN102223541B (zh) * | 2011-07-14 | 2013-07-03 | 北京工业大学 | 一种混合图像的编码方法 |
| WO2014005297A1 (en) | 2012-07-04 | 2014-01-09 | Intel Corporation | Panorama based 3d video coding |
| US20140009576A1 (en) * | 2012-07-05 | 2014-01-09 | Alcatel-Lucent Usa Inc. | Method and apparatus for compressing, encoding and streaming graphics |
| US11259020B2 (en) | 2013-04-05 | 2022-02-22 | Qualcomm Incorporated | Determining palettes in palette-based video coding |
| CN105611274B (zh) * | 2016-01-08 | 2017-07-18 | 湖南拓视觉信息技术有限公司 | 一种三维图像数据的传输方法、装置及三维成像系统 |
| JP6953706B2 (ja) | 2016-11-22 | 2021-10-27 | ソニーグループ株式会社 | 基地局 |
| CN106507107B (zh) * | 2016-12-08 | 2019-07-05 | 北京数码视讯科技股份有限公司 | 数据的处理方法和装置 |
| CN108235007B (zh) * | 2016-12-12 | 2023-06-27 | 上海天荷电子信息有限公司 | 各模式使用不同精度同种编码参数的数据压缩方法和装置 |
| CN108521436B (zh) * | 2018-02-01 | 2020-11-17 | 上海交通大学 | 基于终端计算存储的移动虚拟现实传输方法及系统 |
| CN108512651B (zh) * | 2018-03-19 | 2020-05-19 | 网御安全技术（深圳）有限公司 | 一种人工智能图像辨识攻击防御方法、系统及存储介质 |
| CN108600168A (zh) * | 2018-03-19 | 2018-09-28 | 网御安全技术（深圳）有限公司 | 一种用于人工智能图像辨识攻击的安全编码方法及系统 |
| CN108600728A (zh) * | 2018-05-10 | 2018-09-28 | Oppo广东移动通信有限公司 | 一种数据传输方法及终端、计算机存储介质 |
| CN108495112B (zh) * | 2018-05-10 | 2020-12-22 | Oppo广东移动通信有限公司 | 数据传输方法及终端、计算机存储介质 |
| CN108566554A (zh) * | 2018-05-11 | 2018-09-21 | 北京奇艺世纪科技有限公司 | 一种vr全景视频处理方法、系统及电子设备 |
| CN109274976B (zh) * | 2018-09-30 | 2021-07-20 | Oppo广东移动通信有限公司 | 数据处理方法及装置、电子设备及存储介质 |
| CN112672132B (zh) * | 2018-09-30 | 2023-12-26 | Oppo广东移动通信有限公司 | 数据处理方法及装置、电子设备及存储介质 |
| CN109257609B (zh) * | 2018-09-30 | 2021-04-23 | Oppo广东移动通信有限公司 | 数据处理方法及装置、电子设备及存储介质 |
-
2018
- 2018-09-30 CN CN201811162342.8A patent/CN109257609B/zh active Active
-
2019
- 2019-09-12 EP EP19196943.5A patent/EP3629578A1/en not_active Ceased
- 2019-09-18 WO PCT/CN2019/106501 patent/WO2020063422A1/en active Application Filing
- 2019-09-18 KR KR1020217000946A patent/KR102521595B1/ko active IP Right Grant
- 2019-09-18 AU AU2019345715A patent/AU2019345715B2/en active Active
- 2019-09-18 BR BR112021001137-4A patent/BR112021001137A2/pt unknown
- 2019-09-18 JP JP2021500448A patent/JP7105358B6/ja active Active
- 2019-09-27 US US16/585,137 patent/US20200107030A1/en not_active Abandoned
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2013039363A2 (ko) * | 2011-09-16 | 2013-03-21 | 한국전자통신연구원 | 영상 부호화/복호화 방법 및 그 장치 |
| JP2016537871A (ja) * | 2013-10-18 | 2016-12-01 | エルジー エレクトロニクス インコーポレイティド | マルチビュービデオのデコード方法及び装置 |
| US20170244948A1 (en) * | 2015-04-15 | 2017-08-24 | Lytro, Inc. | Spatial random access enabled video system with a three-dimensional viewing volume |
Non-Patent Citations (2)
| Title |
|---|
| Michael Schneider et al, Augmented reality based on edge computing using the example of remote live support, 2017 IEEE International Conference on Industrial Technology (ICIT) (2017.03.22.) 1부.* * |
| 유강수 외, 픽셀 빈도수를 이용한 무손실 영상 압축 기법, 제26회 한국정보처리학회 추계학술발표대회 논문집, 제13권 제2호(2006.11.) 1부.* * |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2022173276A1 (ko) | 2021-02-15 | 2022-08-18 | 주식회사 엘지화학 | 양극 활물질용 전구체 및 그 제조 방법 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109257609B (zh) | 2021-04-23 |
| AU2019345715B2 (en) | 2022-06-02 |
| WO2020063422A1 (en) | 2020-04-02 |
| KR102521595B1 (ko) | 2023-04-12 |
| US20200107030A1 (en) | 2020-04-02 |
| BR112021001137A2 (pt) | 2021-04-20 |
| EP3629578A1 (en) | 2020-04-01 |
| JP7105358B2 (ja) | 2022-07-22 |
| CN109257609A (zh) | 2019-01-22 |
| JP7105358B6 (ja) | 2022-09-30 |
| JP2021531688A (ja) | 2021-11-18 |
| AU2019345715A1 (en) | 2021-01-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102521595B1 (ko) | 데이터 처리 방법 및 장치, 전자 기기 및 저장 매체 | |
| US11368718B2 (en) | Data processing method and non-transitory computer storage medium | |
| US11153593B2 (en) | Decoding method, encoding method, and electronic apparatus for decoding/coding | |
| TWI680671B (zh) | 圖片檔處理方法、設備及系統以及儲存介質 | |
| CN103281539B (zh) | 一种图像编、解码处理的方法、装置及终端 | |
| CN109274976B (zh) | 数据处理方法及装置、电子设备及存储介质 | |
| US11631217B2 (en) | Data processing method and electronic device | |
| WO2016172994A1 (zh) | 图像编码、解码方法及装置 | |
| CN111246208B (zh) | 视频处理方法、装置及电子设备 | |
| WO2023214718A1 (ko) | 무선 통신 시스템에서 ar 스플릿 렌더링을 제공하기 위한 방법 및 장치 | |
| WO2020063171A1 (zh) | 数据传输方法、终端、服务器和存储介质 | |
| CN110677676A (zh) | 视频编码方法和装置、视频解码方法和装置及存储介质 | |
| RU2799771C2 (ru) | Способы и устройства для обработки данных, электронное устройство | |
| CN101065760B (zh) | 处理图像数据的系统和方法 | |
| CN109309839B (zh) | 数据处理方法及装置、电子设备及存储介质 | |
| US7974339B2 (en) | Optimized data transmission system and method | |
| CN109389675B (zh) | 数据处理方法及装置、终端及存储介质 | |
| CN105812823A (zh) | Hevc中帧内预测的参考像素替换方法与装置 | |
| CN112188237A (zh) | 节目分发方法和装置、接收方法、终端设备及介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal | ||
| AMND | Amendment | ||
| E90F | Notification of reason for final refusal | ||
| AMND | Amendment | ||
| E601 | Decision to refuse application | ||
| E801 | Decision on dismissal of amendment | ||
| AMND | Amendment | ||
| X701 | Decision to grant (after re-examination) | ||
| GRNT | Written decision to grant |