KR20220149574A - 3차원 비디오의 처리 방법, 장치, 판독 가능 저장매체 및 전자기기 - Google Patents

3차원 비디오의 처리 방법, 장치, 판독 가능 저장매체 및 전자기기 Download PDF

Info

Publication number
KR20220149574A
KR20220149574A KR1020227033921A KR20227033921A KR20220149574A KR 20220149574 A KR20220149574 A KR 20220149574A KR 1020227033921 A KR1020227033921 A KR 1020227033921A KR 20227033921 A KR20227033921 A KR 20227033921A KR 20220149574 A KR20220149574 A KR 20220149574A
Authority
KR
South Korea
Prior art keywords
initial
video
terminal
target
image
Prior art date
Application number
KR1020227033921A
Other languages
English (en)
Other versions
KR102657674B1 (ko
Inventor
슈펑 장
이아멍 리
지유 리
닝페이 양
스쉬에 리우
Original Assignee
베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 filed Critical 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드
Publication of KR20220149574A publication Critical patent/KR20220149574A/ko
Application granted granted Critical
Publication of KR102657674B1 publication Critical patent/KR102657674B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/158Switching image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/122Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/161Encoding, multiplexing or demultiplexing different image signal components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/261Image signal generators with monoscopic-to-stereoscopic image conversion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23424Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Processing Or Creating Images (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본 출원은 3차원 비디오의 처리 방법, 장치, 판독 가능 저장매체 및 전자기기를 제공하며, 전자 정보 기술분야에 관한 것으로서, 상기 방법은 단말기에 적용되고, 서버가 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록, 초기 2차원 이미지를 서버로 송신하고, 서버로부터 송신되는 초기 3차원 비디오를 수신하는 단계, 및 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 단계를 포함한다. 본 출원은 단말기 상의 2차원 이미지를 서버로 업로드하고, 서버를 이용하여 2차원 이미지를 3차원 비디오로 변환하고, 나아가 단말기에 의해 3차원 비디오에 대해 처리함으로써, 단말기의 하드웨어 장치에 변경할 필요가 없이, 로컬의 2차원 이미지로부터 개인화 수요를 만족하는 3차원 비디오를 신속하게 생성할 수 있다.

Description

3차원 비디오의 처리 방법, 장치, 판독 가능 저장매체 및 전자기기
본 출원은 전자 정보 기술분야에 관한 것이며, 구체적으로, 3차원 비디오의 처리 방법, 장치, 판독 가능 저장매체 및 전자기기에 관한 것이다.
본 출원은 2020년 3월 27일 출원한 출원번호가 202010232159.1이고, 명칭이 “3차원 비디오의 처리 방법, 장치, 판독 가능 저장매체 및 전자기기”인 중국 특허 출원의 우선권을 주장하며, 해당 출원의 내용은 본 명세서에 원용된다.
단말 기술 및 이미지 처리 기술의 지속적인 발전으로, 단말기에서 제공할 수 있는 이미지 처리 조작도 점점 더 풍부해지고 있다. 예를 들어, 단말기는 3차원(영어: 3-Dimension, 약어: 3D) 이미지 또는 비디오를 촬영하여, 사용자에게 보다 풍부한 시각적 체험을 제공할 수 있다. 일반적으로 단말기에 3D 카메라나 외부 3D 카메라를 설치하여야, 3차원 이미지나 비디오를 수집할 수 있다. 그러나, 3D 카메라는 보다 고가이고, 단말기의 하드웨어를 변경해야 하므로, 원가가 높고, 조작이 번거롭기 때문에, 단말기에서의 사용자의 시각적 체험이 제한된다.
해당 발명의 내용 부분을 제공하여 구상을 간략하게 소개하며, 이러한 구상은 아래의 구체적인 실시형태 부분에서 상세하게 기재된다. 상기 발명의 내용 부분은 보호받으려는 기술방안의 관건적 특징 또는 필수 특징을 한정하려는 목적이 아니며, 보호받으려는 기술방안의 범위를 한정하는 것도 아니다.
제1 측면에 따르면, 본 출원은 3차원 비디오의 처리 방법을 제공하며, 단말기에 적용되고, 상기 방법은,
적어도 하나의 초기 2차원 이미지를 서버로 송신하여, 상기 서버가 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하는 단계;
상기 서버로부터 송신되는 상기 초기 3차원 비디오를 수신하는 단계; 및
상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 단계;를 포함한다.
제2 측면에 따르면, 본 출원은 3차원 비디오의 처리 방법을 제공하며, 서버에 적용되고, 상기 방법은,
단말기로부터 송신되는 적어도 하나의 초기 2차원 이미지를 수신하고, 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하는 단계; 및
상기 단말기가 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하도록, 상기 초기 3차원 비디오를 상기 단말기로 송신하는 단계;를 포함한다.
제3 측면에 따르면, 본 출원은 3차원 비디오의 처리 장치를 제공하며, 상기 처리 장치는,
적어도 하나의 초기 2차원 이미지를 서버로 송신하여, 상기 서버가 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하는 송신 모듈;
상기 서버로부터 송신되는 상기 초기 3차원 비디오를 수신하는 수신 모듈; 및
상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 처리 모듈을 포함한다.
제4 측면에 따르면, 본 출원은 3차원 비디오의 처리 장치를 제공하며, 상기 처리 장치는,
단말기로부터 송신되는 적어도 하나의 초기 2차원 이미지를 수신하고, 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하는 수신 모듈; 및
상기 단말기가 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하도록, 상기 초기 3차원 비디오를 상기 단말기로 송신하는 송신 모듈;을 포함한다.
제5 측면에 따르면, 본 출원은 컴퓨터 판독 가능 저장매체를 제공하며, 컴퓨터 프로그램이 저장되어 있고, 상기 프로그램이 프로세서에 의해 실행될 때 본 출원의 제1 측면에 따른 방법을 구현한다.
제6 측면에 따르면, 본 출원은 전자기기를 제공하며,
컴퓨터 프로그램이 저장되어 있는 메모리;
상기 메모리에 저장된 상기 컴퓨터 프로그램을 실행하여, 본 출원의 제1 측면에 따른 방법을 구현하는 프로세서;를 포함한다.
제7 측면에 따르면, 본 출원은 컴퓨터 판독 가능 저장매체를 제공하며, 컴퓨터 프로그램이 저장되어 있고, 상기 프로그램이 프로세서에 의해 실행될 때 본 출원의 제2 측면에 따른 방법을 구현한다.
제8 측면에 따르면, 본 출원은 전자기기를 제공하며,
컴퓨터 프로그램이 저장되어 있는 메모리;
상기 메모리에 저장된 상기 컴퓨터 프로그램을 실행하여, 본 출원의 제2 측면에 따른 방법을 구현하는 프로세서;를 포함한다.
제9 면에 따르면, 본 출원은 3차원 비디오의 처리 시스템을 제공하며, 상기 시스템은 단말기와 서버를 포함하고;
상기 단말기는 본 출원의 제1 측면에 따른 방법을 구현하기 위한 것이고;
상기 서버는 본 출원의 제2 측면에 따른 방법을 구현하기 위한 것이다.
제10 측면에 따르면, 본 출원의 일부 실시예는 컴퓨터 프로그램 제품을 제공하며, 컴퓨터 판독 가능 매체 상에 적재되는 컴퓨터 프로그램을 포함하고, 상기 컴퓨터 프로그램이 프로세서에 의해 실행될 때, 프로세서가 본 출원의 제1 측면에 따른 방법을 구현하도록 한다.
제11 측면에 따르면, 본 출원의 일부 실시예는 컴퓨터 프로그램 제품을 제공하며, 컴퓨터 판독 가능 매체 상에 적재되는 컴퓨터 프로그램을 포함하고, 상기 컴퓨터 프로그램이 프로세서에 의해 실행될 때, 프로세서가 본 출원의 제2 측면에 따른 방법을 구현하도록 한다.
제12 측면에 따르면, 본 출원은 컴퓨터 프로그램을 제공하며, 전자기기에서 실행될 때, 전자기기가 본 출원의 제1 측면에 따른 방법을 구현하도록 한다.
제13 측면에 따르면, 본 출원은 컴퓨터 프로그램을 제공하며, 전자기기에서 실행될 때, 전자기기가 본 출원의 제2 측면에 따른 방법을 구현하도록 한다.
상술한 기술방안을 통해, 본 출원에서 단말기는 우선 초기 2차원 이미지를 서버로 송신하여, 서버가 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하고, 단말기는 서버로부터 초기 3차원 비디오를 획득하고, 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득한다. 본 출원은 단말기 상의 2차원 이미지를 서버로 업로드하고, 서버를 이용하여 2차원 이미지를 3차원 비디오로 변환하고, 나아가 단말기에 의해 3차원 비디오에 대해 처리함으로써, 단말기의 하드웨어 장치를 변경할 필요가 없이, 로컬의 2차원 이미지를 이용하여 개인화 수요를 만족하는 3차원 비디오를 신속하게 생성할 수 있으며, 사용자의 조작 체험과 시각적 체험을 향상시킨다.
본 출원의 기타 특징 및 이점은 아래의 구체적인 실시형태 부분을 통해 상세하게 설명된다.
첨부 도면을 결합하고 아래 구체적인 실시형태를 참조하면, 본 출원의 각 실시예의 상술한 및 기타 특징, 장점 및 측면이 더욱 명확해 질 것이다. 첨부 도면에 걸쳐, 동일하거나 유사한 도면부호는 동일하거나 유사한 요소를 나타낸다. 첨부 도면은 예시적인 것으로 이해하여야 하고, 원본과 요소는 비율에 따라 제도되지 않을 수 있다.
도 1은 단말기와 서버가 데이터 전송을 수행하는 것을 나타내는 도면이다.
도 2는 일 예시적 실시예에 따른 3차원 비디오의 처리 방법의 흐름도이다.
도 3은 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 방법의 흐름도이다.
도 4는 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 방법의 흐름도이다.
도 5는 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 방법의 흐름도이다.
도 6은 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 방법의 흐름도이다.
도 7은 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 방법의 흐름도이다.
도 8은 일 예시적 실시예에 따른 3차원 비디오의 처리 방법의 흐름도이다.
도 9는 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 방법의 흐름도이다.
도 10은 일 예시적 실시예에 따른 3차원 비디오의 처리 장치의 블록도이다.
도 11은 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 장치의 블록도이다.
도 12는 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 장치의 블록도이다.
도 13은 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 장치의 블록도이다.
도 14는 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 장치의 블록도이다.
도 15는 일 예시적 실시예에 따른 3차원 비디오의 처리 장치의 블록도이다.
도 16은 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 장치의 블록도이다.
도 17은 일 예시적 실시예에 따른 3차원 비디오의 처리 시스템의 블록도이다.
도 18은 일 예시적 실시예에 따른 전자기기의 구성을 나타내는 도면이다.
아래 첨부 도면을 참조하여 본 출원의 실시예에 대해 더욱 상세하게 설명한다. 첨부 도면에 본 출원의 일부 실시예가 도시되어 있지만, 본 출원은 다양한 형태로 구현될 수 있으며, 여기서 기재되는 실시예에 제한되는 것으로 해석되어서는 안되며, 반대로 이러한 실시예를 제공함으로써 본 출원을 더욱 명확하고 완전하게 이해하도록 하기 위한 것으로 이해해야 한다. 본 출원의 첨부 도면 및 실시예는 단지 예시적 역할을 위한 것으로, 본 출원의 보호 범위를 한정하지 않는다는 점을 이해하여야 한다.
이해해야 할 점은, 본 출원의 방법 실시형태에 기재된 각 단계는 서로 다른 순서에 따라 실행되거나, 및/또는 병렬로 수행될 수 있다는 점을 이해하여야 한다. 또한, 방법 실시형태는 추가적인 단계를 포함 및/또는 도시된 단계의 실행을 생략할 수 있다. 본 출원의 범위는 이러한 측면에서는 제한되지 않는다.
본 문에서 사용되는 "포함" 및 그 변형은 개방형 포함으로서, 즉 "포함하지만 한정하지 않는다"이다. 용어 "기반하여"는 "적어도 부분적으로 기반하여"이다. 용어 "일 실시예"는 "적어도 하나의 실시예"를 표시하고; 용어 "다른 실시예"는 "적어도 하나의 다른 실시예"를 표시하며; 용어 "일부 실시예"는 "적어도 일부 실시예"를 표시한다. 기타 용어의 관련 정의는 아래의 설명에서 주어진다.
본 출원에서 언급되는 “제1 ”, “제2 ” 등의 개념은 서로 다른 장치, 모듈 또는 유닛을 구분하기 위한 것일 뿐, 이러한 장치, 모듈 또는 유닛에 의해 수행되는 기능의 순서 또는 상호 의존 관계를 한정하기 위한 것은 아니다.
주의하여야 할 점은, 본 출원에서 언급되는 “하나”, “복수”와 같은 수식어는 한정하기 위한 것이 아니라 예시적인 것이며, 당업자는 문맥에서 명확하게 나타나 있지 않는 한, “하나 또는 복수”로 이해하여야 한다는 점을 이해하여야 한다.
본 출원의 실시형태 중의 복수의 장치 간에 인터랙션하는 메시지 또는 정보의 명칭은 설명의 목적으로 사용될 뿐, 이러한 메시지 또는 정보의 범위를 한정하는 것은 아니다.
본 출원에서 제공하는 3차원 비디오의 처리 방법, 장치, 판독 가능 저장매체 및 전자기기를 소개하기 전에, 우선 본 출원의 각각의 실시예에 관한 응용 시나리오에 대해 소개한다. 상기 응용 시나리오는 단말기와 서버를 포함할 수 있고, 단말기와 서버 간에 데이터 전송을 수행할 수 있다. 여기서, 단말기는 모바일폰, 노트북, 디지털 방송 수신기, PDA(개인 휴대 단말), PAD(태블릿 컴퓨터), PMP(휴대용 멀티미디어 플레이어), 차량용 단말(예를 들어 차량용 네비게이션 단말) 등의 모바일 단말 및 디지털 TV, 데시크탑 컴퓨터 등의 고정 단말을 포함할 수 있지만 이에 제한되지 않는다. 서버는 엔티티 서버, 서버 클러스터 또는 클라우드 서버 등을 포함할 수 있지만 이에 제한되지 않는다. 구체적인 구현 시나리오에서, 하나 또는 복수의 단말기, 하나 또는 복수의 서버를 포함할 수 있으며, 도 1에 도시된 바와 같이, 단말기(20)는 적어도 하나의 초기 2차원 이미지를 서버(10)로 송신할 수 있고, 서버(10)는 적어도 하나의 초기 2차원 이미지를 수신한 후, 기설정 알고리즘에 따라 수신된 적어도 하나의 초기 2차원 이미지에 대해 처리하여 초기 3차원 비디오를 획득하고, 초기 3차원 비디오를 단말기(20)로 송신한다. 단말기(20)는 서버(10)로부터 초기 3차원 비디오를 획득하고, 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득한다.
도 2는 일 예시적 실시예에 따른 3차원 비디오의 처리 방법의 흐름도이다. 도 2에 도시된 바와 같이, 상기 방법은 단말기에 적용될 수 있고, 상기 방법은 아래의 단계들을 포함할 수 있다.
단계(101), 적어도 하나의 초기 2차원 이미지를 서버로 송신하여, 서버가 수신된 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 한다.
예를 들면, 초기 2차원 이미지는 사용자가 단말기를 통해 실시간으로 수집한 2차원 이미지(예를 들어, 단말기를 통해 실시간으로 촬영한 2차원 사진)를 포함할 수 있고, 사용자가 단말기에 저장되어 있는 2차원 이미지로부터 선택한 이미지(예를 들어, 단말기의 표시 인터페이스 상에서 선택한 2차원 이미지)를 포함할 수도 있다. 단말기는 서버로 하나 또는 복수의 초기 2차원 이미지를 송신할 수 있다. 단말기는 우선 송신할 초기 2차원 이미지에 대해 코딩한 후, 코딩 후의 초기 2차원 이미지를 서버로 송신할 수 있고, 단말기는 특정 코딩 방안을 사용하여 상기 적어도 하나의 초기 2차원 이미지의 단말기와 서버 사이에서의 전송 품질과 효율을 확보할 수 있으며, 상응하게, 서버는 수신된 코딩 된 후의 상기 적어도 하나의 초기 2차원 이미지에 디코딩하여, 디코딩 후의 상기 적어도 하나의 초기 2차원 이미지를 획득할 수 있다.
서버는 단말기로부터 송신되는 상기 적어도 하나의 초기 2차원 이미지를 수신한 후, 기설정 알고리즘에 따라 수신된 상기 적어도 하나의 초기 2차원 이미지에 대해 처리하여, 상기 적어도 하나의 초기 2차원 이미지에 대응되는 초기 3차원 비디오를 획득할 수 있다. 기설정 알고리즘은 연산량이 보다 커서, 일정한 연산 리소스와 저장 리소스를 소모하여야 하므로, 초기 2차원 이미지를 초기 3차원 비디오로 변환하는 처리 단계를 서버를 통해 완성하여, 단말기의 연산 리소스와 저장 리소스가 제한되어 있는 제약을 받지 않으며, 이미지 처리의 처리 속도와 신뢰성을 향상시키고, 또한 사용자의 조작 체험과 시각적 체험을 향상시킨다.
일 실시예에서, 초기 2차원 이미지가 수신될 때, 서버는 순차적으로 각각의 초기 2차원 이미지에 대해 처리하여, 각각의 초기 2차원 이미지에 대응되는 3차원 비디오 섹션을 획득할 수 있으며, 즉 초기 3차원 비디오는 각각의 초기 2차원 이미지에 대응되는 3차원 비디오 섹션을 포함한다. 서버는 각각의 초기 2차원 이미지에 대응되는 3차원 비디오 섹션에 대해 병합하여, 하나의 병합 후의 3차원 비디오를 초기 3차원 비디오로서 획득한다. 또한, 서버는 또한 임의의 하나 또는 복수의 초기 2차원 이미지에 대응되는 3차원 비디오 섹션에 대해 렌더링하여, 대응되는 렌더링 후의 3차원 비디오 섹션을 획득할 수 있으며, 서버는 모든 3차원 비디오 섹션에 대해 병합하고, 획득한 병합 후의 3차원 비디오를 초기 3차원 비디오로 한다.
서버는 초기 3차원 비디오를 생성한 후, 초기 3차원 비디오를 단말기로 송신할 수 있다. 일 실시예에서, 서버는 스트리밍 방식으로 초기 3차원 비디오를 단말기로 송신할 수 있으며, 예를 들어, 서버는 실시간 스트리밍(영어: Realtime Streaming) 또는 순차적 스트리밍(영어: Progressive Streaming) 등의 방식을 사용하여 초기 3차원 비디오를 단말기로 송신할 수 있고, 본 출원은 이에 대해 제한하지 않는다.
단계(102), 서버로부터 송신되는 초기 3차원 비디오를 수신한다.
단계(103), 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득한다.
단말기는 초기 3차원 비디오를 획득한 후, 우선 초기 3차원 비디오를 저장하여, 향후에 다시 상기 초기 3차원 비디오에 대해 조작할 때 바로 로컬로부터 상기 초기 3차원 비디오를 획득할 수 있으며, 다시 서버로부터 획득할 필요가 없도록 한다. 다음, 단말기는 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득한다. 또한, 단말기는 초기 3차원 비디오를 수신한 후 상기 초기 3차원 비디오를 저장하지 않고 상기 초기 3차원 비디오에 대해 처리할 수도 있으며, 본 출원은 이에 대해 제한하지 않는다.
일 실시예에서, 서버는 기설정 알고리즘에 따라 초기 2차원 이미지에 대해 처리하여 초기 3차원 비디오를 획득하는 과정에서, 각각의 초기 2차원 이미지에 포함된 이미지 컨텐츠를 기초로, 각각의 초기 2차원 이미지를 대응되는 3차원 비디오 섹션으로 변환하고, 각각의 초기 2차원 이미지에 대응되는 3차원 비디오 섹션에 대해 병합 등의 처리를 수행한 후 획득되는 3차원 비디오를 초기 3차원 비디오로서 단말기로 송신할 수 있다. 단말기는 우선 초기 3차원 비디오에 대해 디코딩하여, 초기 3차원 비디오의 초기 이미지 프레임 집합을 획득할 수 있고, 초기 이미지 프레임 집합은 복수의 초기 이미지 프레임을 포함한다. 다음, 단말기는 사용자의 구체적인 수요에 따라, 초기 이미지 프레임 집합 중의 초기 이미지 프레임에 대해 처리할 수 있다. 초기 이미지 프레임 집합에 대해 처리할 때, 단말기는 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링 및 스플라이싱을 수행할 수 있고, 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해서만 렌더링할 수도 있고, 초기 이미지 프레임 집합 중의 복수의 초기 이미지 프레임에 대해서만 스플라이싱을 수행할 수도 있다. 여기서, 렌더링은 예를 들어 초기 이미지 프레임 상에 문자, 특수 효과, 필터 추가하는 것 등을 포함할 수 있고, 또한 초기 이미지 프레임에 대해 크롭, 확대, 축소, 가로 화면으로부터 세로 화면으로 변경, 세로 화면으로부터 가로 화면으로 변경 등의 조작을 포함할 수 있다. 스플라이싱은 예를 들어 복수의 초기 이미지 프레임에 대해, 서로 다른 장면 전환 효과를 선택하여 스플라이싱하는 것을 포함할 수 있으며, 장면 전환 효과는 예를 들어 가속, 감속, 수평 스트로크, 겹침, 페이지 말림, 수평 라인, 수직 라인, 레이어 푸시, 회전 등을 포함하지만 이에 제한되지 않는다.
다른 실시예에서, 서버는 기설정 알고리즘에 따라 초기 2차원 이미지에 대해 처리하여 초기 3차원 비디오를 획득하는 과정에서, 우선 각각의 초기 2차원 이미지에 포함된 이미지 컨텐츠를 기초로, 각각의 초기 2차원 이미지를 대응되는 3차원 비디오 섹션으로 변환한 후, 단말기의 사용자의 구체적인 수요에 따라, 하나 또는 복수의 3차원 비디오 섹션에 대해 렌더링 및 스플라이싱 조작을 수행하여 초기 3차원 비디오를 획득할 수 있다. 이렇게, 단말기는 초기 3차원 비디오를 처리할 때 렌더링과 스플라이싱 조작을 생략하여 타겟 3차원 비디오를 획득할 수 있다. 예를 들어, 단말기는 사용자의 수요와 초기 2차원 이미지를 서버로 송신하여, 서버가 상기 수요에 따라 기설정 알고리즘 및 렌더링, 스플라이싱 조작을 수행함으로써 초기 3차원 비디오를 생성할 수 있도록 할 수 있으며, 이렇게 3차원 비디오 렌더링과 스플라이싱 조작의 단말기 상의 연산 리소스와 저장 리소스에 대한 소모를 줄일 수 있다. 따라서, 초기 3차원 비디오에 대해 렌더링 및 스플라이싱하는 단계를 서버에 의해 완성하므로, 단말기의 연산 리소스와 저장 리소스가 제한되어 있는 제약을 받지 않으며, 이미지 처리의 처리 속도와 신뢰성을 향상시키고, 또한 사용자의 조작 체험과 시각적 체험을 향상시킨다.
타겟 3차원 비디오를 획득한 후, 단말기는 디스플레이에 타겟 3차원 비디오를 표시할 수 있고, 단말기는 타겟 3차원 비디오를 단말기의 메모리에 저장하여, 사용자가 수시로 조회 가능하도록 할 수도 있으며, 또한, 단말기는 타겟 3차원 비디오를 네트워크를 통해 공유할 수도 있으며, 예를 들어 타겟 3차원 비디오를 소정 APP(영어: Application, 중국어: 응용프로그램)을 통해 공유할 수 있다. 본 출원은 이에 대해 구체적으로 한정하지 않는다.
본 출원 중의 단말기가 획득한 타겟 3차원 비디오에 대하여, 초기 2차원 이미지를 기초로 생성된 초기 3차원 비디오의 기초 상에서, 상응한 처리를 거쳐 타겟 3차원 비디오를 획득하고, 사용자의 구체적인 수요에 따라, 3차원 비디오의 방식으로 초기 2차원 이미지를 전시하는 것으로 이해할 수 있으며, 이에 따라 단말기의 하드웨어 장치에 대해 변경하지 않고도, 사용자에게 풍부한 시각적 체험과 조작 체험을 제공한다.
상술한 바와 같이, 본 출원의 단말기는 우선 적어도 하나의 초기 2차원 이미지를 서버로 송신하여, 서버가 수신된 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하고, 단말기는 서버로부터 초기 3차원 비디오를 획득하고, 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득한다. 본 출원은 단말기 상의 2차원 이미지를 서버로 업로드하고, 서버를 이용하여 2차원 이미지를 3차원 비디오로 변환하고, 나아가 단말기가 3차원 비디오에 대해 처리하여, 단말기의 하드웨어 장치에 대해 변경할 필요가 없이, 로컬의 2차원 이미지로부터 개인화 수요를 만족하는 3차원 비디오를 신속하게 생성할 수 있으며, 사용자의 조작 체험과 시각적 체험을 향상시킨다.
도 3은 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 방법의 흐름도이다. 도 3에 도시된 바와 같이, 도 2 중의 단계(103)의 구현 형태는 아래의 단계를 포함할 수 있다.
단계(1031), 디코딩 파라미터를 기초로 초기 3차원 비디오에 대해 디코딩하여, 초기 3차원 비디오의 초기 이미지 프레임 집합을 획득한다.
단계(1032), 설정 파라미터를 기초로 초기 이미지 프레임 집합에 대해 처리하여 타겟 3차원 비디오를 획득한다.
구체적으로, 단말기는 초기 3차원 비디오를 획득한 후, 디코딩 파라미터를 기초로 초기 3차원 비디오에 대해 디코딩하여, 초기 3차원 비디오의 초기 이미지 프레임 집합을 획득할 수 있다. 여기서, 디코딩 파라미터는 초기 3차원 비디오의 프레임 레이트, 이미지 프레임 해상도 등을 포함할 수 있다.
설정 파라미터는 렌더링 파라미터와 스플라이싱 파라미터 중의 적어도 하나를 포함할 수 있다. 단계(1032)에서, 단말기가 설정 파라미터를 기초로 초기 이미지 프레임에 대해 처리하는 단계는, 대응되는 렌더링 파라미터 및/또는 스플라이싱 파라미터를 기초로, 초기 이미지 프레임 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링 및/또는 스플라이싱을 수행하는 것을 포함할 수 있다. 예를 들어, 단말기는 렌더링 파라미터를 기초로 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링하여 렌더링 후의 이미지 프레임 집합을 획득하고, 스플라이싱 파라미터를 기초로 렌더링 후의 이미지 프레임 집합 중의 이미지 프레임을 스플라이싱하여, 타겟 3차원 비디오를 획득할 수 있고; 또는, 단말기는 렌더링 파라미터를 기초로 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링하여 타겟 3차원 비디오를 획득할 수 있고; 또는, 단말기는 스플라이싱 파라미터를 기초로 초기 이미지 프레임 집합 중의 복수의 초기 이미지 프레임을 스플라이싱하여 타겟 3차원 비디오를 획득할 수 있다. 여기서, 설정 파라미터는 사용자가 구체적인 수요에 따라 사전에 선택한 것, 초기 3차원 비디오에 어떻게 처리할지를 지시하는 파라미터를 포함할 수 있으며, 일 실시예에서, 설정 파라미터는 사용자가 구체적인 수요에 따라 사전에 선택한 타겟 모델에 포함될 수 있다. 예시적으로, 타겟 모델은 샘플 비디오와 샘플 비디오에 대응되는 파라미터를 포함할 수 있고, 사용자는 샘플 비디오를 시청한 후, 만약 샘플 비디오의 양식과 동일한 타겟 3차원 비디오를 원하면, 상기 타겟 모델을 선택할 수 있으며, 단말기는 상기 타겟 모델에 포함된 샘플 비디오에 대응되는 파라미터를 설정 파라미터로 하고, 상기 설정 파라미터를 기초로 초기 이미지 프레임 집합에 대해 처리하여, 샘플 비디오의 양식과 동일한 타겟 3차원 비디오를 획득한다.
렌더링 파라미터는 소정 렌더링 효과를 포함할 수 있고, 렌더링 효과는 문자 렌더링, 특수 효과, 필터, 클리핑, 확대, 축소, 가로 화면으로 세로 화면으로 변경, 세로 화면으로부터 가로 화면으로 변경 등을 포함할 수 있지만 이에 제한되지 않는다. 스플라이싱 파라미터는 소정 장면 전환 효과를 포함할 수 있으며, 장면 전환 효과는 가속, 감속, 수평 스트로크, 겹침, 페이지 말림, 수평 라인, 수직 라인, 회전, 레이어 푸시 등을 포함할 수 있지만 이에 제한되지 않는다.
단계(1032)의 구현 방식은 적어도 아래 세가지를 포함한다.
방식 1, 렌더링 파라미터를 기초로, 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링하여 렌더링 후의 이미지 프레임 집합을 획득하고, 스플라이싱 파라미터에 따라 렌더링 후의 이미지 프레임 집합 중의 이미지 프레임을 스플라이싱하여, 타겟 3차원 비디오를 획득한다.
일 실시예에서, 렌더링 파라미터를 기초로, 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링할 수 있다. 예를 들어, 렌더링 파라미터는 제1 내지 제5 번째 초기 이미지 프레임에 대해 박피 특수 효과를 추가하고, 제6 내지 제10 번째 초기 이미지 프레임에 대해 동물 스티커 특수 효과를 추가하고, 제11 내지 제 20 번째 초기 이미지 프레임에 대해 안개 제거 필터를 추가하는 것 등일 수 있으며, 이에 따라 렌더링 후의 이미지 프레임 집합을 획득한다. 다음, 단말기는 스플라이싱 파라미터에 따라 렌더링 후의 이미지 프레임 집합 중의 이미지 프레임을 스플라이싱한다. 예를 들어, 단말기는 렌더링 후의 이미지 프레임 집합 중의 이미지 프레임을 시간 순서(예를 들어, 각 이미지 프레임의 대응되는 초기 이미지 프레임 집합에서의 배열 순서 또는 소정의 시간 순서)에 따라, 스플라이싱 파라미터에서 설정하는 장면 전환 효과에 따라 스플라이싱한다. 예를 들어, 스플라이싱 파라미터는 제1, 제2번째 이미지 프레임 사이에 수평 스트로크의 방식으로 스플라이싱하고, 제2, 제3번째 이미지 프레임 사이에 페이지 말림의 방식으로 스플라이싱하는 것 등일 수 있다.
방식 2, 렌더링 파라미터를 기초로, 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링을 수행하여, 타겟 3차원 비디오를 획득한다.
일 실시예에서, 서버가 우선 각각의 초기 2차원 이미지에 포함된 이미지 컨텐츠를 기초로 각각의 초기 2차원 이미지를 3차원 비디오 섹션으로 변환한 후, 스플라이싱 파라미터를 기초로 어느 하나 또는 복수의 3차원 비디오 섹션에 포함된 이미지 프레임을 스플라이싱하여 초기 3차원 비디오를 획득할 수 있다. 다음, 단말기는 수신된 초기 3차원 비디오에 대해 디코딩을 수행하여, 초기 이미지 프레임 집합을 획득하고, 단말기가 렌더링 파라미터를 기초로 초기 이미지 프레임 집합 중의 적어도 하나의 이미지 프레임에 대해 렌더링을 수행하여, 타겟 3차원 비디오를 획득한다.
방식 3, 스플라이싱 파라미터에 따라 초기 이미지 프레임 집합 중의 초기 이미지 프레임을 스플라이싱하여, 타겟 3차원 비디오를 획득한다.
일 실시예에서, 서버가 우선 각의 초기 2차원 이미지에 포함된 이미지 컨텐츠를 기초로 각각의 초기 2차원 이미지를 대응되는 3차원 비디오 섹션으로 변환한 후, 렌더링 파라미터를 기초로 어느 하나 또는 복수의 3차원 비디오 섹션에 포함된 이미지 프레임에 대해 렌더링하여 초기 3차원 비디오를 획득할 수 있다. 다음, 단말기는 수신된 초기 3차원 비디오에 대해 디코딩을 수행하여, 초기 이미지 프레임 집합을 획득하고, 초기 이미지 프레임 집합 중의 초기 이미지 프레임에 대해 스플라이싱 파라미터에 따라 스플라이싱을 수행하여, 타겟 3차원 비디오를 획득한다.
도 4는 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 방법의 흐름도이다. 도 4에 도시된 바와 같이, 도 2 중의 단계(103)는 아래의 단계를 더 포함한다.
단계(1033), 렌더링 공간 및/또는 시간축을 결정한다.
구체적인 응용 시나리오에서, 설정 파라미터는 렌더링 공간과 시간축을 결정하기 위한 초기화 파라미터를 더 포함할 수 있다. 단말기는 초기 3차원 비디오를 획득한 후, 초기화 파라미터를 기초로 렌더링 공간에 대해 초기화하고, 시간축을 구축할 수 있다. 여기서, 초기화 파라미터는 렌더링 공간의 크기, 해상도, 시간축에 대응되는 프레임 레이트 등을 포함할 수 있지만 이에 제한되지 않는다. 시간축에 대응되는 프레임 레이트는 인접한 두 이미지 프레임 사이에 전환되는 속도, 즉 3차원 비디오 재생의 속도, 예를 들어 0.5 배속 또는 1.5 배속 등을 지시할 수 있다.
렌더링 공간과 시간축을 결정한 후, 단계(1032)의 구현 형태에서, 방식 1은,
렌더링 파라미터를 기초로 결정된 렌더링 공간에서 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링을 수행하여 렌더링 후의 이미지 프레임 집합을 획득하고, 시간축의 지시에 따라, 렌더링 후의 이미지 프레임 집합 중의 이미지 프레임을 스플라이싱 파라미터에 따라 스플라이싱하여, 타겟 3차원 비디오를 획득한다. 예를 들어, 단말기는 단말기의 비디오 메모리에서 렌더링 공간을 초기화한 후, 이미지 프레임의 텍스처를 렌더링 공간에 넣고, 렌더링 공간에서 이미지 프레임의 텍스처에 대해 렌더링할 수 있다.
렌더링 공간을 결정한 후, 단계(1032)의 구현 형태에서, 방식 2는,
렌더링 파라미터를 기초로, 렌더링 공간에서 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링하여, 타겟 3차원 비디오를 획득하는 것을 포함할 수 있다.
또한, 시간축을 결정한 후, 단계(1032)의 구현 형태에서, 방식 3은,
시간축의 지시에 따라, 초기 이미지 프레임 집합 중의 초기 이미지 프레임을 스플라이싱 파라미터에 따라 스플라이싱하여, 타겟 3차원 비디오를 획득하는 것을 포함할 수 있다.
당업자라면, 도 4중의 단계(1033 및 1031) 사이에 필연적인 수행 선후 순서가 없으며, 단계(1033)를 먼저 수행한 후 단계(1031)를 수행할 수 있고; 단계(1031)를 수행한 후 단계(1033)를 수행할 수도 있으며; 단계(1033과 1031)를 동시에 수행할 수도 있다는 점을 이해하여야 하며, 본 출원의 실시예는 이에 대해 구체적으로 한정하지 않는다.
도 5는 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 방법의 흐름도이다. 도 5에 도시된 바와 같이, 도 2 중의 단계(101) 이전에, 상기 방법은 아래의 단계를 더 포함한다.
단계(104), 수신된 모델 선택 명령에 따라, 타겟 모델을 획득하며, 여기서, 모델 선택 명령은 타겟 모델을 지시하는 타겟 모델 정보를 포함한다.
예를 들면, 단말기는 초기 2차원 이미지를 서버로 송신하기 전에, 사용자로부터 제공되는 타겟 모델 정보를 포함하는 모델 선택 명령을 더 수신한 후, 모델 선택 명령에 따라 타겟 모델을 획득할 수 있다. 여기서, 타겟 모델 정보는 타겟 모델을 지정하기 위해 사용될 수 있고, 예를 들어 타겟 모델의 번호 또는 명칭을 포함할 수 있다. 타겟 모델에는 샘플 비디오가 포함되어, 사용자에게 상기 모델 하에 생성된 3차원 비디오를 전시함으로써, 사용자가 원하는 타겟 모델을 선택하도록 할 수 있다. 타겟 모델이 샘플 비디오, 샘플 비디오에 대응되는 디코딩 파라미터, 설정 파라미터(예를 들어 렌더링 파라미터와 스플라이싱 파라미터 등을 포함할 수 있음) 및 이미지 파라미터를 포함하고, 단말기는 초기 3차원 비디오를 수신한 후, 타겟 모델에 대응되는 설정 파라미터를 기초로 초기 3차원 비디오를 처리하여, 샘플 비디오의 양식과 동일한 타겟 3차원 비디오를 생성하는 것으로 이해할 수 있다.
단계(105), 타겟 모델에 포함된 이미지 파라미터를 결정한다.
일 실시예에서, 타겟 모델은 디코딩 파라미터와 설정 파라미터를 더 포함할 수 있으며, 단말기는 타겟 모델을 획득한 후 타겟 모델에 포함된 디코딩 파라미터와 설정 파라미터를 결정할 수도 있다.
단계(106), 이미지 파라미터와 매칭되는 적어도 하나의 초기 2차원 이미지를 결정한다.
예시적으로, 단말기는 타겟 모델에 포함된 이미지 파라미터를 결정한 후, 이미지 파라미터를 기초로, 이미지 파라미터와 매칭되는 초기 2차원 이미지를 결정할 수 있다. 여기서, 이미지 파라미터는 초기 2차원 이미지를 나타내는 파라미터를 지시할 수 있으며, 예를 들어 이미지의 수량, 사이즈 및 해상도 등을 포함할 수 있지만 이에 제한되지 않는다. 예를 들어, 만약 타겟 모델 중의 이미지 파라미터가 2차원 이미지의 사이즈가 1080*720보다 작거나 같고, 2차원 이미지의 수량이 5개인 것을 포함하면, 단말기가 서버로 업로드하는 초기 2차원 이미지는 5개의 초기 2차원 이미지를 포함할 수 있으며, 각각의 초기 2차원 이미지의 사이즈는 모두 1080*720보다 작거나 같다.
도 6은 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 방법의 흐름도이다. 도 6에 도시된 바와 같이, 도 5 중의 단계(104)의 구현 형태는 아래의 단계들을 포함할 수 있다.
단계(1041), 모델 선택 명령에 응답하여, 단말기에서 타겟 모델 정보에 대응되는 타겟 모델을 조회한다.
단계(1042), 단말기에 타겟 모델이 존재하면, 기저장된 타겟 모델을 획득한다.
단계(1043), 만약 단말기에 타겟 모델이 존재하지 않으면, 서버로 요청을 송신하여, 서버가 타겟 모델을 결정 및 송신하도록 한다.
단계(1044), 서버로부터 송신되는 타겟 모델을 수신한다.
예시적으로, 단말기의 저장 공간이 제한되어 있으므로, 다양한 타겟 모델을 저장하여 사용자의 다양한 수요를 만족시킬 수 없으므로, 단말기는 사용자로부터 입력되는 모델 선택 명령을 수신한 후, 우선 단말기에서 타겟 모델 정보에 대응되는 타겟 모델의 존재 여부를 조회할 수 있다. 만약 단말기에 타겟 모델이 저장되어 있으면, 기저장된 타겟 모델을 바로 획득할 수 있고; 만약 단말기에 타겟 모델이 존재하지 않으면, 단말기는 서버로 요청을 송신하여, 서버가 타겟 모델을 단말기로 송신하도록 할 수 있다.
도 7은 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 방법의 흐름도이다. 도 7에 도시된 바와 같이, 단계(1031) 이후에, 도 2중의 단계(103)는 아래의 단계를 더 포함할 수 있다.
단계(1034), 기설정 규칙에 따라 초기 이미지 프레임 집합 중의 각각의 초기 이미지 프레임의 전시 순서를 결정하다.
상응하게, 단계(1032)는 설정 파라미터를 기초로, 전시 순서에 따라 초기 이미지 프레임 집합 중의 초기 이미지 프레임에 대해 처리하여 타겟 3차원 비디오를 획득하는 것을 포함할 수 있다.
예를 들면, 초기 3차원 비디오에 대해 디코딩하여 초기 이미지 프레임 집합을 획득한 후, 단말기는 기설정 규칙에 따라 초기 이미지 프레임 집합 중의 각각의 초기 이미지 프레임의 전시 순서를 결정한 후, 설정 파라미터를 기초로, 전시 순서에 따라 초기 이미지 프레임에 대해 처리하여 타겟 3차원 비디오를 획득할 수 있다. 단말기가 전시 순서에 따라 초기 이미지 프레임 집합 중의 이미지 프레임 배열을 조정하고, 설정 파라미터를 기초로 조정 후의 초기 이미지 프레임 집합에 대해 처리하여 타겟 3차원 비디오를 획득하는 것으로 이해할 수 있다. 여기서, 설정 파라미터를 기초로 조정 후의 초기 이미지 프레임 집합에 대해 처리하는 구체적인 구현 형태에 대해서는, 상술한 실시예에서 상세하게 기재하였으므로, 여기서는 그 상세한 설명을 생략한다. 예를 들어, 만약 기설정 규칙이 비디오 리버스이면, 단말기는 각각의 초기 이미지 프레임의 전시 순서가 역순임을 결정하고, 단말기는 초기 이미지 프레임 집합 중 각각의 초기 이미지 프레임의 순서를 조정하여, 초기 이미지 프레임의 순서가 거꾸로 되도록 함으로써, 3차원 비디오가 리버스되는 효과를 구현할 수 있다. 또 예를 들어, 만약 기설정 규칙이 비디오 반복 재생이면, 단말기는 초기 이미지 프레임 집합에서, 각각의 초기 이미지 프레임의 전시 순서가 반복 전시임을 결정하여, 각각의 초기 이미지 프레임을 복제함으로써, 3차원 비디오 반복 재생 효과를 구현할 수 있다. 또한, 단말기는 초기 이미지 프레임 집합 중의 초기 이미지 프레임의 전시 순서를 조정함으로써, 3차원 비디오 리버스와 3차원 비디오 반복 재생 등 다양한 조합을 구현할 수도 있으며, 예를 들어 3차원 비디오 중의 각 섹션의 3차원 비디오를 먼저 정상적인 순서로 재생한 후, 리버스하여, 사용자의 다양한 수요를 만족시킬 수 있다.
초기 2차원 이미지가 이미지 1, 이미지 2 및 이미지 3을 포함하는 예를 들며, 서버가 이미지 1, 이미지 2 및 이미지 3을 수신한 후 이미지 1, 이미지 2 및 이미지 3에 대해 각각 처리하여 각각의 2차원 이미지에 대응되는 3차원 비디오를 획득하는 예를 들어 설명하며, 이때, 초기 3차원 비디오는 세 섹션의 초기 3차원 비디오, 즉 이미지 1에 대응되는 초기 3차원 비디오 섹션 1, 이미지 2에 대응되는 초기 3차원 비디오 섹션 2 및 이미지 3에 대응되는 초기 3차원 비디오 섹션 3을 포함하고, 또한 상술한 각각의 섹션의 초기 3차원 비디오는 모두 5개의 초기 이미지 프레임을 포함한다고 가정한다. 단말기는 초기 3차원 비디오 섹션 1, 초기 3차원 비디오 섹션 2 및 초기 3차원 비디오 섹션 3에 대해 각각 디코딩하여, 15 개의 초기 이미지 프레임을 획득하고, 해당 15개의 초기 이미지 프레임을 초기 이미지 프레임 집합 {P1, P2, P3, P4, P5, P6, ..., P14, P15}으로 한다.
기설정 규칙이 우선 초기 3차원 비디오 섹션 3을 전시하고, 나아가 초기 3차원 비디오 섹션 1을 전시하고, 마지막으로 초기 3차원 비디오 섹션 2를 전시하는 순서인 예를 들면, 단말기는 각각의 초기 이미지 프레임의 전시 순서를 결정하고, 초기 이미지 프레임 집합 {P1, P2, P3, P4, P5, P6, ..., P14, P15}을 {P11, P12, P13, P14, P15, P1, ..., P5, P6, ..., P9, P10}으로 조정할 수 있다. 단말기는 나아가 설정 파라미터를 기초로 조정된 후의 초기 이미지 프레임 집합에 대해 처리하여 타겟 3차원 비디오를 획득하며, 이에 따라 타겟 3차원 비디오 재생 시 구현할 수 있는 효과에 따르면, 우선 이미지 3에 대응되는 초기 3차원 비디오 섹션 3을 재생하고, 나아가 이미지 1에 대응되는 초기 3차원 비디오 섹션 1을 재생하고, 마지막으로 초기 이미지2에 대응되는 3차원 비디오 2를 재생한다.
또한, 기설정 규칙이 각 섹션의 초기 3차원 비디오를 전시할 때 먼저 정상적인 순서로 재생한 후 리버스하는 것인 예를 들면, 단말기는 초기 이미지 프레임의 전시 순서가 우선 순서대로 전시한 후 리버스 전시하는 것으로 결정할 수 있으며, 이에 따라, 단말기는 먼저 각 섹션의 초기 3차원 비디오에 대응되는 5개의 초기 이미지 프레임을 복제하고, 다음 복제된 후의 초기 이미지 프레임의 순서를 거꾸로 하여 해당 섹션의 초기 3차원 비디오에 대응되는 5개의 초기 이미지 프레임의 뒤에 추가하여, 조정 후의 초기 이미지 프레임 집합이 { P1, P2, P3, P4, P5, P5, P4, P3, P2, P1, P6, ..., P12, P11}인 총 30개의 초기 이미지 프레임를 획득한다. 단말기는 렌더링 파라미터를 기초로, 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링을 수행하여, 타겟 3차원 비디오를 획득하고, 렌더링 파라미터는 예를 들어 초기 이미지 프레임 집합 중 제1 내지 제5 번째 초기 이미지 프레임에 대해 박피 특수 효과를 추가하는 것, 제6 내지 제10 번째 초기 이미지 프레임에 대해 안개 제거 필터를 추가하는 것, 제11 내지 제20 번째 초기 이미지 프레임에 대해 가로 화면으로부터 세로 화면으로 변경 표시하는 것, 제21 내지 제30 번째 초기 이미지 프레임에 대해 문자를 추가하는 것일 수 있으며, 이때 단말기는 렌더링 파라미터에 따라 조정 후의 초기 이미지 프레임 집합 중의 초기 이미지 프레임에 대해 렌더링을 수행하여 타겟 3차원 비디오를 획득하고, 타겟 3차원 비디오가 재생될 때 구현 가능한 효과는, 박피 특수 효과를 추가한 기초 상에서 초기 3차원 비디오 섹션 1을 정상적인 순서로 1회 재생하고, 안개 제거 필터의 기초 상에서 초기 3차원 비디오 섹션 1을 1회 리버스하고, 다음 가로 화면으로부터 세로 화면으로 변경하는 방식으로 초기 3차원 비디오 섹션 2를 정상적인 순서로 1회 재생하고, 초기 3차원 비디오 섹션 2를 1회 리버스하고, 다음 문자 추가 방식으로, 초기 3차원 비디오 섹션 3을 정상적인 순서로 1회 재생하고, 초기 3차원 비디오 섹션 3을 1회 리버스하는 것이다.
당업자라면, 단말기는 렌더링/스플라이싱 조작을 완성한 후 기설정 규칙에 따라 이미지 프레임의 전시 순서를 결정할 수도 있다는 점을 이해하여야 하며, 즉, 단말기는 설정 파라미터를 기초로, 초기 이미지 프레임 집합에 대해 렌더링 및/또는 스플라이싱 처리를 수행하여 처리 후의 이미지 프레임 집합을 획득한 후, 단말기는 기설정 규칙에 따라 처리된 후의 이미지 프레임 집합 중의 각각의 이미지 프레임의 전시 순서를 결정하고, 상기 전시 순서에 따라 이미지 프레임의 이미지 프레임 집합에서의 위치를 조정하여 타겟 3차원 비디오를 획득한다. 구체적인 구현 형태는 상술한 기재를 참조할 수 있으며, 간결성을 위하여, 여기서는 반복되는 설명을 생략한다.
상술한 바와 같이, 본 출원의 단말기는 우선 적어도 하나의 초기 2차원 이미지를 서버로 송신하여, 서버가 수신된 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하고, 단말기는 서버로부터 초기 3차원 비디오를 획득하고, 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득한다. 본 출원은 단말기 상의 2차원 이미지를 서버로 업로드하고, 서버를 이용하여 2차원 이미지를 3차원 비디오로 변환하고, 나아가 단말기가 3차원 비디오에 대해 처리함으로써, 단말기의 하드웨어 장치에 대해 변경할 필요가 없이, 로컬의 2차원 이미지로부터 개인화 수요를 만족하는 3차원 비디오를 신속하게 생성할 수 있으며, 사용자의 조작 체험과 시각적 체험을 향상시킨다.
도 8은 일 예시적 실시예에 따른 3차원 비디오의 처리 방법의 흐름도이다. 도 8에 도시된 바와 같이, 상기 방법은 서버에 적용되며, 아래의 단계들을 포함한다.
단계(201), 단말기로부터 송신되는 적어도 하나의 초기 2차원 이미지를 수신하고, 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성한다.
단계(202), 단말기가 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하도록, 초기 3차원 비디오를 단말기로 송신한다.
예를 들면, 만약 단말기가 적어도 하나의 초기 2차원 이미지를 송신하기 전에, 특정 코딩 방안을 사용하여 상기 적어도 하나의 초기 2차원 이미지에 대해 코딩하여, 적어도 하나의 초기 2차원 이미지의 단말기와 서버 사이에서의 전송 품질과 효율을 확보하고, 다음 코딩 후의 상기 적어도 하나의 초기 2차원 이미지를 서버로 업로드하면, 서버는 우선 수신된 코딩 후의 상기 적어도 하나의 초기 2차원 이미지에 대해 디코딩하여, 디코딩 후의 상기 적어도 하나의 초기 2차원 이미지를 획득할 수 있다. 다음, 서버는 기설정 알고리즘에 따라 초기 2차원 이미지에 대해 처리하여 초기 2차원 이미지에 대응되는 초기 3차원 비디오를 획득한다.
기설정 알고리즘의 연산량이 보다 커서, 일정한 연산 리소스와 저장 리소스를 소모하여야 하므로, 서버에 의해 초기 2차원 이미지로부터 초기 3차원 비디오로의 변환을 완성함으로써, 단말기의 연산 리소스와 저장 리소스가 제한되어 있는 제약을 받지 않으며, 이미지 처리의 처리 속도와 신뢰성을 향상시키고, 또한 사용자의 조작 체험과 시각적 체험을 향상시킨다.
초기 2차원 이미지가 수신될 때, 서버는 순차적으로 각각의 초기 2차원 이미지에 대해 처리하여 각각의 초기 2차원 이미지에 대응되는 3차원 비디오 섹션을 획득할 수 있으며, 즉 초기 3차원 비디오는 각각의 초기 2차원 이미지에 대응되는 3차원 비디오 섹션을 포함한다. 서버는 각각의 초기 2차원 이미지에 대응되는 3차원 비디오 섹션에 대해 병합하여, 하나의 병합 후의 3차원 비디오를 초기 3차원 비디오로서 획득할 수 있다. 또한, 서버는 임의의 하나 또는 복수의 초기 2차원 이미지에 대응되는 3차원 비디오 섹션에 대해 렌더링하여, 대응되는 렌더링 후의 3차원 비디오 섹션을 획득할 수 있으며, 서버는 모든 3차원 비디오 섹션에 대해 병합하고, 획득한 병합된 후의 3차원 비디오를 초기 3차원 비디오로 한다.
서버는 초기 3차원 비디오를 생성한 후, 초기 3차원 비디오를 단말기로 송신할 수 있다.
일 실시예에서, 서버는 스트리밍의 방식에 따라 초기 3차원 비디오를 단말기로 송신하고, 단말기는 초기 3차원 비디오를 획득한 후, 초기 3차원 비디오에 대해 디코딩하여, 초기 3차원 비디오의 초기 이미지 프레임 집합을 획득할 수 있으며, 초기 이미지 프레임 집합은 복수의 초기 이미지 프레임을 포함한다. 다음, 단말기는 사용자의 구체적인 수요에 따라, 초기 이미지 프레임 집합 중의 초기 이미지 프레임에 대해 처리하여 타겟 3차원 비디오를 획득할 수 있다. 여기서, 타겟 3차원 비디오에 대하여, 초기 2차원 이미지에 대응되는 초기 3차원 비디오의 기초 상에서, 상응한 처리를 거쳐 타겟 3차원 비디오를 획득하는 것으로 이해할 수 있으며, 이로써 사용자의 구체적인 수요에 따라 3차원 비디오의 방식으로 초기 2차원 이미지를 전시할 수 있으며, 이에 따라 단말기의 하드웨어 장치에 대해 변경하지 않고도, 사용자에게 풍부한 시각적 체험과 조작 체험을 제공한다.
도 9는 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 방법의 흐름도이다. 도 9에 도시된 바와 같이, 단계(201) 전에, 상기 방법은 아래의 단계들을 더 포함한다.
단계(203), 단말기로부터 송신되는 요청을 수신하며, 상기 요청은 단말기에 타겟 모델이 존재하지 않을 때, 단말기로부터 송신되는 요청이다.
단계(204), 상기 요청에 응답하여 타겟 모델을 획득하며, 타겟 모델은 이미지 파라미터를 포함한다.
단계(205), 단말기가 이미지 파라미터에 매칭되는 적어도 하나의 초기 2차원 이미지를 결정하도록, 타겟 모델을 단말기로 송신한다.
예시적으로, 서버는 초기 2차원 이미지를 수신하기 전에, 또한 단말기로부터 송신되는 요청을 수신할 수 있으며, 서버는 상기 요청에 따라 타겟 모델을 결정하고, 타겟 모델을 단말기로 송신한다. 상기 요청은 단말기에 타겟 모델이 존재하지 않을 때, 단말기로부터 서버로 송신된 것이며, 서버에 타겟 모델을 단말기로 송신하도록 요청하기 위한 것이다. 단말기는 타겟 모델을 수신한 후, 타겟 모델에 포함된 이미지 파라미터를 결정하고, 이미지 파라미터를 기초로 이미지 파라미터와 매칭되는 초기 2차원 이미지를 결정할 수 있다. 여기서, 이미지 파라미터는 초기 2차원 이미지를 나타내는 파라미터를 지시할 수 있으며, 예를 들어 이미지의 수량, 사이즈 및 해상도 등을 포함할 수 있지만 이에 제한되지 않는다.
상술한 바와 같이, 본 출원에서 단말기는 우선 적어도 하나의 초기 2차원 이미지를 서버로 송신하여, 서버가 수신된 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하고, 단말기는 서버로부터 초기 3차원 비디오를 획득하고, 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득한다. 본 출원은 단말기 상의 2차원 이미지를 서버로 업로드하고, 서버를 이용하여 2차원 이미지를 3차원 비디오로 변환하고, 나아가 단말기가 3차원 비디오에 대해 처리함으로써, 단말기의 하드웨어 장치에 대해 변경할 필요가 없이, 로컬의 2차원 이미지로부터 개인화 수요를 만족하는 3차원 비디오를 신속하게 생성할 수 있으며, 사용자의 조작 체험과 시각적 체험을 향상시킨다.
도 10은 일 예시적 실시예에 따른 3차원 비디오의 처리 장치의 블록도이다. 도 10에 도시된 바와 같이, 상기 장치(300)는,
적어도 하나의 초기 2차원 이미지를 서버로 송신하여, 서버가 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하는 송신 모듈(301);
서버로부터 송신되는 초기 3차원 비디오를 수신하는 수신 모듈(302);
초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 처리 모듈(303);을 포함한다.
도 11은 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 장치의 블록도이다. 도 11에 도시된 바와 같이, 처리 모듈(303)은,
디코딩 파라미터를 기초로 초기 3차원 비디오에 대해 디코딩하여, 초기 3차원 비디오의 초기 이미지 프레임 집합을 획득하는 디코딩 서브 모듈(3031);
설정 파라미터를 기초로 초기 이미지 프레임 집합에 대해 처리하여 타겟 3차원 비디오를 획득하는 처리 서브 모듈(3032);을 포함한다.
선택적으로, 설정 파라미터는 렌더링 파라미터 및 스플라이싱 파라미터 중 적어도 하나의 파라미터를 포함한다. 처리 서브 모듈(3032)은,
렌더링 파라미터를 기초로, 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링하여 렌더링 후의 이미지 프레임 집합을 획득하고, 스플라이싱 파라미터에 따라 렌더링 후의 이미지 프레임 집합 중의 이미지 프레임을 스플라이싱하여, 타겟 3차원 비디오를 획득하거나; 또는,
렌더링 파라미터를 기초로, 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링하여 타겟 3차원 비디오를 획득하거나; 또는,
스플라이싱 파라미터에 따라 초기 이미지 프레임 집합 중의 초기 이미지 프레임을 스플라이싱하여 타겟 3차원 비디오를 획득한다.
도 12는 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 장치의 블록도이다. 도 12에 도시된 바와 같이, 처리 모듈(303)은,
렌더링 공간 및/또는 시간축을 결정하는 제1 결정 서브 모듈(3033)을 더 포함하고;
상응하게, 처리 서브 모듈(3032)은,
렌더링 파라미터를 기초로, 렌더링 공간에서 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링하여 렌더링 후의 이미지 프레임 집합을 획득하고, 시간축에서 지시하는 시간 순서에 따라, 렌더링 후의 이미지 프레임 집합 중의 이미지 프레임을 스플라이싱 파라미터에 따라 스플라이싱하여, 타겟 3차원 비디오를 획득하거나; 또는,
렌더링 파라미터를 기초로, 렌더링 공간에서 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링하여 타겟 3차원 비디오를 획득하거나; 또는,
시간축에서 지시하는 시간 순서에 따라, 초기 이미지 프레임 집합 중의 초기 이미지 프레임을 스플라이싱 파라미터에 따라 스플라이싱하여 타겟 3차원 비디오를 획득한다.
도 13은 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 장치의 블록도이다. 도 13에 도시된 바와 같이, 상기 장치(300)는,
적어도 하나의 초기 2차원 이미지를 서버로 송신하기 전에, 수신된 모델 선택 명령에 따라, 타겟 모델을 획득하며, 모델 선택 명령은 타겟 모델을 지시하는 타겟 모델 정보를 포함하는 획득 모듈(304);
타겟 모델에 포함된 이미지 파라미터를 결정하고, 이미지 파라미터와 매칭되는 적어도 하나의 초기 2차원 이미지를 결정하는 결정 모듈(305);을 더 포함한다.
선택적으로, 획득 모듈(304)은 또한,
모델 선택 명령에 응답하여, 단말기에서 타겟 모델 정보에 대응되는 타겟 모델을 조회하고; 만약 단말기에 타겟 모델이 존재하지 않으면, 서버로 요청을 송신하여 서버가 타겟 모델을 결정 및 송신하도록 하고; 서버로부터 송신되는 타겟 모델을 수신한다.
도 14는 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 장치의 블록도이다. 도 14에 도시된 바와 같이, 처리 모듈(303)은,
디코딩 파라미터를 기초로 초기 3차원 비디오에 대해 디코딩하여, 초기 3차원 비디오의 초기 이미지 프레임 집합을 획득한 후, 기설정 규칙에 따라 초기 이미지 프레임 집합 중의 각각의 초기 이미지 프레임의 전시 순서를 결정하는 제2 결정 서브 모듈(3034)을 더 포함한다.
상응하게, 처리 서브 모듈(3032)은,
설정 파라미터를 기초로, 전시 순서에 따라 초기 이미지 프레임 집합 중의 초기 이미지 프레임에 대해 처리하여 타겟 3차원 비디오를 획득한다.
다른 하나의 실시예에서, 처리 서브 모듈(3032)은 설정 파라미터를 기초로, 초기 이미지 프레임 집합에 대해 렌더링 및/또는 스플라이싱 처리를 수행하여 처리 후의 이미지 프레임 집합을 획득한다. 처리 모듈(303)은 기설정 규칙에 따라 상기 처리 후의 이미지 프레임 집합 중의 각각의 이미지 프레임의 전시 순서를 결정하고, 상기 전시 순서에 따라 이미지 프레임의 상기 처리 후의 이미지 프레임 집합에서의 위치를 조정하여, 타겟 3차원 비디오를 획득하는 제3 결정 서브 모듈을 포함한다.
상술한 실시예 중의 장치에 대하여, 여기서 각각의 모듈이 조작을 수행하는 구체적인 형태는 상기 방법과 관련된 실시예에서 상세하게 기재하였으므로, 여기서는 반복되는 설명을 생략한다.
상술한 모듈은 하나 또는 복수의 범용 프로세서에서 실행되는 소프트웨어 컴포넌트로 구현될 수 있고, 일부 기능 또는 그 조합을 수행하는 프로그래머블 논리 기기 및/또는 전용 집적 회로와 같은 하드웨어로 구현될 수도 있다. 일부 실시예에서, 이러한 모듈은 소프트웨어 제품의 형태로 구현될 수 있고, 상기 소프트웨어 제품은 비휘발성 저장매체에 저장될 수 있고, 이러한 비휘발성 저장매체에 포함된 소프트웨어 제품은 컴퓨터 기기(예를 들어 퍼스널 컴퓨터, 서버, 네트워크 기기, 모바일 단말 등)로 하여금 본 출원의 실시예에 따른 방법을 구현하도록 한다. 일 실시예에서, 상술한 모듈은 단일 기기 상에서 구현될 수 있고, 복수의 기기 상에 분포될 수도 있다. 이러한 모듈의 기능은 서로 병합할 수 있고, 추가적으로 복수의 서브 모듈로 분할할 수도 있다.
상술한 바와 같이, 본 출원에서 단말기는 우선 적어도 하나의 초기 2차원 이미지를 서버로 송신하여 서버가 수신된 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하고, 단말기는 서버로부터 초기 3차원 비디오를 획득하고, 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득한다. 본 출원은 단말기 상의 2차원 이미지를 서버로 업로드하고, 서버를 이용하여 2차원 이미지를 3차원 비디오로 변환하고, 나아가 단말기가 3차원 비디오에 대해 처리함으로써 단말기의 하드웨어 장치에 대해 변경할 필요가 없이, 로컬의 2차원 이미지로부터 개인화 수요를 만족하는 3차원 비디오를 신속하게 생성할 수 있으며, 사용자의 조작 체험과 시각적 체험을 향상시킨다.
도 15는 일 예시적 실시예에 따른 3차원 비디오의 처리 장치의 블록도이다. 도 15에 도시된 바와 같이, 상기 장치(400)는 단말기에 적용되고, 상기 장치는,
단말기로부터 송신되는 적어도 하나의 초기 2차원 이미지를 수신하고, 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하는 수신 모듈(401);
단말기가 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하도록, 초기 3차원 비디오를 단말기로 송신하는 송신 모듈(402);을 포함한다.
도 16은 일 예시적 실시예에 따른 다른 3차원 비디오의 처리 장치의 블록도이다. 도 16에 도시된 바와 같이, 수신 모듈(401)은 또한 단말기로부터 송신되는 적어도 하나의 초기 2차원 이미지를 수신하기 전에, 단말기로부터 송신되는 요청을 수신하며, 상기 요청은 단말기에 타겟 모델이 존재하지 않을 때, 단말기로부터 송신되는 요청이다.
상기 장치(400)는,
상기 요청에 응답하여 타겟 모델을 획득하며, 여기서, 타겟 모델은 이미지 파라미터를 포함하는 획득 모듈(403)을 더 포함한다.
송신 모듈(402)은 또한 단말기가 이미지 파라미터 매칭되는 적어도 하나의 초기 2차원 이미지를 결정하도록, 타겟 모델을 단말기로 송신한다.
상술한 실시예 중의 장치에 대하여, 여기서 각각의 모듈이 조작을 수행하는 구체적인 형태는 상기 방법과 관련된 실시예에서 상세하게 기재하였으므로, 여기서는 반복되는 설명을 생략한다.
상술한 모듈은 하나 또는 복수의 범용 프로세서에서 실행되는 소프트웨어 컴포넌트로 구현될 수 있고, 일부 기능 또는 그 조합을 수행하는 프로그래머블 논리 기기 및/또는 전용 집적 회로와 같은 하드웨어로 구현될 수도 있다. 일부 실시예에서, 이러한 모듈은 소프트웨어 제품의 형태로 구현될 수 있고, 상기 소프트웨어 제품은 비휘발성 저장매체에 저장될 수 있고, 이러한 비휘발성 저장매체에 포함된 소프트웨어 제품은 컴퓨터 기기(예를 들어 퍼스널 컴퓨터, 서버, 네트워크 기기, 모바일 단말 등)로 하여금 본 출원의 실시예에 따른 방법을 구현하도록 한다. 일 실시예에서, 상술한 모듈은 단일 기기 상에서 구현될 수 있고, 복수의 기기 상에 분포될 수도 있다. 이러한 모듈의 기능은 서로 병합할 수 있고, 추가적으로 복수의 서브 모듈로 분할할 수도 있다.
도 17은 일 예시적 실시예에 따른 3차원 비디오의 처리 시스템의 블록도이다. 도 17에 도시된 바와 같이, 상기 시스템(500)은 단말기(501)와 서버(502)를 포함한다.
단말기(501)는 상술한 실시예에 따른 임의의 단말기에 적용되는3차원 비디오의 처리 방법을 구현하기 위한 것이다.
서버(502)는 상술한 실시예에 따른 임의의 서버에 적용되는3차원 비디오의 처리 방법을 구현하기 위한 것이다.
상술한 실시예 중의 시스템에 대하여, 여기서 단말기와 서버가 수행하는 조작의 구체적인 형태는 상기 방법과 관련된 실시예에서 상세하게 기재하였으므로, 여기서는 반복되는 설명을 생략한다.
상술한 바와 같이, 본 출원의 단말기는 우선 적어도 하나의 초기 2차원 이미지를 서버로 송신하여 서버가 수신된 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하고, 단말기는 서버로부터 초기 3차원 비디오를 획득하고, 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득한다. 본 출원은 단말기 상의 2차원 이미지를 서버로 업로드하고, 서버를 이용하여 2차원 이미지를 3차원 비디오로 변환하고, 나아가 단말기가 3차원 비디오에 대해 처리함으로써, 단말기의 하드웨어 장치에 대해 변경할 필요가 없이, 로컬의 2차원 이미지로부터 개인화 수요를 만족하는 3차원 비디오를 신속하게 생성할 수 있으며, 사용자의 조작 체험과 시각적 체험을 향상시킨다.
아래에서 도 18을 참조하면, 본 출원의 실시예를 구현하기에 적합한 전자기기(예를 들어, 도 1 중 단말기 또는 서버)의 구성도를 나타낸다. 본 출원의 실시예에 따른 단말기는 모바일 폰, 노트북, 디지털 방송 수신기, PDA(개인 휴대 단말), PAD(태블릿 컴퓨터), PMP(휴대용 멀티미디어 플레이어), 차량용 단말(예컨대, 차량용 네비게이션 단말) 등의 모바일 단말 및 디지털 TV, 데스크탑 컴퓨터와 같은 고정 단말을 포함할 수 있지만 이에 제한되지 않는다. 도 18에 도시된 전자기기는 일 예시일 뿐, 본 출원의 실시예의 기능과 사용 범위에 대해 그 어떤 한정도 되어서는 않된다.
도 18에 도시된 바와 같이, 단말기로 구현될 경우, 전자기기(500)는 메모리에 저장된 프로그램(예컨대, 판독 전용 메모리(ROM, 602)에 저장된 프로그램 또는 저장 장치(608)로부터 랜덤 액세스 메모리(RAM)(603)로 로딩되는 프로그램)을 실행하여, 적어도 하나의 초기 2차원 이미지를 서버로 송신하여, 상기 서버가 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하는 조작; 상기 서버로부터 송신되는 상기 초기 3차원 비디오를 수신하는 조작; 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 조작을 수행할 수 있는 프로세서(예를 들어 중앙 프로세서, 그래픽 프로세서 등)(601)를 포함할 수 있다. 프로세서(601)는 상기 프로그램을 실행하여, 상술한 본 출원의 실시예에서 구현하는 기능 및/또는 기타 원하는 기능을 구현할 수 있다.
또한, 서버로 구현되는 경우, 전자기기(600) 중의 프로세서(601)는 또한 메모리에 저장된 프로그램(예를 들어, 판독 전용 메모리(602)에 저장된 프로그램 또는 저장 장치(608)로부터 랜덤 액세스 메모리(603)로 로딩되는 프로그램)을 실행하여, 단말기로부터 송신되는 적어도 하나의 초기 2차원 이미지를 수신하고, 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하는 조작; 상기 단말기가 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하도록, 상기 초기 3차원 비디오를 상기 단말기로 송신하는 조작을 수행할 수 있다. 프로세서(601)는 상기 프로그램을 실행하여, 상술한 본 출원의 실시예에서 구현하는 기능 및/또는 기타 원하는 기능을 구현할 수 있다.
RAM (603)에 전자기기(600)의 조작에 필요한 다양한 프로그램과 데이터가 더 저장되어 있다. 프로세서(601), ROM(602) 및 RAM(603)는 버스(604)를 통해 서로 연결된다. 입력/출력(I/O) 인터페이스(605)도 버스(604)에 연결된다.
일반적으로, 예를 들어 터치 스크린, 터치패널, 키보드, 마우스, 카메라, 마이크로폰, 가속도계, 자이로스코프 등을 포함하는 입력 장치(606); 예를 들어 액정 디스플레이(LCD), 스피커, 진동기 등을 포함하는 출력 장치(607); 예를 들어 자기 테이프, 하드디스크 등을 포함하는 저장 장치(608); 및 통신 장치(609)와 같은 장치는 I/O인터페이스(605)에 연결될 수 있다. 통신 장치(609)는 전자기기(600)와 기타 기기가 무선 또는 유선 통신을 수행하여 데이터를 교환하는 것을 허용할 수 있다. 비록 도 18은 다양한 장치를 구비하는 전자기기(600)를 도시하고 있지만, 이해하여야 할 점은 도시된 모든 장치의 실시 또는 구비를 요구하지 않는다. 대체적으로 실시하거나 더욱 많은 또는 더욱 적은 장치를 구비할 수 있다.
특히, 본 출원의 실시예에 따르면, 위에서 흐름도를 참조하여 설명한 과정은 컴퓨터 소프트웨어 프로그램으로 구현될 수 있다. 예를 들어, 본 출원의 실시예는 컴퓨터 프로그램 제품을 제공하고, 이는 컴퓨터 판독 가능 매체 상에 적재된 컴퓨터 프로그램을 포함하고, 상기 컴퓨터 프로그램은 흐름도에 도시된 방법을 수행하기 위한 프로그램 코드를 포함한다. 이러한 실시예에서, 상기 컴퓨터 프로그램은 통신 장치(609)를 통해 네트워크로부터 다운 및 설치되거나, 또는 저장 장치(608)로부터 설치되거나, 또는 ROM(602)로부터 설치될 수 있다. 상기 컴퓨터 프로그램은 처리 장치(601)에 의해 실행될 때, 적어도 하나의 초기 2차원 이미지를 서버로 송신하여 상기 서버가 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하는 조작; 상기 서버로부터 송신되는 상기 초기 3차원 비디오를 수신하는 조작; 및 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 조작을 수행한다.
또한, 본 출원의 실시예는 컴퓨터 프로그램 제품을 더 제공하고, 이는 컴퓨터 판독 가능 매체 상에 적재되는 컴퓨터 프로그램을 포함하고, 상기 컴퓨터 프로그램은 흐름도에 도시된 방법을 수행하기 위한 프로그램 코드를 포함한다. 이러한 일부 실시예에서, 상기 컴퓨터 프로그램은 통신장치(609)를 통해 네트워크로부터 다운로드 및 설치되거나, 또는 저장 장치(608)로부터 설치되거나, 또는 ROM (602)로부터 설치될 수 있다. 상기 컴퓨터 프로그램이 처리 장치(601)에 의해 수행될 때, 단말기로부터 송신되는 적어도 하나의 초기 2차원 이미지를 수신하고, 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하는 조작; 및 상기 단말기가 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하도록, 상기 초기 3차원 비디오를 상기 단말기로 송신하는 조작을 수행한다.
본 출원의 실시예는 컴퓨터 프로그램을 더 제공하며, 전자기기에서 실행될 때, 적어도 하나의 초기 2차원 이미지를 서버로 송신하여, 상기 서버가 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하는 조작; 상기 서버로부터 송신되는 상기 초기 3차원 비디오를 수신하는 조작; 및 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 조작을 수행한다.
또한, 본 출원의 실시예는 컴퓨터 프로그램을 더 포함하며, 전자기기에서 실행될 때, 단말기로부터 송신되는 적어도 하나의 초기 2차원 이미지를 수신하고, 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하고; 및 상기 단말기가 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하도록, 상기 초기 3차원 비디오를 상기 단말기로 송신하는 조작을 수행한다.
본 출원의 실시예는 컴퓨터 판독 가능 저장매체를 더 제공하며, 상술한 각각의 실시예에 따른 방법을 구현하는 프로그램을 포함한다. 상기 컴퓨터 프로그램이 프로세서에 의해 실행될 때, 프로세서는 상술한 본 출원의 실시예의 기능 및 /또는 기타 원하는 기능을 구현할 수 있다.
특별히 설명하면, 본 출원의 상술한 컴퓨터 판독 가능 매체는 컴퓨터 판독 가능 신호 매체 또는 컴퓨터 판독 가능 저장 매체 또는 상술한 양자의 임의의 조합일 수 있다. 컴퓨터 판독 가능 저장매체는 예를 들어 전기, 자기, 광, 전자기, 적외선, 또는 반도체의 시스템, 장치 또는 소자, 또는 임의의 상술한 구성의 조합을 포함할 수 있지만 이에 제한되지 않는다. 컴퓨터 판독 가능 저장 매체의 더 구체적인 예로서 하나 또는 복수의 도선을 구비하는 전기적 연결, 휴대용 컴퓨터 자기 디스크, 하드 디스크, 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM), 소거 가능 프로그래머블 판독 전용 메모리(EPROM 또는 플래쉬 메모리), 광섬유, 휴대용 컴팩트 자기 디스크 판독 전용 메모리(CD-ROM), 광 저장 소자, 자기 저장 소자, 또는 상술한 임의의 적합한 조합을 포함할 수 있지만 이에 제한되지 않는다. 본 출원에서, 컴퓨터 판독 가능 저장 매체는 임의의 프로그램을 포함하거나 저장하는 유형의 매체일 수 있고, 상기 프로그램은 명령 실행 시스템, 장치 또는 소자에 의해 사용되거나 그와 결합되어 사용될 수 있다. 본 출원에서, 컴퓨터 판독 가능 신호 매체는 베이스밴드 또는 반송파의 일부분으로서 전파되는 데이터 신호에 포함될 수 있으며, 여기에는 컴퓨터 판독 가능 프로그램 코드가 적재되어 있다. 이렇게 전파되는 데이터 신호는 다양한 형태를 사용할 수 있으며, 전자기 신호, 광 신호 또는 상술한 임의의 적합한 조합을 포함하지만 이에 제한되지 않는다. 컴퓨터 판독 가능 신호 매체는 컴퓨터 판독 가능 저장매체 이외의 임의의 컴퓨터 판독 가능 매체일 수도 있으며, 상기 컴퓨터 판독 가능 신호 매체는 명령 실행 시스템, 장치 또는 소자에 의해 사용되거나 이와 결합되어 사용되는 프로그램을 송신, 전파 또는 전송할 수 있다. 컴퓨터 판독 가능 매체에 포함된 프로그램 코드는 임의의 적합한 매체를 사용하여 전송될 수 있고, 전기 와이어, 광케이블, RF(무선 주파수) 등, 또는 상술한 임의의 적합한 조합을 포함하지만 이에 제한되지 않는다.
일부 실시형태에서, 단말기, 서버는 HTTP(HyperText Transfer Protocol, 하이퍼 텍스트 전송 프로토콜)와 같은 임의의 현재 알려진 것 또는 미래에 연구 개발되는 네트워크 프로토콜을 사용하여 통신할 수 있으며, 임의의 형태 또는 매체의 디지털 데이터와 통신(예를 들어, 통신 네트워크) 상호 연결될 수 있다. 통신 네트워크의 예시로서 근거리 통신망(“LAN”), 광역 통신망(“WAN”), 인터넷 워크(예를 들어, 인터넷) 및 엔드 대 엔드 네트워크(예를 들어, ad hoc 엔드 대 엔드 네트워크), 및 임의의 현재 알려진 것 또는 미래에 연구 개발되는 네트워크를 포함하지만 이에 제한되지 않는다.
상술한 컴퓨터 판독 가능 매체는 상술한 전자기기에 포함된 것일 수 있고; 전자기기와 개별적으로 존재하는 것으로서, 상기 전자기기에 장착되어 있지 않은 것일 수도 있다.
상술한 컴퓨터 판독 가능 매체에 하나 또는 복수의 프로그램이 적재되어 있고, 상술한 하나 또는 복수의 프로그램이 상기 전자기기에 의해 실행될 때, 상기 전자기기가, 적어도 하나의 초기 2차원 이미지를 서버로 송신하여, 상기 서버가 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하는 조작; 상기 서버로부터 송신되는 상기 초기 3차원 비디오를 수신하는 조작; 및 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 조작을 수행하도록 한다.
또는, 상술한 컴퓨터 판독 가능 저장매체에 하나 또는 복수의 프로그램이 적재되어 있고, 상술한 하나 또는 복수의 프로그램이 상기 전자기기에 의해 실행될 때, 상기 전자기기로 하여금, 단말기로부터 송신되는 적어도 하나의 초기 2차원 이미지를 수신하고, 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하는 조작; 및 상기 단말기가 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하도록, 상기 초기 3차원 비디오를 상기 단말기로 송신하는 조작을 수행하도록 한다.
또한, 상술한 컴퓨터 판독 가능 저장매체에 하나 또는 복수의 프로그램이 적재되어 있고, 상술한 하나 또는 복수의 프로그램이 상기 전자기기에 의해 실행될 때, 상기 전자기기로 하여금 상술한 본 출원의 실시예의 기능 및 /또는 기타 원하는 기능을 구현하도록 한다.
한가지 또는 여러가지 프로그램 설계 언어 또는 그 조합으로 본 출원의 조작을 수행하기 위한 컴퓨터 프로그램 코드를 작성할 수 있고, 상술한 프로그램 설계 언어는 Java, Smalltalk, C++와 같은 객체 지향 프로그램 설계 언어를 포함하고, “C” 언어 또는 유시한 프로그램 설계 언어와 같은 일반적인 절차식 프로그램 설계 언어를 더 포함한다. 프로그램 코드는 완전히 사용자 컴퓨터에서 실행되거나, 부분적으로 사용자 컴퓨터에서 실행되거나, 하나의 별도의 소프트웨어 패키지로서 실행되거나, 부분적으로 사용자 컴퓨터에서 부분적으로 원격 컴퓨터에서 실행되거나, 또는 완전히 원격 컴퓨터 또는 서버에서 실행될 수 있다. 원격 컴퓨터에 관한 경우에서, 원격 컴퓨터는 근거리 통신망(Local Area Network, 'LAN') 또는 광역 통신망(Wide Area Network, 'WAN')을 포함하는 임의의 종류의 네트워크를 통해 사용자 컴퓨터에 연결되거나, 외부 컴퓨터에 연결(예를 들어 인터넷 서비스 제공자를 통해 인터넷에 연결)될 수 있다.
첨부 도면 중의 흐름도와 블록도는 본 출원의 다양한 실시예에 따른 시스템, 방법 및 컴퓨터 프로그램 제품의 구현 가능한 시스템 체계, 기능 및 조작을 도시하고 있다. 이러한 점에서, 흐름도 또는 블록도 중의 각각의 블록도는 하나의 모듈, 프로그램 섹션, 또는 코드의 일부분을 대표할 수 있으며, 상기 모듈, 프로그램 섹션, 또는 코드의 일부분은 하나 또는 복수의 소정 논리 기능을 구현하기 위한 실행 가능 명령을 포함한다. 일부 대체적인 구현에서, 블록 중 라벨링된 기능은 첨부 도면에 표기된 것과 다른 순서로 발생될 수도 있다는 점에 주의하여야 한다. 예를 들어, 두 개의 연속으로 표시된 블록은 실제로는 기본적으로 병행으로 수행될 수 있고, 이들은 경우에 따라 반대되는 순서로 실행될 수도 있으며, 이는 관련된 기능에 따라 결정된다. 또한 주의하여야 할 점은, 블록도 및/또는 흐름도 중의 각각의 블록, 및 블록도 및/또는 흐름도 중의 블록의 조합은 소정의 기능 또는 조작을 수행하는 전용의 하드웨어 기반 시스템으로 구현할 수 있고, 또는 전용 하드웨어와 컴퓨터 명령의 조합으로 구현할 수도 있다.
본 출원의 실시예에 관련된 모듈은 소프트웨어의 형태로 구현될 수 있고, 하드웨어의 형태로 구현될 수도 있다. 여기서, 모듈의 명칭은 일부 경우에 상기 모듈 자체에 대한 한정을 이루지 않으며, 예를 들어, 송신 모듈은 “적어도 하나의 초기 2차원 이미지를 송신하는 모듈”로 기재될 수도 있다.
본 명세서에서 상술한 기능은 적어도 부분적으로 하나 또는 복수의 하드웨어 논리 부재에 의해 수행될 수 있다. 예를 들어, 비제한적인 것으로서, 사용 가능한 예서적 유형의 하드웨어 논리 부재는 필드 프로그래머블 게이트 어레이(FPGA), 전용 집적 회로(ASIC), 전용 표준 제품(ASSP), 시스템 온 칩(SOC),복잡 프로그래머블 논리 기기(CPLD) 등을 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 1은 3차원 비디오의 처리 방법을 제공하며, 단말기에 적용되고, 상기 방법은, 적어도 하나의 초기 2차원 이미지를 서버로 송신하여, 상기 서버가 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하는 단계; 상기 서버로부터 송신되는 상기 초기 3차원 비디오를 수신하는 단계; 및 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 단계를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 2는 예시 1의 방법을 제공하며, 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 단계는, 디코딩 파라미터를 기초로 상기 초기 3차원 비디오에 대해 디코딩을 수행하여, 상기 초기 3차원 비디오의 초기 이미지 프레임 집합을 획득하는 단계; 및 설정 파라미터를 기초로 상기 초기 이미지 프레임 집합에 대해 처리하여 상기 타겟 3차원 비디오를 획득하는 단계;를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 3은 예시 2의 방법을 제공하며, 상기 설정 파라미터는 렌더링 파라미터 및 스플라이싱 파라미터 중 적어도 하나의 파라미터를 포함하고, 상기 설정 파라미터를 기초로 상기 초기 이미지 프레임 집합에 대해 처리하여 상기 타겟 3차원 비디오를 획득하는 단계는, 상기 렌더링 파라미터를 기초로, 상기 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링하여 렌더링 후의 이미지 프레임 집합을 획득하고, 상기 스플라이싱 파라미터에 따라 상기 렌더링 후의 이미지 프레임 집합 중의 이미지 프레임을 스플라이싱하여, 상기 타겟 3차원 비디오를 획득하는 단계; 또는, 상기 렌더링 파라미터를 기초로, 상기 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링하여, 상기 타겟 3차원 비디오를 획득하는 단계; 또는, 상기 스플라이싱 파라미터에 따라 상기 초기 이미지 프레임 집합 중의 초기 이미지 프레임을 스플라이싱하여, 상기 타겟 3차원 비디오를 획득하는 단계를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 4는 예시 3의 방법을 제공하며, 상기 초기 3차원 비디오에 대해 처리하여 상기 타겟 3차원 비디오를 획득하는 단계는, 렌더링 공간 및/또는 시간축을 결정하는 단계를 더 포함하고; 상기 설정 파라미터를 기초로 상기 초기 이미지 프레임 집합에 대해 처리하여 타겟 3차원 비디오를 획득하는 단계는, 상기 렌더링 파라미터를 기초로, 상기 렌더링 공간에서 상기 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링하여 렌더링 후의 이미지 프레임 집합을 획득하고, 상기 시간축의 지시에 따라, 상기 렌더링 후의 이미지 프레임 집합 중의 이미지 프레임을 상기 스플라이싱 파라미터에 따라 스플라이싱하여, 상기 타겟 3차원 비디오를 획득하는 단계; 또는, 상기 렌더링 파라미터를 기초로, 상기 렌더링 공간에서 상기 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링하여, 상기 타겟 3차원 비디오를 획득하는 단계; 또는, 상기 시간축에서 지시하는 시간 순서에 따라, 상기 초기 이미지 프레임 집합 중의 초기 이미지 프레임을 상기 스플라이싱 파라미터에 따라 스플라이싱하여, 상기 타겟 3차원 비디오를 획득하는 단계를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 5는 예시 1의 방법을 제공하며, 상기 적어도 하나의 초기 2차원 이미지를 서버로 송신하는 단계 이전에, 상기 방법은, 수신된 모델 선택 명령에 따라 타겟 모델을 획득하며, 여기서, 상기 모델 선택 명령은 상기 타겟 모델을 지시하기 위한 타겟 모델 정보를 포함하는 단계; 상기 타겟 모델에 포함된 이미지 파라미터를 결정하는 단계; 및 상기 이미지 파라미터와 매칭되는 상기 적어도 하나의 초기 2차원 이미지를 결정하는 단계;를 더 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 6은 예시 5의 방법을 제공하며, 상기 수신된 모델 선택 명령에 따라 타겟 모델을 획득하는 단계는, 상기 모델 선택 명령에 응답하여, 상기 단말기에서 상기 타겟 모델 정보에 대응되는 상기 타겟 모델을 조회하는 단계; 상기 단말기에 상기 타겟 모델이 존재하지 않으면, 서버로 요청을 송신하여, 상기 서버가 상기 타겟 모델을 결정 및 송신하도록 하는 단계; 및 상기 서버로부터 송신되는 상기 타겟 모델을 수신하는 단계;를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 7은 예시 2의 방법을 제공하며, 상기 디코딩 파라미터를 기초로 상기 초기 3차원 비디오에 대해 디코딩을 수행하여, 상기 초기 3차원 비디오의 초기 이미지 프레임 집합을 획득하는 단계 이후에, 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 단계는, 기설정 규칙에 따라 상기 초기 이미지 프레임 집합 중의 각각의 초기 이미지 프레임의 전시 순서를 결정하는 단계를 더 포함하고; 상기 설정 파라미터를 기초로 상기 초기 이미지 프레임 집합에 대해 처리하여 상기 타겟 3차원 비디오를 획득하는 단계는, 상기 설정 파라미터를 기초로, 상기 전시 순서에 따라 상기 초기 이미지 프레임 집합 중의 초기 이미지 프레임에 대해 처리하여, 상기 타겟 3차원 비디오를 획득하는 단계를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 8은 예시 2의 방법을 제공하며, 상기 설정 파라미터를 기초로, 상기 초기 이미지 프레임 집합 중의 초기 이미지 프레임에 대해 처리하여, 처리 후의 이미지 프레임 집합을 획득하는 단계 이후에, 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 단계는, 기설정 규칙에 따라 상기 처리 후의 이미지 프레임 집합 중의 각각의 이미지 프레임의 전시 순서를 결정하고, 상기 전시 순서에 따라 처리 후의 이미지 프레임 집합 중의 이미지 프레임의 위치를 조정하여, 타겟 3차원 비디오를 획득하는 단계를 더 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 9는 3차원 비디오의 처리 방법을 제공하며, 서버에 적용되고, 상기 방법은, 단말기로부터 송신되는 적어도 하나의 초기 2차원 이미지를 수신하고, 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하는 단계; 및 상기 단말기가 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하도록, 상기 초기 3차원 비디오를 상기 단말기로 송신하는 단계;를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 10은 예시 9의 방법을 제공하며, 상기 단말기로부터 송신되는 초기 2차원 이미지를 수신하는 단계 이전에, 상기 방법은 단말기로부터 송신되는 요청을 수신하며, 상기 요청은 상기 단말기에 타겟 모델이 존재하지 않을 때, 상기 단말기로부터 송신되는 요청인 단계; 상기 요청에 응답하여 상기 타겟 모델을 획득하고, 상기 타겟 모델은 이미지 파라미터를 포함하는 단계; 및 상기 타겟 모델을 상기 단말기로 송신하여, 상기 단말기가 상기 이미지 파라미터와 매칭되는 상기 적어도 하나의 초기 2차원 이미지를 결정하도록 하는 단계;를 더 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 11은 3차원 비디오의 처리 장치를 제공하며, 상기 장치는, 적어도 하나의 초기 2차원 이미지를 서버로 송신하여, 상기 서버가 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하는 송신 모듈; 상기 서버로부터 송신되는 상기 초기 3차원 비디오를 수신하는 수신 모듈; 및 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 처리 모듈;을 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 12는 3차원 비디오의 처리 장치를 제공하며, 단말기로부터 송신되는 적어도 하나의 초기 2차원 이미지를 수신하고, 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하는 수신 모듈; 및 상기 단말기가 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하도록, 상기 초기 3차원 비디오를 상기 단말기로 송신하는 송신 모듈;을 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 13은 컴퓨터 판독 가능 저장매체를 제공하며, 여기에는 컴퓨터 프로그램이 저장되어 있고, 상기 프로그램이 프로세서에 의해 실행될 때 예시 1 내지 예시 8 에 따른 방법을 구현한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 14는 컴퓨터 판독 가능 저장매체를 제공하며, 여기에는 컴퓨터 프로그램이 저장되어 있고, 상기 프로그램이 프로세서에 의해 실행될 때 예시 9 또는 예시 10에 따른 방법을 구현한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 15는 전자기기를 제공하며, 컴퓨터 프로그램이 저장되어 있는 메모리를 포함하고; 프로세서는 상기 메모리에 저장된 상기 컴퓨터 프로그램을 실행하여, 예시 1 내지 예시 8 에 따른 방법을 구현한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 16은 전자기기를 제공하며, 컴퓨터 프로그램이 저장되어 있는 메모리; 상기 메모리에 저장된 상기 컴퓨터 프로그램을 실행하여, 예시 9 또는 예시 10 에 따른 방법을 구현하는 프로세서;를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 예시 17은 시스템을 제공하며, 단말기와 서버를 포함하고; 상기 단말기는 예시 1 내지 예시 8에 따른 방법을 구현하기 위한 것이고; 상기 서버는 예시 9 또는 예시 10에 따른 방법을 구현하기 위한 것이다.
상술한 내용은 본 출원의 보다 바람직한 실시예 및 사용되는 기술 원리에 대한 설명일 뿐이다. 본 분야의 기술자는, 본 출원에 관련된 공개 범위는 상술한 기술특징의 특정 조합으로 이루어진 기술방안에 제한되지 않고, 동시에 상술한 공개 범위를 벗어나지 않는 상황에서, 상술한 기술특징 또는 그 동등한 특징이 임의로 조합되어 이루어진 기타 기술방안, 예를 들어 상술한 특징과 본 출원에 개시된(단 이에 제한되지 않음) 유사한 기능을 갖는 기술특징에 대해 상호 치환하여 형성된 기술방안을 포괄하여야 한다는 점을 이해하여야 한다.
또한, 비록 특정 순서로 각 조작들에 대해 기재하였지만, 이는 이러한 조작들이 기재된 특정 순서로 또는 순차적인 순서로 수행될 것을 요구하는 것으로 이해되어서는 안된다. 일정 환경에서, 멀티 태스크 및 병렬 처리가 유리할 수 있다. 마찬가지로, 몇몇 구체적인 구현 세부사항이 상기 기재에 포함되어 있지만, 이들은 본 출원의 범위를 제한하는 것으로 해석되어서는 안된다. 별도의 실시예의 문맥에서 기재된 일부 특징들은 조합되어 단일 실시예에서 구현될 수도 있다. 반대로, 단일 실시예의 문맥에서 기재된 다양한 특징은 또한 개별적으로 또는 임의의 적합한 서브 조합의 형태로 복수의 실시예에서 구현될 수도 있다.
구조적 특징 및/또는 방법의 논리적 동작에 특정된 언어를 사용하여 본 주제에 대해 설명하였지만, 첨부된 청구범위에 한정된 주제가 반드시 위에 기재된 특정 특징 또는 동작에 제한되는 것은 아니라는 점을 이해하여야 한다. 반대로, 위에서 기재된 특정 특징 및 동작은 청구범위를 구현하는 예시적인 형태일 뿐이다.

Claims (19)

  1. 단말기에 적용되는 3차원 비디오의 처리 방법에 있어서, 상기 방법은,
    적어도 하나의 초기 2차원 이미지를 서버로 송신하여, 상기 서버가 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하는 단계;
    상기 서버로부터 송신되는 상기 초기 3차원 비디오를 수신하는 단계; 및
    상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 단계;를 포함하는 것을 특징으로 하는 3차원 비디오의 처리 방법.
  2. 제1항에 있어서,
    상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 단계는,
    디코딩 파라미터를 기초로 상기 초기 3차원 비디오에 대해 디코딩을 수행하여, 상기 초기 3차원 비디오의 초기 이미지 프레임 집합을 획득하는 단계; 및
    설정 파라미터를 기초로 상기 초기 이미지 프레임 집합에 대해 처리하여 상기 타겟 3차원 비디오를 획득하는 단계;를 포함하는 것을 특징으로 하는 방법.
  3. 제2항에 있어서,
    상기 설정 파라미터는 렌더링 파라미터 및 스플라이싱 파라미터 중 적어도 하나의 파라미터를 포함하고, 상기 설정 파라미터를 기초로 상기 초기 이미지 프레임 집합에 대해 처리하여 상기 타겟 3차원 비디오를 획득하는 단계는,
    상기 렌더링 파라미터를 기초로, 상기 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링하여 렌더링 후의 이미지 프레임 집합을 획득하고, 상기 스플라이싱 파라미터에 따라 상기 렌더링 후의 이미지 프레임 집합 중의 이미지 프레임을 스플라이싱하여, 상기 타겟 3차원 비디오를 획득하는 단계; 또는,
    상기 렌더링 파라미터를 기초로, 상기 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링하여, 상기 타겟 3차원 비디오를 획득하는 단계; 또는,
    상기 스플라이싱 파라미터에 따라 상기 초기 이미지 프레임 집합 중의 초기 이미지 프레임을 스플라이싱하여, 상기 타겟 3차원 비디오를 획득하는 단계;를 포함하는 것을 특징으로 하는 방법.
  4. 제3항에 있어서, 상기 초기 3차원 비디오에 대해 처리하여 상기 타겟 3차원 비디오를 획득하는 단계는,
    렌더링 공간 및/또는 시간축을 결정하는 단계를 더 포함하고;
    상기 설정 파라미터를 기초로 상기 초기 이미지 프레임 집합에 대해 처리하여 상기 타겟 3차원 비디오를 획득하는 단계는,
    상기 렌더링 파라미터를 기초로, 상기 렌더링 공간에서 상기 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링하여 렌더링 후의 이미지 프레임 집합을 획득하고, 상기 시간축에서 지시하는 시간 순서에 따라, 상기 렌더링 후의 이미지 프레임 집합 중의 이미지 프레임을 상기 스플라이싱 파라미터에 따라 스플라이싱하여, 상기 타겟 3차원 비디오를 획득하는 단계; 또는,
    상기 렌더링 파라미터를 기초로, 상기 렌더링 공간에서 상기 초기 이미지 프레임 집합 중의 적어도 하나의 초기 이미지 프레임에 대해 렌더링하여, 상기 타겟 3차원 비디오를 획득하는 단계; 또는,
    상기 시간축의 지시에 따라, 상기 초기 이미지 프레임 집합 중의 초기 이미지 프레임을 상기 스플라이싱 파라미터에 따라 스플라이싱하여, 상기 타겟 3차원 비디오를 획득하는 단계;를 포함하는 것을 특징으로 하는 방법.
  5. 제1항 내지 제4항 중 어느 한 항에 있어서,
    상기 적어도 하나의 초기 2차원 이미지를 상기 서버로 송신하는 단계 이전에, 상기 방법은,
    수신된 모델 선택 명령에 따라 타겟 모델을 획득하며, 여기서, 상기 모델 선택 명령은 상기 타겟 모델을 지시하기 위한 타겟 모델 정보를 포함하는 단계;
    상기 타겟 모델에 포함된 이미지 파라미터를 결정하는 단계; 및
    상기 이미지 파라미터와 매칭되는 상기 적어도 하나의 초기 2차원 이미지를 결정하는 단계;를 더 포함하는 것을 특징으로 하는 방법.
  6. 제5항에 있어서,
    상기 수신된 모델 선택 명령에 따라 상기 타겟 모델을 획득하는 단계는,
    상기 모델 선택 명령에 응답하여, 상기 단말기에서 상기 타겟 모델 정보에 대응되는 상기 타겟 모델을 조회하는 단계;
    상기 단말기에 상기 타겟 모델이 존재하지 않으면, 상기 서버로 요청을 송신하여, 상기 서버가 상기 타겟 모델을 결정 및 송신하도록 하는 단계; 및
    상기 서버로부터 송신되는 상기 타겟 모델을 수신하는 단계;를 포함하는 것을 특징으로 하는 방법.
  7. 제2항 내지 제6항 중 어느 한 항에 있어서,
    상기 디코딩 파라미터를 기초로 상기 초기 3차원 비디오에 대해 디코딩을 수행하여, 상기 초기 3차원 비디오의 초기 이미지 프레임 집합을 획득하는 단계 이후에, 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 단계는,
    기설정 규칙에 따라 상기 초기 이미지 프레임 집합 중의 각각의 초기 이미지 프레임의 전시 순서를 결정하는 단계를 더 포함하고;
    상기 설정 파라미터를 기초로 상기 초기 이미지 프레임 집합에 대해 처리하여 상기 타겟 3차원 비디오를 획득하는 단계는,
    상기 설정 파라미터를 기초로, 상기 전시 순서에 따라 상기 초기 이미지 프레임 집합 중의 초기 이미지 프레임에 대해 처리하여, 상기 타겟 3차원 비디오를 획득하는 단계를 포함하는 것을 특징으로 하는 방법.
  8. 서버에 적용되는 3차원 비디오의 처리 방법에 있어서, 상기 방법은,
    단말기로부터 송신되는 적어도 하나의 초기 2차원 이미지를 수신하고, 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하는 단계; 및
    상기 단말기가 상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하도록, 상기 초기 3차원 비디오를 상기 단말기로 송신하는 단계;를 포함하는 것을 특징으로 하는 3차원 비디오의 처리 방법.
  9. 제8항에 있어서,
    상기 단말기로부터 송신되는 초기 2차원 이미지를 수신하는 단계 이전에, 상기 방법은,
    단말기로부터 송신되는 요청을 수신하며, 상기 요청은 상기 단말기에 타겟 모델이 존재하지 않을 때, 상기 단말기로부터 송신되는 요청인 단계;
    상기 요청에 응답하여 상기 타겟 모델을 획득하고, 상기 타겟 모델은 이미지 파라미터를 포함하는 단계; 및
    상기 타겟 모델을 상기 단말기로 송신하여, 상기 단말기가 상기 이미지 파라미터와 매칭되는 상기 적어도 하나의 초기 2차원 이미지를 결정하도록 하는 단계;를 더 포함하는 것을 특징으로 하는 방법.
  10. 3차원 비디오의 처리 장치에 있어서, 상기 처리 장치는,
    적어도 하나의 초기 2차원 이미지를 서버로 송신하여, 상기 서버가 상기 적어도 하나의 초기 2차원 이미지를 기초로 초기 3차원 비디오를 생성하도록 하는 송신 모듈;
    상기 서버로부터 송신되는 상기 초기 3차원 비디오를 수신하는 수신 모듈; 및
    상기 초기 3차원 비디오에 대해 처리하여 타겟 3차원 비디오를 획득하는 처리 모듈;을 포함하는 것을 특징으로 하는 3차원 비디오의 처리 장치.
  11. 컴퓨터 프로그램이 저장되어 있는 컴퓨터 판독 가능 저장매체에 있어서,
    상기 프로그램이 프로세서에 의해 실행될 때 제1항 내지 제7항 중 어느 한 항에 따른 방법을 구현하는 것을 특징으로 하는 컴퓨터 판독 가능 저장매체.
  12. 컴퓨터 프로그램이 저장되어 있는 컴퓨터 판독 가능 저장매체에 있어서,
    상기 프로그램이 프로세서에 의해 실행될 때 제8항 또는 제9항에 따른 방법을 구현하는 것을 특징으로 하는 컴퓨터 판독 가능 저장매체.
  13. 전자기기에 있어서,
    컴퓨터 프로그램이 저장되어 있는 메모리;
    상기 메모리에 저장된 상기 컴퓨터 프로그램을 실행하여, 제1항 내지 제7항 중 어느 한 항에 따른 방법을 구현하는 프로세서;를 포함하는 것을 특징으로 하는 전자기기.
  14. 전자기기에 있어서,
    컴퓨터 프로그램이 저장되어 있는 메모리;
    상기 저장 장치에 저장된 상기 컴퓨터 프로그램을 실행하여, 제8항 또는 제9항에 따른 방법을 구현하는 프로세서;를 포함하는 것을 특징으로 하는 전자기기.
  15. 3차원 비디오의 처리 시스템에 있어서,
    상기 시스템은 단말기와 서버를 포함하고;
    상기 단말기는 제1항 내지 제7항 중 어느 한 항에 따른 방법을 구현하기 위한 것이며;
    상기 서버는 제8항 또는 제9항에 따른 방법을 구현하기 위한 것인 것을 특징으로 하는 3차원 비디오의 처리 시스템.
  16. 컴퓨터 프로그램 제품에 있어서, 컴퓨터 판독 가능 매체 상에 적재되는 컴퓨터 프로그램을 포함하고, 상기 컴퓨터 프로그램이 프로세서에 의해 실행될 때, 제1항 내지 제7항 중 어느 한 항에 따른 방법을 구현하는 컴퓨터 프로그램 제품.
  17. 컴퓨터 프로그램 제품에 있어서, 컴퓨터 판독 가능 매체 상에 적재되는 컴퓨터 프로그램을 포함하고, 상기 컴퓨터 프로그램이 프로세서에 의해 실행될 때, 제8항 또는 제9항에 따른 방법을 구현하는 컴퓨터 프로그램 제품.
  18. 컴퓨터 프로그램에 있어서, 전자기기에서 실행될 때, 상기 전자기기가 제1항 내지 제7항 중 어느 한 항에 따른 방법을 구현하도록 하는 컴퓨터 프로그램.
  19. 컴퓨터 프로그램에 있어서, 전자기기에서 실행될 때, 상기 전자기기가 제8항 또는 제9항에 따른 방법을 구현하도록 하는 컴퓨터 프로그램.

KR1020227033921A 2020-03-27 2021-02-24 3차원 비디오의 처리 방법, 장치, 판독 가능 저장매체 및 전자기기 KR102657674B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN202010232159.1A CN111447504B (zh) 2020-03-27 2020-03-27 三维视频的处理方法、装置、可读存储介质和电子设备
CN202010232159.1 2020-03-27
PCT/CN2021/077741 WO2021190229A1 (zh) 2020-03-27 2021-02-24 三维视频的处理方法、装置、可读存储介质和电子设备

Publications (2)

Publication Number Publication Date
KR20220149574A true KR20220149574A (ko) 2022-11-08
KR102657674B1 KR102657674B1 (ko) 2024-04-16

Family

ID=71652608

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020227033921A KR102657674B1 (ko) 2020-03-27 2021-02-24 3차원 비디오의 처리 방법, 장치, 판독 가능 저장매체 및 전자기기

Country Status (6)

Country Link
US (1) US11785195B2 (ko)
EP (1) EP4131983A4 (ko)
JP (1) JP7507875B2 (ko)
KR (1) KR102657674B1 (ko)
CN (1) CN111447504B (ko)
WO (1) WO2021190229A1 (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111447504B (zh) 2020-03-27 2022-05-03 北京字节跳动网络技术有限公司 三维视频的处理方法、装置、可读存储介质和电子设备
CN114697758B (zh) * 2020-12-30 2023-03-31 北京金山云网络技术有限公司 视频处理方法、装置及电子设备
CN114040183B (zh) * 2021-11-08 2024-04-30 深圳传音控股股份有限公司 图像处理方法、移动终端及存储介质
CN113901571B (zh) * 2021-12-06 2023-03-17 深圳市斯维尔科技股份有限公司 加快模型数据渲染的方法、系统、设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140103910A (ko) * 2011-10-05 2014-08-27 비트애니메이트 인코포레이티드 해상도가 향상된 3d 비디오 렌더링 시스템 및 방법
KR20140122054A (ko) * 2013-04-09 2014-10-17 삼성전자주식회사 2차원 이미지를 3차원 이미지로 변환하는 3차원 이미지 변환 장치 및 그 제어 방법

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101271469B (zh) * 2008-05-10 2013-08-21 深圳先进技术研究院 一种基于三维模型库下二维图像的识别和物体的重建方法
JP5239878B2 (ja) * 2009-01-07 2013-07-17 カシオ計算機株式会社 立体画像作成システム、端末装置、及び立体画像提供装置
TW201121318A (en) * 2009-12-11 2011-06-16 Univ Far East Method and device for capturing and converting 2-D image into 3-D dynamic video instantaneously.
CN102164265B (zh) * 2011-05-23 2013-03-13 宇龙计算机通信科技(深圳)有限公司 一种三维视频通话的方法及系统
JP6145779B2 (ja) * 2012-02-02 2017-06-14 サン パテント トラスト 符号化方法、復号方法、符号化装置、および復号装置
CN102572486B (zh) * 2012-02-06 2014-05-21 清华大学 立体视频的采集系统及方法
US11164394B2 (en) * 2012-02-24 2021-11-02 Matterport, Inc. Employing three-dimensional (3D) data predicted from two-dimensional (2D) images using neural networks for 3D modeling applications and other applications
US10163261B2 (en) * 2014-03-19 2018-12-25 Matterport, Inc. Selecting two-dimensional imagery data for display within a three-dimensional model
WO2015056449A1 (ja) * 2013-10-18 2015-04-23 パナソニック株式会社 画像符号化方法、画像復号方法、画像符号化装置および画像復号装置
CN104837066B (zh) * 2015-05-15 2019-01-25 腾讯科技(北京)有限公司 物品图像处理方法、装置和系统
CN106303494B (zh) * 2015-05-27 2018-07-17 深圳超多维光电子有限公司 视频处理方法及装置
CN106303492A (zh) * 2015-05-27 2017-01-04 深圳超多维光电子有限公司 视频处理方法及装置
JP6473872B2 (ja) * 2015-07-31 2019-02-27 公立大学法人広島市立大学 映像構築装置、擬似視覚体験システム、および映像構築プログラム
CN105472374A (zh) * 2015-11-19 2016-04-06 广州华多网络科技有限公司 一种3d视频直播方法、装置及系统
JP6635848B2 (ja) * 2016-03-31 2020-01-29 ソフトバンク株式会社 3次元動画データ生成装置、3次元動画データ生成プログラム、及びその方法
CN107393000B (zh) * 2017-08-24 2020-07-28 Oppo广东移动通信有限公司 图像处理方法、装置、服务器及计算机可读存储介质
CN111246197B (zh) * 2018-05-06 2022-03-22 Oppo广东移动通信有限公司 三维视频通信方法及系统、电子装置、服务器和可读存储介质
CN108632597B (zh) * 2018-05-06 2020-01-10 Oppo广东移动通信有限公司 三维视频通信方法及系统、电子装置和可读存储介质
CN108961375A (zh) * 2018-06-20 2018-12-07 腾讯科技(深圳)有限公司 一种根据二维图像生成三维图像的方法及装置
CN109035373B (zh) * 2018-06-28 2022-02-01 北京市商汤科技开发有限公司 三维特效程序文件包的生成及三维特效生成方法与装置
CN109151430B (zh) * 2018-09-30 2020-07-28 Oppo广东移动通信有限公司 一种数据处理方法、终端、服务器和计算机存储介质
CN109743584B (zh) * 2018-11-13 2021-04-06 百度在线网络技术(北京)有限公司 全景视频合成方法、服务器、终端设备及存储介质
CN109615478A (zh) * 2018-12-14 2019-04-12 平安城市建设科技(深圳)有限公司 基于ar的户型预览方法、系统及计算机可读存储介质
EP3910593A4 (en) * 2019-01-09 2022-01-19 Fuji Corporation IMAGE PROCESSING DEVICE, WORKING ROBOT, SUBSTRATE INSPECTION DEVICE AND SAMPLE INSPECTION DEVICE
CN110910338A (zh) * 2019-12-03 2020-03-24 煤炭科学技术研究院有限公司 一种三维实景视频的获取方法、装置、设备及存储介质
CN111447504B (zh) * 2020-03-27 2022-05-03 北京字节跳动网络技术有限公司 三维视频的处理方法、装置、可读存储介质和电子设备

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140103910A (ko) * 2011-10-05 2014-08-27 비트애니메이트 인코포레이티드 해상도가 향상된 3d 비디오 렌더링 시스템 및 방법
KR20140122054A (ko) * 2013-04-09 2014-10-17 삼성전자주식회사 2차원 이미지를 3차원 이미지로 변환하는 3차원 이미지 변환 장치 및 그 제어 방법

Also Published As

Publication number Publication date
US20220417486A1 (en) 2022-12-29
WO2021190229A1 (zh) 2021-09-30
EP4131983A4 (en) 2023-08-23
CN111447504B (zh) 2022-05-03
CN111447504A (zh) 2020-07-24
JP7507875B2 (ja) 2024-06-28
JP2023519372A (ja) 2023-05-10
US11785195B2 (en) 2023-10-10
EP4131983A1 (en) 2023-02-08
BR112022019381A2 (pt) 2022-11-29
KR102657674B1 (ko) 2024-04-16

Similar Documents

Publication Publication Date Title
KR20220149574A (ko) 3차원 비디오의 처리 방법, 장치, 판독 가능 저장매체 및 전자기기
CN110290398B (zh) 视频下发方法、装置、存储介质及电子设备
CN113395477B (zh) 基于视频会议的共享方法、装置、电子设备和计算机介质
CN116527748B (zh) 一种云渲染交互方法、装置、电子设备及存储介质
US11871137B2 (en) Method and apparatus for converting picture into video, and device and storage medium
CN113989173A (zh) 视频融合方法、装置、电子设备及存储介质
US11893770B2 (en) Method for converting a picture into a video, device, and storage medium
CN110852946A (zh) 图片展示方法、装置和电子设备
CN112351221A (zh) 图像特效处理方法、装置、电子设备和计算机可读存储介质
JP4444623B2 (ja) 動画像変換装置および方法、動画像配信装置、メール中継装置並びにプログラム
CN113259729B (zh) 数据切换的方法、服务器、系统及存储介质
WO2023197811A1 (zh) 视频下载、传输方法、装置、终端设备、服务器及介质
CN116248889A (zh) 图像编码及解码方法、装置和电子设备
CN116847147A (zh) 特效视频确定方法、装置、电子设备及存储介质
CN113473180B (zh) 一种基于无线的Cloud XR数据传输方法以及装置、存储介质、电子装置
CN114245134A (zh) 音视频数据生成方法、装置、设备和计算机可读介质
CN114760525A (zh) 视频生成及播放方法、装置、设备、介质
CN115086574A (zh) 视频合成方法、装置、设备及存储介质
CN116760991A (zh) 码流信息生成方法和装置
CN117336487A (zh) 融合阿尔法通道的图像编码方法和计算机可读介质
CN116744026A (zh) 语音连麦的合流方法及设备
CN116934576A (zh) 端云协同的媒体数据处理方法、装置、设备及存储介质
CN115457158A (zh) 图像处理方法、装置、电子设备及存储介质
CN115953432A (zh) 基于图像的运动预测方法、装置、电子设备和存储介质
CN115334305A (zh) 视频数据传输方法、装置、电子设备和介质

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant