KR20240066618A - 다시점 스트리밍을 위한 하이브리드 다운로드 방법 및 장치, 다시점 스트리밍 시스템 - Google Patents

다시점 스트리밍을 위한 하이브리드 다운로드 방법 및 장치, 다시점 스트리밍 시스템 Download PDF

Info

Publication number
KR20240066618A
KR20240066618A KR1020220147618A KR20220147618A KR20240066618A KR 20240066618 A KR20240066618 A KR 20240066618A KR 1020220147618 A KR1020220147618 A KR 1020220147618A KR 20220147618 A KR20220147618 A KR 20220147618A KR 20240066618 A KR20240066618 A KR 20240066618A
Authority
KR
South Korea
Prior art keywords
segment
download
viewpoint
definition
group
Prior art date
Application number
KR1020220147618A
Other languages
English (en)
Inventor
정준영
이제원
최동준
현은희
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020220147618A priority Critical patent/KR20240066618A/ko
Priority to US18/503,612 priority patent/US20240155014A1/en
Publication of KR20240066618A publication Critical patent/KR20240066618A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • H04N21/2393—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명의 일실시예에 따른 다시점 스트리밍을 위한 하이브리드 다운로드 방법은 n-1번째 세그먼트에 대한 그룹 다운로드를 서버에 요청하는 단계와, 시청자의 VP1 시점에 대한 n-3번째 세그먼트에 대한 재생을 수행하는 단계와, n-1번째 세그먼트에 대한 그룹 다운로드 요청이 완료되면, n번째 세그먼트에 대한 그룹 다운로드를 요청을 수행하는 단계와, 시청자의 시점 변경이 n-2번째 세그먼트 재생 시간에 발생되면 VP3 시점에 대해 저화질의 n-2번째 세그먼트를 재생하는 단계와, n번째 세그먼트에 대한 그룹 다운로드가 완료되면 VP3 시점의 고화질 n-1번째 세그먼트 싱글 다운로드를 상기 서버에 요청하는 단계와, 상기 VP3 시점에 대한 고화질의 n-1번째 세그먼트 싱글 다운로드가 완료되면, 상기 VP3 시점의 고화질 n-1번째 세그먼트를 재생하는 단계를 포함할 수 있다.

Description

다시점 스트리밍을 위한 하이브리드 다운로드 방법 및 장치, 다시점 스트리밍 시스템{HYBRID DOWNLOAD METHOD AND APPARATUS FOR MULTI-VIEW VIDEO STREAMING, MULTI-VIEW VIDEO STREAMING SYSTEM}
본 발명은 다시점 비디오 스트리밍에서 시청자의 시정 시점 변경에 따른 시점 전환 지연없이 높은 화질로 서비스를 제공하는 방법 및 장치에 관한 것이다.
최근 3DTV, 다시점, 360VR, AR 등의 다양한 실감 콘텐츠가 인터넷망에 접속하여 동영상 서비스를 제공하는 형태로 발전하고 있다. 실감 콘텐츠의 경우 전송할 데이터 양이 많아 인터넷 상에서 서비스하기에 어려움이 있었지만, 비디오/오디오 압축 기술 및 콘텐츠 전송 기술의 비약적인 발전으로 점점 서비스가 확대되고 있다.
이러한 실감 콘텐츠를 인터넷 상에 서비스할 때 가장 중요한 부분은 시청자와의 원활한 인터렉션이 이루어져야 한다는 것이다. 실감 콘텐츠에서 원활한 인터렉션이란 시청자의 특정 요구에 대해 즉각적인 대응이 가능한 것을 의미한다. 일반적으로 실감 콘텐츠가 로컬에 있는 경우는 시청자의 요청에 즉각적인 반응이 가능하지만, 원격지에 콘텐츠가 있고 이를 네트워크를 통해서 수신 받는 환경이라면 전송지연에 따른 즉각적인 반응이 어려워진다.
특히, 다시점 영상의 경우 영상 시청 중에 시청자의 시점이 이동하면 재생 영상이 이동한 시점에 해당하는 영상으로 변경되어 재생되어야 한다. 하지만 네트워크 상에서 발생되는 전송 지연과 압축된 영상을 재생하는데 걸리는 디코딩 지연 등이 발생하여 시청자가 원하는 시점의 영상을 지연 없이 즉각적으로 시청하는 것이 어렵게 된다.
본 발명의 목적은 시청자의 시점 변경에 대해 즉시 해당 시점으로 이동하여 재생이 가능한 다시점 스트리밍을 위한 하이브리드 다운로드 방법 및 장치, 다시점 스트리밍 시스템을 제공하는 것이다.
또한, 본 발명의 목적은 최대한 사용자의 시청 경험을 만족시키면서 대역 낭비를 최소로 할 수 있는 다시점 스트리밍을 위한 하이브리드 다운로드 방법 및 장치, 다시점 스트리밍 시스템을 제공하는 것이다.
상기한 목적을 달성하기 위한 실시예에 따른 다시점 스트리밍을 위한 하이브리드 다운로드 방법은 n-1번째 세그먼트에 대한 그룹 다운로드를 서버에 요청하는 단계와, 시청자의 VP1 시점에 대한 n-3번째 세그먼트에 대한 재생을 수행하는 단계와, n-1번째 세그먼트에 대한 그룹 다운로드 요청이 완료되면, n번째 세그먼트에 대한 그룹 다운로드를 요청을 수행하는 단계와, 시청자의 시점 변경이 n-2번째 세그먼트 재생 시간에 발생되면 VP3 시점에 대해 저화질의 n-2번째 세그먼트를 재생하는 단계와, n번째 세그먼트에 대한 그룹 다운로드가 완료되면 VP3 시점의 고화질 n-1번째 세그먼트 싱글 다운로드를 상기 서버에 요청하는 단계와, 상기 VP3 시점에 대한 고화질의 n-1번째 세그먼트 싱글 다운로드가 완료되면, 상기 VP3 시점의 고화질 n-1번째 세그먼트를 재생하는 단계를 포함할 수 있다.
상기 VP3 시점의 고화질 n번째 세그먼트 싱글 다운로드를 상기 서버에 요청하는 단계를 더 포함할 수 있다.
상기 VP3 시점의 고화질 n번째 세그먼트 싱글 다운로드가 완료되면, 상기 VP3 시점의 고화질의 n+1번째 세그먼트 그룹 다운로드를 상기 서버에 요청하는 단계를 더 포함할 수 있다.
상기 VP3 시점의 고화질 n번째 세그먼트를 재생하는 단계를 더 포함할 수 있다.
상기 VP3 시점의 고화질의 n+1번째 세그먼트 그룹 다운로드를 완료하는 단계를 더 포함할 수 있다.
상기 시청자의 시점이 VP1인 경우, VP1 시점은 고화질이고 다른 시점은 저화질일 수 있다.
또한, 상기한 목적을 달성하기 위한 실시예에 따른 다시점 스트리밍을 위한 하이브리드 다운로드 장치는 다시점 스트리밍을 위한 하이브리드 다운로드를 위한 제어 프로그램이 저장된 메모리와 상기 메모리에 저장된 제어 프로그램을 실행하는 프로세서를 포함하고, 상기 프로세서는, n-1번째 세그먼트에 대한 그룹 다운로드를 서버에 요청하고, 시청자의 VP1 시점에 대한 n-3번째 세그먼트에 대한 재생을 수행하고, n-1번째 세그먼트에 대한 그룹 다운로드 요청이 완료되면, n번째 세그먼트에 대한 그룹 다운로드를 요청을 수행하고, 시청자의 시점 변경이 n-2번째 세그먼트 재생 시간에 발생되면 VP3 시점에 대해 저화질의 n-2번째 세그먼트를 재생하고, n번째 세그먼트에 대한 그룹 다운로드가 완료되면 VP3 시점의 고화질 n-1번째 세그먼트 싱글 다운로드를 상기 서버에 요청하고, 상기 VP3 시점에 대한 고화질의 n-1번째 세그먼트 싱글 다운로드가 완료되면, 상기 VP3 시점의 고화질 n-1번째 세그먼트를 재생할 수 있다.
상기 프로세서는, 상기 VP3 시점의 고화질 n번째 세그먼트 싱글 다운로드를 상기 서버에 요청할 수 있다.
상기 프로세서는, 상기 VP3 시점의 고화질 n번째 세그먼트 싱글 다운로드가 완료되면, 상기 VP3 시점의 고화질의 n+1번째 세그먼트 그룹 다운로드를 상기 서버에 요청할 수 있다.
상기 프로세서는, 상기 VP3 시점의 고화질 n번째 세그먼트를 재생할 수 있다.
상기 프로세서는, 상기 VP3 시점의 고화질의 n+1번째 세그먼트 그룹 다운로드를 완료할 수 있다.
상기 시청자의 시점이 VP1인 경우, VP1 시점은 고화질이고 다른 시점은 저화질일 수 있다.
또한, 상기한 목적을 달성하기 위한 실시예에 따른 다시점 스트리밍 시스템은 세그먼트 그룹 및 세그먼트 싱글 다운로드를 요청하는 클라이언트와, 상기 요청에 응답하여 상기 세그먼트 그룹 및 상기 세그먼트 싱글을 전송하는 서버를 포함하고, 상기 클라이언트는, n-1번째 세그먼트에 대한 그룹 다운로드를 서버에 요청하고, 시청자의 VP1 시점에 대한 n-3번째 세그먼트에 대한 재생을 수행하고, n-1번째 세그먼트에 대한 그룹 다운로드 요청이 완료되면, n번째 세그먼트에 대한 그룹 다운로드를 요청을 수행하고, 시청자의 시점 변경이 n-2번째 세그먼트 재생 시간에 발생되면 VP3 시점에 대해 저화질의 n-2번째 세그먼트를 재생하고, n번째 세그먼트에 대한 그룹 다운로드가 완료되면 VP3 시점의 고화질 n-1번째 세그먼트 싱글 다운로드를 상기 서버에 요청하고, 상기 VP3 시점에 대한 고화질의 n-1번째 세그먼트 싱글 다운로드가 완료되면, 상기 VP3 시점의 고화질 n-1번째 세그먼트를 재생할 수 있다.
상기 클라이언트는, 상기 VP3 시점의 고화질 n번째 세그먼트 싱글 다운로드를 상기 서버에 요청할 수 있다.
상기 클라이언트는, 상기 VP3 시점의 고화질 n번째 세그먼트 싱글 다운로드가 완료되면, 상기 VP3 시점의 고화질의 n+1번째 세그먼트 그룹 다운로드를 상기 서버에 요청할 수 있다.
상기 클라이언트는, 상기 VP3 시점의 고화질 n번째 세그먼트를 재생할 수 있다.
상기 클라이언트는, 상기 VP3 시점의 고화질의 n+1번째 세그먼트 그룹 다운로드를 완료할 수 있다.
상기 시청자의 시점이 VP1인 경우, VP1 시점은 고화질이고 다른 시점은 저화질일 수 있다.
실시예는 그룹 다운로드의 고화질 전환 지연 문제를 해결하여 시점 전환의 지연 없이 고화질 전환 시간도 최소한으로 줄일수 있다.
또한, 실시예는 다시점 비디오 스트리밍 서비스의 사용자 품질경험을 높여줄 수 있다.
도 1은 실시예에 따른 다시점 스트리밍 시스템을 나타낸 블록도이다.
도 2는 제1 실시예에 따른 다시점 스트리밍 다운로드 방법을 설명하기 위한 도면이다.
도 3은 제2 실시예에 따른 다시점 스트리밍 하이브리드 다운로드 방법을 설명하기 위한 도면이다.
도 4는 실시예에 따른 스트리밍 하드브리드 다운로드 방법을 나타낸 흐름도이다.
도 5는 실시예에 따른 컴퓨터 시스템의 구성을 나타낸 블록도이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.
비록 "제1" 또는 "제2" 등이 다양한 구성요소를 서술하기 위해서 사용되나, 이러한 구성요소는 상기와 같은 용어에 의해 제한되지 않는다. 상기와 같은 용어는 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용될 수 있다. 따라서, 이하에서 언급되는 제1 구성요소는 본 발명의 기술적 사상 내에서 제2 구성요소일 수도 있다.
본 명세서에서 사용된 용어는 실시예를 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 또는 "포함하는(comprising)"은 언급된 구성요소 또는 단계가 하나 이상의 다른 구성요소 또는 단계의 존재 또는 추가를 배제하지 않는다는 의미를 내포한다.
다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어는 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 공통적으로 이해될 수 있는 의미로 해석될 수 있다. 또한, 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.
본 문서에서 “A 또는 B, “A 및 B 중 적어도 하나, “A 또는 B 중 적어도 하나”, “A,B 또는 C 중 적어도 하나”, 및 “A,B, 또는 C 중 적어도 하나”와 같은 문구들 각각은 그 문구들 중 해당하는 문구와 함께 나열된 항목들 중 어느 하나, 또는 그들의 모든 가능한 조합을 포함할 수 있다.
이하, 첨부된 도면을 참조하여 본 발명의 실시예들을 상세히 설명하기로 하며, 도면을 참조하여 설명할 때 동일하거나 대응하는 구성 요소는 동일한 도면 부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
도 1은 실시예에 따른 다시점 스트리밍 시스템을 나타낸 블록도이다.
도 1에 도시된 바와 같이, 실시예에 따른 다시점 스트리밍 시스템은 클라이언트(100)와 서버(200)를 포함할 수 있다.
클라이언트(100)는 버퍼(미도시)를 포함할 수 있다. 버퍼에는 모든 시점에 대한 세그먼트가 저장될 수 있으며, 일 시점에 대해 일정량의 세그먼트가 저장될 수 있다. 클라이언트(100)는 고화질 영상을 사용자에게 제공하기 위해 세그먼트 그룹 및 세그먼트 싱글 다운로드를 서버(200)에 요청할 수 있다. 클라이언트(100)는 다시점 스트리밍을 위한 하이브리드 다운로드 장치일 수 있다. 클라이언트(100)는 수신 단말일 수 있다.
서버(200)는 클라이언트(100)의 요청에 응답하여 세그먼트 그룹 및 세그먼트 싱글을 클라이언트(100)에 제공할 수 있다.
도 2는 제1 실시예에 따른 다시점 스트리밍 다운로드 방법을 설명하기 위한 도면이다.
도 2는 클라이언트의 버퍼에 저장된 모든 시점에 대한 세그먼트를 다운로드하는 그룹 다운로드를 보여주고 있다. 그룹 다운로드는 시청자가 현재 시청하는 시점에 대해서는 고화질의 영상을 다운로드하고 나머지 시점에 대해서는 저화질의 영상을 다운로드하는 것을 의미할 수 있다. 여기서, 실시예는 5개의 독립된 시점 영상을 서비스하는 것을 표현하고 있다.
예를 들어, 시청자가 현재 VP1 시점을 시청하고 있다면 VP1 시점에 대한 HD급 영상의 세그먼트와 그 외 VP2, VP3, VP4, VP5 시점에 대해서는 SD급 영상의 세그먼트가 다운로드되는 경우를 생각할 수 있다. 이는 시청자의 시점이 이동할 경우 즉시 미리 다운로드한 저화질의 해당 시점을 재생할 수 있으므로 시점 변경 지연은 발생하지 않는다. 하지만 변경된 시점에서 이미 다운로드한 저화질 세그먼트를 모드 재생한 후 고화질로 전환되는 화질 지연이 발생하게 된다.
이하에서는 그룹 세그먼트 다운로드 방식의 과정을 살펴본다. 여기서, 그룹 세그먼트 다운로드 방식은 클라이언트(또는 수신 단말)에서 수행될 수 있다.
먼저, 시청자는 최초 VP1 시점 영상을 시청을 하고 있는 중 3번째 세그먼트 재생 시간에 VP3로 시점이 이동되고 있다. 이때 수신 단말의 버퍼에는 모든 시점에 대해 6번째 세그먼트까지 다운로드가 완료된 상황이며, 시점 이동에 따라 VP3 시점이 지연없이 3번째 세그먼트를 재생하게 된다.
단, 수신 단말의 버퍼에 다운로드된 VP1 시점의 세그먼트는 고화질이지만 나머지 VP2, VP3, VP4, VP5 시점의 세그먼트는 저화질이다. 따라서 VP3 시점으로 이동한 후에는 미리 다운로드 받아 놓은 6번째 세그먼트까지 저화질로 시청하게 된다. 이는 앞에서 언급한 바와 같이 이미 다운로드된 세그먼트들을 비우지 않고 그 다음 세그먼트부터 그룹 다운로드를 수행하기 때문이며, 7번째 세그먼트부터는 VP3 시점은 고화질 세그먼트를 나머지 시점은 저화질 세그먼트를 다운로드하게 된다.
다음으로 6번째 세그먼트 재생 시간에 VP3에서 VP5로 시점 변경이 발생한다. 이때 수신 단말의 버퍼에는 모든 시점의 11번째 세그먼트까지 다운로드가 완료된 상황이며, 앞서 기술한 것과 유사하게 즉시 다운받아 놓은 저화질의 VP5 시점 세그먼트가 재생된다. 이 경우 12번째 세그먼트부터 VP5 시점은 고화질 세그먼트를 나머지 시점은 저화질 세그먼트를 다운로드하게 된다.
이어서 8번째 세그먼트 재생 시간에 VP5에서 VP3로 시점 변경이 발생한다. 이때 수신 단말은 앞서 다운로드 받아 놓은 고화질의 VP3 시점 세그먼트가 즉시 재생된다. 앞서 다운로드한 세그먼트들에 대안 버퍼 비움이 수행되지 않아 추가적인 대역 소모없이 고화질의 VP3 시점 재생이 가능한 것을 보여주고 있다.
마지막으로 9번째 세그먼트 재생 시간에 VP3에서 VP5로 시점 변경이 발생한다. 이때 수신 단말의 버퍼에 다운받아 놓은 저화질의 VP5 시점 9번째 세그먼트가 즉시 재생된 후 11번째 세그먼트에 고화질의 세그먼트가 재생된다.
이처럼 도 2의 그룹 세그먼트 다운로드에서는 시점 변경에 따른 시점 전환 재생 지연은 없다는 장점이 있지만 재생 화질은 저화질에서 고화질로 변경되는 데 상당한 시간 동안의 지연이 발생하는 단점이 발생한다. 이러한 단점을 보완하기 위해 본 발명에서는 하이브리드 세그먼트 다운로드 방법을 추가로 제안한다.
도 3은 제2 실시예에 따른 다시점 스트리밍 하이브리드 다운로드 방법을 설명하기 위한 도면이다.
먼저, 도 3은 5개 시점에 대한 스트리밍 서비스를 가정하고 있으며, 다시점 스트리밍 하이브리드 다운로드 방법은 클라이언트에서 수행될 수 있다.
도 3에 도시된 바와 같이, 실시예에 따른 하이브리드 세그먼트 다운로드 방식은 도 2에서 기술된 모든 시점에 대한 세그먼트를 다운로드하는 그룹 다운로드와 하나의 시점에 대한 비디오 세그먼트만 다운로드를 하는 싱글 다운로드를 혼합하여 적용하는 것을 의미한다. 그룹 다운로드 방식에서는 시청자의 시점이 이동할 경우 즉시 미리 다운로드한 저화질의 해당 시점을 재생할 수 있으므로 시점 변경 지연은 발생하지 않지만 변경된 시점에서 이미 다운로드한 저화질 세그먼트를 모드 재생한 후 고화질로 전환되는 화질 지연이 발생하게 된다.
하이브리드 다운로드 방식은 그룹 다운로드 이후 사용자 시점이 이동되는 경우, 버퍼에 이동한 시점의 고화질 세그먼트가 없다면 해당 시점에 대해서만 고화질 세그먼트를 다운로드 받는 싱글 다운로드를 수행하고, 이어서 앞선 그룹 다운로드가 완료된 세그먼트부터 그룹 다운로드를 수행하게 된다.
이하에서는 하이브리드 세그먼트 다운로드 방식의 과정을 살펴본다.
먼저 시청자는 최초 VP1 시점 영상을 시청을 하고 있는 중 3번째 세그먼트 재생 시간에 VP3로 시점이 이동되고 있다. 이때 수신 단말의 버퍼에는 모든 시점에 대해 6번째 세그먼트까지 그룹 다운로드가 완료된 상황이며, 시점 이동에 따라 VP3 시점이 지연없이 저화질의 3번째 세그먼트를 재생하며, 동시에 4번째 세그먼트부터 VP3 시점의 고화질 세그먼트를 싱글 다운로드 한다.
싱글 다운로드는 그룹 다운로드가 완료된 6번째 세그먼트까지 수행되고 이후 7번째 세그먼트부터 VP3 시점을 고화질로 하는 그룹 다운로드가 수행된다. 이렇게 함으로써 4번째 세그먼트부터는 고화질로 시청이 가능해진다. 앞서 도 2의 예의 그룹 다운로드에서 고화질로 변경하는 화질 지연 시간을 상당히 줄이게 된다.
다음으로 6번째 세그먼트 재생 시간에 VP3에서 VP5로 시점 변경이 발생한다. 이때 수신 단말의 버퍼에는 6번째 세그먼트까지 VP1 시점에 대한 그룹 다운로드와 VP3 시점에 대한 싱글 다운로드가 이루어져 있고 10번째 세그먼트까지 VP3 시점에 대한 그룹 다운로드가 완료된 상황이다. 시점 변경에 대해 즉시 다운받아 놓은 저화질의 VP5 시점 세그먼트가 재생되며, 동시에 7번째 세그먼트부터 VP5 시점의 고화질 세그먼트를 싱글 다운로드 한다.
싱글 다운로드는 그룹 다운로드가 완료된 10번째 세그먼트까지 수행되고 이후 11번째 세그먼트부터 VP5 시점을 고화질로 하는 그룹 다운로드가 수행된다.
이어서 8번째 세그먼트 재생 시간에 VP5에서 VP3로 시점 변경이 발생한다. 이때 수신 단말의 버퍼에는 10번째 세그먼트까지 VP3 시점에 대한 그룹 다운로드와 VP5 시점에 대한 싱글 다운로드가 이루어져 있고 11번째 세그먼트부터 VP5 시점에 대한 그룹 다운로드가 진행된 상황이다. 따라서 수신 단말은 앞서 그룹 다운로드로 받아 놓은 고화질의 VP3 시점 세그먼트가 즉시 재생된다. 이 경우 이미 고화질의 VP3 시점 세그먼트가 있기 때문에 싱글 다운로드는 수행되지 않는다.
마지막으로 9번째 세그먼트 재생 시간에 VP3에서 VP5로 시점 변경이 발생한다. 이때에도 앞의 상황과 동일하게 수신 단말의 버퍼에는 10번째 세그먼트까지 VP3 시점에 대한 그룹 다운로드와 VP5 시점에 대한 싱글 다운로드가 완료되어 있다. 따라서 수신 단말은 앞서 그룹 다운로드로 받아 놓은 고화질의 VP3 시점 세그먼트가 즉시 재생된다. 이 경우에도 이미 고화질의 VP5 시점 세그먼트가 있기 때문에 싱글 다운로드는 수행되지 않는다.
도 4는 실시예에 따른 스트리밍 하드브리드 다운로드 방법을 나타낸 흐름도이다.
먼저, 클라이언트(100)는 서버(20)에 n-1번째 세그먼트에 대한 그룹 다운로드 요청을 수행할 수 있다(S100). 현재 클라이언트에서 재생하고 있는 시점이 VP1 이므로 그룹 다운로드에서 VP1 시점이 고화질이고 나머지 시점은 저화질이다.
이어서, 클라이언트(100)는 VP1 시점에 대한 n-3번쩨 세그먼트에 대해 재생을 수행할 수 있다. n-1번째 세그먼트에 대한 그룹 다운로드 요청을 수행하는 과정에서 과정에서 수행한 그룹 다운로드 요청에 대해 서버(200)에서 n-1번째 그룹 세그먼트 다운로드를 완료할 수 있다(S110).
이어서 클라이언트(100)는 서버(200)에 다시 n번째 세그먼트에 대한 그룹 다운로드 요청을 수행할 수 있다(S120).
시청자의 시점 변경이 n-2번째 세그먼트 재생 시간에 발생하면 클라이언트(100)는 이를 감지하고, 즉시 VP3 시점에 대해 저화질의 n-2번째 세그먼트를 재생할 수 있다. n번째 세그먼트에 대한 그룹 다운로드 요청을 수행하는 과정에서 수행한 그룹 다운로드 요청에 대해 서버에서 n번째 그룹 세그먼트 다운로드를 완료할 수 있다(S130).
클라이언트(100)는 n번째 그룹 세그먼트 다운로드가 완료됨과 동시에 VP3 시점의 고화질 n-1번째 세그먼트 싱글 다운로드 요청을 수행할 수 있다(S140).
서버(100)는 VP3 시점의 고화질 n-1번째 세그먼트 싱글 다운로드 요청에 대한 응답으로 VP3 시점의 고화질 n-1번째 세그먼트 싱글을 제공할 수 있다(S150). 클라이언트(100)는 다운로드가 완료된 VP3 시점의 고화질 n-1번째 세그먼트를 재생할 수 있다.
클라이언트(100)는 앞에서 수행된 그룹 다운로드가 n번째 다운로드까지 이루어져 있음으로 한번 더 VP3 시점에 대한 고화질의 n번째 세그먼트 싱글 다운로드 요청을 수행할 수 있다(S160).
서버(200)는 VP3 시점에 대한 고화질의 n번째 세그먼트 싱글 다운로드 요청에 대한 응답으로 VP3 시점에 대한 고화질의 n번째 세그먼트 싱글을 클라이언트에 제공할 수 있다(S170).
클라이언트(100)는 싱글 다운로드가 완료 후 VP3 시점을 고화질로 하는 n+1번째 세그먼트의 그룹 다운로드 요청을 수행할 수 있다(S180).
클라이언트(100)는 다운로드가 완료된 VP3 시점의 고화질 n번째 세그먼트를 재생할 수 있다. 서버(200)는 VP3 시점을 고화질로 하는 n+1번째 세그먼트의 그룹 다운로드 요청에 응답하여 VP3 시점을 고화질로 하는 n+1번째 세그먼트의 그룹을 클라이언트(100)에 제공할 수 있다(S190).
실시예에 따른 하이브리드 다운로드 방식은 시청자의 시점 전환에 대해 지연 없는 변경이 가능하며 화질 변경 또한 전환 시간이 상당하게 감소할 수 있음을 알 수 있다.
실시예에 따른 다시점 스트리밍을 위한 하이브리드 다운로드 장치는 컴퓨터 판독 가능한 기록매체와 같은 컴퓨터 시스템에서 구현될 수 있다.
도 5는 실시예에 따른 컴퓨터 시스템의 구성을 나타낸 블록도이다.
도 5를 참조하면, 실시예에 따른 컴퓨터 시스템(1000)은 버스(1020)를 통하여 서로 통신하는 하나 이상의 프로세서(1010), 메모리(1030), 사용자 인터페이스 입력 장치(1040), 사용자 인터페이스 출력 장치(1050) 및 스토리지(1060)를 포함할 수 있다. 또한, 컴퓨터 시스템(1000)은 네트워크에 연결되는 네트워크 인터페이스(1070)를 더 포함할 수 있다.
프로세서(1010)는 중앙 처리 장치 또는 메모리나 스토리지에 저장된 프로그램 또는 프로세싱 인스트럭션들을 실행하는 반도체 장치일 수 있다. 프로세서(1010)는 일종의 중앙처리장치로서 다시점 스트리밍을 위한 하이브리드 다운로드 장치의 전체 동작을 제어할 수 있다.
프로세서(1010)는 데이터를 처리할 수 있는 모든 종류의 장치를 포함할 수 있다. 여기서, '프로세서(processor)'는 예를 들어 프로그램 내에 포함된 코드 또는 명령으로 표현된 기능을 수행하기 위해 물리적으로 구조화된 회로를 갖는, 하드웨어에 내장된 데이터 처리 장치를 의미할 수 있다. 이와 같이 하드웨어에 내장된 데이터 처리 장치의 일 예로써, 마이크로프로세서(microprocessor), 중앙처리장치(central processing unit: CPU), 프로세서 코어(processor core), 멀티프로세서(multiprocessor), ASIC(application-specific integrated circuit), FPGA(field programmable gate array) 등의 처리 장치를 망라할 수 있으나, 이에 한정되는 것은 아니다.
메모리(1030)는 실시예에 따른 다시점 스트리밍을 위한 하이브리드 다운로드 방법을 수행하기 위한 제어 프로그램 등 전반적인 동작을 위한 다양한 데이터가 저장될 수 있다. 구체적으로, 메모리에는 다시점 스트리밍을 위한 하이브리드 다운로드 장치에서 구동되는 다수의 응용 프로그램, 다시점 스트리밍을 위한 하이브리드 다운로드 장치의 동작을 위한 데이터 및 명령어가 저장될 수 있다.
메모리(1030) 및 스토리지(1060)는 휘발성 매체, 비휘발성 매체, 분리형 매체, 비분리형 매체, 통신 매체, 또는 정보 전달 매체 중에서 적어도 하나 이상을 포함하는 저장 매체일 수 있다. 예를 들어, 메모리(1030)는 ROM(1031)이나 RAM(1032)을 포함할 수 있다.
실시예에 따른 서버는 컴퓨터 판독 가능한 기록매체와 같은 컴퓨터 시스템에서 구현될 수 있다. 그 구성은 도 5와 동일할 수 있다.
본 발명에서 설명하는 특정 실행들은 실시예들로서, 어떠한 방법으로도 본 발명의 범위를 한정하는 것은 아니다. 명세서의 간결함을 위하여, 종래 전자적인 구성들, 제어시스템들, 소프트웨어, 상기 시스템들의 다른 기능적인 측면들의 기재는 생략될 수 있다. 또한, 도면에 도시된 구성 요소들 간의 선들의 연결 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것으로서, 실제 장치에서는 대체 가능하거나 추가의 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들로서 나타내어질 수 있다. 또한, "필수적인","중요하게" 등과 같은 구체적인 언급이 없다면 본 발명의 적용을 위하여 반드시 필요한 구성 요소가 아닐 수 있다.
따라서, 본 발명의 사상은 상기 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 또는 이로부터 등가적으로 변경된 모든 범위는 본 발명의 사상의 범주에 속한다고 할 것이다.
100: 클라이언트
200: 서버

Claims (18)

  1. n-1번째 세그먼트에 대한 그룹 다운로드를 서버에 요청하는 단계;
    시청자의 VP1 시점에 대한 n-3번째 세그먼트에 대한 재생을 수행하는 단계;
    n-1번째 세그먼트에 대한 그룹 다운로드 요청이 완료되면, n번째 세그먼트에 대한 그룹 다운로드를 요청을 수행하는 단계;
    시청자의 시점 변경이 n-2번째 세그먼트 재생 시간에 발생되면 VP3 시점에 대해 저화질의 n-2번째 세그먼트를 재생하는 단계;
    n번째 세그먼트에 대한 그룹 다운로드가 완료되면 VP3 시점의 고화질 n-1번째 세그먼트 싱글 다운로드를 상기 서버에 요청하는 단계; 및
    상기 VP3 시점에 대한 고화질의 n-1번째 세그먼트 싱글 다운로드가 완료되면, 상기 VP3 시점의 고화질 n-1번째 세그먼트를 재생하는 단계;
    를 포함하는 다시점 스트리밍을 위한 하이브리드 다운로드 방법.
  2. 제1항에 있어서,
    상기 VP3 시점의 고화질 n번째 세그먼트 싱글 다운로드를 상기 서버에 요청하는 단계를 더 포함하는 다시점 스트리밍을 위한 하이브리드 다운로드 방법.
  3. 제2항에 있어서,
    상기 VP3 시점의 고화질 n번째 세그먼트 싱글 다운로드가 완료되면, 상기 VP3 시점의 고화질의 n+1번째 세그먼트 그룹 다운로드를 상기 서버에 요청하는 단계를 더 포함하는 다시점 스트리밍을 위한 하이브리드 다운로드 방법.
  4. 제3항에 있어서,
    상기 VP3 시점의 고화질 n번째 세그먼트를 재생하는 단계를 더 포함하는 다시점 스트리밍을 위한 하이브리드 다운로드 방법.
  5. 제4항에 있어서,
    상기 VP3 시점의 고화질의 n+1번째 세그먼트 그룹 다운로드를 완료하는 단계를 더 포함하는 다시점 스트리밍을 위한 하이브리드 다운로드 방법.
  6. 제1항에 있어서,
    상기 시청자의 시점이 VP1인 경우, VP1 시점은 고화질이고 다른 시점은 저화질인 다시점 스트리밍을 위한 하이브리드 다운로드 방법.
  7. 다시점 스트리밍을 위한 하이브리드 다운로드를 위한 제어 프로그램이 저장된 메모리; 및
    상기 메모리에 저장된 제어 프로그램을 실행하는 프로세서를 포함하고,
    상기 프로세서는,
    n-1번째 세그먼트에 대한 그룹 다운로드를 서버에 요청하고, 시청자의 VP1 시점에 대한 n-3번째 세그먼트에 대한 재생을 수행하고, n-1번째 세그먼트에 대한 그룹 다운로드 요청이 완료되면, n번째 세그먼트에 대한 그룹 다운로드를 요청을 수행하고, 시청자의 시점 변경이 n-2번째 세그먼트 재생 시간에 발생되면 VP3 시점에 대해 저화질의 n-2번째 세그먼트를 재생하고, n번째 세그먼트에 대한 그룹 다운로드가 완료되면 VP3 시점의 고화질 n-1번째 세그먼트 싱글 다운로드를 상기 서버에 요청하고, 상기 VP3 시점에 대한 고화질의 n-1번째 세그먼트 싱글 다운로드가 완료되면, 상기 VP3 시점의 고화질 n-1번째 세그먼트를 재생하는 다시점 스트리밍을 위한 하이브리드 다운로드 장치.
  8. 제7항에 있어서,
    상기 프로세서는,
    상기 VP3 시점의 고화질 n번째 세그먼트 싱글 다운로드를 상기 서버에 요청하는 다시점 스트리밍을 위한 하이브리드 다운로드 장치.
  9. 제8항에 있어서,
    상기 프로세서는,
    상기 VP3 시점의 고화질 n번째 세그먼트 싱글 다운로드가 완료되면, 상기 VP3 시점의 고화질의 n+1번째 세그먼트 그룹 다운로드를 상기 서버에 요청하는 다시점 스트리밍을 위한 하이브리드 다운로드 장치.
  10. 제9항에 있어서,
    상기 프로세서는,
    상기 VP3 시점의 고화질 n번째 세그먼트를 재생하는 다시점 스트리밍을 위한 하이브리드 다운로드 장치.
  11. 제10항에 있어서,
    상기 프로세서는,
    상기 VP3 시점의 고화질의 n+1번째 세그먼트 그룹 다운로드를 완료하는 다시점 스트리밍을 위한 하이브리드 다운로드 장치.
  12. 제7항에 있어서,
    상기 시청자의 시점이 VP1인 경우, VP1 시점은 고화질이고 다른 시점은 저화질인 다시점 스트리밍을 위한 하이브리드 다운로드 장치.
  13. 세그먼트 그룹 및 세그먼트 싱글 다운로드를 요청하는 클라이언트; 및
    상기 요청에 응답하여 상기 세그먼트 그룹 및 상기 세그먼트 싱글을 전송하는 서버를 포함하고,
    상기 클라이언트는,
    n-1번째 세그먼트에 대한 그룹 다운로드를 서버에 요청하고, 시청자의 VP1 시점에 대한 n-3번째 세그먼트에 대한 재생을 수행하고, n-1번째 세그먼트에 대한 그룹 다운로드 요청이 완료되면, n번째 세그먼트에 대한 그룹 다운로드를 요청을 수행하고, 시청자의 시점 변경이 n-2번째 세그먼트 재생 시간에 발생되면 VP3 시점에 대해 저화질의 n-2번째 세그먼트를 재생하고, n번째 세그먼트에 대한 그룹 다운로드가 완료되면 VP3 시점의 고화질 n-1번째 세그먼트 싱글 다운로드를 상기 서버에 요청하고, 상기 VP3 시점에 대한 고화질의 n-1번째 세그먼트 싱글 다운로드가 완료되면, 상기 VP3 시점의 고화질 n-1번째 세그먼트를 재생하는 다시점 스트리밍 시스템.
  14. 제13항에 있어서,
    상기 클라이언트는,
    상기 VP3 시점의 고화질 n번째 세그먼트 싱글 다운로드를 상기 서버에 요청하는 다시점 스트리밍 시스템.
  15. 제14항에 있어서,
    상기 클라이언트는,
    상기 VP3 시점의 고화질 n번째 세그먼트 싱글 다운로드가 완료되면, 상기 VP3 시점의 고화질의 n+1번째 세그먼트 그룹 다운로드를 상기 서버에 요청하는 다시점 스트리밍 시스템.
  16. 제5항에 있어서,
    상기 클라이언트는,
    상기 VP3 시점의 고화질 n번째 세그먼트를 재생하는 다시점 스트리밍 시스템.
  17. 제16항에 있어서,
    상기 클라이언트는,
    상기 VP3 시점의 고화질의 n+1번째 세그먼트 그룹 다운로드를 완료하는 다시점 스트리밍 시스템.
  18. 제13항에 있어서,
    상기 시청자의 시점이 VP1인 경우, VP1 시점은 고화질이고 다른 시점은 저화질인 다시점 스트리밍 시스템.
KR1020220147618A 2022-11-08 2022-11-08 다시점 스트리밍을 위한 하이브리드 다운로드 방법 및 장치, 다시점 스트리밍 시스템 KR20240066618A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020220147618A KR20240066618A (ko) 2022-11-08 2022-11-08 다시점 스트리밍을 위한 하이브리드 다운로드 방법 및 장치, 다시점 스트리밍 시스템
US18/503,612 US20240155014A1 (en) 2022-11-08 2023-11-07 Hybrid download method and apparatus for multiview streaming, and multiview streaming system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220147618A KR20240066618A (ko) 2022-11-08 2022-11-08 다시점 스트리밍을 위한 하이브리드 다운로드 방법 및 장치, 다시점 스트리밍 시스템

Publications (1)

Publication Number Publication Date
KR20240066618A true KR20240066618A (ko) 2024-05-16

Family

ID=90928408

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220147618A KR20240066618A (ko) 2022-11-08 2022-11-08 다시점 스트리밍을 위한 하이브리드 다운로드 방법 및 장치, 다시점 스트리밍 시스템

Country Status (2)

Country Link
US (1) US20240155014A1 (ko)
KR (1) KR20240066618A (ko)

Also Published As

Publication number Publication date
US20240155014A1 (en) 2024-05-09

Similar Documents

Publication Publication Date Title
WO2020048429A1 (zh) 一种媒体资源获取的方法及装置
US20210044639A1 (en) Video streaming
JPH1075436A (ja) ビデオ配信システムにおいてトリック再生ストリームおよび通常再生ストリーム間でインデックスを設定するシステムおよび方法
CN113141522B (zh) 资源传输方法、装置、计算机设备及存储介质
CN112839238B (zh) 投屏播放方法、装置和存储介质
US20230239532A1 (en) Systems and methods for media content hand-off based on type of buffered data
US11765421B2 (en) Client based storage of remote element resolutions
EP3748983B1 (en) Video playback method, terminal apparatus, and storage medium
CN111836076A (zh) 视频分辨率切换方法及装置、电子设备
US20110164689A1 (en) Method and associated device for generating video
CN110582012A (zh) 视频切换方法、视频处理方法、装置及存储介质
US20200314480A1 (en) Systems and methods for media content handoff
US11960444B2 (en) Methods and systems for providing file data for a media file
KR102163440B1 (ko) 그래픽 처리기를 이용한 비디오 디코딩에 대한 픽처 참조 제어
CN112243136B (zh) 内容播放方法、视频存储方法和设备
US20230217047A1 (en) Method, system, and computer-readable recording medium for implementing fast-switching mode between channels in multi-live transmission environment
KR20240066618A (ko) 다시점 스트리밍을 위한 하이브리드 다운로드 방법 및 장치, 다시점 스트리밍 시스템
CN115426503A (zh) 一种转码服务切换方法、装置、设备及存储介质
JP2015512188A (ja) メディアファイルのファイルデータを提供する方法とシステム
US6369859B1 (en) Patching degraded video data
CN112738565B (zh) 互动带宽优化方法、装置、计算机设备和存储介质
KR20030092105A (ko) 프리페치 데이터 전송을 사용하는 주문형 데이터 디지털방송 시스템
JPH09186967A (ja) 動画処理方法
KR100310778B1 (ko) 주문형비디오의특수재생서비스제공방법
US9047914B1 (en) Content navigation

Legal Events

Date Code Title Description
E902 Notification of reason for refusal