WO2012176979A1 - 고화질 비디오 스트리밍 서비스 방법 및 시스템 - Google Patents

고화질 비디오 스트리밍 서비스 방법 및 시스템 Download PDF

Info

Publication number
WO2012176979A1
WO2012176979A1 PCT/KR2012/003316 KR2012003316W WO2012176979A1 WO 2012176979 A1 WO2012176979 A1 WO 2012176979A1 KR 2012003316 W KR2012003316 W KR 2012003316W WO 2012176979 A1 WO2012176979 A1 WO 2012176979A1
Authority
WO
WIPO (PCT)
Prior art keywords
video
frame
streaming
encoded video
encoded
Prior art date
Application number
PCT/KR2012/003316
Other languages
English (en)
French (fr)
Inventor
배태면
Original Assignee
에스케이플래닛 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이플래닛 주식회사 filed Critical 에스케이플래닛 주식회사
Priority to US14/113,445 priority Critical patent/US9374408B2/en
Publication of WO2012176979A1 publication Critical patent/WO2012176979A1/ko
Priority to US15/159,694 priority patent/US9628537B2/en
Priority to US15/468,538 priority patent/US9961124B2/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/764—Media network packet handling at the destination 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/177—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet

Definitions

  • the present invention relates to a method and system for streaming high-definition video content, and more particularly, a user can download video content in a short time and a streaming service based on the video content already downloaded when the video content is streamed.
  • the present invention relates to a high quality video streaming service method and system for providing a high quality video content by using downloaded video content even when receiving a streaming service.
  • media streaming technology is a multimedia stream compressed by a codec operating on a UDP / IP, RTP / RTCP layer of a media server after multimedia data captured in real time from a camcorder is encoded by an encoder.
  • a streaming method is transmitted to a media player of a terminal through a wired or wireless internet network.
  • the streaming method is a method of using the temporal characteristics of the multimedia data, and instead of downloading the entire data at once, the terminal reproduces the data as much as the data is continuously transmitted through the network. It is a suitable method for providing a long time content.
  • the streaming method defines the Realtime Transfer Protocol (RTP) as a standard for streaming when transmitting compressed video from the server through the network so that the terminal can play the video in real time, and also transfer method using HTTP or FTP. It is used.
  • RTP Realtime Transfer Protocol
  • video encoding technology is used to reduce the size by compressing the video data.
  • a method of playing a video on a terminal by a user includes a method of downloading and playing video content and a method of streaming and playing the video through the Internet as described above.
  • a video download service there is a problem that a user takes a long time to download video content
  • a streaming service there is a problem that it is difficult to sufficiently increase the quality of a video to be transmitted due to the limitation of real-time transmission.
  • the present invention for solving the above-described problems, the user can download the video content in a short time, and when receiving the streaming service to the video content streaming service by providing a streaming service based on the video content already downloaded, It is an object of the present invention to provide a high-definition video streaming service method and system capable of receiving high quality video content even when receiving.
  • the high-definition video streaming service system encodes the original video at a constant bit rate to generate a first encoded video, a fixed quantization parameter (Quantization Parameter) Generate a second encoded video by encoding the original video at one-Nth of a length of a first encoded video GOP (Group Of Pictures) and one-Nth of a frame rate, and encoding a first encoded video.
  • a content server that generates streaming video using the video and the second encoded video, downloads the first encoded video and transmits the streaming video in real time, and downloads and plays the first encoded video, or a frame of the first encoded video.
  • a user terminal that generates and plays a video for playback by recombining frames of streaming video. .
  • the content server is a first encoding unit for generating a first encoded video by encoding the original video at a constant bit rate, N of the GOP (Group Of Pictures) length of the first encoded video
  • a second encoding that encodes the original video by encoding one-third and one-Nth of the frame rate, and fixes the quantization parameter with respect to the entire original video to generate a second encoded video.
  • a streaming video generator for generating streaming video using the first encoded video and the second encoded video, a video downloader for downloading the first encoded video, and a video streaming unit for transmitting the streaming video in real time.
  • the streaming video generation unit compares the frames of the first encoded video and the second encoded video, such that the same frame selects a frame of the first encoded video, and the non-identical frames are the frames of the first encoded video or the second.
  • a preliminary streaming video is generated by selecting one of the frames of the encoded video.
  • the streaming video generator predicts a structural similarity value when transmitting the frame of the first encoded video and the frame of the second encoded video to the streaming video, and the difference of the predicted structural identity is less than or equal to the threshold value.
  • a frame of the first encoded video is selected, and a frame of the second encoded video is selected to generate the preliminary streaming video when the difference in the predicted structural identity is greater than the threshold.
  • the streaming video generator generates the streaming video by removing the same frame as the frame of the first encoded video among the frames of the preliminary streaming video.
  • the user terminal is a video download unit for downloading the first encoded video, a video streaming unit for receiving the streaming video in real time, playback to generate a video for playback using the first encoded video and streaming video And a video player for reproducing the first encoded video or for reproducing the video.
  • the playback video generation unit may compare the frame of the first encoded video and the frame of the streaming video, so that the frame included only in the first encoded video selects a frame of the first encoded video, and the first encoded video and the streaming. Frames included in the video are selected from frames of the streaming video and then recombined to generate video for playback.
  • the high-definition video streaming service method of the content server by encoding the original video in different GOP (Group Of Pictures) and frame rate (frame rate) to encode the first encoded video and the second encoded video Generating (a), generating a streaming video using the first encoded video and the second encoded video, and (c) downloading the first encoded video and transmitting the streaming video in real time.
  • GOP Group Of Pictures
  • frame rate frame rate
  • step (a) may generate a first encoded video by encoding the original video at a constant bit rate and encoding at a first group of pictures (GOP) and a first frame rate.
  • the original video has a fixed quantization parameter, and is encoded by one-Nth of the first GOP length and one-Nth of the first frame rate to generate a second encoded video.
  • step (b) compares the frame of the first encoded video with the frame of the second encoded video so that the same frame selects the frame of the first encoded video, and the non-identical frame is the frame of the first encoded video or the first frame.
  • step (B-1) generating one of two frames of the encoded video to generate the preliminary streaming video, and generating the streaming video by removing the same frame as the frame of the first encoded video among the frames of the preliminary streaming video (b- 2) comprises a step.
  • step (b-1) predicts a structure similarity value when transmitting the frame of the first encoded video and the frame of the second encoded video to the streaming video, and the difference in the predicted structural identity value is critical.
  • the frame of the first encoded video is selected, and when the difference in the predicted structural identity value is greater than the threshold, the frame of the second encoded video is selected to generate the preliminary streaming video.
  • the high-definition video streaming service method of the user terminal the step of downloading the first encoded video, real-time transmission of the streaming video (a), playback using the first encoded video and the streaming video (B) generating a video for playback, and (c) playing a video for playback.
  • step (b) the frame of the first encoded video is compared with the frame of the streaming video, and a frame included only in the first encoded video selects a frame of the first encoded video and the first encoded video and the streaming. Frames included in the video are selected from frames of the streaming video and then recombined to generate video for playback.
  • the high-definition video streaming service method and system of the present invention can provide a high-definition video streaming service at a low data rate by using the downloaded video while providing a service for downloading a video at high speed. .
  • FIG. 1 is a block diagram showing an embodiment of a high quality video streaming service system according to an aspect of the present invention.
  • FIG. 2 is a block diagram showing an embodiment of a content server according to another aspect of the present invention.
  • FIG. 3 is a block diagram showing an embodiment of a user terminal according to another aspect of the present invention.
  • FIG. 4 is a flowchart illustrating a high quality video streaming service method of a content server according to another aspect of the present invention.
  • FIG. 5 is a flow chart illustrating the exaggeration of streaming video generation in a high quality video streaming service method of a content server according to another aspect of the present invention.
  • FIG. 6 is a flowchart illustrating a high quality video streaming service method of a user terminal according to another aspect of the present invention.
  • FIG. 7 is a flowchart illustrating a process of generating a video for reproduction of a high quality video streaming service method of a user terminal according to another aspect of the present invention.
  • FIG. 8 is a view for explaining an embodiment of generating streaming video in a high quality video streaming service method of a content server according to another aspect of the present invention.
  • FIG. 9 is a view for explaining an embodiment of generating a video for streaming playback in the high-definition video streaming service method of the user terminal according to another aspect of the present invention.
  • FIG. 1 is a block diagram showing an embodiment of a high quality video streaming service system according to an aspect of the present invention.
  • the high definition video streaming service system 1000 includes a content server 200, a user terminal 300, and a communication network 100.
  • the content server 200 encodes the original video at a constant bit rate to generate a high-speed download video (hereinafter, used in the same sense as 'first encoded video'), and to fix a fixed quantization parameter. And encoding the original video at N / N of the first encoded video GOP (Group Of Pictures) length and N / N of the frame rate (hereinafter referred to as “second encoded video”). And use the first encoded video and the second encoded video to generate streaming video, download the first encoded video, and transmit the streaming video in real time.
  • a high-speed download video hereinafter, used in the same sense as 'first encoded video'
  • second encoded video encoding the original video at N / N of the first encoded video GOP (Group Of Pictures) length and N / N of the frame rate
  • the first encoded video is a video in which the original video is encoded at a fixed bit rate for high-speed download
  • the second encoded video is a video in which the original video is encoded while maintaining a constant image quality for streaming.
  • the user terminal 300 downloads and plays the first encoded video, or generates and plays a playback video by recombining the frames of the first encoded video and the frames of the streaming video.
  • the user terminal 300 downloads and stores or plays the high speed download video, which is the first encoded video, or reconstructs the streaming video received in real time as the video for streaming playback by recombining the video for high speed download.
  • the communication network 100 may include a mobile communication network such as CDMA, WCDMA, or HSPA, a wired communication network such as the Internet and a PSTN, or a local area network such as Bluetooth or Zigbee.
  • a mobile communication network such as CDMA, WCDMA, or HSPA
  • a wired communication network such as the Internet and a PSTN
  • a local area network such as Bluetooth or Zigbee.
  • FIG. 2 is a block diagram showing an embodiment of a content server according to another aspect of the present invention.
  • the content server 200 may include a first encoding unit 210, a second encoding unit 220, a streaming video generating unit 230, a video downloading unit 240, and a video streaming unit ( 250).
  • the first encoding unit 210 generates a first encoded video that encodes the original video at a constant bit rate.
  • the first encoding unit 210 Since the first encoding unit 210 generates the high speed download video by encoding the original video at a fixed bit rate, the first encoding unit 210 encodes the encoded video to be transmitted at a constant bit rate.
  • the second encoding unit 220 sets the GOP length and the frame rate so that the first encoding video is encoded by one-Nth of the GOP (Group Of Pictures) length and one-Nth of the frame rate, and quantization
  • the quantization parameter is fixed for the entire original video to encode the original video.
  • the second encoder 220 encodes the entire video quality using a quantization parameter as a constant value so that the overall quality of the video is kept constant.
  • the streaming video generator 230 generates the streaming video by using the first encoded video encoded by the first encoder 210 and the second encoded video encoded by the second encoder 220.
  • the streaming video generator 230 compares the frames of the first encoded video and the second encoded video to select a frame of the first encoded video that is the same frame as the high-speed download video, and the frames that are not the same are the first encoded video.
  • a preliminary streaming video is generated by selecting either the frame of the frame or the frame of the second encoded video.
  • the streaming video generator 230 predicts and predicts a structural similarity (SSIM) value when the frames of the first encoded video and the frames of the second encoded video are transmitted to the streaming video with respect to unequal frames. Select the frame of the first encoded video when the difference in the estimated structural identity is less than or equal to the threshold, and select the frame of the second encoded video when the difference in the predicted structural equality is greater than the threshold.
  • SSIM structural similarity
  • the streaming video generator 230 generates the streaming video by removing the same frame as the frame of the first encoded video among the frames of the preliminary streaming video.
  • the streaming video generation unit 230 configures the preliminary streaming video by selecting a frame of the first encoded video for the same 1/2 frame.
  • the streaming video generator 230 predicts a difference between the SSIM values when the first encoded video and the second encoded video are transmitted as the streaming video, and compares the difference between the SSIM values and the threshold for the half frames not identical. When the difference in the SSIM value is less than or equal to the threshold value, the frame of the first encoded video is selected. When the difference in the SSIM value is greater than the threshold value, the frame of the second encoded video is selected to configure the preliminary streaming video.
  • the streaming video generation unit 230 constructs the preliminary streaming video, and finally generates the streaming video by removing the same frame as the first encoded video from the preliminary streaming video.
  • the video downloader 240 downloads the first encoded video (video for high-speed download), and the video streaming unit 250 transmits the streaming video to the user terminal 300 in real time.
  • FIG. 3 is a block diagram showing an embodiment of a user terminal according to another aspect of the present invention.
  • the user terminal 300 includes a video streaming unit 310, a video downloader 320, a playback video generator 330, and a video player 340.
  • the video streaming unit 320 receives the streaming video in real time, and the video downloader 320 downloads the first encoded video.
  • the playback video generation unit 330 of the user terminal 300 may generate a playback video by combining the downloaded first encoded video and the streamed streaming video, and thus, the high quality video may be generated using the first encoded video downloaded in advance. You can play back as a video for playback.
  • the playback video generator 330 compares the frame of the first encoded video with the frame of the streaming video, so that the frame included only in the first encoded video selects the frame of the first encoded video, and the first encoded video and The frames included in the streaming video generate video for playback by selecting and recombining the frames of the streaming video.
  • the video player 340 plays the first encoded video downloaded at high speed or reproduces the playback video generated by recombining the downloaded first encoded video and the streaming video.
  • FIG. 4 is a flowchart illustrating a high quality video streaming service method of a content server according to another aspect of the present invention
  • FIG. 5 illustrates a streaming video generation process of the high quality video streaming service method of a content server according to another aspect of the present invention. It is a flowchart shown.
  • the first encoding is performed. Download the video, and transmits the streaming video in real time (S430).
  • step S410 of generating the first encoded video and the second encoded video the original video is encoded at different group of pictures (GOP) and frame rate.
  • GOP group of pictures
  • a first encoded video that is a high-speed download video and a second encoded video that is a high-definition streaming video are generated.
  • the original video has a constant bit rate, the first GOP (Group Of Pictures), the first frame rate (encoded at a first frame rate) to generate a first encoded video, the original video is fixed A second encoded video is generated by encoding a quantization value at one-Nth of the first GOP length and one-Nth of the first frame rate.
  • the streaming video generation (S420) is performed by selecting, removing or recombining some frames of the first encoded video and the second encoded video.
  • a detailed streaming video generation process will be described with reference to FIG. 5.
  • the first encoded video which is a high-speed download video
  • the streaming video generated by recombining the first encoded video and the second encoded video is transmitted in real time to the user terminal.
  • a process of generating a first encoded video and a second encoded video S510
  • a process of generating a streaming video It is configured to include (S520 ⁇ S590).
  • the same frame means that the original video frame is the same, and that the frame of the first encoded video and the frame of the second encoded video are encoded under different conditions.
  • the frame of the first encoded video is selected (S530). If the frames are not the same, the structure similarity value when the encoded video is transmitted to the streaming video is predicted and compared with the threshold. Determine (S540 to S570).
  • the frame of the first encoded video that is the high-speed download video is selected (S530).
  • a preliminary streaming video is generated by selecting one of the first encoded video, which is a video, and the framing of the second encoded video, which is a video for high-quality download (S540 to S570).
  • the structure similarity value is predicted when the frame of the first encoded video and the frame of the second encoded video are transmitted to the streaming video (S540), and the difference of the predicted structural identity value And the threshold value is compared (S550).
  • the frame of the first encoded video is selected (S560).
  • the frame of the second encoded video is selected (S570).
  • the preliminary streaming video is generated by collecting frames of the selected first encoded video or frames of the second encoded video (S580).
  • the streaming video to be transmitted in real time streaming is generated (S590).
  • FIG. 6 is a flowchart illustrating a high quality video streaming service method of a user terminal according to another aspect of the present invention
  • FIG. 7 is a flowchart of a video generation process of a high quality video streaming service method of a user terminal according to another aspect of the present invention. It is a flowchart concretely showing.
  • the first encoded video is downloaded, the streaming video is transmitted in real time (S610), the first encoded video and the streaming video are recombined, and the video for playback is provided.
  • the reproduction video is reproduced in operation S630.
  • a process of generating a video for playing a high quality streaming service method of a user terminal may include downloading the first encoded video and receiving the streaming video in real time as shown in FIG. 7 (S710). Recombining the video to generate a video for playback (S720 ⁇ S750), and the playback video for playback (S760).
  • the frame of the first encoded video is compared with the frame of the streaming video (S720). Whether the frames are identical is determined by comparing whether the frames of the original video are identical.
  • the frame of the first encoded video is selected (S730), and when the same frame is included in the first encoded video and the streaming video together, the frame of the streaming video is selected. (S740).
  • the first encoded video is selected as the playback video, but further, the frame transmitted as the streaming video selects a frame of the streaming video to generate the playback video.
  • the frame of the high-speed download video which is higher in quality than the real-time streamed video, can be used as the playback video, it is possible to provide a high-quality video streaming service.
  • the selected frames are combined to generate a video for reproduction (S750), and the generated reproduction video is reproduced (S760).
  • FIG. 8 is a diagram illustrating an embodiment of generating streaming video in a high quality video streaming service method of a content server according to another aspect of the present invention
  • FIG. 9 is a high definition video of a user terminal according to another aspect of the present invention.
  • FIG. I s a view for explaining an embodiment of generating a video for streaming playback in a streaming service method.
  • FIG. 8 and 9 illustrate a process of generating a streaming video using the high-speed download video and the high-definition video when the high-definition video is encoded at 1/2 of the high-speed download video GOP length and 1/2 of the frame rate.
  • FIG. 4 is a diagram illustrating a process of generating a playback video by using a high-speed download video and a streaming video.
  • the preliminary streaming video is generated by combining the high-speed download video and the high-definition video in the content server, and the streaming video is excluded by excluding the same frame as the high-speed download video.
  • a frame of two rows, four rows, and six rows which are the same frame by comparing the high speed download video frame with the high quality video frame is selected as a preliminary streaming video.
  • the same frames (1, 3, 5, and 7) predict the difference in SSIM values between the high-speed download video and the high-definition video by streaming. Determine by comparing with the threshold.
  • Rows 1 and 5 show the case where the frame of the high-speed download video is selected as the preliminary streaming video, and the difference in SSIM value is less than the threshold.
  • Rows 3 and 7 show the case where the frame of the high quality video is the preliminary streaming video. This is the case when the difference in values exceeds the threshold.
  • the streaming video is generated by removing the frame of the high speed download video from the preliminary streaming video.
  • the high-speed download video is downloaded independently of the streaming video. After downloading, the high-speed download video is available on the user terminal and thus removed from the streaming video.
  • the reproduction video is generated by using the high speed download video and the streaming video in the user terminal.
  • frames 1, 2, 4 to 6 which are frames included only in the frame of the high-speed download video, select the high-speed download video frame,
  • the frames included in both the high-speed download video and the streaming video select a frame of the streaming video to generate the playback video.
  • a frame of a high-speed download video downloaded in advance is basically used, and in addition, only a frame transmitted as the streaming video generates the playback video using the streaming video.
  • the user can download the video content quickly and receive the streaming service based on the already downloaded video content when the video content is received, the streaming service is received. Even high-definition video content can be provided.
  • implementations of the functional operations described herein may be implemented in other types of digital electronic circuits than described herein, or the structures disclosed herein and the It may be implemented in computer software, firmware or hardware including structural equivalents, or in combination with one or more of these.
  • Implementations of the subject matter described in the present invention are one or more modules relating to computer program instructions encoded on a program storage medium of tangible type for controlling or by the operation of one or more computer program products, ie processing systems. Can be implemented.
  • the computer readable medium may be a machine readable storage device, a machine readable storage substrate, a memory device, a composition of materials affecting a machine readable propagated signal, or a combination of one or more thereof.
  • processing system encompass all the instruments, devices and machines for processing data, including, for example, programmable processors, computers or multiple processors or computers.
  • the processing system may include, in addition to hardware, code that forms an execution environment for a computer program on demand, such as code constituting processor firmware, a protocol stack, a database management system, an operating system, or a combination of one or more thereof. .
  • Computer programs may be written in any form of programming language, including compiled or interpreted languages, or a priori or procedural languages. It can be deployed in any form, including components, subroutines, or other units suitable for use in a computer environment.
  • a computer program does not necessarily correspond to a file in a file system.
  • a program may be in a single file provided to the requested program, in multiple interactive files (eg, a file that stores one or more modules, subprograms, or parts of code), or part of a file that holds other programs or data. (Eg, one or more scripts stored in a markup language document).
  • the computer program may be deployed to run on a single computer or on multiple computers located at one site or distributed across multiple sites and interconnected by a communication network.
  • Computer-readable media suitable for storing computer program instructions and data include, for example, semiconductor memory devices such as EPROM, EEPROM, and flash memory devices, such as magnetic disks such as internal hard disks or external disks, magneto-optical disks, and CD-ROMs. And all forms of nonvolatile memory, media and memory devices, including DVD-ROM discs.
  • semiconductor memory devices such as EPROM, EEPROM, and flash memory devices, such as magnetic disks such as internal hard disks or external disks, magneto-optical disks, and CD-ROMs. And all forms of nonvolatile memory, media and memory devices, including DVD-ROM discs.
  • the processor and memory can be supplemented by or integrated with special purpose logic circuitry.
  • Implementations of the subject matter described herein may include, for example, a backend component such as a data server, or include a middleware component such as, for example, an application server, or a web browser or graphical user, for example, where a user may interact with the implementation of the subject matter described herein. It can be implemented in a computing system that includes a front end component such as a client computer having an interface or any combination of one or more of such back end, middleware or front end components. The components of the system may be interconnected by any form or medium of digital data communication such as, for example, a communication network.
  • the present invention can be applied to a system that services video content to a terminal through download or streaming, and can be applied to a content synchronization technology and a real-time transmission technology for consuming high quality content through a network.
  • the present invention can be applied to a technique for compressing and storing a video content to reduce its size.
  • the present invention can be applied to a device or a system for transmitting a video compressed by a server through a network so that the video can be played in real time.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 고화질 비디오 스트리밍 서비스 방법 및 시스템에 관한 것으로, 본 발명에 따른 고화질 비디오 스트리밍 서비스 시스템은 원본 비디오를 고정 비트율(constant bit rate)로 인코딩하여 제1 인코딩 비디오를 생성하고, 고정된 양자화 수치(Quantization Parameter)를 가지며, 제1 인코딩 비디오 GOP(Group Of Pictures) 길이의 N분의 1과, 프레임율(frame rate)의 N분의 1로 원본 비디오를 인코딩하여 제2 인코딩 비디오를 생성하고, 제1 인코딩 비디오와 상기 제2 인코딩 비디오를 이용하여 스트리밍 비디오를 생성하고, 제1 인코딩 비디오를 다운로드하고 스트리밍 비디오를 실시간 전송하는 컨텐츠 서버, 및 제1 인코딩 비디오를 다운로드 받아 재생하거나, 또는 제1 인코딩 비디오의 프레임과 상기 스트리밍 비디오의 프레임을 재조합하여 재생용 비디오를 생성하여 재생하는 사용자 단말기를 포함한다.

Description

고화질 비디오 스트리밍 서비스 방법 및 시스템
본 발명은 고화질의 비디오 컨텐츠를 스트리밍하는 방법 및 시스템에 관한 것으로서, 더욱 자세하게는 사용자가 비디오 컨텐츠를 빠른 시간 내에 다운로드 받을 수 있고, 비디오 컨텐츠를 스트리밍 서비스 받을 때 이미 다운로드 받은 비디오 컨텐츠를 기반으로 스트리밍 서비스를 제공받을 수 있도록 함으로써, 스트리밍 서비스를 받는 경우에도 다운로드 받은 비디오 컨텐츠를 이용하여 높은 화질의 비디오 컨텐츠를 제공하는 고화질 비디오 스트리밍 서비스 방법 및 시스템에 관한 것이다.
일반적으로, 미디어 스트리밍 기술은 캠코더로부터 실시간으로 캡쳐된 멀티미디어 데이터가 인코더에 의해 인코딩된 후, 미디어 서버의 UDP/IP, RTP/RTCP 레이어 상에서 동작하는 코덱(CODEC)에 의해 압축된 멀티미디어 스트림으로 RTSP(Real Time Streaming Protocol)의 제어에 따라 스트리밍 방식으로 유무선 인터넷망을 통해 단말기의 미디어 플레이어로 전송되는 것이다.
여기서, 스트리밍 방식은 멀티미디어 데이터의 시간적 특성을 이용하는 방식으로 단말기가 전체 데이터를 한번에 다운로드받지 않는 대신, 소량의 데이터를 지속적으로 네트워크를 통하여 전송받으면서 전송받는 만큼의 데이터를 재생하는 방식으로서, 다운로드 방식보다는 장시간의 컨텐츠를 제공하는 데에 적합한 방식이다.
또한, 스트리밍 방식은 단말기에서 비디오를 실시간으로 재생할 수 있도록 서버에서 압축된 비디오를 네트워크를 통해 전송할 때 RTP(Realtime Transfer Protocol)를 현재 스트리밍을 위한 표준으로 정의하고 있으며, HTTP나 FTP를 이용한 전송 방법 등도 사용되고 있다. 비디오를 스트리밍 할 때 비디오 데이터를 압축하여 크기를 줄이는 비디오 인코딩(Video Encoding) 기술이 이용되고 있다.
한편, 사용자가 단말기에서 비디오를 재생하는 방법은 비디오 컨텐츠를 다운로드 받아 재생하는 방법과, 전술한 바와 같이 인터넷을 통해 스트리밍 받아 재생하는 방법 등이 있다. 비디오 다운로드 서비스의 경우, 사용자가 비디오 컨텐츠를 다운로드 받는데 시간이 많이 걸리는 문제점이 발생하고, 스트리밍 서비스의 경우, 실시간 전송의 제약으로 인해 전송하는 비디오의 화질을 충분히 높이기 어렵다는 문제점이 있다.
전술한 문제점을 해결하기 위한 본 발명은, 사용자가 비디오 컨텐츠를 빠른 시간 내에 다운로드 받을 수 있고, 비디오 컨텐츠를 스트리밍 서비스 받을 때 이미 다운로드 받은 비디오 컨텐츠를 기반으로 스트리밍 서비스를 제공받을 수 있도록 함으로써, 스트리밍 서비스를 받는 경우에도 높은 화질의 비디오 컨텐츠를 제공받을 수 있도록 하는 고화질 비디오 스트리밍 서비스 방법 및 시스템을 제공함에 그 목적이 있다.
상술한 목적을 달성하기 위한 본 발명의 일 측면에 따르면, 고화질 비디오 스트리밍 서비스 시스템은 원본 비디오를 고정 비트율(constant bit rate)로 인코딩하여 제1 인코딩 비디오를 생성하고, 고정된 양자화 수치(Quantization Parameter)를 가지며, 제1 인코딩 비디오 GOP(Group Of Pictures) 길이의 N분의 1과, 프레임율(frame rate)의 N분의 1로 상기 원본 비디오를 인코딩하여 제2 인코딩 비디오를 생성하고, 제1 인코딩 비디오와 상기 제2 인코딩 비디오를 이용하여 스트리밍 비디오를 생성하고, 제1 인코딩 비디오를 다운로드하고 스트리밍 비디오를 실시간 전송하는 컨텐츠 서버, 및 제1 인코딩 비디오를 다운로드 받아 재생하거나, 또는 제1 인코딩 비디오의 프레임과 스트리밍 비디오의 프레임을 재조합하여 재생용 비디오를 생성하여 재생하는 사용자 단말기를 포함한다.
본 발명의 다른 측면에 따르면, 컨텐츠 서버는 원본 비디오를 고정 비트율(constant bit rate)로 인코딩하여 제1 인코딩 비디오를 생성하는 제1 인코딩부, 제1 인코딩 비디오의 GOP(Group Of Pictures) 길이의 N분의 1, 프레임율(frame rate)의 N분의 1로 인코딩되도록 설정하고, 양자화 수치(Quantization Parameter)를 원본 비디오 전체에 대하여 고정시켜 원본 비디오를 인코딩하여 제2 인코딩 비디오를 생성하는 제2 인코딩부, 제1 인코딩 비디오와 제2 인코딩 비디오를 이용하여 스트리밍 비디오를 생성하는 스트리밍 비디오 생성부, 제1 인코딩 비디오를 다운로드하는 비디오 다운로드부, 및 스트리밍 비디오를 실시간 전송하는 비디오 스트리밍부를 포함한다.
여기서, 스트리밍 비디오 생성부는, 제1 인코딩 비디오와 상기 제2 인코딩 비디오의 프레임을 비교하여, 동일한 프레임은 제1 인코딩 비디오의 프레임을 선택하고, 동일하지 않는 프레임은 제1 인코딩 비디오의 프레임 또는 제2 인코딩 비디오의 프레임 중 하나를 선택하여 예비 스트리밍 비디오를 생성한다.
또한, 스트리밍 비디오 생성부는, 제1 인코딩 비디오의 프레임 및 제2 인코딩 비디오의 프레임을 스트리밍 비디오로 전송시의 구조적 동일성(Structural Similarity) 값을 예측하고, 예측된 구조적 동일성 값의 차이가 임계값 이하인 경우 제1 인코딩 비디오의 프레임을 선택하고, 예측된 구조적 동일성 값의 차이가 임계값 초과인 경우 제2 인코딩 비디오의 프레임을 선택하여 예비 스트리밍 비디오를 생성한다.
또한, 스트리밍 비디오 생성부는, 예비 스트리밍 비디오의 프레임 중 제1 인코딩 비디오의 프레임과 동일한 프레임을 제거하여 스트리밍 비디오를 생성한다.
본 발명의 또 다른 측면에 따르면, 사용자 단말기는 제1 인코딩 비디오를 다운로드 받는 비디오 다운로드부, 스트리밍 비디오를 실시간 전송받는 비디오 스트리밍부, 제1 인코딩 비디오와 스트리밍 비디오를 이용하여 재생용 비디오를 생성하는 재생 비디오 생성부, 제1 인코딩 비디오를 재생하거나 또는 재생용 비디오를 재생하는 비디오 재생부를 포함한다.
또한, 재생 비디오 생성부는, 제1 인코딩 비디오의 프레임과 스트리밍 비디오의 프레임을 비교하여, 상기 제1 인코딩 비디오에만 포함된 프레임은 제1 인코딩 비디오의 프레임을 선택하고, 상기 제1 인코딩 비디오 및 상기 스트리밍 비디오에 함께 포함된 프레임은 스트리밍 비디오의 프레임을 선택한 후 재조합하여 재생용 비디오를 생성한다.
본 발명의 또 다른 측면에 따르면, 컨텐츠 서버의 고화질 비디오 스트리밍 서비스 방법은, 원본 비디오를 서로 다른 GOP(Group Of Pictures)와 프레임율(frame rate)로 인코딩하여 제1 인코딩 비디오와 제2 인코딩 비디오를 생성하는 (a) 단계, 제1 인코딩 비디오와 제2 인코딩 비디오를 이용하여 스트리밍 비디오를 생성하는 (b) 단계, 및 제1 인코딩 비디오를 다운로드하고, 스트리밍 비디오를 실시간 전송하는 (c) 단계를 포함한다.
여기서, (a) 단계는, 원본 비디오를 고정된 비트율(constant bit rate)을 가지며, 제1 GOP(Group Of Pictures), 제1 프레임율(frame rate)로 인코딩하여 제1 인코딩 비디오를 생성하고, 원본 비디오를 고정된 양자화 수치(Quantization Parameter)를 가지며, 제1 GOP 길이의 N분의 1과, 제1 프레임율의 N분의 1로 인코딩하여 제2 인코딩 비디오를 생성한다.
또한, (b) 단계는, 제1 인코딩 비디오의 프레임과 제2 인코딩 비디오의 프레임을 비교하여 동일한 프레임은 제1 인코딩 비디오의 프레임을 선택하고, 동일하지 않는 프레임은 제1 인코딩 비디오의 프레임 또는 제2 인코딩 비디오의 프레임 중 하나를 선택하여 예비 스트리밍 비디오를 생성하는 (b-1) 단계, 및 예비 스트리밍 비디오의 프레임 중 제1 인코딩 비디오의 프레임과 동일한 프레임을 제거하여 스트리밍 비디오를 생성하는 (b-2) 단계를 포함하여 구성된다.
또한, (b-1) 단계는, 제1 인코딩 비디오의 프레임 및 제2 인코딩 비디오의 프레임을 스트리밍 비디오로 전송시의 구조적 동일성(Structure Similarity) 값을 예측하고, 예측된 구조적 동일성 값의 차이가 임계값 이하인 경우 제1 인코딩 비디오의 프레임을 선택하고, 예측된 구조적 동일성 값의 차이가 임계값 초과인 경우 제2 인코딩 비디오의 프레임을 선택하여 예비 스트리밍 비디오를 생성한다.
본 발명의 또 다른 측면에 따르면, 사용자 단말기의 고화질 비디오 스트리밍 서비스 방법은, 제1 인코딩 비디오를 다운로드 받고, 스트리밍 비디오를 실시간 전송받는 (a) 단계, 제1 인코딩 비디오와 상기 스트리밍 비디오를 이용하여 재생용 비디오를 생성하는 (b) 단계, 및 재생용 비디오를 재생하는 (c) 단계를 포함한다.
여기서, (b) 단계는, 제1 인코딩 비디오의 프레임과 스트리밍 비디오의 프레임을 비교하여, 상기 제1 인코딩 비디오에만 포함된 프레임은 제1 인코딩 비디오의 프레임을 선택하고 상기 제1 인코딩 비디오 및 상기 스트리밍 비디오에 함께 포함된 프레임은 스트리밍 비디오의 프레임을 선택한 후 재조합하여 재생용 비디오를 생성한다.
상술한 바와 같이, 본 발명의 고화질 비디오 스트리밍 서비스 방법 및 시스템은 고속으로 비디오를 다운로드해 주는 서비스를 제공하면서 다운로드 된 비디오를 활용하여 낮은 데이터 전송률에서 고화질의 비디오 스트리밍 서비스를 제공할 수 있는 효과가 있다.
도 1은 본 발명의 일 측면에 따른 고화질 비디오 스트리밍 서비스 시스템의 일 실시예를 나타내는 구성도이다.
도 2는 본 발명의 다른 측면에 따른 컨텐츠 서버의 일 실시예를 나타내는 구성도이다.
도 3은 본 발명의 또 다른 측면에 따른 사용자 단말기의 일 실시예를 나타내는 구성도이다.
도 4는 본 발명의 또 다른 측면에 따른 컨텐츠 서버의 고화질 비디오 스트리밍 서비스 방법을 나타내는 흐름도이다.
도 5는 본 발명의 또 다른 측면에 따른 컨텐츠 서버의 고화질 비디오 스트리밍 서비스 방법의 스트리밍 비디오 생성 과장을 구체화하여 나타내는 흐름도이다.
도 6는 본 발명의 또 다른 측면에 따른 사용자 단말기의 고화질 비디오 스트리밍 서비스 방법을 나타내는 흐름도이다.
도 7은 본 발명의 또 다른 측면에 따른 사용자 단말기의 고화질 비디오 스트리밍 서비스 방법의 재생용 비디오 생성 과정을 구체화하여 나타내는 흐름도이다.
도 8은 본 발명의 또 다른 측면에 따른 컨텐츠 서버의 고화질 비디오 스트리밍 서비스 방법에서 스트리밍 비디오를 생성하는 실시예를 설명하기 위한 도면이다.
도 9는 본 발명의 또 다른 측면에 따른 사용자 단말기의 고화질 비디오 스트리밍 서비스 방법에서 스트리밍 재생용 비디오를 생성하는 실시예를 설명하기 위한 도면이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나 이는 본 발명의 특정한 실시형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
본 발명에 따른 고화질 비디오 스트리밍 서비스 방법 및 시스템의 실시예를 첨부도면을 참조하여 상세히 설명하기로 한다. 첨부도면을 참조하여 설명함에 있어 동일하거나 대응되는 구성 요소는 동일한 도면번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
고화질 비디오 스트리밍 서비스 시스템
도 1은 본 발명의 일 측면에 따른 고화질 비디오 스트리밍 서비스 시스템의 일 실시예를 나타내는 구성도이다.
본 본 발명의 일 측면에 따른 고화질 비디오 스트리밍 서비스 시스템(1000)은, 도 1에 도시한 바와 같이, 컨텐츠 서버(200), 사용자 단말기(300) 및 통신망(100)을 포함한다.
컨텐츠 서버(200)는 원본 비디오를 고정 비트율(constant bit rate)로 인코딩하여 고속다운로드용 비디오(이하, '제1 인코딩 비디오'와 동일한 의미로 사용)를 생성하고, 고정된 양자화 수치(Quantization Parameter)를 가지며, 제1 인코딩 비디오 GOP(Group Of Pictures) 길이의 N분의 1과, 프레임율(frame rate)의 N분의 1로 상기 원본 비디오를 인코딩하여 고화질용 비디오(이하, '제2 인코딩 비디오'와 동일한 의미로 사용)를 생성하고, 제1 인코딩 비디오와 상기 제2 인코딩 비디오를 이용하여 스트리밍 비디오를 생성하고, 제1 인코딩 비디오를 다운로드하고 스트리밍 비디오를 실시간 전송한다.
제1 인코딩 비디오는 고속다운로드를 위해 원본 비디오를 고정된 비트율로 인코딩한 비디오이며, 제2 인코딩 비디오는 스트리밍을 위해 원본 비디오를 화질을 일정하게 유지하며 인코딩한 비디오를 의미한다.
스트리밍을 위해 인코딩한 제2 인코딩 비디오는 고속다운로드를 위해 인코딩한 제1 인코딩 비디오와 비교할 때, GOP의 길이가 1/N배, 프레임율이 1/N배가 되도록 인코딩되며, 바람직하게는 N=2로 설정될 수 있다.
사용자 단말기(300)는 제1 인코딩 비디오를 다운로드 받아 재생하거나, 또는 제1 인코딩 비디오의 프레임과 스트리밍 비디오의 프레임을 재조합하여 재생용 비디오를 생성하여 재생한다.
즉, 사용자 단말기(300)는 제1 인코딩 비디오인 고속다운로드용 비디오를 다운로드 받은 후 저장 또는 재생하거나, 실시간으로 전송받은 스트리밍 비디오를 고속다운로드용 비디오와 재조합하여 스트리밍 재생용 비디오로 재생하게 된다.
통신망(100)은 CDMA나 WCDMA, HSPA 등의 이동 통신망이나, 인터넷과 PSTN 등의 유선 통신망, 블루투스(Bluetooth)나 지그비(Zigbee) 등의 근거리 통신망을 포함할 수 있다.
컨텐츠 서버
도 2는 본 발명의 다른 측면에 따른 컨텐츠 서버의 일 실시옐르 나타내는 구성도이다.
컨텐츠 서버(200)는, 도 2에 도시한 바와 같이, 제1 인코딩부(210), 제2 인코딩부(220), 스트리밍 비디오 생성부(230), 비디오 다운로드부(240) 및 비디오 스트리밍부(250)를 포함하여 구성된다.
제1 인코딩부(210)는 원본 비디오를 고정 비트율(constant bit rate)로 인코딩하는 제1 인코딩 비디오를 생성한다.
제1 인코딩부(210)는 원본 비디오를 고정 비트율로 인코딩하여 고속다운로드용 비디오를 생성하므로, 일정한 비트율(bit rate)로 인코딩된 비디오가 전송될 수 있도록 인코딩한다.
제2 인코딩부(220)는 제1 인코딩 비디오의 GOP(Group Of Pictures) 길이의 N분의 1, 프레임율(frame rate)의 N분의 1로 인코딩되도록 GOP 길이와 프레임율을 설정하고, 양자화 수치(Quantization Parameter)를 원본 비디오 전체에 대하여 고정시켜 원본 비디오를 인코딩한다.
제2 인코딩부(220)는 고화질용 비디오를 생성하기 위하여 원본 비디오 전체에 대하여 양자화 수치(Quantization Parameter) 값을 상수값으로 사용하여 전체적인 비디오의 화질이 일정하게 유지되도록 인코딩한다.
스트리밍 비디오 생성부(230)는 제1 인코딩부(210)에서 인코딩된 제1 인코딩 비디오와 제2 인코딩부(220)에서 인코딩된 제2 인코딩 비디오를 이용하여 스트리밍 비디오를 생성한다.
스트리밍 비디오 생성부(230)는 제1 인코딩 비디오와 제2 인코딩 비디오의 프레임을 비교하여, 동일한 프레임은 고속다운로드용 비디오인 제1 인코딩 비디오의 프레임을 선택하고, 동일하지 않는 프레임은 제1 인코딩 비디오의 프레임 또는 제2 인코딩 비디오의 프레임 중 하나를 선택하여 예비 스트리밍 비디오를 생성한다.
스트리밍 비디오 생성부(230)는, 동일하지 않는 프레임에 대하여, 제1 인코딩 비디오의 프레임 및 제2 인코딩 비디오의 프레임을 스트리밍 비디오로 전송시의 구조적 동일성(SSIM; Structural Similarity) 값을 예측하고, 예측된 구조적 동일성(SSIM) 값의 차이가 임계값 이하인 경우 제1 인코딩 비디오의 프레임을 선택하고, 예측된 구조적 동일성 값의 차이가 임계값 초과인 경우 제2 인코딩 비디오의 프레임을 선택하여 예비 스트리밍 비디오를 생성한다.
스트리밍 비디오 생성부(230)는 예비 스트리밍 비디오의 프레임 중 제1 인코딩 비디오의 프레임과 동일한 프레임을 제거함으로써 스트리밍 비디오를 생성한다.
예를 들어, 제2 인코딩 비디오의 GOP와 프레임율이 제1 인코딩 비디오의 1/2이 되도록 인코딩된 경우, 제1 인코딩 비디오와 제2 인코딩 비디오의 각 프레임을 비교하면 전체 프레임의 1/2은 제1 인코딩 비디오와 동일하므로, 스트리밍 비디오 생성부(230)는 동일한 1/2 프레임은 제1 인코딩 비디오의 프레임을 선택하여 예비 스트리밍 비디오를 구성한다.
스트리밍 비디오 생성부(230)는 동일하지 않은 1/2 프레임에 대하여, 제1 인코딩 비디오와 제2 인코딩 비디오가 스트리밍 비디오로 전송시 SSIM 값의 차이를 예측하고, SSIM 값의 차이와 임계값을 비교하여 SSIM 값의 차이가 임계값 이하인 경우 제1 인코딩 비디오의 프레임을 선택하고, SSIM 값의 차이가 임계값 초과인 경우 제2 인코딩 비디오의 프레임을 선택하여 예비 스트리밍 비디오를 구성한다.
상기의 과정에 의해, 스트리밍 비디오 생성부(230)는 예비 스트리밍 비디오가 구성하고, 예비 스트리밍 비디오 중 제1 인코딩 비디오와 동일한 프레임을 제거함으로써 스트리밍 비디오를 최종적으로 생성한다.
비디오 다운로드부(240)는 제1 인코딩 비디오(고속다운로드용 비디오)를 다운로드하고, 비디오 스트리밍부(250)는 스트리밍 비디오를 사용자 단말기(300)로 실시간 전송한다.
사용자 단말기
도 3은 본 발명의 또 다른 측면에 따른 사용자 단말기의 일 실시예를 나타내는 구성도이다.
사용자 단말기(300)는, 도 3에 도시한 바와 같이, 비디오 스트리밍부(310), 비디오 다운로드부(320), 재생 비디오 생성부(330) 및 비디오 재생부(340)를 포함하여 구성된다.
비디오 스트리밍부(320)는 스트리밍 비디오를 실시간 전송받고, 비디오 다운로드부(320)는 제1 인코딩 비디오를 다운로드 받는다.
사용자 단말기(300)의 재생 비디오 생성부(330)는 다운로드 받은 제1 인코딩 비디오와 스트리밍 받은 스트리밍 비디오를 조합하여 재생용 비디오를 생성할 수 있으므로, 미리 다운로드 받은 제1 인코딩 비디오를 이용하여 고화질의 비디오를 재생용 비디오로 재생할 수 있습니다.
구체적으로, 재생 비디오 생성부(330)는 제1 인코딩 비디오의 프레임과 스트리밍 비디오의 프레임을 비교하여, 제1 인코딩 비디오에만 포함된 프레임은 제1 인코딩 비디오의 프레임을 선택하고, 제1 인코딩 비디오 및 스트리밍 비디오에 함께 포함된 프레임은 스트리밍 비디오의 프레임을 선택한 후 재조합함으로써 재생용 비디오를 생성한다.
비디오 재생부(340)는 고속다운로드 받은 제1 인코딩 비디오를 재생하거나 또는 다운로드 받은 제1 인코딩 비디오와 스트리밍 비디오를 재조합하여 생성한 재생용 비디오를 재생한다.
컨텐츠 서버의 고화질 비디오 스트리밍 서비스 방법
도 4는 본 발명의 또 다른 측면에 따른 컨텐츠 서버의 고화질 비디오 스트리밍 서비스 방법을 나타내는 흐름도이고, 도 5는 본 발명의 또 다른 측면에 따른 컨텐츠 서버의 고화질 비디오 스트리밍 서비스 방법의 스트리밍 비디오 생성과정을 구체화하여 나타내는 흐름도이다.
본 발명의 컨텐츠 서버의 고화질 비디오 스트리밍 서비스 방법은, 도 4에 도시한 바와 같이, 제1 인코딩 비디오 및 제2 인코딩 비디오를 생성하고(S410), 스트리밍 비디오를 생성한 후(S420), 제1 인코딩 비디오를 다운로드하고, 스트리밍 비디오를 실시간 전송한다(S430).
여기서, 제1 인코딩 비디오와 제2 인코딩 비디오를 생성하는 단계(S410)는 원본 비디오를 서로 다른 GOP(Group Of Pictures)와 프레임율(frame rate)로 인코딩한다. 원본 비디오를 인코딩 파라미터를 서로 다르게 설정하여 인코딩함으로써, 고속다운로드용 비디오인 제1 인코딩 비디오와 고화질 스트리밍용 비디오인 제2 인코딩 비디오를 생성한다.
구체적으로, 원본 비디오를 고정된 비트율(constant bit rate)을 가지며, 제1 GOP(Group Of Pictures), 제1 프레임율(frame rate)로 인코딩하여 제1 인코딩 비디오를 생성하고, 원본 비디오를 고정된 양자화 수치(Quantization Parameter)를 가지며, 제1 GOP 길이의 N분의 1과, 제1 프레임율의 N분의 1로 인코딩하여 제2 인코딩 비디오를 생성한다.
다음으로, 스트리밍 비디오 생성(S420)은 제1 인코딩 비디오와 제2 인코딩 비디오 중 일부 프레임을 선택, 제거 또는 재조합하여 이루어진다. 구체적인 스트리밍 비디오 생성 과정은 도 5에서 설명하기로 한다.
마지막으로, 고속다운로드용 비디오인 제1 인코딩 비디오는 사용자 단말기로 다운로드하고, 제1 인코딩 비디오와 제2 인코딩 비디오를 재조합하여 생성된 스트리밍 비디오는 사용자 단말기로 실시간 스트리밍 전송된다.
컨텐츠 서버의 고화질 스트리밍 서비스 방법의 스트리밍 비디오 생성 과정을 구체화하면, 도 5에 도시한 바와 같이, 제1 인코딩 비디오 및 제2 인코딩 비디오를 생성하는 과정과(S510), 및 스트리밍 비디오를 생성하는 과정(S520~S590)을 포함하여 구성된다.
먼저, 스트리밍 비디오를 생성하는 과정은, 제1 인코딩 비디오의 프레임과 제2 인코딩 비디오의 프레임이 동일한지 여부를 비교한다(S520).
여기서, 동일한 프레임은 원본 비디오 프레임이 동일한 것을 의미하며, 제1 인코딩 비디오의 프레임과 제2 인코딩 비디오의 프레임은 서로 다른 조건으로 인코딩된 것을 의미한다.
비교 결과, 프레임이 동일하면 제1 인코딩 비디오의 프레임을 선택하고(S530), 프레임이 동일하지 않으면 각 인코딩 비디오를 스트리밍 비디오로 전송시의 구조적 동일성(Structure Similarity) 값을 예측하여 임계값과 비교하여 결정한다(S540 내지 S570).
즉, 제1 인코딩 비디오 프레임과 제2 인코딩 비디오 프레임의 원본 비디오 프레임이 동일한 경우, 고속다운로드용 비디오인 제1 인코딩 비디오의 프레임을 선택하고(S530), 원본 비디오 프레임이 동일하지 않는 경우 고속다운로드용 비디오인 제1 인코딩 비디오 또는 고화질 다운로드용 비디오인 제2 인코딩 비디오의 프레밍 중 하나를 선택하여 예비 스트리밍 비디오를 생성한다(S540 내지 S570).
원본 비디오 프레임이 동일하지 않는 경우, 제1 인코딩 비디오의 프레임 및 제2 인코딩 비디오의 프레임을 스트리밍 비디오로 전송시의 구조적 동일성(Structure Similarity) 값을 예측하고(S540), 예측된 구조적 동일성 값의 차이와 임계값을 비교한다(S550).
비교 결과, SSIM 값의 차이가 임계값 이하인 경우, 제1 인코딩 비디오의 프레임을 선택하고(S560), SSIM 값의 차이가 임계값 초과인 경우, 제2 인코딩 비디오의 프레임을 선택한다(S570).
선택된 제1 인코딩 비디오의 프레임 또는 제2 인코딩 비디오의 프레임을 모아 예비 스트리밍 비디오를 생성한다(S580).
마지막으로, 예비 스트리밍 비디오의 프레임 중 제1 인코딩 비디오의 프레임과 동일한 프레임을 제거하면 실시간 스트리밍으로 전송할 스트리밍 비디오가 생성된다(S590).
사용자 단말기의 고화질 비디오 스트리밍 서비스 방법
도 6는 본 발명의 또 다른 측면에 따른 사용자 단말기의 고화질 비디오 스트리밍 서비스 방법을 나타내는 흐름도이고, 도 7은 본 발명의 또 다른 측면에 따른 사용자 단말기의 고화질 비디오 스트리밍 서비스 방법의 재생용 비디오 생성 과정을 구체화하여 나타내는 흐름도이다.
사용자 단말기의 고화질 비디오 스트리밍 서비스 방법은, 도 6에 도시한 바와 같이, 제1 인코딩 비디오를 다운로드 받고, 스트리밍 비디오를 실시간 전송받고(S610), 제1 인코딩 비디오와 스트리밍 비디오를 재조합하여 재생용 비디오를 생성하고(S620), 재생용 비디오를 재생한다(S630).
사용자 단말기의 고화질 스트리밍 서비스 방법의 재생용 비디오 생성 과정을 구체화하면, 도 7에 도시한 바와 같이, 제1 인코딩 비디오를 다운로드 받고, 스트리밍 비디오를 실시간 전송받는 과정(S710), 제1 인코딩 비디오와 스트리밍 비디오를 재조합하여 재생용 비디오를 생성하는 과정(S720~S750), 및 재생용 비디오를 재생하는 과정(S760)을 포함하여 구성된다.
여기서, 재생용 비디오를 생성하는 과정은, 제1 인코딩 비디오의 프레임과 스트리밍 비디오의 프레임이 동일한 지 비교한다(S720). 프레임이 동일한 지 여부는 원본 비디오의 프레임이 동일한 지를 비교하여 결정된다.
비교 결과, 동일한 프레임이 제1 인코딩 비디오에만 포함된 경우, 제1 인코딩 비디오의 프레임을 선택하고(S730), 동일한 프레임이 제1 인코딩 비디오 및 스트리밍 비디오에 함께 포함된 경우 스트리밍 비디오의 프레임을 선택한다(S740).
즉, 일반적으로 제1 인코딩 비디오를 재생 비디오로 선택하되, 추가로 스트리밍 비디오로 전송된 프레임은 스트리밍 비디오의 프레임을 선택하여 재생 비디오를 생성한다.
따라서, 실시간 스트리밍된 비디오보다 고화질인 고속다운로드용 비디오의 프레임을 재생용 비디오로 사용할 수 있으므로, 고화질의 비디오 스트리밍 서비스를 제공할 수 있다.
다음으로, 선택된 프레임들을 조합하여 재생용 비디오를 생성하고(S750), 생성된 재생용 비디오를 재생한다(S760).
컨텐츠 서버에서 스트리밍 비디오를 생성하고 사용자 단말기에서 스트리밍 재생용 비디오를 생성하는 과정은 도 8 및 도 9를 참조하여 구체적으로 설명한다.
도 8은 본 발명의 또 다른 측면에 따른 컨텐츠 서버의 고화질 비디오 스트리밍 서비스 방법에서 스트리밍 비디오를 생성하는 실시예를 설명하기 위한 도면이고, 도 9는 본 발명의 또 다른 측면에 따른 사용자 단말기의 고화질 비디오 스트리밍 서비스 방법에서 스트리밍 재생용 비디오를 생성하는 실시예를 설명하기 위한 도면이다.
도 8 및 도 9는 고화질용 비디오가 고속다운로드용 비디오 GOP 길이의 1/2, 프레임율의 1/2로 인코딩된 경우의 고속다운로드용 비디오와 고화질용 비디오를 이용하여 스트리밍 비디오를 생성하는 과정과, 고속다운로드용 비디오와 스트리밍 비디오를 이용하여 재생 비디오를 생성하는 과정을 설명하기 위해 도시한 도면이다.
스트리밍 비디오 생성은, 도 8에 도시한 바와 같이, 컨텐츠 서버에서 고속다운로드용 비디오와 고화질용 비디오를 조합하여 예비 스트리밍 비디오를 생성하고, 예비 스트리밍 비디오 중 고속다운로드용 비디오와 동일한 프레임을 제외함으로써 스트리밍 비디오를 생성한다.
먼저, 고속다운로드용 비디오 프레임과 고화질용 비디오 프레임을 비교하여 동일한 프레임인 2행, 4행, 6행의 프레임은 고속다운로드용 비디오의 프레임을 예비 스트리밍 비디오로 선택된다.
고속다운로드용 비디오 프레임과 고화질용 비디오 프레임을 비교하여 동일하지 않은 프레임인 1행, 3행, 5행, 7행은 고속다운로드용 비디오와 고화질용 비디오를 스트리밍 전송시의 SSIM 값의 차이를 예측하여 임계값과 비교함으로써 결정한다.
1행, 5행은 고속다운로드용 비디오의 프레임이 예비 스트리밍 비디오로 선택된 경우로 SSIM 값의 차이가 임계값 이하이며, 3행, 7행은 고화질용 비디오의 프레임이 예비 스트리밍 비디오로 선택된 경우로 SSIM 값의 차이가 임계값을 초과한 경우이다.
고속다운로드용 비디오의 각 프레임과 고화질용 비디오의 각 프레임을 비교하여 예비 스트리밍 비디오가 생성되면, 예비 스트리밍 비디오 중 고속다운로드용 비디오의 프레임을 제거함으로써 스트리밍 비디오가 생성된다.
고속다운로드용 비디오는 스트리밍 비디오와 독립적으로 다운로드 되며, 다운로드 후 사용자 단말기에서 고속다운로드용 비디오를 이용할 수 있으므로 스트리밍 비디오에서 제거한다.
재생 비디오 생성은, 도 9에 도시한 바와 같이, 사용자 단말기에서 고속다운로드용 비디오와 스트리밍 비디오를 이용하여 생성한다.
먼저, 스트리밍 비디오의 프레임과 고속다운로드용 비디오의 프레임을 비교하여, 고속다운로드용 비디오의 프레임에만 포함된 프레임들인, 1행, 2행, 4행 내지 6행은 고속다운로드용 비디오 프레임을 선택하고, 고속다운로드용 비디오와 스트리밍 비디오에 모두 포함되어 있는 프레임은 스트리밍 비디오의 프레임을 선택하여 재생 비디오를 생성한다.
즉, 사용자 단말기에서 재생 비디오를 생성하기 위해서, 기본적으로 미리 다운로드된 고속다운로드용 비디오의 프레임을 사용하며, 추가로 스트리밍 비디오로 전송된 프레임만 스트리밍 비디오를 사용하여 재생 비디오를 생성한다.
전술한 바와 같이 본 발명에 의하면, 사용자가 비디오 컨텐츠를 빠른 시간 내에 다운로드 받을 수 있고, 비디오 컨텐츠를 스트리밍 서비스 받을 때 이미 다운로드 받은 비디오 컨텐츠를 기반으로 스트리밍 서비스를 제공받을 수 있으므로, 스트리밍 서비스를 받는 경우에도 고화질의 비디오 컨텐츠를 제공받을 수 있다.
비록 본 명세서에서는 예시적인 클라이언트-서버 시스템을 기술하고 있지만, 본 명세서에서 설명하는 기능적인 동작의 구현물은 본 명세서에서 기술한 것과는 다른 유형의 디지털 전자 회로로 구현되거나, 본 명세서에서 개시하는 구조 및 그 구조적인 등가물들을 포함하는 컴퓨터 소프트웨어, 펌웨어 혹은 하드웨어로 구현되거나, 이들 중 하나 이상의 결합으로 구현 가능하다. 본 발명에서 설명하는 주제의 구현물은 하나 이상의 컴퓨터 프로그램 제품, 다시 말해 처리 시스템의 동작을 제어하기 위하여 혹은 이것에 의한 실행을 위하여 유형의 프로그램 저장매체 상에 인코딩된 컴퓨터 프로그램 명령에 관한 하나 이상의 모듈로서 구현될 수 있다. 컴퓨터로 판독 가능한 매체는 기계로 판독 가능한 저장 장치, 기계로 판독 가능한 저장 기판, 메모리 장치, 기계로 판독 가능한 전파형 신호에 영향을 미치는 물질의 조성물 혹은 이들 중 하나 이상의 조합일 수 있다.
"처리 시스템", "처리 장치" 및 "하위 시스템"이라는 용어는 예컨대 프로그래머블 프로세서, 컴퓨터 혹은 다중 프로세서나 컴퓨터를 포함하여 데이터를 처리하기 위한 모든 기구, 장치 및 기계를 포괄한다. 처리 시스템은, 하드웨어에 부가하여, 예컨대 프로세서 펌웨어를 구성하는 코드, 프로토콜 스택, 데이터베이스 관리 시스템, 운영 체제 혹은 이들 중 하나 이상의 조합 등 요청 시 컴퓨터 프로그램에 대한 실행 환경을 형성하는 코드를 포함할 수 있다.
컴퓨터 프로그램(프로그램, 소프트웨어, 소프트웨어 어플리케이션, 스크립트 혹은 코드로도 알려져 있음)은 컴파일되거나 해석된 언어나 선험적 혹은 절차적 언어를 포함하는 프로그래밍 언어의 어떠한 형태로도 작성될 수 있으며, 독립형 프로그램이나 모듈, 컴포넌트, 서브루틴 혹은 컴퓨터 환경에서 사용하기에 적합한 다른 유닛을 포함하여 어떠한 형태로도 전개될 수 있다. 컴퓨터 프로그램이 파일 시스템의 파일에 반드시 대응해야 하는 것은 아니다. 프로그램은 요청된 프로그램에 제공되는 단일 파일 내에, 혹은 다중의 상호 작용하는 파일(예컨대, 하나 이상의 모듈, 하위 프로그램 혹은 코드의 일부를 저장하는 파일) 내에, 혹은 다른 프로그램이나 데이터를 보유하는 파일의 일부(예컨대, 마크업 언어 문서 내에 저장되는 하나 이상의 스크립트) 내에 저장될 수 있다. 컴퓨터 프로그램은 하나의 사이트에 위치하거나 복수의 사이트에 걸쳐서 분산되어 통신 네트워크에 의해 상호 접속된 다중 컴퓨터나 하나의 컴퓨터 상에서 실행되도록 전개될 수 있다.
컴퓨터 프로그램 명령어와 데이터를 저장하기에 적합한 컴퓨터로 판독 가능한 매체는, 예컨대 EPROM, EEPROM 및 플래시메모리 장치와 같은 반도체 메모리 장치, 예컨대 내부 하드디스크나 외장형 디스크와 같은 자기 디스크, 자기광학 디스크 및 CD-ROM과 DVD-ROM 디스크를 포함하여 모든 형태의 비휘발성 메모리, 매체 및 메모리 장치를 포함한다. 프로세서와 메모리는 특수 목적의 논리 회로에 의해 보충되거나, 그것에 통합될 수 있다.
본 명세서에서 설명한 주제의 구현물은 예컨대 데이터 서버와 같은 백엔드 컴포넌트를 포함하거나, 예컨대 어플리케이션 서버와 같은 미들웨어 컴포넌트를 포함하거나, 예컨대 사용자가 본 명세서에서 설명한 주제의 구현물과 상호 작용할 수 있는 웹 브라우저나 그래픽 유저 인터페이스를 갖는 클라이언트 컴퓨터와 같은 프론트엔드 컴포넌트 혹은 그러한 백엔드, 미들웨어 혹은 프론트엔드 컴포넌트의 하나 이상의 모든 조합을 포함하는 연산 시스템에서 구현될 수 있다. 시스템의 컴포넌트는 예컨대 통신 네트워크와 같은 디지털 데이터 통신의 어떠한 형태나 매체에 의해서도 상호 접속 가능하다.
본 명세서는 다수의 특정한 구현물의 세부사항들을 포함하지만, 이들은 어떠한 발명이나 청구 가능한 것의 범위에 대해서도 제한적인 것으로서 이해되어서는 안되며, 오히려 특정한 발명의 특정한 실시형태에 특유할 수 있는 특징들에 대한 설명으로서 이해되어야 한다. 개별적인 실시형태의 문맥에서 본 명세서에 기술된 특정한 특징들은 단일 실시형태에서 조합하여 구현될 수도 있다. 반대로, 단일 실시형태의 문맥에서 기술한 다양한 특징들 역시 개별적으로 혹은 어떠한 적절한 하위 조합으로도 복수의 실시형태에서 구현 가능하다. 나아가, 특징들이 특정한 조합으로 동작하고 초기에 그와 같이 청구된 바와 같이 묘사될 수 있지만, 청구된 조합으로부터의 하나 이상의 특징들은 일부 경우에 그 조합으로부터 배제될 수 있으며, 그 청구된 조합은 하위 조합이나 하위 조합의 변형물로 변경될 수 있다.
마찬가지로, 특정한 순서로 도면에서 동작들을 묘사하고 있지만, 이는 바람직한 결과를 얻기 위하여 도시된 그 특정한 순서나 순차적인 순서대로 그러한 동작들을 수행하여야 한다거나 모든 도시된 동작들이 수행되어야 하는 것으로 이해되어서는 안된다. 특정한 경우, 멀티태스킹과 병렬 프로세싱이 유리할 수 있다.
또한, 상술한 실시형태의 다양한 시스템 컴포넌트의 분리는 그러한 분리를 모든 실시형태에서 요구하는 것으로 이해되어서는 안되며, 설명한 프로그램 컴포넌트와 시스템들은 일반적으로 단일의 소프트웨어 제품으로 함께 통합되거나 다중 소프트웨어 제품에 패키징될 수 있다는 점을 이해하여야 한다.
이와 같이, 본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있으므로, 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
본 발명은 비디오 컨텐츠를 다운로드 또는 스트리밍을 통해 단말기에 서비스하는 시스템에 적용할 수 있으며, 네트워크를 통해 고화질의 컨텐츠를 소비하기 위한 컨텐츠 동기화 기술과 실시간 전송 기술에 적용할 수 있다.
또한, 비디오 컨텐츠를 저장 또는 스트리밍하기 위해 압축하여 크기를 줄이는 기술에 적용할 수 있다.
그리고, 비디오를 실시간으로 재생할 수 있도록 서버에서 압축된 비디오를 네트워크를 통해 전송하는 장치나 시스템 등에도 적용할 수 있다.

Claims (13)

  1. 원본 비디오를 고정 비트율(constant bit rate)로 인코딩하여 제1 인코딩 비디오를 생성하고, 고정된 양자화 수치(Quantization Parameter)를 가지며, 상기 제1 인코딩 비디오 GOP(Group Of Pictures) 길이의 N분의 1과, 프레임율(frame rate)의 N분의 1로 상기 원본 비디오를 인코딩하여 제2 인코딩 비디오를 생성하고, 상기 제1 인코딩 비디오와 상기 제2 인코딩 비디오를 이용하여 스트리밍 비디오를 생성하고, 상기 제1 인코딩 비디오를 다운로드하고 상기 스트리밍 비디오를 실시간 전송하는 컨텐츠 서버; 및
    상기 제1 인코딩 비디오를 다운로드 받아 재생하거나, 또는 상기 제1 인코딩 비디오의 프레임과 상기 스트리밍 비디오의 프레임을 재조합하여 재생용 비디오를 생성하여 재생하는 사용자 단말기;를 포함하는 고화질 비디오 스트리밍 서비스 시스템.
  2. 원본 비디오를 고정 비트율(constant bit rate)로 인코딩하여 제1 인코딩 비디오를 생성하는 제1 인코딩부;
    상기 제1 인코딩 비디오의 GOP(Group Of Pictures) 길이의 N분의 1, 프레임율(frame rate)의 N분의 1로 인코딩되도록 설정하고, 양자화 수치(Quantization Parameter)를 상기 원본 비디오 전체에 대하여 고정시켜 상기 원본 비디오를 인코딩하여 제2 인코딩 비디오를 생성하는 제2 인코딩부;
    상기 제1 인코딩 비디오와 상기 제2 인코딩 비디오를 이용하여 스트리밍 비디오를 생성하는 스트리밍 비디오 생성부;
    상기 제1 인코딩 비디오를 다운로드하는 비디오 다운로드부; 및
    상기 스트리밍 비디오를 실시간 전송하는 비디오 스트리밍부;를 포함하는 컨텐츠 서버.
  3. 제2항에 있어서,
    상기 스트리밍 비디오 생성부는, 상기 제1 인코딩 비디오와 상기 제2 인코딩 비디오의 프레임을 비교하여, 동일한 프레임은 상기 제1 인코딩 비디오의 프레임을 선택하고, 동일하지 않는 프레임은 상기 제1 인코딩 비디오의 프레임 또는 상기 제2 인코딩 비디오의 프레임 중 하나를 선택하여 예비 스트리밍 비디오를 생성하는 것을 특징으로 하는 컨텐츠 서버.
  4. 제3항에 있어서,
    상기 스트리밍 비디오 생성부는, 상기 제1 인코딩 비디오의 프레임 및 상기 제2 인코딩 비디오의 프레임을 스트리밍 비디오로 전송시의 구조적 동일성(Structural Similarity) 값을 예측하고, 예측된 구조적 동일성 값의 차이가 임계값 이하인 경우 제1 인코딩 비디오의 프레임을 선택하고, 상기 예측된 구조적 동일성 값의 차이가 임계값 초과인 경우 제2 인코딩 비디오의 프레임을 선택하여 예비 스트리밍 비디오를 생성하는 것을 특징으로 하는 컨텐츠 서버.
  5. 제3항에 있어서,
    상기 스트리밍 비디오 생성부는, 상기 예비 스트리밍 비디오의 프레임 중 상기 제1 인코딩 비디오의 프레임과 동일한 프레임을 제거하여 스트리밍 비디오를 생성하는 것을 특징으로 하는 컨텐츠 서버.
  6. 제1 인코딩 비디오를 다운로드 받는 비디오 다운로드부;
    스트리밍 비디오를 실시간 전송받는 비디오 스트리밍부;
    상기 제1 인코딩 비디오와 상기 스트리밍 비디오를 이용하여 재생용 비디오를 생성하는 재생 비디오 생성부;
    상기 제1 인코딩 비디오를 재생하거나 또는 상기 재생용 비디오를 재생하는 비디오 재생부;를 포함하는 사용자 단말기.
  7. 제6항에 있어서,
    상기 재생 비디오 생성부는, 상기 제1 인코딩 비디오의 프레임과 상기 스트리밍 비디오의 프레임을 비교하여, 상기 제1 인코딩 비디오에만 포함된 프레임은 상기 제1 인코딩 비디오의 프레임을 선택하고, 상기 제1 인코딩 비디오 및 상기 스트리밍 비디오에 포함된 프레임은 상기 스트리밍 비디오의 프레임을 선택한 후 재조합하여 재생용 비디오를 생성하는 것을 특징으로 하는 사용자 단말기.
  8. (a) 원본 비디오를 서로 다른 GOP(Group Of Pictures)와 프레임율(frame rate)로 인코딩하여 제1 인코딩 비디오와 제2 인코딩 비디오를 생성하는 단계;
    (b) 상기 제1 인코딩 비디오와 상기 제2 인코딩 비디오를 이용하여 스트리밍 비디오를 생성하는 단계; 및
    (c) 상기 제1 인코딩 비디오를 다운로드하고, 상기 스트리밍 비디오를 실시간 전송하는 단계;를 포함하는 컨텐츠 서버의 고화질 비디오 스트리밍 서비스 방법.
  9. 제8항에 있어서,
    상기 (a) 단계는,
    상기 원본 비디오를 고정된 비트율(constant bit rate)을 가지며, 제1 GOP(Group Of Pictures), 제1 프레임율(frame rate)로 인코딩하여 제1 인코딩 비디오를 생성하고, 상기 원본 비디오를 고정된 양자화 수치(Quantization Parameter)를 가지며, 상기 제1 GOP 길이의 N분의 1과, 상기 제1 프레임율의 N분의 1로 인코딩하여 제2 인코딩 비디오를 생성하는 것을 특징으로 하는 컨텐츠 서버의 고화질 비디오 스트리밍 서비스 방법.
  10. 제8항에 있어서,
    상기 (b) 단계는,
    (b-1) 상기 제1 인코딩 비디오의 프레임과 상기 제2 인코딩 비디오의 프레임을 비교하여 동일한 프레임은 상기 제1 인코딩 비디오의 프레임을 선택하고, 동일하지 않는 프레임은 상기 제1 인코딩 비디오의 프레임 또는 상기 제2 인코딩 비디오의 프레임 중 하나를 선택하여 예비 스트리밍 비디오를 생성하는 단계; 및
    (b-2) 상기 예비 스트리밍 비디오의 프레임 중 상기 제1 인코딩 비디오의 프레임과 동일한 프레임을 제거하여 스트리밍 비디오를 생성하는 단계;를 포함하여 구성되는 것을 특징으로 하는 컨텐츠 서버의 고화질 비디오 스트리밍 서비스 방법.
  11. 제10항에 있어서,
    상기 (b-1) 단계는,
    상기 제1 인코딩 비디오의 프레임 및 상기 제2 인코딩 비디오의 프레임을 스트리밍 비디오로 전송시의 구조적 동일성(Structure Similarity) 값을 예측하고, 예측된 구조적 동일성 값의 차이가 임계값 이하인 경우 제1 인코딩 비디오의 프레임을 선택하고, 상기 예측된 구조적 동일성 값의 차이가 임계값 초과인 경우 제2 인코딩 비디오의 프레임을 선택하여 예비 스트리밍 비디오를 생성하는 것을 특징으로 하는 컨텐츠 서버의 고화질 비디오 스트리밍 서비스 방법.
  12. (a) 제1 인코딩 비디오를 다운로드 받고, 스트리밍 비디오를 실시간 전송받는 단계;
    (b) 상기 제1 인코딩 비디오와 상기 스트리밍 비디오를 이용하여 재생용 비디오를 생성하는 단계; 및
    (c) 상기 재생용 비디오를 재생하는 단계;를 포함하는 사용자 단말기의 고화질 비디오 스트리밍 서비스 방법.
  13. 제12항에 있어서,
    상기 (b) 단계는,
    상기 제1 인코딩 비디오의 프레임과 상기 스트리밍 비디오의 프레임을 비교하여, 상기 제1 인코딩 비디오에만 포함된 프레임은 상기 제1 인코딩 비디오의 프레임을 선택하고 상기 제1 인코딩 비디오 및 상기 스트리밍 비디오에 모두 포함된 프레임은 상기 스트리밍 비디오의 프레임을 선택한 후 재조합하여 재생용 비디오를 생성하는 것을 특징으로 하는 사용자 단말기의 고화질 비디오 스트리밍 서비스 방법.
PCT/KR2012/003316 2011-06-24 2012-04-27 고화질 비디오 스트리밍 서비스 방법 및 시스템 WO2012176979A1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US14/113,445 US9374408B2 (en) 2011-06-24 2012-04-27 High picture quality video streaming service method and system
US15/159,694 US9628537B2 (en) 2011-06-24 2016-05-19 High picture quality video streaming service method and system
US15/468,538 US9961124B2 (en) 2011-06-24 2017-03-24 High picture quality video streaming service method and system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2011-0061688 2011-06-24
KR1020110061688A KR101840008B1 (ko) 2011-06-24 2011-06-24 고화질 비디오 스트리밍 서비스 방법 및 시스템

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US14/113,445 A-371-Of-International US9374408B2 (en) 2011-06-24 2012-04-27 High picture quality video streaming service method and system
US15/159,694 Continuation US9628537B2 (en) 2011-06-24 2016-05-19 High picture quality video streaming service method and system

Publications (1)

Publication Number Publication Date
WO2012176979A1 true WO2012176979A1 (ko) 2012-12-27

Family

ID=47422777

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2012/003316 WO2012176979A1 (ko) 2011-06-24 2012-04-27 고화질 비디오 스트리밍 서비스 방법 및 시스템

Country Status (3)

Country Link
US (3) US9374408B2 (ko)
KR (1) KR101840008B1 (ko)
WO (1) WO2012176979A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114339412A (zh) * 2021-12-30 2022-04-12 咪咕文化科技有限公司 视频质量增强方法、移动终端、存储介质及装置

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102063089B1 (ko) * 2014-07-18 2020-01-07 에스케이플래닛 주식회사 클라우드 스트리밍 서비스 시스템, 컨텐츠 화질 개선 방법 및 이를 위한 장치
KR102285197B1 (ko) * 2015-01-30 2021-08-03 에스케이플래닛 주식회사 클라우드 스트리밍 서비스 시스템, 동시 인코딩을 이용한 이미지 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
KR102273145B1 (ko) * 2015-02-02 2021-07-05 에스케이플래닛 주식회사 클라우드 스트리밍 서비스 시스템, 추가 인코딩을 이용한 이미지 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
KR20170098632A (ko) * 2016-02-22 2017-08-30 에스케이텔레콤 주식회사 인코더 장치 및 그 비디오 데이터 제공 방법
CN106713956B (zh) * 2016-11-16 2020-09-15 上海交通大学 动态自适应视频流媒体的码率控制与版本选择方法及系统
JP6961443B2 (ja) * 2017-09-29 2021-11-05 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020095001A (ko) * 2001-06-12 2002-12-20 박준상 다운로드와 스트리밍의 혼합 방식을 이용한 파일 전송 방법
WO2005071969A1 (en) * 2004-01-14 2005-08-04 Sony Ericsson Mobile Communications Ab Multimedia distributing and/or playing systems and methods using separate resolution-enhancing supplemental data
KR20050087837A (ko) * 2002-12-20 2005-08-31 코닌클리케 필립스 일렉트로닉스 엔.브이. 방송 및 스트리밍을 통해 이중 층 ｈｄｔｖ 신호를전달하는 방법 및 시스템
JP2007195146A (ja) * 2006-10-24 2007-08-02 Apple Inc 縮小サイズまたはフルサイズでの再生を動的に選択的に行うための複数の独立した符号化チェーンを備えるビデオ符号化システム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8743954B1 (en) * 2008-02-01 2014-06-03 Zenverge, Inc. Architecture for adjusting bit rate based on measured quality
US8355433B2 (en) * 2009-08-18 2013-01-15 Netflix, Inc. Encoding video streams for adaptive video streaming
CN101668160B (zh) * 2009-09-10 2012-08-29 华为终端有限公司 视频图像数据处理方法、装置及视频会议系统及终端
KR101709903B1 (ko) * 2010-02-19 2017-02-23 텔레폰악티에볼라겟엘엠에릭슨(펍) 에이치티티피 스트리밍에서 적응화를 위한 방법 및 장치
US8954596B2 (en) * 2010-04-02 2015-02-10 Netflix, Inc. Dynamic virtual chunking of streaming media content
US8689267B2 (en) * 2010-12-06 2014-04-01 Netflix, Inc. Variable bit video streams for adaptive streaming

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020095001A (ko) * 2001-06-12 2002-12-20 박준상 다운로드와 스트리밍의 혼합 방식을 이용한 파일 전송 방법
KR20050087837A (ko) * 2002-12-20 2005-08-31 코닌클리케 필립스 일렉트로닉스 엔.브이. 방송 및 스트리밍을 통해 이중 층 ｈｄｔｖ 신호를전달하는 방법 및 시스템
WO2005071969A1 (en) * 2004-01-14 2005-08-04 Sony Ericsson Mobile Communications Ab Multimedia distributing and/or playing systems and methods using separate resolution-enhancing supplemental data
JP2007195146A (ja) * 2006-10-24 2007-08-02 Apple Inc 縮小サイズまたはフルサイズでの再生を動的に選択的に行うための複数の独立した符号化チェーンを備えるビデオ符号化システム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114339412A (zh) * 2021-12-30 2022-04-12 咪咕文化科技有限公司 视频质量增强方法、移动终端、存储介质及装置
CN114339412B (zh) * 2021-12-30 2024-02-27 咪咕文化科技有限公司 视频质量增强方法、移动终端、存储介质及装置

Also Published As

Publication number Publication date
KR20130000885A (ko) 2013-01-03
US20170251042A1 (en) 2017-08-31
US20140297885A1 (en) 2014-10-02
US9374408B2 (en) 2016-06-21
US20160269465A1 (en) 2016-09-15
US9961124B2 (en) 2018-05-01
KR101840008B1 (ko) 2018-05-04
US9628537B2 (en) 2017-04-18

Similar Documents

Publication Publication Date Title
WO2012176979A1 (ko) 고화질 비디오 스트리밍 서비스 방법 및 시스템
US9031078B2 (en) Modification of live streams
WO2013077525A1 (ko) 제어 방법 및 그를 이용한 장치
WO2012173389A2 (en) Method and apparatus for transmitting/receiving media contents in multimedia system
WO2015076537A1 (ko) 동영상 제공 방법 및 동영상 제공 시스템
WO2012125001A2 (en) Method and apparatus for configuring content in a broadcast system
JP6377784B2 (ja) オーディオビデオ同期取込によって一対多オーディオビデオストリーミングを行う方法
WO2012138183A2 (en) Apparatus and method for providing content using a network condition-based adaptive data streaming service
JP2001069106A (ja) ストリーム多重分離装置
WO2011111987A2 (en) Apparatus and method for playing media content data
CN112752115A (zh) 直播数据传输方法、装置、设备及介质
US20090259764A1 (en) Intro outro merger with bit rate variation support
WO2011136537A2 (en) Method and apparatus for transmitting content to plurality of devices
WO2014058278A1 (en) Apparatus and method for transmitting and receiving packet in a broadcasting and communication system
WO2016056804A1 (en) Content processing apparatus and content processing method thereof
WO2020138567A1 (ko) 컨텐츠 스트리밍 장치, 시스템 및 방법
US20110088069A1 (en) Network device, information processing apparatus, stream switching method, information processing method, program, and content distribution system
WO2012144795A2 (en) Apparatus for outputting broadcast recorded by schedule recording and control method thereof
WO2013154364A1 (ko) 스트리밍 재생 방법 및 이를 이용한 컴퓨팅 장치
WO2022055198A1 (ko) 다중 라이브 송출 환경에서의 채널 간 고속 전환 모드를 구현하는 방법, 시스템, 및 컴퓨터 판독가능한 기록 매체
WO2014010830A1 (ko) 엠엠티의 하이브리드 전송 서비스에서 패킷 전송 및 수신 장치 및 방법
WO2017209432A1 (ko) 임의편집 압축 동영상 컨텐츠 제공 시스템 및 제공방법
WO2016043432A1 (ko) 멀티미디어의 전송 또는 수신 방법 및 그 장치
WO2020138568A1 (ko) 컨텐츠 인코딩 장치 및 방법
WO2013109094A1 (ko) 이종망 네트워크에서 미디어 프래그먼트 유닛으로 나누어진 액세스 유닛을 가지는 미디어 데이터를 전송하는 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12801923

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 14113445

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12801923

Country of ref document: EP

Kind code of ref document: A1