CN111066329A - 控制视频质量 - Google Patents

控制视频质量 Download PDF

Info

Publication number
CN111066329A
CN111066329A CN201780094712.6A CN201780094712A CN111066329A CN 111066329 A CN111066329 A CN 111066329A CN 201780094712 A CN201780094712 A CN 201780094712A CN 111066329 A CN111066329 A CN 111066329A
Authority
CN
China
Prior art keywords
frames
type
video stream
quality
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201780094712.6A
Other languages
English (en)
Inventor
白峻式
柳锦龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Z Intermediate Global Corp
Original Assignee
Line Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Line Corp filed Critical Line Corp
Publication of CN111066329A publication Critical patent/CN111066329A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365Multiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234381Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2402Monitoring of the downstream path of the transmission network, e.g. bandwidth available
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4621Controlling the complexity of the content stream or additional data, e.g. lowering the resolution or bit-rate of the video stream for a mobile client with a small screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供用于控制视频质量的技术。在本发明多个实施例的质量控制方法中,在不对所提供的视频进行转码的情况下,通过对于视频的多个帧的多路复用(multiplexing,或多路技术(muxing))工法来控制视频质量,从而可提供具有多种质量的多个视频。

Description

控制视频质量
技术领域
以下说明涉及用于控制视频质量的技术,更详细地,涉及在不对所提供的视频进行转码的情况下,可通过控制视频质量来提供具有多种质量的多个视频的质量控制方法、执行上述质量控制方法的计算机装置以及为了与计算机相结合来在计算机中运行质量控制方法而存储于计算机可读记录介质的计算机程序及其记录介质。
背景技术
存在如下的一种技术:即,服务器接收从广播发送人员提供的视频,服务器再次向多个广播接收人员发送所接收的视频。在这种情况下,为了将从广播发送人员提供的单一质量的视频根据广播接收人员的要求以多种质量提供而需要在服务器侧进行转码过程。例如,可考虑广播发送人员以720p的分辨率发送视频的情况。其中,在720p中的数字“720”意味着纵向分辨率的720扫描线,而文字“P”意味着依次扫描(progressive)。这可意味着具有1280×720分辨率的HD视频。在这种情况下,为了多个广播收看人员,在服务器支持以720p、480p及360p这三种质量的分辨率发送视频的情况下,服务器需要将从广播发送人员以720p分辨率发送的视频转码成720p、480p及360p这三种视频。例如,韩国公开专利第10-2007-0048095号涉及用于再次传输数字多媒体广播流媒体的转码方法,其公开了为了再次传输从外部接收的数字广播流媒体而进行转码的技术。
但具有这种转码自身需要许多服务器资源的问题。例如,对广播发送人员的视频而言,与多路复用(multiplexing,或多路技术(muxing))相比,转码视频需要数百倍的服务器资源。因此,具有如下的问题:为了向广播接收人员提供多种质量的视频而执行转码时在服务器侧需求许多资源。
发明内容
本发明提供在不对视频进行转码的情况下可通过对于视频的多个帧的多路复用(multiplexing,或多路技术(muxing))工法控制视频的质量来提供具有多种质量的多个视频的质量控制方法、执行上述质量控制方法的计算机装置以及为了与计算机相结合来在计算机中运行质量控制方法而存储于计算机可读记录介质的计算机程序及其记录介质。
本发明提供质量控制方法,其特征在于,包括:接收视频流的步骤,上述视频流包括根据用于解码的参照关系被分类为多种类型的多个帧;以及通过多路复用上述视频流所包括的多个帧来输出上述多种类型中预设类型的多个帧,由此控制上述视频流的质量的步骤。
本发明提供计算机程序,其特征在于,为了与计算机相结合来在计算机中运行质量控制方法而存储于计算机可读记录介质。
本发明提供计算机可读记录介质,其特征在于,记录有用于在计算机中运行质量控制方法的程序。
本发明提供计算机装置,其特征在于,包括被配置为用于运行计算机可读指令的至少一个处理器,至少一个上述处理器接收视频流,上述视频流包括根据用于解码的参照关系被分类为多种类型的多个帧,至少一个上述处理器通过多路复用上述视频流所包括的多个帧来输出上述多种类型中预设类型的多个帧,由此控制上述视频流的质量。
在不对视频进行转码的情况下,可通过对于视频的多个帧的多路复用(multiplexing,或多路技术(muxing))工法控制视频的质量来提供具有多种质量的多个视频。
附图说明
图1为示出本发明一实施例的网络环境的例的图。
图2为用于说明本发明一实施例中的电子设备及服务器的内部结构的框图。
图3为示出所发布的视频流的多个帧的例的图。
图4及图5为用于比较说明现有技术的转码与本发明一实施例的多路复用的图。
图6为示出本发明一实施例中的通过调节视频流的质量来提供的环境的例的图。
图7为示出本发明一实施例的质量控制方法的例的流程图。
图8为示出本发明一实施例中的控制实时视频流的质量来转播的例的图。
图9为示出本发明一实施例中的通过调节视频流的质量来提供的环境的其他例的图。
具体实施方式
以下,参照附图,详细说明实施例。
根据本发明多个实施例的质量控制方法可通过下述说明的如电子设备或服务器的计算机装置执行。在这种情况下,在计算机装置中可设置及驱动本发明一实施例的计算机程序,计算机装置根据所驱动的计算机程序的控制来执行本发明一实施例的质量控制方法。上述计算机程序为了与上述计算机相结合来在计算机中运行质量控制方法而存储于计算机可读记录介质。例如,在不进行转码的情况下,服务器对通过广播发送人员提供的单一质量的视频通过多路技术(muxing)控制质量,从而可提供具有多种质量的多个视频。根据实施例,可考虑电子设备对特定视频通过多路技术控制质量。
图1为示出本发明一实施例的网络环境的例的图。图1的网络环境示出包括多个电子设备110、120、130、140、多个服务器150、160及网络170的例。这种图1为用于说明发明的一例,电子设备的数量或服务器的数量并不局限于图1。
多个电子设备110、120、130、140可以为由计算机装置体现的固定终端或移动终端。例如,多个电子设备110、120、130、140为智能手机(smart phone)、手机、导航仪、计算机、笔记本电脑、数字广播终端、个人数字助理(PDA,Personal Digital Assistants)、便携式多媒体播放器(PMP,Portable Multimedia Player)、平板电脑等。作为一例,图1中,作为第一电子设备110的一例示出智能手机的形状,但是,在本发明实施例中,实质上,第一电子设备110可以为可利用无线或有线通信方式来通过网络170与其他多个电子设备120、130、140和/或服务器150、160进行通信的多种物理计算机装置中的一个。
通信方式并不局限于此,不仅可利用网络170可包括的通信网(作为一例,移动通信网、有线网络、无线网络、广播网)的通信方式,还可包括多个设备之间近距离无线通信。例如,网络170可包括个人局域网(PAN,personal area network)、局域网(LAN,local areanetwork)、校园网(CAN,campus area network)、城域网(MAN,metropolitan areanetwork)、广域网(WAN,wide area network)、宽带网(BBN,broadband network)、互联网等的网络中的一种以上的任意网络。并且,网络170可包括具有总线网、星状网、环形网、多跳网、星型总线网、树状网或等级(hierarchical)网等的网络拓扑结构中的任一种以上,但并不局限于此。
服务器150、160分别可由通过网络170与多个电子设备110、120、130、140进行通信来提供指令、代码、文件、内容、服务等的计算机装置或多个计算机装置体现。例如,服务器150可以为向通过网络170联接的多个电子设备110、120、130、140提供第一服务的系统,服务器160也可以为向通过网络170联接的多个电子设备110、120、130、140提供第二服务的系统。作为更具体的例,服务器150通过作为设置于多个电子设备110、120、130、140来驱动的计算机程序的应用程序,将对应应用程序需要的服务(作为一例,广播发送服务、内容传输服务、信息提供服务、发送信息服务、邮件服务等)作为第一服务向多个电子设备110、120、130、140提供。作为另一例,服务器160可将向多个电子设备110、120、130、140分配用于设置及驱动上述应用程序的文件的服务作为第二服务提供。
图2为用于说明本发明一实施例中的电子设备及服务器的内部结构的框图。图2中,作为对于电子设备的例,说明第一电子设备110和服务器150的内部结构。并且,其他多个设备120、130、140或服务器160也可具有与上述第一电子设备110或服务器150相同或类似的内部结构。
第一电子设备110和服务器150可包括存储器211、221、处理器212、222、通信模块213、223及输入输出接口214、224。存储器211、221作为计算机可读记录介质,可包括如随机存储器(RAM,random access memory)、只读存储器(ROM,read only memory)及磁盘驱动器的永久性大容量存储装置(permanent mass storage device)。其中,如只读存储器和磁盘驱动器的永久性大容量存储装置作为与存储器211、221区分的额外的永久性存储装置,可设置于第一电子设备110或服务器150。并且,存储器211、221可存储操作系统和至少一个程序代码(例如,用于设置于第一电子设备110来驱动的浏览器或为了提供特定服务而设置于第一电子设备110的应用程序等的代码)。这种多个软件结构要素可以从与存储器211、221不同的计算机可读记录介质加载。这种额外的计算机可读记录介质可包括软盘驱动器、硬盘、磁带、DVD/CD-ROM驱动器、存储卡等的计算机可读记录介质。在其他实施例中,多个软件结构要素可通过通信模块213、223在存储器211、221加载,而并非通过计算机可读记录介质加载。例如,至少一个程序可基于计算机程序(例如,上述应用程序)在存储器211、221加载,上述计算机程序通过文件设置,上述文件由开发人员或配置应用程序的设置文件的文件分配系统(作为一例,上述服务器160)通过网络170提供。
处理器212、222可被配置为通过执行基本的算数、逻辑及输入输出运算对计算机程序的指令进行处理。指令可通过存储器211、221或通信模块213、223向处理器212、222提供。例如,处理器212、222可根据存储于如存储器211、221的存储装置的程序代码来执行所接收的指令。
通信模块213、223可提供通过网络170使第一电子设备110与服务器150相互进行通信的功能,可提供使第一电子设备110和/或服务器150与其他电子设备(例如,第二电子设备120)或其他服务器(例如,服务器160)进行通信的功能。作为一例,第一电子设备110的处理器212可根据存储于如存储器211的存储装置的程序代码生成请求,该请求根据通信模块213的控制并通过网络170向服务器150传递。相反地,根据服务器150的处理器222的控制提供的控制信号或指令、内容、文件等可经过通信模块223和网络170并通过第一电子设备110的通信模块213来向第一电子设备110传递。例如,通过通信模块213接收的服务器150的控制信号或指令、内容、文件等可以向处理器212或存储器211传递,内容或文件等可以存储于第一电子设备110还能够包括的存储介质(上述永久性大容量存储装置)。
输入输出接口214可以为用于与输入输出装置215接口的一种单元。例如,输入装置可包括键盘或鼠标等,输出装置可包括显示器、扬声器等装置。作为另一例,输入输出接口214可以为用于与如触摸屏那样用于输入和输出的功能合并为一个的装置接口的单元。输入输出装置215可以与第一电子设备110形成为一体。并且,服务器150的输入输出接口224可以为与服务器150相连接或用于与服务器150可包括的用于输入或输出的装置(未图示)接口的单元。作为更具体的一例,在第一电子设备110的处理器212对在存储器211加载的计算机程序的指令进行处理的过程中,利用服务器150或第二电子设备120所提供的数据构成的服务画面或内容可通过输入输出接口214显示在显示器。
并且,在其他实施例中,第一电子设备110及服务器150可包括比图2的结构要素更多的结构要素。但是,无需明确示出大部分的现有技术结构要素。例如,第一电子设备110可包括上述输入输出装置215中至少一部分或者还可以进一步包括如无线电收发两用机(transceiver)、全球定位系统(GPS,Global Positioning System)模块、摄像头、各种传感器、数据库等的其他结构要素。作为更具体的例,在第一电子设备110为智能手机的情况下,通常,第一电子设备110还可包括智能手机所包括的加速度传感器或陀螺仪传感器、摄像头模块、各种物理按钮、利用触摸板的按钮、输入输出端口、用于振动的振动器等多种结构要素。
图3为示出所发布的视频流的多个帧的例的图,图4及图5为用于比较说明现有技术的转码与本发明一实施例的多路复用的图。
图3中,第一虚线框310为示出所发布的视频流的多个帧的例。通常使用的视频的帧可生成为I-Frame(Intra Frame,,帧内编码帧;Key-Frame,关键帧)、P-Frame(Predictive Frame,前向预测编码帧)及B-Frame(Bidirectional predictive Frame,双向预测内插编码帧)中的一个类型。例如,图3中示出的“I”示出对应帧以I-Frame类型生成,“P”示出对应帧以P-Frame类型生成,“B”示出对应帧以B-Frame类型生成。
I-Frame为被独立编码的帧,是不参照其他帧可被独立解码的帧。
P-Frame为参照之前的帧来编码的帧,是具有之前的P-Frame或I-Frame才可进行解码的帧。
B-Frame为参照之前或之后的帧来编码的帧,是具有之前及之后的P-Frame或I-Frame才可进行解码的帧。
在这种情况下,通常,所发布的视频流的多个帧为图3所示的多个帧的图案320反复排列的形态。在图案320内连续的多个帧的数量可存在差异。例如,在I-Frame与P-Frame之间或P-Frame与P-Frame之间可以排列三个B-Frame,而并不是排列两个B-Frame。
图4为示出转码器410通过对在第一虚线框310中示出的视频流的多个帧进行转码来提供不同质量的视频的例。转码是为了也可以在其他环境中利用以单一环境为目标制作的声音、数据、影像等多媒体内容而进行加工、筛选、变换的技术,图4示出了变更视频流多个帧的分辨率来提供三种质量的视频流的例。
另一方面,图5示出多路复用器510对第一虚线框310中的视频流的多个帧进行多路复用(或多路技术)来提供不同质量的视频的例。在这种情况下,图4的转码器410可通过分别调节多个帧的分辨率来控制比特率(bitrate),相反,图5的多路复用器510可通过控制帧率(frame rate)的时间分级(temporal scalability)来控制比特率。
例如,图5的第二虚线框520示出多路复用器510接收在第一虚线框310中示出的视频流的多个帧并直接依次输出所有帧的情况。并且,第三虚线框530示出多路复用器510接收在第一虚线框310中示出视频流的多个帧并仅输出除多个B-Frame之外的剩余多个I-Frame和多个P-Frame的情况。与此类似地,第四虚线框540示出多路复用器510接收在第一虚线框310中示出的视频流的多个帧并仅输出多个I-Frame的情况。
如上所述,I-Frame或P-Frame即使没有B-Frame也不会受到任何影响地进行解码。换言之,B-Frame因为不被其他帧所参照,因此,即使从视频流中去除,也可以正常地解码视频流。因此,如第三虚线框530所示,在B-Frame从视频流中去除的情况下,比特率将会减少,与第一虚线框310的视频流或第二虚线框520的视频流相比,可提供相对低质量的视频服务。
与此类似,I-Frame也可被独立地编码及解码,因此,即使没有P-Frame或B-Frame也不会受到任何影响地进行解码。因此,如第四虚线框540所示,在P-Frame或B-Frame从视频流中去除的情况下,比特率将会减少,与第三虚线框530的视频流相比,可提供相对低质量的视频服务。
如上所述,在本发明多个实施例中,无需进行如调节各个帧的分辨率的转码,仅将通过多路复用提供的视频流的多个数据包根据类型选择并输出,便可以提供多种质量的视频。在这种情况下,在图5中说明了如下的例:即,由于具有在视频流中B-Frame参照P-Frame或I-Frame且P-Frame参照其他P-Frame或I-Frame的结构,因此,通过依次去除未被参照的帧的方式来提供三种质量的视频。但是,在随着多个帧的类型进一步增加而逐级参照的情况进一步增加的情况下,也可提供更多数量的质量的视频。例如,“A→B”意味着A类型的帧参照B类型的帧被编码及解码,可以假设存在如A→B→C→D→E的五个步骤的帧类型。并且,可假设提供根据这五个步骤的帧类型而生成的视频流。在这种情况下,多路复用器510可提供如下的总共五种质量的视频:即,包括所有类型的多个帧的第一质量的视频流、除A类型帧之外的第二质量的视频流、除A类型帧与B类型帧之外的第三质量的视频流、除A类型帧与B类型帧及C类型帧之外的第四质量的视频流以及最后仅包括E类型帧的第五质量的视频流。
如上所述,在本发明多个实施例中,根据多个帧之间的参照关系多路复用多个帧,由此,在没有转码的情况下也可控制视频的质量。另一方面,如上所述,在本发明的多个实施例中,说明了基于视频帧特性,通过调节帧率来调节比特率,由此控制视频流的质量的例。这种视频流的比特率可影响如接收视频流的广播收看人员的接收方的视频画质。
图6为示出本发明一实施例中的通过调节视频流的质量来提供的环境的例的图。图6示出了服务器150将通过N(N为自然数)个广播发送人员终端610发送的实时视频流向M(M为自然数)个广播接收人员终端620进行转播的实时广播服务环境的例。在这种情况下,N个广播发送人员终端610与M个广播发送人员终端620可通过如上说明的第一电子设备110的计算机装置来体现。
在这种情况下,服务器150接收N个广播发送人员终端610发送的实时视频流,可利用多路复用器510控制所接收的实时视频流来播送。例如,在对一个实时视频流可进行总共三种质量的发送的情况下,服务器150可通过N×3个的通道播送实时视频流。
在这种情况下,M个广播接收人员终端620分别可以通过对于想要收看的实时视频流的各个质量的三个通道中的所需质量的通道,收看所选择的质量的实时视频流。
作为更具体的一例,第一广播发送人员终端611可发送实时视频流A。在这种情况下,服务器150可对通过多路复用器510发送的实时视频流A进行实时多路复用,将包括全部I-Frame、P-Frame及B-Frame的第一质量的实时视频流A通过第一通道播送,将B-Frame全部去除且包括I-Frame及P-Frame的第二质量的实时视频流A通过第二通道播送,将B-Frame与P-Frame全部去除且包括I-Frame的第三质量的实时视频流A通过第三通道播送。在这种情况下,在第一广播接收人员终端621中可提供与实时视频流A相关地选择第一通道、第二通道及第三通道中的一个的用户界面。并且,第一广播接收人员终端621可通过基于用户界面所选择的通道(作为一例,第二通道)以流式接收第二质量的实时视频流A来播放。
可知,如上所述,转码与多路复用在需要的服务器150的资源中发生数百倍以上的差异,在如图6的实时广播服务环境中,随着N大小的增加,其差异将会增加。换言之,可知服务器150无需进行转码,可通过多路复用控制实时视频流的质量,从而可大幅度减少需要的服务器资源。
图7为示出本发明一实施例的质量控制方法的例的流程图。根据本实施例的质量控制方法可通过如服务器150的计算机装置执行。例如,服务器150的处理器222可体现为运行存储器221所包括的操作系统的代码或至少一个程序代码的控制指令(instruction)。其中,处理器222可对服务器150进行控制,以便根据存储于服务器150的代码所提供的控制指令来使服务器150执行图7的质量控制方法所包括的多个步骤710至730。
在步骤710中,服务器150可接收视频流,上述视频流包括根据用于解码的参照关系被分类为多种类型的多个帧。例如,在通过图6的实施例说明的实时广播的情况下,服务器150可接收从发送人员的终端编码并通过网络实时发送的视频流的多个帧。其中,多种类型可包括:第一类型,独立解码且为了其他帧的解码而被参照;第二类型,参照其他帧进行解码且为了其他帧的解码而被参照;以及第三类型,参照其他帧进行解码且不会为了其他帧的解码而被参照。例如,如之前说明的I-Frame,第一类型的帧在没有参照其他帧的情况下也可独立地进行解码。并且,如之前说明的P-Frame,第二类型的帧可参照先前编码的第一类型或第二类型的帧进行解码。并且,如之前说明的B-Frame,第三类型的帧可均参照先前编码的第一类型或第二类型的帧及之后编码的第一类型或第二类型的帧进行解码。
在步骤720中,服务器150可通过多路复用视频流所包括的多个帧来输出多种类型中预设类型的多个帧,由此控制上述视频流的质量。例如,服务器150可通过多路复用视频流所包括的多个帧来提供三种质量的视频流。在这种情况下,服务器150可通过均输出第一类型、第二类型及第三类型的帧来提供第一质量的视频流,通过输出第一类型及第二类型的多个帧来提供第二质量的视频流,通过输出第一类型的多个帧来提供第三质量的视频流。
在步骤730中,服务器150可通过收看人员的终端能够访问的通道发送所输出的预设类型的多个帧,由此转播质量得到控制的视频流。例如,服务器150将之前说明的第一质量的视频流通过第一通道发送,将第二质量的视频流通过第二通道发送,将第三质量的视频流通过第三通道发送。在这种情况下,收看人员的终端可通过访问所需要的通道来接收所需要质量的视频流。
图8为示出本发明一实施例中的控制实时视频流的质量来转播的例的图。图8示出服务器150接收实时发送的视频流的多个帧并向多路复用器510输入以使多路复用器510根据类型选择多个帧来输出的例。在这种情况下,假设所接收的多个帧包括第一类型、第二类型及第三类型的帧。
多路复用器510均可输出第一类型、第二类型及第三类型的多个帧并向第一通道发送。在这种情况下,通过第一通道可提供与发送人员发送的质量相同的第一质量的视频流服务。
并且,多路复用器510可输出第一类型及第二类型的多个帧并向第二通道发送。在这种情况下,通过第二通道可提供比发送人员发送的视频流的质量低的第二质量的视频流服务。换言之,因第三类型的多个帧被去除,因此,帧率将会降低,由此,通过第二通道进行服务的视频流的质量将低于发送人员发送的视频流的质量。
并且,多路复用器510可输出第一类型的多个帧并向第三通道发送。在这种情况下,通过第三通道可提供仅包括第一类型的多个帧的第三质量的视频流。因第三质量的视频流仅包括第一类型的多个帧,因此,具有低于第一质量的视频流或第二质量的视频流的质量。
如上所述,服务器150在不进行转码的情况下,可通过多路复用(或多路技术),通过第一频道提供第一质量的视频流,通过第二频道提供第二质量的视频流,通过第三频道提供第三质量的视频流。在这种情况下,收看人员可通过终端访问需要质量的通道,实时收看所期待的质量的视频流。例如,当前网络状态不好的环境下的收看人员可以偏好相对低质量的通道,网络状态好的环境下的收看人员可以偏好相对高质量的通道,终端可根据收看人员的偏好(例如,根据收看人员的选择)或根据网络状态自动选择通道来接收需要质量的视频流。
图9为示出本发明一实施例中的通过调节视频流的质量来提供的环境的其他例的图。与之前说明的图6类似,图9示出了服务器150将通过N个广播发送人员终端610发送的实时视频流向M个广播接收人员终端620进行转播的实时广播服务环境的例。在这种情况下,与图6不同,在图9中,还示出了通过接收从服务器150发送的实时视频流来监控及/或检查广播内容的监控终端910。这种监控终端910可在提供实时视频流的转播服务的服务提供方运营,也可由额外的监控企业运营。
在这种情况下,因服务器150与监控终端910进行通信的网络的带宽受到局限,因此,服务器150能够向监控终端910实时提供的实时视频流的数量将会受限。例如,以网络的带宽为基准,随着实时视频流的比特率的增加,可实时提供的实时视频流的数量会减少。对此,服务器150根据利用收看人员的数量等测定的实时视频流的人气度等来筛选预设数量的多个实时视频流并向监控终端910传输,监控终端910对预设数量的多个实时视频流进行监控及/或检查。
在这种情况下,在本实施例中,利用上述说明的多路复用来控制实时视频流的质量(控制帧率)来降低比特率,由此可大幅度增加服务器150能够向监控终端910实时提供的实时视频流的数量。例如,图5的第二虚线框520示出的第一质量的实时视频流的各个图案由15个的帧(从第一个I-Frame开始到第二个I-Frame之前的B-Frame为止的15个帧)构成,第四虚线框540示出的第三质量的实时视频流的各个图案由一个帧(I-Frame)构成。在这种情况下,与第一质量的实时视频流相比,第三质量的实时视频流的帧率减少,由此比特率也将会减少。因此,在代替第一质量的实时视频流,服务器150向移动终端910传输第三质量的实时视频流的情况下,可通过相同的网络带宽实时传输的实时视频流的数量将会大幅度增加。换言之,监控终端910可实时监控及/或检查的实时视频流的数量将会大幅度增加。并且,可对相同的网络带宽增加实时视频流的数量意味着也可以逆向地减少用于监控及/或检查需要的相同数量的实时视频流的网络费用(网络资源)。
为此,在通过图7说明的步骤720后,服务器150为了增加可以向用于实时监控或检查多个视频流的监控终端(作为一例,通过图9说明的监控终端910)提供的视频流的数量(或为了减少网络费用),代替上述接收的视频流的多个帧,可向监控终端发送上述输出的预设类型的多个帧。
在其他实施例中,监控或检查不利用额外的监控终端910,也可以在服务器150通过程序处理。例如,服务器150可包括用于监控及/或检查的监控模块,可向上述监控模块输入通过多路复用调节帧率的视频流。在这种情况下,因监控模块需要检查的帧数量减少,因此,可减少用于监控及/或检查视频流的时间和费用。
如上所述,根据本发明的多个实施例,在不对提供的视频进行转码的情况下,通过对于视频的多个帧的多路复用工法来控制视频质量,由此可生成具有多种质量的多个视频。
以上说明的系统或装置可由硬件结构要素、软件结构要素或硬件结构要素及软件结构要素的组合来实现。例如,如同处理器、控制器、算术逻辑单元(ALU,arithmetic logicunit)、数字信号处理器(digital signal processor)、微型计算机、实时可编程门阵列(FPGA,field programmable gate array)、可编程逻辑单元(PLU,programmable logicunit)、微型处理器或可运行并响应指令(instruction)的任何装置,在实施例中说明的系统或装置可利用一个以上的通用计算机或特殊目的计算机实现。处理装置可执行操作系统(OS)及在上述操作系统上执行的一个以上的软件应用程序。并且,处理装置还可响应软件的执行来访问、存储、操作、处理及生成数据。为了便于理解,以使用一个处理装置的情况进行说明,只要是本技术领域的普通技术人员就可理解,处理装置可包括多个处理要素(processing element)和/或多个类型的处理要素。例如,处理装置可包括多个处理器或一个处理器及一个控制器。并且,还可包括如同并行处理器(parallel processor)的其他处理结构(processing configuration)。
软件可包括计算机程序(computer program)、代码(code)、指令(instruction)或它们中的一种以上的组合,该软件能够以按所需方式运行的方式构成处理装置,或者以独立地或共同地(collectively)命令处理装置。为了通过处理装置解析或向处理装置提供指令或数据,软件和/或数据可在任何类型的机械、结构要素(component)、物理装置、虚拟装置(virtual equipment)、计算机存储介质或装置具体化(embody)。软件可分散在通过网络联接的计算机系统上来以分散的方法存储或运行。软件及数据可存储于一个以上的计算机可读记录介质。
实施例的方法体现为可通过多种计算机单元执行的程序指令形态并记录于计算机可读介质。上述计算机可读介质可单独或组合包括程序指令、数据文件、数据结构等。记录在上述介质的程序指令可以为了实施例而特殊设计并构成,也可以是计算机软件的普通技术人员可公知使用的程序指令。作为计算机可读记录介质的例,包括硬件、软盘及如磁带的磁性介质(magnetic media)、如CD-ROM、DVD的光记录介质(optical media)、如光磁软盘(floptical disk)的磁光介质(magneto-optical media)及如只读存储器(ROM)、随机存取存储器(RAM)、闪速存储器等的为了存储并执行程序指令而特殊构成的硬件装置。这种记录介质可以为单一形态的或多个硬件结合而成的形态的多种记录单元或存储单元,而并不局限于与其他计算机系统直接联接的介质,也可以分散存在于网络。程序指令的例不仅包括通过编译器形成的机械语言代码,而且还包括使用解译器等并通过计算机执行的高级语言代码。
如上所述,通过限定的实施例和附图来对实施例进行了说明,只要是本技术领域的普通技术人员,就可通过上述记载来进行各种修改及变形。例如,即使所说明的技术以与所说明的方法不同的顺序执行,和/或所说明的系统、结构、装置、电路等的结构要素以与所说明的方法不同的形态结合或组合或者被其他结构要素或等同技术方案代替或取代也可实现适当的结果。
因此,其他实例、其他实施例及与权利要求书等同范围内的方案也属于权利要求的范围内。

Claims (14)

1.一种质量控制方法,其特征在于,包括:
接收视频流的步骤,上述视频流包括根据用于解码的参照关系被分类为多种类型的多个帧;以及
控制上述视频流的质量的步骤,通过多路复用上述视频流所包括的多个帧来输出上述多种类型中预设类型的多个帧,由此控制上述视频流的质量。
2.根据权利要求1所述的质量控制方法,其特征在于,
上述多种类型包括:第一类型,独立解码且为了其他帧的解码而被参照;第二类型,参照其他帧进行解码且为了其他帧的解码而被参照;以及第三类型,参照其他帧进行解码且不会为了其他帧的解码而被参照。
3.根据权利要求2所述的质量控制方法,其特征在于,
在控制上述视频流的质量的步骤中,
通过多路复用上述视频流所包括的多个帧,执行以下步骤:
(1)通过第一通道输出上述第一类型、上述第二类型及上述第三类型的多个帧,由此提供第一质量的视频流;
(2)通过第二通道输出上述第一类型及上述第二类型的多个帧,由此提供第二质量的视频流;
(3)通过第三通道输出上述第一类型的多个帧来提供第三质量的视频流。
4.根据权利要求2所述的质量控制方法,其特征在于,
上述第一类型的帧在没有参照其他帧的情况下被独立解码,
上述第二类型的帧参照先前编码的第一类型或第二类型的帧进行解码,
上述第三类型的帧均参照先前编码的第一类型或第二类型的帧及之后编码的第一类型或第二类型的帧进行解码。
5.根据权利要求1所述的质量控制方法,其特征在于,
接收上述视频流的步骤包括如下的步骤:接收在发送人员的终端进行编码并通过网络实时发送的上述视频流的多个帧,
上述质量控制方法还包括如下的步骤:通过收看人员的终端能够访问的通道发送所输出的上述预设类型的多个帧,由此转播质量得到控制的视频流。
6.根据权利要求5所述的质量控制方法,其特征在于,
上述质量控制方法还包括如下步骤:代替所接收的上述视频流的多个帧,向用于监控或检查上述视频流的监控终端发送所输出的上述预设类型的多个帧。
7.一种计算机程序,其特征在于,为了与计算机相结合来在计算机中运行权利要求1至6中任一项所述的方法而存储于计算机可读记录介质。
8.一种计算机可读记录介质,其特征在于,记录有用于在计算机中运行权利要求1至6中任一项所述的方法的程序。
9.一种计算机装置,其特征在于,
包括被配置为用于运行计算机可读指令的至少一个处理器,
至少一个上述处理器接收视频流,上述视频流包括根据用于解码的参照关系被分类为多种类型的多个帧,
至少一个上述处理器通过多路复用上述视频流所包括的多个帧来输出上述多种类型中预设类型的多个帧,由此控制上述视频流的质量。
10.根据权利要求9所述的计算机装置,其特征在于,
上述多种类型包括:第一类型,独立解码且为了其他帧的解码而被参照;第二类型,参照其他帧进行解码且为了其他帧的解码而被参照;以及第三类型,参照其他帧进行解码且不会为了其他帧的解码而被参照。
11.根据权利要求10所述的计算机装置,其特征在于,
至少一个上述处理器为了控制上述视频流的质量而通过多路复用上述视频流所包括的多个帧,执行以下步骤:
(1)通过第一通道输出上述第一类型、上述第二类型及上述第三类型的多个帧,由此提供第一质量的视频流;
(2)通过第二通道输出上述第一类型及上述第二类型的多个帧,由此提供第二质量的视频流;
(3)通过第三通道输出上述第一类型的多个帧,由此提供第三质量的视频流。
12.根据权利要求10所述的计算机装置,其特征在于,
上述第一类型的帧在没有参照其他帧的情况下被独立解码,
上述第二类型的帧参照先前编码的第一类型或第二类型的帧进行解码,
上述第三类型的帧均参照先前编码的第一类型或第二类型的帧及之后编码的第一类型或第二类型的帧进行解码。
13.根据权利要求10所述的计算机装置,其特征在于,
至少一个上述处理器接收在发送人员的终端进行编码并通过网络实时发送的上述视频流的多个帧,
通过收看人员的终端能够访问的通道发送所输出的上述预设类型的多个帧,由此转播质量得到控制的视频流。
14.根据权利要求13所述的计算机装置,其特征在于,
至少一个上述处理器代替所接收的上述视频流的多个帧,向用于监控或检查上述视频流的监控终端发送所输出的上述预设类型的多个帧。
CN201780094712.6A 2017-09-08 2017-09-08 控制视频质量 Pending CN111066329A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/KR2017/009859 WO2019050067A1 (ko) 2017-09-08 2017-09-08 비디오 품질 제어

Publications (1)

Publication Number Publication Date
CN111066329A true CN111066329A (zh) 2020-04-24

Family

ID=65634864

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780094712.6A Pending CN111066329A (zh) 2017-09-08 2017-09-08 控制视频质量

Country Status (4)

Country Link
US (1) US11218746B2 (zh)
JP (1) JP7037642B2 (zh)
CN (1) CN111066329A (zh)
WO (1) WO2019050067A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110575119A (zh) * 2019-09-12 2019-12-17 安翰科技(武汉)股份有限公司 基于多射频模块的胶囊内窥镜的控制方法及控制系统
JP2024502233A (ja) * 2020-12-18 2024-01-18 ファセット・インコーポレーテッド 同時多視点ビデオ・システムおよび方法
CN115190334A (zh) * 2022-06-01 2022-10-14 阿里巴巴(中国)有限公司 一种状态沟通方法、装置、控制设备及可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6728965B1 (en) * 1997-08-20 2004-04-27 Next Level Communications, Inc. Channel changer for use in a switched digital video system
CN101656888A (zh) * 2008-08-21 2010-02-24 华为技术有限公司 一种视频传输方法及装置、系统
US20130019273A1 (en) * 2011-07-11 2013-01-17 Azuki Systems, Inc. Method and system for trick play in over-the-top video delivery
CN103038783A (zh) * 2010-03-09 2013-04-10 泰景系统公司 自适应视频解码电路及其方法
CN105144727A (zh) * 2013-03-13 2015-12-09 苹果公司 用于快速切换的编解码技术
CN105357592A (zh) * 2015-10-26 2016-02-24 山东大学苏州研究院 一种流媒体自适应传输选择性丢帧方法

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06284148A (ja) * 1993-03-30 1994-10-07 Hitachi Ltd 動画通信制御方法及び通信制御装置
KR0144260B1 (ko) * 1994-11-15 1998-07-15 구자홍 피아이피 기능의 에이치디티브이
US6292834B1 (en) * 1997-03-14 2001-09-18 Microsoft Corporation Dynamic bandwidth selection for efficient transmission of multimedia streams in a computer network
US7237251B1 (en) * 1999-03-02 2007-06-26 Bigband Networks, Inc. Method and apparatus for using delay time during switching events to display previously stored information elements
US7224837B2 (en) * 2000-10-11 2007-05-29 Screenpeaks Ltd. Digital video broadcasting
US7571246B2 (en) * 2004-07-29 2009-08-04 Microsoft Corporation Media transrating over a bandwidth-limited network
DE602004028616D1 (de) * 2004-09-16 2010-09-23 Alcatel Usa Sourcing Lp Abknallendmittel mit verbesserter Latenz
KR100784761B1 (ko) 2005-11-03 2007-12-14 엘지전자 주식회사 디지털 멀티미디어 방송 스트림의 재전송을 위한트랜스코딩 방법 및 이를 수행하기 위한 이동단말
CA2647723A1 (en) 2006-03-29 2007-10-11 Vidyo, Inc. System and method for transcoding between scalable and non-scalable video codecs
EP2372922A1 (en) 2006-03-29 2011-10-05 Vidyo, Inc. System and method for transcoding between scalable and non-scalable video codecs
US8249141B1 (en) * 2007-07-13 2012-08-21 Sprint Spectrum L.P. Method and system for managing bandwidth based on intraframes
CN101610276A (zh) * 2008-06-16 2009-12-23 华为技术有限公司 数据软删除、恢复和同步方法及终端和系统
JP5139907B2 (ja) * 2008-07-25 2013-02-06 株式会社日立製作所 通信システム、光多重終端装置及び輻輳制御方法
US8151301B2 (en) * 2008-08-06 2012-04-03 Broadcom Corporation IP TV queuing time/channel change operation
AP3358A (en) * 2008-08-26 2015-07-31 Csir Scientia A method of switching from a first encoded video stream to a second encoded video stream
US8380790B2 (en) * 2008-12-15 2013-02-19 Microsoft Corporation Video conference rate matching
US8990351B2 (en) * 2011-04-20 2015-03-24 Mobitv, Inc. Real-time processing capability based quality adaptation
US9106787B1 (en) * 2011-05-09 2015-08-11 Google Inc. Apparatus and method for media transmission bandwidth control using bandwidth estimation
KR101791031B1 (ko) * 2011-07-05 2017-10-30 삼성전자 주식회사 디지털 컨텐츠 표시 장치 및 그 장치에서 채널 변경 지연 시간 중 정보 제공 방법
JP5984462B2 (ja) * 2012-04-03 2016-09-06 三菱電機株式会社 画像符号化装置
GB2539241B (en) * 2015-06-11 2019-10-23 Advanced Risc Mach Ltd Video processing system
US10349105B2 (en) * 2016-11-14 2019-07-09 Arris Enterprises Llc Channel change processing using stored content
JP7438974B2 (ja) * 2018-04-26 2024-02-27 フェニックス リアル タイム ソリューションズ, インコーポレイテッド ライブブロードキャスティングに対する適応ビットレート方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6728965B1 (en) * 1997-08-20 2004-04-27 Next Level Communications, Inc. Channel changer for use in a switched digital video system
CN101656888A (zh) * 2008-08-21 2010-02-24 华为技术有限公司 一种视频传输方法及装置、系统
CN103038783A (zh) * 2010-03-09 2013-04-10 泰景系统公司 自适应视频解码电路及其方法
US20130019273A1 (en) * 2011-07-11 2013-01-17 Azuki Systems, Inc. Method and system for trick play in over-the-top video delivery
CN105144727A (zh) * 2013-03-13 2015-12-09 苹果公司 用于快速切换的编解码技术
CN105357592A (zh) * 2015-10-26 2016-02-24 山东大学苏州研究院 一种流媒体自适应传输选择性丢帧方法

Also Published As

Publication number Publication date
JP7037642B2 (ja) 2022-03-16
JP2020537835A (ja) 2020-12-24
WO2019050067A1 (ko) 2019-03-14
US20200213635A1 (en) 2020-07-02
US11218746B2 (en) 2022-01-04

Similar Documents

Publication Publication Date Title
JP7284906B2 (ja) メディアコンテンツの配信および再生
US11120677B2 (en) Transcoding mixing and distribution system and method for a video security system
JP7273217B2 (ja) ビデオカンファレンスのビデオストリームを提供するサーバ、方法及びコンピュータプログラム
US11218746B2 (en) Method, system, and non-transitory computer readable record medium for video quality control
WO2008027850A2 (en) Dynamically configurable processing system
US9226003B2 (en) Method for transmitting video signals from an application on a server over an IP network to a client device
US10237195B1 (en) IP video playback
US20160100011A1 (en) Content processing apparatus and content processing method thereof
KR102559966B1 (ko) 복수의 채널을 이용하여 동적 비트레이트의 비디오를 송출 및 재생하는 방법 및 시스템
KR20130099515A (ko) 키 프레임을 이용하여 컨텐츠를 재생하는 단말기의 장치 및 방법
CN113259729B (zh) 数据切换的方法、服务器、系统及存储介质
KR101833942B1 (ko) 실시간 영상 합성을 위한 트랜스코더
WO2017160404A1 (en) User input based adaptive streaming
CN104038776A (zh) 视频处理装置和视频处理方法
US20190200070A1 (en) Streaming methods and systems using tuner buffers
US11743442B2 (en) Bitstream structure for immersive teleconferencing and telepresence for remote terminals
US20130287100A1 (en) Mechanism for facilitating cost-efficient and low-latency encoding of video streams
KR20240057844A (ko) 전자 장치, 서버 장치 및 그 제어 방법
US20170264662A1 (en) Method and apparatus for the transmission of the video stream with the comment data
EP4014327A1 (en) Bitstream structure for viewport-based streaming with a fallback bitstream
CN114466225A (zh) 视频数据播放方法及装置、电子设备和可读存储介质
JP2021013049A (ja) データ送信装置、データ送信システム、及び、データ送信方法
CN115334305A (zh) 视频数据传输方法、装置、电子设备和介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Tokyo

Applicant after: AI Holding Co.,Ltd.

Address before: Tokyo

Applicant before: LINE Corp.

TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20220127

Address after: Tokyo

Applicant after: LINE Corp.

Address before: Tokyo

Applicant before: AI Holding Co.,Ltd.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200424