RU2011121768A - Способ и устройство управления воспроизведением видео- и аудиоданных - Google Patents

Способ и устройство управления воспроизведением видео- и аудиоданных Download PDF

Info

Publication number
RU2011121768A
RU2011121768A RU2011121768/07A RU2011121768A RU2011121768A RU 2011121768 A RU2011121768 A RU 2011121768A RU 2011121768/07 A RU2011121768/07 A RU 2011121768/07A RU 2011121768 A RU2011121768 A RU 2011121768A RU 2011121768 A RU2011121768 A RU 2011121768A
Authority
RU
Russia
Prior art keywords
video
audio data
buffer
duration
total
Prior art date
Application number
RU2011121768/07A
Other languages
English (en)
Other versions
RU2507707C2 (ru
Inventor
Синьлян ВАН
Original Assignee
Тенсент Текнолоджи (Шэньчжэнь) Компани Лимитед
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Тенсент Текнолоджи (Шэньчжэнь) Компани Лимитед filed Critical Тенсент Текнолоджи (Шэньчжэнь) Компани Лимитед
Publication of RU2011121768A publication Critical patent/RU2011121768A/ru
Application granted granted Critical
Publication of RU2507707C2 publication Critical patent/RU2507707C2/ru

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/04—Time compression or expansion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H04L47/24—Traffic characterised by specific attributes, e.g. priority or QoS
    • H04L47/2416—Real-time traffic
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H04L47/30—Flow control; Congestion control in combination with information about buffer occupancy at either end or at transit nodes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209—Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H04L47/22—Traffic shaping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H04L47/28—Flow control; Congestion control in relation to timing considerations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4392—Processing of audio elementary streams involving audio buffer management

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Quality & Reliability (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

1. Способ управления воспроизведением видео- и аудиоданных, включающий этапы:получают полную продолжительность воспроизведения видео- и аудиоданных из буфера;вычисляют разность по времени, являющуюся разностью между текущим моментом времени и моментом приема последних видео- и аудиоданных и выполняют растягивание временной области для видео- и аудиоданных в буфере, если полная продолжительность и разность по времени соответствуют заданному условию, и воспроизводят обработанные видео- и аудиоданные.2. Способ по п.1, отличающийся тем, что выполнение растягивания временной области для видео- и аудиоданных в буфере, если полная продолжительность и разность по времени соответствуют заданному условию, включает:если определено, что разность по времени больше или равна полной продолжительности воспроизведения видео- и аудиоданных из буфера, либо полная продолжительность воспроизведения видео- и аудиоданных из буфера, меньше или равна заданной минимальной продолжительности для буфера, то выполняют растягивание временной области для видео- и аудиоданных в буфере.3. Способ по п.2, после определения того, что разность по времени больше или равна полной продолжительности воспроизведения видео- и аудиоданных из буфера, либо того, что полная продолжительность воспроизведения видео- и аудиоданных из буфера, меньше или равна заданной минимальной продолжительности для буфера, и перед выполнением растягивания временной области для видео- и аудиоданных в буфере, также включает этапы:определяют, меньше ли суммарная задержка видео- и аудиоданных, чем заданная максимальная суммарная задержка;выполняют растягивание времен

Claims (12)

1. Способ управления воспроизведением видео- и аудиоданных, включающий этапы:
получают полную продолжительность воспроизведения видео- и аудиоданных из буфера;
вычисляют разность по времени, являющуюся разностью между текущим моментом времени и моментом приема последних видео- и аудиоданных и выполняют растягивание временной области для видео- и аудиоданных в буфере, если полная продолжительность и разность по времени соответствуют заданному условию, и воспроизводят обработанные видео- и аудиоданные.
2. Способ по п.1, отличающийся тем, что выполнение растягивания временной области для видео- и аудиоданных в буфере, если полная продолжительность и разность по времени соответствуют заданному условию, включает:
если определено, что разность по времени больше или равна полной продолжительности воспроизведения видео- и аудиоданных из буфера, либо полная продолжительность воспроизведения видео- и аудиоданных из буфера, меньше или равна заданной минимальной продолжительности для буфера, то выполняют растягивание временной области для видео- и аудиоданных в буфере.
3. Способ по п.2, после определения того, что разность по времени больше или равна полной продолжительности воспроизведения видео- и аудиоданных из буфера, либо того, что полная продолжительность воспроизведения видео- и аудиоданных из буфера, меньше или равна заданной минимальной продолжительности для буфера, и перед выполнением растягивания временной области для видео- и аудиоданных в буфере, также включает этапы:
определяют, меньше ли суммарная задержка видео- и аудиоданных, чем заданная максимальная суммарная задержка;
выполняют растягивание временной области для видео- и аудиоданных в буфере, если суммарная задержка видео- и аудиоданных меньше заданной максимальной суммарной задержки.
4. Способ по п.2, дополненный следующим этапом:
выполняют сжатие временной области для видео- и аудиоданных в буфере, если определено, что разность по времени меньше полной продолжительности воспроизведения видео- и аудиоданных, из буфера, либо полная продолжительность воспроизведения видео- и аудиоданных, из буфера превышает заданную максимальную продолжительность для буфера.
5. Способ по п.3, дополненный следующим этапом:
выполняют сжатие временной области для видео- и аудиоданных в буфере, если определено, что разность по времени меньше полной продолжительности воспроизведения видео- и аудиоданных из буфера, либо полная продолжительность воспроизведения видео- и аудиоданных из буфера превышает заданную максимальную продолжительность для буфера.
6. Способ по п.5, дополненный следующим этапом:
выполняют сжатие временной области для видео- и аудиоданных в буфере, если определено, что суммарная задержка видео- и аудиоданных превышает заданную максимальную суммарную задержку.
7. Устройство управления воспроизведением видео- и аудиоданных, содержащее:
блок получения, сконфигурированный для получения полной продолжительности воспроизведения видео- и аудиоданных из буфера;
вычислительный блок, сконфигурированный для вычисления разности по времени, являющейся разностью между текущим моментом времени и моментом приема последнего пакета видео- и аудиоданных; и
блок обработки, сконфигурированный для выполнения растягивания временной области для видео- и аудиоданных в буфере, если полная продолжительность и разность по времени соответствуют заданному условию, и воспроизведения обработанных видео- и аудиоданных.
8. Устройство по п.7, отличающееся тем, что в состав блока обработки входят:
модуль определения буфера, сконфигурированный для определения того, больше или равна разность по времени полной продолжительности воспроизведения видео- и аудиоданных из буфера, либо меньше или равна полная продолжительность воспроизведения видео- и аудиоданных из буфера заданной минимальной продолжительности для буфера;
модуль растягивания, сконфигурированный для выполнения растягивания временной области для видео- и аудиоданных в буфере при выявлении модулем определения буфера того, больше или равна разность по времени полной продолжительности воспроизведения видео- и аудиоданных из буфера, либо того, меньше или равна полная продолжительность воспроизведения видео- и аудиоданных из буфера заданной минимальной продолжительности для буфера, а также для воспроизведения видео- и аудиоданных после растягивания временной области.
9. Устройство по п.8, отличающееся тем, что модуль растягивания дополнительно сконфигурирован для определения того, меньше ли суммарная задержка видео- и аудиоданных заданной максимальной суммарной задержки; если суммарная задержка видео- и аудиоданных меньше заданной максимальной суммарной задержки, то этот модуль выполняет растягивание временной области для видео- и аудиоданных в буфере.
10. Устройство по п.8, отличающееся тем, что в состав блока обработки также входят:
модуль определения сжатия, сконфигурированный для определения того, меньше ли разность по времени полной продолжительности воспроизведения видео- и аудиоданных из буфера, либо больше ли полная продолжительность воспроизведения видео- и аудиоданных из буфера заданной максимальной продолжительности для буфера;
модуль сжатия, сконфигурированный для выполнения сжатия временной области для видео- и аудиоданных в буфере при обнаружении модулем определения сжатия того, что разность по времени меньше полной продолжительности воспроизведения видео- и аудиоданных из буфера, либо того, что полная продолжительность воспроизведения видео- и аудиоданных из буфера превышает заданную максимальную продолжительность для буфера, а также для воспроизведения видео- и аудиоданных после сжатия временной области.
11. Устройство по п.9, отличающееся тем, что в состав блока обработки также входят:
модуль определения сжатия, сконфигурированный для определения того, меньше ли разность по времени полной продолжительности воспроизведения видео- и аудиоданных из буфера, либо превышает ли полная продолжительность воспроизведения видео- и аудиоданных из буфера заданную максимальную продолжительность для буфера; и
модуль сжатия, сконфигурированный для выполнения сжатия временной области для видео- и аудиоданных в буфере при обнаружении модулем определения сжатия того, что разность по времени меньше полной продолжительности воспроизведения видео- и аудиоданных из буфера, либо того, что полная продолжительность воспроизведения видео- и аудиоданных из буфера превышает заданную максимальную продолжительность для буфера, а также для воспроизведения видео- и аудиоданных после сжатия временной области.
12. Устройство по п.11, отличающееся тем, что:
модуль определения сжатия также сконфигурирован для определения того, превышает ли суммарная задержка видео- и аудиоданных заданную максимальную суммарную задержку;
модуль сжатия также сконфигурирован для выполнения сжатия временной области для видео- и аудиоданных в буфере, при обнаружении модулем определения сжатия того, что суммарная задержка видео- и аудиоданных превышает заданную максимальную суммарную задержку.
RU2011121768/07A 2009-02-18 2010-02-10 Способ и устройство управления воспроизведением видео- и аудиоданных RU2507707C2 (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CNA2009100773403A CN101500117A (zh) 2009-02-18 2009-02-18 一种视音频数据播放的控制方法及装置
CN200910077340.3 2009-02-18
PCT/CN2010/070614 WO2010094234A1 (zh) 2009-02-18 2010-02-10 一种视音频数据播放的控制方法及装置

Publications (2)

Publication Number Publication Date
RU2011121768A true RU2011121768A (ru) 2013-03-27
RU2507707C2 RU2507707C2 (ru) 2014-02-20

Family

ID=40946967

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2011121768/07A RU2507707C2 (ru) 2009-02-18 2010-02-10 Способ и устройство управления воспроизведением видео- и аудиоданных

Country Status (7)

Country Link
US (1) US8594184B2 (ru)
CN (1) CN101500117A (ru)
BR (1) BRPI1006010B1 (ru)
CA (1) CA2742858C (ru)
MX (1) MX2011005782A (ru)
RU (1) RU2507707C2 (ru)
WO (1) WO2010094234A1 (ru)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101500117A (zh) 2009-02-18 2009-08-05 腾讯科技（深圳）有限公司 一种视音频数据播放的控制方法及装置
CN102456376B (zh) * 2010-11-03 2014-11-12 深圳英飞拓科技股份有限公司 一种用于监控设备的即录即放方法
CN103873382A (zh) * 2012-12-17 2014-06-18 马维尔国际有限公司 数据帧缓冲方法和设备
US9338480B2 (en) * 2013-03-01 2016-05-10 Disney Enterprises, Inc. Systems and methods to compensate for the effects of transmission delay
KR20150026069A (ko) * 2013-08-30 2015-03-11 삼성전자주식회사 컨텐츠 재생 방법 및 그 방법을 처리하는 전자 장치
CN103795950B (zh) * 2014-02-21 2017-07-28 深圳创维－Rgb电子有限公司 电视音频信号处理装置
WO2016050747A1 (en) 2014-09-30 2016-04-07 British Telecommunications Public Limited Company Managing streamed communication
CN104333795A (zh) * 2014-11-04 2015-02-04 北京佳讯飞鸿电气股份有限公司 一种不依赖时间戳的实时视频码流播放速度控制方法
CN104703036B (zh) * 2015-02-13 2018-12-11 广东欧珀移动通信有限公司 一种同步媒体文件播放进度的方法、装置及系统
CN105681883B (zh) * 2016-01-07 2019-05-31 深圳Tcl数字技术有限公司 音频数据推送方法及系统
CN108495177B (zh) * 2018-03-30 2021-07-13 北京世纪好未来教育科技有限公司 一种音频变速处理方法及装置
US11277461B2 (en) * 2019-12-18 2022-03-15 The Nielsen Company (Us), Llc Methods and apparatus to monitor streaming media
CN112511886B (zh) * 2020-11-25 2023-03-21 杭州当虹科技股份有限公司 一种基于音频伸缩的音视频同步播放方法
CN116233472B (zh) * 2023-05-08 2023-07-18 湖南马栏山视频先进技术研究院有限公司 一种音频视频同步的方法和云端处理系统

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10285558A (ja) * 1997-04-03 1998-10-23 Sony Corp 記録再生装置および映像情報の変速再生方法
GB2328099B (en) * 1997-08-08 2002-07-03 British Broadcasting Corp Processing coded video
EP1143671B1 (en) * 2000-04-07 2004-07-21 NTT DoCoMo, Inc. Device and method for reducing delay jitter in data transmission
US6980594B2 (en) * 2001-09-11 2005-12-27 Emc Corporation Generation of MPEG slow motion playout
WO2004008673A2 (en) * 2002-07-16 2004-01-22 Nokia Corporation Method for enabling packet transfer delay compensation in multimedia streaming
US6965726B2 (en) * 2003-02-19 2005-11-15 Thomson Licensing Sa. Slow video display trick mode
KR100546640B1 (ko) * 2003-03-11 2006-01-26 엘지전자 주식회사 디지털 비디오 기록 재생 시스템 및 트릭 재생 방법
JP4118232B2 (ja) * 2003-12-19 2008-07-16 三菱電機株式会社 映像データ処理方法および映像データ処理装置
US8903196B2 (en) * 2005-10-05 2014-12-02 Texas Instruments Incorporated Video presentation at fractional speed factor using time domain interpolation
WO2007072244A1 (en) * 2005-12-23 2007-06-28 Koninklijke Philips Electronics N.V. A device for and a method of processing a data stream comprising a plurality of frames
CN101064838A (zh) * 2006-04-27 2007-10-31 上海乐金广电电子有限公司 数字卫星广播接收器及其信息处理方法
CN101123571A (zh) * 2006-08-07 2008-02-13 北京三星通信技术研究有限公司 基于自适应抖动缓冲的调度策略的调整方法
CN101119323A (zh) * 2007-09-21 2008-02-06 腾讯科技（深圳）有限公司 解决网络抖动的方法及装置
CN101500117A (zh) * 2009-02-18 2009-08-05 腾讯科技（深圳）有限公司 一种视音频数据播放的控制方法及装置

Also Published As

Publication number Publication date
BRPI1006010B1 (pt) 2021-07-27
RU2507707C2 (ru) 2014-02-20
CN101500117A (zh) 2009-08-05
BRPI1006010A8 (pt) 2016-10-04
MX2011005782A (es) 2011-06-30
CA2742858A1 (en) 2010-08-26
US20110205427A1 (en) 2011-08-25
BRPI1006010A2 (pt) 2016-04-05
WO2010094234A1 (zh) 2010-08-26
CA2742858C (en) 2014-12-23
US8594184B2 (en) 2013-11-26

Similar Documents

Publication Publication Date Title
RU2011121768A (ru) Способ и устройство управления воспроизведением видео- и аудиоданных
US10311880B2 (en) System for perceived enhancement and restoration of compressed audio signals
CN109285554B (zh) 一种回声消除方法、服务器、终端及系统
RU2012109205A (ru) Способ и устройство для динамической регулировки громкости
JP2015180972A5 (ja) 受信器において実行される方法、受信器、およびフレーム消去隠蔽を実行するための装置
CN105872576A (zh) 一种视频播放方法和装置
JP2014206761A5 (ja) 受信器において実行される方法、受信器、およびフレーム消去隠蔽を実行するための装置
JP2007180669A5 (ru)
RU2011147112A (ru) Верификация и синхронизация файлов, полученных отдельно от видеоконтента
CN106658226B (zh) 一种播放方法及装置
RU2012107859A (ru) Способ и устройство для воспроизведения видеоизображений с измененной скоростью
RU2010134940A (ru) Устройство обработки изображений, способ обработки изображений и программа
BR112016015695B1 (pt) Sistema, mídia e método para tratamento de sinais de áudio comprimidos
JP2007295038A5 (ru)
EP1781063A3 (en) Method and apparatus for reproducing music file
JP2015212928A5 (ru)
JP2006340102A5 (ru)
RU2010109395A (ru) Устройство воспроизведения контента и способ воспроизведения контента
WO2010091555A1 (zh) 一种立体声编码方法和装置
RU2017143129A (ru) Способ захвата речевого ввода от пользователя, система и машиночитаемые запоминающие носители
RU2014144440A (ru) Устройство обработки цифровых изображений и способ управления им
US8817993B2 (en) Audio device with volume adjusting function and volume adjusting method
TW201423733A (zh) 音頻處理系統與音頻處理方法
CN109587542B (zh) 音视频数据同步设备、方法、数据处理设备、介质
RU2007135871A (ru) Устройство предоставления источника звука и способ предоставления источника звука