RU2011106330A - Способ и устройство для обработки видео- и аудиоданных, принимаемых в системе декодирования - Google Patents
Способ и устройство для обработки видео- и аудиоданных, принимаемых в системе декодирования Download PDFInfo
- Publication number
- RU2011106330A RU2011106330A RU2011106330/07A RU2011106330A RU2011106330A RU 2011106330 A RU2011106330 A RU 2011106330A RU 2011106330/07 A RU2011106330/07 A RU 2011106330/07A RU 2011106330 A RU2011106330 A RU 2011106330A RU 2011106330 A RU2011106330 A RU 2011106330A
- Authority
- RU
- Russia
- Prior art keywords
- pts
- playback mode
- audio data
- video
- stc
- Prior art date
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4341—Demultiplexing of audio and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2368—Multiplexing of audio and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
- H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Television Systems (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
1. Способ обработки видео- и аудиоданных, принимаемых в системе декодирования, содержащий этапы, на которых: ! восстанавливают системный таймер (STC) с использованием временной метки представления (PTS) видео- или аудиоданных или результата линейной комбинации PTS видеоданных и PTS аудиоданных, когда временная отметка программ (PCR) является недоступной в системе; ! сравнивают STC с PTS текущих захваченных видео- и аудиоданных; и ! определяют режим для обработки текущих захваченных видео- и аудиоданных согласно результату сравнения. ! 2. Способ по п.1, в котором после определения режима для обработки текущих захваченных видео- и аудиоданных способ содержит этапы, на которых: ! отслеживают разность между PTS видеоданных и PTS аудиоданных; и ! сравнивают абсолютное значение разности с заданным пороговым значением, и принимают асинхронный режим воспроизведения в качестве системного режима воспроизведения, когда абсолютное значение превышает или равно пороговому значению; принимают синхронный режим воспроизведения в качестве системного режима воспроизведения, когда абсолютное значение меньше порогового значения. ! 3. Способ по п.2, в котором восстановление STC с использованием результата линейной комбинации PTS видеоданных и PTS аудио содержит этап, на котором: ! вычисляют значение результата линейной комбинации согласно формуле, и восстанавливают STC с использованием значения результата линейной комбинации, при этом формула для вычисления результата PTS' линейной комбинации PTS видеоданных и PTS аудиоданных следующая: ! PTS'=γ·vPTS+(1-γ)·aPTS, ! где vPTS - PTS видеоданных, aPTS - PTS аудиоданных и γ - линейный коэффициент, имеющий диапазон значений [
Claims (10)
1. Способ обработки видео- и аудиоданных, принимаемых в системе декодирования, содержащий этапы, на которых:
восстанавливают системный таймер (STC) с использованием временной метки представления (PTS) видео- или аудиоданных или результата линейной комбинации PTS видеоданных и PTS аудиоданных, когда временная отметка программ (PCR) является недоступной в системе;
сравнивают STC с PTS текущих захваченных видео- и аудиоданных; и
определяют режим для обработки текущих захваченных видео- и аудиоданных согласно результату сравнения.
2. Способ по п.1, в котором после определения режима для обработки текущих захваченных видео- и аудиоданных способ содержит этапы, на которых:
отслеживают разность между PTS видеоданных и PTS аудиоданных; и
сравнивают абсолютное значение разности с заданным пороговым значением, и принимают асинхронный режим воспроизведения в качестве системного режима воспроизведения, когда абсолютное значение превышает или равно пороговому значению; принимают синхронный режим воспроизведения в качестве системного режима воспроизведения, когда абсолютное значение меньше порогового значения.
3. Способ по п.2, в котором восстановление STC с использованием результата линейной комбинации PTS видеоданных и PTS аудио содержит этап, на котором:
вычисляют значение результата линейной комбинации согласно формуле, и восстанавливают STC с использованием значения результата линейной комбинации, при этом формула для вычисления результата PTS' линейной комбинации PTS видеоданных и PTS аудиоданных следующая:
PTS'=γ·vPTS+(1-γ)·aPTS,
где vPTS - PTS видеоданных, aPTS - PTS аудиоданных и γ - линейный коэффициент, имеющий диапазон значений [0,1].
4. Способ по п.2, в котором после принятия синхронного режима воспроизведения в качестве системного режима воспроизведения, способ дополнительно содержит этап, на котором корректируют STC с использованием PTS видео- или аудиоданных или результата линейной комбинации PTS видеоданных и PTS аудиоданных.
5. Способ по п.2, дополнительно содержащий этапы, на которых:
после принятия асинхронного режима воспроизведения в качестве системного режима воспроизведения, переключают систему на синхронный режим воспроизведения, когда отслеживают, что абсолютное значение разности меньше порогового значения и заданное время достигнуто; поддерживают систему в текущем асинхронном режиме воспроизведения, когда отслеживают, что абсолютное значение разности превышает или равно пороговому значению и заданное время не достигнуто; или
после принятия синхронного режима воспроизведения в качестве системного режима воспроизведения, переключают систему на асинхронный режим воспроизведения, когда отслеживают, что абсолютное значение разности превышает пороговое значение и заданное время достигнуто; поддерживают систему в текущем синхронном режиме воспроизведения, когда отслеживают, что абсолютное значение разности меньше или равно пороговому значению и заданное время не достигнуто.
6. Способ по п.2, в котором формула для вычисления порогового значения следующая:
пороговое значение=α·[(1-γ)·vC/vR+γ·aC/aR]·T,
где α - коэффициент допуска, имеющий диапазон значений [0,1], γ - линейный коэффициент, имеющий диапазон значений [0,1], vC - размер буфера видеопотока, vR - скорость передачи битов видеопотока; aC - размер буфера аудиопотока; aR - скорость передачи битов аудиопотока; и T - постоянное значение, являющееся тактом каждой миллисекунды PTS.
7. Устройство обработки видео- и аудиоданных, принимаемых в системе декодирования, содержащее модуль восстановления системного таймера (STC) и модуль обработки данных, в котором:
модуль STC-восстановления выполнен с возможностью восстанавливать STC с использованием временной метки представления (PTS) видео- или аудиоданных или результата линейной комбинации PTS видеоданных и PTS аудиоданных, когда временная отметка программ (PCR) является недоступной в системе; и
модуль обработки данных выполнен с возможностью сравнивать STC, полученный модулем STC-восстановления, с PTS текущих захваченных видео- и аудиоданных, и определять режим для обработки текущих захваченных видео- и аудиоданных согласно результату сравнения.
8. Устройство по п.7, в котором модуль обработки данных содержит:
субмодуль сравнения, выполненный с возможностью сравнивать STC, полученный модулем STC-восстановления, с PTS текущих захваченных видео- и аудиоданных; и
субмодуль выполнения обработки данных, выполненный с возможностью, согласно результату сравнения субмодуля сравнения, отбрасывать данные, когда STC превышает PTS текущих захваченных видео- или аудиоданных; буферизовать данные, когда STC меньше PTS текущих захваченных видео- или аудиоданных; и определять данные, которые должны воспроизводиться, когда STC равен PTS текущих захваченных видео- или аудиоданных.
9. Устройство по п.7 или 8, дополнительно содержащее модуль мониторинга и модуль определения режима воспроизведения, в котором:
модуль мониторинга выполнен с возможностью отслеживать разность между PTS видеоданных и PTS аудиоданных в данных, которые должны воспроизводиться после того, как определяется режим для обработки текущих захваченных видео- и аудиоданных; и
модуль определения режима воспроизведения выполнен с возможностью сравнивать абсолютное значение разности, отслеживаемой модулем мониторинга, с заданным пороговым значением, и принимать асинхронный режим воспроизведения в качестве системного режима воспроизведения, когда абсолютное значение превышает или равно пороговому значению; принимать синхронный режим воспроизведения в качестве системного режима воспроизведения, когда абсолютное значение меньше порогового значения.
10. Устройство по п.9, дополнительно содержащее:
модуль переключения режимов, выполненный с возможностью переключать системный режим воспроизведения на синхронный режим воспроизведения после того, как модуль определения режима воспроизведения определяет принять асинхронный режим воспроизведения в качестве системного режима воспроизведения, и когда модуль мониторинга отслеживает, что абсолютное значение разности меньше порогового значения, и заданное время достигнуто; поддерживать систему в текущем режиме воспроизведения после того, как модуль определения режима воспроизведения определяет принять асинхронный режим воспроизведения в качестве системного режима воспроизведения, и когда модуль мониторинга отслеживает, что абсолютное значение разности превышает или равно пороговому значению и заданное время не достигнуто; или
второй модуль переключения режимов, выполненный с возможностью переключать систему на асинхронный режим воспроизведения после того, как модуль определения режима воспроизведения определяет принять синхронный режим воспроизведения в качестве системного режима воспроизведения, и когда модуль мониторинга отслеживает, что абсолютное значение разности превышает пороговое значение и заданное время достигнуто; поддерживать систему в текущем режиме воспроизведения после того, как модуль определения режима воспроизведения определяет принять синхронный режим воспроизведения в качестве системного режима воспроизведения, и когда модуль мониторинга отслеживает, что абсолютное значение разности меньше или равно пороговому значению и заданное время не достигнуто.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN200810118095.1 | 2008-07-11 | ||
| CN2008101180951A CN101340591B (zh) | 2008-08-11 | 2008-08-11 | 解码系统中接收视音频数据的处理方法及装置 |
| PCT/CN2009/073017 WO2010017742A1 (zh) | 2008-08-11 | 2009-07-31 | 解码系统中接收视音频数据的处理方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| RU2011106330A true RU2011106330A (ru) | 2012-09-20 |
| RU2483470C2 RU2483470C2 (ru) | 2013-05-27 |
Family
ID=40214522
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2011106330/07A RU2483470C2 (ru) | 2008-08-11 | 2009-07-31 | Способ и устройство для обработки видео- и аудиоданных, принимаемых в системе декодирования |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US8582947B2 (ru) |
| EP (1) | EP2306736B1 (ru) |
| CN (1) | CN101340591B (ru) |
| BR (1) | BRPI0917945B1 (ru) |
| RU (1) | RU2483470C2 (ru) |
| WO (1) | WO2010017742A1 (ru) |
Families Citing this family (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101340591B (zh) * | 2008-08-11 | 2011-04-06 | 华为终端有限公司 | 解码系统中接收视音频数据的处理方法及装置 |
| US8767840B2 (en) * | 2009-02-11 | 2014-07-01 | Taiwan Semiconductor Manufacturing Company, Ltd. | Method for detecting errors and recovering video data |
| KR20110037590A (ko) * | 2009-10-07 | 2011-04-13 | 삼성전자주식회사 | Ｐ２ｐ 네트워크 시스템 및 그 데이터 송수신 방법 |
| CN102761724B (zh) * | 2011-12-16 | 2017-11-10 | 新奥特（北京）视频技术有限公司 | 一种视音频处理的方法 |
| CN103747316B (zh) * | 2013-12-23 | 2018-04-06 | 乐视致新电子科技（天津）有限公司 | 一种音视频同步方法和电子设备 |
| CN104780422B (zh) * | 2014-01-13 | 2018-02-16 | 北京兆维电子(集团)有限责任公司 | 流媒体播放方法及流媒体播放器 |
| EP2945393A4 (en) * | 2014-01-20 | 2016-06-22 | Panasonic Ip Man Co Ltd | DEVICE AND METHOD FOR REPRODUCING DATA |
| CN104954727B (zh) * | 2014-03-25 | 2018-08-07 | 南宁富桂精密工业有限公司 | 音视频同步控制设备及方法 |
| CN106658065B (zh) * | 2015-10-30 | 2021-10-22 | 中兴通讯股份有限公司 | 音视频同步方法、装置及系统 |
| CN106375824B (zh) * | 2016-10-08 | 2018-05-18 | 广东欧珀移动通信有限公司 | 一种时钟调节方法、装置、终端及多媒体同步播放系统 |
| CN112887772A (zh) * | 2017-03-14 | 2021-06-01 | 上海兆芯集成电路有限公司 | 影音串流的音频同步方法 |
| CN109729404B (zh) * | 2019-01-15 | 2021-06-04 | 晶晨半导体(上海)股份有限公司 | 一种基于嵌入式的播放器的同步调制方法 |
| CN110753202B (zh) * | 2019-10-30 | 2021-11-30 | 广州河东科技有限公司 | 可视对讲系统的音视频同步方法、装置、设备及存储介质 |
| US11627468B2 (en) * | 2020-02-03 | 2023-04-11 | Dell Products L.P. | Connecting securely to a wireless display from BIOS |
| CN112153443B (zh) * | 2020-09-01 | 2022-02-22 | 青岛海信传媒网络技术有限公司 | Pts获取方法和显示设备 |
Family Cites Families (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5771075A (en) * | 1994-12-08 | 1998-06-23 | Lg Electronics Inc. | Audio/video synchronizer |
| KR0152916B1 (ko) * | 1995-04-11 | 1998-10-15 | 문정환 | 데이타 동기화장치 및 방법 |
| JPH10262208A (ja) * | 1997-03-19 | 1998-09-29 | Sony Corp | 同期ずれ制御装置及び方法 |
| CA2313979C (en) * | 1999-07-21 | 2012-06-12 | Thomson Licensing Sa | Synchronizing apparatus for a compressed audio/video signal receiver |
| JP4380930B2 (ja) * | 2001-03-19 | 2009-12-09 | 株式会社東芝 | オーディオ・ビデオ復号再生装置とその同期再生方法 |
| US6931071B2 (en) * | 2001-08-31 | 2005-08-16 | Stmicroelectronics, Inc. | Apparatus and method for synchronizing video and audio MPEG streams in a video playback device |
| CN1436001A (zh) | 2002-01-28 | 2003-08-13 | 北京华诺信息技术有限公司 | 解码系统中实现视频与音频同步的方法 |
| US6907316B2 (en) * | 2002-06-20 | 2005-06-14 | Graphic Management Associates, Inc. | Insert machine |
| CN100536555C (zh) * | 2003-03-19 | 2009-09-02 | 松下电器产业株式会社 | 数据处理装置 |
| RU2377669C2 (ru) * | 2004-02-10 | 2009-12-27 | ЭлДжи ЭЛЕКТРОНИКС ИНК. | Носитель записи, имеющий структуру данных для управления различными данными, и способ и устройство записи и воспроизведения |
| KR100716973B1 (ko) * | 2004-02-21 | 2007-05-10 | 삼성전자주식회사 | Ａｖ 데이터에 동기된 텍스트 서브 타이틀 데이터를기록한 정보저장매체, 재생방법 및 장치 |
| EP1758288A4 (en) * | 2004-05-28 | 2008-04-16 | Matsushita Electric Ind Co Ltd | TRANSPORT CURRENT PROCESSING DEVICE AND TRANSPORT CURRENT PROCESSING METHOD |
| KR100619034B1 (ko) | 2004-06-19 | 2006-08-31 | 삼성전자주식회사 | 디지털 멀티미디어 데이터 수신기에서 송수신 데이터 동기방법 및 장치 |
| JP4380598B2 (ja) * | 2005-06-16 | 2009-12-09 | 株式会社日立製作所 | 受信装置及び受信方法 |
| US7643513B2 (en) * | 2005-11-30 | 2010-01-05 | Broadcom Corporation | Method and system for audio and video transport |
| CN101047842A (zh) * | 2006-03-27 | 2007-10-03 | 中兴通讯股份有限公司 | 无线二进制运行环境手机播放流媒体音视频的方法 |
| KR101246916B1 (ko) * | 2006-04-21 | 2013-03-25 | 삼성전자주식회사 | 오디오/비디오 동기 보정 방법 및 장치 |
| JP4762052B2 (ja) * | 2006-05-31 | 2011-08-31 | パナソニック株式会社 | ストリームデータ処理装置及びストリームデータ処理方法 |
| CN101340591B (zh) | 2008-08-11 | 2011-04-06 | 华为终端有限公司 | 解码系统中接收视音频数据的处理方法及装置 |
-
2008
- 2008-08-11 CN CN2008101180951A patent/CN101340591B/zh not_active Expired - Fee Related
-
2009
- 2009-07-31 WO PCT/CN2009/073017 patent/WO2010017742A1/zh active Application Filing
- 2009-07-31 BR BRPI0917945-3A patent/BRPI0917945B1/pt active IP Right Grant
- 2009-07-31 RU RU2011106330/07A patent/RU2483470C2/ru active
- 2009-07-31 EP EP09806345.6A patent/EP2306736B1/en active Active
-
2011
- 2011-01-13 US US13/006,187 patent/US8582947B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| BRPI0917945A2 (pt) | 2015-11-17 |
| EP2306736A4 (en) | 2011-09-28 |
| CN101340591B (zh) | 2011-04-06 |
| CN101340591A (zh) | 2009-01-07 |
| EP2306736B1 (en) | 2015-05-27 |
| US8582947B2 (en) | 2013-11-12 |
| WO2010017742A1 (zh) | 2010-02-18 |
| BRPI0917945B1 (pt) | 2019-04-30 |
| RU2483470C2 (ru) | 2013-05-27 |
| EP2306736A1 (en) | 2011-04-06 |
| US20110110651A1 (en) | 2011-05-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2011106330A (ru) | Способ и устройство для обработки видео- и аудиоданных, принимаемых в системе декодирования | |
| US6078725A (en) | Apparatus for a synchronized playback of audio-video signals | |
| CN108243350B (zh) | 一种音视频同步处理的方法和装置 | |
| TW200643823A (en) | Method and algorithm for detection of scene cuts or similar images in video images | |
| US20070140398A1 (en) | Data receiving device and data receiving method | |
| JP4983923B2 (ja) | デコーダ装置、およびデコード方法 | |
| JP5059301B2 (ja) | 同期再生装置および同期再生方法 | |
| WO2004098177A8 (en) | Equipment and method for detecting commrcial automately | |
| US20070280301A1 (en) | Stream data processing apparatus and stream data processing method | |
| US8359413B2 (en) | Data stream buffer control using reference time and decoding time | |
| US8848803B2 (en) | Information processing device and method, and program | |
| JP2007288269A (ja) | 映像受信再生装置 | |
| KR100864009B1 (ko) | 오디오／비디오 동기화 방법 | |
| KR101007806B1 (ko) | 재생 장치, 재생 시스템, 재생 방법 및 기록 매체 | |
| JP2002290384A (ja) | デジタル放送番組送出システムの現用・予備切替装置 | |
| US20030226093A1 (en) | Data decoder and method of decoding data | |
| JP4199555B2 (ja) | フリーズ障害検知装置及び検知方法 | |
| JP2007081534A (ja) | 復号再生装置 | |
| JP2004128870A (ja) | 映像復号出力装置 | |
| JP2011119971A5 (ru) | ||
| JP4212920B2 (ja) | オーディオ・ビデオ同期制御方法及び装置 | |
| JP2007295421A (ja) | データ受信装置およびデータ受信方法 | |
| JP2006229484A (ja) | 画像処理方法およびその装置 | |
| JP2012109655A (ja) | メディア受信装置 | |
| JP3705231B2 (ja) | トランスポートストリーム・スプライサー |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PD4A | Correction of name of patent owner | ||
| PC41 | Official registration of the transfer of exclusive right |
Effective date: 20190219 |