TWI431986B - Information processing apparatus and method, and program - Google Patents

Information processing apparatus and method, and program Download PDF

Info

Publication number
TWI431986B
TWI431986B TW99117506A TW99117506A TWI431986B TW I431986 B TWI431986 B TW I431986B TW 99117506 A TW99117506 A TW 99117506A TW 99117506 A TW99117506 A TW 99117506A TW I431986 B TWI431986 B TW I431986B
Authority
TW
Taiwan
Prior art keywords
data
recording
amount
decoding
information
Prior art date
Application number
TW99117506A
Other languages
English (en)
Other versions
TW201112695A (en
Inventor
Koichi Osaki
Atsushi Onoe
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of TW201112695A publication Critical patent/TW201112695A/zh
Application granted granted Critical
Publication of TWI431986B publication Critical patent/TWI431986B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L13/00—Details of the apparatus or circuits covered by groups H04L15/00 or H04L17/00
    • H04L13/02—Details not particular to receiver or transmitter
    • H04L13/08—Intermediate storage means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/764—Media network packet handling at the destination 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L7/00—Arrangements for synchronising receiver with transmitter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)
  • Communication Control (AREA)
  • Synchronisation In Digital Transmission Systems (AREA)

Description

資訊處理裝置及方法、以及程式
本發明係有關於資訊處理裝置及方法、以及程式，尤其是有關於，即使長時間再生仍不會造成影音紊亂的可進行串流再生的資訊處理裝置及方法、以及程式。
先前係會進行來自網路的現場串流再生。此時，有可能沒有使用串流中的時間戳記來對解碼器進行資料傳輸時序控制。
然而，此時，並沒有能夠有效的使伺服器的編碼器時脈和客戶端的解碼器時脈保持同步之手段。因此，若持續長時間再生，則會因為時脈偏差，恐怕導致發生影音不同步。
本發明係為了解決此種問題而研發，目的在於，抑制串流再生時的時脈偏差，可進行更穩定的再生。
本發明之一側面的資訊處理裝置，係具備：收訊手段，係將串流再生用資料，予以接收；和保持手段，係將已被前記收訊手段所接收之前記資料，加以保持；和解碼手段，係將前記保持手段中所保持的、已被所定編碼過的前記資料，予以讀出並解碼；和判定手段，係根據前記保持手段中所保持的前記資料的時間性資料量，來判定前記解碼手段所作的解碼處理之速度是否適切；和控制手段，係基於前記判定手段所作的判定之結果，來控制前記解碼手段所作的前記解碼處理之速度。
前記判定手段係可具備：資訊取得手段，係從前記保持手段所保持的前記資料，將前記保持手段所保持之全部資料的時間性資料量之算出上所必須之資訊，當作資料量算出用資訊而加以取得；和算出手段，係使用前記資訊取得手段所取得到的前記資料量算出用資訊，來算出前記時間性資料量；和偵測手段，係藉由將前記算出手段所算出之前記時間性資料量和所定閾值進行比較，以偵測出前記解碼處理之時脈相對於已被施加至前記資料之編碼處理之時脈的偏差。
前記資訊取得手段，係可從前記保持手段所保持的前記資料當中，將最初被保持之前記資料的時間戳記、和最後被保持之前記資料的時間戳記，當作前記資料量算出用資訊而加以取得。
前記資訊取得手段，係可將前記保持手段中所保持的PID為0號之封包之數目，當作前記資料量算出用資訊而加以取得。
前記資訊取得手段，係可將前記保持手段中所保持的PCR封包之數目，當作前記資料量算出用資訊而加以取得。
前記控制手段，係可基於前記偵測手段所作的偵測結果，當前記解碼處理之時脈過快時則將前記解碼處理之時脈予以減緩，當前記解碼處理之時脈過慢時則將前記解碼處理之時脈予以加快。
前記偵測手段，係可將已被前記算出手段所算出之前記時間性資料量，和使用在前記解碼手段所作的前記資料之解碼開始時被前記保持手段所保持的前記資料的時間性資料量而被設定的前記閾值，進行比較。
前記偵測手段，係可將已被前記算出手段所算出之前記時間性資料量，和使用在前記解碼手段所作的前記資料之解碼開始時被前記保持手段所保持的前記資料的時間性資料量、和前記資料的傳輸時所產生的顫動(jitter)而被設定的前記閾值，進行比較。
前記判定手段係可更具備：附加手段，係對於前記收訊手段所接收之前記資料，毎達所定資料量就附加用來表示前記資料之收訊時刻的抵達時刻資訊；前記資訊取得手段，係可將前記保持手段所保持的前記資料所被附加之最早的前記抵達時刻資訊、和最晚的前記抵達時刻資訊，加以取得。
本發明之一側面的資訊處理方法或程式，係含有以下步驟：將串流再生用資料，予以接收；將所接收到的前記資料，予以保持；將所保持的、已被所定編碼過的前記資料，予以讀出並解碼；根據所保持的前記資料的時間性資料量，來判定解碼處理之速度是否適切；基於判定之結果，來控制前記解碼處理之速度。
於本發明之一側面中，串流再生用資料係被接收，所接收到的資料係被保持，所被保持的、已被所定編碼過的資料係被讀出而解碼，解碼處理之速度是根據所保持的資料的時間性資料量而被判定是否適切，解碼處理之速度是基於判定之結果而被控制。
若依據本發明，則可將資訊加以處理。尤其是，可抑制串流再生時的時脈偏差，可進行更穩定的再生。
圖1係適用了本發明之通訊系統的構成例之區塊圖。
圖1所示的通訊系統100，係將影像或聲音等之內容資料，在複數裝置間進行串流再生的通訊系統。通訊系統100，係具有送訊裝置101、對送訊裝置101透過網路102而連接的收訊裝置103。
送訊裝置101，係將從外部所供給之內容資料，以串流資料之方式，透過網路102而發送至收訊裝置103用的裝置。內容資料，係例如含影像或聲音等作為內容的資料。送訊裝置101係具有編碼器111及送訊部112。
編碼器111，係將所被供給的內容資料，以例如MPEG(Moving Picture Experts Group)或JPEG(Joint Photographic Experts Group)2000等這類所定之編碼方式而進行編碼壓縮，將其編碼資料，供給至送訊部112。送訊部112，係將從編碼器111所供給之編碼資料，封包化成為串流再生用資料(串流)，透過網路102而發送至收訊裝置103。
此外，送訊裝置101亦可具有其他機能。例如，送訊裝置101係亦可具有攝像機或麥克風等內容資料生成機能。又，例如，送訊裝置101係亦可具有用來記憶內容資料的記憶部，可從該記憶部讀出內容資料而供給至編碼器。
從送訊部112所發送的串流，係透過網路102而供給至收訊裝置103。網路102，係例如以網際網路或LAN(Local Area Network)為代表，是將複數設備彼此連接，可在這些設備間進行通訊所需的任意網路。該網路102，係亦可由複數網路所構成。又，網路102係可藉由有線方式來構成，也可藉由無線方式來構成，也可藉由兩者來構成。
收訊裝置103，係將透過網路102所供給之串流一邊接收一邊解碼，將內容資料予以復原而進行再生(串流再生)，輸出至監視器或揚聲器等。當然，亦可將已復原之內容資料，供給至收訊裝置103外部的其他裝置。
圖2係圖1之收訊裝置103的詳細構成例的方塊圖。
如圖2所示，收訊裝置103係具有：收訊部201、緩衝區202、解碼器203、輸出部204、及控制部211。
收訊部201係為連接網路102的通訊介面，會取得透過網路102所供給之串流，並供給至緩衝區202。緩衝區202，係由例如RAM(Random Access Memory)等之記憶媒體所構成，係將從收訊部201所供給之資料予以暫時保持。緩衝區202，係將其所保持的編碼資料之中的被解碼器203所要求的編碼資料，供給至解碼器203，或是，以相應於解碼器203之處理速度的所定時序，將所保持的編碼資料，供給至解碼器203。
解碼器203，係將從緩衝區202所取得之編碼資料予以解壓解碼，將已復原之內容資料，供給至輸出部204。輸出部204，係例如具有監視器或揚聲器，會將從解碼器203所供給之內容資料，予以輸出。例如，輸出部204係在監視器顯示影像，或由揚聲器輸出聲音等等。
控制部211，係基於從緩衝區202所保持的資料中所抽出的資訊，來控制解碼器203的動作(例如時脈)。控制部211係具有同步判定部221及時脈控制部222。
同步判定部221，係基於緩衝區202中所保持的資料，來進行關於解碼器203所進行之解碼處理之速度是否適切的判定之處理。更具體而言，同步判定部221係進行，解碼器203的時脈、和送訊裝置101的編碼器111的時脈之間，是否已取得同步之判定的相關之處理。
同步判定部221係具有資訊取得部231、算出部232、及偵測部233。資訊取得部231，係從緩衝區202所保持的資料中，抽出必要的資訊。算出部232，係使用已被資訊取得部231所取得之資訊，來算出緩衝區202中所保持之資料的時間性的資料量。
此外，所謂時間性的資料量，係並非單純的資訊量(資料大小)，而是表示相當於作為內容之再生時間的量。亦即，算出部232係算出「時間性的資料量」，來作為用來表示再生時間中有多少份量的資料被保持在緩衝區202中的值。
偵測部233，係藉由將算出部232所算出之時間性的資料量，和所定閾值進行比較，以判定解碼器203的時脈之速度是否適切。
時脈控制部222，係基於同步判定部221(偵測部233)的判定結果，而將解碼器203的時脈控制成適切的速度。
參照圖3的流程圖來說明具體的處理流程例。
一旦收訊裝置103開始串流再生的資料收訊，則控制部211係開始同步控制處理。
一旦同步控制處理被開始，則同步判定部221的資訊取得部231，係於步驟S101中，以所定之方法，解析緩衝區202內所保持的串流(資料)，將資料量之算出上所必須之資訊，當作資料量算出用資訊而加以取得。
例如，當串流是TTS(TimedTransportStream)時，則藉由比較緩衝區202中最後被保持的TTS的時間戳記、和緩衝區202中最初被保持的TTS的時間戳記，加以比較(算出差分)，就可計算出緩衝區202中所保持之串流的時間性的資料量。
因此，此情況下，資訊取得部231，係將緩衝區202中最後被保持的TTS的時間戳記、和緩衝區202中最初被保持的TTS的時間戳記，當作資料量算出用資訊而加以取得。
又，例如，對串流，作為PSI(Program Specific Information)，PAT(Program Association Table)是每隔相當於內容再生時間100msec之間隔而保證有被插入至串流的情況下，則藉由在緩衝區202內計數PID為0號之封包有幾個，就可計算出緩衝區202中所保持之串流的時間性的資料量。
PSI，係表示串流是屬於哪個節目的資訊。PMT，係用來儲存節目中所含之影像或聲音等之各PID用的資訊。PAT係將串流中所含之節目一覽，以PMT之PID一覽而加以儲存。PAT的PID係一定被決定為0號。亦即，計數著PID為0號之封包有幾個，就等於是計數著每100msec被插入的PAT的數目。
因此，此情況下，資訊取得部231，係將PID為0號之封包加以計數，將其計數結果當作資料量算出用資訊而加以取得。此外，此情況下，由於有必要參照緩衝區202中所保持的全部封包的TS標頭，因此相較於上述使用TTS時間戳記的情況，資訊取得部231的負荷係較大。
再者，例如，PCR(Program Clock Reference)是每隔相當於內容再生時間100msec之間隔而保證有被插入至串流的情況下，藉由計數PCR封包，就可計算出緩衝區202中所保持之串流的時間性的資料量。
PCR係作為時脈之基準的時刻資訊。在串流中，該PCR係每100msec就被插入。因此，根據該PCR的計數值，就可計算出緩衝區202中所保持之串流的時間性的資料量。資訊取得部231，將緩衝區202中所保持的串流的所有PAT及PMT加以解析，計數PCR封包，將其計數結果，當作資料量算出用資訊而加以取得。
此外，此情況下，由於緩衝區202內的所有PAT或PMT的解析係為必要，因此相較於上述使用TTS時間戳記的情況，或上述計數PAT之數目的情況，資訊取得部231的負荷係較大。
一旦取得資料量算出用資訊，算出部232係於步驟S102中，使用該資料量算出用資訊來算出緩衝區202中所保持之串流的時間性的資料量。
於步驟S103中，偵測部233係根據該算出結果，將解碼器203的時脈(解碼器時脈)相對於編碼器111的時脈(編碼器時脈)的「偏差」(以下稱作解碼器時脈偏差)予以偵測出來。
透過網路102而傳輸的串流的傳輸位元速率係對應於內容的再生速度，假設收訊裝置103係一面接收所被發送的串流，一面將該串流略即時性地進行再生，而進行現場串流再生。
若假設網路顫動為0，且沒有網路顫動的理想狀態下，則緩衝區202的輸出入速率是彼此大略相等。亦即，此種現場串流再生中，緩衝區202中所保持之串流的時間性的資料量，係大略一定。例如，當串流再生開始時，若假設緩衝區202中所保持之串流的時間性的資料量為m秒份的資料，則緩衝區202裡係總是保持著m秒份的資料。
因此，此情況下，偵測部233係監視著緩衝區202中所保持之串流的時間性的資料量，藉由偵測其從m開始偏差，以偵測出網路顫動或解碼器時脈偏差。
順便一提，m係可用從網路開始接收資料起至再生開始為止的時間來取近似。在如上述的沒有網路顫動的理想環境下，若收訊m秒，則應該會取得內容再生m秒份的資料。換言之，為了使內容再生m秒份的資料被保持在緩衝區202中，必須要進行m秒鐘的收訊。因此，如上述，m係可用從網路開始接收資料起至再生開始為止的時間來取近似。
假設網路顫動並非0，則由於收訊速率是隨時間而變化，因此緩衝區202中所保持之串流的時間性的資料量係會受到網路顫動之影響，而不是一定。若令此時的時間性的資料量為m’，網路顫動為最大n秒，則m’的適切值係可表示如以下式(1)。
m-n≦m’≦m+n　……(1)
偵測部233係監視著緩衝區202中所保持之串流的時間性的資料量，當m’跑到上記範圍外時，就判定有發生解碼器時脈偏差。若m’＜m-n則相對於編碼器時脈，解碼器時脈是較快；若m+n＜m’則相對於編碼器時脈，解碼器時脈是較慢。
偵測部233，係一旦如以上進行解碼器時脈偏差的偵測，則基於該偵測結果，於步驟S104中，判定解碼器時脈(相對於編碼器時脈)是否過快。當判定為解碼器時脈過快時，則處理係前進至步驟S105。於步驟S105中，時脈控制部222係接受該判定結果，控制解碼器203，將解碼器時脈控制成比目前還慢。亦即，時脈控制部222，係使解碼器203的處理速度變得比目前還慢。一旦步驟S105的處理結束，則處理係前進至步驟S108。
又，於步驟S104中，若判定為解碼器時脈沒有過快，則處理係前進至步驟S106。於步驟S106中，偵測部233係基於偵測結果，判定解碼器時脈(相對於編碼器時脈)是否過慢。當判定為解碼器時脈過慢時，則處理係前進至步驟S107。於步驟S107中，時脈控制部222係接受該判定結果，控制解碼器203，將解碼器時脈控制成比目前還快。亦即，時脈控制部222，係使解碼器203的處理速度變得比目前還快。一旦步驟S107的處理結束，則處理係前進至步驟S108。
又，於步驟S106中，若判定為解碼器時脈沒有過慢，亦即剛剛好時，則處理係前進至步驟S108。
步驟S108中，資訊取得部231，係判定串流的收訊是否結束，若判定為尚未結束時，則處理係返回至步驟S101，重複其以後的處理。又，若於步驟S108中判定串流的收訊已結束，則同步控制處理就結束。
如以上，控制部211係基於緩衝區202中所保持之串流的時間性資料量來偵測出解碼器時脈的偏差，基於該偵測結果來控制解碼器時脈的速度。亦即，控制部211係控制著解碼器203的處理速度。藉此，控制部211，係可使解碼器時脈的速度契合於編碼器時脈的速度，亦即，可使解碼器203的處理速度契合於編碼器111的處理速度，抑制時脈偏差，可抑制起因於時脈偏差的緩衝區溢位或下溢。
亦即，收訊裝置103係於現場串流再生時，即使不使用串流之時間戳記進行資料往解碼器203之投入時序控制，或無法進行時，仍可進行穩定的串流再生，使得即使長時間再生也不會發生影音不同步。
此外，實際上m也存在有顫動，且計算m時的精度，也會隨著其計算方法而不同。因此，如上述的時脈偏差偵測的閾值，係配合該系統、裝置、及方法等之環境來適宜設定，較為理想。
於以上雖然說明了利用串流內存在的資料而算出緩衝區202中所保持之串流的時間性資料量，但該串流的時間性資料量之算出，亦可以其他的方法來算出。
例如，亦可利用串流的抵達時刻(收訊時刻)。
圖4係此時的收訊裝置103的詳細構成例的方塊圖。和圖2相同之構成係標示同一符號。
於圖4中，收訊裝置103係基本上具有和圖2之控制部211相同的構成，但是取代了控制部211而改為具有控制部311。控制部311係基本上具有和控制部211相同的構成，但是取代了控制部211的同步判定部221而具有同步判定部321，然後還具有抵達時刻資訊附加部323。
抵達時刻資訊附加部323，係對收訊部201所接收的串流，以每所定之資料單位(例如TCP封包)，將表示抵達時刻的抵達時刻資訊，予以附加。該抵達時刻資訊，係只要是能表示時刻的資訊則無論哪種資料均可，例如是使用收訊裝置103本身的系統時脈來生成之。收訊部201，係將附加有抵達時刻資訊的串流，供給至緩衝區202而保持之。
同步判定部321係和同步判定部221同樣地，具有資訊取得部331、算出部332、及偵測部333。
資訊取得部331，係將緩衝區202中所保持之串流上所被附加的，最初之抵達時刻資訊、和最後之抵達時刻資訊，當作資料量算出用資訊而加以取得。
算出部332，係藉由求取這些抵達時刻資訊的差分，而算出緩衝區202中所保持之串流的時間性資料量。偵測部333，係藉由將該算出結果和所定閾值進行比較，以偵測出解碼器時脈的偏差。
參照圖5的流程圖來說明此時的同步控制處理之流程的例子。該同步控制處理，係對應於參照圖3之流程圖所說明過的同步控制處理。
一旦開始串流再生、開始同步控制處理，則抵達時刻資訊附加部323係於步驟S201中，監視著被收訊部201所接收的串流，判定是否已經接收了預定之所定量的串流。當判定為已接收所定量之串流時，則抵達時刻資訊附加部323係將處理前進至步驟S202，將抵達時刻資訊附加至收訊資料。一旦被附加了抵達時刻資訊，則處理係前進至步驟S203。又，於步驟S201中，當判定為尚未接收所定量之串流時，則步驟S202的處理係被省略，處理係前進至步驟S203。
於步驟S203中，資訊取得部331，係將緩衝區202最後被保持的串流上所被附加的抵達時刻資訊，和緩衝區202最初被保持的串流上所被附加的抵達時刻資訊，當作資料量算出用資訊而加以取得。於步驟S204中，算出部332係藉由求出將資訊取得部331所取得之抵達時刻資訊的差分，以算出緩衝區202中所保持之資料的時間性的資料量。
於步驟S205中，偵測部333係基於該算出結果，而偵測出解碼器時脈的偏差。
如上述，當假設網路顫動為最大n秒時，假設從現場串流收訊開始m秒後開始再生，則緩衝區202中所保持之串流的時間性的資料量m’係為m’＜m-n、或是m+n＜m’時，就偵測出解碼器時脈偏差。
此處，令從串流的抵達時刻所算出的時間性的資料量為m”。藉由採用m’＜m-n、或m+n＜m’總是成立的m”與m和n的關係，收訊裝置103係藉由監視著m”，就可偵測出解碼器時脈偏差。
m”和m’，若考慮網路顫動，則會呈現以下式(2)所示的關係。
m”-n≦m’≦m”+n　…(2)
為了使m’＜m-n總是成立，m’為最大時也必須要成立。因此從式(2)導出m”+n＜m-n必須要成立。亦即，m”＜m-2n必須要成立。
又，為了使m+n＜m’總是成立，m’為最小時也必須要成立。因此從式(2)導出m+n＜m”-n必須要成立。亦即，m+2n＜m”必須要成立。
由以上可知，當m”＜m-2n成立時，解碼器時脈係為稍快，當m+2n＜m”，解碼器時脈係為稍慢。偵測部333，係如此偵測出解碼器時脈偏差。
時脈控制部222，係當解碼器時脈稍快時則將解碼器時脈減慢，當解碼器時脈稍慢時則將解碼器時脈加快。亦即，步驟S206乃至步驟S210的各處理，係和圖3的步驟S104乃至步驟S108的各處理同樣地執行。
亦即，當解碼器時脈過快時，時脈控制部222係將解碼器時脈控制成比目前還慢。亦即，時脈控制部222，係使解碼器203的處理速度變得比目前還慢。反之，當解碼器時脈過慢時，時脈控制部222係將解碼器時脈控制成比目前還快。亦即，時脈控制部222，係使解碼器203的處理速度變得比目前還快。
如以上，控制部311係基於緩衝區202中所保持之串流的時間性資料量來偵測出解碼器時脈的偏差，基於該偵測結果來控制解碼器時脈的速度，藉此，可使解碼器時脈的速度契合於編碼器時脈的速度，抑制時脈偏差，可抑制起因於時脈偏差的緩衝區溢位或下溢。
亦即，收訊裝置103係於現場串流再生時，即使不使用串流之時間戳記進行資料往解碼器203之投入時序控制，或無法進行時，仍可進行穩定的串流再生，使得即使長時間再生也不會發生影音不同步。
此外，實際上m也存在有顫動，且計算m時的精度，也會隨著其計算方法而不同。因此，如上述的時脈偏差偵測的閾值，係配合該系統、裝置、及方法等之環境來適宜設定，較為理想。
於以上雖然說明了藉由控制解碼器203的時脈之速度，來控制解碼器203的解碼處理之速度，但當然亦可使用時脈以外來控制解碼處理之速度。
上述一連串處理，係可藉由硬體來執行，也可藉由軟體來執行。此時，例如，亦可被構成為如圖6所示的個人電腦。
於圖6中，個人電腦400的CPU(Central Processing Unit)401，係依照ROM(Read Only Memory)402中所記憶之程式，或從記憶部413載入至RAM403中的程式，來執行各種處理。RAM403中，還適宜地記憶著CPU401在執行各種處理時所必需的資料等。
CPU401、ROM402、及RAM403，係透過匯流排404而彼此連接。該匯流排404，係還連接著輸出入介面410。
輸出入介面410上，係連接著由鍵盤、滑鼠等所成之輸入部411、由CRT(Cathode Ray Tube)或LCD(Liquid Crystal Display)等所成之顯示器、以及揚聲器等所成之輸出部412、由硬碟等所構成之記憶部413、由數據機等所構成之通訊部414。通訊部414，係進行透過包含網際網路之網路的通訊處理。
輸出入介面410上係還因應需要而連接驅動機415；可適宜裝著磁碟、光碟、光磁碟、或者半導體記憶體的可移除式媒體421，從其中所讀出之電腦程式，是可依照需要而被安裝至記憶部413中。
在以軟體來執行上述一連串之處理時，構成該軟體的程式，係可從網路或記錄媒體來安裝。
該記錄媒體，例如，係如圖6所示，係不僅限於和裝置本體分開之用來配送程式給使用者而發佈的記錄有程式之磁碟(包含軟碟片)、光碟(包含CD-ROM(Compact Disc-Read Only Memory)、DVD(Digital Versatile Disc))、光磁碟(包含MD(Mini-Disc))，或甚至是半導體記憶體等所成之可移除式媒體421而構成者，尚還包括已經預先組裝在裝置本體內之狀態而配送給使用者的，包含記錄有程式之ROM402、或記憶部413中所含之硬碟等所構成。
此外，於本說明書中，記錄媒體中所被記錄之程式加以描述的步驟，可為依照記載順序而在時間序列上依序進行者，但並非一定要為時間序列上的處理，亦包含平行或是個別執行之處理。
又，於本說明書中，所謂系統，係表示由複數裝置(device)所構成的裝置全體。
此外，於以上說明中，亦可將以1個裝置來說明的構成加以分割，成為複數裝置而構成。反之，於以上說明中，亦可將以複數裝置來說明的構成集合成1個裝置而構成。又，各裝置的構成當然亦可附加上述說明以外之構成。甚至，只要系統全體的構成或動作在實質上是相同，則某裝置之構成的一部分亦可被包含在其他裝置之構成中。亦即，本發明的實施形態係不限定於上述實施形態，在不脫離本發明主旨的範圍內可做各種變更。
100‧‧‧通訊系統
101‧‧‧送訊裝置
102‧‧‧網路
103‧‧‧收訊裝置
111‧‧‧編碼器
112‧‧‧送訊部
201‧‧‧收訊部
202‧‧‧緩衝區
203‧‧‧解碼器
204‧‧‧輸出部
211‧‧‧控制部
221‧‧‧同步判定部
222‧‧‧時脈控制部
231‧‧‧資訊取得部
232‧‧‧算出部
233‧‧‧偵測部
311‧‧‧控制部
321‧‧‧同步判定部
323‧‧‧抵達時刻資訊附加部
331‧‧‧資訊取得部
332‧‧‧算出部
333‧‧‧偵測部
[圖1]適用了本發明之通訊系統的主要構成例之圖示。
[圖2]收訊裝置的詳細構成例的區塊圖。
[圖3]說明同步控制處理之流程的流程圖。
[圖4]收訊裝置之其他構成例的方塊圖。
[圖5]說明同步控制處理之其他流程的流程圖。
[圖6]適用了本發明之個人電腦的構成例之區塊圖。

Claims (10)

  1. 一種資訊處理裝置，其特徵為，具備：收訊手段，係將串流再生用的資料，予以接收；和保持手段，係將已被前記收訊手段所接收之前記資料，加以保持；和解碼手段，係將前記保持手段中所保持的、已被所定編碼過的前記資料，予以讀出並解碼；和判定手段，係根據前記保持手段中所保持的前記資料的時間性資料量，來判定前記解碼手段所作的解碼處理之速度是否適切；和控制手段，係基於前記判定手段所作的判定之結果，來控制前記解碼手段所作的前記解碼處理之速度；前記時間性資料量，係表示前記保持手段中所保持的所有資料的相當於再生時間的量，是藉由計數特定種類之封包而算出。
  2. 如申請專利範圍第1項所記載之資訊處理裝置，其中，前記判定手段係具備：資訊取得手段，係從前記保持手段所保持的前記資料，將前記保持手段所保持之全部資料的時間性資料量之算出上所必須之資訊，當作資料量算出用資訊而加以取得；和算出手段，係使用前記資訊取得手段所取得到的前記資料量算出用資訊，來算出前記時間性資料量；和 偵測手段，係藉由將前記算出手段所算出之前記時間性資料量和所定閾值進行比較，以偵測出前記解碼處理之時脈相對於已被施加至前記資料之編碼處理之時脈的偏差。
  3. 如申請專利範圍第2項所記載之資訊處理裝置，其中，前記資訊取得手段，係將前記保持手段中所保持的PID為0號之封包之數目，當作前記資料量算出用資訊而加以取得。
  4. 如申請專利範圍第2項所記載之資訊處理裝置，其中，前記資訊取得手段，係將前記保持手段中所保持的PCR封包之數目，當作前記資料量算出用資訊而加以取得。
  5. 如申請專利範圍第2項所記載之資訊處理裝置，其中，前記控制手段，係基於前記偵測手段所作的偵測結果，當前記解碼處理之時脈過快時則將前記解碼處理之時脈予以減緩，當前記解碼處理之時脈過慢時則將前記解碼處理之時脈予以加快。
  6. 如申請專利範圍第2項所記載之資訊處理裝置，其中，前記偵測手段，係將已被前記算出手段所算出之前記時間性資料量，和使用在前記解碼手段所作的前記資料之解碼開始時被前記保持手段所保持的前記資料的時間性資 料量而被設定的前記閾值，進行比較。
  7. 如申請專利範圍第2項所記載之資訊處理裝置，其中，前記偵測手段，係將已被前記算出手段所算出之前記時間性資料量，和使用在前記解碼手段所作的前記資料之解碼開始時被前記保持手段所保持的前記資料的時間性資料量、和前記資料的傳輸時所產生的顫動(jitter)而被設定的前記閾值，進行比較。
  8. 如申請專利範圍第2項所記載之資訊處理裝置，其中，前記判定手段係更具備：附加手段，係對於前記收訊手段所接收之前記資料，毎達所定資料量就附加用來表示前記資料之收訊時刻的抵達時刻資訊；前記資訊取得手段，係將前記保持手段所保持的前記資料所被附加之最早的前記抵達時刻資訊、和最晚的前記抵達時刻資訊，加以取得。
  9. 一種資訊處理方法，係屬於具備：收訊手段，係將串流再生用資料，予以接收；和保持手段，係將已被前記收訊手段所接收之前記資料，加以保持；和解碼手段，係將前記保持手段中所保持的、已被所定編碼過的前記資料，予以讀出並解碼；和 進行判定之判定手段；和進行控制之控制手段之資訊處理裝置的資訊處理方法，其特徵為，含有以下步驟：由前記判定手段，根據前記保持手段中所保持的前記資料的時間性資料量，來判定前記解碼手段所作的解碼處理之速度是否適切；由前記控制手段，基於前記判定手段所作的判定之結果，來控制前記解碼手段所作的前記解碼處理之速度；前記時間性資料量，係表示前記保持手段中所保持的所有資料的相當於再生時間的量，是藉由計數特定種類之封包而算出。
  10. 一種資訊處理程式，其特徵為，令電腦執行含有以下步驟之處理：將串流再生用資料，予以接收；將所接收到的前記資料，予以保持在保持手段中；將所保持的、已被所定編碼過的前記資料，予以讀出並解碼；根據所保持的前記資料的時間性資料量，來判定解碼處理之速度是否適切；基於判定之結果，來控制前記解碼處理之速度；前記時間性資料量，係表示前記保持手段中所保持的所有資料的相當於再生時間的量，是藉由計數特定種類之封包而算出。
TW99117506A 2009-06-10 2010-06-01 Information processing apparatus and method, and program TWI431986B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009138794A JP5440839B2 (ja) 2009-06-10 2009-06-10 情報処理装置および方法、並びにプログラム

Publications (2)

Publication Number Publication Date
TW201112695A TW201112695A (en) 2011-04-01
TWI431986B true TWI431986B (zh) 2014-03-21

Family

ID=43308805

Family Applications (1)

Application Number Title Priority Date Filing Date
TW99117506A TWI431986B (zh) 2009-06-10 2010-06-01 Information processing apparatus and method, and program

Country Status (7)

Country Link
US (1) US8848803B2 (zh)
EP (1) EP2442505A4 (zh)
JP (1) JP5440839B2 (zh)
KR (1) KR20120036788A (zh)
CN (1) CN102160390A (zh)
TW (1) TWI431986B (zh)
WO (1) WO2010143550A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5156879B1 (ja) * 2011-08-25 2013-03-06 パナソニック株式会社 情報提示制御装置及び情報提示制御方法
JP2014075736A (ja) * 2012-10-05 2014-04-24 Sony Corp サーバ装置および情報処理方法
US8880929B2 (en) * 2012-11-19 2014-11-04 Blackfire Research Corporation Indirect clock measuring and media adjustment
CN104754724B (zh) * 2013-12-30 2018-12-04 上海诺基亚贝尔股份有限公司 一种在无线接入网中实现时钟同步的方法、装置和设备
KR101678388B1 (ko) * 2014-02-06 2016-12-06 엔트릭스 주식회사 레이턴시를 고려한 영상 처리 방법, 이를 수행하는 장치 및 클라우드 스트리밍 서비스 시스템

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5717697A (en) * 1990-06-27 1998-02-10 Texas Instruments Incorporated Test circuits and methods for integrated circuit having memory and non-memory circuits by accumulating bits of a particular logic state
JP2002165148A (ja) * 2000-11-29 2002-06-07 Sony Corp データ処理装置および方法、並びに記録媒体
JP3980010B2 (ja) * 2004-04-01 2007-09-19 三菱電機株式会社 ストリーム伝送装置
JP3881992B2 (ja) * 2004-07-30 2007-02-14 シャープ株式会社 受信装置、受信プログラム、および受信プログラムを記録した記録媒体
JP3893392B2 (ja) * 2004-07-30 2007-03-14 シャープ株式会社 受信処理装置、受信装置、制御プログラム、および制御プログラムを記録した記録媒体
WO2007004611A1 (ja) * 2005-07-06 2007-01-11 Sharp Kabushiki Kaisha 出力回路、制御プログラム製品および制御方法
US7783773B2 (en) * 2006-07-24 2010-08-24 Microsoft Corporation Glitch-free media streaming
US20080031279A1 (en) * 2006-08-03 2008-02-07 Takeshi Hatakeyama Network chip and network transmission/reception device
US9769092B2 (en) * 2010-01-18 2017-09-19 Marvell International Ltd. Packet buffer comprising a data section and a data description section

Also Published As

Publication number Publication date
JP2010287973A (ja) 2010-12-24
JP5440839B2 (ja) 2014-03-12
CN102160390A (zh) 2011-08-17
KR20120036788A (ko) 2012-04-18
US8848803B2 (en) 2014-09-30
TW201112695A (en) 2011-04-01
US20110129018A1 (en) 2011-06-02
WO2010143550A1 (ja) 2010-12-16
EP2442505A4 (en) 2013-09-18
EP2442505A1 (en) 2012-04-18

Similar Documents

Publication Publication Date Title
KR101510822B1 (ko) 적응적 트릭 플레이 스트리밍
US10177899B2 (en) Adapting a jitter buffer
TWI431986B (zh) Information processing apparatus and method, and program
JP4983923B2 (ja) デコーダ装置、およびデコード方法
WO2000067414A2 (en) A method and apparatus for providing continuous playback of audio and audio-visual streamed multimedia having non-deterministic delays
TW201019649A (en) Network system, adjusting method of data transmission rate and computer program procut thereof
KR20070028360A (ko) 기록 전송 방법
JP2007511948A (ja) トリックプレイ信号の再生
JP2005322995A (ja) リアルタイム映像転送におけるバッファ制御方法、送信端末、受信端末、映像配信システム、およびプログラム
US8483289B2 (en) Method and system for fast channel change
JP2005286749A (ja) 映像復号化装置およびそれを用いた映像伝送システム
JP2007104569A (ja) データ受信装置
CN107087210B (zh) 基于缓存时间判断视频播放状态的方法及终端
JP6711120B2 (ja) 映像再生装置、映像再生方法および映像再生プログラム
US20090210588A1 (en) Output Circuit, Control Program Product, and Control Method
US7274863B2 (en) Data stream processing device and method and program storage medium
JP5218995B2 (ja) 動画再生端末，動画再生方法及びプログラム
CN103475906A (zh) 用于多媒体流的测量方法和测量装置
JP6146471B2 (ja) 符号化装置、符号化方法、および符号化プログラム
JP4373283B2 (ja) 映像音声復号方法、映像音声復号装置、映像音声復号プログラム及びそのプログラムを記録したコンピュータ読み取り可能な記録媒体
US8520788B2 (en) Receiving device, receiving method and program
JP2006332967A (ja) データ伝送装置
JPH1022960A (ja) メディア符号化装置
JP2006332966A (ja) データ伝送装置
JP2005341248A (ja) ネットワーク型映像送信装置、ネットワーク型映像受信装置

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees