TWI309121B - Method and device for quality feedback in streaming services - Google Patents

Method and device for quality feedback in streaming services Download PDF

Info

Publication number
TWI309121B
TWI309121B TW094114476A TW94114476A TWI309121B TW I309121 B TWI309121 B TW I309121B TW 094114476 A TW094114476 A TW 094114476A TW 94114476 A TW94114476 A TW 94114476A TW I309121 B TWI309121 B TW I309121B
Authority
TW
Taiwan
Prior art keywords
time
quality
data stream
media
metric
Prior art date
Application number
TW094114476A
Other languages
English (en)
Other versions
TW200623774A (en
Inventor
Wang Ye-Kui
Curcio Igor
Aksu Emre
Hannuksela Miska
Original Assignee
Nokia Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nokia Corp filed Critical Nokia Corp
Publication of TW200623774A publication Critical patent/TW200623774A/zh
Application granted granted Critical
Publication of TWI309121B publication Critical patent/TWI309121B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
    • H04L41/508—Network service management, e.g. ensuring proper service fulfilment according to agreements based on type of value added network service under agreement
    • H04L41/509—Network service management, e.g. ensuring proper service fulfilment according to agreements based on type of value added network service under agreement wherein the managed service relates to media content delivery, e.g. audio, video or TV
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/06—Generation of reports
    • H04L43/065—Generation of reports related to network devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0852—Delays
    • H04L43/087—Jitter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/10—Active monitoring, e.g. heartbeat, ping or trace-route
    • H04L43/106—Active monitoring, e.g. heartbeat, ping or trace-route using time related information in packets, e.g. by adding timestamps
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/50—Testing arrangements
    • H04L43/55—Testing of service level quality, e.g. simulating service usage
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23406—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving management of server-side video buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6377—Control signals issued by the client directed to the server or network components directed to server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/64322—IP
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6581—Reference data, e.g. a movie identifier for ordering a movie or a product identifier in a home shopping application
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Quality & Reliability (AREA)
  • Environmental & Geological Engineering (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Cardiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

1309121 ., ---- ^年^月f日修正替換買 第94114476號專利申請案 _ ..」 ' 補充、修正後無劃線之說明書修正頁一式三份 九、發明說明： 【發明所屬之技術領域】 本發明係關於一種在資料流服務中實行優質回饋之 方法，電腦程式，電腦程式產品，系統，客戶端，伺服 器及協定，其中係將至少一種優質媒體資料流導流至客 戶端以供回播。 【先前技術】 鲁 資料流一方面係指應用在客戶端中處理回播連續之 諸如語音，聲頻，視頻資料流等同步化媒體資料流之能 力’而該資料流係通過數據網路被傳輸至客戶端。另一 方面，資料流亦指諸如會談應用等實時低延時之應用。 可建立在資料流服務上之應用可被分成應需求及現 場資訊傳送應用等。第一種類型之例子係應需求之音樂 及新聞應用。第二種類型之例子則有如廣播及電視節目 之現場傳送。實時低延時應用之例子係多在IP上之媒體 、 （4見頻）電話或聲音及任何類型之會談式多媒體應用。 鲁 在固定互聯網協定(IP)網路上之資料流已經成為目 別的一種主流應用。同時互聯網工程工作小組(IETF)及 全球資訊網協會(W3C)已研發出一組用在固定IP資料流 服務之協定，未有設定完整之標準化資料流構架◊根據 由第三代合夥專案(3GPP)所研發之第三代(3G)行動通訊 系统’ 3G封包轉換資料流服務(PSS，3GPPTS 26.233，
Ts 26.234)填補了 3G多媒體傳訊服務(MMS)之間之空 隙’諸如下載應用及多媒體内容，及會談式&資料流服 1309121
* , ----——一—-.V 第94114476號專利申請案 ?碎/〇月^日修正替換頁 . 補充、修正後無劃線之說明書修正頁一式三份 I -- 務。 PSS可提供行動資料流應用，其中終端機之複雜度 比會談式服務所需者更低，原因在於不需要媒體輸入裝 置及編碼器，同時因為可使用較低複雜度之協定。pss 包括^料流控制協定，傳輸協定，媒體編碼解碼器及場 景說明協定之其本级。 第1圖示意控制資料流性及非資料流性内容在内容 ’或媒體伺服器及客戶端之間傳輸之PSS協定疊列1。 • 諸如視頻，聲頻及語音等資料流式内容101係首先 被轉換成在調適層103中之實時傳輸協定(RTp)1〇2之有 效载量格式。由IETF所設定，該RTP可利用用戶之下 之資料報(UDP) 104之服務以提供傳送實時或資料流數 據之裝置，而該UDP則係採用IP之下之協定W5之服 務。 諸如非由資料流目的而產生之多媒體内容(例如錄 在終端機裝置中之MMS短片）之即時多媒體内容之非資 - 料流式内容’靜止圖像，位元映像及矢量圖像’文 鲁字’定時文字及合成聲頻等係由採用運輸控制協定 (TCP)108及其他IP105之服務之超文字傳輸協定 (HTTP) 107 所傳輸。 至於非資料流式内容106 ’如果有需求資料流式内 容101 ’進階會談設定及控制協定時’諸如啟動，停止 及暫停資料流視頻通過RTP/UDP/IP從内容伺服器傳輸 至客戶端之資料流視頻時，HTTP107之内建會談設定及 1309121 _ • * ί — ' ~ 一 第94114476號專利申請案 月户曰修正替換頁 • 補充、修正後無劃線之說明書修正頁一式三份 --- 控制性能已足以傳輸該内容。此項工作係由實時資料流 協疋(RTSP)l〇9所實加，可採用TCP108之下或UDP104 之下。RTSP需要至少设立資料流會談之展示說明。 該展示說明110可存在於會談說明協定（SDp)檔案之形 式。該SDP槽案含有會談之說明，例如會談名稱及作 者，所展示媒體之類型，接收該媒體之資訊，諸如位址， k 埠口’格式等，及媒體之位元速率。 如果係在諸如行動終端機等客戶端查看資料流内 谷，該終端機之用戶首先係設有通用資源識別器（UR!) 以指定適合其終端機之内容。此URI可形成www伺服 器，無線應用協定(WAP)伺服器，或可通過終端機之鍵 盤以手動方式輸入。此URI可指定資料流或RTSp伺服 器及内容位址於該或另一個内容伺服器。如今該回應 SDP檔案可以數種方式取得。可提供於用戶通過諸如内 設標記而下載之HTML網頁内之鏈結，亦可作為URI 鍵入而直接取得。SDP檔案，即展示說明11〇係通過第 鲁 1圖之協定疊列之中間列所示之HTTP107予以傳輸。另 ’ 一方面，亦可通過諸如第1圖之協定疊列之右列所示之 RTSP109之”說明”方法等之RTSpi〇9信號發送而取得。 展示說明同樣亦可由該RTP1〇2予以傳輸。然而，為了 簡化展示’此項可能性並未包括於第1圖中。 緊接之會談達成係行動終端機之瀏覽者或用戶請求 資料流客戶端設立相對於内容伺服器之會談之程序。終 端機被預期具有在會談達成信號發送開始時提供IP為 1309121 私年々月夕日修正替換頁 第941M476號專利申請案 補充、修正後無劃線之說明書修正頁一式三份 基準之封包傳輸之有效無線電載送器。 緊接之貿料流服務之設定係由為客戶端所選擇之各 個媒體資料流傳送RTSP設立訊息而完成。此舉可將 UDP104及/或TCP108埠口供相對媒體資料流所用。客 戶端傳送一 RTSP播放訊息予内容伺服器，然後開始在 IP網路上傳送一或多個資料流。 為了提供在PSS系統裝置中之服務提供者評估終端 用戶之資料流經驗，在PSS系統中已引入資料流服務品 Φ 質度量如 3GPP 技術文獻(Tdoc)S4-〇4〇〇73 :，，Rel-6 PSS 品質度量永久性文獻V.0.11”所揭述，參考2〇〇4年二月 23-27日於西班牙馬拉加市所舉行之3〇ρρ TSG-SA4會 議#30。資料流客戶端將度量及回饋實際資料流應用之品 質（經驗品質QoE)之資訊予資料流伺服器，其中該品質 係以該品質度量所定義。該資料流伺服器係諸如RTSp 伺服器，而該品質度量係諸如使用該RTSP& SDp所傳 輸者 ‘ 由於該服務對RAN及CN類型者係呈透明化，僅有 籲資料流客戶端及資料流伺服器係受PSS品質度量所影 響。其中一項後果係該測量不可依靠在RTp層下之協定 層之資訊(例如 UDP ’ ip，pdcp，SNDCP，LLC，RLC， mac，實體層）。 在PSS糸統中具有品質回饋之終端機係用以實行根 據測量定義之品質測量，將它們聚集於資料流客戶端品 質度量及將度量回報予資料流伺服器。此項需求包括資 1309121 第94114476號專利申請案 補充、修正後無劃線之說明書修正頁一式三份 料流客户端將資料流飼服器所處理之原始品質測量回報 成為品質度量之可能性。 貝料流伺服H铜以提供回報及收集資料流客戶端 2質度1之資料流客戶端之品質度量之啟動之信號。 貝；'’机伺服€可處理所接收之資料流客戶端之品質度量 2立聚集之品質度量’例如可接收原始損失封包報告 Ιΐίϊ定資料流客戶端之最低，最高，平均及標準封 以下四種品質度量係由Tdoe S4_04⑼73 訛誤時段 ，〜软. 訛誤時㈣從帛-轉訊減帛 ::表= 為rr之時段 再緩衝時段 因任何非自發性事件=之 初始緩衝時間 間：二第;rtp封包直至回播開始之時 在連續中目亦可為分數值。 連續中損失之内容封包之數目。 上这ασ貝度篁疋義之目的在錄得在内容類型，終 1309121 第94】14476號專利申請案 涿年/^月，日修正替换頁 • 補充、修正後無劃線之說明'^修正頁一式三份 ----一_、_ 端機，及無線存取網路(RAN)之類型等之固定測量a 其限制係使將要傳送至資料關服器之品質度量回 報之大小及終端機之複雜度成為最小。 實際品質度量回饋可利用RTSP之設定參數方法連 同第2圖所示之回饋標頭2(參照ietf之要求發表意見 (RFC)文件2327)予以傳送至PSS伺服器，然而:在^際 場合下，使用其他方法以記載資訊將更為有效，例: 丁EARDOWN信息或”暫停'，信息。 • 在第2圖之回饋標頭2中，資料流_url係RTSp會 談或回饋參數之URL識別器之控制用媒體控制。在參數 足義中之度罝欄含有度:E /測量（例如轨誤時段等）之名 稱。數值欄顯示結果。有可能在監視期間相同事件發生 超過一次。於該場合該度量值可發生超過一次，顯^事 件數目予伺服器。選擇性之範圍攔顯示回報時段。 在第2圖之回饋標頭2中之選擇性之時間‘記欄顯 示事件（或測量)發生時之時間或在會談開始時所計算之 1 度量。 鲁 由Tdoc S4-040073所定義之四種品質度量僅提供用 戶經歷之多媒體資料流之回播品質之近似特徵。舉你j而 言，如果有兩種資料流會談具有由TdOC S4-040072所定 義之四種品質度量之相同數值，而且如果在第一種會古炎 中存在有聲頻與視頻數據之間之完美同步，而在該第1 會談中’聲頻與視頻之間之該同步已經損失，根據古亥 Tdoc S4-040073所定義之四種品質度量所作之回報品^
S 10 1309121 第94Π4476號專利申請索 補充、修正後無劃線之說明修正頁一式三份 係相同’而回播之實際經歷品質則相常不同。此外，由 „_3所定義之四種品質度量無法區別在該多 媒體貝料流中所含之不同訊_型，於是，對回播之經 歷品質極為重要之訊框類型之損失將無法與回報時 訊框之次要類型之損失區別。 v 【發明内容】 . 有鑑於上述問題，本發明之目的係提供一種在資料 流服務中之優質回饋之方法，電腦程式，電腦程式產品， • 系統，客戶端，伺服器及協定。 本發明提供一種在資料流服務中之品質回饋之方 法，其中至少有一媒體負料流係被導流至客戶端以供回 播，該方法之步驟包括根據品質度量之預設組中之至少 一種品質度量中測定品質回饋值，其中該品質度量之預 設組具有相關於該至少一種媒體資料流之至少一種回播 之品質度量，及包含於該至少一種媒體資料流中之至少 兩種讯框之其中之一之lib誤，及將該品質回饋值回報予 ^ 伺服器。 該至少一種媒體資料流係例如一種具有視頻，聲頻 或語音資訊之連續媒體資料流，係從諸如内容伺服器等 之祠服器連續傳輸至該客戶端’並在終端機上予以回 播，其中該客戶端係在同步方式下設立。另一方面，該 至少一種媒體h料流係實低延時應用之媒體資料流， 例如多媒體(視頻）電話資料流或在IP上之聲音之媒體資 料流或在對話式多媒體應用中之任何類型之女某體i才斗 1309121 _
* I 第94114476號專利申請案 ：科/。月戶日修正替換頁 補充、修正後無劃線之說明書修正頁一式三份 - 流。此種資料流可在一資料流會談中實行，其中數種媒 體資料流可同時被導流至該客戶端。該資料流可根據一 協定，例如實時運輸協定RTP，及可由另一協定予以控 制，例如作為實時資料流協定RTSP或會談啟始協定SIP 之資料流協定等，並可供啟始，終止及/或暫停資料流。 該RTSP或SIP可由在該客戶端及該伺服器中之協定實 體所操作，並可以會談說明協定SDP為基準。該伺服器 * 可與該媒體實際起源之内容伺服器共存甚或相同，亦可 • 為不同者。 該資料流之品質係根據來自該品質度量之預設組之 至少一種品質度量而在客戶端位址予以決定，並回報作 為一品質回饋值，例如通過該資料流所依據之協定或控 制資料流之該協定。該品質度量基本上係定義如何計算 該品質回饋值。該品質度量之預設組可由該控制資料流 之協定予以設定，而該至少一種品質度量可在設立會談 期間或之後在該客戶端與該伺服器之間商議。 - 該品質回饋值係通過諸如資料流所依據之協定或通 ® 過控制資料流之協定而回報予該伺服器。如果控制該資 料流之該協定係RTCP或SIP，最好該回報品質回饋值 係由諸如呼叫狀態控制功能CSCF等網路實體之實體所 擷取或發覺，藉以作成品質測量。 根據本發明，為了取得優質回饋，該品質度量之預 設組具有與該至少一媒體資料流之回播相關之品質度 量，及/或與在該至少一種媒體資料流中所含之兩種訊框 12 1309121 第94114476號專利申請案 日修正替換頁 補充、修正後無劃線之說明書修正頁一式三份 ------ 之其中至少一種之訛誤相關之品質度量。與該至少一種 媒體資料紅賴相關之品質度量係與該回播之實際回 播訊框速率與預設值之偏差相關，或與實際回播時間與 預期回播時間之間之差異相關，或與聲誠語音訊框之 回播與相對應之視頻訊框之間之同步化損失相關。與在 該至少-種媒體資料流中所含之兩種訊框之其中至少一 種之祕相;關之品質度量制物與視頻#韻之影像切 割sfl框之訛s吳相關，係體驗回播品質首重者。 春與回播及/或5〖框之特定類^之説誤相關之品質度 量之引入可提供一種優質回饋。 根據本發明之-較可取實施例，與該至少一種媒體 資，流之回播相關之該品質度量係一種訊框_速率-偏差 度量，與該至少一種媒體資料流之回播之回播訊框率與 預设值之間，偏差相關。在回播該至少一種媒體資料流 時，可由一系列訊框所組成，回播該訊框之該訊框速率 不一定相等於預期或最適合該回播之訊框速率。因此需 •要回報該偏差。該預設值係該伺服器與客戶端均知曉之 馨設定值’或僅由兩種中之其中一種。該預設值係例如一 轉农佳之回播§Κ框速率。該訊框-速率_偏差度量可進一 步相關於該偏差事件之時間。 根據本發明之一較可取實施例，與該至少一種媒體 資料流之回播相關之品質度量係一種與晃動事件之時間 相關之晃動時間度量，係發生於該至少一種媒體資料流 之回播之回播時間與預期回播時間之間之差異大於預設 13 1309121 辦月,日修正替換頁 • 第94Π4476號專利申請案 補充、修正後無劃線之說明書修正頁一式三份 值。該倾值係該資料流與客戶端均知曉之設定值，或 雨者之/、中之去口曉。s亥回播時間代表實際回播時間， 係以諸如正常播放時間(NPT)或諸如壁鐘時間等在客戶 端之任何其他料系料明量。.不同計時純可具 不同之原點（零值)及單位。各個媒體訊框係連接預期回 播時間’係利用實時傳輸協定(RTP)時間標記進行信號傳 輸。然而，基於網路延解因素，媒體訊框可能益法確 .實地在預期回播時間播放，因此回播時間與預期回 0 間會有差異。 ”根據本發明之一較可取實施例，與該至少一種媒體 寊料机之回播相關之品質度量係一種與同步損失事件之 時間相關之同步損失時間度量，係發生於值A與值B之 絕對差異大於預設值時，其中該值A係該至少一種媒體 資料流之第-體資料流之最後播放訊框之回播時間與該 至少一種媒體資料流之第二媒體資料流之最後播放訊框 之回播時間之間之差異值，而其中該值B係該至少一種 媒體資料流之第一媒體資料流之最後播放訊框之預期回 籲播時間與該至少-種媒體資料流之第二媒體資料流之最 後播放訊框之預期回播時間之間之差異值。該第一媒體 資料流係諸如聲頻或語音資料流，而該第二媒體資料流 係諸如視頻資料流。如果回播係指視頻及語音/聲頻資料 流之同步回播，可能經歷缺少同步影像及回應語音/聲頻 而使用戶困擾，因此必須回報予該伺服器。該預設值係 s亥伺服器及客戶端均知曉之設定值，或僅有兩者之其中 14 1309121 第94114476號專利申請案 ' 補充、修正後無劃線之說明修正頁 -替換頁 •式三份 者知曉 根據本發明之-較可取實施例 料流中所具有之至少兩種類型之訊框=-=資 一種勝晝面.切割‘數種目^^之品質度量係 媒體資料流中之施誤畫面切割訊框之少:; :型之訊框係諸如與内容中前-訊 之訛誤。該晝面切割訊框係諸如可 存在於飼服器或可由飼服器 1;戶=相關之資訊可 可在頻帶内或頻帶外傳輪信號予客二:推诉’而該資訊 所說:據之::：生^ 量係連同時間標記-起回J實::時;;:框速率偏差度 質回報時間之啟始時間相曰，標記係相等於品 框之播放時間。該播放=差期間之第-播放訊 根據本發明=Ϊ間倾ΜN p τ代表。 連同時間標記-起回^可=實施例’該晃動時間度量係 報時間之啟始時間相:之:記係相等於品質回 框之播放時間。_放時間_如/。播放訊 15 1309121 私年/。月，日修正替換頁 第94114476號專利申請案 補充、修正後無劃線之說明書修正頁—式三份 量係= 實步損失時間度
質:報時間之啟始時間相對之該同步損;事 :播放訊框之播放時間。該播放時間係諸如以nH 根據本發明之-較可取實施例 播放時間猶。謂τ _如=吊 二=;r該播放時間可去移該客戶端及 :咖質’於是可提供資料流品質 根據本發明之-較可取實施例，該品質度量之㈣ 間Ϊ關之訛誤時間度量，及根議誤 時予以回報。在_期間，如果在短時間内僅有單一訊 框或數個聰奸賴，終朝彳 差；:接收終端將基於下列其中-項因素而；ΐί回播 3二二非參考性訊框未從飼服器傳輸；非參考性訊框係 抑或全部損失；非參相訊㈣完全触，但無法予 乂正，?碼’非參考性訊框係完全接收，但*於延時或 2乏十此力，無法解碼，參考性或非參考性訊框係完 全接收及^確解碼，但其翻顯科間已截止。在短時 間内之該Α框之非回播將不致影響用戶體驗，故短時間 之該訊框之回報係傳輸頻寬之浪費。因此根據本發明之 較可取貝&例’僅在超逾預定值時回報轨誤時間，例如 16 1309121 , ’心月/EJ修正^
第94114476號專利申請案 ' 補充、修正後無劃線之說明‘修正頁一式三份 由伺服器及或客戶端所設定之設定值’或由協定所預述 之值。 根據本發明之一較可取實施例，該至少一種媒體資 料流係以實時傳輸協定RTp為基準。該RTp可在該客戶 端與内容伺服器之間操作，並可使用用戶數據報協定 UDP之服務’而該UDp可使用互聯網協定ιρ之服務。
根據本發明之一較可取實施例，該資料流係至少部 份受實時資料流協定RTSP所控制。該RTSP係根據會 談說明協定SDP所提供之展示說明。該RTSp可由於客 戶端及該伺服器所操作，並可提供諸如資料流之啟始， 暫停及停止等。 根據本發明之一較可取實施例’該品質回饋值係通 過該RTSP回報予該伺服器。該品質回饋值係諸如 於RTSP協定數據單元之標頭内。 j艮據本發明之一較可取實施例，該資料流服務係在 3G行動通訊系統中之封包轉換資料流服務p%。 „本發明亦揭示—種電腦程式，具有可操作以使處理 = 之指示。該電腦程式係諸如在該客 本發明亦揭示-種電腦程式產品，該電腦程式 具有可操作叹處理輯行上述方 ; 可儲存在諸如麵或^ 類似媒體等之可卸式媒體，亦可被ii設?二戶以 17 1309121 月,日修正替換頁 * 第94114476號專利申請案 ‘ 補充、修正後無劃線之說明書修正頁一式三份 理器之内部記憶體中。 本發明亦揭示一種在資料流服務中之品質回饋之系 統，具有至少一個词服器及至少一個客戶端，其中至少 一媒體資料流係被導流至該至少一客戶端以進行回播， 其中該品質回饋值係根據品質度量之預設組之至少一個 品質度量予以決定，其中該品質度量之預設組具有與該 至少一媒體資料流之至少一回播相關之品質度量，及在 該至少一媒體資料流中所含之至少兩種訊框中之其中一 # 種之轨誤，及其中該品質回饋值係被回報予至少一伺服 器。 本發明亦揭示一種在資料流服務之客戶端，具有接 收被導流至該客戶端以供回播之至少一媒體資料流之裝 置’用以根據品質度量之預設組之至少一種品質度量以 測定品質回饋值之裝置，其中該品質度量之預設組具有 與該至少一媒體資料流之至少一回播相關之品質度量， 及該至少一媒體資料流中所含之至少兩種訊框中之其中 一種之訛誤，及將該品質回饋值回報予伺服器之裝置。 本發明亦揭示一種在資料流服務之祠服器，其中至 少一媒體資料流係被導流至客戶端以供回播，其中係根 據品質度量之預設組之至少一種品質度量以測定品質回 饋值，其中該品質度量之預設組具有與該至 媒體資 料流之至少-回播相關之品質度量，及該至少―媒體資 料流中所含之至少兩種訊框中之其中—種之祕，該祠 服器具有可接收由該客戶端回報予該匈服k該品質回
S 18 1309121 -第則4476號專利申請索 匕年/〇月7日修正替換頁丨 補充、修正後無劃線之說明^修正頁一式三份 饋值。 本發明亦揭示一種在資料流服務之協定，其中至少 一媒體資料流係被導流至客戶端以供回播，該協定係設 疋與至少一媒體資料流之至少一回播相關之品質度量， 及該至少一媒體資料流中所含之至少兩種類型之訊框之 其中一種之說誤。該協定係與會談說明協定Sdp组合之 RTSP。 ' 本發明之上述及其他目的可藉以下參照實施例之說 明而愈趨明晰。 【實施方式】 ^發明揭示在資料流服務中實行優質回饋之特定品 質度量。在下文中將詳細說明品質度量及其相關時間標 記。 訊框-速率-偏差 此種品質度量僅適用於聲頻，視頻及語音，可能不 -f用於其他媒體類型。它提供回播訊框速率之資訊。訊 差係發生於回播訊框速率偏離預設值之時。此 =質度量可具有事件之時間及訊框速率偏差值，即預設 :，速率與,際回播訊框速率之間之差異。該時間可用 2單位麵，亦可為分數值。該偏差㈣以每秒訊框 為早位，亦可為分數值。 該=設值係該伺服器與客戶端均知曉之設定值，或 司服裔在Q〇E協商中提供者。如果係由祠服器所提 仏’該伺服器將檢查媒體位元流或其他任何裝置以決定
Si 19 1309121 - · ^^月/曰修_iL替換頁 第94114476號專利申請幸 •補充、修正後域線之―式三份 該值。 最好該值指示當媒體資料流在局部回播時所計算之 平均訊框速率。 從實施觀點而言，可指定以下數種方法以計算訊框 速率。假設訊框速率僅在整數秒下改變。從n_!秒至n 秒之時間之赌速率值料於在料間内回播之訊框數 目。時間軸可代表耐時間，並從QoE回報時間之啟 始時間為起點。 ,,與訊框速率偏差度量相關之時間標記指示當訊框速 率偏差發生時之時間。時間標記之值可等於在訊框速率 偏差事件期間之第一播放訊框之NPT,相對於QoE回報 時，之啟始時間。如果在事件期間沒有播放訊框，該值 將等於在事件前之最後播放訊框之Νρτ或Q〇E回報時 間之啟始時間，以最後者為計，相對於QoE回報時間之 啟始時間。 、 抖動時間 此種品質度量僅適用於聲頻，視頻及語音，可能不 適用於其他媒體類型。當實際回播時間與預期回播^間 =間之絕對差異大於預設值時將會發生回播抖動。此度 量可用秒為單位，亦可為分數值。該預設值係伺服器與 客戶端均知曉之設定值，例如100毫秒。 ° ^ 與抖動時間度量相關之時間標記指示當回播抖動發 生時之時間。時間標記之值可等於在回播抖動之第一^ 敌訊框之NPT，相對於QoE回報時間之啟始時間。 20 1309121 私年>月夕日修it替換頁 第94114476號專利申請案 補充、修正後無劃線之說明書修正頁—式三份 同步損失時間 此種品質度量適用於任何成對之媒體類变。設定A 值作為該至少一媒體資料流之第一媒體資料流之最後播 放訊框之回播時間與該至少一媒體資料流之第二媒體資 料流之最後播放訊框之回播時間之差異，及設定B值作 為該至少一媒體資料流之第一媒體資料流之最後播放訊 框之預期回播時間與該至少一媒體資料流之第二媒體資 料流之最後播放訊框之預期回播時間之差異。當該A值 與B值之絕對差異大於預定值時將會發生同步損失。此 種品質度量係輯作為單位，亦可騎數值。該預設值 係伺服器與客戶端均知曉之設定值，例如1〇〇毫秒。 與同步損失相度f相關之時間標記指示回播同步 損失發生時之時間，間標記之㈣祕侧步損失中 =第-播放訊框之NPT，相對於⑽回報咖之啟 間0 訛誤晝面切割訊框數目 此種品質度量僅適用於聲頻，可能不適 體類型。此種度量係指在Q〇E回報時間二佥= 訊框之：目。此種度量係以大於或等於零之整： =此度量獲得支援，且在⑽回報時間$ $ 報3亥度里，係代表在QoE回報時間 /有回 之Kb誤。 H文有晝面切割訊框 當伺服器具有指示訊框係晝 細實行-方法以衍生資訊，例如么ί:;:二 21 1309121
- · , 第94114476號專利申請案 補充、修正後無劃線之說明書修正頁一式三份 運其等之場合，可使用此種品質度量。於此場合，最好 伺服器通過頻帶内或頻帶外信號傳輸將此資訊提供予客 戶端。此種品質度量亦可適用於客戶端實施方法以衍生 戟訊時’例如利用晝面切割檢測運算等。舉例而言，在 ITU-T H.264(a.k.a. ISO/IEC MPEG-4 PartlO)中，可利用 晝面資訊辅助加強資訊(SEI)訊息將晝面切割資訊傳輪 至頻帶内客戶端。 由於清楚測量訛誤晝面切割訊框之數目之時間係等 於QoE回報時間之終止時間，因此與訛誤晝面切割訊框 度量數目相關之時間標記未能設定。 _本發明所倡議之各個新式品質度量之協定語法之例 子示如下： 訊框速率—偏差訊框速率_偏差”，，=” ”{"sp/(值1 印，，,2[SP時間標記])#(，，，”值1 SP值2[SP時間標 ，抖動—時間=”抖動-時間”，,=” "rSP/(值[SP時間 ”值[SP時間標記D”}” ；同步損失—時間=”同 」姆：時間"=” ”{”sp/(值[sp時間標記])#(”，’’值[sp 己])}” ；訛誤一晝面一切割訛誤-晝面-切割"，,=n # 71二t 值Γ’欄表示訊框速率偏差事件之時間，而，， :訊框速率偏差值。”值”欄表示回播抖動之時 時間^ ,，=失之時間’ *轨誤晝面切割訊框之數目。" 時間W，攔之語義係如前所述。 °質回饋中’存在有在監測期關-事件發生超 22 1309121 第94U4476號專利申請棄 p年/巧曰修正替換頁 補充、修正後無劃線之說明書修正頁一式三份 過一次之可能性。於該場合，可能發生超過一次之品質 回饋值’代表事件數目予伺服器。 為了提供客戶端計算訊框速率偏差度量，有需要將 一預設訊框速率值傳送至客戶端。於此場合，可將該值 作j,附加參數加在RSTP標頭q〇e標頭或SDp標誌，，q〇e 度’如Tdoc S4-040073所示。預設訊框速率值之語 義5又自十係疋義如下：預設訊框率率"=”
1*DIGIT RTSP Q〇E-標頭及SDP Q〇E·度量之語義將成為： QoE-標頭=”Q0E_度量” ：”〇ff’/1# (伽跡uri” ；"度量
";"傳送速率[”；”範圍][，，；，，FR]) CRLF 及
a-QoE-度量.度量"；”傳送速率[”；，，範圍]”F CRLF 在=貝料流服務中實行品質回饋時為了更有效率地運 用傳輸帶寬，本發明倡議根據訛誤時間度量所測定之品 質回饋值僅在該時間大於預設值時予以回報。在回播 時’如果在短時間内僅有單一訊框或數個訊框未予回 播，終端用戶-般上將無法察知差異。接收終端機將基 於下列其中-項原因以決定不予回播訊框：非參考性訊 框未㈣服讀輸，非參考性訊框係部份或全部損失； 非參考性訊框係完全接收’但無法予以正確解碼；非參 考性訊框係完全接收’但由於延時或缺乏計算能力，無 法解碼’參考性或非參考性訊框係完全接收及正確解 23 1309121 卜月，曰修正替換3 第941M476號專利申請案 補充、修正後無劃線之說明書修正頁—式三份 碼，但其預期顯示時間已截止。在短 非回播將不致影響用戶體驗，故短該訊框之 係傳輸頻寬之浪費。因此根據本發明之較；報 =超$定值時回報訛誤時間，例如由伺服二客 戶^&所设定之設定值，或由協定所預述之值。〆 第3圖顯示本發明之方法之流程圖。 3〇〇,係在資料流客戶端與資料流伺服 ：3 2。在步驟3〇1中，具有本發明所揭示之;== 二質度量之預設組之一或多個品質度量係在資料流客戶 1與資料流伺服器之間進行協商以應用於由資料流客戶 端所進行之品質_步驟中。該會談設立及協商:者係 以RTSP聯合SDP，或RTCP或SIP為基準。步驟3〇1 與步驟300 —起進行。回應之時間標記度量可與至 少部份資料流會談所用之協商品質度量結合。在步驟 中，啟始實際資料流，例如當媒體資料流係傳輸至 料流客戶端及在設立該資料流客戶端之終端機上回播 在該資料流期間之步驟303中，檢查是否需要品質 回饋。可藉根據協商品質度量所回報予資料流伺服器之 任何事件是否發生之連續檢查以達成。例如係同步損失 =事件等。另一方面’可進行周期性品質報告之協商， 二如在特定時段内訛誤畫面切割訊框之數目之周期性回 =。在該步驟303中，將觸發事件驅動及周期性品質回 ^商如果決定需要品質回饋，在步驟304中將根據各個 商之品質度量以決定品質回饋值。如果其中一個或數 24 1309121 ―一___ « 丨 为崎^月广日修正替換頁 ' 第94114476號專利申請案 ---—- 補充'修正後無劃線之說明書修正頁一式三份 個協商品質度量係與時間標記度量結合，將在步驟305 中測定回應之時間標記。該步驟305可同樣在步驟304 之前實行。然後在步驟306將品質回饋值及回應時間標 記回報予資料流伺服器，如通過RTSP，RTCP或SIP等。 經過品質回饋後’或決定不需要品質回饋時，在步驟307 檢查是否停止資料流。若非，再度於步驟303中檢查是 . 否需要新的品質回饋。 第4圖係本發明之系統之功能性組件之示意圖。此 • 項實施例係例示使用RTSP以控制資料流之PSS系統。 SIP同樣亦可在此使用，僅需稍微變更協定堆疊及具有 可察覺或擷取從客戶端601(第一方）傳送至伺服器 600(第二方)之品質回饋及時間標記之附加網路。第4圖 之PSS系統具有一資料流客戶端6〇1及一資料流伺服器 600，其中該客戶端601及伺服器600具有可操作RTSP 之至少一種RTSP實體401，400。RTSP實體400，401 係使用由其他協定實體所操作之協定層之服務，其中僅 •顯示 TCP/UDP 實體 402，403 及 IP 實體 404，405。資 料流客戶端601另外係連接於資料流品質監測器407， 以供監測在協商品質度量及回應之時間標記度量下之實 際資料流應用之品質，及將監測品質回饋值輸入該RTSP 實體401中。該資料流品質監測係由諸如設立該資料流 客戶&之終端機所提供。如果已為所使用之品質度量設 定時間標記度量，該資料流品質監測器407將根據該時 間標§己度量以測定時間標記’及通過客戶端RTSp4〇l將 25 ---1 衫^月，日修正替換頁 1309121 * . 第.94114476號專利申請案 - 補充、修正後無劃線之說明書修正頁一式三份 遠監測品質回饋值及該回應時間標記傳送至在賁料流祠 服器600中之RTSP實體，在此被輸入於品質數據處理 器406以進行評定及分析，其目標在於當發現訛誤時間 事件過於頻繁時藉加強資料流之誤差彈性以改良資料流 應用之品質，或僅只著重於統計性品質數據收集或其他 目的。 本發明已藉較可取實施例予以詳細說明。須知精於 此藝者當I在不偏離本發明之範圍及精神下作成其他替 代及變更態樣。本發明不擬受限於無線電通訊系統。 明亦可制財具備參數回饋之有線及無線數據傳 齡^系絲，。 1309121 第94114476號專利申請案 補充、修正後無劃線之說明書修正頁一式三份 ,日修正替換頁 【圖式簡單說明】 第1圖係先行技術之封包轉換資料流服務(PSS)協 定堆疊之示意圖； 第2圖係先行技術之實時資料流協定(RTSP)協商样 頭之定義； 不 第3圖係本發明之方法之流程圖；及 第4圖係本發明之系統之示意圖。
【主要元件符號說明】 資料流性内容 102實時傳輸協定(RTP) 103調適層 104用戶數據報協定(UDP) 1〇5 IP協定 106非資料流性内容 107超文字傳輸協定(HTTP) 108傳輪控制協定(TCP)
109實時資料流協定(RTSP) 110展示說明 400，401 RTSP 402，403 TCP/UDP 404 ， 405 IP 406品質數據處理器 4〇7資料流品質監測器 6〇〇伺服器 601客戶端 27

Claims (1)

1309121 第94114476號專利申請案 補充、修正後無劃線之說明書修正頁一式三份 十、申請專利範圍： .1.一種在資料流服務中實行品質回饋之方法，其中 至少有一個媒體資料流係被導流向客戶端以供回播，該 方法之步驟包括： 從一個品質度量預設組之至少一個品質度量測定一 品質回饋值，其中該品質度量之預設組具有與至少下列 一種相關之品質度量； 該至少一媒體資料流之該回播；及 在該至少一媒體資料流中所含之至少兩種訊框中之 其中一種之訛誤；及 將該品質回饋值回報予伺服器。 2.如申請專利範圍第1項所述之方法，其中與該至 少一媒體資料流之該回播相關之該品質度量係一種與該 至少一媒體資料流之該回播之回播訊框速率偏離預設值 之偏差相關之訊框速率偏差度量。 、3.如申請專利範圍第2項所述之方法，其中該訊框 迷率偏差度量係進一步與該偏差的期間有關。 y ,、4.如申請專利範圍第1項所述之方法，其中與該至 =一媒體資料流之該回播有關之該品質度量係一種抖動 捋間度量，它係與在該至少一媒體資料流之該回播之回 播時間與預期回播時間之差異大於預設值時所發生之抖 28 1309121 . Ϊ 2413476號專利申請案 0年//月/〇日修正替換頁 補充、修正後無劃線之說明書修正頁一式三份 ___'_ 動事件之期間有關。 ^ 5.如申請專利範圍第1項所述之方法，其中與該至 • 少一媒體資料流之該回播相關之之該品質度量係一種同 步損失時間度量，係在值A與值B之間之絕對差異大於 預設值時所發生之同步損失事件之時間相關，其中該值 A係該至少一種媒體資料流之第一媒體資料流之最後播 放訊框之回播時間與該至少一種媒體資料流之第二媒體 鲁資料流之最後播放訊框之回播時間之間之差異值，而其 中該值B係該至少一種媒體資料流之第一媒體資料流之 最後播放訊框之預期回播時間與該至少一種媒體資料流 之第二媒體資料流之最後播放訊框之預期回播時間之間 之差異值。 6. 如申凊專利範圍第1項所述之方法，其中在該至 少一媒體資料流中所含之兩種訊框之至少一種係畫面切 ^ 割訊框，而其中相關於該至少一媒體資料流中所含之至 1 少兩種訊框之其中一種之訛誤之該品質度量係一種訛誤 畫面切割訊框度數目度量，係與該至少一媒體資料流之 訛誤晝面切割訊框之數目相關 7. 如申請專利範圍第1項所述之方法’其中該品質 ' 度量係連同時間標記一起回報。 29 1309121 , I —— 月夕日修正替換頁 第94114476號專利申請案 --—- 補充、修正後無劃線之說明書修正頁一式三份 8. 如申請專利範圍第2項所述之方法，其中該訊框 速率偏差度量係隨同時間標記一起被回報，而其中該時 間標記係與品質回報時間之啟始時間有關之該偏差的期 間之第一播放訊框的播放時間相等。 9. 如申請專利範圍第4項所述之方法，其中該抖動 時間度量係連同時間標記一起回報，而其中該時間標記 係與品質回報時間之啟始時間有關之該抖動事件期間之 鲁 第一播放訊框之播放時間相等。 10. 如申請專利範圍第9項所述之方法，其中該播放 時間係正常播放時間(NPT)。 11. 如申請專利範圍第5項所述之方法，其中該同步 損失時間度量係連同時間標記一起回報，而其中該時間 標記係與品質回報時間之啟始時間有關之該同步損失事 _ 件期間之第一播放訊框之播放時間相等。 12. 如申請專利範圍第11項所述之方法，其中該播 ， 放時間係正常播放時間(NPT)。 ' 13.如申請專利範圍第8項所述之方法，其中該播放 ’ 時間係正常播放時間(NPT)。 30 13 0 1 1 > , —*·| V年列/»曰修正替換頁 第94114476號專利申請案 | | 補充、修正後無劃線之說明書修正頁一式三份 14. 如申請專利範圍第1項所述之方法，其中該品質 度量之預設組具有與訛誤時間相關.之訛誤時間度量，及 其中根據該訛誤時間度量所測定之該品質回饋值僅在該 時間大於預設值時予以回報。 15. 如申請專利範圍第1項所述之方法，其中該至少 .一媒體資料流之資料流係以實時傳輸協定(RTP)為基準。 ► 16.如申請專利範圍第1項所述之方法，其中該資料 流係至少由實時資料流協定(RTSP)予以部份控制。 17. 如申請專利範圍第16項所述之方法，其中該品 質回饋值係通過該RTSP回報予該祠服器。 18. 如申請專利範圍第1項所述之方法，其中該資料 流服務係在3G行動通訊系統中之封包轉換資料流服務 ‘ （PSS)。 19. 一種具有可操作以致使處理器實行如申請專利 範圍第1項所述之方法步驟之指示之電腦程式之電腦程 式產品。 20. —種在資料流服務中實行品質回饋之系統，具 有： 31 1309121 * 0年//月％日修正替換頁 第94114476號專利申請案 補充、修正後無劃線之說明書修正頁一式三份 至少一伺服器；及 至少一客戶端；其中至少有一個媒體資料流係被導 , 流向客戶端以供回播，其中係從一個品質度量預設組之 至少一個品質度量測定一品質回饋值，其中該品質度量 / 之預設組具有與至少下列一種相關之品質度量： 該至少一媒體資料流之該回播；及 在該至少一媒體資料流中所含之至少兩種訊框中之 其中一種之訛誤，及其中係將該品質回饋值回報予伺服 • 器。 21. —種在資料流服務之客戶端設備，具有： 接收被導流至該客戶端以供回播之至少一蛘體資料 流之裝置； 用以根據品質度量之預設組之至少一種品質度量以 測定品質回饋值之裝置； 其中該品質度量之預設組具有與至少下列一種相關 之品質度量： 該至少一媒體資料流之該回播； 在至少一媒體資料流中所含之至少兩種訊框中之其 中一種之tib誤；及 將該品質回饋值回報予伺服器之裝置。 22. —種在資料流服務之伺服器，其中至少一媒體資 料流係被導流至客戶端以供回播，其中係根據品質度量 •32 1309121 . 月冷日修正替換頁 第94114476號專利申請案 補充、修正後無劃線之說明書修正頁一式三份 之預設組之至少一種品質度量以測定品質回饋值，其中 該品質度量之預設組具.有與至少下列一種相關之品質度 量： 該至少一媒體資料流之該回播，及 在至少一媒體資料流中所含之至少兩種訊框中之其 中一種之轨誤， 該伺服器具有可接收由該客戶端回報予該伺服器之 該品質回饋值之裝置。
33 1309121 _ ’ ' 弘年^月歹曰修正替換頁 第94114476號專利申請案 ___ ' 補充'修正後無劃線之說明書修正頁一式三份 七、指定代表圖： (一） 本案指定代表圖為：第（3 )圖。 (二) 本代表圖之元件符號簡單說明： 300設立資料流會談 301協商品質度量 302啟始資料流 303是否需要品質回饋？ 304決定品質回饋值 φ 305決定回應之時間標記 306回報品質回饋值及時間標記 307停止資料流？ 八、本案若有化學式時，請揭示最能顯示發明特徵的化學式：
TW094114476A 2004-05-07 2005-05-05 Method and device for quality feedback in streaming services TWI309121B (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US10/841,228 US8010652B2 (en) 2004-05-07 2004-05-07 Refined quality feedback in streaming services

Publications (2)

Publication Number Publication Date
TW200623774A TW200623774A (en) 2006-07-01
TWI309121B true TWI309121B (en) 2009-04-21

Family

ID=34967332

Family Applications (1)

Application Number Title Priority Date Filing Date
TW094114476A TWI309121B (en) 2004-05-07 2005-05-05 Method and device for quality feedback in streaming services

Country Status (8)

Country Link
US (3) US8010652B2 (zh)
EP (1) EP1743467B1 (zh)
JP (1) JP2007536859A (zh)
KR (2) KR100906158B1 (zh)
CN (1) CN1951083B (zh)
AU (1) AU2005241687B2 (zh)
TW (1) TWI309121B (zh)
WO (1) WO2005109821A1 (zh)

Families Citing this family (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6930709B1 (en) * 1997-12-04 2005-08-16 Pentax Of America, Inc. Integrated internet/intranet camera
CN101095348B (zh) * 2004-03-03 2014-08-13 分组视频网络技术方案有限公司 用于从网络节点取回数字多媒体内容的系统和方法
KR100640862B1 (ko) * 2004-08-03 2006-11-02 엘지전자 주식회사 순방향 메시지 전송 중 타임아웃의 동적 제어방법
US8320532B1 (en) * 2005-09-22 2012-11-27 Verizon Patent And Licensing Inc. Method and system for providing voice dialing service in a SIP-based network
CN101026616B (zh) * 2006-02-18 2013-01-09 华为技术有限公司 基于ip多媒体子系统的交互式媒体会话建立方法
WO2007133697A2 (en) 2006-05-11 2007-11-22 Cfph, Llc Methods and apparatus for electronic file use and management
US20090313376A1 (en) * 2006-06-02 2009-12-17 Mats Cedervall Method and apparatuses for establishing a session between a client terminal and a media supply system to transport a unicast media stream over an ip network
WO2008048155A1 (en) 2006-10-19 2008-04-24 Telefonaktiebolaget Lm Ericsson (Publ) A method of determining video quality
US8959239B2 (en) * 2006-12-29 2015-02-17 Telefonaktiebolaget L M Ericsson (Publ) Method and apparatus for reporting streaming media quality
KR100810223B1 (ko) 2007-01-19 2008-03-06 삼성전자주식회사 단말 간 실시간 스트리밍 서비스 제공 시스템 및 방법
US20080228912A1 (en) * 2007-03-16 2008-09-18 Ramakrishna Vedantham Enhanced Quality Reporting for Transmission Sessions
US7991904B2 (en) 2007-07-10 2011-08-02 Bytemobile, Inc. Adaptive bitrate management for streaming media over packet networks
US7987285B2 (en) 2007-07-10 2011-07-26 Bytemobile, Inc. Adaptive bitrate management for streaming media over packet networks
US7996482B1 (en) * 2007-07-31 2011-08-09 Qurio Holdings, Inc. RDMA based real-time video client playback architecture
US20090125636A1 (en) * 2007-11-13 2009-05-14 Qiong Li Payload allocation methods for scalable multimedia servers
US8762476B1 (en) 2007-12-20 2014-06-24 Qurio Holdings, Inc. RDMA to streaming protocol driver
US20090210552A1 (en) * 2008-02-15 2009-08-20 Alcatel Lucent Facilitating access to IPTV content using a portable device while roaming
KR100916505B1 (ko) * 2008-02-20 2009-09-08 한국전자통신연구원 정상 재생 타임을 이용한 스케일러블 비디오 코딩 정보와어드밴스드 오디오 코딩 정보의 동기화 지원 방법 및 장치
WO2009104869A1 (en) * 2008-02-20 2009-08-27 Electronics And Telecommunications Research Institute Method and apparatus for svc video and aac audio synchronization using npt
US8060904B1 (en) 2008-02-25 2011-11-15 Qurio Holdings, Inc. Dynamic load based ad insertion
US20100029266A1 (en) * 2008-07-02 2010-02-04 Nokia Corporation System and methods for quality of experience reporting
KR101324222B1 (ko) * 2008-09-04 2013-11-01 삼성테크윈 주식회사 영상 처리 장치
US8775665B2 (en) * 2009-02-09 2014-07-08 Citrix Systems, Inc. Method for controlling download rate of real-time streaming as needed by media player
US9154375B2 (en) * 2009-11-20 2015-10-06 Carrier Iq, Inc. Method for recording user experience or performance of a peripheral device
CN102238152B (zh) * 2010-05-06 2015-09-23 华为技术有限公司 控制内容报告行为的方法、装置和系统
US8423658B2 (en) * 2010-06-10 2013-04-16 Research In Motion Limited Method and system to release internet protocol (IP) multimedia subsystem (IMS), session initiation protocol (SIP), IP-connectivity access network (IP-CAN) and radio access network (RAN) networking resources when IP television (IPTV) session is paused
EP2448265A1 (en) 2010-10-26 2012-05-02 Google, Inc. Lip synchronization in a video conference
JP5782139B2 (ja) 2011-02-11 2015-09-24 インターデイジタル パテント ホールディングス インコーポレイテッド 協調セッション中に移動局のメディアフローを同期化する方法および装置
US9288251B2 (en) 2011-06-10 2016-03-15 Citrix Systems, Inc. Adaptive bitrate management on progressive download with indexed media files
WO2012170920A1 (en) 2011-06-10 2012-12-13 Bytemobile, Inc. On-demand adaptive bitrate management for streaming media over packet networks
US9210302B1 (en) 2011-08-10 2015-12-08 Google Inc. System, method and apparatus for multipoint video transmission
US20130195119A1 (en) * 2011-10-14 2013-08-01 Qualcomm Incorporated Feedback channel for wireless display devices
US9769281B2 (en) 2011-12-19 2017-09-19 Google Technology Holdings LLC Method and apparatus for determining a multimedia representation for a multimedia asset delivered to a client device
US8917309B1 (en) 2012-03-08 2014-12-23 Google, Inc. Key frame distribution in video conferencing
US10489389B2 (en) 2012-06-07 2019-11-26 Wormhole Labs, Inc. Experience analytic objects, systems and methods
US8791982B1 (en) 2012-06-27 2014-07-29 Google Inc. Video multicast engine
US9125073B2 (en) * 2012-08-03 2015-09-01 Intel Corporation Quality-aware adaptive streaming over hypertext transfer protocol using quality attributes in manifest file
US9100698B2 (en) * 2012-10-26 2015-08-04 Motorola Solutions, Inc. Systems and methods for sharing bandwidth across multiple video streams
US9348903B2 (en) 2013-02-08 2016-05-24 John Moran Methods, devices and computer readable mediums for a music recognition game
US9774869B2 (en) * 2013-03-25 2017-09-26 Blackberry Limited Resilient signal encoding
US9665895B2 (en) * 2013-08-12 2017-05-30 Mov, Inc. Technologies for video-based commerce
GB2521078B (en) * 2013-10-24 2016-01-13 Motorola Solutions Inc Systems and methods for sharing bandwidth across multiple video streams
CN103594103B (zh) * 2013-11-15 2017-04-05 腾讯科技(成都)有限公司 音频处理方法及相关装置
EP3100464B1 (en) * 2014-01-29 2020-11-18 Koninklijke KPN N.V. Establishing a streaming presentation of an event
US9992500B2 (en) * 2014-03-18 2018-06-05 Intel Corporation Techniques for evaluating compressed motion video quality
KR101507032B1 (ko) * 2014-08-26 2015-04-01 계명대학교 산학협력단 스트리밍 미디어의 실시간 동기화 재생 시스템 및 방법
WO2016059060A1 (en) 2014-10-14 2016-04-21 Koninklijke Kpn N.V. Managing concurrent streaming of media streams
US9681163B1 (en) * 2015-03-26 2017-06-13 Amazon Technologies, Inc. Identify bad files using QoS data
US9609275B2 (en) 2015-07-08 2017-03-28 Google Inc. Single-stream transmission method for multi-user video conferencing
US11089183B1 (en) * 2019-08-20 2021-08-10 Amazon Technologies, Inc. Multiple device audio-video synchronization
US11928758B2 (en) 2020-03-06 2024-03-12 Christopher Renwick Alston Technologies for augmented-reality
US20230007067A1 (en) * 2021-06-30 2023-01-05 Tencent America LLC Bidirectional presentation datastream

Family Cites Families (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4101270A1 (de) * 1991-01-17 1992-07-23 Siemens Ag Verfahren zur uebertragung von digitalsignalen
US5493584A (en) * 1993-12-27 1996-02-20 Emeott; Stephen P. Method for determining a channel quality metric in a receiver
US5652749A (en) * 1995-02-03 1997-07-29 International Business Machines Corporation Apparatus and method for segmentation and time synchronization of the transmission of a multiple program multimedia data stream
US5533021A (en) * 1995-02-03 1996-07-02 International Business Machines Corporation Apparatus and method for segmentation and time synchronization of the transmission of multimedia data
JP3967443B2 (ja) 1998-01-22 2007-08-29 富士通株式会社 画像データ送受信システムおよびその送信側装置およびその受信側装置並びにそのプログラムを記憶した記憶媒体
US6259677B1 (en) * 1998-09-30 2001-07-10 Cisco Technology, Inc. Clock synchronization and dynamic jitter management for voice over IP and real-time data
US7606164B2 (en) * 1999-12-14 2009-10-20 Texas Instruments Incorporated Process of increasing source rate on acceptable side of threshold
US6658027B1 (en) * 1999-08-16 2003-12-02 Nortel Networks Limited Jitter buffer management
US7143432B1 (en) * 1999-10-01 2006-11-28 Vidiator Enterprises Inc. System for transforming streaming video data
US7574351B2 (en) * 1999-12-14 2009-08-11 Texas Instruments Incorporated Arranging CELP information of one frame in a second packet
EP1130839B1 (en) * 2000-03-02 2005-06-08 Matsushita Electric Industrial Co., Ltd. Method and apparatus for retransmitting video data frames with priority levels
GB2362533A (en) * 2000-05-15 2001-11-21 Nokia Mobile Phones Ltd Encoding a video signal with an indicator of the type of error concealment used
US7286652B1 (en) * 2000-05-31 2007-10-23 3Com Corporation Four channel audio recording in a packet based network
US6973102B2 (en) * 2000-07-31 2005-12-06 Telefonaktiebolaget Lm Ericsson (Publ) Jitter reduction in differentiated services (DiffServ) networks
FI120125B (fi) * 2000-08-21 2009-06-30 Nokia Corp Kuvankoodaus
US6785353B1 (en) * 2000-09-06 2004-08-31 Telogy Networks, Inc. Synchronization loss detection in a V.34 receiver
US7336613B2 (en) * 2000-10-17 2008-02-26 Avaya Technology Corp. Method and apparatus for the assessment and optimization of network traffic
WO2002045372A2 (en) * 2000-11-29 2002-06-06 British Telecommunications Public Limited Company Transmitting and receiving real-time data
US20020080719A1 (en) * 2000-12-22 2002-06-27 Stefan Parkvall Scheduling transmission of data over a transmission channel based on signal quality of a receive channel
US6934318B2 (en) * 2000-12-22 2005-08-23 Qualcomm, Incorporated Method and system for energy based frame rate determination
US6856601B1 (en) * 2001-04-03 2005-02-15 Cisco Technology, Inc. Shared digital signal processing resources for communications devices
WO2002087235A1 (en) * 2001-04-19 2002-10-31 Vividon, Inc. System for applying metric to multimedia files over network
US7047308B2 (en) * 2001-08-31 2006-05-16 Sharp Laboratories Of America, Inc. System and method for simultaneous media playout
US7185084B2 (en) * 2001-09-05 2007-02-27 Intel Corporation Server-side measurement of client-perceived quality of service
JP2003304523A (ja) * 2002-02-08 2003-10-24 Ntt Docomo Inc 情報配信システム、情報配信方法、情報配信サーバ、コンテンツ配信サーバ及び端末
US7010598B2 (en) * 2002-02-11 2006-03-07 Akamai Technologies, Inc. Method and apparatus for measuring stream availability, quality and performance
US7596373B2 (en) * 2002-03-21 2009-09-29 Mcgregor Christopher M Method and system for quality of service (QoS) monitoring for wireless devices
US6981184B2 (en) * 2002-04-11 2005-12-27 Motorola, Inc. Apparatus and method for processing a corrupted frame
JP3964751B2 (ja) 2002-07-15 2007-08-22 日本電信電話株式会社 ネットワーク品質推定制御方式
CN102291585A (zh) * 2002-07-15 2011-12-21 诺基亚有限公司 用于视频序列中错误隐藏的方法
US7038710B2 (en) * 2002-07-17 2006-05-02 Koninklijke Philips Electronics, N.V. Method and apparatus for measuring the quality of video data
US20040073690A1 (en) * 2002-09-30 2004-04-15 Neil Hepworth Voice over IP endpoint call admission
CN100574519C (zh) * 2002-10-29 2009-12-23 艾利森电话股份有限公司 无线网络中多用户服务的报告
AU2003295515A1 (en) * 2002-11-11 2004-06-03 Supracomm, Inc. Multicast videoconferencing
US7251267B2 (en) * 2002-12-13 2007-07-31 Lucent Technologies Inc. System and method for determining a best round trip delay indicator
US7630612B2 (en) * 2003-02-10 2009-12-08 At&T Intellectual Property, I, L.P. Video stream adaptive frame rate scheme
US7394833B2 (en) * 2003-02-11 2008-07-01 Nokia Corporation Method and apparatus for reducing synchronization delay in packet switched voice terminals using speech decoder modification
EP1453269A1 (en) * 2003-02-25 2004-09-01 Matsushita Electric Industrial Co., Ltd. A method of reporting quality metrics for packet switched streaming
US20040170163A1 (en) * 2003-02-28 2004-09-02 Zarlink Semiconductor V.N. Inc. Data structure providing storage and bandwidth savings for hardware RTCP statistics collection applications
US20050163047A1 (en) * 2003-03-20 2005-07-28 Christopher M. Mcgregor, Gregory M. Mcgregor And Travis M. Mcgregor Method and system for processing quality of service (QOS) performance levels for wireless devices
US20050010462A1 (en) * 2003-07-07 2005-01-13 Mark Dausch Knowledge management system and methods for crude oil refining
US7599307B2 (en) * 2003-08-21 2009-10-06 Vidiator Enterprises Inc. Quality of experience (QoE) method and apparatus for wireless communication networks
ATE458343T1 (de) * 2003-09-02 2010-03-15 Nokia Corp Übertragung eingebetteter informationen bezüglich einer dienstqualität
JP4219930B2 (ja) * 2003-09-10 2009-02-04 富士通株式会社 伝送パラメータ制御装置
US20050076113A1 (en) * 2003-09-12 2005-04-07 Finisar Corporation Network analysis sample management process
US7158899B2 (en) * 2003-09-25 2007-01-02 Logicvision, Inc. Circuit and method for measuring jitter of high speed signals
US20050089092A1 (en) * 2003-10-22 2005-04-28 Yasuhiro Hashimoto Moving picture encoding apparatus

Also Published As

Publication number Publication date
KR100813929B1 (ko) 2008-03-18
US8060608B2 (en) 2011-11-15
AU2005241687A1 (en) 2005-11-17
US8010652B2 (en) 2011-08-30
US20050259947A1 (en) 2005-11-24
KR20070112433A (ko) 2007-11-23
KR20060135939A (ko) 2006-12-29
CN1951083B (zh) 2012-07-11
WO2005109821A1 (en) 2005-11-17
US7743141B2 (en) 2010-06-22
AU2005241687B2 (en) 2008-09-04
EP1743467A1 (en) 2007-01-17
TW200623774A (en) 2006-07-01
KR100906158B1 (ko) 2009-07-03
US20080189412A1 (en) 2008-08-07
US20100215339A1 (en) 2010-08-26
JP2007536859A (ja) 2007-12-13
CN1951083A (zh) 2007-04-18
EP1743467B1 (en) 2019-02-06

Similar Documents

Publication Publication Date Title
TWI309121B (en) Method and device for quality feedback in streaming services
AU2004317111B2 (en) Timing of quality of experience metrics
CN111316655B (zh) 在dash感知应用与dash客户端之间用于服务互动性支持的接口
US20080151885A1 (en) On-Demand Multi-Channel Streaming Session Over Packet-Switched Networks
EP2894831B1 (en) Transport mechanisms for dynamic rich media scenes
TW200845646A (en) Enhanced quality reporting for transmission sessions
KR20050106592A (ko) 멀티미디어 스트리밍에서 클라이언트 레이트 능력을시그널링하는 방법
CN111656791B (zh) 流式传输服务中的信令和报告交互性使用
US20060200577A1 (en) Method for transmitting moving picture data to mobile terminal using pseudo-streaming technology
JP3836077B2 (ja) 伝送データ構造及びそれを伝送するための方法並びに装置
WO2017196980A1 (en) Real-time control interface for broadcast object streaming
JP4544029B2 (ja) 携帯端末、ストリーミング通信システム、ストリーミング通信方法及びストリーミング通信プログラム
US20060198395A1 (en) See what you see (SWYS)
KR100808981B1 (ko) 사용자 경험 품질 메트릭스의 타이밍
CN102209078B (zh) 定时体验质量的度量