JP2006500808A - 帯域幅適応 - Google Patents

帯域幅適応 Download PDF

Info

Publication number
JP2006500808A
JP2006500808A JP2004537180A JP2004537180A JP2006500808A JP 2006500808 A JP2006500808 A JP 2006500808A JP 2004537180 A JP2004537180 A JP 2004537180A JP 2004537180 A JP2004537180 A JP 2004537180A JP 2006500808 A JP2006500808 A JP 2006500808A
Authority
JP
Japan
Prior art keywords
streaming server
bit rate
air interface
bandwidth
streaming
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2004537180A
Other languages
English (en)
Other versions
JP4927333B2 (ja
Inventor
ダニロ ディエゴ スルシオ,イゴール
ルンダン,ミーッカ
バリス アクス,エムル
ワン,リュ−シャン
バーサ,ビクター
レオン,デイビッド
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nokia Oyj
Original Assignee
Nokia Oyj
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nokia Oyj filed Critical Nokia Oyj
Priority claimed from PCT/FI2003/000686 external-priority patent/WO2004028095A1/en
Publication of JP2006500808A publication Critical patent/JP2006500808A/ja
Application granted granted Critical
Publication of JP4927333B2 publication Critical patent/JP4927333B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80Responding to QoS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • H04L47/15Flow control; Congestion control in relation to multipoint traffic
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • H04L47/26Flow control; Congestion control using explicit feedback to the source, e.g. choke packets
    • H04L47/263Rate modification at the source after receiving feedback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/70Admission control; Resource allocation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/70Admission control; Resource allocation
    • H04L47/76Admission control; Resource allocation using dynamic resource allocation, e.g. in-call renegotiation requested by the user or requested by the network in response to changing network conditions
    • H04L47/765Admission control; Resource allocation using dynamic resource allocation, e.g. in-call renegotiation requested by the user or requested by the network in response to changing network conditions triggered by the end-points
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/70Admission control; Resource allocation
    • H04L47/76Admission control; Resource allocation using dynamic resource allocation, e.g. in-call renegotiation requested by the user or requested by the network in response to changing network conditions
    • H04L47/765Admission control; Resource allocation using dynamic resource allocation, e.g. in-call renegotiation requested by the user or requested by the network in response to changing network conditions triggered by the end-points
    • H04L47/767Admission control; Resource allocation using dynamic resource allocation, e.g. in-call renegotiation requested by the user or requested by the network in response to changing network conditions triggered by the end-points after changing the attachment point, e.g. after hand-off
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/70Admission control; Resource allocation
    • H04L47/80Actions related to the user profile or the type of traffic
    • H04L47/801Real time traffic
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/70Admission control; Resource allocation
    • H04L47/80Actions related to the user profile or the type of traffic
    • H04L47/808User-type aware
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/70Admission control; Resource allocation
    • H04L47/82Miscellaneous aspects
    • H04L47/824Applicable to portable or mobile terminals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066Session management
    • H04L65/1083In-session procedures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066Session management
    • H04L65/1101Session protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40Support for services or applications
    • H04L65/403Arrangements for multi-party communication, e.g. for conferences
    • H04L65/4038Arrangements for multi-party communication, e.g. for conferences with floor control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/65Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/752Media network packet handling adapting media to network capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/756Media network packet handling adapting media to device capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/24Negotiation of communication capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W28/00Network traffic management; Network resource management
    • H04W28/02Traffic management, e.g. flow control or congestion control
    • H04W28/0231Traffic management, e.g. flow control or congestion control based on communication conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W28/00Network traffic management; Network resource management
    • H04W28/02Traffic management, e.g. flow control or congestion control
    • H04W28/10Flow control between communication endpoints
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W8/00Network data management
    • H04W8/02Processing of mobility data, e.g. registration information at HLR [Home Location Register] or VLR [Visitor Location Register]; Transfer of mobility data, e.g. between HLR, VLR or external networks
    • H04W8/04Registration at HLR or HSS [Home Subscriber Server]
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/50Reducing energy consumption in communication networks in wire-line communication networks, e.g. low power modes or reduced link rate

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • General Business, Economics & Management (AREA)
  • Business, Economics & Management (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Liquid Crystal Substances (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本発明は、エア・インターフェースを介してストリーミング・サーバ(111)から移動クライアント装置(101)に画像及び/又は音声のようなメディアをパケット交換ストリーミングするための方法に関する。本方法は、ダウンリンク・エア・インターフェース帯域幅における変化を通知するステップと、ストリーミング・サーバ送信ビット・レートを適応させるための要求を前記移動クライアント装置(101)から前記ストリーミング・サーバ(111)に送信するステップと、前記ストリーミング・サーバ(111)において前記要求を受信するステップと、前記要求に従って前記ストリーミング・サーバ送信ビット・レートを適応させるステップと、で構成される。本方法によれば、前記要求は、現在のダウンリンク・エア・インターフェース帯域幅及び前記ストリーミング・サーバ送信ビット・レートの前記適応が前記現在のダウンリンク・エア・インターフェース帯域幅に従って実行されることを前記ストリーミング・サーバ(111)に示す。

Description

本発明は、エア・インターフェースを介したストリーミング・サーバから移動クライアント装置へのメディアのパケット交換ストリーミングに関する。
マルチメディア・ストリーミングにおいて、音声付の「動画像」の列は、ストリーミング・サーバからクライアント装置へ送信される。全メディア・ファイルが再生可能となる前にクライアントのところに到着している必要のある技術とは対照的に、ストリーミング技術は、ストリーミング・サーバからクライアントへ連続的な方法でメディア(画像及び/又は音声)を送信すること、及びメディアがクライアントのところに到着するときにメディアを再生することを可能とする。
パケット交換ストリーミング・サービス(PSS)は、現在、3GPP(第3世代共同プロジェクト)によって移動環境に対して規格化されつつある。固定インターネット環境と比較して、移動環境に特有の新たな問題が生じている。これらの問題は、主に、移動システムの様々な制約による。
移動システムにおいては、ネットワークと移動体通信装置との間で、情報は、無線路を介して、すなわち、無線周波数チャンネル用いたエア・インターフェースを介して、転送される。エア・インターフェースは、通信に対して限られた無線リソース(限られた帯域幅)しか提供しない。従って、システムが適切に機能することを保証するためには、できる限り効率的に(無線リソースが浪費されないように)、エア・インターフェースの限られた帯域幅を利用することが望まれる。
メディアをストリーミング(画像及び/又は音声をストリーミング)することができる通信システムの例を図1に示す。このシステムは、IP(インターネット・プロトコル)ネットワーク104に接続されたストリーミング・サーバ111で構成される。IPネットワーク104は、例えば、インターネット又はサービス・プロバイダ・オペレータのイントラネット(オペレータのドメインに属するイントラネット・ネットワーク)とすることができる。IPネットワーク104は、Giインターフェースを介して、移動体通信ネットワークの基幹ネットワーク103に接続される。移動体通信ネットワークは、また、基幹ネットワーク103に接続された無線アクセス・ネットワーク(RAN)102を有する。無線アクセス・ネットワーク102は、エア・インターフェースを介した移動体通信ネットワークへのアクセスを移動体通信装置101に提供する。上述のアクセスは、回線交換手段(回線交換される音声又はデータ・コール)又はパケット交換手段のいずれかによって、或いはそれらの両者によって、提供することができる。以下では、エア・インターフェースを介して通信するパケット交換手段の例としてGPRS(汎用パケット無線サービス)を用いる。
メディアのストリーミングは、通常、ストリーミング・サーバ111から移動体通信装置101(以後、クライアント装置101と称する)に、圧縮された形態で予め記録された(マルチ)メディア(画像及び/又は音声)ファイルを送信することによって実行される。メディア・コンテンツを符号化するために用いられるコーデックに依存して、ストリーミング・サーバは、クライアント装置101に異なるビット・レートの組でメディアを送信することができる。例として、サーバは、3つのビット・レートで符号化されたコンテンツを有することができる。これらのビット・レートは、例えば、3つの異なるコーデックによって或いは1つのマルチレート・コーデックによって生成することができる。ビット・レートが高くなるほど受信した画像及び音声の品質が良好になるのは、当然のことである。しかしながら、より高いビット・レートは、限られたエア・インターフェース帯域幅のより多くを費やす。
規格化されたGPRSリリース‘97ネットワーク及びGPRSリリース‘99(EGPRS、拡張GPRS)ネットワークは、エア・インターフェースを介した通信に対してTDMA(時分割多重アクセス)タイム・スロットを用いる。誤り訂正に対して用いられるビットの量とともにタイム・スロットの数が、接続のペイロード(payload)に対する有効帯域幅を規定する。従って、限られた無線リソースを効率的に利用可能とするために、GPRSリリース‘97及びリリース‘99の両ネットワークに対して規定された、様々なタイム・スロットと符号化方式(誤り訂正)の組み合わせが存在する。
例えば、GPRSリリース‘97ネットワークは、(3タイム・スロットまでに対して)以下のタイム・スロット及び符号化方式の実現性を与える。
Figure 2006500808
タイム・スロット(TS)及び符号化方式(CS)の設定に依存する、ペイロード(ユーザ・データ、有効なデータ)に対して利用可能な有効エア・インターフェース・ダウンリンク帯域幅(すなわち、ビット・レート)を、この表は示している。例えば、用いる符号化方式がCS−1であり、用いるタイム・スロットの設定がTS2+1(2タイム・スロットがダウンリンク方向(RAN−>クライアント装置)に用いられ、1タイム・スロットがアップリンク方向(クライアント装置−>RAN)に用いられる)設定においては、利用可能なダウンリンク帯域幅は、18.1kbpsである。これは、実際に、例えばストリーミング(マルチ)メディア等のペイロードに対して利用可能な有効帯域幅である。GPRSに関しては、一般的用語である無線アクセス・ネットワーク(RAN)は、基地(送信機)局(BTS)及び基地局制御装置(BSC)で構成されると考えられる。
同様に、GPRSリリース‘99ネットワークは、(2タイム・スロットまでに対して)以下のタイム・スロット及び符号化方式の実現性を与える。
Figure 2006500808
タイム・スロット(TS)及び符号化方式(MCS(変調及び符号化の方式))の設定に依存する、ペイロードに対して利用可能な有効エア・インターフェース・ダウンリンク帯域幅を、やはり、この表は示している。例えば、用いる符号化方式がMCS−6であり、用いるタイム・スロットの設定がTS2+2(2タイム・スロットがダウンリンク方向に用いられ、2タイム・スロットがアップリンク方向に用いられる)設定においては、利用可能なダウンリンク帯域幅は、59.2kbpsである。
ストリーミング・メディアに対して利用可能なエア・インターフェース・ダウンリンク帯域幅(すなわち、ストリーミングに対して利用可能なエア・インターフェースダウンリンク・ビット・レート)は、ストリーミング・セッションの間に大幅に変化することがあることに着目されたい。クライアント装置101において受信されるストリーミング・メディアの品質が変化するエア・インターフェース状態(悪い無線リンク品質)によって劣化する場合には、無線アクセス・ネットワーク102は、例えば、ストリーミング・セッションの間にエア・インターフェース誤り予防を増加させる必要がある。それとは別に、又はそれに加えて、無線アクセス・ネットワーク(GPRS)は、無線アクセス・ネットワークにおいて変化する負荷状態によってタイム・スロットの設定を変更しなければならないこともある。
エア・インターフェース帯域幅は、サーバ帯域幅(すなわち、サーバがストリーミング・メディアを送信するビット・レート)とは異なる概念であることに着目されたい。
ストリーミング・セッションに対する元々のエア・インターフェース帯域幅が59.2kbps(GPRSリリース‘99:MCS−6&TS 2+2)である例を考えると、ストリーミング・セッションの設定において、ストリーミング・サーバ111は、ビット・レート59kbpsで送信することが認められる。ストリーミング・セッションの間に、無線アクセス・ネットワーク102は、MCS−6からMCS−5に変化したエア・インターフェース状態により、エア・インターフェース誤り予防を高める必要がある。この結果、新しいタイム・スロットと符号化方式の組み合わせ、すなわちMCS−5 & TS 2+2が生じる。この変化の後、利用可能なエア・インターフェース帯域幅は、44.8kbpsになる。エア・インターフェースは、59kbpsのサーバ送信ビット・レートよりかなり低い44.8kbpsのビット・レートを高々維持できるだけなので、ストリーミング・サーバが59kbpsのビット・レートで送信を続けた場合は、大きな遅延及びネットワーク・バッファのオーバーフローによるパケットの損失につながることになろう。最終的にストリーミング・セッションが失われることさえ起こり得る。
この問題を克服するために、Ericssonは、以下の出版物で一連の解決策を提案した。
-Ericsson, Improved Session Setup and Bandwidth Adaptation, 3GPP TSG-SA WG4 Meeting #17, Tdoc S4-010349, June 4-8, 2001, Naantali, Finland.
-Ericsson, Improved Session Setup and Bandwidth Adaptation, 3GPP TSG-SA WG4 Meeting #18, Tdoc S4-(01)0477, September 3-7, 2001, Erlangen, Germany.
-Ericsson, Proposal for Bandwidth Selection in PSS, 3GPP TSG-SA WG4 Meeting #22, Tdoc S4-(02)0407, July 22-26, 2002, Tampere, Finland.
提案された解決策によれば、ストリーミング・サーバ111がストリーミング・メディアを送信することのできる可能なビット・レートが、予め、クライアント装置101に通信される。サーバ111又はクライアント101は、アクティブ・セッションの間に変化したネットワーク状態に気付くことができる。サーバ111が変化したネットワーク状態に気付く場合には、サーバ111は、ビット・ストリームを切替えることができる(このことは、サーバ111が第1のビット・レートでの送信から別のビット・レートでの送信に切替われるように理解される)。クライアント101が変化したネットワーク状態に気付く場合には、クライアント101は、特定のメッセージをサーバ111に送信することによって、現在のビット・ストリームと(クライアント101が知っている)別のビット・ストリームとの間におけるビット・ストリーム切替えを要求することができる。サーバは、このとき、ビット・ストリーム切替えに対する要求を受け入れるか又は無視するかのいずれかを実行することができる。
前述の例において、クライアント装置101が符号化方式をMCS−6からMCS−5に変化させた後で、クライアント装置101は、サーバが異なるビット・レートでの送信に切替えるように要求する、サーバ111への要求を送信すべきである。変化後の利用可能なエア・インターフェース帯域幅は、44.8kbpsなので、クライアントは、場合によっては例えば44kbps等の、44.8kbpsの隣の最低のビット・レートでサーバが送信するように要求する傾向が最も高くなろう。
44.8kbpsに近い代わりのビット・ストリームが存在する場合には、この解決策は良い解決策となり得るが、44.8kbpsの隣の最低のビット・レートが、例えば30kbps等のように、かなり離れている場合には、状況はより悪くなる。この場合、サーバ111が30kbpsで送信を開始すると、エア・インターフェース帯域幅のほぼ15kbpsが浪費される(ストリーミング・メディアに対して利用することができない)。マルチメディア・ストリーミングにおいて、理論的に可能なビット・レートよりほぼ15kbps低いビット・レートを用いることは、クライアント装置101において受信される画像及び/又は音声の品質に悪影響を与える可能性がかなり高くなることに着目されたい。
以前の表におけるGPRS無線ベアラに関して示したように、エア・インターフェースに対して規定された多くの異なるビット・レートが存在するので、ストリーミング・サーバ111が全ての相当するビット・レートでストリーミング・メディアを符号化する可能性は非常に低い。従って、前段落に示したシナリオは、かなり現実的となり得る。その結果、利用可能な帯域幅を多大に浪費せずにエア・インターフェース帯域幅の変化に対処するための新しい解決策に対する要請が存在する。
本発明の要約
エア・インターフェース帯域幅の変化により良く対処するために、前述の方法を改良することが、本発明の目的である。
本発明の第1の態様によれば、
エア・インターフェースを介してストリーミング・サーバから移動クライアント装置にメディアをパケット交換ストリーミングするための方法であって、
ダウンリンク・エア・インターフェース帯域幅における変化を通知するステップと、
ストリーミング・サーバ送信ビット・レートを適応させるための要求を前記移動クライアント装置から前記ストリーミング・サーバに送信するステップと、
前記ストリーミング・サーバにおいて前記要求を受信するステップと、
現在のダウンリンク・エア・インターフェース帯域幅及び前記ストリーミング・サーバ送信ビット・レートの前記適応が前記現在のダウンリンク・エア・インターフェース帯域幅に従って実行されることを前記ストリーミング・サーバに示す前記要求に従って前記ストリーミング・サーバ送信ビット・レートを適応させるステップと、
で構成される方法が提供される。
メディアという用語は、画像又は音声又は静止画像のような別のメディア、又はそれらの任意の組み合わせ、すなわちマルチメディアのいずれかを意味すると考える。
クライアントがストリーミング・サーバに特定のビット・レートで送信するように要求し、ストリーミング・サーバがクライアント装置に盲目的に従うか又は要求を無視するかのいずれかであった従来技術の解決策とは対照的に、本発明は、ストリーミング・サーバに対する現在のダウンリンク・エア・インターフェース帯域幅の送信を可能とし、その結果、サーバは、その送信ビット・レートを最適に適応させることができる。
従来技術の解決策は、ストリーミング・サーバの動的な適応機能に依存しないが、本発明の実施形態は、例えばいくつかの画像フレームの送信をスキップすることによって、時間的適応性を用いることによりサーバ送信ビット・レートをエア・インターフェース帯域幅に適応させるためのサーバの動的な適応機能をストリーミング・サーバが用いることができるようにしている。この実施形態において、ストリーミング・サーバは、ストリーミング・セッションの間により良いQoSを得るために、クライアントと協力することができるようにしている。
本発明の第2の態様によれば、
エア・インターフェースを介してストリーミング・サーバからパケット交換されるストリーミング・メディアを受信するための移動クライアント装置であって、
ダウンリンク・エア・インターフェース帯域幅における変化を通知するための手段と、
ストリーミング・サーバ送信ビット・レートを適応させるための要求であって、現在のダウンリンク・エア・インターフェース帯域幅に従って前記ストリーミング・サーバ送信ビット・レートを適応させるために前記現在のダウンリンク・エア・インターフェース帯域幅を前記ストリーミング・サーバに示すための情報を含む要求を前記ストリーミング・サーバに送信するための手段と、
で構成される装置が提供される。
本発明の第3の態様によれば、
エア・インターフェースを介して移動クライアント装置にパケット交換されるストリーミング・メディアを送信するためのストリーミング・サーバであって、
ストリーミング・サーバ送信ビット・レートを適応させるための要求であって、現在のダウンリンク・エア・インターフェース帯域幅を示す情報を含む要求を受信するための手段と、
前記現在のダウンリンク・エア・インターフェース帯域幅に従って前記ストリーミング・サーバ送信ビット・レートを適応させるための手段と、
で構成されるストリーミング・サーバが提供される。
本発明の第4の態様によれば、
エア・インターフェースを介してストリーミング・サーバから移動クライアント装置にメディアをパケット交換ストリーミングするための、前記ストリーミング・サーバ及び前記移動クライアント装置で構成される、システムであって、
前記移動クライアント装置においては、
ダウンリンク・エア・インターフェース帯域幅における変化を通知するための手段と、
ストリーミング・サーバ送信ビット・レートを適応させるための要求であって、現在のダウンリンク・エア・インターフェース帯域幅を前記ストリーミング・サーバに示すための情報を含む要求を前記ストリーミング・サーバに送信するための手段と、
で構成され、
前記ストリーミング・サーバにおいては、
前記要求を受信するための手段と、
前記現在のダウンリンク・エア・インターフェース帯域幅に従って前記ストリーミング・サーバ送信ビット・レートを適応させるための手段と、
で更に構成されるシステムが提供される。
本発明の第5の態様によれば、
移動クライアント装置において実行可能なコンピュータ・プログラム製品であって、
前記移動クライアント装置をして、ダウンリンク・エア・インターフェース帯域幅における変化を通知せしめることと、
前記移動クライアント装置をして、ストリーミング・サーバ送信ビット・レートを適応させるための要求であって、現在のダウンリンク・エア・インターフェース帯域幅に従って前記ストリーミング・サーバ送信ビット・レートを適応させるために前記現在のダウンリンク・エア・インターフェース帯域幅を前記ストリーミング・サーバに示すための情報を含む要求を前記ストリーミング・サーバに送信せしめることと、
をするためのプログラム・コードで構成される製品が提供される。
本発明の第6の態様によれば、
ストリーミング・サーバにおいて実行可能なコンピュータ・プログラム製品であって、
前記ストリーミング・サーバをして、ストリーミング・サーバ送信ビット・レートを適応させるための要求であって、現在のダウンリンク・エア・インターフェース帯域幅を示す情報を含む要求を受信せしめることと、
前記ストリーミング・サーバをして、前記現在のダウンリンク・エア・インターフェース帯域幅に従って前記ストリーミング・サーバ送信ビット・レートを適応せしめることと、
をするためのプログラム・コードで構成される製品が提供される。
本発明の更に別の態様によれば、
エア・インターフェースを介してストリーミング・サーバから移動クライアント装置にメディアをパケット交換ストリーミングするための方法であって、
前記ストリーミング・サーバに現在のダウンリンク・エア・インターフェース帯域幅を示すステップと、
前記現在のダウンリンク・エア・インターフェース帯域幅に従ってストリーミング・サーバ送信ビット・レートを適応させるステップと、
で構成される方法が提供される。
従属請求項は、本発明の望ましい実施形態を含む。本発明の特定の態様に関連する従属請求項に含まれる対象は、本発明の別の態様にも適用可能である。
例を目的として添付の図面を参照し、本発明の実施形態をここに記載する。
詳細な説明
図1は、既に前述した。しかしながら、図1に示したシステムは、本発明の望ましい実施形態においても用いることができる。それ故、このシステムは、IPネットワーク104に接続されたストリーミング・サーバ111で構成される。IPネットワーク104は、例えば、インターネット又はサービス・プロバイダ・オペレータのイントラネット等とすることができる。IPネットワーク104は、Giインターフェースを介して、移動体通信ネットワークの基幹ネットワーク103に接続される。移動体通信ネットワークは、また、基幹ネットワーク103に接続された無線アクセス・ネットワーク(RAN)102を有する。無線アクセス・ネットワーク102は、エア・インターフェースを介した移動体通信ネットワークへのアクセスを移動体通信装置101に提供する。上述のアクセスは、回線交換手段(回線交換される音声又はデータ・コール)又はパケット交換手段のいずれかによって、或いはそれらの両者によって、提供することができる。以下では、エア・インターフェースを介して通信するためのパケット交換手段の例としてGPRS(汎用パケット無線サービス)を用いる。
前述の移動体通信ネットワークは、例えば、「第2.5世代の」GPRS又はEGPRSのネットワーク或いは第3世代セルラー移動体通信ネットワークとすることができる。
本発明の望ましい実施形態において、ストリーミング・セッションが、クライアント装置101とストリーミング・サーバ111との間で開始される。RTSP(リアル・タイム・ストリーミング・プロトコル)が、ストリーミング・セッションの設定において用いられる。一旦セッションが確立すると、RTP(リアル・タイム転送プロトコル)又は別のプロトコルに従って、ストリーミング自体を実行することができる(すなわち、メディア・フローを送信することができる)。しかしながら、確立されたセッションに変更をなすのが望ましい場合には、これは、再び、RTSPを用いることによって実行される。
ストリーミング・セッションの設定において、ストリーミング・セッションにおいて用いるのに可能なビット・レートを、ストリーミング・サーバ111からクライアント101に通信することができる。これは、サーバ111からクライアント101に送信されるRTSP DESCRIBEメッセージのメッセージ・ボディにおいて実行することができる。メッセージ・ボディは、SDP(セッション記述プロトコル)プロトコルを用いて形成することができる。そのようなSDPボディの一例(画像部のみを示す)は、以下のようなものである。
m=video 0 RTP/AVP 98
b=AS:40
a=rtpmap:98 H263-2000/90000
a=control: rtsp://example.com/foo /track_id=1
a=fmtp:98 profile=0; level=10; bw=18,27,40
このSDPボディにおいて、示した最終属性行の終了部は、マルチレート・コーデックの利用可能な帯域幅を示しており、これらは、18kbps、27kbps、及び40kbpsである。SDPボディのその他のフィールドは、一般的に規格化され、そのようなものとして知られている。帯域幅行bは、最初に用いられるデフォルト帯域幅、すなわち40kbpsを示す。
これとは別に、利用可能な複数のビット・レートがそれらのいずれかを指定することなく存在することを、サーバ111からクライアント101に通信することができる。そのようなSDPボディの一例(画像部のみを示す)は、以下のようなものである。
m=video 0 RTP/AVP 98
b=AS:40
a=rtpmap:98 H263-2000/90000
a=control: rtsp://example.com/foo /track_id=1
a=fmtp:98 profile=0; level=10; multi-bw
このSDPボディにおいて、示した最終属性行の終了部は、利用可能なマルチレート・コーデックの複数の帯域幅が存在することを示しているが、どの帯域幅かは示していない。SDPボディのその他のフィールドは、一般的に規格化され、そのようなものとして知られている。帯域幅行bは、最初に用いられるデフォルト帯域幅、すなわち40kbpsを示す。
本発明の望ましい実施形態は、クライアント101がストリーミング・メディアに対する利用可能なエア・インターフェース・ダウンリンク帯域幅における変化を監視する、クライアント・サーバ・ベースの方法を提示する。例えば、タイム・スロット構成又は符号化方式(又は変調及び符号化の方式)における変化により、利用可能な帯域幅が変化する場合には、クライアント101は、利用可能な帯域幅の変化を検出し、ストリーミング・サーバ111に対してサーバ帯域幅を適応させるように要求する。「サーバ帯域幅」と言う用語は、サーバがストリーミング・メディアを送信する送信ビット・レートを意味する。
本明細書の導入部に記載した従来技術の解決策に反して、本発明の望ましい実施形態によれば、クライアントは、サーバ111に対して特定のビット・レートでの送信に切替えるように要求するのではなく、サーバに現在のエア・インターフェース帯域幅(すなわち、クライアントがストリーミング・メディアを受信することのできる最大ビット・レート)を知らせて、どの送信ビット・レートに切替えるべきかをその情報に基づいてサーバ111に決定させる。換言すると、クライアント101は、サーバ111に対して帯域幅適応を実行するように要求し、開始点としての現在のダウンリンク帯域幅をサーバ111に与える。
この要求は、RTSP OPTIONS又はRTSP SET_PARAMETERのメッセージを用いて実行することができる。これらのメッセージは、クライアント101及びサーバ111において実施され理解されるべき1つの随意的フィールドであるBandwidthを要求する。Bandwidthというフィールドは、RFC2326(リアル・タイム・ストリーミング・プロトコル)という規格におけるIETF(インターネット・エンジニアリング・タスク・フォース)によって既に指定されている。
クライアント101からサーバ111に送信されるべき、かかるOPTIONSメッセージの一例は、以下のようなものである。
OPTIONS rtsp://example.com/foo RTSP/1.0
Cseq: 421
Content-length: 17
Content-type: text/parameters
Bandwidth: 27000
‘Bandwidth’という新しいフィールドは、現在の利用可能なエア・インターフェース・ダウンリンク帯域幅を示している。OPTIONSメッセージのその他のフィールドは、一般的に規格化され、そのようなものとして知られている。
クライアント101からサーバ111に送信されるべきSET_PARAMETERメッセージの一例は、以下のようなものである。
SET_PARAMETER rtsp://example.com/foo RTSP/1.0
Cseq: 421
Content-length: 17
Content-type: text/parameters
Bandwidth: 27000
やはり、‘Bandwidth’というフィールドは、現在の利用可能なエア・インターフェース・ダウンリンク帯域幅を示している。SET_PARAMETERメッセージのその他のフィールドは、一般的に規格化され、そのようなものとして知られている。
OPTIONS又はSET_PARAMETERのメッセージを受信すると、ストリーミング・サーバ111は、そのメッセージに従って動作する。サーバ111は、(帯域幅フィールド内の)メッセージにおいて、クライアントがストリーミング・メディアを受信することのできる(実際の)現在の最大ビット・レートを入手するので、サーバは、送信ビット・レートをエア・インターフェース帯域幅に最適に適応させるために、帯域幅適応を実行する。サーバ111は、サーバが特定のビット・レートで送信することへのクライアントの要求を盲目的に受け入れる(実行する)か又は無視するかのいずれかを行う、従来技術の帯域幅適応技術に、もはや限定されない。しかし、サーバは、現在の帯域幅を知っているので、サーバは、それとは別に又はそれに加えて、別の帯域幅適応技術を用いることもできる。
例えば、サーバが59kbps、50kbps、及び30kbpsのビット・レートで符号化されたコンテンツを有しており、利用可能なエア・インターフェース帯域幅が突然59.2kbpsから44.8kbpsに落ちる場合、サーバ111は、実際のエア・インターフェース帯域幅を知っているので、(従来技術の場合であれば新しいビット・レートとなっていた)30kbpsの新しい送信ビット・レートを選択する代わりに、新しい送信ビット・レート50kbpsを選択し、更に、送信ビット・レートを50kbpsから正確に44.8kbpsまで又は44.8kbpsの近くまで下げる別の帯域幅適応技術を用いることができる。上述の別の帯域適応技術は、例えば画像ストリームに関しては、いくつかのフレーム(画像)の送信をスキップすることによる時間的適応性を用いることとすることができる。いくつかのフレームの送信をスキップすることによって、画像品質を多大に劣化させることなく、有効サーバ送信レートを50kbpsから44.8kbpsに下げることができる。少なくとも画像品質は、(従来技術の場合であれば新しいビット・レートとなっていた)30kbpsのビット・レートで送信するのと比較してかなり良好なままとなろう。このように、本発明の望ましい実施形態によれば、従来技術と比較して画像品質を改善することができ、かつ、より効率的なエア・インターフェースの利用が可能となる。
従来技術に反して、本発明の望ましい実施形態において、クライアントは、利用可能な個々のサーバのビット・レートを必ずしも知っている必要はないことに着目されたい。これは、例えば、利用可能な複数のビット・レートのいずれかを指定することなくそれらのレートが存在することを単に通信するだけであった、前述のRTSP DESCRIBEメッセージが用いられた場合である。本発明の望ましい実施形態によれば、クライアント装置101は、(サーバが特定のビット・レートでの送信を開始するように要求する代わりに)サーバのビット・レートを適応させる要求と共に現在のダウンリンク・エア・インターフェース帯域幅のみをサーバ111に対して送信してサーバに決定をさせるので、問題は生じない。実際のダウンリンク・エア・インターフェース帯域幅を知っているので、サーバは、最適なビット・ストリーム選択肢(すなわち、(必要ならば)付加的な帯域幅適応技術と共に、最適なビット・レート・ストリームの可能性)を単純に選択する。
既に前述したように、最適な選択肢は、サーバ111によってサポートされる1組のビット・レートから、実際の利用可能なエア・インターフェース帯域幅の隣の最低のビット・レートを選択するか、又は実際の利用可能なエア・インターフェース帯域幅よりわずかに高いビット・レートを選択するが、サーバの送信ビット・レートを実際の利用可能なエア・インターフェース帯域幅に適応させるように(いくつかのフレームの送信をスキップする等の)付加的な帯域幅適応技術を用いることとすることができる。
図2は、本発明の望ましい実施形態に従うクライアント装置101を示す。クライアント装置は、セルラー無線電話ネットワークの移動局とすることができる。クライアント装置101は、処理装置MCU、無線周波数部RF、及びユーザ・インターフェースUIで構成される。無線周波数部RF及びユーザ・インターフェースUIは、処理装置MCUに接続される。ユーザ・インターフェースUIは、通常、ディスプレイ、スピーカ、及び、キーボード(図示せず)で構成され、これらを用いて、ユーザは、装置101を用いることができる。
処理装置MCUは、プロセッサ(図示せず)、メモリ210及びコンピュータ・ソフトウェアで構成される。ソフトウェアは、メモリ210に記憶されている。プロセッサは、ソフトウェアに従って、無線周波数部RFを介したサーバ111からのメッセージ(例えば、RTSP DESCRIBE)の受信及びサーバ111への要求(例えば、OPTIONS、SET_PARAMETER)の送信、受信したストリーミング・メディアのユーザ・インターフェースUI上への表示、及びユーザ・インターフェースUIのキーボードから受け取った入力の読み込み等の、クライアント装置101の動作を制御する。
ソフトウェアは、ストリーミング・クライアント・ソフトウェア・アプリケーション220(以後、クライアント・ソフトウェア220と称する)、RTP層、RTSP層、SDP層、TCP(送信制御プロトコル)層、IP層、及びIP層の下のGPRSプロトコル層、及びその他のより低い層等の必要なプロトコル層を実現するためのプロトコル・スタック230で構成される。更に、ソフトウェアは、クライアント装置101の無線周波数部RFを介してストリーミング・サーバ111から受信したストリーミング・メディアをクライアント装置のプレーヤ(図示せず)で再生する前に一時的に記憶しておくバッファ240を実現するための手段で構成される。
クライアント・ソフトウェア220は、より低い層のアプリケーション・プログラミング・インターフェース(API、図示せず)を介して、プロトコル・スタック230のより低い層から帯域幅の情報を受け取ることができる。例えば、GPRS電話は、瞬間のタイム・スロット構成及び誤り訂正符号化方式をより低い層からアプリケーション層へ信号伝達することができる。この帯域幅の情報に基づいて、元々アプリケーション層に存在しているクライアント・ソフトウェア220は、現在の利用可能なエア・インターフェース・ダウンリンク帯域幅を計算することができる。
UMTS(ユニバーサル移動体通信システム)ネットワークの状況においては、現在の利用可能なエア・インターフェース・ダウンリンク帯域幅を決定する際に、QoS(サービス品質)特性の保証されたビット・レート・パラメータを用いることができる(このことは、かかるパラメータが与えられるその他のネットワークにおいても適用可能である)。更に、現在の利用可能なエア・インターフェース・ダウンリンク帯域幅は、現在「保証された」エア・インターフェース・ダウンリンク帯域幅を意味することができる。これらの場合においては、PDP(パケット・データ・プロトコル)状況の修正後に(又は、PDP状況の最初の起動後に)、クライアント・ソフトウェア220は、送信ビット・レート適応のために(与えられた)保証されたビット・レートをサーバに信号伝達することができる。
QoS特性における保証されたビット・レート・パラメータがいつ利用不可能であろうとも、クライアント・ソフトウェア220は、現在の利用可能なエア・インターフェース・ダウンリンク帯域幅を見積もるために、内部アルゴリズム又はその他の指定されない手段を用いることができる。
望ましい実施形態において、クライアント・ソフトウェア220は、帯域幅の情報を一定の間隔でAPIを介して受け取り、前述の現在のエア・インターフェース帯域幅を計算し、その帯域幅の値を前に記憶された帯域幅の値と比較し、その比較に基づいて、サーバ・ビット・レートを適応させる新たな要求を送信すべきか否かに関する決定を行う。ストリーミング・クライアント・ソフトウェア220は、また、現在の帯域幅の値をメモリ210に記憶して、それは、クライアント・ソフトウェアがAPIを介して帯域幅の情報を次回に受け取るときに比較がなされる、前に記憶された帯域幅の値となる。
より低い層のAPIから帯域幅の情報における変化を受け取るときに、クライアント・ソフトウェア220が実行することのできるアルゴリズムとして、上述のことを表すことができる。クライアント・ソフトウェア220は、帯域幅の情報を一定の間隔でポーリングする。
そのアルゴリズムは、以下のように表すことができる。
If (Current_Bandwidth ≠ Previous_Bandwidth){
Start timer Bandwidth_change_timer;
If (Bandwidth_change_timer > k seconds)
Send OPTIONS or SET_PARAMETER message with Bandwidth field.
}
このアルゴリズムにおいては、現在の帯域幅の値は、アルゴリズムが起動される前に利用可能な帯域幅を現す、前に記憶された帯域幅の値と比較される。2つの値が異なる場合には、2つの可能性が存在する。
1)現在の帯域幅<前の帯域幅。これは、帯域幅減少の状況である。
2)現在の帯域幅>前の帯域幅。これは、帯域幅増加の状況である。
状況1及び状況2のいずれにおいても、動作が起こされ、OPTIONS又はSET_PARAMETERのメッセージがクライアント101からサーバ111に送信される。送信すべきメッセージは、(既に前に示したように)RTSPプロトコルに従ってクライアント・ソフトウェア220によって生成され、クライアント装置101の無線周波数部RFを介してサーバ111に送信される。
帯域幅は、非常に頻繁に変化し得る。短い時間内における過度に多くのメッセージ送信及びその結果生じる不必要なサーバの動作を避けるために、タイマー(Bandwidth_change_timer)が、認知された帯域幅の変化の際に始動される。現在の帯域幅の値(Current_Bandwidth)が所定の適当な量の時間、すなわちk秒間持続して始めて、OPTIONS又はSET_PARAMETERのメッセージが送信される。適当な量の時間は、例えば、1又は2秒とすることができる。
図3は、本発明の望ましい実施形態に従うストリーミング・サーバ111を示す。ストリーミング・サーバ111は、中央演算処理装置CPU、第1のメモリ310、IPネットワーク・インターフェース350、及び第2のメモリ360で構成される。第1のメモリ310、IPネットワーク・インターフェース350、及び第2のメモリ360は、中央演算処理装置CPUに接続される。
中央演算処理装置CPUは、第1のメモリ310に記憶されているコンピュータ・ソフトウェアに従って、クライアント装置101から受信した要求の処理、及び第2のメモリ(ディスク)360に記憶されている画像及び/又は音声のストリームのIPネットワーク・インターフェース350を介したクライアント装置101への送信等の、ストリーミング・サーバ111の動作を制御する。
ソフトウェアは、ストリーミング・サーバ・ソフトウェア・アプリケーション320(以後、サーバ・ソフトウェア320と称する)、RTP層、RTSP層、SDP層、TCP層、IP層、及びより低いプロトコル層等の必要なプロトコル層を実現するためのプロトコル・スタック330で構成される。
サーバ・ソフトウェア320は、前述のRTSP DESCRIBEメッセージを生成し、このメッセージ内で、ストリーミング・セッションにおいて用いるべき可能なビット・レートをストリーミング・サーバ111からクライアント101に通信することができる。メッセージは、IPネットワーク・インターフェース350を介して送信される。更に、クライアント装置101がサーバ111にその送信ビット・レートを適応させるように要求する手段であるOPTIONS又はSET_PARAMETERのメッセージ(いずれが用いられるにしても)は、IPネットワーク・インターフェース350を介してサーバ111において受信される。サーバ・ソフトウェア320は、要求を処理し、適切な動作を取る。
以下では、本発明の代替実施形態を記載する。
一代替実施形態において、ストリーミング・セッションで用いるべき可能なサーバ・ビット・レートの選択肢をセッションの設定の間に通信するために、以下のSDPボディで構成されるRTSP DESCRIBEメッセージを、サーバ111からクライアント101に送信する(画像部のみを示し、音声は示さず)。
m=video 0 RTP/AVP 98
b=AS:40
a=rtpmap:98 MP4V-ES/90000
a=control:trackID=4
a=fmtp:98 profile-level-id=8; config=01010000012000884006682C2090A21F
a=range:npt=0-150.2
a=alt-default-id:4
a=alt:3:b=AS:18
a=alt:3:a=control:trackID=3
a=alt:5:b=AS:27
a=alt:5:a=control:trackID=5
このRTSP DESCRIBEメッセージは、Proposal for Bandwidth Selection in PSSと題する従来技術の出版物(本出願の導入部を参照されたい)において示されている従来技術のRTSP DESCRIBEメッセージに相当する。
この模範的なSDPボディにおいて、第5の属性行(a行)は、デフォルトの選択肢がトラック4であることを示しており、そのデフォルトのビット・レートは、b行が示すように40kbpsである。SDPは、2つの別のトラックであるトラック3及びトラック5も規定する。これらのデフォルトのビット・レートは、それぞれ、18kbps及び27kbpsである。これらのトラックは、異なるコーデックと関係がある。単一のトラックは、単一の(マルチレート)コーデックのみを用いて符号化されたストリームを有する。従って、トラック4は、例えば、或るコーデックを用いて符号化された一連の異なるビット・レートの画像ストリームを有し、トラック5は、別のコーデックを用いて符号化された一連の異なるビット・レートの画像ストリームを有するようにすることができる。
一旦ストリーミング・セッションが確立すると、この実施形態においては、OPTIONS及びSET_PARAMETERのメッセージを用いることができる。しかしながら、特にコーデックの変更が望まれる場合には、現在の利用可能なダウンリンク・インターフェース帯域幅は、PAUSE/PLAYメッセージ対を用いて、サーバ111に示すことができる。まず、PAUSEメッセージが、現在の送信を中止するために、クライアント101からサーバ111に送信される。引き続き、帯域幅の情報を有する前述の「帯域幅」フィールドで構成されるPLAYメッセージが、クライアント101からサーバ111に送信される。
クライアント101からサーバ111に送信すべきPAUSEメッセージの一例は、以下のようなものである。
PAUSE rtsp://example.com/foo RTSP/1.0
CSeq: 6
Session: 354832
クライアント101からサーバ111に送信すべき引き続くPLAYメッセージの一例は、以下のようなものである。
PLAY rtsp://example.com/foo RTSP/1.0
CSeq: 7
Session: 354832
Bandwidth: 27000
Range: npt=28.00-
‘Bandwidth’というフィールドは、現在の利用可能なダウンリンク・エア・インターフェース帯域幅を示す。PAUSE及びPLAYのメッセージのその他のフィールドは、一般的に規格化され、そのようなものとして知られている。
サーバの送信ビット・レートの切替えは、マルチレート・コーデックの異なるビット・レート間の切替えを伴い、或る送信ビット・レートから別の送信ビット・レートへの切替えの間にコーデックを変更することはできない、OPTIONS及びSET_PARAMETERのメッセージの利用に反して、PAUSE/PLAY法は、コーデックの変更を可能とする。従って、本発明の代替実施形態において、サーバ111は、受信した現在のダウンリンク・エア・インターフェース帯域幅に基づいて、ビット・レート及びコーデックを変更する。例えば、サーバは、トラック4からトラック5に変わることができる。
本発明は、エア・インターフェース帯域幅の変化に対処するための手段を提供する。ストリーミング・セッションにおいて、ストリーミング・サーバの送信ビット・レートを現在のダウンリンク・エア・インターフェース帯域幅に適応させることによって、アプリケーション層のパケット損失を減らすことができる。望ましい実施形態は、エア・インターフェース帯域幅の情報を伝達するメッセージをクライアント装置からストリーミング・サーバに送信するに際して、TCP上のRTSP又は別の信頼できるプロトコル上のRTSPを好適に用いる。ゆえに、ストリーミング・サーバにおけるメッセージの受信は、基本的に保証することができる。
前述の様々な例においては、画像部のみを示してきたが、画像に関して示したことは音声に対しても同様に適用可能であることは明らかである。
また、「帯域幅」と名付けられたメッセージ・フィールドを示してきた。しかしながら、このフィールドは「帯域幅」と名付けられる必要はなく、クライアント装置及びストリーミング・サーバの両者がそのフィールドの意味、すなわちクライアント装置における利用可能な帯域幅、を理解している限りは、別の名前でも良い。特に、QoS特性(UMTS及びその他の適用可能なネットワーク)の上述のビット・レート・パラメータに基づいて、保証されたビット・レートを決定した場合には、例えば、「最大ビット・レート」又は「保証ビット・レート」と名付けられたフィールドを用いることができる。
また、あらかじめ記録されたメディア(画像及び/又は音声)・ファイルを用いてストリーミング・メディアを流すことを提案してきた。しかしながら、本発明は、ライブ画像及び/又はライブ音声をストリーミング・サーバにおいてリアルタイムに符号化し、クライアント装置に送信する、ライブ供給ストリーミングにも同様に適用可能である。
あらかじめ記録されたメディア・ファイルと関連して、或るストリーミング・サーバ送信ビット・レートから別のビット・レートへの変更は、実際問題としては、(第1のビット・レートで送信できるように符号化されたメディア・コンテンツで構成された)第1のあらかじめ記録されたビット・ストリームの送信から(第1のビット・レートとは異なる第2のビット・レートで送信できるように符号化された同じメディア・コンテンツで構成された)第2のあらかじめ記録されたビット・ストリームの送信への切替えを意味することができる。メディア・コンテンツがより高いビット・レートで符号化された場合には、より低いビット・レートでの符号化に比較して、より多くのビットが符号化に用いられたことを、このことは意味する。これは、通常、より良好な画像及び/又は音声の品質をもたらす。
本発明の更に別の実施形態は、更に、図1に示したエンドツーエンド・ストリーミング・システムに関連する。この実施形態において、ストリーミング・クライアント101は、それが接続されているネットワークの種類(又は、接続、すなわち、PDP状況の種類)をストリーミング・サーバ111に通信すべきであることが理解された。すなわち、例えば、以下のような2種類の接続が存在してもよい。
1)QoS保証接続
2)非QoS保証(又は、ベスト・エフォート型)接続
QoS保証接続は、クライアント101に対して保証されたビット・レート(すなわち、帯域幅)を提供するのに対し、非QoS保証接続は、クライアント101に対して保証されないビット・レートを提供する。
ストリーミング・クライアント101(例えば、移動局)は、ストリーミング・セッションの間に異なる種類のネットワークの間でローミングを実行して、以下のような動的なシナリオを生じることも可能である。クライアントは、QoS保証ネットワークを介した接続から始まり、しばらくした後に非QoS保証ネットワークにローミングする。またその逆もある。クライアント101がどの種類のネットワーク接続を用いているかをサーバ111が知らない場合には、ネットワーク間のローミングは、ストリーミング・メディアの品質(関連するストリーミング・アプリケーションの性能)に影響を与える可能性が非常に高い。
従って、改善された帯域幅(レート)適応を可能とするために、ストリーミング・サーバ111は、この実施形態において、現在の潜在的なネットワークQoS情報(すなわち、ネットワーク(又は、接続)の種類)を知らされている。このことによって、サーバ111は、用いるべきレート適応法に関するより正確な仮定及び決定をなすことができる。
メッセージ(例えば、信号伝達メッセージ)をクライアント101からサーバ111に転送することによって、ストリーミング・サーバ111にQoS情報を知らせることができる。メッセージは、(あらゆる適用可能な方法による)RTSPプロトコルによって又はRTCP(リアルタイム制御プロトコル)プロトコルによってサーバに伝達することができる。メッセージは、以下の種類のものとすることができる。
1)「QoS保証」 −現在のネットワーク接続が保証されたビット・レートを提供していることを示すためにこのメッセージを用いる。
2)「QoS非保証」 −現在のネットワーク接続が保証されていない(又は、ベスト・エフォートの)ビット・レートを提供していることを示すためにこのメッセージを用いる。
(動作が同じである限りは、実際のメッセージ名は、異なっていてもよい。)
このメッセージ(Qos保証又はQoS非保証)は、接続の寿命の様々な瞬間において、ストリーミング・クライアント101がストリーミング・サーバ111に対して送信することができる。(どのネットワークの種類がメディア・ストリームを伝達するかを通信するために)PDP状況の起動後に、及び/又はPDP状況の再ネゴシエーション後に、及び/又はネットワーク管理の結果として又は異なる種類のネットワークへのユーザ・ローミングの結果として接続を向上させるか又は劣化させるときに、少なくとも、メッセージを送信することができる。
別の代替実施形態において、本特許出願の前述にて既に定義したように‘Bandwidth’というパラメータ(又は、保証されたビット・レートに対する意味上等価なパラメータ)の既存の定義を用いて、クライアント101からサーバ111にQoS情報を送信する。かかるパラメータの適用は、以下の意味規則を用いて、拡張することができる。
a)クライアントからサーバに送信される、値>0を有する‘Bandwidth’パラメータは、通信される帯域幅がQoS保証ネットワークを介する(すなわち、ネットワークが保証ビット・レートを提供する)ことを意味する。
b)クライアントからサーバに送信される、値=0を有する‘Bandwidth’パラメータは、ネットワークが非保証ビット・レートを提供することを意味する。
換言すると、‘Bandwidth’というパラメータの値がゼロより大、例えば27000、である場合には、このことは、現在の利用可能なダウンリンク・エア・インターフェース帯域幅が27kbpsであり、更に、ネットワークがQoS保証されていることを意味することになる。それに対し、値がゼロである場合には、このことは、ネットワークがQoS保証されていないことを意味することになる。
‘Bandwidth’というパラメータの値は、RTSP OPTIONS又はRTSP SET_PARAMETERのメッセージ等の前述の実施形態において示したメッセージ内で、又は、例えば別のRTSP又はRTCPのメッセージとすることができる別の適当なメッセージ内で伝達することができる。これらのメッセージのいずれも、‘Bandwidth’というパラメータに加えて、明確な「QoS保証」又は「非QoS保証」のヘッダーを含むことができる。これとは別に、ヘッダー(「QoS保証」又は「非QoS保証」)は、現在の利用可能なダウンリンク・エア・インターフェース帯域幅に関する情報を含んでいるメッセージとは異なるメッセージを介して伝達することができる。
保証されたビット・レート又は保証されないビット・レートが提供されているか否かをサーバ111が知っているという事実は、サーバ111が(帯域幅適応法に関連する)以下のような仮定及び決定をなすことの補助となる。
問題となっているネットワークがQoS保証されている場合には、
−クライアントの通信する帯域幅の値及びRTCP受信機報告において利用可能な情報は、決定をなす際に、考慮することができる。
そうでない場合には、
−RTCP受信機報告において利用可能な情報のみを、考慮することができる。
RTCP受信機報告は、クライアントからサーバに送信されるパケットである。それらのパケットは、クライアント側におけるメディア受信の品質に関連する情報(例:パケット損失及び遅延ジッターに関する情報)を含む。
本発明の一実施形態によれば、ストリーミング・サーバは、移動オペレータのネットワークの外側に(すなわち、公衆インターネット内に)置かれる。この実施形態において、移動ネットワーク・ベアラはQoS保証されているが、ストリーミング・サーバと移動ネットワークの入り口との間のネットワーク・トランクは、QoS保証されていない(すなわち、ベスト・エフォートである)。かかる場合においては、組み合わさったネットワーキングのシナリオ(QoS保証+非QoS保証)が存在する。サーバは、エンドツーエンド・ネットワーク・チャンネルの実際の帯域幅を計算するために、ストリーミング・クライアントから直接来る帯域幅の情報とRTCP受信機報告によってサーバ自身により計算される帯域幅の見積もりとの間の不整合(すなわち、逸脱)を利用することができる。従って、サーバは、適切な帯域幅適応動作を取ることができる。
本発明の特定の実施及び実施形態を記載してきた。本発明は、上述の実施形態の詳細に限定されるのではなく、本発明の特徴から逸脱せずに均等な手段を用いて別の実施形態で実施することができることは、当業者には明らかである。本発明の範囲は、添付の特許請求の範囲によってのみ限定される。
メディアをストリーミングすることのできる通信システムを示す図である。 本発明の望ましい実施形態に従うクライアント装置を示す図である。 本発明の望ましい実施形態に従うストリーミング・サーバを示す図である。

Claims (37)

  1. エア・インターフェースを介してストリーミング・サーバから移動クライアント装置にメディアをパケット交換ストリーミングするための方法であって、
    ダウンリンク・エア・インターフェース帯域幅における変化を通知するステップと、
    ストリーミング・サーバ送信ビット・レートを適応させるための要求を前記移動クライアント装置から前記ストリーミング・サーバに送信するステップと、
    前記ストリーミング・サーバにおいて前記要求を受信するステップと、
    現在のダウンリンク・エア・インターフェース帯域幅及び前記ストリーミング・サーバ送信ビット・レートの前記適応が前記現在のダウンリンク・エア・インターフェース帯域幅に従って実行されることを前記ストリーミング・サーバに示す前記要求に従って前記ストリーミング・サーバ送信ビット・レートを適応させるステップと、
    で構成される方法。
  2. 前記現在のダウンリンク・エア・インターフェース帯域幅は、前記移動クライアント装置がデータを受信することのできる最大ビット・レートを示す、請求項1に記載の方法。
  3. 前記ストリーミング・サーバは、移動体通信ネットワークを介して前記移動クライアント装置にメディア・ストリームを送信する、請求項1に記載の方法。
  4. 前記ストリーミング・サーバは、前記移動体通信ネットワークに接続されたIP(インターネット・プロトコル)ベースのネットワークに対するIP接続を有する、請求項3に記載の方法。
  5. 前記移動体通信ネットワークは、GPRS(汎用パケット無線サービス)ネットワークのような移動パケット無線ネットワークである、請求項3に記載の方法。
  6. 前記メディア・ストリームは、画像ストリーム、音声ストリーム、マルチメディア・ストリームの内の1つで構成される、請求項3に記載の方法。
  7. 前記エア・インターフェースは、前記移動クライアント装置を前記移動体通信ネットワークに接続する、請求項3に記載の方法。
  8. 前記ストリーミング・サーバ送信ビット・レートの前記適応は、第1の送信ビット・レートでの送信から前記第1の送信ビット・レートとは異なる第2の送信ビット・レートでの送信に前記ストリーミング・サーバを切替えることによって実行される、請求項1に記載の方法。
  9. 前記ストリーミング・サーバ送信ビット・レートの前記適応は、第1のビット・レートで符号化される第1のメディア・ストリームの送信から前記第1のビット・レートとは異なる第2のビット・レートで符号化される第2のメディア・ストリームの送信に前記ストリーミング・サーバを切替えることによって実行される、請求項1に記載の方法。
  10. 前記メディア・ストリームは、あらかじめ記録されたメディア・ファイルの部分を形成する、請求項9に記載の方法。
  11. 前記メディア・ストリームは、ライブ・ストリーミング・メディア送信の部分を形成する、請求項9に記載の方法。
  12. 前記第1及び第2のビット・レートは、マルチレート・コーデックによって与えられる、請求項9に記載の方法。
  13. 前記現在のダウンリンク・エア・インターフェース帯域幅より高いビット・レートで符号化されるメディア・ストリームが、送信のために選択され、前記ストリーミング・サーバ送信ビット・レートは、付加的な適応手段によって前記現在のダウンリンク・エア・インターフェース帯域幅に一致するように適応される、請求項9に記載の方法。
  14. 前記付加的な適応手段は、前記ストリーミング・サーバによる動的な適応で構成される、請求項13に記載の方法。
  15. 前記動的な適応は、前記ストリーミング・サーバ送信ビット・レートを前記現在のダウンリンク・エア・インターフェース帯域幅に適応させるために前記メディア・ストリームの一部の送信をスキップすることによる時間的適応性を用いることで構成される、請求項14に記載の方法。
  16. 前記メディア・ストリームの一部の送信をスキップすることは、いくつかの画像フレームの送信をスキップすることで構成される、請求項15に記載の方法。
  17. 前記ストリーミング・サーバ送信ビット・レートを適応させるために、前記現在のダウンリンク・エア・インターフェース帯域幅の隣の最低のストリーミング・サーバ送信ビット・レートが、1組の利用可能なストリーミング・サーバ送信ビット・レートから、送信のために選択される、請求項1に記載の方法。
  18. 前記移動クライアント装置及び前記ストリーミング・サーバは、継続中のストリーミング・セッションを有し、ダウンリンク・エア・インターフェース帯域幅における変化を通知する前記ステップは、前記継続中のストリーミング・セッションの間に生じる、請求項1に記載の方法。
  19. 前記ストリーミング・サーバ送信ビット・レートを適応させるための前記要求は、前記ダウンリンク・エア・インターフェース帯域幅における前記変化を通知するステップに反応して生成され送信される、請求項1に記載の方法。
  20. 前記ストリーミング・サーバ送信ビット・レートを適応させるための前記要求は、前記現在のダウンリンク・エア・インターフェース帯域幅が所定の時間持続した後でのみ送信される、請求項1に記載の方法。
  21. 前記ストリーミング・サーバ送信ビット・レートを適応させるための前記要求は、アプリケーション層の要求である、請求項1に記載の方法。
  22. 前記移動クライアント装置は、セルラー移動電話で構成される、請求項1に記載の方法。
  23. 前記現在のダウンリンク・エア・インターフェース帯域幅は、現在保証されているエア・インターフェース・ダウンリンク帯域幅を示す、請求項1に記載の方法。
  24. ダウンリンク・エア・インターフェース帯域幅における前記変化を通知する前記ステップは、アプリケーション・プログラミング・インターフェース(API)によって生じる、請求項1に記載の方法。
  25. 前記要求は、前記現在のダウンリンク・エア・インターフェース帯域幅を示すためのBandwidthフィールドのようなメッセージ・フィールドで構成される、請求項1に記載の方法。
  26. 前記メッセージ・フィールドは、メッセージ・ヘッダー・フィールドである、請求項25に記載の方法。
  27. ストリーミング・セッションの設定において、利用可能な異なるビット・レートのメディア・ストリームに関する情報が、前記移動クライアント装置に通信される、請求項1に記載の方法。
  28. ストリーミング・セッションの設定において、複数のビット・レート又はそれらのいずれかを特定せずに利用可能な複数のビット・レート・ストリームが存在することが、前記クライアント装置に通信される、請求項1に記載の方法。
  29. 前記情報は、RTSP(リアル・タイム・ストリーミング・プロトコル) DESCRIBEメッセージのSDP(セッション記述プロトコル)ボディにおいて、前記ストリーミング・サーバから前記クライアント装置に通信される、請求項27又は28に記載の方法。
  30. 前記要求は、RTSP OPRIONS、RTSP SET_PARAMETER、RTSP PLAYメッセージの内の1つにおいて送信される、請求項1に記載の方法。
  31. 前記ストリーミング・サーバ送信ビット・レートを適応させる際に、コーデックの変更が実行される、請求項1に記載の方法。
  32. エア・インターフェースを介してストリーミング・サーバからパケット交換されるストリーミング・メディアを受信するための移動クライアント装置であって、
    ダウンリンク・エア・インターフェース帯域幅における変化を通知するための手段と、
    ストリーミング・サーバ送信ビット・レートを適応させるための要求であって、現在のダウンリンク・エア・インターフェース帯域幅に従って前記ストリーミング・サーバ送信ビット・レートを適応させるために前記現在のダウンリンク・エア・インターフェース帯域幅を前記ストリーミング・サーバに示すための情報を含む要求を前記ストリーミング・サーバに送信するための手段と、
    で構成される移動クライアント装置。
  33. エア・インターフェースを介して移動クライアント装置にパケット交換されるストリーミング・メディアを送信するためのストリーミング・サーバであって、
    ストリーミング・サーバ送信ビット・レートを適応させるための要求であって、現在のダウンリンク・エア・インターフェース帯域幅を示す情報を含む要求を受信するための手段と、
    前記現在のダウンリンク・エア・インターフェース帯域幅に従って前記ストリーミング・サーバ送信ビット・レートを適応させるための手段と、
    で構成されるストリーミング・サーバ。
  34. エア・インターフェースを介してストリーミング・サーバから移動クライアント装置にメディアをパケット交換ストリーミングするための、前記ストリーミング・サーバ及び前記移動クライアント装置で構成される、システムであって、
    前記移動クライアント装置においては、
    ダウンリンク・エア・インターフェース帯域幅における変化を通知するための手段と、
    ストリーミング・サーバ送信ビット・レートを適応させるための要求であって、現在のダウンリンク・エア・インターフェース帯域幅を前記ストリーミング・サーバに示すための情報を含む要求を前記ストリーミング・サーバに送信するための手段と、
    で構成され、
    前記ストリーミング・サーバにおいては、
    前記要求を受信するための手段と、
    前記現在のダウンリンク・エア・インターフェース帯域幅に従って前記ストリーミング・サーバ送信ビット・レートを適応させるための手段と、
    で更に構成されるシステム。
  35. 移動クライアント装置において実行可能なコンピュータ・プログラム製品であって、
    前記移動クライアント装置をして、ダウンリンク・エア・インターフェース帯域幅における変化を通知せしめることと、
    前記移動クライアント装置をして、ストリーミング・サーバ送信ビット・レートを適応させるための要求であって、現在のダウンリンク・エア・インターフェース帯域幅に従って前記ストリーミング・サーバ送信ビット・レートを適応させるために前記現在のダウンリンク・エア・インターフェース帯域幅を前記ストリーミング・サーバに示すための情報を含む要求を前記ストリーミング・サーバに送信せしめることと、
    をするためのプログラム・コードで構成されるコンピュータ・プログラム製品。
  36. ストリーミング・サーバにおいて実行可能なコンピュータ・プログラム製品であって、
    前記ストリーミング・サーバをして、ストリーミング・サーバ送信ビット・レートを適応させるための要求であって、現在のダウンリンク・エア・インターフェース帯域幅を示す情報を含む要求を受信せしめることと、
    前記ストリーミング・サーバをして、前記現在のダウンリンク・エア・インターフェース帯域幅に従って前記ストリーミング・サーバ送信ビット・レートを適応せしめることと、
    をするためのプログラム・コードで構成されるコンピュータ・プログラム製品。
  37. 前記ストリーミング・サーバは、前記ストリーミング・サーバ送信ビット・レートの前記適応において用いられるQoS(サービス品質)情報を備えており、前記QoS情報は、保証される帯域幅が前記ストリーミング・メディアに対して与えられるか否かを示す、請求項1に記載の方法。
JP2004537180A 2002-09-23 2003-09-19 帯域幅適応 Expired - Lifetime JP4927333B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
FI20021698A FI116498B (fi) 2002-09-23 2002-09-23 Kaistanleveyden mukauttaminen
FI20021698 2002-09-23
US10/369,098 2003-02-18
US10/369,098 US7346007B2 (en) 2002-09-23 2003-02-18 Bandwidth adaptation
PCT/FI2003/000686 WO2004028095A1 (en) 2002-09-23 2003-09-19 Bandwidth adaptation

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2009292546A Division JP2010136395A (ja) 2002-09-23 2009-12-24 帯域幅適応

Publications (2)

Publication Number Publication Date
JP2006500808A true JP2006500808A (ja) 2006-01-05
JP4927333B2 JP4927333B2 (ja) 2012-05-09

Family

ID=8564634

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2004537180A Expired - Lifetime JP4927333B2 (ja) 2002-09-23 2003-09-19 帯域幅適応
JP2009292546A Pending JP2010136395A (ja) 2002-09-23 2009-12-24 帯域幅適応

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2009292546A Pending JP2010136395A (ja) 2002-09-23 2009-12-24 帯域幅適応

Country Status (6)

Country Link
US (1) US7346007B2 (ja)
JP (2) JP4927333B2 (ja)
AT (1) ATE504135T1 (ja)
DE (1) DE60336572D1 (ja)
ES (1) ES2361159T3 (ja)
FI (1) FI116498B (ja)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007288781A (ja) * 2006-04-19 2007-11-01 Samsung Electronics Co Ltd QoS保証方法及び装置
JP2008515312A (ja) * 2004-10-04 2008-05-08 ノキア コーポレイション Ipセッションに対するリソース予約の変更
JP2009537089A (ja) * 2006-05-11 2009-10-22 サムスン エレクトロニクス カンパニー リミテッド データ通信のQoS保証方法及び装置
JP2011526098A (ja) * 2008-06-06 2011-09-29 テレフオンアクチーボラゲット エル エム エリクソン(パブル) 帯域幅を予約するための方法及びユーザ機器
US8078173B2 (en) 2006-12-26 2011-12-13 Fujitsu Limited Data transfer system, approach notification system and data transfer method
JP2012049914A (ja) * 2010-08-27 2012-03-08 Kyocera Corp 通信装置
WO2012063417A1 (ja) 2010-11-10 2012-05-18 パナソニック株式会社 端末及びコーデックモード選択方法
JP2013005253A (ja) * 2011-06-17 2013-01-07 Nakayo Telecommun Inc Ip電話装置およびip電話装置を用いた通信方法
JP2013509040A (ja) * 2009-10-16 2013-03-07 クゥアルコム・インコーポレイテッド マルチメディアを適応的にストリーミングすること
JP2013524724A (ja) * 2010-04-13 2013-06-17 クアルコム,インコーポレイテッド ワイヤレス通信システム内でのストリーミング通信セッション中における物理レイヤネットワーク間の選択的遷移
JP2013528998A (ja) * 2010-04-20 2013-07-11 クアルコム,インコーポレイテッド ネットワークゾーン認識に基づくマルチメディアアプリケーションのサポート
JP2013532410A (ja) * 2010-05-14 2013-08-15 クゥアルコム・インコーポレイテッド ネットワークを介したマルチメディアコンテンツの配信のためのレート適応方法
US8601153B2 (en) 2009-10-16 2013-12-03 Qualcomm Incorporated System and method for optimizing media playback quality for a wireless handheld computing device
JP2014527748A (ja) * 2011-08-09 2014-10-16 アルカテル−ルーセント ビデオコンテンツをストリーミングするための方法、そのような方法を実現するエッジノードおよびクライアントエンティティ
JP2015233288A (ja) * 2006-07-14 2015-12-24 クゥアルコム・インコーポレイテッドQualcomm Incorporated 無線ネットワークにおける呼の確立と維持
JP2016181919A (ja) * 2011-06-09 2016-10-13 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 通信端末装置、ネットワークノード及び通信方法
US9473541B2 (en) 2013-11-29 2016-10-18 Brother Kogyo Kabushiki Kaisha Communication device and non-transitory computer-readable medium
US9473552B2 (en) 2013-11-29 2016-10-18 Brother Kogyo Kabushiki Kaisha Preventing omission of data in a remote conference

Families Citing this family (105)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7191246B2 (en) * 2001-07-18 2007-03-13 Sharp Laboratories Of America, Inc. Transmission rate selection for a network of receivers having heterogenous reception bandwidth
WO2004072766A2 (en) * 2003-02-13 2004-08-26 Nokia Corporation Rate adaptation method and device in multimedia streaming
SE0301053D0 (sv) * 2003-04-07 2003-04-07 Ericsson Telefon Ab L M Method and system in a communications network
US7649898B1 (en) * 2003-05-27 2010-01-19 Cisco Technology, Inc. Converting media streams in a communication system
JP4789401B2 (ja) * 2003-06-25 2011-10-12 トヨタ自動車株式会社 コンテンツ配信システム
CA2536391A1 (en) * 2003-08-21 2005-03-10 Vidiator Enterprises Inc. Quality of experience (qoe) metrics for wireless communication networks
JP4679049B2 (ja) 2003-09-30 2011-04-27 パナソニック株式会社 スケーラブル復号化装置
US7570590B2 (en) * 2003-10-28 2009-08-04 Alcatel-Lucent Usa Inc. Decision tree logic for determining the optimal value for QoS uplink and downlink maximum bitrate attributes
US7483436B2 (en) * 2003-10-28 2009-01-27 Samsung Electronics Co., Ltd. System and method for establishing mobile station-to-mobile station packet data calls directly between base stations of a wireless network
US7650111B2 (en) * 2003-12-10 2010-01-19 At&T Intellectual Property I, L.P. Methods, systems, and computer program products for transmitting streaming media to a mobile terminal using the bandwidth associated with a wireless network
US7069014B1 (en) * 2003-12-22 2006-06-27 Sprint Spectrum L.P. Bandwidth-determined selection of interaction medium for wireless devices
US7778326B1 (en) * 2003-12-23 2010-08-17 At&T Intellectual Property Ii, L.P. System and method for dynamically determining multimedia transmission based on communication bandwidth
US8868772B2 (en) * 2004-04-30 2014-10-21 Echostar Technologies L.L.C. Apparatus, system, and method for adaptive-rate shifting of streaming content
KR100865955B1 (ko) 2004-05-12 2008-10-30 노키아 코포레이션 멀티미디어 스트리밍의 속도 적응을 위한 버퍼 레벨시그널링
US7542435B2 (en) * 2004-05-12 2009-06-02 Nokia Corporation Buffer level signaling for rate adaptation in multimedia streaming
US10862994B1 (en) 2006-11-15 2020-12-08 Conviva Inc. Facilitating client decisions
EP1638083B1 (en) * 2004-09-17 2009-04-22 Harman Becker Automotive Systems GmbH Bandwidth extension of bandlimited audio signals
GB0421114D0 (en) * 2004-09-22 2004-10-27 Orange Personal Comm Serv Ltd Radio access data packet network and method
CN101233727A (zh) * 2005-06-20 2008-07-30 诺基亚公司 在3GPP2-3GPP和3GPP2-3GPP2会话多媒体交换中提供可交互操作的QoS参数及其信令的方法、装置和计算机程序产品
KR100677462B1 (ko) 2005-06-23 2007-02-02 엘지전자 주식회사 스트리밍서비스를 위한 휴대단말기의 대역폭산정시스템 및방법
CN100426721C (zh) * 2005-06-30 2008-10-15 华为技术有限公司 充分利用宽带无线接入设备空口带宽的方法和装置
JP5080481B2 (ja) * 2005-10-04 2012-11-21 テレフオンアクチーボラゲット エル エム エリクソン(パブル) Ip接続の無線基地局に対する無線ネットワーク制御局の選択
US20070083482A1 (en) * 2005-10-08 2007-04-12 Unmesh Rathi Multiple quality of service file system
WO2007048013A2 (en) * 2005-10-20 2007-04-26 Starent Networks Corporation System and method for a policy enforcement point interface
US8612619B2 (en) * 2006-03-31 2013-12-17 Alcatel Lucent Method and apparatus for improved multicast streaming in wireless networks
US7613444B2 (en) * 2006-04-28 2009-11-03 Telefonaktiebolaget Lm Ericsson (Publ) Dynamic building of monitored set
US8862680B2 (en) * 2006-05-01 2014-10-14 The Boeing Company Methods and systems for data prioritization
US20070258418A1 (en) * 2006-05-03 2007-11-08 Sprint Spectrum L.P. Method and system for controlling streaming of media to wireless communication devices
US7941503B2 (en) * 2006-10-23 2011-05-10 Alcatel-Lucent Usa Inc. System and method for providing personalized multimedia broadcasting over a mobile telecommunications radio area network
US7962637B2 (en) * 2006-11-03 2011-06-14 Apple Computer, Inc. Dynamic adjustments of video streams
US8874725B1 (en) 2006-11-15 2014-10-28 Conviva Inc. Monitoring the performance of a content player
US8751605B1 (en) 2006-11-15 2014-06-10 Conviva Inc. Accounting for network traffic
US8489923B1 (en) 2006-11-15 2013-07-16 Conviva Inc. Detecting problems in content distribution
US9264780B1 (en) 2006-11-15 2016-02-16 Conviva Inc. Managing synchronized data requests in a content delivery network
US8578045B2 (en) * 2007-02-14 2013-11-05 Microsoft Corporation Adaptive bandwidth utilization
US8180358B2 (en) * 2007-02-15 2012-05-15 Motorola Solutions, Inc. Joining a session in a communication network supporting multimedia group calls
US8139487B2 (en) 2007-02-28 2012-03-20 Microsoft Corporation Strategies for selecting a format for data transmission based on measured bandwidth
GB2448762B (en) * 2007-04-27 2009-09-30 Nec Corp Scheduliing information method and related communications devices
US8180029B2 (en) 2007-06-28 2012-05-15 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US11095583B2 (en) 2007-06-28 2021-08-17 Voxer Ip Llc Real-time messaging method and apparatus
US8190750B2 (en) * 2007-08-24 2012-05-29 Alcatel Lucent Content rate selection for media servers with proxy-feedback-controlled frame transmission
JP5625353B2 (ja) * 2008-01-16 2014-11-19 日本電気株式会社 通信端末、表示画像制御方法、プログラムおよび記録媒体
US20080259796A1 (en) * 2008-04-17 2008-10-23 Glen Patrick Abousleman Method and apparatus for network-adaptive video coding
US8325800B2 (en) 2008-05-07 2012-12-04 Microsoft Corporation Encoding streaming media as a high bit rate layer, a low bit rate layer, and one or more intermediate bit rate layers
US8379851B2 (en) 2008-05-12 2013-02-19 Microsoft Corporation Optimized client side rate control and indexed file layout for streaming media
US7860996B2 (en) * 2008-05-30 2010-12-28 Microsoft Corporation Media streaming with seamless ad insertion
US9047236B2 (en) 2008-06-06 2015-06-02 Amazon Technologies, Inc. Client side stream switching
US9167007B2 (en) * 2008-06-06 2015-10-20 Amazon Technologies, Inc. Stream complexity mapping
US8107438B1 (en) 2008-06-18 2012-01-31 Sprint Spectrum L.P. Method for initiating handoff of a wireless access terminal based on the reverse activity bit
US8265140B2 (en) * 2008-09-30 2012-09-11 Microsoft Corporation Fine-grained client-side control of scalable media delivery
KR101074179B1 (ko) 2008-10-28 2011-10-14 에스케이 텔레콤주식회사 복합 대역폭 측정 시스템 및 그 방법
US20100128130A1 (en) * 2008-11-24 2010-05-27 At&T Intellectual Property I, L.P. Systems and methods to monitor video quality
US8160603B1 (en) * 2009-02-03 2012-04-17 Sprint Spectrum L.P. Method and system for providing streaming media content to roaming mobile wireless devices
US8254930B1 (en) * 2009-02-18 2012-08-28 Sprint Spectrum L.P. Method and system for changing a media session codec before handoff in a wireless network
US9374306B1 (en) 2009-03-04 2016-06-21 Sprint Spectrum L.P. Using packet-transport metrics for setting DRCLocks
US8402494B1 (en) 2009-03-23 2013-03-19 Conviva Inc. Switching content
US9467938B1 (en) 2009-04-29 2016-10-11 Sprint Spectrum L.P. Using DRCLocks for conducting call admission control
US8310929B1 (en) 2009-06-04 2012-11-13 Sprint Spectrum L.P. Method and system for controlling data rates based on backhaul capacity
US8245088B1 (en) 2009-06-30 2012-08-14 Sprint Spectrum L.P. Implementing quality of service (QoS) by using hybrid ARQ (HARQ) response for triggering the EV-DO reverse activity bit (RAB)
US8204000B1 (en) 2009-07-23 2012-06-19 Sprint Spectrum L.P. Achieving quality of service (QoS) by using the reverse activity bit (RAB) in creation of neighbor lists for selected access terminals
US9706599B1 (en) 2009-07-23 2017-07-11 Marvell International Ltd. Long wireless local area network (WLAN) packets with midambles
EP3182629B1 (en) 2009-07-29 2019-09-04 Marvell World Trade Ltd. Methods and apparatus for wlan transmission
US8341255B2 (en) * 2009-10-06 2012-12-25 Unwired Planet, Inc. Managing network traffic by editing a manifest file
KR101669276B1 (ko) * 2009-10-19 2016-10-25 삼성전자주식회사 통신 시스템에서 단말의 우선순위를 고려하여 서비스 품질을 보장하는 방법 및 장치
US9521178B1 (en) * 2009-12-21 2016-12-13 Amazon Technologies, Inc. Dynamic bandwidth thresholds
US8644176B1 (en) 2010-03-11 2014-02-04 Sprint Spectrum L.P. Methods and systems for supporting enhanced non-real-time services for real-time applications
US8363564B1 (en) 2010-03-25 2013-01-29 Sprint Spectrum L.P. EVDO coverage modification based on backhaul capacity
US8515434B1 (en) 2010-04-08 2013-08-20 Sprint Spectrum L.P. Methods and devices for limiting access to femtocell radio access networks
GB2480424A (en) * 2010-04-10 2011-11-23 Rok Invest Group Ltd A system varies the bit rate of a media stream to a device in dependence upon the type of device and connection.
US8904027B2 (en) 2010-06-30 2014-12-02 Cable Television Laboratories, Inc. Adaptive bit rate for data transmission
TW201210325A (en) * 2010-07-21 2012-03-01 Nokia Corp Method and apparatus for indicating switching points in a streaming session
JP5180368B2 (ja) 2010-10-04 2013-04-10 エンパイア テクノロジー ディベロップメント エルエルシー 情報処理装置、パケット通信方法、課金方法、及びプログラム
KR101717813B1 (ko) 2010-11-01 2017-03-17 톰슨 라이센싱 네트워크 서비스에 대한 체감 품질 관리를 위한 방법 및 장치
US8472952B1 (en) 2010-11-30 2013-06-25 Sprint Spectrum L.P. Discovering a frequency of a wireless access point
US8619674B1 (en) 2010-11-30 2013-12-31 Sprint Spectrum L.P. Delivery of wireless access point information
KR20120119790A (ko) * 2011-04-22 2012-10-31 삼성전자주식회사 미디어 데이터 전송 방법 및 장치와 미디어 데이터 수신 방법 및 장치
FR2975555A1 (fr) 2011-05-18 2012-11-23 Thomson Licensing Methode d'adaptation dynamique du debit de reception et recepteur associe
WO2013019261A1 (en) 2011-08-01 2013-02-07 Intel Corporation MULTI-HOP SINGLE SIGN-ON (SSO) FOR IDENTITY PROVIDER (IdP) ROAMING/PROXY
US9119111B2 (en) * 2011-08-12 2015-08-25 Alcatel Lucent Method and apparatus for controlling wireless uplink sessions
US9113486B2 (en) 2011-08-12 2015-08-18 Alcatel Lucent Method and apparatus for controlling wireless uplink sessions
EP2573997A1 (en) * 2011-09-26 2013-03-27 Thomson Licensing Method for controlling bandwidth and corresponding device
US9456387B2 (en) * 2011-10-05 2016-09-27 Alcatel Lucent Method and apparatus for improving adaptive streaming video quality by optimizing resource allocation
EP3764687B1 (en) 2011-10-21 2021-11-24 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Resource management concept
US9860296B2 (en) 2012-03-23 2018-01-02 Avaya Inc. System and method for end-to-end call quality indication
US9356917B2 (en) 2012-03-23 2016-05-31 Avaya Inc. System and method for end-to-end encryption and security indication at an endpoint
US9178778B2 (en) 2012-03-23 2015-11-03 Avaya Inc. System and method for end-to-end RTCP
US9613042B1 (en) 2012-04-09 2017-04-04 Conviva Inc. Dynamic generation of video manifest files
US10616827B2 (en) 2012-07-10 2020-04-07 Huawei Technologies Co., Ltd. System and method for dynamically configurable air interfaces
US9246965B1 (en) * 2012-09-05 2016-01-26 Conviva Inc. Source assignment based on network partitioning
US10182096B1 (en) 2012-09-05 2019-01-15 Conviva Inc. Virtual resource locator
KR101354914B1 (ko) 2012-09-07 2014-01-24 주식회사에어플러그 목록정보를 통해 구간들의 정보가 제공되는 미디어 컨텐트의 데이터를 중계하는 방법 및 장치
WO2014052856A2 (en) 2012-09-28 2014-04-03 Marvell World Trade Ltd. Enhanced user experience for miracast devices
KR20140078507A (ko) * 2012-12-17 2014-06-25 주식회사 캐스트이즈 수요 적응형 스트리밍
JP5998923B2 (ja) * 2012-12-28 2016-09-28 富士通株式会社 プログラム、情報処理装置、及び通信方法
GB2517771A (en) * 2013-09-02 2015-03-04 Nokia Corp Method, apparatus and computer program product for accessing multimedia content
US9270721B2 (en) * 2013-10-08 2016-02-23 Qualcomm Incorporated Switching between adaptation sets during media streaming
US9363814B2 (en) 2014-02-25 2016-06-07 Alcatel Lucent Rate allocation method and apparatus for optimization of adaptive wireless video streaming
CN105099602A (zh) * 2014-04-25 2015-11-25 阿里巴巴集团控股有限公司 一种基于网速传输文件的方法及系统
KR20170013905A (ko) 2014-06-02 2017-02-07 마벨 월드 트레이드 리미티드 고효율 직교 주파수 분할 멀티플렉싱(ofdm) 물리 계층(phy)
WO2015191901A1 (en) 2014-06-11 2015-12-17 Marvell Semiconductor, Inc. Compressed ofdm symbols in a wireless communication system
US10305955B1 (en) 2014-12-08 2019-05-28 Conviva Inc. Streaming decision in the cloud
US10178043B1 (en) 2014-12-08 2019-01-08 Conviva Inc. Dynamic bitrate range selection in the cloud for optimized video streaming
EP3635926B1 (en) 2017-06-09 2024-03-27 Marvell World Trade Ltd. Packets with midambles having compressed ofdm symbols
US10715365B2 (en) 2017-09-22 2020-07-14 Nxp Usa, Inc. Determining number of midambles in a packet
KR102372421B1 (ko) * 2020-11-11 2022-03-07 포항공과대학교 산학협력단 네트워크 상태에 따른 멀티미디어 데이터 실시간 스트리밍을 위한 시스템 및 그방법

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6292834B1 (en) * 1997-03-14 2001-09-18 Microsoft Corporation Dynamic bandwidth selection for efficient transmission of multimedia streams in a computer network
GB2367219A (en) 2000-09-20 2002-03-27 Vintage Global Streaming of media file data over a dynamically variable bandwidth channel
US20020073238A1 (en) * 2000-11-28 2002-06-13 Eli Doron System and method for media stream adaptation
GB0031537D0 (en) 2000-12-22 2001-02-07 Pa Consulting Services Feedback control from decoder
US20030198184A1 (en) * 2001-08-31 2003-10-23 Joe Huang Method of dynamically determining real-time multimedia streaming rate over a communications networks
KR100408525B1 (ko) * 2001-10-31 2003-12-06 삼성전자주식회사 네트워크에 적응적인 실시간 멀티미디어 스트리밍 시스템및 방법

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008515312A (ja) * 2004-10-04 2008-05-08 ノキア コーポレイション Ipセッションに対するリソース予約の変更
JP2007288781A (ja) * 2006-04-19 2007-11-01 Samsung Electronics Co Ltd QoS保証方法及び装置
US8520558B2 (en) 2006-04-19 2013-08-27 Samsung Electronics Co., Ltd. Quality of service securing method and apparatus
JP2009537089A (ja) * 2006-05-11 2009-10-22 サムスン エレクトロニクス カンパニー リミテッド データ通信のQoS保証方法及び装置
US8379595B2 (en) 2006-05-11 2013-02-19 Samsung Electronics Co., Ltd. Method and apparatus for securing quality of service of data communication
US10447557B2 (en) 2006-07-14 2019-10-15 Qualcomm Incorporated Call establishment and maintenance in a wireless network
JP2015233288A (ja) * 2006-07-14 2015-12-24 クゥアルコム・インコーポレイテッドQualcomm Incorporated 無線ネットワークにおける呼の確立と維持
US9781014B2 (en) 2006-07-14 2017-10-03 Qualcomm Incorporated Call establishment and maintenance in a wireless network
US8078173B2 (en) 2006-12-26 2011-12-13 Fujitsu Limited Data transfer system, approach notification system and data transfer method
JP2011526098A (ja) * 2008-06-06 2011-09-29 テレフオンアクチーボラゲット エル エム エリクソン(パブル) 帯域幅を予約するための方法及びユーザ機器
JP2013509040A (ja) * 2009-10-16 2013-03-07 クゥアルコム・インコーポレイテッド マルチメディアを適応的にストリーミングすること
US9124642B2 (en) 2009-10-16 2015-09-01 Qualcomm Incorporated Adaptively streaming multimedia
US8601153B2 (en) 2009-10-16 2013-12-03 Qualcomm Incorporated System and method for optimizing media playback quality for a wireless handheld computing device
JP2013524724A (ja) * 2010-04-13 2013-06-17 クアルコム,インコーポレイテッド ワイヤレス通信システム内でのストリーミング通信セッション中における物理レイヤネットワーク間の選択的遷移
JP2013528998A (ja) * 2010-04-20 2013-07-11 クアルコム,インコーポレイテッド ネットワークゾーン認識に基づくマルチメディアアプリケーションのサポート
US8774169B2 (en) 2010-04-20 2014-07-08 Qualcomm Incorporated Supporting a multimedia application based on network zone recognition
JP2014168297A (ja) * 2010-04-20 2014-09-11 Qualcomm Inc ネットワークゾーン認識に基づくマルチメディアアプリケーションのサポート
JP2013532410A (ja) * 2010-05-14 2013-08-15 クゥアルコム・インコーポレイテッド ネットワークを介したマルチメディアコンテンツの配信のためのレート適応方法
JP2012049914A (ja) * 2010-08-27 2012-03-08 Kyocera Corp 通信装置
WO2012063417A1 (ja) 2010-11-10 2012-05-18 パナソニック株式会社 端末及びコーデックモード選択方法
EP3554127A1 (en) 2010-11-10 2019-10-16 Panasonic Intellectual Property Corporation of America Terminal and coding mode selection method
US11647428B2 (en) 2011-06-09 2023-05-09 Panasonic Intellectual Property Corporation Of America Communication terminal apparatus and communication method
JP2016181919A (ja) * 2011-06-09 2016-10-13 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 通信端末装置、ネットワークノード及び通信方法
US10841842B2 (en) 2011-06-09 2020-11-17 Panasonic Intellectual Property Corporation Of America Communication terminal apparatus and communication method
JP2013005253A (ja) * 2011-06-17 2013-01-07 Nakayo Telecommun Inc Ip電話装置およびip電話装置を用いた通信方法
JP2014527748A (ja) * 2011-08-09 2014-10-16 アルカテル−ルーセント ビデオコンテンツをストリーミングするための方法、そのような方法を実現するエッジノードおよびクライアントエンティティ
US9473552B2 (en) 2013-11-29 2016-10-18 Brother Kogyo Kabushiki Kaisha Preventing omission of data in a remote conference
US9473541B2 (en) 2013-11-29 2016-10-18 Brother Kogyo Kabushiki Kaisha Communication device and non-transitory computer-readable medium

Also Published As

Publication number Publication date
FI116498B (fi) 2005-11-30
JP4927333B2 (ja) 2012-05-09
ES2361159T3 (es) 2011-06-14
FI20021698A0 (fi) 2002-09-23
FI20021698A (fi) 2004-03-24
US20040057420A1 (en) 2004-03-25
DE60336572D1 (de) 2011-05-12
ATE504135T1 (de) 2011-04-15
US7346007B2 (en) 2008-03-18
JP2010136395A (ja) 2010-06-17

Similar Documents

Publication Publication Date Title
JP4927333B2 (ja) 帯域幅適応
EP1552655B1 (en) Bandwidth adaptation
JP5351170B2 (ja) 無線パケットネットワークにおける効率的なマルチメディア伝達のための方法および構成
US7944880B2 (en) Method and arrangement for establishing a communication session for multimedia
KR100705432B1 (ko) 미디어 스트리밍
KR100855610B1 (ko) 통신 시스템에서의 자원 할당 방법
TWI516064B (zh) 媒體串流傳輸的通信期控制
JP4261579B2 (ja) モバイルネットワーク内における動的なメディア認可
KR101705359B1 (ko) 네트워크에서 서비스 품질 제어 관련 정보를 보고하는 방법과 이를 위한 네트워크 엔터티
RU2337505C2 (ru) Способ и система для резервирования ресурса в беспроводной сети связи
KR20050106592A (ko) 멀티미디어 스트리밍에서 클라이언트 레이트 능력을시그널링하는 방법
Frojdh et al. Adaptive streaming within the 3GPP packet-switched streaming service
JP2004506393A (ja) モード選択手順を備えた通信システム及びその方法
US7453805B2 (en) Method and communication system for signaling information for optimizing rate control schemes in wireless networks
WO2006026889A1 (fr) Systeme et procede de commande dynamique de debit multimedia dans un systeme ims
KR100541523B1 (ko) 이동통신망에서 멀티미디어 콘텐츠 제공을 위한 채널 제어방법
KR101055169B1 (ko) 스트리밍 시스템의 트래픽 제어 방법 및 그 장치
US20230156065A1 (en) Video transmission method, device, and system, and storage medium
KR20080037950A (ko) 데이터를 송수신하는 방법 및 장치

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090210

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20090508

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20090515

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090806

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20090901

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111216

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120209

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150217

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4927333

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term