JP4852228B2 - メディア信号を通信するためのシステム及び方法 - Google Patents

メディア信号を通信するためのシステム及び方法 Download PDF

Info

Publication number
JP4852228B2
JP4852228B2 JP2003531343A JP2003531343A JP4852228B2 JP 4852228 B2 JP4852228 B2 JP 4852228B2 JP 2003531343 A JP2003531343 A JP 2003531343A JP 2003531343 A JP2003531343 A JP 2003531343A JP 4852228 B2 JP4852228 B2 JP 4852228B2
Authority
JP
Japan
Prior art keywords
codec
video
media
compression
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003531343A
Other languages
English (en)
Other versions
JP2005508590A5 (ja
JP2005508590A (ja
Inventor
リン レイノルヅ ジョディー
ウォルター イングレアム ロバート
Original Assignee
インタラクト デヴァイシーズ インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by インタラクト デヴァイシーズ インコーポレイテッド filed Critical インタラクト デヴァイシーズ インコーポレイテッド
Publication of JP2005508590A publication Critical patent/JP2005508590A/ja
Publication of JP2005508590A5 publication Critical patent/JP2005508590A5/ja
Application granted granted Critical
Publication of JP4852228B2 publication Critical patent/JP4852228B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00Digital computers in general; Data processing equipment in general
    • G06F15/16Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/611Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for multicast or broadcast
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066Session management
    • H04L65/1096Supplementary features, e.g. call forwarding or call holding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066Session management
    • H04L65/1101Session protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/70Media network packetisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/764Media network packet handling at the destination 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80Responding to QoS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/2866Architectures; Arrangements
    • H04L67/30Profiles
    • H04L67/303Terminal profiles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/04Protocols for data compression, e.g. ROHC
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/40Network security protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115Selection of the code volume for a coding unit prior to coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164Feedback from the receiver or from the transmission channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23406Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving management of server-side video buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808Management of client data
    • H04N21/25825Management of client data involving client display capabilities, e.g. screen resolution of a mobile phone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808Management of client data
    • H04N21/25858Management of client data involving client software characteristics, e.g. OS identifier
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4621Controlling the complexity of the content stream or additional data, e.g. lowering the resolution or bit-rate of the video stream for a mobile client with a small screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6106Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6131Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via a mobile phone network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637Control signals issued by the client directed to the server or network components
    • H04N21/6377Control signals issued by the client directed to the server or network components directed to server
    • H04N21/6379Control signals issued by the client directed to the server or network components directed to server directed to encoder, e.g. for requesting a lower encoding rate
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/30Definitions, standards or architectural aspects of layered protocol stacks
    • H04L69/32Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
    • H04L69/322Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions
    • H04L69/329Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions in the application layer [OSI layer 7]

Description

関連出願
この出願は、2001年9月26日出願の出願番号第60/325,483号、代理人整理番号ID-PAT-001PR1の"System and Method for Communicating Media Signals"と題されたReynold等の仮出願の非仮出願である
分野
この開示はソース装置と受信装置との間でメディア信号を通信するためのシステム及び方法に関する。より明確には、ストリーミング・メディア信号及びスタティック・メディア信号を圧縮及び解凍して、それら信号をソース装置及び受信装置の間で人工知能機構を用いて効率的に通信するためのシステム及び方法に関する。
ストリーミング・メディア及びスタティック・メディアを相互に遠隔的に配置された装置間で効率的に通信する能力は、インターネット等のネットワーク化された通信の到来に伴い指数関数的に出現した著しい需要である。この需要は、近年、世界的なスケールで実質的な開発リソースによって対処されてきた。
用語「メディア」でこの明細書において意図されることは、ソース装置から到着装置までその到着装置での使用のための信号の形態で通信され得る情報を意味することであり、この明細書で使用されている場合、メディアはストリーミング・メディア信号或はスタティック・メディア信号の何れかを含むことが一般には企図される。この開示の目的のため、メディア信号に対する受信装置の動作として適用される用語「使用」は、再生(例えば、サウンド、画像、ビデオ)、処理(例えば、テレメトリーデータ)、或は、メディア信号の意図された目的である他の任意の使用或は操作を含むことが意図さている。
用語「ストリーミング・メディア」は、一時的な流れるような状態で到着装置まで通信されたり、該到着装置によって使用されることが意図された情報を含むメディア信号を意味することがこの明細書では意図されている。ストリーミング・メディア信号に適用されている用語「ストリーミング」は、経時的に連続状態で通信及び処理され得る信号、経時的に連続状態で通信及び処理される信号、或は、相互に関係付けられ且つその後に到着装置によって連続的に相互に関係付けられた状態で使用される、一連の個別的なパケット、ピース、或は、ブロックで通信され得る信号を含むことがこの明細書では意図されている。この開示の目的のためにストリーミング信号の例は、それ故に、制限無しで、ビデオ、オーディオ、ビデオと組み合わせられたオーディオ、一時的なテレメトリー等のデータ・ストリング等のタイプのメディアを含む。用語「ストリーミング・メディア」は、対象メディアを表しているデータのディジタル化形態を参照することで殆どの場合に典型的には使用される。
用語「スタティック・メディア」は、先に規定したような「ストリーミング」ではないメディアを一般的には意味するように意図されている。スタティック・メディア信号は、一般的には通信され得ると共に単一パケット、ブロック、或は、ピースとして使用されることが意図されているタイプのものである。それ故にスタティック・メディアは、例えば、制限無しに、個別の画像、個々別々であると共に相対的に一時的な短いビデオ・クリップ、サウンド若しくはサウンド・バイト、或は、テレメトリー情報等のピース情報若しくはブロック情報を含み得る。しかしながら企図されることは、スタティック・メディアのそうした「単一ピース」は、例えば、全体的な画像の複数領域若しくは複数ピクセル、一団となってビデオ・クリップを形成する個々別々のフレーム、一団となってサウンド、サウンド・バイトを含む複数サウンドから成るグループ、或は、一団となってより大きな情報ブロックを含む情報ビット等の複数のより小さなピース或はサブパーツから成るべく充分な大きさであり得ることである。
ストリーミング・メディアは、スタティック・ファイルよりも著しく大きなデータ・ファイルを一般的には含むと共に、殆どのメディア・ファイルにて経験されるよりもそうしたファイルの一時的な通信にわたってより多くの変数をしばしば表す。それ故に使用のために到着装置への適切な通信に対するストリーミング・メディアを効率的に圧縮する能力は、しばしば、相当により複雑であると共にゴールに到るには難しい。従って、この開示の多くは特にストリーミング・メディアを参照することで提供され、そして本発明はそうした通信に対する著しい利益を提供すべく考察された。しかしながら、この背景技術に対してそしてここに開示された本発明の多くの利益に対してストリーミング・メディアがここで特に参照された場合、スタティック・メディアも当業者に従えば適切であることが企図されている。
数多くの種々の「タイプ特有」メディア・システムは、ソース及び遠隔到着地の間においてストリーミング・メディア信号及びスタティック・メディア信号の特有タイプ(例えば、ビデオ、オーディオ、画像、声等々)を伝送又は送信するために相当に長期にわたって使用されてきた。そうしたタイプ特有メディア・システムの典型例はテレビ伝送システム、電話回線システム、並びに、ラジオ(無線)伝送システムを含み、テレビジョン、電話、並びに、ラジオはそれ故にメディアの受信装置である。従って、ストリーミング・メディア及びスタティック・メディアの効率的な通信に対する要求はまさに多様な通信産業になろうとしており、例えば、電話、テレビジョン、映画、音楽、並びに、より最近の双方向(対話式)ゲームに対する各種産業を含む。
更には、以上の様々な長期持続タイプ特有システムを含む数多くのメディア通信システムは「フォーマット特有」でもあり、その対象メディア信号が特定のフォーマットで通信されて、ソース、送信チャネル、並びに、到着装置がそのフォーマット内での働きが特に従順でなければならない。フォーマット特有メディアシステムの例として、例えば、特定のタイプのメディアにだけ働きケーブル・キャリアから特定のコード化されたフォーマットで配信のみ為されるコード化ケーブル・テレビジョン・システムを含む。それ故に、これらシステムは、ハードウェア及びソフトウェアにおいて、一般にコンテンツ・プロバイダによって提供されるべきメディアのタイプ及びフォーマットのみに専用となる。
社会のニーズは、これら専用コンテンツ特有システム及びフォーマット特有システムの能力より勝ってきた。特に専用システムは、特定のストリーミング・メディアに対する果てしなく増大するリアルタイムでのクライアント要求に適応すべく構成されていない。更には、今日相互接続された世界におけるテクノロジー開発は、1つの装置を用いて多数フォーマットでのメディアの多数タイプの引き出し、受け取り、押し込み、送信を為す能力に対する社会の知的趣味に挑んできた。更にコンテンツ・プロバイダは、多くの種々のメディア信号をそれらクライアント側のオフィス、リビングルーム、並びに、手元における多くの種々のタイプの装置へ配信できなければならない。個人及び会社も、様々な種々のフォーマットを用いると共に様々なそれぞれの装置を用いて相互に通信することを望んでいる。
従って、ストリーミング・メディア及びスタティック・メディアをインターネットの集中したネットワークにわたって配信するためのかなり大きな産業が出現してきた。コンテンツ配信会社は、今日、生の競馬及び娯楽から医療テレメトリや教育までの広範なストリーミング・メディアをインターネットにわたって且つビデオ・フォーマット及びオーディオ・フォーマットで配信している。DFC Intelligenceからの1つの公開報告に従えば、2000年に215パーセントの成長して、9億を超える合計アクセス・ストリームに達した。これはブロードバンド・ストリームを含み、それは略29%の合計アクセスを作り上げた。この同一の報告は、有効なストリーム棚卸し資産の15パーセント程が、現在、続々と広告によって販売促進されていることが推定されもする。インターネット・リサーチャーとしてのJupiter Media Metrixによって公開された別の報告では、各種会社が従業員、消費者、並びに、他のビジネスとの通信での電子対話に向かっているように、ストリーミング・ビデオ・テクノロジーに沿ってのビジネスが2000年の1億4千万USドル(USドル140M)から2005年までの略30億USドル(USドル3B)まで膨らむことになる。
更に、これらシステム上での送信を為す人口急増や増大する人数は有効情報に対する有効帯域幅と激しく衝突してきている。それ故に、限られた帯域幅リソース及び限られた有効送信速度を用いてメディアを効率的に流す能力が増大された社会の重大事である。
圧縮/解凍アルゴリズム(「CODEC」)
種々のタイプのメディアを通信するための指数関数的な要求に鑑みて、様々な圧縮/解凍システム(「CODEC」)が多年にわたって開発されてきおり、そして特に著しい研究及び開発の最近の主題となってきている。CODECの特定タイプやストリーミング・メディア信号及びスタティック・メディア信号の通信に関するCODECの動作を管理するシステムは、例えば、グラフィックス及び映像等の静止フレーム画像やストリーミング・メディアを含む特定タイプのメディアに対して開発されてきている。
画像CODEC
様々な異なるタイプのスタティック・メディアCODECが開発されてきており、幅広い種類のこれらCODECが広範に知られ且つ使用されている。特に注目の主題となってきている1つの特定タイプのスタティック・メディアは、(適切な圧縮/解凍要望に著しく衝撃を与えるようなフレーム間のサイズ及び一時的関係等のより複雑な変数によってストリーミング・メディアとしてビデオ前後関係において一般的には取り扱われるような複数の相関された画像フレームから成る長い一続きを介しての)様々な画像を含む。スタティック・メディアCODEC処理の例は従来の画像CODECテクノロジー及び方法の特定の特有タイプを参照することで例証される。
ワールドワイドウェブ上でのグラフィック画像に対する2つの最も一般的なファイル・フォーマットは「GIF」及び「JPEG」フォーマットとして知られ、図面(例えばラインアート)や映像に対する各標準として一般的には考えられ、以下に更なる理解の目的で他の画像圧縮様式と一緒に更に記載される。
「JPEG」は"Joint Photographic Experts Group"の頭字語であり、ISO(国際標準化機構)標準10918に準じているグラフィック画像ファイルである。映像圧縮/解凍に対して一般に使用されているJPEGファイルは圧縮品質の範囲から選択するか、或は、先にも記載したように、複数の圧縮アルゴリズムから成る一組の内の1つから選択することによって作り出される。JPEGファイルを作り出すために、或は、画像を別のフォーマットからJPEGへ変換するために、所望される画像の品質は特定化されなければならない。一般に、最高品質は最大ファイルとなるので、ユーザによって選択されるような画像品質及び画像サイズの間での妥協が為され得る。JPEG具現化手段はそれらの全てを用いることがないかもしれないが、圧縮のJPEGモードは、一般に、29個の個別コード化プロセスを含む。JPEG画像は典型的には名称添字「.jpg」が付与される。
「GIF」は「Graphics Interchange Format」の頭字語であり、事実上、インターネット通信用の図面画像圧縮/解凍の標準フォーマットであると一般には考えられている。GIFフォーマット化はLZWアルゴリズムとして知られる圧縮アルゴリズムを用い、それはAbraham Lempel, Jacob Ziv, Terry Welchによって開発され、ユニシス・コーポレーション会社から商業的に入手可能である(一般にそうしたアルゴリズムは料金を負っているライセンスを要求することなしに公共的に入手可能とされていた)。より明確には、「LZW」圧縮アルゴリズムは所与の長さ(例えば12ビット)の複数ビットから成る各入力シーケンスを取り入れて、その特定のビット・パターンに対して、しばしば「辞書」或は「コード・ブック」と呼称されるテーブル内にエントリを作り出す。エントリはそのパターン自体とより短いコードから構成される。入力が読み取られると、先に読み取られた任意のパターンがより短いコードの代用となって、入力の総量をより小さなものに効率的に圧縮する。LZ77及びLZ78として知られたより早期のアプローチは圧縮ファイルの一部として検索テーブルを含まなかった。しかしながらより最近のLZWアルゴリズム様式はファイル内にテーブルを含んでおり、ビューイングのためにファイルを解凍するデコード化プログラムはそれがコード化入力を処理するにつれてアルゴリズムを用いてテーブルを構築できる。GIFフォーマットは2Dラスター・データ・タイプを用いてバイナリにコード化される。
GIFフォーマットの2つのバージョンは、GIF87a、「動画GIF」ファイル作成を可能とするより最近のGIF89a、或は、画像内の動作或は変化を表すべくシーケンス内に再生される単一GIFファイル内の複数画像から成る短シーケンス(エンドレス・ループか或はエンドに到達するプログレッションを通じてかの何れか一方)。GIF89Aも「インターレースドGIF」共々許容され、それは受信者に到着して該受信者によって、完全な解像度が達成されるまで欠けているラインを満たすビット・ストリームから成る7つの連続的な波で漸次置き換わる画像のファジィー輪郭として表示される。インターレースドGIFは、例えば、(画像上でクリックしてリンク等の操作を実行する等の)決定を為す等の主題画像内の特定情報が処理され得る前に、より短い待機時間を監視すべく14.4Kbps及び28.8Kbpsモデムを用いてビューアを可能としている。
画像シーケンスを満たしている解像度の波を表示することによって、インターレースドGIFは、連続的な波の中で「フェードイン」することになる圧縮プログラムから成るJPEG組を用いて作成された画像を記述する「プログレッシブJPEG」と同様となる。プログレッシブJPEGは、しばしば、画像をモデム接続速度で配信するより魅力的な方法であると注目されるが、より高速の接続を有するユーザはおそらく違いに注目することがないであろう。
「PNG」又は「Protable Network Graphics」フォーマットは画像圧縮用により最近開発されたものであり、そしてそのうちにインターネット使用に対するGIFに置き換わるべく公表された(一般的にJPEGフォーマットはサイズ/品質妥協を許容しない)。このフォーマットは公共的な消費及び開発に対して開発された。GIFと同様に、PNGは「損失無し」圧縮フォーマットであり、そしてそれ故に全ての画像情報は圧縮ファイルがビューイング中に解凍されると復帰される。しかしながらPNGフォーマット化されたファイルはGIFフォーマットと比べて10乃至30パーセントより圧縮されるように一般的には意図されている。PNGファイル・フォーマットの更なる局面は、(i)カラースライドは1色のみには限定され得ず、透明度は制御され得る(「不透明」)、(ii)画像の「インターレーシング(interlacing)」は標準GIFに対して改善されている、(iii)「ガンマ修正」は可能とされて、特定のディスプレイ製造業者によって必要とされる色輝度と言う画像の「チューニング」を許容している、(iv)画像は純正カラー、パレット、並びに、GIFと同様なグレイスケール・フォーマットを用いて保存される、(v)「アニメーション又は動画」は一般的にはサポートされていないが、PNGは一般的には拡張可能であり且つそれ故にスクリプト可能画像動画化をもたらすべく層状に重ねられ得る。
「TIFF」は「Tag Image File Format」の頭字語であり、例えばスキャナ画像に対して使用されるグラフィック等のアプリケーション・プログラム間でラスター・グラフィック(又は「ビットマップ」)画像を交換するための一般的なフォーマットである。TIFFファイルは、通常、名称添字「.tif」或は「.tiff」が付与され、一般的には1980年半ばにアドビー・ソフトウェア社、マイクロソフト社、並びに、ヒューレット-パッカード社のサポートで開発された。TIFFファイルはグレイスケール、カラーパレット、或は、RGBフルカラーを含む幾つかの分類の内の何れかであり得て、その記述及び違いはこの開示の別の場所で更に展開されている。TIFFファイルはJPEG、LZW、或は、CCITTグループ4標準ランレングス画像圧縮を伴うファイルをも含み、それらはここでの別の場所で更に記載される。最も一般的なグラフィック画像フォーマットの1つとして、TIFFファイルはデスクトップ・パブリッシング、ファクシング、3-D応用例、並びに、医療用画像形成応用例に典型的には使用される。
ビデオCODEC
ビデオ圧縮は、(「ビデオ・オン・デマンド」等の)事前記録済みビデオ、テレコンファレンシング、並びに、(放送等の)ライブ・ビデオ等々を含む様々な応用例に強力に開発された主題であって。「デスクートップ」コンピュータ、ワイヤレス装置、従前のテレビジョン、並びに、高品位テレビジョンは、効率的なビデオ圧縮システムが対応しなければならない種々のタイプの受信装置の例である。
一般に、ビデオCODECアルゴリズムは個々別々のフレーム単位に基づくか、及び/或は、各フレームが従来使用の最も一般的なビデオ圧縮であり幾つかの数学的原理に基づいている「一時的圧縮」に基づくかの何れか或はその双方で動作し、個別コサイン変換(「DCT」)、ウェーブレット(小波)変換、並びに、ピュア・フラクタルを含む。
「個別コサイン変換」或は「DCT」は画像圧縮応用例に使用される最も評判がよい変換である。一般に、DCTはコサインの重量付け合計としての波形データを表す技術である。DCTは個別フーリエ変換と同様に、信号或は画像を空間的域から周波数域へ変換する。DCTは画像を異なる重要性(画像の視覚的品質に関する)の各種パーツ(或はスペクトル・サブ帯域)に分離する補助を為す。その好評判の理由は、典型的な画像に対するエネルギー圧縮と云う良好な性能を含むばかりではなく、幾つかの高速アルゴリズムの有効性をも含む。DCTは、JPEG及びMPEGの2つの国際的な画像/ビデオ圧縮標準で使用されている。
「ウェーブレット変換」は一般的には数学的アルゴリズムであり、信号データを数学的表現の集合に変換し、それら数学的表現の数々は、例えばフーリエ変換と同様に、到着受信装置によってデコード化され得る。ウェーブレットはノイズから弱い信号を回復することを高めることで注目されてきおり、それ故にこの方法で処理された画像は著しいボケ或は細部の不明瞭性無しに向上させられ得る。この理由のため、ウェーブレット信号処理は医療用の特にX線や磁気共鳴画像に特に適用されてきた。インターネット通信において、ウェーブレットは他の従来方法で一般的に可能であるものよりも相当程度まで画像を圧縮すべく使用されてきた。幾つかの場合において、ウェーブレット圧縮画像はより一般的なJPEGフォーマットを用いての同様品質画像のサイズの約25パーセント程度に小さくすることができ、この開示の別の場所で更に詳細に議論される。よって、例えばJPEGフォーマットで200Kbを必要とすると共にダウンロードするのにちょっと時間を費やす映像は、ウェーブレット圧縮フォーマットで50Kbだけを必要とすると共にダウンロードするのに15秒を費やすだけであることが可能である。ウェーブレット圧縮画像ファイルは、しばしば、名称添字「.wif」が付与され、受信器(例えば、コンピュータ受信器上のインターネット・ブラウザ)はそれらのフォーマット・ファイルをサポートしなければならないか、或は、プラグ-イン・プログラムがそうしたファイルを読み取るために必要とされることとなる。
フラクタル画像圧縮は損失が多い画像コード化の近代的な技術であり、現存のフーリエ級数圧縮方式を凌ぐ幾つかの改善を提供している。階段関数としてモデル化された際、エッジは適切な描写のために多数のフーリエ級数項を必要としているために、エッジ描写が改善されている。フラクタルの他の長所は高速デコード化時間とスケール独立性を含む。フラクタル圧縮はマンデルブロー集合に基づき、それは自然の自己類似スケーリング従属統計学的機能を活用している(マンデルブロー1983年)。フラクタル圧縮及び解凍は回転及びスケールとは独立したサンプル領域と同一の特性を示す領域を見出すクラスタリング・アプローチに係る。フラクタル画像は、それらをどのようにして再生させるかについての帰納的方程式及び指示として画像を圧縮する。これら方程式はそのコンポーネント間での関係の点で画像を記述する。記憶必要性の点での低減は、フラクタル圧縮が画像のピクセル表示の代わりに方程式及び指示を節約すると云う事実による。
「MPEG」は「Moving Picture Experts Group」の頭字語であり、特定の発展ビデオ圧縮標準やそれらから広まったオーディオ圧縮標準と同義に使用されるようになった。一般に、MPEGビデオ・ファイルを使用するために、パーソナルコンピュータが充分なプロセッサ速度、内部メモリ、並びに、典型的に大きなMPEGファイルを取り扱い且つ再生すべくハードディスクのスペースを必要としており、通常名称添字「.mpg」が付与される。特定されたMPEGビューア或はMPEGファイルを再生するクライアント・ソフトウェアはクライアント・システム上で有効でなければならず、そして一般的にはウェブ上の様々なサイトから市販のMPEGプレイヤーのソフトウェア或はバージョンがダウンロードされ得る。MPEGフォーマット済みメディアに対する操作のモードは以下のこれら順次展開される標準を参照することでここに記載される。
より詳細には、MPEG-1標準は一般的には約1.5Mbpsの伝送速度のコーディング・プログレッシブ・ビデオ用に設計された。これは、一般には、ビデオ-D及びCD-Iメディアに対する特定の応用例用に設計された。MPEG-1オーディオ・レイヤー-3(「MP3」)も早期のMPEG研究から発展したものである。「MPEG-2」は4Mbpsを上回る伝送速度のコーディング・インターレースド画像に対して一般的に設計された標準であり、多くのMPEG―2プレイヤーがMPEG-1データも取り扱うことができることで一般には注目され、逆のことは真であることが一般には注目されておらず、MPEG-2コード化ビデオは一般的にはMPEG-1プレイヤーと互換性がない。更に別のプログレッシブ標準である「MPEG-3」も高品位テレビジョン(「HDTV」)用に提案されてきたが、一般にMPEG-3はHDTV要件を満たすことが一般に信じられているMPEG-2と合併された。最後に「MPEG-4」標準も最も最近に開発され、スピーチ及びビデオ合成、フラクタル幾何形状、並びに、コンピュータ視覚化に対処すべく相当により意欲的な標準を提供することが意図されており、画像を再構築するために人工知性を組み入れるべく更に開示された。
MPEG-1及び-2標準は25:1から50:1まで変動する要因によってディジタル・ビデオを圧縮する技術を規定している。この圧縮は5つの種々の圧縮技術、即ち、(i)個別コサイン変換(DCT)であり、周波数に基づく変換、(ii)「量子化」であり、選択的な情報を損失する技術であり、例えば、幾つかの画像が画像の直前及び直後の映像から予報されること、を一般的には用いてこれら標準に従って達成される。
商業的に入手可能な圧縮テクノロジーの更により詳細な例としては、マイクロソフトメディアプレイヤー(Microsoft Media Player)(商標)(マイクロソフト・コーポレーション社から入手可能)、リアルプレイヤー(RealPlayer)(商標)、リアルシステム G2(RealSystem G2)(商標)(リアルネットワーク(商標)から商業的に入手可能)、アップルズクィックタイム(Apple's QuickTime)(商標)(ソレンソン(Sorenson)(商標)から商業的に入手可能)、並びに、「VDO」を含む。マイクロソフトメディアプレイヤー(商標)は圧縮/解凍に対するCODECのMPEG標準に適用するように一般的には信じられているが、その他のものがCODECの専有タイプを使用すべく主張されてきた。MPEG4等の標準圧縮アルゴリズムは、エンタープライズ・ストリーミング、セキュリティ、並びに、その類に対する埋め込みシステムを構築しているデベロッパーの手にそれらの道をつけた。
ワイヤレス及びIPネットワークにわたるストリーミング・ビデオ解決策を提供するより最近の研究の一例はエンブレーゼ・システムズ(Emblaze Systems)(LSE:BLZ)と呼称される会社によって公表された。この会社は、ライブ及びオン・デマンドのビデオ・メッセージや、PC、PDA、ビデオ携帯電話、並びに、双方向テレビ等の任意のプラットフォーム上のコンテンツのコーディング及び再生を意図された特定のテクノロジーを開示した。エンブレーゼ・システムズは以前はGEOインターアクティブ・メディア・グループであると思われる。以下の公開された特許文献1及び2としての国際特許出願は、GEOインターアクティブ・メディア・グループが「譲受人」として指名された範囲でエンブレーゼ・システムズと関連されていると思われる。これら参考文献の開示はそれらを参照することでそれらの全体にわたってここに合体させる。
Carmel et alのWO9731445 CarmelのWO9910836
ワイヤレス応用例に対するストリーミング・メディアの通信を改善すべく意図されたCODECテクノロジーを公開した別の会社はパケットビデオ(Packetvideo)(商標)・コーポレーション社であり、より詳細にはストリーミング・ビデオを携帯電話へ通信することを意図している。加えて、彼らは一時的スケーラビリティ及び信号過誤抵抗を追跡することを意図しているCODECテクノロジーを奨励すると信じており、ビデオ及びオーディオ・ストリームをワイヤレス環境の危険から保護している。下記の特許文献3は、その特許文献を見ると指名「譲受人」としてのパケットビデオと関連されていると思われる特定のストリーミング・メディア圧縮/解凍テクノロジーの更なる例を開示している。この特許文献の開示はそれを参照することでその全体にわたってここに合体させる。
Lengwehasatitの米国特許第6,167,092号
別の先行する参考文献は、移動画像用のカラー・ビデオ・データを圧縮するための費用効果的で連続的に適応できるディジタル・ビデオ・システムと方法とを提供することが意図されたCODECテクノロジーを開示している。この方法は、アナログ・ビデオ・フレームを取り込むことと、独特の損失有り(損失性)及び損失無し(無損失性)の、副帯域コーディング、ウェーブレット変換、運動検出、ラン・レングス・コーディング、並びに、可変レングス/コーディングを含んでいるディジタル圧縮テクノロジーの組み合わせを用いて、画像を圧縮用に好適なソース入力フォーマットにディジタル化することを含む。
別の先行する参考文献は、移動画像用のカラー・ビデオ・データを圧縮するための費用効果的で連続的に適応できるディジタル・ビデオ・システムと方法とを提供することが意図されたCODECテクノロジーを開示している。この方法は、アナログ・ビデオ・フレームを取り込むことと、独特の損失有り及び損失無しの、副帯域コーディング、ウェーブレット変換、運動検出、ラン・レングス・コーディング、並びに、可変レングス/コーディングを含んでいるディジタル圧縮テクノロジーの組み合わせを用いて、画像を圧縮用に好適なソース入力フォーマットにディジタル化することを含む。このシステムは、良好から優れたビデオ品質を提供すべく意図された高圧縮を提供する視覚的画像の圧縮及び解凍のための「ハフマン・エンコーダ」を用いるべく一般的に開示されているエンコーダ及びデコーダ(CODEC)区分を含む。圧縮されたビデオ・データは基本ビデオと圧縮されたディジタル・オーディオと多重化されるビデオの追加層とを提供して、ローカル・エリア或はワイド・エリアにわたるワイヤレス・ネットワークを含んでいるインターネット或はイントラネットにわたっての配分のため、パケット化され得るデータ・ストリームを提供する。開示されたCODECシステムは、データ・チャンネル上の有効帯域幅を先行するフレームに対するチャンネル上の有効帯域幅と比較するに応じてフレーム単位でディジタル画像の圧縮を連続的に調整すべく意図されており、ネットワーク伝送チャンネルの有効帯域幅とクライアント・ユーザの受信器リソース能力とに相応する出力データ・ストリームを提供する。圧縮は出力データ・ストリームのフレーム速度の調整によって更に調整され得る。
ビデオ通信をストリームする少なくとも一部で使用されるように意図されたCODECシステムの更により詳細な例は、以下の特許文献4乃至10に開示されている。これは参照文献の開示はそれらを参照することでそれらの全体にわたってここに合体させる。
Adolph et alの米国特許第6,081,295号 Guetz et alの米国特許第6,091,777号 Leiの米国特許第6,130,911号 Daly et alの米国特許第6,173,069B1号 Gardos et alの米国特許第6,263,020B1号 Murakami et alの米国特許第6,272,177号 Leiの米国特許第6,272,180B1号
全てとまではいかないが殆どの先行ストリーミング・ビデオ圧縮方法はそうしたCODEC内における極端に複雑な数学的ツールとそれらに対する微細な変化とに注目し、「ワン・サイズ・フィッツ・オール(one size fits all)」ビデオを全てのタイプの公開及び非公開のネットワークにわたって、ワイヤレス・ネットワークに見出されるような超低帯域幅ネットワークから衛星通信を介して超高速ファイバオプティックス設備まで伝送する。圧縮に関する様々な従来の方法の中、画像サイズ、フレーム・サイズ、カラー深さ、コントラスト、輝度、感知フレーム品質、バッファ・レングス等々の間での妥協策を含んでいるユーザ規定が可能であるパラメータが一般的にはある。更に、アルゴリズム自体内において、ユーザ規定が可能ではない品質及び重量付け計算が多数ある。1つの「全般的な」関心事に対して一回でこれらを設定して、製品を包装して出荷するかどうかはデベロッパー次第である。
しかしながらビデオ・ストリーミング市場は急激に成長し続けている一方で、全てのビデオ・ソース、到着地、或は、伝送様式に対する理想としてのアルゴリズムが1つもないので、世界は圧縮に対する1つの標準をも選択してきていない。第1のCODECは信号の1つのタイプ或は信号の第1部分(例えば、一連のフレームを含むフレーム或はシーン)に対して最善である可能性があるが、別の第2のCODECが信号の別のタイプ或は同信号の更なる別の第2の部分に対して最善である可能性がある。更には、1つのCODECは通信ネットワークにおける送信、受信、並びに、伝送の装置の間での特定のストリーミング信号の圧縮/解凍に最も適合する可能性があり、別の第2のCODECは、通信装置パラメータの別の集合に対してではなく、同一ストリーミング・メディア信号に対して適合する第1のものより良好に適合する可能性がある。例えば、幾つかのビデオ・ストリームはカラーをハンドヘルド(手持ち)装置へ配送し、他のビデオ・ストリームはフレーム速度を増大すべく携帯電話へ黒白伝送におけるピクセル損失を利用できる。必要とされるサウンド品質、フレーム速度、明瞭性、並びに、バッファリング許容範囲の全ては断固として多数プラットフォームにわたる最適化されたビデオ及びオーディオ配送に対する選択の圧縮アルゴリズムに衝撃を与える。
実際上、特定の通信装置パラメータはストリーミング・メディア伝送中に充分に長続きしない可能性があるので、パラメータから成る初期の集合に対する初期的には適切なCODECは、同一ストリームの信号伝送中、これらパラメータに関する変化によって別のCODECよりも効率性に劣るように為され得る。そうした長続きしないパラメータの例としては、制限無しに、データ伝送チャンネルにおける有効帯域幅、送信装置若しくは受信装置の何れかにおける有効メモリ若しくは処理能力、並びに、受信装置における専用化ディスプレイ解像度/ウィンドウ(例えば、スクリーン上のウィンドウを最少化する)を含む。これらの問題は、特定のストリーミング・メディア信号の圧縮、解凍、並びに、それら信号の特定の通信装置システムに沿っての配送にとって最も効率的であるように、一方のCODECを他方と区別し得るような複数要因の種々の組み合わせの夥しい数の繰り返しによって指数関数的に混ぜ合わされる。
CODECシステムは「フォーマット特定」であるので、ソース及び到着装置は共通した特定の圧縮/解凍様式に従って相互間でメディア信号を通信すべく「予め構成」されていなければならず、またトランスコーダが使用されなければならない。しかしながら従来のトランスコーダが使用されていたとしても、通信システムにおける制約(例えば、ソース、伝送チャンネル、到着装置)は全般的に考慮されず、その通信は著しく不完全であり得る。更なる説明の目的のため、図1A及び図1Bはソース110−120と到着装置130−140との間でメディアを通信する従来方法の2つの異なる概略図を示している。これら図示は、特にストリーミング・ビデオ通信を例示しているが、他のメディア形態は同様システムによって表示され得る。
注目されてきたことは、CODECアルゴリズムが特定の応用例用に変更され得て、同様の変更無しセットよりも良好に制限された例にわたって機能し得ることである。しかしながら、一般的にはこれは一連のフレームに対して、或は理想的には、各個別フレームに対して実行されなければならない。幾つかのDCTに基づくアルゴリズムはより高い解像度及びより低い感知品質で、各フレームに対して生ずる約20億という多数の数学的演算を有する。一般にこれは、平均的なマシンにとって或は商業的なサーバにとってすら、単位秒に30乃至60回を実行するにはあまりにも夥しい数学的処理である。これが専用化された圧縮基盤或はASICの出現に対する理由である。
オーディオCODEC
ビデオ圧縮の改善に関する最近の社会的な関心事に加えて、オーディオ圧縮は同様に、オーディオ放送、音楽、ビデオと同期した伝送、並びに、ライブ双方向音声(例えば電話)を含んでいる様々なライブ或は事前記録された応用例に対する著しい研究開発の話題となってきた。これらオーディオ圧縮応用例の任意のもの或は全てのものは、広範に変動する能力及び動作パラメータを有する多数のハンドヘルド装置或はデスクトップ装置上等のクライアント側の広範囲にわたる受信器/プレイヤーと互換性がなければならない。
従来のオーディオCODECは一般に幾つかのことなるタイプを含み、それらタイプの内の少数のものが説明の目的のためにここに簡単に要約される。
「コード励起線形予報(Code Excited Linear Prediction)」又は「CELP」は、標的信号の波形符合に対する励起フィルタ・フレームワーク内において「統合毎の分解(Analysis-by-Synthesis)」又は「AbS」を使用する波形CODECを用いての1つのタイプのスピーチ圧縮方法である。CELPに基づくCODECは高音質スピーチ圧縮用の優勢な技術として最近徐々に発展し、約6kbpsという低くさ近辺のデータ速度で有料音質の圧縮スピーチを伝送すべく公表された。しかしながら少なくとも1つの公表物はCELPコード化スピーチの音質が4kbps或はそれ以下でのビットレートに対して著しく低減されることを開示している。
「Vocoders」は波形コーディング方式に基づかないスピーチCODECであるが、標的入力スピーチの量子化されたパラメータ記述を用いて、再構築出力スピーチを統合する。vocodersは約4kbps等の低ビットレートでより良好なスピーチ音質を配送すべく開示されていると共に、そうした応用例に対して開発されてきた。低ビットレートのvocodersは音声化されたスピーチの周期的特性や静的な非音声化スピーチの「ノイズ様」特性をスピーチ分解、コーディング、並びに、統合のために使用する。Vocodersの幾つかの早期のバージョン(例えば、連邦規格1015 LPC-10は、時間領域分解及び統合方法を用いる。しかしながら、少なくとも1つの公表物が「調波コーダ」とラベル付けするより最近のバージョンの殆どは、音声化スピーチ・セグメントに対する調波スペクトル・モデルを利用する。
特定のスピーチ圧縮技術の先行する記載にもかかわらず、夥しい数のスピーチCODEC及び標準が産業界で開発されてきて、産業界や非営利団体で管理されてきた。そうした団体の例としては、何等制限無しに、含み、それら標準はしばしばCODECの参照タイプとして使用される。即ち、欧州電気通信標準化機構(「ETSI」)、電気電子技術者学会(「IEEE」)、並びに、以前は「CCITT」である国際電気通信連合標準化部門(「ITU-T」)である。
4Kbpsで特定されたスピーチのハイブリッド・コーディングに対する1つのより最近に開示された方法及び装置は、スピーチの再生のためにデコーダへの通信用のスピーチをコード化して、スピーチ信号が、(i)安定状態音声化或は「調波」、(ii)静的非音声化、並びに、(iii)「一時的」或は「変遷」スピーチの3つのタイプに分類される。コーディング方式の特定のタイプは各分類に対して使用される。調波コーディングは安定状態音声化スピーチに使用され、「ノイズ様」コーディングは静的非音声化スピーチに使用され、特別コーディング・モードは変遷スピーチに使用されて、スピーチの変遷部分を特徴付けるローカル時間事象の場所、構造、並びに、強度を取り込むべく設計されている。圧縮方式はスピーチ信号或はLP残留信号に対して適用されるべく意図されている。
既存の電気通信システムに新スピーチ・エンコーディング方法を追加する最近開示された別の方法及び装置も以下に要約されている。CODECがディジタル電気通信システムのスピーチ伝送トランシーバに導入されて、そのシステム内で「新しい」CODECと「古い」CODECとを並列で使用する。CODECは、スピーチ・エンコーディング方法が全てのトランシーバ内で具現化されると共に関係する電気通信システム内で先行して使用されているようなトランシーバ間でのハンドシェーキング手続を具現化することで選択される。ハンドシェーキングは各接続の始めに使用される。電話呼び出しの始めや話を聞かせた後、この方法は両者も新スピーチ・エンコーディングを使用するか否かを調査する。ハンドシェーキング・メッセージが選択されて、スピーチの音質に対するそれらの影響が最小となり、且つ、そのメッセージを識別する可能性が最大となる。
更に別の比較的最近の参照文献は、スピーチ圧縮用に意図されたタンデム(縦並び)CODECに対する調和可能な知覚的重量付けフィルタを開示している。特定のフィルタ・パラメータは縦並びの前後関係の点で改善された性能を提供するように調和されている。より詳細には、使用されるパラメータは第10番目LPC予知係数である。このシステムは「低遅延励起線形予報性(Low-Delay Excited Linear Predictive)」CODEC或は「LD-CELP」を使用すべく特定化されている。
以上に記載された例等に従ったCODECを用いるストリーミング・オーディオ通信システムの更なるより詳細な例は、特許文献11乃至13の米国特許に提供されている。これら参照文献の開示はそれを参照することでそれらの全体にわたってここに合体させる。
Chen et alの米国特許第6,144,935号 Haavisto et alの米国特許第6,161,085号 Gershoの米国特許第6,233,550号
人工知能(「AI」)及びCODECを伴うニューラルネットワーク
最近は様々なシステム及び方法が開示され、人工知能(「AI」)或はストリーミング・メディア信号の圧縮及び解凍を伴うニューラルネットワークを統合すべく意図されている。
用語「人工知能」は、コンピュータシステムによる人の知能プロセスのシミュレーションを意味すべくここでは意図されており、学習(情報と該情報を用いるための規則との取得)、推論(規則を用いて、近似的或は明確な結論に到達すること)、並びに、自己修正を含む。AIの特定の適用例は「エキスパート・システム」を含み、それは人或は特定の分野で専門知識及び経験を有する組織体の判断及び振る舞いを模倣するコンピュータ・プログラムである。典型的には、エキスパート・システムはプログラムに記述されている各特定の状況への知識ベースを含むと共に、知識ベース或は規則の集合に対しての追加によって向上され得る。
用語「ニューラルネットワーク」は、各々がそれ自体の小さな知識球を具備してそのローカル・メモリにおけるデータにアクセスするような、並列して動作する多数のプロセッサを通常は含んでいる人の脳の動作を近似するプログラム及びデータ構造のシステムを意味することがここでは意図されている。典型的には、ニューラルネットワークは初期的に訓練されるか或は大量のデータとデータ関係の規則とが供給され、その後、プログラムがそのネットワークに外的刺激(例えば、入力情報)に応じてどのように振る舞うべきかを教えることができる。決定を為す場合、ニューラルネットワークは幾つかの原則を用い、それには制限無しに勾配に基づく訓練及びファジー論理が含まれる。ニューラルネットワークは知識層に換算して更に記述されて、一般的にはより深い層を有するより複雑なネットワークを具備する。「フィードフォワード」ニューラルネットワーク・システムにおいて、学習したデータについての関係はより高い知識の層へ「フィードフォワード」される。ニューラルネットワークは一時的概念をも学習でき、信号処理及び時間系列分析に広範に使用されてきた。ニューラルネットワークの他の公表された応用例は、石油探査データ分析、天気予報、生物学研究所でのヌクレオチド系列の解釈を含む。
用語「ファジー論理」は、単なる真/偽(或は「1或は0のような「バイナリ」」区域内で動作する「ブール論理」ではなく「真理度」に基づく計算へのアプローチを意味すべくここでは意図されている。ファジー論理は、絶対ブール論理用語には容易に翻訳されない自然言語のコンピュータ理解の問題に対する研究に関連して、1960年代にバークレイのカリフォルニア大学のLotfi Zadeh博士によって先ず提唱された。ファジー論理は、しばしば、真理の極端な場合として0及び1の場合を含むが、中間の様々な真理状態をも含む(例えば、存在状態が0.98等の幾分かの閾値であることの決断は、演算における誤差の許容できる低発生に1を割り当てるべく決定の補助を為し得る)。
人工知能を伴ってニューラルネットワークを介して使用することが意図された先行して開示されたストリーミング・メディア圧縮/解凍システムの一例は、ビデオ・データ等のデータを圧縮するためにラドン(Radon)変換を用いる。幾つかの先行して開示されたAI及び/或はニューラルネットワークのシステムは、ある特定化された損失無し圧縮CODECの使用中の誤差修正の目的のためにAI及び/或はニューラルネットワークを用いることが意図されている。例えば、学習システムは圧縮及び伝送の後に受信器によって受信されるものと、伝送末端で受信されたと予報されるものとの間の違いを決定すべく利用される。この違いは学習として処理されて、追加伝送に対するCODECの同調を変更する。
開示された方法及び装置の別の例は、ディジタル・スピーチ・フレーム誤差を隠すため、喪失データ・セグメント内への挿入のために過去の信号-履歴データを外挿すべく意図されている。この外挿方法はバッファに記憶されている過去の信号履歴を用いる。この方法は、有限インパルス応答(「FIR」)、多数層、フィードフォワード、並びに、スピーチ圧縮アルゴリズム(「SCA」)・パラメータのワンステップ外挿に対する後方伝播によって訓練される人工ニューラルネットワークを利用すべく開示される装置によって具現化される。ひとたびスピーチ接続が設定されたならば、スピーチ圧縮アルゴリズム装置はコード化スピーチ・フレームの送信を始める。スピーチ・フレームが受信されると、それらはデコード化されスピーチ信号電圧に戻るように変換される。正規のでコーディング処理中、必要とされるSCAパラメータの事前処理が行われて、その結果が過去履歴バッファに記憶される。もしスピーチ・フレームが喪失或は誤差ありと検出されれば、外挿モジュールが実行され、代替SCAパラメータが発生させられてSCAが必要とするパラメータとして送信される。このようにして、SCAへの情報転送は透過性であることが意図され、SCA処理は通常通りに続行する。この開示が主張することは、スピーチ・フレームの最後に受信したもの、喪失したもの、並びに、次に受信したものの間での平滑な変遷のためにスピーチ・フレームが喪失してしまったことに聞き手が通常は気づかないことである。
人工知能及び/或はニューラルネットワークをメディア圧縮及び/或は解凍に対するシステム内で使用することが意図されているシステムの更により詳細な例は、一般的にはメディア・タイプ特定CODEC方法(例えば、スピーチ、ビデオ)に関係しており、特許文献14乃至23の米国特許に様々に開示されている。また更なる例は公開国際特許出願である特許文献24及び25に提供されている。この段落におけるそれら全ての参照文献の開示はそれらを参照することでそれらの全体にわたってここに合体させる。
Naillon et alの米国特許第5,005,206号 Yoshida et alの米国特許第5,041,916号 Gerdesの米国特許第5,184,218号 Burel et alの米国特許第5,369,503号 Fang et alの米国特許第5,598,354号 Kurdzielの米国特許第5,692,098号 Fang et alの米国特許第5,812,700号 Imade et alの米国特許第5,872,864号 Prieto, Jr.の米国特許第5,907,822号 Mitchellの米国特許第6,216,267号 RisingのWO 01/54285 Naillon et alのEPO 0372608 A1
フィードバックを用いたCODECシステム、或は、様々なストリーミング・メディア信号の処理用CODECを操作する他のシステムの他の開示は、それらはラベル「AI」或は「ニューラルネットワーク」を特に使用するとは思えないが、特許文献26乃至29の米国特許に開示されている。これら参照文献の開示はそれらを参照することでそれらの全体にわたってここに合体させる。
Betts et alの米国特許第6,072,825号 Malvarの米国特許第6,182,034 B1号 Malvarの米国特許第6,253,165 B1号 Malvarの米国特許第6,256,608 B1号
CODECアルゴリズム自体における著しい前進にもかかわらず、且つ、通信に関しての圧縮効率を改善するためにCODECを操作するAI及び他のフィードバック・システムの先行して意図された使用にもかかわらず、変動する帯域幅及び通信プロトコルによって、広い種類の伝送チャンネルにわたって広い種類の到着受信器装置へ広い種類のストリーミング・メディア信号を効率的に提供する能力の点での著しい改善の更なる必要性がある。
AI及び/或はニューラルネットワークを組み込んで、様々なパラメータに基づきストリーミング・メディア信号の通信用の適切なCODECに適用する更なる必要性があり、それらの様々なパラメータとしては、制限無しに以下の内の1つ或はそれ以上を含む。(a)異なるタイプ及び操作の有効CODECから成るライブラリから適切に最適化されたCODECの自動選択であり、特に選択されたCODECの操作の他のCODEC操作と比較した人工知能及び/或は標準と対する人工知能に基づくことを含むもの、(b)既存の状況を表す操作パラメータから成る所与の集合以内における特定のCODEC操作の事前学習及び/或は繰り返し学習が為された知識、並びに、(c)既存状況及び/或は試験状況に関するその操作の知的知識に基づく適切なCODECの参照パラメータに対する同調。
特に、適用されたCODECを以下のパラメータの内の1つ或はそれ以上によって規定される既存の状況に基づかせる知的CODECに対する更なる必要性があり、それらパラメータとしては、ストリーミング・メディア信号自体のパラメータ、伝送チャンネル能力及び制約のパラメータ、並びに、受信器装置能力及び制約のパラメータを含む。
更には、適切な圧縮、伝送、解凍、並びに、主題ストリーミング・メディア信号の再生を最適化するために、それら操作及び状況パラメータに関して知的知識に基づき動作する知的CODECシステムの更なる必要性がある。
ストリーミング・メディア用の従来のトランスコーダ
また、ストリーミング・メディア通信の分野における最近の関心事の内の1つは、現行使用における「フォーマット特定」エンコーディング・システムの広範なアレイの間に相互通信を提供することである。様々な異なるフォーマット特定システム及び事前コード化コンテンツの既存の分野は、コード化されたコンテンツを処理すべく広範囲に分裂された能力を作り出し、コンテンツ・プロバイダ及びクライアント・ユーザの間に互換性争点の著しい窮地を生み出している。もしあるクライアントが特定のソースからストリーミング・コンテンツを見ること或は聞くことを望めば、そしてそのコンテンツが圧縮のためのCODECを通過させる必要があれば、互換性あるCODECがその信号を楽しむべく解凍のためにクライアント側で使用されなければならない。残念ながらソース・コンテンツは、ほんの少しのそしてしばしば1つのみの特定CODEC方式としばしば合体される。それ故に、もしクライアントがそうしたコード化コンテンツを要求すれば(或は、もしソースがそのコード化コンテンツを特定クライアントへの引き渡しを望めば)、2つの規準の内の1つが合致しなければならない、即ち、(1)クライアントはフォーマット特定CODEC(デコーダ)をダウンロード或は保持しなけれならない、或は、(2)ソース・メディアを「トランスコーダ」を通過させなければならなず、そのソース・メディアを第1フォーマットからクライアントの装置/システムと互換性ある第2フォーマットにデコードする。用語「トランスコーダ」は、メディア信号を1つのコード化(即ち圧縮)フォーマットから別のフォーマットに変換するシステムを意味するようにここでは意図されている。
1つのメディア・フォーマットを別のものにトランスコーディングする様々な技術は先行して開示されている。図1Cは数多くの既知のトランスコーディング技術の特有である一般プロセスの1つの説明に役立つ実例を示す。より詳細には、要求159は初期的には非互換性フォーマットで存在するコンテンツに対する装置或はプレイヤーの特定タイプから先ず受信される。図1Cに示された特定例に従って、リアル(商標)・ビデオ・コンテンツ用にマイクロソフトメディア(商標)からの要求159が受信される。そのコンテンツははっきりと限定されて要求されているので、該コンテンツはその初期的フォーマット(例えばリアル-コード化フォーマット)からデコードされ、次いでその要求プレイヤー(例えば、マイクロソフトメディア(商標)・フォーマット用に適切なフォーマットに「再コード化」される。次いでこの再コード化メディアは、要求クライアントにとって、そのプレイヤーの残りシステム内でのでコーディング用に役立つ。
この従来システムは重大なスケラービリティ制限を有し、多数のクライアント用に多数のチャンネルに対する同時供給が同等数のトランスコーダによってサポートされなければならない。例えば、図1Dは、4つのマイクロソフトメディアプレイヤーからの4つの同時ストリーム要求を管理するように先に記載された従来のトランスコーディング技術の概略的な具現化例を示し、要求されたコンテンツがリアル(商標)・フォーマットに初期的にコード化される。4つのエンコーダ151−154と4つのデコーダ155−158をサポートする必要があるこのシステム・アーキテクチャは、著しい計算リソースを必要とする。例えば確信されることは、この例に提供された各エンコーダ151−154が128Mバイトの有効RAMを具備して600MHz(例えばペンティアム(登録商標)III)を有するか、或は、256Mバイトの有効RAMを具備するデュアル400MHzプロセッサ(例えばペンティアム(登録商標)II)を有するコンピュータを必要とすることである。更に確信されることは、各デコーダ155−158は64Mバイトの有効RAMを有する233MHzマシン(例えばペンティアム(登録商標)II)が必要であることである。それで、4つのそうしたストリームは、(コンパック社、ヒューレット・パッカード社、デル社、IBM社から入手可能で、この出願開示時に小売価格で9,000ドル程度であると推定される)Quad 900 Xeonの等価物を必要とする。これは4つの同時ストリーム用であり、社会は、現在、何千という同時ストリームを要求している。
最少の計算リソースを用いてコスト効果的に、多数のフォーマット特定コード化ストリーミング・メディア信号を多数の他のフォーマットに効率的に変換するトランスコーダ・システムを求める必要性が依然としてある。
パラメータ影響型メディア通信
特定のストリーミング・メディア信号を所望標的に通信するために適切なCODECの選択に衝撃を与える可能性がある数多くの変数を更に説明する目的で、以下にストリーミング・ビデオ・フォーマットの様々な異なるタイプと処理システムとの簡単な要約を提供する。確信されることは、これら異なるシステムが、各々、異なるタイプの圧縮様式(例えば、CODEC)を必要としていることであり、有効な伝送速度及び帯域幅を考慮して、通信と、ストリーミング・メディア信号の再生とを受信器処理パラメータと共に最適化する。
特定のタイプの通信フォーマット及びシステムが更にここで詳細に記載されるが、以下のテーブル1は、現在有効であると共に有効速度或は帯域幅を考慮して開示された、種々の異なる通信システム及び伝送キャリアの重要な断面の要約を提供している。
Figure 0004852228
Figure 0004852228
Figure 0004852228
Figure 0004852228
(i)用語「Kbps」は「1秒当たり何千ビット」の省略形。合衆国以外の国際的な英語で、等価物の使用は「kビットs−1」或は「kビット/s」である。
(ii)技術者は速度よりもデータレートを用いるが、(「なぜ私のウェブページはここでより高速とならないのか?」のような)速度はより少ない技術的傾向に対してより意味深長であるように見える。
(iii)データ通信に対する関連用語、帯域幅或は「容量」はパイプがどの程度広いのか且つビットがパイプ内のチャンネルにどの程度迅速に送信され得るのかを意味する。即ち、キャリア内の多数信号チャンネル上のデータは、通常、異なる用途に対する或は異なるユーザ間でのチャンネルによって振り分けられる。

キー:(i)「T」=合衆国、カナダ、並びに、日本におけるT-キャリア・システム...(ii)「DS」=ディジタル信号(T-キャリア或はE-キャリア上を移動)...(iii)「E」=1チャンネル当たり合計8ビットを使用する「T」の等価物;合衆国、カナダ、並びに、日本以外の国々で使用...(iv)「OC」=光キャリア(同期光ネットワーク)「STM」=同期トランスポート・モジュール(同期ディジタル階層参照)。(v)最も共通したテクノロジーだけが示されている。(vi)「物理的媒体」は一般的に記述され、ツイストペアの対の分類或は数や、光ファイバが単一モード或は多数モードであるのかを特定していない。(vii)テクノロジーの効果的な距離は示されていない。(viii)これらテクノロジーの多くに対して公表された標準がある。

カーブル・モデム注:ケーブル上での52Mbpsの上限はISP向けであり、現行では個人PC向けではない。今日のPCの殆どは10Mbps未満に適合できる内部設計に限定されている(PCIバス自体はより高速でデータを運ぶ)。52Mbpsケーブル・チャンネルは個々別々のユーザ間で分割されている。明らかに、チャンネルがより高速であれば、より少ないチャンネルがISPで必要とされ、個々別々のユーザをサポートするコストはより低くなる。
インターネット・キャリア・システム
インターネットを介してのストリーミング・ビデオの通信は種々の通信様式にわたって行われ得て、例えばディジタル加入者線(「DSL」)、「T1」線、ケーブル・モデム、従来の電話サービス(「POTS」)・ダイアルアップ・モデム、並びに、ワイヤレス・キャリアを含んでいる。数多くの異なるワイヤレス通信様式の記載がここでは個別に取り扱われているが、これらのほかの通信モードの様々な要約は、以下のような更なる説明の目的のためにここでは以下に直ちに提供される。
通信伝送チャンネルに適用されるような用語「POTS」、「従来の電話サービス」、或は、「ダイアルアップ」は、交換可能にここでは使用される。これら用語は、一般的には、家庭或は小企業におけるエンドユーザを電話会社局へ相互に巻回された或は「ツイストペア」と成った銅ワイヤを介して接続する「狭い帯域」通信を意味することを意図している。従来の電話サービスは、音量(信号振幅)及びピッチ(周波数変化)の点から見れば、電気的等価物に変換された音響アナログ信号を表すアナログ信号を介して音声情報を他の電話ユーザと交換させるように為すべく作り出された。電話会社の信号送りはこのアナログ波通信に対して既に組み上げられているので、それを各電話及び電話会社の間で情報を前後する方法として使用することは容易である。それ故に、ダイアルアップ・モデムが使用されて、アナログ信号を復調しその値をディジタル情報と呼称される0及び1の値のストリングに変える。アナログ伝送は銅ワイヤを介して伝送され得る情報の有効量の小さな一部のみを使用するので、通常のモデムを用いて受信可能なデータの最大量は約56Kbpsである。情報を受信する貴方のコンピュータの能力は、電話会社が、ディジタル・データとして到着する情報を濾過し、貴方の電話回線用にアナログ形態に変換し、そして貴方のモデムにそれをディジタルに戻すべく変更することを要求すると云う事実によって制約されている。言い換えれば、貴方の家庭若しくは会社と電話会社との間でのアナログ伝送は帯域幅のボトルネックである。
DSLに制限された前触れと幾分考えられる「ISDN」又は「インターネット加入者ディジタル・ネットワーク」によって、約128Kbpsまでで入来するデータレートは幾つかのエンドユーザ・クライアントに対して達成され得る。
「DSL」又は「ディジタル加入者線」は、一般的には、通常の銅製電話回線を介しての高い帯域幅通信を通信する「ブロードバンド(広帯域)」伝送キャリアとして規定される。数多くの異なるタイプのDSLサービスが開示されてきたが、変動データレート及び意図された用途とを一般的には有する。更なる議論がこれらDSLタイプの特定のものについてここに提供されているが、以下のテーブル2は、全体像理解を更に発展する目的のために、これらDSLの特定のものに対する情報の要約を提供している。
Figure 0004852228
Figure 0004852228
提供サービス会社の中央局からの距離に依存して変動し得るDSLサービスに対する典型的な公表データレートは、6.1Mbpsまでのレートを含み(理論的には8.448Mbpsで公表されている)、その値は動作ビデオ、オーディオ、並びに、3-Dの効果の連続伝送を可能とすると信じられる。より典型的な個々別々の接続は、512Kbpsから1.544Mbpsまでの下りと約128Kbpsの上りを提供する。DSL線はデータ及び音声信号の双方を運ぶことができ、線のデータ部は連続的に接続される。DSLは幾つかの公表物において多くの領域でISDNと置き換わって、家庭及びビジネス向けマルチメディア通信用のケーブル・モデムと競合すると予知されてきた。DSLはディジタル区域内で純粋に動作し、アナログ形態への変化とその逆とを必要としない。ディジタル・データは直接的にディジタル・データとして到着コンピュータへ伝送され、これは電話会社が相当により広い帯域幅を前方伝送用に使用することを可能としている。一方で、もしクライアント・ユーザが選択すれば、信号は分離され得て、その帯域幅の幾分かがアナログ信号を伝送すべく使用されて、電話及びコンピュータが同一線且つ同一時間に使用され得ることになる。
殆どのDSLテクノロジーは、信号スプリッタが家庭或は商店内にインストールされていることを要求し、それは電話会社の訪問や据付の費用が必要である。しかしながら中央局から遠隔的に分割又はスプリットを管理することが可能である。これはスプリットレスDSL、「DSLライト」、ジー・ライト(G. Lite)、或は、ユニバーサルADSL(以下に更に定義されている)として知られ、最近では標準となった。幾つかの変調テクノロジーが様々な種類のDSLによって使用されるが、これらは国際電気通信連合(ITU)によって標準化されている。異なるDSLモデム・メーカはDMT(マルチキャリア変調方式)或はCAP(キャリアレス振幅位相変調方式)の何れかを用いている。マルチプル専用線(MVL)として知られる第3のテクノロジーは別の可能性である。
DSL動作の種々のパラメータは変数であり、達成可能な効果的なデータレートに影響する。DSLモデムは、北アメリカ及び欧州の標準によって設定されたデータレート・マルチプルに一般的には従う。一般に、リピータ無しのDSLに対する最大有効範囲は5.5km(18,000フィート)である。電話会社局に向かう距離が減少すると、データレートは増大する。別の要因は銅ワイヤのゲージである。より重い24ゲージ・ワイヤは26ゲージ・ワイヤよりも遙か遠くに同一データレートを運ぶことができる。5.5キロメートルの有効範囲を超える到着装置にとって、単にもし各電話会社プロバイダが光ファイバ・ケーブルでロカール・ループを延長したとしても、DSLは依然として設けられ得る。
マルチプルDSLユーザを「バックボーン」としての高速ネットワークと相互接続すべく、電話会社はディジタル加入者線アクセス・マルチプレクサ(「DSLAM」)を使用する。典型的には、このDSLAMは、ギガビット・データレートでのデータ伝送を総計できる非同期転送モード(「ATM」)・ネットワークと接続する。各伝送の他方エンドで、DSLAMは信号を分解又は分波して、それらを適切な個々別々のDSL接続部へ送る。
「ADSL」或は「非対称型ディジタル加入者線」はDSLの形態であり、家庭及び小企業のユーザに最も馴染み深いものである。ADSLは「非対称型」と云われるが、その2方向或は「デュプレックス」の帯域幅がダウンストリーム(下り)方向に充てられて、データをユーザへ送信しているからである。帯域幅のほんの小さな部分がアップストリーム(上り)或はユーザ双方向メッセージに対して有効である。しかしながら殆どのインターネット、特にグラフィック-メディア若しくはマルチ-メディア集中ウェブのデータはたくさんの下り帯域幅が必要であるが、ユーザ要求及び応答は小さく、上り帯域幅を殆ど必要としない。ADSLを用いて、単位秒当たり6.1メガビットまでのデータは下り送信可能であり、640Kbpsまでの上りが可能である。高ダウンストリーム(下り)帯域幅は、電話回線が動作ビデオ、オーディオ、並びに、3-D画像を到着コンピュータ或はテレビジョン・プレイヤーまで運び得ることを意味する。加えて、ダウンストリーム帯域幅の小さな部分はデータよりも音声に充てられ得て、電話会話は別の回線を必要とすることなく運ばれ得る。「ケーブル」テレビジョン線を介しての同様サービスとは異なり、ADSLは所与の領域内での近辺と帯域幅で競合しない。多く場合、貴方の既存の電話回線はADSLを伴って稼働することになる。幾つかの領域ではアップグレードが必要となる可能性がある。
「CDSL」又は「消費者DSL」はDSLの商標バージョンであって、ロックウェル・コーポレーション社によって利用可能と為され、それはADSLよりも幾分遅いが(1Mbps下り、一般的にはより低い上りであると予想される)、ユーザ・エンドに「スプリッタ」を据え付ける必要がないと云う長所を有する。ハードウェアは、ローカルな電話会社によってCDSLを家庭或は商店向けて運ぶことが必要とされ得る。CDSLは、DMT又はCAP ADSLテクノロジーよりもそれ自体のキャリア・テクノロジーを用いる。
様々な会社は、標準や、この開示の時に展開中であると信じられる「G.Lite」と呼称されるADSLのより容易な据付バージョンを開発する点において電話会社と一緒に稼働してきた。「G.Lite」又は「DSL Lite」(「スプリッタレスADSL」及び「ユニバーサルADSL」としても知られる)は本質的にはより緩慢なADSLであると信じられ、それはユーザ・エンドで回線の分割を要求しないが、電話会社で遠隔的にユーザ用に分割すべく管理しており、より低いコストである信じられている。G.Lite、公式にはITU-T標準G-992.2は、1.544Mbpsから6Mbpsまでの下りと約128Kbpsから約384Kbpsの上りとのデータレートを提供すると公表されている。少なくとも1つの公表物はG.LiteがDSLの最も広範に据え付けられる形態になると予想した。
「HDSL」又は「High bite-rate DSL」はDSLのより早期のバージョンであると思われ、企業サイト内や電話会社及び顧客の間で広帯域ディジタル伝送用に広く用いられている。HDSLの主な特性は対称的であることであり、帯域幅の同等量が双方向で有効である。この理由のため、最大データレートはADSLに対するよりも一般に低い。HDSLは北アメリカにおけるT1上で運び得るか、或は、(約2.32Mbpsまで)欧州におけるE1線上で運び得るように、ツイストペアの単一ワイヤ上で多量に運び得る。
「IDSL」又は「ISDN DSL」は、ISDNデータレートと実により緊密であると共にADSLと一般的に関連された相当により高いレートと比較して約128Kbpsでサービスする程に幾分間違った名称である。
「RADSL」又は「レート-アダプティブDSL」はウェステル・カンパニー(Westell Company)社から入手可能であるADSLテクノロジーであり、そのソフトウェアは信号が所与の顧客電話回線上で伝送可能であるレートを決定し得て、それ故に配信レートを調整できる。ウェステルの「FlexCap2(商標)」バージョン・システムはRADSLを用いて、既存回線を介して、約640Kbpsから約2.2Mbpsまでの下りと約272Kbpsから約1.088Mbpsまでの上りで配信できる。
「SDSL」又は「対称型DSL」は単ツイストペア線を具備する一HDSLと同様であり、デュプレックス線上の各方向で約1.544Mbps(合衆国及びカナダ)或は約2.048Mbps(欧州)を運ぶ。データレートは両方向で同一であるので対称型と云う。
「UDSL」又は「単向性DSL」は欧州の会社によって提案され、HDSLの単向性バージョンを提供すると一般には思われている。
「VDSL」又は「Very high data rate DSL」は、例えば約51Mbpsと約55Mbpsの間で、約1,000フィート或は約300メートルの長さの線を介して、比較的短い距離にわたって相当により高いデータレートを約束して開発中のテクノロジーであると思われる。少なくとも1つの公表物は、VDSLはADSLが広範に展開された幾分後で出現され得てそれと共存すると予想した。通信テクノロジー(CAP、DMT、或は、その他)と、幾つかの環境におけるその効果とは未だ決定されていない。多数の標準化組織がそれに対して作業している最中である。
「x2/DSL」は3Com社のモデムであり56Kbpsモデム通信をサポートするが、ユーザの領域利用可能となる場合にADSLへの新ソフトウェアのインストールを介してアップグレードすることができる。少なくとも1つの公表物は、この技術は「貴方が必要とする最新のモデムである」と表明するものとして3Com社を挙げている。
「T1」通信線は「ブロードバンド」キャリアと一般には考えられ、「T-キャリア」システムの1つのタイプとして規定されており、ディジタル化された音声伝送をサポートした第1成功システムとして1960年代に合衆国のベル・システム社(the Bell System)によって先ず導入されたと信じられる。このT-システムは、パルス・コード変調及び時分割多重化を用いた全体的にディジタルである。音声信号は、典型的には、単位秒に約8,000回サンプリングされ、各サンプルは8ビット・ワードにディジタル化される。こうして、同時にディジタル化された24チャンネルによって、24チャンネルの各々において8ビット・ワードを表している192ビット・フレームが単位秒に約8,000回伝送される。各フレームは次のものから単位ビットだけ分離されて193ビット・ブロックとなる。1.544MbpsのT-1が公表するデータレートは192ビット・フレームと、8,000で乗ぜられた1ビット・シグナリング・ビットを表す。
T-1システムは、典型的には、4つのワイヤを用いてデュプレックス能力を提供し、2ワイヤが受信専用であり且つ同時に2ワイヤが送信専用である。T-1ディジタル・ストリームは多重化される24,64Kbpsチャンネルを含み、標準64Kbpsチャンネルが音声会話用に必要される帯域幅に基づいている。それら4ワイヤは、元々、一対のツイストペア銅ワイヤであったが、より最近のシステムは同軸ケーブル、光ファイバ、ディジタル・マイクロウェーブ、並びに、他のキャリアのテクノロジーを提供している。
T-1線に対するオリジナルの伝送レート(1.544Mbps)は、インターネットへのインターネット・サービス・プロバイダ(「ISP」)接続で今日共通して使用されている。別のレベルとしてのT-3線は44.736Mbpsを提供すると公表されており、これもインターネット・サービス・プロバイダによって共通して使用されている。別の共通して使用されるサービスは「fractional T-1」であり、それは他の不使用のチャンネルを伴って、T-1線において24チャンネルの幾分かのレンタルである。
表示能力/制約及び関連標準
様々な異なるタイプの受信器表示能力も、受信器による表示のための特定ストリーミング・メディア信号を効率的に通信するため、適切なCODECに著しい衝撃を与えた。そうした種々の表示パラメータ(例えば、解像度、明瞭性、カラー、深さ、サイズ、タイプ/フォーマット特定等)を説明する特定の例の簡単な要約がより良好な理解のために以下に提供されている。
異なるタイプとストリーミング・メディア受信器装置のメーカとの間の大きな変数である1つのパラメータであり、それ故に使用されるべき適切なCODECに対して著しい衝撃を与え得る1つのパラメータは、表示装置或は「パレット」によって表現され得るカラーの範囲である。インターネットに基づくストリーミング・メディア表示に対して殆どのソフトウェアによって適合され得る標準的な「ブラウザーサーフ」パレットは例えば約216色を含み得るが、ウェブに基づくストリーミング・メディアに対してコンピュータ表示能力はブラウザ・ソフトウェア能力と共に理解されなければならない。
コンピュータ表示テクノロジーに関して、カラーはスクリーンに対する各個別ピクセル或はアドレス指定可能な照明要素に対して設定されている。各ピクセルは、赤、緑、並びに、青(RGB)のコンポーネントを有する。これらコンポーネントの各々に対する濃度又は強度の量を特定することによって、個別カラーはそのピクセルに付与される。「真カラー(true color)」表示は、一般に、24ビット値を用いて表示スクリーン上二ピクセルのカラーを規定して、16,777,216個の可能カラーまでの可能性を許容している。ピクセルのカラー陰影を規定すべく使用されるビットの数は「ビット深さ」と呼称される。カラーはしばしば「24ビット・カラー」と言及されるが、多くの近代的なカラー表示システムは32ビット・カラー・モードを提供する。「アルファ・チャンネル」と呼称される余剰バイトは、典型的には、制御及び特別効果の情報に対して使用される。「グレイスケール」(灰色の個別的な陰影から構成される)表示設定はNビットの深さを有すると一般には規定され、Nはピクセル内の黒の飽和を表している。もしN=1であれば、画像はグレスケールと呼称されないが、代わりに単色或は黒及び白であり、それはそのビットが単なるオン或はオフであり得て陰影情報を何等含むことができないからである。
一般的なコンピュータ解像度は、例えば且つ制限無しに、
(i)4:3のピクセル比で、16色で640x480ピクセルを表示するか或は256色で320x240ピクセルを表示するVGA又はビデオ・グラフィック・アレイ能力、
(ii)800x600x6ビット/ピクセル(16色)或は650x480x8ビット/ピクセル(256色)のSVGA又はスーパー・ビデオ・グラフィック・アレイ能力であり、SVGAはビデオ・エレクトロニクス・アソシエーション(VESA)によって作り出された、
(iii)32,768色で1024x768ピクセルのXGA(v1-4)又はエクステンデット・グラフィック・アレイ能力、
の事柄を含む。
SXGA等の追加的な標準が追加され、1960x1440以上のピクセル・サイズと32ビット/ピクセル或はそれ以上のカラー深さを規定している。
カラー(或はパレット)のより大きな範囲が特定の表示或はブラウザが取り扱い可能なメディア信号によって使用される場合、典型的には殆どのブラウザはカラーに「ディザ」すべく適合され、それでここで意図されようとすることは、ブラウザがそのパレットの外側である任意のカラーを代替できる、そのパレット内の複数カラーを見出すことを意味することである。種々のシステム表示能力の広範囲を更に説明すべく、ウィンドウズ(登録商標)(マイクロソフト・コーポレーション社から商業的に入手可能)を用いるシステムとマッキントッシュ(商標)(アップル・コーポレーション社から商業的に入手可能)に基づくオペレーティング・システムは同等のパレットを有することなく、通常的な256色パレット内で216色が両タイプのブラウザに共通しているが、40色が異なり、それ故に、画像信号がそれらシステムの一方によって特定されたフォーマットで他方のシステム・タイプに通信されれば、他方のシステムで動作しているブラウザによるディザリングを必要とする。
また、視覚的な表示が電子情報からどのようにイネーブルされるかに関して数多くの異なるテクノロジーが存在する。用語「VDT」又は「ビデオ・ディスプレイ・ターミナル」はコンピュータ産業内で一般的には使用され、ここでは「ディスプレイ」との単純な言及で言い換えできるように使用されることが意図されている。コンピュータ・ターミナル使用に関して、VDTはコンピュータ出面面と、コンピュータ・ユーザにテキスト及びグラフィック画像を示す投影機構とを含む。VDTは種々の特定ディスプレイ・テクノロジーを使用でき、例えば、カソードレイチューブ(「CRT」)、液晶ディスプレイ(「LCD」)、発光ダイオード(「LED」)、ガス・プラズマ、或は、他の画像投影テクノロジーを含んでいる。通常、ディスプレイはスクリーン或は投影面と、そのスクリーン上に情報を作り出す装置とを含むと考えられる。ある種のコンピュータにおいて、ディスプレイは別のユニット或は「モニタ」の形でパッケージされるか、或は、ディスプレイはコンピュータ・プロセッサと一緒の単一ユニットに完全に統合されることなる。
特にLCDに関して、このテクノロジーは他のVDTと比較して最少体積及び物理的深さを一般的には必要としており、それ故に典型的にはラップトップ型コンピュータ及び携帯電話/PDAで使用される。LCDはLED及びガス-ディスプレイVDTより相当に少ない電力を消費するが、それはそれらが発光すると云うよりは一般的には光を遮断する原則で稼働するからである。LCDは、「薄膜トランジスタ」又は「TFT」ディスプレイとしても知られる「受動マトリックス」或は「能動マトリックス」の何れかであり得る。受動マトリックスLCDは導体から成るグリッドを有し、ピクセルがグリッド内の各交差点に配置さている。電流がグリッドにおける2つの導体を横切って送られて、任意のピクセルに対する光を制御する。能動マトリックスは各ピクセル交差点に配置されたトランジスタを有し、ピクセルの輝度を制御すべくより少ない電流を必要としている。この理由のため、能動マトリックス・ディスプレイにおける電流はより頻繁にオン・オフとスイッチされ得て、スクリーン・リフレッシュ時間を改善すると共に、それ故にストリーミング・メディア(アクション・ビデオ)のより高い速度に対する効能を改善している。幾つかの受動マトリックスLCDはデュアル・スキャニングを為し、それはより早期のバージョンでの1スキャンと同じ時間でグリッドを電流で2度スキャンするが、能動マトリックスが依然としてそれら2つの内でより優れたテクノロジーであると一般的には考えられている。反射型カラー・ディスプレイ・テクノロジー、即ち、カラー・フィルタの受動マトリックス内への統合を為したディスプレイ構造は低電力で低コストな能動マトリックス・テクノロジーの代替である。それらは環境光を反射するので、反射型LCDは日中の屋外での使用中に特に高い性能を発揮する。様々に異なるディスプレイ・テクノロジーとそれ故の伝送フォーマットもテレビジョン視聴用に特に開発されてきた。よって、幾つかの異なる標準がテレビジョン伝送用に発展され、それらの相違はテレビジョン環境でストリーミング・メディアを通信するために所望された圧縮(そしてそれ故に特定のCODECの選択)の性質及び程度に著しい衝撃を与え得る。これらの標準は、特に且つ制限無しに、標準精細度テレビジョン(「SDTV」)及び高品位テレビジョン(「HDTV」)を含む。
「SDTV」又は「標準鮮明度テレビジョン」と「HDTV」又は「高品位テレビジョン」はディジタル・テレビジョン(「DTV」)伝送用のディスプレイ・フォーマットの2つの分類であり、標準となってきている。これらフォーマットはディジタル万能ディスク(「DVD」)と同様な映像品質を提供し、それらの類似性及び相違に対して以下の様に要約される。
HDTVはより高い品質のディスプレイを提供し、映画鑑賞と同様な視聴体験のために、約720pから少なくとも約1080iまでの垂直解像度表示と概略16:9のアスペクト比(スクリーンの幅対高さ)を具備する。新しいテレビ受像器は、信号をそれらの固有ディスプレイ・フォーマットに変換できる受信器を具備したHDTV能力或はSDTV能力の何れかとなる。HDTVと共通してSDTVは、MPEG-2ファイル圧縮方法を用いて、ディジタル信号を約166Mbpsから約3Mbpsまで一般的には低減する。これは放送局が既存のケーブル、衛星、並びに、地上システムを用いてディジタル信号を伝送させることを可能とする。MPEG-2は損失性圧縮方法を用い、それはテレビジョンに送信されたディジタル信号が圧縮され、そして幾分のデータが損失するが、この損失データは人の目が映像をどのように見るかについて影響を与えるか或は影響を与え得ない。ATSC及びDVBの双方はビデオ圧縮及び転送に対してMPEG-2を選択した。MPEG-2圧縮標準はここでの他の場所で更に詳細に記載される。
圧縮SDTVディジタル信号は圧縮HDTV信号よりも小さいので、放送局はちょうど1つのHDTV番組の代わりに5つまでのSDTV番組を同時に伝送でき、これは「マルチキャスティング(multicasting)」としても知られる。マルチキャスティングは、テレビ局がそれら余剰な番組が提供する追加的な広告から追加的な収益を受けることができるので魅力的な特徴である。今日のアナログ・テレビジョン・システムによって、一時に1つの番組のみが伝送され得る。留意することは、用語「マルチキャスティング」のこの使用は、特別なアドレス指定技術を用いてそれが係わる場合、ストリーミング・ビデオにおいてのその使用からは区別されることである。
合衆国はアナログ・テレビジョンからDTVへの移行を決定した際、米国連邦通信委員会は放送局にSDTV番組を放送すべきか或はHDTV番組を放送すべきかを決定させることに決めた。殆どの放送局は、日中はSDTV番組を放送し、ゴールデンアワーの放送はHDTV番組を放送することに決定した。これらSDTV及びHDTVは、ディジタル・ビデオ放送(DTV)及びアドバンスド・テレビジョン・システム委員会(ATSC)の標準の受像器によってサポートされる。
テレビジョン・ディスプレイ・テクノロジーとしてのHDTVは35mm映画と同様な映像品質を提供すると共に、今日のコンパクト・ディスクの音質と同様の音質を提供する(更にオーディオ品質に関しては、HDTVはドルビー・ディジタル5.1を受信、再生、並びに、出力する)。幾つかのテレビ局は限られた数のチャンネルでHDTV放送をユーザ向けに伝送し始めた。HDTVはアナログ信号伝送ではなくディジタルを一般的に使用する。しかしながら日本では、最初のアナログHDTV番組が1989年6月3日に放送された。現れた最初の画像は自由の女神とニューヨーク港であった。それは20MHzチャンネルを必要としたが、これはアナログHDTV放送が殆ど国々で定着していないからである。
HDTVはSDTVよりより高品質表示を提供し、720pから1080iまでの垂直解像度表示を伴う。このpはプログレッシブ・スキャニング(順次走査)を表し、各スキャンが1つの完全な画像に対する各線を含んでおり、そしてiはインターレースド・スキャニング(飛び越し走査)を表し、画像の半分に対する1つ置きの線を含む。これらのレートは60フレーム/秒までのフレーム・レートに転換し、重等のテレビジョンのものの2倍である。HDTVの最も顕著な特徴の内の1つは16:9と云うその広いアスペクト比であり(スクリーンの幅対高さ)、それは視聴者の経験はより広いスクリーンによって向上されると云う調査研究に基づく信念に基づく開発である。HDTVピクセル数は、300,000から百万までのSDTVの範囲と比較して、1から2百万までの範囲である。新しいテレビ受像器はHDTV能力或はSDTV能力の何れかとなり、受信器は信号をそれらの固有ディスプレイ・フォーマットに変換できる。
合衆国において、FCC(米国連邦通信委員会)はDTV伝送に対する放送チャンネルを指定した。SDTVフォーマットにおいて、DTVはHDTVレベルでの単一信号の代わりに現行品質レベルでの多重信号に対する指定されたチャンネルを使用することを可能とし、それは同一の帯域幅の使用でより多くの番組を許容することになる。商業的且つ公共的な放送局は、現在、彼らがHDTVのそれらの使用をどのように具現化することを綿密に決定している。
サイマルキャスト(simulcast)は、同一テレビ番組を、2つの異なるチャンネル或は周波数を用いてアナログ及びディジタルの両バージョンで同時伝送することである。DTV移行期間の最後に、アナログ伝送は実質的に置き換わって、現行のアナログチャンネルがDTV用だけに使用されることになると信じられる。ディジタル放送用に用いられた余剰チャンネルは、例えば競売にかけらより多くのテレビジョン・チャンネル或はデータ放送等の他のサービスのために使用され得る。サイマルキャストは、同時テレビジョン及びインターネット・サービスの伝送、アナログ及びディジタル無線放送の伝送、並びに、従来のフォーマット及びワイド・スクリーン・フォーマット等の種々のスクリーン・フォーマットでのテレビジョン番組の伝送のためにも使用される。サイマルキャスト放送は世界中で使用される。
DTVへの移行は容易或は安価な移行ではない。DTV番組を伝送するテレビ局にとって、DTV施設を構築しなければならないが、ある局はこれら施設を構築すべく収益を得なければならない。サイマルキャストはテレビ局に従来のアナログ番組から収益を上げさせ続けさせると共に余剰のディジタル番組からも余剰収益を得させることを可能としている。DTVへの移行における別の障害は消費者間における興味の欠如である。特別の装置の必要性は視聴者がディジタル番組及びアナログ番組の間の相違を見ることを妨げ、それもDTVに対する公共の興味をスローダウンする。
DTVを操作するために必要とされる装置は、地上サービス、ケーブル・サービス、或は、衛星サービスが伝送チャンネル/キャリアとして使用されるか否かに依存する。何れにしても既知のシステム或は予知されるシステムに従えば、消費者は、最小限、彼らの古いテレビ受像器上でDTV伝送を視聴すべくコンバータを購入しなければならない。加えて、テレビ信号を受信すべく地上サービス或はアンテナを利用する消費者はディジタル信号用に装備されたアンテナを必要とする。ATSC準拠国における山岳地形に配置する消費者は多重効果(multipath effects)のために地上ディジタル信号を受信することができない可能性がある。これは今日のアナログ・テレビジョン・システムですら共通している。DVB準拠の国々において、地上はディジタル信号の受信に影響しない。衛星ユーザはDTV放送を既に楽しんでいるが、より大きな衛星アンテナがHDTV番組視聴のために必要とされるであろう。
「セット-トップ」・ボックスは、テレビ受像器がインターネットへのユーザ・インターフェースとなることを可能とする共に、アナログ・テレビ受像器がDTV放送を受信及びデコードすることを可能とする装置としてここでは定義される。DTVセット-トップ・ボックスはしばしば受信器と呼称される。3千5百万の家庭が2006年の終わりまでにディジタルのセット-トップ・ボックスを使用すると推定され、その推定年はDTVへの移行の終了年である。
典型的なディジタル・セット-トップ・ボックスは、通常、リナックス或はウィンドウズ(登録商標)CEを走らすためそしてMPEG移送ストリームをパースするために1つ或はそれ以上のマイクロプロセッサを含む。セット-トップ・ボックスはRAM、MPEGデコーダ・チップ、並びに、オーディオのデコーディング及び処理のためのより多くのチップをも含む。セット-トップ・ボックスの中身は使用されているDTV標準に依存する。DVB準拠のセット-トップ・ボックスはCOFDM伝送をデコードするためのパーツを含むが、ATSC準拠のセット-トップ・ボックスはVSB伝送をデコードするためのパーツを含む。より高性能なセット-トップ・ボックスは記録されたテレビ放送の記憶、ダウンロードされたソフトウェアの記憶、並びに、DTVサービス・プロバイダによって提供される他のアプリケーションのためのハードディスクを含む。ディジタル・セット-トップ・ボックスは衛星及び地上DTV用に使用可能であるが、たいていはケーブル・テレビ用に使用される。セット-トップ・ボックス価格は基本構成に対する100ドルからより高性能なボックスに対する1,000ドル以上までの範囲である。
インターネット分野においてセット-トップ・ボックスは、実際上、インターネットと「話す」ことができる特化されたコンピュータとしてしばしば機能し、即ちそれはウェブ・ブラウザ(実際にはハイパーテキスト・トランスファ・プロトコル・クライアント(Hypertext Transfer Protocol client))及びインターネットの主要プログラムであるTCP/IPを含む。セット-トップ・ボックスが結着するサービスはウェブTV等による電話回転を通じて、或は、TCIのようにケーブルTV会社を通じて行われ得る。
衛星放送用にドルビー・ディジタル5.1チャンネルを利用するためには、ドルビー・ディジタル出力を提供する衛星受信器が必要である。ケーブル・ユーザ用に、全てのディジタル・セット-トップ・ボックスにはドルビー・ディジタル2-チャンネル・デコーダが装備されている。5.1チャンネル・サウンドを用いるためには、5.1チャンネル準拠セット-トップ・ボックスが或は外付け5.1チャンネル・デコーダ・ユニットが必要である。
ディジタル・テレビジョン利益の最も劇的なデモンストレーションは高性能なHDTVを通じてであり、それはより大きなスクリーン、より広いアスペクト比、並びに、より良好な解像度の故である。しかしながら殆どの新しいテクノロジーのように、HDTVは高価である。それにもかかわらず、より安価なディジタルTVは今までのTVを凌いで著しく改善された視聴経験を提供し、古い受像器を保持することを選んだ人のために、セット-トップ・コンバータの追加は見分けがつく改善された映像及びサウンドを配信することになる。
DTVへの移行に対する米国連邦通信委員会(FCC)のスケジュールは、合衆国の誰もが2002年までにDTVにアクセスし、ディジタル伝送への切り換えは2006年までに、或は、特定領域における世帯の内の85%がディジタル・テレビジョン受像器或はセット-トップ・コンバータを購入した際に完了しなければならない。
1990年代始め、欧州放送、消費者装置製造業者、並びに、調整団体は欧州ランチング・グループ(European Launching Group: ELG)を形成し、DTVを欧州中に導入するために、「DVB」又は「ディジタル・ビデオ放送」計画に着手した。DVBは閉システムに対抗する開システムを提供すべく意図されている。閉システムはコンテンツ・プロバイダ特有であり、拡張的はなく、それらが発展されたシステムに対してだけに最適化されている。DVB等の開システムでは、加入者に異なるコンテンツ・プロバイダを選択させ、複数のPC及びテレビジョンの統合を可能としている。DVBシステムで意図されていることは、テレビジョンに対して最適化させられることであるが、ホームショッピング、バンキング、プライベート・ネットワーク放送(又は専用線放送)、並びに、対話式視聴をもサポートすることである。DVBで意図されていることは、非常に明瞭なテレビジョン番組をバス、自動車、並びに、列車のテレビジョンに提供する可能性や、携帯テレビジョンにすら提供する可能性を開放することである。DVBはコンテンツ・プロバイダにとって有益であり、促進されもして、それは彼らがそれら自体のサービスをDVBが地理学上の場所に拘わらずサポートされるどこにでも提供できるからである。彼らは彼ら自身のサービスを容易に且つ安価に拡張することもできて、加入者への制限されたアクセスを確保して、不承認の視聴による収益損失を低減する。今日、DVB計画は世界中の29カ国以上の国々における220の組織から構成され、DVB放送サービスは欧州、アフリカ、アジア、オーストラリア、並びに、南北アメリカの部分で有効である。
フォーマット特定メディア
ストリーミング・メディア信号に対する様々な異なるフォーマット自体は、どのようにしてCODECが特定の場合に対して変動し得るかの更なる理解をも提供すべく、非限定例によってここでも要約される。
「DVD」は「digital versatile disc」の頭字語であり、その2面の内の一方に約4.7ギガバイトまでの情報、或は、平均して約133分の映画に充分な情報を保持する比較的最近の光ディスク・テクノロジーとして一般には定義されている。その2つの面各々における2つの層によって、約600メガバイトを保持する略同一物理的サイズの現行のCD-ROMと比較して、17ギガバイトまでのビデオ、オーディオ、或は、他の情報を保持し得る(DVDはCD-ROMと比べ約28倍以上の情報を保持する)。DVDプレイヤーはDVDを再生すべく必要とされているが、またそれらは通常のCD-ROMディスクも再生することになる。DVDは、(i)ビデオ(例えば連続映画)、(ii)オーディオ(例えば長い演奏音楽)、並びに、(iii)混合(例えば対話式マルチメディア発表)に対して様々に最適化された3つの一般的なフォーマットの任意のフォーマットで記録され得る。DVDドライブは8速度CD-ROMプレイヤーよりも幾分速い転送速度を有する。DVDフォーマットはMPEG-2ファイル及び圧縮標準を典型的には使用し、それはMPEG-1画像の約4倍の解像度を有すると共に、2つのフィールドが1つの画像を構成する約60飛び越しフィールド/秒で配信され得る(MPEG-1は約30非飛び越しフレーム/秒で配信する)。MPEG-2及び-1標準はここの他の場所でより詳細に定義されてる。DVD上でのオーディオ品質は現行のオーディオ・コンパクトディスクに比肩し得る。
「DVD-ビデオ」は、短縮無しの映画用に設計されたDVDフォーマットに対して典型的には付与された名前であり、テレビジョン受像器と一緒に稼働するボックスである。「DVD-ROM」は、コンピュータ内のCD-ROMへの将来の代替であると誰かによって信じられるプレイヤーに付与された名前であり、これらより新しいドライブはDVD-OMディスクと共に通常CD-ROMディスクの双方を再生すべく意図されているからである。「DVD-RAM」はDVDの書込可能バージョンに付与された名前である。「DVD-オーディオ」はコンパクト・ディスク/プレイヤーに置き換わるべく設計されたプレイヤーに典型的には付与された名前である。
「VHS」は「Video Home System」の頭字語であり、磁気ビデオテープ・カートリッジ・フォーマットとして一般には定義されており、典型的にはハーフ・インチ幅で、アナログ・ビデオ及びオーディオ信号を記録及び再生する能力を伴ったホームユース用に開発された。VHSは普及したフォーマットとなり、主にその普及した存在及び記録性能によってホームムービー配給及び再生のための事実上の標準となった。VHSは、オーディオ・カセットのものと同様のテクノロジーを用いて、磁気テープ上に信号をアナログ・フォーマットとして記憶する。これらテープはVHSビデオカセット・レコーダ(VHS VCR)を用いて再生及び記録される。VHSテープは典型的には約2時間までのビデオを記憶するが、ある種のVCRはそれらをより遅い速度で記録できて
、1テープ当たり6時間まで或は8時間まですら記録できる。
VHSフォーマットは200本を少し超える水平解像度を出力する。これは、500本を超える水平解像度を出力するDVDと比肩する。技術的且つ感覚的にVHSは、例えばDVD、S-VHS、Hi-8、並びに、その類を含む他のフォーマットに勝ったフォーマットである。しかしながらVHSはビデオを視聴する普及した手段であり続け、VHSテープは映画レンタル店から食料雑貨店までその国や世界中のいたるところで依然容易に見出される。
「CD」は「compact disc(コンパクトディスク)」の頭字語であり、オーディオ、ビデオ、テキスト、並びに、ディジタル・フォームでの他の情報を電子的に記録、記憶、並びに/或は、再生するための小さい携帯可能な丸い媒体として一般に定義されている。最初、CDは読取り専用であったが、より新しいバージョンは記録も可能である(即ち、「CD-RW」)。
「Super audio disc」又は「SACD」は高解像度オーディオCDフォーマットであり、DVD-オーディオ(「DVD-A」)と共に、標準的なオーディオCDに置き換わるべく競合する2つのフォーマットである(殆どの業界は、フィリップス及びソニーであると思われる一般的な例外を伴って、DVD-Aを後押している)。DVD-AのようなSACDは2-チャンネル・ステレオに加えて5.1チャンネル・サランドサウンドを提供する。両フォーマットはビットレート及びサンプルレートを増大することによってサウンドの錯綜性を改善し、そして既存のCDプレイヤー上で再生可能であるが、一般には従来のCDのものと単に同様な品質レベルである。SACDはソニー社の所有であると公表されているDirect Stream Digital又はダイレクト・ストリーム・ディジタル(「DSD」)記録を用い、パルス・コード変調(「PCM」)と標準CDで使用されているフィルタリングとの代わりに、アナログ波形をダイレクト記録用に1ビット信号に変換する。DSDは損失無しの圧縮と約2.8MHzのサンプリングレートとを用いて、サウンドの錯綜性及び写実性を改善する。SACDは、テキスト、グラフィック、並びに、ビデオ・クリップ等の追加情報をも含み得る。
また更なる理解の目的のため、インターネットに基づく通信は、インターネット「スーパーハイウェイ(superhighway)」を用いてストリーミング・メディア通信によって適合されなければならない通信用の特定プロトコルをも有する。これらプロトコルは、特にストリーミング・メディア通信に関して、より詳細な理解を提供する目的で直ぐ下で簡単に要約される。
インターネット通知に関して、ストリーミング・メディア信号はデータ・パケットを会してディジタル・フォーマットで一般には通信される。用語「パケット」がここで意図することは、インターネット或は他の任意のパケット-交換ネットワークを介して出所及び到着地の間で経路決めされたデータのユニットを意味することである。より明確には、ファイルが送信されると、通信システムのプロトコル層(例えば、TCP/IPに基づくシステムのTCP層)がそのファイルを経路決めのために効率的なサイズの大きな塊に分割する。これらパケットの各々は個々に番号付けされ、到着地のインターネット・アドレスを含む。所与のファイルに対する個々別々のパケットはインターネットを通じて異なるルート(経路)を移動し得る。それが全て到着した場合、それらは元のファイルに例えば受信末端でTCPによって再組み立てされる。パケット交換方式はインターネット等の接続無しネットワーク上での伝送を取り扱う効率的な方法である。回路交換方式等の代替方式は略音声接続に対して割り当てられたネットワーク用に使用される。回路交換において、ネットワークにおける線は複数のユーザ間でパケット交換で共有されるが、且つ各接続はその接続の期間に特定経路の専有化を一般には要求する。
ワイヤレス通信及びWAPゲートウェイ
インターネットと同年代にとって等しく重要なことは、ワイヤレス通信の年代が、家庭或はオフィスの固定された領域の外側と対話すべく、社会的能力を著しく拡張したことであり、それによって我々の遠隔通信が電気ケーブルワイヤ及びケーブルから解放されることを可能とした。例えば2000年、移動電話(又は携帯電話)加入者の数は50%近くまで成長した。
しかしながらワイヤレス通信システム、プロトコル、並びに、イネーブリング・テクノロジーは著しく分裂した「フォーマット特定」市場で世界規模で発展した。これが特にあてはまるのは、合衆国を除く残りの世界と比較した場合、合衆国における広範な用途でのシステムを比較する点である。それ故に、複数のフォーマット特定システム間や異なるプラットフォーム上で動作する関連ワイヤレス装置間での競合する争点を克服することに関して相当な労力が拡張された。後で本発明と関連されるようにワイヤレス通信を更に理解する目的のため、以下は、ワイヤレス通信産業界で使用される著しいテクノロジー、システム、並びに、プロトコルの簡単な大要である。
一般に、セル電話用のワイヤレス通信システムの発展は、通称で用語「1G」、「2G」、「2.5G」、並びに、「3G」で付与され、それぞれ第1世代、第2世代等々を表している。初期のシステムは1G電話及びシステムとして知られ純粋なアナログである。しかしながら急激な成長に伴って、携帯電話用の利用可能な帯域幅は急激に減らされ、2Gでのディジタル信号処理への道が付与され、それは先進の遠隔通信用の複雑な信号処理に対する利用可能な帯域幅及び能力を著しく広げた。しかし、ワイヤレス・インターネット・アクセス用に向上された需要に伴って、テクノロジー発展は2G電話(一般にはインターネットでイネーブルされない)から2.5G及び3G(進歩的により多くイネーブルされた)に向かった。直ぐ下で更に展開されるように、システム、プロトコル、並びに、イネーブリング・テクノロジーはこうして2.5G及び3Gモードを産業界及び消費者にもたらす点で集中された焦点に向けて発展した。
一般に、2Gテクノロジーに基づく4つの主要なディジタル・ワイヤレス・ネットワークがあり、即ち、時分割多重アクセス(「TDMA」)、コード分割多重アクセス(「CDMA」)、モバイル通信用グローバル・システム(「GSM」)、並びに、セルラー・ディジタル・パケット・データ(「CDPD」)である。これらはここでは以下のように簡単に説明される。
時分割多重アクセス(「TDMA」)はディジタル携帯電話通信に使用されるテクノロジーであり、運ばれ得るデータの量を増大するために、各セル・チャンネルを3つの時間スロットに分割している。TDMAは、ディジタル-アメリカ携帯電話サービス(D-AMPS)、モバイル通信用グローバル・システム(「GSM」)、並びに、パーソナル・ディジタル・セルラー(「PDC」)によって採用されている。TDMA及びFDMAに対する代替的な多重方式はコード分割多重アクセス(「CDMA」)である。
コード分割多重アクセス(「CDMA」)は2G及び3Gワイヤレス通信で使用される幾つかのプロトコルの内の任意のものを言及する。その用語が暗示するように、CDMAは数々の信号に単一伝送チャンネルを専有させることを可能として、利用可能な帯域幅の使用を最適化する。このテクノロジーは800MHz〜1.9GHz帯域において超高周波数(UHF)移動電話システムで使用される。CDMAは拡散スペクトル・テクノロジーと組み合わせてアナログ-ディジタル・コンバータ(ADC)を用いる。オーディオ入力は先ずバイナリー要素にディジタル化される。伝送された信号の周波数は規定されたパターン(コード)に従って変動するように為されて、その周波数応答が同一コードでプログラムされている受信器によってだけ妨害され得て、送信器周波数に正確に同調する。何兆もの可能性ある周波数配列決定コードがあり、プライバシーを向上させると共にクローニング又はコピーを難しくしている。CDMAチャンネルは、公称、1.23MHz幅である。CDMAネットワークは「ソフト・ハンドオフ」と呼称される方式を用いており、電話機が一方のセルから他方セルに移る際の信号分裂を最小化する。ディジタル・モード及び拡散スペクトル・モードの組み合わせは、アナログ・モードのように単位帯域幅毎に多数の信号としての幾つかの時間をサポートする。CDMAは他のセルラー・テクノロジーと互換性があり、これが全国的なローミングを可能としている。
CDMA Oneとしても知られる元々のCDMAは1993年に標準化されたものであり、米国における移動(セルラー)電話で依然として普及している2Gテクノロジーと考えられる。cdmaOneの1つのバージョン、即ちIS-95Aは1.25MHzキャリアを利用して、800MHz或は1.9GHzの何れかのRF帯域で動作するプロトコルであり、これは14.4Kbpsまでのデータレートをサポートする。別のバージョンIS-95Bは8つのチャンネルまで束ねることによって115Kbpsまでの速度をサポートすることができる。
より最近のCDMA変種、CDMA2000、並びに、広帯域CDMAは何度もより速いデータ速度を提供している。CDMA2000はIMT-CDMA Multi-Carrier或はIS-136としても知られ、国際電気通信連合(ITU)によって開発されたIMT-2000標準のCDMAバージョンである。このCDMA200標準は3Gテクノロジーであり、144Kbpsから2Mbpsまでの範囲の速度のデータ通信をサポートすべく意図されている。この標準のバージョンを開発した会社はEricsson corporation社及びQualcomm corporation社を含む。広帯域CDMA又は「WCDMA」はCDMAから誘導されたITU標準であり、IMT-2000 direct spreadとしても知られる。WCDMAは3Gテクノロジーであり、ローカル・エリア・アクセスに対して2Mbpsまでのデータレートと、ワイド・エリア・アクセスに対して384Kbpsまでのデータレートとをサポートし、且つ、これらの速度での可動性/携帯性の音声、画像、データ、並びに、ビデオの通信をサポートすべく意図されている。WCDMAは入力信号をディジタル化し、200KHz幅の狭帯域CDMAより相当に広い範囲である5MHz幅キャリアを介するコード化拡散スペクトル・モードでそのディジタル化出力を伝送する。
モバイル通信用グローバル・システム(「GSM」)はディジタル移動電話システムであり、欧州や世界のその他の区域で広く使用されており、このシステムは(直ぐ下で紹介される)「TDMA」の1つの変形を使用し、3つのディジタル・ワイヤレス電話テクノロジー(TDMA、GSM、並びに、CDMA)の内の最も広く使用されている。GSMは、各々がそれ自体の時間スロットにおいて、データをディジタル化し、圧縮し、そしてユーザ・データの他の2つのストリームと一緒に1チャンネルで送信する。それは900MHz或は1800MHzの何れかの周波数帯域で動作する。この開示の際、GSMは欧州におけるワイヤレス電話標準と一般には考えられ、世界中に1億2千万以上のユーザを有して120カ国で利用可能であると公表された。合衆国における少なくとも1つの会社、即ちアメリカン・パーソナル通信(Sprint(商標)補助金交付)はブロードバンド・パーソナル通信サービス(「PCS」)に対するテクノロジーとしてGSMを用いる。PCSは遠隔通信サービスであり、音声通信、数値及びテキストのメッセージ、音声メールを1つの装置、サービスコンタクト、並びに、請求書に放り込む。PCSはディジタル・セルラー・リンクを介して最も頻繁に伝達される。このサービスは、Ericsson corporation社、Motora corporation社、並びに、Nokia corporation社等の製造業者によって製作されている様々な小型移動電話器に対する400以上の基地局を有するように計画されており、これら装置は、電話器、ポケットベル、並びに、留守番電話を一般には含む。GSMは、高速回路交換データ(HCSD)、ゼネラル・パケット・ラジオ・システム(GPRS)、エンハンスト・データGSM環境(EDGE)、並びに、ユニバーサル・モバイル・テレコミュニケーションズ・サービス(UMTS)を含むワイヤレス・モバイル・テレコミュニケーションズの進化の一部である。
セルラー・ディジタル・パケット・データ(「CDPD」)は双方向性の19.2Kbpsでのパケット・データ通信を既存のセルラー電話(又は携帯電話)チャンネルにわたって提供するワイヤレス標準である。
幾つかの異なるプロトコルは様々なワイヤレス・ネットワークにわたっての通信に対する使用に取り入れられた。
「X.25」はパケットに基づくプロトコルであり、原則的には欧州におけるこの開示の時に使用されると共に国際電報電話諮問委員会(CCITT)によって標準として適用された。X.25は一般的に使用されたネットワークであり、異なる公共ネットワーク(例えば、Compuserve、Tymnet、或は、TCP/IPネットワーク)上のコンピュータに中間コンピュータを通じてネットワーク層で通信させることを可能としている。X.25のプロトコルは開放型システム間相互接続(「OSI」)によって規定されたデータ-リンク及び物理的層プロトコルと密に対応している。
「OSI」はネットワーク・アーキテクチャの1つのモデルであって、それを具現化するためのプロトコルの1揃い(プロトコル・スタック)であり、外来コンピュータ・ネットワーク・アーキテクチャにおける国際標準に対するフレームワークとして1978年にISOによって開発された。OSIアーキテクチャは7層に分裂され、最低から最高にかけて、(1)物理的層、(2)データ・リンク層、(3)ネットワーク層、(4)輸送層、(5)セッション層、(6)表示層、並びに、(7)適応層である。各層はそれ自体の直下の層を用いて、上の層にサービスを提供する。幾つかの具現化例において、1つの層はそれ自体で複数の副次的層から構成され得る。
汎用パケット無線システム(GPRS)はパケットに基づくワイヤレス通信サービスであって、56から114Kbpsまでのデータレートと移動電話及びコンピュータのユーザに対するインターネットへの連続的接続とを約束する。より高いデータレートはユーザにビデオ会議に参加させ、可動性手持ち装置をノートコンピュータと共に用いて、マルチメディア・ウェブ・サイトと相互作用(会話)させることを可能としている。GPRSはモバイル通信用グローバル・システム(「GSM」)に基づいており、回路交換セルラー電話接続及びショート・メッセージ・サービス(「SMS」)等の既存サービスを補充する。SMSはGSMディジタル・セルラー電話システムによって提供されたメッセージ・サービスである。SMSを用いて、英数字呼出システムと酷似するように、ショート英数字メッセージ(160個の英数字)が移動電話へ送信され得てそこに表示される。メッセージは電話がアクティブとなるまでGSMネットワークでバッファされる。
GPRSのパケットに基づくサービスは回路交換サービスよりもユーザの費用負担を少なくさせるが、通信チャンネルを一時に一人のユーザだけに専用させるのではなくパケット必要性に応じての共有使用で用いられているからである。また意図されていることは、モバイル・ユーザにアプリケーションを利用可能とさせることであり、これはより速いデータレートが、現行ではアプリケーションをワイヤレス・システムのより遅い速度に適合させる必要性があるミドルウェアがもやは何等必要とされないことを意味するからである。GPRSは幅広く有効となっており、仮想プライベート・ネットワーク又は仮想専用線(「VPN」)のモバイル・ユーザはダイアル-アップ接続を介してよりも連続的にそのプライベート・ネットワークにアクセスできる。GPRSで更に意図されていることは、装置間の有線接続をワイヤレス無線接続で置き換える標準である、「ブルートゥース(Bluetooth)」を補足することである。インターネット・プロトコル(「IP」)に加えて、GPRSはX.25プロトコルをサポートする。GPRSは、エンハンスド・データGSM環境(「EDGE」)及びユニバーサル移動体通信システム(「UMTS」)に向かった1つの発展段階であるとも信じられる。
ユニバーサル移動体通信システム(「UMTS」)で意図されていることは、2Mbpsまでのデータレートでの、3G、ブロードバンド、テキストのパケットに基づく伝送、ディジタル化音声、ビデオ、並びに、マルチメディアである。UMTSで更に意図されていることは、世界中のどこに位置されているかにかかわずモバイル・コンピュータ及び電話のユーザに複数のサービスから成る一貫したセットを提供することである。このサービスは、GSM通信標準に基づくと共に、主要な標準団体及び製造業者によって承認されており、2002年までに世界中のモバイル・ユーザ用の計画された標準である。ひとたびUMTSが完全に具現化されたならば、コンピュータ及び電話のユーザは彼らが移動しながらインターネットに絶えず結着可能となる。
エンハンスド・ディジタルGSMエンタープライズ(「EDGE」)・サービスはモバイル(GSM)・ワイヤレス・サービス用グローバル・システムのより高速バージョンであり、384Kbpsまでのレートでデータを配信し且つマルチメディア及び他のブロードバンド・アプリケーションの移動電話及びコンピュータのユーザ向けの配信を可能とすべく設計されている。EDGE標準は、同じ時分割多重アクセス(TDMA)・フレーム構造及び既存のセル配列を用いて、既存のGSM標準の上に構築されている。EDGEは2001年に商業的に利用可能になると予想される。これは、ユニバーサル・モバイル・遠隔通信サービス(UMTS)への途中の進化標準と見なされる。
ワイヤレス・アプリケーション・プロトコル(「WAP」)は、セルラー電話及び無線トランシーバ等のワイヤレス装置が、E−メール、ワールド・ワイド・ウェブ、ニュースグループ、並びに、インターネット・リレー・チャット(「IRC」)を含むインターネット・アクセス用に使用可能となる方法を標準化するための通信プロトコルの一組に対する仕様である。インターネット・アクセスがWAPに先行して可能であった一方、種々の製造業者が「フォーマット特定」テクノロジーを使用した。
最近、以前はワイヤレス装置上の人々への到達から「情報ハイウェイ」を分離したコード、ワイヤ、並びに、ケーブルのギャップを架橋するためにワイヤレス通信及びインターネットの分野を合併すべく相当な労力が費やされた。そうしたテクノロジー合併は、ワイヤレスの赤外線及び無線周波数通信システムが「ワイヤレス」オフィス或は家庭内における装置をインターフェースするために開発されている例えば家庭及びオフィスのネットワーク設定自体内に発展した。別の実質的な労力も、セル電話及びパーソナル・ディジタル・アシスタント(「PDA」)等のより遠隔的なワイヤレス装置で情報を通信し共有すべく進行中である。
PDAは典型的には小型のモバイル装置で、「手持ち型」であり得て、通常、電話帳、カレンダー、計算機、並びに、その類を管理、記憶、並びに、表示するための限られたプロセッサ及び表示スクリーンを含み得る。最近利用可能なPDAは、そのPDA自体内に埋め込まれたワイヤレス・モデムを有すること、或は、セル電話等のワイヤレス・モデム「プラグ-イン型」と結合されることによる、「ワイヤレス・イネーブル型」である。ワイヤレス・イネーブル型PDAも一般には限られた「ブラウザ」能力を具備する「インターネット・イネーブル型」であって、そのPDAがインターネットにわたってサーバ装置と通信することを可能としている。商業的に利用可能なワイヤレス「イネーブル型」PDAの例は、パームVII(Palm VII)(Palm, Inc.社製)やiPAQ(商標)(Compaq, Inc.社製)を含む。これらPDAはウィンドウズ(登録商標) CEオペレーティング・システムを含み、限られたブラウザ能力及びコンテンツ用のスクリーン・ディスプレイを提供する。これらの電話は約33MHzから約220MHzまでの処理能力と、例えば320x240ピクセルのスクリーン表示等の多様なスクリーン表示能力を有する。
同様に、セル電話自体も「インターネット・イネーブル型」と為され、限られたブラウザ能力とコンテンツを表示するスクリーンをも具備する。「インターネット型」セル電話の例は、他の広範囲なものの中でも、Sanyo SCP-4000(商標)、Motorola i1000plus(商標)を含み、この幅広い分野は何百という種々の処理及び表示能力を主張している。
「インターネット・イネーブル型」のPDA或はセル電話の何れの場合でも、通信のインターネット・プロトコルとの互換性が達成されなければならない。一般に、ワイヤレス通信はワイヤレス・アプリケーション・プロトコル(「WAP」)を介して行われるが、インターネットにわたる通信は幾つかの異なるプロトコルの内の1つに従って進行し、最も共通するものは伝送制御プロトコル/インターネット・プロトコル(「TCP/IP」)である。それ故に、図1Eに示されるようにWAPゲートウェイは、基本的にはそれぞれに横たわるテクノロジーが異なる、インターネットの世界(或は他のIPパケット・ネットワーク)とワイヤレス電話/データ・ネットワークとの間の架橋を形成している。このゲートウェイは、本質的には、これら2つの別個のエントリの間の解釈を為して、消費者がそれらセル電話或は手持ち計算装置(例えばPDA)をインターネットにワイヤ無しでアクセスすべく使用することを可能としている。
しかしながら顕著な表示能力を有するデスクトップ・コンピュータ等のより高性能計算装置への伝送用にフォーマットされているストリーミング・メディアは、厳格に制限された処理及び表示機能を有するこれら装置上で受信及び視聴するためには一般に互換性がない。特定の「フォーマット特定」圧縮方式は特にこれら装置だけでの使用のために開発され、特定のメディア・コンテンツだけがそれらフォーマットの状態でこれら装置に伝送され得る。
制限されると共に可変的な処理、メモリ、並びに、表示の能力等々の独特な制約を有するセル電話及びPDA等のワイヤレス装置によって再生させるべく、幅広い種々のストリーミング・メディア信号の適切なフォーマット状態での伝送に適合するストリーミング・メディア通信システムの需要が依然としてある。
本発明は、様々な制限、非効率性、リソース(資源)制限、並びに、ストリーミング・メディア通信のための先行して知られる方法の非互換性に対処し克服するものであり、以下に述べる様々に有益なモード、局面、実施例、並びに、変形で提供される。
一実施例に従った本発明はストリーミング・メディア通信システムであり、ニューラルネットワーク等のネットワーク・システムにおける人工知能等のコンピュータ具現化知能システムを用いて、伝送装置と少なくとも1つの到着装置との間でストリーミング・メディア信号を通信する。
別の実施例に従った本発明は、伝送装置と、各々が異なるメディア信号処理能力を有する複数の到着装置との間でストリーミング・メディア信号を通信するシステムである。
別の実施例に従った本発明は、単一伝送装置から少なくとも1つの到着装置まで、各々が異なる伝送能力或はストリーミング・メディア信号に関する制約を有する複数の異なる伝送チャンネルを介して、ストリーミング・メディア信号を通信すべく適合するストリーミング・メディア通信システムである。
別の実施例に従った本発明は、ソースでストリーミング・メディア信号を圧縮して該ストリーミング・メディア信号の圧縮された表現と為し、その圧縮表現を伝送チャンネルにわたって到着装置へ伝送し、その圧縮表現を解凍して到着装置によって再生されるべく適応されたストリーミング・メディア信号の解凍された表現に為すべく、ストリーミング・メディア圧縮システム能力に関して適合性ある学習プロセスで訓練されるように適合する人工知能手段を組み込んでいるニューラルネットワークである。
別の実施例に従った本発明は、少なくとも部分的にはストリーミング・メディア信号の通信に影響する少なくとも1つのパラメータに基づくCODECに従ってストリーミング・メディア信号を圧縮するシステムである。このモードの1つの局面に従えば、CODECは、別の基準信号に対するCODECの先行して学習された振る舞い、同一のストリーミング・メディア信号の圧縮及び解凍に対する先行する試みに対するCODECの先行して学習された振る舞い、ストリーミング・メディア信号の基準アルゴリズム圧縮に抗するストリーミング・メディア信号に対するCODECの動作の比較、伝送チャンネルの学習された制約、並びに、到着装置の学習された制約の各種パラメータの内の少なくとも1つに従って使用される。1つの有益な実施例において、CODECがこれらパラメータの内の2つ以上に基づき使用され、そして更なる有益な変形例においてはそれらパラメータの全てに基づきCODECが使用される。
別の実施例に従った本発明は、種々のタイプ及び動作の多数のCODECを記憶すべく適合し、そしてニューラルネットワーク等のネットワーク・システムによって調査されると共にアクセスされるべく適合するCODECライブラリを用いてストリーミング・メディア信号を圧縮するシステムであり、CODECライブラリから適切なCODECを提供して入力ストリーミング・メディア信号を到着装置までの伝送用に圧縮された表現に圧縮するために使用する。
別の実施例に従った本発明は、CODECライブラリと共にニューラルネットワークとにインターフェースすべく適合するCODEC動作システムであって、人工知能プロセス等のプロセスにおいて該ニューラルネットワークを用いて、CODECライブラリから適切なCODECを選択し、その選択されたCODECを用いて、到着装置までの伝送のためにストリーミング・メディア信号の圧縮表現にストリーミング・メディア信号を圧縮する。
1つの局面に従えば、CODECライブラリは新しいCODECを受け取って記憶すべく適合し、その新しいCODECは、ニューラルネットワークとインターフェースされ得て、提供されるストリーミング・メディア信号を圧縮すくべ選択されると共に適用される。
別の実施例に従った本発明は、ストリーミング・メディア信号の圧縮表現を解凍する使用のため、到着装置によっての記憶に適合する到着媒介物である。この到着媒介物は遠隔配置された圧縮ストリーミング・メディア伝送システムと通信すべく適合し、そこからのストリーミング・メディア信号を受信して再生する。特に有益な局面において、ソフトウェア媒介物は到着装置に関する情報を圧縮ストリーミング・メディア伝送システムへ配信すべく適合する共に、その圧縮ストリーミング・メディア伝送システムからの特定のエンコード化されたストリーミング・メディア信号を受信してデコードするにも適合している。
別の実施例に従った本発明は、到着装置によって再生され得る解凍済み表現にストリーミング・メディア信号の圧縮表現を解凍する到着装置の内部に記憶されるべく適合する到着媒介物を有するストリーミング・メディア信号を通信するシステムである。
この実施例の1つの局面に従えば、到着媒介物は診断媒介物及び解凍媒介物を有する。診断媒介物は、処理、記憶、或は、再生の能力に関連された到着装置の少なくとも1つのパラメータに対する値を決定すべく適合する。解凍媒介物は、その少なくとも1つのパラメータの値に少なくとも部分的に基づいてCODECを用いて、解凍済み表現にストリーミング・メディア信号の圧縮表現を解凍するCODEC解凍器を適用すべく適合している。
別の局面に従えば、到着媒介物はソフトウェア媒介物を含む。1つの変形例において、そのソフトウェア媒介物は到着装置内に埋め込まれている。別の変形例において、ソフトウェア媒介物は、ストリーミング・メディア信号の圧縮表現を到着装置へ配信すべく適合する遠隔的に配置されたソースによって少なくとも部分的に到着装置にロードさせるべく適合する。
別の実施例に従った本発明は少なくとも1つの初期的なフォーマットと少なくとも1つのトラスコード済みフォーマットとの間でストリーミング・メディア信号をトランスコードするためのトランスコーダである。
別の実施例に従った本発明は、添付図面に示されるかさもなければここに記載された実施例を組み入れているビデオ・オン・デマンド型ストリーミング・メディア・システムである。
別の実施例に従った本発明は、添付図面に示されるかさもなければここに記載された実施例を組み入れている移動電話通信システムである。
別の実施例に従った本発明は、添付図面に示されるかさもなければここに記載された実施例を組み入れている対話式ゲーム・システムである。
別の実施例に従った本発明は、この明細書で以上に開示されるか或はその他の場所で開示された様々なモード、実施例、局面、特徴、並びに、変形等を処理(例えば圧縮)後にローカルに記憶されて伝送されていないメディアと共にスタティック・メディアに組み入れている。
以下の実施例を通じて(そして図面を参照することによって)様々に図示されている本発明はメディア通信システムを提供するものであり、圧縮システム、デリバリ・システム又は配信システム、並びに、解凍システムを含み、そして別の局面では、トランスコーダ・システムを含む。一般に、これら個々別々のサブシステムの組み合わせは、変数としてのシステム・パラメータから成るより大きなアレイに基づき無作為に選択されたストリーミング・メディア信号の圧縮、配信、並びに、解凍をカスタマイズすることに加えて、多数のエンコーディング・フォーマット間でメディアを効率的にトランスコードする能力を提供する。これら変数は、例えば、制限無しに、ソース・ビデオ信号、ソース伝送装置、伝送様式、並びに、到着装置に関係したパラメータを含む。こうしてメディア信号の圧縮、配信、並びに、解凍は与えられ且つ変化する使用環境に対して最適な状態で効率的であるようにカスタマイズされる。その結果、広い範囲の複雑なストリーミング・メディア信号は効率性の良いレベルで且つ他の既知のシステムを凌いで著しく改善された装置互換性の範囲で通信され得る。
ここで記載された全てにわたるストリーミング・メディア通信システムの有益性にもかかわらず、先に記載された各サブシステムもストリーミング・メディア通信に対して有益で有用な結果を個別に提供する。少なくとも部分的にはこの開示に基づいて当業者には明かである、様々なサブシステム自体とこれらサブシステムの組み合わせの様々な繰り返しはこの発明の範囲内であることも意図されている。加えて、全体にわたる通信システムの様々な局面は、記載される各サブシステムと共に、特にストリーミング・メディア通信用以外の他の用途に対して有用であることも意図されている。それ故に、当業者には明らかなように、そうした追加的な用途は、改善されたストリーミング・メディア通信に適用された特に有用なモードにもかかわらず、本発明の範囲内であることが更に意図されている。
トランスコーダ
ビデオ/オーディオ・トランスコーダ200は本発明に従って提供され、1つの入来ビデオ・ソース210が、人の介入無しに、多数のフォーマット215(例えば、MPEG4、Real Video(商標)、並びに、QuickTime(商標))を横切って1つの装置から流れることをイネーブルする。この実施例に従ったトランスコーダ200は、他の商業的に入手可能なトランスコーダ・システムの価格のほんの少しで実質的により大きな機能を提供する。更には、このシステムは「休む間もなく」稼働するので、ビデオ・ソース210の事前圧縮が著しく減らされている。
より詳細には、本発明に従ったトランスコーダ200システム及び方法は任意の圧縮或は未圧縮フォーマットから生ずるディジタル化メディアを他の任意の圧縮フォーマット、例えば要望に応じてリアル-タイム(real-time)にトランスコードすべく適合する。システム200及び方法は、多数の異なる圧縮或は未圧縮のフォーマットから多数の異なる圧縮フォーマットに、異なったデータの多重ストリーム215の効率的で同時的な処理をイネーブルすることもできる。
本発明のトランスコーダ200は、図3を参照することによる図示で、全体にわたるシステムにおいてここで記載される。示されているように、第1プレイヤーは最初にトランスコーダ200を収容するサーバ300との接続を行う。プレイヤー・フォーマット(例えばマイクロソフト・メディア(商標))、接続速度(例えば32Kbps)、並びに、プロトコル(HTTP)が識別される。サーバ300は生の或は事前エンコード化されたビデオを「ライブ・バッファ」或は「キャッシュ」310内に引き入れ、それを略未圧縮データであるがディジタル化データとしてエンコードする(例えばAVI或はMPEG2)。次いでサーバ300は接続速度(例えば32Kbps)で適切なCODECスレッド(例えばマイクロソフト・メディア(商標))をロードする。次に、サーバ300は第1クライアントに役立つHTTP/MSプレイヤーをロードする。そこで第2ストリームがMMSで100KbpsのM/Sプレイヤーを用いてクライアントによって要求される。サーバは適切な100Kbpsレートで適切なMS CODECスレッドをロードする。次いで、サーバ300は第2クライアントに役立つMMS/MSプレイヤー・スレッドをロードする。そこで、第3ストリームがRTSPで40Kbpsのリアルプレイヤーを用いてクライアントによって要求される。サーバ300は適切な40Kbpsレートで適切なReal CODECをロードする。次いでサーバ300は第3クライアントに役立つRTSP/Realプレイヤー・スレッドをロードする。再度、この図示は例示的であり、他の特定CODECが他のビットレートと共に適切に代替する。
このトランスコーダ実施例の更なる理解を提供するため、図3は異なるクライアントへ多数の異なるビデオ・ストリームを運ぶべく適用された更なる例を用いてのトランスコーダ200を示している。
手短に言えば、図示され記載されたこのトランスコーダ200は、数多くの従来のトランスコーディング技術に従った「IPC」或は「Inter Processor Communications」の代わりに「スレッド」通信を用いる。このトランスコーダ200記載の目的のため、用語「スレッド」がここで意図されていることは、制御の流れのプログラム内への被包を意味することである。単一スレッド・プログラムは「一時」にそれらのコードを通じて1つの経路を実行するだけのものである。マルチスレッド・プログラムは「同時に」異なるコード経路を通じて走る幾つかのスレッドを有し得る。多数のスレッドが存在する典型的なプロセスにおいて、ゼロ或はそれ以上のスレッドは任意の一時に実際に走ることができる。これはプロセスが走っているコンピュータのCPUの数に依存すると共に、スレッド・システムがどのようにして具現化されるかに依存する。n個のCPUを具備するマシン或はシステムが並列なn個未満のスレッドを走らせるべく適合し得る一方、このスレッド発明に従ったスレッディング動作は複数のスレッド間でCPUを共有することによってn個未満の数のスレッドを走らせる外見を付与し得る。
トランスコーダ200は抽象的なAPIを提供し、それ故にCODECは(相当により大きな)元のエンコーダ・オーバーヘッド無しにアクセスされる。バッファリング310は異なるビデオ・ストリームに対するクライアント牽引の関数として作り出される。更には、本発明のトランスコーダ200はネットワーク・アーキテクチャ、即ち各異なる接続に対する単一スレッドを利用し、クライアントが同一コンテンツのバッファされたセグメント内にあれば同一スレッドに組み合わされる。ここで示され且つ記載されたようにスレッドのトランスコーダ200の使用は非常に有益であると考えられ、その理由は単一プロセスにおける2つのスレッド間のコンテキスト・スイッチが2つのプロセス間のコンテキスト・スイッチを用いるより相当に安価(処理/メモリ/IO)であると思われるからである。加えて、スタック及びレジスタを除く全てのデータが複数のスレッド間で共有されていると云う事実は協働して走らされ得る複数のサブタスクに分解され得る複数のタスクを実行する自然の機関にそれらスレッドを為す。
ケースバイケースで特別に所望された結果を達成するために様々な特殊アーキテクチャが以上に記載されたトランスコーダ200実施例を巡って構築され得る一方。しかしながら更なる図示の目的のため、以下の例は以上に記載されたトランスコーダ200を用いているより詳細なシステムである。トランスコーダ200は各々が異なるフォーマットである多数の同時の顧客ストリームをサポートすべく適合されて提供されている。特にそうしたシステムは5000以上の同時ストリームをサポートし得て、幾つかの状況においては各々が異なるビデオ・フォーマットである7000以上の同時顧客ストリームをサポートし得る。更には、トランスコーダ200は広範囲の数のビデオ・ソースの内の任意のものを、各々が異なる要望を有している数多くの異なる個々別々のクライアントに対して独特に適切であるか或は必要とされるフォーマットに変換すべく具現化され得る。1つの特定例において、ここで記載されたトランスコーダ200は、MPEG1、MPEG2、MPEG4、モーションJPEG、AVI、H.261、H.263、H.263+、RealVideo(商標)、G-8、QuickTime(商標)、Shockwave Flash(商標)、Indeo Cinepak(商標)、並びに、ASFの各種フォーマットの内の任意のものに対するそうした高い要望を同時にサポートすべく具現化され得る。
更に意図されていることは、トランスコーダ200が全体にわたる通信システムにおいて全て既存して直に予知され固定される可動的なターミナル及び装置に従順であるように適合し得る。更にはトランスコーダ200は出力ストリーム・フォーマット変数に適合して、各クライアントのチャンネル及びプラットフォームの状態に動的に適応するように具現化され得る。更には、トランスコーダを組み入れているシステムはロード平衡化サービスとマルチ・トランスコーダのインストレーションに対するルータとをサポートすべく適合している。従って、本発明のトランスコーダ200は、他の先行するトランスコーディング技術及びシステムよりも顕著により低いコストのために著しくより大きな機能を配信する。
先に記載されたように、様々な異なるシステム・アーキテクチャは本発明の範囲から逸脱すること無しに本発明のトランスコーダ200を組み入れることができる。しかしながら先に記載されたサポートの有益なレベルを適切に提供すると思われる特別なアーキテクチャのより多くの細目は、(i)デュアルP3-933プロセッサ、(ii)Unix(登録商標) OSの任意の変種、(iii)512MB RAM、Redundant Firewire或はギガビット・イーサネット(登録商標)、並びに、Redundant Power Suppliesの局面を含む。そうしたシステムはラック取付携帯で提供され得るか、或は、特定の要望に適合して提供され得る。
本発明に係るトランスコーダ200の以下の様々な局面は、少なくとも部分的にはこの開示に基づき当業者には明かなようにそれぞれ単独でも或は各種組み合わせでも広範に有益であると思われる。
マルチプロセッサ及び/或は分配されたコンピューティング・プラットフォーム(クラスタリング等)の上で効率的なトランスコーディングを実行させるべく、ユーザ及びカーネル・スペースの双方で非同期的なソフトウェア・スレッド通信を利用するためのシステム及び方法が提供されている。この方法は、トランスコーダを具現化すべく、従来のIPC方法を利用するよりも効率的であると見られている。CODECアルゴリズムの共有されたライブラリは創設され、様々なCODECアルゴリズムにアクセスすべく使用され、それによってより低い処理オーバーヘッドを、大多数の商業的なエンコーダにおいて使用されているもの等の従来の組み合わせエンコーダ機能によって要求されるよりもより低いメモリ利用と共に招いている。特に有益であることは、共通スレッドが多数の接続用に使用され得て、実際上、単一スレッドでさえ本発明のトランスコーダを用いて個別接続毎に使用され得る。
同一コンテンツが何時要求されようがそして動的バッファ(キャッシュ)が要求されたデータ点の全てに何時適合できようが、(効率性のため)同一スレッドによって供されるべく多数クライアントを組み合わせるシステム及び方法も提供されている。
メディア圧縮及び配信システム
本発明は、所与の一連の制約を受けながら元のメディア・データの近似を最適に再生する、リアルタイムの動的データ信号処理用の、データ圧縮及び配信システム400、並びにその方法も提供する。このシステム400及び方法は図4A及び図5にブロック流れ図で概略的に図示されている。これ以下に、このシステムの多様の有益な特徴および動作の他の記載を、図4A〜図5につき示す記載をほぼ組み入れている実施例によって示す。
図4Aは、本発明に係るデータ圧縮及び配信システム400の一実施例のブロック図である。図4Aに示されるように、データ圧縮及び配信システム400は、メディア・モジュール405、動的プレイヤー・モジュール407、画像プロセッサ410、基線スナップショット・モジュール415、分類器417、標準品質(QoS)モジュール420、ネットワーク層入力モジュール425、並びに、ネットワーク層出力モジュール430を含む。このシステムは、ニューラルネットワーク処理モジュール440、タイマ435、CODECライブラリ・モジュール445、動的クライアント要求モジュール450、ICMPモジュール455、装置及びネットワーク・パラメータ測定モジュール460、並びに、配信(デリバリ)及び伝送モジュール465を更に含む。
一実施例において、システム400は(単数或は複数の)サーバ・ノードに常駐して、入力される未圧縮或は先行して圧縮されたデータを処理する。システム400は人工知能伴うニューラルネットワーク440を利用して、入力されるデータを監視して、各データ・セグメントの複数のキーキャラクタを決定する。システム400は、事前開発された自己参照型の、経験に基づいて学習した、入力信号(例えばビデオ信号)の一連のフレーム内のシーンにおけるパターンの規則のライブラリ455と、外部から課せられた制約とに、入力データの特性を関連付けて、各データセグメントに対して好適な市販の圧縮/解凍アルゴリズム(即ち、CODEC)を選択する。次いでシステム400は選択たアルゴリズムを最適化すべく使用制御、パラメータ、並びに、変数から成る長大なアレイを組み立てる。アルゴリズムの選択とパラメータ及び変数のセットアップは、発展性の最適化プロセスそれ自体と同様に、データの特性に依存して、入力データの各セグメントによって動的に変動する。取り得るアルゴリズムの組は多数あり、有効性及び他の商業的対価によってのみ制限される。データの各セグメントは上述したようにコード化され圧縮されてから、通信チャンネルに供さる。
ここで記載する圧縮システム400はストリーミング・メディア圧縮エンジンとして特に有用であり、有効なCODEC及びストリーミング・メディア配信システムからの情報に基づき、別の人工知能ニューラルネットワーク440を用いて、入力ビデオフレーム毎に解析する。次いでシステム400は、最も適切な圧縮フォーマットを選択し、例えば一実施例においては、下層システム環境からのピーク信号/ノイズ比の抽出によって測定されるような最良の品質に基づき最適なビデオ圧縮に対する圧縮パラメータを構築又は構成する。その結果は、この装置及び現行状態に対する、「最適」ビデオ及びオーディオサービスとなる
ストリーミング・メディア信号に適用される、このシステムの人工知能/ニューラルネットワーク440の局面のより明確な説明を、以下に述べる。最初に、個別の異なるCODECから成るライブラリが、検索可能CODECライブラリ445としてこのシステムに追加される。関連する参照情報から成るライブラリも追加され、これは、ネットワーク輸送標準(NTS)ライブラリ443及びサービス品質(QoS)ライブラリ447を含む。次いでビデオ(メディア・ソース)が画像プロセッサ410を介してディジタル・フォーマット或は非ディジタル・フォーマット(ADコンバータを用いて)の何れかにおいて取り込まれる。画像プロセッサ410は、(もし必要であれば)ソースを解凍し、(単数又は複数の)ソース画像を「浄化」するために使用される様々な標準画像処理アルゴリズムを利用する。結果としてのソース・メディアは基線スナップショット保管場所415へ渡され、そこで後の比較のために「完全ゴールド標準(perfect gold standard)」として使用されることになる。同時にこの結果得られるソース・メディアは分類器417へも供給される。
分類器417は一時的、空間的、並びに、論理的な特徴に対するソース・メディアを分析するが、それは、一時的、空間的、並びに、論理的な特徴の同様組み合わせを示すソース・メディア・サブセグメントを作り出すためである。この「同様」は、共通の一時的、空間的、並びに、論理的な特徴を含むソース・メディアの、切れ目のない連続的なサブセグメントを意味し、それら自体は、(CODECライブラリ445内で見出される様な)特定のエンコーディング/圧縮アルゴリズムに貸与することになる。このソース・メディア・サブセグメント(或は、一実施例において、切れ目のない連続的なビデオ及びオーディオのフレームから成るグループ)「シーン(scene)」と称する
次いでニューラルネットワーク・プロセス440は、CODECライブラリ445からCODECを利用することによってこのシーンに対して動作して、該シーンを圧縮する。各CODECの内部構成は、NTSライブラリ443、Qosライブラリ447、タイマ・プロセス435、ネットワーク入力層425、ICMP媒介物455、並びに、装置及びネットワークのパラメータ測定媒介物460から得られる入力に従って操作/変更される。次いで、圧縮シーンは解凍され、品質標準プロセス420による品質測定を用いた、基線スナップショット415に対する比較が為される。本発明の一実施例において、品質標準プロセス420はピーク信号ノイズ比(PSNR)アルゴリズムを利用し、解凍されたシーンのソース・メディア基線スナップショットに対して比較する。この比較プロセスは、CODECライブラリ445からの様々なCODECに対して、NTSライブラリ443、Qosライブラリ447、タイマ・プロセス435、ネットワーク入力層425、ICMP媒介物455、並びに、装置及びネットワークのパラメータ測定媒介物460から受信する入力の制約範囲内で、ニューラル・ネットワーク・プロセス440が結果として得られる圧縮シーンの品質を満足するまで繰り返される。最後に結果として得られる圧縮シーンは、その圧縮シーンを適切なネットワーク輸送プロトコル及びQoSアルゴリズムを用いてクライアントへ輸送するネットワーク層出力430へ送信される。
先のプロセスは、全ソース・メディアがクライアントへ伝送されるまで、或は、クライアントからの中止要求、ネットワーク輸送失敗、クライアント・ハードウェア失敗等々を含み得る様々な考えられる条件によってこのプロセスが中止されるまで繰り返される。
NTSライブラリ443は、ネットワーク輸送サービスの保管場所であり、そのネットワーク輸送サービスは、圧縮ソース・メディアをクライアントへ輸送すネットワーク層出力430によって選択使用され、さらに、クライアントから情報を受信すネットワーク層入力425によって選択使用される。この選択は、ネットワーク層入力425、ICMP媒介物445、並びに、装置及びネットワークのパラメータ測定媒介物460から受信る質的および量的な入力に基づいている。
QoSライブラリ447は、サービス・アルゴリズムの保管場所であり、このサービス・アルゴリズムは、圧縮ソース・メディアをクライアントへ輸送すネットワーク層出力430によって選択使用される。この選択はネットワーク層入力425、ICMP媒介物445、並びに、装置及びネットワークのパラメータ測定媒介物460から受信る質的および量的な入力に基づいている。
ICMP媒介物455はニューラルネットワーク・プロセス440への入力を生成し、該ニューラルネットワーク・プロセス440にプロセッサクライアントの間で使用る輸送の量的及び質的な特性を動的に提供する。本発明の一実施例において、この目的のためにICMPプロトコルを使用る。
装置及びネットワークのパラメータ測定媒介物460はニューラルネットワーク・プロセス440への入力を生成し、該ニューラルネットワーク・プロセス440にクライアント環境の量的及び質的な特性を動的に提供する。本発明の一実施例において、これらクライアント環境特性は、中央演算処理ユニット(CPU)容量、ネットワーク・インターフェース特性、記憶容量、並びに、メディア解釈装置機能を含む。
また図4Aに示すように、ネットワーク層入力425は上り(クライアントから由来する。)ネットワーク輸送サービスを提供する。ネットワーク層出力430は下り(プロセッサから由来する。)ネットワーク輸送サービスを提供する。タイマ・プロセス435は本発明ユーザに対して、ニューラルネットワーク・プロセス440が所与のソース・メディアを処理するために費やすであろう時間の最大を制限する方法を提供する
図4Bは、本発明の一実施例に係るニューラルネットワーク処理モジュール440の、CODEC選択方式のブロック図である。図4Bに示されるニューラルネットワーク処理モジュール440は、ビデオ・フレーム選択モジュール475、CODECパラメータ・モジュール480、入力層モジュール485、隠れ層486−487、並びに、出力モジュール488を含む。本発明の一実施例において、ニューラルネットワーク処理モジュール440への信号に対する基準基線として使用するの好適なCODEC表示信号を、このニューラルネットワーク処理モジュール440生成る。一実施例において、分類器417は、下層CODECの有効パラメータの観点から、入力ビデオ信号のセグメントの内のどのシーンが最良シーンを表しているかを判定する。ニューラルネットワーク処理モジュール440は、複数の標準から成るリスト(標準リスト)を使用て、信号におけるどのシーンが最良シーンを表しているかを判定する。一実施例において、ニューラルネットワーク・プロセス440はビデオの特定フレームにおける多数のピクセルをサンプリングして、そのビデオ信号における予め決定されたパラメータに対するその特定フレームにおけるピクセル数変化を判定する。別の実施例において、ビデオ信号における特定シーンでの顕著な動作変化は引き続いて入力されるビデオに対する基線基準シーン(「最良シーン」)として使用され得る。
本発明の一実施例において、ニューラルネットワーク処理モジュール440は、入力として分類器417からビデオのセグメントを取り込み、続いてこの入力のサンプリングして、そのビデオ信号を特徴付ける充分な情報を引き出す。例えば、図4Bに図示る方式において、ニューラルネットワーク・プロセス440は、検査するためにウィンドウ・スナップショット(例えば、176x144ピクセル・ウィンドウ)を取り込む。ニューラルネットワークにとって、ビデオ信号に関する充分な情報を生成するのに、そのサンプル・ウィンドウの中心を見ることが有益である。本発明の一実施例において、ニューラルネットワーク・プロセス440は最少8フレームを用いてビデオ信号に関する不可欠情報を生成する。サンプル・ウィンドウからの情報はパラメータ・モジュール480から入力層485まで特定CODECパラメータを伴って渡される。
入力層485は複数のニューロンを介して複数の隠れ層486−487と結合され、その各接続は一方のニューロンから他方のニューロンまでの強い或は弱いリンクを形成している。一実施例において、ニューラルネットワーク処理モジュール440によってサポートされる各CODECにはそれ自体ニューラルネットワークが具備され、特定のCODECと共に入力されるCODEC特定するパラメータを処理する。ニューラルネットワーク・プロセス440は、「焼き上がり」と呼称されるラウンドロビンのようなプロセスを介して、ビデオ・サンプリング取り込み期間中に処理される複数のCODECから「最良」ビデオ信号を生成する。入信号からの最良ビデオ表示の処理において、CODEC各々に対する対応するニューラルネットワークの各々は隠れ層486―487から最良表示サンプルを生成し、その信号を出力モジュール488に供給する。本発明の一実施例において、ニューラルネットワーク・プロセス440によって処理されるCODECの各クラスからの最良CODECの出力データ・セットは2つの可能性を有する。第1のものは、各CODECに対する最良の結果を、複数のCODEC各々に対する「最良」のサンプルの「焼き上がり」ニューラル・ネットワークへの出力モジュール488に与えるニューラルネットワーク・プロセス440であり、このニューラルネットワーク・プロセス440は、次いで、複数の最良のCODECから最も勝る最良のCODECを生成する。焼き上がりニューラルネットワークは、CODECの処理を取り扱うニューラルネットワークよりも小さく且つ高速である
第2処理方式において、ニューラルネットワーク440は複数のCODECによって生成される最良CODECの遺伝アルゴリズム処理を具えてもよい。遺伝アルゴリズムはおはじきゲーム同一の統計学的な選択アプローチに従う。よって、様々なニューラルネットワークから、最も勝る出力CODECを「焼き上がり」ニューラルネットワークへと供給する代わりに、様々なニューラル・ネットワークからバケツ内へと、出力モジュール488を供給し、さらに、例えば映画のような末端ソース・メディアでのシーンの集合から、最良のCODEC表示を選択するのに、遺伝アルゴリズム処理を適用することができる。本発明の一実施例において、ニューラルネットワーク・プロセス440は、CODECを処理するのに、前後に伝播するアルゴリズムの組み合わせを用い
図4Aに戻、この人工知能プロセスの更なる理解のため、1つの適用例を以下に提供る。理解して頂けるように、この模範的な適用例によって提供されるシステムの特徴及び動作は本発明にかかるデータ圧縮及び配信のためのニューラルネットワーク440の範囲の広範な記述として考えられることである。他の適用例為され得ると共に本発明の範囲内に入り得る。
ビデオ・コンテンツ・プロバイダは本発明のシステムをそのサーバにインストールする。サンプル・ビデオがそのシステムに取り込まれて、先に記載最初のAIプロセスを実行する。後で取り出されるべく、例えば、各ビットレート、ビデオ・パターン等々のようなCODEC特性の複雑なマトリックス作り出される。次に、クライアント・エンドユーザはコンテンツ・プロバイダと接続して、ビデオMを視聴する。サーバ上に常駐している本発明の通信システムはソフトウェアエージェントをクライアントの装置に配信し、従って、クライアントが、装置特定情報を配信するためにその通信システムと接続し、さらに、再生のための解凍CODECと共に適切な圧縮信号を受信することをイネーブルにする。次に、AIシステムは、各フレーム用に適切なCODECを選択し、且つ、伝送のために各フレームを適切に圧縮するために、ビデオMをストリーミング信号としてバッファへのローディングを始める。バッファの期間は多数の変数に依存するが、主にシステムの処理能力に依存し、予め記録されているが未圧縮ビデオ・メディアに対する適切な能力を有するシステムに対して一般に略15分間であり得る。バッファ内において、各フレームは図面上に示されたマトリックスにおける予めテストされた系列の「タイプ」に従って各CODECと比較される。
次に、システム400は、例えばスクリーン解像度、利用可能メモリ等のエンドユーザ・パラメータをそのクライアントの装置におけるソフトウェアエージェントから受信る情報を介して見る。従って、最も適切なCODECが選択され、そのCODEC内における特定変数を固定量に設定すること(例えば、ソース・ビデオの、過去のパターン、転送チャンネル能力或は制約、並びに、到着装置能力或は制約に対する比較に基づく)によって最適性能用に構成/調整される。今説明したプロセスは、一般に、分類器417によってフレーム毎に為されるが、CODECは一時的な圧縮効率と比較て、他の先行及び遅延フレームを考慮して、各フレームに対するプロセスを行う。ひとたび適切なCODECが選択され各フレーム用(或は、システムによって自動的に且つ適切に決定されれば複数フレームから成るブロック用)に調整されたならば、配信システムはクライアントエージェントに報告して、その調整されたCODECを解凍して再生る対応するフレーム(又は複数フレーム)の方へ配信する。
理解して頂けるように、このシステム400のニューラルネットワーク440はCODECライブラリ445内のCODECの性能及び動作を連続的に学習して記憶し、その学習内容を連続的に用いて、入力メディア信号の圧縮効率を改善する。ライブラリを介する信号フレームの稼動、CODECオペレーティング・パラメータの変更、比較論理525(図5)による基準標準圧縮と圧縮性能との比較、および、更なる変更とのループの再稼動のプロセスは、一般に、圧縮効率を改善するために反復550(図5)を続ける。事実、ライブラリ445内の1つ或は複数のCODECによる圧縮は(単数或は複数の)基準圧縮アルゴリズムよりも良好な改善レベルに到達することができる
それにもかかわらず、時間制約435(図4A)が存在する場合(ストリーミング・メディア・コンテンツに対するリアルタイムでの押し引き要望等)、処理中のある特定のフレーム或は一連のフレームが圧縮(575)され、タイマ435による了承できない遅延無しで、到着地まで配信(580)され得るように、このプロセスはある点でいつかは停止しなければならない。次いで、次のフレーム或は一連のフレームを、CODECオペレーティング・システム内のニューラルネットワーク440によって操作することができる。これら最終目的地は所定の所望結果への到達によって規定することができ、例えばこれに限定されるものではないが、(i)例えば基準標準と比較される所定のパーセンテージ(%)圧縮効率への到達、(ii)例えばバッファ時間(例えば15秒間)と関連された時間に従ってプロセスに設定された、所定の或は課せられた時間限界への到達、或は、(iii)(i)若しくは(ii)の何れか早い方の発生によって規定され得る。いずれにしも、適切なCODECを選択して圧縮575及び配信580の操作を実行するための最終目的地には到達するが、これはニューラルネットワーク440が続ける訓練に対する最終目的地を表すものではない。プロセスにおける各ループを通じて集められた情報は550に記憶される。引き続く同様フレーム或は入フレームにおけるシステム制約パラメータが、後に545に遭遇した場合ニューラルネットワーク440は、記憶された情報思い出再検索て、圧縮575及び配信580効率を改善する。
数多くの異なる通信プロトコルが意図されている一方で、有益であると思われる1つの実施例は、サーバ及びクライアント装置間の双方向通信を可能とする“フル・デュプレックス・ネットワーク・スタック(full duplex network stack)”プロトコルを用いこの場合もやはり、他のプロトコルをこの特定の適用例に適切である一方、このフル・デュプレックス・システムはより好ましい。
ここで記載したシステム400は、レイテンシー問題を克服すべくストリーミング・メディア配信アーキテクチャを利用することや、速度問題を克服すべく埋め込まれたニューラルネットワーク440を利用することによって、既知のCODECシステムで遭遇る困難に対処する。次いでシステム400はニューラルネットワーク440内での圧縮用に使用されるアルゴリズムを再構築することができ、目的任意のネットワーク構成にわたってあらゆる時に最適結果を達成することである。
広範な種類のCODECが先に記載された全体的な圧縮システム及び方法に従ってCODECライブラリ445内で使用され得るが、本発明に従った任意の特定CODECの有益な使用は単独でか或は他のCODECと組み合わせでのそうしたCODECを意図している。例えば、適切なCODECライブラリ445は以下のタイプのCODECの内の1つ或はそれ以上を含み得るものであり、即ち、(i)ブロックCODEC(例えば、Micorosoft Medeia(商標)或はQuickTime(商標)等のMPEGバージョン)、(ii)フラクタルCODEC、並びに、(iii)ウェーブレットCODEC(例えばReal(商標))等の内の1つ或はそれ以上を含み得る。別の局面に従えば、適切なCODECライブラリ445は以下のタイプのCODECの内の1つ或はそれ以上を含み得るものであり、即ち、(i)運動予報CODEC、及び、(ii)静止CODEC等の内の1つ或はそれ以上を含み得る。更には、CODECライブラリ445は、(i)損失有りCODEC、及び、(ii)損失無しCODEC等の内の1つ或はそれ以上を含み得る。
本発明の一実施例において、これら異なるタイプのCODECの全ては本発明に従ったCODECライブラリ445によって表現され得て、所与のタイプの2つ以上の特定CODECはそのライブラリに含まれ得る。さもなければ、それら様々なタイプの様々な組み合わせが提供され得て、所望の能力を達成して、広範囲の、信号自体内のリアルタイム変数、伝送チャンネル制約、或は、到着装置制約にわたってストリーミング・メディア通信の圧縮を最適化する。更には、本発明の追加的な高有益性である局面は新しいCODECがライブラリ445内にロードされて、ニューラルネットワーク440圧縮/配信システム400における使用に対して直ちに有効とされることを可能としている。それにもかかわらず、広範囲な予知されるストリーミング・メディア信号を最適に通信する点での使用に対して有益であると思われると共に画像信号に対して特に有益であると思われるCODECライブラリ445の1つの特定例は、以下の特定CODECを含むものであり、即ち、MPEGバージョン1,2,4(例えば、Micorosoft Medeia(商標)及びQuickTime(商標))、DUCK TruMotion(商標)、ON2、Real Media(商標)、MJPEG:H.261,H.263,H.263+、GIF、JPEG、JPEG2000、BMP、WBMP、DIVXを含む。
以下には、少なくとも部分的にはこの開示に基づき当業者に明かなように、単独及び組み合わせの双方で、広範に有益であると考えられるべき先に記載された圧縮システム及び方法の様々な局面の更なる例である。そうした広範な局面の更なる例は「発明の要約」や「特許請求の範囲」に提供されている。
記載された様々なCODEC動作を達成すべく人工知能を伴ニューラルネットワーク440使用することは、広範に且つ独特に有益である。特に信号品質、データ・コンテンツ、並びに、データのフォーマットへの、学習した応答の適用によって決定されるソース・データの事前処理410に対するシステム及び方法が、提供されている。ソース・データの観測された特性、および、同様な圧縮データへの過去に学習した応答に依存して、好適なCODECを(CODECライブラリ445における複数の利用可能なCODECから成る集合から)選択及び適用することによって、ソース・データの各ユニット(例えば、フレーム或は複数フレームから成るブロック)を処理するためのシステム及び方法が、提供されている。元のデータの無欠性の取り込み及び保持を最適化すべく選択した圧縮アルゴリズム内の、多数の圧縮特性を設定することによって、ソース・データの各ユニットを処理するためのシステム及び方法が、提供されている。更には、先に述べた信号処理ステップの各々或は全ては、例えば、信号クリップ、ビデオ・フレーム、或は、適切であれば個別パケット等の信号データの独特で順次的なユニット各々に適用される。
更に意図されていることは、本発明に従ったCODEC管理システム400が元のソース・データ/画像を正規化すると共に、ニューラルネットワーク処理モジュール440の仕様に合うように再度の元のデータの大きさを分類し且つサンプリングすることができる画像処理のためのシステム及び方法を提供することである。単一システムや任意のソース・データ・ストリームで任意の伝送或は記録チャンネルを供する能力も提供されている。更には、ここに記載されている様々なシステム及び方法は、個々別々でそして有益には組み合わせで、TCP、UDP、WTP/WDP、HTTP等々に限定されるわけではないがこれらを含んでいる任意の接続プロトコル或は無接続プロトコルとの互換性が具備されている。
ここに図示記載した本発明は、ニューラルネットワーク440の学習速度を加速する、非常に有益な用途を許容する一方で、そのネットワークを具現化すべくデータ記憶要件を最少化している。データ・ストリームの異なる分類は、それぞれ独特な特性を有しそれらは、ニューラルネットワーク440による実質的により大きな処理を必要とする。例えばビデオ・データ・ストリームは、運動の優勢及び度合い、カラーコントラスト、並びに、細目のパターン及び可視性によって異なる。より大きな処理は最適機能に到達するためにより長い時間を必要とする。また、より大きな処理はより大きな予ライブラリ記憶を必要とし、しばしば無制限に大きなサイズに成長する。リアルタイムのニューラルネットワーク処理のため機能性を大きく増大するように、データ・ストリームの分類の特性の事前に発展させた予測ライブラリを提供することによって、処理時間及び記憶最少化することができる
従って以下、単独で或は組み合わせで(ここ以外の場所で図示され且つ記載された他の実施例との組み合わせを含む)広範に有益である本発明の事前訓練たニューラルネットワーク440局面の例を示す。ニューラルネットワーク440において人工知能を創り出して使用し、さらに、問題の解決に用いられる知能ネットワークを事前に訓練する、システム及び方法を提供し、その問題は、必ずしもこれに限定されるわけではないが本発明の特定の有益な態様かかるストリーミング・メディア圧縮であり得る。また解決べき問題の領域を有用な部類に分類し、知能ネットワークによる学習履歴に従って処理することができる、システム及び方法が提供される。
本発明は、知能ストリーミング/メディア配信システム及び方法であって、エンドユーザ能力に基づき、コンテンツ伝送や、例えばこれに限るものではないが、有効な伝送速度又は伝送帯域幅、並びに、インターネット混雑等の伝送チャンネル制約を管理するための、システム及び方法も提供する。データ圧縮及び配信システム400は、接続(これに限るものではないが、異なるビットレート、レイテンシー、伝送特性、並びに、装置制限を含む)の態様を分析して、圧縮方法における変更を行うと共にサービス品質(「Qos」)420問題を管理すべくニューラルネットワークに基づく人工知能プロセス等のような、コンピュータで実行する知能プロセスを利用する。圧縮された、ディジタルの、復元可能及び/或は解凍可能なデータ・ストリームは、従って多数の異なるローカル及び/或は遠隔の装置に異なる機能によって特徴付けられる多数の伝送媒体を介して配信される。加えて、解凍システムを具えて、解凍されたデータをターミナル装置で再生する。
1つの有益な実施例において、ターミナル装置はサーバ・ノード上に常駐するシステムとのリンクを設定する。通信を設定するために通常必要とされるソフトウェアを除いて、ターミナル装置は初期的には、その内部に、本発明にかかる常駐ソフトウェアを持たない場合がある。そのターミナル装置をサーバ・ノードとリンクするに及んで、システムはソフトウェア媒介物をそのターミナル装置に伝送し、それがサーバ側の他のソフトウェア・モジュールと協働して、一緒に全体的な配信システムを形成する。ソフトウェアエージェントそのシステムにターミナル装置構成やデータを解凍し表示するための処理能力を通知する。そのソフトウェアエージェントそのシステムに、ターミナル装置及びサーバの間の通信チャンネルの特性の特定の関連情報を報告する。そうした情報は、これに限定するものではないが、レイテンシー、帯域幅、並びに、信号経路無欠性を含む。ターミナル装置構成とチャンネル特性及び能力のリアルタイム更新とに基づき、システムは、バッファ長、伝送済みビットレート、並びに、エラー修正等のパラメータを変更することによって圧縮データの伝送を能動的に管理する。またシステムは動作条件を圧縮システムに供給して、データの配信を最適化すべく、エンコーディング及び圧縮の設定を動的に変更する。ターミナル装置上に常駐する配信ソフトウェアエージェントは、圧縮/解凍アルゴリズム及びその設定におけるセグメント毎の変化から構成されるデータ・ストリームを解凍する。ターミナル装置構成に依存して、様々な指示を、解凍アルゴリズム及びエンディング設定の各組み合わせに対してセグメント毎に、特に非常に活気のないクライアントに対して、リフレッシュすることができる。解凍用の指示も、もしターミナル装置に適切であれば、残留させ続けることができる
到着装置への伝送、および到着装置による動作のために記載されたソフトウェアエージェントは、それ故に、記載された圧縮/配信システム及び方法の、非常に有益な態様とも考えられる。ソフトウェアエージェントをソースから装置へ配信することによって、広範囲に存在する到着装置、1つ或はそれ以上のアルゴリズムの可変的な使用、又は伝送ソースでの他の動作含み得る方法にかかる通信に対して使用することができる。言い換えれば、到着装置は、従来のストリーミング及びスタティック・メディア通信システムの多くに必要とされるような、「フォーマット特定」プレイヤーであること要求しなくてもよい。また、診断機能を具備する宛先エージェントを提供することによって、様々な状況から成る所与の集合に対する適切なCODEC処理行うためのニューラルネットワーク・プロセスにおいて、診断情報到着装置に集めることができさらに、ソース使用に準拠するフォーマットで該ソースへ戻ように伝送することができる
リアルタイムでのクライアント側装置データ及び通信チャネル状況を含むサービス品質情報を提供するためにクライアント側のエージェントを使用することも、従って、特定の用途や、ここに提供る本発明の他の態様から成る組み合わせを超えて幅広く有益であると思われる。加えて、クライアント側装置及びリアルタイム通信チャンネル条件に適合すべく圧縮された伝送準備済みデータの各ユニットの処理も、広範に及ぶ有益性を有すると幅広く解釈される。更には、クライアント側エージェントに指示して、順次一意的に圧縮されたデータユニットの各々の解凍を可能とするシステム及び方法記載ている。それ故に、本発明の別の広範な有益性は到着装置に、元のメディア信号の圧縮表現を解凍して、元のメディア信号の態様、伝送チャンネル制約、並びに、到着装置制約の内の少なくとも1つに関連する可変パラメータに基づき解凍した表現に為すことができるCODECを提供する(特定の実施例に対してここで記載た伝送ソースから等)。別の広範な態様において、到着装置は元のメディア信号の態様に関連するパラメータに基づきCODECライブラリから選択されるCODECを用いることができる。

ここに記載されたシステム及び方法は、例えば信号クリップ、ビデオ・フレーム、或は、適切であれば個別のパケット等の信号データの独特で順次的なユニット各々の信号処理にも適用可能である考えられる。加えて、システム及びその様々なサブシステムも、それぞれ適切な装置にロードされなければないないか、或は、サーバ側上等に、特定の状況ではクライアント側上に(例えば到着媒介物の様々な局面)ホスト・ハードウェアのコンポーネント若しくはチップに埋め込まれ得るか、さもなければ、フラッシュメモリ等に記憶され得るような純粋なソフトウェアであり得る。
今記載されたメディア・システム及び方法の様々な局面は、例えば様々な通信装置、通信/伝送チャンネル・フォーマット及び標準、並びに、ここに記載されている以外(例えば先の「背景技術」の欄)のメディア・タイプ及びフォーマットに対する準拠を含む幅広い既知であると共に直に予知されるメディア通信要望に準拠する使用に対して有益であると考えられる。
しかしながら更なる理解の目的のため、図6は本発明の一実施例に従った「ビデオ・オン・デマンド」局面に特に適用されたような全体的なストリーミング・メディア通信システム600の概略図を示し、数多くの異なる場所における数多くの異なるエンドユーザ610−620は遠隔ソースからリアルタイム(例えば実質的な遅延無し)で、事前記録されたビデオを要求して受信し得る。図6に提供される情報に加えて、少なくとも1つの特定具現化例は以下のビットレートで以下のタイプのビデオを配信するものであり(到着装置によって典型的な人の観測者の目によって観測されるような全く損失がないか或は実質の無い損失を有する解凍済み表現に変換可能な元の信号の圧縮表現に留意)、即ち、約250Kbsの低いVHS-フォーマット・ビデオ、約400KbsのDVD-フォーマット・ビデオ、約900KbpsのHDTV-フォーマット・ビデオである。これらの局面に従えば、ビデオ・オン・デマンドは、例えば既存のDSL線630−640にわたる等の常駐伝送線チャンネルにわたる電話キャリアによって提供され得ると思われる。
しかしながら、利用可能な帯域幅やマスコミュニケーションが問題を提示し続けるように、より大きな効率性が達成されて、これらのタイプのビデオ信号の圧縮表現をより低いビットレートでさえ配信することになる。再度、ここ以外に記載されているように、本発明に係る圧縮効率性はニューラルネットワーク440にとって利用可能と為されている処理能力と、変更されたタイプのメディアに対して学習及び訓練が続行されたニューラルネットワーク440との関数と密に関連すると共にその関数として改善する。これらリソース(資源)は、本発明の基本的な特徴への変更無しに、より顕著な圧縮効率を達成可能と為す。
それ故に、以下は、所望されると共に本発明の一実施例に従って達成可能であると思われる特定の圧縮ビデオ信号に対する伝送レートの更なる例であり、即ち、約200Kbps、より好ましくは約150Kbps、そして更により好ましくは約100Kbpsと低いVHS−フォーマット・ビデオ、約350Kbps、より好ましくは約300Kbps、そして更により好ましくは約250Kbpsと低いDVD−フォーマット・ビデオ、並びに、約800Kbps、そして更により好ましくは約700Kbpsと低いHDTV−フォーマット・ビデオである。
更には、本発明の一実施例に係るメディア通信システム400の少なくとも1つの具現化例は7Kbpsの伝送レートで20〜24フレーム/秒のカラービデオを配信する。これは、これ以降の別の場所で更に展開されるように、WAPゲートを介して、ワイヤレス到着装置へのストリーミング・メディア信号の通信に関する実質的な前進をイネーブルすると思われる。
また理解して頂きたいことは、ビデオ通信がこの開示において強調されたが、他のタイプのストリーミング或はスタティック・メディアも意図されていることである。例えば、圧縮及び配信実施例の少なくとも1つの具現化例が観察されて、実質的なCD品質サウンド(例えば、到着装置によって典型的な人の観測者の耳によって観測されるような全く損失がないか或は実質的な損失が無い)解凍済み表現に変換可能である元の信号の圧縮表現を介して)を約24Kbpsのビットレートで提供している。これらのレートで、オーディオマニア品質のサウンドがダイアルアップ・モデムにわたって再生用に配信され得る。しかしながら、更に利用可能なリソース責務やニューラルネットワーク訓練の程度に関して、更に意図されることは、本発明が約20Kbpsの低さ、そして約15Kbps或は10Kbpsの更なる低さの速度でCD品質サウンドを配信できることである。
ワイヤレス・オーディオ通信システム
更に意図されていることは、本発明のストリーミング・メディア通信システムがワイヤレス・オーディオ通信ネットワーク内、特にセルラー通信系ネットワーク内において特に有用な用途を有する。それ故に、図7及び図8は、本発明の特定の各種実施例に従ったワイヤレス・オーディオ通信システムに特に適用されたストリーミング・メディア通信システム700及び800を細部の増大する量を伴って概略的に示している。特定の装置、システム・パラメータ、或は、図示された通信装置の配列が本発明の全体的な用途で有益であると思われる一方で、それらは制限していると考えられるべきではなく、この開示に基づき当業者に従って他の代替物で適切に置き換えられ得る。よって、この開示の他の場所で参照される様々なワイヤレス通信システム700及び800の標準及びプロトコルは、本発明の一実施例に従った圧縮、配信、解凍、並びに、トランスコーディングの様々な局面との統合の目的でこの欄に組み入れられる。
本発明の一実施例に係る通信システム400のセルラー通信ネットワークの他の構成要素との組み合わせは、本発明に従った、向上された圧縮、配信、並びに、解凍を可能として、ワイヤレス・オーディオ通信に対するサービスの増大された品質に現れている。本発明に従ったセルラー通信における改善は、制限無しに、増大される利用可能帯域幅、拡張される受信範囲の例を含むと共に、適切な降格を提供するものの低信号品質或は低受信レベルの期間中に結合又は接続を維持する。
より明確には、セルラー通信系信号は、例えばクライアントのローミング位置及び制限されたセル範囲、大気状態、並びに、毎日の使用サイクルにわたっての著しく制限され変化する利用可能帯域幅による比較的高い度合いの変数によって特徴付けられる。それ故に、本発明に従った自己最適化CODEC管理システムは、適切な通信や圧縮様式を変化する環境に合わせて調節することに対して特に良好に適合している。少なくとも、圧縮効率の増大や所与の信号に対して使用される帯域幅における結果としての減少は、ワイヤレス・チャンネル・トラフィックが混雑し続ける場合に価値ある偉業である。
1つの特定の点において、本発明に従った増大された圧縮効率は充分に適用されて、図9に図示されるように、セル間の「ソフト・ハンドオフ」中の帯域幅問題を改善する。セルラー電話通信中、送信器或は受信器がセル適用範囲領域を移動すればいつでも、通信帯域幅要件及びその結果のコストがセル間のアクティブな通信を「うまく行わせる」べくシステム要件によって増大される。通信をうまく行わせる行為は、先行のアクティブなセルラー送信器から中心オフィスまでの「逆送」チャンネルを生じ、新しくアクティブとなったセルラー送信器へ転送する。この逆送チャンネルは帯域幅の主要な用途を表す。節約は増大された圧縮から生ずる。図に示されるように、そうした「逆送」は特定の信号を通信するために使用される帯域幅における倍増(通信のために第1セルから逆に送信されたメディアが立ち去って第2セルへ再送信される)或は4倍増(第1及び第2のセル双方からの部分的重複通信)すら含み得る。
本発明のメディア通信システム400は、ソフトウェア媒介物に設けられた伝送チャンネル診断に従って等で逆送が何時生じているかを認識し得て、補償すべき圧縮度を調節することによって応答し得る。
WAPビデオ・ゲートウェイ
ワイヤレス或はモバイル・インターネットで観測され予言される急激な成長の特別な検討によって、本発明の実施例はWAPゲートウェイ機能と組み合わせた知的圧縮/解凍の実施例の用途を意図している。
それ故に、複雑なディジタル・メディア(例えばビデオ写真)をコード化、圧縮、並びに、ワイヤレス・アプリケーション・プロトコル(WAP)を利用する帯域幅制約ワイヤレス通信システムを介して伝送するシステム及び方法も本発明に従って提供されている。一実施例において、人工知能を伴ったニューラルネットワークを利用してデータは(単数或は複数の)サーバ・ノードに常駐するシステムによって処理される。データのサンプル・セグメントは入力ストリームから取り込まれ、処理されて、クライアントの分類に独特な要件に応じる。先に詳細に記載されたように、システムは連続的に変化するディジタル・データ・ストリームの特性を事前開発された経験的に学習された規則から成るライブラリと相関させると共に、最終的にはクライアント・インターフェースで受信され、デコードされ、そして提示されるようなデータの干渉性、連続性、並びに、詳細を最適に振り付ける又は構成すべく外部的に課せられた制約と相関される。
ここで記載されたストリーミング・メディア通信システムの追加された機能が具備されたゲートウェイは図8に概略的に示されている。WAPゲートウェイ・システム830に従って、クライアント媒介物が提供されて、様々なプラットフォーム上に走ることができ、ビデオ・ストリームをデコードすべき特殊化されたハードウェアを何等必要としない。ここ以外に記載された本発明のストリーミング・メディア配信システムの使用に従って、WAP装置の視聴者は上流側のシステム・サーバとの一定通信を維持して、ユーザ側クライアント825がエンコーディング・プラットフォームにストリーミング・メディア通信のための関連情報、即ち、制限無しに、有効スクリーン・サイズ、処理能力、クライアントオペレーティング・システム及びブラウザ・バージョン、接続速度、並びに、レイテンシーを含む関連情報を具備させ得ることによって、ストリーミング・メディア配信システムがストリームを誂えてそれが「話す」各個別クライアント向けと為すことを可能としている。従って、ここで記載されたようなAI圧縮を組み入れているAI駆動サーバ830はWAPゲートウェイ830と組み合わせ可能であり、必要なWAPからTCP/IPプロトコル(或は他のプロトコル、即ちデュアル・サーバ・スタック)翻訳を、圧縮システム、配信システム、並びに、解凍システムとここに記載された方法とを利用するビデオ及びオーディオ・サーバ835と組み合わせる。WAPゲートウェイ830は、例えばトランスコーダ・システム及びここに記載された方法を組み入れているビデオ・トランスコーダを更に含み得る。このシステムに従った適切なホスト・アーキテクチャ(不図示)は、変更WAPゲートウェイ830によるか或は既存のサーバへのプラグ-インとしてのリナックスOSを走るラック取付システムを一般に含む。
このWAPゲートウェイ830は、更に、全体的なストリーミング・メディア配信アーキテクチャ(特にワイヤレス以外の他の配信システムに適用可能)の別の有益性局面として、マスター/スレーブ関係で提供されている。Akamai及びInktomiを通じて利用可能であるような様々なコンテンツ分配ネットワークは、インターネットの境界上に常駐するサーバ上の「スマート・キャッシング(smart caching)」を用いることによって、インターネットにわたるデータ配信を改善する概念を活用した。そうしたマスター/スレーブ関係は本システムによって維持され、マスター・サーバが配信されるべきコンテンツのソースに常駐し、スレーブ・サーバは境界上に常駐する。これらサーバは「知的に」通信して、インターネットにわたるコンテンツ配信を最適化し、レイテンシー、帯域幅、並びに、記憶の要件を低減して、エンドユーザ向けのビデオ/オーディオ・ストリームの全体的な品質を改善すると共に、コンテンツ・プロバイダ向けメディア配信のコストを減少している。
本発明のWAPゲートウェイ830はモバイル通信における続行された成長をサポートするが、これは大きな遠隔通信オペレータがマルチサービス・ブロードバンド・ネットワークに移行していく場合、そしてモバイル・インターネットへの加入者の数が急激に膨張し続ける場合である。特にモバイル通信はシステム及びプロトコルの広範な分類であり、各々がそれ自体の制約やストリーミング・メディアを通信すべく双方向装置の必要性を有する。特に有益な局面であるゲートウェイ830は、やがて現れる「2.5G」及び「3G」ネットワーク・テクノロジー(システムの数値的な前進はインターネット-イネーブル化能力の前進を一般に表す)の向上を伴って種々の「2G」システムをサポートし得る。
以下のテーブル3は既知のモバイル通信標準の例を提供すると共に、メディアプレイヤーとしてモバイル到着装置の分野の間でストリーミング・メディア通信を最適化するために、本発明に係るAIシステムによって使用される特定の関連情報を提供している。
Figure 0004852228
加えて、本発明は広範な種々のメディア信号を様々な異なるタイプのワイヤレス通信装置へ流す能力に特に有益性がる。ストリーミング・メディア通信システムと本発明の方法との使用に適合するワイヤレス通信装置の例であり、それらシステム及び方法は交換可能にサポートしている場合の例は以下のテーブル4に提供されている。
Figure 0004852228
様々な特定例は以下に記載され、ここで記載されたように本発明の実際のワイヤレス・インターネット適用例の観察を提供する。そうした例は、(制限無しに)少なくとも、到着ワイヤレス通信装置、伝送チャンネル、通信プロトコル、並びに、それら自体の各ストリーミング・メディア信号と関連された多様なパラメータに従ったCODECライブラリの使用を含む。これらの例に従って使用されるシステム及び方法の様々な独特の特徴は本発明の独立して有益な局面を更に規定していると思われる。
共有された対話式環境
顕著なクライアント側処理能力の必要性無しに、高品位、多重次元、多数参加者型のシミュレートされた環境とのリアルタイム遠隔クライアント対話をイネーブルするための本発明に従ったシステム及び方法が提供される。より詳細には、図10は本発明に従った共有された対話式ゲームに適用されるような全体的なストリーミング・メディア通信システムを示している。
このシステムは、(i)プロキシー・サーバ、(ii)本発明の配信システムをサポートするクライアント・ソフトウェア媒介物、並びに、(iii)サーバからクライアントまでのストリーミングを含む。意図されていることは、設計によって共有された対話式のゲームを典型的には表す多数のクライアントに対して、今記載したような多数のコンポーネントが各クライアントをサポートすべく提供されていることである。
対話式ゲーム実施例はデータ圧縮と、他の同様で遠隔的に配置された装置システムからの圧縮信号用の到着装置でもある装置を具備する配信実施例との具現化を意図している。この構成は広範な有益性があり、例えば、ビデオ会議等の更なる対話式メディア具現化において有益性がある。従って、各遠隔システムはソース及び到着装置の双方であり、それと他の遠隔システムとの間で媒介物を受送信する。
到着装置
本発明の通信システムはストリーミング・メディア信号の広範囲な種類の到着装置向けに通信することを可能としており、本発明の更なる意図された特徴はクライアント・ユーザによる到着装置/プライヤーとして収容されるべき遠隔受信器を提供することである。このセット-トップ・ボックスは、ビデオ・オン・デマンド(VOD);ミュージック・オン・デマンド(MOD);要望に応じた対話式ゲーム(IGOD);ボイス・オーバー・インターネット・プロトコル(「VoIP」)であり、IP接続上のボイス・テレホニー・サービスを提供する任意のテクノロジー;テレビ・ウェブ・アクセス;ライブ・テレビを記録、ポーズ、並びに、再生すべくディジタル・ビデオ・レコーディング、ポーズ、並びに、プレイバック生テレビ;E−メール;チャット;DVDプレイヤー;並びに、当業者には明かな他の用途の内の、好ましくは、多数であり、ことによると全てであるが、少なくとも1つを供するべく適合し得る。この全てはユーザ自身の家庭の安楽な状態の中の既存のテレビジョンに配信され得る。更には、このボックス或は本発明の通信システムとインターフェース接続している他のシステムを利用しているクライアントはDVD品質ビデオ及びサラウンド・サウンドをケーブル及びDSL接続を介して受信し得る。

本発明に達成され得る高有益性結果を更に説明する目的のため、以下は関連議論を伴う観測結果を含むストリーミング・メディア通信の異なるタイプに対して使用されている特定の実施例の例示である。これらの例は異なる伝送チャンネルにわたって同一事前記録ビデオの通信であって、異なる到着装置向けの通信を説明するものであり、事前記録されたビデオが、解像度720本、カラー情報32ビット、生起ファイル・サイズ約1.4ギガバイトの諸生起特性を有している。
例1
「iPAQ」モデル3650手持ちPDA(この開示の際に約500ドルであるCompaq Inc.社から商業的に入手可能)が提供された。このPDAは、14.4Kbps(最大)ワイヤレスCDPDモデム(この開示の際に約200ドルであるSierra Wireless社から商業的に入手可能な「AirCard300」ワイヤレス外付けモデム)と拡張アセンブリ(Compaq Inc.社製のiPAQ(商標)PCMCIA拡張スリーブ)を用いてインターフェースさせられ、このワイヤレス・モデムと結合するPCMCIAカード・スロットを伴う。使用されるiPAQ(商標)は、一般に、206MHzプロセッサ、32Mbメモリ、12b/pixel カラー、240x320スクリーン寸法、Microsoft Corp.社製PocketPC(商標)オペレーティング・システム・バージョン3.0、並びに、ステレオサウンドの諸処理パラメータを有するように特徴付けられている。iPAQ(商標)は、約13.3Kbit/秒の接続帯域幅でAT&Tセルラー・ワイヤレス・キャリア・システムにわたって、インターフェースされたCDPDモデムを介してカリフォルニア州サンフランシスコ市のインターネットと接続された。カリフォルニア州サンホゼ市に配置されたサーバ(約5マイル遠方)がhttp及びrtspプロトコルを利用するPDAによって接触させれ、PDAは、解像度720本、カラー情報32ビット、生起ファイル・サイズ1.4ギガバイトの諸生起特性を有する事前記録ビデオの要求を始動すべく使用された。約7秒以内に、その事前記録されたビデオの圧縮近似物が受信され、解凍され、そしてPDAスクリーン上に該PDAによって表示された。全ビデオは観測可能な遅延或は欠陥無しに完全動作の240x320x12bpp解像度で見えた。
例2
「Jornada(商標)」モデル548手持ちPDA(この開示の際に約300ドルであるHP Inc.社から商業的に入手可能)が提供されている。このPDAは、9.6Kbps(最大)ワイヤレスCDMA電話(この開示の際に約200ドルであるMotorola社の承認ベンダーから商業的に入手可能な「Motorola i85s」ワイヤレス外付けディジタル・セルラー電話)と、この電話及びPDAを一緒に結合してワイヤレス・モデムを形成するアダプター・ケーブル(Motorola社製及びHP社製のMotorola及びHP RS-232標準インターフェース・ケーブル)を用いてインターフェースさせられてた。使用されるJordnadaモデルPDA装置は、133MHzプロセッサ、32Mbメモリ、12b/pixel カラー、240x320スクリーン寸法、Microsoft Corp.社製PocketPC(商標)オペレーティング・システム・バージョン3.0、並びに、ステレオサウンドの諸処理パラメータを有するように特徴付けられている。Jordana(商標)は、約8Kbit/秒の接続帯域幅でNextelディジタル・セルラー・ワイヤレス・キャリア・システムにわたって、インターフェースされたCDMA電話/モデムを介してニュージャージ州ニューアーク市のインターネットと接続された。カリフォルニア州サンホゼ市に配置されたサーバ(約2900マイル遠方)がhttp及びWDPプロトコルを利用するPDAによって接触させれ、PDAは、解像度720本、カラー情報32ビット、生起ファイル・サイズ1.4ギガバイトの諸生起特性を有する事前記録ビデオの要求を始動すべく使用された。約7秒以内に、その事前記録されたビデオの圧縮近似物が受信され、解凍され、そしてPDAスクリーン上に該PDAによって表示された。全ビデオは観測可能な遅延或は欠陥無しにフルカラーの176x120x8bpp解像度で見えた。
例3
「セット-トップ・ボックス」モデルst850ブック型PDA(この開示の際に約300ドルであるMSI Inc.社から商業的に入手可能)が提供されている。このセット-トップ・ボックスは、10Mbps(最大)イーサネット(登録商標)/802.11接続と、このセット-トップ・ボックスをブロードバンド接続(DS3)と結合するCATイーサネット(登録商標)・ケーブル(Generic)を用いてインターフェースさせられてた。使用されるセット-トップ・ボックスは、400MHzプロセッサ、64Mbメモリ、32b/pixel カラー、スクリーン解像度720本、Microsoft Corp.社製CEオペレーティング・システム・バージョン2.11、並びに、AC3ディジタル6チャンネル・サラウンド・サウンドの諸処理パラメータを有するように特徴付けられている。このセット-トップ・ボックスは、約376Kbit/秒の接続帯域幅でAlter.Net Internet Backboneにわたって、インターフェースされた共有DS3接続を介してニュージャージ州ニューアーク市のインターネットと接続された。カリフォルニア州サンホゼ市に配置されたサーバ(約2900マイル遠方)がhttp及びrtspプロトコルを利用するこのセット-トップ・ボックスによって接触させれ、このセット-トップ・ボックスは、解像度720本、カラー情報32ビット、生起ファイル・サイズ1.4ギガバイトの諸生起特性を有する事前記録ビデオの要求を始動すべく使用された。約9秒以内に、その事前記録されたビデオの圧縮近似物が受信され、解凍され、そして商業劇に入手可能な基準モニタ(Sony)・スクリーン上に該セット-トップ・ボックスによって表示された。全ビデオは観測可能な遅延或は欠陥無しに完全動作の720本x32bppで見えた。
発明を説明する目的で著しく詳細に様々な特定実施例がここに示され且つ記載されたが、理解して頂きたいことは、更なる変更及び改善が、本発明の意図された範囲から逸脱すること無しに、この開示に基づき当業者であれば為され得ることである。例えば、詳細には記載されなかった様々な実施例の様々な可能性ある組み合わせが為され得るが、それらが本発明の意図された範囲内に依然として入る。別の例に従えば、明かな改善或は変更も様々な実施例に為され得て、この発明の意図された範囲内に依然として入る。
図1Aは従来のCODECシステムを用いた、先行技術に係るメディア通信システムの2つの各種変形例を表している概略ブロック線図を示す。 図1Bは従来のCODECシステムを用いた、先行技術に係るメディア通信システムの2つの各種変形例を表している概略ブロック線図を示す。 図1Cは先行技術に係るメディア・トランスコーダ・システムの2つの各種変形例を表している概略ブロック線図を示す。 図1Dは先行技術に係るメディア・トランスコーダ・システムの2つの各種変形例を表している概略ブロック線図を示す。 図1Eは先行技術に係るWAPゲートウェイ通信システムにおける様々な相互に関係する構成要素の概略ブロック流れ図を示す。 図2乃至図3は、2つの各種使用モード中における本発明の一実施例のトランスコーダ・システムの概略ブロック線図を示す。 図2乃至図3は、2つの各種使用モード中における本発明の一実施例のトランスコーダ・システムの概略ブロック線図を示す。 図4A乃至図5は、本発明の一実施例に従ったメディア通信システムの様々な相関構成要素の概略ブロック流れ図を示す。 図4A乃至図5は、本発明の一実施例に従ったメディア通信システムの様々な相関構成要素の概略ブロック流れ図を示す。 図4A乃至図5は、本発明の一実施例に従ったメディア通信システムの様々な相関構成要素の概略ブロック流れ図を示す。 図6は、本発明の一実施例に従った「ビデオ・オン・デマンド」ストリーミング・ビデオ通信システムの様々な相関構成要素の概略ブロック流れ図を示す。 図7は、本発明の一実施例に従ったワイヤレス・ストリーミング・ビデオ通信システムの様々な相関構成要素の概略ブロック流れ図を示す。 図8は、本発明の一実施例に従ったWAPゲートウェイ・メディア通信システムの様々な相関構成要素の概略ブロック流れ図を示す。 図9は、本発明の一実施例のメディア通信システムの1つの特定使用モードに従った逆送中のメディア通信システムの様々な相関構成要素の概略ブロック流れ図を示す。 図10は、本発明の一実施例に従った対話式ゲーム通信システムとセット-トップTVブラウズィング(browsing)の様々な相関構成要素の概略ブロック流れ図を示す。
符号の説明
100 ソース・メディア
130,135,140 到着装置
145 CODEC
200 ビデオ/オーディオ・トランスコーダ
210 ビデオ・ソース
300 サーバ
400 データ圧縮及び配信システム
405 メディア・モジュール
407 動的プレイヤー・モジュール
410 画像プロセッサ
415 基線スナップショット
417 分類器
420 標準品質(QoS)モジュール
425 ネットワーク層入力モジュール
430 ネットワーク層出力モジュール
435 タイマ
440 ニュートラルネットワーク処理モジュール
445 CODECライブラリ・モジュール
450 動的クライアント要求モジュール
455 ICMPモジュール
460 装置及びネットワーク・パラメータ測定モジュール
465 配信及び伝送モジュール

Claims (1)

  1. 方法であって、
    送信先のエージェントに伝送すべき、各々のセグメントが多数の時間的に近接するフレームを含む複数のセグメントに分離されたメディア信号を取得するステップと、
    前記メディア信号内の複数のセグメントの各々のセグメントに対して、
    各々のCODECが前記セグメントをどのようにコード化するかを判定するために、前記セグメントに対して複数の異なるCODECをテストするステップと、
    前記セグメントに対して最高品質のコード化出力を生成するCODECを一連の規準に従って選択するステップと、
    選択された前記CODECを用いてコード化されたセグメントを前記送信先のエージェントまで配信するステップと、
    前記送信先のエージェントに、どのCODECを前記セグメントのコード化に用いたかを報告するステップと、
    を繰り返すステップと、
    を含む方法。
JP2003531343A 2001-09-26 2002-09-26 メディア信号を通信するためのシステム及び方法 Expired - Fee Related JP4852228B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US32548301P 2001-09-26 2001-09-26
US60/325,483 2001-09-26
PCT/US2002/030874 WO2003027876A1 (en) 2001-09-26 2002-09-26 System and method for communicating media signals

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2008081977A Division JP4852563B2 (ja) 2001-09-26 2008-03-26 メディア信号を通信するためのシステム及び方法

Publications (3)

Publication Number Publication Date
JP2005508590A JP2005508590A (ja) 2005-03-31
JP2005508590A5 JP2005508590A5 (ja) 2005-12-22
JP4852228B2 true JP4852228B2 (ja) 2012-01-11

Family

ID=23268064

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2003531343A Expired - Fee Related JP4852228B2 (ja) 2001-09-26 2002-09-26 メディア信号を通信するためのシステム及び方法
JP2008081977A Expired - Fee Related JP4852563B2 (ja) 2001-09-26 2008-03-26 メディア信号を通信するためのシステム及び方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2008081977A Expired - Fee Related JP4852563B2 (ja) 2001-09-26 2008-03-26 メディア信号を通信するためのシステム及び方法

Country Status (14)

Country Link
US (2) US7295608B2 (ja)
EP (1) EP1438673B1 (ja)
JP (2) JP4852228B2 (ja)
KR (1) KR100640122B1 (ja)
CN (1) CN1568466A (ja)
AU (1) AU2002334720B8 (ja)
BR (1) BR0213596A (ja)
CA (2) CA2461830C (ja)
IL (2) IL160981A0 (ja)
MX (1) MXPA04002722A (ja)
NO (1) NO20041725L (ja)
RU (1) RU2282888C2 (ja)
TW (1) TWI293533B (ja)
WO (1) WO2003027876A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11662953B2 (en) 2020-10-26 2023-05-30 Hitachi, Ltd. Data compression/decompression system, and data compression/decompression method

Families Citing this family (404)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020002039A1 (en) 1998-06-12 2002-01-03 Safi Qureshey Network-enabled audio device
US8165155B2 (en) 2004-07-01 2012-04-24 Broadcom Corporation Method and system for a thin client and blade architecture
US20070094111A1 (en) * 1999-06-03 2007-04-26 Carrion Luis U Multiclient/multiconversation system for carrying out financial transactions and/or accessing information by means of sms messages
US7047312B1 (en) * 2000-07-26 2006-05-16 Nortel Networks Limited TCP rate control with adaptive thresholds
US7606898B1 (en) 2000-10-24 2009-10-20 Microsoft Corporation System and method for distributed management of shared computers
US7356605B1 (en) * 2000-12-29 2008-04-08 Cisco Technology, Inc. System and method for controlling delivery of streaming media
ITMI20010997A1 (it) * 2001-05-16 2002-11-16 Cit Alcatel Metodi per testare il software di controllo di una apparecchiatura per telecomunicazioni dotata di un controllo di tipo distribuito
US7339903B2 (en) 2001-06-14 2008-03-04 Qualcomm Incorporated Enabling foreign network multicasting for a roaming mobile node, in a foreign network, using a persistent address
US7027400B2 (en) 2001-06-26 2006-04-11 Flarion Technologies, Inc. Messages and control methods for controlling resource allocation and flow admission control in a mobile communications system
US8000241B2 (en) * 2001-06-26 2011-08-16 Qualcomm Incorporated Methods and apparatus for controlling access link packet flow aggregation and resource allocation in a mobile communications system
US7599434B2 (en) * 2001-09-26 2009-10-06 Reynolds Jodie L System and method for compressing portions of a media signal using different codecs
US7457358B2 (en) 2001-09-26 2008-11-25 Interact Devices, Inc. Polymorphic codec system and method
US7302102B2 (en) * 2001-09-26 2007-11-27 Reynolds Jodie L System and method for dynamically switching quality settings of a codec to maintain a target data rate
US7389526B1 (en) * 2001-11-02 2008-06-17 At&T Delaware Intellectual Property, Inc. System and method for recording a digital video image
US7143320B2 (en) * 2001-12-31 2006-11-28 Intel Corporation Increasing data throughput on a wireless local area network in the presence of intermittent interference
US20030206597A1 (en) * 2002-04-19 2003-11-06 Droplet Technology, Inc. System, method and computer program product for image and video transcoding
US6862502B2 (en) * 2002-05-15 2005-03-01 General Electric Company Intelligent communications, command, and control system for a land-based vehicle
US7861082B2 (en) * 2002-05-24 2010-12-28 Pinder Howard G Validating client-receivers
US7181010B2 (en) * 2002-05-24 2007-02-20 Scientific-Atlanta, Inc. Apparatus for entitling remote client devices
FI118549B (fi) * 2002-06-14 2007-12-14 Nokia Corp Menetelmä ja järjestelmä äänipalautteen järjestämiseksi digitaaliseen langattomaan päätelaitteeseen sekä vastaava päätelaite ja palvelin
JP4531560B2 (ja) * 2002-06-21 2010-08-25 トムソン ライセンシング 移動無線相互接続環境における記憶されたビデオストリーミングのための減少するネットワークqos要件
US8558795B2 (en) * 2004-03-12 2013-10-15 Riip, Inc. Switchless KVM network with wireless technology
US7606314B2 (en) * 2002-08-29 2009-10-20 Raritan America, Inc. Method and apparatus for caching, compressing and transmitting video signals
US8068546B2 (en) * 2002-08-29 2011-11-29 Riip, Inc. Method and apparatus for transmitting video signals
US7818480B2 (en) * 2002-08-29 2010-10-19 Raritan Americas, Inc. Wireless management of remote devices
US7684483B2 (en) * 2002-08-29 2010-03-23 Raritan Americas, Inc. Method and apparatus for digitizing and compressing remote video signals
US7643550B2 (en) * 2002-10-09 2010-01-05 Hewlett-Packard Development Company, L.P. Method for presenting streaming media for an event
US7436885B2 (en) * 2002-10-09 2008-10-14 Hewlett-Packard Development Company, L.P. Method for presenting streaming media
US7685315B2 (en) * 2002-10-28 2010-03-23 Nokia Corporation System and method for conveying terminal capability and user preferences-dependent content characteristics for content adaptation
US7926080B2 (en) 2002-11-07 2011-04-12 Microsoft Corporation Trick mode support for VOD with long intra-frame intervals
US8964830B2 (en) 2002-12-10 2015-02-24 Ol2, Inc. System and method for multi-stream video compression using multiple encoding formats
US10201760B2 (en) 2002-12-10 2019-02-12 Sony Interactive Entertainment America Llc System and method for compressing video based on detected intraframe motion
US9032465B2 (en) 2002-12-10 2015-05-12 Ol2, Inc. Method for multicasting views of real-time streaming interactive video
US20100166056A1 (en) * 2002-12-10 2010-07-01 Steve Perlman System and method for encoding video using a selected tile and tile rotation pattern
US8495678B2 (en) * 2002-12-10 2013-07-23 Ol2, Inc. System for reporting recorded video preceding system failures
US8387099B2 (en) 2002-12-10 2013-02-26 Ol2, Inc. System for acceleration of web page delivery
US8549574B2 (en) * 2002-12-10 2013-10-01 Ol2, Inc. Method of combining linear content and interactive content compressed together as streaming interactive video
US20090118019A1 (en) 2002-12-10 2009-05-07 Onlive, Inc. System for streaming databases serving real-time applications used through streaming interactive video
US8893207B2 (en) * 2002-12-10 2014-11-18 Ol2, Inc. System and method for compressing streaming interactive video
US8468575B2 (en) * 2002-12-10 2013-06-18 Ol2, Inc. System for recursive recombination of streaming interactive video
US8661496B2 (en) 2002-12-10 2014-02-25 Ol2, Inc. System for combining a plurality of views of real-time streaming interactive video
US9061207B2 (en) * 2002-12-10 2015-06-23 Sony Computer Entertainment America Llc Temporary decoder apparatus and method
US9003461B2 (en) * 2002-12-10 2015-04-07 Ol2, Inc. Streaming interactive video integrated with recorded video segments
US20110122063A1 (en) * 2002-12-10 2011-05-26 Onlive, Inc. System and method for remote-hosted video effects
US8832772B2 (en) * 2002-12-10 2014-09-09 Ol2, Inc. System for combining recorded application state with application streaming interactive video output
US8840475B2 (en) * 2002-12-10 2014-09-23 Ol2, Inc. Method for user session transitioning among streaming interactive video servers
US8949922B2 (en) * 2002-12-10 2015-02-03 Ol2, Inc. System for collaborative conferencing using streaming interactive video
US9077991B2 (en) 2002-12-10 2015-07-07 Sony Computer Entertainment America Llc System and method for utilizing forward error correction with video compression
US9138644B2 (en) 2002-12-10 2015-09-22 Sony Computer Entertainment America Llc System and method for accelerated machine switching
US9314691B2 (en) 2002-12-10 2016-04-19 Sony Computer Entertainment America Llc System and method for compressing video frames or portions thereof based on feedback information from a client device
US9108107B2 (en) * 2002-12-10 2015-08-18 Sony Computer Entertainment America Llc Hosting and broadcasting virtual events using streaming interactive video
US20110126255A1 (en) * 2002-12-10 2011-05-26 Onlive, Inc. System and method for remote-hosted video effects
US8028093B2 (en) * 2002-12-11 2011-09-27 Broadcom Corporation Media processing system supporting adaptive digital media parameters based on end-user viewing capabilities
TWI220842B (en) * 2003-01-30 2004-09-01 Quanta Comp Inc Transformation device of remote monitoring computer display image
US20040158855A1 (en) * 2003-02-10 2004-08-12 Yihong Gu Systems and applications for delivering multimedia contents and programs to interact with communication devices and display devices
US7496676B2 (en) * 2003-02-19 2009-02-24 Maui X-Stream, Inc. Methods, data structures, and systems for processing media data streams
US6938047B2 (en) * 2003-02-19 2005-08-30 Maui X-Stream, Inc. Methods, data structures, and systems for processing media data streams
US8122106B2 (en) 2003-03-06 2012-02-21 Microsoft Corporation Integrating design, deployment, and management phases for systems
US7890543B2 (en) 2003-03-06 2011-02-15 Microsoft Corporation Architecture for distributed computing system and automated design, deployment, and management of distributed applications
US7570616B2 (en) * 2003-04-09 2009-08-04 Alcatel-Lucent Usa Inc. Mobile cellular communication device presentation of user notification of active communication session handoff between radio technologies that are not directly compatible
US20060288373A1 (en) * 2003-05-05 2006-12-21 Grimes Kevin L System and method for communicating with a display device via a network
ES2297416T5 (es) 2003-05-06 2014-07-17 Apple Inc. Procedimiento de modificación de un mensaje, sistema de red de almacenamiento y retransmisión y sistema de mensajería de datos
US7508943B2 (en) 2003-05-16 2009-03-24 Mo-Dv, Inc. Multimedia storage systems and methods
US7764805B2 (en) * 2003-06-02 2010-07-27 Fujitsu Ten Limited Apparatus for generating surround signal from two-channel stereo signal
US8107525B1 (en) * 2003-06-10 2012-01-31 Avaya Inc. Variable bit rate video CODEC using adaptive tracking for video conferencing
CN100412832C (zh) * 2003-09-02 2008-08-20 竺红卫 一种基于优先级调度的非均匀多媒体流传输调度方法
GB0321337D0 (en) * 2003-09-11 2003-10-15 Massone Mobile Advertising Sys Method and system for distributing advertisements
US9325998B2 (en) * 2003-09-30 2016-04-26 Sharp Laboratories Of America, Inc. Wireless video transmission system
US7707592B2 (en) * 2003-10-10 2010-04-27 Telefonaktiebolaget L M Ericsson (Publ) Mobile terminal application subsystem and access subsystem architecture method and system
US7295568B2 (en) * 2003-12-31 2007-11-13 Nokia Corporation Apparatus, method and system for decision making to support network selection for datascasting in hybrid networks
GB2410145A (en) * 2004-01-16 2005-07-20 Amino Comm Ltd Method of accessing additional service via a television decoder
EP1709530A2 (en) * 2004-01-20 2006-10-11 Broadcom Corporation System and method for supporting multiple users
US8018850B2 (en) * 2004-02-23 2011-09-13 Sharp Laboratories Of America, Inc. Wireless video transmission system
US7778422B2 (en) 2004-02-27 2010-08-17 Microsoft Corporation Security associations for devices
US7602981B2 (en) * 2004-03-09 2009-10-13 Kabushiki Kaisha Toshiba Image storage and display system, maintenance system therefor, and image storage and display method
US7522774B2 (en) * 2004-03-10 2009-04-21 Sindhara Supermedia, Inc. Methods and apparatuses for compressing digital image data
US7853663B2 (en) * 2004-03-12 2010-12-14 Riip, Inc. Wireless management system for control of remote devices
JP2005286426A (ja) * 2004-03-26 2005-10-13 Sharp Corp ホームネットワークサーバ、デジタル放送番組配信方法、無線端末、ホームネットワークシステム、プログラム、および記録媒体
DE602005007653D1 (de) * 2004-04-12 2008-08-07 Ind Academic Coop Verfahren, Vorrichtungen und Speichermedien zur Bereitstellung von Multimedia-Diensten unter Berücksichtung der Endeinrichtungsfähigkeiten
ATE512455T1 (de) 2004-04-15 2011-06-15 Zeiss Carl Sms Gmbh Vorrichtung und methode zur untersuchung oder modifizierung einer oberfläche mittels ladungsträgerstrahls
DE102004019105B3 (de) * 2004-04-20 2005-12-22 Siemens Ag Verfahren sowie Anordnung zum Betreiben von Multimedia Applikationen in einem Schnurlos-Kommunikationssystem
US8868772B2 (en) 2004-04-30 2014-10-21 Echostar Technologies L.L.C. Apparatus, system, and method for adaptive-rate shifting of streaming content
US7818444B2 (en) 2004-04-30 2010-10-19 Move Networks, Inc. Apparatus, system, and method for multi-bitrate content streaming
US20050246529A1 (en) 2004-04-30 2005-11-03 Microsoft Corporation Isolated persistent identity storage for authentication of computing devies
US8028323B2 (en) 2004-05-05 2011-09-27 Dryden Enterprises, Llc Method and system for employing a first device to direct a networked audio device to obtain a media item
US8028038B2 (en) 2004-05-05 2011-09-27 Dryden Enterprises, Llc Obtaining a playlist based on user profile matching
US20070110074A1 (en) 2004-06-04 2007-05-17 Bob Bradley System and Method for Synchronizing Media Presentation at Multiple Recipients
US8443038B2 (en) 2004-06-04 2013-05-14 Apple Inc. Network media device
US10972536B2 (en) 2004-06-04 2021-04-06 Apple Inc. System and method for synchronizing media presentation at multiple recipients
US8797926B2 (en) * 2004-06-04 2014-08-05 Apple Inc. Networked media station
US7899492B2 (en) 2004-07-16 2011-03-01 Sellerbid, Inc. Methods, systems and apparatus for displaying the multimedia information from wireless communication networks
US7957733B2 (en) 2004-07-16 2011-06-07 Sellerbid, Inc. Method and apparatus for multimedia communications with different user terminals
US8843931B2 (en) 2012-06-29 2014-09-23 Sap Ag System and method for identifying business critical processes
US20140071818A1 (en) 2004-07-16 2014-03-13 Virginia Innovation Sciences, Inc. Method and system for efficient communication
US20060020966A1 (en) * 2004-07-22 2006-01-26 Thomas Poslinski Program guide with integrated progress bar
US7403929B1 (en) * 2004-07-23 2008-07-22 Ellis Robinson Giles Apparatus and methods for evaluating hyperdocuments using a trained artificial neural network
US9031568B2 (en) * 2004-07-28 2015-05-12 Broadcom Corporation Quality-of-service (QoS)-based association with a new network using background network scanning
US9089003B2 (en) * 2004-07-28 2015-07-21 Broadcom Corporation Quality-of-service (QoS)-based delivery of multimedia call sessions using multi-network simulcasting
US7539341B2 (en) * 2004-07-29 2009-05-26 Xerox Corporation Systems and methods for processing image data prior to compression
US7620892B2 (en) * 2004-07-29 2009-11-17 Xerox Corporation Server based image processing for client display of documents
US7721204B2 (en) * 2004-07-29 2010-05-18 Xerox Corporation Client dependent image processing for browser-based image document viewer for handheld client devices
US20060048179A1 (en) * 2004-08-27 2006-03-02 Kortum Philip T Method and system to access PC-based services from non-PC hardware
US7797720B2 (en) * 2004-10-22 2010-09-14 Microsoft Corporation Advanced trick mode
US7784076B2 (en) * 2004-10-30 2010-08-24 Sharp Laboratories Of America, Inc. Sender-side bandwidth estimation for video transmission with receiver packet buffer
US7797723B2 (en) * 2004-10-30 2010-09-14 Sharp Laboratories Of America, Inc. Packet scheduling for video transmission with sender queue control
US8356327B2 (en) * 2004-10-30 2013-01-15 Sharp Laboratories Of America, Inc. Wireless video transmission system
JP2006191186A (ja) * 2004-12-28 2006-07-20 Toshiba Corp コンテンツの再生システム、再生装置、再生方法、及び配信サーバ
US8194640B2 (en) 2004-12-31 2012-06-05 Genband Us Llc Voice over IP (VoIP) network infrastructure components and method
US7804901B2 (en) * 2005-01-06 2010-09-28 Qualcomm Incorporated Residual coding in compliance with a video standard using non-standardized vector quantization coder
KR100652956B1 (ko) * 2005-01-14 2006-12-01 삼성전자주식회사 비디오 수신지연 알림방법 및 이를 적용한 방송수신장치
US7567565B2 (en) 2005-02-01 2009-07-28 Time Warner Cable Inc. Method and apparatus for network bandwidth conservation
US7502516B2 (en) * 2005-02-17 2009-03-10 Microsoft Corporation System and method for providing an extensible codec architecture for digital images
US7676495B2 (en) * 2005-04-14 2010-03-09 Microsoft Corporation Advanced streaming format table of contents object
US8489728B2 (en) 2005-04-15 2013-07-16 Microsoft Corporation Model-based system monitoring
US7802144B2 (en) 2005-04-15 2010-09-21 Microsoft Corporation Model-based system monitoring
US20060235883A1 (en) * 2005-04-18 2006-10-19 Krebs Mark S Multimedia system for mobile client platforms
US7715312B2 (en) * 2005-04-25 2010-05-11 Verizon Services Corp. Methods and systems for maintaining quality of service (QOS) levels for data transmissions
US7634727B2 (en) * 2005-04-26 2009-12-15 Microsoft Corporation System for abstracting audio-video codecs
US8683066B2 (en) 2007-08-06 2014-03-25 DISH Digital L.L.C. Apparatus, system, and method for multi-bitrate content streaming
US8370514B2 (en) 2005-04-28 2013-02-05 DISH Digital L.L.C. System and method of minimizing network bandwidth retrieved from an external network
US20070291734A1 (en) * 2005-05-27 2007-12-20 Medhavi Bhatia Methods and Apparatus for Multistage Routing of Packets Using Call Templates
US7747894B2 (en) * 2005-06-06 2010-06-29 Microsoft Corporation Transport-neutral in-order delivery in a distributed system
US8199808B2 (en) * 2005-06-10 2012-06-12 Nxp B.V. Decoding method and decoder with rounding means
US7983301B2 (en) * 2005-06-24 2011-07-19 O2Micro International, Ltd. Method for extended transmission capabilities of short message service
US8549513B2 (en) 2005-06-29 2013-10-01 Microsoft Corporation Model-based virtual system provisioning
US20070002870A1 (en) * 2005-06-30 2007-01-04 Nokia Corporation Padding time-slice slots using variable delta-T
US20090210946A1 (en) * 2005-07-01 2009-08-20 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Media markup for promotional audio content
US9583141B2 (en) 2005-07-01 2017-02-28 Invention Science Fund I, Llc Implementing audio substitution options in media works
US20070014369A1 (en) * 2005-07-12 2007-01-18 John Santhoff Ultra-wideband communications system and method
US8020102B2 (en) * 2005-08-11 2011-09-13 Enhanced Personal Audiovisual Technology, Llc System and method of adjusting audiovisual content to improve hearing
CN100428331C (zh) * 2005-08-12 2008-10-22 深圳华为通信技术有限公司 移动终端中图像自适应缩放的装置及其方法
US8189472B2 (en) * 2005-09-07 2012-05-29 Mcdonald James F Optimizing bandwidth utilization to a subscriber premises
US20070067480A1 (en) * 2005-09-19 2007-03-22 Sharp Laboratories Of America, Inc. Adaptive media playout by server media processing for robust streaming
KR100734629B1 (ko) * 2005-09-28 2007-07-03 한국전자통신연구원 부분 캐싱 방법 및 이를 이용한 적응형 콘텐츠 전송 방법
US7877387B2 (en) 2005-09-30 2011-01-25 Strands, Inc. Systems and methods for promotional media item selection and promotional program unit generation
US8478884B2 (en) 2005-09-30 2013-07-02 Riip, Inc. Wireless remote device management utilizing mesh topology
US7941309B2 (en) 2005-11-02 2011-05-10 Microsoft Corporation Modeling IT operations/policies
US8181209B2 (en) * 2005-11-21 2012-05-15 Time Warner Cable Inc. Methods and apparatus for providing video on demand and network PVR functions using IP streaming
US9060047B2 (en) * 2005-12-21 2015-06-16 Genband Us Llc Media stream management
US8812978B2 (en) * 2005-12-22 2014-08-19 Xerox Corporation System and method for dynamic zoom to view documents on small displays
US20070156807A1 (en) * 2005-12-29 2007-07-05 Jian Ma Data transmission method and arrangement for data transmission
US9544602B2 (en) * 2005-12-30 2017-01-10 Sharp Laboratories Of America, Inc. Wireless video transmission system
US7916755B2 (en) * 2006-02-27 2011-03-29 Time Warner Cable Inc. Methods and apparatus for selecting digital coding/decoding technology for programming and data delivery
US8718100B2 (en) 2006-02-27 2014-05-06 Time Warner Cable Enterprises Llc Methods and apparatus for selecting digital interface technology for programming and data delivery
US8458753B2 (en) 2006-02-27 2013-06-04 Time Warner Cable Enterprises Llc Methods and apparatus for device capabilities discovery and utilization within a content-based network
US8170065B2 (en) 2006-02-27 2012-05-01 Time Warner Cable Inc. Methods and apparatus for selecting digital access technology for programming and data delivery
MX2008010961A (es) * 2006-03-07 2008-09-08 Nec Corp Sistema dinamico de distribucion de imagenes y dispositivo de conversion.
US11477617B2 (en) * 2006-03-20 2022-10-18 Ericsson Evdo Inc. Unicasting and multicasting multimedia services
US7652994B2 (en) * 2006-03-31 2010-01-26 Sharp Laboratories Of America, Inc. Accelerated media coding for robust low-delay video streaming over time-varying and bandwidth limited channels
US8208796B2 (en) * 2006-04-17 2012-06-26 Prus Bohdan S Systems and methods for prioritizing the storage location of media data
EP2016717A2 (en) * 2006-04-29 2009-01-21 724 Solutions Software Inc. Platform for interoperability
US8327024B2 (en) * 2006-04-29 2012-12-04 724 Solutions Software, Inc. System and method for SMS/IP interoperability
WO2007130312A2 (en) * 2006-04-29 2007-11-15 724 Solutions Software Inc. Channel selection/translation based on user-preference
US7813293B2 (en) * 2006-05-12 2010-10-12 John Papandriopoulos Method for distributed spectrum management of digital communications systems
KR101288986B1 (ko) * 2006-06-12 2013-07-23 삼성디스플레이 주식회사 데이터 보상회로 및 이를 갖는 액정표시장치
JP5080132B2 (ja) * 2006-06-12 2012-11-21 三星電子株式会社 データ補償回路及びこれを有する表示装置
US9277295B2 (en) * 2006-06-16 2016-03-01 Cisco Technology, Inc. Securing media content using interchangeable encryption key
US7978720B2 (en) * 2006-06-30 2011-07-12 Russ Samuel H Digital media device having media content transfer capability
US20080022304A1 (en) * 2006-06-30 2008-01-24 Scientific-Atlanta, Inc. Digital Media Device Having Selectable Media Content Storage Locations
US9137480B2 (en) * 2006-06-30 2015-09-15 Cisco Technology, Inc. Secure escrow and recovery of media device content keys
US8831089B1 (en) * 2006-07-31 2014-09-09 Geo Semiconductor Inc. Method and apparatus for selecting optimal video encoding parameter configurations
US8888592B1 (en) 2009-06-01 2014-11-18 Sony Computer Entertainment America Llc Voice overlay
US8606966B2 (en) * 2006-08-28 2013-12-10 Allot Communications Ltd. Network adaptation of digital content
US20080062322A1 (en) * 2006-08-28 2008-03-13 Ortiva Wireless Digital video content customization
US20080059321A1 (en) * 2006-08-31 2008-03-06 Zucker Brian T Online Sales Method for Information Handling Systems and Related Peripherals
US8861597B2 (en) * 2006-09-18 2014-10-14 Sharp Laboratories Of America, Inc. Distributed channel time allocation for video streaming over wireless networks
JP4325657B2 (ja) * 2006-10-02 2009-09-02 ソニー株式会社 光ディスク再生装置、信号処理方法、およびプログラム
US7743161B2 (en) * 2006-10-10 2010-06-22 Ortiva Wireless, Inc. Digital content buffer for adaptive streaming
US20080106638A1 (en) * 2006-10-10 2008-05-08 Ubiquity Holdings Internet media experience data compression scheme
US20080091804A1 (en) * 2006-10-11 2008-04-17 Cingular Wireless Ii, Llc Media delivery utilizing intelligent group list management
US8929434B2 (en) * 2006-10-14 2015-01-06 Ubiquity Broadcasting Corporation Video enhancement internet media experience in converting high definition formats to video formats
US20080104267A1 (en) * 2006-11-01 2008-05-01 Sony Corporation Systems and methods for reducing display latency between streaming digital media
US7652993B2 (en) * 2006-11-03 2010-01-26 Sharp Laboratories Of America, Inc. Multi-stream pro-active rate adaptation for robust video transmission
KR100765193B1 (ko) * 2006-12-21 2007-10-09 (주)스트림비젼 아이피티비 통합방송송출 장치와 방법 및 그 프로그램을저장한 저장매체
US20080205389A1 (en) * 2007-02-26 2008-08-28 Microsoft Corporation Selection of transrate and transcode processes by host computer
US8139487B2 (en) 2007-02-28 2012-03-20 Microsoft Corporation Strategies for selecting a format for data transmission based on measured bandwidth
GB2438475A (en) 2007-03-07 2007-11-28 Cvon Innovations Ltd A method for ranking search results
US20080235746A1 (en) 2007-03-20 2008-09-25 Michael James Peters Methods and apparatus for content delivery and replacement in a network
JP4563417B2 (ja) * 2007-03-20 2010-10-13 株式会社エヌ・ティ・ティ・ドコモ 移動通信システムにおけるユーザ装置、通信方法及び通信システム
US8064475B2 (en) * 2007-03-21 2011-11-22 At&T Intellectual Property I, L.P. Systems and methods of wireless communication
WO2008118362A2 (en) * 2007-03-23 2008-10-02 Tapioca Mobile, Inc. Delivery of video content
US20080243692A1 (en) * 2007-03-30 2008-10-02 Verizon Services Corp. Content ingest, maintenance, and delivery
GB2441399B (en) 2007-04-03 2009-02-18 Cvon Innovations Ltd Network invitation arrangement and method
US8671000B2 (en) * 2007-04-24 2014-03-11 Apple Inc. Method and arrangement for providing content to multimedia devices
US20080294446A1 (en) * 2007-05-22 2008-11-27 Linfeng Guo Layer based scalable multimedia datastream compression
WO2008143493A2 (en) * 2007-05-24 2008-11-27 Jeya Rajendram Alan Rajendram Media stream system and method thereof
FR2917937B1 (fr) * 2007-06-25 2009-10-16 Alcatel Lucent Sas Procede de communication avec interception de messages de controle
EP2015561A1 (fr) * 2007-07-10 2009-01-14 Nagracard S.A. Procédé d'envoi d'un code exécutable à un dispositif de réception et procédé d'exécution de ce code
US8462377B2 (en) * 2007-07-25 2013-06-11 Aptina Imaging Corporation Method, apparatus, and system for reduction of line processing memory size used in image processing
US7720986B2 (en) 2007-08-24 2010-05-18 At&T Intellectual Property I, L.P. Method and system for media adaption
WO2009032953A2 (en) * 2007-09-04 2009-03-12 Tapioca Mobile, Inc. Delivering merged advertising and content for mobile devices
US9071859B2 (en) 2007-09-26 2015-06-30 Time Warner Cable Enterprises Llc Methods and apparatus for user-based targeted content delivery
US8561116B2 (en) 2007-09-26 2013-10-15 Charles A. Hasek Methods and apparatus for content caching in a video network
US20090089852A1 (en) * 2007-10-01 2009-04-02 At&T Knowledge Ventures, Lp Automated Multimedia Channel Error Reporting from Viewer Premises
US8099757B2 (en) 2007-10-15 2012-01-17 Time Warner Cable Inc. Methods and apparatus for revenue-optimized delivery of content in a network
US7751361B2 (en) * 2007-10-19 2010-07-06 Rebelvox Llc Graceful degradation for voice communication services over wired and wireless networks
US7751362B2 (en) * 2007-10-19 2010-07-06 Rebelvox Llc Graceful degradation for voice communication services over wired and wireless networks
US8515767B2 (en) 2007-11-04 2013-08-20 Qualcomm Incorporated Technique for encoding/decoding of codebook indices for quantized MDCT spectrum in scalable speech and audio codecs
JP5033598B2 (ja) 2007-11-28 2012-09-26 株式会社日立製作所 表示装置および映像機器
US8151311B2 (en) * 2007-11-30 2012-04-03 At&T Intellectual Property I, L.P. System and method of detecting potential video traffic interference
CN101889289B (zh) * 2007-12-05 2014-01-08 欧乐2号公司 用于压缩视频的基于图像块的系统及方法
CN101918956A (zh) * 2007-12-05 2010-12-15 生命力有限公司 用于通过基于所检测的帧内运动或场景复杂度调节图像块大小来压缩视频的系统及方法
CA2707899C (en) * 2007-12-05 2016-09-13 Onlive, Inc. System and method for protecting certain types of multimedia data transmitted over a communication channel
TW200952495A (en) * 2007-12-05 2009-12-16 Onlive Inc Apparatus for combining aplurality of views of real-time streaming interactive video
TW200948083A (en) * 2007-12-05 2009-11-16 Onlive Inc Method of streaming interactive video integrated with recorded video segments
JP2011508995A (ja) * 2007-12-05 2011-03-17 オンライブ インコーポレイテッド 通信チャンネルの検出されたデータレートに基づきビデオを圧縮するためのシステム及び方法
KR101525617B1 (ko) * 2007-12-10 2015-06-04 한국전자통신연구원 다중 경로를 이용한 스트리밍 데이터 송수신 장치 및 그방법
WO2009078832A1 (en) 2007-12-14 2009-06-25 Thomson Licensing Apparatus and method for simulcast over a variable bandwidth channel
US8147339B1 (en) 2007-12-15 2012-04-03 Gaikai Inc. Systems and methods of serving game video
US8968087B1 (en) 2009-06-01 2015-03-03 Sony Computer Entertainment America Llc Video game overlay
US8613673B2 (en) 2008-12-15 2013-12-24 Sony Computer Entertainment America Llc Intelligent game loading
CN101889409A (zh) 2007-12-18 2010-11-17 汤姆逊许可公司 基于广播网络的文件大小估计设备和方法
US20100287232A1 (en) * 2007-12-21 2010-11-11 Koninklijke Philips Electronics N.V. Methods and apparatus for efficient distribution of image data
US8276181B1 (en) * 2007-12-21 2012-09-25 General Instrument Corporation Content distribution system and method for optimizing multiplexed transport channels
US8207932B2 (en) 2007-12-26 2012-06-26 Sharp Laboratories Of America, Inc. Methods and systems for display source light illumination level selection
US9705935B2 (en) * 2008-01-14 2017-07-11 Qualcomm Incorporated Efficient interworking between circuit-switched and packet-switched multimedia services
US20090187957A1 (en) * 2008-01-17 2009-07-23 Gokhan Avkarogullari Delivery of Media Assets Having a Multi-Part Media File Format to Media Presentation Devices
EP2086236A1 (en) * 2008-01-31 2009-08-05 Hewlett-Packard Development Company, L.P. Method and system for accessing applications
US8051445B2 (en) * 2008-01-31 2011-11-01 Microsoft Corporation Advertisement insertion
US8433747B2 (en) * 2008-02-01 2013-04-30 Microsoft Corporation Graphics remoting architecture
EP2104306B1 (en) * 2008-02-14 2010-04-21 Research in Motion Limited Method and apparatus for communicating compression state information for interactive compression
US8572287B2 (en) * 2008-02-14 2013-10-29 Blackberry Limited Method and apparatus for communicating compression state information for interactive compression
US8813143B2 (en) 2008-02-26 2014-08-19 Time Warner Enterprises LLC Methods and apparatus for business-based network resource allocation
EP2104322A1 (en) * 2008-03-18 2009-09-23 BlueTown ApS Communication system for voice-over internet protocol using license-free frequencies
JPWO2009122611A1 (ja) * 2008-04-01 2011-07-28 シャープ株式会社 Avラックシステム
US8145779B2 (en) * 2008-04-08 2012-03-27 Microsoft Corporation Dynamic server-side media transcoding
JP2009260818A (ja) * 2008-04-18 2009-11-05 Nec Corp サーバ装置とコンテンツ配信方法とプログラム
US9819489B2 (en) * 2008-05-14 2017-11-14 Sandisk Il, Ltd. Device for controlling access to user-selectable content
US8209733B2 (en) * 2008-05-28 2012-06-26 Broadcom Corporation Edge device that enables efficient delivery of video to handheld device
US8255962B2 (en) * 2008-05-28 2012-08-28 Broadcom Corporation Edge device reception verification/non-reception verification links to differing devices
US20090300687A1 (en) * 2008-05-28 2009-12-03 Broadcom Corporation Edge device establishing and adjusting wireless link parameters in accordance with qos-desired video data rate
WO2009147596A1 (en) * 2008-06-04 2009-12-10 Koninklijke Philips Electronics N.V. Adaptive data rate control
FR2932938B1 (fr) * 2008-06-19 2012-11-16 Canon Kk Procede et dispositif de transmission de donnees
US20100017516A1 (en) * 2008-07-16 2010-01-21 General Instrument Corporation Demand-driven optimization and balancing of transcoding resources
US7692561B2 (en) * 2008-07-17 2010-04-06 International Business Machines Corporation Method and apparatus for data decompression in the presence of memory hierarchies
US7996422B2 (en) 2008-07-22 2011-08-09 At&T Intellectual Property L.L.P. System and method for adaptive media playback based on destination
US8990848B2 (en) 2008-07-22 2015-03-24 At&T Intellectual Property I, L.P. System and method for temporally adaptive media playback
KR101034919B1 (ko) 2008-09-05 2011-05-17 주식회사 넥슨코리아 유저 디자인 데이터의 문자열 보존 방법 및 장치
US8301792B2 (en) * 2008-10-28 2012-10-30 Panzura, Inc Network-attached media plug-in
US8626064B2 (en) * 2008-11-19 2014-01-07 Ben Moore Communication device
US20100149301A1 (en) * 2008-12-15 2010-06-17 Microsoft Corporation Video Conferencing Subscription Using Multiple Bit Rate Streams
US8926435B2 (en) 2008-12-15 2015-01-06 Sony Computer Entertainment America Llc Dual-mode program execution
US9414401B2 (en) * 2008-12-15 2016-08-09 At&T Intellectual Property I, L.P. Opportunistic service management for elastic applications
US8832733B2 (en) * 2008-12-17 2014-09-09 Verizon Patent And Licensing Inc. Method and system for providing localized advertisement information using a set top box
EP2207312B1 (en) * 2009-01-07 2012-04-18 ABB Research Ltd. IED for, and method of engineering, an SA system
ES2930054T3 (es) 2009-01-28 2022-12-05 Dolby Int Ab Transposición armónica mejorada
EP3751570B1 (en) 2009-01-28 2021-12-22 Dolby International AB Improved harmonic transposition
US9172572B2 (en) 2009-01-30 2015-10-27 Samsung Electronics Co., Ltd. Digital video broadcasting-cable system and method for processing reserved tone
US10104436B1 (en) * 2009-02-23 2018-10-16 Beachfront Media Llc Automated video-preroll method and device
US8621044B2 (en) * 2009-03-16 2013-12-31 Microsoft Corporation Smooth, stateless client media streaming
US8838824B2 (en) * 2009-03-16 2014-09-16 Onmobile Global Limited Method and apparatus for delivery of adapted media
US9723319B1 (en) 2009-06-01 2017-08-01 Sony Interactive Entertainment America Llc Differentiation for achieving buffered decoding and bufferless decoding
US9866609B2 (en) 2009-06-08 2018-01-09 Time Warner Cable Enterprises Llc Methods and apparatus for premises content distribution
CN101594242A (zh) * 2009-06-23 2009-12-02 腾讯科技(深圳)有限公司 一种传输视频数据的方法、系统和装置
US9042444B2 (en) * 2010-07-15 2015-05-26 Dejero Labs Inc. System and method for transmission of data signals over a wireless network
US10165286B2 (en) 2009-07-08 2018-12-25 Dejero Labs Inc. System and method for automatic encoder adjustment based on transport data
US10117055B2 (en) 2009-07-08 2018-10-30 Dejero Labs Inc. System and method for providing data services on vehicles
US8942215B2 (en) 2010-07-15 2015-01-27 Dejero Labs Inc. System and method for transmission of data from a wireless mobile device over a multipath wireless router
US9756468B2 (en) 2009-07-08 2017-09-05 Dejero Labs Inc. System and method for providing data services on vehicles
US9389877B2 (en) 2009-07-20 2016-07-12 Google Technology Holdings LLC Multi-environment operating system
US9367331B2 (en) 2009-07-20 2016-06-14 Google Technology Holdings LLC Multi-environment operating system
US9372711B2 (en) 2009-07-20 2016-06-21 Google Technology Holdings LLC System and method for initiating a multi-environment operating system
US8473998B1 (en) * 2009-07-29 2013-06-25 Massachusetts Institute Of Technology Network coding for multi-resolution multicast
TWI411239B (zh) * 2009-08-17 2013-10-01 Acer Inc Image file transfer system and method thereof
JP4957831B2 (ja) * 2009-08-18 2012-06-20 ソニー株式会社 再生装置および再生方法、並びに記録装置および記録方法
US8214105B2 (en) 2009-08-21 2012-07-03 Metra Electronics Corporation Methods and systems for automatic detection of steering wheel control signals
US8285446B2 (en) * 2009-08-21 2012-10-09 Circuit Works, Inc. Methods and systems for providing accessory steering wheel controls
CN103559891B (zh) 2009-09-18 2016-05-11 杜比国际公司 改进的谐波转置
JP2011087103A (ja) * 2009-10-15 2011-04-28 Sony Corp コンテンツ再生システム、コンテンツ再生装置、プログラム、コンテンツ再生方法、およびコンテンツサーバを提供
CN102045298B (zh) * 2009-10-17 2013-12-04 中兴通讯股份有限公司 一种ims媒体编解码器协商的方法和系统
US7921150B1 (en) 2009-10-23 2011-04-05 Eastman Kodak Company Method for viewing videos on distributed networks
CN102055966B (zh) 2009-11-04 2013-03-20 腾讯科技(深圳)有限公司 一种媒体文件的压缩方法和系统
US10003851B2 (en) * 2009-11-24 2018-06-19 Imagine Communications Corp. Managed multiplexing of video in an adaptive bit rate environment
US20110156886A1 (en) * 2009-12-31 2011-06-30 Clinkscales William L Paging interface adapter
US9510029B2 (en) 2010-02-11 2016-11-29 Echostar Advanced Technologies L.L.C. Systems and methods to provide trick play during streaming playback
JP2011175569A (ja) * 2010-02-25 2011-09-08 Sharp Corp 文書画像生成装置、文書画像生成方法及びコンピュータプログラム
WO2011112909A2 (en) 2010-03-12 2011-09-15 Sunrise Micro Devices, Inc. Power efficient communications
US8125357B1 (en) * 2010-03-23 2012-02-28 Sandia Corporation Deflate decompressor
US9613142B2 (en) * 2010-04-26 2017-04-04 Flash Networks Ltd Method and system for providing the download of transcoded files
US9276986B2 (en) * 2010-04-27 2016-03-01 Nokia Technologies Oy Systems, methods, and apparatuses for facilitating remote data processing
US9367847B2 (en) 2010-05-28 2016-06-14 Apple Inc. Presenting content packages based on audience retargeting
US8947492B2 (en) 2010-06-18 2015-02-03 Microsoft Corporation Combining multiple bit rate and scalable video coding
US8676591B1 (en) 2010-08-02 2014-03-18 Sony Computer Entertainment America Llc Audio deceleration
KR20120002918A (ko) * 2010-07-01 2012-01-09 삼성전자주식회사 스테이션간에 사용할 동영상 코덱을 선택하는 방법 및 그 장치
DE102010026841A1 (de) * 2010-07-12 2012-01-12 Vodafone Holding Gmbh Verfahren und Rechnereinrichtung zum Optimieren einer Datenübtertragungseinrichtung
KR101681589B1 (ko) * 2010-07-27 2016-12-01 엘지전자 주식회사 영상 처리 장치 및 그 방법
US8533166B1 (en) * 2010-08-20 2013-09-10 Brevity Ventures LLC Methods and systems for encoding/decoding files and transmission thereof
WO2012037170A1 (en) 2010-09-13 2012-03-22 Gaikai, Inc. Dual mode program execution and loading
KR102000618B1 (ko) 2010-09-13 2019-10-21 소니 인터랙티브 엔터테인먼트 아메리카 엘엘씨 부가기능의 관리
US8751795B2 (en) 2010-09-14 2014-06-10 Mo-Dv, Inc. Secure transfer and tracking of data using removable non-volatile memory devices
US10873191B2 (en) 2010-11-19 2020-12-22 Tseng-Lu Chien Desk top alarm or time or LED lighting device has USB-port(s)
US10873190B2 (en) 2010-11-19 2020-12-22 Tseng-Lu Chien Desktop or floor LED lighting device has USB-port(s)
US8385414B2 (en) * 2010-11-30 2013-02-26 International Business Machines Corporation Multimedia size reduction for database optimization
US20120151080A1 (en) * 2010-12-14 2012-06-14 of California Media Repackaging Systems and Software for Adaptive Streaming Solutions, Methods of Production and Uses Thereof
US9354900B2 (en) 2011-04-28 2016-05-31 Google Technology Holdings LLC Method and apparatus for presenting a window in a system having two operating system environments
RU2451328C1 (ru) * 2011-05-31 2012-05-20 Государственное образовательное учреждение высшего профессионального образования "Казанский государственный энергетический университет" (КГЭУ) Адаптивное цифровое прогнозирующее устройство
US8982942B2 (en) 2011-06-17 2015-03-17 Microsoft Technology Licensing, Llc Adaptive codec selection
AU2012297524B2 (en) 2011-08-16 2017-07-20 Destiny Software Productions Inc. Script-based video rendering
US9088804B2 (en) * 2011-08-25 2015-07-21 Ustream, Inc. On-demand selection of transcoding formats for multimedia broadcast streams
CN102932841B (zh) * 2011-09-06 2016-01-13 斯凯普公司 信号处理
WO2013036972A1 (en) 2011-09-09 2013-03-14 Panamorph, Inc. Image processing system and method
WO2013067436A1 (en) 2011-11-04 2013-05-10 Huawei Technologies Co., Ltd. Binarization of prediction residuals for lossless video coding
DK2776955T3 (en) 2011-11-09 2018-03-26 Movable Ink Dynamic email content management
US9277230B2 (en) 2011-11-23 2016-03-01 Qualcomm Incorporated Display mode-based video encoding in wireless display devices
RU2480831C1 (ru) * 2011-11-24 2013-04-27 Общество с ограниченной ответственностью "КБК Групп" Способ выборки изображений из базы изображений
US8990474B2 (en) * 2011-12-02 2015-03-24 Altera Corporation Logic device having a compressed configuration image stored on an internal read only memory
US9008177B2 (en) 2011-12-12 2015-04-14 Qualcomm Incorporated Selective mirroring of media output
US20150163271A1 (en) * 2011-12-22 2015-06-11 Telefonaktiebolaget L M Ericsson (Publ) Apparatus and method for monitoring performance in a communications network
EP2611153A1 (en) * 2011-12-29 2013-07-03 Thomson Licensing System and method for multiplexed streaming of multimedia content
EP2629543A1 (en) * 2012-02-20 2013-08-21 Thomson Licensing Method and controller for device power state control
US8904451B2 (en) * 2012-04-13 2014-12-02 Theplatform, Llc Systems for prioritizing video processing events based on availability of media file and agent to process the event type
MY168007A (en) * 2012-04-13 2018-10-11 Sony Corp Wireless communication device, communication system, and communication method
US10148374B2 (en) * 2012-04-23 2018-12-04 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methods for altering an in-vehicle presentation
CN102638726B (zh) * 2012-04-24 2016-06-15 惠州Tcl移动通信有限公司 一种基于太赫兹无线通信的多媒体流传输方法及系统
US20130293573A1 (en) 2012-05-02 2013-11-07 Motorola Mobility, Inc. Method and Apparatus for Displaying Active Operating System Environment Data with a Plurality of Concurrent Operating System Environments
US9342325B2 (en) 2012-05-17 2016-05-17 Google Technology Holdings LLC Synchronizing launch-configuration information between first and second application environments that are operable on a multi-modal device
US9426476B2 (en) * 2012-07-09 2016-08-23 Hewlett-Packard Development Company, L.P. Video stream
US9854280B2 (en) 2012-07-10 2017-12-26 Time Warner Cable Enterprises Llc Apparatus and methods for selective enforcement of secondary content viewing
WO2014033286A1 (en) * 2012-08-31 2014-03-06 Axel Springer Digital Tv Guide Gmbh Electronic media server
US8976226B2 (en) 2012-10-15 2015-03-10 Google Inc. Generating an animated preview of a multi-party video communication session
RU2510957C1 (ru) * 2012-10-25 2014-04-10 Государственное казенное образовательное учреждение высшего профессионального образования Академия Федеральной службы охраны Российской Федерации (Академия ФСО России) Способ восстановления искаженных сжатых файлов
US9794134B2 (en) * 2012-11-16 2017-10-17 Apple Inc. System and method for negotiating control of a shared audio or visual resource
US9131283B2 (en) 2012-12-14 2015-09-08 Time Warner Cable Enterprises Llc Apparatus and methods for multimedia coordination
CN104981854A (zh) 2013-02-11 2015-10-14 格瑞克明尼苏达有限公司 针对流体涂覆机系统的远程监控
US10969805B2 (en) 2013-02-11 2021-04-06 Graco Minnesota Inc. Paint sprayer distributed control and output volume monitoring architectures
US9933990B1 (en) 2013-03-15 2018-04-03 Sonitum Inc. Topological mapping of control parameters
US9681116B2 (en) * 2013-03-15 2017-06-13 Arris Enterprises, Inc. System and method for delivering 3DTV content to variety of receivers
US10506067B2 (en) * 2013-03-15 2019-12-10 Sonitum Inc. Dynamic personalization of a communication session in heterogeneous environments
US8869218B2 (en) 2013-03-15 2014-10-21 Wowza Media Systems, LLC On the fly transcoding of video on demand content for adaptive streaming
GB2512310A (en) * 2013-03-25 2014-10-01 Sony Corp Media Distribution
US9672041B2 (en) * 2013-08-01 2017-06-06 Andes Technology Corporation Method for compressing variable-length instructions including PC-relative instructions and processor for executing compressed instructions using an instruction table
US9167311B2 (en) * 2013-09-25 2015-10-20 Verizon Patent And Licensing Inc. Variant playlist optimization
US10178398B2 (en) * 2013-10-11 2019-01-08 Telefonaktiebolaget Lm Ericsson (Publ) Method and arrangement for video transcoding using mode or motion or in-loop filter information
CN104661045B (zh) * 2013-11-21 2017-09-01 青岛海尔电子有限公司 多媒体内容自适应方法和多媒体播放系统
EP3114587A4 (en) * 2014-03-07 2017-08-16 Remote Media, LLC Virtual file system and method with bi-directional media file synchronization
US9397947B2 (en) * 2014-03-11 2016-07-19 International Business Machines Corporation Quality of experience for communication sessions
US20150271226A1 (en) * 2014-03-18 2015-09-24 Qualcomm Incorporated Transport accelerator implementing a multiple interface architecture
CN104754280B (zh) * 2014-04-07 2019-03-01 惠州Tcl移动通信有限公司 选择性地采用高画质多媒体的交流系统
US9838455B2 (en) * 2014-09-19 2017-12-05 Mobitv, Inc. Fast encoding of live streaming media content
US9456075B2 (en) * 2014-10-13 2016-09-27 Avaya Inc. Codec sequence detection
JP6590925B2 (ja) * 2014-11-05 2019-10-16 コリン,ジャン−クロード 動画像を作成するための方法
RU2595598C2 (ru) * 2014-11-27 2016-08-27 Самсунг Электроникс Ко., Лтд. Способ и устройство сжатия с использованием подхода на основе нейронной сети
US9292584B1 (en) * 2014-12-27 2016-03-22 Ascava, Inc. Efficient data communication based on lossless reduction of data by deriving data from prime data elements resident in a content-associative sieve
US10542961B2 (en) 2015-06-15 2020-01-28 The Research Foundation For The State University Of New York System and method for infrasonic cardiac monitoring
KR102423827B1 (ko) * 2015-08-10 2022-07-21 삼성전자주식회사 송신 장치 및 이의 제어 방법
US9766816B2 (en) 2015-09-25 2017-09-19 Seagate Technology Llc Compression sampling in tiered storage
CN105681682B (zh) * 2016-01-19 2019-06-14 广东威创视讯科技股份有限公司 视频数据传输方法和系统
US10402700B2 (en) 2016-01-25 2019-09-03 Deepmind Technologies Limited Generating images using neural networks
US10390082B2 (en) * 2016-04-01 2019-08-20 Oath Inc. Computerized system and method for automatically detecting and rendering highlights from streaming videos
US10687115B2 (en) 2016-06-01 2020-06-16 Time Warner Cable Enterprises Llc Cloud-based digital content recorder apparatus and methods
US10245512B2 (en) * 2016-06-13 2019-04-02 Amazon Technologies, Inc. Sectional terrain editing
RU2632818C1 (ru) * 2016-09-20 2017-10-10 Общество с ограниченной ответственностью "КАСКАД" Широкополосная система радиосвязи с частотным дуплексом
US20180107926A1 (en) * 2016-10-19 2018-04-19 Samsung Electronics Co., Ltd. Method and apparatus for neural network quantization
US10911794B2 (en) 2016-11-09 2021-02-02 Charter Communications Operating, Llc Apparatus and methods for selective secondary content insertion in a digital network
GB2556923B (en) * 2016-11-25 2020-04-15 Canon Kk Generation of VCA Reference results for VCA Auto-setting
US10714118B2 (en) * 2016-12-30 2020-07-14 Facebook, Inc. Audio compression using an artificial neural network
US10515115B2 (en) * 2017-03-03 2019-12-24 Proactive Cctv System and method for closed-circuit television file archival and compression
US10715177B2 (en) 2017-06-20 2020-07-14 Samsung Electronics Co., Ltd. Lossy compression drive
KR102050780B1 (ko) * 2018-01-10 2019-12-02 한국과학기술원 신경망을 이용한 컨텐츠 인지 기반 컨텐츠 전송 서버 장치 및 방법
KR102037951B1 (ko) * 2018-01-31 2019-10-29 주식회사 에벤에셀케이 파일 형식에 기반한 이미지 처리 장치 및 방법
US10939142B2 (en) 2018-02-27 2021-03-02 Charter Communications Operating, Llc Apparatus and methods for content storage, distribution and security within a content distribution network
US10783929B2 (en) 2018-03-30 2020-09-22 Apple Inc. Managing playback groups
US10993274B2 (en) 2018-03-30 2021-04-27 Apple Inc. Pairing devices by proxy
US11297369B2 (en) 2018-03-30 2022-04-05 Apple Inc. Remotely controlling playback devices
KR102179436B1 (ko) * 2018-04-24 2020-11-16 주식회사 지디에프랩 변화 매크로블록 추출 기법을 이용한 동영상 화질 개선 시스템
WO2019209007A1 (ko) * 2018-04-24 2019-10-31 주식회사 지디에프랩 Ai 기반의 영상 압축 및 복원 시스템
CN108764454B (zh) * 2018-04-28 2022-02-25 中国科学院计算技术研究所 基于小波变换压缩和/或解压缩的神经网络处理方法
CN108665062B (zh) * 2018-04-28 2020-03-10 中国科学院计算技术研究所 一种基于小波变换减少io开销的神经网络处理系统
US11368758B2 (en) 2018-05-21 2022-06-21 Gdflab Co., Ltd. VOD service system based on AI video learning platform
EP3576019A1 (en) 2018-05-29 2019-12-04 Nokia Technologies Oy Artificial neural networks
US10812562B1 (en) 2018-06-21 2020-10-20 Architecture Technology Corporation Bandwidth dependent media stream compression
US10862938B1 (en) 2018-06-21 2020-12-08 Architecture Technology Corporation Bandwidth-dependent media stream compression
US11019123B2 (en) * 2018-06-22 2021-05-25 International Business Machines Corporation Multi-bitrate component sharding
US10614857B2 (en) 2018-07-02 2020-04-07 Apple Inc. Calibrating media playback channels for synchronized presentation
RU2698414C1 (ru) * 2018-09-21 2019-08-26 Владимир Александрович Свириденко Способ и устройство сжатия видеоинформации для передачи по каналам связи с меняющейся пропускной способностью и запоминания в системах хранения данных с использованием машинного обучения и нейросетей
US10923135B2 (en) * 2018-10-14 2021-02-16 Tyson York Winarski Matched filter to selectively choose the optimal audio compression for a metadata file
WO2020080665A1 (en) 2018-10-19 2020-04-23 Samsung Electronics Co., Ltd. Methods and apparatuses for performing artificial intelligence encoding and artificial intelligence decoding on image
WO2020080873A1 (en) * 2018-10-19 2020-04-23 Samsung Electronics Co., Ltd. Method and apparatus for streaming data
WO2020080765A1 (en) 2018-10-19 2020-04-23 Samsung Electronics Co., Ltd. Apparatuses and methods for performing artificial intelligence encoding and artificial intelligence decoding on image
US11178223B2 (en) * 2018-11-07 2021-11-16 Phacil, Llc System and method for non-network dependent cybersecurity
US10735141B2 (en) * 2018-12-21 2020-08-04 Huawei Technologies Co., Ltd. System and a method for error correction coding using a deep neural network
GB2611668B (en) * 2019-02-28 2023-09-13 Displaylink Uk Ltd Image data encoding
GB2581822B (en) * 2019-02-28 2023-03-15 Displaylink Uk Ltd Image data encoding
US11729406B2 (en) * 2019-03-21 2023-08-15 Qualcomm Incorporated Video compression using deep generative models
US11527266B2 (en) * 2019-04-04 2022-12-13 Wowza Media Systems, LLC Artificial intelligence analysis of multimedia content
US10373300B1 (en) * 2019-04-29 2019-08-06 Deep Render Ltd. System and method for lossy image and video compression and transmission utilizing neural networks
US10489936B1 (en) * 2019-04-29 2019-11-26 Deep Render Ltd. System and method for lossy image and video compression utilizing a metanetwork
CN112020043A (zh) * 2019-05-28 2020-12-01 瑞昱半导体股份有限公司 蓝牙装置与其操作方法及非瞬时计算机可读记录介质
GB2585880B (en) * 2019-07-19 2023-09-20 Displaylink Uk Ltd Processing Display Data
CN110648311B (zh) * 2019-09-03 2023-04-18 南开大学 一种基于多任务学习的痤疮图像病灶分割与计数网络模型
CN112530444B (zh) * 2019-09-18 2023-10-03 华为技术有限公司 音频编码方法和装置
CN111128193B (zh) * 2019-12-27 2023-06-02 科大讯飞股份有限公司 语音交互方法、网络分析端及客户端
US11648467B2 (en) * 2020-02-14 2023-05-16 Microsoft Technology Licensing, Llc Streaming channel personalization
US11533658B2 (en) * 2020-02-24 2022-12-20 Qualcomm Incorporated Compressed measurement feedback using an encoder neural network
US20230179327A1 (en) * 2020-07-01 2023-06-08 Lg Electronics Inc. Method and apparatus for transmitting and receiving signals of user equipment and base station in wireless communication system
US11900640B2 (en) * 2020-07-15 2024-02-13 Tencent America LLC Method and apparatus for substitutional neural residual compression
BR102020015189A2 (pt) * 2020-07-26 2022-02-08 Leonardo Severo Alves De Melo Sistema computacional especializado para compressão analítica e individual de dados
US20220067509A1 (en) * 2020-09-02 2022-03-03 Alibaba Group Holding Limited System and method for learning from partial compressed representation
US11949927B2 (en) * 2020-10-30 2024-04-02 Stryker Corporation Methods and systems for hybrid and concurrent video distribution for healthcare campuses
US20220191482A1 (en) * 2020-12-16 2022-06-16 Tencent America LLC Method and apparatus for video coding
CN113473218B (zh) * 2021-07-08 2022-05-24 北京安盟信息技术股份有限公司 一种平台级联视频平衡方法及系统
CN114285776B (zh) * 2022-01-14 2023-07-14 广州广哈通信股份有限公司 一种网络线路状态监测方法、装置及视频会议终端
US11665215B1 (en) * 2022-05-05 2023-05-30 At&T Intellectual Property I, L.P. Content delivery system
US20230370664A1 (en) * 2022-05-12 2023-11-16 Wipro Limited Method and system for optimizing video content acquisition and delivery during events

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6002720A (en) * 1991-01-07 1999-12-14 H. Lee Browne, D/B/A Greenwich Information Technologies Llc Audio and video transmission and receiving system
US6870884B1 (en) * 1992-01-29 2005-03-22 Mitsubishi Denki Kabushiki Kaisha High-efficiency encoder and video information recording/reproducing apparatus
JPH0614313A (ja) * 1992-06-29 1994-01-21 Canon Inc 画像処理装置
US5596659A (en) * 1992-09-01 1997-01-21 Apple Computer, Inc. Preprocessing and postprocessing for vector quantization
EP1341126A3 (en) * 1992-09-01 2004-02-04 Apple Computer, Inc. Image compression using a shared codebook
US5539908A (en) * 1992-11-24 1996-07-23 International Business Machines Corporation Dynamically linked and shared compression/decompression
US5481297A (en) * 1994-02-25 1996-01-02 At&T Corp. Multipoint digital video communication system
US5684714A (en) * 1995-05-08 1997-11-04 Kabushiki Kaisha Toshiba Method and system for a user to manually alter the quality of a previously encoded video sequence
KR100211916B1 (ko) * 1995-10-26 1999-08-02 김영환 물체 모양정보 부호화에서의 부호화타입과 모드의 결정방법
US6754181B1 (en) 1996-11-18 2004-06-22 Mci Communications Corporation System and method for a directory service supporting a hybrid communication system architecture
US6421726B1 (en) 1997-03-14 2002-07-16 Akamai Technologies, Inc. System and method for selection and retrieval of diverse types of video data on a computer network
FR2760872B1 (fr) * 1997-03-17 2000-06-09 Alsthom Cge Alcatel Procede d'optimisation de la compression de donnees d'image, a selection automatique de conditions de compression
US6195692B1 (en) * 1997-06-02 2001-02-27 Sony Corporation Television/internet system having multiple data stream connections
US6266419B1 (en) 1997-07-03 2001-07-24 At&T Corp. Custom character-coding compression for encoding and watermarking media content
US6356545B1 (en) * 1997-08-08 2002-03-12 Clarent Corporation Internet telephone system with dynamically varying codec
WO1999018728A1 (en) 1997-10-02 1999-04-15 General Datacomm, Inc. Interconnecting multimedia data streams having different compressed formats
US6085236A (en) * 1998-01-06 2000-07-04 Sony Corporation Of Japan Home audio video network with device control modules for incorporating legacy devices
US6252544B1 (en) * 1998-01-27 2001-06-26 Steven M. Hoffberg Mobile communication device
US6157965A (en) * 1998-02-27 2000-12-05 Intel Corporation System and method for binding a virtual device driver to a network driver interface
US6115755A (en) * 1998-04-09 2000-09-05 Novaweb Technologies, Inc. Integrated apparatus for interfacing several computers to the internet through a single connection
US6624761B2 (en) 1998-12-11 2003-09-23 Realtime Data, Llc Content independent data compression method and system
US6243676B1 (en) * 1998-12-23 2001-06-05 Openwave Systems Inc. Searching and retrieving multimedia information
US6349151B1 (en) * 1998-12-29 2002-02-19 Eastman Kodak Company Method and apparatus for visually optimized compression parameters
US6212302B1 (en) * 1998-12-29 2001-04-03 Eastman Kodak Company Method and apparatus for visually optimized rate control
US6356668B1 (en) * 1998-12-29 2002-03-12 Eastman Kodak Company Method for efficient rate control
US6356589B1 (en) * 1999-01-28 2002-03-12 International Business Machines Corporation Sharing reference data between multiple encoders parallel encoding a sequence of video frames
US6091177A (en) * 1999-03-22 2000-07-18 Siemens Westinghouse Power Corporation Spring mounting for an electric generator
US6492326B1 (en) * 1999-04-19 2002-12-10 The Procter & Gamble Company Skin care compositions containing combination of skin care actives
US6587638B1 (en) * 1999-08-02 2003-07-01 Hitachi, Ltd. Recording/ reproducing apparatus and input/ output device
AU6639800A (en) * 1999-08-13 2001-03-13 Vingage Corporation System and method for delivering video images
CN1402852A (zh) * 1999-10-22 2003-03-12 动感天空公司 面向目标的视频系统
US6804401B2 (en) * 2000-05-12 2004-10-12 Xerox Corporation Method for compressing digital documents with control of image quality subject to multiple compression rate constraints
US20020067907A1 (en) * 2000-06-06 2002-06-06 Eric Ameres Universal video client/universal video server system
US7219364B2 (en) * 2000-11-22 2007-05-15 International Business Machines Corporation System and method for selectable semantic codec pairs for very low data-rate video transmission
US6947598B2 (en) 2001-04-20 2005-09-20 Front Porch Digital Inc. Methods and apparatus for generating, including and using information relating to archived audio/video data
US6968006B1 (en) * 2001-06-05 2005-11-22 At&T Corp. Method of content adaptive video decoding
US7130472B2 (en) * 2002-01-21 2006-10-31 Canon Kabushiki Kaisha Image distribution apparatus, communication terminal apparatus, and control method thereof
US20050265936A1 (en) * 2004-05-25 2005-12-01 Knopf Michael A Cleansing foaming sunscreen lotion
US20060128579A1 (en) * 2004-05-25 2006-06-15 Knopf Michael A Cleansing foaming lotion
US20060008434A1 (en) * 2004-05-25 2006-01-12 Knopf Michael A Deodorant body wash with lotion

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11662953B2 (en) 2020-10-26 2023-05-30 Hitachi, Ltd. Data compression/decompression system, and data compression/decompression method

Also Published As

Publication number Publication date
IL160981A0 (en) 2004-08-31
CA2461830C (en) 2009-09-22
US8036265B1 (en) 2011-10-11
JP4852563B2 (ja) 2012-01-11
NO20041725L (no) 2004-06-11
US7295608B2 (en) 2007-11-13
RU2004112547A (ru) 2005-09-20
TWI293533B (en) 2008-02-11
BR0213596A (pt) 2004-10-26
CA2669171C (en) 2012-05-01
EP1438673A4 (en) 2007-12-19
IL160981A (en) 2009-12-24
CA2461830A1 (en) 2003-04-03
RU2282888C2 (ru) 2006-08-27
EP1438673A1 (en) 2004-07-21
AU2002334720B8 (en) 2006-08-10
KR20040063899A (ko) 2004-07-14
JP2005508590A (ja) 2005-03-31
JP2008236758A (ja) 2008-10-02
EP1438673B1 (en) 2012-11-21
CA2669171A1 (en) 2003-04-03
CN1568466A (zh) 2005-01-19
AU2002334720B2 (en) 2006-07-06
US20040045030A1 (en) 2004-03-04
WO2003027876A1 (en) 2003-04-03
KR100640122B1 (ko) 2006-10-31
MXPA04002722A (es) 2005-11-04

Similar Documents

Publication Publication Date Title
JP4852228B2 (ja) メディア信号を通信するためのシステム及び方法
AU2002334720A1 (en) System and method for communicating media signals
US6363413B2 (en) Method and apparatus for increasing the effective bandwidth of video sequences transmitted over a network by using cached data
JP6630798B2 (ja) 触覚データを符号化及びストリーミングする方法及びシステム
US7028096B1 (en) Method and apparatus for caching for streaming data
US6496868B2 (en) Transcoding audio data by a proxy computer on behalf of a client computer
US6337881B1 (en) Multimedia compression system with adaptive block sizes
US6392705B1 (en) Multimedia compression system with additive temporal layers
KR101484900B1 (ko) 코덱이 적용된 프레임 크기로의 오디오 분할
JP6339012B2 (ja) 層状の信号品質階層の再構成データの送信
US7617097B2 (en) Scalable lossless audio coding/decoding apparatus and method
JP2003533067A (ja) 基準レイヤ符号化情報の使用による改良された精細スケーラブル・ビデオに関するシステム及び方法
MXPA02011734A (es) Flexibilidad de error de video.
US20060140591A1 (en) Systems and methods for load balancing audio/video streams
US7228535B2 (en) Methods and apparatus for multimedia stream scheduling in resource-constrained environment
Weinstein The multimedia internet
Ahmad Mobile Video Transcoding Approaches and Challenges
Apostolopoulos et al. Broadband in the last mile: Current and future applications�
MPLS et al. A Background for Networked Digital Media
WO2006075002A1 (fr) Procede et dispositif de quantification progressive

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070213

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20070514

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20070521

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20070612

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20070619

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070813

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20070813

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071011

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20071011

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20071204

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080303

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20080417

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20081003

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20090619

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110629

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20111024

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141028

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees