JP7292901B2 - 送信装置、送信方法、及びプログラム - Google Patents
送信装置、送信方法、及びプログラム Download PDFInfo
- Publication number
- JP7292901B2 JP7292901B2 JP2019034736A JP2019034736A JP7292901B2 JP 7292901 B2 JP7292901 B2 JP 7292901B2 JP 2019034736 A JP2019034736 A JP 2019034736A JP 2019034736 A JP2019034736 A JP 2019034736A JP 7292901 B2 JP7292901 B2 JP 7292901B2
- Authority
- JP
- Japan
- Prior art keywords
- segment
- data
- receiving device
- transmitting
- predetermined
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/239—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
- H04N21/2393—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
- H04N21/26258—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
- H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL
Description
図1に、本実施形態におけるコンテンツ配信システムの構成例を示す。本システムでは、映像コンテンツや音声コンテンツ等のメディアコンテンツが配信されるシステムであり、メディアコンテンツを配信する送信装置100と、そのメディアコンテンツを受信する受信装置200とを含んで構成される。送信装置100は、一例において、通信路300を介して、受信装置200と通信可能に構成される。なお、図1の例では、1つの送信装置100と1つの受信装置200とが示されているが、これらの装置の少なくともいずれかが複数存在してもよい。
図2に、本実施形態に係る送信装置100のハードウェア構成を示す。送信装置100は、そのハードウェア構成として、例えば、記憶部121、制御部122、機能部123、入力部124、出力部125、及び通信部126を有する。なお、図2の構成は一例であり、送信装置100は、図2に示す構成の一部のみを有してもよいし、図2に示される以外の構成を有してもよい。
本実施形態において送信装置100が実行する処理について説明する前に、図4を用いて、ライブ映像配信において遅延が発生する仕組みについて概説する。図4において、送信装置100は、符号化データを30秒毎にまとめてヘッダを生成し、セグメントを生成している。ここで、MPEG(Moving Picture Expert Group)で標準化された動画圧縮技術では、符号化されたフレームデータを1枚以上まとめた集まりがGOP(Group Of Pictures)と呼ばれる。本実施形態では、先頭にのみI-Frameが存在し、残りは前方参照フレームであるP-Frameによって構成されるGOPを例として説明する。
続いて、上述のような遅延時間を削減する方法の例について、説明する。
図5に、遅延時間を削減するセグメント生成の概要を示す。図5では、送信装置100は、時間長30秒のGOPを6分割し、時間長5秒のセグメントを生成する。この場合、5秒分のフレームが生成され次第、順次セグメントが生成される。なお、上述のように、GOPは、先頭がI-Frameで、以降のフレームは全てP-Frameである。このため、30秒の1つのGOPに対応する6個のセグメントのうち、先頭の1つはI-Frameを含み、それ以外のセグメントはI-Frameを含まずにP-Frameのみを含んで構成される。
図6に、遅延時間を削減するセグメント生成の別の概要を示す。図6では、送信装置100は、先頭がI-Frameで残りがP-Frameで構成される符号化シーケンスを持つGOPの生成を繰り返し、1つのGOPを分割したセグメントを生成する。ここで、送信装置100は、時刻Tnにおいて受信装置200からセグメント(n)の取得要求601を受信すると、セグメント(n)、現在生成中のセグメント、及び、次に生成するセグメント(m)がI-Frameを含まない予定であるかを判定する。そして、送信装置100は、これらのセグメントがI-Frameを含まない予定である場合に、セグメント(m)がI-Frameを含むように符号化シーケンスの変更602を行う。そして、送信装置100は、セグメント(n)ではなくセグメント(m)の受信装置200への配信603を実行する。これにより、セグメント(m)は、生成完了後すぐに配信されるため、遅延時間は図6の時間604によって示される長さとなり、ほぼ1セグメント分の遅延に抑える事が可能となる。なお、ここでは、要求されたセグメントと、その次のセグメントがI-Frameを含む予定であるか否かが判定されたが、要求されたセグメントから後の時間に対応する任意の所定数のセグメントにI-Frameを含む予定であるか否かが判定されてもよい。
上述のような本実施形態の送信装置100が実行する一連の処理の流れについて、図7を用いて概説する。図7のフローチャートに示す各ステップは、例えば、送信装置の制御部122が記憶部121に記憶されたプログラムを読み出して実行することにより実施される。図7において、送信装置100は、セグメント取得要求を受信する(S701)。なお、送信装置100は、S701に至るまでの処理において、MPEG-DASHの場合、受信装置200とのプレイリストのやり取りなどが行われるが、この説明については従来の処理と同様であるため、ここでの説明については省略する。送信装置100は、要求されたセグメントがI-Frameを含むか判定し(S702)、要求されたセグメントがI-Frameを含んでいる場合(S702でYES)は、そのセグメントを受信装置200へ配信する(S705)。一方、送信装置100は、要求されたセグメントがI-Frameを含んでいない場合(S702でNO)は、次に生成するセグメントから所定の時間内にI-Frameを含むセグメントが生成される予定であるか否かを判定する(S703)。そして、送信装置100は、所定の時間内にI-Frameを含んだセグメントが生成される予定の場合(S703でYES)は、そのI-Frameを含んだセグメントが生成されるのを待って、そのセグメントを受信装置200へ配信する(S705)。送信装置100は、所定の時間内にI-Frameを含んだセグメントが生成される予定でない場合(S703でNO)は、次に生成するセグメントをI-Frameを含むように変更する(S704)。そして、送信装置100は、I-Frameを含むように変更したセグメントを受信装置200へ配信する(S705)。これにより、送信装置100は、受信装置200へ、I-Frameを含むセグメントを所定の時間内に配信することができる。
以上、実施形態例を詳述したが、本発明は例えば、システム、装置、方法、プログラム、または、記録媒体(記憶媒体)等としての実施態様をとることが可能である。具体的には、複数の機器(例えば、ホストコンピュータ、インタフェース機器、撮像装置、webアプリケーション等)から構成されるシステムに適用してもよいし、また、一つの機器からなる装置に適用してもよい。
Claims (9)
- 受信装置へメディアデータを送信する送信装置であって、
前記メディアデータの所定時間長の部分に対応するセグメントであって、前記メディアデータの再生のための基準となる所定の基準データを含んだ第1のセグメントと、前記所定の基準データを含まない第2のセグメントとを生成する生成手段と、
前記受信装置からのセグメントの要求に応じて、前記生成したセグメントを前記受信装置へ送信する送信手段と、
を有し、
前記所定の基準データは、前記第1のセグメントに対応する所定時間長の前記メディアデータのうちの一部を、基準を用いずに符号化して得られるデータであり、
前記生成手段は、前記第2のセグメントを生成する際に、当該第2のセグメントに対応する前記メディアデータの所定時間長の部分に含まれる一部について、基準を用いずに符号化した所定のデータを事前に生成しておき、
前記送信手段は、前記受信装置から要求されたセグメントが前記第2のセグメントであったことに基づいて、前記第2のセグメントの前記一部を、前記事前に生成された前記所定のデータと置き換えることにより、当該第2のセグメントを前記第1のセグメントへ変更して前記受信装置へ送信する、
ことを特徴とする送信装置。 - 前記受信装置は、前記メディアデータを含んだプレイリストに基づいて、前記セグメントを要求し、
前記生成手段は、前記プレイリストが前記受信装置に配信されてから所定の期間の間だけ、前記第2のセグメントを生成する際に前記所定のデータを生成する、
ことを特徴とする請求項1に記載の送信装置。 - 前記プレイリストは、MPEG(Moving Picture Experts Group)-DASH(Dynamic Adaptive Streaming over Http)のプレイリストである、
ことを特徴とする請求項2に記載の送信装置。 - 前記送信手段は、前記所定の基準データが送信されている前記受信装置からセグメントが要求された場合、又は、前記所定の基準データが送信されていない前記受信装置から要求されたセグメントが前記第1のセグメントである場合に、前記変更を行わない、
ことを特徴とする請求項1から3のいずれか1項に記載の送信装置。 - 前記送信手段は、前記所定の基準データが送信されていない前記受信装置から要求されたセグメントが前記第2のセグメントであった場合であっても、当該セグメントより後の時間に対応する所定数のセグメントのうちのいずれかが第1のセグメントであることが予定されている場合には、前記変更を行わず、前記要求されたセグメントとして、当該第1のセグメントを前記受信装置へ送信する、
ことを特徴とする請求項1から4のいずれか1項に記載の送信装置。 - 前記所定の基準データは、H.264規格のI-Frameである、
ことを特徴とする請求項1から5のいずれか1項に記載の送信装置。 - 前記送信手段は、前記第2のセグメントを前記第1のセグメントへ変更する場合、当該第2のセグメントから変更されたものでない前記第1のセグメントより品質を落としたセグメントを、当該変更の後のセグメントとして送信する、
ことを特徴とする請求項1から6のいずれか1項に記載の送信装置。 - 送信装置によって実行される受信装置へメディアデータを送信する送信方法であって、
前記メディアデータの所定時間長の部分に対応するセグメントであって、前記メディアデータの再生のための基準となる所定の基準データを含んだ第1のセグメントと、前記所定の基準データを含まない第2のセグメントとを生成する生成工程と、
前記受信装置からのセグメントの要求に応じて、前記生成したセグメントを前記受信装置へ送信する送信工程と、
を有し、
前記所定の基準データは、前記第1のセグメントに対応する所定時間長の前記メディアデータのうちの一部を、基準を用いずに符号化して得られるデータであり、
前記生成工程では、前記第2のセグメントを生成する際に、当該第2のセグメントに対応する前記メディアデータの所定時間長の部分に含まれる一部について、基準を用いずに符号化した所定のデータを事前に生成しておき、
前記送信工程では、前記受信装置から要求されたセグメントが前記第2のセグメントであったことに基づいて、前記第2のセグメントの前記一部を、前記事前に生成された前記所定のデータと置き換えることにより、当該第2のセグメントを前記第1のセグメントへ変更して前記受信装置へ送信する、
ことを特徴とする送信方法。 - コンピュータを、請求項1から7のいずれか1項に記載の送信装置が有する各手段として機能させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019034736A JP7292901B2 (ja) | 2019-02-27 | 2019-02-27 | 送信装置、送信方法、及びプログラム |
US16/797,595 US11303940B2 (en) | 2019-02-27 | 2020-02-21 | Transmission apparatus, transmission method, and non-transitory computer-readable storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019034736A JP7292901B2 (ja) | 2019-02-27 | 2019-02-27 | 送信装置、送信方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020141225A JP2020141225A (ja) | 2020-09-03 |
JP7292901B2 true JP7292901B2 (ja) | 2023-06-19 |
Family
ID=72141877
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019034736A Active JP7292901B2 (ja) | 2019-02-27 | 2019-02-27 | 送信装置、送信方法、及びプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US11303940B2 (ja) |
JP (1) | JP7292901B2 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014531878A (ja) | 2011-10-05 | 2014-11-27 | クアルコム,インコーポレイテッド | メディアデータのネットワークストリーミング |
JP2018182447A (ja) | 2017-04-07 | 2018-11-15 | キヤノン株式会社 | 映像配信装置、映像配信方法及びプログラム |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1383334B1 (en) * | 2002-07-17 | 2012-02-01 | Panasonic Corporation | Video data transmitting apparatus, video data receiving apparatus, and broadcasting system |
KR100492567B1 (ko) * | 2003-05-13 | 2005-06-03 | 엘지전자 주식회사 | 이동통신 시스템의 http 기반 비디오 스트리밍 장치및 방법 |
US9226022B2 (en) * | 2008-08-26 | 2015-12-29 | Csir | Method of switching from a first encoded video stream to a second encoded video stream |
CN108965883B (zh) * | 2012-06-28 | 2022-08-30 | 阿克西斯股份公司 | 使用虚拟帧内帧对视频内容进行编码的系统和方法 |
WO2014204366A1 (en) * | 2013-06-19 | 2014-12-24 | Telefonaktiebolaget L M Ericsson (Publ) | Arrangements and method thereof for a channel change during streaming |
US9654804B2 (en) * | 2014-09-03 | 2017-05-16 | Vigor Systems Inc. | Replacing video frames in a transport stream |
-
2019
- 2019-02-27 JP JP2019034736A patent/JP7292901B2/ja active Active
-
2020
- 2020-02-21 US US16/797,595 patent/US11303940B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014531878A (ja) | 2011-10-05 | 2014-11-27 | クアルコム,インコーポレイテッド | メディアデータのネットワークストリーミング |
JP2018182447A (ja) | 2017-04-07 | 2018-11-15 | キヤノン株式会社 | 映像配信装置、映像配信方法及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
US11303940B2 (en) | 2022-04-12 |
JP2020141225A (ja) | 2020-09-03 |
US20200275135A1 (en) | 2020-08-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9357248B2 (en) | Method and apparatus for adaptive bit rate content delivery | |
JP6981257B2 (ja) | 情報処理装置および情報処理方法 | |
JP5147278B2 (ja) | 映像配信装置およびキーフレーム配信方法 | |
US8351498B2 (en) | Transcoding video data | |
WO2014057555A1 (ja) | 情報処理装置、情報処理システム、情報処理プログラム、及び動画データ送受信方法 | |
KR20160110472A (ko) | 상이한 인코딩 파라미터를 이용해 인코딩되는 복수의 인코딩 스트리밍 | |
JP2015136060A (ja) | 通信装置、通信データ生成方法、および通信データ処理方法 | |
KR20180052603A (ko) | 카메라로부터 신호들을 보안 전송하기 위한 시스템 및 방법 | |
JP2008193510A (ja) | 映像送信装置、映像受信装置、及び映像伝送システム | |
CN105191324B (zh) | 通信设备、通信数据生成方法、以及通信数据处理方法 | |
JP2015136059A (ja) | 通信装置、通信データ生成方法、および通信データ処理方法 | |
JP4526294B2 (ja) | ストリームデータ送信装置、受信装置、プログラムを記録した記録媒体、およびシステム | |
JP2018182447A (ja) | 映像配信装置、映像配信方法及びプログラム | |
TW201138464A (en) | Network device, information processing apparatus, stream switching method, information processing method, program, and content distribution system | |
KR102176404B1 (ko) | 통신 장치, 통신 데이터 생성 방법, 및 통신 데이터 처리 방법 | |
JP6193569B2 (ja) | 受信装置、受信方法、及びプログラム、撮像装置、撮像方法、及びプログラム、送信装置、送信方法、及びプログラム | |
JP7292901B2 (ja) | 送信装置、送信方法、及びプログラム | |
US8811478B2 (en) | Data transmission method and apparatus | |
JP2020113922A (ja) | 動画配信装置、動画配信方法及びプログラム | |
JP2011192229A (ja) | サーバ装置および情報処理方法 | |
JP6400163B2 (ja) | 受信装置、受信方法、送信装置、送信方法、及びプログラム | |
KR100899666B1 (ko) | 분산 다중 스트리밍 전송 장치 | |
US20160014181A1 (en) | Content transfer method, content transfer apparatus and content receiving apparatus | |
JP2023161219A (ja) | 送信装置、受信装置及びそれらのプログラム | |
JP2018113568A (ja) | 送信装置、送信方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20210103 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210113 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220127 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221208 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221223 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230217 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230509 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230607 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7292901 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |