JP2011034188A - コンテンツ転送時間帯決定方法 - Google Patents
コンテンツ転送時間帯決定方法 Download PDFInfo
- Publication number
- JP2011034188A JP2011034188A JP2009177713A JP2009177713A JP2011034188A JP 2011034188 A JP2011034188 A JP 2011034188A JP 2009177713 A JP2009177713 A JP 2009177713A JP 2009177713 A JP2009177713 A JP 2009177713A JP 2011034188 A JP2011034188 A JP 2011034188A
- Authority
- JP
- Japan
- Prior art keywords
- time zone
- transfer time
- content transfer
- content
- procedure
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
【解決手段】コンテンツ転送時間帯選択部101は、今回のコンテンツ転送時間帯timeを決定方策πに従って選択する。コンテンツ転送部102は、選択された今回のコンテンツ転送時間帯timeを待ってコンテンツ転送を実行する。収益算出部103は、今回のコンテンツ転送の結果に基づいて、実現可能な通信品質を表す収益rを算出する。誤差算出部104は、行動価値予測における誤差δを算出する。更新部105は、コンテンツ転送が行われた今回の転送時間帯timeに関して、その行動価値関数Q (time)を前記誤差δに基づいて更新する。
【選択図】図2
Description
(1)コンテンツ転送の時間帯決定に強化学習を適用し、通信品質を収益として更新された行動価値関数に基づいてコンテンツ転送時間帯timeが決定されるようにしたので、通信品質に関して確率的に最適な転送時間帯を選択できるようになる。
(2)コンテンツ転送の時間帯決定に強化学習を適用し、コンテンツ転送の要求が検知された時間帯ptimeをパラメータとし、通信品質を収益として更新された行動価値関数に基づいてコンテンツ転送時間帯timeが決定されるようにしたので、通信品質に関して確率的に最適かつより早い時刻の転送時間帯を選択できるようになる。
(3)強化学習を適用したコンテンツ転送の時間帯決定手順が無線端末ごとに実施されるので、無線端末ごとにコンテンツ転送の環境が異なる場合でも、無線端末ごとに確率的に最適な転送時間帯を選択できるようになる。
(4)強化学習を適用したコンテンツ転送の時間帯決定手順が、無線端末を収容する無線基地局ごとに実施されるので、行動価値関数の更新頻度が高くなり、無線リンク利用状況の変化に対する追随性が向上する。
(5)強化学習を適用したコンテンツ転送の時間帯決定手順が、所定の通信エリアごとに実施されるので、行動価値関数の更新頻度が更に高くなり、無線リンク利用状況の変化に対する追随性が更に向上する。
(6)強化学習を適用したコンテンツ転送の時間帯決定手順が一部の通信エリアにおいてのみ実施され、他の通信エリアでは、前記一部の通信エリアで得られた行動価値関数から推定された行動価値関数を利用するので、設備コストや行動価値関数の更新処理に必要な通信量を減らすことができる。
Claims (6)
- コンテンツ転送の実績に基づいて各転送時間帯の通信品質を学習し、コンテンツ転送の要求が検知されると、学習結果に基づいて確率的に最適な転送時間帯を決定するコンテンツ転送時間帯決定方法において、
選択し得る転送時間帯の行動価値関数を初期化する手順と、
現在のコンテンツ転送時間帯決定方策に従って今回の転送時間帯を選択する手順と、
前記選択された転送時間帯でコンテンツを転送する手順と、
今回のコンテンツ転送の通信品質を評価する手順と、
前記評価結果に基づいて収益を算出する手順と、
前記収益に基づいて行動価値予測における誤差を算出する手順と、
前記誤差に基づいて前記今回の転送時間帯の行動価値関数を更新する手順とを含み、
これ以後のコンテンツ転送要求に応答して、前記転送時間を選択する手順から行動価値関数を更新する手順までを繰り返すことを特徴とするコンテンツ転送時間帯決定方法。 - コンテンツ転送の実績に基づいて各転送時間帯の通信品質を学習し、コンテンツ転送の要求が検知されると、学習結果に基づいて確率的に最適な転送時間帯を決定するコンテンツ転送時間帯決定方法において、
選択し得る転送時間帯の行動価値関数を初期化する手順と、
現在のコンテンツ転送時間帯決定方策に従って、コンテンツ転送の要求が検知された時間帯をパラメータとして今回の転送時間帯を選択する手順と、
前記選択された転送時間帯でコンテンツを転送する手順と、
今回のコンテンツ転送の通信品質を評価する手順と、
前記評価結果に基づいて収益を算出する手順と、
前記収益に基づいて行動価値予測における誤差を算出する手順と、
前記誤差に基づいて前記今回の転送時間帯の行動価値関数を更新する手順とを含み、
これ以後のコンテンツ転送要求に応答して、前記転送時間を選択する手順から行動価値関数を更新する手順までを繰り返すことを特徴とするコンテンツ転送時間帯決定方法。 - 前記コンテンツ転送時間帯を決定するための各手順が、コンテンツを転送する無線端末ごとに実行されることを特徴とする請求項1または2に記載のコンテンツ転送時間帯決定方法。
- 無線端末が無線基地局を経由してコンテンツを転送する際に、前記コンテンツ転送時間帯を決定するための各手順が、各無線端末を収容する無線基地局ごとに実行されることを特徴とする請求項1または2に記載のコンテンツ転送時間帯決定方法。
- 無線端末が無線基地局を経由してコンテンツを転送する際に、前記コンテンツ転送時間帯を決定するための各手順が、所定の通信エリアごとに実行されることを特徴とする請求項1または2に記載のコンテンツ転送時間帯決定方法。
- 無線端末が無線基地局を経由してコンテンツを転送する際に、前記コンテンツ転送時間帯を決定するための各手順が一部の通信エリアで実行され、一の通信エリアで更新された行動価値関数と他の一の通信エリアで更新された行動価値関数とに基づいて更に他の一の通信エリアの行動価値関数を推定し、当該更に他の一の通信エリアでは、前記推定された行動価値関数に基づいてコンテンツの転送時間帯が決定されることを特徴とする請求項1または2に記載のコンテンツ転送時間帯決定方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009177713A JP5279030B2 (ja) | 2009-07-30 | 2009-07-30 | コンテンツ転送時間帯決定方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009177713A JP5279030B2 (ja) | 2009-07-30 | 2009-07-30 | コンテンツ転送時間帯決定方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011034188A true JP2011034188A (ja) | 2011-02-17 |
JP5279030B2 JP5279030B2 (ja) | 2013-09-04 |
Family
ID=43763224
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009177713A Expired - Fee Related JP5279030B2 (ja) | 2009-07-30 | 2009-07-30 | コンテンツ転送時間帯決定方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5279030B2 (ja) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06164762A (ja) * | 1992-11-27 | 1994-06-10 | Hitachi Software Eng Co Ltd | ファクシミリサーバシステム |
JP2002024121A (ja) * | 2000-07-12 | 2002-01-25 | Fujitsu Ltd | データ転送スケジューリング装置およびデータ転送スケジューリングプログラムを記録したコンピュータにより読み取り可能な記憶媒体 |
JP2006033490A (ja) * | 2004-07-16 | 2006-02-02 | Hitachi Industrial Equipment Systems Co Ltd | データ通信装置及び通信システム |
JP2007041899A (ja) * | 2005-08-04 | 2007-02-15 | Nippon Telegr & Teleph Corp <Ntt> | コンテンツの配信装置,コンテンツ配信ネットワークおよびコンテンツ配信方法 |
JP2008288992A (ja) * | 2007-05-18 | 2008-11-27 | Ntt Docomo Inc | ダウンロードシステム及びダウンロード方法 |
JP2009093461A (ja) * | 2007-10-10 | 2009-04-30 | Nippon Telegr & Teleph Corp <Ntt> | データ配信スケジューラ、データ配信システム、データ配信スケジュール方法およびデータ配信スケジュールプログラム |
JP2009111562A (ja) * | 2007-10-29 | 2009-05-21 | Furuno Electric Co Ltd | 通信量制御システム、通信量制御システム用サーバ、および通信量制御システム用クライアント |
-
2009
- 2009-07-30 JP JP2009177713A patent/JP5279030B2/ja not_active Expired - Fee Related
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06164762A (ja) * | 1992-11-27 | 1994-06-10 | Hitachi Software Eng Co Ltd | ファクシミリサーバシステム |
JP2002024121A (ja) * | 2000-07-12 | 2002-01-25 | Fujitsu Ltd | データ転送スケジューリング装置およびデータ転送スケジューリングプログラムを記録したコンピュータにより読み取り可能な記憶媒体 |
JP2006033490A (ja) * | 2004-07-16 | 2006-02-02 | Hitachi Industrial Equipment Systems Co Ltd | データ通信装置及び通信システム |
JP2007041899A (ja) * | 2005-08-04 | 2007-02-15 | Nippon Telegr & Teleph Corp <Ntt> | コンテンツの配信装置,コンテンツ配信ネットワークおよびコンテンツ配信方法 |
JP2008288992A (ja) * | 2007-05-18 | 2008-11-27 | Ntt Docomo Inc | ダウンロードシステム及びダウンロード方法 |
JP2009093461A (ja) * | 2007-10-10 | 2009-04-30 | Nippon Telegr & Teleph Corp <Ntt> | データ配信スケジューラ、データ配信システム、データ配信スケジュール方法およびデータ配信スケジュールプログラム |
JP2009111562A (ja) * | 2007-10-29 | 2009-05-21 | Furuno Electric Co Ltd | 通信量制御システム、通信量制御システム用サーバ、および通信量制御システム用クライアント |
Also Published As
Publication number | Publication date |
---|---|
JP5279030B2 (ja) | 2013-09-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110891093B (zh) | 一种时延敏感网络中边缘计算节点选择方法及系统 | |
Tian et al. | A dynamic and self-adaptive network selection method for multimode communications in heterogeneous vehicular telematics | |
AU2021268626A1 (en) | Method and system for shared transport | |
CN110326257B (zh) | 使用人工生命预报关键性能指示符的方法和设备 | |
EP2962427B1 (en) | Method and system to represent the impact of load variation on service outage over multiple links | |
US10091785B2 (en) | System and method for managing wireless frequency usage | |
JP5721854B2 (ja) | ユーザ装置に対するアセットのプリフェッチングのためのリソース・プロファイル調整 | |
WO2016189926A1 (ja) | 情報処理装置、情報処理方法、情報処理プログラムおよび情報処理システム | |
CN111641542B (zh) | 自适应调节控制方法及装置、网关终端及存储介质 | |
JP2007143167A (ja) | 資源割当てシステム並びに方法及びそれに適用されるユーザ端末装置 | |
Tan et al. | Opportunistic channel selection based on time series prediction in cognitive radio networks | |
JP6451161B2 (ja) | 無線通信端末、無線通信システム、および通信状況予測方法 | |
Shinde et al. | Collaborative reinforcement learning for multi-service internet of vehicles | |
JP6724641B2 (ja) | 管理装置、通信システム及び割当方法 | |
JP5279030B2 (ja) | コンテンツ転送時間帯決定方法 | |
Mwasinga et al. | Rasm: Resource-aware service migration in edge computing based on deep reinforcement learning | |
KR20200119180A (ko) | 품질 예측 기반의 동적 무선 네트워크 가변 접속을 제공하는 품질 예측 정보 제공 장치 및 그 동작 방법 | |
US20230131226A1 (en) | Method for providing multi-site orchestration in public network for factory automation, orchestrator, and communication system | |
JP2010109534A (ja) | 通信方法および通信端末 | |
JP4530993B2 (ja) | コンテクスト情報に基づいたモバイルネットワークにおけるモビリティ管理 | |
Nalayini et al. | Optimization based Data Aggregation and Fault Tolerance with Energy Management for Fog Enabled Heterogeneous IoT Environment | |
Li et al. | Online pricing incentive to sample fresh information | |
Maheshwari et al. | Data congestion control using offloading in IoT network | |
CN110381168B (zh) | 预测周期确定方法、预测内容推送方法、装置及系统 | |
US20160352642A1 (en) | Rendezvous flow control apparatus, method, and non-transitory tangible computer readable medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120224 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130221 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130227 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130416 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130515 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130516 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5279030 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |