JP2019125251A - 情報処理装置、データ構造、情報処理方法、およびプログラム - Google Patents

情報処理装置、データ構造、情報処理方法、およびプログラム Download PDF

Info

Publication number
JP2019125251A
JP2019125251A JP2018006575A JP2018006575A JP2019125251A JP 2019125251 A JP2019125251 A JP 2019125251A JP 2018006575 A JP2018006575 A JP 2018006575A JP 2018006575 A JP2018006575 A JP 2018006575A JP 2019125251 A JP2019125251 A JP 2019125251A
Authority
JP
Japan
Prior art keywords
image data
observed
time
value
learning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018006575A
Other languages
English (en)
Other versions
JP6843780B2 (ja
Inventor
勇磨 三木
Yuma Miki
勇磨 三木
幸浩 田頭
Yukihiro Tagashira
幸浩 田頭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yahoo Japan Corp
Original Assignee
Yahoo Japan Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yahoo Japan Corp filed Critical Yahoo Japan Corp
Priority to JP2018006575A priority Critical patent/JP6843780B2/ja
Priority to US16/240,580 priority patent/US11238576B2/en
Publication of JP2019125251A publication Critical patent/JP2019125251A/ja
Application granted granted Critical
Publication of JP6843780B2 publication Critical patent/JP6843780B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G06N3/084—Backpropagation, e.g. using gradient descent
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/044—Recurrent networks, e.g. Hopfield networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/045—Combinations of networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/048—Activation functions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N5/00—Computing arrangements using knowledge-based models
    • G06N5/04—Inference or reasoning models
    • G06N5/046—Forward inferencing; Production systems
    • G06N5/047—Pattern matching networks; Rete networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20081—Training; Learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20224—Image subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30242—Counting objects in image

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Artificial Intelligence (AREA)
  • Mathematical Physics (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Biophysics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Medical Informatics (AREA)
  • Quality & Reliability (AREA)
  • Image Analysis (AREA)
  • Traffic Control Systems (AREA)

Abstract

【課題】より好適に将来の観測値を求めることができる情報処理装置、データ構造、情報処理方法、およびプログラムを提供することである。【解決手段】情報処理装置は、ある時刻ｔに観測された観測値を画素値とした第１の画像データを取得する取得部と、前記第１の画像データを用いた機械学習によって得られた学習モデルに基づいて、前記取得部により取得された前記第１の画像データから、前記時刻ｔよりも将来の時刻ｔ＋ｎに観測されることが予測される観測値を画素値とした第２の画像データを生成する学習処理部と、を備え、前記機械学習が、ある対象の時刻に観測された観測値を画素値とした前記第１の画像データと、前記対象の時刻に観測されることが予測される観測値を画素値とした前記第２の画像データとの比較に基づく機械学習である。【選択図】図４

Description

本発明は、情報処理装置、データ構造、情報処理方法、およびプログラムに関する。
対象エリアにおける携帯端末の過去の測位情報を参照して、対象エリアの過去の複数の時間帯のそれぞれにおける混雑度を時間帯別混雑度として算出し、複数の時間帯別混雑度をクラスタリングすることによって、対象エリアにおける将来の混雑度を予測するために用いる混雑度のパターンを生成する技術が知られている（例えば、特許文献１参照）。
特開２０１５−１８３３６号公報
しかしながら、従来の技術では、地点ごと、或いはエリアごとに将来の混雑度を求めており、処理負荷が大きくなったり、データの管理が煩雑となったりするといった課題があった。また、このような課題は、専ら、地図上における位置座標のような任意の空間座標に対して、混雑度のような何らかの観測値を対応付ける適用分野全般に共通するところであった。
本発明は、上記の課題に鑑みてなされたものであり、より好適に将来の観測値を求めることができる情報処理装置、データ構造、情報処理方法、およびプログラムを提供することを目的としている。
本発明の一態様は、ある時刻ｔに観測された観測値を画素値とした第１の画像データを取得する取得部と、前記第１の画像データを用いた機械学習によって得られた学習モデルに基づいて、前記取得部により取得された前記第１の画像データから、前記時刻ｔよりも将来の時刻ｔ＋ｎに観測されることが予測される観測値を画素値とした第２の画像データを生成する学習処理部と、を備え、前記機械学習が、ある対象の時刻に観測された観測値を画素値とした前記第１の画像データと、前記対象の時刻に観測されることが予測される観測値を画素値とした前記第２の画像データとの比較に基づく機械学習である、情報処理装置である。
本発明の一態様によれば、より好適に将来の観測値を求めることができる。
第１実施形態における情報処理装置２００を含む情報処理システム１の一例を示す図である。 第１実施形態における情報提供装置１００の構成の一例を示す図である。 実画像データの一例を示す図である。 第１実施形態における情報処理装置２００の構成の一例を示す図である。 情報処理装置側制御部２１０による運用時の一連の処理の流れを示すフローチャートである。 予測画像データの生成処理の詳細な流れの一例を示すフローチャートである。 プレドネット３００の一例を示す図である。 プレドネット３００の一例を示す図である。 周期ごとの実画像データと予測画像データとを並べて表示させた図である。 情報提供装置１００から端末装置１０に提供されるコンテンツの一例を示す図である。 情報提供装置１００から端末装置１０に提供されるコンテンツの他の例を示す図である。 情報処理装置２００による学習時の一連の処理の流れを示すフローチャートである。 プレドネット３００の学習の流れを模式的に示す図である。 実施形態の情報提供装置１００および情報処理装置２００のハードウェア構成の一例を示す図である。
以下、本発明を適用した情報処理装置、データ構造、情報処理方法、およびプログラムを、図面を参照して説明する。
［概要］
情報処理装置は、一以上のプロセッサにより実現される。情報処理装置は、ある時刻ｔに観測された観測値を画素値とした画像データ（以下、実画像データと称する）を取得する。観測値は、例えば、ある地点における人の混雑の程度を示す値、すなわち混雑度である。観測値が混雑度である場合、実画像データは、混雑度の大きさに応じて、色相や彩度、明度（輝度）といった色のパラメータを画素値としたヒートマップで表されてよい。実画像データは、「第１の画像データ」または「第１の多次元配列データ」の一例である。
情報処理装置は、実画像データを取得すると、別の時刻ｔ＃（例えば、時刻ｔよりも所定周期前の時刻）の実画像データを用いて機械学習を行った学習モデルに基づいて、取得した時刻ｔの実画像データから、時刻ｔよりも将来の時刻ｔ＋ｎに観測されることが予測される観測値を画素値とした画像データ（以下、予測画像データと称する）を生成する。予測画像データは、「第２の画像データ」または「第２の多次元配列データ」の一例である。
例えば、学習モデルは、過去のある時刻ｔ＃における実画像データと、その過去のある時刻ｔ＃よりも後の時刻ｔ＃＋ｎにおける予測画像データとの加算結果に基づく機械学習によって得られる。ｎは、観測値を求める周期を表し、例えば１である。生成される予測画像データは、実画像データと同様のデータ態様である。「同様の」とは、例えば、実画像データが、グレースケールの明度によって混雑度の大きさが表現されたヒートマップである場合、予測画像データもグレースケールの明度によって混雑度の大きさが表現されたヒートマップであることを意味する。このような処理によって、例えば、人の密集しやすい建物の有無や、土地の形状、道路網や鉄道網の形状といったような特徴量を考慮せずに、画像ベースで最終的に得たい将来の観測値を予測することができる。この結果、より低負荷且つより簡易に、といったように好適に将来の観測値を求めることができる。
（第１実施形態）
［全体構成］
図１は、第１実施形態における情報処理装置２００を含む情報処理システム１の一例を示す図である。第１実施形態における情報処理システム１は、例えば、一以上の端末装置１０と、情報提供装置１００と、情報処理装置２００とを備える。これらの装置は、ネットワークＮＷを介して接続される。
図１に示す各装置は、ネットワークＮＷを介して種々の情報を送受信する。ネットワークＮＷは、例えば、インターネット、ＷＡＮ（Wide Area Network）、ＬＡＮ（Local Area Network）、プロバイダ端末、無線通信網、無線基地局、専用回線などを含む。なお、図１に示す各装置の全ての組み合わせが相互に通信可能である必要はなく、ネットワークＮＷは、一部にローカルなネットワークを含んでもよい。
端末装置１０は、例えば、スマートフォンなどの携帯電話、タブレット端末、各種パーソナルコンピュータなどの、入力装置、表示装置、通信装置、記憶装置、および演算装置を備える端末装置である。通信装置は、ＮＩＣ（Network Interface Card）などのネットワークカード、無線通信モジュールなどを含む。端末装置１０では、ウェブブラウザやアプリケーションプログラムなどのＵＡ（User Agent）が起動し、ユーザの入力に応じたリクエストを情報提供装置１００に送信する。また、ＵＡが起動された端末装置１０は、情報提供装置１００から取得した情報に基づいて、表示装置に各種画像を表示させる。
情報提供装置１００は、例えば、ウェブブラウザからのリクエストに応じてウェブページを端末装置１０に提供するウェブサーバである。ウェブページには、テキスト、静止画像、動画像、または音声などのコンテンツが含まれる。例えば、ウェブページが地図画像を提供するものである場合、コンテンツには、地図画像や、その地図上での人の混雑度を色で表現したヒートマップが含まれる。また、情報提供装置１００は、アプリケーションプログラムからのリクエストに応じて上記のコンテンツを端末装置１０に提供するアプリサーバであってもよい。
情報処理装置２００は、例えば、情報提供装置１００から、ある地域における、ある時刻ｔの混雑度を画素値とした実画像データを取得し、その地域の将来の時刻ｔ＋ｎの混雑度を画素値とした予測画像データを生成する。そして、情報処理装置２００は、実画像データの取得元である情報提供装置１００に対して、生成した予測画像データを送信する。これを受けて、情報提供装置１００は、将来の時刻ｔ＋ｎの予測画像データをコンテンツとして端末装置１０に提供する。
［情報提供装置の構成］
図２は、第１実施形態における情報提供装置１００の構成の一例を示す図である。図示のように、情報提供装置１００は、例えば、情報提供装置側通信部１０２と、情報提供装置側制御部１１０と、情報提供装置側記憶部１３０とを備える。
情報提供装置側通信部１０２は、例えば、ＮＩＣ等の通信インターフェースを含む。情報提供装置側通信部１０２は、ネットワークＮＷを介して、端末装置１０と通信し、端末装置１０からウェブブラウザのリクエストやアプリケーションのリクエストを取得すると共に、端末装置１０の位置情報を取得する。
情報提供装置側制御部１１０は、例えば、ヒートマップ生成部１１２と、通信制御部１１４とを備える。これらの構成要素は、例えば、ＣＰＵ（Central Processing Unit）などのプロセッサが情報提供装置側記憶部１３０に格納されたプログラムを実行することにより実現される。また、情報提供装置側制御部１１０の構成要素の一部または全部は、ＬＳＩ（Large Scale Integration）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-Programmable Gate Array）、またはＧＰＵ（Graphics Processing Unit）などのハードウェア（回路部；circuitry）により実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。
情報提供装置側記憶部１３０は、例えば、ＨＤＤ（Hard Disc Drive）、フラッシュメモリ、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read Only Memory）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）などの記憶装置により実現される。情報提供装置側記憶部１３０には、ファームウェアやアプリケーションプログラムなどのプロセッサにより実行される各種プログラムの他に、地図情報１３２や位置情報１３４などが記憶される。地図情報１３２は、例えば、端末装置１０にコンテンツとして提供される地図画像や、その地図上での建物等の位置座標を含む。位置情報１３４は、各端末装置１０の位置座標や、その位置座標の取得時刻を含む。
ヒートマップ生成部１１２は、所定周期ｎ（例えば２０分）ごとに、ヒートマップで表された実画像データをシーケンシャルに生成する。例えば、ヒートマップ生成部１１２は、端末装置１０の位置座標の取得時刻を参照し、複数の位置座標の中から、対象の周期に該当する一以上の位置座標を抽出する。ヒートマップ生成部１１２は、抽出した位置座標を地図情報１３２が示す地図上にマッピングし、そのマッピングした位置座標の数を人の混雑度として導出する。そして、ヒートマップ生成部１１２は、混雑度を画素値に置き換えたヒートマップと、地図情報１３２が示す地図画像とを重ね合わせたものを、実画像データとして生成する。この実画像データは、例えば、地図の各座標に対して混雑度が対応付けられた３次元のテンソル（三階テンソル）データとして表される。
図３は、実画像データの一例を示す図である。図示の例のように、実画像データでは、地図画像の上に、所定の透過率を有するヒートマップが重畳される。ヒートマップの画素値の大きさ、すなわち混雑度の大きさは、例えば、ピンクからブルーまでの色相の中で、所定数の階調のグラデーションによって表現されてよい。このような実画像データがコンテンツとして端末装置１０に提供されることによって、端末装置１０を利用するユーザは、色の濃さや色相などによってどの地点が混雑しているのかということを感覚的に把握することができる。
通信制御部１１４は、情報提供装置側通信部１０２を制御して、ヒートマップ生成部１１２によって生成された実画像データをコンテンツとして端末装置１０に送信する。また、通信制御部１１４は、情報提供装置側通信部１０２を制御して、ヒートマップ生成部１１２によって生成された実画像データを情報処理装置２００に送信する。
［情報処理装置の構成］
図４は、第１実施形態における情報処理装置２００の構成の一例を示す図である。図示のように、情報処理装置２００は、例えば、情報処理装置側通信部２０２と、情報処理装置側制御部２１０と、情報処理装置側記憶部２３０とを備える。
情報処理装置側通信部２０２は、例えば、ＮＩＣ等の通信インターフェースを含む。情報処理装置側通信部２０２は、ネットワークＮＷを介して、情報提供装置１００と通信し、情報提供装置１００から実画像データを取得する。情報処理装置側通信部２０２は、「取得部」の一例である。
情報処理装置側制御部２１０は、例えば、学習処理部２１２と、通信制御部２１４とを備える。これらの構成要素は、例えば、ＣＰＵなどのプロセッサが情報処理装置側記憶部２３０に格納されたプログラムを実行することにより実現される。また、情報処理装置側制御部２１０の構成要素の一部または全部は、ＬＳＩ、ＡＳＩＣ、ＦＰＧＡ、またはＧＰＵなどのハードウェア（回路部；circuitry）により実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。
情報処理装置側記憶部２３０は、例えば、ＨＤＤ、フラッシュメモリ、ＥＥＰＲＯＭ、ＲＯＭ、ＲＡＭなどの記憶装置により実現される。情報処理装置側記憶部２３０には、ファームウェアやアプリケーションプログラムなどのプロセッサにより実行される各種プログラムの他に、深層学習モデル情報２３２などが記憶される。
深層学習モデル情報２３２は、学習処理部２１２により参照される学習モデル（学習器）を規定する情報である。学習モデルは、例えば、プレドネット（PredNet）３００である。プレドネット３００とは、神経科学における予測符号化の原理から発想を得たディーププレディクティブコーディングネットワーク（Deep Predictive Coding Network(s)）のことであり、少なくともディープコンボリューショナルリカレントニューラルネットワーク（Deep Convolutional Recurrent Neural Network）を含む複数のニューラルネットワークにより実現される。
深層学習モデル情報２３２には、例えば、プレドネット３００（ディープコンボリューショナルリカレントニューラルネットワーク）に含まれる各ニューラルネットワークを構成する入力層、一以上の隠れ層（中間層）、出力層の其々に含まれるニューロン（ユニット）が互いにどのように結合されるのかという結合情報や、結合されたニューロン間で入出力されるデータに付与される結合係数などの各種情報が含まれる。結合情報とは、例えば、各層に含まれるニューロン数や、各ニューロンの結合先のニューロンを指定する情報、各ニューロンを実現する活性化関数、隠れ層のニューロン間に設けられたゲートなどの情報を含む。ニューロンを実現する活性化関数は、例えば、正規化線形関数（ＲｅＬＵ関数）であってもよいし、シグモイド関数や、ステップ関数、その他の関数などであってもよい。ゲートは、例えば、活性化関数によって返される値（例えば１または０）に応じて、ニューロン間で伝達されるデータを選択的に通過させたり、重み付けたりする。結合係数は、活性化関数のパラメータであり、例えば、ニューラルネットワークの隠れ層において、ある層のニューロンから、より深い層のニューロンにデータが出力される際に、出力データに対して付与される重みを含む。また、結合係数は、各層の固有のバイアス成分などを含んでもよい。
学習処理部２１２は、深層学習モデル情報２３２を参照してプレドネット３００を生成（構築）し、情報処理装置側通信部２０２によって取得された実画像データを入力として各種計算を行うことで、予測画像データを生成する。
通信制御部２１４は、情報処理装置側通信部２０２を制御して、学習処理部２１２によって生成された予測画像データを情報提供装置１００に送信する。
［運用時の処理フロー］
以下、フローチャートに即して、情報処理装置側制御部２１０の運用時の一連の処理の流れを説明する。「運用時」とは、学習処理部２１２によってある程度学習された学習モデルを利用する状態である。図５は、情報処理装置側制御部２１０による運用時の一連の処理の流れを示すフローチャートである。本フローチャートの処理は繰り返し行われてよい。
まず、学習処理部２１２は、情報処理装置側通信部２０２によって情報提供装置１００から実画像データが取得されるまで待機し（Ｓ１００）、情報処理装置側通信部２０２によって実画像データが取得されると、実画像データをプレドネット３００に入力し（Ｓ１０２）、情報提供装置１００において実画像データが生成されたときの時刻ｔよりも一周期ｎ先の将来の時刻ｔ＋ｎの混雑度を画素値とした予測画像データを生成する（Ｓ１０４）。
次に、通信制御部２１４は、情報処理装置側通信部２０２を制御して、学習処理部２１２によって生成された時刻ｔ＋ｎの予測画像データを情報提供装置１００に送信する（Ｓ１０６）。これによって本フローチャートの処理が終了する。
情報提供装置１００は、情報処理装置２００から予測画像データが送信されると、これを受信し、コンテンツとして端末装置１０に送信する。この結果、端末装置１０を利用するユーザは、将来の時刻ｔ＋ｎにおいて、どこの地点が混雑するのかを把握することができる。
図６は、予測画像データの生成処理の詳細な流れの一例を示すフローチャートである。本フローチャートの処理は、上述したＳ１０４の処理に相当する。
まず、学習処理部２１２は、深層学習モデル情報２３２を参照してプレドネット３００を生成する（Ｓ２００）。
図７および図８は、プレドネット３００の一例を示す図である。例えば、プレドネット３００は、２層以上から構成され、各層が観測値または観測値を構成する特徴量を局所的に予測し、その予測結果と入力との差分を後段の層に出力する。各層は、抽象化処理部３１０と、予測生成部３２０と、差分導出部３３０と、回帰処理部３４０とを備える。以下、抽象化処理部３１０の処理結果（出力）を「Ａｌ ｔ」と表し、予測生成部３２０の処理結果（出力）を「Ａ（ｈａｔ）ｌ ｔ」と表し、差分導出部３３０の処理結果（出力）を「Ｅｌ ｔ」と表し、回帰処理部３４０の処理結果（出力）を「Ｒｌ ｔ」と表して説明する。“（ｈａｔ）”は、アルファベットＡのハット記号を表している。
抽象化処理部３１０は、数式（１）に基づく処理を行い、処理結果Ａｌ ｔを出力する。抽象化処理部３１０は、例えば、コンボリューショナルニューラルネットワーク（Convolutional Neural Network：ＣＮＮ）によって実現されてよい。
例えば、処理対象とする層ｌが０である場合、すなわち、最も前段の層の抽象化処理部３１０を対象としている場合、この抽象化処理部３１０は、入力された実画像データｘｔをそのまま処理結果Ａｌ ｔとして出力する。
また、層ｌが０を超える場合、すなわち、後段の層の抽象化処理部３１０を対象としている場合、この抽象化処理部３１０は、一段前層の差分導出部３３０の処理結果Ｅｌ−１ ｔと所定のフィルタとの畳み込み処理を行う。例えば、処理対象とする層ｌが第２層である場合、抽象化処理部３１０は、差分導出部３３０の処理結果Ｅｌ−１ ｔである画像と所定のフィルタとを畳み込み（内積を求め）、所定のフィルタと重なる複数の画素を含む画像領域を、一つの単位領域に圧縮する。この単位領域には、畳み込みにより得られた値が特徴量として対応付けられる。抽象化処理部３１０は、画像上で所定のフィルタをシフト移動させながら畳み込み処理を繰り返し、複数の単位領域により形成された画像（以下、コンボリューショナルレイヤ）を生成する（ＣＯＮＶ（Ｅｌ−１ ｔ））。この際、抽象化処理部３１０は、畳み込み時にパディングを行って、コンボリューショナルレイヤが処理結果Ｅｌ−１ ｔの画像と同じサイズとなるようにする。抽象化処理部３１０は、各コンボリューショナルレイヤをＲｅＬＵ関数（正規化線形関数）によって繋ぎ合わせる（ＲＥＬＵ（ＣＯＮＶ（Ｅｌ−１ ｔ）））。抽象化処理部３１０は、繋ぎ合わせた複数のコンボリューショナルレイヤの其々のサイズを、マックスプーリング（ＭＡＸＰＯＯＬＩＮＧ）と呼ばれる手法を用いて圧縮することで（ＭＡＸＰＯＯＬ（ＲＥＬＵ（ＣＯＮＶ（Ｅｌ−１ ｔ））））、処理結果Ｅｌ−１ ｔである画像を抽象化する。そして、抽象化処理部３１０は、抽象化した画像を処理結果Ａｌ ｔとして出力する。
予測生成部３２０は、数式（２）に基づく処理を行い、処理結果Ａ（ｈａｔ）ｌ ｔを出力する。予測生成部３２０は、例えば、コンボリューショナルニューラルネットワークによって実現されてよい。
例えば、予測生成部３２０は、処理対象とする層ｌが第１層である場合、同じ層の回帰処理部３４０の処理結果Ｒｌ ｔである画像と所定のフィルタとを畳み込み、所定のフィルタと重なる複数の画素を含む画像領域を、一つの単位領域に圧縮する。上述したように、単位領域には、畳み込みにより得られた値が特徴量として対応付けられる。予測生成部３２０は、画像上で所定のフィルタをシフト移動させながら畳み込み処理を繰り返し、複数の単位領域により形成されたコンボリューショナルレイヤを生成する（ＣＯＮＶ（Ｒｌ ｔ））。この際、予測生成部３２０は、畳み込み時にパディングを行って、コンボリューショナルレイヤが処理結果Ｒｌ ｔの画像と同じサイズとなるようにする。予測生成部３２０は、各コンボリューショナルレイヤをＲｅＬＵ関数によって繋ぎ合わせ（ＲＥＬＵ（ＣＯＮＶ（Ｅｌ−１ ｔ）））、この結果を処理結果Ａ（ｈａｔ）ｌ ｔとして出力する。最も前段の層の予測生成部３２０による処理結果Ａ（ｈａｔ）ｌ ｔは、予測画像データを表している。
差分導出部３３０は、数式（３）に基づく処理を行い、処理結果Ｅｌ ｔを出力する。
例えば、差分導出部３３０は、処理結果Ａｌ ｔから処理結果Ａ（ｈａｔ）ｌ ｔを減算した差分（Ａｌ ｔ‐Ａ（ｈａｔ）ｌ ｔ）と、処理結果Ａ（ｈａｔ）ｌ ｔから処理結果Ａｌ ｔを減算した差分（Ａ（ｈａｔ）ｌ ｔ‐Ａｌ ｔ）とを其々求め、それらの差分を用いたＲｅＬＵ関数の出力値を、処理結果Ｅｌ ｔとして出力する。
回帰処理部３４０は、数式（４）に基づく処理を行い、処理結果Ｒｌ ｔを出力する。予測生成部３２０は、例えば、コンボリューショナルニューラルネットワークと、ネットワークの中間層がＬＳＴＭ（Long short-term memory）であるリカレントネットワーク（Reccurent Neural Network：ＲＮＮ）との組み合わせ（以下、ＣＯＮＶＬＳＴＭと称する）によって実現されてよい。ＣＯＮＶＬＳＴＭは、例えば、ＬＳＴＭの各ゲートの計算式において、重みと状態変数との内積を畳み込みに変更したものである。
例えば、回帰処理部３４０は、ＬＳＴＭのメモリーセルと呼ばれる記憶領域（ＬＳＴＭブロック）に一時記憶させておいた差分導出部３３０の前回の処理結果Ｅｌ ｔ−１と、自身の前回の処理結果Ｒｌ ｔ−１と、後段の層の回帰処理部３４０の処理結果Ｒｌ＋１ ｔとに基づいてＣＯＮＶＬＳＴＭを計算し、その計算結果を処理結果Ｒｌ ｔとして出力する。回帰処理部３４０は、後段の回帰処理部３４０の処理結果Ｒｌ＋１ ｔである画像のサイズと、入力される実画像データｘｔのサイズとが異なる場合、後段から処理結果Ｒｌ＋１ ｔとして入力される画像のサイズをアップサンプリングすることで、実画像データｘｔのサイズに合わせてよい。これによって、対象とする各層において画像のサイズが統一される。また、回帰処理部３４０は、今回求めた処理結果Ｒｌ ｔと、同じ層の差分導出部３３０により今回求められた処理結果Ｅｌ ｔとをＬＳＴＭのメモリーセルに記憶させる。
学習処理部２１２は、プレドネット３００を生成すると、予測画像データを生成する処理が初回処理であるか否かを判定し（Ｓ２０２）、予測画像データを生成する処理が初回処理であると判定した場合、各層の回帰処理部３４０の出力値Ｒｌ ｔと差分導出部３３０の出力値Ｅｌ ｔとを初期値（例えば０）として予測画像データＡ（ｈａｔ）ｌ ｔを生成する（Ｓ２０４）。
例えば、プレドネット３００が第ｌ層と第ｌ層より後段の第ｌ＋１層との計２層であり、ｎが１である場合、第ｌ＋１層の回帰処理部３４０は、第ｌ＋１層の差分導出部３３０による前回の周期ｔ−１の出力値Ｅｌ＋１ ｔ−１を初期値とすると共に、ＬＳＴＭのメモリーセルに自身の前回の周期ｔ−１の出力値Ｒｌ＋１ ｔ−１を記憶させていないことから、この出力値Ｒｌ＋１ ｔ−１を初期値として、現在の周期ｔの出力値Ｒｌ＋１ ｔを導出する。この際、第ｌ＋１層の回帰処理部３４０は、導出した現在の周期ｔの出力値Ｒｌ＋１ ｔをＬＳＴＭのメモリーセルに記憶させる。
第ｌ層の回帰処理部３４０は、第ｌ層の差分導出部３３０による前回の周期ｔ−１の出力値Ｅｌ ｔ−１を初期値とすると共に、ＬＳＴＭのメモリーセルに自身の前回の周期ｔ−１の出力値Ｒｌ ｔ−１を記憶させていないことから、この出力値Ｒｌ ｔ−１を初期値とし、これらの初期値Ｅｌ ｔ−１およびＲｌ ｔ−１と、第ｌ＋１層の回帰処理部３４０により導出された現在の周期ｔの出力値Ｒｌ＋１ ｔとに基づいて、現在の周期ｔの出力値Ｒｌ ｔを導出する。この際、第ｌ層の回帰処理部３４０は、導出した現在の周期ｔの出力値Ｒｌ ｔをＬＳＴＭのメモリーセルに記憶させる。
第ｌ層の予測生成部３２０は、第ｌ層の回帰処理部３４０により導出されたＲｌ ｔに基づいて、現在の周期ｔの出力値Ａ（ｈａｔ）ｌ ｔを導出する。これによって、現在の周期ｔの予測画像データＡ（ｈａｔ）ｌ ｔが生成される。
次に、学習処理部２１２は、初期値であるＲｌ ｔ−１とＥｌ ｔ−１とに基づき生成した予測画像データＡ（ｈａｔ）ｌ ｔと、現在の周期ｔに取得された実画像データｘｔとの差分を導出する（Ｓ２０６）。例えば、学習処理部２１２は、情報処理装置側通信部２０２によって周期ｔの実画像データｘｔが取得されると、これを第ｌ層の抽象化処理部３１０に入力する。第ｌ層の抽象化処理部３１０は、初回処理の場合、情報処理装置側通信部２０２によって取得された実画像データｘｔをそのまま第ｌ層の差分導出部３３０に出力する。これを受けた第ｌ層の差分導出部３３０は、第ｌ層の予測生成部３２０により生成された予測画像データＡ（ｈａｔ）ｌ ｔと、第ｌ層の抽象化処理部３１０により出力された実画像データｘｔとに基づいて、現在の一周期ｔ分の差分Ｅｌ ｔを導出する。
次に、学習処理部２１２は、導出した画像データの差分Ｅｌ ｔから、画像の特徴量を導出する（Ｓ２０８）。例えば、第ｌ＋１層の抽象化処理部３１０は、第ｌ層の差分導出部３３０により導出された差分Ｅｌ ｔに基づいて、現在の周期ｔの画像データの画像を抽象化することで得られる特徴量Ａｌ＋１ ｔを導出する。
次に、学習処理部２１２は、現在の周期ｔの出力値Ｒｌ＋１ ｔに基づいて、将来の画像の特徴量（以下、予測特徴量と称する）を導出する（Ｓ２１０）。例えば、第ｌ＋１層の予測生成部３２０は、第ｌ＋１層の回帰処理部３４０により導出された現在の周期ｔの出力値Ｒｌ＋１ ｔに基づいて、将来の周期ｔ＋１の画像データから得られることが予測される予測特徴量Ａ（ｈａｔ）ｌ＋１ ｔを導出する。予測特徴量Ａ（ｈａｔ）ｌ＋１ ｔは、あくまでも現在の周期ｔに求まる、将来の周期ｔ＋１の画像データの特徴量を表している。
次に、学習処理部２１２は、現在の周期ｔの画像データから得た特徴量Ａｌ＋１ ｔと、将来の周期ｔ＋１の画像データから得られることが予測される予測特徴量Ａ（ｈａｔ）ｌ＋１ ｔとの差分を導出する（Ｓ２１２）。例えば、第ｌ＋１層の差分導出部３３０は、現在の周期ｔの特徴量Ａｌ＋１ ｔから、現在の周期ｔの予測特徴量Ａ（ｈａｔ）ｌ＋１ ｔを減算した差分（Ａｌ＋１ ｔ‐Ａ（ｈａｔ）ｌ＋１ ｔ）と、現在の周期ｔの予測特徴量Ａ（ｈａｔ）ｌ＋１ ｔから、現在の周期ｔの特徴量Ａｌ＋１ ｔを減算した差分（Ａ（ｈａｔ）ｌ＋１ ｔ‐Ａｌ＋１ ｔ）とを其々求め、これらの差分をＲｅＬＵ関数の変数として現在の周期ｔの特徴量の差分Ｅｌ＋１ ｔを導出する。これによって、初回処理時の一周期分の処理が終了する。
一方、学習処理部２１２は、Ｓ２０２の処理において、予測画像データを生成する処理が初回処理でないと判定した場合、各層の回帰処理部３４０および差分導出部３３０の前回の周期の出力値を基に予測画像データを生成する（Ｓ２１４）。
例えば、現在の周期が、初回の周期ｔから一周期分進んだｔ＋１である場合、第ｌ＋１層の回帰処理部３４０は、第ｌ＋１層の差分導出部３３０による前回の周期ｔの出力値Ｅｌ＋１ ｔ（Ｓ２１２の処理結果）と、ＬＳＴＭのメモリーセルに記憶させた前回の周期ｔの出力値Ｒｌ＋１ ｔとに基づいて、現在の周期ｔ＋１の出力値Ｒｌ＋１ ｔ＋１を導出する。この際、第ｌ＋１層の回帰処理部３４０は、導出した現在の周期ｔ＋１の出力値Ｒｌ＋１ ｔ＋１をＬＳＴＭのメモリーセルに記憶させる。
第ｌ層の回帰処理部３４０は、第ｌ層の差分導出部３３０による前回の周期ｔの出力値Ｅｌ ｔと、ＬＳＴＭのメモリーセルに記憶させておいた前回の周期ｔの出力値Ｒｌ ｔと、第ｌ＋１層の回帰処理部３４０により導出された現在の周期ｔ＋１の出力値Ｒｌ＋１ ｔ＋１とに基づいて、現在の周期ｔ＋１の出力値Ｒｌ ｔ＋１を導出する。この際、第ｌ層の回帰処理部３４０は、導出した現在の周期ｔ＋１の出力値Ｒｌ ｔ＋１をＬＳＴＭのメモリーセルに記憶させる。
第ｌ層の予測生成部３２０は、第ｌ層の回帰処理部３４０により導出されたＲｌ ｔ＋１に基づいて、現在の周期ｔ＋１の出力値Ａ（ｈａｔ）ｌ ｔ＋１を導出する。これによって、現在の周期ｔ＋１の予測画像データＡ（ｈａｔ）ｌ ｔ＋１が生成される。
次に、学習処理部２１２は、Ｓ２０６の処理として、現在の周期ｔ＋１に取得された実画像データｘｔ＋１を、畳み込み処理およびマックスプーリングによって抽象化し、前回の周期ｔの導出結果であるＲｌ ｔとＥｌ ｔとに基づき生成した予測画像データＡ（ｈａｔ）ｌ ｔ＋１と、抽象化した実画像データｘｔ＋１との差分を導出する。
次に、学習処理部２１２は、Ｓ２０８の処理として、導出した画像データの差分Ｅｌ ｔ＋１に基づいて、現在の周期ｔ＋１の画像データを抽象化することで得られる特徴量Ａｌ＋１ ｔ＋１を導出する。
次に、学習処理部２１２は、Ｓ２１０の処理として、現在の周期ｔ＋１の回帰処理結果Ｒｌ＋１ ｔ＋１に基づいて、将来の周期ｔ＋２の画像データから得られることが予測される予測特徴量Ａ（ｈａｔ）ｌ＋１ ｔ＋１を導出する。
次に、学習処理部２１２は、Ｓ２１２の処理として、現在の周期ｔ＋１の画像データから得た特徴量Ａｌ＋１ ｔ＋１と、将来の周期ｔ＋２の画像データから得られることが予測される予測特徴量Ａ（ｈａｔ）ｌ＋１ ｔ＋１との差分Ｅｌ＋１ ｔ＋１を導出する。これによって、２回目以降の処理時の一周期分の処理が終了する。
図９は、周期ごとの実画像データと予測画像データとを並べて表示させた図である。図中ｔ１は、初回の周期を表しており、予測画像データが一度も生成されていないことを表している。例えば、学習処理部２１２は、周期ｔ１の時点で実画像データｘｔ１が取得されると、これをプレドネット３００に入力し、周期ｔ２の時点で得られることが予測される予測画像データＡ（ｈａｔ）ｌ ｔ１を生成する。更に、学習処理部２１２は、周期ｔ２の時点で実画像データｘｔ２が取得されると、これをプレドネット３００に入力し、周期ｔ３の時点で得られることが予測される予測画像データＡ（ｈａｔ）ｔ２を生成する。このように、周期が繰り返され、実画像データが取得される度に、一周期先の予測画像データを生成する。これによって、情報提供装置１００には、情報処理装置２００から逐次予測画像データが送信される。
図１０は、情報提供装置１００から端末装置１０に提供されるコンテンツの一例を示す図である。情報提供装置１００が、予測画像データを生成するために、ｔ１からｔ９の各周期の実画像データをシーケンシャルに情報処理装置２００に送信し続けた場合、情報処理装置２００は、周期ｔ９の次の周期ｔ１０の予測画像データＡ（ｈａｔ）ｔ９を生成し、これを情報提供装置１００に返す。情報提供装置１００は、情報処理装置２００から予測画像データＡ（ｈａｔ）ｔ９を受信すると、これまで情報処理装置２００に送信し続けた実画像データｘｔ１〜ｘｔ９と、周期ｔ１０の実画像データｘｔ１０を予測した予測画像データＡ（ｈａｔ）ｔ９とを含むコンテンツを端末装置１０に提供する。これによって、端末装置１０の画面には、現在までの混雑度と共に、将来の混雑度がヒートマップとして表示される。
また、上述した例では、情報処理装置２００が、実画像データが生成されたときの時刻（周期）ｔよりも一周期ｎ先の将来の時刻（周期）ｔ＋ｎの混雑度を画素値とした予測画像データを生成するものとして説明したがこれに限られない。例えば、情報処理装置２００は、一周期ｎ先の将来の時刻（周期）ｔ＋ｎの予測画像データと、更に、その将来の時刻（周期）ｔ＋ｎの一または複数の周期ｎ先の将来の時刻ｔ＋ｋｎの予測画像データとを予測してもよい。ｎは、上述したように周期を表し、ｋは、予測する将来の周期の数を表す任意の自然数である。
例えば、現在の周期がｔ＋１である場合、最も前段の第ｌ層の抽象化処理部３１０は、情報処理装置側通信部２０２によって実画像データｘｔ＋１が取得される前に、或いは取得された場合であっても、第ｌ層の予測生成部３２０により前回の周期ｔにおいて生成された予測画像データＡ（ｈａｔ）ｔを、実画像データｘｔ＋１と見做して、畳み込み処理およびマックスプーリングを行って抽象化する。これを受けて第ｌ層の差分導出部３３０は、第ｌ層の予測生成部３２０により生成された予測画像データＡ（ｈａｔ）ｔ＋１と、第ｌ層の抽象化処理部３１０により抽象化された予測画像データＡ（ｈａｔ）ｔとに基づいて、現在の周期ｔ＋１の差分Ｅｌ ｔ＋１を導出する。第ｌ層の後段の第ｌ＋１層の構成要素は、二つの予測画像データの差分Ｅｌ ｔ＋１に基づき現在の周期ｔ＋１の特徴量Ａｌ＋１ ｔ＋１を求め、この特徴量Ａｌ＋１ ｔ＋１と予測特徴量Ａ（ｈａｔ）ｌ＋１ ｔ＋１との差分Ｅｌ＋１ ｔ＋１を導出する。第ｌ層の予測生成部３２０は、差分Ｅｌ＋１ ｔ＋１を基に、周期ｔ＋２の実画像データｘｔ＋２を予測した予測画像データＡ（ｈａｔ）ｔ＋２を生成する。このように、現在の周期ｔ＋１に得られる実画像データｘｔ＋１の代わりに、過去の時点で現在の周期ｔ＋１の実画像データｘｔ＋１として予測した予測画像データＡ（ｈａｔ）ｔを用いて、更に将来の周期ｔ＋２の実画像データｘｔ＋２を予測するため、より将来の混雑度を表すヒートマップをコンテンツとしてユーザに提供することができる。また、ｋ周期以上先（例えばｋ≧２）の将来の実画像データｘｔ＋ｋを予測してもよく、この場合、更に将来の混雑度を表すヒートマップをコンテンツとしてユーザに提供することができる。
図１１は、情報提供装置１００から端末装置１０に提供されるコンテンツの他の例を示す図である。例えば、現在の周期がｔ５である場合に、情報処理装置２００が、５周期先の将来の実画像データを予測した場合、ｔ６からｔ１０の其々の周期の予測画像データＡ（ｈａｔ）ｌ ｔ６〜Ａ（ｈａｔ）ｔ１０を情報提供装置１００に送信する。これを受けて情報提供装置１００は、図１１に例示するように、現在の周期ｔ５までの実画像データｘｔ１〜ｘｔ５と、将来の５周期分の予測画像データＡ（ｈａｔ）ｔ６〜Ａ（ｈａｔ）ｔ１０とを含むコンテンツを端末装置１０に提供する。これによって、一周期分先の将来の混雑度をヒートマップとして表示する場合に比べて、よりユーザの利便性を向上させることができる。
［学習時の処理フロー］
以下、情報処理装置２００の学習時の一連の処理の流れをフローチャートに即して説明する。「学習時」とは、運用時に利用される学習モデル、すなわちプレドネット３００を学習させる状態である。図１２は、情報処理装置２００による学習時の一連の処理の流れを示すフローチャートである。本フローチャートの処理は、例えば、所定の周期で繰り返し行われてよい。
まず、学習処理部２１２は、現在の周期ｔに情報処理装置側通信部２０２によって実画像データｘｔが取得されると、実画像データｘｔをプレドネット３００に入力し（Ｓ３００）、情報提供装置１００において実画像データｘｔが生成されたときの時刻ｔよりも一周期ｎ先の将来の時刻ｔ＋ｎの混雑度を画素値とした予測画像データＡ（ｈａｔ）ｔを生成する（Ｓ３０２）。
次に、学習処理部２１２は、周期ｔの時点で取得された実画像データｘｔと、周期ｔの時点で生成した予測画像データＡ（ｈａｔ）ｔとの和ｙ（＝ｘｔ＋Ａ（ｈａｔ）ｔ）を導出する（Ｓ３０４）。
次に、学習処理部２１２は、現在の周期がｔ＋ｎになり、情報処理装置側通信部２０２によって実画像データｘｔ＋ｎが取得されると、周期ｔ＋ｎ時点において取得された実画像データｘｔ＋ｎと、周期ｔ時点の実画像データｘｔおよび予測画像データＡ（ｈａｔ）ｔの和ｙとの差分ΔＥを導出する（Ｓ３０６）。
次に、学習処理部２１２は、誤差逆伝搬法や確率的勾配降下法を利用して、導出した差分ΔＥが最小となるようにプレドネット３００を学習する（Ｓ３０８）。例えば、学習処理部２１２は、差分ΔＥが最小となるように各層の回帰処理部３４０を実現するＣＯＮＶＬＳＴＭのパラメータを決定する。ＣＯＮＶＬＳＴＭのパラメータは、例えば、入力重み、リカレント重み、ピープホール重み、バイアス重みなどを含む。また、学習処理部２１２は、抽象化処理部３１０や予測生成部３２０、差分導出部３３０の一部または全部のパラメータを決定してもよい。学習処理部２１２は、このように決定したパラメータに、深層学習モデル情報２３２においてプレドネット３００のパラメータを更新する。これによって本フローチャートの処理が終了する。
図１３は、プレドネット３００の学習の流れを模式的に示す図である。図示のように、プレドネット３００に実画像データｘｔを入力すると、周期ｔよりも将来の周期ｔ＋ｎの実画像データｘｔ＋ｎを予測した予測画像データＡ（ｈａｔ）ｔが生成される。学習処理部２１２は、プレドネット３００の第ｌ層の予測生成部３２０から出力された予測画像データＡ（ｈａｔ）ｔと、この予測画像データＡ（ｈａｔ）ｔの生成時に利用した実画像データｘｔとの和ｙを求め、これをプレドネット３００の出力とする。そして、学習処理部２１２は、次の処理周期ｔ＋ｎが到来した場合、周期ｔの出力ｙと、周期ｔ＋ｎに情報提供装置１００から取得される実画像データｘｔ＋ｎ、すなわち周期ｔ＋ｎの入力ｘｔ＋ｎとの差分ΔＥに基づいてプレドネット３００を学習する。このように、プレドネット３００の後段の層の出力値と前段の層の出力値との差を序々に減らしていくなかで、周期ごとに生成される予測画像データに対して、同じ周期で得られる実画像データ（言い換えれば予測画像データを生成するために同周期においてプレドネット３００に入力される実画像データ）を加算し、その加算結果である同周期の実画像データと予測画像データとの和ｙと、次の周期にプレドネット３００に入力される実画像データとの差分ΔＥが最小となるように教師ありモデルとしてプレドネット３００を学習することで、運用時に、より精度良く予測画像データを生成することができる。
以上説明した第１実施形態によれば、ある時刻ｔに観測された観測値を画素値とした実画像データｘｔを取得する情報処理装置側通信部２０２と、実画像データｘを用いたディープラーニングによって予め学習されたプレドネット３００に基づいて、時刻ｔの実画像データｘｔから、時刻ｔよりも将来の時刻ｔ＋ｎに観測されることが予測される観測値を画素値とした予測画像データＡ（ｈａｔ）ｌ ｔを生成する学習処理部２１２と、を備え、学習処理部２１２が、ある対象の時刻τに得られた実画像データｘτと、対象の時刻τに観測されることが予測される観測値を画素値とした予測画像データＡ（ｈａｔ）ｌ τとの比較に基づいて、プレドネット３００を学習することによって、好適に将来の観測値を求めることができる。
＜第２実施形態＞
以下、第２実施形態について説明する。上述した第１実施形態では、プレドネット３００に入力される実画像データｘが、地図の各座標に対して混雑度が対応付けられた３次元のテンソルデータであるものとして説明した。これに対して、第２実施形態では、プレドネット３００に入力される実画像データｘが、４次元以上のテンソルデータである点で上述した第１実施形態と相違する。以下、第１実施形態との相違点を中心に説明し、第１実施形態と共通する点については説明を省略する。なお、第２実施形態の説明において、第１実施形態と同じ部分については同一符号を付して説明する。
第２実施形態における実画像データｘは、例えば、地図の各座標に対して混雑度が対応付けられていると共に、混雑度の導出時に利用された位置情報の取得時刻が対応付けられた４次元のテンソルデータであってよい。すなわち、実画像データｘは、各座標軸の配列と、混雑度の配列と、取得時刻の配列とを組み合わせた多次元配列データであってよい。位置情報の取得時刻は、「観測値の観測時刻」の一例である。
第２実施形態の学習処理部２１２は、実画像データｘが４次元のテンソルデータである場合、この実画像データｘを基に予めプレドネット３００を学習させておく。これによって、運用時に、時刻別、或いは時間帯別に、将来の混雑度を画素値とした予測画像データを生成することができる。また、実画像データｘが位置情報の取得時刻を含む４次元のテンソルデータであることから、曜日や日柄、季節ごとに将来の混雑度を画素値とした予測画像データを生成することができる。これによって、例えば、特定の曜日（例えば金曜日など）、特定の季節、特定の休日（例えば大晦日や元旦など）の予測画像データを生成することができる。
また、実画像データｘに画素値として含まれる観測値は、人の混雑度に限られず、自動車や飛行機といった他の移動体の混雑度であってもよいし、大気中の温度や湿度、雨量、花粉などの微粒子物質の濃度など、時間経過に応じて変化する何らかの値であってもよい。
以上説明した第２実施形態によれば、４次元以上の多次元配列データである実画像データに基づいてプレドネット３００を学習させるため、運用時に４次元以上の多次元配列データである予測画像データを生成することができる。これにより、例えば、実画像データに時刻の情報が含まれていれば、予測画像データにも時刻の情報が含まれることになるため、予測画像データを含むコンテンツを端末装置１０に提供することで、端末装置１０を利用するユーザは、どの時間帯が混雑しやすいのかということを把握することができる。この結果、端末装置１０を利用するユーザの利便性を更に向上させることができる。
＜ハードウェア構成＞
上述した実施形態の情報提供装置１００および情報処理装置２００は、例えば、図１４に示すようなハードウェア構成により実現される。図１４は、実施形態の情報提供装置１００および情報処理装置２００のハードウェア構成の一例を示す図である。
情報提供装置１００は、ＮＩＣ１００−１、ＣＰＵ１００−２、ＲＡＭ１００−３、ＲＯＭ１００−４、フラッシュメモリやＨＤＤなどの二次記憶装置１００−５、およびドライブ装置１００−６が、内部バスあるいは専用通信線によって相互に接続された構成となっている。ドライブ装置１００−６には、光ディスクなどの可搬型記憶媒体が装着される。二次記憶装置１００−５、またはドライブ装置１００−６に装着された可搬型記憶媒体に格納されたプログラムがＤＭＡコントローラ（不図示）などによってＲＡＭ１００−３に展開され、ＣＰＵ１００−２によって実行されることで、情報提供装置側制御部１１０が実現される。情報提供装置側制御部１１０が参照するプログラムは、ネットワークＮＷを介して他の装置からダウンロードされてもよい。
情報処理装置２００は、ＮＩＣ２００−１、ＣＰＵ２００−２、ＲＡＭ２００−３、ＲＯＭ２００−４、フラッシュメモリやＨＤＤなどの二次記憶装置２００−５、およびドライブ装置２００−６が、内部バスあるいは専用通信線によって相互に接続された構成となっている。ドライブ装置２００−６には、光ディスクなどの可搬型記憶媒体が装着される。二次記憶装置２００−５、またはドライブ装置２００−６に装着された可搬型記憶媒体に格納されたプログラムがＤＭＡコントローラ（不図示）などによってＲＡＭ２００−３に展開され、ＣＰＵ２００−２によって実行されることで、情報処理装置側制御部２１０が実現される。情報処理装置側制御部２１０が参照するプログラムは、ネットワークＮＷを介して他の装置からダウンロードされてもよい。
以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何ら限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
１…情報処理システム、１０…端末装置、１００…情報提供装置、１０２…情報提供装置側通信部、１１０…情報提供装置側制御部、１１２…ヒートマップ生成部、１１４…通信制御部、１３０…情報提供装置側記憶部、１３２…地図情報、１３４…位置情報、２００…情報処理装置、２０２…情報処理装置側通信部、２１０…情報処理装置側制御部、２１２…学習処理部、２１４…通信制御部、２３０…情報処理装置側記憶部、２３２…深層学習モデル情報

Claims (13)

  1. ある時刻ｔに観測された観測値を画素値とした第１の画像データを取得する取得部と、
    前記第１の画像データを用いた機械学習によって得られた学習モデルに基づいて、前記取得部により取得された前記第１の画像データから、前記時刻ｔよりも将来の時刻ｔ＋ｎに観測されることが予測される観測値を画素値とした第２の画像データを生成する学習処理部と、
    を備え、
    前記機械学習は、ある対象の時刻に観測された観測値を画素値とした前記第１の画像データと、前記対象の時刻に観測されることが予測される観測値を画素値とした前記第２の画像データとの比較に基づく機械学習である、
    情報処理装置。
  2. 前記機械学習は、深層学習を含む、
    請求項１に記載の情報処理装置。
  3. 前記学習モデルは、プレドネットである、
    請求項２に記載の情報処理装置。
  4. 前記取得部は、更に、前記時刻ｔ＋ｎに観測された観測値を画素値とした第１の画像データを取得し、
    前記学習処理部は、前記時刻ｔ＋ｎに観測された観測値を画素値とした第１の画像データが前記取得部により取得された場合、前記学習モデルに基づいて、前記第１の画像データから、前記時刻ｔ＋ｎよりも将来の時刻ｔ＋ｋｎに観測されることが予測される観測値を画素値とした新たな第２の画像データを生成する、
    請求項１から３のうちいずれか１項に記載の情報処理装置。
  5. 前記学習処理部は、前記学習モデルに基づいて、前記時刻ｔ＋ｎに観測されることが予測される観測値を画素値とした第２の画像データから、前記時刻ｔ＋ｎよりも将来の時刻ｔ＋ｋｎに観測されることが予測される観測値を画素値とした新たな第２の画像データを生成する、
    請求項１から４のうちいずれか１項に記載の情報処理装置。
  6. 前記第１の画像データには、更に、前記観測値の観測時刻が要素として付加されている、
    請求項１から５のうちいずれか１項に記載の情報処理装置。
  7. 前記観測値は、人の混雑の程度を示す混雑度である、
    請求項１から６のうちいずれか１項に記載の情報処理装置。
  8. 前記学習処理部は、
    前記対象の時刻に観測されることが予測される観測値を画素値とした前記第２の画像データと、前記対象の時刻よりも前の時刻の前記第１の画像データとの和を導出し、
    前記導出した和と、前記対象の時刻に観測された観測値を画素値とした前記第１の画像データとの差分に基づく機械学習によって前記学習モデルのパラメータを決定する、
    請求項１から７のうちいずれか１項に記載の情報処理装置。
  9. ある時刻ｔに観測された観測値を一つの配列として含む第１の多次元配列データを取得する取得部と、
    前記第１の多次元配列データを用いた機械学習によって得られた学習モデルに基づいて、前記取得部により取得された前記第１の多次元配列データから、前記時刻ｔよりも将来の時刻ｔ＋ｎに観測されることが予測される観測値を一つの配列として含む第２の多次元配列データを生成する学習処理部と、
    を備え、
    前記機械学習は、ある対象の時刻に観測された観測値を一つの配列として含む前記第１の多次元配列データと、前記対象の時刻に観測されることが予測される観測値を一つの配列として含む前記第２の多次元配列データとの比較に基づく機械学習である、
    情報処理装置。
  10. ある時刻ｔに観測された観測値を一つの配列として含む第１の多次元配列データと、前記時刻ｔよりも将来の時刻ｔ＋ｎに観測されることが予測される観測値を一つの配列として含む第２の多次元配列データとの和に基づいて決定されたパラメータを含む、
    データ構造。
  11. 前記和と、前記時刻ｔ＋ｎに観測された観測値を一つの配列として含む第１の多次元配列データとの差分に基づいて決定された前記パラメータを含む、
    請求項１０に記載のデータ構造。
  12. コンピュータが、
    ある時刻ｔに観測された観測値を画素値とした第１の画像データを取得し、
    前記第１の画像データを用いた機械学習によって得られた学習モデルに基づいて、前記取得した前記第１の画像データから、前記時刻ｔよりも将来の時刻ｔ＋ｎに観測されることが予測される観測値を画素値とした第２の画像データを生成し、
    前記機械学習は、ある対象の時刻に観測された観測値を画素値とした前記第１の画像データと、前記対象の時刻に観測されることが予測される観測値を画素値とした前記第２の画像データとの比較に基づく機械学習である、
    情報処理方法。
  13. コンピュータに、
    ある時刻ｔに観測された観測値を画素値とした第１の画像データを取得する処理と、
    前記第１の画像データを用いた機械学習によって得られた学習モデルに基づいて、前記取得した前記第１の画像データから、前記時刻ｔよりも将来の時刻ｔ＋ｎに観測されることが予測される観測値を画素値とした第２の画像データを生成する処理と、
    を実行させるためのプログラムであって、
    前記機械学習は、ある対象の時刻に観測された観測値を画素値とした前記第１の画像データと、前記対象の時刻に観測されることが予測される観測値を画素値とした前記第２の画像データとの比較に基づく機械学習である、
    プログラム。
JP2018006575A 2018-01-18 2018-01-18 情報処理装置、学習済みモデル、情報処理方法、およびプログラム Active JP6843780B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2018006575A JP6843780B2 (ja) 2018-01-18 2018-01-18 情報処理装置、学習済みモデル、情報処理方法、およびプログラム
US16/240,580 US11238576B2 (en) 2018-01-18 2019-01-04 Information processing device, data structure, information processing method, and non-transitory computer readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018006575A JP6843780B2 (ja) 2018-01-18 2018-01-18 情報処理装置、学習済みモデル、情報処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
JP2019125251A true JP2019125251A (ja) 2019-07-25
JP6843780B2 JP6843780B2 (ja) 2021-03-17

Family

ID=67214117

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018006575A Active JP6843780B2 (ja) 2018-01-18 2018-01-18 情報処理装置、学習済みモデル、情報処理方法、およびプログラム

Country Status (2)

Country Link
US (1) US11238576B2 (ja)
JP (1) JP6843780B2 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110415521A (zh) * 2019-07-31 2019-11-05 京东城市(北京)数字科技有限公司 交通数据的预测方法、装置和计算机可读存储介质
JP7195659B1 (ja) 2021-08-04 2022-12-26 株式会社日豊 動画生成装置、動画生成方法、プログラム、動画生成システム
WO2023162482A1 (ja) * 2022-02-25 2023-08-31 株式会社天地人 降水予測システム、降水予測方法、プログラム、基地局選択システム及び基地局選択方法

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11100793B2 (en) * 2019-01-15 2021-08-24 Waycare Technologies Ltd. System and method for detection and quantification of irregular traffic congestion
US11138003B2 (en) * 2019-04-02 2021-10-05 Taplytics Inc. Methods and systems for automatic determination of a device-specific configuration for a software application operating on a user device
US10740403B1 (en) * 2019-08-23 2020-08-11 Capital One Services Llc Systems and methods for identifying ordered sequence data
CN110728053B (zh) * 2019-10-11 2022-04-29 民航成都信息技术有限公司 航空器的保障业务节点的时间预测方法、装置及电子设备
CN111950812B (zh) * 2020-08-31 2022-05-24 福建农林大学 一种自动识别与预测雨量的方法及其装置
US20220327361A1 (en) * 2020-09-11 2022-10-13 Boe Technology Group Co., Ltd. Method for Training Joint Model, Object Information Processing Method, Apparatus, and System

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08106448A (ja) * 1994-10-04 1996-04-23 Nippon Telegr & Teleph Corp <Ntt> 気象予測装置
JPH09145851A (ja) * 1995-11-28 1997-06-06 Nippon Telegr & Teleph Corp <Ntt> 気象予測装置
JPH09257951A (ja) * 1996-03-22 1997-10-03 Nippon Telegr & Teleph Corp <Ntt> 気象予測装置
JPH10239452A (ja) * 1997-02-27 1998-09-11 Nippon Telegr & Teleph Corp <Ntt> 降雨降雪予測装置
JPH11328407A (ja) * 1998-05-11 1999-11-30 Nippon Telegr & Teleph Corp <Ntt> 時系列画像予測方法、装置、および時系列画像予測プログラムを記録した記録媒体
JP2000057475A (ja) * 1998-08-05 2000-02-25 Nippon Telegr & Teleph Corp <Ntt> 交通状況予測方法及び装置、ならびにその制御を記録した記録媒体
WO2011158363A1 (ja) * 2010-06-17 2011-12-22 株式会社四国総合研究所 日射強度予測システムと太陽光発電出力予測システム
JP2012022530A (ja) * 2010-07-14 2012-02-02 Nippon Telegr & Teleph Corp <Ntt> 行動予測装置、方法及びプログラム
JP2012042410A (ja) * 2010-08-23 2012-03-01 Toshiba Corp 気象レーダ観測情報提供システムおよび気象レーダ観測情報提供方法
JP2013099143A (ja) * 2011-11-01 2013-05-20 Nippon Telegr & Teleph Corp <Ntt> 予測モデル構築装置、方法、及びプログラム、並びに発電量予測装置、及び方法
JP2014059729A (ja) * 2012-09-18 2014-04-03 Toshiba Corp 物体検出・識別装置及びその方法とその物体検出・識別に用いられる辞書データ生成方法
WO2017033443A1 (ja) * 2015-08-27 2017-03-02 日本電気株式会社 渋滞予測システム、渋滞予測方法、及び、記録媒体
JP2017203773A (ja) * 2016-05-10 2017-11-16 株式会社メテオテック・ラボ 海上気象予報提供方法
WO2018235777A1 (ja) * 2017-06-20 2018-12-27 国立大学法人静岡大学 画像データ加工装置、植物栽培システム及び画像データ加工方法
JP2020091702A (ja) * 2018-12-06 2020-06-11 オリンパス株式会社 撮像装置および撮像方法

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6230306B2 (ja) 2013-07-09 2017-11-15 株式会社ゼンリンデータコム 混雑度パターンの特定及び混雑度の予測のための情報処理装置、情報処理方法及びプログラム
US9420331B2 (en) * 2014-07-07 2016-08-16 Google Inc. Method and system for categorizing detected motion events
CN104299261B (zh) * 2014-09-10 2017-01-25 深圳大学 人体三维成像方法及系统
CN108701323B (zh) * 2016-03-21 2023-11-10 宝洁公司 用于提供定制的产品推荐的系统和方法
US11989821B2 (en) * 2016-03-25 2024-05-21 Outward, Inc. Arbitrary view generation
US11232627B2 (en) * 2016-03-25 2022-01-25 Outward, Inc. Arbitrary view generation
US11989820B2 (en) * 2016-03-25 2024-05-21 Outward, Inc. Arbitrary view generation
US11068781B2 (en) * 2016-10-07 2021-07-20 Nvidia Corporation Temporal ensembling for semi-supervised learning
US10110868B2 (en) * 2016-12-22 2018-10-23 Aestatix LLC Image processing to determine center of balance in a digital image
US9836654B1 (en) * 2017-02-28 2017-12-05 Kinosis Ltd. Surgical tracking and procedural map analysis tool
US10891545B2 (en) * 2017-03-10 2021-01-12 International Business Machines Corporation Multi-dimensional time series event prediction via convolutional neural network(s)
US10525341B2 (en) * 2017-04-24 2020-01-07 Intel Corporation Mechanisms for reducing latency and ghosting displays
WO2018208791A1 (en) * 2017-05-08 2018-11-15 Aquifi, Inc. Systems and methods for inspection and defect detection using 3-d scanning
KR102308437B1 (ko) * 2017-07-07 2021-10-06 주식회사 고영테크놀러지 대상체의 외부의 검사를 최적화하기 위한 장치 및 그 방법
US11176651B2 (en) * 2017-10-18 2021-11-16 Anthony C. Liberatori, Jr. Computer-controlled 3D analysis of collectible objects
JP2019082937A (ja) * 2017-10-31 2019-05-30 パナソニックＩｐマネジメント株式会社 候補地評価システムおよび候補地評価方法
US11062479B2 (en) * 2017-12-06 2021-07-13 Axalta Coating Systems Ip Co., Llc Systems and methods for matching color and appearance of target coatings
US10417502B2 (en) * 2017-12-15 2019-09-17 Accenture Global Solutions Limited Capturing series of events in monitoring systems
US10580137B2 (en) * 2018-01-30 2020-03-03 International Business Machines Corporation Systems and methods for detecting an indication of malignancy in a sequence of anatomical images
WO2019204520A1 (en) * 2018-04-17 2019-10-24 VideaHealth, Inc. Dental image feature detection
EP3561726A1 (en) * 2018-04-23 2019-10-30 Aptiv Technologies Limited A device and a method for processing data sequences using a convolutional neural network
US10740694B2 (en) * 2018-08-10 2020-08-11 Vis Machina Inc. System and method for capture and adaptive data generation for training for machine vision
US10383694B1 (en) * 2018-09-12 2019-08-20 Johnson & Johnson Innovation—Jjdc, Inc. Machine-learning-based visual-haptic feedback system for robotic surgical platforms
US20200175361A1 (en) * 2018-11-30 2020-06-04 Alibaba Group Holding Limited Partitioning of deep learning inference with dynamic offloading
US10796482B2 (en) * 2018-12-05 2020-10-06 Snap Inc. 3D hand shape and pose estimation
JP7271216B2 (ja) * 2019-02-19 2023-05-11 株式会社東芝 情報処理装置、情報処理方法、およびプログラム
US11410058B2 (en) * 2019-03-29 2022-08-09 QuantumiD Technologies Inc. Artificial intelligence system for estimating excess non-sapient payload capacity on mixed-payload aeronautic excursions
US11138751B2 (en) * 2019-07-06 2021-10-05 Toyota Research Institute, Inc. Systems and methods for semi-supervised training using reprojected distance loss
US10758309B1 (en) * 2019-07-15 2020-09-01 Digital Surgery Limited Methods and systems for using computer-vision to enhance surgical tool control during surgeries
KR20190109324A (ko) * 2019-07-26 2019-09-25 엘지전자 주식회사 로봇 충전대의 위치를 추천하기 위한 방법, 장치 및 시스템
US11941813B2 (en) * 2019-08-23 2024-03-26 Nantcell, Inc. Systems and methods for performing segmentation based on tensor inputs
US20210097691A1 (en) * 2019-09-30 2021-04-01 Nvidia Corporation Image generation using one or more neural networks
JP7239511B2 (ja) * 2020-02-26 2023-03-14 株式会社日立製作所 画像予測システム

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08106448A (ja) * 1994-10-04 1996-04-23 Nippon Telegr & Teleph Corp <Ntt> 気象予測装置
JPH09145851A (ja) * 1995-11-28 1997-06-06 Nippon Telegr & Teleph Corp <Ntt> 気象予測装置
JPH09257951A (ja) * 1996-03-22 1997-10-03 Nippon Telegr & Teleph Corp <Ntt> 気象予測装置
JPH10239452A (ja) * 1997-02-27 1998-09-11 Nippon Telegr & Teleph Corp <Ntt> 降雨降雪予測装置
JPH11328407A (ja) * 1998-05-11 1999-11-30 Nippon Telegr & Teleph Corp <Ntt> 時系列画像予測方法、装置、および時系列画像予測プログラムを記録した記録媒体
JP2000057475A (ja) * 1998-08-05 2000-02-25 Nippon Telegr & Teleph Corp <Ntt> 交通状況予測方法及び装置、ならびにその制御を記録した記録媒体
WO2011158363A1 (ja) * 2010-06-17 2011-12-22 株式会社四国総合研究所 日射強度予測システムと太陽光発電出力予測システム
JP2012022530A (ja) * 2010-07-14 2012-02-02 Nippon Telegr & Teleph Corp <Ntt> 行動予測装置、方法及びプログラム
JP2012042410A (ja) * 2010-08-23 2012-03-01 Toshiba Corp 気象レーダ観測情報提供システムおよび気象レーダ観測情報提供方法
JP2013099143A (ja) * 2011-11-01 2013-05-20 Nippon Telegr & Teleph Corp <Ntt> 予測モデル構築装置、方法、及びプログラム、並びに発電量予測装置、及び方法
JP2014059729A (ja) * 2012-09-18 2014-04-03 Toshiba Corp 物体検出・識別装置及びその方法とその物体検出・識別に用いられる辞書データ生成方法
WO2017033443A1 (ja) * 2015-08-27 2017-03-02 日本電気株式会社 渋滞予測システム、渋滞予測方法、及び、記録媒体
JP2017203773A (ja) * 2016-05-10 2017-11-16 株式会社メテオテック・ラボ 海上気象予報提供方法
WO2018235777A1 (ja) * 2017-06-20 2018-12-27 国立大学法人静岡大学 画像データ加工装置、植物栽培システム及び画像データ加工方法
JP2020091702A (ja) * 2018-12-06 2020-06-11 オリンパス株式会社 撮像装置および撮像方法

Non-Patent Citations (6)

* Cited by examiner, † Cited by third party
Title
WILLIAM LOTTER ET AL.: "DEEP PREDICTIVE CODING NETWORKS FOR VIDEO PREDICTION AND UNSUPERVISED LEARNING", [ONLINE], JPN7019003147, 1 March 2017 (2017-03-01), pages 1 - 18, ISSN: 0004123896 *
三木: "PredNetを用いた混雑レーダーの未来予測", [ONLINE], JPN7020003538, 6 March 2018 (2018-03-06), ISSN: 0004431422 *
原田 達也: "物体操作に向けたセマンティクス理解", 日本ロボット学会誌, JPN6019037487, January 2017 (2017-01-01), pages 17 - 21, ISSN: 0004123899 *
茂木学，外７名: "２０２０ ＭＩＣＥ−展示会×ＩＣＴによる新たなおもてなし", ＮＴＴ技術ジャーナル, vol. 第２８巻 第１０号, JPN6019037482, October 2016 (2016-10-01), pages 35 - 39, ISSN: 0004123897 *
藤山千紘，外４名: "大脳皮質における予測符号化を模倣した動画像予測モデルと脳活動の相関に関する考察", THE 31ST ANNUAL CONFERENCE OF THE JAPANESE SOCIETY FOR ARTIFICIAL INTELLIGENCE, JPN6019037480, 2017, pages 1 - 3, ISSN: 0004123895 *
関谷翠，外３名: "低ランク近似を用いた深層学習の行列積の高速化", 情報処理学会研究報告, JPN6019037485, 9 March 2017 (2017-03-09), pages 1 - 7, ISSN: 0004123898 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110415521A (zh) * 2019-07-31 2019-11-05 京东城市(北京)数字科技有限公司 交通数据的预测方法、装置和计算机可读存储介质
JP7195659B1 (ja) 2021-08-04 2022-12-26 株式会社日豊 動画生成装置、動画生成方法、プログラム、動画生成システム
JP2023023112A (ja) * 2021-08-04 2023-02-16 株式会社日豊 動画生成装置、動画生成方法、プログラム、動画生成システム
WO2023162482A1 (ja) * 2022-02-25 2023-08-31 株式会社天地人 降水予測システム、降水予測方法、プログラム、基地局選択システム及び基地局選択方法

Also Published As

Publication number Publication date
US20190220969A1 (en) 2019-07-18
US11238576B2 (en) 2022-02-01
JP6843780B2 (ja) 2021-03-17

Similar Documents

Publication Publication Date Title
JP6843780B2 (ja) 情報処理装置、学習済みモデル、情報処理方法、およびプログラム
Poniszewska-Maranda et al. Studying usability of AI in the IoT systems/paradigm through embedding NN techniques into mobile smart service system
US10429801B2 (en) Adaptive control methods for buildings
US20220139070A1 (en) Learning apparatus, estimation apparatus, data generation apparatus, learning method, and computer-readable storage medium storing a learning program
JP7264376B2 (ja) 汎用学習済モデルの生成方法
CN113408797B (zh) 流转量预测多时序模型生成方法、信息发送方法和装置
CN108074278A (zh) 视频呈现方法、装置和设备
KR102297195B1 (ko) 개체군 분산 모사 모델 기반 개체군 분산 예측 장치 및 이를 이용한 개체군 분산 예측 방법
Andersson et al. Heterogeneous wireless sensor networks for flood prediction decision support systems
Alkema et al. The United Nations probabilistic population projections: An introduction to demographic forecasting with uncertainty
Li et al. Capsules TCN network for urban computing and intelligence in urban traffic prediction
Kitthamkesorn et al. Elastic demand with weibit stochastic user equilibrium flows and application in a motorised and non-motorised network
Shi et al. Inferring Plasmodium vivax transmission networks from tempo-spatial surveillance data
US10642232B2 (en) Adaptive control systems for buildings with redundant circuitry
US20190033799A1 (en) Adaptive control systems for buildings with redundant circuitry
WO2022048172A1 (zh) 深度学习模型的可解释性参数获取方法、装置、计算机设备及存储介质
WO2020098982A1 (en) Method and devices for fitting a garment onto a body
US10241477B2 (en) Adaptive control methods for buildings with redundant circuitry
Resch et al. Real-time Geo-awareness–Sensor Data Integration for Environmental Monitoring in the City
CN115953330A (zh) 虚拟场景图像的纹理优化方法、装置、设备和存储介质
Gu et al. Coupling systems thinking and geodesign processes in land-use modelling, design, and planning
WO2021014541A1 (ja) 学習装置、推論装置、学習方法、推論方法、及び学習プログラム
KR20230050893A (ko) 3차원 가상모델 제공을 위한 홀 필링 방법 및 그를 위한 컴퓨팅 장치
Rozhnov Investigation of new features of the virtual semantic environment prototype in the development and application of infrastructure of highly automated and intelligent transport systems
CN112465117A (zh) 合约生成模型构建方法、装置、设备及存储介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180823

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190919

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191001

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20191101

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20191108

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191126

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200414

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200610

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201110

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210107

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210126

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210224

R150 Certificate of patent or registration of utility model

Ref document number: 6843780

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350