JP7261710B2 - データ仲介装置およびデータ仲介方法 - Google Patents
データ仲介装置およびデータ仲介方法 Download PDFInfo
- Publication number
- JP7261710B2 JP7261710B2 JP2019167132A JP2019167132A JP7261710B2 JP 7261710 B2 JP7261710 B2 JP 7261710B2 JP 2019167132 A JP2019167132 A JP 2019167132A JP 2019167132 A JP2019167132 A JP 2019167132A JP 7261710 B2 JP7261710 B2 JP 7261710B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- catalog
- metadata
- evaluation value
- processor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
本発明の対象であるデータ仲介システムの構成に関して説明する。
本発明の学習データ生成部112の動作について説明する。
学習データ生成部112の処理S103において、各データの評価スコアを算出するが、ここでは、評価スコア算出の動作について説明する。
実施例1では、該当するデータに対応するデータカタログの品質を評価するために、同一分野と異分野の利用者の利用履歴を用いて、各利用者からの評価値を算出する。ここで利用者が提供者と同一分野に属するか、異分野に属するかを特定するためには、提供者および利用者がそれぞれどの分野の所属であるかの情報を取得する必要がある。本実施例では、ユーザ登録の際の登録情報に組織の関連分野を追加することでこれを実現する。以下では、ユーザ登録のシーケンスを説明する。
データ仲介装置10によるサービスを利用するユーザー(データ提供者、データ利用者)を管理するためのユーザ管理テーブルについて説明する。
次に、実施例1におけるデータ登録のシーケンスについて説明する。ここでは、データカタログの項目値の推論機能を用いて、項目Aから項目Lの値を決めて、データを登録する場合について述べる。
次に、データカタログ管理テーブルについて説明する。
次に、データ利用者が、データ仲介システムを用いてデータを検索し、データカタログを閲覧し、データを購入し、データを取得する際のシーケンスについて説明する。
データ利用履歴管理テーブルについて、その一例を説明する。
実施例1では、学習データを生成する際に、各データの評価スコアを算出し、評価スコアが上位のデータを選別して、上位のデータのみを学習用データとして用い、教師あり学習によってモデルを構築していた。しかし、この場合、選別することによって学習用のデータ数が減少してしまうため、それに伴い推論精度が低下することが懸念される。
20(20-1~20-N) データ提供者情報処理装置
30(30-1~30-M) データ利用者情報処理装置
101 データカタログ登録処理部
102 データカタログ記憶部
103 データ検索/カタログ閲覧処理部
104 データ購入処理部
105 データ取得処理部
106 データ利用履歴ログ記憶部
110 データカタログ生成支援処理部
111 データカタログ推論部
112、117 学習データ生成部
113 学習データ記憶部
114 モデル学習部
115 推論モデル記憶部
116 外部学習データ取得部
Claims (12)
- プロセッサと、記憶装置と、を有するデータ仲介装置であって、
前記記憶装置は、
仲介の対象である複数のデータセットの各々の概要及び利用条件の少なくともいずれかを示す1以上の項目のメタデータを含むデータカタログと、前記各データセットの分野を示す情報と、前記各データセットの利用者が属する分野を示す情報と、を保持し、
前記各データセットの利用履歴を保持し、
前記プロセッサは、
前記利用履歴に基づいて、前記各データセットの利用履歴のうち、前記各データセットの分野と同一の分野に属する利用者に関するものに基づく第1の評価値と、前記各データセットの分野と異なる分野に属する利用者に関するものに基づく第2の評価値とを、それぞれが異なる重みを持つように計算し、前記第1の評価値と前記第2の評価値とを合成することによって、前記各データカタログの品質の高さを示す評価値を計算し、
前記評価値に基づいて、前記データカタログに含まれるいずれかの項目の前記メタデータの値を、他の項目の前記メタデータの値及び前記各データセットの少なくともいずれかから推論する推論モデルを生成することを特徴とするデータ仲介装置。 - 請求項1に記載のデータ仲介装置であって、
前記第2の評価値の重みが前記第1の評価値の重みより大きいことを特徴とするデータ仲介装置。 - プロセッサと、記憶装置と、を有するデータ仲介装置であって、
前記記憶装置は、
仲介の対象である複数のデータセットの各々の概要及び利用条件の少なくともいずれかを示す1以上の項目のメタデータを含むデータカタログを保持し、
前記各データセットの利用履歴を保持し、
前記プロセッサは、
前記利用履歴に基づいて、前記各データカタログの品質の高さを示す評価値を計算し、
前記評価値に基づいて、前記データカタログに含まれるいずれかの項目の前記メタデータの値を、他の項目の前記メタデータの値及び前記各データセットの少なくともいずれかから推論する推論モデルを生成し、
前記評価値は、前記データセットの利用者によって入力された、前記データセットに対応する前記データカタログの品質の評価を含むことを特徴とするデータ仲介装置。 - 請求項1又は3に記載のデータ仲介装置であって、
ネットワークに接続される通信装置をさらに有し、
前記プロセッサは、前記記憶装置に保持された前記データカタログと、前記通信装置を介して取得したデータカタログと、を含む学習データを使用することによって、前記推論モデルを生成することを特徴とするデータ仲介装置。 - 請求項1又は3に記載のデータ仲介装置であって、
前記プロセッサは、
生成した前記推論モデルを使用して、前記記憶装置に保持されている前記データカタログに含まれる前記メタデータの値を推論し、
推論された前記メタデータの値が前記記憶装置に保持されている前記データカタログに含まれていない場合、前記推論されたメタデータの値を出力し、
前記推論されたメタデータの値を前記データカタログに追加する指示が入力された場合、前記推論されたメタデータの値を前記データカタログに追加することを特徴とするデータ仲介装置。 - 請求項5に記載のデータ仲介装置であって、
前記プロセッサは、定期的に、又は、前回の前記推論モデルの生成の後に前記記憶装置に保持された前記データカタログの量に所定の変化があった場合に、前記推論モデルを生成することを特徴とするデータ仲介装置。 - 請求項1又は3に記載のデータ仲介装置であって、
前記プロセッサは、前記評価値に基づいて品質が高いと判定される前記データカタログを選別し、前記選別されたデータカタログ及びそれに対応するデータセットの少なくとも一部を学習データとして使用することによって、前記推論モデルを生成することを特徴とするデータ仲介装置。 - 請求項7に記載のデータ仲介装置であって、
前記プロセッサは、前記選別されたデータカタログに含まれる前記メタデータの値の出現率が、選別される前の全てのデータカタログに含まれる前記メタデータの値の出現率に近づくように、前記データカタログを選別することを特徴とするデータ仲介装置。 - 請求項7に記載のデータ仲介装置であって、
前記プロセッサは、選別された前記データカタログ及びそれに対応するデータセットを、前記推論の対象のメタデータが付与された教師あり学習データとして使用し、選別されなかった前記データカタログ及びそれに対応するデータセットを、前記推論の対象のメタデータが付与されていない教師なし学習データとして使用して、半教師あり学習を行うことによって、前記推論モデルを生成することを特徴とするデータ仲介装置。 - 請求項1又は3に記載のデータ仲介装置であって、
前記プロセッサは、前記評価値を説明変数として含む学習データを使用することによって、前記推論モデルを生成することを特徴とするデータ仲介装置。 - プロセッサと、記憶装置と、を有する計算機システムが実行するデータ仲介方法であって、
前記記憶装置は、
仲介の対象である複数のデータセットの各々の概要及び利用条件の少なくともいずれかを示す1以上の項目のメタデータを含むデータカタログと、前記各データセットの分野を示す情報と、前記各データセットの利用者が属する分野を示す情報と、を保持し、
前記各データセットの利用履歴を保持し、
前記データ仲介方法は、
前記プロセッサが、前記利用履歴に基づいて、前記各データセットの利用履歴のうち、前記各データセットの分野と同一の分野に属する利用者に関するものに基づく第1の評価値と、前記各データセットの分野と異なる分野に属する利用者に関するものに基づく第2の評価値とを、それぞれが異なる重みを持つように計算し、前記第1の評価値と前記第2の評価値とを合成することによって、前記各データカタログの品質の高さを示す評価値を計算する手順と、
前記プロセッサが、前記評価値に基づいて、前記データカタログに含まれるいずれかの項目の前記メタデータの値を、他の項目の前記メタデータの値及び前記各データセットの少なくともいずれかから推論する推論モデルを生成する手順と、を含むことを特徴とするデータ仲介方法。 - プロセッサと、記憶装置と、を有する計算機システムが実行するデータ仲介方法であって、
前記記憶装置は、
仲介の対象である複数のデータセットの各々の概要及び利用条件の少なくともいずれかを示す1以上の項目のメタデータを含むデータカタログを保持し、
前記各データセットの利用履歴を保持し、
前記データ仲介方法は、
前記プロセッサが、前記利用履歴に基づいて、前記各データカタログの品質の高さを示す評価値を計算する手順と、
前記プロセッサが、前記評価値に基づいて、前記データカタログに含まれるいずれかの項目の前記メタデータの値を、他の項目の前記メタデータの値及び前記各データセットの少なくともいずれかから推論する推論モデルを生成する手順と、を含み、
前記評価値は、前記データセットの利用者によって入力された、前記データセットに対応する前記データカタログの品質の評価を含むことを特徴とするデータ仲介方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019167132A JP7261710B2 (ja) | 2019-09-13 | 2019-09-13 | データ仲介装置およびデータ仲介方法 |
SG10202007475XA SG10202007475XA (en) | 2019-09-13 | 2020-08-05 | Data mediation apparatus and data mediation method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019167132A JP7261710B2 (ja) | 2019-09-13 | 2019-09-13 | データ仲介装置およびデータ仲介方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021043859A JP2021043859A (ja) | 2021-03-18 |
JP7261710B2 true JP7261710B2 (ja) | 2023-04-20 |
Family
ID=74862397
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019167132A Active JP7261710B2 (ja) | 2019-09-13 | 2019-09-13 | データ仲介装置およびデータ仲介方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7261710B2 (ja) |
SG (1) | SG10202007475XA (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010067177A (ja) | 2008-09-12 | 2010-03-25 | Fujitsu Ltd | 支援プログラム、支援装置および支援方法 |
JP2016146039A (ja) | 2015-02-06 | 2016-08-12 | 株式会社Jsol | 情報処理装置、プログラム及び情報処理方法 |
US20170372232A1 (en) | 2016-06-27 | 2017-12-28 | Purepredictive, Inc. | Data quality detection and compensation for machine learning |
WO2018100679A1 (ja) | 2016-11-30 | 2018-06-07 | 株式会社オプティム | コンピュータシステム、教師データ取引方法及びプログラム |
JP2019148243A (ja) | 2018-02-28 | 2019-09-05 | トヨタ自動車株式会社 | 内燃機関の制御装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08202553A (ja) * | 1995-01-25 | 1996-08-09 | Nippon Telegr & Teleph Corp <Ntt> | 知識学習システム |
-
2019
- 2019-09-13 JP JP2019167132A patent/JP7261710B2/ja active Active
-
2020
- 2020-08-05 SG SG10202007475XA patent/SG10202007475XA/en unknown
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010067177A (ja) | 2008-09-12 | 2010-03-25 | Fujitsu Ltd | 支援プログラム、支援装置および支援方法 |
JP2016146039A (ja) | 2015-02-06 | 2016-08-12 | 株式会社Jsol | 情報処理装置、プログラム及び情報処理方法 |
US20170372232A1 (en) | 2016-06-27 | 2017-12-28 | Purepredictive, Inc. | Data quality detection and compensation for machine learning |
WO2018100679A1 (ja) | 2016-11-30 | 2018-06-07 | 株式会社オプティム | コンピュータシステム、教師データ取引方法及びプログラム |
JP2019148243A (ja) | 2018-02-28 | 2019-09-05 | トヨタ自動車株式会社 | 内燃機関の制御装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2021043859A (ja) | 2021-03-18 |
SG10202007475XA (en) | 2021-04-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10963541B2 (en) | Systems, methods, and apparatuses for implementing a related command with a predictive query interface | |
JP4911536B2 (ja) | 地域情報検索装置、地域情報検索装置の制御方法、地域情報検索システム、および地域情報検索システムの制御方法 | |
JP6061309B2 (ja) | 関連商品情報を表示する方法及びシステム | |
KR20190006383A (ko) | 사용자 행동 순서에 기반한 구매 확률 예측 방법 및 이를 위한 장치 | |
US9165075B2 (en) | Managing user ratings in a web services environment | |
US11379523B2 (en) | Method and apparatus for implementing a search index generator | |
Hao et al. | Mobile cloud services recommendation: a soft set-based approach | |
Yan et al. | A practical deep online ranking system in e-commerce recommendation | |
Huang et al. | Multi-scale interest dynamic hierarchical transformer for sequential recommendation | |
Dong et al. | Improving sequential recommendation with attribute-augmented graph neural networks | |
JP5841323B2 (ja) | 推薦アイテム検索サーバ、および推薦アイテム検索プログラム | |
JP7261710B2 (ja) | データ仲介装置およびデータ仲介方法 | |
KR100361773B1 (ko) | 인터넷 웹사이트 검색엔진의 구축방법 | |
KR20220125443A (ko) | 마케팅 데이터베이스를 포함한 온라인 쇼핑몰 중개 시스템 | |
JP7217096B2 (ja) | 広告オプション割当装置、広告オプション割当プログラム、広告オプション割当方法、及び情報提供システム | |
Kim et al. | Music recommendation with temporal dynamics in multiple types of user feedback | |
Gwadabe et al. | SimGNN: simplified graph neural networks for session-based recommendation | |
JP6327950B2 (ja) | 予測値演算装置、予測値演算方法および予測値演算プログラム | |
KR20050099157A (ko) | 온라인 쇼핑몰 중개 방법 및 온라인 쇼핑몰 중개 시스템 | |
KR100727518B1 (ko) | 상품정보 데이터베이스를 이용한 서브도메인 쇼핑몰 시스템 | |
KR20180044028A (ko) | 단어 정보 제공 방법 및 시스템 | |
KR20220109046A (ko) | 온라인 쇼핑몰 중개 방법 및 중개 시스템 | |
CN113591986A (zh) | 用于生成推荐模型的对象权值的方法和个性化推荐方法 | |
JP2003337829A (ja) | 端末装置、サーバ、および、プログラム | |
CN117455563A (zh) | 资源配置方案推荐方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220204 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221223 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230117 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230314 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230404 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230410 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7261710 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |