JP2019029856A - 無線中継器選択装置及び機械学習装置 - Google Patents
無線中継器選択装置及び機械学習装置 Download PDFInfo
- Publication number
- JP2019029856A JP2019029856A JP2017148265A JP2017148265A JP2019029856A JP 2019029856 A JP2019029856 A JP 2019029856A JP 2017148265 A JP2017148265 A JP 2017148265A JP 2017148265 A JP2017148265 A JP 2017148265A JP 2019029856 A JP2019029856 A JP 2019029856A
- Authority
- JP
- Japan
- Prior art keywords
- multiplexed
- state
- learning
- communication path
- communication
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B7/00—Radio transmission systems, i.e. using radiation field
- H04B7/14—Relay systems
- H04B7/15—Active relay systems
- H04B7/155—Ground-based stations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B7/00—Radio transmission systems, i.e. using radiation field
- H04B7/14—Relay systems
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/04—Programme control other than numerical control, i.e. in sequence controllers or logic controllers
- G05B19/042—Programme control other than numerical control, i.e. in sequence controllers or logic controllers using digital processors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Software Systems (AREA)
- General Physics & Mathematics (AREA)
- Artificial Intelligence (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Mathematical Physics (AREA)
- Computing Systems (AREA)
- Medical Informatics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Health & Medical Sciences (AREA)
- Automation & Control Theory (AREA)
- General Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Mobile Radio Communication Systems (AREA)
- Numerical Control (AREA)
- Manipulator (AREA)
- Selective Calling Equipment (AREA)
Abstract
Description
図1は第1の実施形態による無線中継器選択装置と該無線中継器選択装置によって制御される工作機械の要部を示す概略的なハードウェア構成図である。無線中継器選択装置1は、例えば工場などの現場に配置される複数のロボット(図示せず)を制御する制御装置(図示せず)や数値制御工作機械(図示せず)、無線中継器、無線教示操作盤等の管理対象機器を管理する上位装置(ホストコンピュータ、セルコントローラ等)として実装することができる。本実施形態による無線中継器選択装置1が備えるCPU11は、無線中継器選択装置1を全体的に制御するプロセッサである。CPU11は、ROM12に格納されたシステム・プログラムをバス20を介して読み出し、該システム・プログラムに従って無線中継器選択装置1全体を制御する。RAM13には一時的な計算データや表示データが一時的に格納される。
なお、三層以上の層を為すニューラルネットワークを用いた、いわゆるディープラーニングの手法を用いることも可能である。
3 状態データ取得部
11 CPU
12 ROM
13 RAM
14 不揮発性メモリ
15 有線通信インタフェース
16 無線通信インタフェース
20 バス
21 インタフェース
100 機械学習装置
101 プロセッサ
102 ROM
103 RAM
104 不揮発性メモリ
106 状態観測部
108 判定データ取得部
110 学習部
112 報酬計算部
114 価値関数更新部
120 機械学習装置
122 意思決定部
Claims (8)
- 管理対象機器の間での通信に用いられる多重化通信路を構築乃至変更する無線中継器選択装置であって、
前記多重化通信路の構築状況を学習する機械学習装置を備え、
前記機械学習装置は、
前記多重化通信路の構築状況を示す多重化通信路データ、前記管理対象機器の多重化無線通信の状態を示す多重化無線通信状態データを、環境の現在状態を表す状態変数として観測する状態観測部と、
前記多重化通信路の構築状況の適否判定結果を示す判定データを取得する判定データ取得部と、
前記状態変数と前記判定データとを用いて、前記多重化通信路の構築状況と、前記多重化無線通信状態データとを関連付けて学習する学習部と、
を備える無線中継器選択装置。 - 前記状態変数に、前記管理対象機器の位置を示す位置情報データを含み、
前記学習部は、前記多重化通信路の構築状況と、前記多重化無線通信状態データ及び位置情報データを関連付けて学習する、
請求項1に記載の無線中継器選択装置。 - 前記判定データには、前記多重化通信路の構築状況の適否判定結果に加えて、前記管理対象機器の間の通信データの時間遅延の適否判定結果を含む、
請求項1または2に記載の無線中継器選択装置。 - 前記学習部は、
前記適否判定結果に関連する報酬を求める報酬計算部と、
前記報酬を用いて、前記各管理対象機器の多重化無線通信の状態に対する前記多重化通信路の構築状況の価値を表す関数を更新する価値関数更新部とを備える、
請求項1に記載の無線中継器選択装置。 - 前記学習部は、前記状態変数と前記判定データとを多層構造で演算する、
請求項1〜4のいずれか1つに記載の無線中継器選択装置。 - 前記学習部による学習結果に基づいて、前記多重化通信路の構築状況に基づく指令値を出力する意思決定部を更に備える、
請求項1〜5のいずれか1つに記載の無線中継器選択装置。 - 前記機械学習装置は、クラウドサーバに存在する、
請求項1〜6のいずれか1つに記載の無線中継器選択装置。 - 管理対象機器の間での通信に用いられる多重化通信路の構築状況を学習する機械学習装置であって、
前記多重化通信路の構築状況を示す多重化通信路データ、前記管理対象機器の多重化無線通信の状態を示す多重化無線通信状態データを、環境の現在状態を表す状態変数として観測する状態観測部と、
前記多重化通信路の構築状況の適否判定結果を示す判定データを取得する判定データ取得部と、
前記状態変数と前記判定データとを用いて、前記多重化通信路の構築状況と、前記多重化無線通信状態データとを関連付けて学習する学習部と、
を備える機械学習装置。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017148265A JP6640797B2 (ja) | 2017-07-31 | 2017-07-31 | 無線中継器選択装置及び機械学習装置 |
CN201810847568.5A CN109324536B (zh) | 2017-07-31 | 2018-07-27 | 无线中继器选择装置以及机器学习装置 |
US16/048,674 US10727930B2 (en) | 2017-07-31 | 2018-07-30 | Radio repeater selection apparatus and machine learning device |
DE102018006044.7A DE102018006044A1 (de) | 2017-07-31 | 2018-07-31 | Funk-repeater-auswahleinrichtung und maschinelle lernvorrichtung |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017148265A JP6640797B2 (ja) | 2017-07-31 | 2017-07-31 | 無線中継器選択装置及び機械学習装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019029856A true JP2019029856A (ja) | 2019-02-21 |
JP6640797B2 JP6640797B2 (ja) | 2020-02-05 |
Family
ID=65004358
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017148265A Active JP6640797B2 (ja) | 2017-07-31 | 2017-07-31 | 無線中継器選択装置及び機械学習装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10727930B2 (ja) |
JP (1) | JP6640797B2 (ja) |
CN (1) | CN109324536B (ja) |
DE (1) | DE102018006044A1 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020183864A1 (ja) * | 2019-03-13 | 2020-09-17 | 株式会社明電舎 | 自動操縦ロボットを制御する操作推論学習モデルの学習システム及び学習方法 |
JP2020156053A (ja) * | 2019-03-22 | 2020-09-24 | Kddi株式会社 | ネットワーク障害復旧システム、コンピュータプログラム及びネットワーク障害復旧方法 |
WO2021064770A1 (ja) * | 2019-09-30 | 2021-04-08 | 日本電気株式会社 | システム、方法及び制御装置 |
WO2021157515A1 (ja) * | 2020-02-05 | 2021-08-12 | ファナック株式会社 | 機械学習装置、コンピュータ装置、制御システム、及び機械学習方法 |
JP2021132327A (ja) * | 2020-02-20 | 2021-09-09 | 国立大学法人京都大学 | 制御装置、それを備えた基地局、コンピュータに実行させるためのプログラムおよびプログラムを記録したコンピュータ読み取り可能な記録媒体 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020142362A (ja) * | 2019-02-28 | 2020-09-10 | キヤノン株式会社 | ロボット装置、ロボット装置の制御方法、ロボット装置を用いた物品の製造方法、通信装置、通信方法、制御プログラム及び記録媒体 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008278148A (ja) * | 2007-04-27 | 2008-11-13 | Nec Corp | 通信端末、通信経路制御方法、及びプログラム |
JP2013026980A (ja) * | 2011-07-25 | 2013-02-04 | Fujitsu Ltd | パラメータ設定装置、コンピュータプログラム及びパラメータ設定方法 |
JP2015091041A (ja) * | 2013-11-06 | 2015-05-11 | 関西電力株式会社 | 通信装置、無線ネットワークシステム、無線ネットワーク制御方法、及び、無線ネットワーク制御プログラム |
US20150319077A1 (en) * | 2014-05-02 | 2015-11-05 | Cisco Technology, Inc. | Distributed predictive routing using delay predictability measurements |
WO2016072838A1 (en) * | 2014-11-04 | 2016-05-12 | Mimos Berhad | A system and method for next hop selection in a wireless sensor network |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8291457B2 (en) * | 2001-05-24 | 2012-10-16 | Vixs Systems, Inc. | Channel selection in a multimedia system |
US20100222925A1 (en) * | 2004-12-03 | 2010-09-02 | Takashi Anezaki | Robot control apparatus |
JP2007233817A (ja) | 2006-03-02 | 2007-09-13 | Yaskawa Electric Corp | 教示装置、コントローラ、自動機械システム、およびその無線通信方法 |
US7715864B2 (en) * | 2006-09-13 | 2010-05-11 | Telefonaktiebolaget L M Ericsson (Publ) | Arrangement and method for contention-based multi-access in a wireless communication system |
JP5394136B2 (ja) | 2009-06-16 | 2014-01-22 | ファナック株式会社 | 無線教示操作盤およびロボット制御システム |
ES2836487T3 (es) * | 2011-12-06 | 2021-06-25 | E Vision Smart Optics Inc | Sistemas, dispositivos y/o métodos para proporcionar imágenes |
CN102711285B (zh) * | 2012-04-28 | 2014-10-22 | 西南科技大学 | 一种无线自组织网络表驱动跨层路由学习方法 |
EP2786618B1 (en) * | 2012-08-21 | 2016-02-10 | Unify GmbH & Co. KG | Method and apparatus for selecting an access point based on direction of movement |
WO2014105814A1 (en) * | 2012-12-28 | 2014-07-03 | E-Vision Smart Optics Inc. | Double-layer electrode for electro-optic liquid crystal lens |
JP2015201728A (ja) | 2014-04-07 | 2015-11-12 | 株式会社日立製作所 | 機器制御システム及び機器制御方法 |
US10084698B2 (en) * | 2015-03-26 | 2018-09-25 | Intel Corporation | Selectively enabling first and second communication paths using a repeater |
-
2017
- 2017-07-31 JP JP2017148265A patent/JP6640797B2/ja active Active
-
2018
- 2018-07-27 CN CN201810847568.5A patent/CN109324536B/zh active Active
- 2018-07-30 US US16/048,674 patent/US10727930B2/en active Active
- 2018-07-31 DE DE102018006044.7A patent/DE102018006044A1/de active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008278148A (ja) * | 2007-04-27 | 2008-11-13 | Nec Corp | 通信端末、通信経路制御方法、及びプログラム |
JP2013026980A (ja) * | 2011-07-25 | 2013-02-04 | Fujitsu Ltd | パラメータ設定装置、コンピュータプログラム及びパラメータ設定方法 |
JP2015091041A (ja) * | 2013-11-06 | 2015-05-11 | 関西電力株式会社 | 通信装置、無線ネットワークシステム、無線ネットワーク制御方法、及び、無線ネットワーク制御プログラム |
US20150319077A1 (en) * | 2014-05-02 | 2015-11-05 | Cisco Technology, Inc. | Distributed predictive routing using delay predictability measurements |
WO2016072838A1 (en) * | 2014-11-04 | 2016-05-12 | Mimos Berhad | A system and method for next hop selection in a wireless sensor network |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020183864A1 (ja) * | 2019-03-13 | 2020-09-17 | 株式会社明電舎 | 自動操縦ロボットを制御する操作推論学習モデルの学習システム及び学習方法 |
JP2020156053A (ja) * | 2019-03-22 | 2020-09-24 | Kddi株式会社 | ネットワーク障害復旧システム、コンピュータプログラム及びネットワーク障害復旧方法 |
JP7050023B2 (ja) | 2019-03-22 | 2022-04-07 | Kddi株式会社 | ネットワーク障害復旧システム、コンピュータプログラム及びネットワーク障害復旧方法 |
WO2021064770A1 (ja) * | 2019-09-30 | 2021-04-08 | 日本電気株式会社 | システム、方法及び制御装置 |
JPWO2021064770A1 (ja) * | 2019-09-30 | 2021-04-08 | ||
WO2021157515A1 (ja) * | 2020-02-05 | 2021-08-12 | ファナック株式会社 | 機械学習装置、コンピュータ装置、制御システム、及び機械学習方法 |
JPWO2021157515A1 (ja) * | 2020-02-05 | 2021-08-12 | ||
JP7364699B2 (ja) | 2020-02-05 | 2023-10-18 | ファナック株式会社 | 機械学習装置、コンピュータ装置、制御システム、及び機械学習方法 |
JP2021132327A (ja) * | 2020-02-20 | 2021-09-09 | 国立大学法人京都大学 | 制御装置、それを備えた基地局、コンピュータに実行させるためのプログラムおよびプログラムを記録したコンピュータ読み取り可能な記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
DE102018006044A1 (de) | 2019-01-31 |
CN109324536A (zh) | 2019-02-12 |
JP6640797B2 (ja) | 2020-02-05 |
US20190036594A1 (en) | 2019-01-31 |
US10727930B2 (en) | 2020-07-28 |
CN109324536B (zh) | 2021-04-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6640797B2 (ja) | 無線中継器選択装置及び機械学習装置 | |
JP2018202564A (ja) | 制御装置及び機械学習装置 | |
JP6564426B2 (ja) | 部品供給装置及び機械学習装置 | |
JP6577522B2 (ja) | 制御装置及び機械学習装置 | |
CN114296408A (zh) | 一种数字孪生环境中的生产制造车间人工智能优化算法模型系统及其算法 | |
JP6813532B2 (ja) | シミュレーション装置 | |
Wang et al. | Human-robot mutual trust in (semi) autonomous underwater robots | |
JP2019185125A (ja) | 制御装置及び機械学習装置 | |
JP2019030941A (ja) | 制御装置及び学習装置 | |
Unhelkar et al. | Contact: Deciding to communicate during time-critical collaborative tasks in unknown, deterministic domains | |
Eqtami et al. | A self-triggered model predictive control framework for the cooperation of distributed nonholonomic agents | |
JP6781191B2 (ja) | プログラマブルコントローラ及び機械学習装置 | |
JP2020529664A (ja) | 組み合わせ制御システム、組み合わせ制御方法、および、組み合わせ制御プログラム | |
JP2019136818A (ja) | 制御装置及び機械学習装置 | |
Wang et al. | Mutual trust based scheduling for (semi) autonomous multi-agent systems | |
Zhang et al. | A digital twin-driven flexible scheduling method in a human–machine collaborative workshop based on hierarchical reinforcement learning | |
WO2021039093A1 (ja) | 無人機協調システム、無人機協調処理方法及びプログラム | |
Spencer et al. | Trust-based human-robot interaction for multi-robot symbolic motion planning | |
EP4101601A1 (de) | Redundanz-steuerung in einem verteilten automatisierungssystem | |
Mekid et al. | Foresight formulation in innovative production, automation and control systems | |
Babaei et al. | 5G for Low-latency Human-Robot Collaborations; Challenges and Solutions | |
JP2010066896A (ja) | 遠隔監視システム及び方法 | |
Saeidi | Trust-based control of (semi) autonomous mobile robotic systems | |
JP2019136807A (ja) | 制御装置及び機械学習装置 | |
EP4060429A1 (en) | Controlling a manufacturing schedule by a reinforcement learning trained agent |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180918 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190822 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190910 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191107 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191203 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191226 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6640797 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |