JP2018092502A - プログラム及びシステム - Google Patents
プログラム及びシステム Download PDFInfo
- Publication number
- JP2018092502A JP2018092502A JP2016237259A JP2016237259A JP2018092502A JP 2018092502 A JP2018092502 A JP 2018092502A JP 2016237259 A JP2016237259 A JP 2016237259A JP 2016237259 A JP2016237259 A JP 2016237259A JP 2018092502 A JP2018092502 A JP 2018092502A
- Authority
- JP
- Japan
- Prior art keywords
- data
- image data
- input
- image
- program
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000015654 memory Effects 0.000 claims abstract description 44
- 238000013528 artificial neural network Methods 0.000 claims abstract description 39
- 238000012545 processing Methods 0.000 claims abstract description 21
- 238000000034 method Methods 0.000 claims description 87
- 230000008569 process Effects 0.000 claims description 80
- 238000004891 communication Methods 0.000 claims description 42
- 238000012937 correction Methods 0.000 claims description 13
- 230000005540 biological transmission Effects 0.000 claims description 9
- 238000013459 approach Methods 0.000 claims description 6
- 230000004044 response Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 8
- 230000004913 activation Effects 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 3
- 238000007667 floating Methods 0.000 description 3
- 238000007639 printing Methods 0.000 description 2
- 238000000547 structure data Methods 0.000 description 2
- 241001270131 Agaricus moelleri Species 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 238000007493 shaping process Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Landscapes
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
Description
中間値H2=F{(I1×W12)+(I2×W22)+(I3×W32)+・・・}(式2)
出力値O2=G{(H1×X12)+(H2×X22)+・・・} (式4)
出力値O3=G{(H1×X13)+(H2×X23)+・・・} (式5)
図3〜図5を参照して、本実施形態に係るシステム100の動作を説明する。
上記の実施形態によれば、カメラ52で実際に撮影された画像を示す入力画像データと、携帯端末50のユーザが台形指定画面上で指定した特徴点の指定位置を示す教師データとを用いて、特徴点の位置を検出する処理をディープニューラルネットワークに学習させることができる。その結果、学習のために生成されたデータで学習させる場合と比較して、ディープニューラルネットワークを効率的に成長させることができる。
50・・・携帯端末
52・・・カメラ
53・・・ディスプレイ
54・・・入力I/F
55,85・・・通信I/F
61,91・・・CPU
62,92・・・メモリ
65・・・端末プログラム
80・・・サーバ
95・・・サーバプログラム
Claims (14)
- メモリと、カメラとに接続されたコンピュータによって読み取り可能なプログラムであって、
該プログラムは、入力画像データ及び教師データを取得する取得処理を前記コンピュータに実行させ、前記入力画像データは、前記カメラで撮影された画像を示し、前記教師データは、前記入力画像データで示される画像内で前記カメラのユーザが指定した特徴点の指定位置を示し、
該プログラムは、
前記メモリに記憶されたDNNデータで示されるディープニューラルネットワークに前記入力画像データを入力することによって、当該入力画像データで示される画像に含まれる前記特徴点の推定位置を示す出力データを生成する生成処理と、
前記出力データで示される前記推定位置が前記教師データで示される前記指定位置に近づくように、前記DNNデータを更新する更新処理とを前記コンピュータに繰り返し実行させるプログラム。 - 前記教師データは、第1方向及び前記第1方向に直交する第2方向の画素数が前記入力画像データで示される画像と同一であり、且つ前記指定位置の画素に第1画素値が設定された画像を示し、
前記出力データは、前記第1方向及び前記第2方向の画素数が前記入力画像データで示される画像と同一であり、且つ前記推定位置の画素に第2画素値が設定された画像を示し、
該プログラムは、前記更新処理において、前記出力データの前記第2画素値の位置が前記教師データの前記第1画素値の位置に近づくように、前記DNNデータを更新する請求項1に記載のプログラム。 - 前記DNNデータは、各々が複数のノードで構成された入力層、中間層、及び出力層を含み、前記入力画像データの各画素の画素値が前記入力層の各ノードに入力されることによって、前記出力データの各画素の画素値が前記出力層の各ノードから出力される前記ディープニューラルネットワークを示し、
該プログラムは、前記生成処理において、前記カメラで撮影された画像が前記入力層のノード数に一致する画素数にリサイズされた前記入力画像データを用いて、前記出力データを生成する請求項2に記載のプログラム。 - 該プログラムは、前記生成処理において、前記カメラで撮影された画像の色調が特定階調に減じられた前記入力画像データを用いて、前記出力データを生成する請求項2又は3に記載のプログラム。
- 該プログラムは、前記生成処理において、前記カメラによって撮影された長方形の画像が正方形に変換された前記入力画像データを用いて、前記出力データを生成する請求項2から4のいずれかに記載のプログラム。
- 前記DNNデータは、各々が複数のノードで構成された入力層、中間層、及び出力層を含み、且つ各層を構成する複数の前記ノードが隣接する層の全ての前記ノードに接続された全結合型の前記ディープニューラルネットワークを示し、
該プログラムは、繰り返し実行する前記生成処理それぞれにおいて、前記中間層を構成する複数の前記ノードのうちの異なる一部を省略する請求項1から5のいずれかに記載のプログラム。 - 該プログラムは、前記更新処理において、誤差逆伝搬法を用いて前記DNNデータを更新する請求項1から6のいずれかに記載のプログラム。
- 前記コンピュータは、通信インタフェースを備えており、
前記カメラは、前記通信インタフェースを通じて通信可能な携帯端末に搭載されており、
該プログラムは、
前記取得処理において、前記通信インタフェースを通じて前記携帯端末から前記入力画像データ及び前記教師データを受信し、
繰り返し実行させた前記更新処理で更新した前記DNNデータを、前記通信インタフェースを通じて前記携帯端末に送信する送信処理を前記コンピュータに実行させる請求項1から7のいずれかに記載のプログラム。 - 該プログラムは、
前記取得処理において、前記入力画像データ及び前記教師データのセットを複数の前記携帯端末それぞれから受信し、
前記入力画像データ及び前記教師データの複数のセットそれぞれを用いて、同一の前記DNNデータに対する前記生成処理及び前記更新処理を前記コンピュータに実行させ、
前記送信処理において、複数の前記携帯端末それぞれに同一の前記DNNデータを送信する請求項8に記載のプログラム。 - 該プログラムは、
前記取得処理において、第1携帯端末及び第2携帯端末それぞれから前記入力画像データ及び前記教師データを受信し、
前記第1携帯端末から受信した前記入力画像データ及び前記教師データを用いて、第1DNNデータに対する前記生成処理及び前記更新処理を前記コンピュータに実行させ、
前記第2携帯端末から受信した前記入力画像データ及び前記教師データを用いて、第2DNNデータに対する前記生成処理及び前記更新処理を前記コンピュータに実行させ、
前記送信処理において、前記第1携帯端末に前記第1DNNデータを送信し、前記第2携帯端末に前記第2DNNデータを送信する請求項8に記載のプログラム。 - カメラと、ディスプレイと、入力インタフェースと、通信インタフェースとを備える携帯端末によって読み取り可能なプログラムであって、
該プログラムは、
対象物を撮影した前記カメラが生成した撮影画像データを取得する取得処理と、
前記撮影画像データで示される撮影画像及び前記撮影画像に重ねられたガイド画像を、前記ディスプレイに表示させる表示処理と、
前記表示処理で表示させた前記撮影画像に含まれる特徴点に重なる位置に前記ガイド画像を移動させるユーザ操作を、前記入力インタフェースを通じて受け付ける受付処理と、
前記通信インタフェースを通じてサーバに入力画像データ及び教師データを送信する送信処理とを前記携帯端末に実行させ、前記入力画像データは、前記撮影画像データに対応するデータであり、前記教師データは、前記入力画像データで示される画像内において、前記受付処理で前記ガイド画像が重ねられた指定位置を示すプログラム。 - 該プログラムは、
前記通信インタフェースを通じてDNNデータを受信する受信処理と、
前記DNNデータで示されるディープニューラルネットワークに前記入力画像データを入力することによって、当該入力画像データで示される画像に含まれる前記特徴点の推定位置を示す出力データを生成する生成処理とを前記携帯端末に実行させ、前記DNNデータは、前記送信処理で送信した前記入力画像データ及び前記教師データを用いてディープラーニングされたデータであり、
該プログラムは、前記表示処理において、前記出力データで示される前記推定位置に対応する前記撮影画像上の位置に、前記ガイド画像を表示させる請求項11に記載のプログラム。 - 前記撮影画像は、長方形の前記対象物が斜めから撮影されたことによって台形に表された前記対象物を示す画像であり、
前記特徴点は、前記撮影画像上における前記対象物の4つの頂点の位置であり、
該プログラムは、
前記受付処理で指定された4つの頂点で囲まれた領域の画像を台形補正することによって、長方形の補正画像を示す補正画像データを生成する補正処理と、
前記補正画像データを出力する出力指示処理とを前記携帯端末に実行させる請求項11又は12に記載のプログラム。 - カメラ、ディスプレイ、入力インタフェース、第1通信インタフェース、及び第1コントローラを備える携帯端末と、メモリ、第2通信インタフェース、及び第2コントローラを備えるサーバとで構成されるシステムであって、
前記第1コントローラは、
対象物を撮影した前記カメラが生成した撮影画像データを取得する取得処理と、
前記撮影画像データで示される撮影画像及び前記撮影画像に重ねられたガイド画像を、前記ディスプレイに表示させる表示処理と、
前記表示処理で表示させた前記撮影画像に含まれる特徴点に重なる位置に、前記ガイド画像を移動させるユーザ操作を前記入力インタフェースを通じて受け付ける受付処理と、
前記第1通信インタフェースを通じて前記サーバに入力画像データ及び教師データを送信する送信処理とを実行し、前記入力画像データは、前記撮影画像データに対応するデータであり、前記教師データは、前記入力画像データで示される画像内において、前記受付処理で前記ガイド画像が重ねられた指定位置を示し、
前記第2コントローラは、
前記第2通信インタフェースを通じて前記携帯端末から前記入力画像データ及び前記教師データを受信する受信処理と、
前記メモリに記憶されたDNNデータで示されるディープニューラルネットワークに前記入力画像データを入力することによって、当該入力画像データで示される画像に含まれる前記特徴点の推定位置を示す出力データを生成する生成処理と、
前記出力データで示される前記推定位置が前記教師データで示される前記指定位置に近づくように、前記DNNデータを更新する更新処理とを繰り返し実行するシステム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016237259A JP6880687B2 (ja) | 2016-12-07 | 2016-12-07 | プログラム及びシステム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016237259A JP6880687B2 (ja) | 2016-12-07 | 2016-12-07 | プログラム及びシステム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018092502A true JP2018092502A (ja) | 2018-06-14 |
JP6880687B2 JP6880687B2 (ja) | 2021-06-02 |
Family
ID=62564729
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016237259A Active JP6880687B2 (ja) | 2016-12-07 | 2016-12-07 | プログラム及びシステム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6880687B2 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020190950A (ja) * | 2019-05-22 | 2020-11-26 | 東芝テック株式会社 | 情報処理装置、物品識別装置、及び物品識別システム |
CN113227711A (zh) * | 2018-12-04 | 2021-08-06 | 三菱电机株式会社 | 导航装置、导航参数计算方法及程序 |
WO2022044114A1 (ja) * | 2020-08-24 | 2022-03-03 | 卓也 生駒 | システム及び記録媒体 |
-
2016
- 2016-12-07 JP JP2016237259A patent/JP6880687B2/ja active Active
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113227711A (zh) * | 2018-12-04 | 2021-08-06 | 三菱电机株式会社 | 导航装置、导航参数计算方法及程序 |
JP2020190950A (ja) * | 2019-05-22 | 2020-11-26 | 東芝テック株式会社 | 情報処理装置、物品識別装置、及び物品識別システム |
WO2022044114A1 (ja) * | 2020-08-24 | 2022-03-03 | 卓也 生駒 | システム及び記録媒体 |
JP2022036858A (ja) * | 2020-08-24 | 2022-03-08 | 卓也 生駒 | システム及びプログラム |
JP7076509B2 (ja) | 2020-08-24 | 2022-05-27 | 卓也 生駒 | システム及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP6880687B2 (ja) | 2021-06-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102114377B1 (ko) | 전자 장치에 의해 촬영된 이미지들을 프리뷰하는 방법 및 이를 위한 전자 장치 | |
US20140368868A1 (en) | Method of printing web page by using mobile terminal and mobile terminal for performing the method | |
JP6880687B2 (ja) | プログラム及びシステム | |
US9323494B2 (en) | Image processing system, image processing apparatus, portable information terminal, computer-readable storage medium with enhanced display capabilities | |
JP6121564B2 (ja) | 情報処理装置、画像形成装置、及び情報処理方法 | |
JP2018207186A5 (ja) | ||
US10645246B2 (en) | Non-transitory computer-readable medium and portable device | |
JP2018088204A (ja) | 画像処理装置及びプログラム | |
JP2011166395A (ja) | 画像処理装置 | |
JP2015082148A (ja) | 携帯端末、画像処理装置、及びプログラム | |
JP6201599B2 (ja) | 情報処理装置、印刷システム及びプログラム | |
US9986111B2 (en) | Medium storing programs executable by terminal apparatus and terminal apparatus | |
JP6274186B2 (ja) | 画像形成装置、画像形成システム、及びプログラム | |
WO2014024281A1 (ja) | 電子機器、表示制御方法及びプログラム | |
JP5061656B2 (ja) | 画像情報送信装置および画像情報転送システム | |
JP2014199525A (ja) | コンピュータ装置及びプログラム | |
JP2018170653A (ja) | 画像形成装置及びプログラム | |
JP6973524B2 (ja) | プログラム | |
JP2016095620A (ja) | 表示装置、サーバ装置、表示システム及びその制御方法、並びに制御プログラム、記憶媒体 | |
JP6665575B2 (ja) | プログラム | |
JP5968926B2 (ja) | 情報処理装置及び情報処理プログラム | |
JP6260177B2 (ja) | 画像処理システム、画像処理方法、及び画像処理プログラム | |
JP2009237660A (ja) | 画像処理装置、プリンタ、画像処理方法、画像処理のためのプログラム | |
JP6798243B2 (ja) | プログラム及び情報処理端末 | |
JP7002826B2 (ja) | データ処理装置、情報処理装置、画像形成装置、データ処理方法、及びプリンタドライバ |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20180219 |
|
RD05 | Notification of revocation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7425 Effective date: 20180219 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191112 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201214 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210126 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210324 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210406 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210419 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6880687 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |