JP2024036017A - 情報端末、文字認識方法及び文字認識プログラム - Google Patents
情報端末、文字認識方法及び文字認識プログラム Download PDFInfo
- Publication number
- JP2024036017A JP2024036017A JP2022140707A JP2022140707A JP2024036017A JP 2024036017 A JP2024036017 A JP 2024036017A JP 2022140707 A JP2022140707 A JP 2022140707A JP 2022140707 A JP2022140707 A JP 2022140707A JP 2024036017 A JP2024036017 A JP 2024036017A
- Authority
- JP
- Japan
- Prior art keywords
- character recognition
- information terminal
- frame image
- recognition result
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 34
- 230000004044 response Effects 0.000 claims description 4
- 238000012545 processing Methods 0.000 abstract description 55
- 238000012937 correction Methods 0.000 description 26
- 238000012423 maintenance Methods 0.000 description 25
- 238000010586 diagram Methods 0.000 description 19
- 238000004519 manufacturing process Methods 0.000 description 19
- 238000000605 extraction Methods 0.000 description 15
- 238000003384 imaging method Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 239000003507 refrigerant Substances 0.000 description 3
- 238000004378 air conditioning Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 238000001816 cooling Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000012015 optical character recognition Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/12—Detection or correction of errors, e.g. by rescanning the pattern
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Character Discrimination (AREA)
Abstract
Description
前記制御部は、
撮影されたフレーム画像を取得する処理と、前記フレーム画像を文字認識することで得られる文字認識結果を記憶部に記憶する処理とを繰り返し、
前記情報端末に対する所定の操作を受け付けた場合に、文字認識結果を確定する。
前記撮影されたフレーム画像をリアルタイムに表示する際に、前記文字認識することで得られる文字認識結果を重畳して表示する。
前記制御部は、
表示する前記フレーム画像を第1の時間間隔で更新し、
重畳して表示する文字認識結果を前記第1の時間間隔よりも長い第2の時間間隔で更新する。
前記制御部は、
前記撮影されたフレーム画像に文字認識結果として記憶する項目が複数含まれる場合、前記文字認識することで得られる各項目の文字認識結果を、項目単位で記憶部に記憶し、
前記情報端末に対する所定の操作を受け付けた場合に、項目単位で文字認識結果を確定する。
前記制御部は、
確定した前記文字認識結果を表示部に表示したことに応じて、表示した前記文字認識結果が修正された場合に、修正された前記文字認識結果を記憶部に記憶する。
前記制御部は、
機器の銘板が撮影されたフレーム画像を文字認識することで、文字認識結果として、機種名及び製造番号を得る。
前記制御部は、
前記文字認識することで得られる文字認識結果を第1記憶部に記憶し、
前記情報端末に対する所定の操作を受け付けたことで確定した文字認識結果を第2記憶部に記憶する。
前記制御部は、
前記文字認識することで文字認識結果が得られるごとに、前記第1記憶部に記憶されている文字認識結果を更新する。
前記文字認識結果は、前記文字認識することで得られる結果のうち、前記制御部が保存条件を満たすと判定した結果である。
前記制御部は、
前記文字認識することで所定の項目について得られる結果が、予め定められた文字列であった場合に、前記保存条件を満たすと判定し、前記所定の項目について得られる結果を、前記所定の項目の文字認識結果として前記記憶部に記憶する。
前記制御部は、
前記第1記憶部に記憶された文字認識結果が得られたフレーム画像を、前記文字認識結果と関連付けて前記第1記憶部に記憶し、
前記第2記憶部に記憶された文字認識結果が得られたフレーム画像を、前記文字認識結果と関連付けて前記第2記憶部に記憶する。
情報端末の制御部が、
撮影されたフレーム画像を取得する処理と、前記フレーム画像を文字認識することで得られる文字認識結果を記憶部に記憶する処理とを繰り返す工程と、
前記情報端末に対する所定の操作を受け付けた場合に、文字認識結果を確定する工程とを実行する。
情報端末の制御部に、
撮影されたフレーム画像を取得する処理と、前記フレーム画像を文字認識することで得られる文字認識結果を記憶部に記憶する処理とを繰り返す工程と、
前記情報端末に対する所定の操作を受け付けた場合に、文字認識結果を確定する工程とを実行させる。
<情報端末の利用例>
はじめに、第1の実施形態に係る情報端末の利用例について説明する。図1は、情報端末の利用例を示す図である。図1の左側に示すように、情報端末120は、例えば、現場機器110の側面等に付された機器銘板111から、機器データを読み取るシーン等において利用される。
・室外機であることを示す記載、
・冷房と暖房とを兼用する室外機であることを示す記載、
・機種についての記載(ラベル、機種コードデータ)、
・製造番号についての記載(ラベル、製造番号データ)、
・製品質量についての記載(ラベル、質量データ)、
・電源仕様についての記載(ラベル、相数データ、電圧データ、周波数データ)、
・圧縮機電動機の出力についての記載(ラベル、消費電力量データ)、
・管理番号についての記載(ラベル、管理コードデータ)、
・冷媒の量及び種類についての記載(ラベル、冷媒量データ、冷媒種コード)、
・設計圧力についての記載(ラベル、圧力データ)、
・製造年月についての記載(ラベル、製造年月データ)、
等が含まれる(図1では、「*」として省略して示している)。また、実際の機器銘板111の記載には、アルファベットや数字、記号、漢字(現場機器110が設置された国の言語)など、多くの文字種が含まれる。
次に、保守作業者130が現場機器110を動画像データとして撮影し、情報端末120が各フレーム画像に対して文字認識処理を行った場合の文字認識結果について説明する。図2は、各フレーム画像に対して文字認識処理を行うことで得られた文字認識結果の一例を示す図である。
次に、情報端末120のハードウェア構成について説明する。図3は、情報端末のハードウェア構成の一例を示す図である。図2に示すように、情報端末120は、プロセッサ301、メモリ302、補助記憶装置303、ユーザインタフェース装置304、撮像装置305、通信装置306を有する。なお、情報端末120の各ハードウェアは、バス307を介して相互に接続されている。
次に、情報端末120の機能構成について説明する。図4は、情報端末の機能構成の一例を示す第1の図である。上述したように、情報端末120には、文字認識プログラムがインストールされており、当該プログラムが実行されることで、情報端末120は、
・操作受付部401、
・取得部402、
・認識部403、
・修正部404、
・抽出部405、
・判定部406、
・バウンディングボックス生成部407、
・第1記憶制御部408、
・第2記憶制御部409、
・表示部410、
・手動修正部411、
として機能する。
・抽出部405より通知された文字列のうち、命名規則に則って記載されたと判定した文字列(文字認識結果)と、
・該文字列の位置及びサイズと、
を、バウンディングボックス生成部407に通知する。
・撮影中、リアルタイムにフレーム画像を表示し、所定のフレーム周期より長い周期で、対象項目に重畳されたバウンディングボックス及び文字認識結果を更新し、
・シャッタ操作が行われた際には、確定したフレーム画像と、確定した位置及びサイズに基づき生成されたバウンディングボックスと、確定した文字認識結果とを表示する。
次に、情報端末120全体の動作例について説明する。図5は、情報端末全体の動作例を示す図である。
次に、情報端末の各機能部(ここでは、認識部403、修正部404、抽出部405、判定部406、第1記憶制御部408、第2記憶制御部409)の処理の詳細について説明する。
はじめに、認識部403から抽出部405までの処理の詳細について説明する。図6は、認識部から抽出部までの処理の具体例を示す図である。
次に、判定部406の処理の詳細について説明する。図7は、判定部の処理の具体例を示す図である。
・命名規則700内の"機種コードデータ"の命名規則に基づいて定められた判定基準に合致する文字列
はあったが、
・命名規則700内の"製造番号データ"の命名規則に基づいて定められた判定基準に合致する文字列、及び、
・命名規則700内の"製造年月データ"の命名規則に基づいて定められた判定基準に合致する文字列、
はなかったとする。このため、判定部406は、第1記憶制御部408に対して認識結果(NG)を通知する。
・命名規則700内の"機種コードデータ"の命名規則に基づいて定められた判定基準に合致する文字列、
・命名規則700内の"製造番号データ"の命名規則に基づいて定められた判定基準に合致する文字列、及び、
・命名規則700内の"製造年月データ"の命名規則に基づいて定められた判定基準に合致する文字列、
がいずれもあったとする。この場合、判定部406は、
・全ての対象項目についての文字認識結果(認識結果(OK))、
・"機種名"の文字列(文字認識結果)、"製造番号"の文字列(文字認識結果)、"製造年月"の文字列(文字認識結果)それぞれの位置及びサイズ、
を第1記憶制御部408に通知する。
次に、第1記憶制御部408の処理の詳細について説明する。図8は、第1記憶制御部の処理の流れを示すフローチャートである。
次に、第2記憶制御部409の処理の詳細について説明する。図9は、第2記憶制御部の処理の流れを示すフローチャートである。
次に、表示部410に表示されるフレーム画像及びバウンディングボックスの表示例について説明する。図10A、図10Bは、表示部により表示されるフレーム画像及びバウンディングボックスの表示例を示す第1及び第2の図である。
次に、情報端末120全体の文字認識処理の流れについて説明する。図11は、情報端末による文字認識処理の流れを示すフローチャートである。
以上の説明から明らかなように、第1の実施形態に係る情報端末120は、
・撮影された動画像データに含まれる各フレーム画像を取得する処理と、フレーム画像に対して文字認識処理を行うことで取得される文字認識結果を第1記憶部に記憶する処理とを繰り返す。
・保守作業者によるシャッタ操作を受け付けた場合に、文字認識結果を確定する。
上記第1の実施形態では、動画像データの撮影中に機器データが正しく取得できたか否かに関わらず、保守作業者は、シャッタ操作を行うことができたが、機器データが正しく取得できるまで、シャッタ操作を行うことができないように構成してもよい。以下、第2の実施形態について、上記第1の実施形態との相違点を中心に説明する。
図12は、情報端末の機能構成の一例を示す第2の図である。図4を用いて説明した第1の実施形態に係る情報端末120の機能構成との相違点は、操作受付部1201の機能が、操作受付部401の機能とは異なる点である。
以上の説明から明らかなように、第2の実施形態に係る情報端末120は、撮影開始の操作が行われた後、機器データが正しく取得できるまで、シャッタ操作を行うことができないように構成する。
上記第1及び第2の実施形態では、文字認識結果を確定させるための操作として、シャッタ操作を割り当てる場合について説明したが、文字認識結果を確定させるための操作には、シャッタ操作以外の操作を割り当ててもよい。
111 :機器銘板
120 :情報端末
121 :撮影画像
305 :撮像装置
401 :操作受付部
402 :取得部
403 :認識部
404 :修正部
405 :抽出部
406 :判定部
407 :バウンディングボックス生成部
408 :第1記憶制御部
409 :第2記憶制御部
410 :表示部
411 :手動修正部
1201 :操作受付部
Claims (13)
- 制御部を有する情報端末であって、
前記制御部は、
撮影されたフレーム画像を取得する処理と、前記フレーム画像を文字認識することで得られる文字認識結果を記憶部に記憶する処理とを繰り返し、
前記情報端末に対する所定の操作を受け付けた場合に、文字認識結果を確定する、
情報端末。 - 前記撮影されたフレーム画像をリアルタイムに表示する際に、前記文字認識することで得られる文字認識結果を重畳して表示する、
請求項1に記載の情報端末。 - 前記制御部は、
表示する前記フレーム画像を第1の時間間隔で更新し、
重畳して表示する文字認識結果を前記第1の時間間隔よりも長い第2の時間間隔で更新する、
請求項2に記載の情報端末。 - 前記制御部は、
前記撮影されたフレーム画像に文字認識結果として記憶する項目が複数含まれる場合、前記文字認識することで得られる各項目の文字認識結果を、項目単位で記憶部に記憶し、
前記情報端末に対する所定の操作を受け付けた場合に、項目単位で文字認識結果を確定する、
請求項1に記載の情報端末。 - 前記制御部は、
確定した前記文字認識結果を表示部に表示したことに応じて、表示した前記文字認識結果が修正された場合に、修正された前記文字認識結果を記憶部に記憶する、
請求項1に記載の情報端末。 - 前記制御部は、
機器の銘板が撮影されたフレーム画像を文字認識することで、文字認識結果として、機種名及び製造番号を得る、
請求項1に記載の情報端末。 - 前記制御部は、
前記文字認識することで得られる文字認識結果を第1記憶部に記憶し、
前記情報端末に対する所定の操作を受け付けたことで確定した文字認識結果を第2記憶部に記憶する、
請求項1に記載の情報端末。 - 前記制御部は、
前記文字認識することで文字認識結果が得られるごとに、前記第1記憶部に記憶されている文字認識結果を更新する、
請求項7に記載の情報端末。 - 前記文字認識結果は、前記文字認識することで得られる結果のうち、前記制御部が保存条件を満たすと判定した結果である、
請求項1に記載の情報端末。 - 前記制御部は、
前記文字認識することで所定の項目について得られる結果が、予め定められた文字列であった場合に、前記保存条件を満たすと判定し、前記所定の項目について得られる結果を、前記所定の項目の文字認識結果として前記記憶部に記憶する、
請求項9に記載の情報端末。 - 前記制御部は、
前記第1記憶部に記憶された文字認識結果が得られたフレーム画像を、前記文字認識結果と関連付けて前記第1記憶部に記憶し、
前記第2記憶部に記憶された文字認識結果が得られたフレーム画像を、前記文字認識結果と関連付けて前記第2記憶部に記憶する、
請求項7に記載の情報端末。 - 情報端末の制御部が、
撮影されたフレーム画像を取得する処理と、前記フレーム画像を文字認識することで得られる文字認識結果を記憶部に記憶する処理とを繰り返す工程と、
前記情報端末に対する所定の操作を受け付けた場合に、文字認識結果を確定する工程と
を実行する文字認識方法。 - 情報端末の制御部に、
撮影されたフレーム画像を取得する処理と、前記フレーム画像を文字認識することで得られる文字認識結果を記憶部に記憶する処理とを繰り返す工程と、
前記情報端末に対する所定の操作を受け付けた場合に、文字認識結果を確定する工程と
を実行させるための文字認識プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022140707A JP2024036017A (ja) | 2022-09-05 | 2022-09-05 | 情報端末、文字認識方法及び文字認識プログラム |
PCT/JP2023/030468 WO2024053411A1 (ja) | 2022-09-05 | 2023-08-24 | 情報端末、文字認識方法及び文字認識プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022140707A JP2024036017A (ja) | 2022-09-05 | 2022-09-05 | 情報端末、文字認識方法及び文字認識プログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2024036017A true JP2024036017A (ja) | 2024-03-15 |
Family
ID=90191096
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022140707A Pending JP2024036017A (ja) | 2022-09-05 | 2022-09-05 | 情報端末、文字認識方法及び文字認識プログラム |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP2024036017A (ja) |
WO (1) | WO2024053411A1 (ja) |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000207487A (ja) * | 1999-01-20 | 2000-07-28 | Sony Corp | 情報処理装置および方法、並びに提供媒体 |
JP2012221095A (ja) * | 2011-04-06 | 2012-11-12 | Sony Corp | 情報処理装置および方法、プログラム、並びに撮像装置 |
JP5982844B2 (ja) * | 2012-02-06 | 2016-08-31 | オムロン株式会社 | 文字読取用のプログラムおよび文字読取装置 |
JP5835035B2 (ja) * | 2012-03-13 | 2015-12-24 | オムロン株式会社 | 文字認識用のプログラムおよび文字認識装置 |
JP6430914B2 (ja) * | 2014-12-22 | 2018-11-28 | キヤノンイメージングシステムズ株式会社 | 画像処理装置および画像処理方法 |
JP6527410B2 (ja) * | 2015-07-06 | 2019-06-05 | 株式会社日立システムズ | 文字認識装置、文字認識方法、及びプログラム |
JP6505937B1 (ja) * | 2018-11-26 | 2019-04-24 | フューチャー株式会社 | 照合システム、照合方法及び照合プログラム |
-
2022
- 2022-09-05 JP JP2022140707A patent/JP2024036017A/ja active Pending
-
2023
- 2023-08-24 WO PCT/JP2023/030468 patent/WO2024053411A1/ja unknown
Also Published As
Publication number | Publication date |
---|---|
WO2024053411A1 (ja) | 2024-03-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106651992B (zh) | 优化Android资源图片的方法及系统 | |
JP4890116B2 (ja) | パーツカタログ作成方法およびパーツカタログ作成装置 | |
CN107621932B (zh) | 显示图像的局部放大方法和装置 | |
JP2012064195A (ja) | 情報処理装置、情報処理方法、プログラム及び記録媒体。 | |
JP2009289112A (ja) | 作業情報提供装置、作業情報提供方法、およびプログラム | |
WO2024053411A1 (ja) | 情報端末、文字認識方法及び文字認識プログラム | |
JP2024036018A (ja) | 情報端末、文字認識方法及び文字認識プログラム | |
US20230156161A1 (en) | Failure identification and handling method, and system | |
CN111191006A (zh) | 图例间连接关系的确定方法、装置和电子系统 | |
US11816802B2 (en) | Method for configuring and displaying, in augmented or mixed or extended reality, the information relating to equipment installed in a real site, and associated computer program product and electronic device | |
CN112417914B (zh) | 数据扫描的方法、装置和电子设备 | |
CN110431500B (zh) | 监视画面数据生成装置、监视画面数据生成方法、以及存储介质 | |
EP3809217A1 (en) | Information processing device, information processing method, and program | |
JP4712629B2 (ja) | 設備仕様入力装置 | |
US11671565B2 (en) | Image processing system, image processing device, image processing method, and non-transitory computer readable medium storing program | |
JP2020057298A (ja) | 判定装置、判定方法及び判定プログラム | |
US20240089591A1 (en) | Non-transitory computer-readable storage medium storing display content notification program, display content notification device, display content notification method | |
CN112312199B (zh) | 一种图像处理方法、装置及设备 | |
CN114189804B (zh) | 基站维护方法、装置、服务器、系统及存储介质 | |
JP2024006552A (ja) | 画像管理システム及び画像管理方法 | |
JP4944720B2 (ja) | 画像処理装置及び方法並びに記憶媒体 | |
CN113934333A (zh) | 内容显示方法、装置、电子装置及可读存储介质 | |
CN114611042A (zh) | 一种专题页面上线方法、装置、设备和存储介质 | |
CN115951880A (zh) | 一种iptv的epg页面兼容方法、系统及电子设备 | |
WO2017122305A1 (ja) | 空調機制御システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230824 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230926 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231108 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240109 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240228 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20240326 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240613 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20240620 |