JP2018007106A - Image processing system, image processing method, and image processing terminal - Google Patents
Image processing system, image processing method, and image processing terminal Download PDFInfo
- Publication number
- JP2018007106A JP2018007106A JP2016133452A JP2016133452A JP2018007106A JP 2018007106 A JP2018007106 A JP 2018007106A JP 2016133452 A JP2016133452 A JP 2016133452A JP 2016133452 A JP2016133452 A JP 2016133452A JP 2018007106 A JP2018007106 A JP 2018007106A
- Authority
- JP
- Japan
- Prior art keywords
- image
- image processing
- document
- server
- terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Electrically Operated Instructional Devices (AREA)
- Facsimiles In General (AREA)
- Editing Of Facsimile Originals (AREA)
Abstract
Description
本発明は、書面画像を撮影して通信する画像処理システム、画像処理方法、及び画像処理端末に関する。 The present invention relates to an image processing system, an image processing method, and an image processing terminal that capture and communicate a written image.
従来の通信教育では、利用者は解答用紙（以下、書面ともいう。）に解答を記入後、郵送により書面を提出していた（例えば特許文献１）。このようなシステムでは、郵送による提出のため、添削者に提出物が届くまで時間を要し、また添削結果が利用者に返送されるまで時間を要することがあった。さらに郵送作業は利用者にとってやや煩雑であり、提出が遅れてしまうこともあった。 In conventional correspondence education, a user submits a document by mail after filling in an answer sheet (hereinafter also referred to as a document) (for example, Patent Document 1). In such a system, since it was submitted by mail, it took time until the submission arrived at the corrector, and it took time until the correction result was returned to the user. Furthermore, the mailing work is somewhat complicated for the user, and the submission may be delayed.
他方、スマートフォン等の普及により、カメラ機能付き通信端末を持つ利用者が増加している。カメラで解答記入済みの解答用紙を撮影し、通信端末により撮影した画像（以下、書面画像という。）を添削者に送信するシステムが利用されるようになってきている。 On the other hand, with the spread of smartphones and the like, the number of users having communication terminals with camera functions is increasing. 2. Description of the Related Art A system has been used in which an answer sheet in which an answer has been entered is photographed by a camera and an image photographed by a communication terminal (hereinafter referred to as a written image) is transmitted to a corrector.
しかしながら従来の技術では、書面を撮影する際に、書面との距離や明るさ等の撮影環境がばらつき、書面画像の判読性が低下してしまう場合があった。 However, in the conventional technique, when photographing a document, the photographing environment such as the distance to the document and brightness varies, and the readability of the document image may be deteriorated.
従って、上記のような問題点に鑑みてなされた本発明の目的は、書面画像の判読性の低下を抑制することができる画像処理システム、画像処理方法、及び画像処理端末を提供することにある。 Accordingly, an object of the present invention made in view of the above problems is to provide an image processing system, an image processing method, and an image processing terminal capable of suppressing a decrease in the legibility of a written image. .
上記課題を解決するために本発明の一実施形態に係る画像処理システムは、
ネットワークにより接続された画像処理端末とサーバとを備える画像処理システムであって、
前記画像処理端末は、
書面を撮影して書面画像を生成する撮影部と、
前記書面画像の判読性が所定条件を満たすか否か判定する制御部と、
前記判読性が前記所定条件を満たす場合、前記サーバに前記書面画像を送信する端末通信部と、
前記判読性が前記所定条件を満たさない場合、エラーメッセージを表示する表示部と、
を備え、
前記サーバは、
前記画像処理端末から前記書面画像を受信するサーバ通信部と、
前記書面画像を記憶する記憶部と、
を備えることを特徴とする。
In order to solve the above problems, an image processing system according to an embodiment of the present invention includes:
An image processing system comprising an image processing terminal and a server connected by a network,
The image processing terminal
A photographing unit for photographing a document and generating a document image;
A control unit for determining whether the readability of the written image satisfies a predetermined condition;
When the readability satisfies the predetermined condition, a terminal communication unit that transmits the document image to the server;
If the legibility does not satisfy the predetermined condition, a display unit that displays an error message;
With
The server
A server communication unit for receiving the document image from the image processing terminal;
A storage unit for storing the written image;
It is characterized by providing.
また本発明の一実施形態に係る画像処理システムは、
前記撮影部が、撮影台により所定距離離れた位置に配置された前記書面を撮影することを特徴とする。
An image processing system according to an embodiment of the present invention includes:
The photographing unit photographs the document arranged at a predetermined distance from a photographing stand.
また本発明の一実施形態に係る画像処理システムは、
前記所定条件が、前記書面画像が四辺を有するという条件を含むことを特徴とする。
An image processing system according to an embodiment of the present invention includes:
The predetermined condition includes a condition that the document image has four sides.
また本発明の一実施形態に係る画像処理システムは、
前記所定条件が、前記書面画像の少なくとも一部の輝度が所定範囲内であるという条件を含むことを特徴とする。
An image processing system according to an embodiment of the present invention includes:
The predetermined condition includes a condition that the luminance of at least a part of the document image is within a predetermined range.
また本発明の一実施形態に係る画像処理システムは、
前記書面が識別コードを含み、
前記所定条件は、前記識別コードが読み取り可能であるという条件を含むことを特徴とする。
An image processing system according to an embodiment of the present invention includes:
The document includes an identification code;
The predetermined condition includes a condition that the identification code is readable.
また本発明の一実施形態に係る画像処理システムは、
前記識別コードは第一識別コード及び第二識別コードにより構成され、
前記書面の表面に第一識別コードが印刷されており、前記表面の裏面に第二識別コードが印刷されており、
前記所定条件は、前記書面画像の前記第一識別コード及び前記第二識別コードのいずれもが読み取り可能であるという条件を含むことを特徴とする。
An image processing system according to an embodiment of the present invention includes:
The identification code is composed of a first identification code and a second identification code,
A first identification code is printed on the front surface of the document, and a second identification code is printed on the back surface of the front surface,
The predetermined condition includes a condition that both the first identification code and the second identification code of the document image are readable.
また本発明の一実施形態に係る画像処理システムは、
前記表示部が、前記撮影部により撮影する際に撮影範囲を示すガイド枠を表示し、
前記ガイド枠は、前記書面を撮影する範囲を示す第一矩形枠と、前記識別コードを撮影する範囲を示す第二矩形枠とを含むことを特徴とする。
An image processing system according to an embodiment of the present invention includes:
The display unit displays a guide frame indicating a shooting range when shooting by the shooting unit,
The guide frame includes a first rectangular frame indicating a range in which the document is captured and a second rectangular frame indicating a range in which the identification code is captured.
また本発明の一実施形態に係る画像処理システムは、
前記サーバが、前記書面画像を補正するサーバ制御部を備え、前記サーバ制御部により補正した前記書面画像を前記記憶部に記憶することを特徴とする。
An image processing system according to an embodiment of the present invention includes:
The server includes a server control unit that corrects the document image, and stores the document image corrected by the server control unit in the storage unit.
また本発明の一実施形態に係る画像処理システムは、
前記サーバが、前記書面画像の前記識別コードに基づき、所定の添削者端末に前記書面画像を送信することを特徴とする。
An image processing system according to an embodiment of the present invention includes:
The server transmits the document image to a predetermined corrector terminal based on the identification code of the document image.
また、本発明の一実施形態に係る画像処理方法は、
ネットワークにより接続された画像処理端末とサーバとを備える画像処理システムにおける画像処理方法であって、
前記画像処理端末が、
書面を撮影して書面画像を生成する撮影するステップと、
前記書面画像の判読性が所定条件を満たすか否か判定するステップと、
前記判読性が前記所定条件を満たす場合、前記サーバに前記書面画像を送信するステップと、
前記判読性が前記所定条件を満たさない場合、エラーメッセージを表示するステップと、
前記サーバが、
前記画像処理端末から前記書面画像を受信するステップと、
前記書面画像を記憶するステップと、
を含むことを特徴とする。
An image processing method according to an embodiment of the present invention includes:
An image processing method in an image processing system comprising an image processing terminal and a server connected by a network,
The image processing terminal is
Shooting a document to generate a document image;
Determining whether the readability of the written image satisfies a predetermined condition;
If the legibility meets the predetermined condition, sending the written image to the server;
When the legibility does not satisfy the predetermined condition, displaying an error message;
The server is
Receiving the document image from the image processing terminal;
Storing the written image;
It is characterized by including.
また、本発明の一実施形態に係る画像処理端末は、
書面を撮影して書面画像を生成する撮影部と、
前記書面画像の判読性が所定条件を満たすか否か判定する制御部と、
前記判読性が前記所定条件を満たす場合、サーバに前記書面画像を送信する通信部と、
前記判読性が前記所定条件を満たさない場合、エラーメッセージを表示する表示部と、
を備えることを特徴とする。
In addition, an image processing terminal according to an embodiment of the present invention includes:
A photographing unit for photographing a document and generating a document image;
A control unit for determining whether the readability of the written image satisfies a predetermined condition;
When the legibility satisfies the predetermined condition, a communication unit that transmits the document image to a server;
If the legibility does not satisfy the predetermined condition, a display unit that displays an error message;
It is characterized by providing.
また、本発明の一実施形態に係る画像処理端末は、
前記撮影部が、撮影台により所定距離離れた位置に配置された前記書面を撮影することを特徴とする。
In addition, an image processing terminal according to an embodiment of the present invention includes:
The photographing unit photographs the document arranged at a predetermined distance from a photographing stand.
また、本発明の一実施形態に係る画像処理端末は、
前記所定条件が、前記書面画像が四辺を有するという条件を含む。
In addition, an image processing terminal according to an embodiment of the present invention includes:
The predetermined condition includes a condition that the document image has four sides.
また、本発明の一実施形態に係る画像処理端末は、
前記所定条件が、前記書面画像の少なくとも一部の輝度が所定範囲内であるという条件を含む。
In addition, an image processing terminal according to an embodiment of the present invention includes:
The predetermined condition includes a condition that the luminance of at least a part of the document image is within a predetermined range.
本発明の一実施形態に係る画像処理システム、画像処理方法、及び画像処理端末によれば、書面画像の判読性の低下を抑制することができる。 According to an image processing system, an image processing method, and an image processing terminal according to an embodiment of the present invention, it is possible to suppress a decrease in legibility of a written image.
以下、本発明の実施の形態について説明する。 Embodiments of the present invention will be described below.
（実施の形態）
図１は本発明の一実施形態に係る画像処理システム１０の概要図である。本発明の一実施形態に係る画像処理システム１０は、複数の画像処理端末１ａ〜１ｃ（学習者端末１ａ〜１ｃ）と、サーバ２と、複数の添削者端末３ａ〜３ｂとを備える。以下、複数の画像処理端末１ａ〜１ｃを区別しない場合には、これらをまとめて画像処理端末１と記す。同様に、複数の添削者端末３ａ〜３ｂを区別しない場合には、これらをまとめて添削者端末３と記す。複数の画像処理端末１、サーバ２、及び複数の添削者端末３は、例えばインターネット等のネットワークＮにより接続される。なお図１では、簡便のため画像処理端末１を３台示しているが、画像処理端末数はこれに限られず、任意の台数の画像処理端末１が備えられてもよい。同様に簡便のため添削者端末３を２台示しているが、添削者端末数はこれに限られず、任意の台数の添削者端末３が備えられてもよい。
(Embodiment)
FIG. 1 is a schematic diagram of an
画像処理端末１は、通信教育の利用者（以下、学習者という。）が用いるタブレット端末、スマートフォン、パーソナルコンピュータ等の情報処理装置であって、サーバ２から提供される通信教育に係るサービスを実行する。特に本実施形態に係る画像処理端末１は、サーバ２に、通信教育における答案用紙等の書面画像を送信する。また画像処理端末１は、サーバ２から添削済みの書面画像を受信し、学習者に表示する。サーバ２は、例えば通信教育の運営者が管理するサーバ装置等の情報処理装置であって、学習者が各々保有する画像処理端末１に対して通信教育に係るサービスを提供する。特に本実施形態に係るサーバ２は、画像処理端末１から書面画像を受信する。またサーバ２は書面画像を添削者端末３に送信する。またサーバ２は、添削者端末３から添削済みの書面画像を受信する。さらにサーバ２は、添削済みの書面画像を画像処理端末１に送信する。添削者端末３は、通信教育の添削者が用いるパーソナルコンピュータ、タブレット端末等の情報処理装置である。添削者端末３は、サーバ２から書面画像を受信し、また添削済みの書面画像をサーバ２に送信する。このように画像処理端末１、サーバ２、及び添削者端末３が協働して、画像処理端末１を保有する学習者に通信教育を提供し、学習を支援する。
The
次に、画像処理システム１０の各構成要素について具体的に説明する。
Next, each component of the
（画像処理端末１の構成）
まず、画像処理端末１について説明する。図２に、画像処理端末１のブロック図を示す。画像処理端末１は、端末通信部１１と、端末記憶部１２と、表示部１３と、入力部１４と、撮影部１５と、端末制御部１６とを備える。端末通信部１１と、端末記憶部１２と、表示部１３と、入力部１４と、撮影部１５と、端末制御部１６とは、バス１７によりそれぞれ接続されている。
(Configuration of image processing terminal 1)
First, the
端末通信部１１は、外部装置と無線又は有線によって通信し、情報の送受信を行うインターフェースである。本実施形態において、端末通信部１１は、ネットワークＮを介して、サーバ２との間で情報を相互に送受信可能である。
The terminal communication unit 11 is an interface that communicates with an external device wirelessly or by wire and transmits and receives information. In the present embodiment, the terminal communication unit 11 can transmit and receive information to and from the
端末記憶部１２は、例えば一次記憶装置及び二次記憶装置を含み、サーバ２から提供される種々の情報及び情報処理に必要なプログラムを記憶する。例えば、端末記憶部１２は、通信教育に係る学習用のアプリケーション（以下、学習アプリケーションという。）を記憶する。学習アプリケーションは、例えばネットワークＮを介して所定の配信サーバから取得可能である。学習アプリケーションが実行（起動）された状態で、画像処理端末１の本実施形態に係る動作が実現される。
The terminal storage unit 12 includes, for example, a primary storage device and a secondary storage device, and stores various information provided from the
表示部１３は、例えば液晶ディスプレイ又は有機ＥＬディスプレイ等の表示デバイスであって、多様な画面を表示可能である。
The
入力部１４は、例えば表示部１３と一体的に設けられたタッチパネルを含む入力インターフェースであって、画像処理端末１に対する学習者のタップ等の操作（以下、ユーザ操作という。）を受付可能である。本実施の形態では、入力部１４がタッチパネルである例について説明する。
The
撮影部１５は、カメラ等であり、被写体を撮影して得た画像情報信号を、端末制御部１６に送信する。本実施の形態では撮影部１５は、解答用紙等の書面を被写体として撮影し、書面画像を生成する。そして書面画像に係る画像情報信号を端末制御部１６に渡す。書面の撮影方法については後述する。
The photographing
端末制御部１６は、専用又は汎用のプロセッサを含む。端末制御部１６は、画像処理端末１全体の動作を制御する。例えば端末制御部１６は、端末通信部１１により情報の送受信を行う。また端末制御部１６は、学習者の操作に応じて学習アプリケーションを実行（起動）する。
The
また端末制御部１６は、種々の情報処理を行う。例えば端末制御部１６は、撮影部１５から渡された書面画像に係る画像情報信号に基づき、書面画像の判読性が所定条件を満たすか否かを判定する。また端末制御部１６は、判読性が所定条件を満たす場合、端末通信部１１によりサーバ２に書面画像を送信する。一方で判読性が所定条件を満たさない場合、表示部１３によりエラーメッセージを表示する。当該判読性の判定については後述する。
The
（サーバ２の構成）
図３は、本発明の一実施形態に係るサーバのブロック図である。サーバ２は、サーバ通信部２１と、サーバ記憶部２２と、サーバ制御部２３とを備える。サーバ通信部２１と、サーバ記憶部２２と、サーバ制御部２３とは、バス２４によりそれぞれ接続されている。
(Configuration of server 2)
FIG. 3 is a block diagram of a server according to an embodiment of the present invention. The
サーバ通信部２１は、外部装置と無線又は有線によって通信し、情報の送受信を行うインターフェースである。本実施形態において、サーバ通信部２１は、ネットワークＮを介して、画像処理端末１との間で情報を相互に送受信可能である。またサーバ通信部２１は、ネットワークＮを介して、添削者端末３との間で情報を相互に送受信可能である。
The
サーバ記憶部２２は、例えば一次記憶装置及び二次記憶装置を含み、通信教育の提供及び制御に必要な種々の情報及びプログラムを記憶する。
The
サーバ制御部２３は、専用又は汎用のプロセッサを含む。サーバ制御部２３は、サーバ２全体の動作を制御する。例えばサーバ制御部２３は、サーバ通信部２１により情報の送受信を行う。またサーバ制御部２３は、受信した情報をサーバ記憶部２２に記憶させる。
The
またサーバ制御部２３は、種々の処理を行う。例えばサーバ制御部２３は、サーバ通信部２１により画像処理端末１から書面画像を受信する。サーバ制御部２３は、受信した書面画像をサーバ記憶部２２に記憶させる。またサーバ制御部２３は、サーバ記憶部２２に記憶させた書面画像を、サーバ通信部２１により添削者端末３に送信する。またサーバ制御部２３は、サーバ通信部２１により、添削者端末３から添削済みの書面画像を受信する。サーバ制御部２３は、サーバ通信部２１により、画像処理端末１に添削済みの書面画像を送信する。
The
（添削者端末３の構成）
図４は、本発明の一実施形態に係る添削者端末３のブロック図である。添削者端末３は、端末通信部３１と、端末記憶部３２と、表示部３３と、入力部３４と、端末制御部３５とを備える。端末通信部３１と、端末記憶部３２と、表示部３３と、入力部３４と、端末制御部３５とは、バス３６によりそれぞれ接続されている。
(Configuration of the corrector terminal 3)
FIG. 4 is a block diagram of the
端末通信部３１は、外部装置と無線又は有線によって通信し、情報の送受信を行うインターフェースである。本実施形態において、端末通信部３１は、ネットワークＮを介して、サーバ２との間で情報を相互に送受信可能である。
The
端末記憶部３２は、例えば一次記憶装置及び二次記憶装置を含み、サーバ２から提供される種々の情報及び情報処理に必要なプログラムを記憶する。例えば、端末記憶部３２は、通信教育に係る添削用のアプリケーション（以下、添削アプリケーションという。）を記憶する。添削アプリケーションは、例えばネットワークＮを介して所定の配信サーバから取得可能である。添削アプリケーションが実行（起動）された状態で、添削者端末３の本実施形態に係る動作が実現される。
The
表示部３３は、例えば液晶ディスプレイ又は有機ＥＬディスプレイ等の表示デバイスであって、多様な画面を表示可能である。例えば表示部３３は書面画像を表示する。
The
入力部３４は、例えばキーボード、ペンタブレット、タッチパッド、マウス等の入力インターフェースであって、添削者端末３に対する添削者の操作を受付可能である。なお入力部３４は、表示部３３と一体的に設けられたタッチパネルであってもよい。
The
端末制御部３５は、専用又は汎用のプロセッサを含む。端末制御部３５は、添削者端末３全体の動作を制御する。例えば端末制御部３５は、端末通信部３１により情報の送受信を行う。また端末制御部３５は、添削者の操作に応じて添削アプリケーションを実行（起動）する。
The
また端末制御部３５は、種々の情報処理を行う。例えば端末制御部３５は、端末通信部３１により、サーバ２から書面画像を受信する。また端末制御部３５は、表示部３３により書面画像を表示し、入力部３４により添削者の操作を受け付ける。入力部３４により添削者の操作を受け付けると、端末制御部３５は書面画像を編集し、添削コメント等が記入された添削済みの書面画像を作成及び保存する。また端末制御部３５は、端末通信部３１により、サーバ２に添削済みの書面画像を送信する。
The
（書面の撮影方法）
次に、画像処理端末１による書面の撮影方法について具体的に説明する。本実施の形態に係る画像処理システム１０は、所定距離離れた位置に配置された書面を撮影部１５により撮影するために、撮影台を用いる。撮影台として、画像処理端末１を収納する専用ケース４を利用する。
(How to shoot a document)
Next, a method for photographing a document by the
専用ケース４（撮影台４）は、表蓋４１と裏蓋４２を有する略矩形状のケースであり、画像処理端末１を収納可能である。画像処理端末１を専用ケース４に収納することで、容易に保管又は持ち運びすることができる。図５は、画像処理端末１を収納している専用ケース４を開けた状態を示す図である。専用ケース４の裏蓋４２の長手方向の両端には、それぞれ書面配置台４３と、端末保持台４４とが設けられている。書面配置台４３は、撮影する対象である書面を配置するための、折畳み可能な矩形シート状の部材である。端末保持台４４は、画像処理端末１を保持するための折畳み可能な台である。書面配置台４３及び端末保持台４４は、それぞれ専用ケース４を閉じた状態において、専用ケース４の内部に折り畳んで収納可能である。
The dedicated case 4 (photographing table 4) is a substantially rectangular case having a
専用ケース４の表蓋４１及び裏蓋４２は、書面配置台４３から立設して端末保持台４４を支える支柱として用いられる。図６は、専用ケース４の表蓋４１及び裏蓋４２を略９０度開き（上面視でＬ型に開き）、支柱とした状態を示す図である。書面配置台４３は、図５に示した状態から広げて用いる。書面配置台４３の四隅近傍には、４つの切り込み部４３１がそれぞれ設けられている。撮影対象の書面の四隅をこの切り込み部４３１に合わせることにより、書面のｘ軸及びｙ方向の位置合わせを行なうことができる。
The
図７は、専用ケース４の端末保持台４４を組み立てた状態を示す図である。端末保持台４４は、天板部４４１と、天板支持部４４２とを備える。天板部４４１及び表蓋４１には、それぞれ係合する係合部４４３が設けられている。天板支持部４４２及び裏蓋４２にも、それぞれ係合する係合部４４４が設けられている。係合部４４３及び係合部４４４によりこれらの部材を係合することで、書面配置台４３が表蓋４１及び裏蓋４２に固定され、また天板部４４１が書面配置台４３とｚ軸方向に所定距離離れて平行になるように組み立てられる。
FIG. 7 is a view showing a state in which the
図８は、専用ケース４の端末保持台４４の天板部４４１に画像処理端末１を配置した状態を示す図である。また書面配置台４３には書面５を配置している。画像処理端末１の撮影部１５は、表示部１３の背面に設けられており、書面配置台４３に配置された書面５を撮影する。天板部４４１にはＬＥＤ４５用のスイッチ４４５（以下、ＬＥＤスイッチ４４５という。）が設けられている（図７参照）。画像処理端末１を端末保持台４４に配置した場合、画像処理端末１の背面がＬＥＤスイッチ４４５に当接してスイッチがオンされ、ＬＥＤ４５が点灯する。ＬＥＤ４５は、書面配置台４３に配置された書面５に光を照射する。これにより、撮影時の光量が確保される。
FIG. 8 is a diagram illustrating a state in which the
書面配置台４３と端末保持台４４により、画像処理端末１の撮影部１５と撮影対象の書面との間の距離は、ｚ軸方向において所定距離に保たれる。また、撮影部１５と、撮影対象の書面との平行性が保たれる。当該所定距離は、撮影対象の書面が画像処理端末１の撮影範囲内に収まり、かつ可能な限りサイズの大きい書面画像となるように設定される。
By the document arrangement table 43 and the terminal holding table 44, the distance between the photographing
図９は、画像処理端末１により撮影する際の表示画面（以下、プレビュー画面という。）を示す図である。プレビュー画面は、学習アプリケーション上において、撮影開始メニューへのユーザ操作を入力部１４が検出した場合、端末制御部１６が表示部１３に表示させる。図９に示すように、表示画像は表示部１３が表示する範囲内に収まる。プレビュー画面はシャッターボタン１４１を含み、シャッターボタン１４１へのタップ等のユーザ操作を検出した場合、端末制御部１６は、撮影部１５により書面画像を撮影する。なおホームボタン１４２は、初期画面やメニュー画面に戻る用のボタンとして用いられる。
FIG. 9 is a diagram showing a display screen (hereinafter referred to as a preview screen) when shooting is performed by the
表示部１３が表示するプレビュー画面は、撮影範囲を示すガイド枠が表示される。ガイド枠は、第一矩形枠１３１と第二矩形枠１３２とを含む。第一矩形枠１３１は、書面を撮影する範囲を示す。第二矩形枠１３２は、書面に含まれる識別コード５１を撮影する範囲を示す。これらのガイド枠により、ユーザは撮影範囲を容易に認識でき、書面画像のｘ軸方向及びｙ方向の微調整を行なうことができる。なお識別コード５１は書面の所定の位置に印刷されたバーコード、二次元バーコード等であり、例えば図９に示す例では、書面の右上に印刷されている。識別コード５１は、書面を一意に特定するための情報を含む。すなわち複数種類（科目、分野、単元等）の解答用紙等のうち、どの解答用紙であるかを識別コード５１により特定することができる。
The preview screen displayed by the
（書面画像の判読性の判定）
次に、画像処理端末１による書面画像の判読性の判定について具体的に説明する。上述の通り、端末制御部１６は、書面画像の判読性が所定条件を満たすか否かを判定する。端末記憶部１２は所定条件に係る定義ファイルを記憶し、当該定義ファイルに基づき判定を行なう。所定条件は、例えば以下の条件である。
（条件１）書面画像が四辺を有する。
（条件２）書面画像の輝度が所定範囲内である。
（条件３）書面画像に含まれる識別コードが読み取り可能である。
(Judgment of readability of written image)
Next, the determination of the legibility of a written image by the
(Condition 1) The written image has four sides.
(Condition 2) The brightness of the written image is within a predetermined range.
(Condition 3) The identification code included in the document image can be read.
本実施の形態では、条件１〜条件３の全てを満たす場合に、判読性が所定条件を満たすとする。一方、条件１〜条件３のうちいずれか１つを満たさない場合に、判読性が所定条件を満たさないとする。以下、各条件について説明する。
In this embodiment, it is assumed that the readability satisfies the predetermined condition when all of the
まず条件１について説明する。条件１は、書面画像が四辺を有するという条件である。画像処理端末１の端末制御部１６は、書面画像のうち書面部分と、書面配置台４３との境界線を判定し、４つの境界線に係る線分、すなわち書面画像の四辺を検出する。当該４つの線分は矩形状の四辺を構成しているため、言い換えると端末制御部１６は、書面画像が所定の四角形を含むか否かを判定する。具体的には端末制御部１６は、書面画像中の四角形の形状を全て検出する。また端末制御部１６は、検出された四角形のうち、所定のアスペクト比（例えばＡ４用紙のアスペクト比から誤差が５％の範囲内）のものを選択する。さらに選択した中に、所定のサイズ（例えば書面画像全体にフィットする、Ａ４サイズの７５％以上の大きさ）の四角形が存在するか否かを判定する。当該四角形が存在する場合、条件１を満たすと判定する。なお所定のアスペクト比及び所定のサイズは、Ａ４用紙を基準としたがこれに限られない。所定のアスペクト比及び所定のサイズは、いずれも書面の形状及びサイズ（例えば、レターサイズ等）に応じて適宜設定変更できるようにしてもよい。また検出した四角形が、所定のアスペクト比及び所定のサイズの両方に合致する場合に条件１を満たすとしたがこれに限られず、所定のアスペクト比及び所定のサイズの少なくとも一方を満たした場合に条件１を満たすとしてもよい。
First,
なお端末制御部１６は、書面画像が四辺を有するか否かを判定するために、書面画像の四隅を検出してもよい。図１０〜図１２は、書面画像の四隅を検出するための手法を示す図である。端末制御部１６はまず、書面画像の外形のエッジ情報を取得する。例えば端末制御部１６は、書面画像５０の上辺のエッジ走査をする（図１０）。具体的には、書面画像５０の上端周辺の所定の領域５２において、所定の間隔で並ぶ走査線（５３ａ、５３ｂ、５３ｃ・・・）に沿って、画像の上から下に向けて各画素のコントラストを検出する。端末制御部１６は、コントラストの変化が生じた箇所を検出エッジ（５４ｃ、５４ｄ、・・・）とする。次に端末制御部１６は、検出エッジに基づき直線近似を行い、上辺５５ａを算出する（図１１）。例えば最小二乗法により、検出エッジに対して直線近似することができる。右辺、下辺、左辺についても同様にエッジ走査を行ない、検出エッジに基づき直線近似をして各辺を求める。端末制御部１６は、算出した上辺５５ａ、右辺５５ｂ、下辺５５ｃ、及び左辺５５ｄに基づき、これらの各交点を四隅の位置（５６ａ〜５６ｄ）を算出する（図１２）。そして端末制御部１６は、算出した四隅の位置を結んだ４つの線分により、四角形を特定する。特定した四角形が上記所定のアスペクト比及び所定のサイズの少なくとも一方を満たす場合、書面画像が四辺を有し、条件１を満たすと判定する。
The
なお上記の四辺の判定をより確実にするために、書面配置台４３を黒色にすることが好ましい。このようにすることで端末制御部１６は、書面配置台４３の黒色と書面のコントラストに基づき四辺を抽出することができる。例えば書面の一部が破れて欠損している場合、折れ曲がっている場合等には、書面画像の四辺を検出できない。この場合は条件１を満たさない。条件１を満たさない場合、端末制御部１６は、エラーメッセージを表示部１３に表示させる。エラーメッセージは「解答用紙が検出できません。解答用紙が折れ曲がったり切れたりしていないか確認し、もう一度撮影してください」等である。
In order to make the determination of the above four sides more reliable, it is preferable that the document arrangement table 43 is black. In this way, the
なお図１０〜図１２では、書面画像の外形のエッジ情報を取得するために、各辺のエッジ走査をしたが、エッジ走査の手法はこれに限られない。例えば図１３及び図１４に示すように、四隅の周辺の外形のエッジ情報のみを取得するようにしてもよい。図１３及び図１４は、それぞれ左上横及び左上縦のエッジ走査を行っており、このようにエッジ走査を行なうことで、四隅のうちの１点（左上隅）を検出することができる。四隅の他の点も同様に検出することができる。また、走査の方向は縦又は横に限られず、斜めの走査線により検出してもよい。図１５及び図１６は、走査線の方向を斜めにして、左上横及び左上縦のエッジ走査をする例を示している。このようにすることでも、四隅の位置を検出することができる。 10 to 12, edge scanning is performed on each side in order to acquire edge information of the outline of the document image, but the edge scanning method is not limited to this. For example, as shown in FIGS. 13 and 14, only the edge information of the outline around the four corners may be acquired. FIGS. 13 and 14 perform upper left horizontal and upper left vertical edge scanning, respectively. By performing edge scanning in this manner, one point (upper left corner) of the four corners can be detected. Other points at the four corners can be detected in the same manner. Further, the scanning direction is not limited to vertical or horizontal, but may be detected by an oblique scanning line. FIG. 15 and FIG. 16 show an example in which the scanning line direction is oblique and the upper left horizontal and upper left vertical edge scanning is performed. By doing so, the positions of the four corners can be detected.
次に条件２について説明する。条件２は、書面画像の輝度に係る条件である。端末制御部１６は、書面画像のうち、所定の検出位置の輝度を検出する。図１７は、書面画像５０の中の検出位置を示す図である。本実施の形態では、検出位置を矢印にて示しており、３箇所の検出点６１と、１０箇所の検出点６２の、合計１３箇所の輝度を検出する。検出点６１は、識別コードの周囲３箇所に位置する。検出点６２は、書面画像全体の各辺近傍の１０箇所に位置する。
Next,
図１７に示すとおり、好適には３つの検出点６１（及び１つの検出点６２）は識別コードの周囲の四隅に位置する。識別コードの周囲の四隅の輝度を検出することで、識別コード周辺が暗すぎる場合及び明るすぎる場合を、適切に検出することができる。また好適には検出点６２は、書面画像の四隅の４箇所と、短辺を２等分する２箇所と、長辺を３等分する４箇所に位置する。検出点６２をこのように配置することにより、書面全体が暗すぎる場合及び明るすぎる場合を、適切に検出することができる。 As shown in FIG. 17, the three detection points 61 (and one detection point 62) are preferably located at the four corners around the identification code. By detecting the luminance at the four corners around the identification code, it is possible to appropriately detect when the periphery of the identification code is too dark and too bright. Preferably, the detection points 62 are located at four locations at the four corners of the document image, two locations that divide the short side into two, and four locations that divide the long side into three. By arranging the detection points 62 in this way, it is possible to appropriately detect when the entire document is too dark and too bright.
端末制御部１６は、検出した１３箇所の輝度のうち、判読性の判定から除外する４点を特定する。除外する４点は、輝度が最高のもの、２番目に高いもの、輝度が最低のもの、２番目に低いものである。端末制御部１６は、残りの９箇所の輝度が、それぞれ所定範囲内（例えば輝度レベルが０．６〜０．８５）であるか否かを特定する。９箇所全ての検出点の輝度が所定範囲内である場合、端末制御部１６は、条件２を満たすと判定する。このように輝度が４点を除外することで、複数の検出点のうち、比較的輝度が高い検出点及び低い検出点を除外し、バランスよく判読性の判定を行なうことができる。
The
９箇所の検出点のうち、一部の輝度が所定範囲外である場合、条件２を見たさない。この場合、端末制御部１６は、エラーメッセージを表示部１３に表示させる。例えば９箇所の検出点の輝度のうち輝度レベルが０．８５を超える箇所が存在する場合、「明るすぎて答案が読み込めません。もう少し暗いところでもう一度撮影してください」等のエラーメッセージを表示させる。また例えば９箇所の検出点の輝度のうち輝度レベルが０．６未満の箇所が存在する場合、「暗すぎて答案が読み込めません。もう少し明るいところでもう一度撮影してください」等のエラーメッセージを表示させる。
When some of the nine detection points are outside the predetermined range,
次に条件３について説明する。条件３は、識別コードが読み取り可能であるか否かという条件である。端末制御部１６は、識別コードが読み取り可能である場合、条件３を満たすとし、識別コードが読み取り不可能である場合、条件３を満たさないと判定する。なお識別コードは、書面の表面及び裏面の両方に印刷される。表面に印刷される識別コード（以下、第一識別コードともいう。）は、書面の表面であることを特定するための情報を含む。一方裏面に印刷される識別コード（第二識別コード）は、書面の裏面であることを特定する情報を含む。そのため、第一識別コードと第二識別コードとは、異なる情報である。端末制御部１６は、表面に係る書面画像に関しては第一識別コードが読み取り可能であるかを判定する。また端末制御部１６は、裏面に係る書面画像に関しては第二識別コードが読み取り可能であるかを判定する。
Next,
識別コードの読み取りが不可能である場合は条件３を満たさないため、この場合、端末制御部１６は、エラーメッセージを表示部１３に表示させる。エラーメッセージは「識別コードが検出できません。もう一度撮影して下さい」等である。
If the identification code cannot be read, the
上記の条件１〜条件３の全てを満たす場合、端末制御部１６は、送信ボタンを表示部１３に表示させ、送信ボタンに対するユーザ操作、すなわち送信指示を受け付ける。送信指示を受けた場合、端末制御部１６は、撮影した書面画像を、自己を識別する情報（以下、学習者ＩＤという。）と共に端末通信部３１によりサーバ２に送信する。
When all of the
次に、本発明の一実施形態に係る画像処理システム１０について、図１８及び図１９に示すフローチャートによりそれぞれ画像処理端末１及びサーバ２の動作を説明する。まず、画像処理端末１の動作について説明する。
Next, operations of the
はじめに、画像処理端末１の端末制御部１６は、撮影開始操作が入力されたか否かを判定する（ステップＳ１０）。具体的には、学習アプリケーション上の撮影開始メニューへのユーザ操作を入力部１４が検出した場合、端末制御部１６は、撮影開始操作が入力されたと判定する。そして端末制御部１６は、図９に示すプレビュー画面を表示部１３により表示して、ステップＳ２０に進む。
First, the
次に端末制御部１６は、プレビュー画面におけるシャッターボタン１４１へのユーザ操作があるか否かを判定する（ステップＳ２０）。シャッターボタン１４１への操作を検出した場合、端末制御部１６は、撮影部１５により書面を撮影する（ステップＳ３０）。
Next, the
続いて端末制御部１６は、撮影した書面画像の判読性が所定条件を満たすか否かを判定する（ステップＳ４０〜ステップＳ６０）。まず端末制御部１６は、書面画像が四辺を有するか否かを判定する（ステップＳ４０）。書面画像が四辺を有すると判定した場合、ステップＳ５０に進む。一方、書面画像が四辺を有しないと判定した場合、ステップＳ１２０に進み、エラーメッセージを表示する。具体的には端末制御部１６は、「解答用紙が検出できません。解答用紙が折れ曲がったり切れたりしていないか確認し、もう一度撮影してください」等のメッセージを表示部１３に表示させる。その後、ステップＳ２０に戻り再度撮影を促す。
Subsequently, the
ステップＳ４０において、書面画像が四辺を有すると判定した場合、端末制御部１６は、検出点の輝度が所定範囲内であるか否かを判定する（ステップＳ５０）。検出点の輝度が所定範囲内であると判定した場合、ステップＳ６０に進む。一方、検出点の輝度が所定範囲内でないと判定した場合、ステップＳ１２０に進み、エラーメッセージを表示する。具体的には端末制御部１６は、「暗すぎて答案が読み込めません。もう少し明るいところでもう一度撮影してください」又は「明るすぎて答案が読み込めません。もう少し暗いところでもう一度撮影してください」等のメッセージを表示部１３に表示させる。その後、ステップＳ２０に戻り再度撮影を促す。
If it is determined in step S40 that the document image has four sides, the
ステップＳ５０において、検出点の輝度が所定範囲内であると判定した場合、端末制御部１６は、書面画像に含まれる識別コードが読み取り可能であるか否かを判定する（ステップＳ６０）。識別コードが読み取り可能であると判定した場合、ステップＳ７０に進む。一方、識別コードが読み取り可能でないと判定した場合、ステップＳ１２０に進み、エラーメッセージを表示する。具体的には端末制御部１６は、「識別コードが検出できません。もう一度撮影して下さい」等のメッセージを表示部１３に表示させる。その後、ステップＳ２０に戻り再度撮影を促す。
When it is determined in step S50 that the luminance of the detection point is within the predetermined range, the
ステップＳ６０において、識別コードが読み取り可能であると判定した場合、端末制御部１６は、書面画像を端末記憶部１２により記憶する。また端末制御部１６は、書面画像を表示部１３により表示する（ステップＳ７０）。学習者は撮影した書面画像を目視で確認できる。
If it is determined in step S60 that the identification code can be read, the
続いて端末制御部１６は、撮影した書面画像が表面であるか否かを判定する（ステップＳ８０）。例えば端末制御部１６は、第一識別コードを読み取った場合、撮影した書面画像が表面であることを判定する。あるいは端末制御部１６は、ユーザに表面であるか否かを確認するポップアップウィンドウを表示部１３に表示させ、ユーザ操作に基づき書面画像が表面であるか否かを判定してもよい。
Subsequently, the
撮影した書面画像が表面であると判定した場合、端末制御部１６は、裏面撮影指示を受け付ける（ステップＳ９０）。具体的には端末制御部１６は、表面撮影ボタンを表示部１３に表示させ、ユーザ操作に基づき裏面撮影指示を受け付ける。表面撮影ボタンに対するユーザ操作、すなわち裏面撮影指示を受け付けた場合、書面の裏面の撮影をする。当該撮影のフローは表面と同様であり、ステップＳ２０からステップＳ８０により裏面を撮影する。
When it is determined that the photographed document image is the front surface, the
ステップＳ８０において書面画像が表面でない場合（裏面である場合）、端末制御部１６は、送信指示を受け付ける（ステップＳ１００）。具体的には端末制御部１６は、送信ボタンを表示部１３に表示させ、送信指示を受け付ける。送信指示を受けた場合、端末制御部１６は、撮影した表面及び裏面からなる書面画像を、自己の学習者ＩＤと共に端末通信部３１によりサーバ２に送信する（ステップＳ１１０）。そして処理を終了する。
When the document image is not the front side (in the case of the back side) in step S80, the
次にサーバ２の動作について説明する。はじめにサーバ２のサーバ通信部２１は、図１８のステップＳ１１０において送信された書面画像を受信する（ステップＳ２００）。
Next, the operation of the
続いてサーバ制御部２３は、受信した書面画像を登録する（ステップＳ２１０）。具体的にはサーバ制御部２３は、受信した書面画像をサーバ記憶部２２に記憶する。このときサーバ制御部２３は、書面画像の各識別コードの情報と対応付けて、サーバ記憶部２２に記憶する。
Subsequently, the
続いてサーバ制御部２３は、サーバ通信部２１により、書面画像の送信元である学習者に書面画像が到着したことを表すメッセージを送信する（ステップＳ２２０）。当該メッセージは、画像処理端末１の学習アプリケーション上で表示される。
Subsequently, the
続いてサーバ制御部２３は、受信した書面画像を添削する添削者を決定する（ステップＳ２３０）。添削者は、書面毎に予め登録しておく。サーバ記憶部２２は、識別コードと添削者情報を対応付けて記憶する。サーバ制御部２３は、受信した書面画像に含まれる識別コードに基づき、添削者を決定する。
Subsequently, the
続いてサーバ制御部２３は、ステップＳ２３０で決定した添削者の添削者端末３に、サーバ通信部２１により書面画像を送信する（ステップＳ２４０）。そして処理を終了する。
Subsequently, the
このように本発明の一実施形態に係る画像処理システム１０によれば、画像処理端末１が書面画像の判読性が所定条件を満たすか否かを判定するため、書面画像の判読性の低下を抑制することができる。また、各学習者の画像処理端末１がそれぞれ書面画像の判読性を判定するため、サーバ２での処理負荷を低減することができる。さらにサーバ２への送信前に判読性の判定を行うことにより、サーバ２に集積される書面画像の品質が確保され、各学習者の再送信の手間を省くことができる。また、再送信の必要性が無くなるため、通信リソースの消費を低減することができる。
As described above, according to the
また本発明の一実施形態に係る画像処理システム１０によれば、受信した書面画像に係る識別コードに基づき添削者を決定し、添削者端末３に自動的に書面画像を送信する。そのため、学習者が送信した提出物（書面画像）を、直ちに添削者に配賦して届けることが可能であり、添削者に届くまでの時間を大幅に短縮できる。
Further, according to the
なお、本実施の形態では、専用ケース４を撮影台として用いて所定距離離れた位置に配置された書面を撮影部１５により撮影するようにしたがこれに限られない。撮影台を用いずに、画像処理端末１を書面から所定距離離し、撮影部１５により撮影するようにしてもよい。
In the present embodiment, the dedicated case 4 is used as a photographing stand and a document arranged at a predetermined distance is photographed by the photographing
なお、図１８のステップＳ８０において、撮影した書面画像が表面であるか否かを判定する処理を行うとし、撮影した書面画像が表面でない場合（裏面である場合）、ステップＳ１００に進むとしたが、これに限られない。撮影した書面画像が表面でない場合（裏面である場合）、ステップＳ１００に進む前に、端末記憶部１２に、書面画像の表面が記憶されているか否かを判定してもよい。そして書面画像の表面が記憶されている場合に、ステップＳ１００に進むようにしてもよい。一方、書面画像の表面が記憶されていない場合、エラーメッセージを表示するようにしてもよい。エラーメッセージは例えば「表面が撮影されていません。もう一度最初から撮影を行なって下さい」等である。そしてステップＳ２０に戻るようにする。このようにすることで、書面画像の裏面しか撮像しないで送信処理を進めてしまうことを防止することができる。 In step S80 of FIG. 18, it is assumed that processing is performed to determine whether or not the photographed document image is the front side. If the photographed document image is not the front side (in the case of the back side), the process proceeds to step S100. Not limited to this. When the photographed document image is not the front surface (when it is the back surface), it may be determined whether or not the front surface of the document image is stored in the terminal storage unit 12 before proceeding to step S100. If the surface of the written image is stored, the process may proceed to step S100. On the other hand, when the surface of the written image is not stored, an error message may be displayed. The error message is, for example, “The surface has not been photographed. Please photograph again from the beginning”. Then, the process returns to step S20. In this way, it is possible to prevent the transmission process from proceeding without capturing only the back surface of the document image.
なお、本実施の形態では、書面画像の輝度に係る条件（条件２）について、図１７に示す１３箇所の検出点６１及び検出点６２の輝度のうち、一部の検出点を除外して判定したが、判定方法はこれに限られない。例えば１３箇所の検出点全ての輝度に基づいて判読性を判定してもよい。また除外する検出点をより多く又は少なくしてもよい。また例えば書面画像の少なくとも１点の検出点の輝度に基づき判定してもよい。また、検出点６１及び検出点６２の位置及び個数はこれに限られない。例えば書面画像の中央部分に検出点を設けてもよい。また、検出点の個数を少なくしてもよく、また多くしてもよい。また本実施の形態では、各検出点の輝度に基づき判定したがこれに限られず、一部又は全部の検出点の輝度に係る平均値、分散等の統計値を用いて、輝度に係る条件を判定してもよい。 In the present embodiment, the condition (condition 2) relating to the brightness of the document image is determined by excluding some detection points from the brightness of the 13 detection points 61 and 62 shown in FIG. However, the determination method is not limited to this. For example, the legibility may be determined based on the luminance of all 13 detection points. Further, more or less detection points may be excluded. Further, for example, the determination may be made based on the luminance of at least one detection point of the document image. Further, the positions and the number of detection points 61 and 62 are not limited to this. For example, a detection point may be provided at the center of the document image. Further, the number of detection points may be reduced or increased. In the present embodiment, the determination is made based on the luminance of each detection point. However, the present invention is not limited to this, and the condition relating to the luminance is determined using statistical values such as the average value and the variance of the luminance of some or all of the detection points. You may judge.
なお、本実施の形態では、識別コードの読み取り可能条件（条件３）について、書面の両面の識別コード（第一識別コード及び第二識別コード）の両方ともが読み取り可能であるかを判定したがこれに限られない。例えば第一識別コード及び第二識別コードの少なくとも一方のみについて読み取り可能であるか否かを判定するようにしてもよい。また、書面の両面に識別コードが印刷されているとしたがこれに限られず、表面又は裏面のいずれか一方のみに識別コードが印刷されていてもよい。例えば表面のみに識別コードが印刷されている場合、表面の識別コードのみについて読み取り可能であるかを判定するようにする。一方、裏面については、識別コードの読み取り処理（ステップＳ６０）をスキップする。 In the present embodiment, it is determined whether both of the identification codes (first identification code and second identification code) on both sides of the document can be read as the identification code readable condition (condition 3). It is not limited to this. For example, it may be determined whether at least one of the first identification code and the second identification code can be read. In addition, although the identification code is printed on both sides of the document, the present invention is not limited to this, and the identification code may be printed only on either the front surface or the back surface. For example, when an identification code is printed only on the surface, it is determined whether only the identification code on the surface can be read. On the other hand, for the back surface, the identification code reading process (step S60) is skipped.
なお、本実施の形態では、上記条件１〜条件３の全てを満たす場合に、判読性が所定条件を満たすとしたがこれに限られない。例えば上記条件１〜条件３の少なくとも１つに基づき、判読性が所定条件を満たすとしてもよい。また、条件１〜３条件の他に条件を追加してもよい。
In the present embodiment, the readability satisfies the predetermined condition when all of the
なお、画像処理端末１が、所定条件に係る定義ファイルをダウンロードして書き換え可能にしてもよい。またこれにより条件１〜３を書き換えてもよく、また条件を削除又は追加するようにしてもよい。定義ファイルは、例えばネットワークＮを介して所定の配信サーバから取得可能である。端末制御部１６は、定義ファイルを端末通信部１１により受信し、端末記憶部１２により記憶する。サーバ２は蓄積された書面画像から機械学習することにより最適な定義ファイルを作成してもよく、各画像処理端末１に当該定義ファイルをダウンロードさせるようにしてもよい。機械学習は、Support Vector Machine（SVM）、Deep Neural Network（DNN）、Convolutional Neural Network（CNN）等を適宜用いることができる。
Note that the
なお、本実施の形態では書面の両面（表面及び裏面）を撮影するとしたがこれに限られない。書面の片面（表面）のみを撮像するようにしてもよい。この場合、図１８におけるステップＳ７０に続いてステップＳ１００に進み、書面画像をサーバ２に送信する。
In the present embodiment, it is assumed that both sides (front side and back side) of the document are photographed, but this is not limitative. Only one side (front surface) of the document may be imaged. In this case, the process proceeds to step S100 following step S70 in FIG. 18, and the document image is transmitted to the
なお本実施の形態では、サーバ２は、受信した書面画像を添削者端末３に送信するとしたがこれに限られない。サーバ２は、受信した書面画像を画像補正し、補正した書面画像を添削者端末３に送信するようにしてもよい。図２０は、画像補正の一例を示す図である。図２０に示す画像補正では、まずグリッド６３により書面画像５０を９個の領域に分割する。そして領域毎に輝度を判定し、輝度が所定値以下の領域のみ、画像補正により輝度を上昇させるようにする。このようにすることで、書面画像の判読性を向上させることができる。なお画像補正は輝度に限らない。他にも、コントラスト、色調レベル、書面画像の角度等を補正してもよく、また台形補正を施してもよい。
In the present embodiment, the
例えばコントラストを補正する場合、書面画像をＲＧＢの各色に分割し、各色のコントラストをそれぞれ個別に補正してもよい。このようにすることで、書面画像を見やすい画像に変換することができる。同様に書面画像の明るさを補正することにより、書面画像を見やすい画像に変換してもよい。 For example, when correcting the contrast, the document image may be divided into RGB colors, and the contrast of each color may be individually corrected. In this way, it is possible to convert the document image into an image that is easy to see. Similarly, the document image may be converted into an image that is easy to see by correcting the brightness of the document image.
また、書面画像がグレー画像である場合、当該画像を２値化するようにしてもよい。２値化は、単純２値化（単一の閾値により２値化する手法）であってもよく、あるいは別の手法（周辺輝度を参照しながら１画素単位で２値化閾値を変化させる手法）により行なう。後者の手法では、ある画素（以下、注目画素という。）の２値化閾値を、注目画素を中心とした所定範囲（以下、参照範囲という。）の輝度に基づき設定する。例えば参照範囲の平均輝度に基づき２値化閾値を設定する。このようにすることで、周囲と比較して暗い画素、又は周囲と比較して明るい画素を適切に検知することができる。好適には参照範囲は、注目画素を中心とする正方形の範囲である。参照範囲の大きさは適宜設定可能である。 Further, when the document image is a gray image, the image may be binarized. The binarization may be simple binarization (a method of binarizing with a single threshold) or another method (a method of changing the binarization threshold in units of pixels while referring to the peripheral luminance). ). In the latter method, a binarization threshold value of a certain pixel (hereinafter referred to as a target pixel) is set based on the luminance of a predetermined range (hereinafter referred to as a reference range) centered on the target pixel. For example, a binarization threshold is set based on the average luminance of the reference range. By doing so, it is possible to appropriately detect pixels that are darker than the surroundings or pixels that are brighter than the surroundings. Preferably, the reference range is a square range centered on the target pixel. The size of the reference range can be set as appropriate.
また、書面画像の角度を補正する場合、識別コード５１の回転している角度を利用し、当該角度を打ち消すように補正するようにしてもよい。このようにすることで書面画像の回転角を容易に補正することができる。
Further, when correcting the angle of the document image, the rotation angle of the
なお、サーバ２は、所定の領域の輝度を上昇させるようにしてもよい。例えば図２０のグリッド６３のうち、領域６３ａ及び領域６３ｂは、添削者が添削コメント等を記載する領域（以下、添削領域という。）に相当する。添削領域に記入される添削コメントの判読性を高めるために、輝度を上げるようにしてもよい。なお添削領域はグリッド６３の領域６３ａ及び６３ｂに限られず、書面画像の任意の領域であってよい。また添削領域は、書面毎に異なってもよい。この場合サーバ２は、書面画像の識別コードに基づき、書面毎に予め定められた添削領域に基づき、添削領域を決定して当該領域の輝度を上げるようにする。
Note that the
なお画像補正をサーバ２にて行うとしたがこれに限られず、画像処理端末１が、サーバ２に送信前の書面画像に対して上記の画像処理を行うようにしてもよい。
Although the image correction is performed by the
なお、本実施の形態ではサーバ２は、受信した書面画像に含まれる識別コードに基づき、添削者を決定するとしたがこれに限られない。サーバ２は、識別コードに加えて、学習者ＩＤに基づき添削者を決定するようにしてもよい。また、学習者ＩＤのみに基づき添削者を決定するようにしてもよい。
In the present embodiment, the
本発明を諸図面や実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形や修正を行うことが容易であることに注意されたい。従って、これらの変形や修正は本発明の範囲に含まれることに留意されたい。例えば、各手段、各ステップ等に含まれる機能等は論理的に矛盾しないように再配置可能であり、複数の手段やステップ等を１つに組み合わせたり、或いは分割したりすることが可能である。 Although the present invention has been described based on the drawings and examples, it should be noted that those skilled in the art can easily make various modifications and corrections based on the present disclosure. Therefore, it should be noted that these variations and modifications are included in the scope of the present invention. For example, the functions included in each means, each step, etc. can be rearranged so that there is no logical contradiction, and a plurality of means, steps, etc. can be combined or divided into one. .
１０ 画像処理システム
１ 画像処理端末（学習者端末）
１１ 端末通信部
１２ 端末記憶部
１３ 表示部
１４ 入力部
１５ 撮影部
１６ 端末制御部
１７ バス
２ サーバ
２１ サーバ通信部
２２ サーバ記憶部
２３ サーバ制御部
２４ バス
３ 添削者端末
３１ 端末通信部
３２ 端末記憶部
３３ 表示部
３４ 入力部
３５ 端末制御部
３６ バス
４ 専用ケース
４１ 表蓋
４２ 裏蓋
４３ 書面配置台
４３１切り込み部
４４ 端末保持台
４４１ 天板部
４４２ 天板支持部
４４３ 係合部
４４４ 係合部
ＬＥＤスイッチ４４５
４５ ＬＥＤ
５ 書面
５０ 書面画像
５１ 識別コード
５２ 所定の領域
５３ 走査線
５４ 検出エッジ
５５ 辺
５６ 四隅の位置
６１ 検出点
６２ 検出点
１３１ 第一矩形枠
１３２ 第二矩形枠
１４１ シャッターボタン
１４２ ホームボタン
６３ グリッド
10
DESCRIPTION OF SYMBOLS 11 Terminal communication part 12 Terminal memory |
45 LED
5
Claims (14)
前記画像処理端末は、
書面を撮影して書面画像を生成する撮影部と、
前記書面画像の判読性が所定条件を満たすか否か判定する制御部と、
前記判読性が前記所定条件を満たす場合、前記サーバに前記書面画像を送信する端末通信部と、
前記判読性が前記所定条件を満たさない場合、エラーメッセージを表示する表示部と、
を備え、
前記サーバは、
前記画像処理端末から前記書面画像を受信するサーバ通信部と、
前記書面画像を記憶する記憶部と、
を備える、画像処理システム。 An image processing system comprising an image processing terminal and a server connected by a network,
The image processing terminal
A photographing unit for photographing a document and generating a document image;
A control unit for determining whether the readability of the written image satisfies a predetermined condition;
When the readability satisfies the predetermined condition, a terminal communication unit that transmits the document image to the server;
If the legibility does not satisfy the predetermined condition, a display unit that displays an error message;
With
The server
A server communication unit for receiving the document image from the image processing terminal;
A storage unit for storing the written image;
An image processing system comprising:
前記所定条件は、前記識別コードが読み取り可能であるという条件を含む、請求項１乃至４のいずれか一項に記載の画像処理システム。 The document includes an identification code;
The image processing system according to claim 1, wherein the predetermined condition includes a condition that the identification code can be read.
前記書面の表面に第一識別コードが印刷されており、前記表面の裏面に第二識別コードが印刷されており、
前記所定条件は、前記書面画像の前記第一識別コード及び前記第二識別コードのいずれもが読み取り可能であるという条件を含む、請求項５に記載の画像処理システム。 The identification code is composed of a first identification code and a second identification code,
A first identification code is printed on the front surface of the document, and a second identification code is printed on the back surface of the front surface,
The image processing system according to claim 5, wherein the predetermined condition includes a condition that both the first identification code and the second identification code of the document image are readable.
前記ガイド枠は、前記書面を撮影する範囲を示す第一矩形枠と、前記識別コードを撮影する範囲を示す第二矩形枠とを含む、請求項５又は６に記載の画像処理システム。 The display unit displays a guide frame indicating a shooting range when shooting by the shooting unit,
The image processing system according to claim 5, wherein the guide frame includes a first rectangular frame indicating a range in which the document is captured and a second rectangular frame indicating a range in which the identification code is captured.
前記画像処理端末が、
書面を撮影して書面画像を生成する撮影するステップと、
前記書面画像の判読性が所定条件を満たすか否か判定するステップと、
前記判読性が前記所定条件を満たす場合、前記サーバに前記書面画像を送信するステップと、
前記判読性が前記所定条件を満たさない場合、エラーメッセージを表示するステップと、
前記サーバが、
前記画像処理端末から前記書面画像を受信するステップと、
前記書面画像を記憶するステップと、
を含む、画像処理方法。 An image processing method in an image processing system comprising an image processing terminal and a server connected by a network,
The image processing terminal is
Shooting a document to generate a document image;
Determining whether the readability of the written image satisfies a predetermined condition;
If the legibility meets the predetermined condition, sending the written image to the server;
When the legibility does not satisfy the predetermined condition, displaying an error message;
The server is
Receiving the document image from the image processing terminal;
Storing the written image;
Including an image processing method.
前記書面画像の判読性が所定条件を満たすか否か判定する制御部と、
前記判読性が前記所定条件を満たす場合、サーバに前記書面画像を送信する通信部と、
前記判読性が前記所定条件を満たさない場合、エラーメッセージを表示する表示部と、
を備える、画像処理端末。 A photographing unit for photographing a document and generating a document image;
A control unit for determining whether the readability of the written image satisfies a predetermined condition;
When the legibility satisfies the predetermined condition, a communication unit that transmits the document image to a server;
If the legibility does not satisfy the predetermined condition, a display unit that displays an error message;
An image processing terminal comprising:
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016133452A JP6220931B1 (en) | 2016-07-05 | 2016-07-05 | Image processing system, image processing method, and image processing terminal |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016133452A JP6220931B1 (en) | 2016-07-05 | 2016-07-05 | Image processing system, image processing method, and image processing terminal |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP6220931B1 JP6220931B1 (en) | 2017-10-25 |
| JP2018007106A true JP2018007106A (en) | 2018-01-11 |
Family
ID=60156884
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016133452A Active JP6220931B1 (en) | 2016-07-05 | 2016-07-05 | Image processing system, image processing method, and image processing terminal |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6220931B1 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2020030646A (en) * | 2018-08-23 | 2020-02-27 | カシオ計算機株式会社 | Portable terminal device, information recording method, and program |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005308966A (en) * | 2004-04-20 | 2005-11-04 | Konica Minolta Photo Imaging Inc | Photographing device |
| JP5007564B2 (en) * | 2006-12-28 | 2012-08-22 | 株式会社ニコン | Image transfer system |
| JP6075850B2 (en) * | 2012-12-17 | 2017-02-08 | Kddi株式会社 | Information terminal device, program, and recognition system |
| JP5808456B1 (en) * | 2014-05-01 | 2015-11-10 | 株式会社Pfu | Imaging system |
-
2016
- 2016-07-05 JP JP2016133452A patent/JP6220931B1/en active Active
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2020030646A (en) * | 2018-08-23 | 2020-02-27 | カシオ計算機株式会社 | Portable terminal device, information recording method, and program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6220931B1 (en) | 2017-10-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5327468B2 (en) | Projector, program, information storage medium, and trapezoidal distortion correction method | |
| US20180367732A1 (en) | Visual cues for managing image capture | |
| US7764307B2 (en) | Remote instruction system, computer readable medium for remote instruction system and method | |
| US9906762B2 (en) | Communication apparatus, method of controlling communication apparatus, non-transitory computer-readable storage medium | |
| JP5257618B2 (en) | Projector, program, information storage medium, and exposure adjustment method | |
| US9122123B2 (en) | Projector having focus adjusting section for adjusting projection based on projection distance information, computer program product, and image projecting method | |
| US20120212408A1 (en) | Image generation device, projector, and image generation method | |
| KR20090090682A (en) | Image distortion compensation apparatus and method | |
| JP5598033B2 (en) | Information processing apparatus, information processing method, and program | |
| JP2020178248A (en) | Projection control device, projection control method, projection system, program, and storage medium | |
| JP2008187362A (en) | Projector and projected image adjustment method | |
| JP6220931B1 (en) | Image processing system, image processing method, and image processing terminal | |
| US20210281742A1 (en) | Document detections from video images | |
| JP2012205089A (en) | Information processing device, information processing method, and information processing program | |
| JP5482925B2 (en) | Image capturing apparatus and program | |
| US20160224854A1 (en) | Information processing apparatus, information processing method, and storage medium | |
| JP2015149603A (en) | Image display system, image display device, and image display method | |
| US10893205B2 (en) | Image display method and image display device using the same | |
| US10944884B2 (en) | Imaging device and non-transitory computer readable medium storing program | |
| CN117082219A (en) | Information processing apparatus, projection method, and non-transitory computer readable medium | |
| JP4692321B2 (en) | Imaging device | |
| US20200174555A1 (en) | Display device, display method, and display system | |
| JP6626792B2 (en) | Terminal and processing execution method | |
| JP2006345462A (en) | Communication apparatus, communication control method, communication control program, and recording medium | |
| JP2017003732A (en) | Image projection device, image projection system, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170728 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170815 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170821 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170905 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20171002 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6220931 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |