JP5150594B2

JP5150594B2 - 画像処理装置

Info

Publication number: JP5150594B2
Application number: JP2009224823A
Authority: JP
Inventors: 敏明六尾
Original assignee: Kyocera Document Solutions Inc
Current assignee: Kyocera Document Solutions Inc
Priority date: 2009-09-29
Filing date: 2009-09-29
Publication date: 2013-02-20
Anticipated expiration: 2029-09-29
Also published as: JP2011077659A

Description

本発明は、画像の方向を判別して所定の処理を行う画像処理装置に関する。

画像として入力された文書原稿を、電子文書や印刷物として出力する際に、閲覧時の利便性を向上させるため、当該文書原稿の方向を判別し、文書方向を正立させて出力する技術が知られている。例えば特許文献１には、読み取った原稿の中に文書方向が判別不可能なページがあった場合、取り敢えず１部数のみ印刷出力してユーザによる確認・指示を求め、当該確認によって問題がなければ残りの部数を出力し、ユーザが指示をした場合には、指示に従って判別不可能なページの回転を行い、その上で、指定部数の印刷出力を行う画像処理装置が開示されている。

特開２００１−３０５８０号公報

特許文献１に開示の画像処理装置では、１部数のみは印刷出力されるので、当該画像処理装置による方向の判別が不可能なページの方向をユーザが確認するのは容易であるが、印刷出力することなくユーザが文書の方向を確認するためには、当該画像処理装置等が備える表示部での確認作業が不可欠となる。しかしながら、文書原稿や印刷物と比較すると前記表示部は低解像度である。そのため、例えば方向修正後の候補となる４つの画像、すなわち（１）入力された文書原稿の画像をそのまま表示した画像、（２）当該文書原稿の画像を右９０°回転させた画像、（３）当該文書原稿の画像を左９０°回転させた画像、（４）当該文書原稿の画像を１８０°回転させた画像、をすべて前記表示部に表示させてユーザに選択を促すと、前記文書原稿の方向を当該ユーザが確認しづらいという問題点がある。さらに、このような方向修正の作業はユーザにとって煩わしいのみでなく、方向修正には画像の方向を変更する処理が伴うため、画像処理の時間が増加してしまうという問題点もある。

本発明は、上記の課題を解決するためになされたものであり、画像処理装置による方向判別が困難な文書原稿について、当該文書原稿の方向を確認する作業をユーザが容易にできるとともに、当該ユーザが文書原稿の方向修正を行う確率を少なくすることができる画像処理装置を提供することを目的とする。

本発明の一の局面に係る画像処理装置は、画像として入力された文書原稿画像を画像処理する画像処理装置であって、前記文書原稿画像の方向判別を行い、前記文書原稿画像の正立方向を判別し、正立方向である確率を方向判別の精度として求める方向判別部と、ユーザによる前記文書原稿画像への方向修正指示を受け付ける指示受付部と、前記方向判別部による前記方向判別の結果が示す方向または前記指示受付部が受け付けた前記方向修正指示が示す方向に前記文書原稿画像の方向を変更する方向変更部と、前記方向変更部によって方向を変更された前記文書原稿画像である方向変更画像と、前記ユーザに前記文書原稿画像の修正方向を選択させるためのガイド情報と、を表示部に表示させる表示制御部と、を備え、前記方向変更部は、前記方向判別部が正立方向と判定した方向に前記文書原稿画像の方向を変更して前記方向変更画像を作成し、前記表示制御部は、前記方向判別部による前記方向判別の精度が予め定められた第１の閾値を超えた場合は、前記方向変更画像および前記ガイド情報のいずれをも前記表示部に表示させず、前記方向判別部による前記方向判別の精度が前記第１の閾値以下であった場合は、前記方向変更画像と前記ガイド情報とを前記表示部に表示させ、当該表示後に前記指示受付部がユーザからの前記方向修正指示を受け付けたときには、前記方向変更部はさらに、当該方向修正指示が示す方向に前記方向変更画像の方向を変更し、複数の前記文書原稿画像が入力された場合に、前記方向判別部は、前記複数の前記文書原稿画像のうち、前記方向判別の精度が前記第１の閾値未満の予め定められた第２の閾値以下であった前記文書原稿画像が１つ以上存在したときには、当該文書原稿画像を前記方向判別ができない判別不能画像であると判定し、前記方向変更部は、前記判別不能画像に対して、前記判別の精度が前記第１の閾値を超えた他の前記文書原稿画像について前記方向判別部が正立方向と判定した方向に前記判別不能画像の方向を変更して前記方向変更画像を作成し、前記表示制御部は、前記方向変更部が、前記判別不能画像の方向を変更して作成した前記方向変更画像と前記ガイド情報とを表示部に表示させ、当該表示後に前記指示受付部がユーザからの前記方向修正指示を受け付けたときには、前記方向変更部はさらに、当該方向修正指示が示す方向に前記方向変更画像の方向を変更する。

この構成によれば、前記方向判別の前記精度が予め定められた第１の閾値以下である場合、すなわち当該精度が低い場合に、前記方向変更画像が表示部に表示される。そのため、方向判別の精度は低いものの、最も確率の高い方向の候補を表示部に表示させることができる。したがって、ユーザが前記方向修正指示をする確率が小さくなる。すなわち、ユーザが、煩わしい方向修正の作業をする確率が小さくなる。また、当該方向修正に伴う前記方向変更部による前記方向変更画像作成の確率も小さくなるので、画像処理の時間が増加する可能性を少なくすることができる。
また、複数の前記文書原稿画像のなかに前記判別不能画像が存在した場合であっても、当該判別不能画像について正立方向である確率が最も大きい方向に方向を変更して前記方向変更画像を作成することが可能となり、当該方向変更画像を前記方向修正後の候補として前記表示部に表示させることができる。そのため、ユーザが前記判別不能画像に対して前記方向修正指示をする確率が小さくなる。なぜならば、前記判別不能画像の方向は、他の文書原稿画像と同方向である可能性が高いので、前記方向判別部が方向を判別した他の前記文書原稿画像と同方向に、前記方向変更部が当該判別不能画像の方向を変更すれば、当該判別不能画像から作成された方向変更画像は正しい方向で表示される可能性が高いからである。

さらにこの構成によれば、前記方向修正が必要な場合であっても、例えば方向修正後の候補となる（１）無回転の前記文書原稿画像、（２）右９０°回転された前記方向変更画像、（３）左９０°回転された前記方向変更画像、（４）１８０°回転させた前記方向変更画像、の４画像をすべて前記表示部に表示させてユーザに選択を促す場合とは異なり、最も確率の高い方向の候補として前記方向変更画像が１画像のみ前記表示部に表示されるので、当該表示部が低解像度であっても、候補として表示された当該方向変更画像の視認が容易であるから、ユーザは前記方向修正の作業を容易に行うことができる。

本発明の他の局面に係る画像処理装置は、画像として入力された文書原稿画像を画像処理する画像処理装置であって、前記文書原稿画像の方向判別を行い、前記文書原稿画像の正立方向を判別し、正立方向である確率を方向判別の精度として求める方向判別部と、ユーザによる前記文書原稿画像への方向修正指示を受け付ける指示受付部と、前記方向判別部による前記方向判別の結果が示す方向または前記指示受付部が受け付けた前記方向修正指示が示す方向に前記文書原稿画像の方向を変更する方向変更部と、前記方向変更部によって方向を変更された前記文書原稿画像である方向変更画像と、前記ユーザに前記文書原稿画像の修正方向を選択させるためのガイド情報と、を表示部に表示させる表示制御部と、を備え、前記方向判別の精度が予め定められた第１の閾値を超えた場合には、前記方向変更部は、前記方向判別部が正立方向と判定した方向に前記文書原稿画像の方向を変更して前記方向変更画像を作成し、前記表示制御部は、前記方向変更画像および前記ガイド情報のいずれをも前記表示部に表示させず、前記方向判別の精度が前記第１の閾値以下であった場合には、前記方向判別部は、前記文書原稿画像を前記方向判別ができない１次判別不能画像であると判定し、当該１次判別不能画像について２回目の前記方向判別を行い、当該２回目の前記方向判別において当該方向判別の精度が前記第１の閾値未満の予め定められた第２の閾値を超えたときには、前記方向変更部は、前記方向判別部が正立方向と判定した方向に前記１次判別不能画像の方向を変更して前記方向変更画像を作成し、前記表示制御部は、当該方向変更画像と前記ガイド情報とを前記表示部に表示させ、当該２回目の前記方向判別において当該方向判別の精度が前記第２の閾値以下のときには、前記方向判別部は、前記１次判別不能画像を前記２回目の方向判別においても方向判別ができない２次判別不能画像であると判定し、前記方向変更部は、当該２次判別不能画像の方向を変更せず、前記表示制御部は、当該２次判別不能画像と前記ガイド情報とを前記表示部に表示させ、当該表示後に前記指示受付部がユーザからの前記方向修正指示を受け付けたときには、前記方向変更部は、当該方向修正指示が示す方向に前記当該２次判別不能画像の方向を変更する。

この構成によれば、前記方向判別部による１回目の方向判別において前記文書原稿画像の方向判別ができなかった場合に、当該１回目の判別よりも判別精度を下げて前記２回目の方向判別がされ、当該２回目の方向判別の結果が得られたときには、当該２回目の判別において前記方向判別部が正立方向と判定した方向に方向が変更された前記文書原稿画像が表示部に表示される。そのため、方向判別の精度は低いものの、最も確率の高い方向の候補を表示部に表示させることができる。したがって、ユーザが方向修正を指示する確率が小さくなる。すなわち、ユーザが、煩わしい方向修正の作業をする確率が小さくなる。また、当該方向修正に伴う前記方向変更部による前記方向変更画像作成の確率も小さくなるので、画像処理の時間が増加する可能性を少なくすることができる。

またこの構成によれば、前記２回目の方向判別においても判別結果が得られないときには、前記方向変更部は、前記２次判別不能画像の方向を変更せず、前記表示制御部は、当該２次判別不能画像と前記ガイド情報とを前記表示部に表示させる。すなわち、前記第２の閾値以下となるほど前記方向判別の精度が低いときには、前記方向変更部による前記方向変更がされていない前記文書原稿画像に対してユーザに前記方向修正指示を求め、当該修正指示の示す方向に当該文書原稿画像の方向を変更する。したがって、前記方向判別の精度が低すぎるために前記方向変更部が作成した前記方向変更画像の方向が正立方向ではなく、当該方向変更画像に対してユーザによる前記方向修正指示が必要となり、当該方向修正に伴って前記方向変更部が再度前記方向変更画像を作成し、画像処理の時間が増加することを防止できる。

さらにこの構成によれば、方向修正が必要な場合であっても、例えば方向修正後の候補となる（１）前記方向修正されていない前記文書原稿画像、（２）右９０°回転された前記方向変更画像、（３）左９０°回転された前記方向変更画像、（４）１８０°回転させた前記方向変更画像、の４画像をすべて前記表示部に表示させてユーザに選択を促す場合とは異なり、当該２回目の方向判別の結果が得られたときには最も確率の高い方向の候補として前記方向変更画像が１画像のみ前記表示部に表示され、前記２回目の方向判別において判別結果が得られないときには、前記方向変更がされていない前記文書原稿画像が１画像のみ表示される。したがって、当該表示部が低解像度であっても、候補として表示された当該方向変更画像の視認が容易であるから、ユーザは前記方向修正の作業を容易に行うことができる。

上記構成において、複数の前記文書原稿画像が入力された場合に、前記方向変更部は、前記２回目の方向判別において、前記複数の前記文書原稿画像のうちに、前記２次判別不能画像が１つ以上存在したときには、前記判別の精度が前記第１の閾値を超えた他の前記文書原稿画像について前記方向判別部が正立方向と判定した方向に当該２次判別不能画像の方向を変更して前記方向変更画像を作成し、前記表示制御部は、前記方向変更部が、前記２次判別不能画像の方向を変更して作成した前記方向変更画像と前記ガイド情報とを表示部に表示させ、当該表示後に前記指示受付部がユーザからの前記方向修正指示を受け付けたときには、前記方向変更部はさらに、当該方向修正指示が示す方向に前記方向変更画像の方向を変更することが好ましい。

この構成によれば、複数の前記文書原稿画像のなかに前記２次判別不能画像が存在した場合であっても、当該２次判別不能画像について正立方向である確率が最も大きい方向に方向を修正して前記方向変更画像を作成することが可能となり、当該方向変更画像を前記方向修正後の候補として前記表示部に表示させることができる。そのため、ユーザが前記２次判別不能画像の方向修正を指示する確率が小さくなる。なぜならば、前記２次判別不能画像の方向は、他の文書原稿画像と同方向である可能性が高いので、前記方向判別部が方向を判別した他の前記文書原稿画像と同方向に、前記方向変更部が当該２次判別不能画像の方向を変更すれば、当該２次判別不能画像から作成された方向変更画像は正しい方向で表示される可能性が高いからである。

本発明によれば、画像処理における方向判別が困難な文書原稿の方向をユーザが容易に確認でき、しかもユーザが当該文書原稿の方向修正を行う確率を小さくすることができる画像処理装置を提供することができる。

本発明の一実施形態に係る画像処理装置が接続されたネットワークの構成図である。本発明の一実施形態に係る画像処理装置の機械的構成を示す断面図である。本発明の一実施形態に係る画像処理装置の機能ブロック図である。本発明の一実施形態に係る画像処理装置の動作の一例を説明するためのフローチャートである。本発明の他の実施形態に係る画像処理装置の動作の一例を説明するためのフローチャートである。

＜実施形態１＞
以下、本発明の実施形態１に係る画像処理装置について図面を参照して説明する。なお、本実施形態では、画像処理装置として、カラーコピー、スキャナ、ＯＣＲ（ＯｐｔｉｃａｌＣｈａｒａｃｔｏｒＲｅａｄｅｒ）、プリンタ等の機能を備えた複合機１を採用している。図１は、本発明の一実施形態に係る画像形成装置を備えたネットワークの構成図である。

図１に示すように複合機１は、ＬＡＮ（ＬｏｃａｌＡｒｅａＮｅｔｗｏｒｋ）に接続されている。ＬＡＮにはさらに、ＰＣ（ＰｅｒｓｏｎａｌＣｏｍｐｕｔｅｒ）５００およびファイルサーバ４００が接続されている。複合機１、ファイルサーバ４００、およびＰＣ５００はＬＡＮを介して種々のデータを送受信する。

ＰＣ５００には、複合機１の印刷対象となる印刷データを作成するためのプリンタドライバや、複合機１の状態や印刷ジョブを確認するためのユーティリティソフトウェア等がインストールされている。ＰＣ５００は、ユーザからの操作指令に基づいて印刷対象となる印刷データを生成し、当該印刷データを、ＬＡＮを介して複合機１に送信する。

ファイルサーバ４００には、例えば、ＰＣ５００で作成された文書ファイルや、複合機１でスキャンした後に電子文書化された文書原稿等が、ＬＡＮを介して共有可能に保存される。

なお、図１においては、複合機１およびＰＣ５００は、それぞれ１台のみ図示しているが、ＰＣ５００は、通常はＬＡＮに複数接続され、複合機１もＬＡＮに複数台接続されることがある。

図２は、複合機１の機械的構成を主に示す断面図である。複合機１は、コピー機能、スキャナ機能、ＯＣＲ機能、およびプリンタ機能等を備えており、本体部２と、本体部２の左方に配設されたスタックトレイ３と、本体部２の上部に配設された原稿読取部４と、原稿読取部４の上方に配設された原稿給送部５とを有している。

原稿読取部４は、ＣＣＤ（ＣｈａｒｇｅＣｏｕｐｌｅｄＤｅｖｉｃｅ）センサおよび露光ランプ等からなるスキャナ部６と、ガラス等の透明部材により構成された原稿台７と、原稿読取スリット８とを備える。スキャナ部６は、図略の駆動部によって移動可能に構成され、原稿台７に載置された原稿を読み取るときは、原稿台７に対向する位置で原稿面に沿って移動され、原稿画像を走査しつつ取得した画像データを画像処理部１１０（図３参照）へ出力する。また、原稿給送部５により給送された原稿を読み取るときは、原稿読取スリット８と対向する位置に移動され、原稿読取スリット８を介して原稿給送部５による原稿の搬送動作と同期して原稿の画像を取得し、その画像データを画像処理部１１０へ出力する。

原稿給送部５は、原稿を載置するための原稿載置部９と、画像読み取り済みの原稿を排出するための原稿排出部１０と、原稿載置部９に載置された原稿を１枚ずつ繰り出して原稿読取スリット８に対向する位置へ搬送し、原稿排出部１０へ排出するための給紙ローラ（図略）、搬送ローラ（図略）等からなる原稿搬送機構１１を備える。原稿搬送機構１１は、さらに原稿を表裏反転させて原稿読取スリット８と対向する位置へ再搬送する用紙反転機構（図略）を備え、原稿の両面の画像を、原稿読取スリット８を介してスキャナ部６から読取可能にしている。

原稿給送部５は、その前面側が上方に移動可能となるように本体部２に対して回動自在に設けられている。原稿給送部５の前面側を上方に移動させて原稿台７の上面を開放することにより、該原稿台７の上面に読み取り原稿、例えば見開き状態にされた書籍等をユーザが載置できるようになっている。

本体部２は、複数の給紙カセット１２と、給紙カセット１２から記録紙を１枚ずつ繰り出して後述の画像形成部１４へ搬送する給紙ローラ１３と、給紙カセット１２から搬送されてきた記録紙に画像を形成する画像形成部１４とを備える。

画像形成部１４は、スキャナ部６等で取得された画像データに基づきレーザ等を出力して感光体ドラム１５を露光する光走査装置１６と、感光体ドラム１５の表面に形成された静電潜像を顕像化して画像を形成する現像部１７と、感光体ドラム１５上に形成された画像を記録紙に転写する転写部１８と、画像が転写された記録紙を加熱して該画像を記録紙に定着させる定着部１９と、画像形成部１４内の用紙搬送路中に設けられ、記録紙をスタックトレイ３又は排出トレイ２２まで搬送する搬送ローラ２０、２１等とを備える。

記録紙の両面に画像を形成する場合は、画像形成部１４で記録紙の一方の面に画像を形成した後、この記録紙を排出トレイ２２側の搬送ローラ２０にニップされた状態とする。この状態で搬送ローラ２０を反転させて記録紙をスイッチバックさせ、記録紙を用紙搬送路Ｌに送って画像形成部１４の上流域に再度搬送し、画像形成部１４により他方の面に画像を形成した後、記録紙をスタックトレイ３又は排出トレイ２２に排出する。

複合機１のフロント部には、操作部２３（指示受付部）が設けられている。操作部２３は、スタートキー２４と、テンキー２５と、表示部２６と、リセットキー２７と、ストップキー２８と、機能切換キー２９と、を備える。

スタートキー２４は、ユーザが印刷や原稿読込み等の開始指示を入力するためのキーである。テンキー２５は、ユーザが印刷部数等を入力するためキーである。ストップキー２８は、実行中の印刷（画像形成）動作を停止させるためのキーである。機能切換キー２９は、コピー機能、スキャナ機能、ＯＣＲ機能、およびプリンタ機能を切り換えるためのキーである。

表示部２６は、例えばタッチパネル機能を有する液晶ディスプレイであり、ユーザによる各種操作の用に供されるガイド情報等を表示する。ユーザは、表示部２６や前記の各種キーを押すことで前記の各種操作の設定入力を行う。前記ガイド情報には、例えばスキャナ部６で読み取られた文書原稿画像の修正方向をユーザに選択させるための情報がある。この情報の表示として、例えば「修正する方向をテンキーで入力してください。１：変更なし２：右９０°回転３：左９０°回転４：１８０°回転」のような表示をさせることができる。

図３は、複合機１の電気的な構成を示すブロック図である。なお、図２に示す構成と同一の構成については同一の番号を付してその説明を省略する。図３に示すように、複合機１は、前述した原稿読取部４、原稿給送部５、原稿搬送機構１１、画像形成部１４および操作部２３に加えて、ファイルサーバ４００やＰＣ５００等のＬＡＮに接続された外部機器との間で各種のデータを通信する通信部３０と、原稿読取部４、原稿給送部５、原稿搬送機構１１、画像形成部１４、操作部２３および通信部３０の各動作や処理を互いに関連付けて制御する制御部１００とを備える。

制御部１００は、データを一時的に保管する機能や作業領域としての機能を有するＲＡＭ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）、複合機１の制御プログラム等を予め記憶するＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）、および前記制御プログラム等をＲＯＭから読み出して実行するＣＰＵを備えて成り、ＣＰＵとＲＡＭやＲＯＭとの間でデータの授受を行うように構成されている。

また、制御部１００は、前記制御プログラムを実行することで、画像処理部１１０と表示制御部１２０とをソフトウェア的に具備するように機能する。画像処理部１１０は、文字領域抽出部１１１と、ノイズ除去部１１２と、方向判別部１１３と、方向変更部１１４と、電子ファイル化部１１５と、を具備するように機能する。なお、画像処理部１１０および表示制御部１２０ならびに画像処理部１１０の各部をハードウェアとして備えるようにすることも可能である。

表示制御部１２０は、表示部２６を制御して、ユーザに方向修正指示を求める前記文書原稿画像や前記ガイド情報等を表示部２６に表示させる。

文字領域抽出部１１１は、スキャナ部６が文書原稿を読み取って作成し、画像処理部１１０に出力した前記文書原稿画像から、図や写真等を除いた、例えば見出しや本文等が記載されている文字領域を抽出する。当該文字領域を抽出する技術としては、例えば、エッジ検出処理の手法を用いることができる。この場合、文字領域抽出部１１１は、前記文書原稿画像を構成する各画素を順次注目画素とし、その注目画素と周辺画素を抽出して、それらの画素に対してエッジ検出フィルタを用いたフィルタ処理を施すことにより、画像の輪郭を構成するエッジ画素を検出するエッジ検出処理を行う。そして、このエッジ検出処理でエッジを検出した場合に、文字領域抽出部１１１は、当該注目画素をエッジ画素と判定し、当該エッジ画素に基づいて文字領域を判定する。例えば、文字領域抽出部１１１は、注目画素と、注目画素に隣接する８近傍画素との各々の輝度の差分値を算出し、所定の閾値よりも大きな値を有する差分値が、一定個数以上（例えば４個以上）ある場合、その注目画素は、文字を構成するエッジ画素であると判定する。文字領域抽出部１１１は、当該エッジ画素が、予め定められた閾値以上存在する領域を文字領域として抽出する。文字領域抽出部１１１が前記文字領域を抽出することで、方向判別部１１３は、当該文字領域に含まれる文字の方向を判別して、前記文書原稿画像の方向を判別することが可能となる。

ノイズ除去部１１２は、文字領域抽出部１１１によって抽出された文字領域に含まれるノイズを検出し、当該ノイズを除去する。前記ノイズを検出する技術としては、例えば、文書原稿画像をなす画素の各々のうち、階調値が予め設定された閾値以上である画素を検出し、前記階調値が前記閾値以上である前記画素のうち、副走査線上に連続して並んでいる複数の画素を、副走査方向に延びるノイズとして検出する手法を用いることができる。また、前記ノイズを除去する技術としては、例えば、ノイズが混入している画素の周辺に位置する複数の画素の階調値の平均値を算出し、ノイズが混入している画素の階調値に代えてこの平均値を採用する手法を用いることができる。ノイズ除去部１１２が、前記文字領域からノイズを除去することで、方向判別部１１３による前記方向判別の前記精度が向上する。

方向判別部１１３は、スキャナ部６が文書原稿を読み取って画像処理部１１０に出力した文書原稿画像の方向を判別する。この方向判別の技術としては、例えば、特徴量を比較する手法を用いることができる。この場合、例えば上下方向および左右方向いずれの方向においても対称度が低い複数の文字についての交点位置情報や端点位置情報等の特徴量を、当該複数の文字を各々９０°単位で回転させた場合の４パターン全てについてデータベース化した辞書データを、例えば前記ＲＯＭに予め記憶させておく。方向判別部１１３は、文字領域抽出部１１１が抽出した前記文字領域の画像と前記辞書データとを比較し、当該文字領域の画像と最も類似度が得られた前記辞書データ中の文字の方向を、前記文書原稿画像の方向として判定する。この類似度が、前記文書原稿画像の前記方向判別の精度、すなわち当該方向判別の確からしさを示す値である。当該精度は、０％から１００％の間の値となる。

スキャナ部６から画像処理部１１０へ前記文書原稿画像が複数出力され、前記複数の前記文書原稿画像のうち、前記方向判別の精度が予め定められた閾値Ｔｈ２（第２の閾値）以下であった前記文書原稿画像が１つ以上存在した場合には、方向判別部１１３は、前記方向判別の精度が閾値Ｔｈ２以下であった前記文書原稿画像を前記方向判別ができない判別不能画像であると判定し、前記方向判別ができなかったという結果を方向変更部１１４に出力し、前記精度が閾値Ｔｈ２を超える他の文書原稿画像については、前記方向判別の結果を方向変更部１１４に出力する。

一方、スキャナ部６から画像処理部１１０へ前記文書原稿画像が１つのみ出力された場合には、方向判別部１１３は、前記方向判別の前記精度に関係なく当該方向判別の結果を方向変更部１１４に出力する。

方向変更部１１４は、方向判別部１１３から方向変更部１１４へ入力された前記方向判別結果が示す方向、すなわち、方向判別部１１３が正立方向と判定した方向、または操作部２３でユーザが入力した原稿方向の修正指示が示す方向に前記文書原稿画像の方向を変更して方向変更画像を作成する。なお、前記文書原稿画像が正立方向を向いた正立画像であると方向判別部１１３判定した場合と、原稿方向を変更しないという指示を操作部２３にユーザが入力した場合とのいずれの場合も、当然に方向変更部１１４は、前記文書原稿画像の方向を変更しない。

前記方向判別の前記精度が、閾値Ｔｈ２よりも大きい予め定められた閾値Ｔｈ１（第１の閾値）を超える場合には、方向変更部１１４は、方向判別部１１３が正立方向と判定した方向に前記文書原稿画像の方向を変更して前記方向変更画像を作成し、当該方向変更画像を電子ファイル化部１１５または画像形成部１４に出力する。

前記精度が、閾値Ｔｈ１以下かつ閾値Ｔｈ２よりも大きい場合には、方向変更部１１４は、方向判別部１１３が正立方向と判定した方向に前記文書原稿画像の方向を変更して前記方向変更画像を作成し、当該方向変更画像を表示制御部１２０に出力する。このとき表示制御部１２０は、方向変更部１１４が表示制御部１２０に出力した前記方向変更画像に加えて、当該方向変更画像の修正方向をユーザに選択させるための前記ガイド情報を表示部２６に表示させる。前記精度が閾値Ｔｈ２以下の場合であっても、スキャナ部６から画像処理部１１０へ前記文書原稿画像が１つのみ出力されたときは、これと同じ処理となる。

一方、スキャナ部６から画像処理部１１０へ前記文書原稿画像が複数出力され、かつ、前記精度が閾値Ｔｈ２以下の場合は、方向変更部１１４は、前記判別不能画像に対して、前記方向判別の前記精度が閾値Ｔｈ１を超えた他の前記文書原稿画像について方向判別部１１３が正立方向と判定した方向に前記判別不能画像の方向を変更して方向変更画像を作成し、当該方向変更画像を表示制御部１２０に出力する。この場合も、表示制御部１２０は、方向変更部１１４が表示制御部１２０に出力した前記方向変更画像に加えて、当該方向変更画像の修正方向をユーザに選択させるための前記ガイド情報を表示部２６に表示させる。

さらに、方向変更部１１４は、ユーザが前記ガイド情報を確認後に、原稿方向の修正指示を操作部２３で入力した場合には、当該修正指示が示す方向に前記文書原稿画像を正立させた方向変更画像を作成し、当該方向変更画像を電子ファイル化部１１５または画像形成部１４に出力する。

前記判別不能画像に対して、方向変更部１１４が、前記方向判別の前記精度が閾値Ｔｈ１を超えた他の前記文書原稿画像について方向判別部１１３が正立方向と判定した方向に前記判別不能画像の方向を変更して方向変更画像を作成し、表示制御部１２０が、当該方向変更画像を表示部２６に表示させることで、当該判別不能画像について正立方向である確率が最も大きい方向に方向を修正して前記方向変更画像を作成することが可能となり、当該方向変更画像を前記方向修正後の候補として前記表示部に表示させることができる。そのため、ユーザが前記判別不能画像の方向修正を指示する確率が小さくなる。なぜならば、前記判別不能画像の方向は、他の文書原稿画像と同方向である可能性が高いので、方向判別部１１３が方向を判別した他の前記文書原稿画像と同方向に、方向変更部１１４が当該判別不能画像の方向を変更すれば、当該判別不能画像から作成された方向変更画像は正しい方向で表示される可能性が高いからである。

電子ファイル化部１１５は、方向変更部１１４から入力された前記方向変更画像を変換し、ＰＤＦ（ＰｏｒｔａｂｌｅＤｏｃｕｍｅｎｔＦｏｒｍａｔ）等の電子ファイルを作成する。電子ファイル化部１１５が作成した前記電子ファイルは、通信部３０からＬＡＮを介してファイルサーバ４００に送信される。

図４は、複合機１が文書原稿からＰＤＦを作成する場合の、制御部１００における処理を示すフローチャートである。スキャナ部６が文書原稿を読み取り、当該文書原稿から前記文書原稿画像を作成して画像処理部１１０に出力すると、文字領域抽出部１１１が当該文書原稿画像の文字領域を抽出し（ステップＳ１）、ノイズ除去部１１２が前記文字領域に含まれるノイズを除去する（ステップＳ２）。方向判別部１１３は、前記文書原稿画像の方向を判別する（ステップＳ３）。

前記文書原稿画像が１枚のみの場合は（ステップＳ４でＹＥＳ）、ステップＳ７に進み、方向変更部１１４は、方向判別部１１３が正立方向と判定した方向に前記文書原稿画像の方向を変更して前記方向変更画像を作成する。前記文書原稿画像が複数の場合は（ステップＳ４でＮＯ）、方向判別部１１３は、前記文書原稿画像が前記判別不能画像であるか否かを判定する（ステップＳ５）。前記精度が閾値Ｔｈ２以下のときには、方向判別部１１３は、前記文書原稿画像を前記判別不能画像であると判定し（ステップＳ５でＮＯ）、ステップＳ６に進んで、方向変更部１１４は、前記方向判別の前記精度が閾値Ｔｈ１を超えた他の前記文書原稿画像について方向判別部１１３が正立方向と判定した方向に前記判別不能画像の方向を変更して方向変更画像を作成する。さらに方向変更部１１４は、当該方向変更画像を表示制御部１２０に出力する（ステップＳ９へ）。

前記精度が閾値Ｔｈ２を超えるときには（ステップＳ５でＹＥＳ）、方向変更部１１４は、方向判別部１１３が正立方向と判定した方向に前記文書原稿画像の方向を変更して前記方向変更画像を作成する（ステップＳ７）。前記精度が閾値Ｔｈ２を超えかつ閾値Ｔｈ１以下の場合には（ステップＳ８でＮＯ）、方向変更部１１４は、前記方向変更画像を表示制御部１２０に出力する（ステップＳ９へ）。

ステップＳ９では、表示制御部１２０は、方向変更部１１４が表示制御部１２０に出力した前記方向変更画像に加えて、前記ユーザに前記文書原稿画像の修正方向を選択させるための前記ガイド情報を表示部２６に表示させる。当該ユーザが前記ガイド情報を確認後に、原稿方向の修正指示を操作部２３で入力した場合には（ステップＳ１０でＹＥＳ）、ステップＳ１２に進む。前記ユーザが前記ガイド情報を確認後に、原稿方向を変更しないという指示を操作部２３で入力した場合には（ステップＳ１０でＮＯ）、方向変更部１１４は、当該文書原稿画像の向きを変更することなく電子ファイル化部１１５に出力する（ステップＳ１３へ）。

前記精度が閾値Ｔｈ１を超えた場合に（ステップＳ８でＹＥＳ）、方向判別部１１３が前記文書原稿画像を前記正立画像と判定していたときには（ステップＳ１１でＹＥＳ）、方向変更部１１４は、当該文書原稿画像の向きを変更することなく電子ファイル化部１１５に出力する（ステップＳ１３へ）。

前記精度が閾値Ｔｈ１を超えた場合に（ステップＳ８でＹＥＳ）、方向判別部１１３が前記文書原稿画像を前記正立画像ではないと判定していたときには（ステップＳ１１でＮＯ）、方向変更部１１４は、方向判別部１１３が正立方向と判定した方向に前記文書原稿画像の方向を変更して前記方向変更画像を作成する（ステップＳ１２）。ステップ１０でＹＥＳからステップＳ１２に進んだときには、方向変更部１１４は、ユーザが操作部２３で入力した修正指示が示す方向に前記文書原稿画像の方向を変更して前記方向変更画像を作成し、当該方向変更画像を電子ファイル化部１１５に出力する（ステップＳ１３へ）。

ステップＳ１０でＮＯ、ステップＳ１１でＹＥＳ、ステップＳ１２のいずれかからステップＳ１３へと進むと、電子ファイル化部１１５は、方向変更部１１４から入力された前記方向変更画像を変換し、ＰＤＦファイルを作成する。

実施形態１に係る複合機１によれば、前記方向判別の前記精度が閾値Ｔｈ１以下である場合、すなわち当該精度が低い場合に、前記方向変更画像が表示部２６に表示される。そのため、方向判別の精度は低いものの、最も確率の高い方向の候補を表示部２６に表示させることができる。したがって、ユーザが方向修正を指示する確率が小さくなる。すなわち、ユーザが、煩わしい方向修正の作業をする確率が小さくなる。また、当該方向修正に伴う方向変更部１１４による前記方向変更画像作成の確率も小さくなるので、画像処理の時間が増加する可能性を少なくすることができる。

さらにこの構成によれば、前記方向修正が必要な場合であっても、例えば方向修正後の候補となる（１）無回転の前記文書原稿画像、（２）右９０°回転された前記方向変更画像、（３）左９０°回転された前記方向変更画像、（４）１８０°回転させた前記方向変更画像、の４画像をすべて表示部２６に表示させてユーザに選択を促す場合とは異なり、最も確率の高い方向の候補として前記方向変更画像が１画像のみ表示部２６に表示されるので、表示部２６が低解像度であっても、候補として表示された当該方向変更画像の視認が容易であるから、ユーザは前記方向修正の作業を容易に行うことができる。

＜実施形態２＞
実施形態２に係る複合機１’は、実施形態１に係る複合機１と機械的構成は同一であり、文書原稿を印刷出力する場合、または文書原稿から電子ファイルを作成する場合の処理が複合機１とは異なる。すなわち、複合機１’において、方向判別部１１３は、前記方向判別の前記精度が閾値Ｔｈ１以下の場合に方向判別が不能であると判定し、閾値Ｔｈ２を基準として２回目の方向判別を行う（複合機１と同じくＴｈ１＞Ｔｈ２である）。すなわち、複合機１は、方向判別不可とする閾値がＴｈ２のみであるのに対し、複合機１’は、Ｔｈ１およびＴｈ２のいずれもが方向判別不可とする閾値となっている。複合機１’の複合機１と相違点である方向判別部１１３および方向変更部１１４における処理について以下に説明する。

方向判別部１１３による１回目の方向判別の前記精度が、予め定められた閾値Ｔｈ１（第１の閾値）を超える場合には、方向変更部１１４は、方向判別部１１３が正立方向と判定した方向に前記文書原稿画像の方向を変更して前記方向変更画像を作成し、当該方向変更画像を電子ファイル化部１１５または画像形成部１４に出力する。

前記１回目の前記方向判別の精度が閾値Ｔｈ１以下であった場合には、方向判別部１１３は、前記文書原稿を前記方向判別ができない１次判別不能画像であると判定し、当該１次判別不能について２回目の前記方向判別を行う。

前記２回目の前記方向判別において当該方向判別の精度が閾値Ｔｈ１未満の予め定められた閾値Ｔｈ２（第２の閾値）を超えたときには、方向変更部１１４は、方向判別部１１３が正立方向と判定した方向に前記文書原稿画像の方向を変更して前記方向変更画像を作成し、当該方向変更画像を表示制御部１２０に出力する。このとき表示制御部１２０は、方向変更部１１４が表示制御部１２０に出力した前記方向変更画像に加えて、当該方向変更画像の修正方向をユーザに選択させるための前記ガイド情報を表示部２６に表示させる。

前記２回目の前記方向判別において当該方向判別の精度が閾値Ｔｈ２以下のときには、方向判別部１１３は、前記１次判別不能画像を前記２回目の方向判別においても方向判別ができない２次判別不能画像であると判定し、方向変更部１１４は、当該２次判別不能画像を、方向を変更せずに表示制御部１２０に出力する。当該２次判別不能画像は、スキャナ部６から画像処理部１１０へ入力された前記文書原稿画像である。このとき表示制御部１２０は、方向変更部１１４が表示制御部１２０に出力した前記２次判別不能画像（＝前記文書原稿画像）に加えて、当該２次判別不能画像の修正方向をユーザに選択させるための前記ガイド情報を表示部２６に表示させる。

ただし、前記２回目の前記方向判別において当該方向判別の精度が閾値Ｔｈ２以下のときであっても、前記１回目の方向判別の前記精度が、閾値Ｔｈ１を超えた他の前記文書原稿画像が存在したときには、方向変更部１１４は、当該他の前記文書原稿画像について方向判別部１１３が正立方向と判定した方向に前記判別不能画像の方向を変更して方向変更画像を作成し、当該方向変更画像を表示制御部１２０に出力する。この場合も、表示制御部１２０は、方向変更部１１４が表示制御部１２０に出力した前記方向変更画像に加えて、当該方向変更画像の修正方向をユーザに選択させるための前記ガイド情報を表示部２６に表示させる。

前記ガイド情報を確認後に、ユーザが原稿方向の修正指示を操作部２３で入力した場合には、方向変更部１１４は、表示部２６に表示された前記２次判別不能画像または方向変更画像を前記修正指示が示す方向に正立させた方向変更画像を作成し、当該方向変更画像を電子ファイル化部１１５または画像形成部１４に出力する。

図５は、複合機１’が文書原稿からＰＤＦを作成する場合の、制御部１００における処理を示すフローチャートである。

スキャナ部６が文書原稿を読み取り、当該文書原稿から文書原稿画像を作成して画像処理部１１０に出力すると、文字領域抽出部１１１が当該文書原稿画像の文字領域を抽出し（ステップＳ２１）、ノイズ除去部１１２が前記文字領域に含まれるノイズを除去する（ステップＳ２２）。つづいて方向判別部１１３は、前記文書原稿画像の方向について、前記１回目の方向判別を行う（ステップＳ２３）。

前記１回目の方向判別で、前記文書原稿画像が前記１次判別不能画像であった場合、すなわち前記精度が閾値Ｔｈ１以下の場合には（ステップＳ２４でＮＯ）、方向判別部１１３は、前記１次判別不能画像の方向について、２回目の方向判別を行う（ステップＳ２５）。

２回目の方向判別で、方向判別部１１３が、前記１次判別不能画像を前記２次判別不能画像と判定した場合、すなわち前記精度が閾値Ｔｈ２以下の場合に（ステップＳ２６でＮＯ）、前記文書原稿画像が１枚のみのときは（ステップＳ２７でＹＥＳ）、方向変更部１１４は、当該２次判別不能画像（方向変更がされていないので前記文書原稿画像のままである）の方向を変更せずに表示制御部１２０に出力し、表示制御部１２０は、方向変更部１１４が表示制御部１２０に出力した前記２次判別不能画像に加えて、当該２次判別不能画像の修正方向をユーザに選択させるための前記ガイド情報を表示部２６に表示させる（ステップＳ２８）。

前記文書原稿画像が複数のときは（ステップＳ２７でＮＯ）、方向変更部１１４は、閾値Ｔｈ１を超えた他の前記文書原稿画像について方向判別部１１３が正立方向と判定した方向に前記２次判別不能画像の方向を変更して方向変更画像を作成し（ステップＳ２９）、当該方向変更画像を表示制御部１２０に出力する（ステップＳ３１へ）。

前記２回目の方向判別で、方向判別部１１３が、前記１次判別不能画像の方向を判別できた場合、すなわち前記精度が閾値Ｔｈ２を超える場合には（ステップＳ２６でＹＥＳ）、方向変更部１１４は、方向判別部１１３が正立方向と判定した方向に前記文書原稿画像の方向を変更して前記方向変更画像を作成し（ステップＳ３０）、当該方向変更画像を表示制御部１２０に出力する（ステップＳ３１へ）。このとき表示制御部１２０は、方向変更部１１４が表示制御部１２０に出力した前記方向変更画像に加えて、当該方向変更画像の修正方向をユーザに選択させるための前記ガイド情報を表示部２６に表示させる（ステップＳ３１）。

ステップＳ２８またはステップＳ３１で表示部２６に表示された前記ガイド情報を確認後に、ユーザが原稿方向の修正指示を操作部２３で入力した場合には（ステップＳ３２でＹＥＳ）、ステップＳ３４に進む。ユーザが前記ガイド情報を確認後に、原稿方向を変更しないという指示を操作部２３で入力した場合には（ステップＳ３２でＮＯ）、方向変更部１１４は、前記文書原稿画像（ステップＳ２８）または前記方向変更画像（ステップＳ３１）を回転させることなく電子ファイル化部１１５に出力する（ステップＳ３５へ）。

１回目の方向判別で方向判別部１１３が、前記文書原稿画像の方向を判別できた場合、すなわち前記精度が閾値Ｔｈ１を超えた場合に（ステップＳ２４でＹＥＳ）、方向判別部１１３が前記文書原稿画像の方向を正立方向と判定していたときには（ステップＳ３３でＹＥＳ）、方向変更部１１４は、当該文書原稿画像の向きを変更することなく電子ファイル化部１１５に出力する（ステップＳ３５へ）。

１回目の方向判別で方向判別部１１３が、前記文書原稿画像の方向を判別できた場合、すなわち前記精度が閾値Ｔｈ１を超えた場合に（ステップＳ２４でＹＥＳ）、方向判別部１１３が前記文書原稿画像の方向が正立方向ではないと判定していたときには（ステップＳ３３でＮＯ）、方向変更部１１４は、方向判別部１１３が正立方向と判定した方向に前記文書原稿画像の方向を変更して方向変更画像を作成する（ステップＳ３４）。ステップＳ３２でＹＥＳからステップＳ３４に進んだときには、方向変更部１１４は、ユーザが操作部２３で入力した修正指示が示す方向に前記文書原稿画像の方向を変更して前記方向変更画像を作成し、当該方向変更画像を電子ファイル化部１１５に出力する（ステップＳ３５へ）。

ステップＳ３２でＮＯ、ステップＳ３３でＹＥＳ、ステップＳ３４のいずれかからステップＳ３５へと進むと、電子ファイル化部１１５は、方向変更部１１４から入力された前記方向変更画像を変換し、ＰＤＦファイルを作成する。

以上説明した実施形態２に係る複合機１’においても、実施形態１に係る複合機１と同様の効果が得られる。さらに実施形態２に係る複合機１’によれば、前記２回目の方向判別においても判別結果が得られないときには、方向変更部１１４は、前記２次判別不能画像の方向を変更せず、表示制御部１２０は、当該２次判別不能画像と前記ガイド情報とを表示部２６に表示させる。これにより、前記方向判別の精度が低すぎるために方向変更部１１４が作成した前記方向変更画像の方向が正立方向ではなく、当該方向変更画像に対してユーザによる前記方向修正指示が必要となり、当該方向修正に伴って方向変更部１１４が再度前記方向変更画像を作成し、画像処理の時間が増加することを防止できる。なお、処理速度が低下するので、複合機１’において、前記方向判別のやり直しは１度のみとされている。

以上、本発明の実施形態１および実施形態２に係る複合機１および複合機１’について説明したが、本発明は上記実施形態に限定されるものではなく、例えば次のような変形実施形態を取ることもできる。

（１）上記実施形態２において、閾値Ｔｈ１および閾値Ｔｈ２の少なくとも一方を、ユーザが操作部２３から設定変更できるようにしてもよい。この構成によれば、例えば閾値Ｔｈ１が高すぎるために前記２回目の前記方向判別が頻発して、前記方向変更画像の方向が正立方向であるにもかかわらず、ユーザが原稿方向の確認をする頻度が大きい場合には、ユーザが閾値Ｔｈ１を低くすることでこのような不都合を抑制でき、逆に例えば閾値Ｔｈ２が低すぎるために、正立方向でない前記方向変更画像の方向を、ユーザが方向修正する頻度が大きい場合には、ユーザが閾値Ｔｈ２を高くすることでこのような不都合を抑制できる。

（２）上記実施形態においては、本発明に係る画像処理装置として複合機１および複合機１’を例に挙げて説明したが、本発明は、画像処理装置が複合機であることに限定されるものではなく、複写機やファクシミリ装置、またはプリンタ等であってもよい。

１、１’ 複合機（画像処理装置）
２３操作部（指示受付部）
２６表示部
１００制御部
１１０画像処理部
１１３方向判別部
１１４方向変更部
１２０表示制御部

Claims

画像として入力された文書原稿画像を画像処理する画像処理装置であって、
前記文書原稿画像の方向判別を行い、前記文書原稿画像の正立方向を判別し、正立方向である確率を方向判別の精度として求める方向判別部と、
ユーザによる前記文書原稿画像への方向修正指示を受け付ける指示受付部と、
前記方向判別部による前記方向判別の結果が示す方向または前記指示受付部が受け付けた前記方向修正指示が示す方向に前記文書原稿画像の方向を変更する方向変更部と、
前記方向変更部によって方向を変更された前記文書原稿画像である方向変更画像と、前記ユーザに前記文書原稿画像の修正方向を選択させるためのガイド情報と、を表示部に表示させる表示制御部と、を備え、
前記方向変更部は、前記方向判別部が正立方向と判定した方向に前記文書原稿画像の方向を変更して前記方向変更画像を作成し、
前記表示制御部は、前記方向判別部による前記方向判別の精度が予め定められた第１の閾値を超えた場合は、前記方向変更画像および前記ガイド情報のいずれをも前記表示部に表示させず、前記方向判別部による前記方向判別の精度が前記第１の閾値以下であった場合は、前記方向変更画像と前記ガイド情報とを前記表示部に表示させ、
当該表示後に前記指示受付部がユーザからの前記方向修正指示を受け付けたときには、前記方向変更部はさらに、当該方向修正指示が示す方向に前記方向変更画像の方向を変更し、
複数の前記文書原稿画像が入力された場合に、
前記方向判別部は、前記複数の前記文書原稿画像のうち、前記方向判別の精度が前記第１の閾値未満の予め定められた第２の閾値以下であった前記文書原稿画像が１つ以上存在したときには、当該文書原稿画像を前記方向判別ができない判別不能画像であると判定し、
前記方向変更部は、前記判別不能画像に対して、前記判別の精度が前記第１の閾値を超えた他の前記文書原稿画像について前記方向判別部が正立方向と判定した方向に前記判別不能画像の方向を変更して前記方向変更画像を作成し、
前記表示制御部は、前記方向変更部が、前記判別不能画像の方向を変更して作成した前記方向変更画像と前記ガイド情報とを表示部に表示させ、
当該表示後に前記指示受付部がユーザからの前記方向修正指示を受け付けたときには、前記方向変更部はさらに、当該方向修正指示が示す方向に前記方向変更画像の方向を変更する画像処理装置。
画像として入力された文書原稿画像を画像処理する画像処理装置であって、
前記文書原稿画像の方向判別を行い、前記文書原稿画像の正立方向を判別し、正立方向である確率を方向判別の精度として求める方向判別部と、
ユーザによる前記文書原稿画像への方向修正指示を受け付ける指示受付部と、
前記方向判別部による前記方向判別の結果が示す方向または前記指示受付部が受け付けた前記方向修正指示が示す方向に前記文書原稿画像の方向を変更する方向変更部と、
前記方向変更部によって方向を変更された前記文書原稿画像である方向変更画像と、前記ユーザに前記文書原稿画像の修正方向を選択させるためのガイド情報と、を表示部に表示させる表示制御部と、を備え、
前記方向判別の精度が予め定められた第１の閾値を超えた場合には、
前記方向変更部は、前記方向判別部が正立方向と判定した方向に前記文書原稿画像の方向を変更して前記方向変更画像を作成し、前記表示制御部は、前記方向変更画像および前記ガイド情報のいずれをも前記表示部に表示させず、
前記方向判別の精度が前記第１の閾値以下であった場合には、
前記方向判別部は、前記文書原稿画像を前記方向判別ができない１次判別不能画像であると判定し、当該１次判別不能画像について２回目の前記方向判別を行い、
当該２回目の前記方向判別において当該方向判別の精度が前記第１の閾値未満の予め定められた第２の閾値を超えたときには、前記方向変更部は、前記方向判別部が正立方向と判定した方向に前記１次判別不能画像の方向を変更して前記方向変更画像を作成し、前記表示制御部は、当該方向変更画像と前記ガイド情報とを前記表示部に表示させ、
当該２回目の前記方向判別において当該方向判別の精度が前記第２の閾値以下のときには、前記方向判別部は、前記１次判別不能画像を前記２回目の方向判別においても方向判別ができない２次判別不能画像であると判定し、前記方向変更部は、当該２次判別不能画像の方向を変更せず、前記表示制御部は、当該２次判別不能画像と前記ガイド情報とを前記表示部に表示させ、当該表示後に前記指示受付部がユーザからの前記方向修正指示を受け付けたときには、前記方向変更部は、当該方向修正指示が示す方向に前記当該２次判別不能画像の方向を変更する画像処理装置。
複数の前記文書原稿画像が入力された場合に、
前記方向変更部は、前記２回目の方向判別において、前記複数の前記文書原稿画像のうちに、前記２次判別不能画像が１つ以上存在したときには、前記判別の精度が前記第１の閾値を超えた他の前記文書原稿画像について前記方向判別部が正立方向と判定した方向に当該２次判別不能画像の方向を変更して前記方向変更画像を作成し、
前記表示制御部は、前記方向変更部が、前記２次判別不能画像の方向を変更して作成した前記方向変更画像と前記ガイド情報とを表示部に表示させ、
当該表示後に前記指示受付部がユーザからの前記方向修正指示を受け付けたときには、前記方向変更部はさらに、当該方向修正指示が示す方向に前記方向変更画像の方向を変更する請求項２に記載の画像処理装置。