JP4520262B2 - 画像形成装置、画像形成方法、その方法をコンピュータに実行させるプログラム、画像処理装置、および画像処理システム - Google Patents

Description

本発明は、画像形成装置、画像形成方法、その方法をコンピュータに実行させるプログラム、画像処理装置、および画像処理システムに関し、特に入力した画像データから仕上がり予想状態および設定入力画面を表示して、操作者からの設定入力を受け付ける画像形成装置、画像形成方法、その方法をコンピュータに実行させるプログラム、画像処理装置、および画像処理システムに関するものである。

従来、原稿画像を読み取るスキャナ、スキャナで読み取った原稿画像を印刷する複写機、外部から入力された画像データを印刷するプリンタやファクシミリ装置、あるいは、これらの機能を兼ね備えた複合機などの画像形成装置が用いられていた。

この種の画像形成装置にあっては、原稿の種類や濃度といった原稿の状態に関する設定、拡大率・縮小率、片面・両面、あるいは余白サイズなどの各種画像処理に関する設定、ソート、ステープル処理、あるいはパンチ穴あけといった仕上げ処理に関する設定など、様々な機能に関する設定をユーザは行う必要がある。このため、ユーザは、印刷設定に関する非常に膨大なメニュー項目の中から所望の機能を探し出し、正確な設定入力を行わなければならなかった。

これは、機器側で原稿内容に関する情報を把握していないため、原稿によっては設定する必要のない機能に関する選択肢までメニュー項目中に存在させる必要があり、メニューが非常に複雑となり、ユーザの印刷設定に関する操作の利便性が損なわれる結果となっていた。

そこで、コンタクトガラス上に原稿が載置され、原稿押えカバーが閉じると同時にプレスキャンが実行され、読み取った画像に基づいてカラー画像と白黒画像との判別、あるいは、文字部と写真部との判別を行うことにより、原稿画像に応じた画像処理を自動的に分離処理して、操作性等の向上を図った画像形成装置があった（特許文献１参照）。

また、ユーザが原稿の読み取り条件の設定を任意に行った場合、その内容を１つのグループとし、画像形成装置に表示される読み込み条件ボタンに対応させて記憶し、事前に登録された内容は、この読み込み条件ボタンを指定することで呼び出して、複数の設定項目が登録済みの設定値に自動更新することにより、原稿読み取り条件の設定を容易に行うことのできる画像形成装置があった（特許文献２参照）。

特開平８−２７９８８４号公報 特開２００１−２８５５３４号公報

しかしながら、このような従来技術にあっては、ユーザが印刷設定を行う際に、膨大なメニュー項目の中から所望の機能を探し出して、正確な設定入力を行わなければならないため、煩雑な上に、作業効率が悪くなるという問題があった。

この傾向は、特に最近の高機能な画像形成装置のように、使用頻度の高いものから使用頻度の低いものまで非常に豊富な機能を有しているもの、あるいは、それらを組み合わせた複合機などでは、印刷設定を行う際により重大な問題となってきている。

上記特許文献１では、原稿をプレスキャンして読み取った画像に基づいて画像の種類を判別し、判別した画像に基づいて画像が自動的に分離処理されるが、スキャン結果が印刷設定画面に表示される設定項目に直接反映されないため、印刷設定作業の効率化が図れないという問題があった。

また、上記特許文献２では、ユーザが原稿の読み取り条件の設定を任意に行い、その内容を１つのグループとして読み込み条件ボタンに対応させて記憶しておく。そして、読み込み条件ボタンを指定すると、それに対応した登録内容を呼び出して、複数の設定項目を登録済みの設定値に自動更新されるのであるが、読み込み条件ボタンの指定をユーザ自身が行う点で通常の設定作業と変わりはなく、読み込み条件の設定が容易になったとしても、設定作業自体の効率化が図られた訳ではないという問題があった。

このように、従来の画像形成装置では、原稿を読み取って画像形成を行う際にユーザは設定を実行する前に自分の設定によってどのような仕上がりになるのかを確認することはできなかったという問題、近年の画像形成装置の機能は多機能なものとなって来て設定操作自体も複雑になっているという問題、および、所望のように設定したつもりであっても印刷結果は所望の設定と異なることがあるという問題は解決されていなかった。

本発明は、上記に鑑みてなされたものであって、ユーザによる各種機能の設定作業に先立って原稿データを読み込んで予想仕上がり状態を表示し、表示された画像への接触、および操作者の発する発話を用いて画像処理項目を設定でき、操作者にとっては利便性が高く装置にとっては確実性が高い画像形成装置、画像形成方法、その方法をコンピュータに実行させるプログラム、画像処理装置、および画像処理システムを提供することを目的とする。

また、本発明は、ユーザが画像形成のための設定項目値を入力した場合、設定入力を反映した仕上がり予想画像、および新たな設定メニューを表示して画像処理項目を設定できる操作者にとっては利便性が高く装置にとっては確実性が高い画像形成装置、画像形成方法、その方法をコンピュータに実行させるプログラム、画像処理装置、および画像処理システムを提供することを目的とする。

また、本発明は、画像データを入力した場合、その原稿の特性値を検出して予想仕上がり状態および必要な設定項目を表示してユーザによる設定入力を受け付けることにより、操作者にとっては利便性が高く装置にとっては確実性が高い画像形成装置、画像形成方法、その方法をコンピュータに実行させるプログラム、画像処理装置、および画像処理システムを提供することを目的とする。

上述した課題を解決し、目的を達成するために、請求項１にかかる発明は、画像データを入力して画像データ処理および印刷仕上げ処理後の予想画像を表示し、操作者からの画像形成の処理項目の設定を受け付ける画像形成装置であって、前記予想画像の予想画像情報を生成する予想画像情報生成手段と、前記予想画像情報生成手段によって生成された予想画像情報に基づいて前記予想画像を表示する表示手段と、前記予想画像を表示する表示手段への、前記操作者の指先およびスタイラスの少なくともいずれかを含む接触物の接触により、前記予想画像に関する空間情報を取得して空間的な設定に関する指示項目である空間指示項目を識別する空間項目識別手段と、音声情報を受け付けて受け付けた前記音声情報から言語を介した設定に関する指示項目である言語指示項目を識別する言語項目識別手段と、前記空間指示項目および前記言語指示項目を関連させて記憶する設定項目記憶手段と、前記設定項目記憶手段に記憶された言語指示項目の中から前記言語項目識別手段により識別された言語指示項目に対応する空間指示項目の候補を選択して、選択した空間指示項目の候補を前記空間項目識別手段に出力するとともに、前記選択した空間指示項目の中から前記空間項目識別手段により識別された空間指示項目を取得して、前記空間項目識別手段により識別された空間指示項目と前記言語項目識別手段によって識別された言語指示項目との組み合わせにより、前記画像形成の処理項目を設定する設定手段と、を備え、前記空間項目識別手段は、前記予想画像を表示する表示手段への前記接触物の接触に対応した空間指示項目として、前記予想画像を表示する表示手段への前記接触物の接触に基づいて把握される空間情報と前記設定項目記憶手段によって記憶された空間指示項目に関連する空間情報との誤差に反比例して定められた空間確実度を付加した複数の空間指示項目を識別し、前記言語項目識別手段は、受け付けた前記音声情報に対応した言語指示項目として、受け付けた前記音声情報と前記設定項目記憶手段によって記憶された言語指示項目に関連する音声情報との誤差に反比例して定められた言語確実度を付加した複数の言語指示項目を識別し、前記設定手段は、前記空間指示項目と前記言語指示項目との相互の関連性を示す情報である項目関連度を取得し、前記空間項目識別手段により識別された複数の空間指示項目のうちｉ番目の空間指示項目の空間確実度をＳｉ、前記言語項目識別手段により識別された複数の言語指示項目のうちｊ番目の言語指示項目の言語確実度をＬｊ、ｉ番目の空間指示項目とｊ番目の言語指示項目との項目関連度をＲｉｊ、空間指示項目に対する重み係数をＳｃ、言語指示項目に対する重み係数をＬｃ、項目関連度に対する重み係数をＲｃとしたときに、Ｓｃ×Ｓｉ＋Ｌｃ×Ｌｊ＋Ｒｃ×Ｒｉｊにより算出される値が最大となるｉ番目の空間指示項目とｊ番目の言語指示項目との組み合わせにより、前記画像形成の処理項目を設定すること、を特徴とする。

また、請求項２にかかる発明は、請求項１に記載の画像形成装置において、前記予想画像情報生成手段は、前記設定手段によって設定された前記画像形成の処理項目に基づいて予想画像情報を生成するものであり、前記表示手段は、前記予想画像情報生成手段によって生成された予想画像情報に基づいて前記予想画像を表示するものであること、を特徴とする。

また、請求項３にかかる発明は、請求項１または２に記載の画像形成装置において、前記空間項目識別手段は、前記接触物が前記表示手段の画像に接触する位置、方向、および領域の少なくとも一つを含む空間情報を取得して空間指示項目を識別するものであり、前記言語項目識別手段は、前記操作者の発話による音声を受け付けて言語指示項目を識別するものであること、を特徴とする。

また、請求項４にかかる発明は、請求項１〜３のいずれか１つに記載の画像形成装置において、前記表示手段は、前記予想画像を表示するタッチパネルを有し、前記空間項目識別手段は、前記タッチパネル上で前記接触物が接触することにより前記空間情報を取得し、前記空間指示項目を識別するものであること、を特徴とする。

また、請求項５にかかる発明は、請求項４に記載の画像形成装置において、前記空間項目識別手段は、前記タッチパネル上の前記接触物が接触する軌跡から前記空間情報を識別するものであること、を特徴とする。

また、請求項６にかかる発明は、請求項１〜５のいずれか１つに記載の画像形成装置において、前記入力した画像データを解析して原稿特性値を抽出する画像解析手段をさらに備え、前記予想画像情報生成手段は、前記画像解析手段によって抽出された原稿特性値に基づいて前記予想画像情報を生成するものであること、を特徴とする。

また、請求項７にかかる発明は、画像データを入力して画像データ処理および印刷仕上げ処理後の予想画像を表示し、操作者からの画像形成の処理項目の設定を受け付ける画像形成装置において実行される方法であって、前記画像形成装置の予想画像情報生成手段により、前記予想画像の予想画像情報を生成するステップと、前記画像形成装置の表示手段により、前記予想画像情報生成手段によって生成された予想画像情報に基づいて前記予想画像を表示するステップと、前記画像形成装置の空間項目識別手段により、前記予想画像を表示する表示手段への、前記操作者の指先およびスタイラスの少なくともいずれかを含む接触物の接触により、前記予想画像に関する空間情報を取得して空間的な設定に関する指示項目である空間指示項目を識別するステップと、前記画像形成装置の言語項目識別手段により、音声情報を受け付けて受け付けた前記音声情報から言語を介した設定に関する指示項目である言語指示項目を識別するステップと、画像形成装置の設定項目記憶手段により前記空間指示項目および前記言語指示項目を関連させて記憶するステップと、前記画像形成装置の設定手段により、前記設定項目記憶手段に記憶された言語指示項目の中から前記言語項目識別手段により識別された言語指示項目に対応する空間指示項目の候補を選択して、選択した空間指示項目の候補を前記空間項目識別手段に出力するとともに、前記選択した空間指示項目の候補の中から前記空間項目識別手段により識別された空間指示項目を取得して、前記空間項目識別手段によって識別された空間指示項目と前記言語項目識別手段によって識別された言語指示項目との組み合わせにより、前記画像形成の処理項目を設定するステップと、を含み、前記空間項目識別手段により空間指示項目を識別するステップでは、前記予想画像を表示する表示手段への前記接触物の接触に対応した空間指示項目として、前記予想画像を表示する表示手段への前記接触物の接触に基づいて把握される空間情報と前記設定項目記憶手段によって記憶された空間指示項目に関連する空間情報との誤差に反比例して定められた空間確実度を付加した複数の空間指示項目を識別し、前記言語項目識別手段により言語指示項目を識別するステップでは、受け付けた前記音声情報に対応した言語指示項目として、受け付けた前記音声情報と前記設定項目記憶手段によって記憶された言語指示項目に関連する音声情報との誤差に反比例して定められた言語確実度を付加した複数の言語指示項目を識別し、前記設定手段により前記画像形成の処理項目を設定するステップでは、前記空間指示項目と前記言語指示項目との相互の関連性を示す情報である項目関連度を取得し、前記空間項目識別手段により識別された複数の空間指示項目のうちｉ番目の空間指示項目の空間確実度をＳｉ、前記言語項目識別手段により識別された複数の言語指示項目のうちｊ番目の言語指示項目の言語確実度をＬｊ、ｉ番目の空間指示項目とｊ番目の言語指示項目との項目関連度をＲｉｊ、空間指示項目に対する重み係数をＳｃ、言語指示項目に対する重み係数をＬｃ、項目関連度に対する重み係数をＲｃとしたときに、Ｓｃ×Ｓｉ＋Ｌｃ×Ｌｊ＋Ｒｃ×Ｒｉｊにより算出される値が最大となるｉ番目の空間指示項目とｊ番目の言語指示項目との組み合わせにより、前記画像形成の処理項目を設定すること、を特徴とする。

また、請求項８にかかる発明は、請求項７に記載の画像形成方法において、前記予想画像情報生成手段により予想画像情報を生成するステップでは、前記設定手段によって設定された前記画像形成の処理項目に基づいて予想画像情報を生成し、前記表示手段により前記予想画像を表示するステップでは、前記予想画像情報生成手段によって生成された予想画像情報に基づいて前記予想画像を表示すること、を特徴とする。

また、請求項９にかかる発明は、請求項７または８に記載の画像形成方法において、前記空間項目識別手段により空間指示項目を識別するステップでは、前記接触物が前記表示手段の画像に接触する位置、方向、および領域の少なくとも一つを含む空間情報を取得して空間指示項目を識別し、前記言語項目識別手段により言語指示項目を識別するステップでは、前記操作者の発話による音声を受け付けて言語指示項目を識別すること、を特徴とする。

また、請求項１０にかかる発明は、請求項７〜９のいずれか１つに記載の画像形成方法において、前記画像形成装置の画像解析手段により、前記入力した画像データを解析して原稿特性値を抽出するステップをさらに含み、前記予想画像情報生成手段により予想画像情報を生成するステップでは、前記画像解析手段によって抽出された原稿特性値に基づいて前記予想画像情報を生成すること、を特徴とする。

また、請求項１１にかかる発明は、プログラムであって、請求項７〜１０のいずれか１つに記載の画像形成方法をコンピュータに実行させることを特徴とする。

また、請求項１２にかかる発明は、画像データを入力して画像データ処理および印刷仕上げ処理後の予想画像を表示し、操作者からの画像形成の処理項目の設定を受け付ける画像形成装置における画像処理装置であって、前記予想画像の予想画像情報を生成する予想画像情報生成手段と、前記予想画像情報生成手段によって生成された予想画像情報に基づいて前記予想画像を表示する表示手段と、前記予想画像を表示する表示手段への、前記操作者の指先およびスタイラスの少なくともいずれかを含む接触物の接触により、前記予想画像に関する空間情報を取得して空間的な設定に関する指示項目である空間指示項目を識別する空間項目識別手段と、音声情報を受け付けて受け付けた前記音声情報から言語を介した設定に関する指示項目である言語指示項目を識別する言語項目識別手段と、前記空間指示項目および前記言語指示項目を関連させて記憶する設定項目記憶手段と、前記設定項目記憶手段に記憶された言語指示項目の中から前記言語項目識別手段により識別された言語指示項目に対応する空間指示項目の候補を選択して、選択した空間指示項目の候補を前記空間項目識別手段に出力するとともに、前記選択した空間指示項目の中から前記空間項目識別手段により識別された空間指示項目を取得して、前記空間項目識別手段により識別された空間指示項目と前記言語項目識別手段によって識別された言語指示項目との組み合わせにより、前記画像形成の処理項目を設定する設定手段と、を備え、前記空間項目識別手段は、前記予想画像を表示する表示手段への前記接触物の接触に対応した空間指示項目として、前記予想画像を表示する表示手段への前記接触物の接触に基づいて把握される空間情報と前記設定項目記憶手段によって記憶された空間指示項目に関連する空間情報との誤差に反比例して定められた空間確実度を付加した複数の空間指示項目を識別し、前記言語項目識別手段は、受け付けた前記音声情報に対応した言語指示項目として、受け付けた前記音声情報と前記設定項目記憶手段によって記憶された言語指示項目に関連する音声情報との誤差に反比例して定められた言語確実度を付加した複数の言語指示項目を識別し、前記設定手段は、前記空間指示項目と前記言語指示項目との相互の関連性を示す情報である項目関連度を取得し、前記空間項目識別手段により識別された複数の空間指示項目のうちｉ番目の空間指示項目の空間確実度をＳｉ、前記言語項目識別手段により識別された複数の言語指示項目のうちｊ番目の言語指示項目の言語確実度をＬｊ、ｉ番目の空間指示項目とｊ番目の言語指示項目との項目関連度をＲｉｊ、空間指示項目に対する重み係数をＳｃ、言語指示項目に対する重み係数をＬｃ、項目関連度に対する重み係数をＲｃとしたときに、Ｓｃ×Ｓｉ＋Ｌｃ×Ｌｊ＋Ｒｃ×Ｒｉｊにより算出される値が最大となるｉ番目の空間指示項目とｊ番目の言語指示項目との組み合わせにより、前記画像形成の処理項目を設定すること、を特徴とする。

また、請求項１３にかかる発明は、請求項１２に記載の画像処理装置において、前記予想画像情報生成手段は、前記設定手段によって設定された前記画像形成の処理項目に基づいて予想画像情報を生成するものであり、前記表示手段は、前記予想画像情報生成手段によって生成された予想画像情報に基づいて前記予想画像を表示するものであること、を特徴とする。

また、請求項１４にかかる発明は、ネットワーク接続され、画像データを入力して画像データ処理および印刷仕上げ処理後の予想画像を表示し、操作者からの画像形成の処理項目の設定を受け付ける画像処理システムであって、それぞれのうち２つ以上が前記ネットワーク接続され、前記予想画像の予想画像情報を生成する予想画像情報生成手段と、前記予想画像情報生成手段によって生成された予想画像情報に基づいて前記予想画像を表示する表示手段と、前記予想画像を表示する表示手段への、前記操作者の指先およびスタイラスの少なくともいずれかを含む接触物の接触により、前記予想画像に関する空間情報を取得して空間的な設定に関する指示項目である空間指示項目を識別する空間項目識別手段と、音声情報を受け付けて受け付けた前記音声情報から言語を介した設定に関する指示項目である言語指示項目を識別する言語項目識別手段と、前記空間指示項目および前記言語指示項目を関連させて記憶する設定項目記憶手段と、前記設定項目記憶手段に記憶された言語指示項目の中から前記言語項目識別手段により識別された言語指示項目に対応する空間指示項目の候補を選択して、選択した空間指示項目の候補を前記空間項目識別手段に出力するとともに、前記選択した空間指示項目の中から前記空間項目識別手段により識別された空間指示項目を取得して、前記空間項目識別手段により識別された空間指示項目と前記言語項目識別手段によって識別された言語指示項目との組み合わせにより、前記画像形成の処理項目を設定する設定手段と、を備え、前記空間項目識別手段は、前記予想画像を表示する表示手段への前記接触物の接触に対応した空間指示項目として、前記予想画像を表示する表示手段への前記接触物の接触に基づいて把握される空間情報と前記設定項目記憶手段によって記憶された空間指示項目に関連する空間情報との誤差に反比例して定められた空間確実度を付加した複数の空間指示項目を識別し、前記言語項目識別手段は、受け付けた前記音声情報に対応した言語指示項目として、受け付けた前記音声情報と前記設定項目記憶手段によって記憶された言語指示項目に関連する音声情報との誤差に反比例して定められた言語確実度を付加した複数の言語指示項目を識別し、前記設定手段は、前記空間指示項目と前記言語指示項目との相互の関連性を示す情報である項目関連度を取得し、前記空間項目識別手段により識別された複数の空間指示項目のうちｉ番目の空間指示項目の空間確実度をＳｉ、前記言語項目識別手段により識別された複数の言語指示項目のうちｊ番目の言語指示項目の言語確実度をＬｊ、ｉ番目の空間指示項目とｊ番目の言語指示項目との項目関連度をＲｉｊ、空間指示項目に対する重み係数をＳｃ、言語指示項目に対する重み係数をＬｃ、項目関連度に対する重み係数をＲｃとしたときに、Ｓｃ×Ｓｉ＋Ｌｃ×Ｌｊ＋Ｒｃ×Ｒｉｊにより算出される値が最大となるｉ番目の空間指示項目とｊ番目の言語指示項目との組み合わせにより、前記画像形成の処理項目を設定すること、を特徴とする。

また、請求項１５にかかる発明は、請求項１４に記載の画像処理システムにおいて、前記予想画像情報生成手段は、前記設定手段によって設定された前記画像形成の処理項目に基づいて予想画像情報を生成するものであり、前記表示手段は、前記予想画像情報生成手段によって生成された予想画像情報に基づいて前記予想画像を表示するものであること、を特徴とする。

請求項１にかかる画像形成装置によれば、ユーザによる各種機能の設定作業に先立って画像データを入力して予想仕上がり状態を表示し、表示された画像への接触および発話によって直感的に画像形成の処理項目を設定でき、しかも、まず発話音声により言語指示項目を識別し、次に、識別した言語指示項目に基づいて空間指示項目の候補を絞り込んで、絞り込んだ中から、表示された画像への接触によって空間指示項目を識別し、さらにそれぞれの項目の確実度と関連性を表す関連度を加味して画像形成の処理項目を設定できるので、操作者にとっては利便性が高く装置にとっては確実性が高い画像形成装置を提供することができるという効果を奏する。

また、請求項２にかかる画像形成装置によれば、処理項目を設定した後の予想仕上がり状態を表示して、さらに表示された画像への接触および発話によって直感的に画像形成の処理項目を設定できるので、操作者にとっては利便性が高く装置にとっては確実性が高い画像形成装置を提供することができるという効果を奏する。

また、請求項３にかかる画像形成装置によれば、ユーザによる各種機能の設定作業に先立って画像データを入力して予想仕上がり状態を表示し、表示された画像へ接触物により軌跡を描くことおよび発話によって直感的に画像形成の処理項目を設定できるので、操作者にとっては利便性が高く装置にとっては確実性が高い画像形成装置を提供することができるという効果を奏する。

また、請求項４にかかる画像形成装置によれば、ユーザによる各種機能の設定作業に先立って画像データを入力して予想仕上がり状態をタッチパネルに表示し、表示されたタッチパネル上の画像への接触および発話によって直感的に画像形成の処理項目を設定できるので、操作者にとっては利便性が高く装置にとっては確実性が高い画像形成装置を提供することができるという効果を奏する。

また、請求項５にかかる画像形成装置によれば、ユーザによる各種機能の設定作業に先立って画像データを入力して予想仕上がり状態をタッチパネルに表示し、表示されたタッチパネル上の画像に接触して描く軌跡および発話によって直感的に画像形成の処理項目を設定できるので、操作者にとっては利便性が高く装置にとっては確実性が高い画像形成装置を提供することができるという効果を奏する。

また、請求項６にかかる画像形成装置によれば、ユーザによる各種機能の設定作業に先立って画像データを入力して原稿特性値を読み取って予想仕上がり状態を表示し、原稿特性を反映して表示された画像への接触および発話によって直感的に画像形成の処理項目を設定できるので、操作者にとっては利便性が高く装置にとっては確実性が高い画像形成装置を提供することができるという効果を奏する。

また、請求項７にかかる画像形成方法によれば、ユーザによる各種機能の設定作業に先立って画像データを入力して予想仕上がり状態を表示し、表示された画像への接触および発話によって直感的に画像形成の処理項目を設定でき、しかも、まず発話音声により言語指示項目を識別し、次に、識別した言語指示項目に基づいて空間指示項目の候補を絞り込んで、絞り込んだ中から、表示された画像への接触によって空間指示項目を識別し、さらにそれぞれの項目の確実度と関連性を表す関連度を加味して画像形成の処理項目を設定できるので、操作者にとっては利便性が高く装置にとっては確実性が高い画像形成方法を提供することができるという効果を奏する。

また、請求項８にかかる画像形成方法によれば、処理項目を設定した後の予想仕上がり状態を表示して、さらに表示された画像への接触および発話によって直感的に画像形成の処理項目を設定できるので、操作者にとっては利便性が高く装置にとっては確実性が高い画像形成方法を提供することができるという効果を奏する。

また、請求項９にかかる画像形成方法によれば、ユーザによる各種機能の設定作業に先立って画像データを入力して予想仕上がり状態を表示し、表示された画像へ接触物により軌跡を描くことおよび発話によって直感的に画像形成の処理項目を設定できるので、操作者にとっては利便性が高く装置にとっては確実性が高い画像形成方法を提供することができるという効果を奏する。

また、請求項１０にかかる画像形成方法によれば、ユーザによる各種機能の設定作業に先立って画像データを入力して原稿特性値を読み取って予想仕上がり状態を表示し、原稿特性を反映して表示された画像への接触および発話によって直感的に画像形成の処理項目を設定できるので、操作者にとっては利便性が高く装置にとっては確実性が高い画像形成方法を提供することができるという効果を奏する。

また、請求項１１にかかるプログラムは、請求項７〜１０のいずれか１つに記載の画像形成方法をコンピュータに実行させることができるという効果を奏する。

また、請求項１２にかかる画像処理装置によれば、ユーザによる各種機能の設定作業に先立って画像データを入力して予想仕上がり状態を表示し、表示された画像への接触および発話によって直感的に画像処理の処理項目を設定でき、しかも、まず発話音声により言語指示項目を識別し、次に、識別した言語指示項目に基づいて空間指示項目の候補を絞り込んで、絞り込んだ中から、表示された画像への接触によって空間指示項目を識別し、さらにそれぞれの項目の確実度と関連性を表す関連度を加味して画像形成の処理項目を設定できるので、操作者にとっては利便性が高く装置にとっては確実性が高い画像処理装置を提供することができるという効果を奏する。

また、請求項１３にかかる画像処理装置によれば、処理項目を設定した後の予想仕上がり状態を表示して、さらに表示された画像への接触および発話によって直感的に画像処理の処理項目を設定できるので、操作者にとっては利便性が高く装置にとっては確実性が高い画像処理装置を提供することができるという効果を奏する。

また、請求項１４にかかる画像処理システムによれば、ユーザによる各種機能の設定作業に先立って画像データを入力して予想仕上がり状態を表示し、表示された画像への接触および発話によって直感的に画像処理の処理項目を設定でき、しかも、まず発話音声により言語指示項目を識別し、次に、識別した言語指示項目に基づいて空間指示項目の候補を絞り込んで、絞り込んだ中から、表示された画像への接触によって空間指示項目を識別し、さらにそれぞれの項目の確実度と関連性を表す関連度を加味して画像形成の処理項目を設定できるので、操作者にとっては利便性が高く装置にとっては確実性が高い画像処理システムを提供することができるという効果を奏する。

また、請求項１５にかかる画像処理システムによれば、処理項目を設定した後の予想仕上がり状態を表示して、さらに表示された画像への接触および発話によって直感的に画像処理の処理項目を設定できるので、操作者にとっては利便性が高くシステムにとっては確実性が高いネットワーク接続された画像処理システムを提供することができるという効果を奏する。

以下に、本発明にかかる画像形成装置、画像形成方法、その方法をコンピュータに実行させるプログラム、画像処理装置、および画像処理システムの最良な実施の形態を図面に基づいて詳細に説明する。なお、この実施の形態によりこの発明が限定されるものではない。

（第１の実施の形態）
図１は、本発明の実施の形態１による画像形成装置の機能的ブロック図である。図１に示す画像形成装置１０は、スキャナ１１、ＡＤＦ（オート・ドキュメント・フィーダ）１１１、スキャナコントローラ１１２、画像記憶部１２、画像処理部１３、プリンタ１４、プリンタコントローラ１４２、仕上げ処理部１４１、操作表示部１５、操作表示制御部１５１、システム制御部１６、および通信制御部１７を備える。また、画像形成装置１０は、通信制御部１７を介してネットワーク１８と接続されている。そして、画像形成装置１０は、原稿１９の画像を読み取って画像処理を施した後、印刷物２０として出力する。

スキャナ１１は、スキャナによって原稿１９のイメージをディジタル画像データに変換する。なお、このスキャナ１１は、複数ページの原稿をセットすると、読取位置に１枚ずつ順に繰り出しながら連続して自動的に読み込みを行うことができるＡＤＦ１１１を搭載している。また、このＡＤＦ１１１は、用紙の片面に印刷された片面原稿だけでなく、両面に印刷された両面原稿を反転させて自動的に読み込むことが可能である。スキャナコントローラ１１２は、システム制御部１６の命令を受け、スキャナ１１を制御する。

画像記憶部１２は、スキャナ１１で読み取った画像データや外部から入力された画像データ等を一時的に保存しておくバッファメモリである。

画像処理部１３は、スキャナから送られ画像記憶部１２に一時的に保存された多値データに対してγ補正やＭＴＦ補正処理等を施した後、スライス処理やディザ処理のような階調処理を施して２値（または多値）化処理を施す。また、画像処理部１３は、ユーザが設定した機能に対応した各種の画像処理（拡大／縮小、濃度／色の調整など）やレイアウト加工処理（両面印刷／片面印刷、集約印刷、余白サイズの調整など）を行う。

画像処理部１３は、また空間項目識別部１３１，言語項目識別部１３２、処理項目設定部１３３、画面情報生成部１３４、および設定項目記憶部１３５を備える。画像情報生成部１３４は、入力した画像データに従って、表示パネル１５ｃで表示する予想仕上がり画像を生成する予想仕上がり画像情報を生成する。画像処理部１３は本発明の特徴的な部分であり、画像処理部１３が備える各部についてはさらに詳しく後述する。

プリンタ１４は、ここでは画像処理部１３で処理された画像データに基づいて光ビームを偏向走査させ、感光体上に形成した静電潜像にトナーを使って現像し、生成されたトナー画像を転写紙に転写して、定着処理を行う電子写真技術を用いたプリンタである。プリンタコントローラ１４２は、システム制御部１６の命令を受けてプリンタを制御する。

プリンタ１４は、仕上げ処理部１４１を搭載している。仕上げ処理部１４１は、ユーザの設定に基づいて、印刷処理が施された印刷物２０を部数やページ単位で仕分けを行うソート処理、複数枚の印刷媒体を揃えてステープルで綴じるステープル処理、あるいは、複数枚の印刷媒体をバインダーやファイルに綴じるためのパンチ穴を空けるパンチ穴処理といった仕上げ処理を行う。

操作表示部１５は、マイク１５ａ、タッチパネル１５ｂ、および表示パネル１５ｃを備え、マイク１５ａから音声で設定内容を入力したり、キーボードやタッチパネル１５ｂを使って設定内容を入力したり、予想仕上がり画面や画面の仕上げを設定する設定内容のメニュー項目をタッチパネル１５ｂに表示することができる。タッチパネル１５ｂは、また、視覚的表示の他、スピーカ（不図示）による音声出力を行うこととしてもよい。

操作表示部１５は、画像形成装置で実行したい機能を設定画面のメニュー項目として表示し、表示されたメニュー項目の中からユーザによる設定入力を受け付けるためのものであり、例えば、原稿の状態に応じたスキャナ１１における読み取り条件の設定、読み取った画像データを加工する画像処理部１３における設定、プリンタ１４における印刷条件の設定、あるいは、印刷後の印刷物に対してソート、ステープル、パンチ穴などの仕上げ処理を行う仕上げ処理部１４１などの設定を受け付けるものである。

ここで、操作表示部１５は、例えば画像形成装置で操作入力を行うタッチパネル１５ｂとして構成できる。タッチパネル１５ｂは、設定のためのメニュー項目を表示するほか、空間項目識別部１３１により生成した仕上がり予想情報を表示することとしても良い。仕上がり予想情報が画像やテキストの場合、タッチパネル１５ｂに表示され、仕上がり予想情報が音声の場合、スピーカ（不図示）から音声出力してもよい。

表示パネル１５ｃは、タッチパネル１５ｂと一体に構成しても良く、また、画像形成装置が備える専有の表示装置を用いても良い。

操作表示制御部１５１は、操作表示部１５との入出力を制御、例えば、画像処理部１３によって処理されたデータを操作表示部１５のタッチパネル１５ｂおよびスピーカ（不図示）に出力制御する。あるいは、操作表示制御部１５１は、操作表示部１５のマイク１５ａおよびタッチパネル１５ｂからの入力制御を行う。

システム制御部１６は、各構成部と接続されていて、画像形成装置１０全体の制御を行うものである。このシステム制御部１６は、不図示のＣＰＵ、ＲＯＭ、ＲＡＭなどから構成されており、ＣＰＵがＲＯＭに格納された基本プログラムに基づいて、ＲＡＭのワーク領域を利用しながら各種の処理を行っている。

通信制御部１７は、ＬＡＮ（ローカル・エリア・ネットワーク）やインターネットなどのネットワーク１８と接続され、通信プロトコルに従ってネットワークに接続された他の機器との間で画像データや制御データ等のやり取りを行うものである。

ここで、本発明に特徴的な画像処理部１３についてさらに説明する。画面情報生成部１３４は、入力した画像データに従って、表示パネル１５ｃに仕上がり予想画面を表示する仕上がり予想画面情報を生成する。操作表示制御部１５１は、生成された仕上がり予想画面情報に従って、表示パネル１５ｃに仕上がり予想画面を表示させる。

ここで、表示パネル１５ｃとタッチパネル１５ｂは図面上別々に記載されているが、一体的に構成する。表示パネル１５ｃに操作者の指などが接触することは、同時にタッチパネル１５ｂが接触入力を受け付ける。

操作者が、表示部パネル１５ｃに表示された仕上がり予想画面を見ながら指やスタイラスペンなど（以下ポインターと記す）で接触することによって、タッチパネル１５ｂは、表示された予想仕上がり画面上の印刷物の仕上がり状態における空間的位置情報の入力を受け付ける。空間項目識別部１３１は、タッチパネル１５ｂによって受け付けられた空間的位置情報を解析し、例えば余白の幅の値などのような空間的な設定項目を識別する。

操作表示部１５のマイク１５ａは、操作者の発話による音声情報の入力を受け付ける。言語項目識別部１３２は、マイク１５ａを介して入力された音声情報を音声認識して言語解析を行い、言語情報を介した設定である言語指示項目を認識する。

処理項目設定部１３３は、空間項目識別部１３１によって認識された空間的な設定項目、および言語項目識別部１３２によって認識された言語的な設定項目の組合せの中から選択して、画像形成時に施す処理項目を設定する。

ここで、選択される空間的な設定項目は、設定項目記憶部１３５に記憶されており、空間項目識別部１３１が設定項目記憶部１３５の中から空間指示項目を候補として取得する。処理項目設定部１３３は、空間項目識別部１３１によって候補として選択された空間指示項目の中から特定する。空間項目識別部１３１は、例えば、実際に取得した位置情報と、設定項目記憶部１３５に記憶された空間指示項目における位置情報との誤差を算出し、算出された誤差の小さな順に並べて特定する。

また、言語的な設定項目は、設定項目記憶部１３５に記憶されており、言語項目識別部１３２が設定項目記憶部１３５の中から言語指示項目を候補として取得する。処理項目設定部１３３は、言語項目識別部１３２によって候補として選択された言語指示項目の中から特定する。言語項目識別部１３２は、例えば、実際に取得した音声情報と、設定項目記憶部１３５に記憶された言語指示項目における音声情報との誤差を算出し、算出された誤差の小さな順に並べて特定する。

処理項目設定部１３３は、特定した空間指示項目および言語指示項目を組み合わせて画像形成のための処理項目を設定する。

画面情報生成部１３４は、処理項目設定部１３３によって設定された処理項目に従って、再び仕上がり予想画面情報を生成し、表示パネル１５ｃに表示する。

さらに具体的な設定入力について説明する。ユーザは、タッチパネル１５ｂ上で、ポインター（ユーザーの指先や専用ペンなど）によって、例えば、仕上がり予想図上の特定の位置、方向、領域、形状に関して入力する。空間項目識別部１３１は、例えば、接触位置については、スタンプ印字やパンチ穴の位置をいくつかの候補のうちから、ポインターの接触位置に最も近い位置を識別する。方向については、空間項目識別部１３１は、例えば、両面コピー時の開き方向、ステープルを止める方向など、いくつかの候補の中からポインターが接触後、離れるまでの移動方向に最も近い方向を識別する。領域については、空間項目識別部１３１は、例えば、余白領域や消去領域として指定される領域を、ポインターが接触後、離れるまでの軌跡を矩形として識別し、識別した矩形領域を指定する数値に最も近い数値を選択する。

ユーザが日付印字の書式として「２００４／２／２３」を指示する場合、空間項目識別部１３１はポインターが接触してから離れるまでの軌跡として斜線の組である「／／」のような接触形状から識別し、また、「２００４．２．２３」を指示する場合、空間項目識別部１３１はポインターの接触により生成されるピリオドの組みである「．．」のような接触形状を識別する。

言語項目識別部１３２は、取得した音声を音声認識によって認識し、設定項目記憶部１３５に記憶されている設定項目情報の中から取得した言語指示項目を候補として識別する。ここでいう言語指示項目とは例えば、「スタンプ印字」「パンチ」「原稿セット方向」「ステープル」「余白」「消去」「日付印字」など、ユーザの発話する言葉で表現される複写機の処理の種類である。

処理項目設定部１３３は、空間項目識別部１３１および言語項目識別部１３２が識別した指示項目を相補的に組み合わせることにより、ユーザの指示した設定項目を相補的に特定して、画像形成装置へ設定する。

設定項目記憶部１３５は、処理項目、位置項目、方向項目、領域項目、形状項目などの組み合わせ可能な設定変更項目を記憶している。処理項目設定部１３３は、表示パネル１５ｃに表示されたメニュー画面からの変更入力を受け付けた場合、設定項目記憶部１３５に記憶されているこれらの項目からの組合せを選択することによって、設定変更を行うことができる。

図２は、実施の形態１による画像形成装置において、操作者によるタッチパネルへの接触と発話によって画像処理項目が設定されることを説明する図である。図３は、タッチパネルへの接触と発話によって画像処理項目が設定された仕上がり予想画面と、さらに画面上から設定を受け付けることを説明する図である。図４は、タッチパネルへの接触と発話によって画像処理項目が設定された仕上がり予想画面上から、両面コピーであることの設定入力を受け付けることを説明する図である。

ここでは、印刷すべきページの右上に、２００４／２／２５のような書式で、日付印字を指定しようとする。ユーザによる設定の操作に先立って、最初、原稿読み取り装置によって読み取られた画像データから、デフォルトの設定項目を反映した予想仕上がり画像が仕上がり予想図２ｂとして表示されている（図２）。ユーザはポインターで接触軌跡２ｃのように接触する。接触によって、タッチパネル１５ｂは位置情報を取得する。次に、ユーザは、「日付印字」と発話する（ユーザの発声２ｄ）。発話によってマイク１５ａは、音声情報を取得する。

空間項目識別部１３１は、斜線の位置情報から日付のための斜線であると識別して空間指示項目を選択し、言語項目識別部１３２は「日付印字」と発話された音声から日付であることを識別し言語指示項目を選択する。処理項目設定部１３３は、指示項目を組み合わせて「２００４／２／２５」のような書式で仕上がり予想情報図２ｂ（図２）の右上に日付印字を設定し、設定された日付印字が付された仕上がり予想情報図３ｂ（図３）が表示パネル１５ｃに表示される。図３に表示された仕上がり予想情報図３ｂは、この操作の時点までに設定された項目を反映した仕上がり予想画像である。

表１は、言語指示項目と空間指示項目とから画像形成の処理項目を特定するテーブルの一例である。

ポインターの接触によって日付印字のための斜線が識別され、発声によって言語指示項目のうち「日付印字」が識別され、画像処理部１３が備える日付機能によって具体的な日付情報であるＹＹＹＹ／ＭＭ／ＤＤ（年月日情報）が形状項目として対応付けられる。

次に、ユーザは表示された画面上で、ユーザの接触軌跡３ｃ（図３）のように指で接触しながら軌跡を描いて、ユーザの発声３ｄである「余白」と、発話を行う。これにより、空間項目識別部１３１は接触軌跡を矩形情報であると解析し、言語項目識別部１３２は発話を言語指示項目として余白の設定であると識別し、処理項目設定部１３３は、識別された矩形情報と余白設定である情報から接触軌跡３ｃの水平方向の幅を余白幅として設定し、画面情報生成部１３４は、図４に示された仕上がり予想情報図４ｂのように画像が全体的に右にシフトされて余白の幅が確保された形の仕上がり予想図を表示するための仕上がり予想画面情報を生成し、表示パネル１５ｃは、新たな仕上がり予想画面を表示する（図４）。

次にユーザは、表示パネル１５ｃに表示された仕上がり予想情報図４ｂ（図４）上で、両面コピーの場合の開き方向を指定する。ユーザは指先の接触により接触軌跡４ｃ（図４）のような軌跡をタッチパネル１５ｂ上で描く。そして、「両面コピー」発声する（ユーザの発声４ｄ）。この指先の接触および発声による２つの入力によって、空間項目識別部１３１および言語項目識別部１３２によって接触軌跡の方向４ｃがページをめくる方向として識別され、処理項目設定部１３３は開き方向左右の両面コピーとして設定を受け付ける。受け付けられた設定によって、画目情報生成部１３４は、表示画面のための画面情報を生成する。この時、３次元的に表示できる画面情報を生成することが望ましい。

図５は、両面コピーであることが設定された仕上がり予想画面の表示の一例を示す模式図である。図５に示されたように、仕上がりが予想された印刷物が、表裏で天地が同じ両面コピーの仕上がり予想図として３次元的に表示される。

図６は、実施の形態１による画像形成手順を示すフローチャートである。画像情報生成部１３４は、画像データの入力を検知する状態にあり（ステップＳ１０１）、検知した場合（ステップＳ１０１のＹｅｓ）、仕上がり予想画像情報を生成する（ステップＳ１０２）。操作表示部１５は、仕上がり予想画像情報に基づいて仕上がり予想画像を表示する（ステップＳ１０３）。

ここで、タッチパネル１５ｂは、接触による入力を検知する状態にあって（ステップＳ１０４）、検知した場合（ステップＳ１０４のＹｅｓ）、空間項目識別部１３１は、接触による入力から空間情報を取得し、空間指示項目を識別する（ステップＳ１０５）。

マイク１５ａは、音声を検知する状態にあって（ステップＳ１０６）、検知した場合（ステップＳ１０６のＹｅｓ）、言語項目識別部１３２は、音声情報を取得して言語指示項目を識別する（ステップＳ１０７）。

処理項目設定部１３３は、空間指示項目および言語指示項目の組合せから、画像形成の処理項目を設定する（ステップＳ１０８）。ここで、印刷実行しない場合（ステップＳ１０９のＮｏ）、さらにステップＳ１０８において設定された設定項目によって画像情報生成部１３４は、再び仕上がり予想画像情報を生成し（ステップＳ１０２）、表示パネル１５ｃが仕上がり予想画面を表示して（ステップＳ１０３）、必要な場合は、ポインターによる接触入力を受け付けるなどのルーティンを繰り返す。また、印刷実行などの画像形成処理命令が受け付けられた場合（ステップＳ１０９のＹｅｓ）、画像形成処理が施される（ステップＳ１１０）。

このようにして、実施の形態１による画像形成装置は、予想仕上がり画面を表示パネル１５ｃに表示し、ポインターによる入力によって空間指示項目を選択し、音声入力によって言語指示項目を選択し、処理項目設定部が空間指示項目と言語指示項目とを組み合わせて処理項目を設定するので、操作者にとっては利便性が高く装置にとっては確実性が高いものとなる。

（実施の形態２）
図７は、実施の形態２による画像形成装置の要部である画像処理部の機能的ブロック図である。実施の形態２による画像形成装置は、画像処理部２３の処理項目設定部２３３が設定処理を施す機能が、実施の形態１の場合と異なる。以下、異なった部分について主に説明する。

実施の形態２による処理項目設定部２３３は、空間項目識別部１３１または言語項目識別部１３２のいずれか一方の指示項目を識別した場合、識別した指示項目の中から候補を選択し、続いて他の空間項目識別部１３１または言語項目識別部１３２に出力し、該他の識別部は入力を受け付けた候補に基づいて指示項目の候補を選択することによって指示項目の候補を制限し、処理項目設定部２３３は該選択された一方の指示項目および制限された該他の指示項目の組合せによって、画像形成の処理項目を設定する。この構成によって、画像形成の処理項目を絞り込むことができる。

まず、空間項目識別部１３１による指示項目が、最初に選択される場合を説明する。処理項目設定部２３３は、空間項目識別部１３１が識別した空間指示項目情報に従って、設定項目記憶部１３５に記憶されている設定項目のうち、空間指示項目を抽出し、抽出された空間指示項目を処理項目候補として言語項目識別部１３２へ出力する。言語項目識別部１３２は、入力した空間指示項目情報に基づいて、対応する言語指示項目を選択する。

ここで、言語項目識別部１３２は、処理項目設定部１３３から受け取った空間指示項目の候補に対応する言語指示項目を、ユーザ発話から言語解析した言語指示項目から識別してその候補を選択する。言語項目識別部１３２は、処理項目設定部２３３に対して、選択された言語指示項目を送信する。処理項目設定部２３３は、受信した言語指示項目情報と、すでに得ている空間指示項目情報を合わせることによって、ユーザから受け付けた設定入力による処理項目を特定し、特定された処理項目を画像形成装置へ設定する。

図８は、実施の形態２による画像形成手順を示すフローチャートである。ここで、ステップＳ１０５までは実施の形態１の場合と同様である。表示パネル１５ｃが予想仕上がり画面を表示して（実施の形態１におけるステップＳ１０３）、タッチパネル１５ｂが接触による空間情報の入力を検知すると（ステップＳ１０４のＹｅｓ）、空間項目識別部１３１は空間情報を取得して空間指示項目を識別する（ステップＳ１０５）。処理項目設定部２３３は言語指示項目の候補を選択して言語項目識別部１３２に出力する（ステップＳ２０１）。

マイク１５ａは、音声を検知する状態にあり（ステップＳ２０２）、検知した場合（ステップＳ２０２のＹｅｓ）、言語項目識別部１３２は、マイク１５ａによって検知された音声情報を取得し、既に入力した空間指示項目の候補に対応付けられる言語指示項目の候補を識別し、選択して処理項目設定部２３３に出力する（ステップＳ２０３）。処理項目設定部２３３は、既に入力している空間指示項目と、言語項目識別部１３２から入力する言語指示項目に従って、画像形成の処理項目を設定する（ステップＳ２０４）。

このように、実施の形態２による処理項目設定部２３３は、空間項目識別部１３１が空間指示項目を識別してその中から候補を選択し、選択した空間指示項目の候補を言語項目識別部１３２に出力し、続いて言語項目識別部１３２は選択された空間処理項目に対応する言語指示項目の候補を選択する。そして、処理項目設定部１３３は、選択された空間指示項目および言語指示項目の組合せによって画像形成の処理項目を設定する。このようにして、互いに対応付けられる空間指示項目および言語指示項目を、順序に従って候補を選択することによって、効率的かつ確実に設定項目を選択することができる。

（実施の形態２の変形例）
図９は、実施の形態２による他の画像形成装置の要部である画像処理部の機能的ブロック図である。ここで画像処理部３３の処理項目設定部３３３が、実施の形態２による画像処理部２３と異なる点は、最初に言語項目識別部１３２が識別した言語指示項目を、処理項目設定部３３３が選択して空間項目識別部１３１に出力し、空間項目識別部１３１は入力した言語指示項目に対応する空間指示項目の候補を選択し、処理項目設定部３３３は、選択された言語指示項目および空間指示項目によって、画像形成の処理項目を設定する。この構成によって、画像形成の処理項目を絞り込むことができる。

処理項目設定部３３３は、最初、設定項目記憶部２３５に記憶されている設定項目のうち、言語項目識別部１３２によって識別された言語指示項目を抽出し、抽出された言語指示項目を空間項目識別部１３１へ出力する。空間項目識別部１３１は、入力した言語指示項目に対応して空間指示項目の候補を選択し、処理項目設定部３３３に出力する。処理項目設定部３３３は、受信した空間指示項目および言語指示項目とを対応付けて、ユーザの指示した設定項目を特定し、画像形成装置へ設定する。

図１０は、実施の形態２による他の画像形成手順を示すフローチャートである。ここでは、実施の形態１による画像形成手順におけるＳ１０３、即ち、入力した画像データを基に、表示パネル１５ｃには仕上がり予想画面が表示された状態からスタートする。マイク１５ａは音声を検知する状態にあり（ステップＳ３０１）、操作者の発話を検知した場合（ステップＳ３０１のＹｅｓ）、言語項目識別部１３２は言語指示項目を識別する（ステップＳ３０２）。そして、処理項目設定部３３３は、空間指示項目の候補を選択して、空間項目識別部１３１に出力する（ステップＳ３０３）。

タッチパネル１５ｂは、ポインターの接触を検知する状態にあり（ステップＳ３０４）、検知した場合（ステップＳ３０４のＹｅｓ）、空間項目識別部１３１は空間情報を取得して入力した言語情報項目に対応する空間指示項目を識別し、処理項目設定部３３３に出力する（ステップＳ３０５）。処理項目設定部３３３は、既に入力した言語指示項目と、ここで入力した空間指示項目とを対応付けて、画像形成の処理項目を設定する（ステップＳ３０６）。

ここで実施の形態２による他の処理項目設定部３３３は、最初に言語項目識別部１３２が言語指示項目を識別して候補を選択し、続いて空間項目識別部１３１が選択された言語指示項目の候補に対応する空間指示項目を識別し、処理項目設定部３３３が、言語指示項目と空間指示項目との候補を対応付けて画像処理の処理項目を設定する。これによって、順序に従って言語および空間指示項目の候補を選択して対応づけることによって、効率的かつ確実に設定項目を選択し、効率的に設定作業を行うことができる。

（実施の形態３）
図１１は、実施の形態３による画像形成装置の要部である画像処理部の機能的ブロック図である。実施の形態３による画像処理部４３が、実施の形態１と異なる点は、画像処理部４３の設定項目記憶部３３５が確実度データベース（ＤＢ）３３５ａを備え、空間項目識別部４３１および言語項目識別部４３２が確実度情報を付加した指示項目を識別し、処理項目設定部４３３が確実度情報を付加された指示項目から選択して画像形成の処理設定を行う点である。以下、異なる点について主に説明する。

空間項目識別部４３１は、設定項目記憶部３３５に記憶された指示項目情報に対して、確実度データベース３３５ａから取得するそれぞれの空間確実度情報を付加して識別し、処理項目設定部４３３に出力する。

言語項目識別部４３２は、設定項目記憶部３３５に記憶された指示項目情報に対して、確実度データベース（ＤＢ）３３５ａから取得するそれぞれの言語確実度情報を付加して識別し、処理項目設定部４３３に出力する。

処理項目設定部４３３は、入力した空間確実度情報が付加された空間指示項目情報および言語確実度情報が付加された言語指示項目情報を対応させて、画像処理の項目を設定する。

ここで、空間指示項目に対する確実度は、例えば読み取った空間情報と予め設定項目記憶部３３５に記憶されている空間指示項目に関連する空間情報との誤差に反比例して定めることができる。

また、言語指示項目に対する確実度は、例えば入力した音声情報と予め設定項目記憶部３３５に記憶されている言語指示項目に関連する音声情報との誤差に反比例して定めることができる。

確実度データベース３３５ａは、例えば、空間情報との誤差と確実度、および音声情報との誤差と確実度のテーブルとして構成できる。空間項目識別部４３１および言語項目識別部４３２は、それぞれの指示項目に対してテーブルを用いて確実度情報を取得して付加する。

処理項目設定部４３３は、付加された確実度に従って、空間指示項目および言語指示項目を選択して画像形成の処理を設定する。

図１２は、実施の形態３による画像形成手順を説明するフローチャートである。ここで、実施の形態１におけるステップＳ１０４までは同じであるので、省略し、異なる手順について主に説明する。タッチパネル１５ｂがユーザの指などによって接触入力を検知した場合（ステップＳ１０４のＹｅｓ）、空間項目識別部４３２は、空間情報から空間指示項目を識別して関連する空間確実度情報を取得する（ステップＳ４０１）。

マイク１５ａは、音声を検知する状態にあり（ステップＳ４０２）、検知した場合（ステップＳ４０２のＹｅｓ）、言語項目識別部４３２は、音声情報から言語指示項目を識別して関連する言語確実度情報を取得する（ステップＳ４０３）。処理項目設定部４３３は、空間確実度および言語確実度を用いて空間指示項目および言語指示項目を対応付けて、画像形成の処理項目を設定する（ステップＳ４０４）。

このように、実施の形態３による画像形成装置においては、空間項目識別部４３１が空間確実度情報を付加した空間指示項目を識別し、言語項目識別部４３２が言語確実度情報を付加した言語指示項目を識別し、処理項目設定部４３３はそれら確実度を用いて空間指示項目および言語指示項目を対応させて画像処理の項目を設定するので、効率的かつ確実度の高い設定項目を選択し、効率的に設定作業を行うことができる。

（実施の形態４）
図１３は、実施の形態４による画像形成装置の要部である画像処理部の機能的ブロック図である。実施の形態３による画像処理部５３が、実施の形態１と異なる点は、画像処理部５３の設定項目記憶部３３５が関連度データベース（ＤＢ）３３５ｂを備え、処理項目設定部５３３が、空間項目識別部５３１が識別する空間指示項目および言語項目識別部５３２が識別する言語指示項目の相互の関連性を示す関連度を取得し、取得した関連度に従って、画像形成の処理項目を設定することである。

ここで、関連度ＤＢ３３５ｂは、すべての空間指示項目と言語指示項目との組み合わせに対する関連度を記憶している。例えば、実施の形態１における図２で、ユーザの接触軌跡２ｃが検出された場合、日付印字処理である可能性が高くなるので、斜線２本の接触軌跡の空間指示項目および日付印字の言語指示項目との関連度は、０．９である、というように定めることができる。また、斜線２本とパンチ穴処理の関連度は低く、例えば０．１であると定めることができる。定めた関連度は、テーブルとして記憶する。

処理項目設定部５３３は、空間指示項目および言語指示項目に対応するそれぞれの関連度を取得し、最も関連度の高い組合せを選択して画像形成の処理設定とする。

図１４は、実施の形態４による画像形成手順を説明するフローチャートである。ここで、実施の形態１におけるステップＳ１０７まで同じ手順であるので説明を省略し、異なる手順についてのみ説明する。言語項目識別部５３２が音声情報を取得し、言語解析を行って言語指示項目を識別すると（ステップＳ１０７）、処理項目設定部５３３は、空間項目識別部５３１が識別した空間指示項目および言語項目識別部５３２が識別した言語指示項目の関連度を取得し（ステップＳ５０１）、取得した関連度に従って、空間指示項目および言語指示項目を対応させ、画像処理の項目を設定する（ステップＳ５０２）。
このように、実施の形態４による画像形成装置においては、空間項目識別部５３が空間指示項目を識別し、言語項目識別部５３２が言語指示項目を識別し、処理項目設定部５３３は空間指示項目および言語指示項目のそれぞれ関連度を取得し、取得した関連度に従って画像形成の処理項目を設定するので、効率的かつ関連度の高い設定項目を選択し、効率的に設定作業を行うことができる。

（実施の形態４の変形例）
図１５は、実施の形態４による他の画像形成装置の画像処理部の機能的ブロック図である。ここで、処理項目設定部６３３は、取得した確実度情報を付加された空間指示項目、確実度を付加された言語指示項目、および空間指示項目および言語指示項目の関連度に基づいて、画像形成の処理項目を設定する。それぞれの空間指示項目および言語指示項目についての重要度および関連度に対して、例えば、重み付け加算を行って、加算された値が最大の組合せ候補を、設定項目として選択し、画像形成の処理項目に設定する。

複数候補が挙げられた空間指示項目および言語指示項目において、ｉ番目の空間指示項目の候補に対する確実度をＳｉ、ｊ番目の言語指示項目の候補に対する確実度をＬｊ、ｉ番目の空間指示項目の候補とｊ番目の言語指示項目の候補の関連度をＲｉｊ、空間指示項目に対する重み係数をＳｃ、言語指示項目に対する重み係数をＬｃ、そして関連度に対する重み係数をＲｃとする。

処理項目設定部６３３は、
Ｐｉｊ＝ＳｃＳｉ＋ＬｃＬｊ＋ＲｃＲｉｊ
を算出し、Ｐｉｊ値を最大とするｉとｊの組を選択し、該当するｉ、ｊに対応する空間指示項目および言語指示項目を対応付けることによって、画像形成の処理項目を設定する。

図１６は、実施の形態４による他の画像形成手順を説明するフローチャートである。スタートが実施の形態におけるステップＳ１０４のＹｅｓであるのは、実施の形態３の場合と同様である。空間項目識別部４３１は空間情報を取得して対応する確実度情報を取得する（ステップＳ６０１）。マイク１５ａは音声を検出状態にあり（ステップＳ６０２）、音声を検知した場合（ステップＳ６０２のＹｅｓ）、言語項目識別部４３２は音声情報を取得して言語指示項目を識別しその確実度情報を取得する（ステップＳ６０３）。

処理項目設定部６３３は、空間指示項目および言語指示項目の関連度情報を取得する（ステップＳ６０４）。処理項目設定部６３３は、空間確実度、言語確実度、および関連度情報のそれぞれに対してそれぞれの重みを付けて加算し、加算値が最大の指示項目を対応付けて、画像形成の処理項目を設定する（ステップＳ６０５）。

このように、実施の形態４の変形例による画像形成装置においては、処理項目設定部５３３は空間指示項目の確実度、言語指示項目の確実度、および両指示項目の関連度をそれぞれ重み付けして加算し、最大の加算値を与える空間指示項目および言語指示項目を対応させて画像形成の処理項目を設定するので、関連性および確実性の高い設定項目を選択し、効率的に確実に設定作業を行うことができる。

（実施の形態５）
図１７は、本発明の実施の形態５による画像形成装置の機能的ブロック図である。実施の形態５による画像形成装置４０が、実施の形態１による画像形成装置１０と異なる点は、画像解析部８１、関連機能検索部８２、および関連機能対応表８２１を備えた点であり、また、画像処理部７３０の機能が実施の形態１における画像処理部１３と異なる点である。図１７に示すように画像処理部７３０は、空間項目識別部７３１、言語項目識別部７３２、処理項目設定部７３３、および画面情報生成部７３４を備える。

実施の形態５による画像形成装置においては、画像解析部８１、関連機能検索部８２、および関連機能対応表８２１が原稿特性値を抽出し、画面情報生成部７３４が抽出された原稿特性値に基づいて、入力画像データから仕上がり予想画面情報を生成し、表示部パネル１５ｃが仕上がり予想および入力画面を表示する。

画像解析部８１は、画像記憶部１２が保持している原稿画像データを解析して、原稿の特性を表す原稿特性値を抽出する。原稿特性値は、例えば、原稿のサイズ、向き、余白寸法である。

関連機能検索部８２は、画像解析部８１で算出された各種の原稿特性値についての情報を受信した場合、当該原稿を複写する際に設定が必要な関連機能を検索する。関連機能検索部８２は、関連機能対応表８２１を有する。関連機能対応表８２１は、個々の原稿特性値に関連した機能の一覧情報を記述するファイルである。関連機能検索部８２は、入力された原稿特性値に対応した関連機能を関連機能対応表８２１から検索し、より絞り込まれた関連機能情報を画像処理部７３０に送信する。画像処理部７３０が受信した関連機能情報は、画面情報生成部７３４によって、予想仕上がり画面情報の生成に使用される。

実施の形態５による画像処理部７３０の画面情報生成部７３４は、画像解析部８１の画像解析に基づく原稿特性値、および、該原稿特性値を用いて関連機能検索部８２が抽出して絞り込んだ関連機能情報を使用して、入力画像データから仕上がり情報および入力画面情報を生成する。ここで、入力画面情報によって表示パネル１５ｃに表示された入力画面から設定入力を受け付けるのは実施の形態１と同様である。

ここで、画像解析部８１，関連機能検索部８２，および関連機能対応表８２１は本発明の画像解析手段を構成する。

ここで、画像解析部８１が解析した原稿特性値、および原稿画像データに従って、例えば、処理項目設定部７３３は、
１．原稿サイズはＡ３
２．原稿方向は横
３．余白寸法は、上：２０ｍｍ 下：１５ｍｍ 左：２０ｍｍ 右：２０ｍｍ
という設定を行う。

ユーザは仕上がり予想を画面上で視認しながら、タッチパネル１５ｂおよびマイク１５ａを介して設定入力を行う。設定入力を行った後の各部の処理は実施の形態１の場合と同様であるので説明を省略する。

図１８は、実施の形態５による画像形成手順を示すフローチャートである。画像情報生成部が画像データを検知した場合（実施の形態１におけるステップＳ１０１のＹｅｓ）、画像解析部８１が入力した画像データの原稿特性値を解析し（ステップＳ７０１）、関連機能検索部８２は解析された原稿特性値に基づいて関連機能を検索して検索結果を画像処理部７３０に送信する（ステップＳ７０２）。画像情報生成部７３４は、受信した検索結果を加味して仕上がり予想画像情報を生成し（ステップＳ７０３）、表示パネル１５ｃは仕上がり予想画像を表示する（ステップＳ７０４）。以下のステップは実施の形態１におけるステップＳ１０４以下と同じであるので、説明を省略する。

このようにして、画像解析部８１が解析した原稿画像の特性値をも含めて、予想される仕上がり、およびユーザからの設定入力を受け付ける入力画面を表示して、該入力画面の表示からユーザによる設定入力を受け付けるので、原稿特性を表す原稿特性値を用いて、仕上がり予想およびさらに設定入力すべき項目を的確に絞り込むので的確で確実度の高い設定項目を選択でき、効率的で確実な設定作業を行うことができる。

（実施の形態６）
実施の形態６による画像処理装置は、実施の形態１による画像形成装置における画像処理機能を実行する部分を画像処理装置として構成したものである。

図１９は、実施の形態６による画像処理装置の機能的ブロック図である。実施の形態６による画像処理装置５０は、画像形成装置６０における画像処理機能を実行する。画像処理装置５０が備える各処理部の構成と作用は、実施の形態１における各処理部と同じであるので、説明を省略する。

実施の形態６による画像処理装置においては、読み取った画像データまたはネットワークを介して入力した画像データに対して、印刷前に仕上がり予想画面および操作者が設定入力可能な入力画面を表示する。そして、予想仕上がり画面を表示パネル１５ｃに表示して、ポインターによる入力によって空間指示項目を選択し、音声入力によって言語指示項目を選択し、空間指示項目と言語指示項目とを組み合わせて画像処理項目を設定するので、操作者にとっては利便性が高く装置にとっては確実性が高いものとなる。

（実施の形態７）
図２０は、実施の形態７による画像処理システムの機能的ブロック図である。実施の形態７による画像処理システムは、実施の形態１による画像形成装置の画像処理機能部分と、他の機能を実行する部分とを、ネットワークを介して接続して構成したシステムである。ここで、画像処理部７３は、１つの部分として記載されているが、各部がそれぞれ分かれてネットワークを介して接続される構成であっても良い。

実施の形態７による画像処理システム７０、原稿読取装置７１、および印刷装置７６はネットワーク１８を介して接続されて画像系システムを形成している。画像処理システム７０は、画像処理装置７３、操作表示装置７５を備える。画像処理装置７３の各部はそれぞれがネットワーク１８を介して接続される構成とすることもできる。実施の形態７による画像処理システム７０における各装置、あるいは各部は、ネットワークで接続されること以外は画像処理装置１０のそれぞれ対応する各部と同様に構成できる。

また、図２０において図示したように、画像データの原稿特性値を解析する画像解析装置７４を加える構成とすることができる。

実施の形態７による画像処理システムにおいては、読み取った画像データまたはネットワークを介して入力した画像データに対して、印刷前に仕上がり予想画面および操作者が設定入力可能な入力画面をネットワークを介して表示する。そして、予想仕上がり画面を操作表示装置７５の表示パネル７１５ｃに表示して、ポインターによる入力によって空間指示項目を選択し、音声入力によって言語指示項目を選択し、空間指示項目と言語指示項目とを組み合わせて画像形成の処理項目をネットワークを介して設定するので、操作者にとっては利便性が高くシステムにとっては確実性の高いものとなる。

（ハードウェア構成など）
図２１は、実施の形態による画像形成装置のハードウェア構成図である。本実施の形態による画像形成装置１０００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０１０などの制御装置と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０２０やＲＡＭ１０３０などの記憶装置と、ＨＤＤ１０４０、ＣＤドライブ装置などの外部記憶装置と、モニタ１１１０などの表示装置と、キーボード１１２０、マウス１１３０、入力インタフェース１０６０などの入力装置、スキャナなどの読取装置１１４０、およびレーザプリンタなどの印刷装置１１５０を備えており、通常のコンピュータを利用したハードウェア構成となっている。

本実施形態の画像形成装置で実行される画像形成プログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）等のコンピュータで読み取り可能な記録媒体に記録されて提供される。

また、本実施形態の画像形成装置で実行される画像形成プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施形態の画像形成装置で実行される画像形成プログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。

また、本実施形態の画像形成プログラムを、ＲＯＭ等に予め組み込んで提供するように構成してもよい。

本実施の形態の画像形成装置で実行される画像形成プログラムは、上述した各部（画像処理部１３、操作表示制御部１５１、システム制御部１６、および通信制御部１７を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵ１０１０が上記記憶媒体から画像形成プログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、画像処理部１３、操作表示制御部１５１、システム制御部１６、通信制御部１７、画像解析部８１，および関連機能検索部８２が主記憶装置上に生成されるようになっている。

本実施形態の画像形成装置で実行される画像形成プログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。

さらに、本実施形態の画像形成装置で実行される画像形成プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施形態の画像形成装置で実行される画像形成プログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。

本発明は、画像形成技術、および画像処理技術に有用であり、特に多機能を有する複合機における画像形成技術、および画像処理技術に有用である。

本発明の実施の形態１による画像形成装置の機能的ブロック図である。 実施の形態１による画像形成装置において、操作者によるタッチパネルへの接触と発話によって画像処理項目が設定されることを説明する図である。 タッチパネルへの接触と発話によって画像処理項目が設定された仕上がり予想画面と、さらに画面上から設定を受け付けることを説明する図である。 タッチパネルへの接触と発話によって画像処理項目が設定された仕上がり予想画面上から、両面コピーであることの設定入力を受け付けることを説明する図である。 両面コピーであることが設定された仕上がり予想画面の表示の一例を示す模式図である。 実施の形態１による画像形成手順を示すフローチャートである。 実施の形態２による画像形成装置の要部である画像処理部の機能的ブロック図である。 実施の形態２による画像形成手順を示すフローチャートである。 実施の形態２による他の画像形成装置の要部である画像処理部の機能的ブロック図である。 実施の形態２による他の画像形成手順を示すフローチャートである。 実施の形態３による画像形成装置の要部である画像処理部の機能的ブロック図である。 実施の形態３による画像形成手順を説明するフローチャートである。 実施の形態４による画像形成装置の要部である画像処理部の機能的ブロック図である。 実施の形態４による画像形成手順を説明するフローチャートである。 実施の形態４による他の画像形成装置の画像処理部の機能的ブロック図である。 実施の形態４による他の画像形成手順を説明するフローチャートである。 本発明の実施の形態５による画像形成装置の機能的ブロック図である。 実施の形態５による画像形成手順を示すフローチャートである。 実施の形態６による画像処理装置の機能的ブロック図である。 実施の形態７による画像処理システムの機能的ブロック図である。 実施の形態による画像形成装置のハードウェア構成図である。

符号の説明

１１ スキャナ
１１１ ＡＤＦ
１１２ スキャナコントローラ
１２ 画像記憶部
１３ 画像処理部
１３１ 空間項目識別部
１３２ 言語項目識別部
１３３ 処理項目設定部
１３４ 画面情報生成部
１４ プリンタ
１４１ 仕上げ処理部
１４２ プリンタコントローラ
１５ 操作表示部
１５ａ マイク
１５ｂ タッチパネル
１５ｃ 表示パネル
１５１ 操作表示制御部
１６ システム制御部
１８ ネットワーク
８１ 画像解析部
８２ 関連機能検索部
８２１ 関連機能対応表

Claims (15)

1. 画像データを入力して画像データ処理および印刷仕上げ処理後の予想画像を表示し、操作者からの画像形成の処理項目の設定を受け付ける画像形成装置であって、
   前記予想画像の予想画像情報を生成する予想画像情報生成手段と、
   前記予想画像情報生成手段によって生成された予想画像情報に基づいて前記予想画像を表示する表示手段と、
   前記予想画像を表示する表示手段への、前記操作者の指先およびスタイラスの少なくともいずれかを含む接触物の接触により、前記予想画像に関する空間情報を取得して空間的な設定に関する指示項目である空間指示項目を識別する空間項目識別手段と、
   音声情報を受け付けて受け付けた前記音声情報から言語を介した設定に関する指示項目である言語指示項目を識別する言語項目識別手段と、
   前記空間指示項目および前記言語指示項目を関連させて記憶する設定項目記憶手段と、
   前記設定項目記憶手段に記憶された言語指示項目の中から前記言語項目識別手段により識別された言語指示項目に対応する空間指示項目の候補を選択して、選択した空間指示項目の候補を前記空間項目識別手段に出力するとともに、前記選択した空間指示項目の中から前記空間項目識別手段により識別された空間指示項目を取得して、前記空間項目識別手段により識別された空間指示項目と前記言語項目識別手段によって識別された言語指示項目との組み合わせにより、前記画像形成の処理項目を設定する設定手段と、を備え、
   前記空間項目識別手段は、前記予想画像を表示する表示手段への前記接触物の接触に対応した空間指示項目として、前記予想画像を表示する表示手段への前記接触物の接触に基づいて把握される空間情報と前記設定項目記憶手段によって記憶された空間指示項目に関連する空間情報との誤差に反比例して定められた空間確実度を付加した複数の空間指示項目を識別し、
   前記言語項目識別手段は、受け付けた前記音声情報に対応した言語指示項目として、受け付けた前記音声情報と前記設定項目記憶手段によって記憶された言語指示項目に関連する音声情報との誤差に反比例して定められた言語確実度を付加した複数の言語指示項目を識別し、
   前記設定手段は、前記空間指示項目と前記言語指示項目との相互の関連性を示す情報である項目関連度を取得し、前記空間項目識別手段により識別された複数の空間指示項目のうちｉ番目の空間指示項目の空間確実度をＳｉ、前記言語項目識別手段により識別された複数の言語指示項目のうちｊ番目の言語指示項目の言語確実度をＬｊ、ｉ番目の空間指示項目とｊ番目の言語指示項目との項目関連度をＲｉｊ、空間指示項目に対する重み係数をＳｃ、言語指示項目に対する重み係数をＬｃ、項目関連度に対する重み係数をＲｃとしたときに、Ｓｃ×Ｓｉ＋Ｌｃ×Ｌｊ＋Ｒｃ×Ｒｉｊにより算出される値が最大となるｉ番目の空間指示項目とｊ番目の言語指示項目との組み合わせにより、前記画像形成の処理項目を設定すること、を特徴とする画像形成装置。
2. 前記予想画像情報生成手段は、前記設定手段によって設定された前記画像形成の処理項目に基づいて予想画像情報を生成するものであり、
   前記表示手段は、前記予想画像情報生成手段によって生成された予想画像情報に基づいて前記予想画像を表示するものであること、を特徴とする請求項１に記載の画像形成装置。
3. 前記空間項目識別手段は、前記接触物が前記表示手段の画像に接触する位置、方向、および領域の少なくとも一つを含む空間情報を取得して空間指示項目を識別するものであり、
   前記言語項目識別手段は、前記操作者の発話による音声を受け付けて言語指示項目を識別するものであること、を特徴とする請求項１または２に記載の画像形成装置。
4. 前記表示手段は、前記予想画像を表示するタッチパネルを有し、
   前記空間項目識別手段は、前記タッチパネル上で前記接触物が接触することにより前記空間情報を取得し、前記空間指示項目を識別するものであること、を特徴とする請求項１〜３のいずれか１つに記載の画像形成装置。
5. 前記空間項目識別手段は、前記タッチパネル上の前記接触物が接触する軌跡から前記空間情報を識別するものであること、を特徴とする請求項４に記載の画像形成装置。
6. 前記入力した画像データを解析して原稿特性値を抽出する画像解析手段をさらに備え、
   前記予想画像情報生成手段は、前記画像解析手段によって抽出された原稿特性値に基づいて前記予想画像情報を生成するものであること、を特徴とする請求項１〜５のいずれか１つに記載の画像形成装置。
7. 画像データを入力して画像データ処理および印刷仕上げ処理後の予想画像を表示し、操作者からの画像形成の処理項目の設定を受け付ける画像形成装置において実行される方法であって、
   前記画像形成装置の予想画像情報生成手段により、前記予想画像の予想画像情報を生成するステップと、
   前記画像形成装置の表示手段により、前記予想画像情報生成手段によって生成された予想画像情報に基づいて前記予想画像を表示するステップと、
   前記画像形成装置の空間項目識別手段により、前記予想画像を表示する表示手段への、前記操作者の指先およびスタイラスの少なくともいずれかを含む接触物の接触により、前記予想画像に関する空間情報を取得して空間的な設定に関する指示項目である空間指示項目を識別するステップと、
   前記画像形成装置の言語項目識別手段により、音声情報を受け付けて受け付けた前記音声情報から言語を介した設定に関する指示項目である言語指示項目を識別するステップと、
   画像形成装置の設定項目記憶手段により前記空間指示項目および前記言語指示項目を関連させて記憶するステップと、
   前記画像形成装置の設定手段により、前記設定項目記憶手段に記憶された言語指示項目の中から前記言語項目識別手段により識別された言語指示項目に対応する空間指示項目の候補を選択して、選択した空間指示項目の候補を前記空間項目識別手段に出力するとともに、前記選択した空間指示項目の候補の中から前記空間項目識別手段により識別された空間指示項目を取得して、前記空間項目識別手段によって識別された空間指示項目と前記言語項目識別手段によって識別された言語指示項目との組み合わせにより、前記画像形成の処理項目を設定するステップと、を含み、
   前記空間項目識別手段により空間指示項目を識別するステップでは、前記予想画像を表示する表示手段への前記接触物の接触に対応した空間指示項目として、前記予想画像を表示する表示手段への前記接触物の接触に基づいて把握される空間情報と前記設定項目記憶手段によって記憶された空間指示項目に関連する空間情報との誤差に反比例して定められた空間確実度を付加した複数の空間指示項目を識別し、
   前記言語項目識別手段により言語指示項目を識別するステップでは、受け付けた前記音声情報に対応した言語指示項目として、受け付けた前記音声情報と前記設定項目記憶手段によって記憶された言語指示項目に関連する音声情報との誤差に反比例して定められた言語確実度を付加した複数の言語指示項目を識別し、
   前記設定手段により前記画像形成の処理項目を設定するステップでは、前記空間指示項目と前記言語指示項目との相互の関連性を示す情報である項目関連度を取得し、前記空間項目識別手段により識別された複数の空間指示項目のうちｉ番目の空間指示項目の空間確実度をＳｉ、前記言語項目識別手段により識別された複数の言語指示項目のうちｊ番目の言語指示項目の言語確実度をＬｊ、ｉ番目の空間指示項目とｊ番目の言語指示項目との項目関連度をＲｉｊ、空間指示項目に対する重み係数をＳｃ、言語指示項目に対する重み係数をＬｃ、項目関連度に対する重み係数をＲｃとしたときに、Ｓｃ×Ｓｉ＋Ｌｃ×Ｌｊ＋Ｒｃ×Ｒｉｊにより算出される値が最大となるｉ番目の空間指示項目とｊ番目の言語指示項目との組み合わせにより、前記画像形成の処理項目を設定すること、を特徴とする画像形成方法。
8. 前記予想画像情報生成手段により予想画像情報を生成するステップでは、前記設定手段によって設定された前記画像形成の処理項目に基づいて予想画像情報を生成し、
   前記表示手段により前記予想画像を表示するステップでは、前記予想画像情報生成手段によって生成された予想画像情報に基づいて前記予想画像を表示すること、を特徴とする請求項７に記載の画像形成方法。
9. 前記空間項目識別手段により空間指示項目を識別するステップでは、前記接触物が前記表示手段の画像に接触する位置、方向、および領域の少なくとも一つを含む空間情報を取得して空間指示項目を識別し、
   前記言語項目識別手段により言語指示項目を識別するステップでは、前記操作者の発話による音声を受け付けて言語指示項目を識別すること、を特徴とする請求項７または８に記載の画像形成方法。
10. 前記画像形成装置の画像解析手段により、前記入力した画像データを解析して原稿特性値を抽出するステップをさらに含み、
    前記予想画像情報生成手段により予想画像情報を生成するステップでは、前記画像解析手段によって抽出された原稿特性値に基づいて前記予想画像情報を生成すること、を特徴とする請求項７〜９のいずれか１つに記載の画像形成方法。
11. 請求項７〜１０のいずれか１つに記載の画像形成方法をコンピュータに実行させることを特徴とするプログラム。
12. 画像データを入力して画像データ処理および印刷仕上げ処理後の予想画像を表示し、操作者からの画像形成の処理項目の設定を受け付ける画像形成装置における画像処理装置であって、
    前記予想画像の予想画像情報を生成する予想画像情報生成手段と、
    前記予想画像情報生成手段によって生成された予想画像情報に基づいて前記予想画像を表示する表示手段と、
    前記予想画像を表示する表示手段への、前記操作者の指先およびスタイラスの少なくともいずれかを含む接触物の接触により、前記予想画像に関する空間情報を取得して空間的な設定に関する指示項目である空間指示項目を識別する空間項目識別手段と、
    音声情報を受け付けて受け付けた前記音声情報から言語を介した設定に関する指示項目である言語指示項目を識別する言語項目識別手段と、
    前記空間指示項目および前記言語指示項目を関連させて記憶する設定項目記憶手段と、
    前記設定項目記憶手段に記憶された言語指示項目の中から前記言語項目識別手段により識別された言語指示項目に対応する空間指示項目の候補を選択して、選択した空間指示項目の候補を前記空間項目識別手段に出力するとともに、前記選択した空間指示項目の中から前記空間項目識別手段により識別された空間指示項目を取得して、前記空間項目識別手段により識別された空間指示項目と前記言語項目識別手段によって識別された言語指示項目との組み合わせにより、前記画像形成の処理項目を設定する設定手段と、を備え、
    前記空間項目識別手段は、前記予想画像を表示する表示手段への前記接触物の接触に対応した空間指示項目として、前記予想画像を表示する表示手段への前記接触物の接触に基づいて把握される空間情報と前記設定項目記憶手段によって記憶された空間指示項目に関連する空間情報との誤差に反比例して定められた空間確実度を付加した複数の空間指示項目を識別し、
    前記言語項目識別手段は、受け付けた前記音声情報に対応した言語指示項目として、受け付けた前記音声情報と前記設定項目記憶手段によって記憶された言語指示項目に関連する音声情報との誤差に反比例して定められた言語確実度を付加した複数の言語指示項目を識別し、
    前記設定手段は、前記空間指示項目と前記言語指示項目との相互の関連性を示す情報である項目関連度を取得し、前記空間項目識別手段により識別された複数の空間指示項目のうちｉ番目の空間指示項目の空間確実度をＳｉ、前記言語項目識別手段により識別された複数の言語指示項目のうちｊ番目の言語指示項目の言語確実度をＬｊ、ｉ番目の空間指示項目とｊ番目の言語指示項目との項目関連度をＲｉｊ、空間指示項目に対する重み係数をＳｃ、言語指示項目に対する重み係数をＬｃ、項目関連度に対する重み係数をＲｃとしたときに、Ｓｃ×Ｓｉ＋Ｌｃ×Ｌｊ＋Ｒｃ×Ｒｉｊにより算出される値が最大となるｉ番目の空間指示項目とｊ番目の言語指示項目との組み合わせにより、前記画像形成の処理項目を設定すること、を特徴とする画像処理装置。
13. 前記予想画像情報生成手段は、前記設定手段によって設定された前記画像形成の処理項目に基づいて予想画像情報を生成するものであり、
    前記表示手段は、前記予想画像情報生成手段によって生成された予想画像情報に基づいて前記予想画像を表示するものであること、を特徴とする請求項１２に記載の画像処理装置。
14. ネットワーク接続され、画像データを入力して画像データ処理および印刷仕上げ処理後の予想画像を表示し、操作者からの画像形成の処理項目の設定を受け付ける画像処理システムであって、それぞれのうち２つ以上が前記ネットワーク接続され、
    前記予想画像の予想画像情報を生成する予想画像情報生成手段と、
    前記予想画像情報生成手段によって生成された予想画像情報に基づいて前記予想画像を表示する表示手段と、
    前記予想画像を表示する表示手段への、前記操作者の指先およびスタイラスの少なくともいずれかを含む接触物の接触により、前記予想画像に関する空間情報を取得して空間的な設定に関する指示項目である空間指示項目を識別する空間項目識別手段と、
    音声情報を受け付けて受け付けた前記音声情報から言語を介した設定に関する指示項目である言語指示項目を識別する言語項目識別手段と、
    前記空間指示項目および前記言語指示項目を関連させて記憶する設定項目記憶手段と、
    前記設定項目記憶手段に記憶された言語指示項目の中から前記言語項目識別手段により識別された言語指示項目に対応する空間指示項目の候補を選択して、選択した空間指示項目の候補を前記空間項目識別手段に出力するとともに、前記選択した空間指示項目の中から前記空間項目識別手段により識別された空間指示項目を取得して、前記空間項目識別手段により識別された空間指示項目と前記言語項目識別手段によって識別された言語指示項目との組み合わせにより、前記画像形成の処理項目を設定する設定手段と、を備え、
    前記空間項目識別手段は、前記予想画像を表示する表示手段への前記接触物の接触に対応した空間指示項目として、前記予想画像を表示する表示手段への前記接触物の接触に基づいて把握される空間情報と前記設定項目記憶手段によって記憶された空間指示項目に関連する空間情報との誤差に反比例して定められた空間確実度を付加した複数の空間指示項目を識別し、
    前記言語項目識別手段は、受け付けた前記音声情報に対応した言語指示項目として、受け付けた前記音声情報と前記設定項目記憶手段によって記憶された言語指示項目に関連する音声情報との誤差に反比例して定められた言語確実度を付加した複数の言語指示項目を識別し、
    前記設定手段は、前記空間指示項目と前記言語指示項目との相互の関連性を示す情報である項目関連度を取得し、前記空間項目識別手段により識別された複数の空間指示項目のうちｉ番目の空間指示項目の空間確実度をＳｉ、前記言語項目識別手段により識別された複数の言語指示項目のうちｊ番目の言語指示項目の言語確実度をＬｊ、ｉ番目の空間指示項目とｊ番目の言語指示項目との項目関連度をＲｉｊ、空間指示項目に対する重み係数をＳｃ、言語指示項目に対する重み係数をＬｃ、項目関連度に対する重み係数をＲｃとしたときに、Ｓｃ×Ｓｉ＋Ｌｃ×Ｌｊ＋Ｒｃ×Ｒｉｊにより算出される値が最大となるｉ番目の空間指示項目とｊ番目の言語指示項目との組み合わせにより、前記画像形成の処理項目を設定すること、を特徴とする画像処理システム。
15. 前記予想画像情報生成手段は、前記設定手段によって設定された前記画像形成の処理項目に基づいて予想画像情報を生成するものであり、
    前記表示手段は、前記予想画像情報生成手段によって生成された予想画像情報に基づいて前記予想画像を表示するものであること、を特徴とする請求項１４に記載の画像処理システム。

Images