JP5646019B2

JP5646019B2 - 画像処理装置、画像処理方法及びプログラム

Info

Publication number: JP5646019B2
Application number: JP2013174620A
Authority: JP
Inventors: 青木　伸成; 伸成青木
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2013-08-26
Filing date: 2013-08-26
Publication date: 2014-12-24
Anticipated expiration: 2029-06-09
Also published as: JP2014038629A

Description

本発明は構造化文書に基づき画像を処理する画像処理装置、画像処理方法及びプログラムに関する。

近年、インターネット上のＷｅｂページにアクセスして様々な情報を獲ることが可能となった。これらのＷｅｂページはＨＴＭＬ（ＨｙｐｅｒＴｅｘｔＭａｒｋｕｐＬａｎｇｕａｇｅ）またはＸＨＴＭＬ（ＥｘｔｅｎｓｉｂｌｅＨｙｐｅｒＴｅｘｔＭａｒｋｕｐＬａｎｇｕａｇｅ）等のような構造化言語で記述された構造化文書である。この構造化文書に対応したブラウザーと呼ばれるソフトウェアでＷｅｂページをディスプレイ上に表示し、参照することが可能である。

またこれらＷｅｂページの一部の領域を画像として抽出して印刷することが可能である。この場合はブラウザーでＷｅｂページをディスプレイ上で表示し、この表示中のＷｅｂページ内の一部領域をマウス等のポインティングデバイスを用いて選択する方法が一般的である。（例えば［特許文献１］参照）

特登録０３５８８３３７号公報

しかしながら従来の方法では、ブラウザーで表示しているＷｅｂページの領域をそのブラウザーにおいて選択する場合では、要素単位の選択のみしかできなかった。つまり、例えば画像要素の一部やテキスト要素の一部といったユーザにとって任意の領域を選択することができないといった問題があった。

上記課題を解決するために本発明の画像処理装置は、構造化文書に含まれる複数の要素が配置されたページにおける抽出対象の領域を特定する特定手段と、前記ページに配置された複数の要素を含むデータであって、要素をベクター形式で保持可能であり且つ当該ベクター形式の要素の一部に対応する画像データを抽出可能なデータを作成するための制御を行う作成制御手段と、前記ページにおいて前記特定手段により特定された抽出対象の領域に対応する画像データを、前記作成制御手段による制御により作成された前記データに基づいて抽出する抽出手段と、を有し、前記特定手段により特定された前記抽出対象の領域によって前記複数の要素のうちの１つの要素の一部分が切り取られる場合、前記抽出手段は、前記データに含まれている当該１つの要素を選択し、当該選択された１つの要素に基づく画像データを作成し、当該作成された画像データのうちの当該一部分に対応する画像データを切り取ることで、当該一部分に対応する当該画像データを抽出することを特徴とする。

構造化文書に基づき印刷する印刷システムの例を示す図である。ＰＣ１０１の構成を示すブロック図である。実施例１におけるＰＣ１０１のソフトウェア構成を示すブロック図である。ＧＵＩ画面の一例を示す図である。範囲選択ボタン４０６押下後のＧＵＩ画面を示す図である。構造化文書の一例を示す図である。構造化文書印刷モジュール３０２の処理手順を示す図である。実施例２におけるＰＣ１０１のソフトウェア構成を示すブロック図である。実施例２の領域選択ウインドウ９０１を示す図である。実施例３におけるＰＣ１０１のソフトウェア構成を示すブロック図である。実施例３の領域選択ウインドウのＧＵＩ画面を示す図である。

以下、添付図面を参照して本発明の好適な実施の形態を詳しく説明する。尚、以下の実施の形態は特許請求の範囲に係る本発明を限定するものでなく、また本実施の形態で説明されている特徴の組み合わせの全てが本発明の解決手段に必須のものとは限らない。

図１は、構造化文書に基づき印刷する印刷システムの例を示す図である。図１に示したＰＣ（ＰｅｒｓｏｎａｌＣｏｍｐｕｔｅｒ）１０１はプリンタ１０４と接続されており印刷制御装置としてプリンタ１０４に画像を印刷させる。またＰＣ１０１は、インターネット１０２を介してＷＷＷサーバ１０３と接続されており、構造化言語で記載された構造化文書をダウンロードして、その構造化文書に基づきＷｅｂページを表示する。なお、この構造化文書はＨＴＭＬやＸＨＴＭＬ等の言語で記述されている。さらに、このダウンロードした構造化文書に基づき、プリンタ１０４に画像を印刷させる。

図２はＰＣ１０１の構成を示すブロック図である。ＣＰＵ２０１は、プログラムに従ってデータの演算や命令を行い、ＰＣ１０１の各部や接続された装置に対する制御を行う。

ＲＡＭ２０２は、一時記憶領域として使用されるメモリであり、ＲＯＭ２０３は、ＣＰＵ２０１により実行される各種のプログラムを保存するメモリである。ハードディスク２０４はオペレーティングシステム（ＯＳ）、ブラウザーやその他のアプリケーションソフトのプログラムやデータ等を記録する。つまり、ＣＰＵ２０１が、ＲＯＭ２０３或いはハードディスク２０４に格納されたプログラムをＲＡＭ２０２に読出し、ＲＡＭ２０２をワークメモリとしてプログラムを実行することで各種の制御が行われる。

ＵＳＢインターフェース２０５は、ＵＳＢケーブルが接続されるインターフェースであり、プリンタ１０４とのデータ通信を行うためのインターフェースである。なおプリンタ１０４との通信はＵＳＢケーブル以外でも、例えばＳＣＳＩや無線により行われてもよい。

表示装置２０６はＣＲＴや液晶ディスプレイとグラフィックコントローラとからなり、ＰＣ１０１が表示制御装置として種々の表示を行う。例えば、ＷＷＷサーバ１０３からダウンロードしたＷｅｂページや、印刷プレビュー画像、またグラフィックユーザインターフェース（ＧＵＩ）などの表示が行われる。入力装置２０７はユーザがＰＣ１０１に対して各種指示を与えるための装置であり、例えばマウスやキーボードがある。システムバス２０９は、ＣＰＵ２０１やＲＡＭ２０２、ＲＯＭ２０３、ハードディスク２０４等との間のデータのやり取りを行う。

ＬＡＮインターフェース２０８はＬＡＮケーブルが接続されるインターフェースであり、不図示のルータ、またインターネット１０２を介して外部のＷＷＷサーバ１０３とのデータ通信が行われる。なおこのデータ通信は、例えば無線に対応したインターフェースにより、無線で行われてもよい。

また図２では、ＰＣ１０１が表示装置２０６と入力装置２０７、ＣＰＵ２０１、ＲＡＭ２０２等の制御部と一体となった所謂ノート型のＰＣの場合を示している。しかし本発明はこれに限らず、ＰＣは、表示装置と入力装置とが制御部と別体となった所謂デスクトップ型のものでもよい。

図３は、実施例１におけるＰＣ１０１のソフトウェア構成を示すブロック図である。この図３に示された各ブロックはＲＯＭ２０３やハードディスク２０４に保存されているプログラムを機能ごとに分類したものであり、これらのプログラムはＣＰＵ２０１により実行される。以下にＰＣ１０１上で動作するプログラムとそのデータ処理構成について図３を用いて説明する。

図３においてブラウザー３０１はＷｅｂページを表示するためのアプリケーションであり、ＷＷＷサーバ１０３から受信した構造化文書に基づきＷｅｂページを表示する。つまりは、ＨＴＭＬファイル等の構造化文書ファイルをＰＣ１０１上のハードディスク２０４へダウンロードし、それに基づいて表示装置２０６へ表示させる。ＷｅｂページはＨＴＭＬやＸＨＴＭＬ等の構造化文書ファイルであり、テキストや画像等の構造化文書を構成する要素がタグを用いて記述されている。またこれら要素の表示スタイルを指定するＣａｓｃａｄｉｎｇＳｔｙｌｅＳｈｅｅｔ（以下ＣＳＳと略す）と呼ばれる別ファイルが構造化文書内に指定されている。ブラウザー３０１はこれらの構造化文書ファイルを解析して表示装置２０６に表示させる。

図３において構造化文書印刷モジュール３０２はブラウザー３０１から呼び出されるプラグインソフトウェアであり、ユーザがブラウザー３０１に対して領域選択指示を行ったときこの構造化文書印刷モジュール３０２が実行される。この構造化文書印刷モジュール３０２により、Ｗｅｂページの一部を抽出する処理が行われる。

構造化文書印刷モジュール３０２において、領域選択オブジェクト挿入部３０３はブラウザー内に表示されている構造化文書に領域選択のための矩形領域を模った１つまたは複数の領域選択オブジェクトを挿入する。このとき領域選択オブジェクト挿入部３０３は領域選択オブジェクトを最前面に挿入するために、構造化文書内の各要素のＺ−ｏｒｄｅｒと呼ばれる表示順序を取得する。そして、既存の最前面の要素よりも前面に表示するためのＺ−ｏｒｄｅｒ属性を挿入する領域選択オブジェクトに設定する。

領域選択オブジェクト変更部３０４は、マウス等の入力装置２０７を用いてユーザが行う選択領域の変更指示を受け取り、領域選択オブジェクト挿入部３０３が挿入した領域選択オブジェクトの座標を変更する。これによりユーザは構造化文書の任意の矩形領域をマウス等の入力装置２０７を用いて選択領域として指定することができる。

選択領域データ抽出部３０５は、ユーザが構造化文書内の領域を選択後、印刷もしくは印刷プレビューの開始指示をブラウザーに対して行った場合に実行される。この選択領域データ抽出部３０５は、領域選択オブジェクト変更部３０４で設定された領域選択オブジェクトの座標を取得し、この選択領域に含まれる構造化文書内の要素を抽出し、一部領域を抽出可能な中間データファイルを作成する。この中間データファイルは印刷のための画像データであり、ビットマップデータではなく、文字情報、図形情報をベクターデータとして保持することが望ましい。このときＷｅｂページの任意の領域を抽出可能にする、つまり言い換えればＷｅｂページの要素の一部を抽出可能にするため、中間データはベクターデータの一部に対してクリップ領域が設定可能な中間データファイルであることが望ましい。たとえばＰＤＦ（ＰｏｒｔａｂｌｅＤｏｃｕｍｅｎｔＦｏｒｍａｔ）またはＥＭＦ（ＥｎｈａｎｃｅｄＭｅｔａｆｉｌｅＦｏｒｍａｔ）などが中間データファイルとして用いることができる。

印刷レイアウト部３０６は、選択領域データ抽出部３０５が抽出した中間データファイルを、印刷設定を用いて用紙サイズにレイアウトする。なお、この印刷設定は用紙サイズ、解像度、印刷可能領域等の情報を含み、ＯＳ３０９を介してプリンタドライバ３１０から取得する。

印刷プレビュー部３０７は印刷レイアウト部３０６でレイアウトした要素を印刷プレビューとして表示装置２０６に表示する。

印刷処理部３０８はユーザより印刷開始指示をうけた場合に、印刷レイアウト部３０６でレイアウトした要素の配置情報を用いて、ＯＳ３０９を介してプリンタドライバ３１０に対して描画処理を実行する。

ＯＳ３０９は構造化文書印刷モジュール３０２とプリンタドライバ３１０とが印刷設定データのやり取りを行うためのＡＰＩ（ＡｐｐｌｉｃａｔｉｏｎＰｒｏｇｒａｍｍｉｎｇＩｎｔｅｒｆａｃｅ）や描画処理を行うためのＡＰＩを提供する。またＯＳ３０９には印刷のジョブを管理するスプーラーシステム、プリンタコマンドをポートへ出力するポートモニター等の各種制御ソフトウェアが含まれるが詳細については省略する。

プリンタドライバ３１０は印刷処理部３０８により実行された描画処理に基づいて印刷データを生成し、プリンタコマンドに変換後、ＯＳ３０９を介してプリンタコマンドをプリンタ１０４に送信、プリンタ１０４が用紙へ記録する。

図４、図５を用いて、本実施例の構造化文書の表示制御装置としてのＰＣ１０１が表示装置２０６に表示するＧＵＩ画面を説明する。図４は、ＧＵＩ画面の一例を示す図である。ブラウザー３０１はＷｅｂページをＧＵＩ上に表示する。さらにブラウザー３０１には、表示するＷｅｂページを切り替えるための戻るボタン４０１、進むボタン４０２、アドレス入力領域４０３などが配置されている。さらにウインドウ内には印刷ボタン４０４、印刷プレビューボタン４０５およびＷｅｂページの範囲選択を行うための範囲選択ボタン４０６が配置されている。ユーザが範囲選択ボタン４０６を押下するとブラウザー３０１が構造化文書印刷モジュール３０２を呼び出す。そして構造化文書印刷モジュール３０２において領域選択オブジェクト挿入部３０３が、初期座標が設定された領域選択オブジェクトをブラウザー３０１の構造化文書内に挿入する。

図５は、範囲選択ボタン４０６押下後のＧＵＩ画面を示す図である。図５の５０２は、領域選択オブジェクト挿入部３０３によって挿入された複数の要素からなる領域選択オブジェクトである。領域選択オブジェクト５０２の初期座標は領域選択オブジェクト５０２が、ブラウザーの構造化文書表示領域の中央に配置されるように設定し、領域選択オブジェクトの初期サイズは予め決められた値を用いる。

領域選択オブジェクト５０２は選択領域をあらわす矩形オブジェクト５０３と、矩形の四隅および矩形の四辺に配された矩形サイズ変更用のオブジェクト５０４〜５１１から構成される。矩形オブジェクト５０３は、半透明の描画属性をもった矩形オブジェクトであり、構造化文書のどの部分が選択されているかが、透けてわかるように構成されている。

ユーザは矩形部分をマウス等の入力装置２０７でドラッグして、領域選択オブジェクト５０２の座標を任意に変更することができる。また矩形サイズ変更用オブジェクト５０４〜５１１をマウス等でドラッグすることで、矩形サイズを任意に変更することができる。

この矩形サイズ変更指示に対応して、領域選択オブジェクト変更部３０４が領域選択オブジェクト５０２のサイズ、位置を変更する。

更に図５に示すように、選択領域を印刷対象として印刷を開始するための印刷ボタン５１２を配置する。印刷ボタン５１２が押されると、選択領域データ抽出部３０５が領域選択オブジェクト５０２の座標を取得し、この矩形に含まれる構造化文書を中間データファイルとして抽出する。また図５では領域選択を中止するためのキャンセルボタン５１３も表示し、キャンセルボタン５１３が押された場合は図４の状態に戻る。

図６は、構造化文書の一例を示す図である。この図６の構造化文書６０１はＸＨＴＭＬ形式で記述されている。また図示しないが構造化文書６０１ではＣＳＳにより要素のレイアウト情報を別ファイルとして記述している。

構造化文書６０１で＜ｓｐａｎ＞タグ６０２は、領域選択オブジェクト５０２を表示するためのタグである。図６の＜ｓｐａｎ＞タグ６０２では領域選択オブジェクト５０２を任意の座標に表示可能にするため、Ｗｅｂページにおける絶対座標で表示位置を指定するための、”ｐｏｓｉｔｉｏｎ：ａｂｓｏｌｕｔｅ”属性を指定している。つまりは、表示画面における座標や、またブラウザーのウインドウに対する座標ではないため、ブラウザーのウインドウを移動や拡大・縮小してもその座標は変更されない。また図６の＜ｓｐａｎ＞タグ６０２では領域選択オブジェクト５０２の左上の座標がｌｅｆｔ：１００ｐｘ、ｒｉｇｈｔ：１００ｐｘの位置に幅２００ｐｘ、高さ２００ｐｘの矩形オブジェクトを挿入している。なお、このｐｘは、画素（ピクセル）数を示す。

図６でｚ−ｉｎｄｅｘ属性６０３は、領域選択オブジェクト５０２のｚ−ｏｒｄｅｒを指定するための属性であり、ここでは最前面に表示するためにｚ−ｉｎｄｅｘ：１０００が指定されている。これにより、領域選択オブジェクト５０２以外の他のオブジェクトのｚ−ｉｎｄｅｘが１０００未満である場合に、領域選択オブジェクト５０２は最前面に表示される。また領域選択オブジェクト５０２のための＜ｓｐａｎ＞タグのｉｄは、以降サイズ変更の際にオブジェクトの取得に使用するため、構造化文書内でユニークなＩＤを指定する必要がある。

なお、図６では図示していないが、領域選択オブジェクト５０２はその他に矩形領域の色や背景属性、透過処理のためのフィルタ属性等を指定する必要がある。さらに図６では図示していないが、領域選択オブジェクト５０２では、矩形領域５０３用のタグ以外にも矩形サイズ変更用オブジェクト５０４〜５１１のためのタグも挿入する必要があるが、ここでは省略する。

図７は、構造化文書印刷モジュール３０２の処理手順を示す図である。なお、この図で示す処理を実行するためのプログラムがＲＯＭ２０３やハードディスク２０４に保存されている。そして、ＣＰＵ２０１がこのプログラムをＲＡＭ２０２に読出し実行することにより、ここで説明する処理を行うことができる。

まずＳｔｅｐ７０１において、ブラウザー３０１の範囲選択ボタン４０６が押下されたとき、構造化文書印刷モジュール３０２が起動されて処理を開始する。Ｓｔｅｐ７０２では、表示されたブラウザー３０１のうち構造化文書に基づき表示された領域内でのマウスイベントのキャプチャー処理を開始する。なお、このマウスイベントのキャプチャーは、ＰＣ１０１に接続されたマウスから入力した情報に基づき、領域選択オブジェクト変更部３０４で処理される。次にＳｔｅｐ７０３では、領域選択オブジェクト挿入部３０３が構造化文書内の要素のｚ−ｉｎｄｅｘ属性を取得し、最も最前面に表示されるオブジェクトのｚ−ｉｎｄｅｘ属性を特定する。

Ｓｔｅｐ７０４では、領域選択オブジェクト挿入部３０３が、領域選択オブジェクト５０２の初期座標、初期サイズおよび最前面に表示するためのｚ−ｉｎｄｅｘ属性を設定して、構造化文書の＜ｂｏｄｙ＞要素に挿入する。なお、領域選択オブジェクト５０２を最前面に挿入するために、この領域選択オブジェクトのｚ−ｉｎｄｅｘ属性はＳｔｅｐ７０３で取得したその他の要素のｚ−ｉｎｄｅｘ属性より大きい値を設定する。

Ｓｔｅｐ７０５ではマウスからの情報に基づく指示の入力を待つ。マウス操作によりキャンセルボタン５１３が選択される指示が入力された場合はＳｔｅｐ７１０でキャプチャーを解除し、Ｓｔｅｐ７１１において領域選択処理を終了する。またＳｔｅｐ７０５で領域選択オブジェクト５０２の位置およびサイズ変更の指示が入力された場合は、Ｓｔｅｐ７０９に進む。そしてＳｔｅｐ７０９において、マウス操作に基づき入力された指示に応じて、構造化文書内の領域選択オブジェクト５０２の位置およびサイズを変更し、Ｓｔｅｐ７０５に戻る。

Ｓｔｅｐ７０５で印刷ボタン５１２を選択する指示を入力した場合は、Ｓｔｅｐ７０６、Ｓｔｅｐ７０７およびＳｔｅｐ７０８の印刷処理を実行し、Ｓｔｅｐ７０５の入力待ち処理に戻る。まずＳｔｅｐ７０６では、選択領域データ抽出部３０５が構造化文書内に挿入されている領域選択オブジェクト５０２の座標を取得する。次にＳｔｅｐ７０７では、選択領域データ抽出部３０５が、構造化文書に基づくＷｅｂページのうちＳｔｅｐ７０６で取得した座標と重なる領域に配置されたオブジェクトおよびクリップ情報を抽出して中間データファイルを描画する。なお、このクリップ情報は、Ｗｅｂページを上述の領域で抽出する場合に、その一部を切り取られるオブジェクトの切り取られる位置を示す。Ｓｔｅｐ７０８では、印刷レイアウト部３０６が中間データファイルに基づき印刷対象を印刷領域に配置し、印刷処理部３０８が印刷処理を実行する。

以上の処理手順により構造化文書印刷モジュール３０２は、ユーザのマウス操作に応じてブラウザーに表示されたＷｅｂページの一部領域を選択し、選択された領域を抽出して印刷することができる。したがって、ユーザは、Ｗｅｂページの所望の領域を指定して印刷させることができる。また、複数回のマウス操作により選択領域を変更することが可能となるため、構造化文書のサイズが大きく、領域選択のために画面のスクロールが必要となる場合においても、任意の領域を選択することが可能となる。

また本実施例では、構造化文書に領域選択用のオブジェクトを挿入することで選択領域を表示していた。この方法ではＪａｖａ（登録商標）Ｓｃｒｉｐｔなどのプラットフォームに依存しないスクリプト言語での実装が可能となるため、Ｗｅｂアプリケーション等でのスクリプト言語を用いたソフトウェアでの実施が容易となる。更に本実施例では、ブラウザーのプラグインソフトウェアで構造化文書の領域を選択する場合の処理について述べたが、単一のアプリケーションソフトウェアで実現しても良い。

本発明の他の実施例である実施例２について図面を用いて説明する。この実施例２におけるシステム構成およびＰＣ構成は実施例１の図１、図２と同様である。

図８は実施例２におけるＰＣ１０１のソフトウェア構成を示すブロック図である。以下にＰＣ１０１上で動作するプログラムとそのデータ処理構成について図８を用いて説明する。

図８においてブラウザー３０１は、実施例１のブラウザー３０１と同一であるため詳細については省略する。図８において構造化文書印刷モジュール８０２はブラウザー３０１から呼び出されるプラグインソフトウェアであり、ユーザがブラウザー３０１に対して領域選択指示を行ったときこの構造化文書印刷モジュール８０２が実行される。

構造化文書印刷モジュール８０２において、領域選択画面制御部８０３はブラウザーの
前面に構造化文書の任意の領域を選択するための領域選択ウインドウを表示する。

図９は、実施例２の領域選択ウインドウ９０１を示す図である。領域選択ウインドウ９０１は透過な領域と、半透明の選択矩形領域９０２とから構成される領域選択画像としてのウインドウである。透過および半透明な領域から構成される領域選択ウインドウ９０１がブラウザー３０１の構造化文書表示領域の前面に表示されることで、構造化文書に重ねて選択領域を表示することが可能となる。

領域選択画面制御部８０３は、マウス等の入力装置２０７を用いてユーザが行う選択領域の変更指示を入力し、その指示に応じて選択矩形領域９０２の座標を変更する。これによりユーザは構造化文書の任意の矩形領域をマウス等の入力デバイスを用いて選択領域として指定することができる。

このようにユーザが構造化文書内の領域を選択後、その領域を印刷もしくは印刷プレビューの開始指示をブラウザーに対して行うと、選択領域データ抽出部８０４が実行される。選択領域データ抽出部８０４は、領域選択画面制御部８０３で設定された領域選択矩形の座標を取得し、この矩形領域に含まれる構造化文書内の要素を実施例１で示したのと同様に中間データファイルとして抽出する。

印刷レイアウト部３０６、印刷プレビュー部３０７、印刷処理部３０８、ＯＳ３０９、およびプリンタドライバ３１０は実施例１の図３と同一であるため説明は省略する。

以上で述べたように本実施例では、ブラウザーの前面に透過および半透明な領域から構成される領域選択ウインドウを表示することで、構造化文書の任意の領域を選択することが可能となる。

実施例２では、ブラウザーとは別の透明および半透明領域から構成されるウインドウに選択領域を表示したが、ブラウザーの移動やサイズ変更にあわせて領域選択ウインドウの位置やサイズを変更する必要がありブラウザーの情報を監視する必要がある。そこで、実施例３では上記問題を解消する方法を説明する。なお、実施例３におけるシステム構成およびＰＣ構成は実施例１の図１、図２と同様である。

図１０は、実施例３におけるＰＣ１０１のソフトウェア構成を示すブロック図である。
以下にＰＣ１０１上で動作するプログラムとそのデータ処理構成について図１０を用いて説明する。

図１０においてブラウザー３０１は、実施例１のブラウザー３０１と同一であるため詳細については省略する。図１０において構造化文書印刷モジュール１００２はブラウザー３０１から呼び出されるプラグインソフトウェアであり、ユーザがブラウザー３０１に対して領域選択指示を行ったときこの構造化文書印刷モジュール１００２が実行される。

構造化文書印刷モジュール１００２において、領域選択子ウインドウ制御部１００３はブラウザーの子ウインドウとしてＷｅｂページの任意の領域を選択するための領域選択ウインドウを生成する。この子ウインドウとは、ブラウザーのウインドウ上に配置されブラウザーとの相対位置が固定されたウインドウのことである。

図１１は、実施例３の領域選択ウインドウのＧＵＩ画面を示す図である。領域選択子ウインドウ制御部１００３は、領域選択ウインドウ１１０１をブラウザーの子ウインドウとして構成し、ブラウザーのＷｅｂページが表示される領域と同じ位置、同じサイズの子ウインドウをブラウザー上に配置する。

図１１に示すように領域選択ウインドウ１１０１には、ブラウザーから取得した構造化文書に基づきＷｅｂページを描画する。また領域選択ウインドウ１１０１は必要に応じてスクロールバー１１０３を表示し、スクロールバー１１０３をスクロールすることによりＷｅｂページのすべての領域を表示することができる。

領域選択ウインドウ１１０１は更に領域選択矩形１１０２を半透明な矩形として表示する。領域選択子ウインドウ制御部１００３は、マウス等の入力装置２０７を用いてユーザが行う選択領域の変更指示を入力し、この入力に応じて、選択矩形領域１１０２の座標を変更し、選択矩形領域１１０２を再描画する。これによりユーザは構造化文書の任意の矩形領域をマウス等の入力装置２０７を用いて選択領域として指定することができる。

このようにユーザが構造化文書内の領域を選択した後、その領域を対象として印刷もしくは印刷プレビューの開始指示をブラウザーに対して行った場合に選択領域データ抽出部１００４が実行される。この選択領域データ抽出部１００４は、領域選択子ウインドウ制御部１００３で設定された選択矩形の座標を取得し、実施例１と同様に、この矩形領域に含まれる構造化文書内の要素を中間データファイルとして抽出する。

以上述べたように本実施例では領域選択ウインドウ１１０１をブラウザーの子ウインドウとすることでＷｅｂページの任意の領域を選択することができる。特に本実施例では、ブラウザーの情報を監視することなく、ブラウザーの移動やサイズ変更に対応することができる。

本発明は、前述した実施例の機能を実現するソフトウェアのプログラムコードを記録した記録媒体をシステムあるいは装置に供給するものであってもよい。その場合、そのシステムあるいは装置のコンピュータ（またはＣＰＵまたはＭＰＵ）が記録媒体に格納されたプログラムコードを読み出し実行することによって、本発明の目的が達成される。この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することとなり、そのプログラムコード自体、またそれを記憶した記憶媒体は本発明を構成することになる。

また本発明は、コンピュータが読み出したプログラムコードを実行することにより、前述した実施例の機能が実現されるだけに限らない。例えば、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯｐｅｒａｔｉｎｇＳｙｓｔｅｍ（ＯＳ）などが実際の処理の一部または全部を行い、その処理によって前述した実施例の機能が実現される場合であってもよい。

２０１ＣＰＵ
２０２ＲＡＭ
２０３ＲＯＭ
２０４ハードディスク
２０５ＵＳＢインターフェース
２０６表示装置
２０７入力装置
２０８ＬＡＮインターフェース
２０９システムバス

Claims

構造化文書に含まれる複数の要素が配置されたページにおける抽出対象の領域を特定する特定手段と、
前記ページに配置された複数の要素を含むデータであって、要素をベクター形式で保持可能であり且つ当該ベクター形式の要素の一部に対応する画像データを抽出可能なデータを作成するための制御を行う作成制御手段と、
前記ページにおいて前記特定手段により特定された抽出対象の領域に対応する画像データを、前記作成制御手段による制御により作成された前記データに基づいて抽出する抽出手段と、を有し、
前記特定手段により特定された前記抽出対象の領域によって前記複数の要素のうちの１つの要素の一部分が切り取られる場合、前記抽出手段は、前記データに含まれている当該１つの要素を選択し、当該選択された１つの要素に基づく画像データを作成し、当該作成された画像データのうちの当該一部分に対応する画像データを切り取ることで、当該一部分に対応する当該画像データを抽出することを特徴とする画像処理装置。
前記抽出手段により抽出され、所定の出力領域に配置された画像データを出力する出力手段を有することを特徴とする請求項１に記載の画像処理装置。
前記抽出手段は、前記選択された前記１つの要素が前記所定の出力領域に対応する大きさで当該出力領域に配置されるように、当該１つの要素に基づく画像データを抽出することを特徴とする請求項２に記載の画像処理装置。
前記出力手段は、前記画像データを印刷装置に出力して、当該印刷装置に当該画像データに基づく画像を印刷させることを特徴とする請求項２または３に記載の画像処理装置。
前記出力手段は、前記画像データを表示装置に出力して、当該表示装置に当該画像データに基づく画像を表示させることを特徴とする請求項２乃至４のいずれか１項に記載の画像処理装置。
前記特定手段は前記ページにおける前記抽出対象の領域の座標を特定し、前記抽出手段は前記構造化文書と前記特定手段により特定された座標とに基づいて当該座標に対応する画像データを抽出することを特徴とする請求項１乃至５のいずれか１項に記載の画像処理装置。
前記抽出手段は、前記抽出対象の領域の座標と前記１つの要素の座標とに基づく、当該１つの要素において切り取られる位置を示すクリップ情報を取得し、取得された当該クリップ情報に基づいて前記一部分に対応する画像データを切り取ることを特徴とする請求項６に記載の画像処理装置。
前記特定手段は、前記構造化文書に基づくＷｅｂページにおいて前記抽出対象の領域を特定することを特徴とする請求項１乃至７のいずれか１項に記載の画像処理装置。
前記特定手段は、前記構造化文書に基づき表示装置に表示された前記ページにおいてユーザにより指定された領域を、前記抽出対象の領域として特定することを特徴とする請求項１乃至８のいずれか１項に記載の画像処理装置。
前記構造化文書に、当該構造化文書に基づくページよりも前面に表示される、当該ページにおける領域を特定するための要素を挿入する挿入手段を有し、
前記特定手段は、前記挿入手段により前記要素が挿入された前記構造化文書に基づいて表示されたページにおいて、ユーザによる指示に応じて前記要素により指定された領域を特定することを特徴とする請求項９に記載の画像処理装置。
前記特定手段は、ユーザによる指示に応じて前記構造化文書に含まれる前記要素により特定される領域の座標または大きさを変更し、変更された当該座標または大きさにより特定される領域を前記抽出対象の領域として特定することを特徴とする請求項１０に記載の画像処理装置。
前記表示されたページの領域を特定するための領域選択画像を当該ページに重なるように前記表示装置に表示させる表示制御手段を有し、
前記特定手段は、ユーザによる指示に応じて、前記表示制御手段により表示された前記領域選択画像により特定される領域を前記抽出対象の領域として特定することを特徴とする請求項９に記載の画像処理装置。
前記特定手段は、ユーザによる指示に応じて前記構造化文書に含まれる前記領域選択画像により特定される領域の座標または大きさを変更し、変更された当該座標または大きさにより特定される領域を前記抽出対象の領域として特定することを特徴とする請求項１２に記載の画像処理装置。
前記表示制御手段は、前記ページが表示されている前記表示装置の表示画面における当該ページの外に対するユーザの指示に応じて、当該ページ内に対するユーザの指示がなくても、当該ページの一部である抽出対象の領域を示す前記領域選択画像を表示させ、前記特定手段はユーザによる指示に応じて、当該表示された領域選択画像が示す当該領域の座標または大きさを変更可能であることを特徴とする請求項１３に記載の画像処理装置。
前記表示画面における前記ページの外の領域に表示項目を表示させる第２の表示制御手段を有し、
前記表示制御手段は、前記第２の表示制御手段により表示された前記表示項目に対するユーザの指示に応じて、当該ページ内に対するユーザの指示がなくても、当該ページの一部である抽出対象の領域を示す前記領域選択画像を表示させることを特徴とする請求項１４に記載の画像処理装置。
前記抽出手段は、前記データに含まれるベクター形式の要素の一部分に対応する場合に、当該ベクター形式の要素に対応する画像データを作成し、
当該作成された画像データのうちの当該一部分に対応する画像データを切り取ることで、当該ベクター形式の要素の一部分に対応する当該画像データを抽出することを特徴とする請求項１乃至１５のいずれか１項に記載の画像処理装置。
前記作成制御手段は、前記構造化文書に基づいて前記データを作成することを特徴とする請求項１乃至１６のいずれか１項に記載の画像処理装置。
前記作成制御手段は、前記構造化文書に基づく中間データを作成するための制御を行うことを特徴とする請求項１乃至１７のいずれか１項に記載の画像処理装置。
前記中間データは、ＥＭＦデータであることを特徴とする請求項１８に記載の画像処理装置。
前記中間データは、ＰＤＦデータであることを特徴とする請求項１８に記載の画像処理装置。
構造化文書に含まれる複数の要素を含むデータであって、要素をベクター形式で保持可能であり且つ当該ベクター形式の要素の一部に対応する画像データを抽出可能なデータを作成するための制御を行い、
前記複数の要素が配置されたページにおける抽出対象の領域を特定し、
前記特定された前記抽出対象の領域によって前記複数の要素のうちの１つの要素の一部分が切り取られる場合、前記制御により作成された前記データに含まれている当該１つの要素を選択し、当該選択された当該１つの要素に基づく画像データを作成し、当該作成された画像データのうちの当該一部分に対応する画像データを切り取ることで、当該一部分に対応する当該画像データを抽出することを特徴とする画像処理方法。
コンピュータを請求項１乃至２０のいずれか１項に記載の画像処理装置の各手段として機能させるための、または請求項２１に記載の画像処理方法をコンピュータに実行させるためのプログラム。
前記プログラムは、プラグインプログラムであることを特徴とする請求項２２に記載のプログラム。
前記ページは、Ｗｅｂブラウザにより表示されるＷｅｂページであり、前記プログラムは、当該Ｗｅブラウザのためのプラグインプログラムであることを特徴とする請求項２３に記載のプログラム。