JP2009295164A - オブジェクト取得装置、オブジェクト管理システム、オブジェクト管理方法 - Google Patents

オブジェクト取得装置、オブジェクト管理システム、オブジェクト管理方法 Download PDF

Info

Publication number
JP2009295164A
JP2009295164A JP2009134387A JP2009134387A JP2009295164A JP 2009295164 A JP2009295164 A JP 2009295164A JP 2009134387 A JP2009134387 A JP 2009134387A JP 2009134387 A JP2009134387 A JP 2009134387A JP 2009295164 A JP2009295164 A JP 2009295164A
Authority
JP
Japan
Prior art keywords
print job
unit
metadata
extracted
job data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009134387A
Other languages
English (en)
Other versions
JP5061151B2 (ja
Inventor
Shinji Makishima
真二 牧嶋
Kazuyasu Ogura
一泰 小倉
Akihiro Mizutani
昭弘 水谷
Toshihiro Ida
俊博 井田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Toshiba TEC Corp
Original Assignee
Toshiba Corp
Toshiba TEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp, Toshiba TEC Corp filed Critical Toshiba Corp
Publication of JP2009295164A publication Critical patent/JP2009295164A/ja
Application granted granted Critical
Publication of JP5061151B2 publication Critical patent/JP5061151B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00209Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax
    • H04N1/00222Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax details of image data generation or reproduction, e.g. scan-to-email or network printing
    • H04N1/00233Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax details of image data generation or reproduction, e.g. scan-to-email or network printing details of image data reproduction, e.g. network printing or remote image display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/543User-generated data transfer, e.g. clipboards, dynamic data exchange [DDE], object linking and embedding [OLE]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40Document-oriented image-based pattern recognition
    • G06V30/41Analysis of document content
    • G06V30/414Extracting the geometrical structure, e.g. layout tree; Block segmentation, e.g. bounding boxes for graphics or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00209Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax
    • H04N1/00222Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax details of image data generation or reproduction, e.g. scan-to-email or network printing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00244Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • H04N1/00413Display of information to the user, e.g. menus using menus, i.e. presenting the user with a plurality of selectable options
    • H04N1/00416Multi-level menus
    • H04N1/00419Arrangements for navigating between pages or parts of the menu
    • H04N1/00421Arrangements for navigating between pages or parts of the menu using drop-down menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00482Output means outputting a plurality of job set-up options, e.g. number of copies, paper size or resolution

Abstract

【課題】従来よりもドキュメント中に使用されたオブジェクトの取得および管理を容易に行うことができる技術を提供する。
【解決手段】オブジェクト取得装置であって、ページ画像を生成するための印刷ジョブデータに基づいて、ページ画像上に配置されるオブジェクトを抽出するオブジェクト抽出部と、オブジェクト抽出部にて抽出される前記オブジェクトに関する情報を含むメタデータを、前記印刷ジョブデータから抽出する情報に基づいて生成するメタデータ生成部と、前記オブジェクト抽出部にて抽出された前記オブジェクトと、前記メタデータ生成部にて生成された前記メタデータとを対応付けて登録する登録部と、を備える。
【選択図】図2

Description

本発明はオブジェクト管理システムに関し、特に、印刷ジョブデータ中に含まれるオブジェクトを取得および登録して、検索により利用可能とするオブジェクト管理システムに関する。
従来、アプリケーションで作成したドキュメントを解析して当該ドキュメントのテキスト情報を作成し、ドキュメントおよびテキスト情報を関連付けて登録する技術が知られている(特許文献1)。ユーザは、テキスト情報に基づいて登録されたドキュメントを検索することにより、そのドキュメントに含まれるオブジェクトを利用することができる。
しかしながら、ドキュメントは、多くの場合、複数のオブジェクトなど様々な構成要素を含んでいる。よって、ユーザは、ドキュメント中に含まれるであろうオブジェクトを検索するために、まず、作成されたテキスト情報を参照し、次いで、テキスト情報から希望するオブジェクトが含まれると思われるドキュメントを参照するという煩わしい操作を実行する必要があった。
この発明の実施の形態は、ドキュメント中に使用されたオブジェクトの取得および管理を容易に行うことができるオブジェクト取得、管理技術を提供することを目的とする。
この発明の実施の形態は、ドキュメント中に使用されたオブジェクトの取得および管理を容易に行うことができるオブジェクト取得、管理技術を提供することを目的とする。
上述した課題を解決するため、本発明の一態様は、ページ画像を生成するための印刷ジョブデータに基づいて、前記ページ画像上に配置されるオブジェクトを抽出するオブジェクト抽出部と、前記オブジェクト抽出部にて抽出される前記オブジェクトに関する情報を含むメタデータを、前記印刷ジョブデータから抽出する情報に基づいて生成するメタデータ生成部と、前記オブジェクト抽出部にて抽出された前記オブジェクトと、前記メタデータ生成部にて生成された前記メタデータとを対応付けて登録する登録部と、を備えるオブジェクト取得装置に関する。
また、本発明の別の態様は、ページ画像を生成するための印刷ジョブデータに基づいて、前記ページ画像上に配置されるオブジェクトを抽出するオブジェクト抽出部と、前記オブジェクト抽出部にて抽出される前記オブジェクトに関するメタデータを、前記印刷ジョブデータから抽出する情報に基づいて生成するメタデータ生成部と、前記オブジェクトおよび前記メタデータを記憶する記憶部と、前記オブジェクト抽出部にて抽出された前記オブジェクトと、前記メタデータ生成部にて生成された前記メタデータとを対応付けて前記記憶部に登録する登録部と、前記記憶部に登録された前記オブジェクトを検索する検索部と、を備えるオブジェクト管理システムに関する。
また、本発明の別の態様は、ページ画像を生成するための印刷ジョブデータに基づいて、前記ページ画像上に配置されるオブジェクトを抽出し、抽出される前記オブジェクトに関するメタデータを、前記印刷ジョブデータから抽出する情報に基づいて生成し、抽出された前記オブジェクトと、生成された前記メタデータとを対応付けて登録して記憶させるとともに、記憶された前記オブジェクトを検索するオブジェクト管理方法に関する。
また、本発明の別の態様は、オブジェクトの管理をコンピュータに実行させるオブジェクト管理プログラムであって、ページ画像を生成するための印刷ジョブデータに基づいて、前記ページ画像上に配置されるオブジェクトを抽出し、抽出される前記オブジェクトに関するメタデータを、前記印刷ジョブデータから抽出する情報に基づいて生成し、抽出された前記オブジェクトと、前記メタデータ生成部にて生成された前記メタデータとを対応付けて登録して記憶させるとともに、記憶された前記オブジェクトを検索する処理をコンピュータに実行させるオブジェクト管理プログラムに関する。
以上に詳述したように本発明によれば、ドキュメント中に使用されたオブジェクトの取得および管理を容易に行うことができる。
図1は、本発明の第1の実施の形態のオブジェクト管理システムの構成の概要を示すブロック図である。 図2は、本発明の第1の実施の形態に係るクライアントPC101の機能ブロック図である。 図3は、本発明の第1の実施の形態に係るクライアントPC101に実装されたアプリケーションにより作成されるドキュメントの例示図である。 図4は、本発明の第1の実施の形態に係るメタデータ生成部13にて作成されるメタデータの例示図である。 図5は、本発明の第1の実施形態に係るオブジェクト管理サーバ103の機能ブロック図である。 図6は、本発明の第1の実施の形態において記憶部31に記憶されているオブジェクト管理テーブルの例示図である。 図7は、本発明の第1の実施の形態において記憶部31に記憶されているメタデータ管理テーブルの例示図である。 図8は、本発明の第1の実施の形態におけるオブジェクト検索を要求するためのウィンドウの例示図である。 図9は、本発明の第1の実施の形態におけるテキスト情報を用いたオブジェクト検索を要求するためのウィンドウの例示図である。 図10は、本発明の第1の実施の形態における参照画像を用いたオブジェクト検索を要求するためのウィンドウの例示図である。 図11は、本発明の第1の実施の形態におけるオブジェクト抽出およびメタデータ生成の処理フローを示す図である。 図12は、本発明の第1の実施の形態におけるオブジェクト検索要求の処理フローを示す図である。 図13は、本発明の第1の実施の形態におけるオブジェクト検索の処理フローを示す図である。 図14は、本発明の第2の実施の形態に係るプリントサーバ102の機能ブロック図である。 図15は、本発明の第2の実施の形態に係るオブジェクト抽出およびメタデータ生成の処理フローを示す図である。 図16は、本発明の第3の実施の形態に係るオブジェ口ト検索および置換の処理フローを示す図である。 図17は、本発明の第3の実施の形態におけるオブジェクト置換を要求するためのウィンドウの例示図である。
以下、本発明の実施の形態について図面を参照しつつ説明する。
(第1の実施の形態)
まず、本発明の第1の実施の形態について説明する。図1は、第1の実施の形態のオブジェクト管理システム(以下、単に管理システムとも称す)の構成の概要を示すブロック図である。
図1に示すように、管理システムは、クライアントPC101と、プリントサーバ102と、オブジェクト管理サーバ103と、1つまたは複数のMFP(Multi Function Peripheral)104(第1の実施の形態では、1041および1042)とを備える。また、各構成コンポーネントは、LANやWAN、無線LANなどのネットワークを介して接続されている。
なお、クライアントPC101、プリントサーバ102、およびオブジェクト管理サーバ103の各構成コンポーネントはそれぞれ、汎用コンピュータに搭載される標準的な要素を有している。例えば、このような標準的な要素として、CPU、RAM、ROM、ハードディスク、外部記憶装置、ネットワークインターフェース、ディスプレイ、キーボード、およびマウス等が挙げられる。同様に、MFP104もまた、CPU,RAM、ROM、ハードディスク、スキャナ、プリンタ、ディスプレイ、タッチパネルやボタンなどの操作部、および外部との通信を行うためのインターフェース等、標準的な要素を有している。
なお、記号とは、一定の事柄を指し示すために用いられるシンボル、マーク、および特殊なフォントで描かれた文字をいう。また、図形とは、面、線、点などの集合をいう。また、模様とは、線図、色分け、またはぼかしをいう。さらに、画像とは、写真画像のほか、コンピュータのアプリケーションにより作成されたコンピュータグラフィックなども含む概念である。
クライアントPC101は、内部のCPU101aがROMなどの記憶領域101bに記憶されているアプリケーションプログラムを実行することにより、ドキュメントを作成する。また、クライアントPC101にインストールされているプログラムであるプリンタドライバ1(詳細は後述)は、アプリケーションによって作成されたドキュメントの印刷ジョブデータを作成する。次いで、プリンタドライバ1は、作成された印刷ジョブデータを、プリントサーバ102を経由してMFP104に送出する。
また、第1の実施の形態において、プリンタドライバ1は、印刷ジョブデータから、記号、図形、模様、および画像などのオブジェクトを抽出する。さらに、プリンタドライバ1は、抽出されたオブジェクトに関するメタデータを、印刷ジョブデータから抽出する情報に基づいて生成する。そして、プリンタドライバ1は、抽出されたオブジェクトと、生成されたメタデータとをオブジェクト管理サーバに対応付けて登録する。すなわち、第1の実施の形態では、クライアントPC101がオブジェクト取得装置に相当する。
プリントサーバ102は、クライアントPC101から送出される印刷ジョブデータを一時的に記憶し、特定の、またはユーザが指定したMFP104に送出する。また、プリントサーバ102は、内部のCPU102aが記憶領域102bに記憶されているプログラムを実行することにより、一時的に記憶される印刷ジョブデータに対して所定の処理を実行することもできる。
オブジェクト管理サーバ103は、内部のCPU103aが記憶領域103bに記憶されているプログラムを実行することにより、印刷ジョブデータから抽出されるオブジェクトや当該オブジェクトについて生成されたメタデータを登録、管理する。また、オブジェクト管理サーバ103は、登録されたオブジェクトをメタデータに含まれる情報または参照画像に基づき検索し、クライアントPC101に送出する。
MFP104は、モノクロまたはカラーコピー機能、モノクロまたはカラースキャナ機能およびモノクロまたはカラープリンタ機能等を有している。また、MFP104は、ネットワークに接続することにより、スキャン画像をE−mailにて所望の宛先に送信したり、スキャン画像を保存してネットワーク経由での画像データのやり取りを可能にしたり、ネットワークプリンタやファックスとしての機能を実現したりすることが可能な装置構成となっている。さらに、MFP104は、内部のCPU104aが記憶領域104bに記憶されているプログラムを実行することにより、取得したスキャン画像等に対して所定の処理を実行することもできる。
次に、第1の実施形態における、印刷ジョブデータからのオブジェクト抽出および当該オブジェクトについてのメタデータ生成機能について、説明する。
図2はクライアントPC101に実装されるプリンタドライバ1のオブジェクト抽出機能およびメタデータ生成機能に関するブロック構成を示す。プリンタドライバ1は、作成解析部11と、オブジェクト抽出部12と、メタデータ生成部13と、登録部14とを有する。
作成解析部11は、クライアントPC101のアプリケーションからドキュメントの描画命令を取得すると、ドキュメントからページ画像を生成するための印刷ジョブデータを作成する。作成された印刷ジョブデータは、PostScriptなどのPDL(Page Description Language)のファイル形式でメモリやハードディスクなどの記憶領域101bにスプールされる。作成解析部11は、スプールした印刷ジョブデータを読み出してMFP104に送出し、紙媒体への出力処理を実行させる。
また、作成解析部11は、スプールされている印刷ジョブデータに対してレイアウト解析を実行し、テキスト領域、イメージ領域、および背景領域(ドキュメントのヘッダーやフッター、背景などにより構成されるデザインテンプレート)等を特定する。なお、レイアウト解析においては、記号、図形、模様、および画像などのオブジェクトのうち、印刷ジョブデータにおける出現頻度が所定値以上であるオブジェクトは、背景領域として分類することができる。また、出現頻度が所定値より少ないオブジェクトは、イメージ領域として分類することができる。
図3は印刷ジョブデータから生成されるページ画像201の例示である。このうち、挿絵として利用される、ベクトル画像202およびクリップアートや画像などをキャプチャしたビットマップ画像203は、イメージ領域として特定される。また、タイトル204や本文205、およびページ番号206は、テキスト領域として特定される。さらに、ヘッダー207は、背景領域として特定される。そして、作成解析部11は、当該レイアウト解析結果を、オブジェクト抽出部12と、メタデータ生成部13に送出する。
オブジェクト抽出部12は、印刷ジョブデータからページ画像上に配置されるオブジェクトを抽出する。より具体的には、オブジェクト抽出部12は、作成解析部11から取得したレイアウト解析結果を用い、スプールされている印刷ジョブデータに含まれるイメージ領域から描画命令(オブジェクト)を抽出する。ビットマップ画像の場合は、ビットマップ描画命令がオブジェクトとなる。また、図形などのベクトル画像の場合は、領域内にあるベクトル画像描画命令の集りがオブジェクトになる。次に、抽出部12は、抽出されたオブジェクトをファイル出力する。ファイル形式は、例えばWMF(Windows Meta File)やPostScriptなど、クリップアートで一般的に使われているフォーマットとすることができる。
また、オブジェクト抽出部12は、レイアウト解析により特定された背景領域からも描画命令の集り(デザインテンプレート、以下、単にテンプレートとも称す)をオブジェクトとして抽出する。抽出された描画命令の集りは、アプリケーションが使っているデザインテンプレートのファイル形式(拡張子が”dot”, “pot”, “elt”などであるファイル形式)に変換され、ファイル出力される。変換方法は、文字描画命令はテキストに変換し、ビットマップ描画命令はビットマップ画像として変換し、図形描画命令はWMFなどへ変換し、描画位置に合わせて配置して出力される。
オブジェクト抽出部12は、以上のようにして抽出されたオブジェクトのファイルを登録部14に送出する。
メタデータ生成部13は、オブジェクト抽出部12にて抽出されるオブジェクトに関する図4に示すようなメタデータを、印刷ジョブデータから抽出する情報に基づいて生成する。
メタデータの生成に関して、より具体的に説明する。メタデータ生成部13は、まず、作成解析部11から取得したレイアウト解析結果を用い、印刷ジョブデータに含まれるテキスト領域の文字描画命令から文字コードを抽出してテキストデータに変換する。ここで、文字描画命令の位置座標から、例えば、ページ中央上部付近にあるものは、タイトルとして、ページ右下部付近にあるものは、ページ番号として変換する。このタイトルやページ番号の設定位置は、描画命令をプリンタドライバ1に送出したアプリケーションに応じて変更するようにしてもよい。
次に、メタデータ生成部13は、テキストデータに対して例えば形態素解析を実行して、名詞を抜きだし、キーワードとして設定する。ここで、メタデータ生成部13は、テキストデータに含まれる名詞のうち、所定の条件を満たす名詞をキーワードとして設定するようにしてもよい。例えば、ドキュメント中における出現頻度が高いもの(同じ語句が多いもの)や、フォントが大きいもの、Bold体や赤色などの強調属性を使っていたものをキーワードに設定するようにしてもよい。
メタデータ生成部13は、このようにして設定されたキーワードと、タイトル、ページ番号、および印刷日時(印刷ジョブデータ作成日時、)、ファイル名、印刷ジョブデータの基となるファイルの作成日時、クライアントPC101のログインユーザ名(印刷ジョブデータを作成したユーザ名、)などの印刷ジョブデータに関連する情報とに基づき、メタデータを生成する。なお、メタデータ生成部13は、当該印刷ジョブデータに関連する情報を、不図示のAPI(Application Program Interface)等を用いて取得することができる。そして、メタデータ生成部13は、生成したメタデータを登録部14に送出する。
登録部14は、オブジェクト抽出部12にて抽出されたオブジェクトと、メタデータ生成部13にて生成されたメタデータとを関連付け、続いてオブジェクト管理サーバ103に送出し、オブジェクトおよびメタデータを登録する。ここで、登録部14は、例えばオブジェクトに識別するための識別IDを付与するとともに、当該オブジェクトの識別IDに関連付けられた識別IDをメタデータに付与することにより、オブジェクトとメタデータとを関連付ける。
次に、第1の実施形態における、オブジェクト管理サーバ103において記憶されているオブジェクトの管理、検索機能について説明する。
図5はオブジェクト管理サーバ103における、オブジェクトの管理および検索機能に関するブロック構成を示す。オブジェクト管理サーバ103は、記憶部31と、検索部32とを有する。記憶部31は、例えばハードディスク等の記憶領域103bにより構成されている。これにより、記憶部31は、データベースとしての機能を実現することができる。
記憶部31は、クライアントPC101の登録部14から取得した、オブジェクトと、オブジェクトに関連する情報を含むメタデータとを記憶して管理する。具体的には、記憶部31は、オブジェクトを記憶するとともに、オブジェクト管理テーブルおよびメタデータ管理テーブルを保持し、当該管理テーブルを用いてオブジェクトの管理を行う。
図6および図7に、オブジェクト管理テーブルおよびメタデータ管理テーブルの例を示す。図6のオブジェクト管理テーブルは、IDと、図形、クリップアート、画像、およびテンプレートなどの記憶されているオブジェクトの種類と、オブジェクトの保存先と、を管理するためのテーブルである。図7のメタデータ管理テーブルは、オブジェクト管理テーブルのIDに関連づけられたIDと、図4に示したメタデータを管理するためのテーブルである。
次に、検索部32の機能について説明する前に、クライアントPC101において検索部32に対し検索を要求するために用いることができる画面の例について、図8、図9、および図10を用いて説明する。
図8は、クライアントPC101において起動中であるアプリケーションのウィンドウであり、クライアントPC101のディスプレイに表示される。ユーザは、当該アプリケーションに対する指示を行うことにより、オブジェクトを検索するためのボタン303および検出されたオブジェクトのサムネイル画像を一覧表示させるためのサブウィンドウ301を表示させることができる。ユーザがボタン303を押下すると、図9または図10に示すような検索場所と検索条件を設定するためのウィンドウが、クライアントPC101のディスプレイに表示される。
図9は、ユーザにより入力されたキーワード等のテキスト情報(より具体的にはテキスト情報に基づき作成される検索式)を用いてオブジェクトを検索する場合のテキスト検索ウィンドウである。また、図10は、一部または全部にオブジェクトを含む参照画像を用いてオブジェクトを検索する場合の画像検索ウィンドウである。
ここで、参照画像とは、スキャナでのスキャンなどにより取得された画像ファイル(PDFやTIFF形式などのラスタ画像データ)であって、1つまたは複数のオブジェクトを含み、記憶部31に記憶されているオブジェクトの検索のために用いることができる画像をいう。ユーザは、例えば手元にある紙媒体に描画されているクリップアートやデザインテンプレートと一致または類似するオブジェクトをドキュメント作成のために使用したい場合がある。参照画像を用いた検索を可能とすることにより、ユーザは、オブジェクトが描かれた紙媒体をスキャンさせ、その画像データを使って検索することができる。よって、使用したいオブジェクトについての知識が不足している場合でも検索を行うことが可能となる。
すなわち、第1の実施の形態のオブジェクト管理システムにおいて、オブジェクト管理サーバ103の検索部32は、例えばキーワードなどのオブジェクトを検索するための情報である参照情報(テキスト情報)を取得し、記憶部31に記憶されているオブジェクトのうち、メタデータに含まれるオブジェクトに関する情報と参照情報の一部または全部が一致または関連するオブジェクトを検索する。
加えて、第1の実施の形態のオブジェクト管理システムにおいて、オブジェクト管理サーバ103の検索部32は、記憶部31に記憶されているオブジェクトを検索するための一部または全部にオブジェクトを含む参照画像を取得し、記憶部に登録されたオブジェクトのうち、一部または全部が前記参照画像中に含まれるオブジェクトと一致または類似するオブジェクトを検索する(いわゆる、類似画像検索技術)。
まず、図9のテキスト検索ウィンドウ304について説明する。テキスト検索ウィンドウ304は、テキスト情報を用いた検索を行う場合の検索場所および検索条件を設定するためのウィンドウである。当該ウィンドウ304は、ボタン303の押下に基づき、起動中のアプリケーションにより提供される。
テキストボックス305は、検索する場所を入力するための入力欄であり、第1の実施の形態においては、オブジェクト管理サーバ103のアドレスを入力する。
リストボックス306は、図9に示すテキスト検索ウィンドウと、図10に示す画像検索ウィンドウとをリストとして表示する。ユーザは、当該リストボックス306に対して選択操作を行うことにより、クライアントPC101のディスプレイに表示される図9のテキスト検索ウィンドウと図10の画像検索ウィンドウとを切り替えることができる。
テキストボックス307〜312は、検索条件としてのテキスト情報を入力するための入力欄である。
ボタン313は、検索場所および検索条件を確定させて検索部32に検索要求を送出するためのボタンであり、ボタン314は、検索要求の送出をキャンセルするためのボタンである。
次に、図10の画面について説明する。図9と共通する構成については説明を省略する。
図10のテキストボックス315は、参照画像を使用して検索する場合の参照画像ファイルのパスを入力する欄である。ボタン316を押下すると、ファイルやフォルダを管理、検索するためのファイル管理ツールが起動する。そして、当該ユーザにより参照画像ファイルが選択されると、当該参照画像ファイルのパスがテキストボックス315に入力される。
このようにして設定された検索場所および検索条件に関する情報は、オブジェクト管理サーバ103へ送出されて、サーバ103内におけるオブジェクトの検索処理に用いられる。ここで、テキスト情報を用いた検索の場合において、テキストボックス307〜312のうち少なくとも一つのテキストボックスにおいて複数の条件が入力されるときは、それらのOR条件で検索を行うための検索式を作成してオブジェクト管理サーバ103に送出するようにしてもよい。また、テキストボックス307〜312のうち複数のテキストボックスに条件が入力されるときは、それらのAND条件で検索を行うための検索式を作成してオブジェクト管理サーバ103に送出するようにしてもよい。一方、参照画像の場合は、画像ファイルをそのまま検索要求とともにオブジェクト管理サーバ103へ送出する。
続いて、検索部32の機能について説明する。検索部32は、クライアントPC101から検索要求を取得した場合に、記憶部31に登録されたオブジェクトを検索し、検出されたオブジェクトをクライアントPC101に送出する。
検索部32によるオブジェクトの検索処理について、具体的に説明する。検索部32は、検索要求が、テキスト情報を用いた検索を行うために使用される検索式を伴っているか、判定する。検索部32は、検索要求が検索式を伴っている場合、当該検索式に基づき、記憶部31にメタデータ中に含まれる一致または関連する情報を含むオブジェクトが記憶されているか、検索する。
一方、当該検索式を伴っていない場合、第1の実施の形態においては、検索要求は参照画像を伴って取得される。検索部32は、参照画像についてレイアウト解析を実行し、サンプル画像中に含まれる1つまたは複数のイメージ領域および背景領域を特定する。次に、検索部32は、画像領域からオブジェクト(ビットマップなどの画像データ)を抽出する。続いて、検索部32は、記憶部31に登録されたオブジェクトのうち、抽出した参照画像に含まれるオブジェクトと一部または全部が一致または類似するオブジェクトを検索する。ここで、第1の実施の形態では、サーバに管理されているオブジェクトはベクタ画像であるので、検索する方法としては、例えば、参照画像中のオブジェクトである画像データ(ビットマップ)から画像処理により輪郭線の特徴点の集合を抽出し、管理されているベクタ画像の特徴点とマッチングさせ、一致または類似するものを検索する。
検索部32は、以上の検索処理により検出されたオブジェクトを要求元であるクライアンPC101に送出する。
クライアントPC101のアプリケーションは、取得したオブジェクトのファイルをメモリやハードディスクなどの記憶領域101bにスプールさせる。また、アプリケーションは、図8に示すような取得したオブジェクトのサムネイル画像302を作成してアプリケーションのサブウィンドウ301に表示させる。ユーザは、表示されたサムネイル画像をマウスで選択して、あるいは、ドラッグアンドドロップすることにより、起動中のアプリケーションにおいて作成されているドキュメントに対し、スプールされているオブジェクトを貼り付けることができる。
以下、第1の実施の形態の印刷ジョブデータからのオブジェクトの抽出およびメタデータの生成について、図11を用いて具体的に説明する。第1の実施の形態においては、プリンタドライバ1のオブジェクト抽出部12は、印刷ジョブデータのうちイメージ領域に含まれる描画命令、および背景領域に含まれる描画命令の集合をオブジェクトとして抽出する。
まず、Act101において、作成解析部11は、クライアントPC101のアプリケーションからドキュメントの描画命令を取得する。次に、Act102において、作成解析部11は、ドキュメントからページ画像を生成するための印刷ジョブデータを作成し、メモリやハードディスクなどの記憶領域101bにスプールする。
作成解析部11は、Act103に進み、スプールされている印刷ジョブデータに対してレイアウト解析を実行し、テキスト領域、イメージ領域、および背景領域等を特定する。そして、レイアウト解析結果をオブジェクト抽出部12およびメタデータ生成部13に送出する。
Act104において、メタデータ生成部13は、作成解析部11から取得したレイアウト解析結果に基づき、特定されるテキスト領域の文字描画命令から文字コードを抽出してテキストデータに変換する。
次に、Act105において、メタデータ生成部13は、変換したテキストデータについて形態素解析を実行して名詞を抽出し、キーワードとして設定する。そして、メタデータ生成部13は、設定されたキーワードとクライアントPC101のAPI等(不図示)を使用して取得した印刷日時、ファイル名、クライアントPCのログインユーザ名などの印刷ジョブデータに関する情報とを組み合わせることにより、メタデータを生成する。メタデータ生成部13は、当該生成されたメタデータを登録部14に送出する。
一方、Act106において、オブジェクト抽出部12は、作成解析部11から取得したレイアウト解析結果によって特定されるイメージ領域から、描画命令(オブジェクト)を抽出する。次に、Act107において、オブジェクト抽出部12は、取得したオブジェクトをファイル出力する。オブジェクト抽出部12は、出力したオブジェクトのファイルを登録部14に送出する。
続いて、Act108において、登録部14は、オブジェクト抽出部12から取得したオブジェクトのファイルを、メタデータ生成部13から取得したメタデータと関連付けて、オブジェクト管理サーバ103の記憶部31に登録する。
Act109において、オブジェクト抽出部12は、イメージ領域において抽出されていないオブジェクトが存在するか、レイアウト解析結果に基づき判定する。抽出されていないオブジェクトが存在する場合(Act109, Yes)、オブジェクト抽出部12および登録部14は、Act106からAct109の処理を繰り返す。
イメージ領域において抽出されていないオブジェクトが存在しない場合(Act109, No)、Act110において、オブジェクト抽出部12は、背景領域に含まれる描画命令の集合についてもオブジェクトの抽出を実行する。次に、オブジェクト抽出部12は、抽出されたオブジェクトをファイル出力し、登録部14に送出する(Act111)。続いて、登録部14は、ファイル出力したオブジェクトをメタデータ生成部13から取得したメタデータと関連付けて、オブジェクトの管理サーバの記憶部31に登録する(Act112)。
Act113において、オブジェクト抽出部12は、オブジェクトの抽出を行ったデータが、印刷ジョブデータのうち最後に出力されるページに相当するデータであるか、判定する。印刷ジョブデータのうち、オブジェクトの抽出を行ったデータが最後に出力されるページに相当するデータではない場合(Act113, No)、プリンタドライバ1は、Act104からAct112の処理を繰り返す。
印刷ジョブデータのうち、オブジェクトの抽出を行ったデータが最後に出力されるページに相当するデータである場合(Act113, Yes)、Act114において、プリンタドライバ1は、スプールされている印刷ジョブデータをMFP104に送出して、印刷処理を実行させる。
続いて、第1の実施の形態の、オブジェクト管理サーバ103にて記憶されているオブジェクトの検索について、図12および図13を用いて具体的に説明する。第1の実施の形態においては、検索部32が、クライアントPC101から取得したオブジェクトを検索するための、テキスト情報から作成された検索式または参照画像を用いて、記憶部31に記憶されたオブジェクトを検索する。
具体的にはまず、Act201において、クライアントPC101で起動しているアプリケーションが、ユーザからのオブジェクト提供要求に応じ、当該アプリケーションのウィンドウ中に、図8に示すように、ボタン303およびサブウィンドウ301を表示させる。ユーザがボタン303を押下することに応じて、Act202において、アプリケーションは、テキスト情報を用いた検索を行うためのテキスト検索ウィンドウ(図9)を表示させる。また、当該テキスト検索ウィンドウ中のリストボックス306に対する選択操作を介し、ユーザから、図10に例示する、参照画像を用いたオブジェクト検索を行うための画像検索ウィンドウの表示要求がある場合もある(Act203)。画像検索ウィンドウの表示要求がある場合(Act203, Yes)、クライアントPC101のアプリケーションは、当該画像検索ウィンドウをクライアントPC101のディスプレイに表示させる。
テキスト情報を用いた検索を希望する場合、ユーザは、テキスト検索ウィンドウ304中のテキストボックス305および307〜312に検索場所およびテキスト情報である検索条件を入力し、ボタン313を押下する(Act204)。これにより、クライアントPC101のアプリケーションは、オブジェクト管理サーバ103の検索部32に、入力されたテキスト情報に基づき作成された検索式とともに、オブジェクト検索要求を送出する(Act205)。
また、参照画像を用いたオブジェクト検索を希望する場合、ユーザは、画像検索ウィンドウ317中のテキストボックス305および315に、検索場所および参照画像の保存場所を入力し、ボタン313を押下する(Act206)。これにより、クライアントPC101のアプリケーションは、オブジェクト管理サーバ103の検索部32に、参照画像とともにオブジェクト検索要求を送出する(Act207)。
図13に示すように、検索部32は、クライアントPCのアプリケーションからオブジェクト検索要求を取得し(Act301)、当該オブジェクト検索要求とともに検索式を取得したか、判定する(Act302)。
検索式を取得した場合(Act302, Yes)、検索部32は、Act303において、検索式を用いて、テキスト検索画面において入力されたテキスト情報とメタデータ中に含まれる情報とが一致または関連するオブジェクトが記憶部31に記憶されているか、検索する。
次に、検索部32は、テキスト情報とメタデータ中に含まれる情報とが一致または関連するオブジェクトが検出されたか判定する(Act305)。当該オブジェクトが検出された場合(Act305, Yes)、検索部32は、当該オブジェクトのファイルをクライアントPCに送出する(Act306)。一方、当該オブジェクトが検出されなかった場合(Act305, No)、検索部32は、オブジェクトを検出できなかったことを通知するための情報をクライアントPCに送出する(Act308)。
同様に、参照画像を取得した場合(Act302, No)、検索部32は、当該参照画像中に含まれるオブジェクトと一致または類似するオブジェクトが記憶部31に記憶されているか、検索する(Act304)。
次に、検索部32は、参照画像と一致または類似するオブジェクトが検出されたか判定する(Act305)。当該オブジェクトが検出された場合、検索部32は、当該オブジェクトのファイルをクライアントPC101に送出する(Act306)。一方、当該オブジェクトが検出されなかった場合、検索部32は、オブジェクトを検出できなかったことを通知する情報をクライアントPC101に送出する(Act308)。
クライアントPC101のアプリケーションは、取得したオブジェクトのファイルを記憶領域101bにスプールするとともに、サムネイル画像を生成して、サブウィンドウ301に表示させる(Act308)。ユーザは、サブウィンドウ301に表示されたサムネイル画像を選択あるいはドラッグアンドドロップすることにより、スプールされたオブジェクトをドキュメントに貼り付けることができる。一方、オブジェクトを検出できなかったことを通知する情報を取得した場合、アプリケーションは、ポップアップウィンドウなどをクライアントPC101のディスプレイに表示させ、当該情報をユーザに通知する(Act309)。
第1の実施の形態によれば、ページ画像を生成するための印刷ジョブデータから、ページ画像上に配置されるオブジェクトを抽出し、オブジェクト管理サーバ103にて記憶することとしている。よって、ユーザは、特定のオブジェクトを収集したい場合の、当該オブジェクトをファイル中から検索して抽出するという煩わしい作業を省略することができる。
また、第1の実施の形態によれば、ユーザは、記憶されたオブジェクトを検索し、検出されたオブジェクトをドキュメント作成のために利用することができる。特に、第1の実施の形態によれば、ユーザにより入力されたテキスト情報を用いた検索または一部または全部にオブジェクトを含む参照画像を用いた検索により、記憶されているオブジェクトを検索して利用することができる。すなわち、複数の手段によりオブジェクトを検索することができるため、ユーザは、容易にオブジェクト検索を実行することができる。
(第2の実施の形態)
本発明の第2の実施の形態において、プリントサーバ102は、クライアントPC101より取得した印刷ジョブデータから、オブジェクトを抽出する。さらに、プリントサーバ102は、抽出されたオブジェクトに関するメタデータを印刷ジョブデータから抽出する情報に基づいて生成する。そして、プリントサーバ102は、抽出されたオブジェクトと、生成されたメタデータとをオブジェクト管理サーバ103に対応付けて登録する。
よって、第2の実施の形態においては、第1の実施の形態でクライアントPC101に実装されるプリンタドライバ1が有していた印刷ジョブデータからのオブジェクト抽出および当該オブジェクトについてのメタデータ生成機能を、プリントサーバ102が備えている。すなわち、第2の実施の形態では、プリントサーバ102がオブジェクト取得装置に相当する。
図14に示すように、第2の実施の形態において、プリントサーバ102は、解析部21と、オブジェクト抽出部22と、メタデータ生成部23と、登録部24とを備える。解析部21は、取得したページ画像を生成するための印刷ジョブデータについてレイアウト解析を実行する。また、オブジェクト抽出部22は、解析部21によるレイアウト解析に基づきページ画像上に配置されるオブジェクトを抽出する。一方、メタデータ生成部23は、オブジェクト抽出部22にて抽出されるオブジェクトに関する図4に示すようなメタデータを、印刷ジョブデータから抽出する情報に基づいて生成する。そして、登録部24は、オブジェクト抽出部22にて抽出されたオブジェクトと、メタデータ生成部23にて生成されたメタデータとを関連付け、続いてオブジェクト管理サーバ103の記憶部31に送出してオブジェクトおよびメタデータを登録する。
以下、第2の実施の形態の印刷ジョブデータからのオブジェクトの抽出およびメタデータの生成について、図15を用いて具体的に説明する。
まず、Act401において、解析部21は、クライアントPC101のプリンタドライバから印刷ジョブデータを取得する。第2の実施の形態において、印刷ジョブデータはPDL(Page Description Language)で記述されている。PDLとしては、例えばPostScriptとすることができる。
次に、Act402において、解析部21は、PDLで記述されている印刷ジョブデータに対してレイアウト解析を実行し、テキスト領域、イメージ領域、および背景領域等を特定する。そして、レイアウト解析結果をオブジェクト抽出部22およびメタデータ生成部23に送出する。
Act403において、メタデータ生成部23は、解析部21から取得したレイアウト解析結果に基づき、レイアウト解析結果によって特定されるテキスト領域の文字描画命令から文字コードを抽出してテキストデータに変換する。
次に、Act404において、メタデータ生成部23は、変換したテキストデータについて例えば形態素解析を実行して名詞を抽出し、キーワードとして設定する。そして、メタデータ生成部23は、設定されたキーワードと、PDLで記述されている印刷ジョブデータから取得した印刷日時、ファイル名、クライアントPCのログインユーザ名などの印刷ジョブデータに関する情報とを組み合わせることにより、メタデータを生成する。メタデータ生成部23は、当該生成されたメタデータを登録部24に送出する。
一方、Act405において、オブジェクト抽出部22は、解析部21から取得したレイアウト解析結果によって特定されるイメージ領域から描画命令(オブジェクト)を抽出する。次に、Act406において、オブジェクト抽出部22は、取得したオブジェクトをファイル出力する。オブジェクト抽出部22は、出力したオブジェクトのファイルを登録部24に送出する。
続いて、Act407において、登録部24は、オブジェクト抽出部22から取得したオブジェクトのファイルを、メタデータ生成部23から取得したメタデータと関連付けて、オブジェクト管理サーバ103の記憶部31に登録する。
Act408において、オブジェクト抽出部22は、イメージ領域中において抽出されていないオブジェクトが存在するか、レイアウト解析結果に基づき判定する。抽出されていないオブジェクトが存在する場合(Act408, Yes)、オブジェクト抽出部22および登録部24は、Act405からAct408の処理を繰り返す。
イメージ領域に抽出されていないオブジェクトが存在しない場合(Act408, No)、Act409において、オブジェクト抽出部22は、背景領域に含まれる描画命令の集合についてもオブジェクトの抽出を実行する。次に、オブジェクト抽出部22は、抽出されたオブジェクトをファイル出力し、当該オブジェクトのファイルを登録部24へ送出する(Act410)。続いて、登録部24は、オブジェクトのファイルをメタデータ生成部13から取得したメタデータと関連付けて、オブジェクト管理サーバ103の記憶部31に登録する(Act411)。
Act412において、オブジェクト抽出部22は、オブジェクトの抽出を行ったデータが、印刷ジョブデータのうち最後に出力されるページに相当するデータであるか、判定する。印刷ジョブデータのうち、オブジェクトの抽出を行ったデータが最後に出力されるページに相当するデータではない場合(Act412, No)、プリンタドライバ1は、Act403からAct412の処理を繰り返す。
印刷ジョブデータのうち、オブジェクトの抽出を行ったデータが最後に出力されるページに相当するデータである場合(Act412, Yes)、Act413において、プリントサーバ103は、スプールされている印刷ジョブデータをMFP104に送出して、印刷処理を実行させる。
(第3の実施の形態)
第3の実施の形態において、オブジェクト管理サーバ103は、記憶されているオブジェクトを参照画像を用いて検索するとともに、参照画像中に含まれているオブジェクトを、検出されたオブジェクトに置換する。
より具体的に説明すると、第3の実施の形態において、クライアントPC101に実装されるプリンタドライバ1の作成解析部11は、第1の実施の形態と同様に、アプリケーションからドキュメントの描画命令を取得する。このときに、第3の実施の形態においては、当該描画指令がドキュメント中に含まれるオブジェクトの置換命令を伴っている場合がある。オブジェクトの置換命令を伴っている場合、作成解析部11は、作成された印刷ジョブデータについて、レイアウト解析を実行することなく、オブジェクト管理サーバ103の検索部32に送出する。印刷ジョブデータを取得した検索部32は、印刷ジョブデータについてレイアウト解析を実行し、当該レイアウト解析の結果に基づいてオブジェクトを抽出する。次に、検索部32は、記憶部31に記憶されているオブジェクトのうち、抽出されたオブジェクトと一致または類似するオブジェクトを検索する。さらに、検索部32は、抽出されたオブジェクトを検出されたオブジェクトに置き換えるために、当該検出されたオブジェクトを用いて印刷ジョブデータを再構成する。そして、検索部32は、再構成された印刷ジョブデータをMFP104に送出して出力させる。
ユーザがアプリケーションを用いてドキュメントを作成するときに、そのドキュメント中に例えば不鮮明であったりするオブジェクトが含まれることがある。従来、ユーザは、このような場合に当該ドキュメントの印刷物の出来に満足できないことが多かった。
これに対し、第3の実施形態において、検索部32は、一部または全部にオブジェクトを含み、記憶部に記憶されているオブジェクトを検索するための印刷ジョブデータ(参照画像)を取得する。次に、検索部32は、記憶部31に記憶されているオブジェクトのうち、印刷ジョブデータに含まれるオブジェクトと一致または類似するオブジェクトを検索するとともに、印刷ジョブデータ中に含まれるオブジェクトを検索されたオブジェクトに置換する。
すなわち、第3の実施の形態では、ドキュメントの描画命令が送出されるときにオブジェクトの置換命令も併せて送出される場合、検索部32は、印刷ジョブデータ中のオブジェクトを、オブジェクト管理サーバ103に記憶されている一致または類似するオブジェクトに置き換える。よって、第3の実施形態によれば、ユーザは、より満足のいくドキュメントの印刷物を取得することができる。
以下、印刷ジョブデータ中のオブジェクトをオブジェクト管理サーバ103に記憶されているオブジェクトに置換する処理について、図16を用いて具体的に説明する。
まず、Act501において、プリンタドライバ1の作成解析部11は、ドキュメントの描画命令を取得する。次に、Act502において、作成解析部11は、ドキュメントの描画命令と併せて、オブジェクトの置換命令を取得したか、判定する。
なお、オブジェクトの置換命令は、ユーザが、例えば、クライアントPC101のディスプレイに表示される、図17に示すようなドキュメントの描画命令を送出させるための印刷指示ウィンドウを用いて入力するように構成することができる。より具体的には、例えば、ユーザは、当該印刷指示ウィンドウ中に設けられたオブジェクト置換命令を送出するか否か設定するためのチェックボックスにチェックを入力することにより、アプリケーションにオブジェクト置換命令を送出させることができる。また、例えば、ページ数などのドキュメント中のオブジェクトを特定する情報を指定できるようにしてもよい。この場合は、指定されたオブジェクトのみに、置換えが実施される。
オブジェクトの置換命令について未取得である場合(Act502, No)、作成解析部11は、Act514において、印刷ジョブデータを作成し、当該作成した印刷ジョブデータに基づきオブジェクトの抽出、メタデータ生成を実行した後、印刷ジョブデータをMFP104に送出する。当該レイアウト解析を実行してから印刷ジョブデータをMFP104に送出するまでの処理については、第1の実施の形態と共通であるため、説明を省略する。
一方、オブジェクトの置換命令を取得した場合(Act502, Yes)、作成解析部11は、Act503において、PDL等で記述された印刷ジョブデータを作成し、レイアウト解析を実行することなく、オブジェクト管理サーバ103の検索部32に送出する。このとき、印刷ジョブデータがプリントサーバ102を経由して検索部32に送出されるように構成してもよい。
Act504において、印刷ジョブデータを取得したとき、検索部32は、当該印刷ジョブデータに対し、レイアウト解析を実行する。
次に、Act505において、検索部32は、レイアウト解析結果によって特定されるイメージ領域から描画命令(オブジェクト)を抽出する。抽出されたオブジェクトは、データ記憶部31のオブジェクトスプール領域(不図示)にスプールされる。
続いて、Act506において、検索部32は、イメージ領域において抽出されていないオブジェクトが存在するか、レイアウト解析結果に基づき判定する。オブジェクトの抽出を行っていないイメージ領域が存在する場合(Act506, Yes)、検索部32は、Act505からAct506の処理を繰り返す。
抽出されていないオブジェクトが存在しない場合(Act506, No)、Act507において、オブジェクト抽出部22は、背景領域に含まれる描画命令の集合についてもオブジェクトの抽出を実行する。この場合も、Act505と同様に、抽出されたオブジェクトは、データ記憶部31のオブジェクトスプール領域に、スプールされる。
Act508において、検索部32は、オブジェクトの抽出を行ったデータが、印刷ジョブデータのうち最後に出力されるページに相当するデータであるか、判定する。印刷ジョブデータのうち、オブジェクトの抽出を行ったデータが最後に出力されるページに相当するデータではない場合(Act508, No)、検索部32は、Act505からAct508の処理を繰り返す。
印刷ジョブデータのうち、オブジェクトの抽出を行ったデータが最後に出力されるページに相当するデータである場合(Act508, Yes)、Act509において、検索部32は、記憶部31に記憶されているオブジェクトのうち、抽出されたオブジェクトと一致または類似するものを検索する。
ここで、第3の実施の形態においては、第1の実施の形態と同様に、記憶部31に記憶されているオブジェクトはベクタ画像である。よって、例えば、参照画像中のオブジェクトである画像データ(ビットマップ)から画像処理により輪郭線の特徴点の集合を抽出し、管理されているベクタ画像の特徴点とマッチングさせることにより、抽出されたオブジェクトと一致または類似するオブジェクトを検索するようにしてもよい。
Act510において、検索部32は、抽出されたオブジェクトと一致または類似するオブジェクトが検出されたか、判定する。
一致または類似するオブジェクトが検出された場合(Act510, Yes)、Act511において、検出されたオブジェクトのプレビュー画像を表示する。ここで、このプレビュー画像を表示する際に、検出されたオブジェクトを用いての印刷ジョブデータの再構成を行うか否かをユーザに確認し、次のActに進むようにしてもよい。
Act512において、検索部32は、抽出されたオブジェクトの一部または全部を検出されたオブジェクトに置換するために、検出されたオブジェクトを用いて印刷ジョブデータを再構成する。そして、Act513において、検索部32は、置換された印刷ジョブデータをMFP104に送出し、印刷物として出力させる。
一方、一致または類似するオブジェクトが検出されなかった場合(Act510, No)、検索部32は、Act510からAct513に進み、再構成処理を実行することなく、そのまま印刷ジョブデータをMFP104に送出する。
なお、第3の実施の形態では、クライアントPC101のプリンタドライバ1がオブジェクト抽出機能、メタデータ生成機能を備える場合を例に挙げて説明したが、他の構成とすることも、もちろん可能である。具体的には、第2の実施の形態のようにプリントサーバ102がオブジェクト抽出機能、メタデータ生成機能を備える場合にも、オブジェクト管理サーバ103にて印刷ジョブデータ中のオブジェクトの置換処理を実行するように構成することもできる。
また、MFP104にて複写機能が実行される場合にも、オブジェクトの置換処理を実行できるように構成することもできる。すなわち、MFP104は、スキャナを用いて取得した画像データをオブジェクト管理サーバ103の検索部32に送出する。検索部32は、取得した画像データ中に含まれるオブジェクトを記憶されているオブジェクトに置換して画像データを再構成し、MFP104に送出する。MFP104は、取得した再構成された画像データを印刷物として出力する。
(その他の実施の形態)
以上、本発明について、実施の形態を例示して説明したが、本発明はこれに限定されるものではなく、様々な変更が可能である。
例えば、オブジェクトに関連付けられて登録されるメタデータについては、オブジェクトに関する他の情報が含まれるようにしてもよい。このような情報としては、オブジェクトのページ画像上における配置(ページ画像上において配置される位置やオブジェクトの向き)、オブジェクトのページ画像上における個数、オブジェクトと対応付けられる文字、印刷ジョブデータ中における出現頻度、オブジェクトのサイズ、およびオブジェクトの解像度に関する情報が挙げられる。これらの情報については、例えば登録部14が、オブジェクトとメタデータを関連付けした後、レイアウト解析に基づいて生成することにより、または当該オブジェクトに基づいて印刷ジョブデータを解析することにより、メタデータに追加されるようにしてもよい。
また、オブジェクト管理サーバ103は、クライアントPC101からのオブジェクト検索要求とともに参照画像を取得した場合に、当該参照画像に含まれるオブジェクトと関連する参照情報を選択するようにしてもよい。この場合、オブジェクト管理サーバ103は、選択される参照情報に基づき、記憶部31に記憶されているオブジェクトを検索することができる。具体的には、検索部32は、選択される参照情報と一致または関連する情報が、関連付けられたメタデータに中に含まれるオブジェクトを検索するようにすることができる。また、参照情報として検索部32により選択される情報は、記憶部31に記憶されるようにしてもよく、また、ネットワークを介して取得されるように構成することもできる。
さらに、上述のクライアントPC101、プリントサーバ102、オブジェクト管理サーバ103、およびMFP104での処理における各動作は、それぞれの記憶領域101b、102b、103b、および104bに格納されているプログラムをそれぞれのCPU101a、102a、103a、および104aに実行させることにより実現されるものである。
さらに、クライアントPC101、プリントサーバ102、オブジェクト管理サーバ103、およびMFP104を構成するコンピュータにおいて上述した各動作を実行させるプログラムを、オブジェクト管理プログラムとして提供することができる。第1〜第3の実施の形態では、発明を実施する機能を実現するための当該プログラムが、クライアントPC101やプリントサーバ102などの装置内部に設けられた記憶領域に予め記録されている場合を例示したが、これに限らず同様のプログラムをネットワークから装置にダウンロードしても良いし、同様のプログラムをコンピュータ読取可能な記録媒体に記憶させたものを装置にインストールしてもよい。記録媒体としては、プログラムを記憶でき、かつコンピュータが読み取り可能な記録媒体であれば、その形態は何れの形態であっても良い。具体的に、記録媒体としては、例えば、ROMやRAM等のコンピュータに内部実装される内部記憶装置、CD−ROMやフレキシブルディスク、DVDディスク、光磁気ディスク、ICカード等の可搬型記憶媒体、コンピュータプログラムを保持するデータベース、或いは、他のコンピュータ並びにそのデータベースや、回線上の伝送媒体などが挙げられる。またこのように予めインストールやダウンロードにより得る機能は装置内部のOS(オペレーティング・システム)等と共働してその機能を実現させるものであってもよい。なお、本実施の形態におけるプログラムには、実行モジュールが動的に生成されるプログラムを含むものとする。
本発明を特定の態様により詳細に説明したが、本発明の精神および範囲を逸脱しないかぎり、様々な変更および改質がなされ得ることは、当業者には自明であろう。
101 クライアントPC、102 プリントサーバ、103 オブジェクト管理サーバ、104 MFP、1 プリンタドライバ、11 作成解析部、12 オブジェクト抽出部、13 メタデータ生成部、14 登録部
特開平8−161350号公報

Claims (10)

  1. ページ画像を生成するための印刷ジョブデータに基づいて、前記ページ画像上に配置されるオブジェクトを抽出するオブジェクト抽出部と、
    前記オブジェクト抽出部にて抽出される前記オブジェクトに関する情報を含むメタデータを、前記印刷ジョブデータから抽出する情報に基づいて生成するメタデータ生成部と、
    前記オブジェクト抽出部にて抽出された前記オブジェクトと、前記メタデータ生成部にて生成された前記メタデータとを対応付けて登録する登録部と、を備えるオブジェクト取得装置。
  2. 請求項1に記載の装置において、
    前記メタデータには、オブジェクトのページ画像上における配置、オブジェクトのページ画像上における個数、オブジェクトと対応付けられる文字、印刷ジョブデータ中における出現頻度、オブジェクトのサイズ、オブジェクトの解像度、印刷ジョブデータの基となるファイルの作成日時、印刷ジョブデータの基となるファイルのファイル名、印刷ジョブデータ作成日時、印刷ジョブデータを作成したユーザ名、印刷ジョブデータ中におけるオブジェクトが抽出されたページ番号、および印刷ジョブデータ中におけるオブジェクトが抽出されたページのタイトルのうちの少なくともいずれかの事項に関する情報が含まれるオブジェクト取得装置。
  3. 請求項1に記載の装置において、
    前記オブジェクトには、記号、図形、模様、および画像のうち少なくともいずれかが含まれるオブジェクト取得装置。
  4. ページ画像を生成するための印刷ジョブデータに基づいて、前記ページ画像上に配置されるオブジェクトを抽出するオブジェクト抽出部と、
    前記オブジェクト抽出部にて抽出される前記オブジェクトに関するメタデータを、前記印刷ジョブデータから抽出する情報に基づいて生成するメタデータ生成部と
    前記オブジェクトおよび前記メタデータを記憶する記憶部と、
    前記オブジェクト抽出部にて抽出された前記オブジェクトと、前記メタデータ生成部にて生成された前記メタデータとを対応付けて前記記憶部に登録する登録部と、
    前記記憶部に登録された前記オブジェクトを検索する検索部と、
    を備えるオブジェクト管理システム。
  5. 請求項4に記載のシステムにおいて、
    前記検索部は、前記記憶部に記憶されている前記オブジェクトを検索するための参照情報を取得し、前記記憶部に記憶されている前記オブジェクトのうち、前記メタデータ中における前記オブジェクトに関する情報と前記参照情報の一部または全部が一致または関連するオブジェクトを検索するオブジェクト管理システム。
  6. 請求項4に記載のシステムにおいて、
    前記検索部は、前記記憶部に記憶されている前記オブジェクトを検索するための、一部または全部にオブジェクトを含む参照画像を取得し、前記記憶部に記憶されている前記オブジェクトのうち、一部または全部が前記参照画像に含まれる前記オブジェクトと一致または類似する前記オブジェクトを検索するオブジェクト管理システム。
  7. ページ画像を生成するための印刷ジョブデータに基づいて、前記ページ画像上に配置されるオブジェクトを抽出し、
    抽出される前記オブジェクトに関するメタデータを、前記印刷ジョブデータから抽出する情報に基づいて生成し、
    抽出された前記オブジェクトと、生成された前記メタデータとを対応付けて登録して記憶させるとともに、
    記憶された前記オブジェクトを検索するオブジェクト管理方法。
  8. 請求項7に記載の方法において、
    記憶されている前記オブジェクトを検索するための参照情報を取得し、前記記憶部に記憶されている前記オブジェクトのうち、前記メタデータ中における前記オブジェクトに関する情報と前記参照情報の一部または全部が一致または関連するオブジェクトを検索するオブジェクト管理方法。
  9. 請求項7に記載の方法において、
    記憶されている前記オブジェクトを検索するための、一部または全部にオブジェクトを含む参照画像を取得し、記憶されている前記オブジェクトのうち、一部または全部が前記参照画像に含まれる前記オブジェクトと一致または類似する前記オブジェクトを検索するオブジェクト管理方法。
  10. 請求項7に記載の方法において、
    記憶されている前記オブジェクトを検索するための、一部または全部にオブジェクトを含む参照画像を取得するとともに、当該参照画像中に含まれる前記オブジェクトに関連する情報を生成し、
    記憶されている前記オブジェクトのうち、前記メタデータ中における情報と前記参照情報の一部または全部が一致または関連するオブジェクトを検索するオブジェクト管理方法。
JP2009134387A 2008-06-05 2009-06-03 オブジェクト取得装置、オブジェクト管理システム、オブジェクト管理方法 Expired - Fee Related JP5061151B2 (ja)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
US5910708P 2008-06-05 2008-06-05
US5910408P 2008-06-05 2008-06-05
US61/059,104 2008-06-05
US61/059,107 2008-06-05
US12/476,656 US20090307264A1 (en) 2008-06-05 2009-06-02 Object acquisition device, object management system, and object management method
US12/476,656 2009-06-02

Publications (2)

Publication Number Publication Date
JP2009295164A true JP2009295164A (ja) 2009-12-17
JP5061151B2 JP5061151B2 (ja) 2012-10-31

Family

ID=41401253

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009134387A Expired - Fee Related JP5061151B2 (ja) 2008-06-05 2009-06-03 オブジェクト取得装置、オブジェクト管理システム、オブジェクト管理方法

Country Status (2)

Country Link
US (1) US20090307264A1 (ja)
JP (1) JP5061151B2 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011233030A (ja) * 2010-04-28 2011-11-17 Fuji Xerox Co Ltd 情報処理装置およびプログラム
JP2012168832A (ja) * 2011-02-16 2012-09-06 Konica Minolta Business Technologies Inc 画像処理装置、画像処理方法及びプログラム
US9569146B2 (en) 2014-07-17 2017-02-14 Fujifilm Corporation Information processor and automatic page replacement method
US9772805B2 (en) 2014-07-17 2017-09-26 Fujifilm Corporation Information processor and digital plate inspection method

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5402771B2 (ja) * 2010-03-25 2014-01-29 ソニー株式会社 管理サーバ、基地局、通信システム、および通信方法
JP6040701B2 (ja) * 2012-10-24 2016-12-07 株式会社リコー 印刷システム、印刷方法及びプログラム
KR101362847B1 (ko) 2013-03-19 2014-02-17 엘아이지넥스원 주식회사 영상 데이터베이스 갱신 방법
KR101362851B1 (ko) 2013-03-19 2014-02-17 엘아이지넥스원 주식회사 영상 데이터베이스 갱신 장치
JP6558006B2 (ja) 2015-03-20 2019-08-14 株式会社リコー 画像管理装置、画像管理方法、画像管理プログラムおよび表示システム
JP7408914B2 (ja) * 2018-12-19 2024-01-09 コニカミノルタ株式会社 印刷システム、情報処理装置及びデータ処理方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04348475A (ja) * 1991-05-27 1992-12-03 Hitachi Ltd 画像情報検索方法及びその装置
JPH1166084A (ja) * 1997-08-18 1999-03-09 Just Syst Corp 画像検索装置およびその装置の各手段としてコンピュータを機能させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2007158816A (ja) * 2005-12-06 2007-06-21 Canon Inc 画像処理装置
JP2008046794A (ja) * 2006-08-14 2008-02-28 Fuji Xerox Co Ltd 画像処理装置、画像処理方法及びプログラム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7809722B2 (en) * 2005-05-09 2010-10-05 Like.Com System and method for enabling search and retrieval from image files based on recognized information
JP2008146602A (ja) * 2006-12-13 2008-06-26 Canon Inc 文書検索装置、文書検索方法、プログラム及び記憶媒体
JP2008186253A (ja) * 2007-01-30 2008-08-14 Canon Inc 画像処理装置、画像処理システム、画像処理方法、コンピュータプログラム
JP4895380B2 (ja) * 2007-03-02 2012-03-14 キヤノン株式会社 画像処理システム、画像処理装置、画像処理方法、コンピュータプログラムおよび記憶媒体

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04348475A (ja) * 1991-05-27 1992-12-03 Hitachi Ltd 画像情報検索方法及びその装置
JPH1166084A (ja) * 1997-08-18 1999-03-09 Just Syst Corp 画像検索装置およびその装置の各手段としてコンピュータを機能させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2007158816A (ja) * 2005-12-06 2007-06-21 Canon Inc 画像処理装置
JP2008046794A (ja) * 2006-08-14 2008-02-28 Fuji Xerox Co Ltd 画像処理装置、画像処理方法及びプログラム

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011233030A (ja) * 2010-04-28 2011-11-17 Fuji Xerox Co Ltd 情報処理装置およびプログラム
JP2012168832A (ja) * 2011-02-16 2012-09-06 Konica Minolta Business Technologies Inc 画像処理装置、画像処理方法及びプログラム
US9569146B2 (en) 2014-07-17 2017-02-14 Fujifilm Corporation Information processor and automatic page replacement method
US9772805B2 (en) 2014-07-17 2017-09-26 Fujifilm Corporation Information processor and digital plate inspection method

Also Published As

Publication number Publication date
JP5061151B2 (ja) 2012-10-31
US20090307264A1 (en) 2009-12-10

Similar Documents

Publication Publication Date Title
JP5061151B2 (ja) オブジェクト取得装置、オブジェクト管理システム、オブジェクト管理方法
US7930292B2 (en) Information processing apparatus and control method thereof
US8326090B2 (en) Search apparatus and search method
JP5623079B2 (ja) ハード・コピーの書式からの書式定義の自動発生
JP2007102545A (ja) 電子文書作成装置、電子文書作成方法及び電子文書作成プログラム
JP2006120125A (ja) ドキュメント画像情報管理装置及びドキュメント画像情報管理プログラム
JP2014056556A (ja) 文書管理サーバ、文書管理サーバの制御方法、およびそのプログラム、文書管理システム、文書管理システムの制御方法、およびそのプログラム
JP4956319B2 (ja) 画像処理装置、その制御方法、ならびにそのプログラムおよび記憶媒体
JP2008059157A (ja) 書類確認支援システム、書類確認支援装置およびプログラム
JP2020024303A (ja) 画像処理装置及びその制御方法、並びにプログラム
JP2010262584A (ja) 情報処理装置、情報処理システム、情報処理方法およびプログラム
JP2006243830A (ja) 画像機器を利用したワークフロー支援システム及びワークフロー検索システム
JP2011139363A (ja) 画像形成装置、情報処理装置、データ処理サーバ及び情報処理方法
JP7154982B2 (ja) 情報処理装置、制御方法、及びプログラム
JP2007172235A (ja) 履歴管理装置
JP2006252455A (ja) ファイル管理装置、ファイル管理方法及びファイル管理プログラム
US20060119886A1 (en) Print control unit and a print control program
JP2017021654A (ja) 文書管理サーバ及びシステム
JP5445740B2 (ja) 画像処理装置、画像処理システムおよび処理プログラム
JP2007048061A (ja) 文字処理装置、文字処理方法及び記録媒体
JP2009093627A (ja) 文書画像データ提供システム、文書画像データ提供装置、情報処理装置、文書画像データ提供方法、情報処理方法、文書画像データ提供プログラム、情報処理プログラム
JP2008181223A (ja) 電子文書管理システム、電子文書管理方法、プログラムおよび記録媒体
JP2008118489A (ja) ファクシミリ配信システム及びファクシミリ装置
JP6175414B2 (ja) 文書処理装置および文書処理プログラム
JP6191269B2 (ja) 画像形成装置及び画像形成プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100915

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120224

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120306

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120420

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120717

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120806

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150810

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees