JP3807997B2 - Image processing apparatus and image processing method - Google Patents
Image processing apparatus and image processing method Download PDFInfo
- Publication number
- JP3807997B2 JP3807997B2 JP2002079439A JP2002079439A JP3807997B2 JP 3807997 B2 JP3807997 B2 JP 3807997B2 JP 2002079439 A JP2002079439 A JP 2002079439A JP 2002079439 A JP2002079439 A JP 2002079439A JP 3807997 B2 JP3807997 B2 JP 3807997B2
- Authority
- JP
- Japan
- Prior art keywords
- image information
- image
- processing
- unit
- control unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Facsimiles In General (AREA)
- Storing Facsimile Image Data (AREA)
- Facsimile Image Signal Circuits (AREA)
- Controls And Circuits For Display Device (AREA)
Description
【0001】
【発明の属する技術分野】
本発明は、専用のイメージバッファを備えない出力部に画像情報を表示させる画像処理装置および画像処理方法に関する。
【0002】
【従来の技術】
従来からパーソナルコンピュータを情報通信ネットワーク(以下、ネットワークと呼称する)、たとえばインターネット、LAN(Local Area Network)、またはWAN(Wide Area Network)などに接続して画像情報の送受信が行われているが、パーソナルコンピュータだけでなく、様々な画像処理装置、たとえば電話機、携帯型の電話機、PDA(Personal Digital Assistant)、またはファクシミリ装置などをネットワークに接続して画像情報の送受信が行われるようになってきている。ネットワークに接続されて画像情報の送受信を行う画像処理装置は、画像情報の表示を行う表示部を備え、ネットワークを介して受信した画像情報を表示部に表示させることができる。
【0003】
従来の画像処理装置では、ネットワークを介して受信した画像情報はメモリに記憶され、画像情報の表示を行う場合には、前記メモリとは別に設けられ、表示部が専用するイメージバッファに画像情報を格納して表示部が表示を行う。このような表示部が専用するイメージバッファに記憶された画像情報を表示する画像処理装置は、たとえば特開平11−133921号公報、特開平5−48860号公報および特開平6−259539公報に開示されている。
【0004】
特開平11−133921号公報には、表示部に表示する画像情報の階調数によってフレーム周波数を変更する画像処理装置が開示されている。特開平11−133921号公報に開示される画像処理装置では、イメージバッファが2階調の画像情報と、多階調の画像情報とを格納する領域を備え、2階調の画像情報を表示装置に表示する場合と多階調の画像情報を表示装置に表示する場合とでフレーム周波数を変更して表示部で表示させることによって、表示した画像情報のちらつきを抑制し、消費電力を低減させている。
【0005】
特開平5−48860号公報には、ネットワークに接続されて画像情報の送受信を行う画像処理装置が開示されている。特開平5−48860号公報に開示される画像処理装置では、回線を通じて取得した受信側の2次記憶装置の空き容量の情報に応じて送信側で伝送する画像情報の符号化方式またはデータの量子化レベルを変更することで、通信時間の短縮を可能としている。ネットワークを介して受信した画像情報は画像メモリに記憶され、画像メモリに格納された画像情報を表示部に表示させるときには、画像情報が格納される記憶部から表示部が備える表示用メモリに格納して表示を行う。
【0006】
特開平6−259539号公報には、表示部の表示能力に合わせて画像情報の階調数を減少させるときに、違和感が無いように画像情報の階調数を減少させて表示させる画像処理装置が開示されている。特開平6−259539号公報に開示される画像処理装置では、画像情報の色数を減らしても違和感が無いように画像情報を表示させるために制御部は、画像情報を均等色空間の座標系に変換し、画素の色成分のまとまりの良さを求めて、分析を行うことで代表色を求めている。
【0007】
【発明が解決しようとする課題】
特開平11−133921号公報、特開平5−48860号公報および特開平6−259539号公報に開示される画像処理装置では、表示部が表示を行うためだけに使用する専用のイメージバッファが装置内に設けられている。電話機、携帯型の電話機、PDAまたはファクシミリ装置など画像処理装置では、製造コストの削減および小型化を図るために表示部が画像情報の表示を行うための専用のイメージバッファを設けないで、ネッワークから受信した画像情報を記憶するメモリにイメージバッファ領域を指定して、1つのメモリを多目的に用いる設計が望まれる。しかしながら、前記メモリにイメージバッファ領域を指定すると、表示部に画像情報を表示する場合に前記メモリから表示部に絶え間なく画像情報を伝送する必要があるので、制御部の負荷処理量が増し、また表示部とメモリとを電気的に接続するバスの使用時間が長くなり、制御部がバスを使用して行う他の処理を妨害してしまう。表示部に伝送される画像情報は表示部の種類および画素量などで異なるが、たとえば320画素×240画素の画像情報を、1秒間に約150回伝送する必要があり、フルカラー画像を伝送する場合では、1画素あたりR(赤)青(B)緑(G)の各色256階調のデータ、つまり1画素あたり24ビットのデータを伝送する必要がある。したがって、前記メモリにイメージバッファ領域を指定すると、メモリから画像情報を読み出して表示させる制御部の負荷処理量が増加するので、制御部は表示処理以外の処理を行うことができなくなる。したがって、制御部をより高機能なものにする必要があるといった問題がある。
【0008】
本発明の目的は、表示部に専用のイメージバッファを設けず、画像情報を記憶する記憶部にイメージバッファ領域を設ける場合に、表示部に画像情報を表示させる処理による制御部の負荷を低減し、制御部の処理効率を向上させることができる画像処理装置および画像処理方法を提供することである。
【0009】
【課題を解決するための手段】
本発明は、画像情報が記憶され、指定されたイメージバッファ領域内の画像情報が読み出される記憶部と、
記憶部に記憶された画像情報を表示する表示部と、
イメージバッファ領域内の画像情報を予め定めるリフレッシュレートで繰返し読み出して、読み出した画像情報を表示部に表示させる処理項目を含む複数の処理項目を、同時に実行して処理可能な制御部とを含み、
制御部は、イメージバッファ領域内の画像情報を予め定めるリフレッシュレートで表示部に表示させるとき、イメージバッファ領域内の画像情報のファイル形式、および処理能力に応じて予め定める複数の処理項目の組み合わせと、実行しようとする処理項目の組み合わせとの比較結果に基づいて、前記実行しようとする処理項目の組み合わせを実行したときの負荷処理量が多いか否かを判断し、負荷処理量が多いと判断すると、前記イメージバッファ領域内の画像情報を、階調数を減少させて読み出し、読み出した画像情報を前記表示部に表示させることを特徴とする画像処理装置である。
【0010】
本発明に従えば、記憶部は画像情報を記憶し、制御部は、記憶部に記憶される画像情報のうち指定されたイメージバッファ領域内の画像情報を出力部に表示させる。表示部は、記憶部とは別に1画面分の画像情報が一時的に格納される専用のイメージバッファを備えず、記憶部をイメージバッファとするので、表示部に画像情報を表示させているときには記憶部から出力部に絶え間なく画像情報が伝送される。制御部は、イメージバッファ領域内の画像情報を予め定めるリフレッシュレートで表示部に表示させるとき、イメージバッファ領域内の画像情報のファイル形式、および処理能力に基づいて予め定められる複数の処理項目の組み合わせと、実行しようとする処理項目の組み合わせとの比較結果に基づいて、前記実行しようとする処理項目の組み合わせを実行したときの負荷処理量が多いか否かを判断し、負荷処理量が多いと判断すると、指定されたイメージバッファ領域内の画像情報を、階調数を減少させて読み出し、読み出した画像情報を表示部に表示させる。階調数はデータ量と密接な関係を有し、画像情報の階調数を減少させることによって、記憶部から読出されて表示部に伝送される画像情報のデータ量を減少することができる。
【0011】
出力部に伝送する画像情報のデータ量を減少させることで、画像情報を出力部に表示させる処理における制御部の負荷が低減する。したがって、制御部を高機能なものにする必要がないので、製造コストの低減を図ることができる。また、画像情報を出力部に表示させる処理における制御部の負荷を低減させることによって、制御部を表示処理以外の用途にも使用することができるので、制御部は複数の処理を効率的に行うことができる。
【0014】
また本発明は、前記制御部は、複数の予め定める階調数設定値のうちのいずれか1つの階調数設定値となるように画像情報の階調数を減少させ、かつ制御部で行われる負荷処理量が多くなるほど画像情報の階調数を減少させることを特徴とする。
【0015】
本発明に従えば、制御部は指定されたイメージバッファ領域内の画像情報が予め定める条件を満たすときに、複数の予め定める階調数設定値のうちのいずれか1つの階調数設定値となるように画像情報の階調数を減少させ、かつ制御部の負荷処理量が多くなるほど画像情報の階調数を減少させて出力部に表示させる。つまり制御部が多数の処理を並列に行う場合などでは、制御部が画像情報を出力部に表示させる表示動作だけを行う場合に比べて、複数の予め定める階調数設定値のうち小さい階調数設定値となるように画像情報の階調数を減少させて出力部に表示させるので、制御部は複数の処理を効率的に行うことができる。
【0016】
また本発明は、前記記憶部に記憶される画像情報を入力する入力部を含み、
前記入力部には情報通信ネットワークを介して外部の情報処理装置から受信した画像情報が入力されることを特徴とする。
【0017】
本発明に従えば、入力部には、情報通信ネットワーク、たとえばインターネット、LAN(Local Area Network)またはWAN(Wide Area Network)などを介して外部の情報処理装置から画像情報を入力することができ、情報通信ネットワークを介して入力されるデータ量の多い画像情報を効率的に表示部に表示させることができる。
【0018】
また本発明は、画像情報が記憶される記憶部にイメージバッファ領域を指定し、イメージバッファ領域内の画像情報を予め定めるリフレッシュレートで繰返し読み出して、読み出した画像情報を表示部に表示させる処理項目を含む複数の処理項目を、同時に実行して処理するとき、イメージバッファ領域内の画像情報のファイル形式、および処理能力に基づいて予め定められる複数の処理項目の組み合わせと、実行しようとする処理項目の組み合わせとの比較結果に基づいて、前記実行しようとする処理項目の組み合わせを実行したときの負荷処理量が多いか否かを判断し、負荷処理量が多いと判断すると、前記イメージバッファ領域内の画像情報を、階調数を減少させて読み出し、読み出した画像情報を表示部に表示させることを特徴とする画像処理方法である。
【0019】
本発明に従えば、画像情報が記憶される記憶部にイメージバッファ領域を指定し、イメージバッファ領域内の画像情報を予め定めるリフレッシュレートで繰返し読み出して、読み出した画像情報を表示部に表示させる処理項目を含む複数の処理項目を、同時に実施して処理するとき、イメージバッファ領域内の画像情報のファイル形式、および処理能力に基づいて予め定められる複数の処理項目の組み合わせと、実行している処理項目の組み合わせとの比較結果とに基づいて、前記実行しようとする処理項目の組み合わせを実行したときの負荷処理量が多いか否かを判断し、負荷処理量が多いと判断すると、指定されたイメージバッファ領域内の画像情報を、読み出すときに階調数を減少させて出力部に表示させることで、画像情報を表示するためにイメージバッファ領域から出力部に伝送する画像情報のデータ量を減少させることができる。出力部は、記憶部とは別に1画面分の画像情報が一時的に格納される専用のイメージバッファを備えず、記憶部をイメージバッファとするので、出力部に画像情報を表示させているときには記憶部から出力部に絶え間なく画像情報が伝送されるが、出力部に伝送する画像情報のデータ量を減少させることで、画像情報を出力部に表示させる処理の負荷を低減させることができる。
【0020】
【発明の実施の形態】
図1は、本発明の実施の一形態における画像処理装置であるファクシミリ装置1の構成を示すブロック図である。ファクシミリ装置1は、ファクシミリ通信機能、電話通信機能に加えて、情報通信ネットワーク(以下、ネットワークと略称する)、たとえばインターネット、ローカルエリアネットワーク(LAN)またはワイドエリアネットワーク(WAN)を介して外部の情報処理装置との間で画像情報の送受信を行うネットワーク通信機能を備える。前記情報処理装置とは、通信機能を備える装置であって、たとえばパーソナルコンピュータ、ファクシミリ装置、電話機などを含む。
【0021】
ファクシミリ装置1は、公衆回線網である電話回線網2に接続される網制御部3と、電話回線網2から受信したアナログ信号をファクシミリ装置1内で用いられるデジタル信号に変換し、またファクシミリ装置1内で用いられるデジタル信号を電話回線網2に適したアナログ信号に変換する第1モデム4および第2モデム5と、ファクシミリ装置1の制御を行うためのプログラムなどが記憶される記憶部6と、記憶部6に記憶されるプログラムを実行してファクシミリ装置1全体の制御を行う制御部7と、画像情報を記憶する画像記憶部8と、記録部材に画像情報を印刷する印刷部9と、原稿画像を読取る画像読取り部10と、画像記憶部8に記憶される画像情報の表示を行う出力部である表示部11と、ファクシミリ装置1に対して利用者が情報および指示を入力する操作入力部12と、パラレルケーブルによって外部の情報処理装置と接続可能なパラレルインタフェース(以下、パラレルIFと略称する)13と、ローカルエリアネットワーク(Local
Area Network;以下、LANと略称する)に接続可能なLANインタフェース(以下、LANIFと略称する)14と、送受話器15と、コードレス電話子機との無線通信の制御を行うコードレス用制御回路16と、コードレス電話子機との無線通信で信号の送受信を行うアンテナ17と、外部の情報処理装置からネットワークを介して画像情報を受信または送信する通信部18とを含んで構成される。記憶部6は、制御部7と相互に接続され、制御部7、画像記憶部8、印刷部9、画像読取り部10、表示部11、操作入力部12、パラレルIF13およびLANIF14は、共通のバス19と相互に接続される。本発明の実施の他の形態においては、記憶部6は、バス19と相互に接続される構成としてもよい。
【0022】
網制御部3は、電話回線網2の状況を監視すると共に、電話回線網2と第1モデム4、第2モデム5、送受話器15、またはコードレス用制御回路16とを選択的に接続する。
【0023】
第1モデム4は制御部7に接続され、デジタル信号で生成されるファクシミリ画像を電話回線網2に適したアナログ信号に変換すると共に、電話回線網2を介して受信したアナログ信号のファクシミリ画像をデジタル信号のファクシミリ画像に変換する。また第1モデム4は、通信事業者が提供する発信元番号表示サービスのための1200bpsで送付される発信元番号の読取りを行って制御部7に通知する。
【0024】
第2モデム5は、通信部18に接続され、ネットワークに送信するデジタル信号の画像情報を電話回線網2に適したアナログ信号に変換すると共に、ネットワークを介して受信したアナログ信号の画像情報をデジタル信号の画像情報に変換する。本実施の形態では、第1モデム4および第2モデム5を別々に構成しているが、本発明の実施のさらに他の形態では、第1モデム4および第2モデム5を共通化してもよい。
【0025】
記憶部6は、ROM(Read Only Memory)によって実現され、たとえばフラッシュメモリなどによって実現される。画像記憶部8は、RAM(Random Access Memory)によって実現され、たとえばSDRAM(Synchronous Dynamic Random Access Memory)などによって実現される。本実施の形態では、記憶部6と画像記憶部8とは別々のメモリによって構成されるが、本発明の実施の他の形態において、記憶部6と画像記憶部8とは1つのメモリで構成されてもよい。
【0026】
記憶部6には、ファクシミリ装置1を制御するためのプログラムの他に、たとえば画像記憶部10に記憶される画像情報を、階調数を減少させて読み出すためのプログラムが記憶される。画像記憶部8には、電話回線網2、パラレルIF13またはLANIF14から入力された画像情報、および画像読取装置10で読取られ、入力された画像情報が記憶される。画像情報とは、たとえばJPEG(Joint Photographic Coding Experts Group)ファイル、GIF(Graphics
Interchange Format)ファイル、マークアップ言語で記述されたテキストデータファイル、ファクシミリ画像などである。マークアップ言語は、たとえばHTML(Hyper Text Markup Language)または簡易HTMLなどである。JPEGは、カラー静止画像を圧縮または解凍するための規格であり、この規格は国際電気通信連合(ITS−TS)と国際標準化機構(ISO)とで定められている。GIFは、グラフィックデータを圧縮および解凍するため規格であり、この規格は米国CompuServe社で定められている。
【0027】
画像記憶部8は、表示部11のイメージバッファを兼ねる。画像記憶部8にはイメージバッファ領域が指定され、このイメージバッファ領域に指定された画像情報が表示部11に表示される。前記イメージバッファ領域とは、表示部11で表示する1画面分の画像情報を格納する領域である。このため表示部11には1画面分の画像情報を格納する専用のイメージバッファが設けられない。ファクシミリ装置1では、画像記憶部8にメージバッファ領域が設定されることによって、この表示部11だけが使用する専用のイメージバッファを表示部11に設ける必要が無いので、装置のコストを低減することができる。また、ファクシミリ装置1の内部の配線を簡略化することができ、製造の簡略化を図ることができる。
【0028】
ファクシミリ装置1は、画像記憶部8を備えることによって、たとえば電話回線網2を介して受信した画像情報を転送したり、同一の画像情報を外部の複数の情報処理装置に送信したり、記録紙がなくなったときにファクシミリ画像を受信したり、画像読取り部10から読取った画像情報を記憶し、外部の複数の情報処理装置に送信するメモリ送信を行うことができる。画像記憶部8の画像情報を表示部11に表示させる場合、表示部11のリフレッシュレート、つまり1秒間に更新する画面の数にあわせて、画像記憶部8からバス19を介して表示部11に絶えず画像情報が伝送される。
【0029】
制御部7は、中央演算処理装置(以下、CPUと記す)によって実現される。制御部7であるCPUは、内部にダイレクトメモリアクセスコントローラ(DMAC)および割り込みコントローラ(IFT)を有する。制御部7は、入力操作部12からの入力情報、電話回線網2からの受信した情報を元に、記憶部6に記憶されるプログラムに従ってファクシミリ装置1の全体を制御し、ファクシミリ装置1の各部に指示を与える。また外部の情報処理装置との通信で画像情報の伝送時間を短縮するために画像情報の圧縮処理を行い、また、圧縮された画像情報を元のピクセル系列情報に戻す解凍処理を行う。たとえばファクリミリ画像の送受信を行う場合であれば、たとえばモディファイド・ハフマン(Modified Huffman;略称MH)符号化方式またはモディファイド・リード(Modified Read;略称MR)符号化方式などによって画像読取り部10で読取った画像情報を圧縮し、これらの符号化方式で圧縮されたファクシミリ画像を解凍する。また、画像読取り部10で読取った画像情報を、たとえばJPEG方式で圧縮することができる。また制御部7は、第1モデム4から受信した発信元番号が通知されると、表示部11にこの発信元番号を表示させる。
【0030】
制御部7は、記憶部6に記憶されるプログラムに従って、画像記憶部8に記憶される画像情報を、表示部11に表示させる。制御部7は、画像記憶部8に記憶される画像情報を表示部11に表示させるとき、画像記憶部8にイメージバッファ領域を指定し、このイメージバッファ領域に指定した画像情報を読み出して表示部11に表示させる。このとき、イメージバッファに指定された画像情報が予め定める条件を満足していると、制御部7は、像記憶部8のイメージバッファ領域の画像情報を、階調数を減少させて読み出して表示部11に表示させる。たとえば、1画素あたり赤(R)のデータが5ビット、緑(G)のデータが6ビットおよび青(B)のデータが5ビットで表され、約65万色で表される画像情報を、階調数を減少させて約4万色で表す場合、制御部7は、1画素あたり赤(R)、緑(G)および青(B)の各色の上位4ビットを取り出して、表示部11に表示させる。画像記憶部8から表示部11への画像情報の伝送は、制御部7内のダイレクトメモリアクセスコントローラを用いて行われる。予め定める条件を画像情報のファイル形式とし、予め定めるファイル形式の画像情報の階調数を低減させてもよい。たとえば、カラー画像を含むファイル形式などの画像情報のデータ量が多いファイル形式を予め定める条件とする、または文字情報などの階調数を減少させても画質の劣化が少ない画像情報のファイル形式を予め定める条件とすることができ、画像情報の詳細な内容を調べなくても、階調数を減少させる画像情報を容易に判断することができるので、制御部が画像情報の階調数を減少させる処理を効率的に行うことができる。
【0031】
画像情報の階調数をNし、この画像情報の1画素あたりのデータ量をMとすると、階調数とデータ量との関係はN=2Mで表される。ただしMはビット数である。表示部11に伝送する画像情報の階調数を減少させると、表示部11に送る画像情報のデータ量が減少するので、画像情報を表示部11に表示させる処理における制御部7の負荷が低減する。また画像記憶部8から表示部11にバス19を介して伝送する画像情報のデータ量を減少する。表示部11のリフレッシュレート、つまり表示部11で1秒間に更新される画面の数は同じであるが、画像記憶部8から表示部11に送られる画像情報のデータ量を減少させるので、画像記憶部8から表示部11への画像情報の伝送によって占有されるバス19の使用時間を短くすることができる。
【0032】
これによって制御部7は、割り込み処理を行って複数の処理を並列に行い、たとえば表示部11に画像情報を表示させながら、ファクシミリ送信を行う処理などを並列に行うことができ、多くの処理を並列に実行することができ、制御部7の処理効率が向上する。制御部7は、割り込みコントローラによって複数の処理の割り込みを行うことで、複数の処理を並列に行う。
【0033】
印刷部9は、受信した画像情報、画像読取り部10で読取られた画像情報、およびファクシミリ装置1で編集した画像情報などの印刷を行う。印刷部9は、カラーインクジェット方式のプリンタよって実現される。本実施の形態では、印刷部9はカラーインクジェット方式のプリンタによって実現されるが、本発明の実施のさらに他の形態において、熱転写方式または電子写真方式のプリンタによって実現されてもよい。また本発明の実施のさらに他の形態において、印刷部9のイメージバッファを画像記憶部8に設ける構成としてもよい。
【0034】
画像読取り部10は、ファクシミリ送信する原稿画像、通信部18を用いて送信するための原稿画像、またはコピーを行うため印刷部9で印刷する原稿画像を読取る。画像読取り部10は、レンズとCCD(Charge Coupled Device)ラインセンサとを組み合わせて原稿画像を読取る縮小読取り方式、またはロッドレンズアレイを用いた密着センサ方式などを用いて原稿画像を読取る。画像読取り部10は、原稿画像をカラーで読取るため、3原色のフィルタまたは3原色の光源を備える。
【0035】
表示部11は、液晶表示パネルを含んで構成される。液晶表示パネルは、たとえば320画素×240画素の表示領域を有する。表示部11は、制御部7の指示に基づいて画像記憶部8のイメージバッファ領域に指定された画像情報の表示を行う。表示部11は、予め定めるリフレッシュレートで画像情報を表示する。つまり表示部11に画像情報を表示させるためには、画像記憶部8のイメージバッファ領域に指定された画像情報を、たとえば1秒間に150回、画像記憶部8から表示部11へ伝送することで画像が表示される。また表示部11は、制御部7の指示に基づいて、利用者にファクシミリ装置1の使用方法などの説明情報を表示する。
【0036】
操作入力部12は、利用者がファクシミリ装置1に対して入力を行うための複数のキーを含んで構成される。操作入力部12は、ダイヤルキー12aと、操作キー12bとを含む。ダイヤルキー12aはファクシミリ装置1に文字を入力するためのキー群であり、操作キー12bはファクシミリ装置1に動作を指示するキー群である。操作キー12bは、たとえばファクシミリ送信する送信開始キー、ファクシミリ受信を行う受信キー、動作の選択を行う選択キーなどが設けられる。操作入力部12の各キーを押下することによって、使用者はファクシミリ装置1に対して指示を行うことができる。
【0037】
パラレルIF13は、パラレルケーブルによって外部の情報処理装置、たとえばパーソナルコンピュータとファクシミリ装置1とを接続するためのインタフェースである。パラレルIF13を備えることによって、ファクシミリ装置1をパーソナルコンピュータなどに接続することができる。ここでは、パラレルIF13を備えるが、外部の情報処理装置と接続可能な他のインタフェースを備えてもよい。LANIF14は、LANケーブルによってLANにファクシミリ装置1を接続するためのインタフェースである。LANIF14を備えることによって、ファクシミリ装置1をLANに接続することができる。本実施形態では、画像情報を入力する入力部として、網制御部3、パラレルIF13およびLANIF14を備える。
【0038】
送受話器15は、利用者が通話を行うためのスピーカとマイクロフォンとを含んで構成される。コードレス用制御回路16は、予め定める手順に従い、ファクシミリ装置1とコードレス電話子機との間で情報の送受信を行うための回路である。ファクシミリ装置1は、1台あるいは複数台のコードレス電話子機と無線通信によって接続可能であり、コードレス用制御回路16によってファクシミリ装置1と後述するコードレス電話子機との接続のための通信路の探索、接続の確立などを行う。ファクシミリ装置1では、コードレス電話子機を用いてもネットワークに接続することができる構成とするため、コードレス用制御回路16は制御部7を介して通信部18に接続されている。アンテナ17は、コードレス用制御回路16に接続され、コードレス電話子機と無線通信を行う。
【0039】
通信部18は、ネットワークに接続される情報処理装置と通信において、画像情報の送受信を行うための通信プロトコルの処理を行う。前記通信部18は、複数の通信プロトコルの処理を行うことができる。具体的には通信部18は、標準プロトコルIC(Integrated Circuit)18aと、第1プロトコルIC18bと、第2プロトコルIC18cとを含んで構成される。
【0040】
標準プロトコルIC18aは、インターネットの標準プロトコルであるTCP/IP(Transmission Control Protocol/Internet Protocol)によって通信を行うための回路である。第1プロトコルIC18bは、標準プロトコルとは異なる通信プロトコルによって通信を行うための回路である。第2プロトコルIC18cは、標準プロトコルおよび第1プロトコルとは別の通信プロトコルによって通信を行うための回路である。第1プロトコルIC18bおよび第2プロトコルIC18cは、たとえば通信事業者が提供する一般通信モードとは異なる他の通信モードを利用して特定のサービスを利用することができる通信プロトコルの処理を行う。第1プロトコルは、たとえばエルモード(登録商標)方式に対応したプロトコルであり、第2プロトコルは、たとえばJ−web(登録商標)方式に対応したプロトコルである。ファクシミリ装置1では、通信部18が備える前記3つの通信プロトコルのいずれか1つを選択的に用いてネットワークを介して通信を行うことができる。通信部18を備えることで、記憶部6に各通信プロトコルによって通信を行うためのプログラムを記憶させ、制御部7によって通信プロトコルの処理を行う必要がない。したがって、ネットワークへの画像情報の送信およびネットワークを介して受信するときに制御部7の負荷処理量を低減させることができる。
【0041】
本実施の形態では、通信部18は標準プロトコルIC18a、第1プロトコルIC18bおよび第2プロトコルICを別々に備えるが、標準プロトコルIC18a、第1プロトコルIC18bおよび第2プロトコルIC18cには共通した部分が多いので、1つのICで3つの通信プロトコルの処理を行うように構成してもよい。
【0042】
前記操作入力部12の操作キー12bには、インターネットサービスプロバイダにファクシミリ装置1を接続するための接続キーが備えられ、利用者が前記接続キーを押下することで制御部7から通信部18に通信の指示が出され、ファクシミリ装置1は簡易にインターネットに接続される。通信部18を備えることで、インターネットから画像情報の受信、インターネットへの画像情報の送信、または電子メールの送受信などを行うことができる。
【0043】
図2は、ファクシミリ装置1のネットワークへの接続方法について示す図である。ここで、各方法で接続されるファクシミリ装置1を総称する場合は、ファクシミリ装置1と呼称し、接続方法が異なる個別のファクシミリ装置1は、ファクシミリ装置1A,1B,1C,1Dと呼称する。ここでは、業務用として用いられる企業のLAN20にファクシミリ装置1A,1B,1Cを接続する方法、個人がインターネット21に接続するときに用いられるインターネットサービスプロバイダ(以下、プロバイダと略称する)22にファクシミリ装置1Dを接続する方法について示す。
【0044】
まず、ファクシミリ装置1A,1B,1CをLAN20にそれぞれ接続する方法について説明する。LAN20は、サーバ24と複数のクライアントコンピュータ26A,26Bを含んで構成される。LAN20は、ルータ27を介してインターネット21に接続される。サーバ24には、LAN20に接続されるクライアントコンピュータ26A,26Bまたはファクシミリ装置1A,1B,1Cに対して送信された電子メール、ファクシミリ画像、音声などの情報を一時的に記憶して管理する。
【0045】
ファクシミリ装置1Aは、パラレルIF13を介してパラレルケーブル23によってサーバ24に接続することでLAN20に接続することができる。ファクシミリ装置1Aは、パラレルIF13を用いてサーバ24に接続して通信を行う場合にも、通信部18を用いて通信を行う。
【0046】
ファクシミリ装置1Bは、網制御部3を介して電話回線網および統合デジタル通信網(以下、ISDNと呼称する)などの公衆回線網25Aによってサーバ24に接続することでLAN20に接続することができる。
【0047】
ファクシミリ装置1Cは、LANIF14を介してLAN20に直接接続することができる。ファクシミリ装置1は、LANIF14を用いてサーバ24に接続して通信を行う場合にも、通信部18を用いて通信を行う。図2には示していないが、ファクシミリ装置1はクライントコンピュータ26A,26BにパラレルIF13を介して接続されてもよい。ファクシミリ装置1Cは、LAN20の通信プロトコルと、TCP/IPなどの通信プロトコルによって、LAN20を介してインターネット21から画像情報の受信することができる。LAN20の通信プロトコルの処理は、LANIF14が行う。
【0048】
次に、ファクシミリ装置1Dをプロバイダ22に接続する方法について説明する。ファクシミリ装置1Dは、網制御部3から公衆回線網25Bを通じてダイヤルアップ接続でプロバイダ22に接続することができる。ファクシミリ装置1Dの使用者は、インターネット接続事業者であるプロバイダ22と契約して、電話回線網およびISDNなどの公衆回線網25Bを通じてプロバイダ22に接続する。前記プロバイダ22が管理するサーバ29にはファクシミリ装置1への送信情報、たとえばファクシミリ画像および電子メールなど、またはファクシミリ装置1からの受信情報、たとえばホームページなどが記憶される。ファクシミリ装置1はプロバイダ22からルータ30を介してインターネット21に接続され、インターネット21に情報を送信、またはインターネット21から情報の受信を行う。上述した第1プロトコルIC18bまたは第2プロトコルIC18cを用いた通信では、通信事業者がプロバイダ22を兼ね、ファクシミリ装置1は通信事業者のアクセスポイントに公衆回線網25Bを通じてアクセスすることで、インターネット21に接続される。
【0049】
ファクシミリ装置1にとっての外部の情報通信装置は、LAN20のサーバ24、クライアントコンピュータ26A,26B、インターネットサービスプロバイダ22のサーバ29、ファクシミリ装置1A,1B,1Cであり、またファクシミ装置1Dにとってのネットワークは、少なくとも電話回線網25Bを含み、LAN20、インターネット21および電話回線網25Bをさらに含む場合がある。たとえば、ファクシミリ装置1Bからファクシミリ装置1Dに送信された画像情報は、公衆回線網25A、サーバ24、LAN20、ルータ27、インターネット21、ルータ30および公衆回線網25Bをこの経路で通過して、ファクシミリ装置1Dで受信される。またたとえば、クライアントコンピュータ26A,26Bおよびファクシミリ装置1Cから送信されたファクシミリ装置1Dに送信された画像情報は、LAN20、ルータ27、インターネット21、ルータ30および公衆回線網25Bをこの経路で通過して、ファクシミリ装置1Dで受信される。
【0050】
ファクシミリ装置1Aにとっての外部の情報通信装置は、LAN20のサーバ24、クライアントコンピュータ26A,26B、インターネットサービスプロバイダ22のサーバ29、ファクシミリ装置1B,1C,1Dであり、またファクシミリ装置1Aにとってのネットワークは、LAN20および公衆回線網25Aのいずれか一方を少なくとも含み、インターネット21、電話回線25Bを含む場合がある。たとえば、ファクシミリ装置1Dからファクシミリ装置1Aに送信される画像情報は、公衆回線網25B、ルータ30、インターネット21、ルータ27、LAN20およびサーバ24の経路を通って、ファクシミリ装置1Aで受信される。
【0051】
ファクシミリ装置1Bにとっての外部の情報通信装置は、LAN20のサーバ24、クライアントコンピュータ26A,26B、インターネットサービスプロバイダ22のサーバ29、ファクシミリ装置1A,1C,1Dであり、またファクシミリ装置1Bにとってのネットワークは、少なくとも公衆回線網25Bを含み、LAN20、インターネット21、電話回線網25Bを含む場合がある。
【0052】
ファクシミリ装置1Cにとっての外部の情報通信装置は、LAN20のサーバ24、クライアントコンピュータ26A,26B、インターネットサービスプロバイダ22のサーバ29、ファクシミリ装置1A,1B,1Dであり、またファクシミリ装置1Cにとってのネットワークは、少なくともLAN20を含み、インターネット21、電話回線網25A,25Bを含む場合がある。
【0053】
図3は、無線によってファクシミリ装置1に接続されるコードレス電話子機31の構成を示すブロック図である。コードレス電話子機31は、電話通信機能に加えてファクシミリ装置1の通信部18を介してネットワークに接続し、画像情報の送受信を行う情報通信機能を備える。コードレス電話子機31は、コードレス電話子機31の制御を行うためのプログラムおよびファクシミリ装置1を介して受信した画像情報が記憶される記憶部32と、記憶部32に記憶されたプログラムによってコードレス電話子機31全体の制御およびファクシミリ装置1との通信に必要な無線通信路の設定を行う子機制御部33と、記憶部に記憶された画像情報を表示する表示部34と、コードレス電話子機31に対して利用者が指示を入力する操作入力部35と、ファクシミリ装置1と無線通信を行うアンテナ36と、アンテナ36に接続され、コードレス電話の通信帯域で無線通信を行うための信号の変換を行う高周波ユニット(以下、RFユニットと呼称する)37と、RFユニット37に接続され、ファクシミリ装置1に送信する信号を非線形に圧縮し、周波数の帯域の範囲内で音声の大きさに関わらず、明快な会話が行われるようにすると共に、受信した圧縮信号を解凍するコンパンダ集積回路(以下、コンパンダICと呼称する)38と、マイクロフォン39と、スピーカ40と、アンプを含みマイクロフォン39から入力される音声信号を増幅し、スピーカ40から出力するための音声信号を増幅し、コンパンダIC38に接続される音声ユニット41を含んで構成される。ファクシミリ装置1との通信はデジタル方式およびアナログ方式のいずれの通信方式を使用してもよい。
【0054】
記憶部32、子機制御部33および表示部34は共通の接続線42に接続され、操作入力キー35、RFユニット37、コンパンダIC38、および音声ユニット40は、子機制御部33と個別に接続される。操作入力部35は、利用者がコードレス電話子機31に対して入力を行うための複数のキーを含んで構成される。操作入力部35は、ダイヤルキー35aと、操作キー35bとを含んで構成される。ダイヤルキー35aはコードレス電話子機31に文字を入力するためのキー群であり、操作キー35bはコードレス電話子機31に動作を指示するキー群である。操作入力部35の各キーを押下することによって、使用者はコードレス電話子機31に対して指示を行うことができる。操作入力部35は、ファクシミリ装置1の操作入力部12と同様な構成である。しかし、コードレス電話子機31の各部は、ファクシミリ装置1の各部よりも小型に構成される。
【0055】
コードレス電話子機31は、外部との通信がアンテナ36からの電波による通信に限定されており、コードレス電話子機31をネットワークに接続する場合には、まずファクシミリ装置1との通信を行う必要がある。つまりコードレス電話子機31は、ファクシミリ装置1の通信部18が備える3つの通信プロトコルのいずれか1つに基づいて行われる通信によって、画像情報の送信および受信、電子メールの送受信などを行う。受信した画像情報は、コードレス電話子機31が備える表示部34の表示能力に応じたページ設定に変換されてファクシミリ装置1からコードレス電話子機31に送信される。
【0056】
コードレス電話子機31には、コードレス電話子機31とは別体で充電ユニット43が設けられる。充電ユニット43は、子機クレードル44とクレードル用電源45とから構成される。子機クレードル44は、コードレス電話子機31を立て掛けて載置するための載置台である。子機クレードル44には、クレードル用電源45から電力が供給され、子機クレードル44にコードレス電話子機31を載置したときにコードレス電話子機31に充電を行うことができる構成としている。
【0057】
図4は、画像記憶部8に記憶されている画像情報を表示部11に表示させるときのファクシミリ装置1の処理動作を示すフローチャートである。ここでは、ネットワークを介して受信した画像情報を表示部11に表示する処理動作について説明する。
【0058】
ステップS1では、電話回線網2から網制御部3を介して画像情報がファクシミリ装置1に入力され、ステップS2に進む。本実施の形態では、網制御部3を介して画像情報が入力されるが、本発明の実施の他の形態において、パラレルIF13またはLANIF14から画像情報が入力されてもよい。
【0059】
ステップS2では、制御部7が入力された画像情報を画像記憶部8に記憶して、ステップS3に進む。ステップS3では、制御部7が画像記憶部8にイメージバッファ領域を指定する。
【0060】
ステップS4では、制御部7が画像記憶部8のイメージバッファ領域に指定された画像情報の内容をチェックする。たとえば、画像情報がHTMLで記述されているテキストデータファイルであると、画像情報はフレームというブロックに分割され、フレーム毎に画像情報の性質、たとえば自然画像、色分け画像、文字部分、文字部分の文字部、および背景の色などがタグで定義されている。文字部分の文字部とは、たとえばテキストファイルの文字部であり、単一色で表される部分である。ここでは、画像情報がどのようなファイル形式を含むのかをフレーム毎の情報で認識する、つまり各フレームの画像情報がテキストファイルであるか、画像ファイルであるかを認識する。
【0061】
次にステップS5では、制御部7が読み出した画像情報に自然画像が含まれるか否かを判断する。本実施の形態では、自然画像とは写真データであって階調の必要な画像であり、たとえば6万5千色などで表される画像情報である。自然画像が含まれるか否かは、たとえば画像情報のビット数を検出して、画像情報の詳細な内容を検出するのではなく、画像情報のファイル形式によって判断する。自然画像の性質を有する画像情報は、たとえばJPEGファイルなどであり、色分け画像の性質を有する画像情報は、たとえばGIFファイルなどであるので、画像情報が含むファイル形式を調べるだけで自然画像が含まれるか否かを容易に判断することができ、効率的な処理を行うことができる。
【0062】
ステップS5で、自然画像が含まれていると判断された場合は、ステップS6に進む。ステップS6では、制御部7のジョブリストをチェックする。ジョブリストは制御部7であるCPUが実行中であるジョブの一覧表である。前記ジョブとは、たとえば表示部11に表示を行わせる処理、またはファクリミリ送信する処理など制御部7が行う処理である。ジョブリストのチェックは、CPU内部の割り込みコントローラまたはダイレクトメモリアクセスコントローラによって行われる。制御部7は多数のジョブを並列に処理し、ジョブの開始時にジョブリストをオンにし、そのジョブが完了したときにオフにする。
表1は、ジョブリストの一例を示す図である。
【0063】
【表1】
【0064】
表1では、たとえば制御部7が行うジョブとして、1.コードレス用制御回路16に関する処理(ジョブ1)、2.画像読取り部10に関する処理(ジョブ2)、3.表示部11に関する処理(ジョブ3)、4.印刷部9に関する処理(ジョブ4)、5.第1モデム4に関する処理(ジョブ5)などを挙げている。表1では、丸印をつけられているジョブ2,3,5が実行中であることを示している。
【0065】
次にステップS7では、制御部7のジョブが多忙であるか否かが制御部7によって判断される。制御部7のジョブが多忙であるか否かの判断は、制御部7の処理能力と、制御部7が行うジョブの組み合わせとを考慮して行われる。たとえば表1に示すように、ジョブ2,3,5を行う場合には、制御部7が行う必要のある処理の量である負荷処理量が多くなるので、制御部7は多忙であると判断する。ステップS7で、制御部7が多忙であると判断された場合にはステップS8に進み、制御部7が多忙ではないと判断された場合にはステップS10に進む。
【0066】
ステップS8では、制御部7が自然画像を含む画像情報の階調数を減少させないで、1画素あたりR(赤)青(B)緑(G)の各色256階調、つまり画像情報のデータ量を24ビット/ピクセルで表示部11に伝送し、ステップS9に進む。ステップS9では、制御部7が画像情報を表示部11に表示させて処理動作を終了する。このように制御部7が画像情報を表示部11に表示させる処理の他に行う処理が少ない場合には、画像記憶部8に記憶された自然画像を含む画像情報を表示部11にそのまま表示させる。
【0067】
一方、ステップS7で制御部7が多忙であると判断された場合には、ステップS10に進み、制御部7であるCPUのジョブが特に多忙であるか否かが判断される。ステップS10では、制御部7の処理能力と、制御部7が行うジョブの組み合わせとを考慮して行われる。たとえば表1に示されるジョブ1〜5を全てを行う場合には、制御部7の負荷処理量はさらに多くなるので、制御部7は特に多忙であると判断する。またたとえば、制御部7に負荷のかかる処理であれば、制御部7のジョブの数が少なくても、特に多忙であると判断してもよい。
【0068】
上述のステップS7およびステップS10では、制御部7自体の処理能力と、制御部7が行う処理の組み合わせを考慮して、負荷処理量に応じて制御部7が多忙ではないか、多忙であるか、特に多忙であるかを制御部7が判断する。制御部7が多忙であると判断される処理項目の組み合わせと、制御部7が多忙であると判断される処理項目の組み合わせと、制御部7が特に多忙であると判断される処理項目の組み合わせとを予め定めておき、制御部7は、予めジョブリストで制御部7が行う処理の項目を拾い出し、同時に処理する項目の組み合わせを、前記予め定める処理項目の組み合わせと比較することで、多忙ではないか、多忙であるか、特に多忙であるかを容易に判断することができる。表2に、制御部7が多忙であると判断される処理項目の組み合わせと、制御部7が多忙であると判断される処理項目の組み合わせと、制御部7が特に多忙であると判断される処理項目の組み合わせとの一例を示す。
【0069】
【表2】
【0070】
制御部7は、たとえばジョブ1のみを行う場合、またはジョブ1とジョブ2とを行う場合では、表2から多忙ではないと判断する。また制御部7は、たとえばジョブ1〜3を行う場合、またはジョブ2とジョブ3とジョブ5とを行う場合では、表2から多忙であること判断する。また制御部7は、たとえばジョブ1〜5を行う場合では、表2から特に多忙であると判断する。
【0071】
ステップS10で、制御部が特に多忙ではないと判断された場合にはステップS11に進み、制御部7が特に多忙であると判断された場合にはステップS12に進む。
【0072】
ステップS11では、制御部7が画像記憶部8のイメージバッファ領域内の自然画像を含む画像情報の階調数を減少させて読み出して、表示部11に伝送する。ここでは、予め定める階調数設定値である4096階調、つまり1画素あたりR(赤)青(B)緑(G)の各色の階調数が16階調であり、画像情報のデータ量を12ビット/ピクセルとなるように、制御部7が画像記憶部8のイメージバッファ領域の画像情報を読み出して、表示部11に伝送して、ステップS9に進む。たとえば、R(赤)青(B)緑(G)の各色が256階調の画像情報のデータ量を12ビット/ピクセルにするには、R(赤)青(B)緑(G)の各画素のデータの上位の4ビットを画像記憶部8から読出す。ステップS9では、制御部7が、階調数を減少させた画像情報を表示部11に表示させて処理動作を終了する。
【0073】
一方、ステップS12では、制御部7が画像記憶部8のイメージバッファ領域内の自然画像を含む画像情報の階調数を減少させて読み出して、表示部11に伝送する。ここでは、予め定める階調数設定値である256階調、つまり1画素あたりR(赤)青(B)緑(G)の各色を2階調または3階調であり、画像情報のデータ量を8ビット/ピクセルとなるように、制御部7が画像記憶部8のイメージバッファ領域の画像情報を読み出して表示部11に伝送して、ステップS10に進む。たとえば、R(赤)青(B)緑(G)の各色が256階調の画像情報のデータ量を8ビット/ピクセルにするには、R(赤)青(B)緑(G)の各画素のデータうち2色の上位の3ビットと、残り1色の上位2ビットを画像記憶部8から読出す。ステップS9では、制御部7が、階調数を減少させた画像情報を表示部11に表示させて処理動作を終了する。
【0074】
自然画像を含む画像情報はデータ量が多いので、このような画像情報をそのまま表示部11に表示させると、画像記憶部8から表示部11に伝送されるデータ量が多くなる。画像情報のデータ量が多い場合は、制御部7の負荷が大きくなり、また画像情報の伝送でバス19が使用される時間が長くなり、制御部7が記憶部6からプログラムなどを読み出し、バス19を使用して、表示部11に画像情報を表示させる処理以外の処理を行うことが難しいので、従来技術では、CPUをより高性能なものにする必要がある。しかしながら、本発明では上述したように制御部7が多忙でない、つまり制御部7が行う処理が少ない場合には、自然画像を含む画像であってもそのまま表示部11に表示させ、制御部7が多数の処理を行う場合には、制御部7の状態によって画像情報の階調数を減少させることで、画像情報を表示部11に表示させる処理による制御部7の負荷を低減し、かつ画像記憶部8から表示部11に伝送される画像情報がバス19を使用する時間を短くすることができる。したがって、画像記憶部8にイメージバッファ領域を設ける構成であっても、制御部7を高性能なものにする必要がないので、製造コストを低減させることができる。
【0075】
また制御部7の表示部11に画像情報を表示させる処理の負荷が低減されると、制御部7は、バス19の空き時間を使用して、他の処理を行うことができるので、複数の処理を同時に行う場合に、制御部7の処理効率が向上する。制御部7は、行う処理が多くなるほど、画像情報の階調数を減少させて表示させるので、多数の処理を効率的に行うことができる。
【0076】
上述したステップS5で、画像情報に自然画像が含まれないと判断されると、ステップS12に進む。画像情報に自然画像が含まれていない場合、たとえば画像情報が文字情報、または色分け画像だけを含む場合では、画像情報の階調数を減少させても画像の品質の劣化が少ないので、制御部7は、画像情報のデータ量を8ビット/ピクセルに減少させて表示部11に伝送し、ステップS9で画像情報を表示部に表示させる。GIFファイルなどの画像情報は256階調であるので、このような画像情報はそのまま表示部11に伝送する。本実施の形態では、画像情報のデータ量を8ビット/ピクセルに減少させて伝送するが、本発明の実施のさらに他の形態においては、ステップS12において、予め定める階調数設定値を8階調として、画像情報のデータ量を3ビット/ピクセルに減少させて伝送してもよい。
【0077】
以上のように、画像記憶部8に記憶した画像情報に基づいて、表示部11に表示させる画像情報の階調数を減少させることによって、制御部7の負荷処理量を低減し、かつ画像記憶部8から表示部11への画像情報の伝送によるバス19の使用時間を短くすることができる。したがって、制御部7は記憶部6のプログラムを読み出して実行することができるので、制御部7の処理効率を向上させることができ、制御部7が割り込みによって多数の処理を同時に行うことができるようになる。このため、画像記憶部8にイメージバッファ領域を指定しても制御部7に高性能なCPUを備える必要がなくなり、製造コストの低減を図ることができる。制御部7の処理効率を向上させると、たとえば表示部11に画像情報を表示させながらファクシミリの送受信などを行うことができるなど、ファクシミリ装置1に複数の処理を同時に行わせることができる。
【0078】
本実施の形態のファクシミリ装置1では、制御部7の状態に応じて画像情報が、28階調、212階調または224階調となるように表示部11に表示させているが、階調数をさらに多くの段階に分けて減少させて表示させてもよい。このように表示を行わせることで、より制御部7の処理効率を向上させながら、表示部11に表示させた画像の品位をできるだけ保つことができるようになる。また、文字情報のみを含む場合などでは、画像情報を2階調として表示させてもよい。
【0079】
さらに本発明の実施のさらに他の形態において、表示部11の種類および解像度などに基づいて、画像情報の階調数を減少させてもよい。たとえば表示部11にスーパーツイステッドネマティック(Super Twisted Nematic)液晶表示パネルを使用した場合では、液晶表示パネルの解像度は256階調であるのに対して、ソフトウェアによって12ビット/ピクセルから16ビット/ピクセルまでの中間調の解像度で画像情報の表示が可能である。この場合、上述したフローチャートのステップS8では、画像情報のデータ量を16ビット/ピクセルで伝送する構成とする。
【0080】
上述したファクシミリ装置1では、ネットワークに接続するためのインタフェースとして、電話回線網2との通信路、パラレルIF13およびLANIF14を含んで構成されるが、本発明の実施のさらに他の形態において、これら3つのインタフェースのうち少なくともいずれか1つを備える構成としてもよい。またファクシミリ装置1の通信部18は、標準プロトコルIC18a、第1プロトコルIC18bおよび第2プロトコルIC18cを備えるが、本発明の実施のさらに他の形態において、通信部18は、標準プロトコルIC18a、第1プロトコルIC18bおよび第2プロトコルIC18cのうち少なくともいずれか1つを備える構成としてもよい。また、表示部11である液晶表示パネルに代えて、たとえばCRT(Cathode Ray Tube)ディスプレイ、またはエレクトロルミネッセント(EL)ディスプレイなどを用いてもよい。
【0081】
また上述の実施の形態では、画像処理装置をファクシミリ装置1に適用した場合について説明したが、本発明の画像処理装置は、たとえば電話機、携帯型の電話機またはパーソナルデジタルアシスタント(Personal Digital Assistant;PDA)などにも好適に用いることができる。
【0082】
【発明の効果】
本発明によれば、出力部に伝送する画像情報のデータ量を減少させることで、画像情報を出力部に表示させる処理における制御部の負荷が低減する。したがって、表示部は専用のイメージバッファを備えず、画像情報を記憶する記憶部にイメージバッファ領域を指定する構成にしても、画像情報を表示させるために高性能な制御部を用いる必要がなく、製造コストの低減を図ることができる。また、画像情報を出力部に表示させる処理における制御部の負荷を低減させることによって、制御部を表示処理以外の用途にも使用することができるので、制御部は複数の処理を効率的に行うことができる。また制御部を効率的に使用することができるので、制御部の処理速度を必要最低限にして、消費電力を減少させることができる。
【0084】
また本発明によれば、制御部が多数の仕事を並列に行う場合などでは、表示する階調数を段階的に減少させることで、制御部が複数の処理を効率的に行うことができる。
【0085】
また本発明によれば、入力部には、情報通信ネットワーク、たとえばインターネット、LAN(Local Area Network)またはWAN(Wide Area Network)などを介して外部の情報処理装置から画像情報を入力することができ、情報通信ネットワークを介して入力されるデータ量の多い画像情報を効率的に表示部に表示させることができる。
【0086】
また本発明によれば、画像情報を表示するためにイメージバッファ領域から出力部に伝送する画像情報のデータ量を減少させることができる。出力部は、記憶部とは別に1画面分の画像情報が一時的に格納される専用のイメージバッファを備えず、記憶部をイメージバッファとするので、出力部に画像情報を表示させているときには記憶部から出力部に絶え間なく画像情報が伝送されるが、出力部に伝送する画像情報のデータ量を減少させることで、画像情報を出力部に表示させる処理の負荷を低減させることができる。
【図面の簡単な説明】
【図1】本発明の実施の一形態の画像処理装置であるファクシミリ装置1の構成を示すブロック図である。
【図2】ファクシミリ装置1のネットワークへの接続方法について示す図である。
【図3】コードレス電話子機31の構成を示すブロック図である。
【図4】ファクシミリ装置1において画像記憶部8に記憶されている画像情報を表示部11に表示させるときのファクシミリ装置1の処理動作を示すフローチャートである。
【符号の説明】
1 ファクシミリ装置
2 電話回線網
3 網制御装置
4 第1モデム
5 第2モデム
6 記憶部
7 制御部
8 画像記憶部
9 印刷部
10 画像読取り部
11 表示部
13 パラレルインタフェース
14 LANインタフェース
18 通信部
19 バス[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image processing apparatus and an image processing method for displaying image information on an output unit that does not include a dedicated image buffer.
[0002]
[Prior art]
Conventionally, a personal computer is connected to an information communication network (hereinafter referred to as a network), for example, the Internet, a LAN (Local Area Network), or a WAN (Wide Area Network) or the like, and image information is transmitted and received. In addition to personal computers, various image processing apparatuses such as telephones, portable telephones, PDAs (Personal Digital Assistants), or facsimile apparatuses are connected to a network to transmit and receive image information. . An image processing apparatus that is connected to a network and transmits / receives image information includes a display unit that displays image information, and can display image information received via the network on the display unit.
[0003]
In a conventional image processing apparatus, image information received via a network is stored in a memory. When image information is displayed, the image information is provided in an image buffer provided separately from the memory and dedicated to the display unit. Store and display on the display. An image processing apparatus that displays image information stored in an image buffer dedicated to such a display unit is disclosed in, for example, Japanese Patent Application Laid-Open Nos. 11-133911, 5-48860, and 6-259539. ing.
[0004]
Japanese Patent Application Laid-Open No. 11-133922 discloses an image processing apparatus that changes a frame frequency according to the number of gradations of image information displayed on a display unit. In the image processing apparatus disclosed in Japanese Patent Laid-Open No. 11-133922, the image buffer includes an area for storing two-gradation image information and multi-gradation image information, and the two-gradation image information is displayed on the display apparatus. By changing the frame frequency and displaying on the display unit when displaying multi-gradation image information on the display device, the flickering of the displayed image information is suppressed and power consumption is reduced. Yes.
[0005]
Japanese Patent Application Laid-Open No. 5-48860 discloses an image processing apparatus that is connected to a network and transmits and receives image information. In the image processing apparatus disclosed in Japanese Patent Laid-Open No. 5-48860, the encoding method of image information transmitted on the transmission side or the quantum of data is transmitted according to the information on the free capacity of the secondary storage device on the reception side acquired through the line. By changing the level, the communication time can be shortened. The image information received via the network is stored in the image memory, and when the image information stored in the image memory is displayed on the display unit, the image information is stored in the display memory provided in the display unit from the storage unit in which the image information is stored. To display.
[0006]
Japanese Patent Application Laid-Open No. 6-259539 discloses an image processing apparatus that displays an image information with a reduced number of gradations so that there is no sense of incongruity when the number of gradations of the image information is reduced in accordance with the display capability of the display unit. Is disclosed. In the image processing apparatus disclosed in Japanese Patent Laid-Open No. 6-259539, the control unit displays the image information so that there is no sense of incongruity even if the number of colors of the image information is reduced. The representative color is obtained by performing analysis after obtaining the unity of the color component of the pixel.
[0007]
[Problems to be solved by the invention]
In the image processing apparatuses disclosed in JP-A-11-133922, JP-A-5-48860, and JP-A-6-259539, a dedicated image buffer used only for display by the display unit is provided in the apparatus. Is provided. In an image processing apparatus such as a telephone, a portable telephone, a PDA, or a facsimile machine, a display unit does not provide a dedicated image buffer for displaying image information in order to reduce manufacturing cost and downsize. It is desired to design an image buffer area as a memory for storing received image information and to use one memory for multiple purposes. However, if an image buffer area is designated in the memory, it is necessary to continuously transmit image information from the memory to the display unit when displaying image information on the display unit, which increases the load processing amount of the control unit, and The use time of the bus that electrically connects the display unit and the memory becomes long, and other processing performed by the control unit using the bus is hindered. The image information transmitted to the display unit varies depending on the type of display unit and the amount of pixels. For example, it is necessary to transmit image information of 320 pixels × 240 pixels about 150 times per second, and a full color image is transmitted. Therefore, it is necessary to transmit data of 256 gradations for each color of R (red), blue (B), and green (G) per pixel, that is, data of 24 bits per pixel. Therefore, if an image buffer area is specified for the memory, the load processing amount of the control unit that reads and displays image information from the memory increases, and the control unit cannot perform processing other than display processing. Therefore, there is a problem that the control unit needs to have a higher function.
[0008]
An object of the present invention is to reduce the load on the control unit due to the process of displaying the image information on the display unit when the display unit is not provided with a dedicated image buffer and the storage unit for storing image information is provided with an image buffer area. Another object is to provide an image processing apparatus and an image processing method capable of improving the processing efficiency of a control unit.
[0009]
[Means for Solving the Problems]
The present invention includes a storage unit in which image information is stored and image information in a designated image buffer area is read out;
Display image information stored in the storage unitdisplayAnd
A controller that can repeatedly process the image information in the image buffer area repeatedly at a predetermined refresh rate, and that can simultaneously process a plurality of processing items including a processing item for displaying the read image information on the display unit,
When the control unit displays the image information in the image buffer area on the display unit at a predetermined refresh rate, a combination of a plurality of processing items determined in advance according to the file format of the image information in the image buffer area and the processing capability Based on the comparison result with the combination of processing items to be executed, it is determined whether or not the load processing amount when the combination of processing items to be executed is large, and it is determined that the load processing amount is large. Then, saidThe image information in the image buffer area, FloorDecreasing the logarithmRead and read image informationSaiddisplayDisplayRukoAn image processing apparatus characterized by the above.
[0010]
According to the present invention, the storage unit stores the image information, and the control unit causes the output unit to display the image information in the designated image buffer area among the image information stored in the storage unit.displayThe unit does not include a dedicated image buffer for temporarily storing image information for one screen separately from the storage unit, and the storage unit is an image buffer.displayWhen the image information is displayed on the unit, the image information is continuously transmitted from the storage unit to the output unit. The control unitWhen image information in the image buffer area is displayed on the display unit at a predetermined refresh rate, a combination of a plurality of processing items predetermined based on the file format of the image information in the image buffer area and the processing capability is executed. Based on the comparison result with the combination of processing items to determine whether the load processing amount when executing the combination of processing items to be executed is large, and determining that the load processing amount is large,The image information in the specified image buffer area, FloorDecreasing the logarithmRead and display read image informationDisplay on the screen. The number of gradations has a close relationship with the amount of data, and by reducing the number of gradations of image information, the data amount of image information read from the storage unit and transmitted to the display unit can be reduced.
[0011]
By reducing the data amount of the image information transmitted to the output unit, the load on the control unit in the process of displaying the image information on the output unit is reduced. Therefore, since it is not necessary to make the control unit highly functional, it is possible to reduce the manufacturing cost. Also, by reducing the load on the control unit in the process of displaying the image information on the output unit, the control unit can be used for purposes other than the display process, so the control unit efficiently performs a plurality of processes. be able to.
[0014]
In the present invention, the control unit maypluralPredeterminedFloorThe number of gradations of the image information is reduced so that one of the gradation setting values becomes the gradation number setting value, and the number of gradations of the image information is reduced as the load processing amount performed by the control unit increases. LettingTheFeatures.
[0015]
According to the present invention, the control unit, when the image information in the designated image buffer area satisfies a predetermined condition,pluralPredeterminedFloorDecrease the number of gradations of the image information so that it becomes one of the gradation number setting values of the key number setting values, and decrease the number of gradations of the image information as the load processing amount of the control unit increases. Display on the output section. In other words, when the control unit performs many processes in parallel, the control unit performs only the display operation for displaying the image information on the output unit.pluralPredeterminedFloorSince the number of gradations of the image information is reduced and displayed on the output unit so as to be a small gradation number setting value among the key number setting values, the control unit can efficiently perform a plurality of processes.
[0016]
The present invention also providesAn input unit for inputting image information stored in the storage unit;
Image information received from an external information processing apparatus is input to the input unit via an information communication network.
[0017]
According to the present invention, the input unit can input image information from an external information processing apparatus via an information communication network such as the Internet, LAN (Local Area Network) or WAN (Wide Area Network), Image information with a large amount of data input via the information communication network can be efficiently displayed on the display unit.
[0018]
The present invention also designates an image buffer area in a storage unit in which image information is stored,When the image information in the image buffer area is repeatedly read at a predetermined refresh rate and a plurality of process items including the process item for displaying the read image information on the display unit are simultaneously executed and processed, The combination of the processing items to be executed is executed based on a comparison result between a combination of a plurality of processing items predetermined based on the file format and processing capability of the image information and a combination of the processing items to be executed. It is determined whether or not the load processing amount is large, and if it is determined that the load processing amount is large,The image information in the image buffer area, FloorDecreasing the logarithmRead and read image informationAn image processing method characterized by displaying on a display unit.
[0019]
According to the present invention, the image buffer area is designated in the storage unit in which the image information is stored,When the image information in the image buffer area is repeatedly read at a predetermined refresh rate and a plurality of process items including the process item for displaying the read image information on the display unit are simultaneously executed and processed, Based on a comparison result of a combination of a plurality of processing items predetermined based on a file format of image information and processing capability and a combination of processing items being executed, the combination of processing items to be executed is determined. It is determined whether or not the load processing amount when executing is large.The image information in the image buffer areaReadBy reducing the number of gradations when displaying the image and displaying it on the output unit, the amount of image information transmitted from the image buffer area to the output unit in order to display the image information can be reduced. Since the output unit does not include a dedicated image buffer for temporarily storing image information for one screen separately from the storage unit, and the storage unit is an image buffer, the image information is displayed on the output unit. Image information is continuously transmitted from the storage unit to the output unit. However, by reducing the amount of image information transmitted to the output unit, it is possible to reduce the processing load for displaying the image information on the output unit.
[0020]
DETAILED DESCRIPTION OF THE INVENTION
FIG. 1 is a block diagram showing a configuration of a
[0021]
A
A LAN interface (hereinafter abbreviated as “LANIF”) 14 that can be connected to an area network (hereinafter abbreviated as “LAN”) 14, a
[0022]
The
[0023]
The
[0024]
The second modem 5 is connected to the
[0025]
The
[0026]
In addition to the program for controlling the
Interchange Format) file, text data file written in markup language, facsimile image, etc. The markup language is, for example, HTML (Hyper Text Markup Language) or simple HTML. JPEG is a standard for compressing or decompressing color still images, and this standard is defined by the International Telecommunications Union (ITS-TS) and the International Organization for Standardization (ISO). GIF is a standard for compressing and decompressing graphic data, and this standard is defined by US CompuServe.
[0027]
The
[0028]
The
[0029]
The
[0030]
The
[0031]
When the number of gradations of the image information is N and the amount of data per pixel of the image information is M, the relationship between the number of gradations and the data amount is N = 2.MIt is represented by Where M is the number of bits. When the number of gradations of the image information transmitted to the
[0032]
As a result, the
[0033]
The
[0034]
The
[0035]
The
[0036]
The
[0037]
The parallel IF 13 is an interface for connecting an external information processing apparatus such as a personal computer and the
[0038]
The
[0039]
The
[0040]
The
[0041]
In the present embodiment, the
[0042]
The operation key 12b of the
[0043]
FIG. 2 is a diagram showing a method for connecting the
[0044]
First, a method for connecting the facsimile machines 1A, 1B, and 1C to the
[0045]
The
[0046]
The facsimile apparatus 1B can be connected to the
[0047]
The
[0048]
Next, a method for connecting the facsimile machine 1D to the
[0049]
The external information communication apparatus for the
[0050]
The external information communication apparatus for the facsimile apparatus 1A is the server 24 of the
[0051]
The external information communication apparatus for the facsimile apparatus 1B is the server 24 of the
[0052]
The external information communication apparatus for the facsimile apparatus 1C is the server 24 of the
[0053]
FIG. 3 is a block diagram showing the configuration of the
[0054]
The
[0055]
The cordless
[0056]
The
[0057]
FIG. 4 is a flowchart showing the processing operation of the
[0058]
In step S1, image information is input from the
[0059]
In step S2, the
[0060]
In step S4, the
[0061]
In step S5, it is determined whether the image information read out by the
[0062]
If it is determined in step S5 that a natural image is included, the process proceeds to step S6. In step S6, the job list of the
Table 1 is a diagram illustrating an example of a job list.
[0063]
[Table 1]
[0064]
In Table 1, for example, the job performed by the
[0065]
In step S7, the
[0066]
In step S8, the
[0067]
On the other hand, if it is determined in step S7 that the
[0068]
In step S7 and step S10 described above, whether the
[0069]
[Table 2]
[0070]
For example, when
[0071]
If it is determined in step S10 that the control unit is not particularly busy, the process proceeds to step S11. If the
[0072]
In step S <b> 11, the
[0073]
On the other hand, in step S <b> 12, the
[0074]
Since image information including a natural image has a large amount of data, if such image information is displayed on the
[0075]
Further, when the processing load for displaying the image information on the
[0076]
If it is determined in step S5 described above that the natural image is not included in the image information, the process proceeds to step S12. When the image information does not include a natural image, for example, when the image information includes only character information or color-coded images, the image quality is hardly deteriorated even if the number of gradations of the image information is reduced. 7 reduces the data amount of the image information to 8 bits / pixel and transmits it to the
[0077]
As described above, the load processing amount of the
[0078]
Fact of this embodimentStainIn the
[0079]
In still another embodiment of the present invention, the number of gradations of image information may be reduced based on the type and resolution of the
[0080]
The
[0081]
In the above-described embodiment, the case where the image processing apparatus is applied to the
[0082]
【The invention's effect】
According to the present invention, by reducing the amount of image information transmitted to the output unit, the load on the control unit in the process of displaying the image information on the output unit is reduced. Therefore, the display unit does not include a dedicated image buffer, and even when the image buffer area is specified in the storage unit that stores the image information, there is no need to use a high-performance control unit to display the image information. Manufacturing costs can be reduced. Also, by reducing the load on the control unit in the process of displaying the image information on the output unit, the control unit can be used for purposes other than the display process, so the control unit efficiently performs a plurality of processes. be able to. Further, since the control unit can be used efficiently, the processing speed of the control unit can be minimized and power consumption can be reduced.
[0084]
Further, according to the present invention, when the control unit performs a lot of work in parallel, the control unit can efficiently perform a plurality of processes by decreasing the number of gradations to be displayed in a stepwise manner.
[0085]
Further, according to the present invention, the input unit can input image information from an external information processing apparatus via an information communication network such as the Internet, a LAN (Local Area Network), or a WAN (Wide Area Network). Therefore, image information with a large amount of data input via the information communication network can be efficiently displayed on the display unit.
[0086]
Also according to the present invention, PaintingThe amount of image information transmitted from the image buffer area to the output unit for displaying the image information can be reduced. Since the output unit does not include a dedicated image buffer for temporarily storing image information for one screen separately from the storage unit, and the storage unit is an image buffer, the image information is displayed on the output unit. Image information is continuously transmitted from the storage unit to the output unit. However, by reducing the amount of image information transmitted to the output unit, it is possible to reduce the processing load for displaying the image information on the output unit.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of a
FIG. 2 is a diagram illustrating a method of connecting the
FIG. 3 is a block diagram showing a configuration of a
FIG. 4 is a flowchart showing a processing operation of the
[Explanation of symbols]
1 Facsimile device
2 Telephone network
3 Network control device
4 First modem
5 Second modem
6 storage unit
7 Control unit
8 Image storage
9 Printing department
10 Image reader
11 Display
13 Parallel interface
14 LAN interface
18 Communication Department
19 Bus
Claims (4)
記憶部に記憶された画像情報を表示する表示部と、
イメージバッファ領域内の画像情報を予め定めるリフレッシュレートで繰返し読み出して、読み出した画像情報を表示部に表示させる処理項目を含む複数の処理項目を、同時に実行して処理可能な制御部とを含み、
制御部は、イメージバッファ領域内の画像情報を予め定めるリフレッシュレートで表示部に表示させるとき、イメージバッファ領域内の画像情報のファイル形式、および処理能力に応じて予め定める複数の処理項目の組み合わせと、実行しようとする処理項目の組み合わせとの比較結果に基づいて、前記実行しようとする処理項目の組み合わせを実行したときの負荷処理量が多いか否かを判断し、負荷処理量が多いと判断すると、前記イメージバッファ領域内の画像情報を、階調数を減少させて読み出し、読み出した画像情報を前記表示部に表示させることを特徴とする画像処理装置。A storage unit in which image information is stored and image information in a designated image buffer area is read;
A display unit for displaying image information stored in the storage unit;
A controller that can repeatedly process the image information in the image buffer area repeatedly at a predetermined refresh rate, and that can simultaneously process a plurality of processing items including a processing item for displaying the read image information on the display unit,
When the control unit displays the image information in the image buffer area on the display unit at a predetermined refresh rate, a combination of a plurality of processing items predetermined according to the file format of the image information in the image buffer area and the processing capability Based on the comparison result with the combination of processing items to be executed, it is determined whether or not the load processing amount when the combination of processing items to be executed is large, and it is determined that the load processing amount is large. Then, the image information of the image buffer area, read by reducing the gradation number, the image processing apparatus according to claim and to display the read image information to the display unit Turkey.
前記入力部には情報通信ネットワークを介して外部の情報処理装置から受信した画像情報が入力されることを特徴とする請求項1記載の画像処理装置。An input unit for inputting image information stored in the storage unit;
The image processing apparatus according to claim 1, wherein image information received from an external information processing apparatus is input to the input unit via an information communication network.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002079439A JP3807997B2 (en) | 2002-03-20 | 2002-03-20 | Image processing apparatus and image processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002079439A JP3807997B2 (en) | 2002-03-20 | 2002-03-20 | Image processing apparatus and image processing method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2003283733A JP2003283733A (en) | 2003-10-03 |
JP3807997B2 true JP3807997B2 (en) | 2006-08-09 |
Family
ID=29228913
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2002079439A Expired - Fee Related JP3807997B2 (en) | 2002-03-20 | 2002-03-20 | Image processing apparatus and image processing method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3807997B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6091481B2 (en) * | 2014-12-04 | 2017-03-08 | 京セラドキュメントソリューションズ株式会社 | Image processing apparatus and screen display method |
-
2002
- 2002-03-20 JP JP2002079439A patent/JP3807997B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2003283733A (en) | 2003-10-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6483609B1 (en) | Image processing system, image processing method, image transmitting system, and image transmitting method | |
JP4755569B2 (en) | Image processing apparatus and image processing method | |
JP2013146926A (en) | Image forming device and image forming program | |
US20080088868A1 (en) | Multifunction device and image saving method | |
JP2004086249A (en) | Server device, user terminal, image data communication system, image data communication method and image data communication program | |
JP2009141430A (en) | Image processor | |
US7948656B2 (en) | Image processing apparatus | |
US20110279837A1 (en) | Image processing system, information processing system, control method, and program | |
JP3807997B2 (en) | Image processing apparatus and image processing method | |
US20090167781A1 (en) | Information Processing Apparatus | |
US20090122373A1 (en) | Image Processing Apparatus | |
EP1172998A1 (en) | Image-forming apparatus | |
JP2003186635A (en) | Image processing apparatus and program | |
JP3815214B2 (en) | Image processing apparatus and storage medium storing screen processing program | |
JP3734082B2 (en) | Image processing apparatus and image data storage method of image processing apparatus | |
US11573752B1 (en) | Image processing apparatus, image forming apparatus, and image forming method that perform compression suitable for the stage of image processing | |
JP2012023594A (en) | Image processor | |
JP3843813B2 (en) | Image communication apparatus and facsimile apparatus | |
JP4368280B2 (en) | Image processing device | |
JP2003283741A (en) | Information processing apparatus, image processing method, and program | |
JP3151781B2 (en) | Postscript system and network system | |
US7342683B2 (en) | Data processing method for color management module | |
US20040239997A1 (en) | Method and apparatus to process facsimile data using a computer | |
JP2005323133A (en) | Communication terminal equipment | |
JP4457635B2 (en) | Image recording apparatus and control method thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040728 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050823 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050913 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20051109 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20051220 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060220 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20060310 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20060509 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20060516 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100526 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110526 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110526 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120526 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120526 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130526 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140526 Year of fee payment: 8 |
|
LAPS | Cancellation because of no payment of annual fees |