JP2004032553A

JP2004032553A - Image processing apparatus and image communication method

Info

Publication number: JP2004032553A
Application number: JP2002188652A
Authority: JP
Inventors: Giichi Watanabe; 渡邊　義一
Original assignee: Ricoh Co Ltd
Current assignee: Ricoh Co Ltd
Priority date: 2002-06-27
Filing date: 2002-06-27
Publication date: 2004-01-29

Abstract

<P>PROBLEM TO BE SOLVED: To enhance communication ability by making full use of an image processing function which both a transmitting side and a receiving side have, to enable image processing including a transmission with optimum processing performance and processing quality, and to improve user's convenience. <P>SOLUTION: A communication interface portion 10 for transmitting image information and one or more image processors 4 for processing the image information to be transmitted by transmitting means are provided. Image processing information on processing of image information on the receiving side is received from the receiving side through the communication interface portion 10 prior to the transmission of the image information through the communication interface portion 10. Based on the receiving side processing information received through the communication interface portion 10, at least processing content to be performed to the image information at the transmitting side image processor 4 is determined. <P>COPYRIGHT: (C)2004,JPO

Description

【０００１】
【発明の属する技術分野】
本発明は、主としてディジタル画像情報の加工および伝送のための技術に係り、特に、ディジタルスティルカメラ、携帯情報端末（ＰＤＡ）装置、プリンタおよび画像ファイリング装置等に好適な画像処理装置および画像通信方式に関するものである。
【０００２】
【従来の技術】
近年、ディジタルスティルカメラに代表されるように、ディジタル画像を取り扱う様々な装置が開発または提案されている。それに加えて、携帯電話網およびＬＡＮ（ローカルエリアネットワーク）環境などの通信インフラ（インフラストラクチャー：下部構造、基盤）の整備に伴い、上述したディジタル画像を取り扱う機器間での通信機能のニーズが高まりつつあり、それに対応した装置も開発されている。例えば、ディジタルカメラとして、通信機能を搭載したカメラが開発されており、このようなディジタルカメラでは、撮影した画像情報をＥメール（電子メール）、ＦＴＰ（（標準）ファイル転送プロトコル）および独自のプロトコルのいずれかを用いて、ＰＣ（パーソナルコンピュータ）、他のディジタルカメラ、またはサーバーなどへ送信することができる。現状では、画像処理装置からの通信は、ＰＣまたはプリンタへの接続がほとんどであるが、今後は、同一機器間、または同一メーカーの範囲内の画像処理装置間での通信、あるいはそれにとどまらず、異機種間での通信ニーズが高まるものと予想される。
【０００３】
一方、上述したような種々の装置に用いられる画像処理装置は、機器毎に最適な画像フォーマットを採用しており、また、機器毎の画像処理装置が備えている画像処理機能も様々である。そのため、従来の画像処理装置では、一旦ＰＣを経由して受信側の要求する画像フォーマットに変換を施したり、あるいは、送信側および受信側の機器をあらかじめ特定し、送信側から受信側へは、あらかじめ定められた特定の画像フォーマットでデータを送信し、受信側で所要の変換を施したりするように構成されている。ところが、これらのような方法では、ＰＣを経由する場合には、一旦ＰＣへ転送しなければならないため利便性が低下し、また、画像データの送信側および受信側の機器を特定する場合には、特定の機器間でしか画像データの送受を行うことができない。
【０００４】
そのため、特開平１０−３４１３２７号公報および特開平１０−１７３８３３号公報等に開示されているような方式が提案されている。特開平１０−３４１３２７号公報には、受信側において受信可能な複数の画像データ形式に優先順位を付け、これら優先順付けをした受信可能な画像データ形式の情報を、受信側から送信側に通知し、送信側では、受信側から指定された画像データ形式の優先順位に従って、送信画像データ形式を決定し、その画像データ形式に変換して送信する方式が開示されている。
また、特開平１０−１７３８３３号公報には、送信側において画像データを受信側が受信可能な画像データ形式に変換するためのソフトウェアを、受信側に用意しておき、画像データの伝送に先立って当該ソフトウェアを送信側に転送するようにし、送信側において当該ソフトウェアを実行して画像データを受信可能な画像データ形式に変換してから、画像データを送信する方式が開示されている。
【０００５】
【発明が解決しようとする課題】
しかしながら、上述した特開平１０−３４１３２７号公報に示された方式においては、受信側の要求する画像データ形式のいずれかの形式に画像データを送信側で加工する必要があり、送信側が備えている画像処理機能によっては、要求された画像データ形式に加工することができず、結果的に通信することができないという可能性が依然として高く残る。また、特開平１０−１７３８３３号公報等に示された方式においては、伝送の際にソフトウェアの転送を行なわなければならず、しかもソフトウェア処理であるために処理に時間がかかるといった問題が残る。このように、上述した特開平１０−３４１３２７号公報および特開平１０−１７３８３３号公報等に示された方式においても、送信側および受信側の画像処理機能が充分に活かされることなく、処理性能または処理品質が犠牲となったり、さらにそのためにユーザー（利用者）における利便性が妨げられたり、通信可能性が低下したりすることになるという問題がある。
【０００６】
本発明は、上述した事情に鑑みてなされたもので、送信側および受信側の双方が備える画像処理機能を最大限に生かして、通信可能性を高めるとともに、最適な処理性能および処理品質で伝送を含む画像処理を行うことができ、ひいてはユーザーの利便性を向上することを可能とする画像処理装置および画像通信方式を提供することを目的としている。
本発明の請求項１の目的は、特に、受信側の画像情報加工機能に対応させるように、送信側において画像情報の加工を選定および処理して、多様な機種に対して画像情報を適切に送信することを可能とし、ひいてはユーザーの利便性を向上させ得る画像処理装置を提供することにある。
本発明の請求項２の目的は、特に、送信側の画像情報加工機能に基づき、受信側の画像情報加工機能に対応する送信側の画像情報の加工を受信側から選定するようにして、多様な機種から画像情報を適切に受信することを可能とし、ひいてはユーザーの利便性を向上させ得る画像処理装置を提供することにある。
【０００７】
本発明の請求項３の目的は、特に、送信側および受信側の少なくとも一方の画像情報加工機能に基づき、送信側の画像情報の加工を選定し且つ処理させるようにして、多様な機種から画像情報を適切に受信することを可能とし、ひいてはユーザーの利便性を向上させ得る画像処理装置を提供することにある。
本発明の請求項４の目的は、特に、送信側および受信側の少なくとも一方で行う画像の変倍処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させ得る画像処理装置を提供することにある。
本発明の請求項５の目的は、特に、送信側および受信側の少なくとも一方で行う画像の階調変換処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させ得る画像処理装置を提供することにある。
【０００８】
本発明の請求項６の目的は、特に、送信側および受信側の少なくとも一方で行う画像情報の圧縮処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させ得る画像処理装置を提供することにある。
本発明の請求項７の目的は、特に、送信側および受信側の少なくとも一方で行う画像情報の伸長処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させ得る画像処理装置を提供することにある。
本発明の請求項８の目的は、特に、送信側および受信側の少なくとも一方で行う画像情報のファイルフォーマット変換処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させ得る画像処理装置を提供することにある。
【０００９】
本発明の請求項９の目的は、特に、送信側および受信側の少なくとも一方で行う画像情報の色空間変換処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させ得る画像処理装置を提供することにある。
本発明の請求項１０の目的は、特に、送信側および受信側の少なくとも一方で行う画像情報の加工処理内容は、通信相手側の加工処理の品質に応じた処理内容を適切に選定し、最適な品質で画像情報を加工することを可能とする画像処理装置を提供することにある。
本発明の請求項１１の目的は、特に、送信側および受信側の少なくとも一方で行う画像情報の処理性能は、相手側の加工処理の性能に応じた処理内容を適切に選定し、最適な性能で画像情報を加工することを可能とする画像処理装置を提供することにある。
【００１０】
本発明の請求項１２の目的は、特に、送信側および受信側の少なくとも一方で行う画像情報の加工処理内容は、送信側から受信側への予測される伝送時間に応じた処理内容を適切に選定し、最適な性能で画像情報を加工および伝送することを可能とする画像処理装置を提供することにある。
本発明の請求項１３の目的は、特に、送信側および受信側の少なくとも一方で行う画像情報の加工処理内容は、受信側における画像情報の利用形態に基づいて決定され提示される品質および処理速度の優先順位に応じた処理内容を適切に選定し、最適な性能および品質で画像情報を加工および伝送することを可能とする画像処理装置を提供することにある。
本発明の請求項１４の目的は、特に、送信側および受信側の少なくとも一方で行う画像情報の加工処理内容を決定する手段における加工内容の決定には、バージョン番号の比較に基づき、より新しいバージョンの決定方式を用いて加工内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させ得る画像通信方式を提供することにある。
【００１１】
【課題を解決するための手段】
請求項１に記載した本発明に係る画像処理装置は、上述した目的を達成するために、
画像情報を送信する送信手段と、
前記送信手段により送信する画像情報を加工する１つ以上の送信側加工手段と、
前記送信手段による画像情報の送信に先立って、受信側における画像情報の加工に関する受信側加工情報の通知を、前記受信側から受信する通知受信手段と、
前記通知受信手段により受信された前記受信側加工情報に基づき、少なくとも、前記送信側加工手段によって該画像情報に施すべき加工内容を決定する加工決定手段と
を具備することを特徴としている。
【００１２】
請求項２に記載した本発明に係る画像処理装置は、上述した目的を達成するために、
画像情報を受信する受信手段と、
前記受信手段により受信される画像情報を加工する１つ以上の受信側加工手段と、
送信側からの画像情報の送信に先立って、前記送信側における画像情報の加工に関する送信側加工情報の通知を、前記送信側から受信する通知受信手段と、
前記通知受信手段により受信された前記送信側加工情報に基づき、少なくとも、前記送信側で画像情報に施すべき画像の加工内容を決定する加工決定手段と、
前記加工決定手段により決定された前記加工内容を前記送信側に通知する通知送信手段と
を具備することを特徴としている。
【００１３】
請求項３に記載した本発明に係る画像処理装置は、上述した目的を達成するために、
画像情報の送信を行なう送信手段および前記送信手段により送信する画像情報を加工する１つ以上の送信側加工手段を含み、前記画像情報を送信する送信側処理装置と、
画像情報の受信を行なう受信手段および前記受信手段により受信される画像情報を加工する１つ以上の受信側加工手段を含み、前記画像情報を受信する受信側処理装置とを具備する画像処理装置であって、
前記送信手段による画像情報の送信に先立って、前記送信側加工手段における画像情報の加工に関する送信側加工情報および前記受信側加工手段における画像情報の加工に関する受信側加工情報の少なくとも一方を取得する手段と、
前記送信側加工情報および受信側加工情報の少なくとも一方に基づいて、送信前の画像情報に前記送信側加工手段によって施すべき加工内容および受信後の画像情報に前記受信側加工手段により施すべき加工内容の少なくとも一方を決定する加工決定手段と、
前記加工決定手段により決定された加工内容を前記送信側加工手段および受信側加工手段の少なくとも一方に反映させる手段と
を含むことを特徴としている。
【００１４】
請求項４に記載した本発明に係る画像処理装置は、請求項１〜請求項３のいずれか１項の画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像の変倍機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像の変倍機能に関する情報を含むことを特徴としている。
請求項５に記載した本発明に係る画像処理装置は、請求項１〜請求項３のいずれか１項の画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像の階調変換機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像の階調変換機能に関する情報を含むことを特徴としている。
請求項６に記載した本発明に係る画像処理装置は、請求項１〜請求項３のいずれか１項の画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像の圧縮機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像の圧縮機能に関する情報を含むことを特徴としている。
【００１５】
請求項７に記載した本発明に係る画像処理装置は、請求項１〜請求項３のいずれか１項の画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像の伸長機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像の伸長機能に関する情報を含むことを特徴としている。
請求項８に記載した本発明に係る画像処理装置は、請求項１〜請求項３のいずれか１項の画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像のファイルフォーマット変換機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像のファイルフォーマット変換機能に関する情報を含むことを特徴としている。
請求項９に記載した本発明に係る画像処理装置は、請求項１〜請求項３のいずれか１項の画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像の色空間変換機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像の色空間変換機能に関する情報を含むことを特徴としている。
【００１６】
請求項１０に記載した本発明に係る画像処理装置は、請求項１〜請求項９のいずれか１項の画像処理装置において、前記受信側加工情報および送信側加工情報の少なくとも一方が、前記送信側加工手段および受信側加工手段の少なくとも一方における画像の処理品質に関する情報を含むことを特徴としている。
請求項１１に記載した本発明に係る画像処理装置は、請求項１〜請求項９のいずれか１項の画像処理装置において、前記受信側加工情報および送信側加工情報の少なくとも一方が、前記送信側加工手段および受信側加工手段の少なくとも一方における画像の処理性能に関する情報を含むことを特徴としている。
請求項１２に記載した本発明に係る画像処理装置は、請求項１〜請求項１１のいずれか１項の画像処理装置において、
前記画像情報の伝送時間を予測する伝送時間予測手段をさらに含み、且つ
前記加工決定手段が、前記伝送予測手段により予測された伝送時間を加味して、少なくとも送信側の画像の加工内容を決定する手段を含むことを特徴としている。
【００１７】
請求項１３に記載した本発明に係る画像処理装置は、請求項１〜請求項９のいずれか１項の画像処理装置において、
前記受信側加工情報および送信側加工情報の少なくとも一方が、前記送信側加工手段および受信側加工手段の少なくとも一方における画像の処理品質および処理性能に関する情報を含み、且つ
前記送信側加工手段および受信側加工手段における画像の処理品質と処理速度との優先順位を決定する手段をさらに含むとともに、
前記加工決定手段が、前記手段により決定された優先順位の情報に基づいて、少なくとも送信側の画像の加工内容を決定する手段を含むことを特徴としている。
【００１８】
請求項１４に記載した本発明に係る画像通信方式は、上述した目的を達成するために、
画像情報を送信する送信手段、前記送信手段により送信する画像情報を加工する１つ以上の送信側加工手段、前記送信手段による画像情報の送信に先立って、受信側における画像情報の加工に関する受信側加工情報の通知を、前記受信側から受信する通知受信手段および前記通知受信手段により受信された前記受信側加工情報に基づき、少なくとも、前記送信側加工手段によって該画像情報に施すべき加工内容を決定する送信側加工決定手段、を含む送信側処理装置と、
画像情報を受信する受信手段、前記受信手段により受信される画像情報を加工する１つ以上の受信側加工手段、送信側からの画像情報の送信に先立って、前記送信側における画像情報の加工に関する送信側加工情報の通知を、前記送信側から受信する通知受信手段、前記通知受信手段により受信された前記送信側加工情報に基づき、少なくとも、前記送信側で画像情報に施すべき画像の加工内容を決定する受信側加工決定手段および前記受信側加工決定手段により決定された前記加工内容を前記送信側に通知する通知送信手段、を含む受信側処理装置と、の間で画像情報の通信を行なうにあたり、
前記送信側加工決定手段および前記受信側加工決定手段の加工内容の決定方式のバージョン番号を取得し、
前記送信側加工決定手段と前記受信側加工決定手段の決定方式のバージョン番号を比較して、より新しいバージョンの決定方式を有する側で加工内容の決定を行なわせる
ことを特徴としている。
【００１９】
【作用】
本発明による画像処理装置および画像通信方式は、請求項１〜請求項１４の各請求項に示したような構成により、送信側および受信側の少なくとも一方における加工内容を相手側の加工機能に係る情報に基づいて選定し、送信側および受信側の双方が備える画像処理機能を最大限に生かして、通信可能性を高めるとともに、最適な処理性能および処理品質で伝送を含む画像処理を行うことができ、ひいてはユーザーの利便性を向上することを可能とする。
すなわち、本発明の請求項１による画像処理装置は、画像情報を送信する送信手段、前記送信手段により送信する画像情報を加工する１つ以上の送信側加工手段、前記送信手段による画像情報の送信に先立って、受信側における画像情報の加工に関する受信側加工情報の通知を、前記受信側から受信する通知受信手段および前記通知受信手段により受信された前記受信側加工情報に基づき、少なくとも、前記送信側加工手段によって該画像情報に施すべき加工内容を決定する加工決定手段を具備する。
このような構成により、特に、受信側の画像情報加工機能に対応させるように、送信側において画像情報の加工を選定および処理して、多様な機種に対して画像情報を適切に送信することを可能とし、ひいてはユーザーの利便性を向上させる。
【００２０】
また、本発明の請求項２による画像処理装置は、画像情報を受信する受信手段、前記受信手段により受信される画像情報を加工する１つ以上の受信側加工手段、送信側からの画像情報の送信に先立って、前記送信側における画像情報の加工に関する送信側加工情報の通知を、前記送信側から受信する通知受信手段、前記通知受信手段により受信された前記送信側加工情報に基づき、少なくとも、前記送信側で画像情報に施すべき画像の加工内容を決定する加工決定手段および前記加工決定手段により決定された前記加工内容を前記送信側に通知する通知送信手段を具備する。
このような構成により、特に、送信側の画像情報加工機能に基づき、受信側の画像情報加工機能に対応する送信側の画像情報の加工を受信側から選定するようにして、多様な機種から画像情報を適切に受信することを可能とし、ひいてはユーザーの利便性を向上させる。
【００２１】
本発明の請求項３による画像処理装置は、画像情報の送信を行なう送信手段および前記送信手段により送信する画像情報を加工する１つ以上の送信側加工手段を含み、前記画像情報を送信する送信側処理装置と、画像情報の受信を行なう受信手段および前記受信手段により受信される画像情報を加工する１つ以上の受信側加工手段を含み、前記画像情報を受信する受信側処理装置とを具備する画像処理装置であって、前記送信手段による画像情報の送信に先立って、前記送信側加工手段における画像情報の加工に関する送信側加工情報および前記受信側加工手段における画像情報の加工に関する受信側加工情報の少なくとも一方を取得する手段と、前記送信側加工情報および受信側加工情報の少なくとも一方に基づいて、送信前の画像情報に前記送信側加工手段によって施すべき加工内容および受信後の画像情報に前記受信側加工手段により施すべき加工内容の少なくとも一方を決定する加工決定手段と、前記加工決定手段により決定された加工内容を前記送信側加工手段および受信側加工手段の少なくとも一方に反映させる手段とを含んでいる。
このような構成により、特に、送信側および受信側の少なくとも一方の画像情報加工機能に基づき、送信側の画像情報の加工を選定し且つ処理させるようにして、多様な機種から画像情報を適切に受信することを可能とし、ひいてはユーザーの利便性を向上させる。
【００２２】
本発明の請求項４による画像処理装置は、請求項１〜請求項３のいずれかの画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像の変倍機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像の変倍機能に関する情報を含んでいる。
このような構成により、特に、送信側および受信側の少なくとも一方で行う画像の変倍処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させる。
本発明の請求項５による画像処理装置は、請求項１〜請求項３のいずれかの画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像の階調変換機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像の階調変換機能に関する情報を含んでいる。
このような構成により、特に、送信側および受信側の少なくとも一方で行う画像の階調変換処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させる。
【００２３】
本発明の請求項６による画像処理装置は、請求項１〜請求項３のいずれかの画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像の圧縮機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像の圧縮機能に関する情報を含んでいる。
このような構成により、特に、送信側および受信側の少なくとも一方で行う画像情報の圧縮処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させる。
本発明の請求項７による画像処理装置は、請求項１〜請求項３のいずれかの画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像の伸長機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像の伸長機能に関する情報を含んでいる。
このような構成により、特に、送信側および受信側の少なくとも一方で行う画像情報の伸長処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させる。
【００２４】
本発明の請求項８による画像処理装置は、請求項１〜請求項３のいずれかの画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像のファイルフォーマット変換機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像のファイルフォーマット変換機能に関する情報を含んでいる。
このような構成により、特に、送信側および受信側の少なくとも一方で行う画像情報のファイルフォーマット変換処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させる。
本発明の請求項９による画像処理装置は、請求項１〜請求項３のいずれかの画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像の色空間変換機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像の色空間変換機能に関する情報を含んでいる。
【００２５】
このような構成により、特に、送信側および受信側の少なくとも一方で行う画像情報の色空間変換処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させる。
本発明の請求項１０による画像処理装置は、請求項１〜請求項９のいずれかの画像処理装置において、前記受信側加工情報および送信側加工情報の少なくとも一方が、前記送信側加工手段および受信側加工手段の少なくとも一方における画像の処理品質に関する情報を含んでいる。
このような構成により、特に、送信側および受信側の少なくとも一方で行う画像情報の加工処理内容は、通信相手側の加工処理の品質に応じた処理内容を適切に選定し、最適な品質で画像情報を加工することを可能とする。
本発明の請求項１１による画像処理装置は、請求項１〜請求項９のいずれかの画像処理装置において、前記受信側加工情報および送信側加工情報の少なくとも一方が、前記送信側加工手段および受信側加工手段の少なくとも一方における画像の処理性能に関する情報を含んでいる。
このような構成により、特に、送信側および受信側の少なくとも一方で行う画像情報の処理性能は、相手側の加工処理の性能に応じた処理内容を適切に選定し、最適な性能で画像情報を加工することを可能とする。
【００２６】
本発明の請求項１２による画像処理装置は、請求項１〜請求項１１のいずれかの画像処理装置において、前記画像情報の伝送時間を予測する伝送時間予測手段をさらに含み、且つ前記加工決定手段が、前記伝送予測手段により予測された伝送時間を加味して、少なくとも送信側の画像の加工内容を決定する手段を含んでいる。
このような構成により、特に、送信側および受信側の少なくとも一方で行う画像情報の加工処理内容は、送信側から受信側への予測される伝送時間に応じた処理内容を適切に選定し、最適な性能で画像情報を加工および伝送することを可能とする。
【００２７】
本発明の請求項１３による画像処理装置は、請求項１〜請求項９のいずれかの画像処理装置において、前記受信側加工情報および送信側加工情報の少なくとも一方が、前記送信側加工手段および受信側加工手段の少なくとも一方における画像の処理品質および処理性能に関する情報を含み、且つ前記送信側加工手段および受信側加工手段における画像の処理品質と処理速度との優先順位を決定する手段をさらに含むとともに、前記加工決定手段が、前記手段により決定された優先順位の情報に基づいて、少なくとも送信側の画像の加工内容を決定する手段を含んでいる。
このような構成により、特に、送信側および受信側の少なくとも一方で行う画像情報の加工処理内容は、受信側における画像情報の利用形態に基づいて決定され提示される品質および処理速度の優先順位に応じた処理内容を適切に選定し、最適な性能および品質で画像情報を加工および伝送することを可能とする。
【００２８】
本発明の請求項１４による画像通信方式は、画像情報を送信する送信手段、前記送信手段により送信する画像情報を加工する１つ以上の送信側加工手段、前記送信手段による画像情報の送信に先立って、受信側における画像情報の加工に関する受信側加工情報の通知を、前記受信側から受信する通知受信手段および前記通知受信手段により受信された前記受信側加工情報に基づき、少なくとも、前記送信側加工手段によって該画像情報に施すべき加工内容を決定する送信側加工決定手段、を含む送信側処理装置と、画像情報を受信する受信手段、前記受信手段により受信される画像情報を加工する１つ以上の受信側加工手段、送信側からの画像情報の送信に先立って、前記送信側における画像情報の加工に関する送信側加工情報の通知を、前記送信側から受信する通知受信手段、前記通知受信手段により受信された前記送信側加工情報に基づき、少なくとも、前記送信側で画像情報に施すべき画像の加工内容を決定する受信側加工決定手段および前記受信側加工決定手段により決定された前記加工内容を前記送信側に通知する通知送信手段、を含む受信側処理装置と、の間で画像情報の通信を行なうにあたり、前記送信側加工決定手段および前記受信側加工決定手段の加工内容の決定方式のバージョン番号を取得し、前記送信側加工決定手段と前記受信側加工決定手段の決定方式のバージョン番号を比較して、より新しいバージョンの決定方式を有する側で加工内容の決定を行なわせる。
このような構成により、特に、送信側および受信側の少なくとも一方で行う画像情報の加工処理内容を決定する手段における加工内容の決定には、より新しいバージョンの決定方式を用いて加工内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させる。
【００２９】
【発明の実施の形態】
以下、本発明の実施の形態に基づき、図面を参照して本発明の画像処理装置および画像通信方式を詳細に説明する。
図１は、本発明の一つの実施の形態に係る通信機能を有するディジタルスティルカメラシステムの構成を示すブロック図であり、このディジタルスティルカメラシステムには、本発明に係る画像処理装置および画像通信方式が組み込まれる。
図１に示すディジタルスティルカメラシステムを構成するディジタルスティルカメラ１は、システム制御部２、撮像部３、画像処理部４、表示制御部５、ＬＣＤ（液晶表示器）６、記録メディアインタフェイス部７、記録メディア（記録媒体）８、操作インタフェイス部９および通信インタフェイス部１０を具備している。図１に示すシステムは、このようなディジタルスティルカメラ１に加えて、さらに、携帯電話１１、電話通信網１２およびＰＤＡ（携帯情報端末）装置１３も備えている。
【００３０】
まず、通信機能を有するディジタルスティルカメラ１を構成する各部について説明する。システム制御部２は、ディジタルスティルカメラ１全体の制御を行う部分であり、ＣＰＵ（中央処理ユニット）、メモリおよびタイマー等を備えている。撮像部３は、被写体像を撮像して電子的な画像信号に変換する部分であり、レンズおよびレンズ駆動モータ等の光学系部品、ＣＣＤ（電荷結合素子）撮像素子、ＣＣＤ駆動回路およびＡ／Ｄ（アナログ−ディジタル）変換器等を備えている。画像処理部４は、撮像部３で得られた画像信号に種々の画像処理を施すとともに、撮像部３のＣＣＤ撮像素子の駆動タイミングおよびレンズ駆動モータの動作等を制御してフォーカシングおよび露出調整等を行い、且つ画像の圧縮／伸長を行う部分であり、画像処理用ＤＳＰ（ディジタルシグナルプロセッサ）およびメモリ等を備えている。表示制御部５は、画像処理部４で処理された画像信号をＬＣＤ６に表示するための信号処理を行い、且つユーザーインタフェイスのための種々のグラフィック画像を生成しＬＣＤ６に表示させる部分であり、Ｄ／Ａ（ディジタル−アナログ）変換器およびオンスクリーンディスプレイコントローラ等を備えている。ＬＣＤ６は、撮影画像等の画像を表示し、且つユーザーインタフェイスのためのグラフィックスを表示する。
【００３１】
記録メディアインタフェイス部７は、記録メディア８に対する情報の書き込みまたは記録メディア８からの記録情報の読出し等を行なうための記録メディア８との間のインタフェイス部分であり、例えばメモリカードコントローラ等を備えて構成される。記録メディア８は、圧縮された画像信号および画像に関する種々の情報を記録、つまり不揮発的に記憶、するためのメディア（媒体）であり、この記録メディア８は、不揮発的な記憶を可能とする、例えばフラッシュメモリ等を用いて構成されており、ディジタルスティルカメラ装置１に対して記録メディアインタフェイス部７を介して着脱し得るように構成されている。操作インタフェイス部９は、図示されていない種々のキーおよびダイアル等のユーザーインタフェイスのための操作入力用ハードウェアを含みこれら操作入力用ハードウェアの状態を検出する部分であり、パラレルポート等を用いて構成されている。通信インタフェイス部１０は、携帯電話１１との間のデータ通信を行う部分であり、通信コントローラ等を備えて構成されている。
【００３２】
さらに、図１に示すディジタルスティルカメラシステムを構成する他の構成要素（ディジタルスティルカメラ１以外の部分）について説明する。すなわち、携帯電話１１は、通信インタフェイス部１０によりディジタルスティルカメラ１に接続されている。電話通信網１２は、携帯電話通信網、ＰＳＴＮ（公衆交換電話網）およびＩＳＤＮを含んでいる。ＰＤＡ（携帯情報端末）装置１３は、いわゆるパームコンピュータ、ハンドヘルドコンピュータおよび電子手帳のような通信機能を有する携帯用の情報機器であり、電話通信網１２に接続されている。
次に、上述のように構成されたディジタルスティルカメラシステムにおける動作を説明するが、まず、本発明が適用されていない従来の一般的なシステムと共通の動作および本発明とは異なるが本発明と対比するための従来の一般的なシステムの動作について説明する。
【００３３】
ユーザーは、撮影に先立ち、キーおよびダイヤル等の操作部（図示されていない）を操作して、撮影モードを、例えば高画質モード、低画質モードおよび文書撮影モード等から選択的に決定する。このようなユーザーの操作内容は操作インタフェイス部９を介してシステム制御部２で判別される。システム制御部２は、その操作内容に応じて表示制御部５を介して案内表示のためのガイダンスグラフィックスを生成し、ＬＣＤ６に表示させて、ユーザーに次の操作を促す。システム制御部２は、撮影モードが決定されると、撮影モードに応じた処理パラメータを画像処理部４に設定する。
こうして、撮影の準備が整った後、図示されていないレリーズボタン（操作部に含まれる）の半押し状態が検出されると、その操作は、先のモード設定の場合と同様にして操作インタフェイス部９を介してシステム制御部２で判別される。
撮像部３は、画像処理部４による制御に従い、実際の撮影に先立って、プレビュー画像を表示するための撮像動作を開始する。撮像されたデータは連続的に画像処理部４に送られる。画像処理部４は、画像データに、色空間変換、ガンマ補正およびホワイトバランス調整等の処理を施した後、その画像データを表示制御部５へ送る。また、この時、同時に画像処理部４では、フォーカスおよび露出の検出を行い、それに応じて撮像部３を制御して調整を行う。
【００３４】
表示制御部５では、送られてきた画像データに所要の信号処理を施してＬＣＤ６に表示し、ユーザーに撮像状態を提示する。
次に、レリーズボタンがさらに押下されるなどして完全に押下（全押し状態）されると、その操作は同様にして操作インタフェイス部９を通じてシステム制御部２で判別される。
撮像部３は、画像処理部４による制御に従って所定の画像を取り込んで画像処理部４へ送り、画像処理部４は、撮影モードに応じた画像処理および圧縮処理等を行う。
システム制御部２は、圧縮された画像データを読み出し、さらにヘッダー情報を付加した後、記録メディアインタフェイス部７を介して記録メディア８に書き込む。ここで、ヘッダー情報には、選択された撮影モードの情報および撮影日時の情報等が含まれている。
【００３５】
このようにして、一連の撮影動作が完了する。
次に、通信機能による画像送信の動作を説明する。
ユーザーは、通信機能の利用に先立って、携帯電話１１を、通信インタフェイス部１０により、ディジタルスティルカメラ１に接続する。先に述べた撮影モードの設定の場合と同様にして、ユーザーは、画像の送信宛先を指定するとともに、送信する画像を選択する。
従来の一般的なシステムにおいては、システム制御部２が、通信インタフェイス部１０を制御して、携帯電話１１により発呼し、通信路が確立すると、まず相手端末の端末名称を受信し、システム制御部２に内に予め記憶されている端末属性テーブルを検索して、送信画像フォーマットを決定する。
端末属性テーブルの一例を、表１に示す。表１において、端末名称は送信相手端末の型式を示し、端末属性は送信相手端末毎の送信可能な（すなわち相手端末が受信して、利用することが可能な）画像サイズ、色空間、階調数、圧縮形式および画像フォーマット等を示している。
【００３６】
【表１】
端末属性テーブル

【００３７】
システム制御部２は、送信画像フォーマットを決定すると、指定された画像ファイルを記録メディア６から読み出し、必要に応じて画像処理部４へ転送して変倍などの画像処理を行った後、さらに必要に応じて画像フォーマットを変換して、所定のプロトコルに従って画像データを送信する。
表１のテーブルに存在しない端末名称であるなど、端末属性が決定できない場合には、送信不能エラーとして処理を中断し、その旨を示すガイダンスメッセージをＬＣＤ６に表示させる。
次に、本発明を適用した場合の画像送信の動作について説明する。
まず、本発明に係るシステムにおける通信フロー（請求項１、請求項２および請求項１４に対応する）について説明する。図２〜図５に通信における信号授受の流れを模式的に示す通信手順図を示す。図２は、は接続時の通信フロー、図５は、切断時の通信フロー、図３は、送信側が画像処理内容を決定する場合、すなわち、送信側がマスターとなる場合、の接続（図２）と切断（図５）との間における通信フロー、そして図４は、受信側がマスターとなる場合の接続（図２）と切断（図５）との間における通信フローにおける手順をそれぞれ示している。
【００３８】
図２において、発呼から発端末（送信側）の接続確認および着端末（受信側）での接続応答までは、網を介した通常の呼接続手順である。
そして、呼が接続されると、まず、受信側では、画像の処理内容を決定する（自端末が具備する）アルゴリズムのバージョン番号を送信側に通知する。送信側では、通知されたバージョン番号を、自端末における同様のバージョン番号と比較し、自端末の方のバージョン番号が同じかあるいは新しいものであれば自端末をマスター端末に、そうでなければ受信側をマスター端末として決定する。
図５は、網を介した通常の呼切断手順を示している。
図３は、上述したように、図２の手順において送信側がマスター端末に決定された場合の処理の手順を示している。受信側は、送信側がマスター端末であることの通知を受けると、自端末における画像フォーマットおよび自端末が備える画像処理機能に関する情報を通知する。ここで、画像フォーマットは、受信側が要求する複数の形式を通知することができる。
【００３９】
送信側は、通知された情報と、送信元画像フォーマットおよび自端末が備える画像処理機能に関する情報から、送信側で行う画像処理内容を決定し、また受信側で行うべき処理内容を通知する。ここで、処理内容を決定することができなかった場合、言い換えれば、送信側および受信側の双方が備える画像処理機能をもってしても、受信側において用いている画像フォーマットのいずれにも変換することが不可能であると判定した場合には、送信不可を通知して切断時の処理（図５）に移行する。なお、処理決定の方法については後述する。
送信側は、決定した処理内容に従い、送信元画像を処理し、逐次送信を行う。画像データの送信は、定められたデータ量をパケット単位で送信することによって行なう。画像データの送信が完了すると、受信側は先に通知された処理内容に従って受信画像を処理し、記録メディアへの記録を行い、そして、図５に示された手順に従って接続を切断する。
【００４０】
図４は、上述した図２の手順において、受信側がマスター端末とされた場合の処理の手順を示している。
送信側は、受信側がマスター端末であることを通知すると、送信元画像フォーマットおよび自端末が備える画像処理機能に関する情報を通知する。
受信側は通知された情報と、自端末の画像フォーマットおよび自端末が備える画像処理機能に関する情報から、送信側で行う画像処理内容を決定し、通知する。ここで、処理内容を決定することができなかった場合には、受信不可を通知して図５に示す切断時の手順に移行する。なお、上述したように、処理決定の方法については後述する。
送信側は通知された処理内容に従って、送信元画像を処理して、逐次送信する。画像データの送信は、定められたデータ量をパケット単位で送信することによって行なう。
データの送信が完了すると、受信側は、先に決定した処理内容に従って受信画像を処理し、記録メディアへの記録を行い、そして、図５に示された手順に従って接続を切断する。
次に、先に述べた処理内容の決定方法について、いくつかの例を示す。
通知される画像処理機能に関する情報の一例を、表２に示す。
【００４１】
【表２】
通知される画像処理機能

【００４２】
表２において、機能分類は、端末が備える画像処理機能の大分類（請求項４〜請求項９等に対応）を、そして機能は、各々の詳細な機能や制約をそれぞれ示している。
変倍ステップは、変倍処理における処理可能な倍率のステップ、すなわち任意変倍および整数倍変倍などを示している。
処理可能最大・最小サイズは、処理可能な元画像あるいは処理後の画像サイズを示している。なお、処理可能な元画像と処理後の画像サイズのどちらを示すかは処理毎に定められており、例えば、拡大変倍・伸長・増色の階調変換は、処理後のサイズを示す。
処理可能フォーマットは、処理可能な画像フォーマットを示している。
処理品質指数は、処理による画像劣化を指数で表したものである。
処理性能は、１００万画素あたりの処理時間（ｍｓ／Ｍｐ）、あるいは１処理あたりの処理時間（ｍｓ）を示している。
【００４３】
処理可能プロファイルは、圧縮／伸長処理における処理可能なプロファイルを示している。
また、ファイルフォーマット変換には、作成可能なファイルフォーマットに関する情報も含んでいる。
実際の情報の通知にあたっては、各々の機能に相当する予め定められたコードが送信される。
以下、処理内容を決定する方法について具体的に説明する。
表３には、送信元画像フォーマットを示す。表４および表５には、第１および第２の受信側画像フォーマットを示す。既に述べたように、受信側画像フォーマットは、複数の形式を指定することができ、この例では表４あるいは表５の形式のいずれかを要求するものとしている。
【００４４】
【表３】
送信元画像フォーマット

【００４５】
【表４】
第１の受信側画像フォーマット

【００４６】
【表５】
第２の受信側画像フォーマット

そして、表６には、送信側の画像処理機能を示し、表７には、受信側の画像処理機能を示す。
【００４７】
【表６】
送信側の画像処理機能

【００４８】
【表７】
受信側の画像処理機能

【００４９】
図６には、処理内容の決定に関する処理の流れを示す。
以下、図６に示すフローチャートに従って説明する。
まず、マスター端末は、先に述べた通信手順に従って、相手端末の画像処理機能情報を受信し、そして受信可能画像フォーマット（送信側がマスター時）または送信画像フォーマット（受信側がマスター時）を受信する（ステップＳ１〜Ｓ２）。そして、マスター端末は、品質／処理速度のどちらを優先するかを判定し（受信側がマスター時）、あるいはその優先順位を相手端末から受信（送信側がマスター時）する（ステップＳ３）（画像処理の処理品質を優先する方式は、請求項１０に対応し、処理速度を優先する方式は、請求項１１に対応する）。
【００５０】
上述した優先順位は、ユーザーが設定したり、あるいは、端末が画像情報をどのように利用するかによって自動的に判定させたりすることができる（このように優先順位を決定し、それに基づいて処理内容を決定する方式は、請求項１３に対応する）。また、この優先順位指定は、マスター端末が送信側／受信側のいずれであるかにかかわらず、送信側端末および受信側端末の双方で指定可能である。この場合の組み合わせとしては次の４通りがある。
１）送信側がマスター時に受信側から受信した指定に従う。
２）送信側がマスター時に送信側での判定に従う。
３）受信側がマスター時に送信側から受信した指定に従う。
４）受信側がマスター時に受信側での判定に従う。
【００５１】
送信側端末および受信側端末の双方で優先順位の指定が行われた場合には、送信側端末の判定に従う。
マスター端末（のシステム制御部２）は、上述の情報が通知されると、通知された相手端末の画像処理機能と、自端末の画像処理機能の組み合わせから、送信元画像フォーマットを受信可能画像フォーマットに変換することができる全ての処理の組み合わせを抽出して、処理内容決定のためのテーブルを作成する（ステップＳ４）。
表８に、処理判定テーブルを示す。表８において、番号は説明のために割り振った連番、送信側処理・受信側処理は上述した処理の組み合わせの抽出結果を示す。それら以外の項目については後述する。
【００５２】
【表８】
処理判定テーブル

【００５３】
処理可能な組み合わせが１つもなかった場合には、相手端末へ送信不可通知（送信側マスター時）／受信不可通知（受信側マスター時）を送信し、処理を終了する（ステップＳ５〜ステップＳ６）。
処理可能な組み合わせが１つしかなかった場合には、その処理を処理内容として決定する（ステップＳ７）。
処理可能な組み合わせが２つ以上あった場合には、マスター端末（のシステム制御部２）は、処理時間の算出を行う。処理時間は、処理可能な全ての組み合わせ（表８の番号１〜５）について、通知された相手端末の画像処理機能および自端末の画像処理機能（表６および表７）の処理性能と各々の処理で処理される画像サイズから算出する（ステップＳ８）。
例えば表８の番号１についての処理においては、個々の処理時間は式１〜式８のようになる。
【００５４】
ＪＰＥＧ２０００伸長処理
２０４８×１５３６×３００Ｅ−６＝９４４（ｍｓ）　　　　…（式１）
１／２縮小処理
２０４８×１５３６×１２０００Ｅ−６＝３７７４９（ｍｓ）…（式２）
ＪＰＥＧ圧縮処理
１０２４×７６８×２００Ｅ−６＝１５７（ｍｓ）　　　　　…（式３）
ＪＰＥＧ伸長処理
１０２４×７６８×２５０００Ｅ−６＝１９６６１（ｍｓ）　…（式４）
５／８縮小処理
１０２４×７６８×６００Ｅ−６＝４７２（ｍｓ）　　　　　…（式５）
ＹＵＶ４２２→ＹＵＶ４２０処理
６４０×４８０×７２０Ｅ−６＝２２２（ｍｓ）　　　　　　…（式６）
ＪＰＥＧ圧縮処理
６４０×４８０×２５０００Ｅ−６＝７６８０（ｍｓ）　　　…（式７）
ＪＦＩＦファイル作成処理
２（ｍｓ）　　　　　　　　　　　　　　　　　　　　　　　…（式８）
これら式１〜式８の結果を全て加算して、処理時間６６．９（ｓ）を算出する。
【００５５】
続いて、マスター端末（のシステム制御部２）は、処理品質指数の算出を行う。処理品質指数は、処理可能な全ての組み合わせ（表８の番号１〜５）について、通知された相手端末の画像処理機能および自端末の画像処理機能（表６および表７）の処理品質指数から算出する（ステップＳ９）。
例えば、表８の番号１についての処理においては、次の式９のようにして処理品質指数を算出する。
（１００（ＪＰＥＧ２０００伸長処理）／１００
×　９０（１／２縮小処理）／１００
×　９０（ＪＰＥＧ圧縮処理）／１００
×　１００（ＪＰＥＧ伸長処理）／１００
×　７５（５／８縮小処理）／１００
×　８５（ＹＵＶ４２２→ＹＵＶ４２０処理）／１００
×　９０（ＪＰＥＧ圧縮処理）／１００
×　１００（ＪＦＩＦファイル作成処理）／１００　　）
×　１００
＝　４６．５　　　　　　　　　　　　　　　　　　…（式９）
【００５６】
続いて、マスター端末（のシステム制御部２）は、伝送予測時間の算出を行う。伝送予測時間の算出においては、処理可能な全ての組み合わせ（表８の番号１〜５）について、その伝送データ形式からデータ量を算定し、さらに伝送媒体の伝送レートから伝送予測時間を算出する（ステップＳ１０）（このように伝送予測時間を処理内容の決定に反映させる場合には請求項１２に対応する）。
例えば、表８の番号１についての処理においては、次のようにして伝送予測時間を算出する。
伝送データ形式は、ＪＰＥＧデータであり、ＪＰＥＧ圧縮率を１／７．７（この値はＪＰＥＧ圧縮時の標準圧縮率としてあらかじめシステム制御部２に記憶されている）として、伝送データ量は、次の式１０であらわされる。
【００５７】
１０２４×７６８×２×１／７．７＝２００（ＫＢ）　　…（式１０）
伝送レートが１２８ｋｂｐｓ（この値は、接続された網の伝送能力として、呼接続時に通信インタフェイス部１０を介して通知される値である）として、式１１により伝送予測時間を算出する。
２００×１０２４×８／（１２８×１０００）＝１２．８（ｓ）…（式１１）以上のようにして、算出が完了（表８の各項目が埋まる）すると、マスター端末（のシステム制御部２）は、処理内容の決定を行う。決定に際しては、上述した品質／処理速度の優先順位に従って、表８から最適なものを選択する。例えば、品質優先であれば、表８において最も品質指数の高い番号２の処理を選択する。あるいは処理速度優先であれば、表８において最も「処理＋伝送時間」の短い番号１の処理を選択する（ステップＳ１１）。
【００５８】
マスター端末は、決定した処理内容および送信可能である旨の通知を相手端末へ送信し（ステップＳ１２）、決定した処理内容に従って画像処理を施した後（ステップＳ１３）、画像データを送信する（ステップＳ１４）。
なお、上述においては、送信側および受信側の少なくとも一方の画像処理装置において、画像情報の加工処理内容を選定するものとしたが、加工処理内容を選定するための構成は、送信側および受信側の両方の画像処理装置に分散配置してもよく、送信側および受信側の画像処理装置とは別途に両者との間で通知の授受が可能となるように設けてもよい（請求項３に対応）。
【００５９】
【発明の効果】
以上述べたように、本発明によれば、送信側および受信側の少なくとも一方における加工内容を相手側の加工機能に係る情報に基づいて選定し、送信側および受信側の双方が備える画像処理機能を最大限に活かして、通信可能性を高めるとともに、最適な処理性能および処理品質で伝送を含む画像処理を行うことができ、ひいてはユーザーの利便性を向上することが可能となる。
すなわち本発明の請求項１の画像処理装置によれば、画像情報を送信する送信手段、前記送信手段により送信する画像情報を加工する１つ以上の送信側加工手段、前記送信手段による画像情報の送信に先立って、受信側における画像情報の加工に関する受信側加工情報の通知を、前記受信側から受信する通知受信手段および前記通知受信手段により受信された前記受信側加工情報に基づき、少なくとも、前記送信側加工手段によって該画像情報に施すべき加工内容を決定する加工決定手段を具備することにより、特に、受信側の画像情報加工機能に対応させるように、送信側において画像情報の加工を選定および処理して、多様な機種に対して画像情報を適切に送信することを可能とし、ひいてはユーザーの利便性を向上させることができる。
【００６０】
また、本発明の請求項２の画像処理装置によれば、画像情報を受信する受信手段、前記受信手段により受信される画像情報を加工する１つ以上の受信側加工手段、送信側からの画像情報の送信に先立って、前記送信側における画像情報の加工に関する送信側加工情報の通知を、前記送信側から受信する通知受信手段、前記通知受信手段により受信された前記送信側加工情報に基づき、少なくとも、前記送信側で画像情報に施すべき画像の加工内容を決定する加工決定手段および前記加工決定手段により決定された前記加工内容を前記送信側に通知する通知送信手段を具備することにより、特に、送信側の画像情報加工機能に基づき、受信側の画像情報加工機能に対応する送信側の画像情報の加工を受信側から選定するようにして、多様な機種から画像情報を適切に受信することを可能とし、ひいてはユーザーの利便性を向上させることができる。
【００６１】
本発明の請求項３の画像処理装置によれば、画像情報の送信を行なう送信手段および前記送信手段により送信する画像情報を加工する１つ以上の送信側加工手段を含み、前記画像情報を送信する送信側処理装置と、画像情報の受信を行なう受信手段および前記受信手段により受信される画像情報を加工する１つ以上の受信側加工手段を含み、前記画像情報を受信する受信側処理装置とを具備する画像処理装置であって、前記送信手段による画像情報の送信に先立って、前記送信側加工手段における画像情報の加工に関する送信側加工情報および前記受信側加工手段における画像情報の加工に関する受信側加工情報の少なくとも一方を取得する手段と、前記送信側加工情報および受信側加工情報の少なくとも一方に基づいて、送信前の画像情報に前記送信側加工手段によって施すべき加工内容および受信後の画像情報に前記受信側加工手段により施すべき加工内容の少なくとも一方を決定する加工決定手段と、前記加工決定手段により決定された加工内容を前記送信側加工手段および受信側加工手段の少なくとも一方に反映させる手段とを含むことにより、特に、送信側および受信側の少なくとも一方の画像情報加工機能に基づき、送信側の画像情報の加工を選定し且つ処理させるようにして、多様な機種から画像情報を適切に受信することを可能とし、ひいてはユーザーの利便性を向上させることができる。
【００６２】
本発明の請求項４の画像処理装置によれば、請求項１〜請求項３のいずれかの画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像の変倍機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像の変倍機能に関する情報を含むことにより、特に、送信側および受信側の少なくとも一方で行う画像の変倍処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させることができる。
【００６３】
本発明の請求項５の画像処理装置によれば、請求項１〜請求項３のいずれかの画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像の階調変換機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像の階調変換機能に関する情報を含むことにより、特に、送信側および受信側の少なくとも一方で行う画像の階調変換処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させることができる。
【００６４】
本発明の請求項６の画像処理装置によれば、請求項１〜請求項３のいずれかの画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像の圧縮機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像の圧縮機能に関する情報を含むことにより、特に、送信側および受信側の少なくとも一方で行う画像情報の圧縮処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させることができる。
本発明の請求項７の画像処理装置によれば、請求項１〜請求項３のいずれかの画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像の伸長機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像の伸長機能に関する情報を含むことにより、特に、送信側および受信側の少なくとも一方で行う画像情報の伸長処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させることができる。
【００６５】
本発明の請求項８の画像処理装置によれば、請求項１〜請求項３のいずれかの画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像のファイルフォーマット変換機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像のファイルフォーマット変換機能に関する情報を含むことにより、特に、送信側および受信側の少なくとも一方で行う画像情報のファイルフォーマット変換処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させることができる。
本発明の請求項９の画像処理装置によれば、請求項１〜請求項３のいずれかの画像処理装置において、前記送信側加工手段および受信側加工手段の少なくとも一方が、画像の色空間変換機能を含み、且つ前記受信側加工情報および送信側加工情報の少なくとも一方が、画像の色空間変換機能に関する情報を含むことにより、特に、送信側および受信側の少なくとも一方で行う画像情報の色空間変換処理内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させることができる。
【００６６】
本発明の請求項１０の画像処理装置によれば、請求項１〜請求項９のいずれかの画像処理装置において、前記受信側加工情報および送信側加工情報の少なくとも一方が、前記送信側加工手段および受信側加工手段の少なくとも一方における画像の処理品質に関する情報を含むことにより、特に、送信側および受信側の少なくとも一方で行う画像情報の加工処理内容は、通信相手側の加工処理の品質に応じた処理内容を適切に選定し、最適な品質で画像情報を加工することが可能となる。
本発明の請求項１１の画像処理装置によれば、請求項１〜請求項９のいずれかの画像処理装置において、前記受信側加工情報および送信側加工情報の少なくとも一方が、前記送信側加工手段および受信側加工手段の少なくとも一方における画像の処理性能に関する情報を含むことにより、特に、送信側および受信側の少なくとも一方で行う画像情報の処理性能は、相手側の加工処理の性能に応じた処理内容を適切に選定し、最適な性能で画像情報を加工することが可能となる。
【００６７】
本発明の請求項１２の画像処理装置によれば、請求項１〜請求項１１のいずれかの画像処理装置において、前記画像情報の伝送時間を予測する伝送時間予測手段をさらに含み、且つ前記加工決定手段が、前記伝送予測手段により予測された伝送時間を加味して、少なくとも送信側の画像の加工内容を決定する手段を含むことにより、特に、送信側および受信側の少なくとも一方で行う画像情報の加工処理内容は、送信側から受信側への予測される伝送時間に応じた処理内容を適切に選定し、最適な性能で画像情報を加工および伝送することが可能となる。
【００６８】
本発明の請求項１３の画像処理装置によれば、請求項１〜請求項９のいずれかの画像処理装置において、前記受信側加工情報および送信側加工情報の少なくとも一方が、前記送信側加工手段および受信側加工手段の少なくとも一方における画像の処理品質および処理性能に関する情報を含み、且つ前記送信側加工手段および受信側加工手段における画像の処理品質と処理速度との優先順位を決定する手段をさらに含むとともに、前記加工決定手段が、前記手段により決定された優先順位の情報に基づいて、少なくとも送信側の画像の加工内容を決定する手段を含むことにより、特に、送信側および受信側の少なくとも一方で行う画像情報の加工処理内容は、受信側における画像情報の利用形態に基づいて決定され提示される品質および処理速度の優先順位に応じた処理内容を適切に選定し、最適な性能および品質で画像情報を加工および伝送することが可能となる。
【００６９】
本発明の請求項１４の画像通信方式によれば、画像情報を送信する送信手段、前記送信手段により送信する画像情報を加工する１つ以上の送信側加工手段、前記送信手段による画像情報の送信に先立って、受信側における画像情報の加工に関する受信側加工情報の通知を、前記受信側から受信する通知受信手段および前記通知受信手段により受信された前記受信側加工情報に基づき、少なくとも、前記送信側加工手段によって該画像情報に施すべき加工内容を決定する送信側加工決定手段、を含む送信側処理装置と、画像情報を受信する受信手段、前記受信手段により受信される画像情報を加工する１つ以上の受信側加工手段、送信側からの画像情報の送信に先立って、前記送信側における画像情報の加工に関する送信側加工情報の通知を、前記送信側から受信する通知受信手段、前記通知受信手段により受信された前記送信側加工情報に基づき、少なくとも、前記送信側で画像情報に施すべき画像の加工内容を決定する受信側加工決定手段および前記受信側加工決定手段により決定された前記加工内容を前記送信側に通知する通知送信手段、を含む受信側処理装置と、の間で画像情報の通信を行なうにあたり、前記送信側加工決定手段および前記受信側加工決定手段の加工内容の決定方式のバージョン番号を取得し、前記送信側加工決定手段と前記受信側加工決定手段の決定方式のバージョン番号を比較して、より新しいバージョンの決定方式を有する側で加工内容の決定を行なわせることにより、特に、送信側および受信側の少なくとも一方で行う画像情報の加工処理内容を決定する手段における加工内容の決定には、より新しいバージョンの決定方式を用いて加工内容を適切に選定し、多様な機種間で画像情報を送受することを可能とし、ひいてはユーザーの利便性を向上させることができる。
【図面の簡単な説明】
【図１】本発明の一つの実施の形態に係る通信機能を有するディジタルスティルカメラシステムの構成を模式的に示すブロック図である。
【図２】図１のディジタルスティルカメラシステムにおける呼の接続時の通信手順の流れを示す模式図である。
【図３】図１のディジタルスティルカメラシステムにおける送信側がマスターであるときの画像転送における通信手順の流れを示す模式図である。
【図４】図１のディジタルスティルカメラシステムにおける受信側がマスターであるときの画像転送における通信手順の流れを示す模式図である。
【図５】図１のディジタルスティルカメラシステムにおける呼の接続の切断時の通信手順の流れを示す模式図である。
【図６】図１のディジタルスティルカメラシステムにおける処理内容の決定に関する処理の流れを示すフローチャートである。
【符号の説明】
１　ディジタルスティルカメラ
２　システム制御部
３　撮像部（ＣＣＤ撮像素子）
４　画像処理部
５　表示制御部
６　ＬＣＤ（液晶表示器）
７　記録メディアインタフェイス部
８　記録メディア
９　操作インタフェイス部
１０　通信インタフェイス部
１１　携帯電話機
１２　電話通信網
１３　ＰＤＡ装置[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a technique for processing and transmitting digital image information, and more particularly to an image processing apparatus and an image communication system suitable for a digital still camera, a personal digital assistant (PDA) apparatus, a printer, an image filing apparatus, and the like. Things.
[0002]
[Prior art]
In recent years, various devices for handling digital images, such as digital still cameras, have been developed or proposed. In addition, with the development of communication infrastructure (infrastructure: substructure, infrastructure) such as a mobile phone network and a LAN (local area network) environment, the need for a communication function between devices that handle the above-described digital images is increasing. Yes, and corresponding devices have been developed. For example, a camera equipped with a communication function has been developed as a digital camera. In such a digital camera, captured image information is transmitted by e-mail (e-mail), FTP ((standard) file transfer protocol), and a unique protocol. Can be transmitted to a PC (personal computer), another digital camera, a server, or the like. At present, most communication from image processing devices is connected to a PC or printer, but in the future, communication between the same devices or between image processing devices within the range of the same manufacturer, or more. It is expected that communication needs between different models will increase.
[0003]
On the other hand, the image processing devices used for the various devices as described above employ an image format that is optimal for each device, and the image processing devices provided for each device also have various image processing functions. For this reason, in the conventional image processing apparatus, the image format requested by the receiving side is once converted via the PC, or the devices on the transmitting side and the receiving side are specified in advance. The data is transmitted in a predetermined specific image format, and the receiving side performs necessary conversion. However, in such a method, when the data is transmitted through a PC, the data has to be once transferred to the PC, so that the convenience is reduced. Further, when the devices on the transmission side and the reception side of the image data are specified, However, image data can be transmitted and received only between specific devices.
[0004]
For this reason, systems such as those disclosed in JP-A-10-341327 and JP-A-10-173833 have been proposed. Japanese Patent Application Laid-Open No. 10-341327 discloses that a plurality of image data formats receivable on the receiving side are prioritized, and information on the receivable image data formats with these priorities is notified from the receiving side to the transmitting side. On the transmitting side, a method is disclosed in which the transmitting image data format is determined according to the priority order of the image data format designated by the receiving side, and the image data format is converted to the image data format and transmitted.
In Japanese Patent Application Laid-Open No. 10-173833, software for converting image data into an image data format receivable by the receiving side on the transmitting side is provided on the receiving side, and the software is provided prior to transmission of the image data. A method is disclosed in which software is transferred to a transmission side, and the software is executed on the transmission side to convert image data into a receivable image data format and then transmit the image data.
[0005]
[Problems to be solved by the invention]
However, in the method disclosed in Japanese Patent Application Laid-Open No. H10-341327, the image data needs to be processed on the transmission side into one of the image data formats requested by the reception side, and the transmission side has the image data. Depending on the image processing function, there is still a high possibility that the image data cannot be processed into the required image data format and, as a result, communication cannot be performed. Further, in the method disclosed in Japanese Patent Application Laid-Open No. 10-173833, there is a problem that software must be transferred at the time of transmission, and the processing is time-consuming because of software processing. As described above, even in the methods disclosed in JP-A-10-341327 and JP-A-10-173833, the processing performance or the image processing function on the transmission side and the reception side is not sufficiently utilized. There is a problem that the processing quality is sacrificed, and further, the convenience for the user (user) is hindered, and the possibility of communication decreases.
[0006]
The present invention has been made in view of the above-described circumstances, and maximizes image processing functions provided on both a transmitting side and a receiving side to enhance communication possibility and transmit data with optimum processing performance and processing quality. It is an object of the present invention to provide an image processing apparatus and an image communication method that can perform image processing including the following, and that can improve user convenience.
In particular, an object of claim 1 of the present invention is to select and process image information processing on the transmission side so as to correspond to the image information processing function on the reception side, and to appropriately process the image information for various models. It is an object of the present invention to provide an image processing apparatus that enables transmission and that can improve user convenience.
The object of claim 2 of the present invention is, in particular, to select, from the receiving side, processing of image information on the transmitting side corresponding to the image information processing function on the receiving side based on the image information processing function on the transmitting side. It is an object of the present invention to provide an image processing apparatus capable of appropriately receiving image information from various models, and thereby improving user convenience.
[0007]
An object of claim 3 of the present invention is to select and process image information processing on the transmission side based on at least one image information processing function on the transmission side and the reception side. It is an object of the present invention to provide an image processing apparatus that can appropriately receive information and that can improve user convenience.
An object of claim 4 of the present invention is to enable the image information to be appropriately transmitted and received among various models by appropriately selecting the content of the image scaling processing performed on at least one of the transmitting side and the receiving side. An object of the present invention is to provide an image processing device that can improve user convenience.
The object of claim 5 of the present invention is to make it possible to appropriately select the gradation conversion processing of an image to be performed on at least one of the transmission side and the reception side, and to transmit and receive image information between various models. It is another object of the present invention to provide an image processing apparatus that can improve user convenience.
[0008]
The object of claim 6 of the present invention is to make it possible to appropriately select the content of the compression processing of image information to be performed on at least one of the transmission side and the reception side, and to transmit and receive image information between various models. An object of the present invention is to provide an image processing device that can improve user convenience.
An object of claim 7 of the present invention is to enable an image information decompression process to be appropriately performed at least on at least one of a transmission side and a reception side to transmit and receive image information between various models. An object of the present invention is to provide an image processing device that can improve user convenience.
The object of claim 8 of the present invention is to make it possible to appropriately select the file format conversion processing of image information to be performed at least on one of the transmitting side and the receiving side, and to transmit and receive image information between various models. Another object of the present invention is to provide an image processing apparatus that can improve user convenience.
[0009]
The object of claim 9 of the present invention is to make it possible to appropriately select the content of color space conversion processing of image information to be performed on at least one of the transmitting side and the receiving side, and to transmit and receive image information between various models. Another object of the present invention is to provide an image processing apparatus that can improve user convenience.
The object of claim 10 of the present invention is that the processing content of image information to be performed on at least one of the transmitting side and the receiving side is optimally selected by appropriately selecting a processing content according to the quality of the processing process on the communication partner side. It is an object of the present invention to provide an image processing apparatus capable of processing image information with high quality.
An object of claim 11 of the present invention is to provide an image processing apparatus which performs processing at least on one of a transmitting side and a receiving side by appropriately selecting a processing content according to the processing performance of a partner side, and achieving optimum performance. An object of the present invention is to provide an image processing apparatus which can process image information by using the image processing apparatus.
[0010]
The object of claim 12 of the present invention is that, in particular, the processing content of image information to be performed on at least one of the transmitting side and the receiving side appropriately adjusts the processing content according to the estimated transmission time from the transmitting side to the receiving side. It is an object of the present invention to provide an image processing apparatus capable of selecting and processing and transmitting image information with optimum performance.
The object of claim 13 of the present invention is that, in particular, the contents of processing of image information performed on at least one of the transmitting side and the receiving side are determined and presented based on the use form of the image information on the receiving side. It is an object of the present invention to provide an image processing apparatus capable of appropriately selecting the processing content according to the priority order, and processing and transmitting the image information with optimum performance and quality.
The object of claim 14 of the present invention is that, in particular, the determination of the processing content in the means for determining the processing content of the image information performed on at least one of the transmitting side and the receiving side is based on the comparison of the version numbers, It is an object of the present invention to provide an image communication method that enables the processing contents to be appropriately selected by using the above-mentioned determination method, enables image information to be transmitted / received between various models, and improves user convenience.
[0011]
[Means for Solving the Problems]
The image processing apparatus according to the first aspect of the present invention has the following features.
Transmitting means for transmitting image information;
One or more transmission-side processing means for processing image information transmitted by the transmission means,
Prior to the transmission of the image information by the transmitting unit, a notification of receiving side processing information regarding processing of the image information on the receiving side, a notification receiving unit that receives from the receiving side,
Based on the receiving-side processing information received by the notification receiving unit, at least a processing determining unit that determines processing details to be performed on the image information by the transmitting-side processing unit;
It is characterized by having.
[0012]
An image processing apparatus according to the present invention as set forth in claim 2, in order to achieve the above object,
Receiving means for receiving image information;
One or more receiving processing means for processing image information received by the receiving means,
Prior to transmission of image information from the transmission side, a notification of transmission side processing information regarding processing of image information on the transmission side, notification receiving means for receiving from the transmission side,
Based on the transmission-side processing information received by the notification receiving means, at least, processing determination means for determining the processing content of the image to be performed on the image information on the transmission side,
Notification transmitting means for notifying the transmitting side of the processing content determined by the processing determining means,
It is characterized by having.
[0013]
The image processing apparatus according to the present invention described in claim 3 achieves the above object by:
A transmitting unit for transmitting the image information, including a transmitting unit for transmitting the image information and one or more transmitting processing units for processing the image information transmitted by the transmitting unit;
An image processing apparatus comprising: a receiving unit that receives image information; and one or more receiving-side processing units that process image information received by the receiving unit; and a receiving-side processing device that receives the image information. So,
Means for acquiring at least one of transmission-side processing information relating to processing of image information in the transmission-side processing means and reception-side processing information relating to processing of image information in the receiving-side processing means, prior to transmission of image information by the transmission means. When,
Based on at least one of the transmission-side processing information and the reception-side processing information, processing details to be performed by the transmission-side processing means on image information before transmission and processing details to be performed by the reception-side processing means on image information after reception Processing determining means for determining at least one of:
Means for reflecting the processing content determined by the processing determination means on at least one of the transmission-side processing means and the reception-side processing means;
It is characterized by including.
[0014]
An image processing apparatus according to a fourth aspect of the present invention is the image processing apparatus according to any one of the first to third aspects, wherein at least one of the transmission-side processing unit and the reception-side processing unit is an image processing apparatus. It is characterized in that it includes a scaling function, and at least one of the reception-side processing information and the transmission-side processing information includes information on an image scaling function.
An image processing apparatus according to a fifth aspect of the present invention is the image processing apparatus according to any one of the first to third aspects, wherein at least one of the transmission-side processing unit and the reception-side processing unit is an image processing apparatus. The image processing apparatus includes a gradation conversion function, and at least one of the reception-side processing information and the transmission-side processing information includes information on an image gradation conversion function.
An image processing apparatus according to a sixth aspect of the present invention is the image processing apparatus according to any one of the first to third aspects, wherein at least one of the transmission-side processing unit and the reception-side processing unit is an image processing apparatus. The image processing apparatus includes a compression function, and at least one of the reception-side processing information and the transmission-side processing information includes information on an image compression function.
[0015]
An image processing apparatus according to a seventh aspect of the present invention is the image processing apparatus according to any one of the first to third aspects, wherein at least one of the transmission-side processing unit and the reception-side processing unit is an image processing apparatus. The image processing apparatus includes a decompression function, and at least one of the reception-side processing information and the transmission-side processing information includes information on an image decompression function.
An image processing apparatus according to an eighth aspect of the present invention is the image processing apparatus according to any one of the first to third aspects, wherein at least one of the transmission-side processing unit and the reception-side processing unit is an image processing apparatus. A file format conversion function is included, and at least one of the reception-side processing information and the transmission-side processing information includes information on an image file format conversion function.
An image processing apparatus according to a ninth aspect of the present invention is the image processing apparatus according to any one of the first to third aspects, wherein at least one of the transmission-side processing unit and the reception-side processing unit is an image processing apparatus. A color space conversion function is included, and at least one of the reception side processing information and the transmission side processing information includes information on an image color space conversion function.
[0016]
An image processing apparatus according to a tenth aspect of the present invention is the image processing apparatus according to any one of the first to ninth aspects, wherein at least one of the reception-side processing information and the transmission-side processing information is the transmission-side processing information. It is characterized by including information on the processing quality of an image in at least one of the side processing means and the reception side processing means.
An image processing apparatus according to an eleventh aspect of the present invention is the image processing apparatus according to any one of the first to ninth aspects, wherein at least one of the reception side processing information and the transmission side processing information is the transmission side processing information. It is characterized by including information on the image processing performance of at least one of the side processing means and the receiving side processing means.
An image processing apparatus according to a twelfth aspect of the present invention is the image processing apparatus according to any one of the first to eleventh aspects,
A transmission time prediction unit for predicting a transmission time of the image information, and
The processing determining means includes a means for determining at least the processing content of the image on the transmission side in consideration of the transmission time predicted by the transmission predicting means.
[0017]
An image processing apparatus according to a thirteenth aspect of the present invention is the image processing apparatus according to any one of the first to ninth aspects,
At least one of the reception-side processing information and the transmission-side processing information includes information regarding processing quality and processing performance of an image in at least one of the transmission-side processing unit and the reception-side processing unit, and
Further including means for determining the priority of the processing quality and processing speed of the image in the transmitting processing means and the receiving processing means,
The processing determining means includes a means for determining at least the processing content of the image on the transmission side based on the information on the priority determined by the means.
[0018]
The image communication system according to the present invention as set forth in claim 14 achieves the above object by:
Transmitting means for transmitting the image information, one or more transmitting processing means for processing the image information transmitted by the transmitting means, and a receiving side for processing the image information on the receiving side prior to transmitting the image information by the transmitting means Based on a notification receiving unit that receives a notification of the processing information from the receiving side and the receiving side processing information received by the notification receiving unit, at least a processing content to be performed on the image information is determined by the transmitting side processing unit. A transmission-side processing device including:
Receiving means for receiving image information, one or more receiving-side processing means for processing image information received by the receiving means, and processing of image information on the transmitting side prior to transmission of image information from a transmitting side Notification of transmission-side processing information, notification receiving means for receiving from the transmission side, based on the transmission-side processing information received by the notification receiving means, at least processing details of the image to be performed on the image information on the transmission side Communication of image information between the receiving-side processing device including a receiving-side processing determining unit for determining and a notification transmitting unit for notifying the transmitting side of the processing content determined by the receiving-side processing determining unit. ,
Acquire the version number of the method of determining the processing content of the transmission-side processing determination means and the reception-side processing determination means,
Comparing the version numbers of the determination methods of the transmission-side processing determination means and the reception-side processing determination means, and having the side having the newer version determination method determine the processing contents.
It is characterized by:
[0019]
[Action]
An image processing apparatus and an image communication system according to the present invention are configured such that the processing contents on at least one of the transmission side and the reception side are related to the processing function of the other side by the configuration as described in claims 1 to 14. Selection based on information, making the most of the image processing functions provided on both the transmitting side and the receiving side to improve communication possibility and perform image processing including transmission with optimal processing performance and processing quality It is possible to improve user convenience.
That is, an image processing apparatus according to claim 1 of the present invention comprises a transmitting unit for transmitting image information, at least one transmitting-side processing unit for processing image information transmitted by the transmitting unit, and transmission of image information by the transmitting unit. Prior to receiving, from the receiving side, a notification of receiving side processing information regarding processing of image information on the receiving side, based on notification receiving means received from the receiving side and the receiving side processing information received by the notification receiving means, at least the transmission The image processing apparatus further includes a processing determination unit that determines processing content to be performed on the image information by the side processing unit.
With such a configuration, in particular, it is possible to select and process image information processing on the transmission side so as to correspond to the image information processing function on the reception side, and to appropriately transmit image information to various models. It makes it possible and thus improves user convenience.
[0020]
Further, an image processing apparatus according to claim 2 of the present invention includes a receiving unit for receiving image information, at least one receiving side processing unit for processing image information received by the receiving unit, Prior to transmission, a notification of transmission-side processing information regarding processing of image information on the transmission side, a notification receiving unit that receives from the transmission side, based on the transmission-side processing information received by the notification receiving unit, at least, The image processing apparatus further includes processing determining means for determining the processing content of the image to be applied to the image information on the transmitting side, and notification transmitting means for notifying the transmitting side of the processing content determined by the processing determining means.
With such a configuration, in particular, based on the image information processing function of the transmitting side, processing of image information of the transmitting side corresponding to the image information processing function of the receiving side is selected from the receiving side, and images from various models are selected. It is possible to appropriately receive information, and to improve user convenience.
[0021]
An image processing apparatus according to a third aspect of the present invention includes a transmitting unit for transmitting image information, and one or more transmitting-side processing units for processing the image information transmitted by the transmitting unit, and transmitting the image information. A receiving side processing device that includes a receiving side processing device, a receiving unit that receives image information, and one or more receiving side processing units that process the image information received by the receiving unit. An image processing apparatus for transmitting, before transmitting the image information by the transmitting means, transmitting side processing information relating to processing of image information in the transmitting side processing means and receiving side processing relating to processing of image information in the receiving side processing means. Means for acquiring at least one of information, and at least one of the processing information on the transmitting side and the processing information on the receiving side, based on the image information before transmission. Processing determining means for determining at least one of the processing content to be performed by the transmitting processing means and the processing content to be performed by the receiving processing means on the received image information; and the processing content determined by the processing determining means. Means for reflecting on at least one of the transmission-side processing means and the reception-side processing means.
With such a configuration, in particular, based on at least one of the image information processing functions of the transmission side and the reception side, processing of image information on the transmission side is selected and processed, so that image information from various models can be appropriately processed. It is possible to receive the data, thereby improving user convenience.
[0022]
An image processing apparatus according to a fourth aspect of the present invention is the image processing apparatus according to any one of the first to third aspects, wherein at least one of the transmission-side processing unit and the reception-side processing unit includes an image scaling function. At least one of the reception-side processing information and the transmission-side processing information includes information relating to an image scaling function.
With such a configuration, in particular, it is possible to appropriately select the content of the image scaling process to be performed on at least one of the transmission side and the reception side, and to transmit and receive image information between various types of models, and thus to be convenient for the user. Improve.
An image processing apparatus according to a fifth aspect of the present invention is the image processing apparatus according to any one of the first to third aspects, wherein at least one of the transmission-side processing means and the reception-side processing means has an image gradation conversion function. And at least one of the reception-side processing information and the transmission-side processing information includes information relating to a gradation conversion function of an image.
With such a configuration, in particular, it is possible to appropriately select the gradation conversion processing of an image performed on at least one of the transmission side and the reception side, and to transmit and receive image information between various types of models. Improve the performance.
[0023]
An image processing apparatus according to claim 6 of the present invention is the image processing apparatus according to any one of claims 1 to 3, wherein at least one of the transmission-side processing unit and the reception-side processing unit includes an image compression function, In addition, at least one of the reception-side processing information and the transmission-side processing information includes information regarding an image compression function.
With such a configuration, in particular, it is possible to appropriately select the content of the compression processing of the image information to be performed on at least one of the transmission side and the reception side, and to transmit and receive the image information between various types of models. Improve.
An image processing device according to claim 7 of the present invention is the image processing device according to any one of claims 1 to 3, wherein at least one of the transmission-side processing unit and the reception-side processing unit includes an image decompression function, At least one of the reception-side processing information and the transmission-side processing information includes information relating to an image decompression function.
With such a configuration, in particular, it is possible to appropriately select the content of the image information decompression processing performed on at least one of the transmission side and the reception side, and to transmit and receive the image information between various types of models. Improve.
[0024]
An image processing apparatus according to an eighth aspect of the present invention is the image processing apparatus according to any one of the first to third aspects, wherein at least one of the transmission-side processing means and the reception-side processing means has an image file format conversion function. And at least one of the reception-side processing information and the transmission-side processing information includes information relating to an image file format conversion function.
With such a configuration, in particular, it is possible to appropriately select the file format conversion processing of the image information to be performed on at least one of the transmission side and the reception side, and to transmit and receive the image information between various types of models. Improve convenience.
An image processing apparatus according to a ninth aspect of the present invention is the image processing apparatus according to any one of the first to third aspects, wherein at least one of the transmission-side processing means and the reception-side processing means has an image color space conversion function. And at least one of the reception-side processing information and the transmission-side processing information includes information on a color space conversion function of an image.
[0025]
With such a configuration, in particular, it is possible to appropriately select the color space conversion processing content of image information to be performed on at least one of the transmission side and the reception side, and to transmit and receive image information between various types of models. Improve convenience.
An image processing apparatus according to a tenth aspect of the present invention is the image processing apparatus according to any one of the first to ninth aspects, wherein at least one of the reception-side processing information and the transmission-side processing information includes the transmission-side processing unit and the reception-side processing information. It contains information on the processing quality of the image in at least one of the side processing means.
With such a configuration, in particular, the processing content of the image information to be performed on at least one of the transmission side and the reception side is appropriately selected according to the quality of the processing process on the communication partner side, and the image quality is optimally selected. It is possible to process information.
An image processing apparatus according to an eleventh aspect of the present invention is the image processing apparatus according to any one of the first to ninth aspects, wherein at least one of the reception-side processing information and the transmission-side processing information includes the transmission-side processing unit and the reception-side processing information. The information includes information on the image processing performance of at least one of the side processing means.
With such a configuration, in particular, the processing performance of image information performed on at least one of the transmission side and the reception side appropriately selects processing contents according to the performance of processing processing on the other side, and image information with optimal performance. Enables processing.
[0026]
An image processing apparatus according to a twelfth aspect of the present invention is the image processing apparatus according to any one of the first to eleventh aspects, further comprising a transmission time predicting means for predicting a transmission time of the image information, and the processing determining means. Includes means for deciding at least the processing content of the image on the transmission side in consideration of the transmission time predicted by the transmission prediction means.
With such a configuration, in particular, the processing content of image information to be performed on at least one of the transmission side and the reception side appropriately selects processing content according to the estimated transmission time from the transmission side to the reception side, and It is possible to process and transmit image information with high performance.
[0027]
According to a thirteenth aspect of the present invention, in the image processing apparatus according to any one of the first to ninth aspects, at least one of the reception-side processing information and the transmission-side processing information includes the transmission-side processing unit and the reception-side processing information. Including information on the processing quality and processing performance of the image in at least one of the side processing means, and further including means for determining the priority of the processing quality and processing speed of the image in the transmitting processing means and the receiving processing means The processing determining means includes means for determining at least the processing content of the image on the transmission side based on the information on the priority determined by the means.
With such a configuration, in particular, the content of processing of image information to be performed on at least one of the transmission side and the reception side is determined based on the use form of the image information on the reception side, and is determined according to the priority of quality and processing speed to be presented. According to the present invention, it is possible to appropriately select a processing content according to the processing, and to process and transmit image information with optimum performance and quality.
[0028]
An image communication system according to a fourteenth aspect of the present invention provides a transmitting means for transmitting image information, at least one transmitting processing means for processing the image information transmitted by the transmitting means, and prior to transmitting the image information by the transmitting means. A notification of receiving side processing information regarding processing of image information on a receiving side, based on a notification receiving unit receiving from the receiving side and the receiving side processing information received by the notification receiving unit, at least the transmitting side processing information; A transmitting-side processing device including a transmitting-side processing determining unit that determines processing content to be performed on the image information by a unit, a receiving unit that receives the image information, and one or more units that process the image information received by the receiving unit Prior to the transmission of image information from the transmission side, the receiving side processing means of the transmission side transmits notification of transmission side processing information regarding the processing of image information on the transmission side. Notification receiving means for receiving from a transmitting side, based on the transmitting side processing information received by the notification receiving means, at least receiving side processing determining means for determining processing details of an image to be applied to image information on the transmitting side; and A communication processing unit that notifies the transmission side of the processing content determined by the reception-side processing determination unit; and a reception-side processing device. Obtain a version number of the method of determining the processing content of the receiving processing determining means, compare the version numbers of the determining methods of the transmitting processing determining means and the receiving processing determining means, and have a newer version determining method. Side decides the processing content.
With such a configuration, in particular, in the determination of the processing content in the means for determining the processing content of the image information performed on at least one of the transmission side and the reception side, the processing content is appropriately determined using a newer version determination method. It is possible to select and transmit image information between various models, thereby improving user convenience.
[0029]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, an image processing apparatus and an image communication system according to the present invention will be described in detail based on an embodiment of the present invention with reference to the drawings.
FIG. 1 is a block diagram showing a configuration of a digital still camera system having a communication function according to one embodiment of the present invention. The digital still camera system includes an image processing apparatus and an image communication system according to the present invention. Is incorporated.
A digital still camera 1 constituting the digital still camera system shown in FIG. 1 includes a system control unit 2, an imaging unit 3, an image processing unit 4, a display control unit 5, an LCD (liquid crystal display) 6, a recording media interface unit 7, and the like. , A recording medium (recording medium) 8, an operation interface unit 9, and a communication interface unit 10. The system shown in FIG. 1 further includes a mobile phone 11, a telephone communication network 12, and a PDA (Personal Digital Assistant) device 13 in addition to the digital still camera 1.
[0030]
First, each component of the digital still camera 1 having a communication function will be described. The system control unit 2 controls the entire digital still camera 1 and includes a CPU (central processing unit), a memory, a timer, and the like. The imaging unit 3 is a unit that captures a subject image and converts it into an electronic image signal, and includes optical components such as a lens and a lens drive motor, a CCD (charge coupled device) image sensor, a CCD drive circuit, and an A / D converter. An (analog-digital) converter and the like are provided. The image processing unit 4 performs various kinds of image processing on the image signal obtained by the imaging unit 3 and controls the driving timing of a CCD image pickup device of the imaging unit 3 and the operation of a lens driving motor to perform focusing and exposure adjustment. And an image compression / decompression unit, which includes an image processing DSP (digital signal processor), a memory, and the like. The display control unit 5 is a unit that performs signal processing for displaying the image signal processed by the image processing unit 4 on the LCD 6, generates various graphic images for a user interface, and displays the graphic image on the LCD 6. A D / A (digital-analog) converter and an on-screen display controller are provided. The LCD 6 displays an image such as a photographed image and displays graphics for a user interface.
[0031]
The recording medium interface unit 7 is an interface between the recording medium 8 for writing information to the recording medium 8 or reading recorded information from the recording medium 8 and includes, for example, a memory card controller. It is composed. The recording medium 8 is a medium (medium) for recording, that is, nonvolatilely storing and compressing various kinds of information relating to a compressed image signal and an image. The recording medium 8 enables nonvolatile storage. For example, it is configured using a flash memory or the like, and is configured to be detachable from the digital still camera device 1 via the recording media interface unit 7. The operation interface unit 9 includes operation input hardware for a user interface such as various keys and dials (not shown) and detects the state of the operation input hardware. It is configured using. The communication interface unit 10 is a unit that performs data communication with the mobile phone 11, and includes a communication controller and the like.
[0032]
Further, other components (parts other than the digital still camera 1) constituting the digital still camera system shown in FIG. 1 will be described. That is, the mobile phone 11 is connected to the digital still camera 1 by the communication interface unit 10. The telephone communication network 12 includes a mobile telephone communication network, a PSTN (Public Switched Telephone Network), and an ISDN. The PDA (Personal Digital Assistant) device 13 is a portable information device having a communication function such as a so-called palm computer, handheld computer, and electronic organizer, and is connected to the telephone communication network 12.
Next, the operation of the digital still camera system configured as described above will be described. First, the operation is the same as that of a conventional general system to which the present invention is not applied, and differs from the present invention. The operation of a conventional general system for comparison will be described.
[0033]
Prior to photographing, the user operates an operation unit (not shown) such as a key and a dial to selectively determine a photographing mode from, for example, a high image quality mode, a low image quality mode, and a document photographing mode. Such operation contents of the user are determined by the system control unit 2 through the operation interface unit 9. The system control unit 2 generates guidance graphics for guidance display via the display control unit 5 according to the content of the operation, displays the guidance graphics on the LCD 6, and prompts the user for the next operation. When the shooting mode is determined, the system control unit 2 sets processing parameters corresponding to the shooting mode in the image processing unit 4.
After preparation for shooting is completed, when a half-pressed state of a release button (included in the operation unit) (not shown) is detected, the operation is performed in the same manner as in the previous mode setting. The determination is made by the system control unit 2 via the unit 9.
Under the control of the image processing unit 4, the imaging unit 3 starts an imaging operation for displaying a preview image prior to actual shooting. The captured data is sent to the image processing unit 4 continuously. After performing processing such as color space conversion, gamma correction, and white balance adjustment on the image data, the image processing unit 4 sends the image data to the display control unit 5. At this time, the image processing unit 4 simultaneously detects the focus and the exposure, and controls the imaging unit 3 accordingly to perform adjustment.
[0034]
The display control unit 5 performs necessary signal processing on the sent image data, displays the processed image data on the LCD 6, and presents the user with an imaging state.
Next, when the release button is further pressed down (fully pressed state), the operation is similarly determined by the system control unit 2 through the operation interface unit 9.
The imaging unit 3 captures a predetermined image under the control of the image processing unit 4 and sends it to the image processing unit 4, and the image processing unit 4 performs image processing and compression processing according to the shooting mode.
The system control unit 2 reads out the compressed image data, adds header information to the compressed image data, and writes the data to the recording medium 8 via the recording medium interface unit 7. Here, the header information includes information on the selected shooting mode, information on the shooting date and time, and the like.
[0035]
Thus, a series of photographing operations is completed.
Next, the operation of image transmission by the communication function will be described.
The user connects the mobile phone 11 to the digital still camera 1 through the communication interface unit 10 before using the communication function. As in the case of the setting of the shooting mode described above, the user specifies the transmission destination of the image and selects the image to be transmitted.
In a conventional general system, a system control unit 2 controls a communication interface unit 10 to make a call using a mobile phone 11 and, when a communication path is established, first receives a terminal name of a partner terminal, A terminal attribute table stored in the control unit 2 is searched in advance to determine a transmission image format.
Table 1 shows an example of the terminal attribute table. In Table 1, the terminal name indicates the type of the transmission partner terminal, and the terminal attribute indicates the image size, color space, and gradation that each transmission partner terminal can transmit (that is, can be received and used by the partner terminal). It shows numbers, compression formats, image formats, and the like.
[0036]
[Table 1]
Terminal attribute table

[0037]
After determining the transmission image format, the system control unit 2 reads out the specified image file from the recording medium 6, transfers the image file to the image processing unit 4 as necessary, performs image processing such as scaling, and then performs further image processing. And converts the image data according to a predetermined protocol.
If the terminal attribute cannot be determined, such as a terminal name that does not exist in the table of Table 1, processing is interrupted as a transmission impossible error, and a guidance message indicating that fact is displayed on the LCD 6.
Next, the operation of image transmission when the present invention is applied will be described.
First, a communication flow (corresponding to claims 1, 2 and 14) in the system according to the present invention will be described. 2 to 5 show communication procedure diagrams schematically showing the flow of signal transmission and reception in communication. 2 is a communication flow at the time of connection, FIG. 5 is a communication flow at the time of disconnection, and FIG. 3 is a connection when the transmitting side determines image processing contents, that is, when the transmitting side is a master (FIG. 2). FIG. 4 shows a communication flow between the connection (FIG. 5) and disconnection (FIG. 5), and FIG. 4 shows a communication flow between the connection (FIG. 2) and disconnection (FIG. 5) when the receiving side is the master.
[0038]
In FIG. 2, a normal call connection procedure via a network is performed from the calling to the connection confirmation of the calling terminal (transmitting side) and the connection response of the called terminal (receiving side).
When the call is connected, first, the receiving side notifies the transmitting side of the version number of the algorithm that determines the processing content of the image (provided by the terminal itself). The transmitting side compares the notified version number with a similar version number in its own terminal.If the version number of its own terminal is the same or newer, its own terminal becomes the master terminal. Side is determined as the master terminal.
FIG. 5 shows a normal call disconnection procedure via a network.
FIG. 3 shows a processing procedure when the transmitting side is determined to be the master terminal in the procedure of FIG. 2 as described above. Upon receiving the notification that the transmitting side is the master terminal, the receiving side notifies information about the image format of the own terminal and the image processing function of the own terminal. Here, as the image format, a plurality of formats requested by the receiving side can be notified.
[0039]
The transmitting side determines image processing contents to be performed on the transmitting side based on the notified information and information on the source image format and the image processing function of the terminal itself, and notifies processing contents to be performed on the receiving side. Here, if the processing content cannot be determined, in other words, even if it has the image processing function provided on both the transmitting side and the receiving side, it is necessary to convert the image into any of the image formats used on the receiving side. If it is determined that the transmission is not possible, the transmission is notified and the process proceeds to the disconnection process (FIG. 5). The method for determining the processing will be described later.
The transmitting side processes the transmission source image according to the determined processing content and sequentially transmits the images. Transmission of image data is performed by transmitting a predetermined data amount in packet units. When the transmission of the image data is completed, the receiving side processes the received image according to the previously notified processing contents, records the image on the recording medium, and disconnects the connection according to the procedure shown in FIG.
[0040]
FIG. 4 shows a procedure of processing when the receiving side is the master terminal in the procedure of FIG. 2 described above.
When the transmitting side notifies that the receiving side is the master terminal, the transmitting side notifies information about the source image format and the image processing function of the terminal.
The receiving side determines the content of the image processing to be performed on the transmitting side based on the notified information, the image format of the own terminal, and the information on the image processing function of the own terminal, and notifies the determined content. Here, when the processing content cannot be determined, the reception impossibility is notified, and the procedure shifts to the disconnection procedure shown in FIG. Note that, as described above, the method of determining the processing will be described later.
The transmission side processes the transmission source image according to the notified processing content and sequentially transmits the images. Transmission of image data is performed by transmitting a predetermined data amount in packet units.
When the data transmission is completed, the receiving side processes the received image according to the processing content determined previously, records the image on the recording medium, and disconnects the connection according to the procedure shown in FIG.
Next, some examples of the above-described method of determining the processing content will be described.
Table 2 shows an example of information on the notified image processing function.
[0041]
[Table 2]
Image processing function to be notified

[0042]
In Table 2, the function classification indicates a large classification of image processing functions provided in the terminal (corresponding to claims 4 to 9 and the like), and the functions indicate detailed functions and restrictions, respectively.
The magnification step indicates a step of a magnification that can be processed in the magnification processing, that is, arbitrary magnification and integer magnification.
The maximum / minimum size that can be processed indicates an original image that can be processed or an image size after processing. Whether to indicate the processable original image or the processed image size is determined for each process. For example, the gradation conversion of enlargement / reduction / expansion / color increase indicates the size after the process.
The processable format indicates a processable image format.
The processing quality index is an index representing image deterioration due to processing.
The processing performance indicates the processing time per million pixels (ms / Mp) or the processing time per processing (ms).
[0043]
The processable profile indicates a profile that can be processed in the compression / decompression process.
The file format conversion also includes information on a file format that can be created.
In notifying actual information, predetermined codes corresponding to the respective functions are transmitted.
Hereinafter, a method for determining the processing content will be specifically described.
Table 3 shows the source image format. Tables 4 and 5 show the first and second receiving-side image formats. As described above, a plurality of formats can be designated as the receiving-side image format. In this example, one of the formats shown in Table 4 or Table 5 is requested.
[0044]
[Table 3]
Source image format

[0045]
[Table 4]
First receiver image format

[0046]
[Table 5]
Second receiver image format

Table 6 shows the image processing functions on the transmitting side, and Table 7 shows the image processing functions on the receiving side.
[0047]
[Table 6]
Image processing function on the sending side

[0048]
[Table 7]
Image processing function on the receiving side

[0049]
FIG. 6 shows the flow of processing related to the determination of the processing content.
Hereinafter, description will be given according to the flowchart shown in FIG.
First, the master terminal receives the image processing function information of the partner terminal according to the communication procedure described above, and receives a receivable image format (when the transmission side is master) or a transmission image format (when the reception side is master) ( Steps S1 and S2). Then, the master terminal determines which of the quality and the processing speed is prioritized (when the receiving side is the master), or receives the priority from the partner terminal (when the transmitting side is the master) (step S3) (step S3). A method that prioritizes processing quality corresponds to claim 10, and a method that prioritizes processing speed corresponds to claim 11.)
[0050]
The above-mentioned priorities can be set by the user or automatically determined depending on how the terminal uses the image information (the priorities are determined in this manner, and processing is performed based on the priorities. The method of determining the contents corresponds to claim 13.) This priority specification can be performed by both the transmitting terminal and the receiving terminal regardless of whether the master terminal is the transmitting terminal or the receiving terminal. There are the following four combinations in this case.
1) The transmitting side follows the specification received from the receiving side at the time of master.
2) When the transmitting side is a master, it follows the determination on the transmitting side.
3) The receiving side follows the specification received from the transmitting side at the time of master.
4) When the receiving side is the master, it follows the determination on the receiving side.
[0051]
When the priority is specified in both the transmitting terminal and the receiving terminal, the determination of the transmitting terminal is followed.
When the master terminal (system control unit 2) is notified of the above-mentioned information, the master terminal (based on the combination of the image processing function of the partner terminal and the image processing function of the own terminal) receives the information, and receives the image format of the transmission source. Then, all the combinations of processes that can be converted into are extracted, and a table for determining the process contents is created (step S4).
Table 8 shows a processing determination table. In Table 8, the numbers indicate the serial numbers assigned for explanation, and the transmission side processing / reception side processing indicates the extraction result of the combination of the above-described processing. Other items will be described later.
[0052]
[Table 8]
Processing judgment table

[0053]
If there is no processable combination, a transmission disable notification (at the time of the master on the transmission side) / a reception disable notification (at the time of the master on the reception side) is transmitted to the partner terminal, and the process is terminated (steps S5 to S6). .
If there is only one combination that can be processed, the processing is determined as the processing content (step S7).
If there are two or more combinations that can be processed, (the system control unit 2 of) the master terminal calculates the processing time. The processing time indicates the processing performance of the image processing function of the partner terminal and the image processing function of the own terminal (Tables 6 and 7) and the processing performance of each of the combinations that can be processed (numbers 1 to 5 in Table 8). It is calculated from the image size processed in the processing (step S8).
For example, in the process for No. 1 in Table 8, individual processing times are as shown in Expressions 1 to 8.
[0054]
JPEG2000 decompression processing
2048 × 1536 × 300E-6 = 944 (ms) (Equation 1)
1/2 reduction processing
2048 × 1536 × 12000E-6 = 37749 (ms) (Expression 2)
JPEG compression processing
1024 × 768 × 200E-6 = 157 (ms) (Equation 3)
JPEG decompression processing
1024 × 768 × 25000E-6 = 19661 (ms) (Equation 4)
5/8 reduction processing
1024 × 768 × 600E-6 = 472 (ms) (Equation 5)
YUV422 → YUV420 processing
640 × 480 × 720E-6 = 222 (ms) (Equation 6)
JPEG compression processing
640 × 480 × 25000E-6 = 7680 (ms) (Equation 7)
JFIF file creation processing
2 (ms) (Equation 8)
The processing time 66.9 (s) is calculated by adding all of the results of Equations 1 to 8.
[0055]
Subsequently, (the system control unit 2 of) the master terminal calculates the processing quality index. The processing quality index is calculated from the processing quality indices of the image processing function of the partner terminal and the image processing function of the own terminal (Tables 6 and 7) for all combinations that can be processed (Nos. 1 to 5 in Table 8). It is calculated (step S9).
For example, in the process for No. 1 in Table 8, the processing quality index is calculated as in the following Expression 9.
(100 (JPEG2000 extension processing) / 100
× 90 (１／ reduction processing) / 100
× 90 (JPEG compression processing) / 100
× 100 (JPEG expansion processing) / 100
× 75 (5/8 reduction processing) / 100
× 85 (YUV422 → YUV420 treatment) / 100
× 90 (JPEG compression processing) / 100
× 100 (JFIF file creation processing) / 100)
× 100
= 46.5 (Equation 9)
[0056]
Subsequently, (the system control unit 2 of) the master terminal calculates a predicted transmission time. In calculating the predicted transmission time, the data amount is calculated from the transmission data format for all the combinations that can be processed (Nos. 1 to 5 in Table 8), and the predicted transmission time is calculated from the transmission rate of the transmission medium ( Step S10) (In this case, when the estimated transmission time is reflected in the determination of the processing content, it corresponds to claim 12).
For example, in the process for No. 1 in Table 8, the estimated transmission time is calculated as follows.
The transmission data format is JPEG data, and the JPEG compression rate is 1 / 7.7 (this value is stored in the system control unit 2 in advance as a standard compression rate for JPEG compression). Equation 10
[0057]
1024 × 768 × 2 × 1 / 7.7 = 200 (KB) (Equation 10)
Assuming that the transmission rate is 128 kbps (this value is a value notified via the communication interface unit 10 at the time of call connection as the transmission capacity of the connected network), the transmission expected time is calculated by Expression 11.
200 × 1024 × 8 / (128 × 1000) = 12.8 (s) (Equation 11) When the calculation is completed (each item in Table 8 is filled) as described above, the system control unit of the master terminal ( In 2), the processing content is determined. In deciding, the optimum one is selected from Table 8 according to the above-mentioned priority of quality / processing speed. For example, if priority is given to quality, the process of number 2 having the highest quality index in Table 8 is selected. Alternatively, if priority is given to the processing speed, the processing of number 1 having the shortest “processing + transmission time” in Table 8 is selected (step S11).
[0058]
The master terminal transmits the determined processing content and a notification that transmission is possible to the partner terminal (step S12), performs image processing according to the determined processing content (step S13), and transmits image data (step S13). S14).
In the above description, in at least one of the image processing apparatuses on the transmission side and the reception side, the processing content of the image information is selected. However, the configuration for selecting the processing content is the transmission side and the reception side. May be distributed to both image processing apparatuses, and may be provided separately from the image processing apparatuses on the transmission side and the reception side so that notification can be exchanged between them. Correspondence).
[0059]
【The invention's effect】
As described above, according to the present invention, the processing content on at least one of the transmitting side and the receiving side is selected based on the information on the processing function on the other side, and the image processing function provided on both the transmitting side and the receiving side In addition to maximizing the efficiency of communication, image processing including transmission can be performed with optimum processing performance and processing quality, and user convenience can be improved.
That is, according to the image processing apparatus of claim 1 of the present invention, a transmitting unit for transmitting image information, at least one transmitting-side processing unit for processing image information transmitted by the transmitting unit, Prior to transmission, based on the receiving side processing information received by the notification receiving means and the notification receiving means, the notification of the receiving side processing information regarding the processing of the image information on the receiving side, from the receiving side, at least the By providing processing determination means for determining the processing content to be performed on the image information by the transmission side processing means, in particular, processing of image information is selected and performed on the transmission side so as to correspond to the image information processing function on the reception side. By processing, it is possible to appropriately transmit image information to various types of models, thereby improving user convenience.
[0060]
According to the image processing apparatus of claim 2 of the present invention, receiving means for receiving image information, at least one receiving processing means for processing the image information received by the receiving means, and an image from the transmitting side Prior to transmission of information, a notification of transmission-side processing information regarding processing of image information on the transmission side, a notification receiving unit receiving from the transmission side, based on the transmission-side processing information received by the notification receiving unit, By providing at least a processing determining means for determining the processing content of the image to be applied to the image information on the transmitting side and a notification transmitting means for notifying the transmitting side of the processing content determined by the processing determining means, Based on the image information processing function of the transmitting side, the processing of image information of the transmitting side corresponding to the image information processing function of the receiving side is selected from the receiving side, so that various models It possible to properly receive Luo image information, it is possible to turn enhance the user experience.
[0061]
According to the image processing apparatus of claim 3 of the present invention, the image processing apparatus includes a transmitting unit for transmitting image information and one or more transmitting-side processing units for processing image information transmitted by the transmitting unit, and transmits the image information. A receiving-side processing device for receiving the image information, the receiving-side processing device including a receiving unit for receiving the image information, and one or more receiving-side processing units for processing the image information received by the receiving unit; An image processing apparatus comprising: a transmission-side processing information relating to processing of image information in the transmission-side processing means and a reception relating to processing of image information in the reception-side processing means, prior to transmission of image information by the transmission means. Means for acquiring at least one of the side processing information, and image information before transmission based on at least one of the transmission side processing information and the reception side processing information. Processing determination means for determining at least one of the processing content to be performed by the transmission-side processing means and the processing content to be performed by the reception-side processing means on the received image information; and the processing content determined by the processing determination means. Means for reflecting on at least one of the transmission-side processing means and the reception-side processing means, in particular, selecting the processing of the transmission-side image information based on at least one of the transmission-side and reception-side image information processing functions. In addition, by performing processing, it is possible to appropriately receive image information from various types of models, and it is possible to improve user convenience.
[0062]
According to the image processing device of the fourth aspect of the present invention, in the image processing device of any one of the first to third aspects, at least one of the transmission-side processing unit and the reception-side processing unit has an image scaling function. And, at least one of the receiving-side processing information and the transmitting-side processing information includes information relating to the image scaling function, and in particular, the image scaling processing performed by at least one of the transmitting side and the receiving side. Appropriate selection enables transmission and reception of image information between various types of models, thereby improving user convenience.
[0063]
According to a fifth aspect of the present invention, in the image processing apparatus according to any one of the first to third aspects, at least one of the transmission-side processing unit and the reception-side processing unit performs image gradation conversion. Function, and at least one of the reception-side processing information and the transmission-side processing information includes information related to the gradation conversion function of the image, and in particular, the gradation conversion of the image performed on at least one of the transmission side and the reception side Processing contents can be appropriately selected, and image information can be transmitted / received between various types of models, thereby improving user convenience.
[0064]
According to the image processing apparatus of claim 6 of the present invention, in the image processing apparatus of any one of claims 1 to 3, at least one of the transmission side processing means and the reception side processing means has an image compression function. In addition, by including at least one of the reception-side processing information and the transmission-side processing information including information on an image compression function, in particular, appropriately compressing image information to be performed on at least one of the transmission side and the reception side This makes it possible to transmit and receive image information between selected models and various models, thereby improving user convenience.
According to the image processing apparatus of claim 7 of the present invention, in the image processing apparatus of any one of claims 1 to 3, at least one of the transmission processing means and the reception processing means has an image decompression function. In addition, by including at least one of the reception-side processing information and the transmission-side processing information including information relating to an image decompression function, in particular, it is possible to appropriately perform decompression processing of image information performed on at least one of the transmission side and the reception side. This makes it possible to transmit and receive image information between selected models and various models, thereby improving user convenience.
[0065]
According to the image processing apparatus of claim 8 of the present invention, in the image processing apparatus of any one of claims 1 to 3, at least one of the transmission-side processing means and the reception-side processing means performs image file format conversion. In particular, the file format of image information performed by at least one of the transmission side and the reception side by including at least one of the reception side processing information and the transmission side processing information including information related to an image file format conversion function. It is possible to appropriately select the content of the conversion process, to transmit and receive image information between various types of models, and to improve user convenience.
According to the image processing apparatus of the ninth aspect of the present invention, in the image processing apparatus of any one of the first to third aspects, at least one of the transmission-side processing means and the reception-side processing means performs image color space conversion. Including the function, and at least one of the receiving-side processing information and the transmitting-side processing information includes information on a color space conversion function of an image, and in particular, the color space of image information performed on at least one of the transmitting side and the receiving side It is possible to appropriately select the content of the conversion process, to transmit and receive image information between various types of models, and to improve user convenience.
[0066]
According to the image processing apparatus of claim 10 of the present invention, in the image processing apparatus of any one of claims 1 to 9, at least one of the reception side processing information and the transmission side processing information is the transmission side processing means. And information on the processing quality of the image in at least one of the processing means on the receiving side, the processing content of the image information performed on at least one of the transmitting side and the receiving side depends on the quality of the processing on the communication partner side. It is possible to appropriately select the processing contents that have been processed, and to process the image information with optimal quality.
According to the image processing apparatus of claim 11 of the present invention, in the image processing apparatus of any one of claims 1 to 9, at least one of the reception side processing information and the transmission side processing information is the transmission side processing means. In addition, by including information on the processing performance of the image in at least one of the processing means on the receiving side, particularly, the processing performance of the image information performed on at least one of the transmitting side and the receiving side is a processing according to the performance of the processing processing on the partner side It is possible to appropriately select the contents and process the image information with optimal performance.
[0067]
According to the image processing apparatus of the twelfth aspect of the present invention, in the image processing apparatus of any one of the first to eleventh aspects, the image processing apparatus further includes a transmission time estimating means for estimating a transmission time of the image information, and The determination means includes means for determining at least the processing content of the image on the transmission side in consideration of the transmission time predicted by the transmission prediction means, and in particular, image information performed on at least one of the transmission side and the reception side As for the processing contents, it is possible to appropriately select the processing contents according to the estimated transmission time from the transmission side to the reception side, and to process and transmit the image information with optimal performance.
[0068]
According to the image processing apparatus of claim 13 of the present invention, in the image processing apparatus of any one of claims 1 to 9, at least one of the reception side processing information and the transmission side processing information is the transmission side processing means. And information on processing quality and processing performance of the image in at least one of the receiving processing means, and a means for determining the priority of the processing quality and processing speed of the image in the transmitting processing means and the receiving processing means. In addition to the above, the processing determination means includes means for determining at least the processing content of the image on the transmission side based on the information on the priority determined by the means, and in particular, at least one of the transmission side and the reception side The processing content of the image information to be performed by the user determines the quality and processing speed determined and presented based on the usage form of the image information on the receiving side. Priority properly selecting the processing contents corresponding to, it is possible to process and transmit the image information with optimal performance and quality.
[0069]
According to the image communication system of claim 14 of the present invention, transmitting means for transmitting image information, at least one transmitting processing means for processing image information transmitted by the transmitting means, transmission of image information by the transmitting means Prior to receiving, from the receiving side, a notification of receiving side processing information regarding processing of image information on the receiving side, based on notification receiving means received from the receiving side and the receiving side processing information received by the notification receiving means, at least the transmission A transmitting-side processing device including a transmitting-side processing determining unit that determines processing to be performed on the image information by the side processing unit, a receiving unit that receives the image information, and processing the image information received by the receiving unit 1 One or more receiving side processing means, prior to transmission of image information from the transmitting side, a notification of transmitting side processing information regarding processing of image information on the transmitting side, Notification receiving means for receiving from the transmitting side, based on the transmitting side processing information received by the notification receiving means, at least, receiving side processing determining means for determining processing details of an image to be applied to image information on the transmitting side; A notification processing unit that notifies the transmission side of the processing content determined by the reception-side processing determination unit; and a reception-side processing device including: a transmission-side processing determination unit; Obtain the version number of the method of determining the processing content of the receiving side processing determining means, compare the version number of the determining method of the transmitting side processing determining means and the determining method of the receiving side processing determining means, and determine a newer version determining method. By having the processing side determine the processing content, in particular, the processing processing of the image information performed by at least one of the transmission side and the reception side is determined. In the determination of the processing contents in the means to perform, the processing contents are appropriately selected by using a newer version determination method, and image information can be transmitted and received between various models, thereby improving user convenience. be able to.
[Brief description of the drawings]
FIG. 1 is a block diagram schematically showing a configuration of a digital still camera system having a communication function according to one embodiment of the present invention.
FIG. 2 is a schematic diagram showing a flow of a communication procedure when a call is connected in the digital still camera system of FIG. 1;
FIG. 3 is a schematic diagram showing a flow of a communication procedure in image transfer when a transmitting side is a master in the digital still camera system of FIG. 1;
FIG. 4 is a schematic diagram showing a flow of a communication procedure in image transfer when a receiving side is a master in the digital still camera system of FIG. 1;
FIG. 5 is a schematic diagram showing a flow of a communication procedure at the time of disconnection of a call connection in the digital still camera system of FIG. 1;
FIG. 6 is a flowchart showing a flow of processing relating to determination of processing contents in the digital still camera system of FIG. 1;
[Explanation of symbols]
1 Digital still camera
2 System control unit
3 Imaging unit (CCD imaging device)
4 Image processing unit
5 Display control unit
6 LCD (Liquid Crystal Display)
7 Recording media interface
8 Recording media
9 Operation interface
10 Communication interface
11 Mobile phone
12 Telephone communication network
13 PDA device

Claims

Transmitting means for transmitting image information;
One or more transmission-side processing means for processing image information transmitted by the transmission means,
Prior to the transmission of the image information by the transmitting unit, a notification of receiving side processing information regarding processing of the image information on the receiving side, a notification receiving unit that receives from the receiving side,
An image processing apparatus comprising: a processing determining unit configured to determine at least a processing content to be performed on the image information by the transmission side processing unit based on the reception side processing information received by the notification receiving unit. .

Receiving means for receiving image information;
One or more receiving processing means for processing image information received by the receiving means,
Prior to transmission of image information from the transmission side, a notification of transmission side processing information regarding processing of image information on the transmission side, notification receiving means for receiving from the transmission side,
Based on the transmission-side processing information received by the notification receiving means, at least, processing determination means for determining the processing content of the image to be performed on the image information on the transmission side,
An image processing apparatus comprising: a notification transmission unit that notifies the transmission side of the processing content determined by the processing determination unit.

A transmitting unit for transmitting the image information, including a transmitting unit for transmitting the image information and one or more transmitting processing units for processing the image information transmitted by the transmitting unit;
An image processing apparatus comprising: a receiving unit that receives image information; and one or more receiving-side processing units that process image information received by the receiving unit; and a receiving-side processing device that receives the image information. So,
Means for acquiring at least one of transmission-side processing information relating to processing of image information in the transmission-side processing means and reception-side processing information relating to processing of image information in the receiving-side processing means, prior to transmission of image information by the transmission means. When,
Based on at least one of the transmission-side processing information and the reception-side processing information, processing details to be performed by the transmission-side processing means on image information before transmission and processing details to be performed by the reception-side processing means on image information after reception Processing determining means for determining at least one of:
Means for reflecting the processing content determined by the processing determining means on at least one of the transmitting processing means and the receiving processing means.

At least one of the transmission-side processing unit and the reception-side processing unit includes an image scaling function, and at least one of the reception-side processing information and the transmission-side processing information includes information related to an image scaling function. The image processing apparatus according to claim 1, wherein:

At least one of the transmission-side processing unit and the reception-side processing unit includes an image gradation conversion function, and at least one of the reception-side processing information and the transmission-side processing information includes information regarding an image gradation conversion function. The image processing apparatus according to claim 1, wherein:

At least one of the transmission processing means and the reception processing means includes an image compression function, and at least one of the reception processing information and the transmission processing information includes information related to an image compression function. The image processing apparatus according to claim 1.

At least one of the transmission processing means and the reception processing means includes an image decompression function, and at least one of the reception processing information and the transmission processing information includes information regarding an image decompression function. The image processing apparatus according to claim 1.

At least one of the transmission processing means and the reception processing means includes an image file format conversion function, and at least one of the reception processing information and the transmission processing information includes information regarding an image file format conversion function. The image processing apparatus according to claim 1, wherein:

At least one of the transmission-side processing means and the reception-side processing means includes an image color space conversion function, and at least one of the reception-side processing information and the transmission-side processing information includes information regarding an image color space conversion function. The image processing apparatus according to claim 1, wherein:

10. The image processing apparatus according to claim 1, wherein at least one of the reception-side processing information and the transmission-side processing information includes information on image processing quality in at least one of the transmission-side processing unit and the reception-side processing unit. The image processing device according to claim 1.

10. The image processing apparatus according to claim 1, wherein at least one of the reception-side processing information and the transmission-side processing information includes information relating to image processing performance in at least one of the transmission-side processing unit and the reception-side processing unit. The image processing device according to claim 1.

The image processing apparatus further includes transmission time prediction means for predicting the transmission time of the image information, and the processing determination means determines at least the processing content of the image on the transmission side in consideration of the transmission time predicted by the transmission prediction means. The image processing apparatus according to claim 1, further comprising a unit.

At least one of the reception-side processing information and the transmission-side processing information includes information on image processing quality and processing performance in at least one of the transmission-side processing unit and the reception-side processing unit, and the transmission-side processing unit and the reception-side processing unit Further including means for determining the priority of the processing quality and processing speed of the image in the processing means,
10. The apparatus according to claim 1, wherein the processing determining means includes means for determining at least processing contents of the image on the transmission side based on information of the priority determined by the means. An image processing apparatus according to the item.

Transmitting means for transmitting the image information, one or more transmitting processing means for processing the image information transmitted by the transmitting means, and a receiving side for processing the image information on the receiving side prior to transmitting the image information by the transmitting means Based on a notification receiving unit that receives a notification of the processing information from the receiving side and the receiving side processing information received by the notification receiving unit, at least a processing content to be performed on the image information is determined by the transmitting side processing unit. A transmission-side processing device including:
Receiving means for receiving image information, one or more receiving-side processing means for processing image information received by the receiving means, and processing of image information on the transmitting side prior to transmission of image information from a transmitting side Notification of transmission-side processing information, notification receiving means for receiving from the transmission side, based on the transmission-side processing information received by the notification receiving means, at least processing details of the image to be performed on the image information on the transmission side Communication of image information between the receiving-side processing device including a receiving-side processing determining unit for determining and a notification transmitting unit for notifying the transmitting side of the processing content determined by the receiving-side processing determining unit. ,
Acquire the version number of the method of determining the processing content of the transmission-side processing determination means and the reception-side processing determination means,
An image communication system characterized in that the version numbers of the determination methods of the transmission-side processing determination means and the reception-side processing determination means are compared, and the side having the newer version determination method determines processing contents.