CN100414988C - 图像处理系统、摄像装置和方法 - Google Patents

图像处理系统、摄像装置和方法 Download PDF

Info

Publication number
CN100414988C
CN100414988C CNB038228939A CN03822893A CN100414988C CN 100414988 C CN100414988 C CN 100414988C CN B038228939 A CNB038228939 A CN B038228939A CN 03822893 A CN03822893 A CN 03822893A CN 100414988 C CN100414988 C CN 100414988C
Authority
CN
China
Prior art keywords
mentioned
view data
image
unit
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB038228939A
Other languages
English (en)
Other versions
CN1685718A (zh
Inventor
安藤正树
增田拓士
伊达修
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN1685718A publication Critical patent/CN1685718A/zh
Application granted granted Critical
Publication of CN100414988C publication Critical patent/CN100414988C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof

Abstract

本发明涉及能高效地对其它的装置传送大量的图像数据的图像处理系统、摄像装置和方法、记录媒体以及程序。数码相机1对服务器5在传送了未传送的简略图像数据之后传送图像数据。如果在图像数据的传送中生成新的简略图像数据,则停止图像数据的传送,先传送该简略图像数据。如果服务器5取得简略图像数据,则在显示器上显示该简略图像,受理关于来自用户的图像数据传送的要求,供给数码相机1。数码相机1根据该要求对服务器5传送图像数据。本发明可应用于数码相机。

Description

图像处理系统、摄像装置和方法
技术领域
本发明涉及图像处理系统、摄像装置和方法、记录媒体以及程序,特别是涉及能容易且高效地对其它的装置传送大量的图像数据的图像处理系统、摄像装置和方法、记录媒体以及程序。
背景技术
近年来,在数码相机普及的同时,除了具备原来的摄像功能或记录功能以外还具备通信功能等的数码相机的多功能化取得了进展,已拍摄的图像数据的利用方法正在扩大。
例如,考虑了具有通信功能并对其它的通信装置发送在记录媒体中记录了的主图像时留下缩小图像以使用户也能容易地参照传送完毕的图像的数码相机。(例如参照特开2002-16865号公报(第6-10页,图2和图3))。
在这样的数码相机中,由于对其它的通信装置供给图像数据并使之保存在该通信装置中,故可有效地使用在数码相机中具备的记录媒体的存储容量,同时也使数码相机一边的传送完毕的图像的参照变得容易。
但是,在以上那样的方法中,在将拍摄得到的图像数据传送给其它的通信装置并在其它的通信装置一边利用的情况下,存在其它的通信装置的用户在图像数据的传送结束之前不能参照该图像的课题。
近年的数码相机的高功能化取得了进展,记录拍摄得到的图像数据的记录媒体的存储区也扩大了,可存储大量的图像数据。因此,例如在全部传送大量的图像数据的情况下,需要很多的处理时间,该处理时间随记录媒体的空闲容量的减少而增加。
但是,在以这种方式被传送了大量的图像数据的通信装置一边,对图像进行加工或印刷而实际上利用的图像数据大多只是其中的一部分。
特别是在例如新闻社等那样在业务中使用数码相机的情况下,从拍摄得到的大量的图像数据中选取实际上在记事等中利用的图像的张数是极少的,大部分图像被废弃了。
在这样的情况下,希望能立即利用拍摄得到的图像,但在上述的方法中,由于在大量的图像数据的传送结束之前不能参照该图像,故存在业务的效率变差的情况。
与此不同,在数码相机一边,可考虑对传送的图像进行取舍选择以减少传送的图像的数据量的方法,但由于为此而伴随由数码相机的用户进行的繁琐的作业,故存在摄像作业变得效率低的课题。
发明的公开
本发明是鉴于这样的状况而进行的,其目的在于能容易且高效地对其它的装置传送大量的图像数据。
本发明的第1图像处理系统是具备传送对被摄体进行摄像得到的图像数据的摄像装置和取得由摄像装置传送了的图像数据的图像处理装置的图像处理系统,其特征在于:摄像装置具备:对被摄体进行摄像以生成图像数据的摄像单元;生成代表利用摄像单元生成了的图像数据的代表图像数据的生成单元;以及在对经网络连接了的图像处理装置供给图像数据和代表图像数据时优先于图像数据供给代表图像数据的供给单元,图像处理装置具备:取得由摄像装置供给了的代表图像数据和图像数据的取得单元;显示利用取得单元取得了的代表图像数据的显示单元;以及关联地存储利用取得单元取得了的代表图像数据和图像数据的存储单元。
本发明的第2图像处理系统是具备传送对被摄体进行摄像得到的图像数据的摄像装置、管理由摄像装置传送了的图像数据的图像管理装置和取得由图像管理装置管理的图像数据的图像处理装置的图像处理系统,其特征在于:摄像装置具备:对被摄体进行摄像以生成图像数据的摄像单元;生成代表利用摄像单元生成了的图像数据的代表图像数据的生成单元;以及在对经网络连接了的图像管理装置供给图像数据和代表图像数据时优先于图像数据供给代表图像数据的第1供给单元,图像管理装置具备:取得由摄像装置供给了的图像数据和代表图像数据的第1取得单元;关联地管理利用第1取得单元取得了的图像数据和代表图像数据的管理单元;以及在对经网络连接了的图像处理装置供给图像数据和代表图像数据时优先于图像数据供给代表图像数据的第2供给单元,图像处理装置具备:取得由图像管理装置供给了的图像数据和代表图像数据的第2取得单元;显示利用第2取得单元取得了的代表图像数据的显示单元;以及关联地存储利用第2取得单元取得了的代表图像数据和图像数据的存储单元。
本发明的摄像装置的特征在于,具备:对被摄体进行摄像以生成图像数据的摄像单元;生成代表利用摄像单元生成了的图像数据的代表图像数据的生成单元;以及在对经网络连接了的其它的装置供给图像数据和代表图像数据时优先于图像数据供给代表图像数据的供给单元。
上述供给单元在对其它的装置供给图像数据中,在摄像单元生成了新的图像数据的情况下,可优先于供给中的图像数据对其它的装置供给利用生成单元生成了的代表新的图像数据的新的代表图像数据。
还具备受理有关上述图像数据的供给的控制信息的受理单元,上述供给单元可根据利用受理单元受理了的控制信息对其它的装置供给图像数据。
上述供给单元可与代表图像数据或新的代表图像数据一起对其它的装置供给有关图像数据的关联信息。
还可具备:受理其它的装置供给了的第1密钥的受理单元;生成对利用摄像单元生成了的图像数据进行加密的第2密钥的密钥生成单元;用第2密钥对利用摄像单元生成了的图像数据进行加密以生成第1密码数据的第1加密单元;以及用第1密钥对对第2密钥进行加密以生成第2密码数据的第2加密单元,有关图像数据的关联信息可以是第2密码数据。
本发明的摄像方法的特征在于,包含下述步骤:生成对被摄体进行摄像得到的图像数据的第1生成步骤;生成代表利用第1生成步骤的处理生成了的图像数据的代表图像数据的第2生成步骤;以及在对经网络连接了的其它的装置供给图像数据和代表图像数据时以优先于图像数据供给代表图像数据的方式控制供给的供给控制步骤。
上述供给控制步骤在对其它的装置供给图像数据中,在利用第1生成步骤的处理生成了新的图像数据的情况下,能以优先于供给中的图像数据对其它的装置供给代表利用第2生成步骤的处理生成了的新的图像数据的新的代表图像数据的方式来控制供给。
还包含控制有关上述图像数据的供给的控制信息的受理的受理控制步骤,供给控制步骤可根据利用受理控制步骤的处理受理了的控制信息,以对其它的装置供给上述图像数据的方式控制供给。
上述供给控制步骤可与代表图像数据或新的代表图像数据一起以对图像处理装置供给有关图像数据的关联信息的方式控制供给。
还包含:控制上述其它的装置供给了的第1密钥的受理的受理控制步骤;生成对利用第1生成步骤的处理生成了的图像数据进行加密的第2密钥的密钥生成步骤;用第2密钥对利用第1生成步骤的处理生成了的图像数据进行加密以生成第1密码数据的第1加密步骤;以及用第1密钥对对第2密钥进行加密以生成第2密码数据的第2加密步骤,有关图像数据的关联信息可以是第2密码数据。
本发明的记录媒体的程序的特征在于,包含下述步骤:生成对被摄体进行摄像得到的图像数据的第1生成步骤;生成代表利用第1生成步骤的处理生成了的图像数据的代表图像数据的第2生成步骤;以及在对经网络连接了的其它的装置供给图像数据和代表图像数据时以优先于图像数据供给代表图像数据的方式控制供给的供给控制步骤。
本发明的程序的特征在于,使计算机实现下述步骤:生成对被摄体进行摄像得到的图像数据的第1生成步骤;生成代表利用第1生成步骤的处理生成了的图像数据的代表图像数据的第2生成步骤;以及在对经网络连接了的其它的装置供给图像数据和代表图像数据时以优先于图像数据供给代表图像数据的方式控制供给的供给控制步骤。
在本发明的第1图像处理系统中,具备传送对被摄体进行摄像得到的图像数据的摄像装置和取得由上述摄像装置传送了的图像数据的图像处理装置,在摄像装置中,对被摄体进行摄像以生成图像数据,同时生成代表生成了的图像数据的代表图像数据,在对经网络连接了的图像处理装置供给图像数据和代表图像数据时优先于图像数据供给代表图像数据,在图像处理装置中,取得由摄像装置供给了的代表图像数据和图像数据,显示取得了的代表图像数据,此外,还关联地存储代表图像数据和图像数据。
在本发明的第2图像处理系统中,具备传送对被摄体进行摄像得到的图像数据的摄像装置、管理由摄像装置传送了的图像数据的图像管理装置和取得由图像管理装置管理了的图像数据的图像处理装置,在摄像装置中,对被摄体进行摄像以生成图像数据,同时生成代表生成了的图像数据的代表图像数据,在对经网络连接了的图像管理装置供给图像数据和代表图像数据时优先于图像数据供给代表图像数据,在图像管理装置中,取得由摄像装置供给了的代表图像数据和图像数据,关联地管理取得了的图像数据和代表图像数据,另外,在对经网络连接了的图像处理装置供给图像数据和代表图像数据时优先于图像数据供给代表图像数据,在图像处理装置中,取得由图像管理装置供给了的图像数据和代表图像数据,显示取得了的代表图像数据,还关联地存储取得了的代表图像数据和图像数据。
在本发明的摄像装置和方法以及程序中,对被摄体进行摄像以生成图像数据,同时生成代表已生成的图像数据的代表图像数据,在对经网络连接了的其它的装置供给图像数据和代表图像数据时优先于图像数据供给代表图像数据。
附图的简单的说明
图1是表示应用了本发明的图像数据传送系统的基本的结构例的图。
图2A是示出图1的数码相机的外观的例子的斜视图。
图2B是示出图1的数码相机的外观的例子的斜视图。
图3是示出图1的数码相机的内部的结构例的框图。
图4是示出图3的无线通信部的详细的结构例的框图。
图5是示出图1的服务器的内部的结构例的框图。
图6是示出图1的个人计算机的内部的结构例的框图。
图7是说明由数码相机进行的图像传送处理的流程图。
图8是说明在图7的步骤S7中被执行的摄像处理的细节的流程图。
图9是说明在图7的步骤S3中被执行的简略图像数据发送处理的细节的流程图。
图10是说明在图7的步骤S5中被执行的图像数据发送处理的流程图。
图11是说明由数码相机进行的要求受理处理的流程图。
图12是说明由服务器进行的图像数据接收处理的流程图。
图13A是示出在服务器中在显示器上显示的GUI画面的例子的示意图。
图13B是示出在服务器中在显示器上显示的GUI画面的例子的示意图。
图14A是示出在服务器中在显示器上显示的GUI画面的另一例的示意图。
图14B是示出在服务器中在显示器上显示的GUI画面的另一例的示意图。
图15A是示出在服务器中在显示器上显示的GUI画面的又一例的示意图。
图15B是示出在服务器中在显示器上显示的GUI画面的又一例的示意图。
图16是示出在服务器中在显示器上显示的GUI画面的又一例的示意图。
图17A是示出JPEG图像数据的格式的例子的示意图。
图17B是示出JPEG图像数据的格式的例子的示意图。
图18是示出在服务器中在显示器上显示的GUI画面的又一例的示意图。
图19是说明在图1的图像处理系统中利用第1加密方式进行了加密的图像数据传送处理的流程的时序图。
图20是说明在图1的图像处理系统中利用第2加密方式进行了加密的图像数据传送处理的流程的时序图。
图21是表示应用了本发明的图像数据传送系统的另一结构例的图。
图22是说明其次在图21中示出的图像处理系统中的图像数据传送处理的流程的时序图。
图23是表示应用了本发明的图像数据传送系统的又一结构例的图。
图24是表示应用了本发明的图像数据传送系统的又一结构例的图。
用于实施发明的最佳形态
图1是表示应用了本发明的图像数据传送系统的基本的结构例的图。
在图1中,数码相机1具备无线通信功能,经基站2常时地连接到以互联网为代表的网络3上。此外,在网络3上连接了在企业4内被设置的处理图像数据的服务器5。
在服务器5上连接了被服务器5控制的、蓄积图像数据的数据库6。此外,服务器5也连接到在企业4内设置的、以LAN(局域网)等为代表的网络7上,从以同样的方式连接到网络7上的个人计算机8和9进行存取。
即,服务器5以及个人计算机8和9可取得并利用在数据库6中被蓄积了的图像数据。通常,在企业4内设置的网络7是充分宽的宽带网,即使在个人计算机8和9中,也能瞬时地取得并利用在数据库6中被蓄积了的图像数据。
数码相机1一度在记录媒体上记录对被摄体进行摄像得到的图像数据。此时,生成与作为所得到的图像的缩小图像的简略图像对应的简略图像数据。
而且,在能进行通信的状态下,数码相机1最初经基站2和网络3对作为图像数据的传送目的地预先被设定了的服务器5传送未传送的简略图像数据。
传送了全部的简略图像数据的数码相机1其次与简略图像数据的情况同样地对作为传送目的地预先设定了的服务器5传送在记录媒体上记录了的图像数据。
再有,优先于图像数据的传送进行简略图像数据的传送。即,如果在图像数据的传送中进行摄像处理而生成新的简略图像数据,则停止图像数据的传送,先传送新生成的简略图像数据。然后,如果没有未传送的简略图像数据,则再次开始图像数据的传送。
服务器5使用GUI(图像用户界面)等在显示器上显示与从数码相机1取得的简略图像数据对应的简略图像。此外,在对经网络7连接了的个人计算机8或9要求了简略图像数据的情况下,服务器5根据该要求,供给从数码相机1取得了的简略图像数据,使用GUI等使这些显示器显示对应的简略图像。
在从数码相机1传送了图像数据的情况下,服务器5与先传送了的简略图像数据关联地在数据库6中蓄积已取得的图像数据。如上所述,在数据库6中蓄积了的图像数据可在服务器5以及个人计算机8和9中进行利用。
如果参照了已被显示的简略图像的服务器5的用户选择与打算利用的图像数据对应的简略图像,则服务器5对数码相机1要求与该简略图像对应的图像数据的传送。
此外,在显示器上显示了简略图像的个人计算机8或9的用户同样地选择了简略图像的情况下,将该信息供给服务器5。然后,取得了该信息的服务器5如上所述对数码相机1要求该简略图像数据的传送。
取得了图像数据传送的要求的数码相机1优先于其它的图像数据对服务器5传送已被要求的图像数据。通常时以既定的顺序对服务器5传送在记录媒体上记录了的图像数据,但在取得了要求的情况下,数码相机1与该顺序无关地先对服务器5传送已被要求的图像数据。
通过如上所述那样传送图像数据,即使是传送大量的图像数据的情况,即使图像数据的传送未结束,企业4一边的用户也能参照简略图像,再者,由于能优先地取得已指定的图像数据,故可高效地利用图像数据。
此外,数码相机1也可只传送由服务器5要求了的图像数据。由此,也可大幅度地削减传送的数据量,可减轻与各装置和各网络有关的因图像数据的传送带来的负荷。
图2A和图2B是示出图1的数码相机的外观的例子的斜视图。
如图2A中所示,在数码相机1的机壳11的正面和上部设置了:取入被摄体图像的透镜部;通过用户进行操作使主电源导通或关断的电源开关13;利用用户的操作来指示被摄体图像的取入处理的开始的快门按钮14;由用户操作来输入摄影条件的设定或所利用的功能的选择等的指示的模式设定旋钮15;发送接收图像数据或其它的数据用的天线16;对被摄体照射辅助光用的闪光灯17;以及在摄像时用户确认摄像范围时利用的光学取景器18A等。
此外,如图2B中所示,在机壳11的背面上具备光学取景器18A的作为用户观察侧的光学取景器18B和作为显示对被摄体进行摄像得到的图像的显示部的LCD(液晶显示器)19。
图3是示出图1的数码相机1的内部的结构例的框图。
来自未图示的被摄体的光经由透镜或光阑机构等构成的透镜部12入射到CCD(电荷耦合器件)31上进行光电变换。
对CDS电路(相关二重取样电路)32供给了CCD31输出的影像信号。CDS电路32对输入信号进行相关二重取样以除去噪声分量,将该信号输出给AGC电路(自动增益控制电路)33。AGC电路33在调整了输入信号的增益后,将该信号输出给A/D(模拟/数字)变换器34。A/D变换器34将已被输入的模拟信号变换为数字信号,输出给DSP(数字信号处理器)35。
DSP35利用内置的图像调整处理部41,根据输入信号生成在AF(自动聚焦)、AE(自动曝光)和AWB(自动白平衡)等中使用的控制信号,将该控制信号经总线50供给CPU(中央处理单元)51。此外,DSP35利用内置的图像压缩、伸展处理部43,例如用JPEG(联合摄影专家组)方式等既定的压缩、伸展方式,一边在被DSP35中内置的SDRAM(同步动态随机存取存储器)控制器42控制的SDRAM36中暂时地保持影像信号,一边对已被输入的图像数据进行压缩以生成压缩图像数据。此外,DSP35也生成与图像数据对应的简略图像数据,附加在对应的压缩图像数据上。再者,DSP35利用内置的图像压缩、伸展处理部43,也可对由存储部55供给了的压缩图像数据进行伸展。
在将利用图像压缩、伸展处理部43生成了的压缩图像数据经总线50供给RAM(随机存取存储器)53等并进行了保持后,供给存储部55,在半导体存储器或硬盘等中进行了记录,或供给连接到存储器I/F 59上的存储卡61并进行了记录,或供给无线通信部58并传送给其它的装置。再有,在将压缩图像数据经无线通信部58传送给其它的装置的情况下,优先地传送添加在该压缩图像数据上的简略图像数据。
CPU51按照在ROM(只读存储器)52中存储了的程序或从由闪速存储器等构成的存储部55装在RAM53上的程序来控制各部分或执行各种处理。在RAM53上还适当地存储CPU51在执行各种处理方面所必要的数据等。
此外,在CPU51上连接了受理用户的操作的外部操作输入部54。外部操作输入部54除了上述的电源开关13、快门按钮14或模式设定旋钮15等外,由各种按钮、标度盘、旋钮和触摸屏(都未图示)等构成,通过用户进行操作,受理来自用户的指示,将该指示信息供给CPU51。CPU51根据该指示信息来执行各种处理。
CPU51、ROM52和RAM53经总线50互相连接。在该总线50上还连接了下述部分:用非易失性的半导体存储器或硬盘等构成的存储部55;控制在LCD19上显示的图像的显示控制部56;被安装存储卡61等的存储器I/F(接口)59;及无线通信部58,该无线通信部58与基站2进行无线通信,例如被CPU51控制,将在存储部55中存储了的简略图像数据或被压缩了的图像数据等经网络3供给服务器5。
在显示控制部56中内置了未图示的VRAM(视频随机存取存储器)。显示控制部56使在DSP35中被伸展了的图像数据存储在内置的VRAM中,使LCD19显示与在该VRAM中存储了的图像数据对应的图像或与在其它的存储器(RAM53、存储部55、连接到存储器I/F59上的存储卡61等)中存储了的图像数据对应的图像。
在总线50上还根据需要经未图示的接口连接了驱动器63,在存储部55等中安装从在驱动器63中被安装了的磁盘64、光盘65、光磁盘66或半导体存储器67等中读出的计算机程序。此外,根据需要也在存储部55等中安装从在存储器I/F59中适当地被安装的存储卡61读出的计算机程序。
CPU51根据从外部操作输入部54输入了的来自用户的指示信息或从图像调整处理部41供给了的控制信息或通过执行各种程序得到的信息等,控制CDS电路32、AGC电路33和A/D变换器34的工作。
此外,CPU51通过控制控制CCD31的驱动的TG(时序发生器)71和V驱动器72来控制CCD31的工作。再者,CPU51控制控制透镜部12的工作的可变光阑快门驱动器73,调整了快门速度或调整了光阑机构。
图4是示出图3的无线通信部58的详细的结构例的图。
天线16接收来自其它的装置的电波,将该接收信号供给选择器81,同时将来自选择器81的信号以电波供给其它的装置。选择器81例如用CDMA(码分多元选取)方式等对从天线16接收了的信号进行解调,其结果是,将所得到的解调信号供给下变换器82。
下变换器82将取得了的解调信号的载波的频率变换为低的频率,将该解调信号供给接收I/F83。接收I/F83对取得了的解调信号进行A/D变换处理等的处理,将该数字信号供给基带信号处理部84。
基带信号处理部84根据规格进行包处理或错误信号处理等,从由接收I/F83取得了的数字信号中抽出接收数据,供给总线50。由此,无线通信部58取得从服务器5供给了的图像数据传送的要求,可供给CPU51等。
此外,基带信号处理部84对经总线50取得了的图像数据等进行控制信号等的附加,供给发送I/F85。
发送I/F85将取得了的数字信号变换为模拟信号,供给功率放大器86。在功率放大器86中,经选择器82从天线16输出增加了输出的发送信号。由此,无线通信部58可对服务器5传送经总线50取得了的简略图像数据或已被压缩的图像数据。
图5是示出服务器5的内部的结构例的图。
在图5中,CPU111按照在ROM112中存储了的程序或从存储部123装到RAM113上的程序执行各种处理。在RAM113上还适当地存储CPU1111在执行各种处理方面所必要的数据等。
CPU111、ROM112和RAM113经总线114互相连接。在该总线114上还连接了输入输出接口120。
在输入输出接口120上连接了下述部分:由键盘、鼠标等构成的输入部121;由CRT(阴极射线管)、LCD(液晶显示器)等构成的显示器和由扬声器等构成的输出部122;由硬盘等构成的存储部123;以及由调制解调器、终端适配器或LAN适配器等构成的通信部124。
存储部123被CPU111控制,保存经通信部124从数码相机1供给了的简略图像数据,根据需要将保存了的简略图像数据供给RAM113、输出部122、通信部124和数据库6等。
通信部124连接到网络3和7上,被CPU111控制,经网络3与数码相机1进行通信或经网络7与个人计算机8和9进行通信。
此外,通信部124除了使用了调制解调器或终端适配器等的通信外,也具有进行使用了例如USB(通用串行总线)、IEEE1394(电气和电子工程师学会)、RS-232C(推荐的标准232修订版C)或SCSI(小型计算机系统接口)等的各种规格的通信处理的功能。
在输入输出接口70上还连接了图1的数据库6,关联地存储从数码相机1取得了的图像数据和简略图像数据。
在输入输出接口70上根据需要还连接了驱动器80,适当地安装磁盘81、光盘82、光磁盘83或半导体存储器84等,根据需要在存储部73中安装从这些记录媒体读出的计算机程序。
CPU111如果控制通信部124,取得从数码相机1经网络3供给了的简略图像数据,则供给RAM113或存储部123等并使之保存,或供给输出部122使显示器等显示对应的简略图像,或经通信部124供给个人计算机8或9。
而且,CPU111控制输入部121,受理参照了已被显示的简略图像的来自用户的指示,根据已被输入的来自用户的指示,经通信部124对数码相机1供给与已被指定的简略图像对应的图像数据传送的要求。此外,CPU111控制通信部124,经网络3对数码相机1供给经通信部124取得了的来自个人计算机8和9的图像数据传送的要求。
如果经通信部124取得根据该要求优先地传送了的图像数据,则CPU111与在RAM113或存储部123中已被保存的简略图像数据关联地对数据库6供给取得了的图像数据并使之蓄积,同时使输出部122的显示器等显示该信息。再有,在从个人计算机8或9供给了图像数据传送的要求的情况下,CPU111控制通信部124,对要求源的个人计算机供给该信息。再有,已被蓄积的图像数据在服务器5以及个人计算机8和9中可被利用。
此外,从数码相机1取得了的数据不仅可蓄积在数据库6中,也可在输出部122的显示器等上显示对应的图像。在要求源是个人计算机8或9的情况下,可对要求源的个人计算机供给该图像数据。
图6是示出个人计算机8的内部的结构例的图。
在图6中,CPU151按照在ROM152中存储了的程序或从存储部123装到RAM153上的程序执行各种处理。在RAM153上还适当地存储CPU1515在执行各种处理方面所必要的数据等。
CPU151、ROM152和RAM153经总线154互相连接。在该总线154上还连接了输入输出接口160。
在输入输出接口160上连接了下述部分:由键盘、鼠标等构成的输入部161;由CRT(阴极射线管)、LCD(液晶显示器)等构成的显示器和由扬声器等构成的输出部162;由硬盘等构成的存储部163;以及由调制解调器、终端适配器或LAN适配器等构成的通信部164。
存储部163被CPU151控制,保存经通信部164从服务器5供给了的简略图像数据,根据需要将保存了的简略图像数据供给RAM153、输出部162等。
通信部164连接到网络7上,被CPU151控制,经网络7与服务器5进行通信。
此外,通信部164除了使用了调制解调器或终端适配器等的通信外,也具有进行使用了例如USB(通用串行总线)、IEEE1394(电气和电子工程师学会)、RS-232C(推荐的标准232修订版C)或SCSI(小型计算机系统接口)等的各种规格的通信处理的功能。
在输入输出接口160上根据需要还连接了驱动器170,适当地安装磁盘171、光盘172、光磁盘173或半导体存储器174等,根据需要在存储部163中安装从这些记录媒体读出的计算机程序。
CPU151如果控制通信部164,取得从服务器5经网络7供给了的简略图像数据或图像数据,则供给RAM153或存储部163等并使之保存,或供给输出部162使显示器等显示对应的图像。
此外,CPU151控制输入部161,受理参照了已被显示的简略图像的来自用户的指示,根据已被输入的来自用户的指示,经通信部164对服务器5供给与已被指定的简略图像对应的图像数据传送的要求。服务器5经网络3将该要求供给数码相机1。
如果对服务器5传送根据该要求优先地要求了的图像数据,则从服务器5供给该信息。CPU151如果经通信部164取得该信息,则将其供给输出部162,在显示器等上显示。
再有,由于图1的个人计算机9的结构和各部的工作与参照图6已说明的个人计算机8的结构和各部的工作是同样的,故可适当地将图6中示出的框图作为个人计算机9的结构例来应用,而省略其说明。
其次,参照图7的流程图,说明由数码相机1进行的图像传送处理。
如果用户操作电源开关13,电源成为导通状态,则数码相机1的CPU51在步骤S1中进行初始设定,进行各部的初始化和工作确认、准备处理等。此外,CPU51控制无线通信部58,确立与基站2的无线通信,连接到网络3上。
如果初始设定处理结束,则CPU51在步骤S2中判定是否存在在RAM13或存储部55等中保持了的未发送的简略图像数据。在判定为存在的情况下,CPU51将处理推进到步骤S3,执行简略图像数据发送处理。参照图9的流程图,在后面叙述简略图像数据发送处理的细节。如果步骤S3的处理结束,则CPU51将处理返回到步骤S2,重复进行其以后的处理。
在步骤S2中判定为不存在未发送的简略图像数据的情况下,CPU51将处理推进到步骤S4,判定是否存在未发送的图像数据。在判定为存在的情况下,CPU51将处理推进到步骤S5,执行图像数据发送处理。参照图10的流程图,在后面叙述图像数据发送处理的细节。如果步骤S5的处理结束,则CPU51将处理返回到步骤S2,重复进行其以后的处理。
在步骤S4中判定为不存在未发送的图像数据的情况下,CPU51将处理推进到步骤S6,控制外部操作输入部54,判定是否由用户指示了摄像处理的执行。在判定为用户操作模式设定旋钮15等、选择摄影模式、指示了摄像处理的执行的情况下,CPU51在步骤S7中执行摄像处理。参照图8的流程图,在后面叙述摄像处理的细节。如果摄像处理结束,则CPU51将处理推进到步骤S8。
在步骤S6中判定为没有支持摄像处理的执行的情况下,CPU51省略步骤S7的处理,将处理推进到步骤S8。
CPU51在步骤S8中判定是否结束图像传送处理,在判定为未结束的情况下,将处理返回到步骤S2,重复进行其以后的处理。
在判定为结束图像传送处理的情况下,CPU51在步骤S9中执行结束处理,结束图像传送处理。
其次,参照图8的流程图,说明在图7的步骤S7中执行的摄像处理的细节。
最初,在步骤S21中CPU51控制各部,进行摄像的准备,在步骤S22中判定是否指示了摄像,在判定为指示了摄像之前,进行待机。
CPU51控制外部操作输入部54,在判定为用户操作快门按钮14等指示了摄像的情况下,在步骤S23中对被摄体进行摄像,在步骤S24中在存储部55等中保存利用摄像得到的图像数据,在步骤S25中建立简略图像数据,保存在RAM53或存储部55等中。
如果步骤S25的处理结束,则CPU51结束摄像处理,将处理返回到图7的步骤S8。
其次,参照图9的流程图,说明在图7的步骤S3中执行的简略图像数据发送处理的细节。
最初,CPU51在步骤S41中判定是否支持了摄像处理的执行。在判定为指示了的情况下,CPU51将处理推进到步骤S42,执行与参照图8的流程图已说明的情况同样的摄像处理。然后,如果摄像处理结束,则CPU51结束简略图像数据发送处理,将处理返回到图7的步骤S2。
此外,在步骤S41中判定为未指示摄像处理的执行的情况下,CPU51在步骤S43中经无线通信部58对服务器5发送简略图像数据,结束简略图像数据发送处理,将处理返回到图7的步骤S2。
其次,参照图10的流程图,说明在图7的步骤S5中执行的图像数据发送处理。
最初,在步骤S61中CPU51判定是否指示了摄像处理的执行,在判定为指示了的情况下,在步骤S62中执行与参照图8的流程图已说明的情况同样的摄像处理。然后,如果摄像处理结束,则CPU51结束简略图像数据发送处理,将处理返回到图7的步骤S2。
在步骤S61中判定为未指示摄像处理的执行的情况下,CPU51将处理推进到步骤S63,判定是否存在优先地要求了的图像数据。
利用参照图11的流程图进行的后述要求受理处理,经无线通信部58取得从服务器5供给了的优先要求,在判定为该图像数据是未发送的情况下,CPU51将处理推进到步骤S64,判定是否利用该优先要求指定了发送时的压缩比。
在判定为指定了发送时的图像数据的压缩比的情况下,CPU51将处理推进到步骤S65,对DSP35供给存储在存储部55等中的作为被要求了的图像数据的优先图像数据,用已被指定的压缩比进行压缩。再有,在优先图像数据被压缩而被存储在存储部55等中的情况下,将压缩比变更为已被指定的值。以已被指定的压缩比压缩了优先图像数据的CPU51将处理推进到步骤S66。
此外,在步骤S64中,在判定为未指定发送时的压缩比的情况下,CPU51省略步骤S65的处理,将处理推进到步骤S66。
在步骤S66中,CPU51控制无线通信部58,经网络对服务器5发送已被指定的优先图像数据,在使该图像数据的状况成为处理完毕后,结束图像数据发送处理,将处理返回到图7的步骤S2。
此外,在步骤S63中,在判定为不存在优先地要求了的未发送的图像数据的情况下,CPU51将处理推进到步骤S67,根据来自服务器5的要求,判定是否拒绝其次发送的图像数据的发送。
在判定为未拒绝发送的情况下,CPU51将处理推进到步骤S68,判定是否指定了发送时的压缩比,在判定为指定了的情况下,在步骤S69中与步骤S65的处理的情况同样地控制DSP35,以已被指定的压缩比压缩发送的图像数据,将处理推进到步骤S70。
在步骤S68中判定为未指定压缩比的情况下,CPU51省略步骤S69的处理,将处理推进到步骤S70。
CPU51在步骤S70中经无线通信部58对服务器5发送该图像数据,使该图像数据的状况成为处理完毕。然后,CPU51结束图像数据发送处理,将处理返回到图7的步骤S2。
此外,在步骤S67中判定为拒绝对服务器5发送其次发送的图像数据的情况下,在步骤S71中使该图像数据的状况成为处理完毕,结束图像数据发送处理。
如上所述,数码相机1的CPU51控制各部,在摄像处理的间隔中优先于图像数据对服务器5发送简略图像数据。
其次,参照图11的流程图,说明由数码相机1进行的从服务器5供给的要求的受理处理。
最初,在步骤S91中,CPU51控制无线通信部58,判定是否从服务器接收了要求,在判定为接收了之前进行待机。在判定为接收了的情况下,CPU51取得该要求,判定对应的图像数据是否为未发送。
CPU51控制存储部55等的存储了图像数据的各部,参照对应的图像数据的状况。然后,在判定为参照了的状况为未发送、对应的图像数据为未发送的情况下,CPU51在步骤S93中与图像数据关联地在RAM53等中保持要求。在图10的图像数据发送处理的步骤S63、S64、S67和S68等中参照该要求。如果步骤S93的处理结束,则CPU51将处理推进到步骤S94。
此外,在步骤S92中判定为对应的图像数据为发送完毕的情况下,CPU51省略步骤S93的处理,将处理推进到步骤S94。
在步骤S94中,CPU51判定是否结束要求受理处理,在判定为未结束的情况下,将处理返回到步骤S91,重复进行其以后的处理。在判定为结束了要求受理处理的情况下,CPU51在步骤S95中进行结束处理,结束要求受理处理。
如上所述,数码相机1的CPU51受理来自服务器5的要求,根据该要求控制图像数据的传送。
其次,参照图12的流程图,说明由服务器5进行的图像数据接收处理。
在步骤S111中,服务器5的CPU111控制通信部124,判定是否接收了从数码相机1发送了的简略图像数据。在判定为接收了的情况下,CPU111在步骤S112中在显示器等上显示与接收了的简略图像数据对应的简略图像。然后,CPU111将处理推进到步骤S113。
在步骤S111中,在判定为未接收简略图像数据的情况下,CPU111省略步骤S112的处理,将处理推进到步骤S113。
在步骤S113中,CPU111控制通信部124,判定是否接收了从数码相机1发送了的图像数据。在判定为接收了的情况下,CPU111在步骤S114中与对应的简略图像数据关联地在数据库6中蓄积接收了的图像数据。此外,如后述那样,CPU111控制输出部121,使显示了简略图像的GUI显示表示接收了对应的图像数据的标记。如果步骤S114的处理结束,则CPU111将处理推进到步骤S115。
此外,在步骤S113中,在判定为未接收图像数据的情况下,CPU111省略步骤S114的处理,将处理推进到步骤S115。
CPU111在步骤S115中控制输入部121,判定是否从用户输入了有关图像数据的传送的要求。CPU111还控制通信部124,判定是否从个人计算机8或9供给了有关图像数据的传送的要求。
在判定为由服务器5的用户输入了有关图像数据的传送的要求或从个人计算机8或9供给了有关图像数据的传送的要求的情况下,CPU111在步骤S116中控制通信部124,将该要求供给数码相机1。供给了要求的CPU111将处理推进到步骤S117。
在步骤S115中判定为未由用户输入了有关图像数据的传送的要求而且未从个人计算机8或9供给了有关图像数据的传送的要求的情况下,CPU111省略步骤S116的处理,将处理推进到步骤S117。
CPU111在步骤S117中判定是否结束了图像数据接收处理,在判定为未结束的情况下,将处理返回到步骤S111,重复进行其以后的处理。
此外,在判定为结束了图像数据接收处理的情况下,CPU111在步骤S118中进行结束处理,结束图像数据接收处理。
如上所述,服务器5的CPU111接收从数码相机1供给了的简略图像数据或图像数据,同时对数码相机1发送有关图像数据的传送的要求。
图13A和图13B是示出在服务器5中在显示器上显示的GUI画面的例子的示意图。
如果优先于图像数据传送简略图像数据,则在服务器5的显示器上显示图13A所示的那样的画面180。在画面180上显示与已被传送的简略图像数据对应的简略图像181至186。此外,在画面180上显示表示简略图像数据处于传送中的「图像传送中」和显示187。
如果传送与被显示了的简略图像对应的图像数据,则在画面180上如图13B所示那样在对应的简略图像181至183上分别显示表示传送完毕的标记181A至183A。
此外,在图像数据处于传送中的简略图像184上显示表示图像数据处于传送中的传送中标记184A。
例如,在不需要与简略图像186对应的图像数据的情况下,用户操作输入部121,选择简略图像186,输入传送不需要的指示。此时,在对数码相机1供给拒绝传送的要求的同时,在画面180的简略图像186上显示传送不需要标记186A。
再者,在数码相机1中重新进行了摄像处理的情况下,对服务器5传送新的简略图像数据。然后,在画面180上显示与新接收了的简略图像数据对应的简略图像188和189作为新到达的简略图像。可在既定的时间内以强调的方式显示这些简略图像188和189,也可与除此以外的简略图像181至186同样地显示。
再有,上述的画面180不仅在服务器5的显示器上被显示,而且在进入服务器5,处于取得简略图像数据的状态的个人计算机8或9中也同样地被显示。
由于通过数码相机1和服务器5如上述那样工作,在服务器5一边,用户可在图像数据的传送结束之前参照简略图像,可优先地传送必要的图像数据,故可高效地进行作业。
图14A和图14B是示出在只传送服务器5的用户选择了的图像数据的情况的在服务器5中被显示的画面的例子的图。
如果服务器5的用户从在画面180上被显示了的简略图像中选择必要的图像,则如图14A中所示,在该被选择了的简略图像181、183和184上分别显示传送预约标记181B、183B和184B。用户操作传送按钮191,要求与这些简略图像对应的图像数据的传送。
如果根据该要求开始从数码相机1要求了的图像数据的传送,则如图14B中所示,在画面180的简略图像181、183和184上显示表示有关图像数据的传送的状态的各种标记。
此外,如果在数码相机1中进行新的摄像处理,对服务器5传送简略图像数据,则在画面181上显示与被传送了的简略图像数据对应的简略图像192和193。
在以上叙述中说明了静态图像数据的传送,但不限于此,传送的数据也可以是动态图像数据,利用与上述的情况同样的处理来传送。
在传送动态图像数据的情况下,对应的简略图像例如由像每4分钟等那样按既定的时间间隔从动态图像中抽出的代表图像来构成。即,在该情况下,例如从20分钟的动态图像数据中抽出5个简略图像数据,优先于动态图像数据传送给服务器5。
再有,简略图像的抽出方法不限于每隔一定的时间,可以是任意的方法。例如,数码相机1计算在时间方面相邻的图像的差分,在差分信号超过阈值的情况下,判定为场景变化了,可按每个场景来抽出简略图像,此外,在动态图像数据是MPEG(动态图像专家组)数据的情况下,也可将I图片作为简略图像来抽出。
如上所述,在服务器5中,在图15A中所示的画面200上显示从1个动态图像数据抽出的简略图像。在画面200上显示了从第1动态图像文件201中抽出的简略图像201-1至201-5、从第2动态图像文件202中抽出的简略图像202-1至202-5以及通过由用户操作传送已被选择的动态图像文件的传送按钮203。
如果用户选择动态图像文件并操作传送按钮203,则对数码相机1供给该要求信息,开始该动态图像文件的传送。此时,如图15B所示那样显示画面200。在图15B中,在用户选择了的第1动态图像文件201中显示了外框204,在与第1动态图像文件201的传送结束了的部分对应的简略图像201-1至201-3中分别显示了传送完毕标记201-1A至201-3A。
而且,如果在数码相机1中重新进行摄像处理,生成新的动态图像文件,则对服务器5供给该简略图像数据,在画面200上如图16中所示那样显示第3动态图像文件205的简略图像数据205-1至205-5。
如上所述,即使在传送动态图像数据的情况下,也可优先地传送简略动态图像数据。
此外,在以上叙述中,说明了优先于图像数据传送简略图像数据,但不限于简略图像数据,也可与简略图像数据同时地发送有关图像数据的信息。
图17A和图17B是示出JPEG图像数据的格式的例子的图。
JPEG图像数据210如图17A中所示那样,在标题部中包含了作为有关图像数据的信息的图像信息211和与图像数据对应的简略图像数据212,在数据部中存储了作为已被压缩的图像数据的图像压缩数据213。
在图像信息211中,如图17B中所示那样,包含了文件名211A、文件大小211B、摄影时刻211C和测光方式211D等的有关图像压缩数据213的各种各样的信息。
数码相机1通过传送附加了该图像信息的简略图像数据,在服务器5中在图像数据的传送结束之前可显示有关图像数据的信息。在该情况下,在服务器5的显示器中显示图18中示出的画面220。
在图18中示出的画面220中,在简略图像221至224的下部分别显示了图像信息221A至224A。由此,用户可与简略图像221至224一起参照该信息,可选择必要的图像数据。
再有,也可用例如以SSL(安全套层)或IPsec(IP安全)等为代表的既定的协议进行了加密之后传送被传送的图像数据。
此外,服务器5也可使用预先被分配了的ID和口令对传送图像数据的数码相机1进行认证。在该情况下,数码相机1在图7的步骤S7中的初始化处理中,对服务器5供给ID和口令以确立连接。
图19是说明在图1的图像处理系统中传送利用第1加密方式进行了加密的图像数据的情况的处理的流程的时序图。
最初,在步骤S131中,数码相机1经网络3对服务器5供给预先被分配了的ID和口令。如果服务器5在步骤S151中取得该ID和口令,则在步骤S152中使用已取得的ID和口令对数码相机1进行认证。
如果认证处理结束,则服务器5在步骤S153中对数码相机1供给认证结果。数码相机1在步骤S132中取得该认证结果。在数码相机1被认证了的情况下,利用这些处理确立数码相机1与服务器5的连接。
确立了连接的数码相机1在步骤S133中对服务器5要求服务器5所提供的公开钥。再有,关于该公开钥的要求,也可要求与从该处发送的图像数据的数目对应的多个公开钥。在该情况下,如后述那样,服务器5必须保持与多个公开钥对应的秘密钥。如果服务器5在步骤S154中取得该要求,则在步骤S155中对数码相机1供给所要求的公开钥。数码相机1在步骤S134中取得该公开钥。再有,服务器5保持了与该公开钥对应的秘密钥。用该公开钥进行了加密的数据只在对应的秘密钥中才可进行解密。如后述那样,在进行了加密的图像数据的解密处理中利用该秘密钥。
取得了公开钥的数码相机1在图像数据传送时执行步骤S135的处理,使用取得了的公开钥对传送的图像数据进行加密。然后,数码相机1在步骤S136中对服务器5供给该被进行了加密的图像数据。
如果服务器5在步骤S156中取得该被进行了加密的图像数据,则在步骤S157中使用与供给了的公开钥对应的秘密钥对被进行了加密的图像数据进行解密。
然后,在结束了图像数据的传送处理时,数码相机1执行步骤S137的处理,废弃已被供给的公开钥。
如上所述,数码相机1使用第1加密方式对图像数据进行加密,传送给服务器5。由此,可提高图像数据传送时的保密性。此外,由于服务器5利用ID和口令对是正规的数码相机1的情况进行认证,故可更安全地取得图像数据。
图20是说明在图1的图像处理系统中传送利用第2加密方式进行了加密的图像数据的情况的处理的流程的时序图。
最初,在步骤S171中,数码相机1经网络3对服务器5供给预先被分配了的ID和口令。如果服务器5在步骤S191中取得该ID和口令,则在步骤S192中使用已取得的ID和口令对数码相机1进行认证。
如果认证处理结束,则服务器5在步骤S193中对数码相机1供给认证结果。数码相机1在步骤S172中取得该认证结果。在数码相机1被认证了的情况下,利用这些处理确立数码相机1与服务器5的连接。
确立了连接的数码相机1在步骤S173中对服务器5要求服务器5所提供的公开钥。再有,关于该公开钥的要求,也可要求与从该处发送的图像数据的数目对应的多个公开钥。在该情况下,如后述那样,服务器5必须保持与多个公开钥对应的秘密钥。如果服务器5在步骤S194中取得该要求,则在步骤S195中对数码相机1供给所要求的公开钥。数码相机1在步骤S174中取得该公开钥。再有,服务器5保持了与该公开钥对应的第1秘密钥。用该公开钥进行了加密的数据只在对应的第1秘密钥中才可进行解密。
取得了公开钥的数码相机1在步骤S175中生成对已摄像的图像数据进行加密的第2秘密钥,使用该第2秘密钥对传送的图像数据进行加密。再有,假定只在该第2秘密钥中才能对用第2秘密钥进行了加密的图像数据进行解密。此外,数码相机1在步骤S176中使用该公开钥对该第2秘密钥进行加密。再有,该第2秘密钥可作为与已被摄像的每1幅图像对应的钥来生成,也可按1个发送单位来生成。此外,在步骤S173中也可要求与发送的图像幅数对应的多个公开钥。在该情况下,服务器5必须保持与这些多个公开钥对应的多个第1秘密钥。利用这些组合,也可使用与在每1幅图像中不同的公开钥不同的第2秘密钥,可更安全地发送图像数据。
然后,在步骤S177中数码相机1优先于用第2秘密钥进行了加密的图像数据与对应的简略图像数据一起经网络3对服务器5供给已被加密的第2秘密钥。服务器5在步骤S196中取得该已被加密的第2秘密钥。
取得了已被加密的第2秘密钥的服务器5在步骤S197中与供给了的公开钥对应地使用服务器5所保持的第1秘密钥对该已被加密的第2秘密钥进行解密。
利用以上那样的处理,如果图像数据传送的准备结束,则数码相机1在步骤S178中对服务器5供给已被加密的图像数据。如果服务器5在步骤S198中取得该已被加密的图像数据,则在步骤S199中使用已被解密的第2秘密钥对已被加密的图像数据进行解密,取得图像数据。
然后,在结束了图像数据的传送处理时,数码相机1执行步骤S179的处理,废弃由服务器5供给了的公开钥。
如上所述,数码相机1使用第2加密方式对图像数据进行加密,传送给服务器5。由此,可进一步提高图像数据传送时的保密性。再者,通过优先于用第2秘密钥进行了加密的图像数据与对应的简略图像数据一起经网络3对服务器5供给用已取得的公开钥进行了加密的第2秘密钥,用户可确认从该处发送的图像数据,同时可用服务器5所保持的第1秘密钥对已被加密的第2秘密钥进行解密。由于在取得已被加密的图像数据之前可事先进行对该已被加密的图像进行解密的钥的解密,故作为解密处理整体可缩短处理时间。此外,由于服务器利用ID和口令认证是正规的数码相机1,故可更安全地取得图像数据。
在以上叙述中,说明了在图1中示出的图像处理系统,即在从数码相机1传送了图像数据的服务器5一边(包含个人计算机8和9)利用已被传送的图像数据的情况,但不限于此,也可以是例如图21中示出的那样的图像处理系统,即企业4是提供图像传送服务的提供者,在作为客户机的个人计算机231中利用从数码相机1传送的图像数据那样的图像处理系统。
在图21中,在作为提供者的企业4中设置了的服务器5在数据库6中蓄积并管理从数码相机1传送了的简略图像数据和图像数据。
客户机231在取得数码相机1中摄像得到的图像数据的情况下进入服务器5,与上述的数码相机1和服务器5间的情况同样,优先于对应的图像数据取得从数码相机1供给了的简略图像数据。
客户机231的结构和工作与参照图6的框图已说明的个人计算机8的结构和工作是同样的,由于可将图6的框图作为客户机231来应用,故省略其说明。
其次,参照图22的时序图说明图21中示出的图像处理系统中的图像数据传送处理时的各装置的处理的流程。
最初,在步骤S211中,数码相机1进行摄像处理,得到图像数据。然后,在步骤S212中,生成与所得到的图像数据对应的简略图像数据,供给服务器5。服务器5在步骤S231中取得该简略图像数据。
取得了简略图像数据的服务器5在步骤S232中对已被连接的客户机231供给取得了的简略图像数据。客户机231在步骤S251中取得该简略图像数据,在显示器上显示对应的简略图像,在步骤S252中从用户受理各种要求。
但是,如果数码相机1的简略图像数据的传送结束,则在步骤S213中对服务器5供给图像数据。服务器5在步骤S233中取得该图像数据,蓄积在数据库6中。
如果利用步骤S232的处理从用户受理各种处理,则客户机231在步骤S253中对服务器5供给已被受理的要求。服务器5在步骤S234中取得该要求。
取得了要求的服务器5在步骤S235中根据该要求取得在数据库6中已被蓄积的图像数据,供给客户机231。客户机231在步骤S254中取得该图像数据。
通过如以上那样进行处理,客户机231的用户在图像数据的传送结束之前可参照简略图像。此外,由于客户机231的用户在参照了简略图像的时刻能发出各种要求,故可有选择地取得图像数据,可减轻传送处理中必要的负荷。
此外,在以上叙述中以数码相机1对服务器5传送图像数据的方式进行了说明,但不限于此,例如如图23中所示,也可对经基站241连接了的移动电话机242传送图像数据。
在该情况下,在移动电话机242中执行与服务器5的情况同样的处理,在移动电话机242中设置了的显示器242A上显示与优先于图像数据被传送了的简略图像数据对应的简略图像。
此外,除此以外,如图24中所示,也可在数码相机相互间进行图像数据的授受。在图24中,在与数码相机1为同样的结构且进行同样的工作的2台数码相机251A与251B之间不经网络3直接进行图像数据的传送。即使在该情况下,也优先于图像数据传送简略图像数据。
再者,虽然省略图示,但数码相机1也可具备进行有线通信的通信部,经电缆连接到网络3或传送目的地的装置上。
此外,在以上叙述中,以1幅1幅地传送简略图像数据、每当传送1幅时判定是否进行了摄像处理等的优先的处理的方式进行了说明,但不限于此,能以任何的单位来传送,也可例如将传送前的多个简略图像数据归纳为1个文件来发送。此外,也可将归纳了多个简略图像数据的文件再分割为既定的大小或既定的数目之后来发送。
再有,在数码相机1从服务器5取得了图像数据的要求的情况下,即使是其它的简略图像数据在传送中,也可优先地传送已被指定的图像数据。由此,服务器5的用户在依次传送简略图像数据之间也可从显示器上已被显示的简略图像中选择所希望的简略图像,要求对应的图像数据的传送。此外,即使在除此以外的情况下,数码相机1也可根据既定的条件优先于简略图像数据传送任意的图像数据。
此外,在以上叙述中,说明了数码相机作为传送图像数据的装置的情况,但本发明不限于此,例如可广泛地应用于带有照相机的移动电话机、带有通信功能的数字摄像机或带有照相机的PDA等的电子装置。
上述的一系列的处理可利用硬件来执行,但也可利用软件来执行。在利用软件执行一系列的处理的情况下,可从记录媒体将构成该软件的程序安装到被装入专用的硬件的计算机中或安装到通过安装各种程序能执行各种功能的例如通用的个人计算机等中。
如图3中所示,记录被安装在计算机中的、成为用计算机能执行的状态的程序的记录媒体由用磁盘64(包含软盘)、光盘65(包含CD-ROM(小型盘-只读存储器)、DVD(数字通用盘))、光磁盘66(包含MD(微型盘)(登录商标))或半导体存储器67等构成的封装媒体或由暂时地或永久地记录程序的ROM52或存储部55等构成。根据需要可经路由器、调制解调器等的接口利用公共线路网、局域网或因特网等的网络、数字卫星广播等有线或无线的通信媒体来进行对记录媒体的程序的记录。
再有,在本说明书中,记述被记录在记录媒体上的程序的步骤不仅包含按所记载的顺序以时间序列的方式进行的处理,而且当然也包含并列地或个别地执行的处理而不一定是以时间序列的方式进行的处理。
工业上的可利用性
如上所述,按照本发明,可对其它的装置供给图像数据。特别是可容易且高效地对其它的装置传送大量的图像数据。

Claims (10)

1. 一种图像处理系统,具备传送对被摄体进行摄像得到的图像数据的摄像装置和取得由上述摄像装置传送了的图像数据的图像处理装置,其特征在于:
上述摄像装置具备:
对上述被摄体进行摄像以生成上述图像数据的摄像单元;
生成代表利用上述摄像单元生成了的上述图像数据的代表图像数据的生成单元;以及
供给单元,在对经网络连接了的上述图像处理装置供给上述图像数据和上述代表图像数据时优先于上述图像数据供给上述代表图像数据,在对上述图像处理装置供给上述图像数据之中,在上述摄像单元生成了新的上述图像数据的情况下,优先于供给中的上述图像数据对上述图像处理装置供给利用上述生成单元生成了的、代表新的上述图像数据的新的上述代表图像数据,
上述图像处理装置具备:
取得由上述摄像装置供给了的上述代表图像数据和上述图像数据的取得单元;
显示利用上述取得单元取得了的上述代表图像数据的显示单元;以及
关联地存储利用上述取得单元取得了的上述代表图像数据和上述图像数据的存储单元。
2. 一种图像处理系统,具备传送对被摄体进行摄像得到的图像数据的摄像装置、管理由上述摄像装置传送了的上述图像数据的图像管理装置和取得由上述图像管理装置管理的上述图像数据的图像处理装置,其特征在于:
上述摄像装置具备:
对上述被摄体进行摄像以生成上述图像数据的摄像单元;
生成代表利用上述摄像单元生成了的上述图像数据的代表图像数据的生成单元;以及
第1供给单元,在对经网络连接了的上述图像管理装置供给上述图像数据和上述代表图像数据时优先于上述图像数据供给上述代表图像数据,在对上述图像处理装置供给上述图像数据之中,在上述摄像单元生成了新的上述图像数据的情况下,优先于供给中的上述图像数据对上述图像处理装置供给利用上述生成单元生成了的、代表新的上述图像数据的新的上述代表图像数据,
上述图像管理装置具备:
取得由上述摄像装置供给了的上述图像数据和上述代表图像数据的第1取得单元;
关联地管理利用上述第1取得单元取得了的上述图像数据和上述代表图像数据的管理单元;以及
在对经上述网络连接了的上述图像处理装置供给上述图像数据和上述代表图像数据时优先于上述图像数据供给上述代表图像数据的第2供给单元,
上述图像处理装置具备:
取得由上述图像管理装置供给了的上述图像数据和上述代表图像数据的第2取得单元;
显示利用上述第2取得单元取得了的上述代表图像数据的显示单元;以及
关联地存储利用上述第2取得单元取得了的上述代表图像数据和上述图像数据的存储单元。
3. 一种摄像装置,其特征在于,具备:
对被摄体进行摄像以生成图像数据的摄像单元;
生成代表利用上述摄像单元生成了的上述图像数据的代表图像数据的生成单元;以及
在对经网络连接了的其它的装置供给上述图像数据和上述代表图像数据时优先于上述图像数据供给上述代表图像数据的供给单元,
上述供给单元在对上述其它的装置供给上述图像数据中,在上述摄像单元生成了新的上述图像数据的情况下,优先于供给中的上述图像数据对上述其它的装置供给利用上述生成单元生成了的、代表新的上述图像数据的新的上述代表图像数据。
4. 如权利要求3中所述的摄像装置,其特征在于:
还具备受理有关上述图像数据的供给的控制信息的受理单元,
上述供给单元根据利用上述受理单元受理了的上述控制信息对上述其它的装置供给上述图像数据。
5. 如权利要求3中所述的摄像装置,其特征在于:
上述供给单元对上述其它的装置供给上述代表图像数据或新的上述代表图像数据的同时,对上述其它的装置供给有关上述图像数据的关联信息。
6. 如权利要求5中所述的摄像装置,其特征在于:
还具备:
受理上述其它的装置供给了的第1密钥的受理单元;
生成对利用上述摄像单元生成了的上述图像数据进行加密的第2密钥的密钥生成单元;
用上述第2密钥对利用上述摄像单元生成了的上述图像数据进行加密以生成第1密码数据的第1加密单元;以及
用上述第1密钥对对上述第2密钥进行加密以生成第2密码数据的第2加密单元,
有关上述图像数据的关联信息是上述第2密码数据。
7. 一种摄像方法,其特征在于,包含下述步骤:
生成对被摄体进行摄像得到的图像数据的第1生成步骤;
生成代表利用上述第1生成步骤的处理生成了的上述图像数据的代表图像数据的第2生成步骤;以及
在对经网络连接了的其它的装置供给上述图像数据和上述代表图像数据时以优先于上述图像数据供给上述代表图像数据的方式控制供给的供给控制步骤,
上述供给控制步骤在对上述其它的装置供给上述图像数据中,在利用上述第1生成步骤的处理生成了新的上述图像数据的情况下,以优先于供给中的上述图像数据对上述其它的装置供给代表新的上述图像数据的新的上述代表图像数据的方式来控制上述供给。
8. 如权利要求7中所述的摄像方法,其特征在于:
还包含控制有关上述图像数据的供给的控制信息的受理的受理控制步骤,
上述供给控制步骤根据利用上述受理控制步骤的处理受理了的上述控制信息,以对上述其它的装置供给上述图像数据的方式控制上述供给。
9. 如权利要求7中所述的摄像方法,其特征在于:
上述供给控制步骤控制上述供给,以使得对上述其它的装置供给上述代表图像数据或新的上述代表图像数据的同时对上述其它的装置供给有关上述图像数据的关联信息。
10. 如权利要求9中所述的摄像方法,其特征在于:
还包含:
控制上述其它的装置供给了的第1密钥的受理的受理控制步骤;
生成对利用上述第1生成步骤的处理生成了的上述图像数据进行加密的第2密钥的密钥生成步骤;
用上述第2密钥对利用上述第1生成步骤的处理生成了的上述图像数据进行加密以生成第1密码数据的第1加密步骤;以及
用上述第1密钥对对上述第2密钥进行加密以生成第2密码数据的第2加密步骤,
有关上述图像数据的关联信息是上述第2密码数据。
CNB038228939A 2002-09-26 2003-07-28 图像处理系统、摄像装置和方法 Expired - Fee Related CN100414988C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2002280709A JP4240973B2 (ja) 2002-09-26 2002-09-26 画像処理システム、画像処理装置および方法、記録媒体、並びにプログラム
JP280709/2002 2002-09-26

Publications (2)

Publication Number Publication Date
CN1685718A CN1685718A (zh) 2005-10-19
CN100414988C true CN100414988C (zh) 2008-08-27

Family

ID=32040495

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB038228939A Expired - Fee Related CN100414988C (zh) 2002-09-26 2003-07-28 图像处理系统、摄像装置和方法

Country Status (5)

Country Link
US (1) US7525571B2 (zh)
JP (1) JP4240973B2 (zh)
KR (1) KR100965648B1 (zh)
CN (1) CN100414988C (zh)
WO (1) WO2004030357A1 (zh)

Families Citing this family (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050129385A1 (en) * 2003-09-16 2005-06-16 Jmz Llc Intelligent portable memory device with display
GB2406246B (en) * 2003-09-17 2006-05-31 Hewlett Packard Development Co Secure provision of image data
JP4208805B2 (ja) * 2004-09-15 2009-01-14 キヤノン株式会社 電子機器及びその制御方法、及びプログラム
JP3977834B2 (ja) * 2004-10-08 2007-09-19 京セラミタ株式会社 画像形成装置
JP2006148731A (ja) 2004-11-24 2006-06-08 Sony Corp 記録装置および方法、再生装置および方法、プログラム、並びに記録媒体
JP2006212043A (ja) * 2005-01-05 2006-08-17 Palace Kogyo:Kk 遊技機及び遊技者監視・診断・解析・認識システム
US9124729B2 (en) 2005-01-31 2015-09-01 The Invention Science Fund I, Llc Shared image device synchronization or designation
US20060171603A1 (en) * 2005-01-31 2006-08-03 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Resampling of transformed shared image techniques
US8606383B2 (en) * 2005-01-31 2013-12-10 The Invention Science Fund I, Llc Audio sharing
US8902320B2 (en) 2005-01-31 2014-12-02 The Invention Science Fund I, Llc Shared image device synchronization or designation
US20070236505A1 (en) * 2005-01-31 2007-10-11 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Resampling of transformed shared image techniques
US20060174203A1 (en) 2005-01-31 2006-08-03 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Viewfinder for shared image device
US9082456B2 (en) 2005-01-31 2015-07-14 The Invention Science Fund I Llc Shared image device designation
US9910341B2 (en) 2005-01-31 2018-03-06 The Invention Science Fund I, Llc Shared image device designation
US20060170956A1 (en) * 2005-01-31 2006-08-03 Jung Edward K Shared image devices
US7920169B2 (en) 2005-01-31 2011-04-05 Invention Science Fund I, Llc Proximity of shared image devices
US9489717B2 (en) 2005-01-31 2016-11-08 Invention Science Fund I, Llc Shared image device
US9001215B2 (en) 2005-06-02 2015-04-07 The Invention Science Fund I, Llc Estimating shared image device operational capabilities or resources
US9819490B2 (en) 2005-05-04 2017-11-14 Invention Science Fund I, Llc Regional proximity for shared image device(s)
US10003762B2 (en) 2005-04-26 2018-06-19 Invention Science Fund I, Llc Shared image devices
CA2607524A1 (en) * 2005-04-27 2006-11-09 Umn Pharma Inc. Agent for prophylaxis and treating of pancreatitis
JP2006311271A (ja) * 2005-04-28 2006-11-09 Sanyo Electric Co Ltd 画像データ伝送システム、デジタルカメラ、画像サーバ及び通信プログラム
JP4947936B2 (ja) * 2005-08-11 2012-06-06 ソニー株式会社 モニタリングシステムおよび管理装置
JP4822509B2 (ja) * 2005-09-02 2011-11-24 株式会社メガチップス ネットワークカメラによる映像配信方法
JP2007150781A (ja) * 2005-11-29 2007-06-14 Sony Corp 情報処理装置および情報処理方法、並びにプログラム
US20070220257A1 (en) * 2006-03-06 2007-09-20 Sandisk Il Ltd. Controlled-Access Recording Generator
JP4738233B2 (ja) * 2006-03-30 2011-08-03 三洋電機株式会社 電子カメラ
JP4819892B2 (ja) * 2006-06-23 2011-11-24 シャープ株式会社 画像表示装置、画像表示方法、画像表示システム、画像データ送信装置、プログラム、及び、記録媒体
JP4102847B2 (ja) * 2006-06-30 2008-06-18 シャープ株式会社 画像データ提供装置、画像表示装置、画像表示システム、画像データ提供装置の制御方法、画像表示装置の制御方法、制御プログラム、および、記録媒体
JP4724107B2 (ja) * 2006-12-21 2011-07-13 レノボ・シンガポール・プライベート・リミテッド リムーバブル・デバイスを用いたユーザの認証方法およびコンピュータ
JP4416017B2 (ja) * 2007-07-18 2010-02-17 ソニー株式会社 撮像システム
JP2009027674A (ja) * 2007-07-24 2009-02-05 Sony Corp サムネイル登録装置およびサムネイル登録プログラム
JP5088472B2 (ja) * 2007-08-02 2012-12-05 株式会社ニコン 情報処理装置
JP5034775B2 (ja) * 2007-08-21 2012-09-26 株式会社ニコン 画像転送プログラム
US9699242B2 (en) * 2007-12-07 2017-07-04 Dan Atsmon Multimedia file upload
US20090164804A1 (en) * 2007-12-25 2009-06-25 Sandisk Il Ltd. Secured storage device
JP4798172B2 (ja) * 2008-05-20 2011-10-19 コニカミノルタビジネステクノロジーズ株式会社 画像処理装置、画像出力方法および画像出力プログラム
KR100920171B1 (ko) * 2008-12-09 2009-10-06 (주) 두전네트 영상 감시 시스템 및 방법
JP2010185990A (ja) * 2009-02-12 2010-08-26 Brother Ind Ltd 表示装置、及びデータ送信システム
US20100223466A1 (en) * 2009-02-27 2010-09-02 Third Iris Corp Shared scalable server to control confidental event traffic among recordation terminals, analysis engines, and a storage farm coupled via a public network
US20110149086A1 (en) * 2009-12-23 2011-06-23 Winbush Iii Amos Camera user content synchronization with central web-based records and information sharing system
JP2011211696A (ja) * 2010-03-10 2011-10-20 Nikon Corp 画像データ処理システム、画像データ処理プログラム、及び画像データ処理装置
CN102542750A (zh) * 2010-12-10 2012-07-04 上海卫星工程研究所 低轨光学成像卫星的数据传输系统
JP5502148B2 (ja) * 2012-06-18 2014-05-28 オリンパスイメージング株式会社 カメラ及び画像送信方法
US8743224B2 (en) 2012-07-13 2014-06-03 Intel Corporation Context based management for secure augmented reality applications
US9935907B2 (en) 2012-11-20 2018-04-03 Dropbox, Inc. System and method for serving a message client
US9729695B2 (en) 2012-11-20 2017-08-08 Dropbox Inc. Messaging client application interface
JP2014170471A (ja) * 2013-03-05 2014-09-18 Canon Inc 情報提供装置、情報提供方法及びプログラム、情報処理端末とその制御方法及びプログラム、情報提供システム
CN105981364A (zh) * 2014-02-19 2016-09-28 索尼公司 成像设备、成像方法和成像系统
US9702982B2 (en) 2014-03-31 2017-07-11 Canon Kabushiki Kaisha Control apparatus, radiation imaging apparatus, radiation imaging system and control method
US9451178B2 (en) * 2014-05-22 2016-09-20 Microsoft Technology Licensing, Llc Automatic insertion of video into a photo story
US9479672B2 (en) * 2014-07-18 2016-10-25 Sony Mobile Communications Inc. Method and system for efficient transfer of digital images captured by a lifelog camera
US20230179811A1 (en) * 2020-06-10 2023-06-08 Sony Group Corporation Information processing apparatus, information processing method, imaging apparatus, and image transfer system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5724579A (en) * 1994-03-04 1998-03-03 Olympus Optical Co., Ltd. Subordinate image processing apparatus
JPH10126724A (ja) * 1996-10-18 1998-05-15 Seiko Epson Corp 画像選択方式およびダイレクトプリンタアダプタ
JP2002009991A (ja) * 2000-06-19 2002-01-11 Canon Inc 情報処理装置およびシステムとそれらの方法及び記憶媒体
CN1339902A (zh) * 2000-08-23 2002-03-13 索尼公司 数据通讯系统和数据通讯方法
CN1340957A (zh) * 2000-07-27 2002-03-20 惠普公司 远程加载数字存储器的方法和系统

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10164483A (ja) 1996-12-04 1998-06-19 Aqueous Res:Kk 画像データ格納装置
JP3872886B2 (ja) 1998-01-14 2007-01-24 オリンパス株式会社 画像読取りシステム
US6833863B1 (en) * 1998-02-06 2004-12-21 Intel Corporation Method and apparatus for still image capture during video streaming operations of a tethered digital camera
US6784925B1 (en) * 1998-03-24 2004-08-31 Canon Kabushiki Kaisha System to manage digital camera images
JP2000134531A (ja) * 1998-10-27 2000-05-12 Canon Inc 撮像装置及びその制御方法及び記憶媒体
JP3550509B2 (ja) 1999-05-26 2004-08-04 松下電器産業株式会社 画像記録再生装置と画像再生装置と不正利用防止方法
JP2001016568A (ja) * 1999-06-30 2001-01-19 Fuji Photo Film Co Ltd 画像通信システム
JP4616500B2 (ja) 2000-04-14 2011-01-19 富士フイルム株式会社 画像送信装置、方法及びプログラム
JP4258956B2 (ja) * 2000-06-08 2009-04-30 株式会社ニコン 撮像装置
JP2002111530A (ja) 2000-10-04 2002-04-12 Fuji Photo Film Co Ltd 通信機器及び通信システム
US7418599B2 (en) * 2002-06-03 2008-08-26 International Business Machines Corporation Deterring theft of media recording devices by encrypting recorded media files

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5724579A (en) * 1994-03-04 1998-03-03 Olympus Optical Co., Ltd. Subordinate image processing apparatus
JPH10126724A (ja) * 1996-10-18 1998-05-15 Seiko Epson Corp 画像選択方式およびダイレクトプリンタアダプタ
JP2002009991A (ja) * 2000-06-19 2002-01-11 Canon Inc 情報処理装置およびシステムとそれらの方法及び記憶媒体
CN1340957A (zh) * 2000-07-27 2002-03-20 惠普公司 远程加载数字存储器的方法和系统
CN1339902A (zh) * 2000-08-23 2002-03-13 索尼公司 数据通讯系统和数据通讯方法

Also Published As

Publication number Publication date
CN1685718A (zh) 2005-10-19
US7525571B2 (en) 2009-04-28
KR100965648B1 (ko) 2010-06-23
US20060112413A1 (en) 2006-05-25
JP2004120329A (ja) 2004-04-15
WO2004030357A1 (ja) 2004-04-08
JP4240973B2 (ja) 2009-03-18
KR20050057440A (ko) 2005-06-16

Similar Documents

Publication Publication Date Title
CN100414988C (zh) 图像处理系统、摄像装置和方法
US20190138434A1 (en) Content-aware digital media storage device and methods of using the same
US8319835B2 (en) Image transfer system for a network
US8978120B2 (en) Communication control system and method, and communication device and method
US7783890B2 (en) Multimedia recording apparatus, object-specifying information providing apparatus, server apparatus, verification apparatus, multimedia recording method, object-specifying information providing method, server method, verification method, and multimedia recording system
JP4668056B2 (ja) リモートカメラ装置、リモートカメラ操作装置、およびデータ生成装置
US8205081B2 (en) Systems and methods for verifying the authenticity of a remote device
US20060036864A1 (en) Digital camera with image authentication
US20110122285A1 (en) Image processing file setting system
KR20070076461A (ko) 통신기기 및 통신방법, 프로그램 및 기록 매체
JP4300504B2 (ja) 通信機器及び通信システム
EP1396991A1 (en) Imaging apparatus which sends images over WLAN to print service
US20030025933A1 (en) Image order processing system
EP2829070A1 (en) Method and apparatus for reducing duplicates of multimedia data items in service system
US20040135888A1 (en) Camera systems, systems of offering photographs for sale, and methods of offering photographs for sale
JP4232343B2 (ja) 画像サービス提供システム及びその方法
JP2007027814A (ja) 暗号化データ復号装置、認証装置、認証キー、暗号化データ復号システム、暗号化データ復号方法、暗号化データ復号プログラムおよび記録媒体
JP4761312B2 (ja) 画像の転送制御方法および画像転送装置
JP2010124308A (ja) 無線機能付きカメラ及びサービス提供システム
JP2003250083A (ja) 撮像装置、方法、並びに、サンプル画像サーバ、処理方法、並びに、サンプル画像システム、サンプル画像処理方法、並びに、プログラム、記憶媒体
JP2009055630A (ja) 通信機器
KR100526356B1 (ko) 사진 프린트 시스템과 그 운용방법
JP4273294B2 (ja) カメラ
JP2005260754A (ja) デジタルカメラ、情報管理サーバ装置、撮影管理システム、撮影管理方法、及び撮影管理プログラム
JP2004062524A (ja) 撮像装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20080827

Termination date: 20150728

EXPY Termination of patent right or utility model