CN102473283A - 图像传送装置 - Google Patents

Abstract

本发明提供一种实现隐私保护与安全防范两立的图像传送装置。私人区域保存部保存有关用户的隐私的区域，即私人区域；剪切区域保存部将已被认证的用户的希望传送区域作为剪切区域来保存；图像处理级别保存部按隐私不同的区域来保存规定了图像处理级别的图像处理规则；图像处理区域生成部从剪切区域保存部获取已被认证的用户的剪切区域，并从私人区域保存部获取该获得的剪切区域的图像中、已被认证的用户的私人区域以及已被认证的用户以外的他人的私人区域，并从图像处理级别保存部获取图像处理规则，根据该获得的图像处理规则来对剪切区域的各个区域决定图像处理方法。

Description

图像传送装置

技术领域

本发明涉及一种传送通过拍摄装置等所拍摄的图像的装置，尤其涉及一种既能够考虑到隐私又能够实现安全防范的图像传送装置。

背景技术

近年来开发了一种与网络连接的、高分辨率、且通过进行图像识别处理来提高效率的安防拍摄装置。通过这样的安防拍摄装置，能够拍摄出迄今无可比拟的高分辨率的图像，并能够构筑一种覆盖区域广的安全防范系统。并且，通过进行图像识别，能够通过安防拍摄装置来提取可疑人物，若事先将孩子等特别需要看守的特殊人物注册，还能够提供在上学放学时的安全防范服务。然而，另一方面，在拍摄公共场所或住宅等情况下，却需要考虑到他人的隐私来进行拍摄。

现有技术的安全防范拍摄系统、监视系统为了保护隐私或個人信息，不是将安防拍摄装置所拍摄的图像直接传送给用户，而是对图像进行了屏蔽处理以后再进行传送(例如，参考专利文献1)。专利文献1所记载的现有技术中，不是单纯地只保存一个屏蔽区域来对所保存的拍摄图像进行屏蔽，而是根据用户来变更屏蔽区域，从而适当地保护隐私。例如公开了：对停车场进行监视的情况下，通过只对签约的位置进行监视，而对没有签约的部分进行屏蔽处理，由此来考虑他人的隐私。或者还例如，根据一般用户、警卫员、警察等用户的区分来改变可看图像的范围。例如，警察因需要获得有关事件解决的充分信息而可以观看所有的图像，而对于没有此必要的一般用户而言，则可以限制其可看的范围。此外，在拍摄范围因拍摄装置的移动、变焦等而发生改变的情况下，能够变更屏蔽区域的范围，在确保安全防范而进行监视的同时，能够考虑到他人的隐私来进行拍摄。

此外，其他的例子例如还有：从外部来对拍摄方所进行的隐私保护的设定内容进行确认，并进行变更的装置(例如，参考专利文献2)。专利文献2所记载的现有技术中，当居住在住宅B的人确认住宅A所设定的拍摄装置的隐私保护设定，而对隐私保护的设定内容存在不满时，居住在住宅B的人能够请求变更屏蔽区域。从而，居住在住宅A的人可以根据该请求来变更或不变更设定内容。通过设定这样的功能，能够从被拍摄方来确认设定内容，从而能够提供可靠性更高的隐私保护功能。

专利文献1的结构实现了按每个用户来将屏蔽区域设定为适当的大小，从而进行注册。然而，由于用户所请求视听的拍摄图像的任意区域的各个部分，是根据用户的要求以适当的分辨率来进行拍摄并处理的，所以增大了系统的处理负担。例如，对于包含自家等的区域而言，作为用户所需要的最详细的图像数据，需要发送高分辨率的图像。此外，对于用户家的区域而言被判定为是可疑人的人物图像，即使在背景是他人的私人区域的情况下，也需要发送对背景进行了阴影处理的，而人物是最高分辨率的图像。因此，专利文献1的结构所存在的技术问题是：在降低系统的处理负担的情况下，不能够充分实现隐私保护和安全防范的两立。

此外，对于隐私的要求也因人而异，例如有的人认为一定程度的分辨率没有问题，若分辨率不高的图像则可以让亲戚观看，而有的人却完全不希望让人看等。然而，为了省去对各个被拍摄者进行确认的麻烦，对各个被拍摄者的区域一律进行屏蔽处理，该情况下，由于屏蔽处理区域的大量增加，可观看的区域减少，从而给系统带来更大的负担。尤其是通过高分辨率的拍摄装置来同时拍摄多个人所在的区域的情况下，更提高了其成本。此外，相反地分别确认各个被拍摄者的要求的情况也存在成本高的问题。

此外，专利文献2的结构存在的技术问题是：虽然被拍摄者注册了自己的私人区域，但当该所注册的私人区域距离他人的私人区域很近或相重叠的情况下，需要通过图像来互相确认拍摄区域并进行调整，从而要花费很多时间和精力。尤其是通过高分辨率的拍摄装置来同时拍摄多人所在的区域的情况下，要花费更多的精力。此外，当该区域因建筑物的形状的变化、植物的成长而发生变化的情况下，还需要进行再次调整。

专利文献1：日本特開2003-46745号公报

专利文献2：日本特開2005-252849号公报

发明内容

因此，本发明用于解决上述现有技术的技术问题，目的在于能够容易地提供一种安防拍摄装置，通过根据用户的要求来对任意拍摄的区域的图像进行适当地加工，既能够降低处理的负担，又能够充分实现隐私保护和安全防范的两立。

为实现上述目的，本发明的图像传送装置具备：通信部，与客户端装置进行通信；图像获取部，获取图像；私人区域保存部，保存有关用户的隐私的区域，即私人区域；认证部，根据经由通信部从客户端装置接收到的图像的传送请求中所包含的信息，来对用户进行认证；剪切区域保存部，将已被认证的用户的希望传送区域作为剪切区域保存；图像处理级别保存部，按隐私不同的区域来保存规定了图像处理级别的图像处理规则；图像处理区域生成部，从剪切区域保存部获取已被认证的用户的剪切区域，从私人区域保存部获取该所获得的剪切区域的图像中、已被认证的用户的私人区域，以及该所获得的剪切区域的图像中、已被认证的用户以外的他人的私人区域，并从图像处理级别保存部获取图像处理规则，根据该获得的图像处理规则来对剪切区域的各个区域决定图像处理方法；图像加工部，根据图像处理区域生成部所决定的图像处理方法，来对图像获取部所获得的图像进行加工。

图像处理级别保存部保存对已被认证的用户的私人区域、以及已被认证的用户以外的、他人的私人区域规定了图像处理级别的图像处理规则。为了保护隐私，对他人的私人区域的图像处理级别是比已被认证的用户的私人区域不清晰的图像处理级别。

图像处理级别保存部保存对私人区域之间的边界区域规定了图像处理级别的图像处理规则，并向图像处理区域生成部通知已被认证的用户的私人区域与他人的私人区域相接近的区域、及其附近的区域的图像处理级别是对分界区域的图像处理级别。为了保护隐私，对分界区域的图像处理级别是比已被认证的用户的私人区域不清晰的图像处理级别。

图像处理级别保存部保存对私人区域之间的边界区域规定了图像处理级别的图像处理规则，并向图像处理区域生成部通知已被认证的用户的私人区域与他人的私人区域之间相重叠的区域、及其附近的区域的图像处理级别是对分界区域的图像处理级别。为了保护隐私，对分界区域的图像处理级别是比已被认证的用户的私人区域不清晰的图像处理级别。

图像处理级别保存部保存对私人区域以外的公共区域规定了图像处理级别的图像处理规则。为了保护隐私，对公共区域的图像处理级别是比已被认证的用户的私人区域不清晰的图像处理级别。

图像处理区域生成部根据从图像处理级别保存部获得的图像处理规则，决定以高分辨率来对已被认证的用户的私人区域进行图像处理，以低分辨率来对他人的私人区域进行图像处理。

图像处理区域生成部根据从图像处理级别保存部获得的图像处理规则，决定以高分辨率来对已被认证的用户的私人区域进行图像处理，以低分辨率来对分界区域进行图像处理。

图像处理区域生成部计算已被认证的用户的剪切区域中、私人区域以外的公共区域，根据从图像处理级别保存部获得的图像处理规则，决定以高分辨率来对已被认证的用户的私人区域进行图像处理，以低分辨率来对公共区域进行图像处理。

图像传送装置还具备注册了有关人员的脸部图像的图像注册部。

当被重叠拍摄在他人的私人区域上的人物的脸部图像与图像注册部中所注册的有关人员的脸部图像不一致时，图像处理区域生成部判定为所拍摄的人物是可疑人，决定以高分辨率来对可疑人进行图像处理。

图像处理级别保存部还保存对可疑人规定了图像处理级别的图像处理规则。图像处理区域生成部根据对可疑人的图像处理级别来决定可疑人的图像处理级别。

图像传送装置还具备公共区域保存部，该公共区域保存部保存已被认证的用户ID、以及与已被认证的用户的希望传送区域对应的公共区域。在同一用户请求同一希望传送区域的情况下，图像处理区域生成部从公共区域保存部读出已被认证的用户ID、以及与已被认证的用户的希望传送区域对应的公共区域，并决定对该所读出的公共区域进行图像处理。

图像处理级别保存部保存与私人区域对应的分辨率阈值。在他人的私人区域的大小小于分辨率阈值的情况下，为了保护隐私，图像处理区域生成部决定不将他人的私人区域处理为低分辨率的图像。

图像处理级别保存部保存与私人区域对应的追加许可用户ID。在图像传送目的地的用户ID与追加许可用户ID一致的情况下，图像处理区域生成部决定不将他人的私人区域处理为低分辨率的图像。

剪切区域保存部从已被认证的用户接收时刻改变的希望传送区域，并根据该接收到的区域来变更剪切区域。

图像获取部用于获取立体图像。图像传送装置还具备私人区域注册部，该私人区域注册部基于图像获取部所获得的立体图像来制作三维模型，并通过将之与二维的私人区域上所写的地图数据建立对应，来判定立体图像的各个区域是否是各个用户的私人区域，从而将该所判定的私人区域注册到私人区域保存部。

图像加工部当检测出发送给用户的图像数据的周边部分因保护隐私而被进行了图像处理时，将该部分删除后通知给通信部。

发明效果：根据本发明的图像传送装置，在多人共享高分辨率的拍摄装置，并实现安全防范系统的情况下，用户能够通过高分辨率的图像，来对希望以高优先级进行监视的自家等私人区域进行确认。并且，对于有过路人的公共道路等公共区域而言，在保护他人的隐私的情况下，只要能够确认孩子的安全，可以通过低分辨率的图像进行确认。此外，当各自的私人区域被传送给他人的情况下，可以进行阴影处理。并且，对于私人区域之间的边界区域，可以以考虑到他人隐私的、适当的分辨率来对图像进行确认。因此，能够根据区域而有效率地对图像的分辨率等进行控制，从而能够容易地实现隐私保护与安全防范的保护的两立。

附图说明

图1是示出本发明的第1实施方式所涉及的安全防范系统的结构的一例的方框图。

图2是示出本发明的第1实施方式所涉及的图像传送装置100的结构的一例的方框图。

图3是示出表示本发明的第1实施方式所涉及的剪切区域保存部13所保存的剪切区域的数据的一例的图。

图4A是示出本发明的第1实施方式所涉及的私人区域保存部14所保存的私人区域的数据的一例的图。

图4B是示出本发明的第1实施方式所涉及的私人区域保存部14所保存的私人区域的数据的一例的图。

图5A是示出本发明的第1实施方式所涉及的图像处理级别保存部15所保存的图像处理规则(区域类别隐私级别管理表)的一例的图。

图5B是示出本发明的第1实施方式所涉及的图像处理级别保存部15所保存的图像处理规则(区域属性信息管理表)的一例的图。

图6是示出本发明的第1实施方式所涉及的图像传送装置100在图像传送时的动作的一例的流程图。

图7A是示出本发明的第1实施方式所涉及的私人区域保存部14所保存的私人区域的数据的一例的图。

图7B是示出本发明的第1实施方式所涉及的图像处理级别保存部15所保存的图像处理规则(区域属性信息管理表)的一例的图。

图7C是示出本发明的第1实施方式所涉及的图像处理级别保存部15所保存的图像处理规则(区域类别隐私级别管理表)的一例的图。

图7D是示出本发明的第1实施方式所涉及的图像处理级别保存部15所保存的图像处理规则(区域属性信息管理表)的一例的图。

图7E是示出本发明的第1实施方式所涉及的私人区域保存部14所保存的私人区域的数据的一例的图。

图8是示出本发明的第1实施方式中的削减传送区域的情况的一例的图。

图9A是示出本发明的第1实施方式中的、用3D图像和2D图像来决定私人区域的情况的一例的图。

图9B是示出本发明的第1实施方式所涉及的图像传送装置100b的结构的一例的方框图。

图10是示出本发明的第2实施方式所涉及的图像传送装置200的结构的一例的方框图。

图11是示出表示本发明的第2实施方式所涉及的公共区域保存部19中所保存的公共区域的数据的一例的图。

图12是示出本发明的第3实施方式所涉及的图像传送装置300的结构的一例的方框图。

图13A是说明检测拍摄装置的拍摄位置的第1种方法的图。

图13B是说明检测拍摄装置的拍摄位置的第2种方法的图。

图14是示出本发明的第4实施方式所涉及的图像传送装置300的结构的一例的方框图。

图15是示出本发明的第4实施方式中的私人区域与可疑人重叠的情况的一例的图。

图16是示出图像注册部21中所注册的有关人员的脸部图像的数据库的一例的图。

图17是示出本发明的第4实施方式所涉及的图像传送装置400在传送图像时的动作的一例的流程图。

图18是示出本发明的第4实施方式所涉及的图像处理级别保存部15所保存的图像处理规则(区域类别隐私级别管理表)的一例的图。

图19是示出被集成电路化了的图像传送装置100的结构的一例的方框图。

具体实施方式

(第1实施方式)

图1是示出本发明的第1实施方式所涉及的安全防范拍摄系统的结构的一例的方框图。图1中，图像传送装置100的结构例如含有具备透镜的拍摄装置，对图像进行拍摄并进行加工后，通过网络30将图像传送给多个客户端装置50。客户端装置50对从图像传送装置100发送来的图像进行再现。

图2是示出本发明的第1实施方式所涉及的图像传送装置100的结构的一例的方框图。图2中，图像传送装置100具备：通信部11、认证部12、剪切区域保存部13、私人区域保存部14、图像处理级别保存部15、图像加工部17及图像获取部18。通信部11与网络30连接，并对客户端装置50传送图像。此外，通信部11既可以通过有线与网络30连接，也可以通过无线LAN等无线来与网络30连接。并且，通信部11从客户端装置50受理图像的传送请求，从而开始与客户端装置50之间的通信。

认证部12经由通信部11从客户端装置50接收用户信息，认证图像的传送目的地的用户是谁。认证方法既可以通过ID和密码来进行，也可以通过利用虹膜、指纹、静脉等的生物认证来进行。

剪切区域保存部13保存传送给用户的图像的剪切区域。图像的剪切区域既可以根据经由通信部11来自用户的传送请求，来每次进行指定，也可以将第一次指定的保存，还可以在任意的定时进行更新。此外，剪切区域保存部13也可以将响应于用户的系统默认值的图像区域作为剪切区域来保存。

私人区域保存部14保存使用安全防范拍摄系统的用户的私人区域。私人区域是表示有关用户的隐私的区域相当于画面上哪个部分的区域。即，私人区域保存部14中作为私人区域保存有各个用户不愿让人看的图像的区域等。用户的私人区域可以事先保存在私人区域保存部14中，例如，在第一次时等任意的定时由用户来注册，或者，也可以设定成只有经认证部12认证了的用户才能将私人区域注册到私人区域保存部14。

图像处理级别保存部15保存有规定了图像处理级别的图像处理规则，该图像处理级别表示根据隐私等的级别不同的区域，进行怎样的图像处理。图像处理规则用于判定对哪个私人区域实施阴影处理等。作为图像处理规则，例如注册有，在向注册了私人区域的用户传送图像时，传送高分辨率的图像，向他人传送的情况下传送实施了阴影处理的图像等之类的规则。

此外，作为图像处理规则，也可以注册下述规则：对于没有被注册为私人区域的区域即公共区域而言，传送低分辨率的图像等的规则。或者，作为图像处理规则，也可以注册：图像的分辨率低的情况下不实施阴影处理等的规则，或对于在剪切区域内的私人区域中、没有达到规定的分辨率的区域一律省略阴影处理等的规则。此外，作为图像处理规则，还可以注册下述规则：在私人区域与私人区域重叠，或私人区域之间相接近的情况下，识别为私人区域与私人区域之间存在分界区域，从而降低分界区域及该分界区域附近的区域的图像的分辨率。

图像处理区域生成部16决定传送给用户的图像的区域，以及图像的处理方法。首先，图像处理区域生成部16基于在认证部12已被认证的用户信息，从剪切区域保存部13获取用户所请求的剪切区域，并从私人区域保存部14获取用户所注册的私人区域。然后，图像处理区域生成部16决定在用户所请求的剪切区域中，对于传送目的地的用户而言，哪个区域是请求图像的用户的私人区域，哪个区域是用户以外的私人区域，哪个区域是公共区域等。并且，图像处理区域生成部16从图像处理级别保存部15获取图像处理规则，并决定最终的图像处理方法，即，使各个私人区域、公共区域为多少分辨率的图像，或是否需要阴影处理等。

图像加工部17根据图像处理区域生成部16所决定的图像处理方法，对图像进行加工，剪切出用户所请求的区域的图像，并对通信部11通知图像数据。图像获取部18例如是拍摄装置，对安全防范对象的区域的图像进行拍摄，并通知给图像加工部17。本实施方式中，拍摄装置的拍摄范围固定。

接着，对本发明的第1实施方式所涉及的图像传送装置100所用的数据进行详细说明。图3是表示剪切区域保存部13中所保存的剪切区域的数据的一例。剪切区域保存部13当接收到来自用户的传送请求时等，将该接收到的传送请求中所设定的区域作为剪切区域保存。该例子中，剪切区域为矩形，通过左上坐标的X、Y坐标、矩形的宽(W)、高(h)来表示。

图4A及图4B是表示私人区域保存部14中所保存的私人区域的数据的一例。图4A示出将通过直线包围的区域作为私人区域来保存的情况的例子。图4A所示的例子中，作为私人区域，按每个用户ID注册有区域ID、坐标点(x1、x2、x3、x4)。此外，这里将连接各坐标点的直线连接起来作为私人区域保存，也可以将贝塞尔曲线(Bezier Curve)等曲线连接起来作为私人区域保存。图4B示出将私人区域作为图像数据保存的情况的例子。图4B所示的例子中，作为私人区域，按每个用户ID保存有区域ID、图像数据的地址。此外，将图像数据例如作为位图(bitmap)数据来保存到私人区域保存部14。

接着，对图像处理级别保存部15中所保存的图像处理规则进行说明。图5A是示出图像处理规则中、区域类别隐私级别管理表的一例的图。图5A中，区域类别隐私级别管理表中按与隐私的级别对应的区域类别(例如，私人区域、公共区域、他人的私人区域、分界区域等)，保存有图像处理级别。图像处理区域生成部16基于区域类别隐私级别管理表，例如决定以高分辨率来对私人区域进行图像处理，并将分界区域变更为中等程度的分辨率的图像。图像处理规则中对私人区域设定了分辨率高(即、清晰的)的图像处理级别，对于其他的区域而言，为了保护隐私，设定了低于私人区域的分辨率(即、不清晰)的图像处理级别。此外，使分辨率降低了的图像处理级别不仅是为了保护隐私而降低图像的分辨率，还包含对图像实施阴影处理或马赛克处理等的概念。

图5B是示出图像处理规则中、区域属性信息管理表的一例的图。图5B中，区域属性信息管理表中按每个区域ID注册有追加许可用户ID和分辨率阈值。通过使用区域属性信息管理表，能够按每个与区域ID对应的区域来对用户进行设定。例如，设定：不对区域ID为“1”的区域进行降低分辨率的图像处理(例如，不实施阴影处理)，就将该区域ID为“1”的区域发送给追加许可用户ID为“350”的用户。即，即使与区域ID对应的区域是他人的私人区域，也能够与发送自己的私人区域同样地，以高分辨率将图像发送给注册了追加许可用户ID的用户。

此外，图5B中，通过使用分辨率阈值，可在区域属性信息管理表中设定下述的分辨率的级别：不需要对与区域ID对应的区域进行降低分辨率的处理(例如，不需要实施阴影处理)。例如，以区域ID是与“1”对应的区域为例，在以区域的大小是5像素以下的分辨率来进行拍摄的情况下，由于其非常小，没有作为私人信息而被传送的可能性，所以不进行阴影处理就将图像传送。此外，图像处理级别保存部15既可以只将图5A所示的区域类别隐私级别管理表作为图像处理规则来保存，也可以将图5A所示的区域类别隐私级别管理表和图5B所示的区域属性信息管理表两方都作为图像处理规则来保存。

接着，结合图6，对本发明的第1实施方式所涉及的图像传送装置100传送图像时的动作进行说明。如图6所示，图像传送装置100在受理来自客户端装置50的输入的状态下待机(步骤S10)。根据请求图像传送的用户的操作，图像的传送请求从客户端装置50通过网络30而被发送至图像传送装置100。传送请求中设定有用户信息以及用户希望传送的区域(希望传送区域)。

接着，接收到传送请求的图像传送装置100中，通信部11将传送请求中所设定的用户信息发送给认证部12。认证部12在根据发送来的用户信息对用户进行了认证的情况下(步骤S11：是)，进入步骤S12。不能够对用户进行认证情况下(步骤S11：否)，请求出现错误(步骤S17)而结束处理。

并且，认证部12根据用户信息决定用户ID，将从通信部11接收到的希望传送区域和用户ID发送给剪切区域保存部13。例如，如图3所示，剪切区域保存部13对请求ID进行分配，并将接收到的希望传送区域作为剪切区域与用户ID一起进行保存(步骤S12)。

当剪切区域保存在剪切区域保存部13中时，图像处理区域生成部16向私人区域保存部14询问用户ID及剪切区域中是否含有私人区域。私人区域保存部14基于用户ID，在剪切区域中提取用户的私人区域，以及用户以外的他人的私人区域，并返回给图像处理区域生成部16(步骤S13)。

接着，图像处理区域生成部16向图像处理级别保存部15询问对用户的私人区域、他人的私人区域、以及其他的区域的公共区域要以怎样的分辨率来进行图像处理，或者是否对图像进行加工。并且，分别对私人区域检查追加许可用户ID是否与用户ID一致，一致的情况下，将该私人区域作为可以向用户传送图像的区域。

此外，图像处理区域生成部16在私人区域的分辨率已决定的阶段，计算该私人区域中所包含的像素数据的数量，当该数量小于所保存的分辨率阈值的情况下，判断为图像已经够模糊不会导致侵犯隐私的问题，从而可以省略阴影处理。在这些处理以后，决定最终的图像加工方法，并通知给图像加工部17(步骤S14)。

图像加工部17通过从图像处理区域生成部16获得的图像加工方法，对从图像获取部18获得的图像进行处理(步骤S15)，并经由通信部11及网络30发送给客户端装置50(步骤S16)。此外，由于多个他人的私人区域通过OR运算而被作为1个区域通知，所以图像加工部17只对该1个区域的图像进行处理便可。

接着，对多人将同一区域指定为自己的私人区域的情况下的动作进行说明。此外，在他人显然指定了自己的私人区域的情况下，与该他人(或者管理者)等联系要求更改对私人区域的指定。此外，当自己的私人区域与他人的私人区域之间的重叠区域在允许的误差范围内的情况下，将重叠区域作为分界区域，对该分界区域进行阴影处理等便可。此外，当自己的私人区域与他人的私人区域之间的重叠区域在一定量以上的范围内的情况下，可以将该重叠区域作为自己的私人区域来对待。

多人将同一区域指定为自己的私人区域的情况，有多人将2代同居的住宅或集体住宅的共有部分指定为私人区域的情况。该情况下，即使他人的私人区域被指定在同一范围，只要在指定自己的私人区域的情况下使自己的私人区域的指定优先便可。例如，会有私人区域保存部14中保存有用户ID不同但却指定了同一区域的2个私人区域的情况(例如，参照图7A)。此外，就区域ID而言，既可以对同一区域设定相同的区域ID，也可以对同一区域设定不同的区域ID。该情况下，图像处理区域生成部16参照私人区域保存部14，将与已被认证的用户ID对应的区域作为私人区域来优先对待。

此外，在多人将同一区域指定为自己的私人区域的情况下，可以利用图像处理规则中的区域属性信息管理表，设定将多人的共有部分作为私人区域来对待。即，在区域属性信息管理表中，通过对表示共有部分的区域ID设定追加许可ID，从而多人能够将共有部分指定为私人区域。图7B所示的例子中，在区域ID为“1”的区域设定有追加许可用户ID“570”和“571”。

此外，作为区域类别，也可以在图像处理规则的区域类别隐私级别管理表中追加“分组(group)区域”(例如，参照图7C)。分组区域是指多人可以指定为监视对象的区域。此外，也可以在图像处理规则的区域属性信息管理表中追加区域类别(例如，参照图7D)。该情况下，作为私人区域保存部14中所保存的私人区域，一个用户(用户ID“568”)具有私人区域的区域ID“1”和分组区域的区域ID“2”两个ID(例如，参照图7E)。通过多人指定分组区域的区域ID，从而多人能够共享分组区域，并能够对分辨率级别进行变更。

如上所述，图像传送装置100能够对用户的私人区域、用户以外的他人的私人区域、公共区域等进行区别，并通过最佳的分辨率来对各个区域进行图像处理或阴影处理等，从而将图像传送给用户。由此，能够根据用户的私人区域、作为公共的区域的公共区域等，既实现安全防范和隐私保护的两立，又能够传送适当的图像。例如，发出了传送请求的用户不仅能够通过高分辨率的图像来对用户自己的私人区域的每个角落进行确认，而且还能够在一定程度上考虑到他人的隐私的情况下，通过低分辨率的图像来对公共道路进行确认。

此外，由于由各个用户来注册私人区域，所以，不仅能够完全覆盖不想被他人看到的区域，而且观看传送来的图像的用户即使不知道哪个区域是与谁的隐私有关的区域，也能够看到不涉及他人隐私的所有的区域。此外，当私人区域被拍得很小时，在充分考虑到隐私问题的状态下，也可以设定成不进行阴影处理。

此外，私人区域保存部14也可以将任意的私人区域之间的重叠部分，或包含其周边的区域识别为分界区域，并通知图像处理区域生成部16。此外，私人区域之间的边界区域的检测，既可以是图像处理区域生成部16基于私人区域的数据来进行，也可以是，图像处理区域生成部16从图像处理级别保存部15获取对分界区域的处理，根据该获得的内容，图像加工部17对分界区域的图像进行处理。图5A所示的例子中，以中等程度的分辨率来对分界区域进行显示，所以在传送图像时，既能够实现隐私保护又能够确保安全防范。

此外，上述说明中，将传送给用户的区域作为用户所指定的区域，但如图8所示，例如在要传送的区域中含有如他人的私人区域那样被施加了阴影的区域51的情况下，图像加工部17可以将被施加了阴影的区域51删除来加工图像。被施加了阴影的区域51对于接收传送视频的用户而言是没有意义的部分。因此，由于图像传送装置100不传送被施加了阴影的区域51，所以要传送的矩形区域变小。由此通过将用户不需要的区域删除后进行传送，能够减少通信时间、通信量。

此外，在上述说明中，如图4A及图4B所示，说明了用户将通过二维直线或曲线围成的区域作为私人区域，注册到私人区域保存部14的情况。但如图9A所示，图像传送装置100B也可以基于通过位置或拍摄装置的参数已知的立体拍摄装置而拍摄的立体图像，来生成3D模型，并通过将该3D模型与2D私人区域进行对照，来判定立体图像的哪个区域属于用户的私人区域，从而作为私人区域而保存。

图9B是示出图像传送装置100B的结构的一例的方框图。图9B中，图像获取部28包括立体拍摄装置。私人区域注册部29具有将从立体拍摄装置所拍摄的立体图像获得的私人区域保存到私人区域保存部14的功能。例如，私人区域注册部29将基于立体图像而生成的3D模型的X坐标、Y坐标与预先所保存的私人区域的X坐标、Y坐标进行比较，并将3D模型上对应的点的集合再次复原为二维图像，从而在二维图像上求出哪个区域与哪个用户的私人区域对应，并注册到私人区域保存部14。这样，图像传送装置100B通过使用立体拍摄装置所拍摄的立体图像，以及表示2D私人区域的地图来注册私人区域，能够省去用户每次注册私人区域的麻烦。

(第2实施方式)

图10是示出本发明的第2实施方式所涉及的图像传送装置200的结构的一例的方框图。图10中，图像传送装置200与第1实施方式所涉及的图像传送装置100相比，还具备公共区域保存部19。公共区域保存部19保存通过图像处理区域生成部16所制作的用户ID以及与用户的希望传送区域对应的公共区域。图像传送装置200中，对与图1及图2相同的构成要素用相同的参考标记，并省略其说明。

图11是表示公共区域保存部19中所保存的公共区域的数据的一例。如图11所示，在用户ID为“568”的用户请求左上的X坐标、Y坐标、宽、高分别为“10、10、30、50”的区域的情况下，将此时的公共区域保存到公共区域保存部19。该情况下，将家门前的公共区域以公共区域ID为“500”来进行保存。然后，当同一用户请求同一希望传送区域时，图像处理区域生成部16就不用再次计算公共区域，而利用该公共区域保存部19中所保存的区域的数据。图像加工部17根据图像处理区域生成部16所通知的公共区域，对图像进行处理。

上述结构使用公共区域保存部19中所保存的公共区域的数据，与每次接收来自用户的请求来计算公共区域相比，能够迅速地求出公共区域，从而能够实现处理的高速化。

此外，公共区域保存部19中可以不用只保存公共区域，还可以同时保存该区域的加工方法、或分界区域及其加工方法等。

(第3实施方式)

第3实施方式所涉及的图像传送装置300根据来自用户的请求，拍摄装置可以一边变焦和/或移动一边进行拍摄。图12是示出本发明的第3实施方式所涉及的图像传送装置300的结构的一例的方框图。图12中，图像传送装置300与第1实施方式所涉及的图像传送装置100相比，还具备拍摄位置检测部20。拍摄位置检测部20在拍摄装置变焦或移动时，对拍摄装置的拍摄位置进行检测。图像获取部38按照通过通信部11等而被输入的、使拍摄装置变焦或移动的指示，来改变拍摄装置的拍摄位置。图像传送装置300中，对与图1及图2相同的构成要素用相同的参考标记，并省略其说明。

图像传送装置300在拍摄装置一边变焦或移动一边进行拍摄的情况下，能够使用例如以下的两种方法来检测拍摄装置的拍摄位置。第1种方法中，如图13A所示，拍摄位置检测部20预先保存拍摄装置位于基本位置在拍摄区域内所拍摄的基准图像502。接着，当拍摄区域因拍摄装置的变焦或移动而发生变化时，拍摄位置检测部20通过图像认证处理判定基准图像502在拍摄区域内发生了怎样的变化，并根据基准图像502的变化来检测拍摄装置的拍摄位置。

第2种方法中，如图13B所示，拍摄位置检测部20预先保存拍摄装置位于基本位置时，任意对象的点与拍摄装置的拍摄位置之间的相对关系(例如，对象点与拍摄装置之间的距离等)。接着，拍摄位置检测部20根据因拍摄装置的遥摄等所产生的移动角度，来求出移动后的对象点与拍摄装置之间的相对关系。然后，使用该相对关系的变化以及拍摄装置的焦距等拍摄装置的固有参数，通过计算来求出对象点被转换到图像的哪个位置。拍摄位置检测部20由此来检测拍摄装置的拍摄位置。

如上所述，在拍摄装置一边变焦或移动一边进行拍摄的情况下，由于拍摄位置检测部20对拍摄装置的拍摄位置进行检测，所以图像传送装置300也能够对用户的私人区域、用户以外的他人的私人区域、公共区域等进行区别，并通过最佳的分辨率来对各个区域进行图像处理或阴影处理等，从而将图像传送给用户。

(第4实施方式)

第4实施方式所涉及的图像传送装置400在发现目标物的情况下，即使当目标物与他人的私人区域重叠时，也能够传送高分辨率的图像(或者、与自己的私人区域经过相同处理的图像)。图14是示出本发明的第4实施方式所涉及的图像传送装置400的结构的一例的方框图。图14中，图像传送装置400与第1实施方式所涉及的图像传送装置100相比，还具备图像注册部21。以下对目标物是可疑人时的处理进行说明。

如图15所示，在可疑人503与他人的私人区域504重叠的情况下，图像传送装置400传送可疑人503的高分辨率的图像。如图16所示，图像注册部21中例如注册有有关人员的脸部图像的数据库。有关人员的脸部图像既可以事先注册到图像注册部21中，也可以经由通信部11从客户端装置50来注册。此外，图像传送装置400除了在可疑人503与他人的私人区域504重叠的情况下，传送可疑人503的高分辨率的图像以外，在可疑人503与图像处理级别因为了保护隐私而被设定为低于私人区域的分辨率(即、不清晰)的区域重叠的情况下，也可以传送可疑人503的高分辨率的图像。

图17是示出图像传送装置400在传送图像时的动作的一例的流程图。如图17所示，因步骤S10～S13、及步骤S14～S17的动作与第1实施方式相同，所以省略其说明。步骤S21中，图像处理区域生成部16判定人物的脸部图像是否被重叠拍摄在他人的私人区域504上。人物的脸部图像没有被拍摄的情况下(步骤S21：否)，进入步骤S14，并进行与第1实施方式同样的处理。

而在人物的脸部图像被拍摄的情况下(步骤S21：是)，图像处理区域生成部16判定所拍摄的人物的脸部图像是否与图像注册部21中所注册的有关人员的脸部图像一致(步骤S22)。所拍摄的人物的脸部图像与有关人员的脸部图像都不一致的情况下(步骤S22：否)，图像处理区域生成部16判定为所拍摄的人物是可疑人503，并决定以高分辨率来对可疑人503(或者可疑人503被拍到的区域)进行图像处理(步骤S23)。另一方面，在所拍摄的人物的脸部图像与任意的有关人员的脸部图像一致的情况下(步骤S22：是)，图像处理区域生成部16判定为所拍摄的人物是有关人员，决定与他人的私人区域504进行相同的图像处理。

此外，在预先知道可疑人503的脸部图像的情况下，图像传送装置400也可以将可疑人503的脸部图像注册到图像注册部21，来直接搜寻可疑人503。可疑人503的脸部图像既可以事先注册到图像注册部21，也可以经由通信部11由客户端装置50来注册。该情况下，图像处理区域生成部16在决定图像处理方法时，若在人物的脸部图像被重叠拍摄在他人的私人区域504上，则判定所拍摄的人物的脸部图像是否与图像注册部21中所注册的可疑人503的脸部图像一致。

在所拍摄的人物的脸部图像与可疑人503的脸部图像一致的情况下，图像处理区域生成部16判定为所拍摄的人物是可疑人503，决定以高分辨率来对可疑人503(或者可疑人503被拍到的区域)进行图像处理。而在所拍摄的人物的脸部图像与可疑人503的脸部图像不一致的情况下，图像处理区域生成部16判定为所拍摄的人物不是可疑人503，决定与他人的私人区域504进行相同的图像处理。

此外，图18如所示，区域类别隐私级别管理表的区域类别中也可以注册可疑人区域。该情况下，图像处理区域生成部16决定按照区域类别隐私级别管理表所规定的级别来对可疑人503(或者可疑人503被拍到的区域)进行图像处理。此外，目标物并不仅限于可疑人，例如也可以是特定的人物、动物或特定的车辆等。

根据上述结构，在发现目标物的情况下，即使目标物与他人的私人区域重叠，图像传送装置400也能够传送高分辨率的图像。

此外，上述本发明的各个实施方式中的图像传送装置所具备的各个功能块所执行的各种处理顺序也可以通过以下方法来实现：通过CPU来解读执行存储在存储装置(ROM、RAM、硬盘等)的、可执行上述处理顺序的规定的程序数据。该情况下，程序数据既可以经由存储介质导入存储装置内，也可以从存储介质上直接执行。此外，存储介质是指ROM、RAM或闪存等半导体存储器，软盘或硬盘等磁盘存储器，CD-ROM、DVD、BD等光盘存储器，以及存储卡等。此外，存储介质的概念包括电话线、传输路径等通信介质。

此外，上述本发明的各个实施方式中的图像传送装置所具备的各个功能块也可以通过集成电路LSI(Large Scale Integration)来实现。例如，如图19所示，图像传送装置100中，认证部12、剪切区域保存部13、私人区域保存部14、图像处理级别保存部15、及图像处理区域生成部16可以通过集成电路来构成。这些构成可以被单独地做成单芯片，或做成包含一部分或全部的单芯片。本发明中称为LSI，但根据集成度的不同，也可以称为IC、系统LSI、超级(super)LSI、特级(ultra)LSI。

此外，电路集成的方法不仅仅局限于LSI，也可以通过专用电路或通用处理器来实现。此外，也可以利用LSI制造后能够进行编程的现场可编程门阵列(Field Programmable Gate Array)，或LSI内部的电路元件的连接或设定能够重构的可重构处理器。此外，也可以采用具备处理器或存储器等硬件资源处理器执行储存在ROM中的控制程序的结构。

此外，随着半导体技术的进步或派生出另外的技术，若出现了能够取代LSI的电路集成技术，理所当然，也可以应用该技术对功能块进行集成。也有可能应用生物技术。

工业实用性

本发明的图像传送装置具有在考虑到隐私的情况下对图像进行加工的功能，作为安防拍摄装置、监视系统等非常实用。

附图标记说明

100、200，300，400  图像传送装置

11  通信部

12  认证部

13  剪切区域保存部

14  私人区域保存部

15  图像处理级别保存部

16  图像处理区域生成部

17  图像加工部

18，28，38  图像获取部

19  公共区域保存部

20  拍摄位置检测部

21  图像注册部

30  网络

50  客户端装置

Claims (19)

1.一种图像传送装置，将所拍摄的图像传送给客户端装置，其特征在于，具备：

通信部，与所述客户端装置进行通信；

图像获取部，获取所述图像；

私人区域保存部，保存有关用户的隐私的区域、即私人区域；

认证部，根据经由所述通信部从所述客户端装置接收到的图像传送请求中所包含的信息，来对用户进行认证；

剪切区域保存部，将所述已被认证的用户的希望传送区域作为剪切区域保存；

图像处理级别保存部，按隐私不同的区域来对规定了图像处理级别的图像处理规则进行保存；

图像处理区域生成部，从所述剪切区域保存部获取所述已被认证的用户的剪切区域，从所述私人区域保存部获取所述获得的剪切区域中、所述已被认证的用户的私人区域，以及所述获得的剪切区域中、所述已被认证的用户以外的他人的私人区域，并从所述图像处理级别保存部获取所述图像处理规则，根据该获得的图像处理规则对所述剪切区域的各个区域决定图像处理方法；

图像加工部，根据所述图像处理区域生成部所决定的图像处理方法，对所述图像获取部所获得的图像进行加工。

2.根据权利要求1所述的图像传送装置，其特征在于：

所述图像处理级别保存部保存对所述已被认证的用户的私人区域、以及所述已被认证的用户以外的他人的私人区域规定了图像处理级别的图像处理规则，

为了保护隐私，对所述他人的私人区域的图像处理级别是比所述已被认证的用户的私人区域不清晰的图像处理级别。

3.根据权利要求1所述的图像传送装置，其特征在于：

所述图像处理级别保存部保存对私人区域之间的边界区域规定了图像处理级别的图像处理规则，向所述图像处理区域生成部通知，对所述已被认证的用户的私人区域与所述他人的私人区域相接近的区域及其附近的区域的图像处理级别是对所述分界区域的图像处理级别，

为了保护隐私，对所述分界区域的图像处理级别是比所述已被认证的用户的私人区域不清晰的图像处理级别。

4.根据权利要求1所述的图像传送装置，其特征在于：

所述图像处理级别保存部保存对私人区域之间的边界区域规定了图像处理级别的图像处理规则，向所述图像处理区域生成部通知，对所述已被认证的用户的私人区域与所述他人的私人区域重叠的区域及其附近的区域的图像处理级别是对所述分界区域的图像处理级别，

为了保护隐私，对所述分界区域的图像处理级别是比所述已被认证的用户的私人区域不清晰的图像处理级别。

5.根据权利要求1所述的图像传送装置，其特征在于：

所述图像处理级别保存部保存对私人区域以外的公共区域规定了图像处理级别的图像处理规则，

为了保护隐私，对所述公共区域的图像处理级别是比所述已被认证的用户的私人区域不清晰的图像处理级别。

6.根据权利要求2所述的图像传送装置，其特征在于：

所述图像处理区域生成部根据从所述图像处理级别保存部获得的所述图像处理规则，决定以高分辨率来对所述已被认证的用户的私人区域进行图像处理，并决定以低分辨率来对所述他人的私人区域进行图像处理。

7.根据权利要求3或4所述的图像传送装置，其特征在于：

所述图像处理区域生成部根据从所述图像处理级别保存部获得的所述图像处理规则，决定以高分辨率来对所述已被认证的用户的私人区域进行图像处理，并决定以低分辨率来对所述分界区域进行图像处理。

8.根据权利要求5所述的图像传送装置，其特征在于：

所述图像处理区域生成部计算所述已被认证的用户的所述剪切区域中、所述私人区域以外的公共区域，并根据从所述图像处理级别保存部获得的所述图像处理规则，决定以高分辨率来对所述已被认证的用户的私人区域进行图像处理，并决定以低分辨率来对所述公共区域进行图像处理。

9.根据权利要求6所述的图像传送装置，其特征在于，还具备：

图像注册部，注册有关人员的脸部图像，

当被重叠拍摄在所述他人的私人区域上的人物的脸部图像与所述图像注册部中所注册的有关人员的脸部图像不一致时，所述图像处理区域生成部判定为所述所拍摄到的人物是可疑人，并决定以高分辨率来对所述可疑人进行图像处理。

10.根据权利要求9所述的图像传送装置，其特征在于：

所述图像处理级别保存部还保存对所述可疑人规定了图像处理级别的图像处理规则，

所述图像处理区域生成部根据对所述可疑人的图像处理级别，决定所述可疑人的图像处理级别。

11.根据权利要求8所述的图像传送装置，其特征在于，还具备：

公共区域保存部，保存所述已被认证的用户ID、以及与所述已被认证的用户的希望传送区域对应的所述公共区域，

在同一用户请求同一希望传送区域的情况下，所述图像处理区域生成部从所述公共区域保存部读出所述已被认证的用户ID、以及与所述已被认证的用户的希望传送区域对应的所述公共区域，并对该所读出的公共区域决定所述图像处理。

12.根据权利要求6所述的图像传送装置，其特征在于：

所述图像处理级别保存部保存与所述私人区域对应的分辨率阈值，

当所述他人的私人区域的大小小于所述分辨率阈值时，为了保护隐私，所述图像处理区域生成部决定不对所述他人的私人区域进行降低分辨率的图像处理。

13.根据权利要求6所述的图像传送装置，其特征在于：

所述图像处理级别保存部保存与所述私人区域对应的追加许可用户ID，

当图像传送目的地的用户ID与所述追加许可用户ID一致时，所述图像处理区域生成部决定不对所述他人的私人区域进行降低分辨率的图像处理。

14.根据权利要求1所述的图像传送装置，其特征在于：

所述剪切区域保存部从所述已被认证的用户接收时刻变化的所述希望传送区域，并根据该接收到的区域来变更所述剪切区域。

15.根据权利要求1所述的图像传送装置，其特征在于：

所述图像获取部获取立体图像，并且，

所述图像传送装置还具备私人区域注册部，该私人区域注册部基于所述图像获取部所获得的立体图像来制作三维模型，并通过将该三维模型与二维的私人区域上所写的地图数据建立对应，来判定所述立体图像的各个区域是否是各个用户的私人区域，并将该所判定的私人区域注册到所述私人区域保存部。

16.根据权利要求1所述的图像传送装置，其特征在于：

所述图像加工部当检测出发送给用户的图像数据的周边部分因为了保护隐私而被进行了图像处理时，将该部分删除后通知给所述通信部。

17.一种图像传送装置所执行的方法，该图像传送装置将所拍摄的图像传送给客户端装置，其特征在于：

所述图像传送装置具备，

私人区域保存部，保存有关用户的隐私的区域，即私人区域；

剪切区域保存部，保存传送给用户的图像的剪切区域；以及

图像处理级别保存部，按隐私不同的区域来保存规定了图像处理级别的图像处理规则；

所述方法包括下述步骤，

获取所述图像的步骤，

根据从所述客户端装置接收到的图像传送请求中所包含的信息，来对用户进行认证的步骤，

将所述已被认证的用户的希望传送区域作为所述剪切区域保存到所述剪切区域保存部的步骤，

从所述剪切区域保存部获取所述已被认证的用户的剪切区域，从所述私人区域保存部获取所述所获得的剪切区域中、所述已被认证的用户的私人区域，以及所述所获得的剪切区域中、所述已被认证的用户以外的他人的私人区域，并从所述图像处理级别保存部获取所述图像处理规则，根据该获得的图像处理规则对所述剪切区域的各个区域决定图像处理方法的步骤，

根据所述图像处理方法，对所述所获得的图像进行加工的步骤。

18.一种图像传送装置所执行的程序，该图像传送装置将所拍摄的图像传送给客户端装置，其特征在于：

所述图像传送装置具备，

私人区域保存部，保存有关用户的隐私的区域，即私人区域；

剪切区域保存部，保存传送给用户的图像的剪切区域；以及

图像处理级别保存部，按隐私不同的区域来保存规定了图像处理级别的图像处理规则；

所述程序执行下述步骤，

获取所述图像的步骤，

根据从所述客户端装置接收到的图像的传送请求中所包含信息，来对用户进行认证的步骤，

将所述已被认证的用户的希望传送区域作为所述剪切区域保存到所述剪切区域保存部的步骤，

从所述剪切区域保存部获取所述已被认证的用户的剪切区域，从所述私人区域保存部获取所述所获得的剪切区域中、所述已被认证的用户的私人区域，以及所述所获得的剪切区域中、所述已被认证的用户以外的他人的私人区域，并从所述图像处理级别保存部获取所述图像处理规则，根据该获得的图像处理规则对所述剪切区域的各个区域决定图像处理方法的步骤，

根据所述图像处理方法，对所述所获得的图像进行加工的步骤。

19.一种图像传送装置所具备的集成电路，该图像传送装置将所拍摄的图像传送给客户端装置，其特征在于：

所述图像传送装置具备，

通信部，与所述客户端装置进行通信；

图像获取部，获取所述图像；

所述集成电路具备，

私人区域保存部，保存有关用户的隐私的区域，即私人区域；

认证部，根据经由所述通信部从所述客户端装置接收到的图像的传送请求中所包含的信息，来对用户进行认证；

剪切区域保存部，将所述已被认证的用户的希望传送区域作为剪切区域保存；

图像处理级别保存部，按隐私不同的区域保存规定了图像处理级别的图像处理规则；

图像处理区域生成部，从所述剪切区域保存部获取所述已被认证的用户的剪切区域，从所述私人区域保存部获取所述所获得的剪切区域中、所述已被认证的用户的私人区域，以及所述所获得的剪切区域中、所述已被认证的用户以外的他人的私人区域，并从所述图像处理级别保存部获取所述图像处理规则，根据该获得的图像处理规则对所述剪切区域的各个区域决定图像处理方法；

图像加工部，根据所述图像处理区域生成部所决定的图像处理方法，对所述图像获取部所获得的图像进行加工。

Images