CN112585605A - 信息处理系统、信息处理方法、终端装置和信息处理装置 - Google Patents

信息处理系统、信息处理方法、终端装置和信息处理装置 Download PDF

Info

Publication number
CN112585605A
CN112585605A CN201980055080.1A CN201980055080A CN112585605A CN 112585605 A CN112585605 A CN 112585605A CN 201980055080 A CN201980055080 A CN 201980055080A CN 112585605 A CN112585605 A CN 112585605A
Authority
CN
China
Prior art keywords
image
specific object
unit
communication unit
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201980055080.1A
Other languages
English (en)
Inventor
石丸干朗
远藤健太
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN112585605A publication Critical patent/CN112585605A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6209—Protecting access to data via a platform, e.g. using keys or access control rules to a single file or object, e.g. in a secure envelope, encrypted and accessed using a key, or with access control rules appended to the object itself
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6245—Protecting personal data, e.g. for financial or medical purposes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/70—Protecting specific internal or peripheral components, in which the protection of a component leads to protection of the entire computer
    • G06F21/82—Protecting input, output or interconnection devices
    • G06F21/84—Protecting input, output or interconnection devices output devices, e.g. displays or monitors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/913—Television signal processing therefor for scrambling ; for copy protection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/913—Television signal processing therefor for scrambling ; for copy protection
    • H04N2005/91357—Television signal processing therefor for scrambling ; for copy protection by modifying the video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Bioethics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Medical Informatics (AREA)
  • Databases & Information Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Studio Devices (AREA)

Abstract

终端装置(30)包括固态摄像元件(3003)和第一通信单元(303)。所述固态摄像元件(3003)包括图像传感器(3100)、图像处理单元(3104)和输出接口(3103)。图像传感器(3100)将接收到的光转换成图像。图像处理单元(3104)检测图像中的特定对象。输出接口(3103)输出图像。第一通信单元(303)传送从输出接口输出的图像。信息处理装置(10)包括第二通信单元(100)和处理器(1000)。第二通信单元接收从终端装置传送的图像。如果第二通信单元接收到的图像是具有由图像处理单元已经检测到特定对象的图像，那么处理器执行掩饰特定对象的掩饰处理。

Description

信息处理系统、信息处理方法、终端装置和信息处理装置
技术领域
本公开涉及一种信息处理系统、信息处理方法、终端装置和信息处理装置。
背景技术
随着因特网(Internet)的发展，诸如社交网络服务(SNS：Social NetworkingService)等服务已经普及。只有注册帐户并使用特定的应用软件的用户才可以使用此类服务。此外，对于此类服务，用户具有越来越多的机会发布由用户自己拍摄的拍摄图像。通常，在诸如SNS等服务中，访问在该服务中被关闭，因此，即使在该服务中发布的拍摄图像包含诸如面部等个人信息，也可以防止该事实发展为严重的问题。
相反，当在SNS上发布的拍摄图像被带到SNS之外时，拍摄图像可能会泄漏到因特网。信息一旦泄漏到因特网，那么收集该信息是极其困难的。因此，需要发布拍摄图像的人或SNS侧预先采取一些保护隐私的措施。作为这种措施的一个示例，存在已知技术，其用于在从拍摄图像中检测到面部的情况下，通过对检测到的面部的区域进行诸如使面部识别困难的掩饰处理等一些处理来保护隐私(例如，专利文献1)。通过对发布的拍摄图像执行这种处理，即使当拍摄图像被带到SNS之外时，也可以保护隐私。
引用列表
专利文献
专利文献1：JP 2009-194687A
发明内容
技术问题
不幸的是，在针对拍摄图像的常规隐私保护措施中，拍摄图像直接被处理，使得即使在SNS中也无法观看未经处理的原始拍摄图像。
本公开的目的是提供一种信息处理系统、信息处理方法、终端装置和信息处理装置，其能够使处理之前的原始图像的观看和处理之后的图像的观看兼容。
解决问题的方案
为了解决上述问题，根据本公开的一个方面的信息处理系统具有终端装置；和信息处理装置。所述终端装置包括：固态摄像元件；和第一通信单元。所述固态摄像元件包括：图像传感器，其将接收到的光转换成图像；图像处理单元，其检测所述图像中的特定对象；和输出接口，其输出所述图像。所述第一通信单元传送从所述输出接口输出的图像。所述信息处理装置包括：第二通信单元；和处理器，其中，所述处理器通过所述第二通信单元接收从所述终端装置传送的图像；并且当通过所述第二通信单元接收到的图像是其中所述图像处理单元检测到所述特定对象的图像时，所述处理器执行掩饰所述特定对象的掩饰处理。
附图说明
图1示意性地示出了可适用于各实施方案的信息处理系统的构成的一个示例。
图2示意性地示出了由根据第一实施方案的信息处理系统执行的处理的流程。
图3是示出了可适用于第一实施方案的服务器的硬件构成的示例的框图。
图4是示出了可适用于第一实施方案的终端装置的硬件构成的示例的框图。
图5是示出了可适用于第一实施方案的摄像单元的硬件构成的示例的框图。
图6示出了其中根据第一实施方案的摄像单元由具有两层结构的层叠型CIS形成的示例。
图7示出了其中根据第一实施方案的摄像单元由具有三层结构的层叠型CIS形成的示例。
图8是示出了根据第一实施方案的终端装置的功能的一个示例的功能框图。
图9是示出了根据第一实施方案的服务器的功能的一个示例的功能框图。
图10是示出了由根据第一实施方案的终端装置执行的用于拍摄图像的上传处理的一个示例的流程图。
图11示意性地示出了可适用于第一实施方案的如何从拍摄图像检测特定对象。
图12示意性地示出了可适用于第一实施方案的如何从拍摄图像检测特定对象。
图13是示出了根据第一实施方案的服务器中的处理的一个示例的流程图。
图14示出了根据第一实施方案的其中对拍摄图像中包括的每个矩形区域执行掩饰处理的示例。
图15示出了根据第一实施方案的其中对拍摄图像中包括的每个矩形区域执行掩饰处理的示例。
图16示意性地示出了可适用于第一实施方案的对通过JPEG方法压缩和编码的图像中的矩形区域进行加密的方法的示例。
图17是示出了根据第一实施方案的信息处理系统的整体操作的一个示例的顺序图。
图18是示出了根据第二实施方案的服务器中的处理的一个示例的流程图。
图19是示出了根据第二实施方案的信息处理系统的整体操作的一个示例的顺序图。
图20示出了根据第三实施方案的信息处理系统的构成的示例。
具体实施方式
下面将参照附图详细说明本公开的实施方案。注意，在以下实施方案中，相同的附图标记附加于相同的部分，从而省略重复的说明。
[可适用于各实施方案的系统的概述]
图1示意性地示出了可适用于各实施方案的信息处理系统的构成的一个示例。在图1中，信息处理系统1包括作为硬件构成的服务器10和终端装置30。服务器10和终端装置30通过例如因特网等网络2连接。
例如，服务器10由云网络3上的多个信息处理装置和存储装置分散地构成。不限于此，服务器10可以由例如包括存储装置的一个信息处理装置构成。终端装置30是诸如智能电话和平板计算机等移动终端，并且具有摄像功能。用户31可以将通过使用终端装置30的摄像功能拍摄的拍摄图像传送到网络2。
信息处理系统1还可以包括可以连接到网络2的终端装置40和41。在该示例中，终端装置40和终端装置41分别以移动终端和台式个人电脑(PC)示出。
在信息处理系统1中，服务器10向已注册帐户的人提供封闭服务，例如，社交网络服务(SNS)。终端装置30、40和41安装有特定的应用软件。通过使用应用软件将帐户注册到服务器10，从而可以使用服务。在每个终端装置30、40和41上安装和使用该应用软件。
不限于此，应用软件可以在服务器10上操作。在这种情况下，通过由安装在每个终端装置30、40和41上的浏览器应用程序访问服务器10来使用服务。在下面的说明中，假定应用软件安装在终端装置30和40上。此外，在下面的说明中，假定由服务器10提供的服务是SNS，并且用于使用该服务的应用软件称为SNS应用。
终端装置30的用户31通过使用安装在终端装置30上的SNS应用设定帐户信息。帐户信息包含用于识别用户31的识别信息(例如，用户名和密码)。用户31通过将所设定的账户信息传送到服务器10来注册账户。服务器10基于从终端装置30传送的账户信息来验证用户31。当验证成功时，服务器10允许用户31登录到SNS。
例如，用户31通过使用终端装置30中的SNS应用登录到SNS，经由网络2将通过使用终端装置30的摄像功能拍摄的拍摄图像传送到服务器10。服务器10可以存储从终端装置30传送的拍摄图像，并且通过SNS发布拍摄图像。
类似地，在终端装置40中，终端装置40的用户(未示出)通过使用SNS应用将账户信息注册到服务器10。
[第一实施方案]
(根据第一实施方案的处理的概述)
接下来，将说明根据第一实施方案的信息处理系统。图2示意性地示出了由根据第一实施方案的信息处理系统1执行的处理的流程。用户31通过使用终端装置30上的SNS应用访问服务器10，并且登录到SNS。在登录到SNS之后，用户31通过使用终端装置30的摄像功能来拍摄被摄体的图像(步骤S1)。在终端装置30中，SNS应用分析已拍摄的拍摄图像，并且检测拍摄图像中包含的特定对象(步骤S2)。
这里，要由终端装置30检测的特定对象是指表示个人信息本身的图像或者在拍摄图像中包含的图像之中可以包含个人信息的图像。更具体地，面部的图像表示个人信息本身。此外，车辆的牌照的图像也被认为是表示个人信息本身的图像。此外，建筑物打开的窗户的图像可能包含个人信息。在终端装置30中，当从拍摄图像中检测到特定对象时，SNS应用将表示事实的识别信息(称为检测标志)添加到拍摄图像中。
终端装置30使用SNS应用经由网络2将拍摄图像传送到服务器10(步骤S3)。当表示已经检测到特定对象的检测标志被添加到从终端装置30接收的拍摄图像中时，服务器10分析拍摄图像，并且检测包含在拍摄图像中的特定对象。然后，服务器10对检测到的特定对象执行可撤销的掩饰处理(步骤S4)。掩饰处理(mask processing)导致拍摄图像中特定对象的部分的原始图像无法识别。服务器10将进行了掩饰处理的拍摄图像(称为掩饰处理图像)存储在诸如硬盘驱动器等存储装置中，并且将拍摄图像注册到SNS中。
将说明在获取在服务器10中在SNS中注册的掩饰处理图像时的处理。首先，将说明一个示例，其中具有在SNS中注册的帐户的用户通过使用安装有SNS应用的终端装置40获取注册在SNS中的掩饰处理图像。用户通过使用终端装置40中的SNS应用来访问服务器10以登录到SNS，并且向服务器10请求掩饰处理图像(步骤S10)。由终端装置40执行的对掩饰处理图像的请求是通过登录到SNS执行的合法访问来进行的。
注意，关于对掩饰处理图像的请求，用户从终端装置30登录到SNS的行为可以被视为对掩饰处理图像的请求，并且在SNS应用的操作期间由SNS应用执行的在显示屏幕上的页面切换可以被视为对掩饰处理图像的请求。此外，在SNS应用的操作期间由SNS应用执行的显示屏幕上的页面滚动和对显示图像上的显示的放大或缩小可以被视为对掩饰处理图像的请求。
注意，不需要用户来识别是否已经对在SNS应用的显示屏幕上显示的图像执行了掩饰处理。这里，对掩饰处理图像的请求包括用户在未意识到图像信息的存在的情况下操作SNS应用的处理。
根据由合法访问引起的对掩饰处理图像的请求，服务器10执行取消设置在掩饰处理图像上的掩饰的取消处理(步骤S11)。该操作能够使终端装置40通过使用SNS应用来获取其中取消了掩饰处理图像的掩饰的图像(被称为未掩饰图像)(步骤S12)。
接下来，将说明一个示例，其中在未从例如终端装置41访问SNS的情况下获取注册在SNS中的掩饰处理图像。终端装置41基于由一些方法获取的掩饰处理图像的地址访问服务器10，并且在未登录到SNS的情况下请求掩饰处理图像(步骤S20)。由终端装置41执行的对掩饰处理图像的请求是在未登录到SNS的情况下执行的未授权的访问来进行的。
响应于通过未授权的访问对掩饰处理图像的请求，服务器10不执行与掩饰有关的处理。因此，终端装置41获取仍然要进行掩饰处理的掩饰处理图像，从而不能识别出执行了掩饰处理的位置处的原始图像。
如上所述，在第一实施方案中，响应于通过登录到SNS对注册在SNS中的掩饰处理图像执行的合法访问的请求，服务器10取消对掩饰处理图像的掩饰处理，并且提供未掩饰的图像。相反，响应于通过在未登录到SNS的情况下执行的未授权的访问的请求，服务器10未取消对掩饰处理图像的掩饰处理。
因此，在根据第一实施方案的信息处理系统1中，已经取消了掩饰处理的图像的观看和执行了掩饰处理的图像的观看相对于注册在SNS中的包含特定对象的图像是兼容的。在这种情况下，信息处理系统1在SNS的控制下取消处理，即，对用户所请求的图像的掩饰处理，并且在SNS的控制之外保持对用户所请求的图像的掩饰处理。因此，可以抑制取消了掩饰处理的未掩饰图像从注册在SNS中的掩饰处理图像扩散到例如因特网上。
(根据第一实施方案的信息处理系统的详细构成)
接下来，将说明根据第一实施方案的信息处理系统1的更详细的构成。
图3是示出了可适用于第一实施方案的服务器10的硬件构成的示例的框图。注意，这里，将假定服务器10包括一个信息处理装置来进行说明。在图3中，服务器10包括均连接到总线1010的中央处理器(CPU)1000、只读存储器(ROM)1001、随机存取存储器(RAM)1002、存储器1003和通信I/F 1004。
存储器1003是诸如硬盘驱动器和闪存等非易失性大容量存储介质。存储器1003可以内置在服务器10的硬件中，或者可以是服务器10的外部存储装置。
CPU 1000根据存储在ROM 1001和存储器1003中的程序使用RAM1002作为工作存储器，以控制服务器10的整体操作。该程序包含用于提供上述SNS的程序。通信I/F 1004根据CPU 1000的指令控制与网络2的通信。
图4是示出了可适用于第一实施方案的终端装置30的硬件构成的示例的框图。在图4中，终端装置30包括均连接到总线3010的CPU 3000、ROM 3001、RAM 3002、摄像单元3003、显示控制单元3004、存储器3005、输入设备3006、数据I/F 3007和通信I/F 3008。
存储器3005是诸如硬盘驱动器和闪存等非易失性大容量存储介质。CPU 3000根据存储在ROM 3001和存储器3005中的程序使用RAM 3002作为工作存储器来控制终端装置30的整体操作。该程序包含上述SNS应用。
摄像单元3003包括摄像元件、光学系统(例如，透镜)和构成。光学系统将来自被摄体的光施加到摄像元件。该构成控制摄像元件，并且处理从摄像元件输出的信号。摄像单元3003在CPU 3000的控制下拍摄静止图像或运动图像。由摄像单元3003拍摄的拍摄图像存储在RAM 3002中。注意，在下文中，除非另有说明，否则由摄像单元3003拍摄的拍摄图像是静止图像。
显示控制单元3004基于由CPU 3000生成的显示控制信号来生成可以由显示设备3020显示的显示信号。例如，显示设备3020包括液晶显示器(LCD)和用于驱动LCD的驱动电路。用于根据由例如手指触摸的位置输出坐标信息的指示设备可以应用于输入设备3006。优选由输入设备3006和显示设备3020一体地形成的所谓的触控面板。
数据I/F 3007是用于与外部装置之间进行数据传输的接口。例如，通用串行总线(USB)和蓝牙(注册商标)可以应用于数据I/F 3007。通信I/F3008根据来自CPU 3000的指令控制与网络20的通信。
图5是示出了可适用于第一实施方案的摄像单元3003的硬件构成的示例的框图。注意，在图5中，省略了光学系统。摄像单元3003包括像素单元3100、信号处理单元3101、存储单元3102、I/F单元3103、图像处理单元3104和元件控制单元3105。摄像单元3003是其中这些单元通过使用CMOS一体地形成的互补金属氧化物半导体(CMOS)图像传感器(CIS)。
像素单元3100设置有多条扫描线和多条信号线。像素电路布置在每条扫描线和每条信号线的交叉处。多个像素电路以二维格子状设置。例如，像素电路使用光电二极管作为光电转换元件。微透镜和滤色器形成在光电二极管上。此外，像素单元3100包括行扫描电路、用于每行的模数(AD)转换器和列扫描电路。在像素单元3100中，行扫描电路扫描每行的每个像素电路，并且AD转换器将针对每行输出的模拟型像素信号转换成数字型像素数据。列扫描电路将用于每行的从A转换到D的像素数据顺序地传输到信号处理单元3101。
信号处理单元3101对已经从像素单元3100传输的像素数据执行信号处理。信号处理包括相关双采样(CDS)处理、自动增益控制(AGC)处理和白平衡(WB)处理。已经由信号处理单元3101执行了信号处理的图像数据被传输到存储单元3102和I/F单元3103。存储单元3102存储已经由信号处理单元3101执行了信号处理的图像数据。存储单元3102具有能够存储例如一帧(像素单元3100的所有像素电路)的图像数据的容量。
例如，图像处理单元3104是数字信号处理器(DSP)，并且对存储在存储单元3102中的图像数据执行预定的图像处理。在第一实施方案中，图像处理单元3104基于存储在存储单元3102中的图像数据执行检测图像(拍摄图像)中包含的预定的特定对象的检测处理。例如，图像处理单元3104通过已知技术执行基于图案识别的检测处理来检测特定对象。不限于此，图像处理单元3104可以通过使用诸如深度学习等方法来检测特定对象。当从存储在存储单元3102中的拍摄图像中检测到特定对象时，图像处理单元3104将表示该事实的检测标志写入存储单元3102中。
I/F单元3103是控制摄像单元3003与外部之间的通信的接口。例如，与移动产业处理器接口(MIPI：mobile industry processor interface)相对应的接口可以应用于I/F单元3103。不限于此，I/F单元3103可以将唯一类型的接口应用于摄像单元3003。
例如，I/F单元3103将从信号处理单元3101传输的图像数据或存储在存储单元3102中的图像数据(拍摄图像)输出到摄像单元3003的外部。例如，I/F单元3103根据来自外部的指令将从信号处理单元3101传输的图像数据和存储在存储单元3102中的图像数据之中的指定的图像数据输出到外部。
元件控制单元3105控制摄像单元3003的整体操作。例如，元件控制单元3105生成用于同步控制像素单元3100中的行扫描电路、AD转换器和列扫描电路的操作的定时信号。此外，元件控制单元3105控制图像处理单元3104的用于开始图像处理的定时。
尽管在以上说明中，摄像单元3003中包括的像素单元3100、信号处理单元3101、存储单元3102、I/F单元3103、图像处理单元3104和元件控制单元3105形成在一个基板上，但是该示例不是限制性的。例如，摄像单元3003可以是通过层叠多个半导体芯片形成的层叠型CIS。
在一个示例中，摄像单元3003可以由其中层叠有两层半导体芯片的两层结构形成。图6示出了其中根据第一实施方案的摄像单元3003由具有两层结构的层叠型CIS形成的示例。在图6的结构中，像素单元3100形成在第一层的半导体芯片上，并且存储器+逻辑单元3200形成在第二层的半导体芯片上。例如，存储器+逻辑单元3200包括信号处理单元3101、存储单元3102、I/F单元3103、图像处理单元3104和元件控制单元3105。注意，第一层的半导体芯片可以包括像素单元3100和信号处理单元3101。如图6的右侧所示，摄像单元3003通过使第一层的半导体芯片和第二层的半导体芯片彼此电接触并且将这些半导体芯片粘合在一起来构成一个固态摄像元件。
在另一示例中，摄像单元3003可以由其中层叠有三层半导体芯片的三层结构形成。图7示出了其中根据第一实施方案的摄像单元3003由具有三层结构的层叠型CIS形成的示例。在图7的结构中，像素单元3100形成在第一层的半导体芯片上，存储单元3102形成在第二层的半导体芯片上，并且逻辑单元3201形成在第三层的半导体芯片上。在这种情况下，例如，逻辑单元3201包括信号处理单元3101、I/F单元3103、图像处理单元3104和元件控制单元3105。注意，第一层的半导体芯片可以包括像素单元3100和信号处理单元3101。如图7的右侧所示，摄像单元3003通过使第一层的半导体芯片、第二层的半导体芯片和第三层的半导体芯片彼此电接触并且将这些半导体芯片粘合在一起来构成一个固态摄像元件。
图8是示出了根据第一实施方案的终端装置30的功能的一个示例的功能框图。在图8中，终端装置30包括摄像处理单元300、对象检测单元301、应用单元302和通信单元303。此外，应用单元302包括编码单元320、UI单元321和验证请求单元322。
这些单元之中的摄像处理单元300和对象检测单元301的功能在参照图5所述的摄像单元3003中实现。例如，摄像处理单元300对应于图5中的像素单元3100、信号处理单元3101和元件控制单元3105的功能。此外，对象检测单元301对应于图5中的存储单元3102和图像处理单元3104的功能。
在图8中，应用单元302的功能例如由上述SNS应用来实现。
用于实现终端装置30的应用单元302(编码单元320、UI单元321和验证请求单元322)中的每个功能的程序(SNS应用)存储在连接到诸如因特网等网络的计算机上，并且通过经由网络下载来提供。此外，程序可以构造成经由诸如因特网等网络来提供或分布。而且，程序可以以可安装或可执行的格式文件记录在诸如光盘(CD)、软盘(FD)和数字通用磁盘(DVD)等计算机可读记录介质中并被提供。
该程序具有包括编码单元320、UI单元321和验证请求单元322的模块构成。作为实际硬件，上述单元中的每个通过CPU 3000从诸如ROM3001和存储器3005等存储介质读取程序并且执行该程序而加载在诸如RAM 3002等主存储装置上，并且编码单元320、UI单元321和验证请求单元322在主存储装置上生成。
在应用单元302中，编码单元320对从摄像单元3003输出的拍摄图像执行诸如压缩编码等编码处理。这里，联合图像专家组(JPEG：joint photographic experts group)方法适用于对拍摄图像执行的压缩编码方法。在JPEG方法中，图像被划分为固定大小的块(例如，8像素×8像素)。以块为单位执行离散余弦变换，以将图像信息从空间区域的信息转换成频率区域的信息。在下文中，该块被称为离散余弦变换(DCT)块。编码单元320对已经转换成频率区域的信息的图像执行量化处理和霍夫曼压缩处理(Huffman compressionprocessing)，并且减少信息量。然后，编码单元320对原始图像进行压缩和编码。
编码单元320以预定格式将压缩和编码后的图像存储在文件中。此时，编码单元320还可以在文件中存储与图像有关的元数据。当图像以JPEG方法压缩和编码时，编码单元320可以将压缩和编码后的图像以可交换图像文件格式(Exif：exchangeable image fileformat)存储在文件中。元数据存储在以Exif格式指定的应用程序标记段区域中。
用户界面(UI：User Interface)单元321提供用于用户操作的用户界面。UI单元321生成用于在显示设备3020上显示操作画面的显示控制信号。此外，UI单元321在输入设备3006上接收用户操作，并且根据用户操作控制终端装置30的每个单元(例如，摄像单元3003和验证请求单元322)的操作。
验证请求单元322将用于登录到SNS的验证信息(账户信息)和与该验证信息有关的验证请求传送到服务器10，并且请求终端装置30的验证。例如，验证请求单元322可以以非易失性方式将由用户31输入的账户信息存储在存储器3005的预定区域中。验证请求单元322可以在启动SNS应用时自动将存储的账户信息传送到服务器10。
通信单元303在UI单元321的控制下与网络2通信。通过通信单元303传送由编码单元320编码并存储在文件中的拍摄图像和来自验证请求单元322的帐户信息。
图9是示出了根据第一实施方案的服务器10的功能的一个示例的功能框图。在图9中，服务器10包括通信单元100、验证单元101、解码单元102、分析单元103、掩饰处理单元104和存储单元105。通信单元100、验证单元101、解码单元102、分析单元103、掩饰处理单元104和存储单元105由在CPU 1000上运行的程序来实现。不限于此，通信单元100、验证单元101、解码单元102、分析单元103、掩饰处理单元104和存储单元105的一部分或全部可以由彼此协同操作的硬件电路来构成。
通信单元100与网络2进行通信。验证单元101响应于由通信单元100接收的包含帐户信息的验证请求执行验证处理。解码单元102对由通信单元100接收的图像进行解码，并且对压缩代码进行解码，同时获取附加到图像的元数据。分析单元103分析由解码单元102解码的解码图像，并且检测包含在解码图像中的特定对象。
根据分析单元103的分析结果，掩饰处理单元104对图像执行掩饰处理。此时，掩饰处理单元104可以对由解码单元102进行解码之前的压缩和编码后的图像执行掩饰处理。此外，掩饰处理单元104还取消对图像执行的掩饰处理。掩饰处理单元104根据验证单元101的验证结果执行掩饰处理和掩饰取消处理。
存储单元105将从掩饰处理单元104输出的图像存储在例如存储器1003中。此外，存储单元105还执行从存储器1003读取图像的处理。在下文中，除非另有说明，否则存储单元105在存储器1003中存储图像的处理被描述为“在存储单元105中存储图像”，并且从存储器1003读取图像的处理被描述为“从存储单元105中读取图像”。
用于在服务器10中实现根据第一实施方案的每个功能的程序以可安装或可执行格式的文件记录在诸如光盘(CD)、软盘(FD)和数字通用磁盘(DVD)等计算机可读记录介质中并被提供。不限于此，程序可以通过在连接到诸如因特网等网络的计算机上存储程序并且经由网络下载该程序来提供。此外，程序可以构造成经由诸如因特网等网络被提供或分布。
程序具有包括通信单元100、验证单元101、解码单元102、分析单元103、掩饰处理单元104和存储单元105的模块构成。作为实际硬件，上述单元中的每个通过CPU 1000从诸如ROM 1001和存储器1003等存储介质读取程序并且执行该程序而加载到诸如RAM 1002等主存储装置上，并且通信单元100、验证单元101、解码单元102、分析单元103、掩饰处理单元104和存储单元105在主存储装置上生成。
(根据第一实施方案的处理的细节)
接下来，将更详细地说明根据第一实施方案的信息处理系统1中的处理。图10是示出了根据第一实施方案的由终端装置30执行的用于拍摄图像的上传处理的一个示例的流程图。注意，在执行根据图10中的流程的处理之前，终端装置30安装有与由根据第一实施方案的信息处理系统1提供的服务(例如，SNS)相对应的应用软件(SNS应用)。此外，终端装置30的用户31已经在服务器10中预先注册了用于登录到SNS的账户信息。
在步骤S100中，响应于用户操作，在终端装置30中启动SNS应用。当SNS应用启动时，验证请求单元322将账户信息传送到服务器10，并请求验证。服务器10基于已经从终端装置30传送的账户信息，利用验证单元101执行验证。当验证成功时，可以从终端装置30使用由服务器10提供的SNS。
终端装置30响应于给出执行摄像的指示的用户操作，利用摄像处理单元300执行摄像(步骤S101)。将通过摄像获取的拍摄图像传递到对象检测单元301。在下一步骤S102中，终端装置30利用对象检测单元301对从摄像处理单元300传递的拍摄图像执行针对特定对象的检测处理。例如，特定对象是其中可以识别个人信息的图像。例如，可以将面部、车辆的牌照和打开的窗户应用于特定对象。对象检测单元301通过基于已知的图案识别的检测方法来检测特定对象。注意，对象检测单元301和终端装置30的CPU 3000可以协作地执行针对特定对象的检测处理。
注意，尽管在此将在步骤S101中拍摄和获取的拍摄图像用作步骤S102中的特定对象检测的目标，但是本示例不是限制性的。例如，终端装置30可以在步骤S102中利用对象检测单元301对由摄像单元3003拍摄并且然后存储在例如存储器3005中的拍摄图像执行特定对象检测。例如，对象检测单元301响应于例如用户操作，对从存储器1003读取的拍摄图像上的特定对象执行检测处理。
在下一步骤S103中，终端装置30判定对象检测单元301是否已经从拍摄图像中检测到特定对象。当判定已经从拍摄图像中检测到至少一个特定对象时(步骤S103，“是”)，对象检测单元301将处理移到步骤S104。
在步骤S104中，终端装置30将表示对象检测单元301已经检测到特定对象的检测标志添加到拍摄图像。例如，检测标志使用数值“1”来表示已经检测到特定对象，并且使用数值“0”来表示未检测到特定对象。此外，检测标志的默认值被设定为“0”。在步骤S104中，检测标志的值从“0”变为“1”。如上所述，当对象检测单元301和CPU 3000协作地执行针对对象的检测处理时，对象检测单元301可以添加检测标志，或者CPU 3000可以添加检测标志。
图11和图12示意性地示出了可适用于第一实施方案的如何从拍摄图像中检测特定对象。图11示出了在特定对象为面部的情况下的示例。在图11的示例中，在拍摄图像50a中，包含面部的每个矩形区域51a被检测为特定对象区域。图12示出了在特定对象为打开的窗户的情况下的示例。在图12的示例中，与图11的示例相同，在拍摄图像50b中，包含打开的窗户的每个矩形区域51b被检测为特定对象区域。
相反，当在步骤S103中判定未从拍摄图像中检测到特定对象时(步骤S103，“否”)，对象检测单元301跳过步骤S104的处理，并将处理移到步骤S105。在这种情况下，检测标志的数值保持为“0”。
在步骤S105中，终端装置30利用编码单元320对在步骤S101中获取的拍摄图像执行编码处理。例如，编码单元320通过JPEG方法对拍摄图像进行压缩和编码，并且将压缩和编码后的图像存储在Exif格式文件中。此外，编码单元320使检测标志包含在拍摄图像的元数据中，并且将检测标志存储在以Exif格式指定的应用程序标记段区域中。
在下一步骤S106中，终端装置30利用通信单元303响应于用户操作，将已经在步骤S105中编码并存储在文件中的拍摄图像传送到服务器10。
注意，尽管在以上说明中，说明了将要在根据图10的流程图的处理中针对静止图像执行的特定对象检测，但是该示例不是限制性的。例如，可以针对运动图像执行根据图10的流程图的处理。在这种情况下，在步骤S102中，终端装置30利用对象检测单元301针对运动图像的每帧执行针对特定对象的检测处理。在终端装置30中，对象检测单元301将数值为“1”的检测标志添加到已经检测到特定对象(步骤S103，“是”)的帧中，作为帧的元数据(步骤S104)。
在步骤S105中，终端装置30利用编码单元320通过诸如H.264(ITU-T Rec.H.264|ISO/IEC 14496-10高级视频编码(Advanced Video Coding))等预定的方法对运动图像进行压缩和编码。在步骤S106中，终端装置30将压缩和编码后的运动图像传送到服务器10。尽管在以上说明中，说明了将要针对每帧添加作为元数据的检测标志，但是该示例不是限制性的。例如，可以单独创建其中多个帧的检测标志与帧号相关联的数据并将其作为元数据添加到运动图像数据。此外，终端装置30可以将运动图像作为文件传送到服务器10，或者可以将运动图像作为流数据传送。
图13是示出了根据第一实施方案的服务器10中的处理的一个示例的流程图。在步骤S200中，服务器10检测通过通信单元100经由网络2的访问。在下一步骤S201中，服务器10利用验证单元101判定在步骤S200中检测到的访问是否来自已经接收到验证请求的访问源。
当利用验证单元101判定在步骤S200中检测到的访问未接收到验证请求时(步骤S201，“否”)，服务器10根据图13的流程图结束一系列处理。不限于此，验证单元101可以请求用于访问的账户信息，并且进行验证处理。
相反，当利用验证单元101判定在步骤S200中检测到的访问已接收到验证请求时(步骤S201，“是”)，服务器10将处理移到步骤S202。在步骤S202中，验证单元101判定针对所接收的验证请求的验证是否成功。当判定针对所接收的验证请求的验证未成功时(步骤S202，“否定”)，验证单元101根据图13的流程图结束一系列处理。
相反，当利用验证单元101判定针对所接收的验证请求的验证成功时(步骤S202，“肯定”)，服务器10将处理移到步骤S203。在步骤S203中，服务器10通过例如通信单元100判定在步骤S200中检测到的访问请求的是图像的注册和图像的获取中的哪一种。当判定在步骤S200中检测到的访问请求的是图像注册时(步骤S203，“注册”)，通信单元100将处理移到步骤S204。相反，当通过通信单元100判定在步骤S200中检测到的访问请求的是图像获取时(步骤S203，“获取”)，服务器10将处理移到步骤S210。
注意，例如，当在步骤S203中判定在步骤S200中检测到的访问既非图像的注册也非图像的获取时，通信单元100可以根据图13的流程图结束一系列处理，并且将处理移到另一处理。
在步骤S204中，服务器10通过通信单元100接收其中存储有图像的文件。该文件是已从在步骤S200中检测到访问的访问源传送的。例如，访问源是终端装置30。通信单元100接收其中存储有拍摄图像的文件。拍摄图像是已在图10的流程图的步骤S106中被传送的。
在下一步骤S205中，服务器10从已在步骤S204中接收到的文件中取出压缩和编码后的拍摄图像，并利用解码单元102对拍摄图像进行解码以解码拍摄图像。已经解码的解码后的拍摄图像是具有针对每个像素的亮度信息和颜色信息的位图数据(bitmap data)。注意，解码单元102还保持存储在文件中的压缩和编码后的拍摄图像。此外，解码单元102从文件获取元数据。
在下一步骤S206中，服务器10利用解码单元102判定在步骤S205中获取的元数据是否包含表示已检测到特定对象的检测标志。当判定不包含检测标志时(步骤S206，“否”)，解码单元102将处理移到步骤S209。相反，当判定包含检测标志时(步骤S206，“是”)，解码单元102将处理移到步骤S207。
在步骤S207中，服务器10利用分析单元103分析在步骤S205中解码的拍摄图像，检测可以从拍摄图像中检测到的所有特定对象，并且获取包括每个检测到的特定对象的矩形区域。分析单元103将获取的包括所有特定对象的矩形区域(在下文中，被称为特定对象区域)的坐标传递给掩饰处理单元104。
在下一步骤S208中，服务器10利用掩饰处理单元104基于从分析单元103传递的特定对象区域的坐标，对与在步骤S204中由解码单元102保持的压缩和编码后的拍摄图像的特定对象区域相对应的区域执行可撤销的掩饰处理。
图14示出了根据第一实施方案的其中对包括在图11所示的拍摄图像50a中的每个上述矩形区域51a执行掩饰处理的示例。在图14中，在拍摄图像50a’中，与图11中的每个矩形区域51a相对应的每个矩形区域52a通过掩饰覆盖，并且每个矩形区域51a中包括的面部是无法识别的。类似地，图15示出了根据第一实施方案的其中对包括在图12所示的拍摄图像50b中的每个上述矩形区域51b执行掩饰处理的示例。在图15中，在拍摄图像50b’中，与图12中的每个矩形区域51b相对应的每个矩形区域52b通过掩饰覆盖，并且包括在每个矩形区域51b中的打开的窗户是无法识别的。
以这种方式，掩饰处理可以使包括在原始拍摄图像50a和50b中的可以从其识别个人信息的对象变得无法识别。
将参照更具体的示例来说明由掩饰处理单元104执行的可撤销的掩饰处理。掩饰处理单元104通过使矩形区域中的信息重新排列来使图像的矩形区域中的信息无法识别，并且可以通过掩饰覆盖矩形区域。此外，通过以原始顺序重新排列通过掩饰覆盖的矩形区域中的信息，可以取消掩饰，并且可以将矩形区域中的信息恢复到原始的易于识别的信息。
掩饰处理单元104通过例如对矩形区域中的信息进行加密来重新排列矩形区域中的信息。掩饰处理单元104利用预先给出的密钥对矩形区域中的信息进行加密，并且通过掩饰覆盖信息。掩饰处理单元104利用密钥解密矩形区域中的代码，并且以原始顺序重新排列矩形区域中的信息。根据预定的密钥通过执行替换和转置来重新排列信息的方法可以作为这种加密的示例。不限于此，可以执行使用诸如安全散列算法-1(secure hash algorithm-1)(SHA-1)和消息摘要算法5(message digest algorithm)(MD5)等散列函数(hashfunction)的加密。
这里，当通过JPEG方法对图像进行压缩和编码时，需要对JPEG方法的数据格式进行加密。将参照图16示意性地说明可适用于第一实施方案的对通过JPEG方法压缩和编码的图像中的矩形区域进行加密的方法的示例。在图16中，图像50c是位图图像，并且包含作为特定对象的面部501。通常，如上所述，在JPEG方法中，以具有8个像素×8个像素的固定尺寸的DCT块为单位执行压缩编码处理。
例如，图像50c被划分为与DCT块相对应的8个像素×8个像素的块500，并且提取由包括面部501的多个块500形成的矩形区域502。可以想到的是，以与包括在矩形区域502中的块500相对应的DCT块为单位对通过JPEG方法压缩和编码的数据进行加密。
注意，尽管在以上说明中，掩饰处理单元104已被描述为对每个特定对象区域执行掩饰处理，但是该示例不是限制性的。例如，掩饰处理单元104可以对在步骤S204中接收到的文件中包含的整个拍摄图像进行加密。此外，掩饰处理单元104还可以对在步骤S204中接收到的文件本身进行加密。
此外，尽管在以上说明中，掩饰处理单元104已被描述为对压缩和编码后的拍摄图像执行掩饰处理，但是该示例不是限制性的。例如，掩饰处理单元104可以对在步骤S205中解码且用作位图图像的拍摄图像执行掩饰处理，并且可以通过JPEG方法再次对已经经过掩饰处理且由位图图像形成的拍摄图像进行压缩和编码。
返回到对图13的流程图的描述，服务器10利用掩饰处理单元104执行步骤S208中的掩饰处理，并且将处理移到步骤S209。
在步骤S209中，服务器10利用存储单元105将在步骤S208中执行了掩饰处理的拍摄图像(图像文件)或在处理从步骤S206移到步骤S209的情况下在步骤S204中接收到的拍摄图像(图像文件)存储在例如存储器1003中，并且将拍摄图像注册到SNS中。此时，存储单元105将表示在步骤S207中检测到的每个特定对象区域的位置的信息与拍摄图像相关联地存储在存储器1003中。当拍摄图像注册到SNS中时，根据图13的流程图的一系列处理结束。
注意，当在步骤S204中接收的图像是压缩和编码后的运动图像时，服务器10利用解码单元102对在步骤S205中接收的运动图像的压缩代码进行解码，并且生成用于每帧的位图图像(步骤S205)。此外，基于由解码单元102获取的作为元数据添加到运动图像的检测标志，服务器10利用分析单元103针对作为位图图像的每帧检测特定对象区域(步骤S206和S207)。服务器10利用掩饰处理单元104对检测到的特定对象区域执行掩饰处理(步骤S208)。
服务器10以诸如H.264方法等预定方法对运动图像进行压缩和编码。在步骤S208中，已经对运动图像执行了掩饰处理，并且运动图像包含作为位图图像的每帧。例如，服务器10利用存储单元105将压缩和编码后的运动图像存储在例如存储器1003中，并且将运动图像注册到SNS中(步骤S209)。不限于此，服务器10可以将未压缩和编码且其帧是位图图像的运动图像存储在存储器1003中。存储单元105将表示在每帧中检测到的每个特定对象区域的位置的信息与每帧相关联地存储在存储器1003中。
当在上述步骤S203中判定在步骤S200中检测到的访问为请求获取图像时(步骤S203，“获取”)，将处理移到步骤S210。在步骤S210中，服务器10中的存储单元105从例如存储在存储器1003中并且已经注册在SNS中的注册图像获取其中存储有将要请求获取的拍摄图像的文件。
在下一步骤S211中，服务器10利用掩饰处理单元104判定在步骤S210中获取的文件中存储的元数据是否包含表示检测到特定对象的检测标志。当判定未包含检测标志时(步骤S211，“否”)，掩饰处理单元104将处理移到步骤S213。
相反，当利用掩饰处理单元104判定包含检测标志时(步骤S211，“是”)，服务器10将处理移到步骤S212。在步骤S212中，基于表示与在步骤S210中获取的拍摄图像相关联的特定对象区域的位置的信息，掩饰处理单元104取消施加到拍摄图像的掩饰。例如，当通过对拍摄图像中的特定对象区域进行加密来施加掩饰时，掩饰处理单元104对代码进行解密。该操作使得在步骤S204中接收时的状态下未被掩饰的拍摄图像能够被观看。
在下一步骤S213中，服务器10利用通信单元100将在步骤S210中获取的拍摄图像(当不包含表示检测到特定对象的检测标志时)或者在步骤S212中取消了掩饰的拍摄图像(当包含检测标志时)传送到在步骤S200中检测到访问的访问源。当传送拍摄图像时，根据图13的流程图的一系列处理结束。
注意，当在步骤S200中检测到的访问来自由服务器10执行的验证处理中未被验证的访问源(例如，来自终端装置41的未授权的访问)时，未执行步骤S211的处理。因此，当注册在SNS中的拍摄图像由未授权的访问获取时，所获取的拍摄图像保持被掩饰，并且不能识别包含在特定对象区域中的图像。因此，可以抑制包含在特定对象区域中的个人信息的扩散。
注意，当将要在步骤S203中请求获取的图像是运动图像并且运动图像被压缩和编码时，服务器10利用解码单元102对已经在步骤S210中从注册图像获取的运动图像的压缩代码进行解码，并生成针对每帧的位图图像。另外，服务器10获取已经添加到运动图像的作为元数据的检测标志。注意，当请求获取的图像是未被压缩和编码并且存储在存储器1003中的运动图像时，省略了对压缩代码的解码处理。
服务器10利用掩饰处理单元104基于表示与帧相关联的特定对象区域的位置的信息取消施加到添加了数值“1”的检测标志(步骤S211)的帧的掩饰(步骤S212)。服务器10利用例如掩饰处理单元104以诸如H.264方法等预定方法对取消掩饰的每帧进行压缩和编码，并且传送该帧(步骤S213)。
图17是示出了根据第一实施方案的信息处理系统1的整体操作的一个示例的顺序图。注意，在下面的说明中，终端装置30将由摄像单元3003拍摄的作为静止图像的拍摄图像传送到服务器10。
当在终端装置30中启动安装的SNS应用时(步骤S300)，应用单元302的验证请求单元322将账户信息传送到服务器10，并且向服务器10请求验证(步骤S301)。当从终端装置30传送的账户信息合适时，服务器10通知已经执行了验证的终端装置30(步骤S302)。这使得可以从终端装置30使用由服务器10提供的SNS的功能。
在验证终端装置30之后，在终端装置30中，摄像单元3003的摄像处理单元309响应于用户操作来拍摄图像，并且获取拍摄图像(步骤S303)。终端装置30利用对象检测单元301针对通过摄像单元3003的摄像所获取的拍摄图像检测特定对象(步骤S304)。当从拍摄图像中检测到特定对象时，对象检测单元301将表示已经检测到特定对象的检测标志添加到拍摄图像(步骤S305)，并且将添加有检测标志的拍摄图像传递给应用单元302。拍摄图像传递给应用单元302中的编码单元320。
终端装置30利用编码单元320对从对象检测单元301传递的拍摄图像执行编码处理(步骤S306)。编码处理以例如JPEG方法对拍摄图像进行压缩和编码，并且将包含检测标志的元数据添加到拍摄图像。编码单元320以预定格式(例如，Exif格式)的文件存储每条编码数据，并且将该数据传递给通信单元303。通信单元303将其中存储有由编码单元320传递的每条数据的文件传送到服务器10，并且响应于例如用户操作将拍摄图像上传到服务器10(步骤S307)。
当接收到其中存储有从终端装置30上传的拍摄图像的文件时，服务器10利用解码单元102对接收到的文件进行解码处理(步骤S310)。即，解码单元102从接收到的文件获取元数据。通过该操作，解码单元102对存储在文件中的压缩和编码后的拍摄图像进行解码。解码单元102将已经解码的解码后的拍摄图像传递给分析单元103，并且保持解码之前的拍摄图像。
当从文件获取的元数据包含表示从存储在文件中的拍摄图像中检测到特定对象的检测标志时，服务器10使用分析单元103分析从解码单元102传递的解码后的拍摄图像，并且检测包含在解码后的拍摄图像中的所有可检测到的特定对象(步骤S311)。分析单元103将表示已经从解码后的拍摄图像中检测到的特定对象的位置的位置信息传递给掩饰处理单元104。掩饰处理单元104基于从分析单元103传递的位置信息对保持在解码单元102中的解码之前的拍摄图像(压缩和编码后的拍摄图像)执行掩饰处理(步骤S312)。服务器10将执行了掩饰处理的拍摄图像注册在SNS中。
在图17中，步骤S320～S324示出了在通过合法访问来访问服务器10、登录到SNS并且获取注册在SNS中的拍摄图像的情况下的处理的示例。例如，来自SNS应用的账户信息从安装有SNS应用的终端装置40传送到服务器10，并且请求验证(步骤S320)。当从终端装置40传送的账户信息合适时，服务器10通知终端装置40已经执行了验证(步骤S321)。这使得可以从终端装置40使用由服务器10提供的SNS的功能。
终端装置40例如响应于用户操作利用SNS应用从服务器10请求观看注册在SNS中的拍摄图像(步骤S322)。服务器10响应于该请求取消已经施加到注册在SNS中的拍摄图像上的掩饰(步骤S323)。服务器10将已经取消了掩饰的拍摄图像传送到终端装置40(步骤S324)。终端装置40对拍摄图像进行解码，对压缩代码进行解码，并且在显示器上显示拍摄图像。由于在拍摄图像中已经取消了施加到特定对象的掩饰，因此可以在特定对象可识别的情况下在终端装置40上观看拍摄图像。
在图17中，步骤S330～S332示出了在通过未授权的访问来访问服务器10并且在未登录到SNS的情况下获取注册在SNS中的拍摄图像的情况下的处理的示例。例如，假定不从终端装置41向服务器10传送帐户信息和请求验证通过执行不通过服务器10的验证的访问来请求注册在SNS中的拍摄图像(步骤S330)。
服务器10针对来自未验证的访问源的请求未取消施加在拍摄图像上的掩饰(步骤S331)。因此，终端装置41获取通过掩饰覆盖的拍摄图像(步骤S332)。由于特定对象在拍摄图像中保持通过掩饰覆盖，因此特定对象不能在终端装置41上观看的拍摄图像中被识别。因此，即使拍摄图像从终端装置41泄漏到例如因特网上，也可以防止在特定对象中包含的个人信息的扩散。
如上所述，在第一实施方案中，可以根据对服务器10的访问是合法的还是未授权的来控制对注册图像的处理(掩饰处理)是取消还是保持，并且图像的处理状态和未处理状态是兼容的。此外，由于对于未授权的访问图像保持被处理，因此可以抑制在处理之前的图像中包含的例如个人信息的扩散。
(第一实施方案的变形例)
注意，在以上说明中，终端装置30检测拍摄图像是否包含至少一个特定对象(图10，步骤S103)。当拍摄图像包含至少一个特定对象时，服务器10分析拍摄图像，并且检测特定对象区域(图13，步骤S207)。该示例不是限制性的。可以从拍摄图像中检测到的所有特定对象都可以在终端装置30中被检测到。
即，终端装置30针对所有检测到的特定对象检测特定对象区域及其坐标(例如，图10中的步骤S103)。终端装置30将所有获取的特定对象区域的坐标添加到拍摄图像作为元数据(例如，图10中的步骤S104)。
在这种情况下，由于不需要在服务器10侧获取特定对象区域，因此可以省略图13中的步骤S207(图17中的步骤S311)的处理。在服务器10中，掩饰处理单元104基于添加到拍摄图像的元数据中包含的每个特定对象区域的坐标，对每个特定对象区域执行掩饰处理(图13中的步骤S207和图17中的步骤S312)。
根据第一实施方案的变形例，由于拍摄图像中包含的每个特定对象区域是在终端装置30侧获取的，因此与第一实施方案的上述处理相比，可以减轻服务器10上的负荷。
[第二实施方案]
接下来，将说明第二实施方案。在上述第一实施方案中，服务器10注册已经可撤销地执行了掩饰处理的拍摄图像，并且响应于合法访问而取消拍摄图像的掩饰。相反，在第二实施方案中，服务器10在未对拍摄图像执行掩饰处理的情况下执行注册，并且响应于通过未授权的访问对拍摄图像的获取请求，对拍摄图像执行掩饰处理。在第二实施方案中，可以将不可撤销的方法用于掩饰处理中。
图18是示出了根据第二实施方案的服务器10中的处理的一个示例的流程图。注意，在图18中，通过附加相同的标记示出与上述图13的流程图中相同的处理。此外，在拍摄图像注册在由服务器10提供的SNS中的情况下，图10所述的处理可以原样应用于终端装置30的处理。
在图18中，在步骤S200中，服务器10检测通过通信单元100经由网络2的访问。在下一步骤S201中，服务器10利用验证单元101判定在步骤S200中检测到的访问是否来自接收到验证请求的访问源。
当利用验证单元101判定在步骤S200中检测到的访问已接收到验证请求时(步骤S201，“是”)，服务器10将处理移到步骤S202。在步骤S202中，验证单元101判定针对所接收的验证请求的验证是否成功。当判定针对所接收的验证请求的验证未成功时(步骤S202，“否定”)，验证单元101根据图18的流程图结束一系列处理。
相反，当利用验证单元101判定针对所接收的验证请求的验证成功时(步骤S202，“肯定”)，服务器10将处理移到步骤S203。在步骤S203中，服务器10通过例如通信单元100判定在步骤S200中检测到的访问请求的是图像的注册和图像的获取中的哪一种。当判定在步骤S200中检测到的访问请求的是图像注册时(步骤S203，“注册”)，通信单元100将处理移到步骤S204。相反，当判定在步骤S200中检测到的访问请求的是图像的获取时(步骤S203，“获取”)，通信单元100将处理移到步骤S210。
在步骤S204中，服务器10通过通信单元100接收其中存储有图像的文件。该文件是已从在步骤S200中检测到访问的访问源传送的。例如，访问源是终端装置30。通信单元100接收其中存储有拍摄图像的文件。拍摄图像是已在图10的流程图的步骤S106中被传送的。
在下一步骤S205中，服务器10从在步骤S204中接收到的文件中取出压缩和编码后的拍摄图像，并且利用解码单元102对拍摄图像进行解码以解码拍摄图像。解码单元102还保持存储在接收的文件中的压缩和编码后的拍摄图像。此外，解码单元102从文件获取元数据。
在下一步骤S206中，服务器10利用解码单元102判定在步骤S205中获取的元数据是否包含表示已检测到特定对象的检测标志。当判定未包含检测标志时(步骤S206，“否”)，解码单元102将处理移到步骤S209’。相反，当判定包含检测标志时(步骤S206，“是”)，解码单元102将处理移到步骤S207。
在步骤S207中，服务器10利用分析单元103分析在步骤S205中解码的拍摄图像，并且从拍摄图像中检测特定对象区域。分析单元103将检测到的特定对象区域的坐标与拍摄图像相关联地保持。当在步骤S207中执行特定对象区域的检测时，将处理移到步骤S209’。在第二实施方案中，在注册拍摄图像时未执行在图13的步骤S208中对检测到的特定对象区域进行的掩饰处理。
在下一步骤S209’中，服务器10利用存储单元105将在步骤S204中接收到的拍摄图像(图像文件)和在步骤S207中与拍摄图像相关联的特定对象区域的坐标存储在存储器1003中。当拍摄图像注册在SNS中时，根据图18的流程图的一系列处理结束。
当在上述步骤S203中判定在步骤S200中检测到的访问为请求图像的获取时(步骤S203，“获取”)，将处理移到步骤S210。在步骤S210中，服务器10利用存储单元105从存储在例如存储器1003中并且已经注册在SNS中的注册图像中获取其中存储有将要请求获取的拍摄图像的文件。
当在步骤S210中获取注册图像时，将处理移到步骤S213。即，在第二实施方案中，由于未对注册图像执行掩饰处理，因此省略了图13中的步骤S211的通过使用检测标志的判定处理和步骤S212中的掩饰取消处理。在步骤S213中，服务器10利用通信单元100将在步骤S210中获取的拍摄图像传送到在步骤S200中检测到访问的访问源。当传送拍摄图像时，根据图18的流程图的一系列处理结束。
当在上述步骤S201中利用验证单元101判定在步骤S200中检测到的访问未接收到验证请求时(步骤S201，“否”)，服务器10将处理移到步骤S220。在步骤S220中，服务器10利用通信单元100判定在步骤S200中检测到的访问是否请求图像的获取。当判定该访问未请求图像的获取时(步骤S220，“否”)，通信单元100结束根据图18的流程图的一系列处理。
相反，当利用通信单元100判定访问请求的是图像的获取时(步骤S220，“是”)，服务器10将处理移到步骤S221。在步骤S221中，服务器10利用掩饰处理单元104从在步骤S209’中注册的拍摄图像之中获取在步骤S200中检测到访问的访问源所请求的拍摄图像。对于所获取的拍摄图像，服务器10基于与拍摄图像相关联的特定对象的坐标对与拍摄图像的特定对象相对应的区域执行掩饰处理。在下一步骤S222中，服务器10利用通信单元100将执行了掩饰处理的拍摄图像传送到在步骤S200中检测到访问的访问源。
当传送在步骤S222中执行了掩饰处理的拍摄图像时，根据图18的流程图的一系列处理结束。
在第二实施方案中，优选在步骤S221中对拍摄图像执行不可撤销的掩饰处理。不可撤销的掩饰处理的示例包括将与拍摄图像的特定对象区域相对应的区域替换为诸如在该区域中具有均匀的颜色的固态图像或预定的图标图像等另一图像的处理。不限于此，例如，整个拍摄图像可以用固态图像代替。当拍摄图像是运动图像时，同样如此。
如上所述，通过对与拍摄图像的特定对象区域相对应的区域执行不可撤销的掩饰处理，通过掩饰覆盖通过向SNS的未授权的访问获取的拍摄图像，使得无法识别特定对象区域中包含的图像。因此，可以抑制特定对象区域中包含的个人信息的扩散。此外，通过对与特定对象区域相对应的拍摄图像的区域执行不可撤销的掩饰处理，使得在特定对象区域中包含的图像在拍摄图像的接收侧是不可识别的。因此，可以更有效地抑制在特定对象区域中包含的个人信息的扩散。
注意，在第二实施方案中，对注册的拍摄图像本身未执行掩饰处理。例如，当在未登陆到SNS的情况下通过某种方法访问注册的拍摄图像时，由此可以获取原始拍摄图像。因此，优选单独采取措施防止未授权的访问。
图19是示出了根据第二实施方案的信息处理系统1的整体操作的一个示例的顺序图。注意，在下面的说明中，终端装置30将由摄像单元3003拍摄的作为静止图像的拍摄图像传送到服务器10。此外，在图19中，在终端装置30中获取拍摄图像以及在服务器10中注册拍摄图像的处理之中的步骤S300～S310的处理与参照图17所述的处理相同，由此这里将省略说明。此外，在图19的处理中，省略图17中的步骤S312的掩饰处理。
在图19中，例如，步骤S320～S324示出了在终端装置40通过合法访问来访问服务器10、登录到SNS并且获取注册在SNS中的拍摄图像的情况下的处理的示例。在第二实施方案的情况下，对注册的拍摄图像未执行掩饰处理。因此，在图19的处理中，省略了图17中的步骤S323的掩饰取消处理。在图19中，步骤S320～S322的处理与图17中的步骤S320～S322的处理相同，由此这里将省略说明。
在图19中，在步骤S324'中，服务器10利用通信单元100传送由终端装置40请求的拍摄图像(步骤S324)。终端装置40对拍摄图像进行解码，对压缩代码进行解码，并且在显示器上显示拍摄图像。由于对拍摄图像未执行掩饰处理，因此可以在可以识别特定对象的情况下在终端装置40上观看拍摄图像。
在图19中，步骤S340～S342示出了在未登录到SNS的情况下通过未授权的访问来访问服务器10并获取注册在SNS中的拍摄图像的情况下的处理的示例。例如，假定不从终端装置41向服务器10传送帐户信息和请求验证通过执行不通过服务器10的验证的访问来请求注册在SNS中的拍摄图像(步骤S340)。
在步骤S340中，服务器10响应于来自终端装置41的请求利用掩饰处理单元104对所请求的拍摄图像执行不可撤销的掩饰处理(步骤S341)。因此，终端装置41获取已经经过不可撤销的掩饰处理并且通过掩饰覆盖的拍摄图像(步骤S342)。由于特定对象在拍摄图像中被掩饰不可撤销地覆盖，因此在终端装置41上观看的拍摄图像中不能识别特定对象。因此，即使拍摄图像从终端装置41泄漏到例如因特网上，也可以防止在特定对象中包含的个人信息的扩散。
如上所述，在第二实施方案中，可以根据对服务器10的访问是合法的还是未授权的来控制是否对所请求的图像执行处理(掩饰处理)，并且图像的处理状态和未处理状态是兼容的。此外，由于针对未授权的访问对图像进行不可撤销的处理，因此例如可以抑制在处理之前的图像中包含的个人信息的扩散。
注意，如在第二实施方案中，在终端装置30中检测可以从拍摄图像检测的所有特定对象的处理可以作为变形例。在第一实施方案的上述变形例中说明该处理。
[第三实施方案]
接下来，将说明第三实施方案。尽管在以上说明中，已经说明了其中将第一和第二实施方案应用于由服务器10提供的单个服务的示例，但是该示例不是限制性的。即，本公开还可以适用于联合工作的多个服务。
图20示意性地示出了根据第三实施方案的信息处理系统的构成的示例。在图20中，根据第三实施方案的信息处理系统1’包括服务器10和服务器11。服务器10提供在第一或第二实施方案中所述的SNS(被称为服务#A)。在下文中，服务器10提供在第一实施方案中所述的SNS作为服务#A。服务器11提供服务#B。服务#B通过执行验证处理来使用，并且可以是SNS或另一服务。这里，服务#B是与服务#A不同的SNS。
服务#A和服务#B联合工作。例如，登录到服务器11并且被允许使用服务#B的用户可以使用由服务器10提供的服务#A，而无需对服务器10进行显式登录处理。
在一个示例中，用户31从终端装置30访问服务器10，并且登录到服务#A。用户31在服务#A中注册由终端装置30拍摄的拍摄图像。终端装置30通过例如图17中的步骤S300～S312的处理将拍摄图像注册在服务器10的存储器1003中。此时，服务器10对拍摄图像中包含的特定对象区域执行掩饰处理，将拍摄图像存储在存储器1003中，并且将拍摄图像注册到服务#A。
这里，用于使用服务#B的SNS应用(B)安装在终端装置40中。终端装置40的功能构成等同于参照图8所述的构成。SNS应用(B)的功能也等同于图8中的应用单元302的功能。用户42在终端装置40上启动SNS应用(B)，将服务#B的账户信息传送到服务器11，并且请求验证。当由服务器11执行的验证成功时，终端装置40登录到服务#B。这使得可以从终端装置40使用服务#B的功能。
这里，服务#B与服务#A联合工作。联合工作的服务使得终端装置40能够通过登录到服务#B来使用服务#A的功能。在这种情况下，终端装置40可以经由服务#B获取存储在存储器1003中并且注册在服务#A中的拍摄图像。
在经由服务#B(服务器11)接收到对于注册在服务#A中的拍摄图像的获取请求时，服务器10将终端装置40视为通过例如图17的步骤S320和S321中的验证处理传送了对于拍摄图像的获取请求。因此，服务器10根据图17中的步骤S322的处理取消施加在拍摄图像的特定对象区域上的掩饰，并且经由服务#B(服务器11)将已经取消掩饰的拍摄图像传送到终端装置40。这使得能够在终端装置40上观看具有可以识别的特定对象的拍摄图像。
接下来，将说明在未登录到服务#A和服务#B中的任何一个的情况下，从例如终端装置41获取注册在服务#A中的拍摄图像的情况。在这种情况下，如图17中的步骤S330～S332所示，服务器10对于来自未验证的访问源的请求未取消施加在拍摄图像上的掩饰。因此，终端装置41获取通过掩饰覆盖的拍摄图像，并且在终端装置41上观看的拍摄图像中无法识别特定对象。因此，即使拍摄图像从终端装置41泄漏到例如因特网中，也可以防止包含在特定对象中的个人信息的扩散。
这样，本公开还适用于联合工作的多个服务。
注意，说明书中所述的效果仅仅是示例性的而非限制性的。可以展现其他效果。
注意，本技术还可以具有如下所述的构成。
(1)一种信息处理系统，包括：
终端装置；和信息处理装置，
所述终端装置包括：
固态摄像元件；和
第一通信单元，
所述固态摄像元件包括：
图像传感器，其将接收到的光转换成图像；
图像处理单元，其检测所述图像中的特定对象；和
输出接口，其输出所述图像，
所述第一通信单元传送从所述输出接口输出的图像，
所述信息处理装置包括：
第二通信单元；和
处理器，
其中，
所述处理器通过所述第二通信单元接收从所述终端装置传送的图像；并且
当通过所述第二通信单元接收到的图像是其中所述图像处理单元检测到所述特定对象的图像时，所述处理器执行掩饰所述特定对象的掩饰处理。
(2)根据(1)所述的信息处理系统，
其中，
所述处理器将其中掩饰了所述特定对象的所述图像存储在存储单元中；
当接收到针对存储在所述存储单元中的所述图像的访问请求时，所述处理器判定是否允许所述访问请求的传送源访问所述图像；并且
当判定允许访问所述图像时，所述处理器取消所述掩饰。
(3)根据(1)或(2)所述的信息处理系统，
其中，所述处理器通过所述掩饰处理可撤销地掩饰所述特定对象。
(4)根据(1)至(3)中任一项所述的信息处理系统，
其中，所述处理器通过对其中检测到所述特定对象的图像的包括所述特定对象的预定区域进行加密来掩饰所述特定对象。
(5)根据(1)所述的信息处理系统，
其中，
所述处理器将所述接收到的图像存储在存储单元中；
当接收到针对存储在所述存储单元中的所述图像的访问请求时，所述处理器判定是否允许所述访问请求的传送源访问所述图像；并且
当判定不允许访问所述图像时，所述处理器执行掩饰所述图像的所述特定对象的掩饰处理。
(6)根据(5)所述的信息处理系统，
其中，所述处理器通过所述掩饰处理不可撤销地掩饰所述特定对象。
(7)根据(1)至(6)中任一项所述的信息处理系统，
其中，
当从所述图像传感器输出的图像中检测到所述特定对象时，所述图像处理单元将表示已经检测到所述特定对象的检测信息添加到所述图像；
所述第一通信单元传送添加有所述检测信息的所述图像；并且
当所述检测信息添加到由所述第二通信单元接收的图像时，所述处理器掩饰包括在所述图像中的所述特定对象。
(8)根据(7)所述的信息处理系统，
其中，当所述检测信息添加到由所述第二通信单元接收的图像时，所述处理器获取表示所述图像中的所述特定对象的位置的位置信息，并且基于所述位置信息来掩饰所述特定对象。
(9)根据(7)所述的信息处理系统，
其中，所述图像处理单元从所述图像传感器输出的图像中检测所述特定对象，并且获取表示所述图像上的所检测到的特定对象的位置的位置信息，
所述第一通信单元将所述位置信息作为所述检测信息添加到从所述输出接口输出的图像，并传送所述图像，并且
所述处理器基于添加到由所述第二通信单元通信的图像上的所述位置信息来掩饰包括在所述图像中的所述特定对象。
(10)根据(1)至(9)中任一项所述的信息处理系统，
其中，所述信息处理装置包括彼此协作地操作的多个信息处理装置。
(11)一种信息处理方法，包括：
图像传感器将接收到的光转换成图像的转换步骤，所述图像传感器包括在装备在终端装置中的固定摄像元件中；
包括在所述固定摄像元件中的图像处理单元检测所述图像中的特定对象的检测步骤；
包括在所述固定摄像元件中的输出接口输出所述图像的输出步骤；
装备在所述终端装置中的第一通信单元传送所述输出步骤中输出的图像的传送步骤；
装备在信息处理装置中的处理器通过第二通信单元接收从所述终端装置传送的图像的接收步骤；和
当在所述接收步骤中接收的图像是其中在所述检测步骤中已经检测到所述特定对象的图像时，所述处理器掩饰所述特定对象的处理步骤。
(12)一种终端装置，包括：
固态摄像元件；和通信单元，
所述固态摄像元件包括：
图像传感器，其将接收到的光转换成图像；
图像处理单元，其从所述图像中检测特定对象；和
输出接口，其输出所述图像，
所述通信单元传送从所述输出接口输出的图像，
其中，当已经从所述图像中检测到所述特定对象时，所述图像处理单元将表示已经检测到所述特定对象的检测信息添加到所述图像，并且
所述通信单元传送已经添加有所述检测信息的所述图像。
(13)根据(12)所述的终端装置，
其中，所述图像处理单元从所述图像传感器输出的图像中检测所述特定对象，并且获取表示所述图像上的所检测到的特定对象的位置的位置信息；并且
所述通信单元将所述位置信息作为所述检测信息添加到从所述输出接口输出的图像，并且传送所述图像。
(14)一种信息处理装置，包括：
处理器；和
通信单元，其与终端装置通信，所述终端装置检测由图像传感器转换接收到的光所获得的图像中的特定对象，并且传送所述图像，
其中，
所述处理器通过所述通信单元接收从所述终端装置传送的所述图像；并且
当通过所述通信单元接收到的所述图像是其中所述终端装置已经检测到所述特定对象的图像时，所述处理器执行掩饰所述特定对象的掩饰处理。
(15)根据(14)所述的信息处理装置，
其中，
所述处理器将其中掩饰了所述特定对象的所述图像存储在存储单元中；
当接收到针对存储在所述存储单元中的所述图像的访问请求时，所述处理器判定是否允许所述访问请求的传送源访问所述图像；并且
当判定允许访问所述图像时，所述处理器取消所述掩饰。
(16)根据(14)或(15)所述的信息处理装置，
其中，所述处理器通过所述掩饰处理可撤销地掩饰所述特定对象。
(17)根据(14)至(16)中任一项所述的信息处理装置，
其中，所述处理器通过对其中检测到所述特定对象的图像的包括所述特定对象的预定区域进行加密来掩饰所述特定对象。
(18)根据(14)所述的信息处理装置，
其中，
所述处理器将所述接收到的图像存储在存储单元中；
当接收到针对存储在所述存储单元中的所述图像的访问请求时，所述处理器判定是否允许所述访问请求的传送源访问所述图像；并且
当判定不允许访问所述图像时，所述处理器掩饰所述图像的所述特定对象。
(19)根据(18)所述的信息处理装置，
其中，所述处理器通过所述掩饰处理不可撤销地掩饰所述特定对象。
(20)根据(14)至(19)中任一项所述的信息处理装置，
其中，当将表示已经检测到所述特定对象的检测信息添加到由所述通信单元接收的图像时，所述处理器掩饰包括在所述图像中的所述特定对象。
(21)根据(20)所述的信息处理装置，
其中，当所述检测信息添加到由所述通信单元接收的图像时，所述处理器获取表示所述图像中的所述特定对象的位置的位置信息，并且基于所述位置信息来掩饰所述特定对象。
(22)根据(20)所述的信息处理装置，
其中，所述处理器基于表示所述特定对象在图像上的位置的位置信息来掩饰包括在所述图像中的所述特定对象，所述位置信息作为所述检测信息添加到由所述通信单元通信的所述图像。
附图标记列表
1 信息处理系统
2 网络
10、11服务器
30、40、41 终端装置
50a、50a’、50b、50b’ 拍摄图像
51a、51b、52a、52b 矩形区域
100 通信单元
101 验证单元
102 解码单元
103 分析单元
104 掩饰处理单元
105 存储单元
300 摄像处理单元
301 对象检测单元
302 应用单元
303 通信单元
320 编码单元
322 验证请求单元
3003 摄像单元
3100 像素单元
3101 信号处理单元
3102 存储单元
3103 I/F单元
3104 图像处理单元
3105 元件控制单元

Claims (18)

1.一种信息处理系统，包括：
终端装置；和信息处理装置，
所述终端装置包括：
固态摄像元件；和
第一通信单元，
所述固态摄像元件包括：
图像传感器，其将接收到的光转换成图像；
图像处理单元，其检测所述图像中的特定对象；和
输出接口，其输出所述图像，
所述第一通信单元传送从所述输出接口输出的图像，
所述信息处理装置包括：
第二通信单元；和
处理器，
其中，
所述处理器通过所述第二通信单元接收从所述终端装置传送的图像；并且
当通过所述第二通信单元接收到的图像是其中所述图像处理单元检测到所述特定对象的图像时，所述处理器执行掩饰所述特定对象的掩饰处理。
2.根据权利要求1所述的信息处理系统，
其中，
所述处理器将其中掩饰了所述特定对象的所述图像存储在存储单元中；
当接收到针对存储在所述存储单元中的所述图像的访问请求时，所述处理器判定是否允许所述访问请求的传送源访问所述图像；并且
当判定允许访问所述图像时，所述处理器取消所述掩饰。
3.根据权利要求1所述的信息处理系统，
其中，所述处理器通过对其中检测到所述特定对象的图像的包括所述特定对象的预定区域进行加密来掩饰所述特定对象。
4.根据权利要求1所述的信息处理系统，
其中，
所述处理器将所述接收到的图像存储在存储单元中；
当接收到针对存储在所述存储单元中的所述图像的访问请求时，所述处理器判定是否允许所述访问请求的传送源访问所述图像；并且
当判定不允许访问所述图像时，所述处理器执行掩饰所述图像的所述特定对象的掩饰处理。
5.根据权利要求1所述的信息处理系统，
其中，
当从所述图像传感器输出的图像中检测到所述特定对象时，所述图像处理单元将表示已经检测到所述特定对象的检测信息添加到所述图像；
所述第一通信单元传送添加有所述检测信息的所述图像；并且
当所述检测信息添加到由所述第二通信单元接收的图像时，所述处理器掩饰包括在所述图像中的所述特定对象。
6.根据权利要求5所述的信息处理系统，
其中，当所述检测信息添加到由所述第二通信单元接收的图像时，所述处理器获取表示所述图像中的所述特定对象的位置的位置信息，并且基于所述位置信息来掩饰所述特定对象。
7.根据权利要求5所述的信息处理系统，
其中，所述图像处理单元从所述图像传感器输出的图像中检测所述特定对象，并且获取表示所述图像上的所检测到的特定对象的位置的位置信息，
所述第一通信单元将所述位置信息作为所述检测信息添加到从所述输出接口输出的图像，并传送所述图像，并且
所述处理器基于添加到由所述第二通信单元通信的图像上的所述位置信息来掩饰包括在所述图像中的所述特定对象。
8.根据权利要求1所述的信息处理系统，
其中，所述信息处理装置包括彼此协作地操作的多个信息处理装置。
9.一种信息处理方法，包括：
图像传感器将接收到的光转换成图像的转换步骤，所述图像传感器包括在装备在终端装置中的固定摄像元件中；
包括在所述固定摄像元件中的图像处理单元检测所述图像中的特定对象的检测步骤；
包括在所述固定摄像元件中的输出接口输出所述图像的输出步骤；
装备在所述终端装置中的第一通信单元传送所述输出步骤中输出的图像的传送步骤；
装备在信息处理装置中的处理器通过第二通信单元接收从所述终端装置传送的图像的接收步骤；和
当在所述接收步骤中接收的图像是其中在所述检测步骤中已经检测到所述特定对象的图像时，所述处理器掩饰所述特定对象的处理步骤。
10.一种终端装置，包括：
固态摄像元件；和通信单元，
所述固态摄像元件包括：
图像传感器，其将接收到的光转换成图像；
图像处理单元，其从所述图像中检测特定对象；和
输出接口，其输出所述图像，
所述通信单元传送从所述输出接口输出的图像，
其中，当已经从所述图像中检测到所述特定对象时，所述图像处理单元将表示已经检测到所述特定对象的检测信息添加到所述图像，并且
所述通信单元传送已经添加有所述检测信息的所述图像。
11.根据权利要求10所述的终端装置，
其中，所述图像处理单元从所述图像传感器输出的图像中检测所述特定对象，并且获取表示所述图像上的所检测到的特定对象的位置的位置信息；并且
所述通信单元将所述位置信息作为所述检测信息添加到从所述输出接口输出的图像，并且传送所述图像。
12.一种信息处理装置，包括：
处理器；和
通信单元，其与终端装置通信，所述终端装置检测由图像传感器转换接收到的光所获得的图像中的特定对象，并且传送所述图像，
其中，
所述处理器通过所述通信单元接收从所述终端装置传送的所述图像；并且
当通过所述通信单元接收到的所述图像是其中所述终端装置已经检测到所述特定对象的图像时，所述处理器执行掩饰所述特定对象的掩饰处理。
13.根据权利要求12所述的信息处理装置，
其中，
所述处理器将其中掩饰了所述特定对象的所述图像存储在存储单元中；
当接收到针对存储在所述存储单元中的所述图像的访问请求时，所述处理器判定是否允许所述访问请求的传送源访问所述图像；并且
当判定允许访问所述图像时，所述处理器取消所述掩饰。
14.根据权利要求12所述的信息处理装置，
其中，所述处理器通过对其中检测到所述特定对象的图像的包括所述特定对象的预定区域进行加密来掩饰所述特定对象。
15.根据权利要求12所述的信息处理装置，
其中，
所述处理器将所述接收到的图像存储在存储单元中；
当接收到针对存储在所述存储单元中的所述图像的访问请求时，所述处理器判定是否允许所述访问请求的传送源访问所述图像；并且
当判定不允许访问所述图像时，所述处理器掩饰所述图像的所述特定对象。
16.根据权利要求12所述的信息处理装置，
其中，当将表示已经检测到所述特定对象的检测信息添加到由所述通信单元接收的图像时，所述处理器掩饰包括在所述图像中的所述特定对象。
17.根据权利要求16所述的信息处理装置，
其中，当所述检测信息添加到由所述通信单元接收的图像时，所述处理器获取表示所述图像中的所述特定对象的位置的位置信息，并且基于所述位置信息来掩饰所述特定对象。
18.根据权利要求16所述的信息处理装置，
其中，所述处理器基于表示所述特定对象在图像上的位置的位置信息来掩饰包括在所述图像中的所述特定对象，所述位置信息作为所述检测信息添加到由所述通信单元通信的所述图像。
CN201980055080.1A 2018-09-06 2019-08-09 信息处理系统、信息处理方法、终端装置和信息处理装置 Pending CN112585605A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018167374 2018-09-06
JP2018-167374 2018-09-06
PCT/JP2019/031661 WO2020049958A1 (ja) 2018-09-06 2019-08-09 情報処理システム、情報処理方法、端末装置および情報処理装置

Publications (1)

Publication Number Publication Date
CN112585605A true CN112585605A (zh) 2021-03-30

Family

ID=69722526

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980055080.1A Pending CN112585605A (zh) 2018-09-06 2019-08-09 信息处理系统、信息处理方法、终端装置和信息处理装置

Country Status (5)

Country Link
US (1) US20210319144A1 (zh)
EP (1) EP3848839A4 (zh)
JP (1) JPWO2020049958A1 (zh)
CN (1) CN112585605A (zh)
WO (1) WO2020049958A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6638852B1 (ja) * 2018-08-31 2020-01-29 ソニー株式会社 撮像装置、撮像システム、撮像方法および撮像プログラム
KR102544626B1 (ko) * 2019-01-23 2023-06-19 한국전자통신연구원 마스킹 영역 처리 시스템 및 방법
KR102454677B1 (ko) * 2021-01-25 2022-10-17 주식회사 노타 암호 키 기반 영상의 개인정보 비 식별화 및 복원 기술

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006270718A (ja) * 2005-03-25 2006-10-05 Nec Fielding Ltd 暗号通信システムと方法、及びプログラム
JP2006319668A (ja) * 2005-05-12 2006-11-24 Sharp Corp 情報処理装置、ユーザ端末および画像処理システム
US20090010570A1 (en) * 2007-07-04 2009-01-08 Sanyo Electric Co., Ltd. Image Sensing Apparatus And Image File Data Structure
JP2012244416A (ja) * 2011-05-19 2012-12-10 Canon Inc システム、暗号処理装置
JP2015184909A (ja) * 2014-03-24 2015-10-22 キヤノン株式会社 画像処理システム、データ管理方法及びプログラム
US20170372046A1 (en) * 2016-06-23 2017-12-28 Yahoo! Inc. Computerized system and method for modifying a media file by automatically applying security features to select portions of media file content
WO2018060863A1 (en) * 2016-09-27 2018-04-05 Parikh Varsha Method and device for covering private data
KR101859433B1 (ko) * 2017-02-14 2018-05-21 에스케이텔레콤 주식회사 영상 모자이크 처리 방법 및 이를 위한 장치
US20180189461A1 (en) * 2016-12-31 2018-07-05 Entefy Inc. System and method of applying multiple adaptive privacy control layers to encoded media file types

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4825449B2 (ja) * 2005-05-13 2011-11-30 パナソニック株式会社 映像配信システム
JP4671133B2 (ja) * 2007-02-09 2011-04-13 富士フイルム株式会社 画像処理装置
JP2009033738A (ja) * 2007-07-04 2009-02-12 Sanyo Electric Co Ltd 撮像装置、画像ファイルのデータ構造
JP5088161B2 (ja) 2008-02-15 2012-12-05 ソニー株式会社 画像処理装置、カメラ装置、通信システム、画像処理方法、およびプログラム
US20140229544A1 (en) * 2013-02-12 2014-08-14 BackPeddle, LLC Sharing content in social networks
JP6211125B2 (ja) * 2016-03-31 2017-10-11 株式会社Ｍｅｄｉ Ｐｌｕｓ 画像処理システム
JP7084795B2 (ja) * 2017-09-07 2022-06-15 キヤノン株式会社 画像処理装置、画像提供装置、それらの制御方法及びプログラム
US10931836B2 (en) * 2018-03-29 2021-02-23 Ricoh Company, Ltd. Communication system, image processing method, and recording medium

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006270718A (ja) * 2005-03-25 2006-10-05 Nec Fielding Ltd 暗号通信システムと方法、及びプログラム
JP2006319668A (ja) * 2005-05-12 2006-11-24 Sharp Corp 情報処理装置、ユーザ端末および画像処理システム
US20090010570A1 (en) * 2007-07-04 2009-01-08 Sanyo Electric Co., Ltd. Image Sensing Apparatus And Image File Data Structure
JP2012244416A (ja) * 2011-05-19 2012-12-10 Canon Inc システム、暗号処理装置
JP2015184909A (ja) * 2014-03-24 2015-10-22 キヤノン株式会社 画像処理システム、データ管理方法及びプログラム
US20170372046A1 (en) * 2016-06-23 2017-12-28 Yahoo! Inc. Computerized system and method for modifying a media file by automatically applying security features to select portions of media file content
WO2018060863A1 (en) * 2016-09-27 2018-04-05 Parikh Varsha Method and device for covering private data
US20180189461A1 (en) * 2016-12-31 2018-07-05 Entefy Inc. System and method of applying multiple adaptive privacy control layers to encoded media file types
KR101859433B1 (ko) * 2017-02-14 2018-05-21 에스케이텔레콤 주식회사 영상 모자이크 처리 방법 및 이를 위한 장치

Also Published As

Publication number Publication date
US20210319144A1 (en) 2021-10-14
WO2020049958A1 (ja) 2020-03-12
JPWO2020049958A1 (ja) 2021-08-12
EP3848839A1 (en) 2021-07-14
EP3848839A4 (en) 2021-10-20

Similar Documents

Publication Publication Date Title
US8055014B2 (en) Bi-directional image capture methods and apparatuses
US8233677B2 (en) Image sensing apparatus and image file data structure
CN112585605A (zh) 信息处理系统、信息处理方法、终端装置和信息处理装置
US20130117834A1 (en) Communication control system and method, and communication device and method
US20210287322A1 (en) Robust selective image, video, and audio content authentication
KR102090696B1 (ko) 영상수신장치, 영상수신장치의 영상 복원 방법, 및 영상 시스템의 영상 마스킹 및 복원 방법
KR101460552B1 (ko) 프라이버시 영역의 마스킹 및 복원 방법
JP2017184198A (ja) イメージセンサ、撮像装置、イメージセンサ特定方法、画像偽造防止方法および画像改変制限方法
US20220255755A1 (en) Information processing device, information processing method, and program
US9635317B1 (en) Permission based camera with encrypted photo and video output
CN114125284A (zh) 图像处理方法、电子设备及存储介质
US7463750B2 (en) Image data processing apparatus and method
JP2015226298A (ja) ドキュメント管理システム、画像形成装置、ドキュメント再現装置、ドキュメント管理方法、およびコンピュータプログラム
CN102054150B (zh) 使用安全防护功能的图像处理的设备和方法
CN108712400A (zh) 数据传输方法、装置、计算机可读存储介质和电子设备
JP6211125B2 (ja) 画像処理システム
TWI772820B (zh) 密碼鍵產生裝置、密碼鍵產生方法
WO2020116177A1 (ja) 撮像素子、撮像装置および方法
KR20220083433A (ko) 외곽선 기반 프라이버시 마스킹 장치, 외곽선 기반 프라이버시 마스킹 복원 장치 및 프라이버시 마스킹 영역 디스크립터 공유 방법
CN111400768A (zh) 基于人脸和行为识别的加密分享平台及加密分享方法
US20230276146A1 (en) Image processing circuitry and image processing method
JP2002281486A (ja) 画像取得システム
US20240104232A1 (en) Information processing apparatus, control method thereof, storage medium, and information processing system
US11889204B2 (en) Imaging device, image data processing method, and program
WO2016195060A1 (ja) 画像処理システム、サーバ装置、サーバ装置の制御方法、及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination