CN103890810B - 图像处理设备、方法 - Google Patents

Abstract

一种信息处理设备、方法和计算机程序产品，其识别图像的局部区域，并将局部区域的内容变为其它图像数据和文本中的一种。对局部区域的局部图像数据执行特殊处理，该特殊处理将所述局部图像数据改变为不同的可视觉识别的图像数据。然后将所述图像数据或文本插入到所述图像的局部区域中。

Description

图像处理设备、方法

技术领域

本发明涉及图像处理设备、方法和计算机程序产品。

背景技术

近来，将广泛地使用对通过诸如数字静物相机或视频摄像机的图像拍摄设备获取的拍摄图像的处理和编辑。例如，专利文献1描述了这样的技术，其中在通过组合背景和前景获得复合视频图像时用位于前景中的替换图案替换位于背景中的固定图案。

另外，专利文献2公开这样的系统，其修改广告内容，诸如将在电视上广播的计算机游戏的广告牌或体育场的广告牌。另外，专利文献3公开了这样的技术，其从拍摄图像检测诸如广告牌的一部分的特定区域，并在该特定区域中插入示出例如其它广告内容的图像。

另外，随着信息和通信技术的发展，可以通过互联网向未指定数目的人容易地提供拍摄图像。从而，为了保护隐私，拍摄图像中涉及隐私的区域通常施加有特殊处理，诸如马赛克处理或抹黑处理。另外，即使对于电视上广播的内容或记录到光盘的内容，施加到不适当的图像、机密信息等的特殊处理是熟知的。注意，专利文献4描述了例如诸如马赛克处理或抹黑处理的特殊处理。

引用列表

专利文献

专利文献1：JP H06-510893A

专利文献2：JP 2002-15223A

专利文献3：JP 2008-227813A

专利文献4：JP 2009-194687A

发明内容

技术问题

然而，即使可以通过诸如马赛克处理或抹黑处理的特殊处理保护隐私信息，由于在施加特殊处理的局部区域丢失或破坏信息，从而几乎不能从施加特殊处理的局部区域获得可视觉识别的信息。从而，被施加特殊处理的拍摄图像具有差的信息传输效率。

因此，本发明提出一种新的改善的图像处理设备和程序，其可以改善通过施加有特殊处理的拍摄图像进行的信息传输的效率。

解决问题的技术方案

作为非限制示例，提供一种图像处理设备，包括：显示控制器，被配置为将图像数据和文本中的至少一种插入到图像的局部区域中，所述局部区域具有局部图像数据，并且所述显示控制器将所述局部图像数据改变为通过特殊处理生成的不同的可视觉识别的图像数据。还提供了对应的基于云的设备，以及方法和计算机程序产品。

附图说明

图1为示出根据本发明实施例的图像处理系统的配置的说明图；

图2为示出拍摄图像的具体示例的说明图；

图3为示出根据第一实施例的便携式终端20-1的配置的功能框图；

图4为示出经过图像处理部分252的图像处理后的拍摄图像的具体示例的说明图；

图5为示出根据第一实施例的便携式终端20-1的操作的流程图；

图6为示出第一实施例的修改示例的序列图；

图7为示出根据第二实施例的便携式终端20-2的配置的功能框图；

图8为示出包括局部区域的拍摄图像的具体示例的说明图；

图9为示出包括局部区域的拍摄图像的另一具体示例的说明图；

图10为示出包括局部区域的拍摄图像的另一具体示例的说明图；

图11为示出包括局部区域的拍摄图像的另一具体示例的说明图；

图12为示出经过图像处理部分254的图像处理后的拍摄图像的具体示例的说明图；

图13为示出经过图像处理部分254的图像处理后的拍摄图像的另一具体示例的说明图；

图14为示出根据第二实施例的便携式终端20-2的操作的流程图；

图15为示出被插入码信息的拍摄图像的具体示例的说明图；

图16为示出被插入码信息的拍摄图像的另一具体示例的说明图；

图17为示出便携式终端20的硬件配置的说明图。

具体实施方式

下文中，将参照附图详细描述本发明的优选实施例。注意，在该说明书和附图中，以相同的标号表示具有基本相同的功能和结构的构成元件，并省略对这些构成元件的重复的说明。

在该说明书和所附附图中，可能存在其中通过在相同的附图标记后表示不同的字符或数字区分具有基本相同的功能和结构的结构元件的一些情况。然而，在其中可能需要特别区分具有基本相同功能和结构的结构元件的每个的情况中，仅可以表示相同的附图标记。

另外，将根据如下所示的项目顺序描述本发明。

1.图像处理系统的配置

2.术语设置

3.第一实施例

3-1.第一实施例的背景

3-2.根据第一实施例的便携式终端的配置

3-3.根据第一实施例的便携式终端的操作

3-4.修改示例

4.第二实施例

4-1.第二实施例的背景

4-2.根据第二实施例的便携式终端的配置

4-3.根据第二实施例的便携式终端的操作

5.第一和第二实施例的补充

6.硬件配置

7.结论

<1.图像处理系统的配置>

根据本发明的技术可以以各种形式实现，诸如如在<3.第一实施例>至<5.第一和第二实施例的补充>中的各个示例中具体描述的那些形式。首先，下面将通过参考图1来描述对于全部实施例共用的图像处理系统的基本配置。

图1为示出根据本发明实施例的图像处理系统的配置的说明图。如图1所示，根据本发明实施例的图像处理系统包括：图像提供服务器10、便携式终端20、个人识别服务器30以及SNS服务器40。

图像提供服务器10、便携式终端20、个人识别服务器30以及SNS服务器40通过通信网络12连接，如图1所示。注意，通信网络12是从连接到通信网络12的设备传输的信息的有线或无线传输线路。例如，通信网络12可以包括诸如互联网、电话网或卫星通信网的公众网、各种LAN（局域网）或包括以太网（注册商标）的WAN（万维网）等。另外，通信网络12可以包括IP-VPN（互联网协议-虚拟专用网络）的租用线路网等。

图像提供服务器10提供通过图像拍摄设备获取的拍摄图像。例如，图像提供服务器10可以存储地图上多点处的拍摄图像，并且可以根据来自便携式终端20的请求将存储的拍摄图像提供到便携式终端20。或者，图像提供服务器10可以管理个人或制造商的网页，并且可以根据来自便携式终端20的请求将包括拍摄图像的网页提供到便携式终端20。

便携式终端20为图像处理设备，其获取拍摄图像并处理获取的拍摄图像。便携式终端20还可以通过各种技术获取拍摄图像。例如，便携式终端20可以从图1所示的图像提供服务器10获取拍摄图像，可以从便携式终端20拥有的图像拍摄功能获取拍摄图像，或者可以通过再 现记录介质获取拍摄图像。另外，便携式终端20可以通过接收广播获取拍摄图像。

注意，尽管图1示出了智能电话作为便携式终端20的示例，但是便携式终端20不限于智能电话。例如，便携式终端20可以是蜂窝电话、OHS（个人手持电话系统）、便携式音乐播放器、便携式视频图像处理设备、便携式游戏装置等。另外，便携式终端20仅仅为根据本发明的图像处理设备的示例。根据本发明的图像处理设备的功能甚至可以通过信息处理设备实现，诸如PC（个人计算机）、家用图像处理设备（诸如DVD记录器或VCR）、PDA（个人数字助理）、家用游戏装置或家用电器。另外，在图像提供侧的图像提供服务器10可以用作根据本发明的图像处理设备。

个人识别服务器30通过对人的面部图像进行图像分析来识别一个人是谁。例如，个人识别服务器30具有存储每个人的面部特征量的数据库、通过面部图案匹配从拍摄图像检测面部图像、分析面部图像的面部特征量、以及通过从数据库检索对应于分析的特征量的个人而执行个人识别。

SNS（社交网络服务）服务器40提供支持人们之间的联系的服务。例如，SNS服务器管理每个用户的网页。用户可以通过在其自己的网页上公开其个人信息，诸如其年龄、性别、喜好、家乡和地址或者日记（日志）而建立新的人际关系。

前文描述了根据本发明的图像处理系统的基本配置。下面在设置了用于该实施例的描述中的术语之后将描述本发明的每个实施例。

<2.术语设置>

下面将描述用于本发明实施例的描述中的术语。然而，下文所示的内容仅仅为每个术语的意思的示例，应注意，可以存在一些这样的情况，其中在本发明中使用与下面所示的内容不同的意思。

（隐私/隐私区域）

隐私是关于个人的私生活或个人事项的事项。另外，隐私区域是拍摄图像中关于隐私的区域。这里，通过参考图2更详细地描述隐私 和隐私区域。

图2为示出拍摄图像的具体示例的说明图。如图2所示，在拍摄图像中包括车辆51、房屋52、53以及个人54。在该拍摄图像中同时包括多个隐私区域。

例如，由于车辆51由车牌61标识，从而包括带有车牌61的车辆51的拍摄图像示出了位于拍摄图像的图像拍摄点的车辆51的用户的隐私。从而，由于车牌61是关于示出个人的私生活或个人事项的隐私的区域，从而车牌61对应于隐私区域。注意，尽管在图2中将4轮车辆示出为车辆51，然而，车辆51可以为摩托车、大型车辆等。

另外，如图2所示，包括在房屋52的阳台上晾晒的衣服62的拍摄图像示出了房屋52的居住者穿戴的衣服的隐私。从而，由于衣服62是关于示出个人的私生活或个人事项的隐私的区域，从而衣服62对应于隐私区域。

另外，如图2所示，包括房屋53的门牌63的拍摄图像示出居住在房屋53中的人的隐私，如门牌63所示。从而，由于门牌63是关于示出个人的私生活或个人事项的隐私的区域，从而门牌63对应于隐私区域。

另外，由于可以通过人脸识别个人，如图2所示，包括带有面部64的个人54的拍摄图像示出了位于该拍摄图像的图像拍摄点的人54的隐私。从而，由于面部64是关于示出个人的私生活或个人事项的隐私的区域，从而面部64对应于隐私区域。

（特殊处理）

特殊处理是用于从拍摄图像的一部分中包括的局部区域限制可视觉识别的信息量的图像处理。作为特殊处理的示例，包括马赛克处理、遮挡处理、填充处理等。注意，经常存在这样的情况，其中对隐私区域，诸如人脸或车辆的车牌施加特殊处理。从而，可以将施加特殊处理的局部区域视为隐私区域。

<3.第一实施例>

前文描述了本发明实施例的描述中使用的术语。下文中，将具体 描述本发明第一实施例。

<3-1.第一实施例的背景>

近来，随着信息和通信技术的发展，可以通过例如通信网络12向未指定数目的人容易地提供拍摄图像。从而，为了保护隐私，拍摄图像中涉及隐私的区域通常施加有特殊处理，诸如马赛克处理或抹黑处理。

然而，即使可以通过诸如马赛克处理或抹黑处理的特殊处理保护隐私区域，由于在施加特殊处理的隐私区域丢失或破坏信息，从而几乎不能从施加特殊处理的隐私区域获得可视觉识别的信息。

从而，基于上述情况的观点提出本发明第一实施例。根据本发明第一实施例，可以同时实现保护和有效使用拍摄图像中的隐私区域。下文中，将具体描述本发明第一实施例。

<3-2.根据第一实施例的便携式终端的配置>

图3为示出根据第一实施例的便携式终端20-1的配置的功能框图。如图3所示，根据第一实施例的便携式终端20-1包括：系统控制器220、图像拍摄部分224、通信部分228、存储部分232、操作输入部分236、隐私区域指定部分240、插入区域设置部分244、图像获取部分248、图像处理部分252、显示控制部分256以及显示部分260。

（系统控制器220）

系统控制器220包括，例如，CPU（中央处理单元）、ROM（只读存储器）以及RAM（随机存取存储器），并控制便携式终端20-1的整体操作。注意，尽管图3与系统控制器220分离地示出了隐私区域指定部分240、插入区域设置部分244、图像处理部分252和显示控制部分256的功能框，然而可通过系统控制器220实现隐私区域指定部分240、插入区域设置部分244、图像处理部分252和显示控制部分256的功能。

（图像拍摄部分）

图像拍摄部分224通过成像摄影主体获取拍摄图像。具体地，图像拍摄部分224包括：摄影光学系统，诸如摄影透镜和变焦透镜；成 像装置，诸如CCD（电荷耦合器件）或CMOS（互补金属氧化物半导体）；以及图像拍摄信号处理部分。

摄影光学系统会聚来自摄影主体的光，并在成像装置的像表面上形成摄影主体的图像。成像装置将通过摄影光学系统形成的摄影主体的图像转换为电图像信号。图像拍摄信号处理部分包括：样本保存/AGC（自动增益控制）电路，其对通过成像装置获得的图像信号执行增益调节和波形成形；以及视频A/D转换器，并获得拍摄图像作为数字数据。另外，图像拍摄信号处理部分对摄影图像数据执行各种处理，诸如白平衡处理、亮度处理、彩色信号处理、以及模糊校正处理。

图像拍摄部分224，根据系统控制器220的控制，将获取的拍摄图像提供到通信部分228、存储部分232、隐私区域指定部分240和显示控制部分256。注意，图像拍摄部分224包括作为如下部分的功能：图像拍摄控制部分，其执行对参数控制的设置和对图像拍摄操作的开/关控制的每个处理的执行处理；摄影光学系统的变焦透镜、聚焦透镜的控制驱动器、以及成像装置的灵敏度和帧率的控制。

（通信部分）

通信部分228是与外部装置的接口，并与外部装置无线或有线通信。例如，通信部分228可以通过通信网络12与图像提供服务器10、个人识别服务器30和SNS服务器40通信。注意，例如，包括无线LAN（局域网）和LTE（长期演进）作为通信部分228的通信系统。

（存储部分）

存储部分232用于保存各个数据。例如，存储部分232保存作为根据该实施例的处理对象的拍摄图像、用于插入到拍摄图像中的插入图像、以及在通过下述的图像处理部分252处理之后的图像。存储部分232根据系统控制器220的控制执行诸如记录/保存和读取各种数据的操作。

注意，存储部分232可以是存储介质，诸如非易失性存储器、磁盘、光盘或MO（磁光）盘。例如，可以提供闪存、SD卡、微SD 卡、USB存储器、EEPROM（电可擦除可编程只读存储器）、或EPROM（可擦除可编程ROM）作为非易失性存储器。另外，可以提供硬盘和磁性材料盘作为磁盘。另外，可以提供CD（压缩盘）、DVD（数字多功能盘）和BD（蓝光盘（注册商标））作为光盘。

（操作输入部分）

操作输入部分236是用户执行输入操作的配置。操作输入部分236生成对应于用户操作的信号，并将该信号提供到系统控制器220。例如，操作输入部分236可以是无线信号的接收器或接收部分，被设计用于通过操作器或远程控制器（诸如触摸板、按钮、开关、操纵杆或标度盘）生成的红外信号。另外，操作输入部分236可以是传感装置，诸如加速度传感器、角速度传感器、振动传感器或压力传感器。

（隐私区域指定部分）

隐私区域指定部分240从拍摄图像指定隐私区域。注意，拍摄图像可以是通过图像拍摄部分224获取的图像、从存储部分232读取/再现的图像、或者通过图像获取部分248利用通信部分228获取的图像。

另外，如<2.术语设置>中所述，考虑各种对象作为隐私区域。从而，隐私区域指定部分240通过对于每个对象不同的技术指定隐私区域。

例如，隐私区域指定部分240可以通过现有的利用人脸图案匹配的人脸检测技术从拍摄图像检测人脸，并且可以指定包括检测的人脸的区域作为隐私区域。

另外，隐私区域指定部分240可以在拍摄图像中检测包括字符的矩形区域，诸如车辆的车牌或者房屋的门牌，并且可以将检测的矩形区域指定为隐私区域。例如，隐私区域指定部分240在拍摄图像中检测其中轮廓为矩形、梯形或平行四边形的矩形区域。另外，在检测到矩形区域的情况中，隐私区域指定部分240判定在矩形区域中是否包括字符。然后，在矩形区域中包括字符的情况中，隐私区域指定部分240将该矩形区域指定为隐私区域。

另外，隐私区域指定部分240可以在拍摄图像中检测其中包括晾 晒衣物的区域，并可以将该检测的区域指定为隐私区域。这里，洗衣店的衣服未被人穿戴。另外，经常有几排洗衣店的衣服在晾晒。从而，隐私区域指定部分240可以从拍摄图像检测未被人穿戴并与已有的衣服相邻的衣服，在相邻衣服也未被人穿戴的情况中，隐私区域指定部分可以将包括这些衣服的区域指定为隐私区域。

（插入区域设置部分）

插入区域设置部分244将通过隐私区域指定部分240指定的隐私区域设置为用于插入下述的插入图像的插入区域。注意，插入区域设置部分244可以将全部或一些隐私区域设置为插入区域。

（图像获取部分）

图像获取部分248获取图像，诸如将受到根据该实施例的图像处理的拍摄图像和用于插入到拍摄图像中的插入图像。例如，图像获取部分248可以通过通信部分228从图像提供服务器10获取图像，或者可以通过从存储部分232再现/读取来获取图像。

（图像处理部分）

图像处理部分252将插入图像插入到通过插入区域设置部分244设置的拍摄图像中的插入区域。这里，所述插入可以是这样的处理，其在插入区域中的图像上重写插入图像，或者可以是这样的处理，其以插入图像替换插入区域中的图像。另外，插入图像可以是通过图像拍摄部分224获取的图像、从存储部分232读取/再现的图像、或者通过图像获取部分248经由通信部分228获取的图像。图像处理部分252处理这样的插入图像以匹配插入区域的形状和大小并将该插入图像插入到插入区域中。

另外，被图像处理部分252用作插入图像的图像可以具有与插入区域（隐私区域）中的图像不同的信息，或者可以具有与插入区域中的图像的相关性。

例如，在插入区域中的图像是车牌的情况中，插入区域可以包括例如车辆的制造商信息或车辆型号信息、以及制造商和产品的广告信息。另外，插入图像可以包括到车辆和车辆相关产品或相关部件的购 买地点的链接信息。在该情况中，用户可以通过选择插入图像将便携式终端20-1与链接目的地连接。

另外，在插入区域中的图像是门牌的情况中，插入图像可包括例如房地产的销售信息或者房地产中介或提供新房中介的广告信息。另外，插入图像可以包括用于房地产购买地点的主页或用于房地产中介和提供新房中介的链接信息。

另外，在插入区域中的图像是清洗的衣物的情况中，插入图像可以包括干洗店的广告信息、或者裁衣店的广告信息。另外，插入图像可以包括到干洗店和裁衣店的主页或衣物购买地点的链接信息。

另外，在插入区域中的图像是人脸的情况中，插入图像可以包括用于诸如美容沙龙、眼镜或隐形眼镜等事物的广告信息。

另外，在插入区域中的图像是人脸的情况中，插入图像可以包括公众公开的关于该人的信息。例如，在插入区域中的图像是人脸的情况中，便携式终端20-1可以向个人识别服务器30请求识别该人，并且可以获得在SNS服务器40中公众公开的关于该被识别的人的信息。在该情况中，可以将诸如该人的年龄和性别的简档信息用作插入图像。注意，在便携式终端20-1具有个人识别功能的情况中，便携式终端20-1可以识别在插入区域中具有他或她的面部的人。而且，基于图像分析（个人识别功能）本地或远程地获得公众可获得的个人具体信息。

另外，图像处理部分252可以在插入图像中设置该人向公众公开博客的网页的链接信息。由于在拍摄图像的图像拍摄位置中存在拍摄图像中包括的人，可以通过博客向公众公开关于图像拍摄位置的环境的事项。例如，在拍摄图像的图像拍摄位置为景点或购物区的情况中，可以在博客中向公众公开关于该景点或购物区的印象和评价。从而，希望知道拍摄图像的图像拍摄位置的环境的信息的便携式终端20-1的用户可以通过在插入图像中设置如上文所示的网页的链接信息而得到帮助。

注意，尽管上文描述了广告信息作为插入图像的示例，在拍摄图 像的图像文件中设置示出图像拍摄位置的位置信息的情况中，图像处理部分252可以使用关于图像拍摄位置周围的对象的广告信息作为优选插入图像。或者，在便携式终端20-1具有位置估计功能的情况中，图像处理部分252可以使用关于图像拍摄位置周围的对象的广告信息作为优选插入图像。通过该配置，可以增加对便携式终端20-1的用户的广告信息的吸引效果。

这里，通过参考图4，将描述在通过上述图像处理部分252的图像处理之后的拍摄图像的具体示例。

图4为示出经过图像处理部分252的图像处理后的拍摄图像的具体示例的说明图。更具体地，图4示出图2所示的拍摄图像在经过图像处理部分252的图像处理之后的状态。如图4所示，以插入图像71-74替换在图2所示的拍摄图像中包括的隐私区域61-64中的图像。

例如，如图4所示，以包括车辆51的制造商的广告信息（在售丰田）的插入图像71替换作为隐私区域的车辆51的车牌61。

另外，如图4所示，以包括干洗店（佐藤干洗店，XX站）的广告信息的插入图像72替换房屋52的衣物62。另外，如图4所示，以包括房地产的销售信息（XX站，新房开盘）的插入图像73替换房屋53的门牌63。

另外，如图4所示，以包括网页的引导信息（点击去往我的博客）的插入图像74替换人54的脸部64。注意，在插入图像74中设置链接信息，在通过用户选择插入图像74的情况中，便携式终端20-1可以访问链接的网页。注意，图像处理部分252可以对应于诸如年龄或性别的简档信息的伪面部图像替换人54的脸部64。通过这样的配置，在图像处理之后，可以从拍摄图像知道通过拍摄图像的图像拍摄位置附近的人的类型。

注意，通过上述图像处理部分252的对经过图像处理的拍摄图像的使用不特定限制。例如，可以将经过图像处理的拍摄图像显示在显示部分260上、保存在存储部分232中、或者可以通过通信部分228传输到外部装置。

另外，由于当在相同的图像中包括类似的广告信息时推广效率较低，在拍摄图像中包括多个隐私区域（插入区域）的情况中，图像处理部分252可以将不同的插入图像插入到每个隐私区域中。然而，在插入图像的类型数少于隐私区域数的情况中，图像处理部分252可以例外将相似插入图像插入到不同隐私区域中，并且可以对一些隐私区域施加特殊处理，诸如马赛克处理或抹黑处理。

（显示控制部分）

显示控制部分256基于系统控制器220的控制驱动显示部分260的像素驱动电路，并在显示部分260上显示图像。例如，显示控制部分256可以在显示部分260上显示经过图像处理部分252的图像处理之后的拍摄图像。注意，显示控制部分256可以执行例如亮度级别调节、颜色校正、对比度调节和清晰度调节（边缘加强），以用于图像显示。另外，显示控制部分256可以执行对图像的分离和组合，以用于生成扩展图像数据的一部分的扩展图像、生成压缩图像、软聚焦处理、亮度转换处理、图像的一部分中的高光显示处理（强调显示）、图像效果处理（诸如对于全部颜色改变环境）、或者对拍摄图像的分段表示。

（显示部分）

显示部分260包括像素驱动电路，并通过根据显示控制部分256的控制驱动像素驱动电路而显示图像。注意，显示部分可以是液晶显示器或有机EL显示器。

<3-3.根据第一实施例的便携式终端的操作>

前文描述了根据第一实施例的便携式终端20-1的配置。下文将参考图5描述根据第一实施例的便携式终端20-1的操作。

图5为示出根据第一实施例的便携式终端20-1的操作的流程图。首先，如图5所示，当便携式终端20-1获取拍摄图像时（S110），隐私区域指定部分240判断在拍摄图像中是否有隐私区域（S120）。注意，便携式终端20-1可以通过图像拍摄部分224、通过读取/再现存储部分232、或者通过通信部分228获取拍摄图像。

然后，在拍摄图像中有隐私区域的情况中，隐私区域指定部分240指定隐私区域，诸如人脸和车牌（S130），并且插入区域设置部分244将通过隐私区域指定部分240指定的隐私区域设置为用于插入插入图像的插入区域（S140）。

然后，图像处理部分252获取与插入区域中的图像相关的插入图像，并根据需要处理插入图像（S150）。然后，图像处理部分252将插入图像插入通过插入区域设置部分244设置的插入区域，即，图像处理部分252以插入图像替换插入区域中的图像（S160）。

然后，便携式终端20-1重复S130-S160的处理直到从拍摄图像未检测到隐私区域（S120）。然后，当从拍摄图像未检测到隐私区域时，显示控制部分256在显示部分260上显示拍摄图像（S170），其中已经通过图像处理部分252以插入图像替换隐私区域。

注意，尽管图5示出对于每个隐私区域重复处理S130-S160的示例，然而，可以首先指定全部隐私区域，并且在每个步骤中执行关于全部隐私区域的处理之后，可以移到下一个步骤。

根据上述本发明第一实施例，在保护拍摄图像中包括的隐私区域的同时，可以将包括有用信息的图像插入到隐私区域中。通过这样的配置，拍摄图像中的隐私区域可以实现对图像的有效使用并改善图像的附加值。

<3-4.修改示例>

注意，尽管上文描述了通过便携式终端20-1执行对隐私区域的指定和图像插入的示例，但是可以通过多个设备之间的协作实现上述处理。下文中，将描述通过图像提供服务器10与便携式终端20-1之间的协作实现第一实施例的处理的示例作为修改示例。

图6为示出第一实施例的修改示例的序列图。在图6所示的修改示例中，图像处理服务器10指定拍摄图像中的隐私区域（S310），并将隐私区域设置为插入图像的插入区域（S320）。然后，图像处理服务器10将拍摄图像和插入区域的设置信息发送到便携式终端20-1（S330）。

然后，例如便携式终端20-1的图像获取部分248获取插入图像，并且图像处理部分252根据需要处理插入图像（S340）。然后，图像处理部分252将插入图像插入到插入区域，即，图像处理部分252以插入图像替换插入区域中的图像（S350）。

从而，当指定隐私区域时，可通过不同设备执行对插入图像的插入，并且在该情况中，拍摄图像中的隐私区域可以实现对图像的有效使用并改善图像附加值。尽管已经提供了执行处理的本地装置的示例，然而，图1还示出了如何在本地便携式设备（例如终端20）与远程装置10、30和40之间划分处理，远程装置10、30和40中的任一个可以为云资源，其从终端20接收图像数据，并提供特殊处理和将图像/文本插入到图像的局部区域中。

<4.第二实施例>

上文描述了本发明的第一实施例。下文中，将具体描述本发明第二实施例。

<4-1.第二实施例的背景>

如第一实施例中的背景中所述，近来，经常对拍摄图像中的隐私区域施加诸如马赛克处理或抹黑处理的特殊处理，以保护隐私。另外，即使对于电视上广播的内容或记录到光盘的内容，施加到不适当的图像、机密信息等的特殊处理是熟知的。

然而，即使可以通过诸如马赛克处理或抹黑处理的特殊处理保护隐私信息，由于在施加特殊处理的局部区域丢失或破坏信息，从而几乎不能从施加特殊处理的局部区域获得可视觉识别的信息。从而，被施加特殊处理的拍摄图像具有差的信息传输效率。

从而，基于上述情况提出本发明第二实施例。根据本发明第二实施例，可以改善施加特殊处理的拍摄图像的信息传输的效率、附加值和便利性。下文中，将具体描述本发明第二实施例。

<4-2.根据第二实施例的便携式终端的配置>

图7为示出根据第二实施例的便携式终端20-2的配置的功能框图。如图7所示，根据第二实施例的便携式终端20-2包括：系统控制 器220、图像拍摄部分224、通信部分228、存储部分232、操作输入部分236、隐私区域指定部分242、插入区域设置部分246、图像获取部分248、图像处理部分254、显示控制部分256以及显示部分260。由于系统控制器220、图像拍摄部分224、通信部分228、存储部分232、操作输入部分236、图像获取部分248、显示控制部分256和显示部分260的配置与第一实施例中的所述部分相同，从而将省略对其的具体描述。

（局部区域指定部分）

局部区域指定部分242指定其上施加用于限值可视觉识别的信息量的特殊处理的局部区域。这里，如<2.术语设置>中所述，考虑各种图像处理过程作为特殊处理。从而，局部区域指定部分242指定通过根据特殊处理的类型而不同的技术施加特殊处理的局部区域，所述特殊处理诸如为马赛克处理、遮挡处理或填充处理。这将在下文中参考图8和图9更详细地描述。

图8为示出包括局部区域的拍摄图像的具体示例的说明图。在如图8所示的拍摄图像中包括多个其上施加特殊处理的局部区域81-84。例如，尽管局部区域81对应于车辆51的车牌的区域，由于施加了遮挡处理，从而难于辨别车牌的内容。类似地，对于施加到局部区域82-84的遮挡处理，难于辨别处理前的图像。

局部区域指定部分242可以通过分析拍摄图像的每个区域的频率元素而指定将对其施加这样的遮挡处理的局部区域。例如，由于认为在其上施加遮挡处理的区域中的高频元素较低，从而局部区域指定部分242可以将其中高频元素相比于环境较低的区域指定为局部区域。

图9和图10为示出包括局部区域的拍摄图像的另一具体示例的说明图。在图9所示的拍摄图像中包括的局部区域85为其上施加填充处理的人55的眼线的区域。由于眼线具有对于人的高可识别性，从而从该已经填充眼线的图像难于识别人55。类似地，在图10所示的拍摄图像中包括局部区域81'-84'。由于对这些局部区域81'-84'施加填充处理，从而难于视觉识别信息，诸如初始门牌或车牌。

局部区域指定部分242可以通过检测拍摄图像的边缘元素指定将被施加这种填充处理的局部区域。另外，由于经常对矩形区域施加填充处理，从而，在其中通过检测边缘元素指定的形状轮廓是矩形的情况中，局部区域指定部分242可以指定该矩形中的区域作为局部区域。

图11为示出包括局部区域的拍摄图像的另一具体示例的说明图。在图11所示的拍摄图像中包括局部区域81''-84''。由于对这些局部区域81''-84''施加马赛克处理，从而难于视觉识别信息，诸如初始门牌或车牌。被施加该马赛克处理的局部区域是多组像素块，并且认为构成类似像素块的像素具有相同的元素。因此，局部区域指定部分242可以指定具有相同元素的一组像素块作为局部区域。

（插入区域设置部分）

插入区域设置部分246将通过局部区域指定部分242指定的局部区域设置为用于插入下述的插入图像的插入区域。注意，插入区域设置部分246可以将全部或一些局部区域设置为插入区域。另外，可以执行在局部区域中插入文本和/或图像数据作为特殊处理的一部分或作为特殊处理之外的附加处理。

（图像处理部分）

图像处理部分254将插入图像插入到通过插入区域设置部分246设置的拍摄图像中的插入区域。这里，所述插入可以是这样的处理，其在插入区域中的图像上重写插入图像，或者可以是这样的处理，其以插入图像替换插入区域中的图像。另外，插入图像可以是通过图像拍摄部分224获取的图像、从存储部分232读取/再现的图像、或者通过图像获取部分248经由通信部分228获取的图像。图像处理部分254处理这样的插入图像以匹配插入区域的形状和大小并将该插入图像插入到插入区域中。

另外，由图像处理部分254用作插入图像的图像可以具有与插入图像（局部区域）的图像环境的相关性。例如，在图像环境是车辆的情况中，诸如图8中所示的局部区域81，插入图像可以包括例如车辆 的制造商信息或车辆型号信息、以及制造商和产品的广告信息。另外，插入图像可以包括到车辆和车辆相关产品或相关部件的购买地点的链接信息。在该情况中，用户可以通过选择插入图像将便携式终端20-2与链接目的地连接。

另外，在图像环境是房屋的情况中，诸如图8所示的局部区域82和83，插入图像可包括例如房地产的销售信息或者房地产中介或提供新房中介的广告信息。另外，插入图像可以包括用于房地产购买地点的主页或用于房地产中介和提供新房中介的链接信息。另外，在图像环境是人的情况中，诸如图8所示的局部区域84，插入图像可以包括用于诸如美容沙龙、眼镜或隐形眼镜的事项的广告信息。

注意，尽管上文描述了广告信息作为插入图像的示例，在拍摄图像的图像文件中设置示出图像拍摄位置的位置信息的情况中，图像处理部分254可以使用关于图像拍摄位置周围的对象的广告信息作为优选插入图像。或者，在便携式终端20-2具有位置估计功能的情况中，图像处理部分254可以使用关于便携式终端20-2的当前位置周围的对象的广告信息作为优选插入图像。通过该配置，可以增加对便携式终端20-2的用户的广告信息的吸引效果。

另外，由于当在相同的图像中包括类似的广告信息时推广效率较低，在拍摄图像中包括多个局部区域的情况中，图像处理部分254可以将不同的插入图像插入到各个局部区域中。然而，在其中插入图像的类型数少于局部区域数的情况中，图像处理部分254可以例外地将类似的插入图像插入到不同局部区域中。

这里，通过参考图12和13，将描述在通过上述图像处理部分254的图像处理之后的拍摄图像的具体示例。

图12为示出经过图像处理部分254的图像处理后的拍摄图像的具体示例的说明图。更具体地，图12示出图8、10和11所示的拍摄图像在经过图像处理部分254的图像处理之后的状态。如图12所示，图像处理部分254以插入图像91-94替换在图8等所示的拍摄图像中包括的局部区域81-84中的图像。注意，尽管图10示出以插入图像替换局部 区域中的图像的示例，图像处理部分254可以通过附加形状将插入图像插入到插入区域中。即，图像处理部分254可以不需要提取局部区域中的初始图像。

图13为示出经过图像处理部分254的图像处理后的拍摄图像的另一具体示例的说明图。更具体地，图13示出图9所示的拍摄图像在经过图像处理部分254的图像处理之后的状态。如图13所示，图像处理部分254可以将插入图像95插入到被施加填充处理的插入区域85中。

<4-3.根据第二实施例的便携式终端的操作>

前文描述了根据第二实施例的便携式终端20-2的配置。下文将参考图14描述根据第二实施例的便携式终端20-2的操作。

图14为示出根据第二实施例的便携式终端20-2的操作的流程图。首先，如图14所示，当便携式终端20-2获取拍摄图像时（S410），局部区域指定部分242判断在拍摄图像中是否有其上已经通过特殊处理限值信息量的局部区域（S420）。注意，便携式终端20-2可以通过图像拍摄部分224、通过读取/再现存储部分232、或者通过通信部分228获取拍摄图像。

然后，在拍摄图像中存在局部区域的情况中，局部区域指定部分242指定其上施加诸如遮挡处理或填充处理的特殊处理的局部区域（S430），并且插入区域设置部分246将通过局部区域指定部分242指定的局部区域设置为用于插入插入图像的插入区域（S440）。

然后，图像处理部分254获取与插入区域中的图像相关的插入图像，并根据需要处理插入图像（S450）。然后，图像处理部分254将插入图像插入通过插入区域设置部分246设置的插入区域，即，图像处理部分254以插入图像替换插入区域中的图像（S460）。

然后，便携式终端20-2重复S430-S460的处理直到从拍摄图像未检测到局部区域（S420）。然后，当从拍摄图像未检测到局部区域时，显示控制部分256在显示部分260上显示拍摄图像，其中已经通过图像处理部分254将插入图像插入到局部区域中（S470）。

注意，尽管图14示出对于每个局部区域重复处理S430-S460的示 例，然而，可以首先指定全部局部区域，并且在每个步骤中执行关于全部局部区域的处理之后，可以移到下一个步骤。另外，如在第一实施例的修改示例中所述，可通过多个设备（例如，便携式终端20-2和图像提供服务器10）之间的协作实现上述处理。

另外，在通过图像处理装置254的图像处理之后的拍摄图像的使用不特别限制。例如，可以将经过图像处理后的拍摄图像显示在显示部分260上、保存在存储部分232中、或者可以通过通信部分228传输到外部装置。

根据上述本发明第二实施例，可以将包括有用信息的图像插入到其上施加诸如遮挡处理或填充处理的特殊处理的局部区域。通过这样的配置，可以改善施加特殊处理的拍摄图像的信息传输的效率、附加值和便利性。

<5.第一和第二实施例的补充>

尽管上文描述了将诸如广告信息的插入图像插入隐私区域或局部区域的插入区域的图像处理部分252和254（下文简称为图像处理部分）的示例，但是插入图像不限于上述示例。例如，插入图像可以是码信息，诸如ISBN码、POS码、URL、URI（通用资源标识符）、IRI（国际化资源标识符）、QR码或网络码。下文中将更详细描述这些内容。

当设置隐私区域或局部区域的插入区域时，图像处理部分从插入区域的形状和大小决定插入的码信息和码信息的布置，并将条码信息插入到插入区域中。

图15和图16为示出被插入码信息的拍摄图像的具体示例的说明图。如图15所示，图像处理部分可以将QR码102-104插入到诸如隐私区域或局部区域的插入区域中，并且可以插入URL101。另外，由于如图15所示的车辆51中的插入区域是水平长条形状，从而图像处理部分可以将2行URL101插入到图15所示的车辆51中的插入区域中。另外，如图16所示，图像处理部分可以从作为人55中的插入区域的眼线区域的形状确定其中排列5个QR码的布置，并且可以将QR码105A- 105E插入到人55中的插入区域中。

注意，尽管上文描述了作为隐私区域或局部区域的插入区域的示例，但是插入区域不限于这些示例。例如，插入区域可以是个人指定的区域。另外，码信息可以是加密密钥信息，并且在加密密钥信息被解密的情况中，可以通过码信息再现已经被删除的初始图像。另外，码信息可以是水印信息，诸如版权管理信息。另外，插入到插入区域的码信息可具有与插入区域或插入区域的图像环境的相关性。

如上所述，通过在插入区域中插入码信息可以增加图像的附加值和便利性。另外，尽管当图像是打印图像时可能不需要使用图4所示的通过插入图像74的链接信息设置的插入图像，但是诸如QR码或网络码的二维条码对于在图像是打印图像时使用的情况是有用的。

<6.硬件配置>

通过便携式终端20拥有的硬件之间的协作实现上述通过便携式终端20的图像处理，下文将参考图17对其进行描述。

图17为示出便携式终端20的硬件配置的说明图。如图17所示，便携式终端20包括CPU（中央处理单元）201、ROM（只读存储器）202、RAM（随机存取存储器）203、输入设备208、输出设备210、存储设备211、驱动器212、图像拍摄设备213、以及通信设备215。

CPU201用作运算处理设备和控制设备，并根据各个程序控制便携式终端20中的全部操作。另外，CPU201可以为微处理器。ROM202存储由CPU201使用的程序和运算参数。RAM203临时存储在CPU201的执行中使用的程序和在这些执行中任意改变的参数。这些部分通过由CPU总线等构成的主机总线相互连接。

输入设备208包括：用于用户输入信息的输入部分，诸如鼠标、键盘、触摸板、按钮、麦克风、开关或操作杆；以及输入控制电路，其基于用户输入生成输入信号并将输入信号输出给CPU201。便携式终端20的用户可以通操作输入设备208输入用于便携式终端20的各种数据，并且可以显示这些处理操作。注意，该输入设备对应于图3和图7所示的操作输入部分236。

输出设备210包括显示装置（例如，诸如液晶显示器（LCD）设备、OLED（有机发光二极管）设备、或灯）。另外，输出设备210包括诸如扬声器或耳机的语音输出设备。例如，显示设备显示拍摄图像和生成的图像。另一方面，语音输出设备转换语音数据并输出语音。

存储设备211是用于数据存储的设备，其例如在该实施例中被配置为便携式终端20的存储部分的示例。存储设备211可以包括存储介质、将数据记录到存储介质的记录设备、以及擦除设备，所述擦除设备擦除记录在存储介质中的、以及从存储介质读取的读取设备中的数据。存储设备211存储由CPU201执行的程序和各个数据。注意，该存储介质211对应于图3和图7所示的存储部分232。

驱动器212是用于存储介质的读取器/写入器，其被置入便携式终端20或外部附接。驱动器212读取记录在可移动存储介质24（诸如安装的磁盘、光盘、磁光盘、或半导体存储器）上的信息，并将信息输出给RAM203。另外，驱动器212可以向可移动存储介质24写入信息。

图像拍摄设备213包括图像拍摄光学系统，诸如汇聚光的摄影透镜和变焦透镜，以及信号转换元件，诸如CCD（电荷耦合器件）或CMOS（互补金属氧化物半导体）。图像拍摄系统通过汇聚来自摄影主体的光在信号转换部分中形成摄影主体，并且信号转换元件将形成的摄影主体转换为电图像信号。注意，图像拍摄设备213对应于图3和图7所示的图像拍摄部分234。

通信设备215例如是由通信装置构成的通信接口，用于连接到通信网络12。另外，即使通信设备215是适于无线LAN（局域网）或LTE（长期演进）的通信设备，然而，通信设备215可以是通过缆线通信的有线通信设备。注意，通信设备215对应于图3和图7所示的通信部分228。

<7.结论>

根据上述本发明第一实施例，在保护拍摄图像中包括的隐私区域的同时，可以将包括有用信息的图像插入到隐私区域中。通过这样的 配置，拍摄图像中的隐私区域可以实现对图像的有效使用并改善图像的附加值。

另外，根据本发明第二实施例，可以将包括有用信息的图像插入到其上施加诸如遮挡处理或填充处理的特殊处理的区域。通过这样的配置，可以改善施加特殊处理的拍摄图像的信息传输的效率、附加值和便利性。

本领域技术人员可以理解，根据设计要求和其它因素可以进行各种修改、组合、子组合和替换，只要其落入所附权利要求或其等同的范围中。

例如，在本发明中的便携式终端20的处理中的每个步骤不一定需要以根据顺序图或流程图所述的顺序的时间序列处理。例如，便携式终端20的处理中的每个步骤可以被并行处理，即使以不同于流程图所述的顺序处理便携式终端20的处理中的每个步骤。

另外，可以创建计算机程序，以使得内置入便携式终端20的诸如CPU201、ROM202、和RAM203的硬件表现与上述便携式终端20的每个配置类似的功能。另外，还可以提供用于存储该计算机程序的存储介质。

另外，还可以如下配置本发明的技术。

根据一种图像处理设备实施例，该设备包括

显示控制器，被配置为将图像数据和文本中的至少一个插入到图像的局部区域中，所述局部区域具有局部图像数据，并且所述显示控制器将所述局部图像数据改变为通过特殊处理生成的不同的可视觉识别的图像数据。

根据实施例的一方面，该显示控制器将图像数据插入到所述图像的局部区域中。

根据实施例的另一方面，该显示控制器将文本数据插入到所述图像的局部区域中。

根据实施例的另一方面，所述设备还包括执行特殊处理的图像处理部分，所述特殊处理为马赛克处理。

根据实施例的另一方面，所述设备还包括执行特殊处理的图像处理部分，所述特殊处理为遮挡处理。

根据实施例的另一方面，所述设备还包括执行特殊处理的图像处理部分，所述特殊处理为填充处理。

根据实施例的另一方面，所述显示控制器识别所述局部区域作为隐私区域。

根据实施例的另一方面，该显示控制器将图像的图像数据插入到所述局部区域中，所述图像与所述局部区域周围的影像相关。

根据实施例的另一方面，该设备还包括:

图像拍摄部分，用于识别所述图像的局部区域和所述图像的不同局部区域，其中

所述显示控制器将图像数据插入到局部区域中，并将不同图像数据插入到所述不同局部区域中。

根据实施例的另一方面，该显示控制器将广告图像插入到所述局部区域中。

根据实施例的另一方面，该显示控制器将文本信息插入到局部区域中，所述文本信息包括网络访问信息。

根据实施例的另一方面，所述特殊处理将图像数据和文本中的至少一个插入到图像的局部区域中作为特殊处理的一部分。

根据实施例的另一方面，所述设备还包括:

图像获取部分，用于基于对局部区域的图像分析获取特定于个人的公众可获取的信息，其中

所述局部区域是被指定为隐私区域的面部区域，以及

所述显示控制器将所述特定于个人的公众可获取的信息插入到所述隐私区域中。

根据实施例的另一方面，所述设备还包括:

通信部分，用于与外部装置交换信息，其中

所述通信部分从远程装置接收图像数据，并且所述显示控制器插 入来自所述远程装置的所述图像数据。

根据实施例的另一方面，所述设备还包括通信部分，其与外部图像提供装置交换信息，其中

所述通信部分从外部图像提供装置接收图像数据，并且所述显示控制器插入来自所述外部图像提供装置的所述图像数据。

根据实施例的另一方面，所述设备还包括:

通信部分，用于与外部文本服务器装置交换信息，其中

所述通信部分从外部文本服务器装置接收文本数据，并且所述显示控制器插入来自所述外部文本服务器装置的所述图像数据。

根据实施例的另一方面，所述设备还包括:

通信部分，用于与外部个人识别装置交换信息，其中

所述通信部分将图像数据从所述局部区域提供到所述外部个人识别装置，并接收来自所述外部个人识别装置的特定于个人的文本或图像数据，以及

所述显示控制器插入来自所述外部个人识别装置的所述文本或图像数据。

根据另一种信息处理设备实施例，该设备包括

通信接口，用于与远程便携式装置交换信息；以及

处理器，用于接收来自所述远程便携式装置的图像并识别图像中的局部区域，所述处理器被配置为将图像数据和文本中的至少一个插入到图像的局部区域中，所述局部区域具有局部图像数据，并且所述处理器通过执行特殊处理将所述局部图像数据改变为不同的可视觉识别的图像数据。

根据实施例的一方面，所述处理器被配置为执行所述特殊处理，所述特殊处理为马赛克处理、遮挡处理和填充处理之一。

根据实施例的另一方面，所述处理器将所述局部区域设置为隐私区域。

根据实施例的另一方面，该处理器将图像的图像数据插入到所述局部区域中，所述图像与所述局部区域周围的影像相关。

根据实施例的另一方面，该处理器将图像的广告图像插入到所述局部区域中。

根据实施例的另一方面，该处理器将文本信息插入到局部区域中，所述文本信息包括网络访问信息。

根据一种信息处理方法实施例，该方法包括：

通过处理电路识别图像的局部区域；以及

对局部区域的局部图像数据执行特殊处理，该特殊处理将所述局部图像数据改变为不同的可视觉识别的图像数据；以及

将图像数据和文本中的至少一个插入到所述图像的局部区域中。

根据一种非瞬时计算机可读介质实施例，所述介质具有存储在其上的计算机可读指令，所述指令当通过处理电路执行时执行一种方法，所述方法包括

通过处理电路识别图像的局部区域；以及

对局部区域的局部图像数据执行特殊处理，该特殊处理将所述局部图像数据改变为不同的可视觉识别的图像数据；以及

将图像数据和文本中的至少一个插入到所述图像的局部区域中。

附图标记列表

10 图像提供服务器

12 通信网络

20 便携式终端

30 个人识别服务器

40 SNS服务器

220 系统控制器

224 图像拍摄部分

228 通信部分

232 存储部分

234 图像拍摄部分

236 操作输入部分

240 隐私区域指定部分

242 局部区域指定部分

244、246 插入区域设置部分

248 图像获取部分

252、254 图像处理部分

256 显示控制部分

260 显示部分

Claims (19)

1.一种图像处理设备，包括：

显示控制器，被配置为将图像数据和文本中的至少一个插入到图像的局部区域中，所述局部区域具有局部图像数据，并且所述显示控制器将所述局部图像数据改变为通过特殊处理生成的不同的可视觉识别的图像数据，其中所述特殊处理是用于从拍摄图像的一部分中包括的局部区域限制可视觉识别的信息量的图像处理，以及

图像获取部分，用于基于对局部区域的图像分析获取特定于个人的图像或文本数据，其中

所述局部区域是被指定为隐私区域的面部区域，其中所述隐私区域是拍摄图像中关于隐私的区域，以及

所述显示控制器将所述特定于个人的图像或文本数据插入到所述隐私区域中。

2.根据权利要求1所述的图像处理设备，其中：

所述显示控制器将图像数据插入到所述图像的局部区域中。

3.根据权利要求1所述的图像处理设备，其中：

所述显示控制器将文本数据插入到所述图像的局部区域中。

4.根据权利要求1所述的图像处理设备，还包括：

图像处理部分，用于执行所述特殊处理，所述特殊处理为马赛克处理、遮挡处理和填充处理之一。

5.根据权利要求1所述的图像处理设备，其中：

所述显示控制器把所述局部区域识别为隐私区域。

6.根据权利要求1所述的图像处理设备，其中：

所述显示控制器将图像的图像数据插入到所述局部区域中，所述图像与所述局部区域周围的影像相关。

7.根据权利要求1所述的图像处理设备，还包括：

图像拍摄部分，用于识别所述图像的局部区域和所述图像的不同局部区域，其中

所述显示控制器将图像数据插入到局部区域中，并将不同图像数据插入到所述不同局部区域中。

8.根据权利要求1所述的图像处理设备，其中：

所述显示控制器将广告图像插入到所述局部区域中。

9.根据权利要求1所述的图像处理设备，其中：

所述显示控制器将文本信息插入到局部区域中，所述文本信息包括网络访问信息。

10.根据权利要求1所述的图像处理设备，其中：

所述特殊处理将图像数据和文本中的至少一个插入到图像的局部区域中作为特殊处理的一部分。

11.根据权利要求1所述的图像处理设备，还包括：

通信部分，用于与外部装置交换信息，其中

所述通信部分从远程装置接收图像数据，并且所述显示控制器插入来自所述远程装置的所述图像数据。

12.根据权利要求1所述的图像处理设备，还包括：

通信部分，用于与外部个人识别装置交换信息，其中

所述通信部分将图像数据从所述局部区域提供到所述外部个人识别装置，并接收来自所述外部个人识别装置的特定于个人的文本或图像数据，以及

所述显示控制器插入来自所述外部个人识别装置的所述文本或图像数据。

13.一种信息处理装置，包括：

通信接口，用于与远程便携式装置交换信息；

处理器，用于接收来自所述远程便携式装置的图像并识别图像中的局部区域，

所述处理器被配置为：

将图像数据和文本中的至少一个插入到图像的局部区域中，所述局部区域具有局部图像数据，并且所述处理器通过执行特殊处理将所述局部图像数据改变为不同的可视觉识别的图像数据，其中所述特殊处理是用于从拍摄图像的一部分中包括的局部区域限制可视觉识别的信息量的图像处理；

基于对局部区域的图像分析获取特定于个人的图像或文本数据，其中所述局部区域是被指定为隐私区域的面部区域，其中所述隐私区域是拍摄图像中关于隐私的区域，以及

将所述特定于个人的图像或文本数据插入到所述隐私区域中。

14.根据权利要求13所述的信息处理装置，其中：

所述处理器被配置为执行所述特殊处理，所述特殊处理为马赛克处理、遮挡处理和填充处理之一。

15.根据权利要求13所述的信息处理装置，其中：

所述处理器将所述局部区域设置为隐私区域。

16.根据权利要求13所述的信息处理装置，其中：

所述处理器将图像的图像数据插入到所述局部区域中，所述图像与所述局部区域周围的影像相关。

17.根据权利要求13所述的信息处理装置，其中：

所述处理器将图像的广告图像插入到所述局部区域中。

18.根据权利要求13所述的信息处理装置，其中：

所述处理器将文本信息插入到局部区域中，所述文本信息包括网络访问信息。

19.一种信息处理方法，包括：

通过处理电路识别图像的局部区域；以及

对局部区域的局部图像数据执行特殊处理，该特殊处理将所述局部图像数据改变为不同的可视觉识别的图像数据，其中所述特殊处理是用于从拍摄图像的一部分中包括的局部区域限制可视觉识别的信息量的图像处理；以及

将图像数据和文本中的至少一个插入到所述图像的局部区域中，

所述信息处理方法还包括：

基于对局部区域的图像分析获取特定于个人的图像或文本数据，其中所述局部区域是被指定为隐私区域的面部区域，其中所述隐私区域是图像中关于隐私的区域，以及

将所述特定于个人的图像或文本数据插入到所述隐私区域中。