CN100592779C - 信息处理设备及信息处理方法 - Google Patents

信息处理设备及信息处理方法 Download PDF

Info

Publication number
CN100592779C
CN100592779C CN200710160102A CN200710160102A CN100592779C CN 100592779 C CN100592779 C CN 100592779C CN 200710160102 A CN200710160102 A CN 200710160102A CN 200710160102 A CN200710160102 A CN 200710160102A CN 100592779 C CN100592779 C CN 100592779C
Authority
CN
China
Prior art keywords
information
facial
image
imported
input unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN200710160102A
Other languages
English (en)
Other versions
CN101207775A (zh
Inventor
河田幸博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of CN101207775A publication Critical patent/CN101207775A/zh
Application granted granted Critical
Publication of CN100592779C publication Critical patent/CN100592779C/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21Intermediate information storage
    • H04N1/2104Intermediate information storage for one or a few pictures
    • H04N1/2112Intermediate information storage for one or a few pictures using still video cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32106Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title separate from the image data, e.g. in a different computer file
    • H04N1/32112Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title separate from the image data, e.g. in a different computer file in a separate computer file, document page or paper sheet, e.g. a fax cover sheet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32128Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title attached to the image data, e.g. file header, transmitted message header, information on the same page or in the same computer file as the image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00Still video cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0084Digital still camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3204Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3204Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium
    • H04N2201/3205Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium of identification information, e.g. name or ID code
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3204Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium
    • H04N2201/3207Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium of an address
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3204Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium
    • H04N2201/3207Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium of an address
    • H04N2201/3208Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium of an address of an e-mail or network address
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3204Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium
    • H04N2201/3209Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium of a telephone number
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3249Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document data relating to a linked page or object, e.g. hyperlink
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/325Modified version of the image, e.g. part of the image, image reduced in size or resolution, thumbnail or screennail
    • H04N2201/3251Modified version of the image, e.g. part of the image, image reduced in size or resolution, thumbnail or screennail where the modified version of the image is relating to a person or face
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3261Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of multimedia information, e.g. a sound signal
    • H04N2201/3264Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of multimedia information, e.g. a sound signal of sound signals

Abstract

本发明公开信息处理设备及信息处理方法。根据本发明的信息处理设备包括:图像被输入到其中的图像输入单元;从输入到图像输入单元的图像检测人的面部区域的面部检测单元;记录面部选择单元,其从通过面部检测单元检测到的面部区域中,选择要与期望的语音注释相关联的期望的面部区域;记录单元,记录用于将语音注释与通过该记录面部选择单元所选择的面部区域进行关联的期望语音注释;再现面部选择单元,其从被通过记录单元与语音注释区域相关联的面部区域中,选择期望的面部区域;以及再现单元,其再现与通过再现面部选择单元所选择的面部区域相关联的语音注释。

Description

信息处理设备及信息处理方法
技术领域
本发明涉及与图像有关的信息的记录。
背景技术
日本特开No.2004-301894公开了这样一种技术:利用通过语音识别而制成的字库来识别作为注释输入的语音,将识别到的语音转换为文本数据,以及将其与图像进行关联。
在日本特开No.11-282492中公开的技术是:提取面部以便提高语音识别的成功率,并且还增加了确定面部之间相似度的图像比较装置。
当检测到目标并且当使用监控相机收集信息时检测到作为目标的人的存在时,采用在日本特开No.2003-274388中所陈述的技术,语音还可以同时被记录到数据库中。
发明内容
尽管上述技术可以随机地收集数据,但是它们不能将具有诸如关于具体的人的具体注释的音频和/或信息与每个人进行关联。
本发明的目标是提供一种可以以较低的成本将图像中的面部与诸如语音注释及文本信息的任意输入信息容易地进行关联的技术。
根据本发明的第一方面的信息处理设备包括:图像被输入到的图像输入单元;从输入到图像输入单元的图像中检测人的面部区域的面部检测单元;记录面部选择单元,从通过面部检测单元检测到的面部区域中选择要与期望的语音注释相关联的期望的面部区域;记录单元,记录用于将语音注释与通过记录面部选择单元所选择的面部区域进行关联的期望语音注释;再现面部选择单元,从通过记录单元将与语音注释区域进行关联的面部区域中选择期望的面部区域;以及再现单元,再现与通过再现面部选择单元所选择的面部区域相关联的语音注释。
根据第一方面,可以记录与图像中的期望面部相关联的期望的语音注释以及产生与期望面部相关联的语音注释。
根据本发明的第二方面的信息处理设备包括:图像被输入到其中的图像输入单元;从输入到图像输入单元的图像中检测人的面部区域的面部检测单元;记录面部选择单元,从通过面部检测单元检测到的面部区域之中选择要与期望的声音注释相关联的期望的面部区域;相关信息输入单元,期望的相关信息被输入到该相关信息输入单元,;记录单元,记录输入到相关信息输入单元的相关信息,用于将相关信息与通过记录面部单元所选择的面部区域进行关联;显示面部选择单元,从通过记录单元将与相关信息相关联的面部区域中选择期望的面部区域;以及显示单元,通过将相关信息叠加在对于所选择面部区域的位置合适的位置上,来显示与通过显示面部选择单元所选择的面部区域相关联的相关信息。
根据第二方面,可以记录与期望面部相关联的文本信息,以及在适于面部位置的位置上显示与期望面部相关联的文本信息。
根据本发明的第三方面的信息处理设备包括:图像被输入到其中的图像输入单元;面部信息输入单元,包括在输入到图像输入单元的图像中识别面部区域的信息的面部信息被输入到该面部信息输入单元;地址信息读取单元,读出与输入到面部信息输入单元的面部信息相关联的地址信息;显示单元,采用表示地址信息与面部信息相关联的图片来显示输入到图像输入单元中的图像;以及传送单元,将输入到图像输入单元中的图像传送到由地址信息所指定的目的地。
根据第三方面,可以根据与面部相关联的地址信息来自动地执行传送包含面部的图像的操作。
根据本发明的第四方面的信息处理设备包括:图像被输入到的图像输入单元其中;面部信息输入单元,包括用于识别在输入到所述图像输入单元的图像中的面部区域的信息的面部信息被输入到该面部信息输入单元;个人信息读取单元,读出与输入到面部信息输入单元的面部信息相关联的个人信息;用于检索期望面部信息的搜索信息被输入到的搜索信息输入单元;搜索单元,通过静输入到搜索信息输入单元的搜索信息与通过个人信息读取单元读出的个人信息进行比较,检索对应于搜索信息的个人信息以及与对应于搜索信息的个人信息相关联的面部信息;以及列表信息生成单元,生成用于显示通过搜索单元检索到的个人信息及面部信息的列表的信息。
根据本发明的第四方面,容易搜索具体的个人信息与其相关联的面部以及可以根据列表信息自动地创建地址簿。
根据本发明的第五方面的信息处理设备包括:图像被输入到其中的图像输入单元;面部信息输入单元,包括用于识别在被输入到所述图像输入单元的图像中的面部区域的信息的面部信息被输入到该面部信息输入单元;相关信息输入单元,期望的相关信息被输入到该相关信息输入单元;面部选择单元,根据输入到面部信息输入单元的面部信息从输入到图像输入单元的图像中的面部区域中选择期望的面部区域:相关信息选择单元,从输入到相关信息输入单元的相关信息片段中选择相关信息,以与通过面部选择单元所选择的面部区域进行关联;以及记录单元,记录通过相关信息选择单元所选择的相关信息,用于将相关信息与通过面部选择单元所选择的面部区域进行关联。
根据本发明的第五方面,容易使关联并记录相关信息,例如面部主人的邮件地址。
根据本发明的第六方面的信息处理方法包括如下步骤:输入图像;从所输入的图像中检测人的面部区域;从检测到的面部区域中选择期望的语音注释要与之相关联的期望的面部区域;记录将语音注释与所选择的面部区域进行关联的期望的语音注释;从语音注释与之相关联的面部区域中选择期望的面部区域;以及再现与所选择的面部区域相关联的语音注释。
根据本发明的第七方面的信息处理方法包括如下步骤:输入图像;从在图像输入步骤中输入的图像中检测人的面部区域;从检测到的面部区域中选择期望的相关信息要与之相关联的面部区域;输入期望的相关信息;记录在所述相关信息输入步骤中输入的、将相关信息与所选择的面部区域进行关联的相关信息;从相关信息与之相关联的面部区域中选择期望的面部区域;以及通过在对于所选择面部区域的位置合适的位置上叠加所述相关信息来显示与所选择的面部区域相关联的相关信息。
根据本发明的第八方面的信息处理方法包括如下步骤:输入图像;输入面部信息,其包括用于识别在图像输入步骤中输入的图像中的面部区域的信息;读出与所输入的面部信息相关联的地址信息;采用表示地址信息与面部信息相关联的图片来显示所输入的图像;以及将在图像输入步骤中输入的图像传送到由地址信息所指定的目的地。
根据本发明的第九方面的信息处理方法包括如下步骤:输入图像;输入面部信息,其包括用于识别在图像输入步骤中所输入的图像中的面部区域的信息;读出与所输入的面部信息相关联的个人信息;输入用于检索期望的面部信息的搜索信息;通过比较所输入的搜索信息与读出的个人信息,来检索对应于搜索信息的个人信息以及与对应于搜索信息的个人信息相关联的面部信息;以及生成用于显示检索到的个人信息及面部信息的列表的信息。
根据本发明的第十方面的信息处理方法包括如下步骤:输入图像;输入面部信息,其包括用于识别在图像输入步骤中所输入的图像中的面部区域的信息;输入期望的相关信息;根据所输入的面部信息,从所输入的图像中的面部区域中选择期望的面部区域;从输入的相关信息片段中选择相关信息以与所选择的面部区域进行关联;以及记录将所选择的相关信息与所选择的面部信息进行关联的所选择的相关信息。
本发明允许从检测到的面部区域中选择期望的面部区域,以及方便图像中所选择的面部与诸如语音注释及文本信息的任意输入信息之间的关联。
附图说明
图1是根据第一实施例的信息记录设备的模块图;
图2A和图2B是说明记录处理流程的流程图;
图3图示说明了面部区域的检测;
图4图示说明了面部信息的概念;
图5示出了将在图像文件的非图像部分中存储面部信息的地址、面部的识别码以及面部的位置与语音注释的文件名进行关联的表格;
图6图示说明了在图像文件的非图像部分中记录表格以及语音注释的音频文件;
图7图示说明了在记录介质中将音频文件与图像文件分开记录;
图8图示说明了在每个音频文件的文件名部分中包括面部区域的识别码(面部编号);
图9图示说明了将图像文件的识别信息(文件名)及图像中的面部信息与语音注释中的识别信息(文件名)进行关联的表格本身作为独立的文件记录在记录介质中;
图10是说明再现处理流程的流程图;
图11图示说明了放置在面部区域附近的语音注释标记的叠加;
图12图示说明了具有语音注释标记的所选择面部区域的放大显示;
图13是根据第二实施例的信息记录设备的模块图;
图14A和图14B是说明记录处理流程的流程图;
图15图示说明了将面部信息关联于个人商务名片信息的表格作为独立的文件记录在记录介质中;
图16示出了写入Vcard(电子商务名片)中的文本文件的实例。
图17是说明再现处理流程的流程图;
图18图示说明了个人商务名片信息与具体面部区域的关联;
图19图示说明了在面部区域附近叠加图标;
图20图示说明了面部区域及图标的放大显示;
图21图示说明了将详细项目显示变化为姓名、地址及电话号码;
图22是根据第三实施例的信息记录设备的模块图;
图23是说明邮件传送处理流程的流程图;
图24是根据第四实施例的信息记录设备的模块图;
图25是说明搜索及显示处理流程的流程图;
图26示出了与“重聚0831”相关的人员列表;
图27是说明搜索及输出处理流程的流程图;
图28是示出根据第五实施例的图像记录设备内部结构的模块图;
图29是说明信息设置处理流程的流程图;
图30示出了以表格格式写入的个人信息实例;
图31示出了面部区域周围的方框的显示;
图32图示说明了在所选择面部区域的放大图像的附近的个人信息的列表显示;
图33图示说明了所选择的个人的姓名及地址的显示;
图34示出了其中将具体的个人信息与具体的面部信息相关联的表格;以及
图35示出了面部区域的基准位置坐标及尺寸的实例。
具体实施方式
将参考附图来描述本发明的优选实施例。
<第一实施例>
图1是根据本发明的优选实施例的信息记录设备10的模块图。
扩音器105收集声音并将声音转换为模拟音频信号。
放大器(AMP)106放大来自扩音器105的模拟信号输入。通过电压控制来改变其放大系数。
将经过放大的模拟音频信号发送到A/D转换单元107,其中信号被转换为数字音频信号,并被发送到记录装置75。
记录装置75通过预定的方法(例如MP3)来压缩数字音频信号并且将其记录在记录介质76上。
音频再现装置102将由A/D转换单元107提供的数字音频信号或者从记录介质76中读出并由记录装置75重建的数字音频数据转换为模拟音频信号,并将其输出到扬声器108。
涉及在上述音频记录及再现操作中的处理模块共同地表示为音频系统。
图像输入单元121由摄像器件、模拟前端电路、图像处理电路等组成,并且其将对象图像转换为图像数据并且将图像数据输入到面部检测单元122。
面部检测图像单元122从由图像输入单元121输入的图像数据中检测包含人的面部的区域的面部区域。例如,在本申请的申请人的日本特开No.09-101579中公开的技术可以应用于检测面部区域的方法。
该技术确定获取的图像的每个像素的色调是否落在肤色的范围内,并且将像素区别为肤色区域和非肤色区域。它还检测图像中的边缘并且将图像的每个部分分类为边缘部分及非边缘部分。然后它提取由位于肤色区域内的像素组成、并且被分类为非边缘部分、并且由被确定为边缘部分的像素所包围的区域作为面部候选区域。它确定所提取的面部候选区域是否是表示面部的区域,并且根据确定的结果来检测其作为面部区域。还可以通过在日本特开No.2003-209683或No.2002-199221中描述的方法来检测面部区域。
显示装置123将从图像输入单元121输入的数字图像数据转换为预定的视频信号并且将视频信号输出到图像投影装置,例如LCD。
涉及在上述的图像输入、面部检测以及显示操作中的处理模块共同地表示为图像输入/再现系统。
操作开关113具有许多操作组件,例如数字键、方向键以及相机开关。
中央处理单元(CPU)112根据来自操作开关113的输入集中地控制电路。
存储器110临时地存储在CPU1112处进行处理所必需的数据。ROM111是非易失性存储介质,用于永久地存储CPU112所执行的程序及固件。
涉及在CPU112的操作中的处理模块共同地表示为核心系统。
参考图2A和2B的流程图,将描述由信息记录设备10所执行的记录处理流程。图2A示出语音注释输入的主例程以及图2B示出了语音注释输入的子例程。首先将描述图2A的主例程。
在S1,将来自图像输入单元121的图像数据输入到面部检测单元122。
在S2,面部检测单元122从输入图像数据中检测面部区域。还可以在显示装置123的方框内显示检测到的面部区域。例如,图3示出检测的三个面部区域F1、F2以及F3。作为面部检测的结果,包括面部区域的坐标、其倾斜角度、是面部的可能性以及左右眼的坐标的面部信息被存储在存储器110中(参见图4)。
在S3,CPU112根据来自操作开关113的输入来选择一个指定的被检测的面部。
在S4,执行语音注释子例程,经由扩音器105接受可选语音注释输入,这将在后面更加详细地描述。
在S5,做出关于是否已经为所有被检测的面部区域输入了语音注释的确定。如果已经为所有面部区域输入了语音注释,那么CPU 112前进到S6。如果还没有为所有面部区域输入语音注释,那么CPU 112返回到S3。
在S6,所选择的面部区域与输入的语音注释被记录为互相关联。按照下面的方式来执行这些信息片段之间的关联。
作为实例,创建将在图像文件的非图像部分存储面部信息的地址、面部的识别码及面部区域的位置与语音注释的文件名进行关联的表格,例如在图5中示出的表格。然后,将表格及语音注释的音频文件记录在诸如图6中示出的图像文件的非图像部分。优选地将表格记录在标签信息存储部分,其是用于存储图像信息的相关信息的部分。可以从面部的识别码识别出对应于面部的语音注释。
可选情况下,如图7所示,音频文件与图像文件分开被记录在记录介质76中。同时,如图8所示,在每个音频文件的文件名部分中包括面部区域的识别码(或面部编号)。在图像文件的非图像部分中不记录音频文件。
可选情况下,如图9所示,可以将把图像文件的识别信息(即文件名)及图像文件中的面部有关的信息关联于语音注释的识别信息(即文件名)的表格作为独立的文件记录在记录介质76中。在这种情况下,并非必须将表格存储在图像文件的非图像部分(标签信息存储部分)中。
接下来,将描述图2B的语音注释输入的子例程。
在S4-1,CPU 112确定是否已经基于操作开关113的操作来命令了开始语音注释输入。如果确定已经命令了开始语音注释输入,那么CPU112指示A/D转换单元107以及记录装置75来开始输出音频数据。
在S4-2,响应于来自CPU 112的指令,A/D转换单元107将从扩音器105输入的模拟音频信号转换为数字音频数据,并且将音频数据输出到记录装置75。记录装置75在接收到来自A/D转换单元107的音频数据时,临时地将音频数据存储在未示出的缓冲存储器中。然后,记录装置75将存储在缓冲存储器中的音频数据压缩为预定的格式并且创建语音注释音频文件。
在S4-3,CPU 112确定是否已经基于操作开关113的操作来命令了终止语音注释输入。如果确定已经命令了终止语音注释输入,那么CPU112前进到S4-4。如果确定还没有命令终止语音注释输入,那么CPU 112返回到S4-2。
在S4-4,CPU 112指示A/D转换单元107以及记录装置75来终止输出音频数据。记录装置75依照来自CPU 112的指令将语音注释音频文件记录在记录介质76中。
图10是说明再现处理流程的流程图。
在S21,CPU 112根据操作开关113的指令,指示记录装置75从记录介质76读入期望的图像文件。读入的图像文件被存储在存储器110中。
在S22,CPU 112从读取的图像文件的图像部分读取图像数据以及图像文件的非图像部分中的标签信息。
在S23,CPU 112从已经被读出的非图像部分中的标签信息获取面部信息。同时,CPU 112从非图像部分或直接从记录装置75中检索语音注释。
在S24,CPU 112将合成图像输出到显示装置123,合成图像将用于表示已经记录了与面部信息相关联的语音注释的诸如图标或标记的伴随图像(语音注释标记)放置在由面部信息所识别的面部区域附近。
例如,如图11所示,当为三个面部区域F1、F2及F3记录语音注释时,分别叠加被放置在面部区域F1、F2及F3附近的语音注释标记I1、I2及I3。从语音注释标记及面部区域的位置关系,可以一眼看出语音注释与哪一个面部相关联。
在S25,CPU 112确定是否完成了根据所有面部信息的伴随图像的放置、叠加以及显示。如果根据所有面部信息完成了伴随图像的叠加及显示,那么CPU 112前进到S26,否则返回到S23。
在S26,CPU 112依照来自操作开关113的操作来选择应该为其再现相应的语音注释的面部区域。
在S27,CPU 112确定是否依照来自操作开关113的操作完成了面部区域的选择。如果完成了面部区域的选择,那么CPU 112前进到S28。
在S28,CPU 112从图像数据中剪辑所选择的面部区域,通过预定的比例系数(例如,三倍)放大,并将其输出到显示装置123。作为实例,图12示出了显示了被放大并具有语音注释标记的所选择的面部区域F1。
在S29,CPU 112确定是否已经根据操作开关113命令了开始再现语音注释。如果已经命令了开始再现语音注释,那么CPU 112前进到S30。
在S30,CPU 112根据在S22检索的表格信息来识别与所选择的面部区域相关联的语音注释。然后,音频再现装置102从记录介质76中读出识别到的语音注释,将其转换为模拟音频信号,并将模拟信号输出到扬声器108。结果,从扬声器108播放语音注释的内容。
在S31,CPU 112确定是否已经根据操作开关113命令了终止放大显示面部区域。如果已经命令了终止放大显示面部区域,那么CPU 112前进到S32。
在S32,CPU 112终止放大显示面部区域,并且将显示回放到与在S24的显示相似。
如上所述,信息记录设备10可以记录与获取的图像中的特定人相关联的有意义的消息,并且还可以再现与图像中的具体人相关联的特定消息。
<第二实施例>
图13是根据本发明第二优选实施例的信息记录设备20的模块图。使用相同的附图标记来指示信息记录设备20中与信息记录设备10的那些模块具有相似功能的模块。信息记录设备20虽然不具有像信息记录设备10的音频系统模块,但是它具有通信装置130。
通信装置130具有经由诸如移动电话通信网络和无线LAN的通信网络连接到外部通信装置以及将信息传送到设备及接收来自设备的信息的功能。
图14A及图14B是说明通过信息记录设备20来执行的记录处理流程的流程图。图14A示出了输入个人商务名片信息的主例程,以及图14B示出了输入个人商务名片信息的子例程。
首先描述图14A的主例程。
步骤S41至S43与S1至S3相似。
在S44,CPU 112执行个人商务名片信息输入子例程,用于输入来自通信装置130已经建立到其的连接的另一方的通信终端的个人商务名片信息(文本信息),这将在后面进行详细的描述。
在S45,CPU 112确定是否已经为所有的面部区域输入了个人商务名片信息。如果已经为所有面部区域输入了个人商务名片信息,那么CPU 112前进到S46,否则返回到S43。
在S46,CPU 112在记录介质76中记录互相关联的个人商务名片信息及所选择的面部区域。可以采用与第一实施例相似的方式执行这些信息片段的关联。例如,如图15所示,可以将包括每个面部的识别信息及位置坐标的面部信息关联于包括标题、个人商务名片信息发送方的通信终端的用户名、他/她的地址、电话号码、邮件地址等的个人商务名片信息的表格作为独立的文件记录在记录介质76中。可选情况下,可以将表示该表格的信息作为标签信息记录在图像文件的非图像部分中。
接下来描述图14B的子例程。
在S44-1,通信装置130建立与由操作开关113指定的指定方的通信终端(例如,PDA、移动电话)的通信。例如,可以用电话号码来指定通信方。
在S44-2,从另一方的通信终端接收个人商务名片信息(文本信息)。优选地以通用格式写入从另一方通信终端接收到的个人商务名片信息。例如,可以是如图16中示出的写入Vcard(电子商务名片)中的文本文件。
图17是说明通过信息记录设备20执行的再现处理流程的流程图。
步骤S51至S58与S21至S28相似,其中从记录介质76中读出图像数据等。然而,在S53检索到的是个人商务名片信息,而不是语音注释。此外,在S54显示的伴随图像(图标)是用于显示个人商务名片信息是相关联的。例如,如图18所示,当输入包括面部区域F1到F3的图像数据并且个人商务名片信息与面部区域F1相关联时,如图19所示,在面部区域F1附近叠加图标J1。
在S59,在所选择面部区域的放大图像上叠加检索到的个人商务名片信息,其被输出到显示装置123。例如,当选择面部区域F1作为应该为其再现相应的个人商务名片信息的面部区域时,如图20所示,放大面部区域F1及图标J1。
在S60,CPU 112确定是否已经命令了改变用于显示的详细信息项。如果已经命令了改变用于显示的详细的个人商务名片信息项,那么CPU 112返回到S59并且按照命令显示详细项。例如,假设当如图20所示显示个人商务名片信息的一些详细项“标题”和“姓名”时,命令将显示改变为详细项“姓名”、“地址”及“电话号码”。在这种情况下,如图21所示,将显示改变到“姓名”、“地址”以及“电话号码”的详细项。如通过附图所说明的,优选地将不同的详细项(即姓名、标题及地址)放置在不同的位置上,以便它们的显示位置不会重叠。
步骤S61及S62与S21及S22相似,其中按照用户的指令来终止个人商务名片信息的显示。
<第三实施例>
图22是根据本发明的优选实施例的信息记录设备30的模块图。设备的结构与第二实施例相似,但是不包括面部检测单元122。经由LAN将通信装置130连接到诸如因特网的外部网络200。
CPU 112从记录介质76中检索将面部信息与地址信息进行关联的图像文件(其以与第一或第二实施例相似的方式创建)。因此,可以省略面部检测单元112。
图23是说明通过信息记录设备130执行的邮件传送处理流程的流程图。
在S71,CPU 112依照来自操作开关113的指令指示记录装置75从记录介质76读入期望的图像文件。将读入的图像文件存储在存储器110中。
在S72,CPU 112从读入的图像文件的图像部分读取图像数据以及从图像文件的非图像部分读取标签信息(参见图15)。
在S73,CPU 112从标签信息读取面部信息。
在S74,CPU 112在由面部信息识别到的面部区域附近叠加诸如用于表示已经记录了语音注释的图标和标记的伴随图像,并且将合成图像输出到显示设备123(参见图11)。
在S75,CPU 112确定是否根据所有面部信息完成了伴随图像的叠加和显示。如果根据所有面部信息完成了伴随图像的叠加和显示,那么CPU 112前进到S25,而如果没有完成,则返回到S23。
在S76,CPU 112确定是否将与面部信息相关联的邮件地址写入到从记录介质76中读取的标签信息中。如果将与面部信息相关联的邮件地址写入到标签信息中,那么CPU 112前进到S77。
在S77,CPU 112使显示装置123显示消息,用于提示用户确认是否可以将对应于面部信息的邮件地址登记为目的地。
在S78,CPU 112确定是否已经从操作开关113输入用户对是否可以将邮件地址登记为目的地的确认。如果输入登记邮件地址的指令,那么CPU 112前进到S79,而如果输入不登记邮件地址的指令,那么CPU 112前进到S80。
在S79,CPU 112将为其输入用于允许登记的指令的邮件地址登记为用于邮件传送的目的地址。
在S80,CPU 112确定是否已经为读出的所有邮件地址确认了登记许可。如果已经为所有地址进行了确认,那么CPU 112前进到S81,而如果存在还没有确认的地址,那么CPU 112返回到S77。
在S81,CPU 112使显示装置123显示用于提示用户确认在S71读取的图像数据是否可以被传送到所有登记的地址的消息。
在S82,CPU 112确定是否已经从操作开关113输入了关于是否已经传送邮件的确认。如果已经输入了允许传送的指令,那么CPU 112前进到S83。
在S83,经由网络200将读入的图像传送到所有登记的邮件地址。
使用该处理,如果邮件地址与包含在一个图像中的许多面部相关联,那么可以同时将显示面部主人的相同图像自动地传送到那些人。
用于使得CPU 112执行上述处理的程序表示了基于与面部相关联的邮件地址自动地传送图像的应用。
<第四实施例>
图24是根据本发明的优选实施例的信息记录设备40的模块图。该设备的结构的部分与第一至第三实施例相似,但是它包括记录/再现装置109以及输入装置131。
记录/再现装置109将从记录介质76读取的图像数据转换为视频信号并且将视频信号输出到显示装置123。
输入装置131是用于接受与标题、姓名及其它个人商务名片信息进行比较的搜索信息输入的装置,并且可以是例如键盘、鼠标、条形码阅读器等等。
搜索信息不是必然地一定从输入装置131接受:也可以经由网络通过通信装置130来接受。
图25是说明通过信息记录设备40执行的搜索及显示处理流程的流程图。
在S91,CPU 112依照来自操作开关113的指令接受任意搜索信息的输入。
在S92,CPU 112依照来自操作开关113的指令指示记录装置75从记录介质76读取所有的图像文件。将读入的图像文件存储在存储器110中。CPU 112还从所有读入的图像文件的图像部分读取图像数据以及从那些文件的非图像部分读取标签信息。
在S93,CPU 112从标签信息读取个人商务名片信息。
在S94,CPU 112将读出的个人商务名片信息的每个片段与输入的搜索信息进行比较。
在S95,CPU 112确定个人商务名片信息与搜索信息是否互相对应作为它们比较的结果。如果它们互相对应,那么CPU 112确定存在对应于搜索信息的面部区域并前进到S96。如果它们不是互相对应,那么CPU 112确定不存在对应于搜索信息的面部区域并前进到S97。
在S96,CPU 112将对应于搜索信息的面部区域登记到面部区域列表。
在S97,CPU 112确定是否已经为读入的所有图像完成了个人商务名片信息与搜索信息的比较。如果完成了比较,那么CPU 112前进到S98,而如果没有完成,返回到S92。
在S98,在显示装置123上显示登记在面部区域列表中的面部区域。
例如,假设将显示在8月31举行的重聚的参与者的“重聚0831”输入作为搜索信息,CPU 112根据表格来识别对应于诸如包括“重聚0831”的标题的文本信息(个人信息)的面部区域,并且从读入的重聚图片中提取面部图像,以及将它们登记到面部区域列表。
结果,如图26所示,在显示装置123上显示与“重聚0831”相关的人的列表。
照这样,可以自动地登记并列出与对应于随机指定搜索信息的文本信息相关联的面部区域。
可选情况下,如图27所示,当经由网络将搜索信息输入(S91)到通信装置130时,可以将登记到面部区域列表中的面部区域或对应于面部信息的文本信息输出并记录到独立的文件,以及代替在显示装置130上显示登记在面部区域列表中的面部(S98),可以将面部信息及文本信息的文件传送(S99)到搜索信息的发送方。文件的接收方根据该文件可以创建记录在某个图像中的人的地址薄或者目录。代替面部区域或者面部信息,也可以将图像文件本身发送到搜索信息的发送方。
照这样,可以在外部要求时,发送回与重要信息相关的图像或个人信息。
<第五实施例>
图28是示出图像记录设备500的内部结构的模块图。在包括聚焦镜头和变焦镜头的镜头1的后面,安置诸如CCD的固态图像传感器2,以及穿过镜头1的光入射到固态图像传感器2上。在固态图像传感器2的光接收表面上,在平面中排列光传感器,并且由光传感器将在光接收表面上形成的对象图像转换成数量为入射光数量的函数的信号电荷。根据由驱动器6给出的脉冲信号,将由此累积的信号电荷顺序地读出作为基于的信号电荷的电压信号(图像信号),并根据由TG 22给出的脉冲信号将其在模拟/数字转换电路3处转换为数字信号,并且应用于校正电路4。
镜头驱动单元5与变焦操作结合,将变焦镜头移动到广角侧或者远距侧(例如,10级)以便执行镜头1的放大及缩小。镜头驱动单元5还依照对象距离和/或变焦镜头的可变的变焦比例来移动定焦镜头,并且调整镜头1的焦距,以便优化拍摄条件。
校正电路4是图像处理装置,其包括:增益调整电路、亮度/色度差值信号生成电路、灰度校正电路、锐度校正电路、对比度校正电路、白平衡校正电路、执行包括对于获取图像进行轮廓校正的图像处理的轮廓处理单元、用于执行图像的降低噪声处理的降低噪声处理单元等。校正电路4依照来自CPU 112的命令来处理图像信号。
在校正电路4中处理的图像数据被转换为亮度信号(Y信号)以及色度差值信号(Cr及Cl信号),并且接受诸如灰度校正的预定处理,随后被传递到存储器7中用于存储。
当将获取的图像输出到LCD 9上时,从存储器7中读取YC信号并将其发送到显示电路16。显示电路16将输入的YC信号转换为用于显示的预定格式(例如,NTSC方法的色彩合成视频信号)的信号,并且将其出书到LCD 9。
将按照预定帧率处理的每个帧的YC信号交替地写入到存储器7的A区域和B区域中,并且在存储器7的A区域和B区域中,从正在写入YC信号的区域以外的区域读出该写入的YC信号。存储器7中的YC信号由此被周期性地重新写入,并且将从YC信号生成的视频信号提供到LCD 9,以便当前正被拍摄的图片实时地显示在LCD 9上。用户可以检查与在LCD 9上显示的图片(或者直通图像)的拍摄角度。
OSD信号生成电路11生成用于显示诸如快门速度、光圈值、剩余曝光的数目、拍摄日期/时间及警告消息的特征,以及诸如图标的记号的信号。从OSD信号生成电路11输出的信号在必要时与图像信号混合并且被提供到LCD 9。结果,显示了将特征及图标的图片叠加在直通图像或再现的图像上的合成图像。
当通过操作单元12选择静止图片拍摄模式并且按下快门按钮时,启动了拍摄用于记录的静止图片的操作。依照由校正系数计算电路13决定的校正系数,响应于按下快门按钮而获得的图像数据在校正电路4处接受诸如灰度校正的预定处理,并且随后被存储在存储器7中。校正电路4可以将诸如白平衡调整、锐度调整及红眼校正的处理尽可能合适地应用为预定的校正处理。
在压缩/解压缩处理电路15处,根据预定的格式压缩存储在存储器7中的Y/C信号,并随后经由卡片I/F 17将其作为诸如Exif文件的预定格式图像文件记录到存储卡18中。图像文件还可以被记录在快速ROM 114中。
在图像记录设备500的前表面上,设置了用于发射闪光的发光单元19。将用于控制发光单元19的充电及发光的选通控制电路21连接到发光单元19。
图像记录设备500具有面部检测单元122、ROM 111、RAM 113以及鉴别电路115,这些表示上述的图像输入/再现系统和/或核心系统。
面部检测单元122从响应按下快门按钮而获得的用于记录的图像数据中检测面部区域。然后,面部检测单元122将与所被检测的面部区域相关的面部区域作为标签信息记录到图像文件中。
图29是说明通过图像记录设备500执行的信息设置处理流程的流程图。
在S101,压缩/解压缩电路15展开存储卡18或快速ROM 14中的图像文件,将其转换为Y/C图像数据并将其发送到显示电路16用于在LCD 9上显示。
在S 102,CPU 112输入来自任意个人信息源的个人信息,例如经由通信装置130连接的其它方的终端或存储卡18。例如,如图30所示,个人信息以将诸如姓名、地址、电话号码及邮件地址等互相关联的表格形式写入。在此所称的个人信息可以从如上所述的从每个终端发送的个人商务名片信息(参见图16)中收集。可选情况下,可以通过导入来自存储卡18的个人商务名片信息来收集。
在S103,CPU 112从读出的标签信息或图像数据中取出面部信息。然后,CPU 112控制OSD信号生成单元11来显示在由面部信息所识别的每个面部区域周围的方框。例如,如图31所示,当检测到面部区域F1至F3时,在面部区域周围显示方框Z1至Z3。
在S104,CPU 112经由操作单元12接受由方框所包围的指定的一个面部区域的选择。
在S105,CPU 112提示用户输入是否为所选择的面部区域设置个人信息的确认。如果从操作单元12输入为所选择的面部区域设置个人信息的指令,那么CPU 112前进到S106。如果从操作单元12输入不为所选择的面部区域设置个人信息的指令,那么CPU 112前进到S111。
在S106,CPU 112指示OSD信号生成单元11生成用于输入个人信息的菜单。
在S107,CPU 112经由操作单元112接受个人信息的选择和设置。例如,如图32所示,通过在所选择面部区域的放大图像附近进行叠加来显示列出从表格中读取的个人信息的列表框,并且提示用户来选择个人信息的期望片段(例如姓名)以与来自列表框的面部区域进行关联。
在S108,CPU 112指示OSD信号生成单元11来生成表示所选择的个人信息的视频信号。在图33中,例如,显示了所选择的姓名“KasugaHideo”以及他的地址。
在S109,CPU 112提示用户输入是否记录所选择的个人信息的确认。如果从操作单元12输入记录个人信息的指令,那么CPU 112前进到S110。如果从操作单元12输入不记录个人信息的指令,那么CPU 112前进到S111。
在S110,所选择的个人信息以及所选择的面部信息被保存为互相关联。例如,如图34所示,所选择的面部区域的ID以及面部区域的基准位置坐标和尺寸被关联于已经读入的个人信息表中所选择的个人信息,并且其中关联了个人信息的表格被记录在图像文件的标签信息存储部分中。如图35所示,其中在图像中存在面部区域的区域由面部区域的基准位置坐标及尺寸所限定。
在S111,CPU 112确定是否完成了所有面部区域的个人信息设置。如果没有完成所有面部区域的个人信息设置,那么CPU 112返回到S104。如果完成了所有面部区域的个人信息设置,那么CPU 112终止处理。
如上所述,可以容易地将外部输入的个人信息与任意的面部区域进行关联,而不需要费力来将个人信息手工输入到图像记录设备500。
一旦个人信息与图像进行了关联,可以以在再现时被叠加的方式来自动显示个人信息及图像。也就是说,可以在基于面部的位置坐标的面部区域的附近,显示表示个人信息与面部区域相关联的图标(参见图20)。

Claims (10)

1.一种信息处理设备,包括:
图像输入单元,图像被输入到该图像输入单元;
面部检测单元,其从输入到所述图像输入单元的图像中检测人的面部区域;
记录面部选择单元,其从通过所述面部检测单元检测到的面部区域中,选择要与期望的语音注释相关联的期望的面部区域;
记录单元,其将期望的语音注释与通过所述记录面部选择单元所选择的所述面部区域进行关联,以记录所述语音注释;
再现面部选择单元,其从被通过所述记录单元与语音注释相关联的面部区域中,选择期望的面部区域;以及
再现单元,其再现与通过所述再现面部选择单元所选择的面部区域相关联的语音注释。
2.一种信息处理设备,包括:
图像输入单元,图像被输入到该图像输入单元;
面部检测单元,其从被输入到所述图像输入单元的图像中检测人的面部区域;
记录面部选择单元,其从通过所述面部检测单元检测到的面部区域中,选择要与期望的相关信息相关联的期望的面部区域;
相关信息输入单元,期望的相关信息被输入到该相关信息输入单元;
记录单元,其将被输入到所述相关信息输入单元的所述相关信息与通过所述记录面部选择单元所选择的所述面部区域进行关联,以记录所述相关信息;
显示面部选择单元,其从被通过所述记录单元与相关信息相关联的面部区域中选择期望的面部区域;以及
显示单元,其通过在对于所选择面部区域的位置合适的位置上叠加所述相关信息,来显示与通过所述显示面部选择单元所选择的面部区域相关联的相关信息。
3.一种信息处理设备,包括:
图像输入单元,图像被输入到该图像输入单元;
面部信息输入单元,面部信息被输入到该面部信息输入单元,所述面部信息包括用于识别被输入到所述图像输入单元的图像中的面部区域的信息;
地址信息读取单元,其读出与被输入到所述面部信息输入单元的面部信息相关联的地址信息;
显示单元,其利用图片来显示被输入到所述图像输入单元中的图像,所述图片表示地址信息与面部信息相关联;以及
传送单元,其将被输入到所述图像输入单元中的图像传送到由所述地址信息所指定的目的地。
4.一种信息处理设备,包括:
图像输入单元,图像被输入到该图像输入单元;
面部信息输入单元,面部信息被输入到该面部信息输入单元,所述面部信息包括用于识别被输入到所述图像输入单元的图像中的面部区域的信息;
个人信息读取单元,其读出与被输入到所述面部信息输入单元的面部信息相关联的个人信息;
搜索信息输入单元,用于检索期望的面部信息的搜索信息被输入到该搜索信息输入单元;
搜索单元,其通过比较被输入到所述搜索信息输入单元的搜索信息与通过所述个人信息读取单元读出的个人信息,检索对应于所述搜索信息的个人信息以及与对应于所述搜索信息的个人信息相关联的面部信息;以及
列表信息生成单元,其生成用于显示通过所述搜索单元检索到的个人信息及面部信息的列表的信息。
5.一种信息处理设备,包括:
图像输入单元,图像被输入到该图像输入单元;
面部信息输入单元,面部信息被输入到该面部信息输入单元,所述面部信息包括用于识别被输入到所述图像输入单元的图像中的面部区域的信息;
相关信息输入单元,期望的相关信息被输入该相关信息输入单元;
面部选择单元,其基于被输入到所述面部信息输入单元的面部信息,从被输入到所述图像输入单元的图像中的面部区域中选择期望的面部区域;
相关信息选择单元,其从被输入到所述相关信息输入单元的相关信息片段中选择相关信息,以与通过所述面部选择单元所选择的面部区域进行关联;以及
记录单元,其将通过所述相关信息选择单元所选择的相关信息与通过所述面部选择单元所选择的面部区域进行关联,以记录所述相关信息。
6.一种信息处理方法,包括如下步骤:
输入图像;
从所输入的图像中检测人的面部区域;
从检测到的面部区域中选择要与期望的语音注释相关联的期望的面部区域;
将期望的语音注释与所选择的面部区域进行关联以记录所述语音注释;
从与语音注释相关联的面部区域中选择期望的面部区域;以及
再现与所选择的面部区域相关联的语音注释。
7.一种信息处理方法,包括如下步骤:
输入图像;
从在所述图像输入步骤中输入的图像中检测人的面部区域;
从检测到的面部区域中选择要与期望的相关信息相关联的面部区域;
输入期望的相关信息;
将在所述相关信息输入步骤中输入的相关信息与所选择的面部区域进行关联,以记录所述相关信息;
从与相关信息相关联的面部区域中选择期望的面部区域;以及
通过在对于所选择面部区域的位置合适的位置上叠加所述相关信息,来显示与所选择的面部区域相关联的相关信息。
8.一种信息处理方法,包括如下步骤:
输入图像;
输入面部信息,该面部信息包括用于识别在所述图像输入步骤中输入的图像中的面部区域的信息;
读出与所输入的面部信息相关联的地址信息;
利用表示所述地址信息与所述面部信息相关联的图片来显示所输入的图像;以及
将在所述图像输入步骤中输入的图像传送到由所述地址信息所指定的目的地。
9.一种信息处理方法,包括如下步骤:
输入图像;
输入面部信息,该面部信息包括用于识别在所述图像输入步骤中输入的图像中的面部区域的信息;
读出与所输入的面部信息相关联的个人信息;
输入用于检索期望的面部信息的搜索信息;
通过比较所输入的搜索信息与读出的个人信息,检索对应于所述搜索信息的个人信息以及与对应于所述搜索信息的个人信息相关联的面部信息;以及
生成用于显示所检索的个人信息及面部信息的列表的信息。
10.一种信息处理方法,包括如下步骤:
输入图像;
输入面部信息,该面部信息包括用于识别在所输入的图像中的面部区域的信息;
输入期望的相关信息;
基于所输入的面部信息,从所输入的图像中的面部区域中选择期望的面部区域;
从所输入的相关信息片段中选择相关信息以与所选择的面部区域进行关联;以及
记录用于将所选择的相关信息与所选择的面部区域进行关联的所选择的相关信息,
将所选择的相关信息与所选择的面部区域进行关联以记录所选择的相关信息。
CN200710160102A 2006-12-22 2007-12-24 信息处理设备及信息处理方法 Active CN100592779C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2006346516 2006-12-22
JP2006346516A JP2008158788A (ja) 2006-12-22 2006-12-22 情報処理装置および情報処理方法

Publications (2)

Publication Number Publication Date
CN101207775A CN101207775A (zh) 2008-06-25
CN100592779C true CN100592779C (zh) 2010-02-24

Family

ID=39542881

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200710160102A Active CN100592779C (zh) 2006-12-22 2007-12-24 信息处理设备及信息处理方法

Country Status (3)

Country Link
US (1) US20080152197A1 (zh)
JP (1) JP2008158788A (zh)
CN (1) CN100592779C (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102385697A (zh) * 2010-09-06 2012-03-21 索尼公司 图像处理装置、程序和图像处理方法

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009071563A (ja) * 2007-09-13 2009-04-02 Ricoh Co Ltd 通信装置
JP5453717B2 (ja) * 2008-01-10 2014-03-26 株式会社ニコン 情報表示装置
JP4596060B2 (ja) * 2008-08-29 2010-12-08 ソニー株式会社 電子機器、動画像データ区間変更方法及びプログラム
JP5051305B2 (ja) * 2009-01-30 2012-10-17 富士通株式会社 画像表示装置、画像表示方法及びコンピュータプログラム
JP5375165B2 (ja) * 2009-02-19 2013-12-25 株式会社ニコン 撮像装置
JP5423131B2 (ja) * 2009-04-30 2014-02-19 カシオ計算機株式会社 撮影画像処理装置、撮影画像処理プログラム及び撮影画像処理方法
JP5313043B2 (ja) * 2009-05-22 2013-10-09 オリンパスイメージング株式会社 撮影条件制御装置、カメラ、プログラム
JP5526620B2 (ja) * 2009-06-25 2014-06-18 株式会社ニコン デジタルカメラ
JP5401420B2 (ja) * 2009-09-09 2014-01-29 パナソニック株式会社 撮像装置
FR2950180B1 (fr) * 2009-09-14 2011-10-21 Alcatel Lucent Systeme et procede de fourniture de cartes de visite electroniques par recherche dans des moyens de stockage en fonction de critere(s)
CN101901109A (zh) * 2010-07-13 2010-12-01 深圳市同洲电子股份有限公司 图片处理方法、装置及移动终端
JP5683863B2 (ja) * 2010-08-06 2015-03-11 オリンパスイメージング株式会社 画像再生装置及び画像再生装置の音情報出力方法
KR101293776B1 (ko) * 2010-09-03 2013-08-06 주식회사 팬택 객체 리스트를 이용한 증강 현실 제공 장치 및 방법
JP2012058838A (ja) * 2010-09-06 2012-03-22 Sony Corp 画像処理装置、プログラム及び画像処理方法
JP5740972B2 (ja) * 2010-09-30 2015-07-01 ソニー株式会社 情報処理装置および情報処理方法
US8949123B2 (en) 2011-04-11 2015-02-03 Samsung Electronics Co., Ltd. Display apparatus and voice conversion method thereof
JP2012221393A (ja) * 2011-04-13 2012-11-12 Fujifilm Corp 校正情報処理装置、校正情報処理方法、プログラム及び電子校正システム
JP5814389B2 (ja) * 2012-01-30 2015-11-17 Necソリューションイノベータ株式会社 画像管理システム、及び画像管理方法
CN104380717B (zh) * 2012-06-12 2018-08-03 索尼公司 信息处理装置、信息处理方法、以及计算机可读存储介质
CN106033418B (zh) * 2015-03-10 2020-01-31 阿里巴巴集团控股有限公司 语音添加、播放方法及装置、图片分类、检索方法及装置
CN107748879A (zh) * 2017-11-16 2018-03-02 百度在线网络技术(北京)有限公司 用于获取人脸信息的方法及装置
CN107895325A (zh) * 2017-11-27 2018-04-10 启云科技股份有限公司 社群信息链接系统
CN108806738A (zh) * 2018-06-01 2018-11-13 广东小天才科技有限公司 一种智能笔控制方法、装置、设备及存储介质
JP7298116B2 (ja) * 2018-08-03 2023-06-27 ソニーグループ株式会社 情報処理装置、情報処理方法、プログラム
JP7282107B2 (ja) * 2018-11-08 2023-05-26 ロヴィ ガイズ, インコーポレイテッド 視覚コンテンツを拡張するための方法およびシステム
JP2021043586A (ja) * 2019-09-09 2021-03-18 キヤノン株式会社 情報処理装置、その制御方法、及びプログラム
JP7438736B2 (ja) * 2019-12-09 2024-02-27 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
CN113139457A (zh) * 2021-04-21 2021-07-20 浙江康旭科技有限公司 一种基于crnn的图片表格提取方法

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3035391B2 (ja) * 1991-09-27 2000-04-24 京セラ株式会社 電子スチルカメラ
IL128935A (en) * 1998-09-18 2003-10-31 Direct & Clear Inc Communication method and system utilizing a specific communication code
US6606398B2 (en) * 1998-09-30 2003-08-12 Intel Corporation Automatic cataloging of people in digital photographs
JP2001014052A (ja) * 1999-06-25 2001-01-19 Toshiba Corp コンピュータシステムの個人認証方法、コンピュータシステム、及び記録媒体
US7106887B2 (en) * 2000-04-13 2006-09-12 Fuji Photo Film Co., Ltd. Image processing method using conditions corresponding to an identified person
AUPQ717700A0 (en) * 2000-04-28 2000-05-18 Canon Kabushiki Kaisha A method of annotating an image
JP2002369164A (ja) * 2001-06-06 2002-12-20 Nikon Corp 電子画像装置および電子画像システム
US7324246B2 (en) * 2001-09-27 2008-01-29 Fujifilm Corporation Apparatus and method for image processing
JP2003187057A (ja) * 2001-12-13 2003-07-04 Fuji Photo Film Co Ltd 電子名刺交換システム及び情報機器
JP3978536B2 (ja) * 2002-04-12 2007-09-19 富士フイルム株式会社 情報送信システム
JP2004187273A (ja) * 2002-11-22 2004-07-02 Casio Comput Co Ltd 携帯電話端末、及び、発信履歴表示方法
JP2004201191A (ja) * 2002-12-20 2004-07-15 Nec Corp 画像処理送信システム、携帯電話、画像処理送信方法、および、画像処理送信プログラム
JP2006513657A (ja) * 2003-01-21 2006-04-20 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 画像へのメタデータの追加
JP4374610B2 (ja) * 2003-04-18 2009-12-02 カシオ計算機株式会社 撮像装置、画像データ記憶方法、及び、プログラム
JP2005020654A (ja) * 2003-06-30 2005-01-20 Minolta Co Ltd 撮像装置および画像への注釈情報の付与方法
US7274822B2 (en) * 2003-06-30 2007-09-25 Microsoft Corporation Face annotation for photo management
JP2006011935A (ja) * 2004-06-28 2006-01-12 Sony Corp 個人情報管理装置,個人情報ファイル作成方法,および個人情報ファイル検索方法
JP2006107289A (ja) * 2004-10-07 2006-04-20 Seiko Epson Corp 画像ファイル管理装置、画像ファイル管理方法および画像ファイル管理プログラム
JP4522344B2 (ja) * 2004-11-09 2010-08-11 キヤノン株式会社 撮像装置及びその制御方法とそのプログラム
KR100677421B1 (ko) * 2004-12-30 2007-02-02 엘지전자 주식회사 휴대단말기에서의 참조필드 이용방법
JP2006287749A (ja) * 2005-04-01 2006-10-19 Canon Inc 撮像装置、及びその制御方法
US7519200B2 (en) * 2005-05-09 2009-04-14 Like.Com System and method for enabling the use of captured images through recognition
JP4533234B2 (ja) * 2005-05-10 2010-09-01 キヤノン株式会社 記録再生装置及び記録再生方法
US20070086773A1 (en) * 2005-10-14 2007-04-19 Fredrik Ramsten Method for creating and operating a user interface

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102385697A (zh) * 2010-09-06 2012-03-21 索尼公司 图像处理装置、程序和图像处理方法
CN102385697B (zh) * 2010-09-06 2016-08-10 索尼公司 图像处理装置、程序和图像处理方法

Also Published As

Publication number Publication date
CN101207775A (zh) 2008-06-25
US20080152197A1 (en) 2008-06-26
JP2008158788A (ja) 2008-07-10

Similar Documents

Publication Publication Date Title
CN100592779C (zh) 信息处理设备及信息处理方法
US9247306B2 (en) Forming a multimedia product using video chat
US9049388B2 (en) Methods and systems for annotating images based on special events
US7831598B2 (en) Data recording and reproducing apparatus and method of generating metadata
JP4552632B2 (ja) 携帯機器
US20130100329A1 (en) Image pickup apparatus
EP1215594A1 (en) Method, device and mobile tool for creating an electronic album
JP5964722B2 (ja) カラオケシステム
JP2005065286A (ja) カメラ付き携帯用端末機での住所録管理装置及び方法
JP2007241130A (ja) 声紋認識を利用するシステムと装置
KR20080028359A (ko) 음성 정보 기록 장치
JP2010134785A (ja) 顔認証を利用した情報処理方法および情報表示装置
CN105095213B (zh) 信息关联方法及装置
JP5433545B2 (ja) 顔認証を利用した情報処理方法および情報表示装置
JP2010068247A (ja) コンテンツ出力装置、方法、プログラムおよびシステム
CN109801204A (zh) 一种个人学术服务系统及其实现方法
JP5023932B2 (ja) 撮像装置、シナリオによる画像撮影方法、およびプログラム
KR20100000936A (ko) 인물정보 처리방법 및 이를 수행하는 이동통신단말
JP2000113097A (ja) 画像認識装置,画像認識方法及び記憶媒体
JPH07123389A (ja) 通信会議端末装置及び通信会議装置
KR20050079125A (ko) 휴대단말기의 대기화면과 벨신호 설정장치 및 방법
KR101262839B1 (ko) 휴대용 단말기에서 알에프아이디 정보를 이용한 메모 기능제공 방법 및 장치
JP2001051368A (ja) トークフォト作成システム
JPH10336576A (ja) 画像記録システム
TWI297863B (en) Method for inserting a picture in a video frame

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant