CN108027827B - 基于图像分析的协调通信和/或存储 - Google Patents

基于图像分析的协调通信和/或存储 Download PDF

Info

Publication number
CN108027827B
CN108027827B CN201680051986.2A CN201680051986A CN108027827B CN 108027827 B CN108027827 B CN 108027827B CN 201680051986 A CN201680051986 A CN 201680051986A CN 108027827 B CN108027827 B CN 108027827B
Authority
CN
China
Prior art keywords
media file
media
users
location
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680051986.2A
Other languages
English (en)
Other versions
CN108027827A (zh
Inventor
耶胡达·铭戈维克
什穆埃尔·阿萨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pomvom Ltd
Original Assignee
Pomvom Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pomvom Ltd filed Critical Pomvom Ltd
Publication of CN108027827A publication Critical patent/CN108027827A/zh
Application granted granted Critical
Publication of CN108027827B publication Critical patent/CN108027827B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7837—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content
    • G06F16/784—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content the detected or recognised objects being people
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/29—Geographical information databases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/06—Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
    • G10L15/065—Adaptation
    • G10L15/07—Adaptation to the speaker
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01—Social networking

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Artificial Intelligence (AREA)
  • Acoustics & Sound (AREA)
  • Business, Economics & Management (AREA)
  • Remote Sensing (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Information Transfer Between Computers (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

一种管理一媒体档案存储重定位及/或编辑过程的方法，包括：接收位置数据及每一媒体档案的一捕获/上传地理位置及时间，所述位置数据指示多个用户在一被监视期间的一用户地理位置；使用所述档案捕获/上传地理位置及时间以辨认所述多个用户中的一组相对于所述多个媒体档案中的一或多个在一各自的所述媒体档案捕获或上传时间内的各自所述媒体档案捕获或上传地理位置的一时空接近度；使用一识别功能以检测在所述一或多个媒体档案中成像的所述一组中的一或多个成员，所述识别功能例如是一人脸及/或语音识别功能；及响应于所述检测的步骤，引发一媒体档案存储重定位过程及/或一编辑过程。

Description

基于图像分析的协调通信和/或存储
背景技术
本发明在其一些实施例中涉及媒体内容散布，并且更具体地，但不排他地，涉及基于位置的媒体内容散布。
有越来越多的装置具有网络连接性。多年来，网络连接性已扩展到家电用品，诸如：诸多数码摄影机及诸多手机，或者带有诸多成像器的诸多平板电脑。目前存在的各种服务及应用程序具备的目的是在不同网络位置的装置或人员之间建立数据连接性。所述互联网及其他类型网络的发展促成了目前存在的诸多网络应用。此外，诸多社交网络的普及以及便携式电子装置增加的功能提供在网络上即时共享及散布信息的机会。
发明内容
根据本发明的一些实施例，提供一种管理一媒体档案存储重定位过程的方法。所述方法包括：接收位置数据，其中所述位置数据指示多个用户的每一个在一被监视期间的一用户地理位置，及所述位置数据是通过记录所述多个用户的多个客户终端的每一个的一位置模块的多个输出被获取；接收多个媒体档案的每一个的一捕获或上传地理位置及时间；使用所述档案捕获或上传地理位置及时间以辨认从所述多个用户中的一群组相对于所述多个媒体档案中的至少一媒体档案在一各自的所述媒体档案捕获或上传时间内的各自所述媒体档案捕获或上传地理位置的一时空接近度；使用一人脸识别功能以检测在所述至少一媒体档案中被成像的所述群组中的至少一成员；并且响应于所述检测的步骤，引发一媒体档案存储重定位过程，其中所述至少一媒体档案的一存储位置从一当前存储位置被改变到相关于所述至少一成员的一新存储位置。
可选地，所述方法还包括：辨认在所述至少一成员与捕获所述至少一媒体档案的一用户之间的一社交联系，并且根据所述社交联系而管理所述媒体档案存储重定位过程。
可选地，所述方法还包括：从捕获所述至少一媒体档案的一用户获取，及获取对重定位所述至少一媒体档案的批准，并且根据所述批准而管理所述媒体档案存储重定位过程。
可选地，该方法还包括：将所述至少一媒体档案呈现在一图形用户界面上给所述至少一成员，经由从所述至少一成员而来的在所述图形用户界面上的一选择而获取对所述至少一媒体档案的一反应，及依据所述反应而管理所述媒体档案存储重定位过程。
可选地，将所述至少一媒体档案的至少一缩略图呈现在所述图形用户界面上给所述至少一成员。
可选地，所述方法还包括：管理在捕获所述至少一媒体档案的一用户与所述至少一成员之间的一金融交易(financial transaction)，及依据所述金融交易而管理所述媒体档案存储重定位过程。
可选地，使用多笔人脸记录以应用所述人脸识别功能，其中所述多笔人脸记录中的每一笔指示所述多个用户中的一个的至少一脸部特征。
可选地，该方法还包括：建立在所述群组的至少二成员之间的一聊天会话。
可选地，该方法还包括：建立在所述群组的至少一成员与捕获所述媒体档案的一捕获用户之间的一聊天会话。
可选地，所述多个媒体档案被存储在所述多个客户终端的一内存中，且其中所述当前存储位置是在所述多个客户终端中的一个上，及所述新存储位置是在所述多个客户终端中的另一个上。
可选地，该方法还包括：接收多个图像片段，其中所述多个图像片段中的每一个描绘至少一人脸，且是从所述多个媒体档案被剪裁，其中所述检测的步骤是通过将所述人脸识别功能应用在所述多个图像片段上被执行。
可选地，所述多个客户终端包括所述多个用户的多个智能手机。
可选地，所述方法还包括：监视(monitoring)在至少一社交媒体网络中的所述至少一媒体档案的一散布(distribution)，且对捕获(capturing)所述至少一媒体档案的一用户更新有关所述散布。
可选地，所述方法还包括：将一标示符加到所述至少一媒体档案，其中所述标示符是选自由一水印、一简介图像、一版面设计及一图标组成的一群组。
根据本发明的一些实施例，提供一种管理一媒体档案存储重定位过程的系统。所述系统包括：至少一网络界面，适用于从多个用户的多个客户终端接收位置模块数据，其中所述位置模块数据指示多个用户的每一个在一被监视期间的一用户地理位置，且所述至少一网络界面适用于接收多个媒体档案的每一个的一捕获或上传地理位置及时间；一代码存储器，存储一代码；一处理器，适用于执行所述代码的多个以下的代码指令：多个代码指令，用于使用所述档案捕获或上传地理位置及时间以辨认所述多个用户中的一群组相对于所述多个媒体档案中的至少一媒体档案在一各自的所述媒体档案捕获或上传时间内的各自所述媒体档案捕获或上传地理位置的一时空接近度；多个代码指令，用于使用一识别功能以检测在所述至少一媒体档案中成像的所述一组中的至少一成员；多个代码指令，用于引发以下至少其中之一：一媒体档案存储重定位过程，其中所述至少一媒体档案的一存储位置被从一当前存储位置改变到相关于所述至少一成员的一新存储位置。
根据本发明的一些实施例，提供一种建立一聊天会话的方法。所述方法包括：辨认捕获一媒体档案的一捕获用户的一第一身份，其中所述媒体档案描绘至少一被成像用户；将一人脸识别功能应用在所述媒体档案上，以辨认所述至少一用户的至少一第二身份；在至少两个用户终端中的每一个的一显示器上显示多个聊天用户界面，以用于建立一聊天会话；在所述聊天会话期间，经由所述多个聊天用户界面接收多个信息，及在所述至少二客户终端的每一个各自的所述显示器上显示所述多个信息。
除非另外定义，否则在此使用的所有技术及/或科学术语具有与本发明所属领域的普通技术人员通常理解的相同的含义。尽管在本发明的诸多实施例的实践或测试中可以使用与在此所述的方法及材料类似或等同的方法及材料，但是示例性的方法及/或材料被描述如下。在冲突的情况下，包括定义的所述专利说明书将受控制。另外，这些材料、方法及示例仅是说明性的，并非被意图作为必要的限制。
附图说明
在此仅通过示例的方式参照附图以描述本发明的一些实施例。现在具体参照附图详细说明，强调的是，所示出的细节是作为示例并且出于对本发明的实施例的说明性讨论的目的。就此而言，对于本领域技术人员而言，附图所作的描述对于本发明的实施例可如何实施而言是显而易见的。
在附图中：
图1是根据本发明的一些实施例的通过匹配的管理媒体档案的所述存储的一方法的一流程图，对于各种时间间隔的每一种，通过捕获或上传所述多个媒体档案的一位置与各个用户的一位置(如通过多个客户终端被记录)匹配，并且基于在所述多个媒体档案中的(多个)被成像的人类对象的人脸的所述指示；
图2是根据本发明的一些实施例的管理多个媒体档案或其多个副本的一存储的一系统的一示意图，例如：通过执行在图1中描绘的所述过程；
图3描绘一过程类似在图1中被描绘的所述过程；然而，图3描绘的是根据本发明的一些实施例其中的多个用户指令被获取以决定一媒体档案的一存储位置是否被改变的多个子过程；及
图4是根据本发明的一些实施例在多个用户之间建立一聊天会话的一方法，所述多个用户是在一个或多个媒体档案被成像的及/或捕获所述多个媒体档案的所述用户。
具体实施方式
本发明在其一些实施例中涉及媒体内容散布，并且更具体地但不排他地涉及基于位置的媒体内容散布。
根据本发明的一些实施例，提供管理多个媒体档案的存储的多个方法及多个系统，所述媒体档案诸如图像、便携式网络图形(PNG)、联合图像专家组(JPEG)及图形交换格式(GIF)，以及基于人类的个人成像的诸多视频档案，所述人类的个人在此被称为用户。所述关系可以包括一存储位置(storage location)中的一副本(copy)的删除，例如：在一用户的一存储(譬如被用于捕获所述媒体档案的在一装置中的本地式存储或一相关联的云存储)中，所述用户被捕获在一媒体档案及/或以被成像在所述多个媒体档案中的一个或多个其他用户的一存储中的所述媒体档案创建的一副本。为了简洁起见，一媒体档案的一副本及一媒体档案在此可以被互换地引用。存储重定位(storage relocation)可以被自动地执行及/或基于来自所述(多个)被成像用户或所述捕获用户的输入而被执行。
可选地，在所述媒体档案中的内容可以基于所述多个被成像用户的所述身份及/或所述多个被成像用户与所述捕获用户的所述社交联系及/或在所述多个被成像用户与所述捕获用户之间的所述连接而被自动编辑。
可选地，多个用户的时间及位置被监视(monitored)及被登录(logged)，以允许将用户与可以包含其一视觉呈现的多个媒体档案相关联。在这样的多个实施例中，(多种)人脸识别(face recognition)功能可以被应用于多个被选定的媒体档案(selected mediafiles)，所述多个被选定的媒体档案与在一定时间内已经被辨认(identified)为存在于一特定位置的多个用户的一群组相匹配。这允许减少假阳性(false positive)图像匹配并减少应用于(多种)人脸识别功能所需的计算工作量。可选地，多个人脸分段(face segments)通过被安装在多个客户终端上的应用程序被本地式剪裁(locally cropped)。这允许集中处理被剪裁的人脸片段替代多个完整的媒体档案，从而减少在多个媒体档案与一服务器级的多个用户之间匹配所需的所述带宽。
所述诸多方法及诸多系统可以被用于辅助保护诸多用户的所述隐私，提供用于诸多商业化媒体档案的诸多工具，及/或用于建立在捕获一媒体档案的一个用户及/或在所述媒体档案中的一个或多个被成像用户之间的通信。
根据本发明的一些实施例，提供在(多个)被成像的媒体档案中的一个或多个用户及/或所述(多个)被捕获的媒体档案中的一个用户之间建立一聊天的诸多方法及诸多系统。所述被成像用户可以通过应用(多种)图像识别功能而被辨认。
在详细解释本发明的至少一个实施例以前，应当理解的是，本发明在其应用中不必然受限于以下描述中阐述的部件及/或方法的构造及布置的细节及/或者在附图及/或实施例中示出者。本发明能够为其他实施例或以各种方式实践或执行。
本发明可以是一系统、一方法及/或一计算机程序产品。所述计算机程序产品可以包含其上具有用于使一处理器执行本发明的各方面的一计算机可读程序指令的一计算机可读存储媒介(或媒体)。
所述计算机可读存储媒介可以是可以保留及存储可供一指令执行装置使用的诸多指令的一有形的装置。所述计算机可读存储媒介可以是例如但不限于一电子存储装置、一磁存储装置、一光存储装置、一电磁存储装置、一半导体存储装置或前述的任何适当组合。所述计算机可读存储媒介的诸多更具体示例的一非穷尽列表包含如下：一便携式计算机磁盘(portable computer diskette)、一硬盘(hard disk)、一随机存取内存(RAM)、一只读内存(ROM)、一可擦除可编程只读内存(EPROM或闪存)、一静态随机存取内存(SRAM)、一便携式光盘只读内存(CD-ROM)、一数字多功能光盘(DVD)、一记忆棒(memory stick)、一软盘(floppy disk)、一机械编码装置(mechanically encoded device)，诸如有多个指令被记录在凹槽上的诸多打孔卡或凸起结构，以及前述的任何适当组合。在此使用的一计算机可读存储媒介不应被解释作为短暂的信号本身，诸如无线电波或其他自由传播的电磁波、通过一波导或其他传输媒体传播的诸多电磁波(譬如穿过一光纤电缆的诸多光脉冲)或通过一导线被传输的诸多电信号。
在此描述的诸多计算机可读程序指令可以从一计算机可读存储媒介被下载到各自的计算/处理装置，或者经由一网络从被下载到一外部计算机或外部存储装置，所述网络例如所述互联网、一局域网、一广域网及/或一无线网络。所述网络可以包含诸多铜传输电缆(copper transmission cables)、诸多光学传输光纤(optical transmission fibers)、无线传输(wireless transmission)、诸多路由器(routers)、诸多防火墙(firewalls)、诸多交换机(switches)、诸多网关计算机(gateway computers)及/或诸多边缘服务器(edgeservers)。在每一个计算/处理装置中的一网络适配卡(network adapter card)或网络界面(network interface)从所述网络接收诸多计算机可读程序指令并且转发所述诸多计算机可读程序指令，以存储在所述各自的计算/处理装置内的一计算机可读存储媒介(computer readable storage medium)中。
用于执行本发明的运作的诸多计算机可读程序指令可以是以一种或多种编程语言的任意组合被编写的诸多汇编指令(assembler instructions)、诸多指令集架构(ISA)指令、诸多机器指令(machine instructions)、诸多机器相依指令(machine dependentinstructions)、微码(microcode)、诸多固件指令(firmware instructions)、状态设定数据(state-setting data)或源代码(source code)或目标代码(object code)，所述编程语言包括一面向对象的编程语言，诸如Smalltalk、C++或相似者，以及常规过程编程语言，诸如所述“C”编程语言或类似的编程语言。所述计算机可读程序指令可以完全在所述用户的计算机上、部分在所述用户的计算机上执行，作为一独立的软件包，部分在所述用户的计算机上执行、部分在一远程计算机上执行或完全在所述远程计算机或服务器上执行。
在较后的脚本中，所述远程计算机可以通过任何类型的网络被连接到所述用户的计算机，所述网络包括一局域网(LAN)或一广域网(WAN)，或者所述连接可以由一外部计算机制作而成(例如：通过使用一互联网服务提供商的所述互联网)。在一些实施例中，电子电路包含例如可编程逻辑电路(programmable logic circuitry)、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA)可以通过利用计算机可读程序指令(computer readable programinstructions)的状态信息，而执行诸多计算机可读程序指令，以将所述电子电路个性化，用以执行本发明的各个方面。
在此参考根据本发明实施例的诸多方法、诸多装置(诸多系统)及诸多计算机程序产品的诸多流程图解说明及/或诸多框图以描述本发明的各方面。应该理解的是，所述诸多流程图解说明及/或诸多框图中的每一个框以及在所述诸多流程图解说明及/或所述框图中的诸多框的诸多组合可以通过诸多计算机可读程序指令被实现。
这些计算机可读程序指令可以被提供给一通用计算机、专用计算机或其他可编程数据处理装置的一处理器以生产一机器，使得经由所述计算机或其他可编程数据处理装置的所述处理器执行的所述指令创建装置，用于实现在所述流程图及/或框图的一个或多个框中指定的所述功能/动作。这些计算机可读程序指令还可以被存储在一计算机可读存储媒介中，所述计算机可读存储媒介可以指挥一计算机、一可编程数据处理装置及/或其他装置以特定方式运行功能，使得其中存储有诸多指令的所述计算机可读存储媒介包含一制造物品，所述制造物品包含实现在所述流程图及/或框图的一个或多个框中指定的功能/动作的各方面的诸多指令。
所述计算机可读程序指令还可以被加载到一计算机、其他可编程数据处理装置或其他装置上，以引发在所述计算机、其他可编程装置或其他装置上执行一系列操作步骤而产生一计算机实现的过程，使得在所述计算机、其他可编程装置或其他装置上执行的所述诸多指令实现在所述诸多流程图及/或诸多框图的一个或多个框中指定的功能/动作。
所述诸多附图中的所述流程图及框图以图解说明根据本发明的各种实施例的诸多系统、诸多方法及诸多计算机程序产品的可能实现方案的架构、功能及运作。就此而言，在所述流程图或诸多框图中的每一个框可表示诸多指令的一模块、片段或部分，包含用于实现所述(多个)指定的逻辑功能的一个或多个可执行指令。
在一些替代实现方案中，在所述框中提到的所述功能可以不按照附图中标记的顺序发生。例如：取决于所涉及的功能，连续示出的两个框实际上可以大致上同时执行，或者所述多个框有时可以用相反的顺序执行。还将被注意到的是，所述诸多框图及/或流程图的每一个框以及在所述诸多框图及/或流程图解说明中的诸多框的诸多组合可以通过执行指定功能或动作的多个基于专用硬件的系统或者执行专用硬件及诸多计算机指令的诸多组合而被实现。
本申请的诸多方法及诸多系统为在关于这些媒体档案的多个媒体档案中被成像的诸多对象缺乏知识及/或控制的问题提供一技术解决方案。所述技术解决方案涉及向诸多用户提供诸多工具，以管理多个诸如诸多图像及诸多视频的多个媒体档案的存储，及/或自动建立在多个媒体档案中被成像的多个用户及/或捕获所述多个媒体档案的多个用户之间的多个聊天会话。所述存储管理及/或聊天建立可以基于记录一段时间内的多个用户的位置的时空日志文档化(spatiotemporal logs documenting)及记录何时何地采集所述多个媒体档案的时空数据文档化(spatiotemporal data documenting)的一分析。所述技术解决方案可以通过如下所述的一个或多个服务器(servers)及/或多个虚拟机(virtualmachines)及/或多个应用而被实现。
现在参考图1，图1是根据本发明的一些实施例的通过匹配的管理媒体档案的所述存储的一方法的一流程图100，对于各种时间间隔的每一种，通过捕获或上传所述多个媒体档案的一位置与各个用户的一位置(如通过多个客户终端被记录)匹配，并且基于在所述多个媒体档案中的(多个)被成像的人类对象的人脸的所述指示。所述方法允许控制多个图像的一公开散布，并且提供允许诸多摄影师分享或出售他们的产品给第三方(thirdparties)的一工具，例如通过诸多图像引起他们的注意。可选地，所述方法授予多个用户，即在通过其他用户(或他们的被成像对象的监护人)被捕获的多个媒体档案中被成像的人类对象，具有控制这些图像的多个副本的散布或者具有购买这些图像的多个副本或散布权及/或能够与所述多个媒体档案的当前拥有者聊天的能力。在本发明的一些实施例中，满足特定条件的图像，例如描绘亲密照片的图像，被检测并被自动转发以用于散布批准。这种图像可以按照本领域已知的方式进行检测，例如：参见D.A.FORSYTH，自动检测人类裸体，计算机科学分部，加利福尼亚大学伯克利分校，伯克利，加利福尼亚州94720，其通过引用并入在此。
还参考图2，图2是根据本发明的一些实施例的管理多个媒体档案或其多个副本的一存储的一系统200的一示意图例，例如：通过执行在图1中描绘的所述过程。
所述系统200是可选地在运行于各种计算单元上的一个或多个服务器及/或虚拟机上被实现。所述系统200在一个或多个服务器201上被实现，所述服务器201包含用于接收来自如下所述的客户终端的数据及/或多个媒体档案的诸如一网络界面的一界面206、执行识别模块212的一个或多个处理器203、一管理模块213及一时空匹配模块211，例如：存储在所述系统200的一个或多个内存202中并且如下所述被使用的多个代码指令。所述系统200经由一网络205与客户模块204通信，所述网络205诸如所述互联网，所述客户模块204例如被安装在多个客户终端205中的应用程序，所述客户终端205例如智能电话、智能眼镜、可穿戴装置及/或智能手表及/或具有网络连接性的摄影机，所述网络连接性比如与一计算机、诸多装置的无线或有线连接，所述装置与来自多个摄影机的多个媒体档案是相关的，举例如下所述。所述客户模块可以允许多个用户通过捕获多个图像及/或多个视频档案以指定多个媒体档案、从一图库加载多个媒体档案、启用多个媒体档案的所述散布及/或相似者。可选地，所述客户模块204运行一服务，用于自动识别在所述装置或与所述用户相关联的存储中的新媒体档案。所述客户模块204可以是被安装在所述客户终端中的一预安装的移动应用程序(preinstalled mobile app)、一预安装的服务(preinstalled service)或一后安装的服务(post-installed service)。
所述客户模块204可以被嵌入在一摄影机或一计算机软件模块(computersoftware module)中，例如：在一被定义的图库或档案夹中的多个图像上运行的一浏览器插件(browser add-in)。所述客户模块204可以是被安装在诸如一智能手机(smartphone)、一平板电脑(tablet)及/或一可穿戴装置(wearable device)的所述客户终端的一应用程序(application)，例如一App StoreTM应用程序或PlayTM应用程序。所述客户模块204可以是在接入多个用户的多个媒体档案的一网页上运行的JavaScript元件或AJAX物件，例如：社交媒体网页的一网页，用于检查上传的多个媒体档案。
可选地，一个或多个数据库服务器214也被用于存储多个用户的人脸记录、多个媒体档案及/或时空数据日志。
如在101处所示，多个客户终端的时空数据被登录，可选地通过被安装在多个客户终端205中的多个客户模块104。如在此所使用的，时空数据可以是与时间相关的一位置指示，例如：与指示在一位置坐标已被记录的时间内的一时间戳记(timestamp)相关联的一客户终端的所述位置坐标。所述时空数据可选地包括位置及可选地来自在多个客户终端205上运行的位置服务被获取的时间标签，所述客户终端205例如多个全球定位系统(GPS)单元、基于网络的跟踪单元及基于跟踪单元及或相似者的订户辨认模块(SIM)。所述登录过程可以是本地的及/或被转发到诸如113的一远程服务器，例如：连续地或迭代地转发。可选地，如在114处所示，多个用户的时空数据被迭代地获取并且登录及/或转发到系统200，以供进一步处理。所述时空数据可选地被迭代地或连续地或者根据事件(譬如：被检测到的位置变化)时经由界面206从多个客户终端205转发到一个或多个服务器201。
如在102处所示，诸如图像及视频档案的多个媒体档案的每一个的时空数据通过一些或全部客户终端被捕获，例如：通过多个客户模组204。可选地，所述客户模块是一应用程序，所述应用程序包含一图像捕获的用户界面(UI)、对另一应用程序的所述图像捕获UI或所述托管客户装置的一原生图像捕获UI的一连接，及/或一图像浏览UI，对另一应用程序的所述图像浏览UI或对所述托管客户装置的一图像浏览UI的一连接。这些UI允许一用户手动地或自动地捕获或指定一媒体档案(譬如一图像、一视频或一图形交换格式(GIF)及相似者)，以进行时空数据提取，例如从所述图像的元数据，例如基于可交换图像档案格式(EXIF)标准。可选地，如在113处所示，被捕获的媒体档案的时空数据被迭代地获取并且登录及/或转发到系统200，以供进一步处理。
这种时空数据可选地通过界面206从客户终端205迭代地或连续地或在事件(譬如：图像被拍摄)时被转发到一个或多个服务器201，可选地与多个媒体档案或所述媒体档案的多个人脸片段在一起，如下所述。
在一个示例中，所述客户模块204是被安装在一用户的一移动装置中的一应用程序，例如：作为一智能手表、一智能手机或一智能眼镜中的一应用程序，以及一分离图像捕获装置(separate image capturing device)，诸如用于捕获多个媒体档案的一摄影机。在使用过程中，所述分离图像捕获装置被用于捕获所述多个媒体档案，并且被用于以至少一时间戳记捕获的多个媒体档案。与此并行地，所述移动装置比如使用诸如一GPS模块或如上定义的一位置服务，被用于登录时空数据及与所述用户相关者，例如如下所述者。在这样的多个实施例中，通过所述单独图像捕获装置取得的多个媒体档案能够基于在所述被登录的时空数据与所述多个时间戳记之间的一时间匹配度以一被估计的捕获位置被标记。所述被登录的多个媒体档案现在可以被分析，以检测多个接近事件，例如如下所述者。此实施例允许使用不具有集成位置服务模块的多个图像捕获装置，诸如一GPS模块，以被用于捕获根据在此描述的过程被匹配的多个媒体档案。例如：从所述客户模块204被加载的一时空数据日志被用于增强以一独立数字摄影机(譬如：Nikon D750DSLR)捕获的多个媒体档案，并且与所述客户模块204一起被加载到一计算机。
现在，如在103处所示，一个或多个用户在通过所述客户终端中的一些或全部被捕获的一个或多个所述媒体档案的所述捕获拍摄时间对所述捕获地理位置的一时空接近度(spatiotemporal proximity)被检测，例如：使用所述匹配模块211。例如：在所述系统200中被载明的每一个图像或视频的所述时空数据之间的一匹配与在不同地理位置被接入的多个用户载明在何地及何时多个日志是相匹配的。这将允许检测可能已经在所述多个媒体档案的一图像群组中被捕获的多个潜在用户的一用户群组作为所述多个媒体档案对于捕获所述多个媒体档案中的一个的所述事件的一时空接近度被识别。通过所述客户终端的一些或全部被捕获的所述多个媒体档案可以被本地式存储在所述多个捕获客户终端中，或者被存储在被分配给所述多个客户终端的所述多个用户的一存储中，例如：与所述多个客户终端的所述多个用户相关联的。例如：通过一第一用户被捕获并且被存储在所述第一用户的所述账户的云存储(cloud storage)中的一图像被接入，以检测如上所述的时空接近度。
可选地，当所述媒体档案被存储在所述客户终端的所述内存(memory)中，在多个用户的时空数据与多个媒体档案的时空数据之间的所述匹配通过位于所述系统的所述(多个)服务器201处的所述时空匹配模块211被完成。在这样的多个实施例中，仅有多个媒体档案的所述时空数据可以被转发到所述时空匹配模块211，以减少时空接近度检测所需的所述带宽。
附加地或替代地，可用接入点或无线连接的一日志能够以每一个用户的时间戳记被注册，例如：通过所述被安装的客户应用程序及/或每一个媒体档案，例如：如在成像时及/或成像不久前或成像不久后的一时间通过所述成像装置被检测到的。所述日志可以包括诸多Wi-Fi接入点、诸如诸多Wi-Fi指示符的诸多移动装置信号、蓝牙及/或诸多近场通信(NFC)信号。当一图像的所述日志及所述用户的所述日志在相同或大约相同的时间帧处注册相同的(多个)接入点或(多个)无线连接时，一时空接近度可以被检测。
另外地或可选地，与一图像有关的一时空接近度的一检测可以通过与相同摄影师及/或装置拍摄的另一个图像有关的另一个时空接近度而被指示。
在一图像中的多个图像对象可以被用于使另一图像与相同的多个被成像用户相关联，例如：在大约同一时间被拍摄的二图像中存在一独特的衬衫或太阳眼镜。社交关联也可以被用在多个图像及多个用户之间的关联，例如：如下所述者。
现在，如在104处所示，诸如(诸多)人脸识别功能及/或(诸多)语音识别功能的(诸多)识别功能被应用以识别、检查或验证在所述图像群组的所述多个媒体档案中存在的所述用户群组的多个)成员。例如：所述用户群组的多个成员的所述人脸记录可以被使用，以识别在所述图像群组的多个媒体档案的每一个中被成像的所述用户群组的哪一个(如果有任一个的话)(多个)成员。每一个人脸记录为指示一个或多个人脸特征(face features)或所述多个用户中的一个的一人脸签章(face signature)。在使用过程中，所述一个或多个人脸特征或所述人脸签章被使用以扫描所述相应的多个媒体档案，并且决定所述相应的用户是否被成像。在一订阅过程中，通过分析被一用户加载的一个或多个图像或视频档案，一人脸记录的所述人脸特征被可选地获取。另外地或替代地，所述用户群组的多个成员的多个对象记录可以被用于识别所述用户群组中的哪一个(如果有任一个的话)(多个)成员出现在图像组的每个媒体档案中。每一个对象记录被表示所述多个用户中的一个的一个或多个特征或一对象签章(object signature)。所述对象可以是一衬衫、一徽标、一图标、一汽车、一马、一狗、一太阳眼镜及/或与一用户相关联的任何物品。另外地或可选地，用户组的成员的语音记录可以用于识别在图像组的每个媒体档案中记录用户组中的哪一个(如果有任一个的话)(多个)成员。每一个语音记录表示一个或多个语音特征或一个用户的语音签名。一语音识别算法可以被使用，例如：动态时间规整(DTW)或任何其他技术，以在诸多特定限制下找到在两个给定时间相依序列之间的一最佳比对结果。
可选地，在104中被描绘的所述检查阶段通过所述服务器201被承担，例如：所述所述识别模块212。如上所述，所述多个媒体档案可以被存储在所述多个客户终端的所述内存中。为了允许所述识别模块212以检查来自所述用户群组的多个用户是否被成像在具备有限带宽及带有分布式计算的所述图像群组的所述多个图像中，在每一个相关的媒体图像中的诸多人脸可以通过所述客户模块204被本地式辨认及被裁剪，并且被传送到所述识别模块212。裁剪可能是由本地式存储的多个视频档案的多个帧或从多个图像被完成的。在这样的多个实施例中，所述识别模块212将所述被裁剪的人脸与所述多个人脸记录相匹配，以检测一匹配。这还允许减少所述带宽(譬如：主要在诸多视频档案中)及/或在多个媒体档案中被成像的多个用户的隐私侵害，例如：由于对一中央存储位置的一安全漏洞及/或所述相似者。如在104处所述被检查并且通过一用户被捕获并且描绘另一用户的一图像在此可以被称为一被匹配的媒体档案。
可选地，在下文中为被匹配的多个用户的一被匹配的媒体档案中被成像的所述多个用户与下文中为一捕获用户的被捕获所述图像的所述用户之间的一社交联系(socialconnection)被辨认并且被分类。所述社交联系可以使用一社交媒体的一API呼叫而被查询。所述社交联系可以通过抓取在一社交网络数据集中的多个记录而被辨认。例如：在线社交网络参与者之间的联系关系被分析。例如：一在线社交网络连接可以被表示为一图形(诸多节点表示诸多用户，诸多边缘表示诸多社交关系)，并且所述图形被分析以分类所述多个用户(朋友、朋友还是敌人及/或相似者)之间的关系。可选地，一重定位方案基于社交联系是朋友、朋友还是敌人，或是具有远程或不具有社交联系的其他用户而被决定。所述重定位方案可以是自动媒体档案存储重定位、半自动媒体档案存储重定位，例如：基于批准的重定位及/或有条件的媒体档案存储重定位，例如：仅当被成像用户与一个或多个特征相匹配时重定位。应该注意的是，所述术语重定位可以被用于描述：一档案的一删除，以及，可选地，将其一拷贝存储在另一个存储位置，例如：如下所述者。另外地或可选地，所述社交联系可以被用于改善被匹配的媒体档案搜索，例如：通过使用朋友或朋友或朋友的多个人脸记录，以检查多个附近用户的所述用户群组中的哪一个(如果有任一个的话)成员在所述图像群组的所述多个媒体档案中被成像。
根据本发明的一些实施例，所述识别模块212分析所述多个媒体档案，以验证所述用户被成像的所述媒体档案的分段的多个属性被成像，例如：一视频或一图像的片段。这些属性可以包含：一人脸大小、在所述图像或帧区域中的一人脸位置、所述被成像的人脸的注视方向(gazing direction)、所述人脸相对于所述客户终端的所述捕获元件的视线的一角度、在所述媒体档案中的所述关注区域与所述片段之间的所述关系、在一图像或一人脸的所述一般构图中的所述人脸的位置及/或相似者。这些属性可以被用于将不同的重定位规则应用于多个图像匹配用户在所述背景中的多个媒体档案及多个图像匹配用户作为所述多个主要对象的多个图像。
根据本发明的一些实施例，所述识别模块212分析一媒体档案，以辨认一视频的多个片段或在一图像中的多个区域，其中一被成像的人类对象是在所述图像中被成像的。这将允许修整或以其他方式处理所述媒体档案，以基于其中多个被成像的人类对象的存在或不存在而创建所述媒体档案的一被处理的副本。例如：所述媒体档案的一摘要版本仅包含带有所述被成像的人类对象的所述媒体档案的多个片段或多个区域，及/或，所述媒体档案的一过滤版本仅包含所述媒体档案的多个片段或多个区域，而没有所述被成像的人类对象。以这种方式，仅有所述摘要版本可以被转发到如下所述的被成像的人类对象，及/或仅有所述过滤版本可以为了操作被用于捕获所述媒体档案以接入的所述客户终端的所述用户被存储，例如：如下所述者。
根据本发明的一些实施例，所述识别模块212将在多个识别算法输出(recognition algorithm outputs)、捕获所述媒体内容的所述用户的位置及历史相关联，以找到被成像的多个用户。用于识别的加权可以基于被成像用户是否已经通过捕获所述媒体内容的所述用户的图像或者对位置数据的接入及/或相似者而被图像化。多种统计分类器(statistical classifiers)可以被使用。
现在，如在105处所示，自动地或半自动地，在一媒体档案存储重定位过程期间，多个媒体档案的一存储位置被改变，及/或，在一媒体档案编辑过程期间，多个媒体档案被编辑以移除或伪装在所述媒体档案中被成像的(多个)用户。当执行所述媒体档案存储重定位过程时，一媒体档案的一副本或一处理后的副本(为了简洁，在此称为一副本)被存储在被所述多个媒体档案中成像的多个用户接入及/或使用的一存储中。可选地，一媒体档案的一副本被存储在一第一用户的一帐户的一存储中，例如：在所述第一用户的一云账户中，被重定位及/或被编辑，所述第一用户操作被用于捕获所述媒体挡案(譬如：一摄影机或一智能电话)的一客户终端。所述重定位可以是存储在所述媒体档案中被成像的一第二用户的一账户，例如：在所述第二用户的一云账户中。在另一个示例中，一媒体档案的一副本被存储在一第一用户的一客户终端的一存储中，所述第一用户被用于捕获所述媒体档案(譬如：一摄影机或一智能手机)，例如：在一智能手机的一固态驱动器中。在此示例中，所述重定位是存储在媒体档案中被成像的一第二用户的一客户终端，例如：在所述第二用户的一平板电脑的一microSD卡中。所述编辑能够以在所述捕获装置处或在对所述用户可接入的一程序库中的所述媒体档案的一本地的副本被进行。
根据本发明的一些实施例，基于来自所述捕获用户及/或所述被成像的多个用户的一输入被决定一被匹配媒体档案的一重定位。例如：图3描绘的过程类似于图1中所描绘的过程；然而，图3的301及302描绘两个子过程，其中多个用户指令被获取以决定一媒体档案的一存储位置是否被改变。如在此被使用的，一重定位意谓所述被匹配的媒体档案的一完全重定位或者所述被匹配的媒体档案的一部分重定位，例如：在一视频档案的多个选定片段或在一图像中的区域中的一重定位基于所述被成像的多个用户的存在或不存在而被分割。
可选地，如在301处所示，当一被匹配的媒体档案被检测时，被捕获于所述被匹配的媒体档案的所述客户终端的所述用户可以被通知以批准所述图像存储关系。例如：所述用户被呈现为带有一通知，以指示在他的存储中的所述多个媒体档案中的一个是对另一用户成像的一被匹配的媒体档案。可选地，所述通知是一界面GUI，所述界面GUI允许所述用户确认存储或忽略所述匹配的一重定位，例如：通过呈现多个选择按钮(selection buttons)及/或接收多个指尖手势(fingertip gestures)。
附加地或替代地，在匹配的媒体档案中成像的成像的用户被通知关于匹配的媒体档案。可选地，一旦检测到一被匹配的媒体档案，例如：如上面参照104所描述的，对所述(多个)被成像用户的存储具有一副本或一链接的一消息被发送到所述(多个)被成像用户。例如：所述消息可以从所述管理模块213被发送到一被成像用户，向所述被成像用户通知关于所述被匹配的媒体档案，并且允许他指示所述媒体档案的一重定位，例如：指示从它的当前存储位置删除所述媒体档案，并且可选地将一副本存储在与他相关联的一存储中，例如：如上所述者。附加地或替代地，所述被成像用户可以对所述摄影师给出反馈，例如：排列所述被匹配的媒体档案及/或将所述图像标识为喜欢或不喜欢。
在一个示例中，对所述用户呈现所述被匹配的媒体档案的一预览，例如：一缩略图(thumbnail)，可与用于获取一副本的一按钮一起被呈现，在所述远程位置删除所述来源副本及/或获取一副本并且维护在所述远程位置的所述来源副本。
附加地或替代地，响应于所述被成像用户提供的一输入，在所述来源图像中的所述被成像用户可以被辨认及被裁剪、被模糊化及/或以其他方式被掩蔽。在这样的多个实施例中，所述被成像用户对他被成像的所述图像的所述特定部分具有一控制性。例如：响应于一用户输入、一图像或一帧的所述人脸分段是被模糊的。
附加地或替代地，所述捕获用户与所述媒体档案相关联，以允许他通过所述(多个)被成像用户遵循所述图像的发布及/或散布。例如：当所述图像被张贴在一社交网络页面(social network page)中时，所述捕获用户被标记或以其他方式被标识。以这样的方式，所述捕获用户被暴露于对他捕获的图像的多个反应。在这样的实施例中，捕获被散布的媒体档案的一用户可以受益于所述多个媒体档案的所述散布，例如：来自所述发布及/或取决于所述散布的一费用，而不具有所述多个媒体档案的一副本上的一所有权及/或不用通过自己管理所述散布。在另一示例中，一标识符(identifier)，诸如一水印(watermark)、一布局(layout)及/或一图标(icon)，例如：一简档图像(profile image)，被添加到所述被匹配的媒体档案。以这种方式，通过所述被成像用户推荐的对所述被匹配的媒体档案的一曝光度(exposure)，带来对所述捕获用户及/或所述捕获用户品牌的曝光度。所述水印、所述布局及/或所述图标可以取自所述用户简档。
附加地或替代地，在一图像档案夹(folder of images)的一图像库(gallery ofimages)中的多个图像被标记有关于所述捕获用户的信息、关于所述被成像用户的信息及/或指示所述图像在哪里散布以及可选地散布给谁的信息。例如：给所述系统的哪一个订户(subscriber)。这将允许所述图库的所有者跟踪图像散布给多个用户。可选地，多个用户对所述图像的反应也被添加到所述图像库的所述多个项目中。例如：像标签及反应的数量。
可选地，所述系统200允许通过设置用于重定位多个媒体档案的多个副本及/或用于散布多个媒体档案的一价格捕获多个用户以货币化(monetize)他们的多个媒体档案。在这种实施例中，一计费模块(billing module)被使用以管理在被成像用户之间的诸多金融交易并且捕获诸多用户。例如：当检测到一被匹配的媒体档案时，将一消息转发给所述被成像用户，以允许他以一固定价格或通过所述捕获用户设定的一价格购买所述被匹配的媒体档案，例如：对于所述特定被匹配的媒体档案或符合诸多特定条件的诸多图像。例如：所述计费模块因所述被匹配的媒体档案对被成像用户收费并且因所述媒体档案的一重定位对所述捕获用户累积信用。在一示例性场景中，在诸多公共活动中的诸多摄影师可以捕获诸多媒体档案并且将诸多媒体档案加载到所述系统200，如上所述，所述系统200将诸多媒体档案散布给被成像用户。当一被成像用户同意接收所述图像的一副本的一价格时，一交易可以被完成。
图4是根据本发明的一些实施例的在多个用户之间建立一聊天会话(chatsession)的一方法，所述多个用户是在一个或多个媒体档案被成像的及/或捕获所述多个媒体档案的所述用户。可选地，所述聊天会话在被成像于以一共同时间被捕获的一个或多个图像中的多个用户与接近诸多位置的多个用户之间及/或被捕获所述多个图像的所述用户之间被建立。所描绘的过程允许建立一聊天及/或一群聊(group chat)，以便允许所述(多个)被成像用户及/或所述捕获用户讨论在一共同时间及接近位置被拍摄的所述一个或多个媒体档案及/或被记录在一个或多个图像中的所述事件。可选地，所述过程被应用在一共同时间及接近位置被拍摄的多个媒体档案，并且参照如上101至104所述的内容，在这一个或多个媒体档案中被成像的所述多个用户被辨认。
如在402至401处所示，在(多个)媒体档案中被成像的多个用户及可选地捕获描绘所述被成像用户的所述媒体档案的一捕获用户(capturing user)的所述身份被辨认。所述多个被成像用户可以通过有或无时空数据匹配度的方式在一媒体档案上应用一人脸识别功能而被辨认。如在403处所示，这允许建立一聊天会话。可选地，多个聊天用户界面被显示在所述捕获用户的多个客户终端及/或所述被成像用户中的一个或多个的一显示器上，以建立一聊天会话。所述聊天用户界面可以是一传统的实例消息传递(classic instancemessaging)GUI。这允许所述捕获用户及/或所述被成像用户中的一个或多个使用所述聊天用户界面交换诸多消息，并且在一聊天会话期间在所述客户终端上显示诸多所述交换的消息。
可选地，被安装在所述系统210的所述(多个)服务器201中的一聊天模块(未示出)被用于通过建立在所述(多个)被成像用户及/或所述捕获用户之间的一聊天会话以管理在他们之间的所述聊天会话，可选地，在诸如包括所述图像及一聊天GUI两者的所述客户模块204的一应用程序的一网页文档(web document)或一视窗。在一个示例中，所述捕获用户及所述(多个)被成像用户被添加到一聊天会话，其中所述被匹配的媒体档案被呈现，例如：作为一背景、作为来自所述捕获用户的一聊天输入及/或在一被指定的区域中。在另一示例中，所述被成像用户可以讨论他们一起经历的一事件。可选地，一个或多个用户被定义为诸多聊天管理者(chat managers)，所述聊天管理者可以将用户从所述聊天中添加或移除。可选地，所述聊天会话在图1或图3中描述的过程额外被建立。替代地，所述聊天会话独立于所述存储重定位过程而被建立。
如上所述的方法被用于诸多集成电路芯片的所述制造。
已经出于说明的目的给出对本发明的各种实施例的描述，但是并非意图在穷举或限于所公开的所述诸多实施例。在不脱离所描述的诸多实施例的范围及精神的情况下，许多修改及变化对于本领域的普通技术人员来说将是显而易见的。选择在此使用的所述术语是为了最好地解释所述诸多实施例的诸多原则、所述实际应用或在市场上找到技术的技术改进，或者，使本领域的其他普通技术人员理解在此公开的所述诸多实施例。
将被预期的是，在自此应用成熟的专利存在期间，许多相关方法及系统将被开发，并且所述术语：人脸识别功能、位置服务、时空数据及处理器的范围被意图包含所有这种先验的新技术(new technologies a priori)。
如在此使用的，术语“约(about)”是指±10％。
所述术语“包括(comprises)”，“包括(comprising)”，“包括(includes)”，“包括(including)”，“具有(having)”及其词性变化意味着“包括但不限于(including but notlimited to)”。所述术语“由...组成(consisting of)”是指“包括并且限于(includingand limited to)”。
所述惯用语“基本上由...组成(consisting essentially of)”是指组合物，方法或结构可以包括附加的成分、步骤及/或部分，但只有当附加的成分、步骤及/或部分不会实质上改变要求保护的基本及新颖的特征时的成分、方法或结构。
如在此所使用的，除非上下文另外清楚地指出，否则单数形式“一(a)”、“一个(an)”及“所述(the)”包括复数形式。例如：术语“一种化合物(a compound)”或“至少一种化合物(at least one compound)”可以包括多种化合物，包括其混合物。
所述单词“示例性(exemplary)”被使用在此处，以表示“用作一示例、实例或图解说明(serving as an example,instance or illustration)”。被描述为“示例性”的任何实施例不必要被解释为优于(preferred)或胜于(advantageous)其他的诸多实施例及/或排除来自其他的诸多实施例的特征的结合。
在此使用的术语“可选地(optionally)”表示“在一些实施例中被提供而在其他的诸多实施例中不被提供(is provided in some embodiments and not provided inother embodiments)”。本发明的任何特定实施例可以包含多个“可选的(optional)”特征，除非这些特征相冲突。
遍及本申请内容，本发明的各种实施例能够以一范围格式(range format)被呈现。应该理解的是，对范围格式的所述描述仅仅是为了方便及简洁，并且不应该被解释为对本发明的所述范围的一种不容变更的限制(inflexible limitation)。因此，一范围的所述描述应被视为具体公开所有可能的子范围以及所述范围内的个别数值。例如：从1到6的范围的描述应该被认为具有特定公开的子范围，例如从1到3、从1到4、从1到5、从2到4、从2到6、从3到6等，以及所述范围内的个别数字，例如：1、2、3、4、5及6。无论所述范围的所述广度如何，这都适用。
无论何时在此指出数字范围，其意图包括在所指示的范围内的任何引用的数字(分数或整数)。所述多个惯用语(phrases)：一第一指示号码与一第二指示号码“之间的范围/范围(ranging/ranges between)”及“范围/范围从(ranging/ranges from)”一第一指示号码“到(to)”一第二指示号码，在此可被互换使用，并且意谓为包括所述第一及第二指示号码以及它们之间的所有分数及整数的数值。
可以理解的是，为了清楚起见，在单独的实施例的上下文中描述的本发明的某些特征也可以在单个实施例中组合提供。相反地，为了简洁起见，在单个实施例的上下文中描述的本发明的各种特征也可以单独地或者以任何合适的子组合提供，或者适合于在本发明的任何其他描述的实施例中提供。在各种实施例的上下文中描述的某些特征不被认为是那些实施例的必要特征，除非所述实施例在没有这些元件的情况下不起作用。
虽然已经结合其具体实施例描述本发明，但是很显然的，对于本领域技术人员而言，许多替换、修改及变化将是显而易见的。因此，被意图在涵盖落入所附权利要求书的精神及广泛范围内的所有这些替代、修改及变化。

Claims (21)

1.一种管理一媒体档案存储用于保护在多个媒体档案中被成像的多个用户的隐私中的至少一者的方法，其特征在于：所述方法包括：
接收位置数据，其中所述位置数据指示多个用户中的每一个在一被监视期间的一用户地理位置，及所述位置数据是通过记录所述多个用户的多个客户终端中的每一个的一位置模块的多个输出被获取；
接收来自多个媒体档案的至少一媒体档案的一捕获或上传地理位置及时间，所述至少一媒体档案被存储在一第一帐户的一当前存储位置，其中所述第一帐户相关于所述多个用户中的一个；
使用所述捕获或上传地理位置及时间以辨认来自所述多个用户的一群组相对于所述至少一媒体档案在一各自的所述捕获或上传时间内的各自所述捕获或上传地理位置的一时空接近度；
使用一识别功能以检测在所述至少一媒体档案中被成像的所述群组的至少一成员；及
响应于所述检测，将所述至少一媒体档案从所述当前存储位置转移到相关于所述至少一成员的一第二帐户的一新存储位置。
2.如权利要求1所述的方法，其特征在于：响应于所述检测，引发一媒体档案存储重定位过程，其中所述至少一媒体档案的至少一第一副本从所述第一帐户被删除，及所述至少一媒体档案的一第二副本被创建且被存储在所述新存储位置。
3.如权利要求2所述的方法，其特征在于：所述方法还包括：辨认在所述至少一成员与捕获所述至少一媒体档案的一用户之间的一社交连接，及依据所述社交连接而管理所述媒体档案存储重定位过程及一编辑过程中的至少一者。
4.如权利要求2所述的方法，其特征在于：所述方法还包括：从捕获所述至少一媒体档案的一用户获取对所述媒体档案存储重定位过程的一批准，及
依据所述批准而管理所述媒体档案存储重定位过程及一编辑过程中的至少一者。
5.如权利要求2所述的方法，其特征在于：所述方法还包括：
将所述至少一媒体档案呈现在一图形用户界面上给所述至少一成员；
经由从所述至少一成员而来的在所述图形用户界面上的一选择而获取对所述至少一媒体档案的一反应；及
依据所述反应而管理所述媒体档案存储重定位过程及一编辑过程中的至少一者。
6.如权利要求5所述的方法，其特征在于：所述呈现包括：将所述至少一媒体档案的至少一缩略图呈现在所述图形用户界面上给所述至少一成员。
7.如权利要求1所述的方法，其特征在于：响应于所述检测，引发一编辑过程，且所述至少一媒体档案包括至少一视频档案，其中在所述编辑过程中，所述至少一视频档案被编辑，以移除多个视频片段，其中所述至少一成员被成像。
8.如权利要求1所述的方法，其特征在于：响应于所述检测，引发一编辑过程，且所述至少一媒体档案包括至少一视频档案，其中在所述编辑过程中，所述至少一视频档案被编辑，以移除多个视频片段，其中所述至少一成员未被成像。
9.如权利要求2所述的方法，其特征在于：所述方法还包括：管理在捕获所述至少一媒体档案的一用户与所述至少一成员之间的一金融交易，及依据所述金融交易而管理所述媒体档案存储重定位过程及一编辑过程中的至少一者。
10.如权利要求1所述的方法，其特征在于：所述识别功能包括一人脸识别功能。
11.如权利要求10所述的方法，其特征在于：使用多笔人脸记录以应用所述人脸识别功能，其中所述多笔人脸记录中的每一笔指示所述多个用户中的一个的至少一脸部特征。
12.如权利要求1所述的方法，其特征在于：所述识别功能为一语音识别功能。
13.如权利要求1所述的方法，其特征在于：所述方法还包括：建立在所述群组的至少二成员之间的一聊天会话。
14.如权利要求1所述的方法，其特征在于：所述方法还包括：建立在所述群组的至少一成员与捕获所述媒体档案的一捕获用户之间的一聊天会话。
15.如权利要求1所述的方法，其特征在于：所述多个媒体档案被存储在所述多个客户终端的一内存中，且其中所述当前存储位置是在所述多个客户终端中的一个上，及所述新存储位置是在所述多个客户终端中的另一个上。
16.如权利要求10所述的方法，其特征在于：所述方法还包括：
接收多个图像片段，其中所述多个图像片段中的每一个描绘至少一人脸，且是从所述多个媒体档案被剪裁，
其中所述检测是通过将所述人脸识别功能应用在所述多个图像片段上被执行。
17.如权利要求1所述的方法，其特征在于：所述多个客户终端包括所述多个用户的多个智能手机。
18.如权利要求1所述的方法，其特征在于：所述方法还包括：监视在至少一社交媒体网络中的所述至少一媒体档案的一散布，且对捕获有关所述散布的所述至少一媒体档案的一用户进行更新。
19.如权利要求1所述的方法，其特征在于：所述方法还包括：将一标示符加到所述至少一媒体档案，其中所述标示符是选自由一水印、一简介图像、一版面设计及一图标组成的一群组。
20.一种非暂时性计算机可读介质，包括：多个计算机可执行的指令，用于执行一种用于保护在多个媒体档案中被成像的多个用户的隐私的方法，所述多个指令包括：
多个指令，用于接收位置数据以指示多个用户中的每一个在一被监视期间的一用户地理位置，所述位置数据是通过记录所述多个用户的多个客户终端中的每一个的一位置模块的多个输出被获取；
多个指令，用于接收来自多个媒体档案的至少一媒体档案的一捕获或上传地理位置及时间，所述至少一媒体档案被存储在一第一帐户的一当前存储位置，其中所述第一帐户相关于所述多个用户中的一个；
多个指令，用于使用所述捕获或上传地理位置及时间以辨认来自所述多个用户的一群组相对于所述多个媒体档案中的至少一媒体档案在一各自的所述捕获或上传时间内的各自所述捕获或上传地理位置的一时空接近度；多个指令，用于使用一识别功能以检测在所述至少一媒体档案中被成像的所述群组的至少一成员；及
多个指令，用于响应于所述检测，将所述至少一媒体档案从所述当前存储位置转移到相关于所述至少一成员的一第二帐户的一新存储位置。
21.一种用于保护在多个媒体档案中被成像的多个用户的隐私的系统，其特征在于：所述系统包括：
至少一网络界面，适用于从多个用户的多个客户终端接收位置模块数据，所述位置模块数据指示所述多个用户中的每一个在一被监视期间的一用户地理位置，且所述至少一网络界面适用于接收多个媒体档案中的每一个的一捕获或上传地理位置及时间；
一代码存储器，存储一代码；
一处理器，适用于执行所述代码的多个以下的代码指令：
多个代码指令，用于使用所述捕获或上传地理位置及时间以辨认来自所述多个用户的一群组相对于所述多个媒体档案中的至少一媒体档案在一各自的所述捕获或上传时间内的各自所述捕获或上传地理位置的一时空接近度，所述至少一媒体档案被存储在一第一帐户的一当前存储位置，其中所述第一帐户相关于所述多个用户中的一个；
多个代码指令，用于使用一人脸识别功能以检测在所述至少一媒体档案中被成像的所述群组的至少一成员；及
多个代码指令，用于响应于所述检测所述群组的至少一成员，将所述至少一媒体档案从所述当前存储位置转移到相关于所述至少一成员的一第二帐户的一新存储位置。
CN201680051986.2A 2015-07-16 2016-07-14 基于图像分析的协调通信和/或存储 Active CN108027827B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201562193247P 2015-07-16 2015-07-16
US62/193,247 2015-07-16
PCT/IL2016/050773 WO2017009851A2 (en) 2015-07-16 2016-07-14 Coordinating communication and/or storage based on image analysis

Publications (2)

Publication Number Publication Date
CN108027827A CN108027827A (zh) 2018-05-11
CN108027827B true CN108027827B (zh) 2022-06-10

Family

ID=57757057

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680051986.2A Active CN108027827B (zh) 2015-07-16 2016-07-14 基于图像分析的协调通信和/或存储

Country Status (4)

Country Link
US (2) US11144591B2 (zh)
CN (1) CN108027827B (zh)
HK (1) HK1253324A1 (zh)
WO (1) WO2017009851A2 (zh)

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11408031B2 (en) 2010-05-18 2022-08-09 Natera, Inc. Methods for non-invasive prenatal paternity testing
JP6153874B2 (ja) 2011-02-09 2017-06-28 ナテラ， インコーポレイテッド 非侵襲的出生前倍数性呼び出しのための方法
EP3065067A1 (en) * 2015-03-06 2016-09-07 Captoria Ltd Anonymous live image search
CN108027827B (zh) 2015-07-16 2022-06-10 彭冯有限公司 基于图像分析的协调通信和/或存储
CN107968788A (zh) * 2017-12-07 2018-04-27 湖州华科信息咨询有限公司 一种用于工作文件安全管理的方法和装置
US11010233B1 (en) 2018-01-18 2021-05-18 Pure Storage, Inc Hardware-based system monitoring
EP3765994A1 (en) * 2018-03-14 2021-01-20 Sony Corporation Method, electronic device and social media server for controlling content in a video media stream using face detection
CA3090426A1 (en) 2018-04-14 2019-10-17 Natera, Inc. Methods for cancer detection and monitoring by means of personalized detection of circulating tumor dna
US11625481B2 (en) 2019-11-22 2023-04-11 Pure Storage, Inc. Selective throttling of operations potentially related to a security threat to a storage system
US11720714B2 (en) 2019-11-22 2023-08-08 Pure Storage, Inc. Inter-I/O relationship based detection of a security threat to a storage system
US20210216631A1 (en) * 2019-11-22 2021-07-15 Pure Storage, Inc. Filesystem Property Based Determination of a Possible Ransomware Attack Against a Storage System
US11675898B2 (en) 2019-11-22 2023-06-13 Pure Storage, Inc. Recovery dataset management for security threat monitoring
US12067118B2 (en) 2019-11-22 2024-08-20 Pure Storage, Inc. Detection of writing to a non-header portion of a file as an indicator of a possible ransomware attack against a storage system
US12079333B2 (en) 2019-11-22 2024-09-03 Pure Storage, Inc. Independent security threat detection and remediation by storage systems in a synchronous replication arrangement
US11651075B2 (en) 2019-11-22 2023-05-16 Pure Storage, Inc. Extensible attack monitoring by a storage system
US11645162B2 (en) 2019-11-22 2023-05-09 Pure Storage, Inc. Recovery point determination for data restoration in a storage system
US20210382992A1 (en) * 2019-11-22 2021-12-09 Pure Storage, Inc. Remote Analysis of Potentially Corrupt Data Written to a Storage System
US12050689B2 (en) 2019-11-22 2024-07-30 Pure Storage, Inc. Host anomaly-based generation of snapshots
US11657155B2 (en) 2019-11-22 2023-05-23 Pure Storage, Inc Snapshot delta metric based determination of a possible ransomware attack against data maintained by a storage system
US11341236B2 (en) 2019-11-22 2022-05-24 Pure Storage, Inc. Traffic-based detection of a security threat to a storage system
US11615185B2 (en) 2019-11-22 2023-03-28 Pure Storage, Inc. Multi-layer security threat detection for a storage system
US12079356B2 (en) 2019-11-22 2024-09-03 Pure Storage, Inc. Measurement interval anomaly detection-based generation of snapshots
US11720692B2 (en) 2019-11-22 2023-08-08 Pure Storage, Inc. Hardware token based management of recovery datasets for a storage system
US11520907B1 (en) * 2019-11-22 2022-12-06 Pure Storage, Inc. Storage system snapshot retention based on encrypted data
US11755751B2 (en) 2019-11-22 2023-09-12 Pure Storage, Inc. Modify access restrictions in response to a possible attack against data stored by a storage system
US11687418B2 (en) 2019-11-22 2023-06-27 Pure Storage, Inc. Automatic generation of recovery plans specific to individual storage elements
US20220327208A1 (en) * 2019-11-22 2022-10-13 Pure Storage, Inc. Snapshot Deletion Pattern-Based Determination of Ransomware Attack against Data Maintained by a Storage System
US12079502B2 (en) 2019-11-22 2024-09-03 Pure Storage, Inc. Storage element attribute-based determination of a data protection policy for use within a storage system
US12050683B2 (en) 2019-11-22 2024-07-30 Pure Storage, Inc. Selective control of a data synchronization setting of a storage system based on a possible ransomware attack against the storage system
US11941116B2 (en) 2019-11-22 2024-03-26 Pure Storage, Inc. Ransomware-based data protection parameter modification
US20210312084A1 (en) * 2020-04-01 2021-10-07 Rovi Guides, Inc. Systems and methods for managing digital media items access
JP6949180B1 (ja) * 2020-07-31 2021-10-13 楽天グループ株式会社 投稿権限付与装置、投稿権限付与方法、投稿権限付与プログラム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102687146A (zh) * 2009-10-27 2012-09-19 苹果公司 用于生成和标记照片集合中的事件的方法和系统
CN103477350A (zh) * 2011-03-29 2013-12-25 脸谱公司 基于空间和时间接近度的面部辨认
CN103914634A (zh) * 2014-03-26 2014-07-09 小米科技有限责任公司 图片加密方法、装置及电子设备
CN104284252A (zh) * 2014-09-10 2015-01-14 康佳集团股份有限公司 一种自动生成电子相册的方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6819783B2 (en) * 1996-09-04 2004-11-16 Centerframe, Llc Obtaining person-specific images in a public venue
US7822233B2 (en) * 2003-11-14 2010-10-26 Fujifilm Corporation Method and apparatus for organizing digital media based on face recognition
US7551755B1 (en) * 2004-01-22 2009-06-23 Fotonation Vision Limited Classification and organization of consumer digital images using workflow, and face detection and recognition
US20080037825A1 (en) * 2006-08-08 2008-02-14 Gcs Research Llc Digital Watermarking for Geospatial Images
US8914897B2 (en) * 2007-05-23 2014-12-16 International Business Machines Corporation Controlling access to digital images based on device proximity
US8520979B2 (en) * 2008-08-19 2013-08-27 Digimarc Corporation Methods and systems for content processing
EP2474155A1 (en) * 2009-09-02 2012-07-11 Image Holdings Method and system for displaying, managing and selling digital images
US8610788B2 (en) * 2011-02-08 2013-12-17 International Business Machines Corporation Content storage management in cameras
US9143601B2 (en) 2011-11-09 2015-09-22 Microsoft Technology Licensing, Llc Event-based media grouping, playback, and sharing
US8861804B1 (en) * 2012-06-15 2014-10-14 Shutterfly, Inc. Assisted photo-tagging with facial recognition models
US9298931B2 (en) * 2012-08-15 2016-03-29 Empire Technology Development Llc Digital media privacy protection
CN108027827B (zh) 2015-07-16 2022-06-10 彭冯有限公司 基于图像分析的协调通信和/或存储
US10586070B2 (en) * 2017-11-14 2020-03-10 International Business Machines Corporation Privacy protection in captured image for distribution

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102687146A (zh) * 2009-10-27 2012-09-19 苹果公司 用于生成和标记照片集合中的事件的方法和系统
CN103477350A (zh) * 2011-03-29 2013-12-25 脸谱公司 基于空间和时间接近度的面部辨认
CN103914634A (zh) * 2014-03-26 2014-07-09 小米科技有限责任公司 图片加密方法、装置及电子设备
CN104284252A (zh) * 2014-09-10 2015-01-14 康佳集团股份有限公司 一种自动生成电子相册的方法

Also Published As

Publication number Publication date
WO2017009851A9 (en) 2017-04-27
WO2017009851A2 (en) 2017-01-19
CN108027827A (zh) 2018-05-11
US11562021B2 (en) 2023-01-24
US20220012282A1 (en) 2022-01-13
US20190012382A1 (en) 2019-01-10
US11144591B2 (en) 2021-10-12
HK1253324A1 (zh) 2019-06-14
WO2017009851A3 (en) 2017-03-30

Similar Documents

Publication Publication Date Title
CN108027827B (zh) 基于图像分析的协调通信和/或存储
US10885380B2 (en) Automatic suggestion to share images
US10417799B2 (en) Systems and methods for generating and presenting publishable collections of related media content items
US20140279061A1 (en) Social Media Branding
US20160379260A1 (en) Product recommendations based on analysis of social experiences
US10652075B2 (en) Systems and methods for selecting content items and generating multimedia content
US20170270625A1 (en) Systems and methods for identifying matching content
JP6396897B2 (ja) 出席者によるイベントの検索
US20160328868A1 (en) Systems and methods for generating and presenting publishable collections of related media content items
US20160267674A1 (en) Systems and methods for providing object recognition based on detecting and extracting media portions
CN105005599A (zh) 一种照片分享方法及移动终端
CN112016001A (zh) 好友推荐方法、设备及计算机可读介质
US8577965B2 (en) Knowledge base broadcasting
US20190082002A1 (en) Media file sharing method, media file sharing device, and terminal
US10169849B2 (en) Contextual personalized focus for variable depth of field photographs on social networks
US10755415B2 (en) Detecting and monitoring a user's photographs for health issues
US9767848B2 (en) Systems and methods for combining drawings and videos prior to buffer storage
US20190253613A1 (en) Determining optimal photograph capture timing based on data from wearable computer eyewear devices
US9940554B2 (en) Data analysis and management methods and systems for social networks
JP7011447B2 (ja) 情報処理装置及びプログラム
EP3223228A1 (en) Systems and methods for identifying matching content in a social network
WO2019021216A1 (en) SYSTEM AND METHOD FOR DISTRIBUTING MULTIMEDIA FILE
EP2492852A1 (en) Knowledge base broadcasting

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1253324

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant