CN104982029A - 具有隐私模式的摄像机 - Google Patents

具有隐私模式的摄像机 Download PDF

Info

Publication number
CN104982029A
CN104982029A CN201380067243.0A CN201380067243A CN104982029A CN 104982029 A CN104982029 A CN 104982029A CN 201380067243 A CN201380067243 A CN 201380067243A CN 104982029 A CN104982029 A CN 104982029A
Authority
CN
China
Prior art keywords
privacy
video camera
background
privacy mode
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380067243.0A
Other languages
English (en)
Other versions
CN104982029B (zh
Inventor
R.库特勒
R.梅赫兰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Priority to CN201810100700.6A priority Critical patent/CN108234920B/zh
Priority to CN201810100712.9A priority patent/CN108184086A/zh
Publication of CN104982029A publication Critical patent/CN104982029A/zh
Application granted granted Critical
Publication of CN104982029B publication Critical patent/CN104982029B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/207Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/675Focus control based on electronic image sensor signals comprising setting of focusing regions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • G06T2207/10012Stereo images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00Details of stereoscopic systems
    • H04N2213/005Aspects relating to the "3D+depth" image format
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

一种隐私摄像机(比如包括摄像机阵列的光场摄像机或RGBZ摄像机)被使用来按照选择的隐私模式捕获图像和显示图像。隐私模式可以包括模糊背景模式和背景替换模式,并且可以根据会议类型、参加者、位置和设备类型来被自动选择。确定感兴趣区域和/或感兴趣对象(例如,在前景中的一个或多个人),并且隐私摄像机被配置成清晰地示出感兴趣区域/对象并按照选择的隐私模式来模糊或替换背景。所显示的图像包括清晰示出的(例如,在焦点上的)感兴趣区域/对象和所示的组合图像的背景中具有有限景深的(例如,模糊的/不在焦点上的)任何对象和/或被另一图像和/或填充物替换的背景。

Description

具有隐私模式的摄像机
背景技术
视频会议在家庭和工作中正变得越来越流行。然而,许多用户可能不希望他们的背景在共享的工作或家庭环境中是其它参加者清晰可见的。例如,背景可能是混乱的、使人分心的,包括秘密信息等等。虽然某些视频会议系统可以使用背景替换(例如,绿色屏幕/静态背景)或包括模糊能力,但这些方法可能难以实现(例如,需要绿色屏幕),或可能有害地影响场景中内容的显示(例如,具有显著的图像伪像)。
发明内容
本概要被提供来以简化的形式介绍构思的选择,在下面的详细说明中进一步描述了这些构思。本概要不意在识别所要求保护的主题的关键特征或必要特征,也不意在被用作确定所要求保护主题的范围的辅助。
隐私摄像机(privacy camera)(如,包括摄像机阵列的光场摄像机或RGBZ(RGB+深度)摄像机)用于按照选择的隐私模式来捕获图像和显示图像。隐私模式可以包括模糊背景模式和背景替换模式。感兴趣区域和/或(一个或多个)感兴趣对象(例如,在前景中的一个或多个人)被确定,并且隐私摄像机被配置成(例如,依赖于摄像机的类型)清晰示出感兴趣区域/对象和按照所选择的隐私模式的背景。所显示的图像包括清晰示出的(例如,在焦点上的)感兴趣区域/(一个或多个)对象以及组合图像的背景中被示为具有有限景深的(例如,模糊的/未在焦点上的)任何对象和/或被另一图像和/或填充物替换的背景。隐私摄像机还可以用于确定对于场景中的对象的深度估计。
附图说明
图1示出了用于使用隐私摄像机的系统;
图2示出了在光场摄像机中使用的摄像机阵列的示范性排列;
图3A和3B图示了示出非隐私模式和隐私模式的示范性显示;
图4和5示出了使用摄像机设备来创建隐私模式的说明性过程;
图6图示了使用隐私摄像机的视频会议系统;
图7示出了联网环境,在所述联网环境中可以实现实施例;
图8图示了用于隐私摄像机的示范性系统;以及
图9-11和相关联的描述提供了对各种各样操作环境的论述,在所述操作环境中可以实践本发明的实施例。
具体实施方式
现在参照附图,将描述各种实施例,其中同样的标号表示同样的单元。
图1示出了用于使用隐私摄像机的系统。如所图示的,系统100包括应用程序110、摄像机管理器26和包括隐私摄像机120的触摸屏输入设备/显示器110。
为了促进与摄像机管理器26的通信,可以实现一个或多个回调例程。按照一个实施例,应用程序110是视频会议应用程序,诸如,MICROSOFT LYNC。应用程序可以是利用使用隐私模式的成像特征的其它程序。如所图示的,应用程序110被配置成接收来自触敏输入设备110和/或其它输入设备的输入。例如,话音输入、键盘输入(例如,物理键盘和/或SIP)以及基于视频的输入等等。例如,摄像机管理器26可以响应于选择用户界面元素、选择感兴趣区域/对象、与内容进行交互的用户手势和其它基于触摸的手势,向应用110提供信息。例如,手势可以包括但不限于:捏合(pinch)手势;展开(stretch)手势;选择手势(例如,在所显示的元素上的轻击动作);选择和保持手势(例如,在所显示的元素上接收的轻击和保持手势);滑动(swiping)动作和/或拖拽动作;等等。
所图示的系统100包括触摸屏输入设备/显示器110,触摸屏输入设备/显示器110检测何时接收到触摸输入(例如,手指触摸到或几乎触摸到触摸屏)。可以使用对用户的触摸输入加以检测的任何类型的触摸屏。例如,触摸屏可以包括检测触摸输入的一层或多层电容性材料。附加于或代替电容性材料,也可以使用其它传感器。例如,可以使用红外(IR)传感器。按照实施例,触摸屏被配置成检测与可触摸表面接触的或在可触摸表面上方的对象。虽然在本说明中使用了术语“上方”,但应当理解,触摸板系统的取向是无关的。术语“上方”意在适用于所有的这样的取向。触摸屏可被配置成确定接收到触摸输入的位置(例如,起始点、中间点和结束点)。在可触摸表面与对象之间的实际接触可以通过任何适当的手段来检测,包括例如由耦合到触摸板的振动传感器或麦克风来检测。用于检测接触的传感器示例的非详尽列表包括基于压力的机构、微机械加速度计、压电器件、电容性传感器、电阻性传感器、电感性传感器、激光振动计和LED振动计 。
隐私摄像机120被配置成记录图像并且包括隐私模式,所述隐私模式显示在焦点上的感兴趣区域/(一个或多个)对象和未在焦点上的(例如,模糊的)其它对象(比如背景中的对象)和/或用图像/填充物替换的背景。按照实施例,隐私摄像机120是光场(全光(plenoptic))摄像机,光场摄像机使用摄像机的微透镜阵列(例如,3x2,3x3,…)来捕获场景的4D光场(参见针对示范性摄像机阵列的图2)。还可以使用其他传感器/(一个或多个)摄像机来实现隐私摄像机120。例如,隐私摄像机120可以是RGBZ摄像机(单传感器RGBZ、诸如MICROSOFT KINECT之类的双传感器RGB+深度等等)。按照实施例,摄像机管理器26 修正从光场摄像机的不同摄像机得到的图像,并确定感兴趣区域/对象(例如,在前景中的一个或多个人)。摄像机管理器26然后把隐私摄像机120配置成具有有限的景深,有限的景深包括检测到的感兴趣区域/(一个或多个)对象。按照实施例,在配置隐私摄像机120后,创建可视区域152,其中在可视区域内的(一个或多个)对象(例如,视频参加者121)被清晰地示出,而在非可视区域154内的对象(如,在视频参加者121后面示出的白板122)由于有限的景深而被散焦地示出(例如,模糊)。按照另一个实施例,背景可以用图像(例如,用户选择的和/或预定的)和/或填充物(例如,背景的平均)替换。摄像机管理器26组合来自不同摄像机的图像以创建单个图像,单个图像包括清晰示出的(例如,在焦点上的)感兴趣的对象和模糊示出的(例如,未在焦点上的)背景中的任何对象和/或用填充物/图像替换的背景。当使用多个摄像机时,背景中的对象由于不同摄像机传感器之间的距离而表现为被模糊化。代替尝试使用背景分割来模糊背景,从光场摄像机得到的不同图像的组合产生了模糊效果。通常,在光场中包括的摄像机越多,在非可视区域150(例如,背景)中的对象表现得越模糊(见图3)。隐私摄像机120还可以被摄像机管理器用来确定场景中对象的深度估计。例如,可以使用光场中的一对摄像机来确定深度估计。可以使用另一距离测量设备来确定深度估计(例如,测量飞行时间(time of flight))。相较于由计算设备使用的单个摄像机(如,典型地包括在平板(slate)设备、移动电话、台式计算机等等上的单个摄像机),光摄像机还提供更好的信噪比(SNR)。由于背景模糊和/或背景替换,所以还可以减小所使用的带宽。按照实施例,用户可以选择不同的隐私模式,使用用户界面元素(例如,按钮、滑块)去改变在背景中示出的细节量和/或选择在背景的显示中使用的填充物/图像。下文提供了更多的细节。
图2示出了在光场摄像机中使用的摄像机阵列的示范性排列。如所图示的,图2示出了阵列210、阵列220、阵列240和阵列250。
按照实施例,摄像机是来自OMNIVISION的具有1/13 英寸的光学格式(optical format)的OV7690 VGA图像传感器,OV7690 VGA图像传感器各自的尺寸定为2.5x2.5x2.5mm。可以使用其它的摄像机。例如,也可以使用720p摄像机,诸如OMNIVISION OVM2722,其各自的尺寸定为4.0x3.0x2.5mm。通常,根据所希望的分辨率、尺寸和价格点来选择摄像机。可以使用拜尔(Bayer)滤镜和/或某种其它滤镜(例如,R、G、B、W的混合)。摄像机的阵列适应于小的区域,并且可以被布置在当今普通的电子计算设备的框架内(例如,笔记本、平板(tablet)、电话和台式网络摄像头等等)。另外,这些不同的摄像机典型地是便宜的。
阵列210示出了被布置在基座上的六个摄像机(211-216)的3x2阵列。按照实施例,由不同的阵列使用的基座小于30mm x 30mm,使得基座可以容易地被合并到移动计算设备中。按照实施例,六个摄像机被排列成阵列,所述阵列具有从摄像机211的中心到摄像机213的中心约20mm的总宽度和从摄像机211的中心到摄像机214的中心约10mm的高度。阵列210可被配置成用于小型便携式电子设备,如,笔记本、平板和/或电话。
阵列220示出了六个摄像机(241-249)的3x3阵列。按照实施例,九个摄像机被排列成阵列,所述阵列具有从摄像机241的中心到摄像机243的中心约20mm的总宽度和从摄像机241的中心到摄像机247的中心约20mm的高度。按照实施例,阵列220可被配置成用于稍稍更大的电子设备,诸如台式网络摄像头。
阵列230示出了六个摄像机(221-235)的5x3阵列。按照实施例,十五个摄像机被排列成阵列,所述阵列具有从摄像机221的中心到摄像机225的中心约30mm的总宽度和从摄像机221的中心到摄像机231的中心约20mm的高度。
阵列230示出了摄像机(1-N)的NxN阵列。按照实施例,根据对于摄像机的所希望的宽度和高度将摄像机排列成阵列。
阵列中的每个摄像机被配置成向摄像机管理器26提供图像。由于阵列内包含多个摄像机,所以摄像机中的一个或多个内像素的故障率可以根据阵列中其它的摄像机而被补偿。在阵列内摄像机中的一个或多个也可能出故障,而同时仍旧提供隐私模式。
图3A和图3B说明了示出非隐私模式和隐私模式的示范性显示。如所图示的,图3A包括显示300、显示310和显示320。
显示300示出了示范性显示,其示出了在不具有对摄像机有效的隐私模式的情况下场景的图像。可以看出,在场景中的每个对象是清晰可见的和易辨认的。
显示310示出了使用隐私模式显示的示范性场景。可以看出,由于有限的景深,与感兴趣对象(视频参加者)相比,背景中的对象(311,312)没有以焦点对准的方式示出(例如,是模糊的)。
显示320示出了使用隐私模式显示的示范性场景。可以看出,与感兴趣对象(视频参加者)相比,背景中的对象(321,322)没有以焦点对准的方式示出。与显示310中的背景对象相比,显示320中的背景对象表现得更模糊。可以使用如下的方式来产生更大的模糊效果,即:在隐私摄像机中使用更大的摄像机阵列和/或在阵列中具有不同的摄像机间隔。
图3B示出了用填充物和图像来替换背景。如所图示的,图3B包括显示330和显示340。
显示330示出了使用隐私模式显示的示范性场景,其中背景被示为带有填充物335。可以看出,背景中的对象(例如,参见显示310中的311、312)被填充物 335覆盖,而留下感兴趣对象(视频参加者)被清晰地示出。按照实施例,填充物 335是背景对象的平均。也可以使用其它的填充物/填充图案。例如,可以(例如,自动地/手动地)选择预定义的和/或用户选择的填充图案。
显示340示出了使用隐私模式显示的示范性场景,其中背景被替换成背景图像345。可以看出,背景中的对象(例如,参见显示310中的311、312)被背景图像345覆盖,而留下感兴趣对象(视频参加者)被清晰地示出。可以自动地/手动地确定背景图像345。例如,用户可以选择背景图像345。可以使用不同的背景图像和/或填充物。例如,对于与家庭成员的视频会议可以使用巴黎的背景图像,对于安全的商务会议可以选择纯色的(solid)背景,和/或对于不太安全的商务会议可以选择背景模糊。
图4和图5示出了使用摄像机设备来创建隐私模式的说明性过程400和500。当阅读本文给出的对例程的论述时,应当意识到,各种实施例的逻辑操作被实现为(1)在计算系统上运行的一系列计算机实现的动作或程序和/或(2)在计算系统内互连的机器逻辑电路或电路模块。实现方案是依赖于实现本发明的计算系统的性能需求而进行选择的问题。因此,所说明的并且组成本文描述的实施例的逻辑操作被不同地称为操作、结构设备、动作或模块。可以用软件、固件、专用数字逻辑及其任意组合来实现这些操作、结构设备、动作和模块。
图4示出了在视频会议中使用隐私摄像机的示例,所述隐私摄像机使用不同的隐私模式。
在启动操作后,过程移动到操作410,在操作410检测视图中的人。例如,可以从隐私摄像机确定人的深度,可以确定这些人的面部的取向,等等。按照实施例,确定在预定区域内的每个用户(例如,在隐私摄像机的预定距离内的一个或多个人)和正在参加视频会议的每个用户。
流动到判定操作420,确定隐私模式。隐私模式可以:模糊背景;替换背景;或关闭(例如,不进行模糊,或不进行背景替换)。可以手动地/自动地确定隐私模式。在确定所选择的隐私模式时可以使用不同的信息。用户隐私优选项412可以包括针对一个或多个用途的不同的优选项,所述不同的优选项定义了何时选择隐私模式和当隐私模式被设置为背景替换时选择什么图像/填充物。在确定隐私模式时也可以使用呼叫信息(call information)414(例如,参加人、呼叫位置、设备类型)。例如,优选项412和/或呼叫信息414可以规定:公司内组内会议使用隐私模式M1;公司内组间会议使用模式M2;公司间会议使用模式M3;与某人X的会议使用模式M4;从我的智能电话进行的会议使用模式M5;以及来自家庭的个人呼叫使用模式M6;等等。按照实施例,每个隐私模式可以具有定制的(custom)模糊设置和背景(用于家庭成员的巴黎、用于安全的商务会议的纯色背景、用于不太安全的商务会议的背景模糊、用于商务小组会议的阴影线背景……)。
当所确定的隐私模式是背景替换时,过程移动到操作430,在操作430,确定最小/最大前景深度,并且用图像和/或填充物替换背景。例如,可以通过检测参加视频会议的(一个或多个)人来自动确定前景深度(最小、最大),和/或通过接收来自用户的选择而手动地确定前景深度(最小、最大)。按照实施例,对于背景替换,使用面部检测器/人跟踪器和深度估计,根据在视场(FOV)中的人数和他们各自的深度,动态地设置前景/背景分割。使用所确定的背景图像/填充物来替换未被确定为处于前景中的背景。
当所确定的隐私模式是背景模糊时,过程移动到操作440。在确定前景后,背景被模糊。可以不同量地模糊背景(例如,从稍微模糊到非常模糊)。按照实施例,当背景模糊是隐私模式时,使用面部检测器/人跟踪器和深度估计,根据FOV中的人数以及他们各自的深度,动态地设置景深(DOF)。不同类型的隐私摄像机不同地执行背景模糊和背景替换。例如,光场摄像机对于背景模糊不使用深度,但是对于背景替换使用深度信息,而RGB+深度摄像机对于背景模糊和对于背景替换都使用深度。
图5示出了使用隐私摄像机的另一过程。
在启动操作后,过程移动到操作510,在操作510接收图像。按照实施例,从光场(全光)摄像机接收图像,光场(全光)摄像机使用摄像机的微透镜阵列(例如,3x2,3x3……)来捕获场景的4D光场。摄像机可以用于单图像应用和/或多图像应用(例如,视频会议)。按照实施例,摄像机是低成本的且小的,使得摄像机的阵列可以被包括在移动个人计算设备(例如,笔记本、平板、电话……)内。
流动到操作520,修正图像来将得到的图像转换成普通图像,以便计及(account for)摄像机的空间关系。
移动到操作530,确定一个或多个感兴趣区域/对象。例如,在视频会议应用中,视频会议参加者典型地是感兴趣对象。通常,感兴趣区域/对象是被确定为让摄像机聚焦的对象。可以自动地/手动地确定感兴趣的区域/对象。例如,可以使用面部检测和面部取向方法来自动检测感兴趣对象(例如,人)。用户也可以选择图像中的某个对象来聚焦(例如,触摸和/或某种其它输入方法)。
转移到操作540,当已确定时,隐私摄像机被重新聚焦。例如,当隐私摄像机是光摄像机时,则不进行重新聚焦。当隐私摄像机是RGB+深度摄像机(或某种类似的摄像机)时,则将(一个或多个)摄像机重新聚焦以聚焦到所确定的感兴趣区域/对象。
流动到操作550,得到图像。
移动到操作560,从得到的图像创建组合的图像。组合的图像创建了单个图像,所述单个图像清晰地示出了感兴趣对象(和具有相同焦距的其它对象),而未在焦点上的对象被模糊地示出和/或被填充物/背景替换。可以通过组合来自排列成阵列的摄像机的图像而自动产生模糊的效果。通常,改变阵列中摄像机的数目和/或改变摄像机的空间关系便改变了组合图像中的模糊量(例如,越多的摄像机通常对于未被聚焦的对象产生越多的模糊)。
转移到操作570,显示图像。按照实施例,在视频会议应用中显示图像。
过程然后移动到结束操作,并且返回到处理其它动作。
图6图示了使用隐私摄像机的视频会议系统600。
在视频捕获系统中,一个或多个摄像机652捕获视频会议中的参加者的视频图像。摄像机652可以与显示器654合并,显示器654用于显示视频信号,诸如一个或多个进入的视频馈送。按照实施例,摄像机中的至少一个是光场摄像机,所述光场摄像机包括排列成阵列的至少六个摄像机。视频会议管理模块650可以用于管理视频图像的显示和接收/发送,并且可以包括如本文描述的摄像机管理器26的功能性。例如,模块650可以用于选择进入的视频馈送。模块650还可以用于对进入/外出的视频执行视频处理。例如,模块650可以用于改进图像质量,如,通过调节视频帧的感兴趣的人或区域的曝光和/或增益来增强那个部分。声源定位检测器642、多人检测器644和活跃发言人检测器646使用音频和/或视觉线索来选择感兴趣区域和/或感兴趣对象。声源定位检测器642使用音频特征(如,来自多个麦克风的声音检测)来检测多个人中发言人的位置。多人检测器644使用运动特征和图像特征(如,人的轮廓、面部识别等等)来确定发言人。活跃发言人检测器646使用声源定位特征、运动特征和图像特征来检测当前的发言人。当视频馈送示出了发言人时,模块650可以确定去更频繁地加亮显示器654上某个进入馈送的视频显示。例如,相较于其他进入馈送的显示,可以将发言人的视频馈送在显示器654上更大地显示。可以在显示器654上逐个地、分层地以及以某个模式等等显示进入的视频馈送。按照一个实施例,可以选择要在显示器654上显示的馈送。模块650可以被实现为硬件、软件或二者的组合。
图7示出了其中可以实现实施例的联网环境。参加视频会议的位置中的一个或多个可以包括如上所述的摄像机设备(例如120)。
这样的系统可包括服务器、客户端、互联网服务供应商和通信介质的任何拓扑。另外,系统可以具有静态或动态拓扑。虽然实现实施例的联网系统可能涉及到更多的构件,但是结合此附图论述了相关的构件。
可以执行视频会议应用,并且在设备781-784中呈现视频。设备中的一个或多个可以包括本文所述的光场摄像机和/或RGB+深度(结构化的光、立体、飞行时间)摄像机,以创建隐私模式。按照另一个实施例,可以使用具有小于或等于大约1的f/#的单个摄像机来创建隐私模式。例如,1080p网络摄像头可以包括透镜,所述透镜有f/# ≤ 1、电机械可调节孔径、电机械可调节焦距和VFOV=600(例如,以便捕获身体姿势)。摄像机还可以包括测距仪(range finder)(例如,超声波)。有低f/# 的透镜具有小的景深(DOF)。可以使用孔径来调节DOF,使得摄像机可以具有有大DOF的“正常模式”和有小DOF的“隐私模式”。使用隐私模式(例如,f/# ≤ 1)增加了SNR,因为有较小f/#的透镜比起有较高f/#的透镜得到更多的光。
如果视频应用是通信应用(或服务)的一部分,则该应用或服务可以由一个或多个服务器(例如,服务器785)管理。生成的视频的一部分或全部可以被存储,而不是被即时呈现。在此情形下,可以将视频文件存储在数据存储库(如,数据存储库788)中,并随后通过数据库服务器786提供给设备中的(一个或多个)视频应用或由(一个或多个)视频应用直接取回。
(一个或多个)网络780可以包括诸如企业网络之类的安全网络、诸如无线开放网络之类的非安全网络或互联网。(一个或多个)网络780提供本文描述的节点之间的通信。作为示例,而不是限制,(一个或多个)网络780可以包括诸如有线网或直接有线连接之类的有线介质以及诸如声学、RF、红外和其它无线介质之类的无线介质。
可以采用计算设备、应用、数据源、数据分发系统的许多其它配置来实现视频会议系统。此外,在图7中论述的联网环境仅仅是用于说明的目的。实施例不限于示例的应用、模块或过程。
图8图示了使用隐私摄像机的示范性系统。如所图示的,系统100包括服务1010、数据存储库(store)1045、包括隐私摄像机1002的触摸屏输入设备/显示器1050(例如,平板)和包括隐私摄像机1001的智能电话1030。
如所图示的,服务1010是基于云和/或基于企业的服务,所述基于云和/或基于企业的服务可以被配置成提供服务,如,视频会议服务(例如MICROSOFT LYNC,SKYPE)、电子消息传送服务(例如MICROSOFT EXCHANGE/OUTLOOK)、生产力服务(例如MICROSOFT OFFICE 365)或某种其它的基于云的/在线的服务。可以使用不同类型的输入/输出与服务交互。例如,用户可以使用触摸输入、基于硬件的输入和语音输入等等。服务可以提供语音输出,所述语音输出组合了预先记录的语音和合成的语音。由服务1010提供的服务/应用中一个或多个服务/应用的功能性还可以被配置为基于客户端/服务器的应用。虽然系统1000示出了与消息传送应用有关的服务,然而可以配置其它服务/应用。
如所图示的,服务1010是多租客服务,所述多租客服务向任意数目的租客(例如,租客1-N)提供资源1015和服务。多租客服务1010是基于云的服务,所述基于云的服务向预订服务的租客提供资源/服务1015,并单独地维护每个租客的数据且保护每个租客的数据远离其它租客数据。
如所图示的系统1000包括触摸屏输入设备/显示器1050(例如,平板/板式设备)和智能电话1030,其检测何时已接收到触摸输入(例如,手指触摸到或几乎触摸到触摸屏)。可以使用检测用户的触摸输入的任何类型的触摸屏。例如,触摸屏可包括检测触摸输入的一层或多层电容性材料。附加于电容性材料或代替电容性材料,可以使用其它传感器。例如,可以使用(一个或多个)红外(IR)传感器。按照实施例,触摸屏被配置成检测与可触摸表面接触的或在可触摸表面上方的对象。虽然在本说明中使用了术语“上方”,然而应理解触摸板系统的取向是无关的。术语“上方”意在适用于所有的这样的取向。触摸屏可以被配置成确定接收到触摸输入的位置(例如,起始点、中间点和结束点)。可触摸表面与对象之间的实际接触可以通过任意适当的手段检测,包括例如由耦合到触摸板的振动传感器或麦克风来检测。用于检测接触的传感器示例的非详尽列表包括:基于压力的机构、微机械加速度计、压电器件、电容性传感器、电阻性传感器、电感性传感器、激光振动计和LED振动计。
按照实施例,智能电话1030和触摸屏输入设备/显示器1050被配置有利用如本文描述的隐私摄像机的视频应用。
如所图示的,触摸屏输入设备/显示器1050和智能电话1030示出了示范性显示1052/1032,示范性显示1052/1032示出了视频会议应用的使用。显示1052示出了从隐私摄像机的图像创建的隐私视图,其中视频参加者被清晰地示出,而背景对象被模糊化。显示1032示出了使用隐私摄像机创建的隐私视图,其中视频参加者被清晰地示出,而背景被图像/填充物替换。数据可被存储在设备(例如,智能电话1030、平板1050)上和/或存储在某个其它位置(例如,网络数据存储库1045)。由设备使用的应用可以是基于客户端的应用、基于服务器的应用、基于云的应用和/或某种组合。
摄像机管理器26被配置成执行涉及如本文所述的创建隐私视图的操作。虽然管理器26被示为在服务1010内,但管理器的功能性可以包含在其它位置(例如,在智能电话1030和/或平板设备1050上)。
本文描述的实施例和功能性可以经由众多计算系统来操作,包括有线和无线计算系统、移动计算系统(例如,移动电话、平板或板式类型计算机、膝上型计算机等等)。另外,本文描述的实施例和功能性可以在分布式系统上操作,其中应用功能性、存储器、数据存储和取回以及各种处理功能可以在诸如互联网或内联网之类的分布式计算网上彼此远程地操作。可以经由机载(on-board)计算设备显示器或经由与一个或多个计算设备相关联的远程显示单元来显示各种类型的用户界面和信息。例如,可以在某个墙面上显示各种类型的用户界面和信息并与之交互,各种类型的用户界面和信息被投影在所述墙面上。与可以通过其实践本发明实施例的众多计算系统的交互包括:键击输入、触摸屏输入、话音或其它音频输入、手势输入,其中相关联的计算设备配备有检测(例如,摄像机)功能性以用于捕获和解译用于控制计算设备的功能性的用户手势等等。
图9-11和相关联的描述提供了其中可以实践本发明的实施例的各种操作环境的论述。然而,关于图9-11图示出和论述的设备和系统是为了示例和说明的目的,而不是限制可被利用于实践本文描述的本发明实施例的大量计算设备配置。
图9是图示出了计算设备1100的示例性物理构件的框图,通过计算设备1100可以实践本发明的实施例。下面描述的计算设备构件可以适合于上述的计算设备。在基本配置中,计算设备1100可以包括至少一个处理单元1102和系统存储器1104。依赖于计算设备的配置和类型,系统存储器1104可以包括但不限于易失性存储器(例如,随机存取存储器(RAM))、非易失性存储器(例如,只读存储器(ROM))、闪存或任何组合。系统存储器1104可以包括操作系统1105、一个或多个编程模块1106,并且可以包括web浏览器应用1120。操作系统1105例如可以适合于控制计算设备1100的操作。在一个实施例中,编程模块1106可以包括安装在计算设备1100上的如上所述的摄像机管理器26。而且,本发明的实施例可以结合图形库、其它操作系统或任何其它应用程序被实施,而不限于任何特定的应用或系统。图9中由虚线1108内的那些构件示出了这种基本配置。
计算设备1100可以具有附加的特征或功能性。例如,计算设备1100还可以包括附加的数据存储设备(可移除和/或非可移除的),诸如,举例而言磁盘、光盘或磁带。这样的附加存储装置由可移除存储装置1109和非可移除存储装置1110图示出。
如上所述,多个程序模块和数据文件,包括操作系统1105,可被存储在系统存储器1104中。当在处理单元1102上执行时,诸如管理器之类的编程模块1106可以执行处理,所述处理包括例如与上述方法有关的操作。上述处理是示例,且处理单元1102可以执行其它处理。按照本发明的实施例可以使用的其它编程模块可以包括视频会议应用、成像应用、电子邮件和联系人应用、文字处理应用、电子表格应用、数据库应用、幻灯片演示(slide presentation)应用、绘图或计算机辅助应用程序等等。
通常,与本发明的实施例一致,程序模块可以包括例程、程序、构件、数据结构和可以执行特定的任务或可以实现特定的抽象数据类型的其它类型的结构。而且,可以通过其它计算机系统配置来实践本发明的实施例,其它计算机系统配置包括手持式设备、多处理器系统、基于微处理器的或可编程的消费电子设备、小型计算机(minicomputer)和大型计算机等等。还可以在分布式计算环境中实践本发明的实施例,在分布式计算环境中任务由通过通信网链接的远程处理设备执行。在分布式计算环境下,程序模块可以位于本地记忆体存储设备和远程记忆体存储设备两者中。
而且,可以在电路中实践本发明的实施例,电路包括分立的电子元件、包含逻辑门的封装式或集成式电子芯片、利用微处理器的电路,或者可以在包含电子元件或微处理器的单个芯片上实践本发明的实施例。例如,可以经由单片系统(SOC)实践本发明的实施例,在单片系统(SOC)中图9所图示的每个或许多部件可以被集成在单个集成电路上。这样的SOC器件可以包括一个或多个处理单元、图形单元、通信单元、系统虚拟化单元和各种应用功能性,所有的这些都被集成(或“烧制”)在芯片基板上作为单个集成电路。当经由SOC进行操作时,可以经由与计算设备/系统1100的其它部件一起集成在单个集成电路(芯片)上的特定于应用的逻辑来操作本文描述的关于管理器26的功能性。还可以使用能够执行逻辑操作(诸如,举例而言与(AND)、或(OR)和非(NOT))的其他技术来实践本发明的实施例,其它技术包括但不限于机械、光学、流体和量子技术。另外,可以在通用计算机内或在任何其它电路或系统中实践本发明的实施例。
本发明的实施例,例如,可以被实现为计算机过程(方法)、计算系统,或实现为制造品,如,计算机程序产品或计算机可读介质。计算机程序产品可以是计算机系统可读的计算机存储介质,其编码指令的计算机程序用于执行计算机过程。
如本文使用的术语计算机可读介质可以包括计算机存储介质。计算机存储介质可以包括以任意方法或技术来实现以存储诸如计算机可读指令、数据结构、程序模块或其它数据等信息的易失性和非易失性、可移除和非可移除介质。系统存储器1104、可移除存储装置1109和非可移除存储装置1110都是计算机存储介质示例(即,记忆体储存器)。计算机存储介质可以包括但不限于:RAM、ROM、电可擦只读存储器(EEPROM)、闪存或其它存储技术、CD-ROM、数字通用盘(DVD)或其它光学存储装置、盒式磁带、磁带、磁盘存储装置、或其它磁存储设备;或可以用于存储信息并且可以被计算设备1100访问的任何其它介质。任何这样的计算机存储介质可以是设备1100的一部分。计算设备1100还可以具有(一个或多个)输入设备1112,诸如键盘、鼠标、笔、声音输入设备、触摸输入设备等等。诸如显示器、扬声器、打印机等等的(一个或多个)输出设备1114也可以被包括在内。上述的设备都是示例,也可以使用其它设备。
摄像机和/或某种其它传感设备可以操作用于记录一个或多个用户并捕获由计算设备的用户作出的运动和/或手势。传感设备还可以操作用于例如通过麦克风去捕获所讲的话和/或例如通过键盘和/或鼠标去捕获来自用户的其它输入(未用图表示)。传感设备可以包括能够检测用户移动的任何运动检测设备。例如,摄像机可以包括MICROSOFT KINECT®运动捕获设备,MICROSOFT KINECT®运动捕获设备包括多个摄像机和多个麦克风。摄像机也可以是如本文描述的光场摄像机。
如本文使用的术语计算机可读介质还可以包括通信介质。通信介质可以由计算机可读指令、数据结构、程序模块、或在诸如载波或其它传送机制等的调制的数据信号中的其它数据来体现,并且通信介质包括任何信息传递介质。术语“调制的数据信号”可以描述如下的信号,即:所述信号的一个或多个特性被以如此方式设置或改变以致将信息编码在信号中。作为示例,但不是限制,通信介质可包括诸如有线网或直接的有线连接的有线介质,以及诸如声学、射频(RF)、红外和其它无线介质的无线介质。
图10A和10B示出了可以通过其实践本发明的实施例的适当的移动计算环境,例如,移动电话、智能电话、平板个人计算机和膝上型计算机等等。参考图10A,图示了用于实现实施例的示例移动计算设备1200。在基本配置中,移动计算设备1200是既具有输入单元又具有输出单元的手持计算机。输入单元可以包括允许用户把信息输入到移动计算设备1200的触摸屏显示器1205和输入按钮1215。移动计算设备1200还可以合并允许进一步的用户输入的可选的侧边输入元件1215。可选的侧边输入元件1215可以是旋转开关、按钮、或任何其它类型的手动输入元件。在备选实施例中,移动计算设备1200可以合并更多或更少的输入单元。例如,在某些实施例中,显示器1205可以不是触摸屏。在另外的备选实施例中,移动计算设备是便携式电话系统,诸如具有显示器1205和输入按钮1215的蜂窝电话。移动计算设备1200还可以包括可选的小键盘1235。可选的小键盘1215可以是物理小键盘或在触摸屏显示器上生成的“软的”小键盘。
移动计算设备1200合并了诸如显示器1205之类的输出单元,输出单元可以显示图形用户界面(GUI)。其它输出单元包括扬声器1225和LED灯1220。另外,移动计算设备1200可以包含振动模块(未示出),振动模块使得移动计算设备1200振动以将事件通知给用户。在另一个实施例中,移动计算设备1200可以合并耳机插孔(未示出)以提供另一种手段来提供输出信号。
虽然本文是结合移动计算设备1200描述的,但在备选实施例中,本发明可以与任何数目的计算机系统结合使用,如,在台式环境、膝上型或笔记本计算机系统、多处理器系统、基于微处理器的或可编程的消费电子设备、网络PC、小型计算机和大型计算机等等中使用。还可以在分布式计算环境下实践本发明的实施例,其中在分布式计算环境下任务由通过通信网络链接的远程处理设备执行;程序可以位于本地记忆体存储设备和远程记忆体存储设备两者中。总之,具有多个环境传感器、用于向用户提供通知的多个输出元件和多个通知事件类型的任何计算机系统可以合并本发明的实施例。
图10B是示出了在一个实施例中使用的移动计算设备(如,图10A所示的计算设备)的构件的框图。也就是说,移动计算设备1200可以合并系统1202以实现某些实施例。例如,可以在实现“智能电话”时使用系统1202,“智能电话”可以运行与台式计算机或笔记本计算机的那些应用(例如,演示应用、浏览器、电子邮件、日程安排、即时消息传送和媒体播放器应用)类似的一个或多个应用。在某些实施例中,系统1202被集成为计算设备,如,集成的个人数字助理(PDA)和无线语音。
一个或多个应用程序1266可被加载到存储器1262中,并且可以在操作系统1264上或与操作系统1264相关联地运行。应用程序的示例包括电话拨号器程序、电子邮件程序、PIM(个人信息管理)程序、文字处理程序、电子表格程序、互联网浏览器程序和消息传送程序等等。系统1202还包括在存储器1262内的非易失性存储装置1268。非易失性存储装置1268可以用于存储在系统1202断电时不应当丢失的永久性信息。应用1266可以使用非易失性存储装置1268中的信息,如,由电子邮件应用使用的电子邮件或其他消息等等,和在非易失性存储装置1268中存储所述信息。同步应用(未示出)也可以驻留在系统1202上,并且被编程为与驻留在主计算机上的相应同步应用交互,以保持非易失性存储装置1268中存储的信息与主计算机处存储的相应信息同步。正如应当意识到的,其它应用可以被加载到存储器1262中,并且在包括如上所述的摄像机管理器26的设备1200上运行。
系统1202具有电源1270,电源1270可以被实现为一个或多个电池。电源1270还可包括外部电源,如,AC适配器或供电的对接支架,用来对电池进行补给或再充电。
系统1202还可以包括无线电1272,无线电1272执行发送和接收射频讯息的功能。无线电1272经由通信载波或服务供应商促进系统1202与 “外界”之间的无线连接性。去往和来自无线电1272的传输在OS 1264的控制下进行。换句话说,可以经由OS 1264将无线电1272接收的讯息传播到应用程序1266,并且反之亦然。
无线电1272允许系统1202例如通过网络与其它计算设备通信。无线电1272是通信介质的一个示例。通信介质典型地可以由计算机可读指令、数据结构、程序模块、或在调制的数据信号(如载波或其它传送机制)中的其它数据体现,并且通信介质包括任何信息传递介质。术语 “调制的数据信号”意味着如下的信号,即:所述信号的特性中的一个或多个被以如此方式设置或改变以致将信息编码在信号中。作为示例,但不是限制,通信介质包括诸如有线网或直接的有线连接之类的有线介质和诸如声学、RF、红外和其它无线介质之类的无线介质。如本文使用的术语计算机可读介质既包括存储介质又包括通信介质。
系统1202的这个实施例被示为具有两种类型的通知输出设备;可以用于提供视觉通知的LED 1220和可以与扬声器1225一起使用以提供音频通知的音频接口1274。这些设备可以直接耦合到电源1270,使得当这些设备被激活时,即使处理器1260和其它构件可能为了保存电池电力而关闭,这些设备对于由通知机构指定的持续时间仍旧保持开启。LED 1220可以被编程为在用户采取动作之前无限期地保持开启,以指示设备的加电状态。音频接口1274用于提供可听信号给用户和从用户处接收可听信号。例如,除了耦合到扬声器1225以外,音频接口1274还可以耦合到麦克风1220以接收音频输入,例如以便于电话会话。按照本发明的实施例,麦克风1220还可以用作音频传感器,以便于对通知的控制,如下面将描述的。系统1202还可以包括视频接口1276,视频接口1276使能机载摄像机1230(例如,摄像机120)的操作以记录静止图像和视频流等等。
实现系统1202的移动计算设备可以具有另外的特征或功能性。例如,设备还可以包括附加的数据存储设备(可移除和/或非可移除的),如,磁盘、光盘或磁带。这样的附加存储装置在图10B中被图示为存储装置1268。计算机存储介质可以包括以任意方法或技术来实现以存储诸如计算机可读指令、数据结构、程序模块或其它数据的信息的易失性和非易失性、可移除和非可移除介质。
可以将由设备1200生成或捕获并经由系统1202存储的数据/信息本地存储在设备1200上,正如上面描述的,或者该数据可以被存储在任意数目的存储介质上,设备可以经由无线电1272或经由设备1200和与设备1200相关联的分开的计算设备(例如,在诸如互联网之类的分布式计算网络中的服务器计算机)之间的有线连接来访问所述存储介质。应意识到,可以经由设备1200,经由无线电1272或经由分布式计算网络访问这样的数据/信息。类似的,可以容易地在计算设备之间转送这样的数据/信息,以便按照熟知的数据/信息转送和存储手段(包括电子邮件和协作的(collaborative)数据/信息共享系统)来存储和使用。
图11图示出了用于使用隐私摄像机的系统结构。
经由摄像机管理器26和/或其它过程来管理的构件可以以不同的通信信道或其它存储类型被存储。例如,可以使用目录服务1322、web门户1324、邮箱服务1326、即时消息传送存储库1328和社交网站1330,将构件连同根据其开发这些构件的信息一起存储。系统/应用26,1320可以使用这些类型的系统等等中的任何系统来使能对存储库1316中的构件进行管理和存储。服务器1332可以提供与视频会议和/或其他成像服务有关的通信和服务。服务器1332可以通过网络1308把web上的服务和内容提供给客户端。可以使用服务器1332的客户端的示例包括计算设备1302,计算设备1302可以包括任何通用个人计算机、平板计算设备1302和/或移动计算设备1306,移动计算设备1306可以包括智能电话。这些设备中的每一个可以包括包含如本文描述的隐私模式的摄像机。这些设备中的任何一个可以从存储库1316得到显示部件管理讯息和内容。
以上参照按照本发明的实施例的方法、系统和计算机程序产品的框图和/或操作说明,描述了本发明的实施例。在方框中标注的功能/动作可能不按任何流程图所示的次序来出现。例如,取决于所牵涉的功能性/动作,接连示出的两个方框实际上可以基本上同时执行,或者方框有时可以按照相反的次序执行。
以上的说明、示例和数据提供了对本发明的组成部分的制造和使用的完整描述。由于本发明的许多实施例可以在不背离本发明的精神和范围的情况下作出,所以本发明存在于此后所附的权利要求中。

Claims (10)

1.一种用于从隐私摄像机创建隐私模式的方法,包括:
确定在包括前景和背景的场景中的感兴趣对象;
从包括背景模糊和背景替换的隐私模式中确定一隐私模式;
当所确定的隐私模式是背景模糊时,通过如下方式来创建图像,即:设置隐私摄像机的有限景深,使得在前景中的该场景中的感兴趣对象在焦点上出现,而在背景中的该场景中的任何对象不在焦点上出现;
当所确定的隐私模式是背景替换时,通过以下方式来创建图像,即:将确定前景时使用的隐私摄像机的动态可调前景深度范围设置为包括场景中的感兴趣对象并用图像和填充物中的至少一项来替换背景;以及
显示所述图像。
2.权利要求1的方法,其中,隐私摄像机包括具有至少2x2的阵列尺寸的摄像机阵列。
3.权利要求1的方法,其中,使用用户隐私优选项和呼叫信息中的至少一项来确定隐私模式。
4.权利要求1的方法,其中,确定隐私模式还包括使用呼叫位置、面部检测与头部姿势以及设备类型中的至少一项。
5.权利要求1的方法,其中,使用用户隐私优选项、呼叫位置、设备类型、面部检测、头部姿势和呼叫参加者中的一项或多项来自动确定隐私模式。
6.权利要求1的方法,还包括:从隐私摄像机确定深度估计。
7.一种计算机可读介质,存储用以使用包括隐私模式的摄像机的计算机可执行指令,所述计算机可执行指令包括:
确定在由摄像机得到的场景的前景中的感兴趣区域;
从包括背景模糊和背景替换的隐私模式中确定一隐私模式;
当所确定的隐私模式是背景模糊时,通过如下方式来创建图像,即:设置摄像机的有限景深,使得在前景中的该场景中的感兴趣对象在焦点上出现,而在背景中的该场景中的任何对象不在焦点上出现;
当所确定的隐私模式是背景替换时,通过以下方式来创建图像,即:至少部分地根据场景中的多个人以及他们各自的深度,将确定前景时使用的摄像机的前景深度自动设置为包括场景中的感兴趣区域,并用图像和填充物中的至少一项来替换背景;以及
显示所述图像。
8.一种系统,包括:
处理器和存储器;
使用处理器执行的操作环境;
隐私摄像机,包括至少四个摄像机的阵列或RGBZ摄像机,所述至少四个摄像机被布置在基座上,在所述至少四个摄像机中每个摄像机的中心之间间隔至少5毫米;以及
摄像机管理器,被配置成执行动作,所述动作包括:
 自动确定在由隐私摄像机得到的场景的前景中的感兴趣区域;
 从包括背景模糊和背景替换的隐私模式中确定一隐私模式;
 当所确定的隐私模式是背景模糊时,通过如下方式来创建图像,即:设置隐私摄像机的有限景深,使得在前景中的该场景中的感兴趣对象在焦点上出现,而在背景中的该场景中的任何对象不在焦点上出现;
 当所确定的隐私模式是背景替换时,通过如下方式来创建图像,即:将确定前景时使用的隐私摄像机的前景深度设置为包括场景中的感兴趣区域,并用图像和填充物中的至少一项来替换背景;以及
 显示所述图像。
9.权利要求8的系统,其中,确定隐私模式包括:使用用户隐私优选项、呼叫位置、设备类型、面部检测和头部姿势以及会议类型中的一项或多项来自动选择隐私模式,所述会议类型包括公司内会议、组间会议和公司间会议。
10.权利要求8的系统,其中,用图像和填充物中的至少一项来替换背景包括:根据用户隐私优选项、呼叫位置、面部检测和头部姿势、设备类型、会议类型中的一项或多项来确定要使用的图像,所述会议类型包括公司内会议、组间会议和公司间会议。
CN201380067243.0A 2012-12-20 2013-12-19 具有隐私模式的摄像机 Active CN104982029B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201810100700.6A CN108234920B (zh) 2012-12-20 2013-12-19 具有隐私模式的摄像机
CN201810100712.9A CN108184086A (zh) 2012-12-20 2013-12-19 具有隐私模式的摄像机

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/723,008 US9124762B2 (en) 2012-12-20 2012-12-20 Privacy camera
US13/723008 2012-12-20
PCT/US2013/076647 WO2014100455A1 (en) 2012-12-20 2013-12-19 Camera with privacy modes

Related Child Applications (2)

Application Number Title Priority Date Filing Date
CN201810100700.6A Division CN108234920B (zh) 2012-12-20 2013-12-19 具有隐私模式的摄像机
CN201810100712.9A Division CN108184086A (zh) 2012-12-20 2013-12-19 具有隐私模式的摄像机

Publications (2)

Publication Number Publication Date
CN104982029A true CN104982029A (zh) 2015-10-14
CN104982029B CN104982029B (zh) 2018-03-30

Family

ID=49989895

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201810100700.6A Active CN108234920B (zh) 2012-12-20 2013-12-19 具有隐私模式的摄像机
CN201810100712.9A Pending CN108184086A (zh) 2012-12-20 2013-12-19 具有隐私模式的摄像机
CN201380067243.0A Active CN104982029B (zh) 2012-12-20 2013-12-19 具有隐私模式的摄像机

Family Applications Before (2)

Application Number Title Priority Date Filing Date
CN201810100700.6A Active CN108234920B (zh) 2012-12-20 2013-12-19 具有隐私模式的摄像机
CN201810100712.9A Pending CN108184086A (zh) 2012-12-20 2013-12-19 具有隐私模式的摄像机

Country Status (6)

Country Link
US (4) US9124762B2 (zh)
EP (1) EP2920958A1 (zh)
JP (1) JP2016506669A (zh)
KR (1) KR102174767B1 (zh)
CN (3) CN108234920B (zh)
WO (1) WO2014100455A1 (zh)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105825106A (zh) * 2015-11-30 2016-08-03 南京步步高通信科技有限公司 拍照加密查看方法和移动终端
CN106803920A (zh) * 2017-03-17 2017-06-06 广州视源电子科技股份有限公司 一种图像处理的方法、装置及智能会议终端
CN106878588A (zh) * 2017-02-27 2017-06-20 努比亚技术有限公司 一种视频背景虚化终端及方法
CN107623832A (zh) * 2017-09-11 2018-01-23 广东欧珀移动通信有限公司 视频背景替换方法、装置和移动终端
CN108141526A (zh) * 2015-10-30 2018-06-08 2Mee 有限公司 通信系统和方法
CN108174140A (zh) * 2017-11-30 2018-06-15 维沃移动通信有限公司 一种视频通信的方法和移动终端
CN108701196A (zh) * 2016-03-02 2018-10-23 高通股份有限公司 用户可控的屏幕隐私软件
CN110049233A (zh) * 2018-01-16 2019-07-23 佳能株式会社 图像处理设备、图像处理系统和图像处理方法
CN110519544A (zh) * 2019-08-30 2019-11-29 维沃移动通信有限公司 一种视频通话方法及电子设备
CN111033569A (zh) * 2017-08-18 2020-04-17 三星电子株式会社 使用深度图编辑图像的装置及其方法
CN111164955A (zh) * 2017-05-26 2020-05-15 流迅方案有限公司 通信事件
CN112770049A (zh) * 2020-12-30 2021-05-07 维沃移动通信有限公司 拍摄方法、装置及存储介质
CN112954210A (zh) * 2021-02-08 2021-06-11 维沃移动通信(杭州)有限公司 拍照方法、装置、电子设备及介质
US20220239848A1 (en) * 2021-01-26 2022-07-28 Dell Products, Lp System and method for operating an intelligent videoframe privacy monitoring management system for videoconferencing applications
US11417296B2 (en) 2018-03-13 2022-08-16 Sony Corporation Information processing device, information processing method, and recording medium
CN116915938A (zh) * 2023-09-11 2023-10-20 北京蓝耘科技股份有限公司 一种高安全性的云计算方法
WO2024087982A1 (zh) * 2022-10-28 2024-05-02 华为技术有限公司 一种图像处理方法及电子设备

Families Citing this family (116)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101214536B1 (ko) * 2010-01-12 2013-01-10 삼성전자주식회사 뎁스 정보를 이용한 아웃 포커스 수행 방법 및 이를 적용한 카메라
US9124762B2 (en) 2012-12-20 2015-09-01 Microsoft Technology Licensing, Llc Privacy camera
US9769365B1 (en) 2013-02-15 2017-09-19 Red.Com, Inc. Dense field imaging
WO2014175919A1 (en) 2013-04-26 2014-10-30 Intel IP Corporation Shared spectrum reassignment in a spectrum sharing context
US9420168B2 (en) * 2013-09-20 2016-08-16 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and storage medium
CN104469127B (zh) * 2013-09-22 2019-10-18 南京中兴软件有限责任公司 拍摄方法和装置
US10346624B2 (en) * 2013-10-10 2019-07-09 Elwha Llc Methods, systems, and devices for obscuring entities depicted in captured images
US10102543B2 (en) 2013-10-10 2018-10-16 Elwha Llc Methods, systems, and devices for handling inserted data into captured images
US10013564B2 (en) 2013-10-10 2018-07-03 Elwha Llc Methods, systems, and devices for handling image capture devices and captured images
US9799036B2 (en) 2013-10-10 2017-10-24 Elwha Llc Devices, methods, and systems for managing representations of entities through use of privacy indicators
US20150104004A1 (en) 2013-10-10 2015-04-16 Elwha Llc Methods, systems, and devices for delivering image data from captured images to devices
US10185841B2 (en) 2013-10-10 2019-01-22 Elwha Llc Devices, methods, and systems for managing representations of entities through use of privacy beacons
US9367939B2 (en) 2013-10-22 2016-06-14 Nokia Technologies Oy Relevance based visual media item modification
US9479730B1 (en) 2014-02-13 2016-10-25 Steelcase, Inc. Inferred activity based conference enhancement method and system
JP6320075B2 (ja) * 2014-02-19 2018-05-09 キヤノン株式会社 画像処理装置およびその制御方法
JP5835383B2 (ja) * 2014-03-18 2015-12-24 株式会社リコー 情報処理方法、情報処理装置、およびプログラム
CN104021350B (zh) * 2014-05-13 2016-07-06 小米科技有限责任公司 隐私信息隐藏方法及装置
CN105100671A (zh) * 2014-05-20 2015-11-25 西安中兴新软件有限责任公司 一种基于视频通话的图像处理方法和装置
KR101834530B1 (ko) * 2014-06-16 2018-04-16 한국전자통신연구원 동적 협업 서비스 플랫폼 및 상기 플랫폼에서 응용 서비스를 제공하는 방법
US9679194B2 (en) * 2014-07-17 2017-06-13 At&T Intellectual Property I, L.P. Automated obscurity for pervasive imaging
CN105407261A (zh) * 2014-08-15 2016-03-16 索尼公司 图像处理装置、方法以及电子设备
SG10201407100PA (en) * 2014-10-30 2016-05-30 Nec Asia Pacific Pte Ltd System For Monitoring Event Related Data
US10474842B2 (en) * 2014-11-07 2019-11-12 Sony Corporation Information processing system, storage medium, and control method
CN104378553A (zh) * 2014-12-08 2015-02-25 联想(北京)有限公司 一种图像处理方法及电子设备
US9881070B2 (en) 2014-12-12 2018-01-30 Microsoft Technology Licensing, Llc Controlling service functions in response to service instigation and service reactivation messages
US9826000B2 (en) 2014-12-12 2017-11-21 Microsoft Technology Licensing, Llc Effecting communication events
EP3035284A1 (en) 2014-12-19 2016-06-22 Thomson Licensing Method and apparatus for generating an adapted slice image from a focal stack
US9854226B2 (en) 2014-12-22 2017-12-26 Google Inc. Illuminator for camera system having three dimensional time-of-flight capture with movable mirror element
US9508681B2 (en) 2014-12-22 2016-11-29 Google Inc. Stacked semiconductor chip RGBZ sensor
US20160182846A1 (en) 2014-12-22 2016-06-23 Google Inc. Monolithically integrated rgb pixel array and z pixel array
US9918073B2 (en) 2014-12-22 2018-03-13 Google Llc Integrated camera system having two dimensional image capture and three dimensional time-of-flight capture with movable illuminated region of interest
US9648236B2 (en) 2015-02-19 2017-05-09 Blackberry Limited Device with a front facing camera having discrete focus positions
US9569697B1 (en) * 2015-02-19 2017-02-14 Google Inc. Object oriented image editing
US9955140B2 (en) 2015-03-11 2018-04-24 Microsoft Technology Licensing, Llc Distinguishing foreground and background with inframed imaging
US10440348B2 (en) 2015-03-24 2019-10-08 University Of Florida Research Foundation, Inc. Optical privatizing device, system and method of use
US10999499B2 (en) * 2015-03-25 2021-05-04 Avaya, Inc. Background replacement from video images captured by a plenoptic camera
JP6509027B2 (ja) * 2015-05-12 2019-05-08 キヤノン株式会社 被写体追跡装置、光学機器、撮像装置、被写体追跡装置の制御方法、プログラム
EP3101839A1 (en) * 2015-06-03 2016-12-07 Thomson Licensing Method and apparatus for isolating an active participant in a group of participants using light field information
EP3101838A1 (en) * 2015-06-03 2016-12-07 Thomson Licensing Method and apparatus for isolating an active participant in a group of participants
GB2539387B (en) 2015-06-09 2021-04-14 Oxford Metrics Plc Motion capture system
US10284558B2 (en) 2015-08-12 2019-05-07 Google Llc Systems and methods for managing privacy settings of shared content
JP6761230B2 (ja) * 2015-08-21 2020-09-23 キヤノン株式会社 画像処理装置、その制御方法、プログラム及び撮像装置
EP3151534A1 (en) * 2015-09-29 2017-04-05 Thomson Licensing Method of refocusing images captured by a plenoptic camera and audio based refocusing image system
US9881171B2 (en) 2015-11-16 2018-01-30 International Business Machines Corporation Privacy protecting sensing devices
US9948893B2 (en) * 2015-11-18 2018-04-17 Avaya Inc. Background replacement based on attribute of remote user or endpoint
US9911193B2 (en) 2015-11-18 2018-03-06 Avaya Inc. Semi-background replacement based on rough segmentation
CA3012889A1 (en) * 2016-01-29 2017-08-03 Kiwisecurity Software Gmbh Methods and apparatus for using video analytics to detect regions for privacy protection within images from moving cameras
JP6736916B2 (ja) * 2016-03-02 2020-08-05 株式会社リコー 情報処理装置、情報処理方法、及びプログラム
WO2017163323A1 (ja) * 2016-03-23 2017-09-28 株式会社オプティム 画面共有システム、画面共有方法、および画面共有プログラム
CN106060423B (zh) * 2016-06-02 2017-10-20 广东欧珀移动通信有限公司 虚化照片生成方法、装置和移动终端
US20170351336A1 (en) * 2016-06-07 2017-12-07 Stmicroelectronics, Inc. Time of flight based gesture control devices, systems and methods
US10447910B2 (en) 2016-08-04 2019-10-15 International Business Machines Corporation Camera notification and filtering of content for restricted sites
US10867445B1 (en) * 2016-11-16 2020-12-15 Amazon Technologies, Inc. Content segmentation and navigation
CN109983765A (zh) * 2016-12-05 2019-07-05 惠普发展公司,有限责任合伙企业 经由全方位相机的视听传输调整
EP3340624B1 (en) * 2016-12-20 2019-07-03 Axis AB Encoding a privacy masked image
US9854206B1 (en) * 2016-12-22 2017-12-26 TCL Research America Inc. Privacy-aware indoor drone exploration and communication framework
US11156901B2 (en) 2017-07-06 2021-10-26 Hewlett-Packard Development Company, L.P. Light shield shutters for cameras
US10623680B1 (en) * 2017-07-11 2020-04-14 Equinix, Inc. Data center viewing system
WO2019016971A1 (ja) * 2017-07-19 2019-01-24 日本電気株式会社 乗員数検知システム、乗員数検知方法、およびプログラム
AU2018321357B2 (en) * 2017-08-22 2021-12-16 Alarm.Com Incorporated Preserving privacy in surveillance
US10270986B2 (en) 2017-09-22 2019-04-23 Feedback, LLC Near-infrared video compositing
US10674096B2 (en) 2017-09-22 2020-06-02 Feedback, LLC Near-infrared video compositing
US10560645B2 (en) 2017-09-22 2020-02-11 Feedback, LLC Immersive video environment using near-infrared video compositing
CN110009555B (zh) * 2018-01-05 2020-08-14 Oppo广东移动通信有限公司 图像虚化方法、装置、存储介质及电子设备
JP7047394B2 (ja) * 2018-01-18 2022-04-05 セイコーエプソン株式会社 頭部装着型表示装置、表示システム、及び、頭部装着型表示装置の制御方法
EP3514760B1 (en) 2018-01-23 2020-06-17 Honda Research Institute Europe GmbH Method and system for privacy compliant data recording
CN108322646B (zh) * 2018-01-31 2020-04-10 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN108270973B (zh) * 2018-02-06 2020-06-30 Oppo广东移动通信有限公司 一种拍照处理方法、移动终端及计算机可读存储介质
CN108174109B (zh) * 2018-03-15 2020-09-25 维沃移动通信有限公司 一种拍照方法及移动终端
EP3564900B1 (en) 2018-05-03 2020-04-01 Axis AB Method, device and system for a degree of blurring to be applied to image data in a privacy area of an image
US20190349517A1 (en) * 2018-05-10 2019-11-14 Hanwha Techwin Co., Ltd. Video capturing system and network system to support privacy mode
CN110536097A (zh) 2018-05-25 2019-12-03 中兴通讯股份有限公司 一种视频控制方法、视频会议终端和多点控制单元mcu
US10762755B2 (en) * 2018-06-04 2020-09-01 Apple Inc. Data-secure sensor system
US11386614B2 (en) * 2018-06-15 2022-07-12 Google Llc Shading images in three-dimensional content system
IL260417B (en) * 2018-07-04 2021-10-31 Tinyinspektor Ltd System and method for automatic visual inspection
CN109035307B (zh) * 2018-07-16 2020-09-25 湖北大学 基于自然光双目视觉的设定区域目标追踪方法及系统
US10580272B1 (en) * 2018-10-04 2020-03-03 Capital One Services, Llc Techniques to provide and process video data of automatic teller machine video streams to perform suspicious activity detection
US10498973B1 (en) 2018-10-26 2019-12-03 At&T Intellectual Property I, L.P. Physical object-based visual workspace configuration system
US11425335B2 (en) 2018-11-19 2022-08-23 Hewlett-Packard Development Company, L.P. Protecting privacy in video content
CN113056906A (zh) * 2018-11-26 2021-06-29 Oppo广东移动通信有限公司 用于拍摄类长焦图像的系统和方法
US11386562B2 (en) 2018-12-28 2022-07-12 Cyberlink Corp. Systems and methods for foreground and background processing of content in a live video
EP3691277A1 (en) 2019-01-30 2020-08-05 Ubimax GmbH Computer-implemented method and system of augmenting a video stream of an environment
JP6675510B2 (ja) * 2019-04-04 2020-04-01 キヤノン株式会社 被写体追跡装置およびその制御方法、画像処理装置およびその制御方法、撮像装置およびその制御方法、プログラム
CN111953922B (zh) * 2019-05-16 2022-05-27 南宁富联富桂精密工业有限公司 视频会议的人脸辨识方法、服务器及计算机可读存储介质
US11217345B2 (en) * 2019-05-22 2022-01-04 Mocxa Health Private Limited Anonymization of audio-visual medical data
KR102148351B1 (ko) * 2019-06-18 2020-08-26 주식회사 필인 사생활 보호 기능을 구비한 감시 카메라
US10891128B1 (en) 2019-08-07 2021-01-12 Microsoft Technology Licensing, Llc Software regression detection in computing systems
US11877064B1 (en) * 2019-08-20 2024-01-16 Opic Technologies, Inc. Method and apparatus for a stereoscopic smart phone
US11321487B2 (en) 2019-08-23 2022-05-03 International Business Machines Corporation Contextual privacy policy implementation via digital blurring system
CN114615423B (zh) * 2019-09-12 2024-05-14 华为技术有限公司 一种回调流的处理方法及设备
CN110881103B (zh) * 2019-09-19 2022-01-28 Oppo广东移动通信有限公司 对焦控制方法和装置、电子设备、计算机可读存储介质
EP3820145B1 (de) * 2019-11-11 2021-10-20 GIRA GIERSIEPEN GmbH & Co. KG Türkommunikationsanlage mit einer eine kamera aufweisenden türstation
US11182879B1 (en) * 2019-11-27 2021-11-23 United Services Automobile Association (Usaa) Synthetic bokeh for video conferencing
JP2021087163A (ja) * 2019-11-29 2021-06-03 セイコーエプソン株式会社 撮影表示装置、撮影表示システムおよび撮影表示装置の制御方法
EP4104100A4 (en) 2020-02-13 2024-01-10 Inspekto A M V Ltd USER INTERFACE DEVICE FOR AUTONOMOUS ARTIFICIAL VISION INSPECTION
US11869262B1 (en) * 2020-03-24 2024-01-09 Amazon Technologies, Inc. System for access control of image data using semantic data
US20230129052A1 (en) * 2020-03-25 2023-04-27 Sony Semiconductor Solutions Corporation Reception device and transmission system
CN111432154B (zh) * 2020-03-30 2022-01-25 维沃移动通信有限公司 视频播放方法、视频处理方法及电子设备
CN111601063B (zh) * 2020-04-29 2021-12-14 维沃移动通信有限公司 视频处理方法及电子设备
EP3910545A1 (en) 2020-05-15 2021-11-17 Koninklijke Philips N.V. Ambient light suppression
KR102152779B1 (ko) * 2020-08-20 2020-09-07 주식회사 필인 사생활 보호 기능을 구비한 감시 카메라
KR102152780B1 (ko) * 2020-08-20 2020-09-07 주식회사 필인 사생활 보호 기능을 구비한 감시 카메라
KR20220029212A (ko) * 2020-09-01 2022-03-08 삼성전자주식회사 전자 장치 및 그 제어 방법
KR20220032867A (ko) * 2020-09-08 2022-03-15 삼성전자주식회사 전자장치 및 그 제어방법
TWI757940B (zh) * 2020-10-29 2022-03-11 宏碁股份有限公司 視訊會議系統及其排除打擾的方法
US11659137B1 (en) * 2020-11-30 2023-05-23 Securus Technologies, Inc. Video display blurring on demand
US11800056B2 (en) 2021-02-11 2023-10-24 Logitech Europe S.A. Smart webcam system
US11800048B2 (en) 2021-02-24 2023-10-24 Logitech Europe S.A. Image generating system with background replacement or modification capabilities
US20220286641A1 (en) * 2021-03-02 2022-09-08 Lenovo (Singapore) Pte. Ltd. Background image adjustment in virtual meeting
CN113096084B (zh) * 2021-03-31 2023-06-20 深圳百迈技术有限公司 基于阵列相机成像的视觉检测方法、设备及系统
US20220353437A1 (en) * 2021-04-16 2022-11-03 Zoom Video Communications, Inc. Systems and methods for immersive scenes
CN115250320A (zh) * 2021-04-28 2022-10-28 北京小米移动软件有限公司 图像获取方法及装置、电子设备、存储介质
US20220350925A1 (en) * 2021-04-29 2022-11-03 Cisco Technology, Inc. Selective privacy filtering for online conferences
CN113905204B (zh) * 2021-09-07 2023-02-14 深圳壹秘科技有限公司 图像显示方法、装置、设备及存储介质
US11546181B1 (en) 2021-09-13 2023-01-03 International Business Machines Corporation Contextually driven diversion enhancement framework
CN116847159B (zh) * 2023-08-29 2023-11-07 中亿(深圳)信息科技有限公司 基于视频云存储的监控视频管理系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080297587A1 (en) * 2007-05-31 2008-12-04 Kurtz Andrew F Multi-camera residential communication system
US20090315915A1 (en) * 2008-06-19 2009-12-24 Motorola, Inc. Modulation of background substitution based on camera attitude and motion
US7720572B2 (en) * 2005-09-30 2010-05-18 Irobot Corporation Companion robot for personal interaction
US7834894B2 (en) * 2007-04-03 2010-11-16 Lifetouch Inc. Method and apparatus for background replacement in still photographs
US20120007939A1 (en) * 2010-07-06 2012-01-12 Tessera Technologies Ireland Limited Scene Background Blurring Including Face Modeling

Family Cites Families (95)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5781198A (en) * 1995-12-22 1998-07-14 Intel Corporation Method and apparatus for replacing a background portion of an image
US5870103A (en) * 1996-09-25 1999-02-09 Eastman Kodak Company Method for creating realistic-looking composite images
GB9626525D0 (en) * 1996-12-20 1997-02-05 Kodak Ltd A photographic system using chroma-key processing
US6295392B1 (en) * 1998-05-20 2001-09-25 Itt Manufacturing Enterprises, Inc. Super resolution methods for electro-optical systems
JP3241327B2 (ja) * 1998-08-22 2001-12-25 大聖電機有限会社 クロマキーシステム
US6067399A (en) * 1998-09-02 2000-05-23 Sony Corporation Privacy mode for acquisition cameras and camcorders
US7424175B2 (en) * 2001-03-23 2008-09-09 Objectvideo, Inc. Video segmentation using statistical pixel modeling
US6915011B2 (en) * 2001-03-28 2005-07-05 Eastman Kodak Company Event clustering of images using foreground/background segmentation
US6937266B2 (en) * 2001-06-14 2005-08-30 Microsoft Corporation Automated online broadcasting system and method using an omni-directional camera system for viewing meetings over a computer network
KR100516638B1 (ko) 2001-09-26 2005-09-22 엘지전자 주식회사 화상 통신 시스템
US8752197B2 (en) * 2002-06-18 2014-06-10 International Business Machines Corporation Application independent system, method, and architecture for privacy protection, enhancement, control, and accountability in imaging service systems
US7602412B2 (en) * 2002-06-21 2009-10-13 Microsoft Corporation Temperature compensation in multi-camera photographic devices
US7782357B2 (en) * 2002-06-21 2010-08-24 Microsoft Corporation Minimizing dead zones in panoramic images
US7259784B2 (en) * 2002-06-21 2007-08-21 Microsoft Corporation System and method for camera color calibration and image stitching
US7598975B2 (en) * 2002-06-21 2009-10-06 Microsoft Corporation Automatic face extraction for use in recorded meetings timelines
US7298392B2 (en) * 2003-06-26 2007-11-20 Microsoft Corp. Omni-directional camera design for video conferencing
US7852369B2 (en) * 2002-06-27 2010-12-14 Microsoft Corp. Integrated design for omni-directional camera and microphone array
GB2400514B (en) * 2003-04-11 2006-07-26 Hewlett Packard Development Co Image capture method
US7397504B2 (en) * 2003-06-24 2008-07-08 Microsoft Corp. Whiteboard view camera
US7495694B2 (en) * 2004-07-28 2009-02-24 Microsoft Corp. Omni-directional camera with calibration and up look angle improvements
US7428000B2 (en) * 2003-06-26 2008-09-23 Microsoft Corp. System and method for distributed meetings
GB0326374D0 (en) * 2003-11-12 2003-12-17 British Telecomm Object detection in images
US8134637B2 (en) * 2004-01-28 2012-03-13 Microsoft Corporation Method and system to increase X-Y resolution in a depth (Z) camera using red, blue, green (RGB) sensing
US7362350B2 (en) * 2004-04-30 2008-04-22 Microsoft Corporation System and process for adding high frame-rate current speaker data to a low frame-rate video
JP2006013856A (ja) * 2004-06-25 2006-01-12 Matsushita Electric Ind Co Ltd テレビ電話装置
US7366359B1 (en) * 2004-07-08 2008-04-29 Grandeye, Ltd. Image processing of regions in a wide angle video camera
US7593057B2 (en) * 2004-07-28 2009-09-22 Microsoft Corp. Multi-view integrated camera system with housing
WO2006035778A1 (ja) * 2004-09-27 2006-04-06 Matsushita Electric Industrial Co., Ltd. カメラモジュールおよびそれを備えた電子機器
US8320641B2 (en) * 2004-10-28 2012-11-27 DigitalOptics Corporation Europe Limited Method and apparatus for red-eye detection using preview or other reference images
US7812882B2 (en) * 2004-12-30 2010-10-12 Microsoft Corporation Camera lens shuttering mechanism
US7768544B2 (en) * 2005-01-21 2010-08-03 Cutler Ross G Embedding a panoramic image in a video stream
US7512262B2 (en) * 2005-02-25 2009-03-31 Microsoft Corporation Stereo-based image processing
KR101113844B1 (ko) * 2005-03-08 2012-02-29 삼성테크윈 주식회사 감시카메라 및 감시카메라의 프라이버시 보호방법
US7576766B2 (en) * 2005-06-30 2009-08-18 Microsoft Corporation Normalized images for cameras
US7990429B2 (en) * 2005-10-28 2011-08-02 Nikon Corporation Imaging device with blur enhancement
US7692696B2 (en) * 2005-12-27 2010-04-06 Fotonation Vision Limited Digital image acquisition system with portrait mode
US7783075B2 (en) * 2006-06-07 2010-08-24 Microsoft Corp. Background blurring for video conferencing
US7697839B2 (en) * 2006-06-30 2010-04-13 Microsoft Corporation Parametric calibration for panoramic camera systems
US7612805B2 (en) * 2006-07-11 2009-11-03 Neal Solomon Digital imaging system and methods for selective image filtration
TWI376930B (en) * 2006-09-04 2012-11-11 Via Tech Inc Scenario simulation system and method for a multimedia device
US20100103175A1 (en) 2006-10-25 2010-04-29 Tokyo Institute Of Technology Method for generating a high-resolution virtual-focal-plane image
KR20080044379A (ko) * 2006-11-16 2008-05-21 삼성전자주식회사 이동통신 단말기 및 그의 프라이버시를 보호하는 화상통화방법
US8265793B2 (en) * 2007-03-20 2012-09-11 Irobot Corporation Mobile robot for telecommunication
JP4889538B2 (ja) * 2007-03-27 2012-03-07 三洋電機株式会社 画像処理装置
US7911513B2 (en) * 2007-04-20 2011-03-22 General Instrument Corporation Simulating short depth of field to maximize privacy in videotelephony
US8063929B2 (en) * 2007-05-31 2011-11-22 Eastman Kodak Company Managing scene transitions for video communication
US8253770B2 (en) * 2007-05-31 2012-08-28 Eastman Kodak Company Residential video communication system
US8526632B2 (en) * 2007-06-28 2013-09-03 Microsoft Corporation Microphone array for a camera speakerphone
US8165416B2 (en) * 2007-06-29 2012-04-24 Microsoft Corporation Automatic gain and exposure control using region of interest detection
US9189875B2 (en) * 2007-08-06 2015-11-17 Apple Inc. Advanced import/export panel notifications using a presentation application
JP5028574B2 (ja) * 2007-08-10 2012-09-19 株式会社メガチップス デジタルカメラシステム
JP5306628B2 (ja) * 2007-10-16 2013-10-02 富士フイルム株式会社 撮影方法及び装置
EP2225744A1 (en) 2007-12-21 2010-09-08 Koninklijke Philips Electronics N.V. Matched communicating devices
JP5088161B2 (ja) * 2008-02-15 2012-12-05 ソニー株式会社 画像処理装置、カメラ装置、通信システム、画像処理方法、およびプログラム
JP4497211B2 (ja) * 2008-02-19 2010-07-07 カシオ計算機株式会社 撮像装置、撮像方法及びプログラム
US8596541B2 (en) * 2008-02-22 2013-12-03 Qualcomm Incorporated Image capture device with integrated barcode scanning
KR101427660B1 (ko) * 2008-05-19 2014-08-07 삼성전자주식회사 디지털 영상 처리 장치에서 영상의 배경흐림 효과 처리장치 및 방법
CN101587586B (zh) * 2008-05-20 2013-07-24 株式会社理光 一种图像处理装置及图像处理方法
TWI377521B (en) * 2008-05-27 2012-11-21 Novatek Microelectronics Corp Image processing apparatus and method
US8130257B2 (en) * 2008-06-27 2012-03-06 Microsoft Corporation Speaker and person backlighting for improved AEC and AGC
US8665258B2 (en) * 2008-09-16 2014-03-04 Adobe Systems Incorporated Generating a depth map based on a single image
WO2010034025A2 (en) * 2008-09-22 2010-03-25 Uni-Pixel Displays, Inc. Field sequential color encoding for displays
US8254679B2 (en) * 2008-10-13 2012-08-28 Xerox Corporation Content-based image harmonization
ATE551841T1 (de) * 2009-04-22 2012-04-15 Raytrix Gmbh Digitales bildgebungsverfahren zum synthetisieren eines bildes unter verwendung der mit einer plenoptischen kamera aufgezeichneten daten
CA2771018C (en) * 2009-08-14 2017-06-13 Genesis Group Inc. Real-time image and video matting
KR101617289B1 (ko) * 2009-09-30 2016-05-02 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
CN102598652B (zh) * 2009-10-30 2015-08-12 佳能株式会社 信息处理设备和方法
KR101214536B1 (ko) * 2010-01-12 2013-01-10 삼성전자주식회사 뎁스 정보를 이용한 아웃 포커스 수행 방법 및 이를 적용한 카메라
CN102170552A (zh) 2010-02-25 2011-08-31 株式会社理光 一种视频会议系统及其中使用的处理方法
US8639020B1 (en) * 2010-06-16 2014-01-28 Intel Corporation Method and system for modeling subjects from a depth map
JP5423893B2 (ja) * 2010-06-28 2014-02-19 株式会社ニコン 撮像装置、画像処理装置、画像処理プログラム記録媒体
US20120019688A1 (en) * 2010-07-20 2012-01-26 Research In Motion Limited Method for decreasing depth of field of a camera having fixed aperture
US9785744B2 (en) * 2010-09-14 2017-10-10 General Electric Company System and method for protocol adherence
ES2395102B1 (es) * 2010-10-01 2013-10-18 Telefónica, S.A. Metodo y sistema para segmentacion de primer plano de imagenes en tiempo real
US8773577B2 (en) * 2010-10-27 2014-07-08 Qualcomm Incorporated Region of interest extraction
KR101845318B1 (ko) * 2010-11-29 2018-05-18 포토내이션 리미티드 핸드헬드 장치상에서 캡처된 다수의 이미지로부터의 인물사진 이미지 합성
US8599255B2 (en) * 2010-12-07 2013-12-03 Qnap Systems, Inc. Video surveillance system based on Gaussian mixture modeling with two-type learning rate control scheme
US20130050395A1 (en) * 2011-08-29 2013-02-28 DigitalOptics Corporation Europe Limited Rich Mobile Video Conferencing Solution for No Light, Low Light and Uneven Light Conditions
JP5797016B2 (ja) * 2011-05-30 2015-10-21 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
JP2013012820A (ja) * 2011-06-28 2013-01-17 Sony Corp 画像処理装置、および、画像処理装置の制御方法ならびに当該方法をコンピュータに実行させるプログラム
JP5389879B2 (ja) * 2011-09-20 2014-01-15 株式会社日立製作所 撮像装置、監視カメラ、およびカメラ画面のマスク方法
US20130083997A1 (en) * 2011-10-04 2013-04-04 Alcatel-Lucent Usa Inc. Temporally structured light
EP2791867A4 (en) * 2011-12-16 2015-08-05 Intel Corp REDUCED IMAGE QUALITY FOR BACKGROUND REGIONS OF VIDEO DATA
US20130176458A1 (en) * 2012-01-11 2013-07-11 Edwin Van Dalen Flexible Burst Image Capture System
US20150058709A1 (en) * 2012-01-26 2015-02-26 Michael Edward Zaletel Method of creating a media composition and apparatus therefore
US8995785B2 (en) * 2012-02-28 2015-03-31 Lytro, Inc. Light-field processing and analysis, camera control, and user interfaces and interaction on light-field capture devices
US20130242057A1 (en) * 2012-03-16 2013-09-19 Research In Motion Limited Methods and devices for producing an enhanced image
CN103366352B (zh) * 2012-03-30 2017-09-22 北京三星通信技术研究有限公司 用于产生背景被虚化的图像的设备和方法
US9294746B1 (en) * 2012-07-09 2016-03-22 Amazon Technologies, Inc. Rotation of a micro-mirror device in a projection and camera system
US9282301B1 (en) * 2012-07-25 2016-03-08 Rawles Llc System for image projection
US8724919B2 (en) * 2012-09-21 2014-05-13 Eastman Kodak Company Adjusting the sharpness of a digital image
US9020825B1 (en) * 2012-09-25 2015-04-28 Rawles Llc Voice gestures
US9281727B1 (en) * 2012-11-01 2016-03-08 Amazon Technologies, Inc. User device-based control of system functionality
US9398272B2 (en) * 2012-11-07 2016-07-19 Google Inc. Low-profile lens array camera
US9124762B2 (en) * 2012-12-20 2015-09-01 Microsoft Technology Licensing, Llc Privacy camera

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7720572B2 (en) * 2005-09-30 2010-05-18 Irobot Corporation Companion robot for personal interaction
US7834894B2 (en) * 2007-04-03 2010-11-16 Lifetouch Inc. Method and apparatus for background replacement in still photographs
US20080297587A1 (en) * 2007-05-31 2008-12-04 Kurtz Andrew F Multi-camera residential communication system
US20090315915A1 (en) * 2008-06-19 2009-12-24 Motorola, Inc. Modulation of background substitution based on camera attitude and motion
US20120007939A1 (en) * 2010-07-06 2012-01-12 Tessera Technologies Ireland Limited Scene Background Blurring Including Face Modeling

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108141526A (zh) * 2015-10-30 2018-06-08 2Mee 有限公司 通信系统和方法
CN105825106A (zh) * 2015-11-30 2016-08-03 南京步步高通信科技有限公司 拍照加密查看方法和移动终端
CN105825106B (zh) * 2015-11-30 2018-10-23 南京步步高通信科技有限公司 拍照加密查看方法和移动终端
CN108701196A (zh) * 2016-03-02 2018-10-23 高通股份有限公司 用户可控的屏幕隐私软件
CN106878588A (zh) * 2017-02-27 2017-06-20 努比亚技术有限公司 一种视频背景虚化终端及方法
CN106803920A (zh) * 2017-03-17 2017-06-06 广州视源电子科技股份有限公司 一种图像处理的方法、装置及智能会议终端
WO2018166170A1 (zh) * 2017-03-17 2018-09-20 广州视源电子科技股份有限公司 一种图像处理的方法、装置及智能会议终端
CN111164955A (zh) * 2017-05-26 2020-05-15 流迅方案有限公司 通信事件
CN111164955B (zh) * 2017-05-26 2021-09-03 流迅方案有限公司 影响通信事件的方法、可读存储介质及计算机系统
CN111033569A (zh) * 2017-08-18 2020-04-17 三星电子株式会社 使用深度图编辑图像的装置及其方法
CN111033569B (zh) * 2017-08-18 2024-02-13 三星电子株式会社 使用深度图编辑图像的装置及其方法
CN107623832A (zh) * 2017-09-11 2018-01-23 广东欧珀移动通信有限公司 视频背景替换方法、装置和移动终端
CN108174140A (zh) * 2017-11-30 2018-06-15 维沃移动通信有限公司 一种视频通信的方法和移动终端
CN110049233A (zh) * 2018-01-16 2019-07-23 佳能株式会社 图像处理设备、图像处理系统和图像处理方法
US11064092B2 (en) 2018-01-16 2021-07-13 Canon Kabushiki Kaisha Image processing apparatus and image processing method for detecting a predetermined object in a captured image
CN110049233B (zh) * 2018-01-16 2021-09-14 佳能株式会社 图像处理设备、图像处理系统和图像处理方法
US11417296B2 (en) 2018-03-13 2022-08-16 Sony Corporation Information processing device, information processing method, and recording medium
CN110519544A (zh) * 2019-08-30 2019-11-29 维沃移动通信有限公司 一种视频通话方法及电子设备
CN112770049A (zh) * 2020-12-30 2021-05-07 维沃移动通信有限公司 拍摄方法、装置及存储介质
US20220239848A1 (en) * 2021-01-26 2022-07-28 Dell Products, Lp System and method for operating an intelligent videoframe privacy monitoring management system for videoconferencing applications
US11838684B2 (en) * 2021-01-26 2023-12-05 Dell Products, Lp System and method for operating an intelligent videoframe privacy monitoring management system for videoconferencing applications
CN112954210B (zh) * 2021-02-08 2023-04-18 维沃移动通信(杭州)有限公司 拍照方法、装置、电子设备及介质
CN112954210A (zh) * 2021-02-08 2021-06-11 维沃移动通信(杭州)有限公司 拍照方法、装置、电子设备及介质
WO2024087982A1 (zh) * 2022-10-28 2024-05-02 华为技术有限公司 一种图像处理方法及电子设备
CN116915938A (zh) * 2023-09-11 2023-10-20 北京蓝耘科技股份有限公司 一种高安全性的云计算方法
CN116915938B (zh) * 2023-09-11 2023-11-21 北京蓝耘科技股份有限公司 一种高安全性的云计算方法

Also Published As

Publication number Publication date
EP2920958A1 (en) 2015-09-23
CN108234920B (zh) 2022-09-09
KR102174767B1 (ko) 2020-11-05
US9124762B2 (en) 2015-09-01
US20140176663A1 (en) 2014-06-26
CN108184086A (zh) 2018-06-19
US20180365809A1 (en) 2018-12-20
KR20150097536A (ko) 2015-08-26
US9729824B2 (en) 2017-08-08
WO2014100455A1 (en) 2014-06-26
JP2016506669A (ja) 2016-03-03
US10789685B2 (en) 2020-09-29
US10181178B2 (en) 2019-01-15
CN108234920A (zh) 2018-06-29
US20150334348A1 (en) 2015-11-19
US20170301067A1 (en) 2017-10-19
CN104982029B (zh) 2018-03-30

Similar Documents

Publication Publication Date Title
CN104982029B (zh) 具有隐私模式的摄像机
CN105009062B (zh) 浏览被显示为瓦块的电子消息
CN108781271B (zh) 用于提供图像服务的方法和装置
US9521364B2 (en) Ambulatory presence features
JP6798288B2 (ja) 通信端末、通信システム、映像出力方法、及びプログラム
CN110785996B (zh) 具有多个显示器的设备中的相机资源的动态控制
JP2017108366A (ja) ビデオ会議を制御する方法、システム、及びプログラム
US20160261653A1 (en) Method and computer program for providing conference services among terminals
JP6720513B2 (ja) 通信端末、通信システム、通信制御方法、及びプログラム
US20150341435A1 (en) Communication system, transfer control device, and communication method
US20230376168A1 (en) User interfaces for managing media libraries
US9881171B2 (en) Privacy protecting sensing devices
KR20190129592A (ko) 휴대 단말에서의 영상 제공 방법 및 그 장치
US11303464B2 (en) Associating content items with images captured of meeting content
KR101689599B1 (ko) 단말기 및 이것의 콘텐츠 공유 방법
US20190318496A1 (en) Preventing intrusion during video recording or streaming
US11687312B2 (en) Display apparatus, data sharing system, and display control method
US20230289919A1 (en) Video stream refinement for dynamic scenes
US20220311948A1 (en) Augmented-reality-based video record and pause zone creation
CN116156097A (zh) 视频会议中呈现内容选择和验证呈现的方法、系统和设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant