CN103283225A - 多分辨率图像显示 - Google Patents

多分辨率图像显示 Download PDF

Info

Publication number
CN103283225A
CN103283225A CN2011800631484A CN201180063148A CN103283225A CN 103283225 A CN103283225 A CN 103283225A CN 2011800631484 A CN2011800631484 A CN 2011800631484A CN 201180063148 A CN201180063148 A CN 201180063148A CN 103283225 A CN103283225 A CN 103283225A
Authority
CN
China
Prior art keywords
image
selected part
display
catching
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011800631484A
Other languages
English (en)
Other versions
CN103283225B (zh
Inventor
塞泽·萨布拉克
格雷格·米勒
法曾·艾格达斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pelco Inc
Original Assignee
Pelco Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pelco Inc filed Critical Pelco Inc
Publication of CN103283225A publication Critical patent/CN103283225A/zh
Application granted granted Critical
Publication of CN103283225B publication Critical patent/CN103283225B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6587Control parameters, e.g. trick play commands, viewpoint selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/42Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by switching between different modes of operation using different resolutions or aspect ratios, e.g. switching between interlaced and non-interlaced mode
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19678User interface
    • G08B13/19691Signalling events for better perception by user, e.g. indicating alarms by making display brighter, adding text, creating a sound

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

一种图像显示方法,包括:从单个摄像机接收从不同角度捕获到的第一捕获图像的第一图像信息和第二捕获图像的第二图像信息,第一图像信息具有第一数据密度;选择第一捕获图像的一部分用于以比第一捕获图像的其它部分更高的细节等级进行显示,所选择的部分对应于第一捕获图像的第一区域;使用关于第一捕获图像的所选择的部分的第二数据密度在第一显示图像中显示第一捕获图像的所选择的部分;以及使用第三数据密度在第二显示图像中显示第一捕获图像的另一部分;其中第一捕获图像的所述另一部分不是第一捕获图像的所选择的部分;且其中第三数据密度低于第二数据密度。

Description

多分辨率图像显示
背景
越来越多地,我们生活的许多方面被监测、记录及显示。例如,视频监控是普遍存在的,其记录新闻场景、一般信息且出于安全的目的。安全摄像机记录如银行、店面、自动取款机、公司、道路、公园等所希望的地点的视觉信息。此外,人们自愿地记录自己,并将图像发布在互联网上,或者人们自愿地被另一人记录(例如,电视名人,广播新闻媒体被采访的人等),该另一人发送(例如,散播)相应的视频。
视频录制品被用于各种目的。图像被捕获到的人可用来帮助识别和定位这些人,例如,如果他们犯了罪的话。意外事件可由连续监控的摄像机捕获,否则,该意外事件将不被捕获,并且该事件可以例如在电视上或通过互联网观看。另外,视频可被分析用于特定的事件或特征,例如停止的车辆、运动对象比如人的存在等。
视频录制品通常以比可被观看设备显示或被观看设备显示的更高的分辨率被捕获,所述观看设备例如计算机显示器或电视屏幕。因此,有时对应于多个摄像机像素的所捕获的视频信息被用于产生单一的显示像素,且其它时候,一些摄像机像素被选择及用于该显示,并且未使用的摄像机像素信息被丢弃。
发明概述
存在于非临时性的处理器可读介质上的一种示例计算机程序产品,包括被配置成使处理器执行以下步骤的指令:分析来自摄像机的第一捕获图像和第二捕获图像,其中,摄像机的角度在第一捕获图像和第二捕获图像之间是不同的;选择第一捕获图像的一部分用于以比所捕获的图像的其它部分更高的细节等级进行显示,所选择的部分对应于第一捕获图像的第一区域,第一捕获图像具有第一数据密度;生成第一图像信息,该第一图像信息表示第一捕获图像的所选择的部分的第一图像,该第一图像信息使用关于第一捕获图像的所选择的部分的第二数据密度;以及生成第二图像信息,第二图像信息表示第一捕获图像的未选择部分的第二图像,第二图像信息使用第三数据密度;其中第一捕获图像的未选择部分不同于第一捕获图像的所选择的部分;并且其中第三数据密度低于第二数据密度。
这样的计算机程序产品的实现方式可包括如下特征和/或其它特征中的一个或多个。所选择的部分的面积与未选择部分的面积的比率不同于第一图像的面积与第二图像的面积的比率。所述指令还包括如下指令,其被配置成使所述处理器确定第一捕获图像中的一组像素表示相对于第二捕获图像的运动中的对象,且其中,被配置成使所述处理器进行选择的所述指令被配置为使所述处理器选择第一捕获图像的所述部分,使得所选择的部分包括所述一组像素。
一种示例图像显示方法,所述方法包括:从单个摄像机接收第一捕获图像的第一图像信息和第二捕获图像的第二图像信息,第一和第二图像从不同的角度被捕获,第一图像信息具有第一数据密度;选择第一捕获图像的一部分用于以比第一捕获图像的其它部分更高的细节等级进行显示,所选择的部分对应于第一捕获图像的第一区域;使用关于第一捕获图像的所选择的部分的第二数据密度在第一显示图像中显示第一捕获图像的所选择的部分;以及使用第三数据密度在第二显示图像中显示所述第一捕获图像的另一部分;其中所述第一捕获图像的所述另一部分不是所述第一捕获图像的所选择的部分;且其中所述第三数据密度低于所述第二数据密度。
这样的方法的实现方式可包括如下特征和/或其它特征中的一个或多个。所述方法还包括分析所述第一图像信息和第二图像信息,以确定第一捕获图像的所述部分包含运动对象。第一显示图像是第二显示图像,使得所选择的部分和所述另一部分被显示在单个显示器上。所选择的部分相对于第一捕获图像中的所选择的部分在大小上被不成比例地显示在第一显示图像中。所述方法还包括确定第一捕获图像中的一组像素表示运动中的对象,其中,所述选择包括选择第一捕获图像的所述部分,使得所选择的部分包括所述一组像素。显示所选择的部分包括使用第一显示器显示所选择的部分;以及显示所述另一部分包括使用与所述第一显示器分开的第二显示器显示所述另一部分。所述方法还包括捕获第一捕获图像。显示第二部分包括在显示屏上的独立于所选择的部分相对于第一捕获图像的位置的一位置中显示所述第二部分。显示所述第二部分包括在显示屏上的依赖于所选择的部分相对于第一捕获图像的位置的一位置中显示所述第二部分。显示所述第二部分包括使用独立于所选择的部分的区域的一区域显示所述第二部分。显示所述第二部分包括使用依赖于所选择的部分的区域的一区域显示所述第二部分。
一种示例视频监控系统包括:存储器;图像捕获设备,其通信地耦合到所述存储器且被配置成使用第一分辨率从不同的角度捕获视频图像并将所述视频图像提供给所述存储器;选择装置,其通信地耦合到所述存储器,用于选择从不同角度捕获到的视频图像中的至少一个视频图像的第一部分,所述第一部分具有的面积是所述视频图像中的所述至少一个视频图像的面积的第一百分比;以及处理装置,其通信地耦合到所述存储器,所述处理装置用于通过如下步骤处理所述视频图像以在显示屏上显示:将图像中的至少一个图像的第一部分转换成具有第二面积的第一显示图像;将所存储的视频图像中的至少一个的第二部分转换成具有第三面积的第二显示图像,所述第二面积是所述第二面积和所述第三面积的总和的第二百分比,所述第二百分比大于所述第一百分比;以及至少一个显示器,其通信地耦合到所述处理装置并被配置成同时显示所述第一显示图像和所述第二显示图像。
这样的系统的实现方式可包括如下特征和/或其它特征中的一个或多个。所述系统还包括运动检测装置,所述运动检测装置通信地耦合到所述存储器,用于确定所述视频图像的第一视频图像中的一组像素表示运动中的对象,并且其中所述选择装置被配置成选择所述视频图像中的至少一个的第一部分,使得所述第一部分包括所述一组像素。所述至少一个显示器是单个显示器。所述至少一个显示器包括第一显示器和第二显示器,所述第一显示器和所述第二显示器耦合到所述处理装置以将所述第一部分显示在所述第一显示器上并将所述第二部分显示在所述第二显示器上。
本文所描述的项目和/或技术可以提供以下功能中的一个或多个和/或未提到的其它功能。在例如视频摄像机、移动摄像机的捕获到的图像中,更感兴趣的项目可被显示为与较不感兴趣的项目相比具有更高的分辨率。更感兴趣的项目和较不感兴趣的项目可以在不同的显示器上显示,或者在单个显示器中显示。在显示器中,相比其它项目,观察者可以更清楚地看到感兴趣的项目。运动对象可以被跟踪和显示为比静止的或相对静止的对象具有更高的分辨率。在显示器的某个部分中,对象可以被显示为具有更高的分辨率,该部分便于使用人眼的高分辨率部分来观察。此外,通过除了所提到的装置以外的装置实现以上提到的效果是可能的,而且,所提到的项目/技术可以不必产生所提到的效果。
附图说明
图1是视频系统的示意图。
图2是图1所示的视频系统的摄像机的部件的框图。
图3是图2所示的处理单元的功能框图。
图4是定位对象运动的图像配准的简化框图。
图5是由图1所示的摄像机捕获到的图像的高分辨率部分映射到图1所示的显示器的高分辨率窗口的简化框图。
图6是使用不同的分辨率显示单个捕获图像的多个部分的过程的流程框图。
图7是双显示器多分辨率显示系统的简化框图。
具体实施方式
提供了用于以不同的有效分辨率显示图像的不同部分的技术。例如,视频系统包括摄像机,所述摄像机被配置成提供给定分辨率的视频输出。所述摄像机还被配置为当所述摄像机处于运动状态(例如,摇摄、倾斜和/或缩放等)时检测所捕获的图像中的对象的运动。所述摄像机监视运动对象、将对象的运动局部化、选择图像的相应部分,以及提供对应于所述运动对象且包括所述运动对象的图像的所选择的部分的更高分辨率的输出。图像的所选择的部分可与图像的其余部分一起显示在单个显示器上,同时所选择的部分取代图像的其余部分中的一些。因为与图像的其它、未选择的部分相比,所选择的部分的更多的信息被显示,因此所选择的部分具有更高的有效分辨率。可选地,所选择的部分可被显示在示出了图像的剩余部分的显示器的单独的区域上,或被显示在与示出了图像的剩余部分的显示器分开的显示器上。另外或可选地,图像的以较高分辨率显示的所选择的部分可由用户手动选择。
参照图1,视频系统10包括摄像机12、服务器14以及用户接口16。摄像机12被配置为捕获对象的图像,例如人18,其置于摄像机12的视场20内。摄像机12能够从不同角度,例如,不同位置、不同方向、不同方位和/或不同放大倍数捕获图像,这里所述摄像机是PTZ(云台,Pan-Tilt-Zoom)摄像机,但是可以使用其它类型的摄像机,例如,固定位置摄像机、固定图像(摇摄、倾斜和变焦)摄像机或其它类型的摄像机。此外,虽然只有一个摄像机12被示出,但是系统10可以包括一个以上的摄像机。所述摄像机通信地连接(例如,使用有线和/或无线连接)到服务器14,服务器14被通信地连接到用户接口16。接口16包括扬声器以向用户提供音频信息,而且包括用户输入设备,所述用户输入设备包括键盘、鼠标和麦克风。可以包括其它用户输入设备,如触敏屏等。
摄像机12具有相关联的视角和视场26。所述视角是角度(包括位置),摄像机12正在从该角度观察物理区域。视场26是由摄像机12以帧为单位捕获到的物理区域。
显示器18比摄像机12具有更低的分辨率。显示器18比摄像机12具有更少的像素,以及因此,相比显示器18能够为每个图像显示的,摄像机12为每个图像捕获更多信息。例如,显示器18可具有对角线为14英寸、宽度为9.7英寸的屏幕,并具有640×480像素,其提供66dpi(每英寸点数)。然而,这是一个实例,且可以使用许多其它的显示器屏幕,所述其它的显示器屏幕具有与本实例的那些中的一个或多个不同的尺寸、像素数和dpi值。
参照图2,摄像机12包括摄像机光学器件30、图像捕获单元32、处理单元34、通信接口36和云台马达(PTZ motor)。图像捕获单元包括透镜和其它光学部件,且与图像捕获单元32通信地耦合。图像捕获单元32包括电荷耦合器件(CCD)和/或其它技术,以将光学图像转换成电信息,电信息被转移到处理单元34。另外与处理单元34耦合的是通信接口36,信息通过通信接口36被发送到服务器14以及从服务器14接收,例如,通过通信网络,例如局域网、广域网、无线网等。PTZ马达38被配置为致动摄像机12以摇摄、倾斜和变焦,并且可包括一个以上的电机。
处理单元34处理图像信息并包括中央处理单元(CPU)或数字信号处理器(DSP)40和存储器42。CPU/DSP 40优选是智能设备,例如,个人计算机的中央处理单元(CPU),诸如由
Figure BDA00003419951200061
公司或
Figure BDA00003419951200062
制造的那些,微控制器,专用集成电路(ASIC)等。也可以使用DSP,例如由Texas
Figure BDA00003419951200063
制造的DM 6446。CPU/DSP 40耦合到存储器42,存储器42包括随机存取存储器(RAM)和只读存储器(ROM)。存储器42是非临时性的且优选存储机器可读的、机器可执行的软件代码44,软件代码44包含指令,该指令被配置为当被执行时使CPU/DSP 40执行本文所描述的各种功能。可选地,软件44可以不是被处理器CPU/DSP 40直接可执行的,但被配置成例如在编译和执行时使处理器CPU/DSP 40执行本文所描述的功能。在本实例中,显示器18是一个视频显示面板,但是,可以使用一个以上的视频显示面板。
另外参照图3,处理单元34包括运动跟踪器/检测模块60、高分辨率选择模块62、对象标准化模块64、PTZ控制模块66和显示驱动器模块68的功能块。这些模块被配置为:确定由摄像机12捕获到的图像的一个或多个高分辨率部分,这些部分需要增加的有效分辨率,以及驱动显示器18以显示具有两个分辨率的图像。显示器18将使用一个分辨率显示图像的低分辨率部分而不是高分辨率部分的图像,且将使用另一分辨率显示高分辨率部分,所述另一分辨率比用于低分辨率部分的所述分辨率更高。因此,一个分辨相对于另一分辨率率更低,且一个分辨率相对于另一分辨率率更高。不同的分辨率不一定是不同的数据密度(例如,显示器18的每英寸点数),但对于一个原始图像的给定部分有不同的细节等级和不同的数据量。适当的模块可被配置为选择所捕获的图像的多个区域,并在一个窗口或多个窗口(其中,窗口的数量可以或可以不与高分辨率的图像部分的数量相匹配)中显示多个高分辨率的图像部分。然而,下面的描述讨论了选择一个图像部分用于更高分辨率的显示的示例性配置,尽管所讨论的原则适用于多个高分辨率的图像部分的选择和/或显示的配置。模块60、62、64、66、68中的每个的操作在下面被进一步讨论。
运动跟踪器/检测模块60被配置成分析由图像捕获单元32提供的图像,以确定视场26内的对象是否在移动。运动检测模块60能够提供多少像素表示一个或多个运动中的对象的指示,因此指示图像中哪里存在运动以及包括运动中的对象的图像中的每一个区域的尺寸。优选地,模块60被配置成仅仅指示移动超过阈值量的对象的运动,和/或仅仅指示不是视场26的背景的部分的运动中的对象。
另外参照图4,模块60被配置为去除全局的摄像机运动,以将对象运动局部化。模块60分析多个图像170、172以将对象运动局部化。图像172已被摄像机12捕获,其已向右平移、向下倾斜并相对于图像170被拉近。模块60被配置为通过查找图像170、172的角部、匹配通过分析图像170、172中的像素亮度梯度识别的图像170、172的特征以及对齐图像中的静止对象来执行图像配准。模块60对图像170、172之间的摇摄、倾斜、缩放尽可能适当地进行调节,以消除全局运动的影响,即由于摄像机在图像170、172的捕获之间运动(如平移、摇摄、倾斜和/或缩放)而导致的摄像机的不同角度而引起的图像差异。模块60可以单独基于图像170、172,或还通过使用来自PTZ控制模块66的关于摇摄、倾斜和/或缩放的量的信息进行这些调整,或者通过使用图像170、172和PTZ的量进行这些调整。在这里,模块60对图像170、172进行配准,以形成配准的图像174。在配准的图像174中,建筑物24和房屋22是对齐的,而对象20由于对象20从位置201到位置202的运动不完全对齐。模块60将该运动局部化到区域176。该运动可被局部化到单个区域176,但这里该运动被局部化到两个区域1761、1762。此外,在这里,模块60将对象21的运动局部化至3个区域178。区域1781是圆,而区域1782、1783是同心环。如图所示,局部化的区域176是不规则的形状的(在此,其遵循对象20的周界),而区域178是规则的形状的,同时区域178是以牛眼或包围对象21的靶子的形式的。
高分辨率选择模块62被配置成选择所捕获的图像的感兴趣的一个或多个区域,以使用相对较高的分辨率来显示。也参照图5,模块62可与运动跟踪器/检测模块60通信,并选择由显示器18显示的图像70的感兴趣的区域72,用于高分辨率的显示,或选择由模块60识别的区域176、178。区域72、176、178包括所有显示像素,显示像素指示运动中的局部化的对象20、21。此外或可选地,选择模块62可以根据从用户接口16,例如,从用户的键盘输入或鼠标激活接收到的输入或基于用户输入或动作之外的以及跟踪模块60所更新的标准来选择区域72、176、178中的一个或多个。所选择的部分72具有规则的,这里为矩形的形状,其包括运动中的对象20的像素。这可以帮助促进处理高分辨率部分,包括将所选择的部分72映射到显示器18上的图像80的高分辨率窗口82。
对象标准化模块64与高分辨率选择模块62通信,以将模块62所选择的高分辨率部分72映射到显示器18的高分辨率窗口82/将模块62所选择的高分辨率部分72重新显示到显示器18的高分辨率窗口82。窗口82的大小可以多种方式来确定/选择。例如,窗口82的大小可以是固定的大小,可以是相对于区域72的大小的一个固定的比率,等等。另外,窗口82的位置可以多种方式来确定。例如,窗口82的位置可以是固定的,可以是以显示图像80为中心的,可以取决于区域72的位置(例如,区域72和窗口82可以是同中心的,具有相对于图像70、72的公共的下边缘位置,等等)。标准化模块64被配置为通过向显示驱动器模块68提供关于摄像机所捕获的像素数据的更多信息将区域72标准化到窗口82或将区域72映射到窗口82。模块64确定通过以下操作来提供该信息:从图像捕获单元32获取对应于区域72的像素信息,并将其转换为具有对应的像素分辨率的窗口82的像素信息并均匀地分布在区域72所提供的边界上。因此,例如,在640×480和66dpi的显示器18的情况下,如果区域72为2英寸高乘1英寸宽,且窗口82为4英寸高乘2英寸宽,那么标准化模块64将从图像捕获单元32获取对应于区域72的高分辨率的原始像素信息并且为窗口82提供264x132像素的信息,这与区域72中的132x66像素相反。优选地,凡是对于单个对象有多个区域的地方,例如,区域176、178,则关于一个对象的这些区域的重新显示/映射分辨率将是不同的,例如,随着到对象的接近度降低,分辨率也降低。例如,内部区域将使用比外部区域更高的分辨率被重新显示,例如,区域1781使用比区域1782的重新显示更高的分辨率被重新显示,区域1782使用比区域1783的重新显示更高的分辨率被重新显示。
显示模块驱动器68被配置为处理由标准化模块64提供的像素并将像素信息提供给显示器18。驱动器模块68提供图像80的像素信息,包括窗口82的像素信息和图像70的剩余部分的剩余像素信息,即,图像70还在图像80中的剩余部分(即,未被窗口82取代)。
PTZ控制模块66与运动跟踪器/检测模块60通信,以确定并向PTZ马达38提供的命令。控制模块66使用关于摄像机12所捕获的图像中的运动的信息来确定摄像机光学器件30指向何处。控制模块66产生影响PTZ马达38的命令,以尽可能适当地引导和/或使摄像机光学器件30聚焦,并提供到PTZ马达38的命令,以相应地移动光学器件30的瞄准方向和/或使光学器件30聚焦。
参照图6,同时进一步参照图1-5,使用比所捕获的图像的其他部分更高的分辨率有选择地显示所捕获的图像部分的过程110包括所示的阶段。然而,过程110仅仅是一个实例且不是限制性的。过程110可以例如通过使这些阶段被添加、去除、重新排列、组合和/或同时执行来改变。例如,下面所讨论的阶段118可以被删除。
在阶段112处,摄像机12使用不同角度捕获视频图像。摄像机12用与显示器18相比的非常高的分辨率捕获图像,例如,8百万像素和例如,300dpi。摄像机12将图像存储在存储器50中。
在阶段114处,摄像机12所捕获的图像被处理并显示在显示器18上。来自摄像机12的高分辨率图像被转换成显示器18的更低的分辨率,例如,640×480像素。
在阶段116处,对象20的运动被检测且对象20被跟踪。运动跟踪器/检测模块60使用图像配准确定对象20经过多个图像处于运动状态。跟踪器/检测模块60还确定对象20相对于图像帧的运动的位置和方向,并将该信息提供给PTZ控制模块66。
在阶段118处,PTZ控制模块66使用来自运动跟踪/检测模块60的信息控制PTZ马达38。控制模块66控制马达38以引导摄像机12朝向对象20,例如,以帮助将对象20在图像中居中,并使摄像机光学器件30聚焦在对象20上。
在阶段120处,选择包围对象20的低分辨率区域72。高分辨率选择模块62确定区域72的位置和尺寸。例如,在图像70具有x-y水平和垂直坐标时,选择模块62确定区域72的x坐标的范围和y坐标的范围,区域72优选包括整个对象20。选择模块62基于来自运动跟踪器/检测模块60的关于对象20的位置和大小的对象20的信息选择该区域72。可选地或另外地,模块60可以使用来自用户通过用户接口16的输入来选择所述位置和/或大小。使用图像70的区域72的选择因此选择摄像机12所捕获的更高分辨率的捕获图像中的相应区域。
在阶段122处,所选择的低分辨率区域72被映射到高分辨率窗口82。对象标准化模块64使用关于所选择的区域72的信息来从存储器50获取由摄像机12捕获的对应于区域72的原始像素信息。模块68处理具有摄像机分辨率的原始像素来以按显示分辨率提供窗口82的像素的信息。窗口82提供比区域72更高的分辨率,在区域72中,相同组的信息被提供,但是,其具有更多的像素,即使区域72和窗口82的dpi是相同的。窗口82的内容因此具有第三有效分辨率,而被捕获的图像具有第一分辨率以及显示器18提供第二分辨率。第三分辨率大于第二分辨率且小于第一分辨率。窗口使用显示器18的dpi进行显示,但是对于区域72的内容,使用了更多的像素。即,有更多的由显示器18提供的信息用于窗口82,且因此有比在图像70中被提供的更多的关于区域72的内容的信息。窗口82的数据密度与图像80在窗口82外部的其它部分是相同的,但用于窗口82的数据量高于用于区域72的数据量。因此,用于显示区域72的(来自摄像机12的图像的)数据密度小于用于显示窗口82的数据密度,并且这两种数据密度小于从摄像机12可得到的数据密度。因此,因为被显示用于对应于区域72的内容的信息的量已经增加,所以区域72的有效分辨率和区域72的内容的细节等级被增加。如果感兴趣的多个区域被提供在单个对象周围,例如,图4所示的区域176、178,那么不同的分辨率可被提供用于所述多个区域。
在阶段124处,混合分辨率的图像80被显示。显示驱动器模块68为显示器18提供信息,以产生多分辨率图像80。所选择的区域72的内容与图像70的未被选择部分除了现在被窗口82占据的那部分同时地显示在窗口82中。显示驱动器模块舍弃或覆写来自现在被窗口82占据、原来不是被区域72占据的图像70的信息。窗口82占据图像80的与图像70相比的不成比例的量,即,窗口82的面积与图像80的面积的比率大于区域72的面积与图像70的面积的比率。因此,所显示的窗口82的内容与被摄像机12捕获的窗口82的内容是不成比例的。
可选配置
其它的配置实例(包括实现方式)在本公开和所附的权利要求的范围和精神内。例如,由于软件的性质,上述功能可以使用由处理器执行的软件、硬件、固件、硬接线或这些中的任何的组合来实现。实现这些功能的特征也可以被物理地定位在各个位置处,包括被分布成使得这些功能的部分在不同的物理位置处被实现。另外,如本文包括在权利要求中所使用的,用在由“至少一个”开头的项目列表中的“或”指示了分离性的列表,例如,“A、B或C中的至少一个”的列表是指A或B或C或AB或AC或BC或ABC(即A和B以及C)。此外,阶段114可以从图6所示的过程110中省略。可选择所捕获的图像的一部分,而不被显示。
此外,尽管上面的讨论描述了在单个显示器上的多分辨率图像的显示,但是可以使用多个显示器。如图7所示,连接到服务器152的显示器150示出了具有所选择的区域72的图像70,而连接到服务器152的显示器160示出了图像162,图像162是具有比在图像70中的更高的分辨率的区域72的内容。
此外,如果在窗口82中的显示会导致在区域72中的内容的较低的分辨率,则对象标准化模块64可以忽略区域72的选择。例如,如果窗口82的大小固定,且所选择的区域72大于窗口82的固定大小,则模块64将忽略,可以以除所描述的那些之外的方式被选择。例如,如果窗口82比区域72更小,或以将其它方式具有比区域72更少的像素,则模块64可以忽略窗口72的选择。在这种情况下,可以例如通过用户接口16提供为什么该选择被忽略的指示。
作为另一实例,运动跟踪器/检测模块60可以构建一种背景,该背景是固定位置摄像机12的视场26中的持久性对象的图像的复合图像,所述持久性对象不是增加分辨率的显示器的候选。例如,图5所示的持久性静止对象22、24将形成所述背景的部分,与其它持久性对象一样,如道路、灌木、树木、河流、湖泊、旗杆和标志、路标、桥梁等。例如,模块60可以使用持久性和经常性的像素强度的高斯分布构建高斯混合模型来构建持久性和经常性的像素强度的背景图像。持久性/经常性的像素强度可被组合并存储为复合背景图像。运动跟踪器/检测模块60将筛除具有背景强度的像素用于运动分析,并提供对非背景对象的运动的指示,这忽略了背景运动。可选地,高分辨率选择模块62可以建立和存储背景图像以及将该背景用作过滤器,从而进一步仅仅处理非背景运动。
另外,尽管摄像机可以选择图像的区域并为该区域提供更高分辨率的信息,但该摄像机可以为所有图像提供相同等级的分辨率信息。外部处理器可以基于图像中的对象的运动选择性地处理所述信息来为图像的对应于运动对象的部分提供更高的分辨率的显示。
此外,一项以上的发明可以被公开。

Claims (18)

1.一种计算机程序产品,其存在于非临时性的处理器可读介质上且包括被配置成使处理器执行以下步骤的指令:
分析来自摄像机的第一捕获图像和第二捕获图像,其中,所述摄像机的角度在所述第一捕获图像和所述第二捕获图像之间是不同的;
选择所述第一捕获图像的一部分用于以比所捕获的图像的其它部分更高的细节等级来显示,所选择的部分对应于所述第一捕获图像的第一区域,所述第一捕获图像具有第一数据密度;
使用关于所述第一捕获图像的所述所选择的部分的第二数据密度生成第一图像信息,该第一图像信息表示所述第一捕获图像的所述所选择的部分的第一图像;以及
使用第三数据密度生成第二图像信息,所述第二图像信息表示所述第一捕获图像的未选择部分的第二图像;
其中所述第一捕获图像的所述未选择部分不同于所述第一捕获图像的所述所选择的部分;并且
其中所述第三数据密度低于所述第二数据密度。
2.根据权利要求1所述的计算机程序产品,其中所述所选择的部分的面积与所述未选择部分的面积的比率不同于所述第一图像的面积与所述第二图像的面积的比率。
3.根据权利要求1所述的计算机程序产品,还包括被配置成使所述处理器确定所述第一捕获图像中的一组像素表示相对于所述第二捕获图像处于运动中的对象的指令,且其中,被配置成使所述处理器进行选择的所述指令被配置为使所述处理器选择所述第一捕获图像的所述部分,使得所述所选择的部分包括所述一组像素。
4.一种图像显示方法,所述方法包括:
从单个摄像机接收第一捕获图像的第一图像信息和第二捕获图像的第二图像信息,第一图像和第二图像从不同的角度被捕获,所述第一图像信息具有第一数据密度;
选择所述第一捕获图像的一部分用于以比所述第一捕获图像的其它部分更高的细节等级来显示,所选择的部分对应于所述第一捕获图像的第一区域;
使用关于所述第一捕获图像的所述所选择的部分的第二数据密度在第一显示图像中显示所述第一捕获图像的所述所选择的部分;以及
使用第三数据密度在第二显示图像中显示所述第一捕获图像的另一部分;
其中所述第一捕获图像的所述另一部分不是所述第一捕获图像的所述所选择的部分;并且
其中所述第三数据密度低于所述第二数据密度。
5.根据权利要求4所述的方法,还包括分析所述第一图像信息和所述第二图像信息以确定所述第一捕获图像的所述部分包含运动对象。
6.根据权利要求4所述的方法,其中所述第一显示图像是所述第二显示图像,使得所述所选择的部分和所述另一部分被显示在单个显示器上。
7.根据权利要求6所述的方法,其中,所述所选择的部分相对于所述第一捕获图像中的所述所选择的部分在大小上被不成比例地显示在所述第一显示图像中。
8.根据权利要求4所述的方法,还包括确定所述第一捕获图像中的一组像素表示运动中的对象,其中,所述选择包括选择所述第一捕获图像的所述部分,使得所述所选择的部分包括所述一组像素。
9.根据权利要求4所述的方法,其中显示所述所选择的部分包括使用第一显示器显示所述所选择的部分,以及显示所述另一部分包括使用与所述第一显示器分开的第二显示器显示所述另一部分。
10.根据权利要求4所述的方法,还包括捕获所述第一捕获图像。
11.根据权利要求4所述的方法,其中显示所述第二部分包括在显示屏上的独立于所述所选择的部分相对于所述第一捕获图像的位置的一位置中显示所述第二部分。
12.根据权利要求4所述的方法,其中显示所述第二部分包括在显示屏上的依赖于所述所选择的部分相对于所述第一捕获图像的位置的一位置中显示所述第二部分。
13.根据权利要求4所述的方法,其中显示所述第二部分包括使用独立于所述所选择的部分的区域的一区域显示所述第二部分。
14.根据权利要求4所述的方法,其中显示所述第二部分包括使用依赖于所述所选择的部分的区域的一区域显示所述第二部分。
15.一种视频监控系统,包括:
存储器;
图像捕获设备,其通信地耦合到所述存储器且被配置成使用第一分辨率从不同角度捕获视频图像并将所述视频图像提供给所述存储器;
选择装置,其通信地耦合到所述存储器,用于选择从不同角度捕获到的所述视频图像中的至少一个视频图像的第一部分,所述第一部分具有的面积是所述视频图像中的所述至少一个视频图像的面积的第一百分比;以及
处理装置,其通信地耦合到所述存储器,所述处理装置用于通过以下操作来处理所述视频图像以在显示屏上显示:
将所述图像中的至少一个图像的所述第一部分转换成具有第二面积的第一显示图像;
将所存储的视频图像中的所述至少一个视频图像的第二部分转换成具有第三面积的第二显示图像,所述第二面积是所述第二面积和所述第三面积的总和的第二百分比,所述第二百分比大于所述第一百分比;以及
至少一个显示器,其通信地耦合到所述处理装置并被配置成同时显示所述第一显示图像和所述第二显示图像。
16.根据权利要求15所述的系统,其中还包括运动检测装置,所述运动检测装置通信地耦合到所述存储器,用于确定所述视频图像的第一视频图像中的一组像素表示运动中的对象,并且其中所述选择装置被配置成选择所述视频图像中的所述至少一个视频图像的所述第一部分,使得所述第一部分包括所述一组像素。
17.根据权利要求15所述的系统,其中,所述至少一个显示器是单个显示器。
18.根据权利要求15所述的系统,其中,所述至少一个显示器包括第一显示器和第二显示器,所述第一显示器和所述第二显示器耦合到所述处理装置以将所述第一部分显示在所述第一显示器上并将所述第二部分显示在所述第二显示器上。
CN201180063148.4A 2010-12-30 2011-12-29 多分辨率图像显示 Active CN103283225B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/982,676 US9615062B2 (en) 2010-12-30 2010-12-30 Multi-resolution image display
US12/982,676 2010-12-30
PCT/US2011/067812 WO2012092472A2 (en) 2010-12-30 2011-12-29 Multi-resolution image display

Publications (2)

Publication Number Publication Date
CN103283225A true CN103283225A (zh) 2013-09-04
CN103283225B CN103283225B (zh) 2016-08-24

Family

ID=46380434

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180063148.4A Active CN103283225B (zh) 2010-12-30 2011-12-29 多分辨率图像显示

Country Status (5)

Country Link
US (1) US9615062B2 (zh)
EP (1) EP2659670A4 (zh)
CN (1) CN103283225B (zh)
AU (1) AU2011352023B2 (zh)
WO (1) WO2012092472A2 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109996035A (zh) * 2018-01-02 2019-07-09 英西图公司 用于生成机器视觉数据的相机装置和相关方法

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009102480A2 (en) 2008-02-15 2009-08-20 Enforcement Video, Llc System and method for multi-resolution storage of images
US9015242B2 (en) 2009-09-06 2015-04-21 Tangome, Inc. Communicating with a user device
US8737685B2 (en) * 2011-04-25 2014-05-27 Honeywell International Inc. Systems and methods for detecting the movement of an object
WO2013001885A1 (ja) * 2011-06-27 2013-01-03 コニカミノルタホールディングス株式会社 画像処理装置、画像処理方法、およびプログラム
JP2013065151A (ja) * 2011-09-16 2013-04-11 Sony Corp 画像処理装置、画像処理方法、および、プログラム
WO2014014238A1 (en) 2012-07-17 2014-01-23 Samsung Electronics Co., Ltd. System and method for providing image
US10070043B2 (en) * 2012-08-15 2018-09-04 Nec Corporation Image processing system, image processing method, and program
US9319635B2 (en) 2012-11-30 2016-04-19 Pelco, Inc. Window blanking for pan/tilt/zoom camera
US20140267870A1 (en) * 2013-03-15 2014-09-18 Tangome, Inc. Mixed media from multimodal sensors
US10474921B2 (en) * 2013-06-14 2019-11-12 Qualcomm Incorporated Tracker assisted image capture
GB2524058B (en) * 2014-03-13 2016-08-10 Canon Kk Image manipulation
US10409542B2 (en) * 2016-01-04 2019-09-10 Rex HUANG Forming a larger display using multiple smaller displays
US10341605B1 (en) * 2016-04-07 2019-07-02 WatchGuard, Inc. Systems and methods for multiple-resolution storage of media streams
US9876957B2 (en) * 2016-06-21 2018-01-23 Hand Held Products, Inc. Dual mode image sensor and method of using same
US11232688B1 (en) * 2017-11-29 2022-01-25 Amazon Technologies, Inc. Auto-configuration for a motion detector of a security device

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020063711A1 (en) * 1999-05-12 2002-05-30 Imove Inc. Camera system with high resolution image inside a wide angle view
US20060015508A1 (en) * 2000-09-08 2006-01-19 Tetsujiro Kondo Information processing apparatus, system and method, and recording medium
US20070126874A1 (en) * 2005-12-01 2007-06-07 Tomokazu Kake Image processing device, image processing method, and information storage medium
US20100002070A1 (en) * 2004-04-30 2010-01-07 Grandeye Ltd. Method and System of Simultaneously Displaying Multiple Views for Video Surveillance
US20100245584A1 (en) * 2009-03-31 2010-09-30 Pelco, Inc. Method and apparatus for creating a zone of interest in a video display

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6493032B1 (en) 1996-06-24 2002-12-10 Be Here Corporation Imaging arrangement which allows for capturing an image of a view at different resolutions
US6147709A (en) 1997-04-07 2000-11-14 Interactive Pictures Corporation Method and apparatus for inserting a high resolution image into a low resolution interactive image to produce a realistic immersive experience
US6665841B1 (en) * 1997-11-14 2003-12-16 Xerox Corporation Transmission of subsets of layout objects at different resolutions
US6285804B1 (en) 1998-12-21 2001-09-04 Sharp Laboratories Of America, Inc. Resolution improvement from multiple images of a scene containing motion at fractional pixel values
US6738073B2 (en) * 1999-05-12 2004-05-18 Imove, Inc. Camera system with both a wide angle view and a high resolution view
US7006950B1 (en) 2000-06-12 2006-02-28 Siemens Corporate Research, Inc. Statistical modeling and performance characterization of a real-time dual camera surveillance system
US7663662B2 (en) * 2005-02-09 2010-02-16 Flir Systems, Inc. High and low resolution camera systems and methods
JP2009192949A (ja) * 2008-02-15 2009-08-27 Sony Corp 画像処理装置と画像処理方法および画像処理システム
US8640020B2 (en) * 2010-06-02 2014-01-28 Microsoft Corporation Adjustable and progressive mobile device street view

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020063711A1 (en) * 1999-05-12 2002-05-30 Imove Inc. Camera system with high resolution image inside a wide angle view
US20060015508A1 (en) * 2000-09-08 2006-01-19 Tetsujiro Kondo Information processing apparatus, system and method, and recording medium
US20100002070A1 (en) * 2004-04-30 2010-01-07 Grandeye Ltd. Method and System of Simultaneously Displaying Multiple Views for Video Surveillance
US20070126874A1 (en) * 2005-12-01 2007-06-07 Tomokazu Kake Image processing device, image processing method, and information storage medium
US20100245584A1 (en) * 2009-03-31 2010-09-30 Pelco, Inc. Method and apparatus for creating a zone of interest in a video display

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109996035A (zh) * 2018-01-02 2019-07-09 英西图公司 用于生成机器视觉数据的相机装置和相关方法
CN109996035B (zh) * 2018-01-02 2023-10-24 英西图公司 增强监控图像分析的装置和方法

Also Published As

Publication number Publication date
AU2011352023A1 (en) 2013-07-11
WO2012092472A2 (en) 2012-07-05
EP2659670A4 (en) 2014-07-02
WO2012092472A3 (en) 2012-10-04
US20120169871A1 (en) 2012-07-05
CN103283225B (zh) 2016-08-24
EP2659670A2 (en) 2013-11-06
US9615062B2 (en) 2017-04-04
AU2011352023B2 (en) 2016-02-11

Similar Documents

Publication Publication Date Title
CN103283225A (zh) 多分辨率图像显示
US10051246B2 (en) Stopped object detection
US11082668B2 (en) System and method for electronic surveillance
US11263769B2 (en) Image processing device, image processing method, and image processing system
RU2012119843A (ru) Способ отображения видеоданных на мобильном устройстве
CN109413411B (zh) 一种监控线路的黑屏识别方法、装置及服务器
CN109886129B (zh) 提示信息生成方法和装置,存储介质及电子装置
JP2019160310A (ja) 顕著なイベントに焦点を当てたオンデマンドビジュアル分析
JP2015106862A (ja) コンテンツ情報取得装置およびそのプログラム、ならびに、コンテンツ配信装置
WO2009039350A1 (en) System and method for estimating characteristics of persons or things
CN114140745A (zh) 施工现场人员属性检测方法、系统、装置及介质
KR102127276B1 (ko) 복수의 고해상도 카메라들을 이용한 파노라마 영상 감시 시스템 및 그 방법
JP2009301439A (ja) 情報提示システム、情報提示方法、情報提示プログラムとその記憶媒体
CN113920585A (zh) 行为识别方法及装置、设备和存储介质
US20180121729A1 (en) Segmentation-based display highlighting subject of interest
JP6831396B2 (ja) 映像監視装置
KR101937582B1 (ko) 인도 보안 안전 시스템
KR20190028016A (ko) 댁내를 모니터링하는 장치, 방법 및 컴퓨터 프로그램
JP2018190132A (ja) 画像認識用コンピュータプログラム、画像認識装置及び画像認識方法
WO2022022809A1 (en) Masking device
US20150106738A1 (en) System and method for processing image or audio data
KR101462269B1 (ko) 고화질 카메라의 부분 저장장치 및 방법
JP2001175959A (ja) 侵入物体検出方法及び侵入物体検出装置
CN110580640A (zh) 信息推送、接收方法、终端、数据处理服务端与系统
Dsouza et al. Artificial Intelligence Surveillance System

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant