CN105359516A - 视觉命令处理 - Google Patents

视觉命令处理 Download PDF

Info

Publication number
CN105359516A
CN105359516A CN201280070685.6A CN201280070685A CN105359516A CN 105359516 A CN105359516 A CN 105359516A CN 201280070685 A CN201280070685 A CN 201280070685A CN 105359516 A CN105359516 A CN 105359516A
Authority
CN
China
Prior art keywords
video camera
user
instruction
command
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280070685.6A
Other languages
English (en)
Other versions
CN105359516B (zh
Inventor
史蒂文·D·马丁
杨澍
格雷格·米勒
托尼·T·迪克罗斯
詹森·A·海汀斯
凯西·L·米勒
詹姆斯·W·欧文斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pelco Inc
Original Assignee
Pelco Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pelco Inc filed Critical Pelco Inc
Publication of CN105359516A publication Critical patent/CN105359516A/zh
Application granted granted Critical
Publication of CN105359516B publication Critical patent/CN105359516B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30204Marker
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30232Surveillance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00326Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus
    • H04N1/00328Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus with an apparatus processing optically-read information
    • H04N1/00334Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus with an apparatus processing optically-read information with an apparatus processing barcodes or the like

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)

Abstract

根据本公开的用于在视频摄像机处理视觉通信的实例方法包括:分析由视频摄像机捕获的视频内容以识别由摄像机的视野范围内的用户呈现给摄像机的视觉命令,执行从视频摄像机捕捉的视频内容识别的视觉命令,其中执行视觉命令包括设置视频摄像机的一个或多个运行参数,确定对应于命令是否成功执行的命令完成指示,以及对应于命令完成指示将命令完成指示提供给用户。

Description

视觉命令处理
背景技术
视频监控系统用在家庭、商业和政府环境以监控区域的未经授权的活动和/或未经授权的访问。例如,银行和赌场通常有视频监控系统来捕捉发生在经营场所的活动的视频,因为在这些企业处理大量的金钱。机场、火车站和港口经常使用视频监控作为这样的设施的整体安全的一部分。许多商店和购物中心也已安装了视频监控系统来监控经营场所的盗窃以及其它不良行为。军事和政府驻地经常使用视频监控系统来监控对设施未经授权的访问。监控系统也已经在某些地区实现以监控交通和/或行人的活动。视频监控系统也常用在工业环境中用于监控对设施的访问以及用于监控工业过程。
典型的视频监控系统可以包括部署在设施各处的数百个视频摄像机。传统的视频监控系统可以包括一种或多种类型的视频摄像机,包括记录被称为可见光光谱的电磁光谱的部分的摄像机,使用各种技术以捕捉低照明条件下的图像的夜视摄像机,和可用于捕捉电磁光谱的红外部分中的视频的热成像摄像机。视频摄像机的十足数量可以使配置和校准这些摄像机变成困难并且耗时的努力。
发明内容
根据本公开的用于在视频摄像机处理视觉通信的实例方法包括:分析由视频摄像机捕获的视频内容以识别由摄像机的视野范围内的用户呈现给摄像机的视觉命令,执行从视频摄像机捕捉的视频内容识别的视觉命令,其中执行视觉命令包括设置视频摄像机的一个或多个运行参数,确定对应于命令是否成功执行的命令完成指示,以及对应于命令完成指示将命令完成指示提供给用户。
这样的方法的实现可以包括一个或多个如下特征。检测由视频摄像机捕获的视频内容中的认证证书,并基于检测到的认证证书确定用户被授权发送命令信息给视频摄像机。将命令完成指示提供给用户包括发送电子邮件消息给用户。将命令完成指示提供给用户包括发送短信给用户。将命令完成指示提供给用户包括以预定的模式点亮视频摄像机上的一个或多个指示灯。分析视频内容包括转译条形码。分析视频内容包括转译二维数据矩阵。分析视频内容包括转译颜色模式。分析视频内容包括转译图标。执行在由视频摄像机捕获的视频内容中识别的视觉命令包括发送由视频摄像机捕获的视频内容到与用户相关联的移动设备。
根据本公开的被配置成接收和处理视觉命令的示例性视频摄像机包括:用于分析由视频摄像机捕获的视频内容以识别由摄像机的视野范围内的用户呈现给摄像机的视觉命令的工具;用于执行从由视频摄像机捕获的视频内容识别的视觉命令的工具,其中,执行视觉命令包括设置视频摄像机的一个或多个运行参数;用于确定对应于命令是否被成功执行的命令完成指示的工具;以及用于对应于所述命令完成指示将命令完成指示提供给用户的工具。
这样的视频摄像机的实现可以包括一个或多个以下特征。用于检测由视频摄像机捕获的视频内容中的认证证书的工具,以及用于基于检测到的认证证书确定用户被授权发送命令信息到视频摄像机的工具。用于将命令完成指示提供给用户的工具包括用于发送包括命令完成指示的电子邮件消息给用户的工具。用于将命令完成指示提供给用户的工具包括用于发送包括命令完成指示的短信给用户的工具。用于将命令完成指示提供给用户的工具包括用于以预定的模式点亮视频摄像机上的一个或多个指示灯的工具。用于分析视频内容的工具包括用于转译条形码的工具。用于分析视频内容的工具包括用于转译二维数据矩阵的工具。用于分析视频内容的工具包括用于转译颜色模式的工具。用于分析视频内容的工具包括用于转译图标的工具。用于执行在由视频摄像机捕获的视频内容中识别的视觉指令工具包括用于发送由视频摄像机捕获的视频内容到与用户相关联的移动设备的工具。
根据本公开的示例性有形的计算机可读介质,其上存储有用于处理在视频摄像机接收的视觉命令的计算机可读指令,包括被配置为导致计算机执行以下操作的指令:分析由视频摄像机捕获的视频内容以识别由摄像机的视野范围内的用户呈现给摄像机的视觉命令,执行在由视频摄像机捕获的视频内容中识别的视觉命令,其中执行视觉命令包括响应于识别视觉命令而设置视频摄像机的一个或多个运行参数,产生指示命令是否被成功地执行的命令完成指示,并将命令完成状态提供给用户。
这样的介质的实现可以包括一个或多个以下特征。被配置为导致计算机检测由视频摄像机捕获的视频内容中的认证证书的指令,并基于检测到的认证证书确定用户被授权发送命令信息给视频摄像机。导致计算机将命令完成指示提供给用户的指令包括导致计算机发送包括命令完成指示的电子邮件消息给用户的指令。导致计算机将命令完成指示提供给用户的指令包括导致计算机发送包括命令完成指示的短信给用户的指令。导致计算机将命令完成指示提供给用户的指令包括导致计算机以预定的模式点亮视频摄像机上的一个或多个指示灯的指令。导致计算机分析视频内容的指令包括导致计算机转译条形码的指令。导致计算机分析视频内容的指令包括导致计算机转译二维数据矩阵的指令。导致计算机分析视频内容的指令包括导致计算机转译颜色模式的指令。导致计算机分析视频内容的指令包括导致计算机转译图标的指令。导致计算机执行在由视频摄像机捕获的视频内容中识别的视觉命令的指令还包括导致计算机将由视频摄像机捕获的视频内容传送到与用户相关联的移动设备的指令。
根据本公开的被配置成接收和处理视觉命令的示例性视频摄像机包括成像传感器和处理器,成像传感器被配置为输出观察摄像机的视野范围的传感器数据,以及处理器被配置为执行程序指令以处理由成像传感器输出的视频数据以:分析由成像传感器捕获的视频内容以识别由摄像机的视野范围内的用户呈现给摄像机的视觉命令,执行从由视频摄像机捕获的视频内容识别的视觉命令,其中执行视觉命令包括设置视频摄像机的一个或多个运行参数,确定对应于命令是否被成功执行的命令完成指示,并对应于命令完成指示将命令完成指示提供给用户。
这样的视频摄像机的实现可以包括一个或多个以下特征。被配置为检测由视频摄像机捕获的视频内容中的认证证书的认证模块,基于检测到的认证证书确定用户被授权发送命令信息到视频摄像机。处理器被配置为发送包括命令完成指示的电子邮件消息给用户。处理器被配置为发送包括命令完成指示的短信给用户。处理器被配置为以预定的模式点亮视频摄像机上的一个或多个指示灯。命令处理模块被配置为转译使用条形码编码的命令。处理器被配置为转译使用多维数据矩阵编码的命令。处理器被配置为转译使用颜色编码技术编码的命令。处理器被配置为转译使用图标编码的命令。处理器被配置为响应于执行视觉命令,传输由视频摄像机捕获的视频内容到与用户相关联的移动设备。
根据本公开的用于映射监控系统中的视频摄像机的位置的示例性方法包括:在移动设备上显示由监控系统正在监视的设施的地图,接收表明设施中的用户选择的摄像机的位置的用户输入,使用移动设备产生摄像机的摄像机识别码,编码摄像机识别命令,摄像机识别命令包括摄像机识别码和与从用户接收的摄像机的位置相关联的位置信息,在移动设备的显示器上显示与摄像机识别命令对应的可见指示,以及确定是否从监控系统接收到对应于编码的摄像机识别命令的通信。
这样的方法的实现可以包括一个或多个以下特征。编码摄像机识别命令包括用条形码编码摄像机识别命令。编码摄像机识别命令包括用二维数据矩阵编码摄像机识别命令。编码摄像机识别命令包括将摄像机识别命令编码为颜色模式。编码摄像机识别命令包括将摄像机识别命令编码为图标。
根据本公开的用于映射监控系统中的视频摄像机的位置的示例性移动设备包括:用于在移动设备上显示由监控系统正在监视的设施的地图的工具,用于接收表明设施中的用户选择的摄像机的位置的用户输入的工具,用于使用移动设备产生摄像机的摄像机识别码的工具,用于编码摄像机识别命令的工具,摄像机识别命令包括摄像机识别码和与从用户接收的摄像机的位置相关联的位置信息,用于在移动设备的显示器上显示与摄像机识别命令对应的可见指示的工具,以及用于确定是否从监控系统接收到对应于编码的摄像机识别命令的通信的工具。
这样的移动设备的实现可以包括一个或多个以下特征。用于编码摄像机识别命令的工具包括用于以条形码编码摄像机识别命令的工具。用于编码摄像机识别命令的工具包括用于以二维数据矩阵编码摄像机识别命令的工具。用于编码摄像机识别命令的工具包括用于以颜色模式编码摄像机识别命令的工具。用于编码摄像机识别命令的工具包括用于以图标编码摄像机识别命令的工具。
根据本公开的示例性有形的计算机可读介质,其上存储有用于映射监控系统中的视频摄像机的位置的计算机可读指令,包括被配置为导致计算机执行以下操作的指令:在移动设备上显示由监控系统正在监视的设施的地图,接收表明设施中的用户选择的摄像机的位置的用户输入,使用移动设备产生摄像机的摄像机识别码,编码摄像机识别命令,摄像机识别命令包括摄像机识别码和与从用户接收的摄像机的位置相关联的位置信息,在移动设备的显示器上显示与摄像机识别命令对应的可见指示;以及确定是否从监控系统接收到对应于编码的摄像机识别命令的通信的指令。
这样的介质的实现可包括一个或多个以下特征。导致计算机编码摄像机识别命令的指令包括导致计算机以条形码编码摄像机识别命令的指令。导致计算机编码摄像机识别命令的指令包括导致计算机以二维数据矩阵编码摄像机识别命令的指令。导致计算机编码摄像机识别命令的指令包括导致计算机以颜色模式编码摄像机识别命令的指令。导致计算机编码摄像机识别命令的指令包括导致计算机以图标编码摄像机识别命令的指令。
根据本公开的用于校准视频摄像机的示例性方法包括:接收由视频摄像机正在监视的场景的视频内容,识别视频内容中的第一对象,分析第一对象以确定第一对象代表针对视频摄像机的校准命令,将第一对象添加到校准位置列表,基于校准位置列表为视频摄像机计算校准矩阵,并且使用校准矩阵将从视频摄像机接收的视频内容中的图像坐标转换为地理坐标。分析第一对象包括:确定第一对象的颜色与和校准命令相关联的触发颜色相对应,以及确定第一对象的形状与和校准命令相关联的触发姿态相对应。
这样的方法的实现可以包括一个或多个以下特征。响应于确定第一对象是用户,提供确认给用户。提供确认给用户包括发送电子邮件消息给用户。提供确认给用户包括发送短信给用户。提供确认给用户包括以预定的模式点亮视频摄像机上的一个或多个指示灯。
根据本公开的用于校准视频摄像机的示例性装置包括:用于接收由视频摄像机正在监视的场景的视频内容的工具,用于识别视频内容中的第一对象的工具,用于分析第一对象以确定第一对象代表针对视频摄像机的校准命令的工具,用于将第一对象添加到校准位置列表的工具,用于基于校准位置列表计算视频摄像机的校准矩阵的工具,以及用于使用校准矩阵将从视频摄像机接收的视频内容中的图像坐标转换为地理坐标的工具。用于分析第一对象的工具包括:用于确定第一对象的颜色与和校准命令相关联的触发颜色对应的工具,以及用于确定第一对象的形状与和校准命令相关联的触发姿态对应的工具。
这样的装置的实现可以包括一个或多个以下特征。用于响应于确定第一对象是用户,提供确认给用户的工具。用于提供确认给用户的工具包括用于发送电子邮件消息给用户的工具。用于提供确认给用户的工具包括用于发送短信给用户的工具。用于提供确认给用户的工具包括用于以预定的模式点亮视频摄像机上的一个或多个指示灯的工具。
根据本公开的示例性有形的计算机可读介质,其上存储有校准视频摄像机的计算机可读指令,包括被配置为导致计算机执行以下操作的指令:接收由视频摄像机正在监视的场景的视频内容,识别视频内容中的第一对象,分析第一对象以确定第一对象代表针对视频摄像机的校准命令,将第一对象添加到校准位置列表,基于校准位置列表计算视频摄像机的校准矩阵,以及使用校准矩阵将从视频摄像机接收的视频内容中的图像坐标转换为地理坐标。
导致计算机分析第一对象的指令包括:被配置为导致计算机确定第一对象的颜色与和校准命令相关联的触发颜色对应以及确定第一对象的形状与和校准命令相关联的触发姿态对应的指令。被配置为导致计算机响应于确定在视频内容中识别的对象是用户而提供确认给用户的指令。提供确认给用户的指令包括被配置为导致计算机发送电子邮件消息给用户的指令。提供确认给用户的指令包括被配置为导致计算机发送短信给用户的指令。提供确认给用户的指令包括被配置为导致计算机以预定的模式点亮视频摄像机上的一个或多个指示灯的指令。
附图说明
图1是视频监控系统的框图。
图2是图1中示出的视频服务器的框图。
图3是图1中示出的视频摄像机的框图。
图4是用于在视频摄像机接收和处理视觉命令的方法的流程图。
图5是与视频摄像机视觉通信的方法的流程图。
图6是使用视觉命令校准视频摄像机的方法的流程图,视觉命令使用图1中示出的系统可以被实现。
图7是使用姿态校准视频摄像机的方法的流程图。
图8是用于将视频摄像机与设施中的位置相关联的方法的流程图。
图9是用于更新视频监控系统中的摄像机位置信息的方法的流程图。
具体实施方式
提供了用于与图像捕获设备视觉通信和根据接收的通信实施动作的技术。例如,技术可以在视频监控系统中采用以通过使用呈现给图像捕获设备的视觉命令配置视频捕获设备来安装和校准图像捕获设备,从图像捕获设备获取信息和/或视频内容,或指示图像捕获设备执行其它动作。本文公开的技术可以给诸如安装者、系统集成商或技术员的用户提供用于协商与监控系统中的视频摄像机以及其它图像捕获设备的自组织网络连接的接口。
在本公开的至少一些实现中,用户可以校准或者改变联网或非联网的成像设备的设置。例如,用户可以使用视觉命令与独立的视频摄像机或支持网络的视频摄像机通信来与设备交互。用户也可以使用视觉命令与视频摄像机或其它成像设备通信以获取关于设备的信息。例如,用户可以发信号给设备来将网络地址或其它关于设备的信息发送给用户。视觉命令可以包括表明什么信息已经从摄像机请求以及用户将希望怎样接收信息的命令参数。视频摄像机可以被配置为使用各种技术传输请求的信息。摄像机可以被配置为通过一个或多个中介服务器发送信息给用户。例如,视频摄像机被配置为发送电子邮件到由用户指定的电子邮件地址,或者发送短信到移动设备,例如智能电话或平板电脑。视频摄像机可以被配置为通过与外部电子邮件服务器或短信服务器交互产生电子邮件或短信。视觉命令也可以指示视频摄像机将由摄像机捕获的视频内容流式传输到用户的移动设备。
在本公开的至少一些实现中,用户可以使视频摄像机产生信号以触发连接到摄像机的警报器或继电器。例如,视频摄像机可以触发连接到摄像机的继电器以执行一些动作,例如关闭防盗门。用户可以使用该技术,例如,测试监控系统的组件的集成和/或激活监控系统以执行对设施中的事件的一些响应。用户也可以将视觉命令呈现给视频摄像机,视频摄像机可以将信息传送到监控系统的操作者。例如,识别出正被监控的设施中的坏掉的或出故障的设备零件的用户可以呈现视觉命令给识别出坏掉的或出故障的设备的摄像机,摄像机可以将消息传送给操作者以采取正确行动。
下面的描述阐释了本文公开的视觉通信技术如何可被使用在监控系统中的三个例子:(1)新设备的安装和配置,(2)现有成像设备的维护和配置,和(3)成像设备的分析校准。
视频监控系统中的新设备的安装和配置可以是相当具有挑战性的。在一些系统中,上百的成像设备可以遍及设施被部署。视频摄像机或者其它成像设备通常是支持网络的,并且可以将由成像设备捕获的视频内容经过网络传送到服务器,服务器被配置为显示、存储和/或分析捕获的视频内容。视频摄像机往往分散在整个被监控的设施中。
技术员通常会将视频摄像机安装在期望的位置,然后试图协商设备已经被安装在其上的网络,来试图定位和连接到视频摄像机。在有大量的成像设备的设施中,在广大成像设备中识别哪个设备是新添加的设备可能是困难的。协商本地网络可能出现问题,如果没有大量手动努力来定位网络上的视频摄像机,技术员往往不能够定位和连接到新添加的视频摄像机。本文公开的视觉通信和命令技术可以被用来安装和配置新设备而不需要技术员具有网络的较深知识或者被配置的摄像机的网络地址。技术员可以呈现视觉命令给摄像机以获取摄像机的网络地址和/或来自视频摄像机的其它配置信息以及测试和配置摄像机。
监控系统的定期维护和配置在传统的监控系统中可能也是具有挑战性的。为大量成像设备中的特定成像设备确定网络地址或其它信息可能是相当困难的。系统可以在单个网络上包括成百的摄像机和/或其他成像设备,确定已经安装的成像设备的网络地址和/或其它信息是什么可能是困难的。通过允许技术员获取来自视频摄像机的信息和视频数据以及将视觉命令呈现给摄像机以校准和配置摄像机,本文公开的视觉通信和命令技术可以被用来维护和配置已经是监控系统的部分的现有的摄像机。
成像设备的分析校准也可能是具有挑战性的。在传统的系统中,成像设备的校准往往需要对执行校准的技术员进行大量训练。当校准成像设备以试图达到理想的结果时,往往技术员必须依靠试验和误差。本文公开的视觉技术可以被用来校准成像设备而不需要技术员通过网络访问摄像机,也可以提供一组预定的校准命令,技术员可以将该校准命令呈现到成像设备以测试各种校准设置。这些设置可以被选择以改进成像设备在各种环境条件中的性能和/或被选择以改进专用于成像设备的硬件的性能。成像设备可以被配置为识别视觉校准命令并给技术员呈现示例性静止图像或使用示例性校准图像由摄像机捕获的视频内容。视频摄像机可以被配置为识别在摄像机的视野范围内定位的用户的姿态,然后将那些姿态翻译成可以被视频摄像机执行的命令。
图1是视频监控系统100的框图,视频监控系统100可以被用来实现本文公开的技术。视频监控系统100包括多个视频摄像机105。视频摄像机105可以被配置为捕获被监控的区域的视频图像,并将捕获的视频内容经由网络115发送到视频服务器120。网络115可以包括一个或多个局域网(LAN)、广域网(WAN)或它们的组合。网络115可以是因特网。
视频监控系统100可以包括被配置为检测可见光谱内的电磁辐射的图像传感器,包括被配置为检测红外辐射的传感器的热成像摄像机,被配置为在低光照条件下运行的摄像机,或它们的组合。视频摄像机105可以被配置为对由视频摄像机105的图像传感器捕获的视频内容执行一些处理和/或视频分析。
视频服务器120可以被配置为经由网络115接收由视频摄像机105传送的视频内容。视频服务器120可以被配置为在一个或多个显示设备上显示传送来的视频内容的至少一部分。视频服务器120也可以被配置为将从视频摄像机105接收的视频内容存储在归档文件中。归档文件可以根据不同的标准可搜索,例如根据由哪个摄像机捕获的视频内容和/或视频内容被捕获的日期和/或时间。视频服务器120可以被配置为应用一个或多个编码和分析算法到从视频摄像机105接收到的视频内容,以识别由视频摄像机105正在监视的环境内的可疑对象或行动的存在。
图2是图1中示出的视频服务器120的例子的框图。在这个例子中,视频服务器120包括处理器205、存储器220、数据储存器230和网络接口240。存储器220包括网络接口模块222、视频处理模块224、数据存取模块226和消息模块228。存储器220可以包括一种或多种类型有形的非暂时的计算机可读存储器,例如,随机存取存储器(RAM)、只读存储器(ROM)、闪存或它们的组合。模块222、224、226可以包括被配置为导致处理器205执行本文讨论的动作的处理器可读指令。处理器可读指令可以直接地或者在编译之后由处理器执行。
处理器205可以包括被配置为访问存储器220的一个或多个微处理器。处理器205可以从存储器220读取数据也可以向存储器220写数据。处理器205也可以从存储器220读取可执行程序代码并执行程序代码。
数据储存器230可以包括可被用来存储从视频摄像机105接收的视频内容的有形的非易失性存储器。数据储存器230可以在存储器220或在单独的有形的非暂时的存储器中被实现。在一些实现中,数据储存器230可以作为可搜索数据库被实现,在该数据库中由视频摄像机105捕获的视频内容可以被归档。数据储存器230也可以被用来存储已经被视频处理模块224处理的视频。
网络接口模块222被配置为经由网络接口240从网络115接收数据。网络接口模块222也可以被配置为经由网络140将信息发送到视频摄像机105或其它网络连接设备。
视频处理模块224可以被配置为处理从视频摄像机105接收的视频内容。视频处理模块224可以应用一个或多个视频分析算法到从视频摄像机105接收的视频内容。例如,视频处理模块224可以执行一个或多个可以被用来识别视频内容中的事件的分析算法,例如在监控区域内出现人或动物,或者在监控区域内到来车辆。视频处理模块224也可以被配置为产生由视频摄像机105正在监视的场景的背景模型。场景的背景模型可以被视频处理模块224用来区别从视频摄像机接收的视频内容中的背景对象和前景对象。视频处理模块224可以被配置为在初始化期间通过分析由视频摄像机105捕获的视频内容构建背景模型来识别包括场景的背景的对象。视频处理模块224可以被配置为周期性地更新背景的模型。更新背景允许分析算法为改变光照条件(例如,白天对夜晚)或改变天气条件(例如,多云对晴天)而调整,否则会导致对象的错误识别。
数据存取模块226可以被配置为存取存储在数据储存器230中的数据并向数据储存器230写入数据。数据存取模块226可以被配置为对存储器220读取和/或写入数据。数据储存器230可以被用来存储由视频处理模块224从自视频摄像机105接收的数据导出的已存储的图像和背景模型。
消息模块228可以被配置为发送电子邮件、短信和/或语音消息给用户。消息模块228可以被配置为与电子邮件服务器或短信服务器接口以发送电子邮件消息或短信给用户。例如,消息模块228可以被配置为发送短信或电子邮件消息给用户以将命令的完成状态提供给用户。消息模块228可以被配置为从视频摄像机105接收发送电子邮件消息给用户的请求,并响应于接收该请求发送所请求的电子邮件消息或短信。
图3是图1中示出的视频摄像机105的例子的框图。视频摄像机105包括处理器305、存储器320、图像传感器350、透镜355和网络接口340。存储器320包括网络接口模块322、图像处理模块324、认证模块326和命令处理模块328。存储器320可以包括一种或多种类型的有形的非暂时的计算机可读存储器,例如随机存取存储器(RAM)、只读存储器(ROM)、闪存或它们的组合。模块可以包括可以被处理器305执行的处理器可执行指令。
透镜355被配置为捕获从被视频摄像机105正在监视的场景接收的光并将接收的光集中到成像传感器350。透镜也可以被配置为捕获在对人眼可见的电磁波谱的部分之外的电磁波波长。例如,透镜也可以被配置为将红外辐射集中到成像传感器350。成像传感器350被配置为检测电磁辐射并在被发送到视频服务器120之前输出可以被视频处理模块处理的信号。
成像传感器350可以被配置为检测电磁辐射的各种波长,并输出代表由传感器350检测的电磁辐射的传感器数据。成像传感器350可以包括电荷耦合器件(CCD)或CMOS有源像素传感器(APS),APS包括像素传感器阵列,其中每个像素包括光电探测器和有源放大器。成像传感器350可以包括热成像传感器,热成像传感器被配置为检测电磁波谱的红外范围内的红外辐射。红外范围包括大约在9000到14,000纳米范围之内的波长。各种类型的热成像传感器330可以被用在视频摄像机105中,例如,锑化铟(InSb)、铱砷化镓(InGaAs)、碲镉汞(CMT)或量子阱红外光探测器(QWIP)焦平面阵列(FPA),其响应于中波长和/或长波长红外辐射。
处理器305可以包括一个或多个被配置为访问存储器320的微处理器。处理器305可以从存储器320读取数据并向存储器320写入数据。处理器305也可以从存储器320读取可执行程序代码并执行程序代码。
网络接口模块322被配置为经由网络接口340从网络115接收数据。网络接口模块322也可以被配置为经由网络140向视频服务器120或其它网络连接设备发送信息。
视频处理模块324被配置为处理从成像传感器350接收的传感器数据以创建代表被视频摄像机105正在监视的场景的视频内容。视频处理模块也可以将视频内容提供给网络接口模块322。网络接口模块322也可以经由网络接口340将视频内容发送到视频服务器120。视频处理模块324也可以将视频内容提供给命令处理模块328。
命令处理模块328可以被配置为识别由用户发布给视频摄像机105的视觉命令。视觉命令在一些情况下对人眼是可见的,在其它情况下对人眼可能是不可见的但是对视频摄像机105的成像传感器350是可见的。视觉命令可以被用来指示视频摄像机执行一些动作,例如提供网络地址或其它标识符给用户或校准摄像机。命令处理模块328也可以被配置为发送命令信息给视频服务器120用于分析和处理,视频服务器120可以被配置为发送命令信息给视频摄像机105以被视频摄像机105执行。
视觉命令可以以各种方式呈现给视频摄像机105。例如,用户可以在摄像机前持有命令卡片,在命令卡片上包括打印的、绘制的或书写的命令信息。命令信息可以包括机器可读和/或人可读的一个或多个摄像机识别的命令的代表,所述命令指示视频摄像机105执行某个动作或多个动作。命令信息也可以包括用于视频摄像机105的数据和/或校准参数,和/或用于测试视频摄像机的校准的测试参数。
命令信息也可以包括可以被用来确定用户是否被授权指示摄像机105去执行命令的认证证书。认证证书可以为每个用户定做。例如,一些用户可以具有允许他们指示摄像机仅去执行由摄像机识别的命令的子集的认证证书,然而其他用户可以具有允许他们指示摄像机去执行不同的命令集的认证证书。
命令信息可以是打印的或手写的文本,或可以以条形码,快速响应(QR)码,或可以被用来将信息编码为机器可读格式的其它类型的数据矩阵或条形码被编码。命令信息也可以使用串行数据颜色模式或颜色值的矩阵被编码。一种这样的编码方案被熟知为由微软公司开发的高容量颜色条码(HCCB)规范。其它类型的光学可读编码方案也可以被使用。
虽然被描述为“卡片”,命令卡片不需要被印刷在卡片上。而是,命令卡片可以是在其上可以显示命令信息的任何种类的物理介质。物理介质可以放置在摄像机105的视野中,其中成像传感器350可以捕获包括命令信息的代表的视频内容。
命令信息也可在移动设备的显示设备上显示,例如移动电话、平板电脑、手提电脑系统或其它具有处理器的这样的设备,所述处理器可以执行存储在有形的计算机可读存储器中的处理器可执行指令。设备的显示器可以被配置为以上文关于在物理介质上呈现命令信息描述的各种格式中的任何一种显示命令信息。
视频摄像机105也可以被配置为允许用户使用红外接口与视频摄像机通信。例如,成像传感器350可以被配置为检测作为由启用红外的设备发送的红外信号发送的命令信息。设备可以是被配置为与视频摄像机105通信的专用设备。例如,专用设备可以包括用可以被用来与设备通信的一组命令信息预先编程的手持设备。设备也可以被配置为接受用户输入,例如认证证书、校准设置或其它数据,并将命令信息编码为可以被视频摄像机105解码和处理的红外信号。
启用红外的设备可以是包括红外端口的可编程设备,所述红外端口可以发送可以被成像传感器350检测的红外信号到视频摄像机105,然后命令处理模块328可以分析该信号以确定该信号是否包括命令信息。视频摄像机105也可以包括与成像传感器350分离的红外传感器(未示出),其可以被用来检测来自启用红外的设备的红外信号。启用红外的设备可以包括手持电脑、无线移动设备、移动电话、平板电脑、手提电脑系统或其它具有处理器的设备,所述处理器可以执行存储在有形的计算机可读存储器中的处理器可执行指令。
命令处理模块328可以被配置为对从已处理的成像接收的传感器数据执行几何校准以校正由摄像机的位置和设备的显示器、卡片材料或关于摄像机的命令信息在其上的其它材料导致的引入命令信息中的失真。视频摄像机105可以被配置为识别在距离视频摄像机105的透镜的特定范围内安置的命令信息,并忽视在特定范围外的对象位置以减少识别命令信息内容中的误差。
命令数据储存器334可以被配置为存储摄像机被授权执行的一组命令。命令数据储存器334可以被存储在存储器320中。选择地或者除了存储在存储器320中之外,命令数据储存器320可以被存储在视频摄像机105的单独的有形的计算机可读介质(未示出)中。
认证模块326可以被配置为在从用户接受命令之前认证该用户。在一个例子中,用户可以给摄像机呈现可以被认证模块326验证的认证证书。在一个例子中,用户可以给摄像机105呈现包括可以被命令处理模块328识别的认证证书的命令信息,且命令处理模块328可以给认证模块326提供认证证书用于验证。在一个例子中,如果用户给视频摄像机呈现包括完全管理员访问的认证证书,视频摄像机105可以被配置为在至少预定的时间期间内响应所有用户命令。
在另一个例子中,如果用户给视频摄像机105呈现提供对摄像机控制的有限访问的认证证书,视频摄像机105可以被配置为仅响应与呈现给视频摄像机105的认证证书有关的命令,并忽略呈现给视频摄像机105的其它命令。例如,第一个用户可以具有允许用户提交请求来自摄像机的信息的命令的认证证书,例如视频摄像机105的网络地址,而第二个用户可以具有允许视频摄像机105接受来自第二个用户的分析校准命令的认证证书,视频摄像机105不会从第一个用户接受该命令。
认证模块326也可以被配置为将认证证书发送到服务器120用于认证,而不是如上面描述的由视频摄像机105执行的认证步骤。
认证模块326可以访问存储在证书数据储存器332中的证书信息。证书信息可以在摄像机被制造时存储在摄像机中,可以在摄像机被安装在设施中时被更新,和/或在摄像机已经被安装在设施中后被更新。每个视频摄像机105可以被分配唯一的一组证书,或者可以被配置为包括用于摄像机被安装在其中的特定设施的一组证书。
用户接口模块330可以被配置为将反馈和/或其它信息提供给与视频摄像机105交互的用户。用户接口模块可以被配置为响应于从用户接收的命令发送信息给用户。用户接口模块330可以被配置为发送短信或电子邮件消息给用户设备。在一个例子中,用户可以在用户的移动电话、平板电脑或手提电脑的屏幕上呈现命令信息给摄像机。用户的设备可以包括允许用户选择被编码为上面描述的条形码、QR码或其它摄像机识别的格式的一种的命令的应用。关于信息的请求可以包括目的地址,用户想要在该目的地址从视频摄像机105接收请求的信息。用户接口模块330可以被配置为代表摄像机发送请求到消息模块以发送电子邮件消息或短信。用户接口模块330也可以被配置为经由网络115与外部电子邮件服务器或短信服务器接口。
在一个例子中,命令信息可以包括由用户提供的电子邮件地址或用户想要发送短信的电话号码,短信含有请求的被发送信息。用户接口模块330可以被配置为产生包括对视频服务器120请求的信息的消息,视频服务器120可以与一个或多个可以将消息路由到用户的中介服务器接口。例如,视频服务器120可以包括电子邮件服务器,电子邮件服务器可以产生包括由用户从视频摄像机105请求的信息的电子邮件消息。视频服务器120也可以实现产生短信的短信服务,短信可以被路由到用户的移动服务提供者用于递送到用户的移动设备,或者视频服务器120可以与第三方消息服务器120接口以产生和路由短信到用户的移动设备。
在另一个例子中,用户可以将命令信息呈现给摄像机,命令信息包括来自摄像机的命令请求信息,例如摄像机的网络地址。在其中有大量摄像机遍及设施被部署的特别大的设施内,关于信息命令的请求对于快速确定关于视频摄像机105的网络地址或其它信息可能特别有用,当维护或配置摄像机105时用户可以使用这些信息。在另一个例子中,用户可以将命令信息呈现给摄像机,导致摄像机触发或测试监控系统的其它组件。例如,用户可以将命令呈现给视频摄像机105以导致摄像机产生触发声音警报或无声警报或者导致防盗门关闭的信号。
视频摄像机105可以包括一个或多个指示灯,例如发光二极管(LED)、有机发光二极管(OLED)或可以被用户接口模块330点亮的发光元件以提供馈送给用户。例如,视频摄像机105可以响应于对用户表明摄像机已经识别用户呈现给视频摄像机的命令信息的用户命令,点亮一个或多个指示灯。用户接口模块330可以被配置为使用不同的照明模式和/或颜色点亮一个或多个指示灯,以表明对用户命令的不同响应。例如,用户接口模块330可以被配置为如果用户将不被认证模块接受的认证证书呈现给摄像机105,则以固态照明模式点亮视频摄像机105上的红色指示灯。在另一个例子中,如果用户呈现不被识别的命令给视频摄像机105,用户接口模块330可以被配置为以闪烁照明模式点亮指示灯,如果命令被命令处理模块328识别但是用户不被授权发布那个命令,用户接口模块330被配置为以第二模式点亮至少一个指示灯。
命令完成指示可以由视频摄像机105的命令处理模块328产生。用户接口模块330可以被配置为提供命令完成信息给用户。例如,用户接口模块330可以点亮摄像机上的一个或多个指示灯,或给用户发送表明由用户发布的命令已经按请求被执行的短信或电子邮件消息。相似地,如果命令处理模块328由于任何原因未能执行命令,用户接口模块330可以使用上面描述的任何通信技术通知用户命令没有被执行。例如,用户接口模块330可以点亮摄像机上的一个或多个指示灯,或发送给用户表明由用户发布的命令已经按请求被执行的短信或电子邮件消息。
图4是用于在视频摄像机接收和处理视觉命令的方法的流程图。图4中示出的方法可以使用图1-3中示出的系统被实现。
视频摄像机105检测呈现给视频摄像机105(阶段405)的视觉命令中的认证证书。视频摄像机105可以被配置为在执行由用户呈现给视频摄像机105的任何视觉命令之前认证用户。如上描述,视频摄像机105的视频处理模块324可以被配置为处理从成像传感器350接收的传感器数据。视频处理模块324可以从传感器数据产生视频内容,并将产生的视频内容提供给命令处理模块328。命令处理模块328可以被配置为识别由视频内容模块324和/或从包含在视频摄像机105中的附加的传感器输出的视频内容中的由用户呈现的认证证书,并将从用户接收到的认证证书提供给认证模块326用于验证。
在一些实现中,用户可以定位在摄像机的视野范围内的在其上具有打印的、书写的或绘制的认证证书的对象。认证证书也可以显示在便携式电子设备的显示器上,例如移动电话、平板电脑或手提电脑、个人数字助理或其它能够在显示屏幕上显示内容的电子设备。用户可以定位视频摄像机105的视野范围内的设备的显示器的取向,使得显示器面对透镜350。
视频摄像机105可以包括红外端口或其它与成像传感器350分离的传感器,该红外端口或传感器可以被用来检测来自用户的认证证书。视频摄像机105也可以被配置为允许用户使用红外或在通常对人可见的电磁频谱的部分之外的其它电磁频率与视频摄像机105通信。使用在对人可见的频谱的部分之外的电磁频谱的部分被发送到视频摄像机105的认证证书,尽管它们也许在通常对人眼可见的电磁频谱的部分之外,但在本文仍然称为“可见”信息。
做出用户是否被授权指示摄像机去执行命令的确定(阶段410)。认证模块326可以将从用户接收的认证证书与存储在证书数据储存器332中的认证证书信息进行比较。在一些实现中,认证模块326可以发送认证证书到视频服务器120用于认证。
如果用户没有被授权,认证模块326可以将用户没有被授权执行命令的信息通知用户(阶段415)。认证模块326可以指示用户接口模块330去通知用户无效的认证证书被接收。用户接口模块可以通过各种技术通知用户。例如,如果摄像机包括一个或多个指示灯,用户接口模块330能够以特定的颜色和/或照明模式点亮一个或多个指示灯,以表明被视频摄像机105接收的认证证书不是有效的。通过重新定位摄像机的视野范围内的命令信息,用户可仅需要再次呈现命令信息给视频摄像机105。在一些实现中,认证证书也许已经包括用户的联系信息,例如,手机号码和/或电子邮件地址或能够用来通知该用户其没有被授权去指示摄像机执行操作的用户。用户接口模块330可以产生短信或电子邮件消息去通知用户。用户接口模块330可以被配置为通过一个或多个中介服务器产生短信或电子邮件消息,中介服务器可以经由网络接口340通过网络115被访问。
如果用户被授权提交命令给视频摄像机105,视频摄像机105可以等待用户呈现命令给视频摄像机105(阶段420)。视频摄像机105的用户接口模块330可以被配置为通知用户摄像机已经进入命令接收模式。用户接口模块330可以被配置为使用上述的各种通信技术,例如,发送电子邮件或短信,以特定的颜色和/或照明模式点亮摄像机设备上的一个或多个指示灯。
视频摄像机105检测由摄像机捕获的视频内容中的命令信息(阶段420)。如上所述,视频摄像机105的视频处理模块324可以被配置为处理从成像传感器350接收的传感器数据。视频处理模块324可以从传感器数据产生视频内容,并将产生的视频内容提供给命令处理模块328。
视频摄像机105可以被配置为识别用户放置在摄像机的视野范围内的对象的命令信息。命令信息可以被打印、书写或绘制在对象上。命令信息也可以显示在便携式电子设备的显示器上,例如移动电话、平板电脑或手提电脑、个人数字助理或其它能够在显示屏幕上显示内容的电子设备。用户可以定位在视频摄像机105的视野范围内的设备的显示器的取向,使得显示器面对透镜350。
视频摄像机105可以包括红外端口或其它与成像传感器350分离的传感器,该红外端口或传感器可以被用来检测来自用户的命令信息。视频摄像机105也可以被配置为允许用户使用红外或在通常对人可见的电磁频谱的部分之外的其它电磁频率与视频摄像机105通信。使用在对人可见的频谱的部分之外的电磁频谱的部分被发送到视频摄像机105的命令信息,尽管它们也许在通常对人可见的电磁频谱的部分之外,但在本文仍然称为“可见”命令信息。
命令信息被分析以识别包含在命令信息中的命令(阶段430)。命令处理模块328可以识别以一种或多种方式编码的命令。例如,命令信息可以是印刷的或手写的文本,或可以以条形码、QR码、或可以被用来将信息编码为机器可读格式的其它类型的数据矩阵或条形码被编码。命令信息也可以使用串行数据颜色模式或颜色值的矩阵被编码,例如HCCB格式。其它类型的光学可读编码方案也可以被使用。命令信息也可以被编码为一系列红外或其它电磁频率的脉冲,其可以被成像传感器350和/或包含在视频摄像机105中的另一个传感器检测到。命令数据储存器334可以包括配置信息,命令处理模块328可以使用该配置信息确定什么命令信息格式被视频摄像机105支持。不同的视频摄像机可以被配置为支持不同的命令信息格式。
做出命令信息是否包括有效命令的确定(阶段435)。命令处理模块328可以比较在阶段430识别的命令信息与存储在命令数据储存器334中的有效命令的列表以确定识别的命令是否是有效的命令。如果命令信息不匹配有效命令的列表上列出的任何命令,命令将不被命令处理模块328执行。
如果识别的命令信息不包括有效命令,用户可以被通知接收的命令不是有效的(阶段440)。命令处理模块328指示用户接口模块330去通知用户无效的命令被接收到。例如,如果摄像机包括一个或多个指示灯,用户接口模块330以特定的颜色和/或照明模式点亮一个或多个指示灯,以表明由视频摄像机105识别的命令不是有效的。例如,特定的颜色和/或照明模式可以表明摄像机不能够解析命令,并且另外的颜色和/或照明模式可以表明识别的命令不包含在摄像机被配置执行的命令的列表上。
通知用户命令不是有效的可以提示用户再次尝试命令。通过重新布置在摄像机的视野范围内的命令信息,用户也许仅需要再次呈现命令信息给视频摄像机105。命令信息可包括用户的联系信息,例如,手机号码和/或电子邮件地址或用户可能已经将认证证书呈现给视频摄像机105,该认证证书包括用户的联系信息或者可以被用来为用户查找联系信息。
做出用户是否被授权指示视频摄像机105去执行请求的命令的确定(阶段445)。用户认证模块326可以比较呈现给视频摄像机105的认证证书与存储在认证数据储存器中的认证证书以确定用户是否被授权去指示视频摄像机105执行请求的命令。如果用户没有被授权去指示视频摄像机105执行请求的命令,视频摄像机105可以通知用户其没有被授权(阶段450)。视频摄像机105的用户接口模块330可以使用上述的各种通信技术中的一种或多种通知用户其没有被授权去执行请求的命令,例如发送电子邮件消息或短信,以特定的颜色和/或照明模式点亮摄像机设备上的一个或多个指示灯。如上指出的,特定的颜色和/或照明模式可以与摄像机产生的不同响应相关联。如果摄像机指示
如果命令是有效的,并且用户被授权执行命令,视频摄像机105可以执行呈现给摄像机的命令(阶段455)。视频摄像机可以响应于执行命令来设置视频摄像机的一个或多个运行参数。例如,如果视觉命令是校准命令,视频摄像机可以为视频摄像机设置一个或多个校准参数。在另一个例子中,如果视觉命令是视频流命令,视频摄像机105可以更新视频摄像机的输出参数,该输出参数可以指示视频摄像机将由摄像机捕获的视频内容流式传输到发布命令的用户的移动设备。视觉命令可以包括用户的移动设备的标识符,例如视频内容应该流式传输到的网络地址或手机号码。然而在另一个例子中,视觉命令可以是配置输出命令,该配置输出命令导致视频摄像机产生一个或多个配置参数的清单,例如设备的网络地址,与设备的硬件相关联的唯一标识符,例如媒体访问控制(MAC)地址或关于视频摄像机105的配置的其它信息。
可以确定对应于用户请求的命令是否成功地完成的命令完成指示(阶段460)。命令的命令完成指示表明命令是否成功地完成。关于命令的完成的细节信息也可以被产生。该信息可以包括关于为什么命令不能被完成的细节。
视频摄像机105可以被配置为提供完成状态给用户(阶段465)。如上所述,视频摄像机105的用户接口模块330可以使用上面描述的一种或多种通信技术在命令完成指示中通知用户命令是否成功地完成,例如发送电子邮件消息或短信和/或以特定的颜色和/或照明模式点亮摄像机设备上的一个或多个指示灯。如果被用来重放命令完成的信息的方法可以传送详细的消息,与命令的完成状态相关联的细节可以被发送到用户。例如,如果命令成功地完成,完成时间和/或其它信息可以被发送到用户。如果命令不能被完成,关于命令为什么不能被完成的细节可以被发送给用户。
图5是用于与视频摄像机视觉通信的方法的流程图,该方法可以使用图1-3中示出的系统被实现。图5中示出的方法可以通过电子设备被实现,所述电子设备例如移动电话、平板电脑或手提电脑、个人数字助理或其它能够在显示屏幕上显示信息的电子设备。用于配置或控制视频摄像机105的命令信息可以显示在电子设备的显示屏幕上,并通过将设备的显示器定位在视频摄像机105的视野范围内将命令信息呈现给视频摄像机105。用户不被限制为使用图5中示出的技术中所描述的电子设备将命令信息呈现给视频摄像机105。如上所述,用户可以将命令信息的硬拷贝显示到视频摄像机105,并通过本文描述的各种方法从视频摄像机105接收反馈。
现在返回到图5中示出的方法,设备从用户接收命令选择(阶段505)。设备可以执行提供用户接口的应用,该用户接口允许用户输入待编码的针对视频摄像机105的命令和/或允许用户从由视频摄像机105识别的命令的清单中选择。应用同样从用户接受与命令相关联的各种命令参数。例如,应用可以被配置为接受登录证书,例如用户名和密码,其允许用户访问来指示视频摄像机105执行各种命令。应用同样可以接受其它命令和命令参数。
设备将命令信息编码为视频摄像机105可以识别和处理的格式(阶段510)。命令信息能够以各种方式被编码。特定摄像机的命令处理模块328可以以一种或多种方式识别编码的命令。例如,命令信息可以是印刷的或手写的文本,或可以以条形码、QR码、或可以被用来将信息编码为机器可读格式的其它类型的数据矩阵或条形码被编码。命令信息也可以使用串行数据颜色模式或颜色值的矩阵被编码,例如HCCB格式。其它类型的光学可读编码方案也可以被使用。命令信息也可以被编码为一系列红外或其它电磁频率的脉冲,其可以被成像传感器350和/或包含在视频摄像机105中的另一个传感器检测到。命令数据储存器334可以包括配置信息,命令处理模块328可以使用该配置信息确定什么命令信息格式被视频摄像机105支持。不同的视频摄像机可以被配置为支持不同的命令信息格式。
视频摄像机105也可以识别手写或印刷的文本,和/或代表命令信息的绘制的或印刷的符号。例如,用户可以在平板电脑或其它便携式电子设备上绘制代表命令信息的符号,写入命令信息,或键入命令信息,并将设备的屏幕放置在视频摄像机105的视野范围内。
设备可以将编码的命令信息显示给摄像机(阶段515)。编码的命令信息可以显示在便携式电子设备的显示器上,便携式电子设备与显示器一起安置在视频摄像机105的视野范围内。在一些实现中,设备可以输出编码的命令的硬拷贝或打印输出,通过将信息放置在视频摄像机105的视野范围内,用户可以将编码的命令信息的硬拷贝呈现给视频摄像机105。如果用户不希望将设备带到视频摄像机105的位置,用户可以提前打印一组硬拷贝命令卡片。例如,视频摄像机105可以被安装在工厂或具有恶劣环境条件的其它位置,这样的环境条件可以损害不能经受这些环境的考验的电子设备。用户可以在能够经受视频摄像机105所安装的位置的恶劣环境条件的材料上产生命令的硬拷贝。
在另一个例子中,用户设备包括红外端口或其它相似接口,通过这些接口,用户设备经由各种波长的电磁辐射与视频摄像机105通信。视频摄像机105可以将命令信息编码用于使用红外端口或其它相似接口传输到设备。
可以做出响应是否从视频摄像机105被接收到的确定(阶段525)。如果已经从视频摄像机105接收到响应,设备将响应呈现给用户(阶段530)。例如,设备可以被配置为在设备的显示器上显示从视频摄像机105接收的响应。如果视频摄像机105响应于呈现给摄像机的命令信息发送电子邮件消息或短信,设备可以显示电子邮件消息或短信。视频摄像机105可以经由红外端口或其它相似接口将响应发送到设备,并且设备可以被配置为将从视频摄像机105接收的响应转换为可以显示给用户的格式。如上所述,视频摄像机105可以发送请求到视频服务器120以发送电子邮件消息或短信或通过电子邮件消息或短信服务器。
如果没有响应从视频摄像机105接收到,设备确定预定的响应周期是否已经过去(阶段535)。如果响应周期已经过去,设备通知用户在预定的响应周期过去之前视频摄像机105未能对命令响应(阶段540)。否则,如果响应周期还没过去,设备可以等待来自视频摄像机105的将要被接收的响应(阶段520)。
图6是使用视觉命令校准视频摄像机的方法的流程图,该方法可以使用图1-3中示出的系统被实现。图6中示出的方法使用视频摄像机105,视频摄像机105被配置为识别人类姿势并响应于识别的姿势来校准视频摄像机105。然而图6中示出的方法被描述为由下面描述的例子中的视频服务器102的视频处理模块224执行,图6中示出的方法可以由视频摄像机105的视频处理模块324和/或视频服务器120的视频处理模块224实现。
图6中示出的摄像机校准程序被执行以将现实世界坐标映射到摄像机图像坐标。校准程序产生可以被用来将摄像机坐标转换为现实世界坐标的校准矩阵,该校准矩阵也可以用来基于由摄像机捕获的视频内容确定场景中对象的尺寸、深度、对象的速度或其它信息。传统的摄像机校准技术需要人来手动地标记在图像域中的几个位置以及在现实世界域内的物理维度。传统的技术是冗长乏味的,并且需要多个人员完成校准过程。
曾经,用于校准视频摄像机的传统技术使用直接线性变换以确定摄像机校准矩阵。在DLT方法中,用户被要求在场景中标记六个点,然后在图像域和现实世界域中都测量那些点的坐标。一旦已经得到测量结果,然后必须求解十二个标准方程以确定校准矩阵。这个过程可能是至少需要两个人完成的非常缓慢、复杂和乏味的工作。一个用户必须被送到现场进行现实世界测量,另一个用户必须访问视频服务器去查看从视频摄像机接收的视频内容以进行图像域测量。
用于校准视频摄像机的另一种传统技术需要用户标记会合在两个不同点上的至少两对平行线和连接平行线会合的这两个点的直线。连接这些点的直线被称为消失线。在场景的高度处的用户然后可以用现实世界坐标和图像坐标被标记。查找表然后可以基于收集到的数据被创建。如果在场景中仅有一个消失点可用或根本没有平行线,当用户标记图像坐标和现实世界坐标时人员必须被送到现场。
本文描述的校准技术是稳健的、简单的,并且能够由单独的用户执行。用户可以在由摄像机监控的位置安装摄像机,并通过姿态与摄像机通信来校准摄像机。用户可以穿着摄像机能够识别的特殊制服。例如,如果制服是预定的颜色或具有预定的样式,摄像机可以被配置为识别制服。
本文公开的校准技术克服了传统校准技术出现的难题。在本文公开的校准技术中,用户的位置被确定在监控的场景内的三个不同位置。用户的位置通过分析由视频摄像机105捕获的视频内容确定以识别用户穿着的触发颜色或样式以及由用户做出的触发姿势。用户的头和脚的位置可以被确定在每个位置以创建三对坐标,这三对坐标可以被用来确定一组消失线。用户的高度是已知的。给定三对坐标和操作员的已知高度,消失线之间的距离可以被确定。使用这个信息,校准矩阵可以被确定,校准矩阵可以被用来将视频内容中观测的对象的图像坐标转换为现实世界坐标。
用户将用户的高度提供给校准算法(阶段605)。用户的高度可以以多种不同方式被提供给摄像机。例如,在一些实施方式中,用户可以将印记在物理介质上的视觉命令提供给视频摄像机105,或者视觉命令可以显示在移动设备的显示器上,例如移动电话、平板电脑或手提电脑系统。视觉命令可以指示视频摄像机进入校准模式,也可以将用户高度提供给视频摄像机作为与视频命令一起提供的命令参数。作为选择,通过按压摄像机上的按钮或其它控制接口,视频摄像机105可以进入校准模式,用户高度可以作为视觉命令被提供给视频摄像机,一经进入校准模式视觉命令被视频摄像机识别。例如,用户可以在一块纸上或其它表面上书写用户高度,并将手写信息保持在视频摄像机前面。用户高度也可以使用上面描述的各种编码技术被编码为由视频摄像机105识别的格式。视频摄像机105也可以经由网络115被连接到视频服务器120,视频服务器120可以发送命令给视频摄像机105以进入校准模式。视频服务器120可以被配置为提供可以从用户接收用户高度的用户接口。
如果用户还没有处在将被校准的视频摄像机105监控的场景中,用户然后穿着特定颜色或样式制服进入正在被监控的场景中(阶段610)。如上所述,为了校准摄像机的目的,制服可以是可以被视频摄像机105识别的特定颜色或样式。
用户然后选择场景中的三个位置以执行由监控系统的视频分析算法识别的预定的姿态(阶段615)。选择的三个位置优选尽可能地接近场景的边缘。然而,场景内的任何三个位置可以被选择。
穿着预定的触发颜色的用户移动到选择的位置,执行预定的触发姿态,然后等待对命令的响应(阶段620)。监控系统的视频分析算法可以被配置为识别各种姿态。例如,监控系统可以被配置为识别用户站立成“交叉”姿态,用户的胳膊延伸到旁边并保持与用户的身体垂直。监控系统也可以被配置为识别其它姿态,例如用户交叉他或她的胳膊,用户弯腰,或用户的其它姿态。此外,用户可以移动到第一选择位置,然后给视频摄像机呈现监控系统可识别的表明用户位于选择的校准点上的视觉命令。
然后可以做出用户是否已经接收到对命令的响应的确定(阶段625)。如果触发颜色和姿态在视频摄像机105捕获的内容中被检测到,监控系统的视频分析算法可以产生表明校准命令已经被接收到的短信或电子邮件,然后将短信或电子邮件发送到用户的移动设备。监控系统的视频分析算法也可以提供其它类型的反馈,例如表明校准命令已经被接收到的视频摄像机上的闪烁的指示灯。
如果没有响应于制服的颜色和/或样式和用户的姿态的响应被接收到,用户可以选择场景中的新位置来执行命令姿态(阶段630)。如果视频分析算法没有识别制服颜色/样式和姿态组合,用户可以在场景中尝试可替换的位置以查看命令姿态是否将在替换位置被识别。
如果响应于制服的颜色和/或样式和用户的姿态的响应被接收到,可以做出三个位置是否已经被测量的确定(阶段635)。如果所有三个位置还没有被测量,表明校准过程完成的响应可以被提供给用户。例如,短信或电子邮件消息可以被发送到用户以通知用户校准摄像机所需要的信息已经被获得。视频摄像机105上的指示灯也可以被点亮以表明校准信息已经被获得。否则,如果用于额外位置的信息需要被收集的话,用户可以移动到下一个选择的位置并执行预定的姿态(阶段620)。
图7是使用姿态校准视频摄像机的方法的流程图。图7中示出的方法可以由图1-3中示出的监控系统实现以使用姿态校准视频摄像机。图7中示出的方法可以响应于用户呈现校准命令给视频摄像机105被实现,例如图6中示出的方法。
图7中示出的方法可以在视频服务器120中被实现。作为选择,视频摄像机105可以被配置为执行该方法的一些或所有校准步骤。虽然图7中描述的方法描述了使用姿态来传送校准命令给视频摄像机105,但姿态也可以被用来传送其它类型的命令到视频摄像机。
视频内容从视频摄像机105被接收到(阶段705)。视频摄像机105可以被指示开始捕获视频内容。当视频摄像机105被加电时,视频摄像机105开始捕获视频内容。作为选择,视频摄像机105也可以被配置为包括按钮或其它控件,当其被激活时,导致视频摄像机105开始捕获视频内容。视频摄像机可以执行各种启动程序,例如初始化位置列表。位置列表存储可以被用来为视频摄像机105确定校准矩阵的位置数据。
背景模型可以通过处理由视频摄像机105提供的视频内容被构造(阶段710)。视频服务器120的视频处理模块224可以处理从视频摄像机105接收的视频内容以识别什么构成场景的背景。背景模型可以被用来区分场景中的背景对象与可能感兴趣的前景对象。
视频内容中的动作可以被识别用于进一步分析(阶段710)。视频处理模块224可以识别视频内容中的动作。视频内容中的动作可以表明感兴趣的对象已经进入场景的前景。例如,用户可能已经进入摄像机的视野范围内,并将姿态命令提供给视频摄像机105。视频处理模块224可以从视频摄像机105接收的视频内容中减去背景以识别视频内容中正在移动的前景对象。视频处理模块224可以被配置为将不同的命令与用户穿着的触发颜色和用户做出的触发姿势的不同组合相关联。视频处理模块224也可以被配置为识别不同的样式以及颜色。
检测的动作然后可以被分组成候选对象(阶段720)。如果对象彼此间的距离在一定范围内,视频处理模块224可以将彼此紧邻的对象组合成单个较大的对象。使用区域增长算法,相邻的像素可以被分组在一起来形成对象。如果对象比预定的彼此间阈值距离更接近,相邻的对象可以被分组在一起。对象距离可以使用对象像素扩大方法来计算。对于每个对象,对象的大小一次可以扩大一个像素。在扩大对象‘n’次之后(其中n是整数值),如果对象之间的距离被确定为n且如果n小于预定的阈值距离,两个对象可以被分组在一起。
来自阶段720的候选对象然后可以被分析(阶段725)。视频处理模块224可以分析对象以确定任一对象是否是穿着触发颜色以及执行触发姿态的用户。视频处理模块224可以分析检测的对象的颜色以确定对象是否是与命令相关联的触发颜色。视频处理模块224还可以分析对象的形状和对象的运动,以确定对象是否匹配与校准命令相关联的触发姿态。对象还可以被分析以确定用户的头和脚的估计位置(如果对象确实是用户)。因为用户的高度保持恒定,这个已知的变量可用于求解其它未知值。头和脚的位置提供一对可用于计算消失线的坐标。消失线与用户的高度一起,可用来构建查找表,该查找表可用于将图像坐标转换到现实世界坐标。只要被分析的对象与地面接触,查找表可以被用来确定场景中的对象的高度、大小和深度。
视频处理模块224然后可以从识别的对象中选择候选对象(阶段730)。视频处理模块然后可以确定所选择的候选对象是否已经被添加到位置列表(阶段735)。位置列表存储已经被分析并确定为用户的对象。一旦位置列表被填充有至少三个对象位置数据,视频处理模块224可使用收集到的数据产生查找表,该查找表可用于将图像坐标转换到现实世界坐标。如果选择的候选对象已经在位置列表中,视频处理模块不需要再次考虑所选择的对象,而是选择另一个候选对象(阶段730)。
视频处理模块224然后可以确定所选择的候选对象的颜色是否对应于与校准指令相关联的触发颜色(阶段740)。视频处理模块224可以识别触发颜色,并且视频处理模块224可以将某种触发颜色与特定的命令相关联,以及将其它触发颜色与其它命令相关联。如果所选择的候选对象的颜色不匹配与校准指令相关联的触发颜色,选择的候选对象被认为与用户不相关,视频处理模块224可以选择另一个候选对象。否则,如果对象的颜色匹配触发颜色,进行确定对象形状是否对应于触发姿态(阶段745)。
如果对象形状不匹配触发姿态,所选择的对象可以被丢弃而另一个候选对象可以被选择(阶段730)。所选择的对象的颜色匹配触发颜色,但与命令相关联的触发姿态没有被识别。如果匹配触发颜色的对象进入场景,或者穿着触发颜色的用户进入场景但不执行触发姿态,就可能发生这种情况。所选择的对象的骨架可以被提取并使用不同的姿态识别方法与触发姿态比较。
如果触发姿态也匹配,候选对象可以被添加到位置列表(阶段750),并且确认校准命令被识别(阶段755)。确认可以以各种方式被提供给用户。例如,表明校准命令已经被识别的短信或电子邮件消息可以被发送到用户的移动设备。确认消息可以向用户表明有多少位置已经为校准命令记录,以及还需要多少位置用于校准计算。确认也可以通过点亮视频摄像机105上的指示灯被提供以表明校准信息已经被获得。
可以确定额外的位置是否被需要来确定视频摄像机105的校准参数(阶段760)。如果不需要额外的位置信息,摄像机的校准矩阵可以被计算(步骤790)。一旦已经获得至少三个位置的位置信息,校准矩阵可以为视频摄像机105被计算,该校准矩阵可用于将图像坐标变换到现实世界坐标。
用户的头和脚的位置可以在被捕获以创建三对坐标的每个位置被确定。因为用户的高度在整个校准过程中保持不变,这些坐标可以被用来确定一对消失线。由于用户的高度也是已知的,消失线可以用来创建校准矩阵,该校准矩阵可以被用来将视频摄像机105捕获的视频内容中的图像坐标转换为现实世界坐标。校准矩阵可以被用来将从视频摄像机105接收到的视频内容中的图像坐标转换为正在被监控的场景中的地理坐标。基于由摄像机捕获的视频内容,校准矩阵然后可以被用来确定场景中的对象的大小、深度、速度、或者其它信息。
如果用于至少三个位置的校准信息还没有被捕获,可以确定是否存在要处理的额外的候选对象(阶段765)。如果存在要处理的更多候选对象,候选对象可以被选择以确定触发条件是否已经被那个对象满足(阶段730)。否则,如果不再有要处理的候选对象,可以确定校准过程是否已经超时(阶段770)。校准方法可以包括超时参数,其可以被用来确定在过程重新启动之前,用户需要花多长一段时间在三个选择的位置中的每一个执行触发姿态。超时参数也可以用于确定用户在一个位置执行触发姿态与在下一个位置执行触发姿态之间可能经过多长一段时间。如果用户在预定的时间周期消逝之前在下一个位置不执行触发姿态,校准过程将重新启动。
如果校准过程没有超时,校准方法可以继续执行阶段715,其中运动可以在从视频摄像机105接收到的视频内容中被检测到。否则,如果校准过程已超时,可以将超时消息提供给用户(阶段775)。超时消息可以以各种方式提供给用户。例如,表明校准过程已超时的短信或电子邮件消息可以被发送到用户的移动设备。确认也可以通过点亮视频摄像机105上的指示灯被提供,以表明校准过程已超时。指示灯可以以和确认消息不同的颜色和/或照明模式被点亮,以区分超时消息与确认消息。迄今已收集(如果有的话)的位置信息也可以被丢弃。例如,响应于校准过程超时,在位置列表中的任何位置的数据可以被丢弃。额外的内容然后可以从视频摄像机105接收(阶段780),并且校准过程再次在接收到的视频内容中检测到动作(阶段715)。
图8是用于将视频摄像机与设施中的摄像机的相对位置相关联的方法的流程图。用于识别设施内的摄像机的位置的传统技术可能是冗长乏味的过程,其中由每个摄像机捕获的内容可以被查看,摄像机的位置可以由监控来自摄像机的视频内容的用户手动记录。
基于待被视频监控系统理解和处理的摄像机之间的空间关系,视频摄像机的地图位置可以被用来为命令提供信息。例如,视频服务器120可以包括用户接口模块,用户接口模块可以产生呈现设施的地图上的摄像机位置的覆盖物的接口,用户接口模块允许守卫者选择摄像机去查看由选择的摄像机捕获的视频内容。用户接口也可以被配置为允许守卫者输入包括空间元素的命令,例如,“将来自摄像机的内容显示在当前摄像机的左侧。”用户接口模块可以被配置为转换这样的空间感知元素以识别所选择的摄像机。
在图8示出的方法中,用户可以在移动设备上加载正在被监控的设施的地图,所述移动设备例如,移动电话、平板电脑、手提电脑系统或具有执行存储在有形的计算机可读存储器中的处理器可执行指令的处理器的其它这样的设备(阶段805)。移动设备可以被配置为发送设施地图的副本的请求到视频服务器120,并接收来自视频服务器120的设施地图的电子副本。移动设备可以被配置为经由有线或无线连接通过网络115或另一个网络与视频服务器120通信。
表明摄像机的位置的用户输入可以被移动设备接收(阶段810)。移动设备可以包括触摸屏界面,其允许用户通过触摸地图添加摄像机的位置。移动设备可以被配置为提示用户是否用户想在选定的位置增加新的摄像机。如果用户表明用户想要在选定的位置添加新的摄像机到地图,可以为摄像机产生摄像机识别码(阶段815)。摄像机识别码提供摄像机的标识符,该标识符可以被视频服务器120用来识别摄像机。摄像机识别码可以在移动设备上产生,或者可以从视频服务器120请求,视频服务器120可以被配置为存储设施地图和摄像机位置信息。
摄像机识别码可以用摄像机识别命令被编码成能够由视频摄像机105识别和处理的格式(阶段820)。摄像机识别命令还可以包括识别设施中的位置的位置信息,所述位置由用户在由移动设备显示的设施的地图上选择。位置信息可以不同方式被编码。例如,位置信息可以被表示二维网格上的X和Y坐标,该X和Y坐标可以与设施的2-D地图上的坐标相关联。Z坐标可以包含在由3-D地图表示的设施的位置信息中或代表多层设施的层的位置信息中。
如上所述,命令信息可以以各种方式被编码。例如,命令信息可以被编码为条形码、QR码或可以用来将信息编码成机器可读格式的其它类型的数据矩阵或条形码。命令信息也可以使用串行数据颜色模式或颜色值矩阵被编码,例如HCCB格式。其它类型的光学可读的编码方案也可以被使用。命令信息也可以被编码为可以被图像传感器350和/或视频摄像机105中包括的另一传感器检测的一系列红外脉冲或其它电磁频率的脉冲。不同的视频摄像机可以被配置为支持不同的命令信息格式。
编码的摄像机识别命令的可见指示可以显示在移动设备的显示器上(阶段825)。移动设备然后可以被放置在视频摄像机105的视野范围内,视频摄像机105然后可以识别编码的摄像机识别命令。视频摄像机105可以解码已编码的命令,并将所接收到的摄像机识别码发送到视频服务器120。视频摄像机105可以发送额外的信息给视频分析服务器,例如,摄像机的网络地址,视频服务器120可以使用所述信息将视频摄像机105与摄像机识别码相关联。视频服务器120可以确定摄像机105是否已经与摄像机识别码相关联。如果摄像机还没有与视频识别码相关联,视频服务器120可以更新由视频服务器120保持的摄像机位置信息,并发送摄像机位置信息已经被更新的确认。如果摄像机已经与视频识别码相关联,视频服务器120可以被配置为将那个代码与消息一起发送到用户的移动设备,该消息表明摄像机已经被映射到那个代码。如果摄像机的位置已经变化,用户可以使用与摄像机相关联的摄像机识别码去更新摄像机位置信息。例如,移动设备可以包括允许用户更新现有的摄像机的位置的界面。
可以确定是否已接收到摄像机识别命令的响应(阶段835)。视频摄像机105可以确认摄像机识别命令已经被视频监控系统100成功解码和执行。视频服务器120还可以响应于摄像机识别命令发送短信或电子邮件消息到用户的移动设备。
如果对摄像机识别命令的响应已经被接收到,设备可以被配置成呈现响应给用户(阶段840)。例如,设备可以在设备的显示器上显示接收到的响应。视频摄像机105可以响应于呈现给摄像机的命令信息发送电子邮件消息或短信,并且设备可以显示电子邮件消息或短信。视频摄像机105可以经由红外端口或其它类似的接口将响应通信给设备,并且设备可以将从视频摄像机105接收的响应转换为可以显示给用户的格式。
如果没有响应从视频摄像机105接收到,设备可以被配置成确定预定的响应周期是否已经过去(阶段850)。如果响应周期已过去,设备可以被配置为通知用户在预定的响应周期过去之前视频摄像机105未能响应命令(阶段855)。否则,如果响应周期还没有过去,设备可以等待从视频摄像机105接收响应(阶段830)。
移动设备可以提供允许用户在地图上将现有的摄像机拖放到新的位置的用户界面。例如,如果摄像机在设施内被移动到新的物理位置,用户可能希望在地图上移动摄像机的位置以更精确地反映设施内的摄像机的位置或更新地图信息。
图9是用于在视频监控系统中更新摄像机位置信息的方法的流程图。图9中示出的方法可以通过图1-3中示出的监控系统来实现。图9中示出的步骤可以通过视频摄像机105和视频服务器120来实现。
检测摄像机识别命令(阶段910)。摄像机识别命令可以包含唯一的摄像机标识符和摄像机位置。摄像机位置可以作为一组坐标被提供,该坐标对应于正在被视频摄像机105监控的设施中的位置。视频摄像机105的命令处理模块328可以检测包含在由视频摄像机105捕获的视频内容中的摄像机识别命令,并且可以从命令中提取摄像机标识符和摄像机位置信息。摄像机识别命令可以使用上面描述的各种格式中的任何一种被编码。命令处理模块可以被配置为提供摄像机标识符和摄像机位置信息给视频服务器120,使得视频服务器120可以更新由服务器120保持的摄像机位置信息。视频摄像机105也可以被配置为无需首先检测摄像机识别命令而提供视频内容给视频服务器120,视频服务器120可以被配置为检测摄像机识别命令。
视频服务器120然后可以使用与命令一起提供的位置信息更新由服务器保持的摄像机位置信息(阶段910)。视频服务器120可以为正在被监控的设施中的每个摄像机保持摄像机标识符和位置信息之间的映射。视频服务器120也可以将可以被用来识别视频摄像机105的其它信息,例如视频摄像机105的网络地址,映射到唯一的摄像机标识符。由视频服务器120保持的映射可以被视频服务器120使用以确定正在被监控的设施中的多个摄像机之间的空间关系。例如,摄像机识别和摄像机的空间位置之间的映射可以被用来允许用户从第一选择的摄像机的左边的第二摄像机请求信息,并且视频服务器120可以使用映射信息去识别所选择的摄像机的左边的摄像机。视频服务器120可以访问由第二摄像机采集的相关联的视频内容,并响应于命令将它流式传输到用户。
视频服务器120可以提供地图信息已被更新的确认给用户(阶段915)。例如,视频服务器120可以响应于用户呈现摄像机识别命令发送可以显示给用户的短信或电子邮件消息到用户的移动设备。
描述的各种说明性逻辑块、模块和算法阶段可以实现为电子硬件、计算机软件或两者的组合。为了清楚地阐释硬件和软件的这个互换性,各种说明性组件、块、模块和阶段在上文大体上按照它们的功能被描述。这样的功能被实现为硬件还是软件取决于在总体系统上施加的设计约束。描述的功能可以以不同的方式被实现。此外,模块、块或阶段内的功能的分组是为了便于描述。特定的功能可以从一个模块或块中移动而不偏离本公开。
描述的各种说明性逻辑块和模块可以使用通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或其它可编程逻辑器件、分立的门或晶体管逻辑、分立的硬件元件或被设计为执行本文所述的功能的其任意组合来实现或执行。通用处理器可以是微处理器,但在替代方案中,处理器可以是任何处理器、控制器、微控制器或状态机。处理器也可以被实现为计算设备的组合,例如,DSP和微处理器、多个微处理器、与DSP核结合的一个或多个微处理器、或任何其它此类配置的组合。
描述的方法或算法的操作可以直接实施在硬件中,在由处理器执行的软件模块中,或两者的组合中。软件模块可以驻留在RAM存储器、闪存储器、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬盘、可移动磁盘、CD-ROM或任何其它形式的存储介质中。示例性存储介质可耦合到处理器,使得处理器能够从存储介质中读取信息并将信息写入到存储介质。在替代方案中,存储介质可以集成到处理器。处理器和存储介质可以驻留在ASIC中。可以对上面提供的说明书进行各种改变和修改,而不偏离本公开或所附权利要求的范围。例如,虽然元素可能以单数被描述或要求保护,但是复数可包括在内。此外,方面和/或实施方式的部分或全部可以与其它方面和/或实施方式一起被利用。

Claims (70)

1.一种用于在视频摄像机处理视觉命令的方法,所述方法包括:
分析由所述视频摄像机捕获的视频内容以识别由所述摄像机的视野中的用户呈现给所述摄像机的视觉命令;
执行从由所述视频摄像机捕获的所述视频内容中识别的所述视觉命令,其中执行所述视觉命令包括设置所述视频摄像机的一个或多个运行参数;
确定对应于所述命令是否被成功执行的命令完成指示;及
对应于所述命令完成指示,将所述命令完成指示提供给用户。
2.根据权利要求1所述的方法,还包括:
检测由所述视频摄像机捕获的所述视频内容中的认证证书;及
基于检测到的所述认证证书确定用户被授权发送命令信息给所述视频摄像机。
3.根据权利要求1所述的方法,其中将所述命令完成指示提供给所述用户包括发送电子邮件消息给所述用户。
4.根据权利要求1所述的方法,其中将所述命令完成指示提供给所述用户包括发送短信给所述用户。
5.根据权利要求1所述的方法,其中将所述命令完成指示提供给所述用户包括以预定的模式点亮所述视频摄像机上的一个或多个指示灯。
6.根据权利要求1所述的方法,其中分析所述视频内容包括转译条形码。
7.根据权利要求1所述的方法,其中分析所述视频内容包括转译二维数据矩阵。
8.根据权利要求1所述的方法,其中分析所述视频内容包括转译颜色模式。
9.根据权利要求1所述的方法,其中分析所述视频内容包括转译图标。
10.根据权利要求1所述的方法,其中执行在由所述视频摄像机捕获的所述视频内容中识别的所述视觉命令还包括:
将由所述视频摄像机捕获的所述视频内容发送到与所述用户相关联的移动设备。
11.一种被配置为接收和处理视觉命令的视频摄像机,所述视频摄像机包括:
用于分析由所述视频摄像机捕获的视频内容以识别由所述摄像机的视野中的用户呈现给所述摄像机的视觉命令的工具;
用于执行从由所述视频摄像机捕获的视频内容识别的所述视觉命令的工具,其中,执行所述视觉命令包括设置所述视频摄像机的一个或多个运行参数;
用于确定对应于所述命令是否被成功执行的命令完成指示的工具;
用于对应于所述命令完成指示将所述命令完成指示提供给用户的工具。
12.根据权利要求11所述的视频摄像机,还包括:
用于检测由所述视频摄像机捕获的视频内容中的认证证书的工具;及
用于基于检测到的所述认证证书确定用户被授权发送命令信息到所述视频摄像机的工具。
13.根据权利要求11所述的视频摄像机,其中用于将所述命令完成指示提供给所述用户的工具包括用于发送包括所述命令完成指示的电子邮件消息给所述用户的工具。
14.根据权利要求11所述的视频摄像机,其中用于将所述命令完成指示提供给所述用户的工具包括用于发送包括所述命令完成指示的短信给所述用户的工具。
15.根据权利要求11所述的视频摄像机,其中用于将所述命令完成指示提供给所述用户的工具包括用于以预定的模式点亮所述视频摄像机上的一个或多个指示灯的工具。
16.根据权利要求11所述的视频摄像机,其中用于分析所述视频内容的工具包括用于转译条形码的工具。
17.根据权利要求11所述的视频摄像机,其中用于分析所述视频内容的工具包括用于转译二维数据矩阵的工具。
18.根据权利要求11所述的视频摄像机,其中用于分析所述视频内容的工具包括用于转译颜色模式的工具。
19.根据权利要求11所述的视频摄像机,其中用于分析所述视频内容的工具包括用于转译图标的工具。
20.根据权利要求11所述的视频摄像机,其中用于执行在由所述视频摄像机捕获的视频内容中识别的所述视觉指令的工具还包括:
用于将由所述视频摄像机捕获的视频内容发送到与所述用户相关联的移动设备的工具。
21.一种有形的计算机可读介质,其上存储有用于处理在视频摄像机接收的视觉命令的计算机可读指令,所述指令包括被配置为导致计算机执行以下操作的指令:
分析由所述视频摄像机捕获的视频内容以识别由所述摄像机的视野中的用户呈现给所述摄像机的视觉命令;
执行在由所述视频摄像机捕获的视频内容中识别的所述视觉命令,其中执行所述视觉命令包括响应于识别所述视觉命令来设置所述视频摄像机的一个或多个运行参数;
产生指示所述命令是否被成功执行的命令完成指示;及
将所述命令完成状态提供给所述用户。
22.根据权利要求21所述的介质,还包括被配置为导致计算机执行以下操作的指令:
检测由所述视频摄像机捕获的视频内容中的认证证书;及
基于检测的所述认证证书确定用户被授权发送命令信息给所述视频摄像机。
23.根据权利要求21所述的介质,其中导致所述计算机将所述命令完成指示提供给所述用户的所述指令包括导致所述计算机发送包括所述命令完成指示的电子邮件消息给所述用户的指令。
24.根据权利要求21所述的介质,其中导致所述计算机将所述命令完成指示提供给所述用户的所述指令包括导致所述计算机发送包括所述命令完成指示的短信给所述用户的指令。
25.根据权利要求21所述的介质,其中导致所述计算机将所述命令完成指示提供给所述用户的所述指令包括导致所述计算机以预定的模式点亮所述视频摄像机上的一个或多个指示灯的指令。
26.根据权利要求21所述的介质,其中导致所述计算机分析所述视频内容的所述指令包括导致所述计算机转译条形码的指令。
27.根据权利要求21所述的介质,其中导致所述计算机分析所述视频内容的所述指令包括导致所述计算机转译二维数据矩阵的指令。
28.根据权利要求21所述的介质,其中导致所述计算机分析所述视频内容的所述指令包括导致所述计算机转译颜色模式的指令。
29.根据权利要求21所述的介质,其中导致所述计算机分析所述视频内容的所述指令包括导致所述计算机转译图标的指令。
30.根据权利要求21所述的介质,其中导致所述计算机执行在由所述视频摄像机捕获的所述视频内容中识别的所述视觉命令的所述指令还包括导致所述计算机将由所述视频摄像机捕获的所述视频内容传送到与所述用户相关联的移动设备的指令。
31.一种视频摄像机,包括:
成像传感器,所述成像传感器被配置为输出所述观察摄像机的视野的视图的传感器数据;
处理器,所述处理器被配置为执行程序指令以处理由所述成像传感器输出的视频数据以进行以下操作:
分析由所述成像传感器捕获的视频内容以识别由所述摄像机的视野中的用户呈现给所述摄像机的视觉命令;
执行从由所述视频摄像机捕获的所述视频内容识别的所述视觉命令,其中执行所述视觉命令包括设置所述视频摄像机的一个或多个运行参数;
确定对应于所述命令是否被成功执行的命令完成指示;及
对应于所述命令完成指示,将所述命令完成指示提供给所述用户。
32.根据权利要求31所述的视频摄像机,还包括:
认证模块,其被配置为
检测由所述视频摄像机捕获的视频内容中的认证证书;及
基于检测到的所述认证证书确定用户被授权发送命令信息到所述视频摄像机。
33.根据权利要求31所述的视频摄像机,其中所述处理器被配置为发送包括所述命令完成指示的电子邮件消息给所述用户。
34.根据权利要求33所述的视频摄像机,其中所述处理器被配置为发送包括所述命令完成指示的短信给所述用户。
35.根据权利要求33所述的视频摄像机,其中所述处理器被配置为以预定的模式点亮所述视频摄像机上的一个或多个指示灯。
36.根据权利要求31所述的视频摄像机,其中所述命令处理模块被配置为转译使用条形码编码的命令。
37.根据权利要求31所述的视频摄像机,其中所述处理器被配置为转译使用多维数据矩阵编码的命令。
38.根据权利要求31所述的视频摄像机,其中所述处理器被配置为转译使用颜色编码技术编码的命令。
39.根据权利要求31所述的视频摄像机,其中所述处理器被配置为转译使用图标编码的命令。
40.根据权利要求21所述的介质,其中所述处理器被配置为响应于执行所述视觉命令,将由所述视频摄像机捕获的所述视频内容传输到与所述用户相关联的移动设备。
41.一种用于映射监控系统中的视频摄像机的位置的方法,所述方法包括:
在移动设备上显示由所述监控系统正在监视的设施的地图;
接收表明所述设施中的用户选择的摄像机的位置的用户输入;
使用所述移动设备产生所述摄像机的摄像机识别码;
编码摄像机识别命令,所述摄像机识别命令包括所述摄像机识别码和与从所述用户接收的所述摄像机的位置相关联的位置信息;
在所述移动设备的显示器上显示与所述摄像机识别命令对应的可见指示;及
确定是否从所述监控系统接收到对应于所编码的摄像机识别命令的通信。
42.根据权利要求41所述的方法,其中编码摄像机识别命令包括用条形码编码所述摄像机识别命令。
43.根据权利要求41所述的方法,其中编码摄像机识别命令包括用二维数据矩阵编码所述摄像机识别命令。
44.根据权利要求41所述的方法,其中编码摄像机识别命令包括将所述摄像机识别命令编码为颜色模式。
45.根据权利要求41所述的方法,其中编码摄像机识别命令包括将所述摄像机识别命令编码为图标。
46.一种用于映射监控系统中的视频摄像机的位置的移动设备,所述方法包括:
用于在移动设备上显示由所述监控系统正在监视的设施的地图的工具;
用于接收表明所述设施中的用户选择的摄像机的位置的用户输入的工具;
使用所述移动设备产生所述摄像机的摄像机识别码的工具;
用于编码摄像机识别命令的工具,所述摄像机识别命令包括所述摄像机识别码和与从所述用户接收的所述摄像机的位置相关联的位置信息;
用于在所述移动设备的显示器上显示与所述摄像机识别命令对应的可见指示的工具;及
用于确定是否从所述监控系统接收到对应于所编码的摄像机识别命令的通信的工具。
47.根据权利要求46所述的移动设备,其中用于编码所述摄像机识别命令的所述工具包括用条形码编码所述摄像机识别命令的工具。
48.根据权利要求46所述的移动设备,其中用于编码所述摄像机识别命令的所述工具包括用二维数据矩阵编码所述摄像机识别命令的工具。
49.根据权利要求46所述的移动设备,其中用于编码所述摄像机识别命令的所述工具包括用颜色模式编码所述摄像机识别命令的工具。
50.根据权利要求46所述的移动设备,其中用于编码所述摄像机识别命令的所述工具包括用图标编码所述摄像机识别命令的工具。
51.一种有形的计算机可读介质,其上存储有用于映射监控系统中的视频摄像机的位置的计算机可读指令,所述指令包括被配置为导致计算机执行以下操作的指令:
在移动设备上显示由所述监控系统正在监视的设施的地图;
接收表明所述设施中的用户选择的摄像机的位置的用户输入,
使用所述移动设备产生所述摄像机的摄像机识别码;
编码摄像机识别命令,所述摄像机识别命令包括所述摄像机识别码和与从所述用户接收的所述摄像机的位置相关联的位置信息;
在所述移动设备的显示器上显示与所述摄像机识别命令对应的可见指示;及
确定是否从所述监控系统接收到对应于所编码的摄像机识别命令的通信。
52.根据权利要求51所述的介质,其中导致所述计算机编码所述摄像机识别命令的指令包括导致所述计算机用条形码编码所述摄像机识别命令的指令。
53.根据权利要求51所述的介质,其中导致所述计算机编码所述摄像机识别命令的指令包括导致所述计算机用二维数据矩阵编码所述摄像机识别命令的指令。
54.根据权利要求51所述的介质,其中导致所述计算机编码所述摄像机识别命令的指令包括导致所述计算机用颜色模式编码所述摄像机识别命令的指令。
55.根据权利要求51所述的介质,其中导致所述计算机编码所述摄像机识别命令的指令包括导致所述计算机用图标编码所述摄像机识别命令的指令。
56.一种用于校准视频摄像机的方法,所述方法包括:
接收由所述视频摄像机正在监视的场景的视频内容;
识别所述视频内容中的第一对象;
分析所述第一对象以确定所述第一对象代表针对所述视频摄像机的校准命令,其中分析所述第一对象包括:
确定所述第一对象的颜色与和所述校准命令相关联的触发颜色相对应;及
确定所述第一对象的形状与和所述校准命令相关联的触发姿态相对应;
将所述第一对象添加到校准位置列表;
基于所述校准位置列表计算所述视频摄像机的校准矩阵;及
使用所述校准矩阵将从所述视频摄像机接收的视频内容中的图像坐标转换为地理坐标。
57.根据权利要求56所述的方法,还包括响应于确定所述第一对象是用户,提供确认给所述用户。
58.根据权利要求58所述的方法,其中提供所述确认给所述用户包括发送电子邮件消息给所述用户。
59.根据权利要求58所述的方法,其中提供所述确认给所述用户包括发送短信给所述用户。
60.根据权利要求58所述的方法,其中提供所述确认给所述用户包括以预定的模式点亮所述视频摄像机上的一个或多个指示灯。
61.一种用于校准视频摄像机的装置,所述方法包括:
用于接收由所述视频摄像机正在监视的场景的视频内容的工具;
用于识别所述视频内容中的第一对象的工具;
用于分析所述第一对象以确定所述第一对象代表针对所述视频摄像机的校准命令的工具,其中用于分析所述第一对象的所述工具包括:
用于确定所述第一对象的颜色与和所述校准命令相关联的触发颜色对应的工具;及
用于确定所述第一对象的形状与和所述校准命令相关联的触发姿态对应的工具;
用于将所述第一对象添加到校准位置列表的工具;
用于基于所述校准位置列表计算所述视频摄像机的校准矩阵的工具;及
用于使用所述校准矩阵将从所述视频摄像机接收的视频内容中的图像坐标转换为地理坐标的工具。
62.根据权利要求61所述的装置,还包括用于响应于确定所述第一对象是所述用户提供确认给所述用户的工具。
63.根据权利要求62所述的装置,其中用于提供所述确认给所述用户的所述工具包括用于发送电子邮件消息给所述用户的工具。
64.根据权利要求62所述的装置,其中用于提供所述确认给所述用户的所述工具包括用于发送短信给所述用户的工具。
65.根据权利要求62所述的装置,其中用于提供所述确认给所述用户的所述工具包括以预定的模式点亮所述视频摄像机上的一个或多个指示灯的工具。
66.一种有形的计算机可读介质,其上存储有校准视频摄像机的计算机可读指令,所述指令包括被配置为导致计算机执行以下操作的指令:
接收由所述视频摄像机正在监视的场景的视频内容;
识别所述视频内容中的第一对象,
分析所述第一对象以确定所述第一对象代表针对所述视频摄像机的校准命令,其中导致所述计算机分析所述第一对象的所述指令包括被配置为导致所述计算机执行以下操作的指令:
确定所述第一对象的颜色与和所述校准命令相关联的触发颜色对应;及
确定所述第一对象的形状与和所述校准命令相关联的触发姿态对应;
将所述第一对象添加到校准位置列表,
基于所述校准位置列表计算所述视频摄像机的校准矩阵;及
基于所述校准位置列表计算所述视频摄像机的校准矩阵;及
使用所述校准矩阵将从所述视频摄像机接收的视频内容中的图像坐标转换为地理坐标。
67.根据权利要求68所述的介质,还包括被配置为导致所述计算机响应于确定在所述视频内容中识别的对象是所述用户提供确认给所述用户的指令。
68.根据权利要求70所述的介质,其中提供所述确认给所述用户的所述指令包括被配置为导致所述计算机发送电子邮件消息给所述用户的指令。
69.根据权利要求70所述的介质,其中提供所述确认给所述用户的所述指令包括被配置为导致所述计算机发送短信给所述用户的指令。
70.根据权利要求70所述的介质,其中提供所述确认给所述用户的所述指令包括被配置为导致所述计算机以预定的模式点亮所述视频摄像机上的一个或多个指示灯的指令。
CN201280070685.6A 2011-12-28 2012-12-14 视觉命令处理 Active CN105359516B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/338,826 2011-12-28
US13/338,826 US9432633B2 (en) 2011-12-28 2011-12-28 Visual command processing
PCT/US2012/069707 WO2013101504A2 (en) 2011-12-28 2012-12-14 Visual command processing

Publications (2)

Publication Number Publication Date
CN105359516A true CN105359516A (zh) 2016-02-24
CN105359516B CN105359516B (zh) 2018-11-30

Family

ID=47436272

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280070685.6A Active CN105359516B (zh) 2011-12-28 2012-12-14 视觉命令处理

Country Status (4)

Country Link
US (1) US9432633B2 (zh)
EP (1) EP2798840B1 (zh)
CN (1) CN105359516B (zh)
WO (1) WO2013101504A2 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109788188A (zh) * 2017-11-15 2019-05-21 安讯士有限公司 用于控制监控摄像机的方法

Families Citing this family (62)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130204408A1 (en) * 2012-02-06 2013-08-08 Honeywell International Inc. System for controlling home automation system using body movements
US9836433B1 (en) * 2012-04-02 2017-12-05 Rockwell Collins, Inc. Image processing using multiprocessor discrete wavelet transform
US20140211018A1 (en) * 2013-01-29 2014-07-31 Hewlett-Packard Development Company, L.P. Device configuration with machine-readable identifiers
US11615663B1 (en) * 2014-06-17 2023-03-28 Amazon Technologies, Inc. User authentication system
US9934453B2 (en) * 2014-06-19 2018-04-03 Bae Systems Information And Electronic Systems Integration Inc. Multi-source multi-modal activity recognition in aerial video surveillance
PL3037916T3 (pl) * 2014-12-24 2021-08-02 Nokia Technologies Oy Monitorowanie
US11582202B2 (en) * 2015-02-16 2023-02-14 Arebus, LLC System, method and application for transcoding data into media files
US9532709B2 (en) 2015-06-05 2017-01-03 Jand, Inc. System and method for determining distances from an object
US9770165B2 (en) 2015-08-13 2017-09-26 Jand, Inc. Systems and methods for displaying objects on a screen at a desired visual angle
GB2544269A (en) * 2015-11-05 2017-05-17 Canon Europa Nv A method of determining location information of an imaging apparatus forming part of a surveillance system
CN105681742A (zh) * 2015-12-30 2016-06-15 广州励丰文化科技股份有限公司 多摄像头场景下根据指纹和时长智能监控的方法和系统
CN105657363A (zh) * 2015-12-30 2016-06-08 广州励丰文化科技股份有限公司 多摄像头场景下参考压力变化控制监控的方法和系统
CN105681739A (zh) * 2015-12-30 2016-06-15 广州励丰文化科技股份有限公司 多摄像头场景下参考指纹和压力控制监控的方法和系统
CN105491342A (zh) * 2015-12-30 2016-04-13 广州励丰文化科技股份有限公司 多摄像头场景下根据指纹和压力智能监控的方法和系统
CN105516678A (zh) * 2015-12-30 2016-04-20 广州励丰文化科技股份有限公司 多摄像头场景下根据触面和指纹智能监控的方法和系统
US10799109B2 (en) * 2016-01-15 2020-10-13 Jand, Inc. Systems and methods for determining distance from an object
US10347102B2 (en) 2016-03-22 2019-07-09 Sensormatic Electronics, LLC Method and system for surveillance camera arbitration of uplink consumption
US9965680B2 (en) 2016-03-22 2018-05-08 Sensormatic Electronics, LLC Method and system for conveying data from monitored scene via surveillance cameras
US10764539B2 (en) 2016-03-22 2020-09-01 Sensormatic Electronics, LLC System and method for using mobile device of zone and correlated motion detection
US10192414B2 (en) 2016-03-22 2019-01-29 Sensormatic Electronics, LLC System and method for overlap detection in surveillance camera network
US10475315B2 (en) * 2016-03-22 2019-11-12 Sensormatic Electronics, LLC System and method for configuring surveillance cameras using mobile computing devices
US10733231B2 (en) 2016-03-22 2020-08-04 Sensormatic Electronics, LLC Method and system for modeling image of interest to users
US10318836B2 (en) 2016-03-22 2019-06-11 Sensormatic Electronics, LLC System and method for designating surveillance camera regions of interest
US11601583B2 (en) 2016-03-22 2023-03-07 Johnson Controls Tyco IP Holdings LLP System and method for controlling surveillance cameras
US11216847B2 (en) 2016-03-22 2022-01-04 Sensormatic Electronics, LLC System and method for retail customer tracking in surveillance camera network
US20170280102A1 (en) * 2016-03-22 2017-09-28 Sensormatic Electronics, LLC Method and system for pooled local storage by surveillance cameras
US10665071B2 (en) 2016-03-22 2020-05-26 Sensormatic Electronics, LLC System and method for deadzone detection in surveillance camera network
CN107087430A (zh) * 2016-03-29 2017-08-22 深圳市大疆创新科技有限公司 执行状态指示方法、装置及无人机
US9798054B1 (en) * 2016-03-30 2017-10-24 Delphi Technologies, Inc. Camera assembly for use on a vehicle
US10852290B2 (en) * 2016-05-11 2020-12-01 Bonraybio Co., Ltd. Analysis accuracy improvement in automated testing apparatus
US10536464B2 (en) * 2016-06-22 2020-01-14 Intel Corporation Secure and smart login engine
KR102568996B1 (ko) * 2016-08-25 2023-08-21 한화비전 주식회사 감시카메라 설정 방법과 감시카메라 관리 방법 및 시스템
US10582095B2 (en) 2016-10-14 2020-03-03 MP High Tech Solutions Pty Ltd Imaging apparatuses and enclosures
US11475177B2 (en) 2017-02-22 2022-10-18 Middle Chart, LLC Method and apparatus for improved position and orientation based information display
US11900021B2 (en) 2017-02-22 2024-02-13 Middle Chart, LLC Provision of digital content via a wearable eye covering
US11900023B2 (en) 2017-02-22 2024-02-13 Middle Chart, LLC Agent supportable device for pointing towards an item of interest
US11625510B2 (en) 2017-02-22 2023-04-11 Middle Chart, LLC Method and apparatus for presentation of digital content
US10824774B2 (en) 2019-01-17 2020-11-03 Middle Chart, LLC Methods and apparatus for healthcare facility optimization
US10740503B1 (en) 2019-01-17 2020-08-11 Middle Chart, LLC Spatial self-verifying array of nodes
US11481527B2 (en) 2017-02-22 2022-10-25 Middle Chart, LLC Apparatus for displaying information about an item of equipment in a direction of interest
US12086507B2 (en) 2017-02-22 2024-09-10 Middle Chart, LLC Method and apparatus for construction and operation of connected infrastructure
US11468209B2 (en) 2017-02-22 2022-10-11 Middle Chart, LLC Method and apparatus for display of digital content associated with a location in a wireless communications area
US11436389B2 (en) 2017-02-22 2022-09-06 Middle Chart, LLC Artificial intelligence based exchange of geospatial related digital content
US10740502B2 (en) 2017-02-22 2020-08-11 Middle Chart, LLC Method and apparatus for position based query with augmented reality headgear
US10984146B2 (en) 2017-02-22 2021-04-20 Middle Chart, LLC Tracking safety conditions of an area
US11765323B2 (en) * 2017-05-26 2023-09-19 Calumino Pty Ltd. Apparatus and method of location determination in a thermal imaging system
US11055942B2 (en) 2017-08-01 2021-07-06 The Chamberlain Group, Inc. System and method for facilitating access to a secured area
WO2019028039A1 (en) 2017-08-01 2019-02-07 The Chamberlain Group, Inc. SYSTEM FOR FACILITATING ACCESS TO A SECURE AREA
EP3528196A1 (en) * 2018-02-16 2019-08-21 Accenture Global Solutions Limited Dynamic content generation
US10690457B2 (en) * 2018-04-26 2020-06-23 AI Incorporated Method and apparatus for overexposing images captured by drones
DE102018212902A1 (de) * 2018-08-02 2020-02-06 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum Bestimmen eines digitalen Assistenten zum Ausführen einer Fahrzeugfunktion aus einer Vielzahl von digitalen Assistenten in einem Fahrzeug, computerlesbares Medium, System, und Fahrzeug
WO2020040771A1 (en) * 2018-08-23 2020-02-27 Hewlett-Packard Development Company, L.P. Visual input command recognition
FI130829B1 (fi) * 2019-01-02 2024-04-12 Procemex Oy Ltd Menetelmä koneluettavan koodin käyttämiseksi kameran ohjaamiseen havaitsemaan ja tarkkailemaan kohteita
US11283937B1 (en) * 2019-08-15 2022-03-22 Ikorongo Technology, LLC Sharing images based on face matching in a network
US11507714B2 (en) 2020-01-28 2022-11-22 Middle Chart, LLC Methods and apparatus for secure persistent location based digital content
US11640486B2 (en) 2021-03-01 2023-05-02 Middle Chart, LLC Architectural drawing based exchange of geospatial related digital content
KR20210112726A (ko) * 2020-03-06 2021-09-15 엘지전자 주식회사 차량의 좌석별로 대화형 비서를 제공하는 방법
US11405591B2 (en) * 2020-08-03 2022-08-02 Goodrich Corporation Remote test witnessing
KR20220059629A (ko) * 2020-11-03 2022-05-10 현대자동차주식회사 차량 및 그의 제어방법
WO2022125351A2 (en) * 2020-12-09 2022-06-16 Cerence Operating Company Automotive infotainment system with spatially-cognizant applications that interact with a speech interface
US20220208185A1 (en) * 2020-12-24 2022-06-30 Cerence Operating Company Speech Dialog System for Multiple Passengers in a Car
CN115113722A (zh) * 2021-03-23 2022-09-27 华为技术有限公司 一种人机交互方法、装置及相关电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020102966A1 (en) * 2000-11-06 2002-08-01 Lev Tsvi H. Object identification method for portable devices
US6542191B1 (en) * 1996-04-23 2003-04-01 Canon Kabushiki Kaisha Image display apparatus, camera control apparatus and method
WO2008114088A2 (en) * 2007-03-21 2008-09-25 Skype Limited Connecting a camera to a network
US20100110212A1 (en) * 2008-11-05 2010-05-06 Mitsubishi Electric Corporation Camera device

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5977976A (en) * 1995-04-19 1999-11-02 Canon Kabushiki Kaisha Function setting apparatus
SE0000850D0 (sv) 2000-03-13 2000-03-13 Pink Solution Ab Recognition arrangement
JP2007004438A (ja) * 2005-06-23 2007-01-11 Nippon Telegraph & Telephone East Corp 光タグ機能制御方法、光タグ、および光タグシステム
US7620316B2 (en) 2005-11-28 2009-11-17 Navisense Method and device for touchless control of a camera
US8447066B2 (en) * 2009-03-12 2013-05-21 Google Inc. Performing actions based on capturing information from rendered documents, such as documents under copyright
CN101894366B (zh) 2009-05-21 2014-01-29 北京中星微电子有限公司 一种获取标定参数的方法、装置及一种视频监控系统
TW201106200A (en) 2009-08-12 2011-02-16 Inventec Appliances Corp Electronic device, operating method thereof, and computer program product thereof
US9030562B2 (en) * 2011-12-02 2015-05-12 Robert Bosch Gmbh Use of a two- or three-dimensional barcode as a diagnostic device and a security device
US8963984B2 (en) * 2011-12-19 2015-02-24 Polycom, Inc. Videoconferencing system using QR codes for interaction

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6542191B1 (en) * 1996-04-23 2003-04-01 Canon Kabushiki Kaisha Image display apparatus, camera control apparatus and method
US20020102966A1 (en) * 2000-11-06 2002-08-01 Lev Tsvi H. Object identification method for portable devices
WO2008114088A2 (en) * 2007-03-21 2008-09-25 Skype Limited Connecting a camera to a network
US20100110212A1 (en) * 2008-11-05 2010-05-06 Mitsubishi Electric Corporation Camera device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109788188A (zh) * 2017-11-15 2019-05-21 安讯士有限公司 用于控制监控摄像机的方法
CN109788188B (zh) * 2017-11-15 2020-12-11 安讯士有限公司 用于控制监控摄像机的方法

Also Published As

Publication number Publication date
WO2013101504A2 (en) 2013-07-04
US20130169801A1 (en) 2013-07-04
WO2013101504A3 (en) 2013-09-06
EP2798840B1 (en) 2020-08-26
CN105359516B (zh) 2018-11-30
US9432633B2 (en) 2016-08-30
EP2798840A2 (en) 2014-11-05

Similar Documents

Publication Publication Date Title
CN105359516A (zh) 视觉命令处理
CN105378700B (zh) 测量数据的捕获和关联
CN101512580B (zh) 具有条形码识别和维护信息生成的自动设备注册系统
US20160035246A1 (en) Facility operations management using augmented reality
CN105408821B (zh) 用于验证衍射元件的方法和设备
JP5927691B2 (ja) エリアモニタリングシステム
CN105308657A (zh) 安全和/或监测设备及系统
WO2011046127A1 (ja) データ収集システム、携帯端末、シール及びデータ収集方法
CN104246793A (zh) 移动设备的三维脸部识别
EP3680813A1 (en) Method and system for detecting objects installed within a building
CA3110503C (en) Method and system to digitally track and monitor an automotive refinish repair process
CN110458794B (zh) 用于轨道列车的配件质量检测方法及装置
JP2017194946A (ja) 管理装置、管理方法及び管理プログラム
CN109544870A (zh) 用于智能监控系统的报警判断方法与智能监控系统
JP7282186B2 (ja) 状況認識監視
CN111770450A (zh) 一种车间生产监控服务器、移动终端及应用
CN104123516A (zh) 基于云计算网络平台的金标卡检测方法及阅读器
KR20200142147A (ko) 열화상 인식 기반 객체 정보 인식 방법
CN107610260B (zh) 一种基于机器视觉的智能考勤系统及考勤方法
JP2018082234A (ja) 画像認識処理方法、画像認識処理プログラム、データ提供方法、データ提供システム、データ提供プログラム、記録媒体、プロセッサ、及び電子機器
CN112052572A (zh) 基于wlan位置感知的数字孪生工业仿真系统
CN108257243A (zh) 基于ZigBee网络的巡检管理系统
US10078926B2 (en) Management apparatus, management method, and non-transitory computer-readable recording medium storing management program
CN115953815A (zh) 基建现场的监测方法及装置
CN111660294B (zh) 一种液压重载机械臂增强现实操控系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant