CN105340265A - 用于显示来自相机的图像的方法和设备 - Google Patents

用于显示来自相机的图像的方法和设备 Download PDF

Info

Publication number
CN105340265A
CN105340265A CN201480034893.XA CN201480034893A CN105340265A CN 105340265 A CN105340265 A CN 105340265A CN 201480034893 A CN201480034893 A CN 201480034893A CN 105340265 A CN105340265 A CN 105340265A
Authority
CN
China
Prior art keywords
display unit
fov
camera
location
steps
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201480034893.XA
Other languages
English (en)
Inventor
阿帕纳·潘迪
哈里什·班迪瓦德
兰迪·L·埃克尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Motorola Solutions Inc
Original Assignee
Motorola Solutions Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Motorola Solutions Inc filed Critical Motorola Solutions Inc
Publication of CN105340265A publication Critical patent/CN105340265A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/69Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

在本文中提供了一种显示视频的方法和设备。在操作期间,视频被以地理上正确的方式显示在许多显示器中的一个上。例如,在涉及两个显示器(例如,在消防员的两个腕部上)的实施例中,其中的每一个显示视频馈送,所述视频被显示为使得最适当的场景的视频馈送(未必是最近相机的视频馈送)被示出在该显示器上。

Description

用于显示来自相机的图像的方法和设备
相关申请的交叉引用
本申请与同日提交的标题为MethodandApparatusforDisplayinganImagefromaCamera(用于显示来自相机的图像的方法和设备)的美国申请No.(代理人案号CM16363)有关。
技术领域
本发明一般地涉及显示从相机接收到的图像,并且更具体地,涉及一种用于选择适当的图像以被显示在适当的显示器上的方法和设备。
背景技术
公共安全警官对视频的使用能够大大地提高警官完成特定任务的能力。例如,监视视频通常被公共安全警官利用来确定是否正在发生罪行。然而,视频的使用未被第一响应者高度地利用。未使用主要是因为视频常常被第一响应者视为干扰。
明显的是,在视频的使用和显示方面增强用户体验的任何改进可以增加视频将帮助第一响应者的机会。因此,存在对于以不干扰又提供所需级别的细节的方式将实时视频显示给第一响应者的方法和设备的需要。
附图说明
其中相同的附图标记在所有单独的视图中指代相同或功能上相似的元素并且与以下具体实施方式一起被并入本说明书并形成本说明书的一部分的附图用来进一步图示各种实施例,并且用来完全根据本发明说明各种原理和优点。
图1至图7图示根据本发明的一个实施例的一般操作环境。
图8是视频显示设备的框图。
图9是根据本发明的第一实施例示出图8的设备的操作的流程图。
图10是根据本发明的第二实施例示出图8的设备的操作的流程图。
技术人员将了解,图中的元素是为了简单和清楚而图示的,并且未必已按比例绘制。例如,图中的一些元素的尺寸和/或相对位置可能相对于其它元素被放大,以帮助增强对本发明的各种实施例的理解。并且,常常不描绘在商业上可行的实施例中有用或必要的常见但很好理解的元素,以便促进对本发明的这些各种实施例的阻碍更少的查看。还应当了解,可以按照发生的特定顺序描述或描绘某些动作和/或步骤,但是本领域的技术人员将理解,实际上不需要关于顺序的这种特性。
具体实施方式
为了解决上面提及的需要,在本文中提供了显示视频的方法和设备。在操作期间,实况视频被以地理上正确的方式显示在许多显示器中的一个上。例如,在涉及两个显示器(例如,在消防员的两个腕部上)的实施例中,其中的每一个显示实时视频馈送,视频被显示为使得最适当的场景的视频馈送(未必是最近相机的视频馈送)被示出在该显示器上。具体地,由视频相机捕获的场景的基本坐标将与每个显示装置的基本坐标相匹配。因此,如果第一响应者面向北,则右显示器将示出东视图,而如果面向南,则左显示器将示出东视图。
具有两个地理上准确的显示器使得第一响应者能够扫视适当的显示器(假定,在响应者从一个方向听到大声爆炸的情况下),以通过容易地知道要监视哪一个显示器来对情形进行评估。
上面描述的用于显示视频的技术模拟驾驶员已使用后视镜和侧视镜而未被它们分心的方式。具体地,镜子的使用由于各种原因而不使人分心,所述各种原因包括镜子的放置、只有当需要时才扫视镜子的能力、不必在需要信息时摆弄镜子、以及将镜子用于大图片场境感知而非详细信息提取。
图1图示根据本发明的一个实施例的一般操作环境。如图1中所示,相机101正在提供视场(FOV)104的实况视频馈送。相机101可以被具体化在各种物理系统元件中,包括独立装置,或者作为功能性具体化在网络视频记录装置(NVR)、物理安全信息管理(PSIM)装置、捆绑在智能电话装置内的相机等中。此外,能够将相机安装在诸如运载工具(陆地、空中或海洋)或移动用户(诸如被安装在用户的头盔或翻领上的相机)或移动机器人的移动实体上。还示出了视频显示装置102和视频显示装置103,其被取向为使得视频显示装置102比显示装置103物理上更靠近FOV104。显示装置102和显示装置103不必是设备的相同部件,并且各自可以是任何便携式电子装置,包括但不限于独立显示器或监视器、手持计算机、平板计算机、移动电话、警用无线电设备、媒体播放器、个人数字助理(PDA)等,包括这些项中的两个或更多个的组合。
在操作期间,相机101连续地捕获可用于在装置102和装置103上显示的实时视频流。连同视频流一起,相机101在操作的过程中还捕获包括相机101的地理定位(例如,GPS坐标)以及与每个视频流关联的“绝对方向”(诸如N、W、E、S)的元数据。这个方向指代相机101正在记录的FOV104的方向。因此,元数据可以提供诸如相机101位于特定定位处并且正在捕获特定视场(FOV)的事实的信息。以简单形式,FOV简单地包括由相机101捕获的视频馈送或静止图像或热图像,并且还包括罗盘方向(例如,相机指向105度)。在更高级的实施例中,FOV将包括定位信息连同水平面信息和罗盘方向,使得可以确定特定FOV。
能够从诸如与相机关联的定位传感器(诸如经由全球定位系统)、陀螺仪、罗盘、加速度计的各种传感器(未示出)收集如上面所描述的元数据。还可以从相机的遥摄倾斜变焦(Pan-Tilt-Zoom)功能性直接得到元数据。此外,上述传感器要么可以与相机直接关联,要么与诸如智能电话、移动用户、运载工具或机器人的、与相机耦合的移动实体关联。
元数据被从相机发送给诸如任何便携式电子装置的目标装置,包括但不限于独立显示器、手持计算机、平板计算机、移动电话、警用无线电设备、媒体播放器、个人数字助理(PDA)等,包括这些项中的两个或更多个的组合。元数据的发送能够经由带内信令(在与视频有效负荷相同的流中)或带外信令(经由支持信令协议)。
如本领域的技术人员能够容易地理解的,视频和支持元数据的发送可以穿过一个或多个通信网络,诸如有线网络和无线网络中的一个或多个。此外,可以首先将视频和元数据发送给视频服务器(未示出),所述视频服务器可以对视频和元数据馈送进行后处理,然后将其发送给一个或多个目标装置内的一个或多个视频客户端。注意,视频服务器可以记录并保持视频和元数据馈送的副本以供将来使用,例如以便以后将所记录的视频和元数据发送给调查员以用于调查目的。注意,无论视频和元数据是以实时方式还是以后服务于终端用户,FOV104的构思保持不变。
因此,如上所述,元数据可以包括相机101的当前定位(例如,纬度42度04'03.482343”、经度88度03'10.443453”、海拔高度727英尺)以及相机正指向的罗盘方向(例如,自北270度)和相机的水平面方向(例如,自水平面-25度)。然后能够将这个信息传递给装置102和装置103,使得相机的定位、方向以及水平面能够被用来确定相机的FOV。
在本发明的供替换的实施例中,元数据能够包括关于相机的其它地理信息,诸如相对于已知陆标的相对位置。例如,元数据可以是陆标建筑物A的正东方150英尺、陆标建筑物B上方50英尺、指向陆标建筑物A的第75层。
在一些实施例中,诸如当相机与诸如移动用户、运载工具或机器人耦合时,期望元数据在视频馈送的过程中改变。换句话说,随着相机移动或者捕获不同的视场,将需要相应地更新元数据。因此,在第一时间,装置102和装置103可能正从相机101接收第一元数据,而在第二时间,装置102和装置103可能正从相机101接收第二(不同的)元数据。装置102和装置103可以基于经改变的元数据来修改任何FOV被显示的方式。在其它实施例中,相机101在延迟时间经由视频服务器(未示出)将视频和元数据馈送发送给装置102和装置103。换句话说,在第一时间,视频服务器(未示出)可能正从相机101接收第一元数据,而在第二时间,视频服务器可能正从相机101接收第二(不同的)元数据。这个视频和元数据馈送由视频服务器记录并以后服务于装置102和装置103,即,在第一时间,装置102和装置103可能正从视频服务器(未示出)接收第一元数据,而在第二时间,装置102和装置103可能正从视频服务器(未示出)接收第二(不同的)元数据。
每个显示装置102、103与确定它相对于其它显示装置和用户的取向的场境感知电路(罗盘、陀螺仪、加速度计、GPS以及其它传感器)关联。例如,每个显示装置102和显示装置103可以供应有指示每个装置相对于其它装置102、103和用户的取向的数据。因此,装置102可以“知道”它相对于装置102和装置103的用户存在于装置103以左。基于这个知识,连同来自每个相机101的元数据一起,每个装置102、103确定要显示什么视频(若有的话)。这优选地通过每个显示装置计算出显示装置的“绝对方向”而完成。使用其与其它显示装置的已知取向,显示了适当的视频馈送。例如,如果装置102和装置103的用户面向北,则左显示器(显示器102)将与西关联。当用户转动180度时,左显示器(显示器102)将与东关联。在图2中图示了这个。明显的是,在图2中,用户面向南。因此,不是在装置102上显示FOV104,而是FOV104现在被显示在装置103上。因此,装置102和装置103:
●知道经由场境电路计算出或者在一些实施例中能够被预先配置的它们彼此的取向;
●知道它们的绝对取向(在这个情况下南);并且
●并且经由与视频流关联的元数据知道FOV104的定位;
能够确定是否显示来自特定相机的图像。
应该注意,上述示例不简单地将视频馈送显示给“最近的”显示装置。如图1和图2中明显的,相机101在图1中可以最靠近显示装置103,而在图2中最靠近装置102。然而,FOV104被示出在离相机101“最远的”显示装置上。
能够将上述功能性扩展到存在多个相机、将实况视频馈送给多个显示装置102和显示装置103的情形。在图3中图示了这个。如图3中所示,现在存在各自向显示装置102和显示装置103提供实时视频馈送的两个相机101和相机301。在这个特定示例中,相机101捕获FOV104而相机301捕获FOV304。装置102和装置103的用户将使最东的FOV304被显示在最东的装置103上,同时最西的FOV104被显示在最西的装置102上。更一般地说,装置102和装置103的用户将使最X的FOV304被显示在最X的装置103上,其中X取自由北、南、东和西构成的组。
随着装置102和装置103的用户转动以面向南(图4),显示装置102现在成为最西的装置并且显示装置103成为最东的装置。如图4中所示,FOV104现在被显示在装置102上,同时FOV304被显示在装置103上。因此,随着用户转动以面向不同方向,装置102和装置103可以相应地更新它们的视频馈送。
可以将上述功能性扩展到单个显示装置示出多个窗口的情形,其中每个窗口显示来自相机的视频馈送。在图5中图示了这个场景。如图5中所示,单个装置501(例如,手持计算机、平板计算机、移动电话、警用无线电设备、媒体播放器、个人数字助理(PDA)等)具有在该装置上显示的窗口502和窗口503。装置501从相机101和相机301接收多个视频馈送。装置501确定每个FOV104和FOV304的基本方向,并且将FOV显示在适当的窗口中。例如,当装置501的用户面向北时,窗口502是最西的窗口并且将显示来自相机101的最西的视频馈送(即,FOV104),而窗口503是最东的窗口并且将显示来自相机301的最东的视频馈送(即,FOV304)。更一般地说,装置501的用户将使最X的FOV304被显示在最X的窗口502、503上,其中X取自由北、南、东和西构成的组。
随着用户改变装置501的取向(图6中所示),窗口502和窗口503将基于上面所描述的信息自动地调整到装置的新取向。
随着用户转身并面向南(图7中所示),在窗口502和窗口503中显示的视频将交换,使得窗口503是最西的窗口并且将显示来自相机101的最西的视频馈送,而窗口502是最东的窗口并且将显示来自相机301的最东的视频馈送。
图8是示出图1至图4的装置102和装置103的更详细视图的框图。尽管图8的元件能够存在于单个装置102、103内,但是在本发明的供替换的实施例中,这些元件可以作为“用户空间”的一部分单独地存在。能够将用户空间定义为包括用户将携带的所有电子装置、通信装置、传感器和显示器的用户的个人空间。由用户携带的这些装置通常使用有线或无线通信协议来与彼此进行通信。例如,公共安全警官可以携带具有它们的内置单独的显示器和诸如罗盘、陀螺仪、加速度计、计步器等的传感器的一个或多个通信无线电设备,可穿戴装置,诸如头盔相机、腕部显示器、头戴式显示器、具有诸如翻领相机、像温度传感器一样的传感器、麦克风等的内置装置的身体装具或外套。在这种情况下,图8中所示出的组件被分布在用户空间内的使用诸如蓝牙、近场通信、无线局域网等的有线或无线通信协议来与彼此进行通信的许多物理装置当中。在供替换的实施例中,用户空间例如在用户在运载工具中行进时扩展到用户的运载工具空间,并且将附加地经由诸如蓝牙、近场通信、无线局域网等的有线或无线通信协议能够访问运载工具中的电子装置、通信装置、显示器和传感器。
这些装置优选地包括与各种系统组件通信地耦合的处理器803,所述各种系统组件包括显示器801、接收器802、一般存储组件805、场境感知电路807,以及可能地,用户接口(GUI)811。为了易于图示,仅示出了有限数目的系统元件;但是可以在装置中包括附加的这些元件。
处理装置803可以部分地用硬件实现,并且从而编程有软件或固件逻辑或代码以用于执行图8中所描述的功能性;和/或处理装置803可以完全地用硬件实现,例如,作为状态机或ASIC(专用集成电路)。处理装置用作FOV显示选择器。处理装置803可以包括对所接收到的视频流及其关联的元数据进行处理、针对给定视频流基于其元数据以及诸如显示器的定位取向等的场境信息来选择适当的显示器的显示选择器所需要的处理。
储存器805能够包括确定装置相对于其它装置的取向所需的各种信息的短期和/或长期储存器。例如,储存器805可以被填充有关于它相对于其它装置的定位的信息。例如,储存器805可以包含如装置是“最左的”或“最右的”装置这样的信息。当正在利用两个以上装置时,储存器805可以被填充有关于所有装置相对于彼此的取向的信息。储存器805还可以存储软件或固件以用于将处理装置803编程有执行其功能性所需的逻辑或代码,包括但不限于对所接收到的视频流及其关联的元数据进行处理所需的逻辑或代码、执行针对给定视频流基于其元数据以及诸如显示器的定位取向等的场境信息来选择适当的显示器的显示选择器功能所需的逻辑或代码。
用户接口811从用户接收可以被用来填充储存器805的输入。用户接口811可以包括小键盘、显示器/监视器、鼠标/指示装置,和/或用于提供人/机接口的各种其它硬件组件。在一些实施例中,将无需用户干预而在所述装置上激活本发明。
在第一实施例中,场境感知电路807优选地包括罗盘,然而在供替换的实施例中,电路807可以包括能够生成被用来确定装置的取向(例如,面向北)的信息的任何装置。不管场境感知电路807的组成,逻辑电路803将使用由电路807所生成的信息来确定装置的取向形式。
接收器802包括本领域中已知用于利用众所周知的通信协议通信的常见电路,并且用作用于从相机接收元数据和视频馈送的装置。例如,接收器802可以是利用Apco25(项目25)通信系统协议的众所周知的长距离收发器。其它可能的接收器包括使用IEEE802.11通信系统协议的接收器、利用蓝牙的接收器、利用HyperLAN协议的接收器或利用任何其它通信系统协议的接收器,所述其它通信系统协议包括但不限于陆地移动无线电系统(LMRS)、公用陆地移动无线电、专用陆地移动无线电系统、第一响应者网络局(FirstNet)全国性网络(FNN)、增强数据速率全球移动通信系统(GSM)演进(EDGE)无线电接入网络(GERAN)、如由长期演进(LTE)、LTE-advanced(LTE-A)定义并且随后在诸如LTE-beyond(LTE-B)的后续版本中所定义的通用陆地无线电接入网络(UTRAN)和/或演进型通用陆地无线电接入(E-UTRAN)、近场通信、网状网络等。
显示装置801可以包括被利用来显示视频馈送的任何装置。优选地,装置801包括LCD(液晶显示)技术或LPD(发光聚合物显示)技术,但是在其它实施例中可以使用其它显示技术。
图9是根据本发明的第一实施例示出图8的设备的操作的流程图。更具体地,图9的流程图图示当将在每个显示器801上显示仅单个图像时,由图8的装置在确定要在显示装置801上显示什么图像时采取的步骤(并非全部必要)。在图9中,接收器802从多个相机接收多个视场(FOV)(步骤901)并且场境感知电路807确定显示装置的取向(步骤903)。取向优选地包括显示装置的罗盘方位。
逻辑电路803然后确定由多个相机捕获的FOV的定位(步骤905)以及显示装置相对于其它显示装置的位置(步骤907)。如上面所讨论的,FOV的定位能够包括诸如相机的定位、相机正指向的罗盘方向或关于相机的地理信息或相对于已知陆标的相对位置的定位。附加地,显示装置相对于其它显示装置的位置可以包括诸如在其它装置右、左、上或下的位置。最后,在步骤909处逻辑电路803基于FOV的定位、显示装置的取向以及显示装置相对于其它显示装置的位置来确定要显示什么FOV。然后显示该FOV(步骤911)。
如上面所讨论的,多个FOV能够作为视频或静止图像(包括热图像)被接收。附加地,能够从多个相机接收由多个相机捕获的FOV的定位作为元数据。图8中所示出的显示装置能够利用当所述FOV位于显示装置的X并且显示装置是最X的显示装置时在显示装置上显示FOV的监视器,其中,X=北、南、东或西。
图10是根据本发明的第二实施例示出图8的设备的操作的流程图。具体地,图10中所示出的步骤(并非全部必要)描述当显示器801优选地同时显示多个窗口时,图8的装置在显示器801上显示窗口内的图像时的操作。
逻辑流程在接收器802从多个相机接收多个视场(FOV)的步骤1001处开始。在步骤1003处,场境感知电路807确定图8中所示出的设备的取向。如所讨论的,取向优选地包括显示装置的罗盘方位。逻辑电路803然后确定由多个相机捕获的FOV的方向或定位(步骤1005)。如所讨论的,由多个相机捕获的FOV的定位是通过从多个相机接收指示FOV的定位的元数据来确定的。FOV的这些定位包括相机的定位、相机正指向的罗盘方向或关于相机的地理信息或相对于已知陆标的相对位置。
逻辑电路803然后确定用于显示FOV的窗口的位置(步骤1007)。在步骤1009处,逻辑电路803基于FOV的定位、显示装置的取向以及用于显示FOV的窗口的位置来确定要在每个窗口中显示什么FOV。
如上面所讨论的,用于显示FOV的窗口的位置包括特定窗口是否在至少一个其它窗口右、左、上或下。附加地,所述多个FOV优选地包括视频或静止图像(包括热图像)。
在前面的说明书中,已经对特定实施例进行了描述。然而,本领域的普通技术人员了解,在不脱离如在以下权利要求中所阐述的本发明的范围的情况下能够做出各种修改和改变。因此,本说明书和图将被视为是说明性的而非约束性意义,并且所有这些修改均旨在被包括在本教导的范围内。
本领域的技术人员还将认识到,对诸如“电路”的特定实现实施例的参照可以同样地经由执行在非暂时性计算机可读存储器中存储的软件指令的通用计算设备(例如,CPU)或专用处理设备(例如,DSP)来实现。还应当理解,除了在已经在本文中另外阐述了不同的特定意义的情况下,本文中所使用的术语和表达具有如符合由本技术领域的技术人员像上面所阐述的这些术语和表达的普通技术意义。
有益效果、优点、对问题的解决方案以及可以使得任何有益效果、优点或解决方案发生的或变得更显著的任何元素将不被解释为任何或所有权利要求的关键、必须或本质的特征或元素。本发明仅由所附权利要求来限定,包括在本申请的待审期间做出的任何修改以及如所发布的那些权利要求的所有等同物。
而且在这个文档中,诸如第一和第二、顶部和底部等的关系术语可以被仅用来区分一个实体或动作与另一实体或动作,而不必要求或者暗示在这些实体或动作之间的任何实际的这种关系或顺序。术语“含”、“含有”、“有”、“具有”、“包括”、“包括有”、“包含”、“包含有”或其任何其它变化旨在涵盖非排他性的包括,使得含、有、包括、包含元素的列表的过程、方法、物品或设备不仅包括那些元素而且包括未明确地列举或这些过程、方法、物品或设备固有的其它元素。继之以“含...一”、“有...一”、“包括...一”、“包含...一”的元素在没有更多约束的情况下不排除在含、有、包括、包含该元素的过程、方法、物品或设备中存在附加的相同元素。除非在本文中另外显式地陈述,否则术语“一”和“一个”被定义为一个或多个多个。术语“基本上”、“本质上”、“近似地”、“约”或其任何其它版本像由本领域的普通技术人员所理解的那样被定义为接近于,并且在一个非限制性实施例中该术语被定义成为在10%内,在另一实施例中在5%内,在另一实施例中在1%内,以及在另一实施例中在0.5%内。如本文所使用的术语“耦合”被定义为被连接,但是未必直接地并且未必机械地。被以某种方式“配置”的装置或结构被以至少那种方式配置,但还可以被以未被列举的方式配置。
应当了解,一些实施例可以由诸如微处理器、数字信号处理器、定制处理器以及现场可编程门阵列(FPGA)的一个或多个通用或专用处理器(或“处理装置”)和唯一存储的程序指令(包括软件和固件两者)组成,所述唯一存储的程序指令控制一个或多个处理器以与某些非处理器电路相结合地实现本文中所描述的方法和/或设备的功能中的一些、大部分或全部。替换地,一些或所有功能能够由不具有存储的程序指令的状态机来实现,或被实现在一个或多个专用集成电路(ASIC)中,其中每个功能或某些功能的一些组合被实现为定制逻辑。当然,能够使用两种方法的组合。
而且,实施例能够作为计算机可读存储介质被实现,所述计算机可读存储介质具有存储在其上以便对计算机(例如,包括处理器)进行编程以执行如本文中所描述和要求保护的方法的计算机可读代码。这些计算机可读存储介质的示例包括但不限于硬盘、CD-ROM、光学存储装置、磁存储装置、ROM(只读存储器)、PROM(可编程只读存储器)、EPROM(可擦可编程只读存储器)、EEPROM(电可擦可编程只读存储器)以及闪速存储器。另外,普通技术人员期望的是,尽管可能显著努力和许多设计选择由例如可用时间、当前技术以及经济考虑事项来推动,但当通过本文所公开的构思和原理指导时将容易地能够用最小实验产生这些软件指令及程序和IC。
本公开的说明书摘要被提供来允许读者迅速地探知技术性公开的本质。应该理解,它将不被用来解释或者限制权利要求的范围或意义。此外,在前面的具体实施方式中,可以看见的是各种特征被一起聚组在各种实施例中以用于使本公开合理化的目的。公开的这个方法将不被解释为反映所要求保护的实施例要求比在每个权利要求中明确地陈述的更多特征。相反,如以下权利要求反映的那样,发明主题依赖少于单个公开的实施例的所有特征。因此,以下权利要求从而被并入具体实施方式,其中每个本身作为独立要求保护的主题。

Claims (20)

1.一种用于显示装置显示由相机捕获的视场FOV的方法,所述方法包括以下步骤:
从所述相机接收所述FOV;
确定由所述相机捕获的所述FOV的定位;
确定所述显示装置的取向;
确定所述显示装置相对于其它显示装置的位置;以及
基于所述FOV的所述定位、所述显示装置的所述取向以及所述显示装置相对于所述其它显示装置的所述位置,来确定是否显示从所述相机接收的所述FOV。
2.根据权利要求1所述的方法,其中,接收所述FOV的步骤包括以下步骤:接收所述FOV作为视频或静止图像、或热图像。
3.根据权利要求1所述的方法,其中,确定由所述相机捕获的所述FOV的定位的步骤包括以下步骤:从所述相机接收用于指示所述FOV的所述定位的元数据。
4.根据权利要求1所述的方法,其中,确定所述显示装置的取向的步骤包括以下步骤:确定所述显示装置的罗盘方位。
5.根据权利要求1所述的方法,其中,确定所述显示装置相对于所述其它显示装置的位置的步骤包括以下步骤:确定所述显示装置是否位于所述其它显示装置右、左、上或下。
6.根据权利要求1所述的方法,还包括以下步骤:
当所述FOV位于所述显示装置的X并且所述显示装置是最X的显示装置时,将所述FOV显示在所述显示装置上,其中,X=北、南、东或西,否则不显示所述FOV。
7.根据权利要求1所述的方法,其中,确定所述FOV的所述定位的步骤包括以下步骤:确定所述相机的定位、所述相机正指向的罗盘方向、或关于所述相机的地理信息、或相对于已知陆标的相对位置。
8.一种用于显示装置显示FOV的方法,所述方法包括以下步骤:
从多个相机接收多个视场FOV;
确定由所述多个相机捕获的所述FOV的定位;
确定所述显示装置的取向;
确定所述显示装置相对于其它显示装置的位置;以及
基于所述FOV的所述定位、所述显示装置的所述取向以及所述显示装置相对于所述其它显示装置的所述位置,来确定要显示什么FOV。
9.根据权利要求8所述的方法,其中,接收所述多个FOV的步骤包括以下步骤:接收所述多个FOV作为视频或图像。
10.根据权利要求8所述的方法,其中,确定由所述多个相机捕获的所述FOV的所述定位的步骤包括以下步骤:从所述多个相机接收用于指示所述FOV的所述定位的元数据。
11.根据权利要求8所述的方法,其中,确定所述显示装置的取向的步骤包括以下步骤:确定所述显示装置的罗盘方位。
12.根据权利要求8所述的方法,其中,确定所述显示装置相对于其它显示装置的所述位置的步骤包括以下步骤:确定所述显示装置是否位于所述其它显示装置右、左、上或下。
13.根据权利要求8所述的方法,还包括以下步骤:
当所述FOV位于所述显示装置的X并且所述显示装置是最X的显示装置时,将FOV显示在所述显示装置上,其中,X=北、南、东或西。
14.根据权利要求8所述的方法,其中,确定所述FOV的所述定位的步骤包括以下步骤:针对每个FOV来确定所述相机的定位、所述相机正指向的罗盘方向、或关于所述相机的地理信息、或相对于已知陆标的相对位置。
15.一种设备,所述设备包括:
接收器,所述接收器从多个相机接收多个视场FOV;
场境感知电路,所述场境感知电路确定所述显示装置的取向;以及
逻辑电路,所述逻辑电路确定由所述多个相机捕获的所述FOV的定位,确定所述显示装置相对于其它显示装置的位置,并且基于所述FOV的所述定位、所述显示装置的所述取向以及所述显示装置相对于所述其它显示装置的所述位置来确定要显示什么FOV。
16.根据权利要求15所述的设备,其中,所述多个FOV被接收作为视频或图像。
17.根据权利要求15所述的设备,由所述多个相机捕获的所述FOV的所述定位作为元数据从所述多个相机被接收。
18.根据权利要求15所述的设备,其中,所述取向包括所述显示装置的罗盘方位。
19.根据权利要求15所述的设备,所述显示装置相对于其它显示装置的所述位置包括在所述其它显示装置右、左、上或下。
20.根据权利要求15所述的设备,还包括:
监视器,当所述FOV位于所述显示装置的X并且所述显示装置是最X的显示装置时,所述监视器将FOV显示在所述显示装置上,其中,X=北、南、东或西。
CN201480034893.XA 2013-06-18 2014-06-10 用于显示来自相机的图像的方法和设备 Pending CN105340265A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/920,198 2013-06-18
US13/920,198 US10063782B2 (en) 2013-06-18 2013-06-18 Method and apparatus for displaying an image from a camera
PCT/US2014/041690 WO2014204713A1 (en) 2013-06-18 2014-06-10 Method and apparatus for displaying an image from a camera

Publications (1)

Publication Number Publication Date
CN105340265A true CN105340265A (zh) 2016-02-17

Family

ID=51134397

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480034893.XA Pending CN105340265A (zh) 2013-06-18 2014-06-10 用于显示来自相机的图像的方法和设备

Country Status (6)

Country Link
US (1) US10063782B2 (zh)
EP (1) EP3011736A1 (zh)
CN (1) CN105340265A (zh)
AU (1) AU2014281015B2 (zh)
CA (1) CA2916179A1 (zh)
WO (1) WO2014204713A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140368659A1 (en) * 2013-06-18 2014-12-18 Motorola Solutions, Inc Method and apparatus for displaying an image from a camera
US10063782B2 (en) 2013-06-18 2018-08-28 Motorola Solutions, Inc. Method and apparatus for displaying an image from a camera
JP2016540211A (ja) 2013-11-27 2016-12-22 ザ トラスティーズ オブ ザ ユニバーシティー オブ ペンシルバニア 回転翼型小型飛行体(mav)での屋内環境及び屋外環境における安定自律飛行のためのマルチセンサの融合
US10395115B2 (en) * 2015-01-27 2019-08-27 The Trustees Of The University Of Pennsylvania Systems, devices, and methods for robotic remote sensing for precision agriculture
WO2017095493A2 (en) 2015-09-11 2017-06-08 The Trustees Of The University Of Pennsylvania Systems and methods for generating safe trajectories for multi-vehicle teams

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090195652A1 (en) * 2008-02-05 2009-08-06 Wave Group Ltd. Interactive Virtual Window Vision System For Mobile Platforms
US20110291918A1 (en) * 2010-06-01 2011-12-01 Raytheon Company Enhancing Vision Using An Array Of Sensor Modules
US20120221552A1 (en) * 2011-02-28 2012-08-30 Nokia Corporation Method and apparatus for providing an active search user interface element
CN102857739A (zh) * 2012-08-20 2013-01-02 上海光亮光电科技有限公司 分布式全景监控系统及其方法
CN102918834A (zh) * 2010-03-01 2013-02-06 艾肯姆有限公司 用于空间控制的景物照明的系统和方法
US20130097649A1 (en) * 2011-10-12 2013-04-18 Kt Corporation Method and apparatus for providing image to device
CN103108164A (zh) * 2013-02-01 2013-05-15 南京迈得特光学有限公司 复眼式全景连续跟踪监控系统

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1263626A2 (en) * 2000-03-02 2002-12-11 Donnelly Corporation Video mirror systems incorporating an accessory module
DE60220379T2 (de) * 2001-01-23 2008-01-24 Donnelly Corp., Holland Verbessertes fahrzeugbeleuchtungssystem
US20040020099A1 (en) 2001-03-13 2004-02-05 Osborn John H. Method and apparatus to provide precision aiming assistance to a shooter
US20030030911A1 (en) 2001-08-13 2003-02-13 Brooks Michael H. Flight crew emergency vision system
US7050835B2 (en) 2001-12-12 2006-05-23 Universal Display Corporation Intelligent multi-media display communication system
US8326483B2 (en) 2003-02-21 2012-12-04 Gentex Corporation Monitoring and automatic equipment control systems
WO2005094351A2 (en) 2004-03-26 2005-10-13 Peoples Broadband, Inc. Next generation consumer telecommunications network
US7526103B2 (en) 2004-04-15 2009-04-28 Donnelly Corporation Imaging system for vehicle
JP4829290B2 (ja) 2005-03-25 2011-12-07 センサーマティック・エレクトロニクス・エルエルシー インテリジェントなカメラ選択および対象追跡
EP2144248B1 (en) 2005-08-09 2019-01-30 Panasonic Intellectual Property Management Co., Ltd. Recording medium and playback apparatus
US8401869B2 (en) 2005-08-24 2013-03-19 Image Stream Medical, Inc. Streaming video network system
EP2035670A2 (en) 2006-06-16 2009-03-18 Droplet Technology, Inc. System, method and apparatus of video processing and applications
US7777783B1 (en) 2007-03-23 2010-08-17 Proximex Corporation Multi-video navigation
WO2009036176A1 (en) * 2007-09-11 2009-03-19 Magna Electronics Imaging system for vehicle
CA2712673A1 (en) * 2008-02-04 2009-08-13 Tele Atlas North America Inc. Method for map matching with sensor detected objects
GB2459918B (en) * 2008-05-12 2010-04-21 Mark Group Ltd Thermal imaging
JP5099451B2 (ja) * 2008-12-01 2012-12-19 アイシン精機株式会社 車両周辺確認装置
US20100196859A1 (en) 2009-02-01 2010-08-05 John David Saugen Combat Information System
US20100293580A1 (en) 2009-05-12 2010-11-18 Latchman David P Realtime video network
US8743198B2 (en) 2009-12-30 2014-06-03 Infosys Limited Method and system for real time detection of conference room occupancy
US8451312B2 (en) 2010-01-06 2013-05-28 Apple Inc. Automatic video stream selection
US9615064B2 (en) 2010-12-30 2017-04-04 Pelco, Inc. Tracking moving objects using a camera network
US9071709B2 (en) 2011-03-31 2015-06-30 Nokia Technologies Oy Method and apparatus for providing collaboration between remote and on-site users of indirect augmented reality
EP2530647A1 (en) * 2011-06-01 2012-12-05 Harman Becker Automotive Systems GmbH Method of calibrating a vehicle vision system and vehicle vision system
WO2013019707A1 (en) * 2011-08-01 2013-02-07 Magna Electronics Inc. Vehicle camera alignment system
US8879761B2 (en) 2011-11-22 2014-11-04 Apple Inc. Orientation-based audio
US20130222590A1 (en) * 2012-02-27 2013-08-29 Honeywell International Inc. Methods and apparatus for dynamically simulating a remote audiovisual environment
US9087386B2 (en) 2012-11-30 2015-07-21 Vidsys, Inc. Tracking people and objects using multiple live and recorded surveillance camera video feeds
US10063782B2 (en) 2013-06-18 2018-08-28 Motorola Solutions, Inc. Method and apparatus for displaying an image from a camera

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090195652A1 (en) * 2008-02-05 2009-08-06 Wave Group Ltd. Interactive Virtual Window Vision System For Mobile Platforms
CN102918834A (zh) * 2010-03-01 2013-02-06 艾肯姆有限公司 用于空间控制的景物照明的系统和方法
US20110291918A1 (en) * 2010-06-01 2011-12-01 Raytheon Company Enhancing Vision Using An Array Of Sensor Modules
US20120221552A1 (en) * 2011-02-28 2012-08-30 Nokia Corporation Method and apparatus for providing an active search user interface element
US20130097649A1 (en) * 2011-10-12 2013-04-18 Kt Corporation Method and apparatus for providing image to device
CN102857739A (zh) * 2012-08-20 2013-01-02 上海光亮光电科技有限公司 分布式全景监控系统及其方法
CN103108164A (zh) * 2013-02-01 2013-05-15 南京迈得特光学有限公司 复眼式全景连续跟踪监控系统

Also Published As

Publication number Publication date
US10063782B2 (en) 2018-08-28
US20140368663A1 (en) 2014-12-18
WO2014204713A1 (en) 2014-12-24
AU2014281015A1 (en) 2015-12-17
AU2014281015B2 (en) 2016-12-22
CA2916179A1 (en) 2014-12-24
EP3011736A1 (en) 2016-04-27

Similar Documents

Publication Publication Date Title
US9569669B2 (en) Centralized video surveillance data in head mounted device
US10960977B2 (en) Drone based systems and methodologies for capturing images
KR102243659B1 (ko) 이동 단말기 및 그 제어 방법
US9483649B2 (en) Image processing device, image processing system, image processing method, and program
US11272160B2 (en) Tracking a point of interest in a panoramic video
US10094903B2 (en) Object tracking and data aggregation in panoramic video
US9973703B2 (en) Mobile terminal and method for controlling the same
CN105340265A (zh) 用于显示来自相机的图像的方法和设备
US20130196614A1 (en) Mobile alert reporting and monitoring systems and methods
US20190356936A9 (en) System for georeferenced, geo-oriented realtime video streams
US10861071B2 (en) Crowd-sourced computer-implemented methods and systems of collecting requested data
KR20160058471A (ko) 이동 단말기 및 그 제어 방법
WO2018205844A1 (zh) 视频监控装置、监控服务器及系统
US10257129B2 (en) Information processing apparatus, information processing method, program, recording medium, and information processing system for selecting an information poster and displaying a view image of the selected information poster
JP7420126B2 (ja) システム、管理システム、画像管理方法、及びプログラム
JP6242011B2 (ja) 任意の領域を撮影している撮影側端末を特定する映像管理システム及び方法
KR102120786B1 (ko) 제약없는 시공간 위치 기반 비디오 컨텐츠를 제공하는 방법 및 장치
KR20180113261A (ko) 이동 단말기 및 그 제어 방법
JP2015037242A (ja) 受信装置、受信方法、送信装置、及び、送信方法
KR20180119281A (ko) 이동 단말기 및 그 제어 방법
US20140368659A1 (en) Method and apparatus for displaying an image from a camera
CN106210282A (zh) 一种交互方法、穿戴式设备和终端
US20150154800A1 (en) Augmented reality viewing initiation based on social behavior
KR101465186B1 (ko) 단말기 간에 데이터를 액세스하는 방법
KR20150117132A (ko) 이동단말기 및 그 제어방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160217