CN1296697A - 在连接式数字相机的视频流操作期间用于静止图像捕捉的方法和设备 - Google Patents

在连接式数字相机的视频流操作期间用于静止图像捕捉的方法和设备 Download PDF

Info

Publication number
CN1296697A
CN1296697A CN99804816A CN99804816A CN1296697A CN 1296697 A CN1296697 A CN 1296697A CN 99804816 A CN99804816 A CN 99804816A CN 99804816 A CN99804816 A CN 99804816A CN 1296697 A CN1296697 A CN 1296697A
Authority
CN
China
Prior art keywords
digital camera
image
camera
computer system
driver
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN99804816A
Other languages
English (en)
Other versions
CN1166195C (zh
Inventor
B·P·克莱门斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN1296697A publication Critical patent/CN1296697A/zh
Application granted granted Critical
Publication of CN1166195C publication Critical patent/CN1166195C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21—Intermediate information storage
    • H04N1/2104—Intermediate information storage for one or a few pictures
    • H04N1/2112—Intermediate information storage for one or a few pictures using still video cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21—Intermediate information storage
    • H04N1/2104—Intermediate information storage for one or a few pictures
    • H04N1/2112—Intermediate information storage for one or a few pictures using still video cameras
    • H04N1/212—Motion video recording combined with still video recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008—Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0034—Details of the connection, e.g. connector, interface
    • H04N2201/0048—Type of connection
    • H04N2201/0049—By wire, cable or the like

Abstract

数字相机(10)设有静止图像和视频双模式(110)特征,由此使数字相机和相关的计算机系统支持静止图像和视频流操作的同时捕捉。在与计算机系统(12)相连的数字相机的视频流操作期间,静止图像的捕捉和恢复包括终止视频流操作、由数字相机捕捉静止图像、将静止图像从数字相机传送到计算机系统以及恢复视频流操作。由运行在计算机系统上的相机设备驱动器和总线接口软件完成对所捕捉的静止图像的传送。在一个实施例中,数字相机(10)通过通用串行总线(USB)与计算机系统相连,相机设备驱动器和总线接口软件控制USB的存取和使用。

Description

在连接式数字相机的视频流操作期间 用于静止图像捕捉的方法和设备
本发明通常涉及数字相机和计算机系统，更具体地说是涉及连接到计算机系统上的数字相机的操作性能。
近来，数字相机已发展成为以电子形式获取和保存数字静止图像的便携系统。可以以多种不同方式使用这些图像，例如在“电子”相薄中显示或用于修饰图形计算机应用。数字相机具有与传统化学胶片相机相类似的用户接口，但图像的捕捉和存储完全使用电子固体电路和图像处理技术。
典型的数字相机具有电子图像传感器，该电子图像传感器通过光学接口接收从物体和场景反射的入射光。光学接口可以包括透镜系统、光圈机构以及滤光器。通常可以将传感器作为电荷藕合器件阵列(CCD)或产生响应入射光的发光信号的互补金属氧化物半导体(CMOS)图像检测电路。通过模拟数字(A/D)转换器将来自传感器的模拟信号转换成数字格式，然后再通过逻辑电路和/或程序处理器的处理来产生捕捉到的物体或场景的数字图像。所捕捉的图像临时存储在内部随机存储器(RAM)中，然后也可存储在相机上的可拆卸局部存储器中。内部RAM存储单个图像，而可移动局部存储器可存储许多图像。此外，图像可传输到与数字相机相链接的计算机上，作为电子文件存储起来，向用户显示，对图形和图像做进一步处理以改善图像质量，以及与其它图形软件一起使用。
大多数数字相机的购买者使用个人计算机(PC)系统浏览静止图像。因此，这些购买者也可享受将其数字相机与其他人通信的乐趣，例如在视频会议中与另一台计算机通信，以便看到和听见其它人。然而，通常大多数数字相机的配置仅能提供静止图像。同样地，通常用于视频会议的相机在与计算机断开时也不会作为静止相机使用。针对这些限制，已经开发了允许使用视频和静止图像捕捉便携式操作“双模式”的数字相机和相关的图像处理结构，在视频模式中，相机可与计算机相链接(系)以实现视频目的。这种系统的运行目的是为了通过同一信号处理系统提供静止和视频图像，由此减少单独购买静止和视频相机的消费者的花销。
然而，这种双模式相机具有固有的局限性，即仅当相机在便携式、非视频方式下操作时才能使用静止图像捕捉模式。当相机在视频模式下使用时(例如与PC相连接用于视频会议时)，所捕捉的图像系列包括重写任意暂存静止图像的视频帧序列，该任意暂存静止图像可能已被相机捕捉并存储在其内部RAM中，因此不可能同时再现发生的视频流和静止图像捕捉操作。
因此，希望在不增加相机成本的情况下，在与计算机相连的数字相机中提供同时发生的视频流和静止图像捕捉操作的方法和设备，以克服现有技术的不足和局限性。
本发明的实施例是一种在与计算机相连的数字相机的视频流操作期间捕捉静止图像的方法。该方法包括以下步骤：中止视频流操作，通过数字相机捕捉静止图像，将静止图像从数字相机传输到计算机系统以及恢复视频流操作。
本发明的另一个实施例是一种用于在数字相机的视频流操作过程中捕捉静止图像的设备。在具有通过总线与计算机系统相连的数字相机的系统中，该设备包括相机设备驱动器和总线接口驱动器，在计算机系统上执行相机设备驱动程序，以中止视频流操作，请求通过数字相机捕捉静止图像，请求将捕捉到的静止图像从数字相机传送到计算机系统，并恢复视频流操作；以及总线接口驱动器与相机设备驱动器和总线相连接，通过总线在相机设备驱动器和数字相机之间传递命令和数据。
通过对本发明进行下述详细描述，可理解本发明的特征和优势。
图1是本发明实施例的系统环境图；
图2是数字图像捕捉设备例如数字相机的逻辑框图；
图3是根据本发明实施例的数字相机图像处理系统的结构图；
图4是根据本发明实施例执行的信号处理步骤的逻辑流程图；
图5是与数字相机互相配合的基于主机系统的部件方框图；
图6是相机设备驱动器的方框图；及
图7A和7B是用于从数字相机中捕捉和恢复静止图像的流程图。
在下面的描述中，将描述本发明的不同方面。但显然，对本领域的技术人员来说，可以仅用本发明的一部分或全部方面来实现本发明。为了方便说明，提供具体的数字、材料和图形以彻底理解本发明。但显然，本领域的技术人员也可以在不用具体细节的情况下实施本发明。在其它例子中，为使本发明更清晰，省略或简化了公知的特征。
本发明的一个实施例是一种为数字相机提供真正双模式特征的方法和设备，从而数字相机和相关计算机系统支持同时发生的静止图像捕捉和视频流操作。在发送捕捉静止图像命令之前，任何正在用操作的流视频模式监视显示在计算机监视器上的一系列图像成分同时等待适当的图像合成的人都可能使用根据本发明的双模式静止图像捕捉。例如，专业摄影师、摄影爱好者或者甚至一个初学者用户都能用双模式在现场录象的同时用他们的数字相机进行拍照。在另一个例子中，以视频模式操作的相机有时用作安全性监视器。使用本发明，操作人员可以在引人关注的、受监视的事件出现时发送捕捉静止图像命令。或者，当相机记录的场景合成变得引人关注或符合可修改的预置参数时，实时图像分析程序能自动产生捕捉静止图像命令。
图1是本发明一个实施例的系统环境图。用户(未示出)操作数字相机10捕捉静止图像并生成全速运动视频图像。数字相机通过电缆14与主机系统12连接。主机系统可以是任何通用目的的计算机系统，包括个人计算机(PC)、工作站或类似系统，这些计算机系统至少有一个处理单元和至少一个存储机器可读指令的存储器。在一个实施例中，系统实现通用串行总线(USB)通信接口。USB是外围总线规格，实现PC外部的计算机外围设备的“即插即用”，在增加新的外设时不需要将印刷电路板安装到专用计算机插槽中和重新配置系统。配备有USB的计算机使得外设一经物理连接就能被自动配置。USB在图1中用电缆14表示。或者，可以利用计算机系统和计算机外设之间的其他通信接口。
图2是数字图像捕捉设备例如数字相机的逻辑框图。数字相机100以至少两种操作模式运行，从而通过同一信号处理系统提供静止和视频图像。在一个实施例中，通过以链式完成数字图像处理操作，信号处理系统提供来自于同一详细的、原始图像传感器信号的视频和静止数据。原始图像传感器信号被数字化并准备进行空间度量，然后解相关并编码成压缩数据。在通过计算机总线例如USB进入的可再编程逻辑电路中执行不同的图像处理操作，或者通过对高性能数据处理器进行编程来执行软件操作。
数字相机100包括视频和静止处理块110，具有透镜系统104和光圈108的光学接口，用于暴露于从其图像将被捕捉的物体102反射回来的入射光。相机100还可以包括产生补足光的频闪观测器或电子闪光灯，以便当相机100在低照度下工作时加强对物体102的照明。
透镜系统104最好具有既可为视频操作又可为静止操作所接受的固定焦距，因为在视频模式下可以允许用于近距离物体(例如在视频会议期间用户的脸)的光学接口的调制传递函数(MTF)下降(由此图像品质降级)。光学接口具有光圈机构108以控制传感器上光的剂量和聚焦深度，并可以为视频和静止操作仅配置下述两种设置。
光学接口将入射光引导到电子图像传感器114上。图像传感器114具有多个像素，这些像素电响应入射光强度和颜色。传感器114产生表示所捕捉图像的清晰度足以作为静止图像的信号。接收所生成光的模拟传感器信号的A/D转换器(未示出)可以包括在传感器114中，用于产生定义曝光物体102和周围场景的数字图像的数字传感器信号。或者，传感器114为块110提供模拟信号，块110又可以在将信号转换成数字格式之前对它们进行模拟信号处理。在其中一种情况下，数字化后的传感器信号由此定义原始图像数据，然后通过视频和静止块110根据图像处理方法对原始图像数据进行处理，以便根据所选择的静止或视频操作模式形成静止图像或描绘曝光物体或场景运动的一序列视频图像。
模式选择可以由设备100的用户通过对设备100进行机械控制(未示出)来决定。通过局部用户接口158接收机械旋钮设置并将其转化成将由连接统控制器160处理的控制信号和数据。设备100可以经主机/PC通信接口154连接到视频模式的主机，例如PC。该主机/PC通信接口连接图1的电缆14。视频模式仅在相机连接到计算机系统上时才可以使用。接着，用户可以通过在图1的主机12上运行的软件进行模式选择，然后通过主机/PC接口154将适当的控制信号和数据传送给系统控制器160。
如上所述，系统控制器160响应用户所作的模式选择，协调(orchestrate)捕捉视频和静止图像。系统控制器160配置视频和静止处理块110，以提供静止图像数据或描绘一序列视频图像帧的视频图像数据。然后图像存储在设备100上和/或传送到主机/PC，以便解压缩(如果图像曾经被压缩)、着色和/或显示。
数字相机100包括接收和存储静止图像数据的局部存储设备122。存储设备122可以包括闪速半导体存储器和/或旋转媒体设备。闪速存储器是可拆卸的，例如Intel公司的微型卡式闪速存储器。旋转媒体也可以是可拆卸的或固定的，可以是磁盘或适于存储图像数据文件的其他类型。
图像数据也可以通过主机/PC通信接口154在相机100的外部进行传送。通信接口154可以根据计算机外设总线标准配置成既将静止图像数据传送给主机/PC，又将视频图像数据传送给主机/PC。可使用的总线标准例如可以是：RS-232串行接口、通用串行总线(USB)或者更高的电气及电子工程协会(IEEE)性能标准1394-1995。
如上所述，相机100可配置成以多种模式进行光学和电气操作，包括视频模式和静止模式，视频模式例如视频会议期间，静止模式例如类似于使用传统便携式相机进行拍照时。从光学的观点来看，为了降低生产该设备实施例的成本，固定焦距透镜系统104，例如具有10mm有效焦距的透镜系统，是最好的且可用于两种模式。在用于视频会议及快速帧频应用以捕捉运动的视频模式下可以选择大约f/2的光圈108。该光圈设置的主焦点最好为物体102大约1米远，背景的景深为2米。
在操作的静止模式中，可以捕捉室内和室外场景的可接受质量的静止图像。对于室内场景，亮度级可能会很低，以至需要通过频闪观测器或电子闪光灯112发出补充光。对于室内场景，人们通常会选择光圈108介于f/2至f/8之间。在这个光圈范围内，主焦点为物体102大约2米远，背景的景深为4米。对于具有环境光的室外场景，主焦点为物体102大约2-3米远，背景的景深为无穷远。通常，对于室外场景，人们会选择大约为f/8的光圈以完成聚焦。
通过如此配置视频和静止程序块110，相机100还可以电子配置成双模式操作，以提供静止图像数据或视频图像序列。在一个实施例中，块110作为逻辑电路和/或被编程的程序数据处理器执行数字信号和图像处理功能以产生压缩的图像数据，该压缩的图像数据具有从传感器114接收的详细、原始图像数据的预定义分辨率和压缩率。图3所示的这种块110是根据本发明实施例的数字相机(或其它图像捕捉设备)图像处理系统200的部分逻辑方框图。
图3所示为本发明实施例视频和静止操作模式的图像数据所取路径的数据流程图。程序块110包括一系列起始于校正块210的成像功能。无论何时，只要从传感器114接收到的原始图像数据的质量在图像被缩放和压缩前都保证进行某种预处理，就使用校正块210。在某些情况下，校正块210对从图像传感器接收到的原始图像数据进行像素置换、压缩扩展以及图像校正。该原始图像数据应该是具有充分细节(例如最好是768×576或更高的空间分辨率)以产生可接受质量的静止图像。
在块210中可执行像素置换以用有效数据替代无效像素数据，为随后的成像功能提供更确定性的输入。可以执行压缩以降低每个像素的分辨率(每个像素的位数)。例如，原始图像数据可以达到每个像素10位，而逻辑电路的最佳像素分辨率可能是8位(1个字节)。也可以执行传统的图像校正以使图像的信息量符合主机的预期，最终在主机上显示图像。
在块210中对每个所接收到的原始图像帧执行的其它功能包括降低固定图形噪声，这通常需要在压缩图像前进行。再次，块210是否执行任何校正功能通常取决于从传感器114接收到的原始图像数据的质量，在图像准备存储或传输到主机前都将执行随后的某些图像处理例如缩放或压缩。
一旦原始图像数据已被校正，或相反通过校正块210处理成所希望的尺寸或格式，如果需要满足如图2所示的主机/PC通信接口154和局部存储设备122的传输和存储请求，可以缩放和压缩所校正的数据。为满足这些请求，处理块110可以包括缩放和压缩逻辑212，以在传输和/或存储前执行任何必需的图像缩放和压缩。
例如，可以配置缩放和压缩逻辑212以减小图像尺寸和分辨率以产生与更大和更多细节的静止图像相比更小的、更少细节的视频图像。需要更小及更少细节的图像数据的目的是快速传输将在主机/PC上解压缩和浏览的视频图像序列。然而，如果在相机100和主机/PC之间的传输链路具有足够带宽能够按主机/PC所需的速率传输详细的原始图像数据序列，则可以简化甚至省略对静止或视频操作的缩放和压缩逻辑212。
如图3所示，压缩逻辑212将实现许多数字图像处理功能。根据从相机100中使用的光学接口所给出的系统200所期望的性能(压缩图像数字的着色速度)和图像质量，本领域的技术人员可对这些或其它类似功能如下面描述的进行配置。在图3所示的一个实施例中已经用作为独立逻辑电路部件执行成像功能，下面对此进行描述。
缩放逻辑214对校正的图像数据执行二维空间缩放，以产生更易于存储或传输的更小图像。使用传统的已知技术根据所选择的缩放比率进行缩放。缩放率可以是整数或小数。缩放可以以2-维方式完成，例如，利用两个单独的1-维缩放过程。
仅通过选择适当的缩放率，就可以在视频捕捉和静止图像捕捉中使用缩放逻辑214。例如，所校正图像的4∶1二次抽样可以以视频模式完成，以使所校正图像数据的16个像素平均合并成缩小图像数据中的1个像素。基于标准采样原理并假设不相关的噪声源，二次抽样也可以改善系数为4的信号噪声比。例如也可以使用2∶1的低缩放比，其中将四个像素平均，产生一个缩小图像数据中的一个像素，导致两者信号噪声比(SNR)的改善。在视频模式操作期间，通过以这种方式缩放更详细的校正图像数据，由于在视频操作中(例如在视频会议期间)中通常遇到低亮度级，因此系统200会补偿所增大的噪声。
在图3一系列图像功能块中的下一个是解相关和编码逻辑222。根据所选择的多个解相关方法中的一种，从缩放逻辑214接收的缩小图像数据被解相关以准备熵编码，熵编码是一种图像压缩类型。再者，用户可以选择一种适于获取通常更小尺寸视频图像的特殊解相关方法。
当相邻像素之间不同时，解相关功能可能会产生错误图像数据。可用于图像解相关的一种特殊方法是数字脉冲码调制(DPCM)方法。为了进一步压缩图像数据，如果需要，例如，在传输大量视频图像帧时，可以通过使用DPCM“量化”(将第一组数据映像成更小的一组值)错误的形式来引入“损失”。
在一系列成像功能块中的下一阶段是块222执行的熵编码，其使用可变长度编码技术来压缩被解相关的图像数据。例如，普遍使用的已知熵编码方法是赫夫曼编码。熵编码包括用位串来代替被解相关的图像数据中的符号，在这种方法中用具有不同可变长度的二进制串表示不同的符号，最普遍出现的符号用最短的二进制串表示。因此，熵编码逻辑222提供压缩的图像数据，如图3示例中所示，其中缩小的8位数据被编码成具有3-16位可变长度的数据。
再者，用来获得视频和静止图像的编码方法可以是不同的，并可根据操作模式进行选择。例如，与视频图像数据相比，编码静止图像数据可以使用更大一组符号(具有可变二进制串长度)。这是因为主机/PC分配给解压缩静止图像的时间比分配给解压缩视频图像的时间多。相反，对于编码视频图像，应当使用具有统一二进制串长度的更有限的一组符号更快速地解压缩视频图像帧序列。此外，具有统一二进制串长度允许使用定额带宽来传输特别适于诸如USB这样的主机/PC接口的图像数据。
图像处理系统200包括简化上述双模式操作的附加逻辑。特别地，块210和212中的逻辑电路使用可编程查找表(LUT)和随机存取存储器(RAM)以灵活完成其各自的图像功能。按照所选特殊操作模式的方法所指定的，每个LUT和RAM为其各自的图像功能逻辑提供信息。例如，缩放逻辑214使用RAM存储区来存储中间缩放计算结果。而且，用于解相关和编码逻辑的LUT234也可以加载现有技术中已知的完成解相关和编码所需的不同规则和数据，这取决于所需的是静止图像还是视频图像。在特殊实施例中，LUT234使用两个查找表(LUT)，一个用于列表字符(所谓的“代码薄”)，另一个用于列表串长度。
可以使用不同的技术来确定将装入RAM和LUT中的正常值。例如，可以通过相机控制部件160完成图像测量，以确定影响解相关和熵编码的照明和其它因素。如上所述，传输和存储限制可以规定更大的压缩，特别是在产生大量图像帧的视频操作期间，以使用于解相关和熵编码的LUT会包括用于图像数据压缩的更小的代码薄。
尽管上述不同的LUT和RAM可以作为单个物理RAM部件的一部分来执行，或者也可以以不同的组合结合成一个或多个RAM部件，但每个LUT和RAM最好以物理上独立的部件执行，以获得成像功能的快速性能。
图像数据根据压缩逻辑212所希望的模式被压缩后，接着可变长度数据通过将数据打包成恒定长度传递到数据打包部件226，因此，越易处理，数据段在计算机总线上的存储和传输就越有效。再者，如果来自传感器114的图像数据是充分可接受的，而且由于传感器图像数据具有恒定长度且易于在具有最少处理的设备100外存储或传输，对这些数据没有更多传输和存储的限制，则数据打包部件就变成多余的。
在数据打包部件226中，所接收到的不同长度的数据块被打包成具有预先确定的一恒定长度的数据块。例如，在图3的系统200中，数据打包部件将可变长度压缩图像数据打包成16位数据块。然后将16位数据块发送到诸如直接存储器存取(DMA)控制器这样的数据流控制器238，接着直接存储器存取控制器在访问总线242前将地址信息加入到每个数据块中，以使16位块在总线上发送。存储器控制器246接受总线242上的16位块并将其暂时存储在相机100上的存储器中，例如动态RAM(动态随机存储器)(未示出)中。
静止图像数据被打包后，通过与总线242相连接的局部存储接口250从总线242上传送到局部存储器122(见图2)。例如，局部存储设备122可以是将图像数据作为“文件”接收的可拆卸的闪速存储器卡，“文件”包括压缩表、文件头、时间和日期标记，以及附着于图像数据的测量信息。然后该卡可从相机100中取出，并插入PC12中以传送静止图像数据用于解压缩、浏览和/或在PC中进一步处理。
或者，也可以使用可拆卸存储设备，可使用主机/PC通信控制器154将静止和视频图像传送到相机100外。这可以通过使用应用于通信接口154中的特殊总线标准将静止图像数据准备为适于传输的磁盘文件来实现，传送至主机12中存储并由主处理机(未示出)存取。视频图像数据可根据已知技术通过诸如USB这样的控制器接口流入主机。
在图3所示的基于总线结构的内容中已对相机100的双模式操作和处理系统200进行了描述。为了更便于对这种结构中不同操作模式进行软件控制，可将多个存储器的控制寄存器(未示出)连接到总线242上，以允许系统控制器160以所希望的操作模式配置相机100和系统200。提供给系统控制器执行的指令通过总线242访问LUT、RAM和控制寄存器，以对所选操作模式的正确图像处理方法所需要的参数进行编程。例如，在制造过程中，可以将用于所有操作模式的缩放、解相关和熵编码方法的不同规则和参数作为控制器指令存储在相机100上，其中每个操作模式被分配不同组的方法。适当的一组可装入响应用户通过局部用户接口158或主机/PC通信接口154所选模式的视频和静止块110中，
尽管视频和静止块110的一个实施例是逻辑电路，但图像处理系统200也可以配备有执行指令的被编程的高性能处理器以完成块110的数字成像功能。图4中示出了由这种处理器执行的示范性步骤，根据对图3中视频和静止处理块110实施例中的校正块210和压缩逻辑212的以上描述中可以很容易理解。图4中的步骤顺序可由系统控制器160执行，或由与总线242相连接的独立的、专用处理器(未示出)执行。
为了概要描述相机，上述实施例可用在诸如以静止模式(在便携或连接时捕捉静止图像)和视频模式(数字相机通过计算机外设总线接口与主机或其它图像浏览系统相连)操作的数字相机的设备中。相机具有图像传感器及视频和静止处理决110，其配置成在室内和室外场景中都能以静止模式捕捉细节图像。在视频模式中，相机可以配置成适于使用相同处理块110来压缩细节图像序列(如果需要传输和存储)，以捕捉视频序列，该视频序列可通过诸如USB这样的计算机外围总线接口传输至主机进行浏览。
当然，上述数字相机的实施例要服从结构和工具上的某些变化。例如，尽管在处理块110中的图像数据路径被示作初始为8位宽并在被压缩时上升为16位，但本领域的技术人员可以考虑使用其它数据路径宽度来实现本发明。系统控制器160也可以与数据流控制器238组合成一个物理的、集成电路元件，例如微控制器。
图5是与数字相机相互配合的基于主机系统部分的方框图。数字相机10通过总线接口14与计算机系统12相连接。在一个实施例中，该接口为USB接口。在应用空间中，由计算机执行用于浏览静止图像和/或全速运动视频300的应用程序。该应用程序用于图像显示和操纵、视频会议以及与所捕捉的图像和视频流有关的其它功能。应用程序300与相机设备驱动器软件302接口以与数字相机10通信。在操作系统空间中，由计算机系统执行相机设备驱动器软件。应用程序和相机设备驱动器软件之间的接口如图5中的线304、306和308所示。接口304表示在两部分之间通过的命令和状态信息，接口306表示静止图像和成批数据(例如相机初始查找表(LUT))的传送，接口308表示视频图像的传送。
相机设备驱动器软件302在运行在PC上的应用程序和数字相机之间提供接口。该驱动程序通过与称为USB驱动程序(USBD)310的总线接口驱动程序相互作用来调整与USB电缆14的通信。USBD是用于调整计算机系统的所有USB设备驱动程序包的低级程序。USBD接收来自相机设备驱动器的命令包，并将其转换成通过USB插孔312送出的电信号。USB插孔312与低电平控制器314的输入/输出端相连，低电平控制器314与USB电缆14相连。在一个实施例中，低电平控制器为Intel公司的PⅡX控制器。
当如图5所示数字相机与计算机相连接时，相机捕捉的图像存储在内部RAM内，一直到相机接收到请求将所捕捉的图像传送到计算机。在接口304上通信的与静止图像的捕捉和传输有关的有三个命令。第一个命令是捕捉图像命令。静止和/或视频浏览应用程序300将该命令发送到数字相机，指示相机打开其传感器，使图像曝光并将曝光的图像复制到相机内的内部RAM中。第二个命令是请求图像长度命令。静止和/或视频浏览应用程序300将该命令发送到数字相机，以获得所捕捉的静止图像的位长。然后应用程序分配主机上的部分存储器来保存静止图像。第三个命令是请求发送图像命令。静止和/或视频浏览应用程序将该命令发送到数字相机，以使其将所捕捉的图像传送或上载到计算机系统。这个命令包括图像长度，图像长度是根据响应请求图像大小命令所接收的位数。当操作模式为视频模式时，所捕捉的图像通过接口308传送回静止和/或视频浏览应用程序。当操作模式为静止模式时，所捕捉的图像通过接口306传送回静止和/或视频浏览应用程序。
在现有技术系统中，当命令被发送到相机以初始化图像捕捉时，相机捕捉图像并将其存储在相机的内部RAM中。在随后的时间里，应用程序请求将捕捉到的图像从相机上载到PC中。在静止模式中，这种方法一直持续到内部RAM中的图像被重写。然而，在视频流操作期间，由于在相机的内部RAM中仅有存储单个图像的空间，因此捕捉到的静止图像几乎立即被相机捕捉的下一个视频帧重写。本发明的一个实施例以下面的方法克服了这个问题。当相机设备驱动器302检测来自静止和/或视频浏览应用程序300的捕捉图像命令时，相机设备驱动器将整个图像捕捉和图像恢复命令序列作为自动操作来执行，由此使捕捉到的图像在被由相机产生的视频流序列中的下一个视频帧重写之前存储在主机系统中。该自动操作不能被与视频流处理有关的事件打断，因而确保捕捉到的图像回保留在主机中。无论何时只要相机与主机相连接就执行该处理，并有效完成真正的双模式处理工作。那么用户就可以在诸如视频会议这样的视频流处理期间拍摄静止图像。
然而静止图像以捕捉图像/请求图像长度/请求发送图像命令的序列被传送，而通过非常不同的命令序列发送流视频图像。首先，相机设备驱动器将命令发送给数字相机，以根据每个视频传送请求设置将要传送的视频数据量。通常相机发送到计算机系统的每个视频数据包所选择的数量是介于68和768之间的数据。在一个实施例中，图像为320个像素宽、240个像素高，一个视频帧具有76,800位。因此，需要一百个768位的视频数据包来组成一个完整的视频帧。如果包长度是768位，则相机设备驱动器将获取更多的视频数据的命令发送一百次，以得到一个视频帧。相机设备驱动器将启动流视频数据命令发送到相机。然后相机设备驱动器进入循环，并执行将获取更多的视频数据的命令发送到相机的操作，并将视频数据包附加给主机上的视频帧缓冲器，获取视频数据直至接收到完整视频帧，执行视频解压缩和增益视频帧，并将处理后的视频帧发送到应用程序。在视频模式中，仅发送一个捕捉命令(启动流命令)，仅发送一个长度的命令(设置单个视频数据包长度的命令)，每个视频数据帧需要很多获取数据请求。仅在启动视频模式时才发送一组视频数据包长度命令和启动流命令。在它们被发送后，只要相机设备驱动器继续发送获取更多视频数据命令，视频数据就持续从相机流出。
图6是本发明实施例的相机设备驱动器的方框图。相机设备驱动器接收命令并将状态和数据返回给应用程序，还与USBD310相配合实现与数字相机的通信。处理状态和状态命令函数400接受来自应用程序的命令，请求数字相机执行该功能并将所请求的状态返回到应用程序。处理状态和状态命令函数400询问通道状态存储器402相机设备驱动器的当前状态和数字相机操作。
如果所接收的命令在相机初始化期间涉及静止图像捕捉和恢复或成批数据的下载，则处理状态和状态命令函数400指示处理静止和成批命令函数404处理该命令。如果所接收的命令涉及视频流，则处理状态和状态命令函数400指示处理流命令函数406处理该命令。在另一个例子中，合适的函数404或406将命令通过USBD发送至相机。作为响应，相机通过USB将图像数据发送到相机设备驱动器。当出现数据成批传送时(例如，一旦相机初始化，就下载颜色查找表(LUT)或其它数据)，数据在传送到相机前暂时存储在静止和成批传送存储器408中。当静止图像从相机中恢复时，图像数据在传送到应用程序之前存储在静止和成批传送存储器408中。当一组视频帧中的一个从相机中恢复时，组成视频帧的图像数据在传送到应用程序之前存储在流存储器410中。需要注意的是，静止图像数据和视频数据是存储在主机上的相机设备驱动器中的单独的存储单元中。也要注意影响静止和视频流的并行控制路径是由处理静止和成批命令函数404和处理流命令406执行的。
对于静止图像处理，应用程序将捕捉图像命令发送到处理状态和状态命令函数400。该函数指示处理静止和成批命令函数404将命令发送到相机并锁定将要执行的未来视频流命令，直至完成静止图像处理。当相机返回静止图像数据时，通过USBD310将其载入静止和成批传送存储器408中。一旦收到来自应用程序的请求，处理静止和成批命令函数404就指示将数据传送到应用程序空间并将状态返回到处理状态和状态命令函数400，处理状态和状态命令函数400再将相同的状态返回到应用程序。
对于视频流处理，应用程序将视频流命令发送到处理状态和状态命令函数400。该函数指示处理流命令函数406将这些命令发送至相机中。当从相机中接收视频帧时，通过USBD310将其载入流存储器410。然后处理流命令函数406指示将视频帧数据传送到应用程序空间以显示给用户并将状态返回到处理状态和状态命令函数400，处理状态和状态命令函数400可以将状态返回到应用程序，也可以不将状态返回到应用程序。
图7A和7B是根据本发明实施例用数字相机捕捉和恢复静止图像的步骤的流程图。当相机以静止和视频流两种操作模式与计算机系统相连接时，执行这些步骤。捕捉到的静止图像可以从闪速存储器卡或相机的内部RAM中拷贝。启动步骤500后，在步骤502上，应用程序将捕捉图像命令发送到相机设备驱动器上，指示驱动程序使相机拍摄图片。驱动程序检查该命令并确认其是捕捉图像请求。然后在步骤504上，相机设备驱动器启动全部命令序列来彻底捕捉和恢复图像。首先，相机设备驱动器确认机相是否处于视频流操作模式。当相机处于视频流操作模式时，其继续捕捉图像并将捕捉到的图像有效上载到计算机中。在步骤506上，如果相机现在正在流动，则相机设备驱动器记录当前流状态并将终止流命令发送到相机中。
在步骤508上，一旦保存当前状态，则相机设备驱动器将捕捉图像命令从USB发送到相机中。在步骤510上相机设备驱动器等待的捕捉图像命令的成功完成。如果命令失败，则驱动程序将错误返回给应用程序。如果命令成功，则图像被相机捕捉并存储在相机的内部RAM中。接着在步骤512上，相机设备驱动器将报告图像长度命令发送到相机中。该命令请求得到捕捉到的图像的位长。在步骤514上，相机设备驱动器等待报告图像长度命令的成功完成。如果报告错误，则相机设备驱动器将错误返回到应用程序。否则，在通过连接器7B的图7B上继续进行处理。
一旦相机设备驱动器知道图像的长度，其必须准备USBD层以恢复规定长度的成批传送。在图7B的步骤516上，相机设备驱动器将接收成批传送命令发送到USBD以接收响应报告图像长度命令返回的图像数据的位数。接收到的数据将存储在驱动器的静止和成批传送存储区中。该命令的结果是，USBD准备并等待接收任何相机通过USB发送的成批数据。然而，在相机从驱动程序中收到上载捕捉到的图像命令前，还不能开始发送数据。在步骤518上，相机设备驱动器将上载捕捉到的图像命令发送到相机。相机设备驱动器等待步骤520上的命令的成功完成。如果命令失败，则取消预先发送到USBD层的接收成批传送命令，并将错误状态返回到应用程序。如果命令成功完成，这仅意味着相机已接收到驱动程序的请求以上载所捕捉的图像。它不意味着已完成上载。上载捕捉到的图像命令启动捕获图像的传送。在步骤522上，USBD通过USB将从相机接收到的图像数据存在主机系统上的标志保护的静止和成批传送存储器上。在步骤524上，相机设备驱动器等待将被完全发送的捕捉到的图像以及上载捕捉到的图像命令的成功完成。如果产生错误，则将错误状态返回到应用程序。
在完成捕捉图像命令前，在步骤526上，相机设备驱动器检查以前记录的相机状态。如果步骤528中相机以前是流状态，则相机设备驱动器将启动流命令发送到相机以恢复视频流操作。当没有错误地完成传送时，将成功状态在530返回到应用程序并在终止步骤532上终止处理。这将完成对捕捉图像命令的处理。现在相机可以恢复其视频流。现在图像可从主机系统上的标志保护的静止和成批传送存储器中得到，以供应用程序使用。应用程序现在必须请求将捕捉到的图像拷贝到应用程序存储空间中。这通常通过请求捕捉到的图像的长度、分配存储器来保存图像然后请求拷贝图像来实现。需要注意的是，由于图像已经从相机上载到计算机系统中，当相机设备驱动器接收到来自应用程序的捕捉到的图像命令的获取长度时，不需要给相机发送任何命令。仅需返回相机以前报告的长度。类似地，当相机设备驱动器接收来自应用程序的上载图像命令时，不需要给相机发送任何命令。它仅仅从相机设备驱动器空间内的静止和成批传送存储器中拷贝图像，所述图象已经预先存储到应用程序的存储空间中。
虽然已经结合优选实施例对本发明进行了描述，但是，应当知道，本领域的技术人员可以在不背离本发明的精神的条件下进行修改和变型，本发明的范围由权利要求书限定。本文和附图所述内容是解释性的而非限制性的。

Claims (26)

1．在与计算机系统相连接的数字相机的视频流操作期间捕捉静止图像的方法，包括：
中止视频流操作；
通过相机捕捉静止图像；
将静止图像从数字相机传送到计算机系统；以及
恢复视频流操作。
2．根据权利要求1所述的方法，其中，中止视频流操作包括保存视频流操作的当前状态并将终止流命令从计算机系统发送到数字相机。
3．根据权利要求2所述的方法，其中，恢复视频流操作包括检查所保存的视频流操作的当前状态并在所保存的当前状态指示视频流时将启动流命令从计算机系统发送到数字相机。
4．根据权利要求1所述的方法，其中，通过数字相机捕捉静止图像还包括将捕捉图像命令从计算机系统发送到数字相机。
5．根据权利要求1所述的方法，其中，传送静止图像包括：
获得所捕捉的静止图像的长度；
根据捕捉到的静止图像的长度请求传送所捕捉的静止图像；
从数字相机接收所捕捉的静止图像；及
将所捕捉的静止图像存储在计算机系统的存储器中。
6．根据权利要求5所述的方法，其中，计算机系统包括相机设备驱动器和总线接口驱动程序，请求传送所捕捉的静止图像包括将成批传送命令从相机设备驱动器发送到总线接口驱动程序以接收来自相机的数据和将上载所捕捉的图像的命令发送到数字相机以启动所捕捉图像的发送。
7．根据权利要求6所述的方法，其中，总线接口驱动程序是通用串行总线驱动程序且计算机系统通过通用串行总线与数字相机相连。
8．在与计算机系统相连的数字相机的视频流操作期间捕捉静止图像的系统中，一种在其中存储了多个机器可读指令的机器可读媒体，这些机器可读指令可由计算机系统的处理器执行，所述机器可读指令包括使视频流操作中断的指令、请求由数字相机捕捉静止图像指令、将静止图像从数字相机传送到计算机系统指令以及使视频流操作恢复指令。
9．根据权利要求8所述的机器可读媒体，其中，中止视频流操作机器可读指令包括保存视频流操作当前状态指令和将终止流命令从计算机系统发送到数字相机指令。
10．根据权利要求9所述的机器可读媒体，其中，恢复视频流操作指令包括检查所保存的视频流操作的当前状态指令和当所保存的当前状态指示视频流时将启动流命令从计算机系统发送到数字相机指令
11．根据权利要求8所述的机器可读媒体，其中，由数字相机捕捉静止图像的机器可读指令还包括将捕捉图像命令从计算机系统发送到数字相机指令。
12．根据权利要求8所述的机器可读媒体，其中，传送静止图像的机器可读指令包括获得所捕捉的静止图像长度指令、根据所捕捉的静止图像长度请求传送所捕捉静止图像指令、从数字相机接收所捕捉静止图像指令以及将捕捉到的静止图像存储在计算机系统的存储器中。
13．根据权利要求12所述的机器可读媒体，其中，计算机系统包括相机设备驱动器和总线接口驱动程序，请求传送捕捉到的静止图像的机器可读指令包括将成批传送命令从相机设备驱动器发送到总线接口驱动程序以接收来自数字相机数据的指令，并将上载捕捉到的图像的命令发送到数字相机以启动所捕捉图像的发送的指令。
14．根据权利要求13所述的机器可读媒体，其中，机器可读指令包括总线接口驱动程序，总线接口驱动程序包括作为通用串行总线驱动程序操作的指令。
15．在具有通过总线与计算机系统相连的数字相机的系统中，用于在数字相机的视频流操作期间指示静止图像的捕捉和恢复的设备，包括：
在计算机系统上执行的相机设备驱动器，所述相机设备驱动器中止视频流操作，请求由数字相机捕捉静止图像，请求将捕捉到的静止图像从数字相机传送到计算机系统，以及恢复视频流操作；及
与相机设备驱动器和总线相连的总线接口驱动程序，在相机设备驱动器和数字相机之间通过总线执行命令和数据的通信。
16．根据权利要求15所述的设备，其中，总线为通用串行总线。
17．根据权利要求15所述的设备，其中，相机设备驱动器包括：
第一驱动器，第一驱动器与总线接口驱动程序和运行在计算机系统上的应用程序相连，以处理从应用程序接收到的状态和状态命令；
第二驱动器，第二驱动器与第一驱动器相连以处理静止图像捕捉命令；以及
第三驱动器，与第一驱动器相连以处理视频流命令。
18．根据权利要求17所述的设备，其中，相机设备驱动器还包括存储器以存储通过总线接口驱动程序接收来自数字相机的静止图像数据。
19．根据权利要求17所述的设备，其中，相机设备驱动器还包括存储器以存储通过总线接口驱动程序接收来自数字相机的视频帧数据。
20．在具有通过总线与计算机系统相连的数字相机的系统中，用于在数字相机的视频流操作期间指示静止图像的捕捉和恢复的设备，包括：
中止视频流操作的装置；
请求通过相机捕捉静止图像的装置；
请求将捕捉到的静止图像从数字相机传送到计算机系统的装置；及
恢复视频流操作的装置。
21．根据权利要求20所述的设备，其中，中止装置包括用于保存视频流操作的当前状态的装置和用于将终止流命令发送到相机的装置。
22．根据权利要求20所述的设备，其中，恢复装置包括用于检查所保存的视频流操作的当前状态的装置以及在所保存的当前状态指示视频流时将启动流命令发送到数字相机。
23．根据权利要求20所述的设备，其中，请求捕捉装置包括将捕捉图像命令发送到数字相机的装置。
24．根据权利要求20所述的设备，其中，请求传送装置包括：
获得捕捉到的静止图像长度的装置；
根据所捕捉静止图像的长度请求传送捕捉到静止图像的装置；
从数字相机接收所捕捉的静止图像的装置；及
将捕捉到的静止图像存储在计算机系统的存储器中的装置。
25．根据权利要求24所述的设备，其中，根据捕捉到的静止图像长度来请求传送所捕捉静止图像的装置包括将上载捕捉到的图像命令发送到数字相机的装置。
26．根据权利要求24所述的设备，还包括将捕捉到的静止图像传送到运行在计算机系统上的应用程序的装置。
CNB99804816XA 1998-02-06 1999-01-22 用于捕捉静止图像的方法和设备 Expired - Fee Related CN1166195C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/019,965 1998-02-06
US09/019,965 US6833863B1 (en) 1998-02-06 1998-02-06 Method and apparatus for still image capture during video streaming operations of a tethered digital camera

Publications (2)

Publication Number Publication Date
CN1296697A true CN1296697A (zh) 2001-05-23
CN1166195C CN1166195C (zh) 2004-09-08

Family

ID=21796034

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB99804816XA Expired - Fee Related CN1166195C (zh) 1998-02-06 1999-01-22 用于捕捉静止图像的方法和设备

Country Status (10)

Country Link
US (1) US6833863B1 (zh)
JP (1) JP2002503065A (zh)
KR (1) KR100419158B1 (zh)
CN (1) CN1166195C (zh)
AU (1) AU2334399A (zh)
DE (1) DE19982811B4 (zh)
GB (1) GB2349291B (zh)
MY (1) MY116783A (zh)
TW (1) TW401686B (zh)
WO (1) WO1999040723A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101738828B (zh) * 2009-12-24 2011-06-08 北京优纳科技有限公司 一种ccd高清智能工业相机
CN101738827B (zh) * 2009-12-24 2012-07-04 北京优纳科技有限公司 一种usb数字工业相机
CN109949903A (zh) * 2019-03-26 2019-06-28 南京长城智慧医疗科技有限公司 医学影像静止画面捕捉方法及系统

Families Citing this family (70)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6295379B1 (en) * 1997-09-29 2001-09-25 Intel Corporation DPCM image compression with plural quantization table levels
DE60017925T2 (de) * 1999-10-13 2006-01-12 Eastman Kodak Co. Erzeugung von icons für den zugriff auf bilddateien, die von einer digitalen kamera übertragen wurden
JP2001339675A (ja) * 2000-05-25 2001-12-07 Sony Corp 情報処理装置および情報処理方法
EP1229720A3 (en) * 2001-01-31 2004-04-14 Fuji Photo Film Co., Ltd. Digital camera and method of controlling same
KR100392558B1 (ko) * 2001-05-14 2003-08-21 주식회사 성진씨앤씨 복수 개의 유에스비 카메라를 이용한 피씨 기반의 디지털영상 저장 장치 시스템
JP4240973B2 (ja) * 2002-09-26 2009-03-18 ソニー株式会社 画像処理システム、画像処理装置および方法、記録媒体、並びにプログラム
US7388605B2 (en) * 2002-11-12 2008-06-17 Hewlett-Packard Development Company, L.P. Still image capturing of user-selected portions of image frames
US20040109059A1 (en) * 2002-11-12 2004-06-10 Kevin Kawakita Hybrid joint photographer's experts group (JPEG) /moving picture experts group (MPEG) specialized security video camera
KR100873437B1 (ko) * 2002-11-28 2008-12-11 삼성전자주식회사 Ｐｉｐ화면을 이용한 듀얼모드 신호처리장치
JP2004201282A (ja) * 2002-12-06 2004-07-15 Casio Comput Co Ltd 撮影装置及び撮影方法
JP2005070738A (ja) * 2003-08-04 2005-03-17 Casio Comput Co Ltd 撮像装置、撮像方法及びプログラム
EP2247070B1 (en) 2003-12-08 2013-09-25 QUALCOMM Incorporated High data rate interface with improved link synchronization
US7791639B2 (en) * 2003-12-17 2010-09-07 Canon Kabushiki Kaisha Control apparatus, video processing apparatus, and control method thereof
JP5055684B2 (ja) 2004-05-13 2012-10-24 ソニー株式会社 画像フォルダ切替装置
KR100926658B1 (ko) 2004-06-04 2009-11-17 퀄컴 인코포레이티드 고 데이터 레이트 인터페이스 장치 및 방법
US20060055781A1 (en) * 2004-09-13 2006-03-16 Samsung Techwin Co., Ltd. Method of processing video data from video presenter
JP4568078B2 (ja) * 2004-10-20 2010-10-27 三洋電機株式会社 サーバ
SG160337A1 (en) * 2004-11-24 2010-04-29 Qualcomm Inc Digital data interface device message format
US7602422B2 (en) * 2005-07-08 2009-10-13 Seiko Epson Corporation Serial camera interface
EP1742457B1 (en) * 2005-07-08 2022-03-09 STMicroelectronics (Research & Development) Limited Digital image capture apparatus with image data format conversion capabilities and method therefor
US8730069B2 (en) 2005-11-23 2014-05-20 Qualcomm Incorporated Double data rate serial encoder
TWM299424U (en) * 2006-02-22 2006-10-11 Genesys Logic Inc Web camera
US7893990B1 (en) 2006-07-31 2011-02-22 Cisco Technology, Inc. Digital video camera with retractable data connector and resident software application
KR100797533B1 (ko) * 2006-09-26 2008-01-24 주식회사 대우일렉트로닉스 개인용 녹화기의 정지화면 획득방법
KR100797532B1 (ko) * 2006-09-26 2008-01-24 주식회사 대우일렉트로닉스 텔레비전의 정지화면 획득방법
CN100584031C (zh) * 2006-12-22 2010-01-20 群康科技(深圳)有限公司 液晶显示器
CN100440930C (zh) * 2006-12-30 2008-12-03 北京中星微电子有限公司 一种摄像头系统和在摄像头视频流中获取静态图像的方法
US7769806B2 (en) 2007-10-24 2010-08-03 Social Communications Company Automated real-time data stream switching in a shared virtual area communication environment
US8191001B2 (en) 2008-04-05 2012-05-29 Social Communications Company Shared virtual area communication environment based apparatus and methods
US8407605B2 (en) 2009-04-03 2013-03-26 Social Communications Company Application sharing
US8397168B2 (en) 2008-04-05 2013-03-12 Social Communications Company Interfacing with a spatial virtual communication environment
EP2223531A4 (en) * 2007-10-26 2011-01-19 Pure Digital Technologies Inc USER INTERFACE FOR PORTABLE DIGITAL VIDEO CAMERAS
US11792538B2 (en) 2008-05-20 2023-10-17 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US8866920B2 (en) 2008-05-20 2014-10-21 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
US9319357B2 (en) 2009-01-15 2016-04-19 Social Communications Company Context based virtual area creation
US9853922B2 (en) 2012-02-24 2017-12-26 Sococo, Inc. Virtual area communications
US20100231735A1 (en) * 2009-03-13 2010-09-16 Nokia Corporation Methods, Apparatuses, and Computer Program Products for Facilitating Concurrent Video Recording and Still Image Capture
USD627380S1 (en) 2009-10-08 2010-11-16 Cisco Technology, Inc. Digital video camera with a connector
EP2502115A4 (en) 2009-11-20 2013-11-06 Pelican Imaging Corp RECORDING AND PROCESSING IMAGES THROUGH A MONOLITHIC CAMERA ARRAY WITH HETEROGENIC IMAGE CONVERTER
CN101980089B (zh) * 2010-09-02 2012-05-23 南京南自信息技术有限公司 一种高速球型摄像机云台的控制装置
US8878950B2 (en) 2010-12-14 2014-11-04 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using super-resolution processes
CN102625033A (zh) * 2011-01-27 2012-08-01 爱国者数码科技有限公司 分体式数码相机装置
CN104081414B (zh) 2011-09-28 2017-08-01 Fotonation开曼有限公司 用于编码和解码光场图像文件的系统及方法
WO2013181026A1 (en) 2012-06-02 2013-12-05 Social Communications Company Interfacing with a spatial virtual communications environment
US20140002674A1 (en) 2012-06-30 2014-01-02 Pelican Imaging Corporation Systems and Methods for Manufacturing Camera Modules Using Active Alignment of Lens Stack Arrays and Sensors
EP3869797B1 (en) 2012-08-21 2023-07-19 Adeia Imaging LLC Method for depth detection in images captured using array cameras
US8866912B2 (en) 2013-03-10 2014-10-21 Pelican Imaging Corporation System and methods for calibration of an array camera using a single captured image
US9389765B2 (en) 2013-03-12 2016-07-12 Google Inc. Generating an image stream
US9633442B2 (en) 2013-03-15 2017-04-25 Fotonation Cayman Limited Array cameras including an array camera module augmented with a separate camera
US9497429B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Extended color processing on pelican array cameras
US10122993B2 (en) 2013-03-15 2018-11-06 Fotonation Limited Autofocus system for a conventional camera that uses depth information from an array camera
US10187433B2 (en) 2013-03-15 2019-01-22 Swyme Ip Bv Methods and systems for dynamic adjustment of session parameters for effective video collaboration among heterogenous devices
US9438888B2 (en) 2013-03-15 2016-09-06 Pelican Imaging Corporation Systems and methods for stereo imaging with camera arrays
EP3075140B1 (en) 2013-11-26 2018-06-13 FotoNation Cayman Limited Array camera configurations incorporating multiple constituent array cameras
US9912743B2 (en) * 2014-02-28 2018-03-06 Skycapital Investors, Llc Real-time collection and distribution of information for an event organized according to sub-events
WO2015183824A1 (en) * 2014-05-26 2015-12-03 Pelican Imaging Corporation Autofocus system for a conventional camera that uses depth information from an array camera
US20160085840A1 (en) * 2014-09-22 2016-03-24 Microsoft Corporation Universal Interaction for Capturing Content to Persistent Storage
CN113256730B (zh) 2014-09-29 2023-09-05 快图有限公司 用于阵列相机的动态校准的系统和方法
US10437023B2 (en) * 2016-03-28 2019-10-08 Apple Inc. Folded lens system with three refractive lenses
JP7273250B2 (ja) 2019-09-17 2023-05-12 ボストン ポーラリメトリックス，インコーポレイティド 偏光キューを用いた面モデリングのためのシステム及び方法
DE112020004813B4 (de) 2019-10-07 2023-02-09 Boston Polarimetrics, Inc. System zur Erweiterung von Sensorsystemen und Bildgebungssystemen mit Polarisation
KR20230116068A (ko) 2019-11-30 2023-08-03 보스턴 폴라리메트릭스, 인크. 편광 신호를 이용한 투명 물체 분할을 위한 시스템및 방법
US11195303B2 (en) 2020-01-29 2021-12-07 Boston Polarimetrics, Inc. Systems and methods for characterizing object pose detection and measurement systems
KR20220133973A (ko) 2020-01-30 2022-10-05 인트린식 이노베이션 엘엘씨 편광된 이미지들을 포함하는 상이한 이미징 양식들에 대해 통계적 모델들을 훈련하기 위해 데이터를 합성하기 위한 시스템들 및 방법들
WO2021243088A1 (en) 2020-05-27 2021-12-02 Boston Polarimetrics, Inc. Multi-aperture polarization optical systems using beam splitters
US20210373008A1 (en) * 2020-05-29 2021-12-02 Quidel Corporation System and methods for remote assessment of a sample assay for disease diagnostics
EP4158526A2 (en) 2020-05-29 2023-04-05 Quidel Corporation System and methods for remote assessment of a sample assay for disease diagnostics
US11290658B1 (en) 2021-04-15 2022-03-29 Boston Polarimetrics, Inc. Systems and methods for camera exposure control
US11954886B2 (en) 2021-04-15 2024-04-09 Intrinsic Innovation Llc Systems and methods for six-degree of freedom pose estimation of deformable objects
US11689813B2 (en) 2021-07-01 2023-06-27 Intrinsic Innovation Llc Systems and methods for high dynamic range imaging using crossed polarizers

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5382974A (en) * 1991-04-18 1995-01-17 Fuji Photo Film Company, Limited Movie camera having still picture photographing function and method of photographing still picture therewith
US5402170A (en) * 1991-12-11 1995-03-28 Eastman Kodak Company Hand-manipulated electronic camera tethered to a personal computer
JP2597802B2 (ja) * 1992-08-04 1997-04-09 インターナショナル・ビジネス・マシーンズ・コーポレイション イメージ・キャプチャ装置を制御するための方法、イメージ・キャプチャ装置及びユーザ・インターフェース
GB9303998D0 (en) * 1993-02-26 1993-04-14 Chater Ian Introduction system
JPH06315105A (ja) * 1993-04-28 1994-11-08 Nikon Corp カメラ装置
US5745161A (en) * 1993-08-30 1998-04-28 Canon Kabushiki Kaisha Video conference system
JPH0779449A (ja) * 1993-09-06 1995-03-20 Sony Corp Ｖｔｒ装置
US5490247A (en) * 1993-11-24 1996-02-06 Intel Corporation Video subsystem for computer-based conferencing system
US5574934A (en) * 1993-11-24 1996-11-12 Intel Corporation Preemptive priority-based transmission of signals using virtual channels
US5568192A (en) * 1995-08-30 1996-10-22 Intel Corporation Method and apparatus for processing digital video camera signals
JPH09200722A (ja) * 1996-01-22 1997-07-31 Canon Inc 画像入力装置および方法
JP3745067B2 (ja) * 1996-02-20 2006-02-15 キヤノン株式会社 撮像装置及びその制御方法
JPH09312791A (ja) * 1996-05-21 1997-12-02 Hitachi Ltd 電子カメラおよび電子カメラシステム
US6005613A (en) * 1996-09-12 1999-12-21 Eastman Kodak Company Multi-mode digital camera with computer interface using data packets combining image and mode data
US5841471A (en) * 1996-09-12 1998-11-24 Eastman Kodak Company Timing control for a digitally interfaced camera using variable line readout intervals

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101738828B (zh) * 2009-12-24 2011-06-08 北京优纳科技有限公司 一种ccd高清智能工业相机
CN101738827B (zh) * 2009-12-24 2012-07-04 北京优纳科技有限公司 一种usb数字工业相机
CN109949903A (zh) * 2019-03-26 2019-06-28 南京长城智慧医疗科技有限公司 医学影像静止画面捕捉方法及系统
CN109949903B (zh) * 2019-03-26 2023-05-16 南京长城智慧医疗科技有限公司 医学影像静止画面捕捉方法及系统

Also Published As

Publication number Publication date
KR20010040748A (ko) 2001-05-15
JP2002503065A (ja) 2002-01-29
US6833863B1 (en) 2004-12-21
AU2334399A (en) 1999-08-23
GB2349291A (en) 2000-10-25
WO1999040723A1 (en) 1999-08-12
DE19982811T1 (de) 2001-03-22
CN1166195C (zh) 2004-09-08
GB2349291B (en) 2002-03-20
KR100419158B1 (ko) 2004-02-19
TW401686B (en) 2000-08-11
GB0019249D0 (en) 2000-09-27
MY116783A (en) 2004-03-31
DE19982811B4 (de) 2006-04-06

Similar Documents

Publication Publication Date Title
CN1166195C (zh) 用于捕捉静止图像的方法和设备
CN1168290C (zh) 电视和静止双模工作的数字相机
US6512541B2 (en) Increasing image field of view and frame rate in an imaging apparatus
US5926208A (en) Video compression and decompression arrangement having reconfigurable camera and low-bandwidth transmission capability
TWI555386B (zh) 原始格式影像資料處理技術
CN101990095B (zh) 压缩文件生成方法和设备、相关的相机模块和终端
WO1999018714A9 (en) Method and circuit for the capture of video data in a pc ________________________________________________________
JPH1042286A (ja) 画像処理装置、方法及びコンピュータ可読メモリ装置
CN109155850A (zh) 并行视频编码
WO2001001675A2 (en) Video camera with major functions implemented in host software
KR100359181B1 (ko) 이미지 압축용 메모리 기반 ｖｌｓｉ 구조
US6446155B1 (en) Resource bus interface
US20080247459A1 (en) Method and System for Providing Content Adaptive Binary Arithmetic Coder Output Bit Counting
CN1535005A (zh) 用于图像处理装置的用户接口
US7149360B2 (en) Method for using a JPEG engine to assist in efficiently constructing MPEG I-frames
CN100420283C (zh) 图像传感器及应用该图像传感器的计算机系统
CN107172366A (zh) 一种视频预览方法
KR20020070721A (ko) 동영상 전송장치
CN218634098U (zh) 一种用于线上数据传输的摄影机
US5153747A (en) Color scanner with built-in color compression hardware to reduce scan time
CN1249568C (zh) 动态图像摄影机的数字式动态与静态图像捉取转接器
CN117294952A (zh) 图像数据处理方法及装置、电子设备、存储介质
CN117292002A (zh) 基于qoi的图像编解码方法、电子设备以及存储介质
JP2001238117A (ja) ビデオフレームのｘ方向を二倍にするためのハードウエア

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20040908

Termination date: 20110122