CN103581586B - 用于生成画中画（pip）图像的设备和方法 - Google Patents

用于生成画中画（pip）图像的设备和方法 Download PDF

Info

Publication number
CN103581586B
CN103581586B CN201310301227.5A CN201310301227A CN103581586B CN 103581586 B CN103581586 B CN 103581586B CN 201310301227 A CN201310301227 A CN 201310301227A CN 103581586 B CN103581586 B CN 103581586B
Authority
CN
China
Prior art keywords
pip
main body
signal
data stream
video image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310301227.5A
Other languages
English (en)
Other versions
CN103581586A (zh
Inventor
邓伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omnivision Technologies Inc
Original Assignee
Omnivision Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omnivision Technologies Inc filed Critical Omnivision Technologies Inc
Publication of CN103581586A publication Critical patent/CN103581586A/zh
Application granted granted Critical
Publication of CN103581586B publication Critical patent/CN103581586B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Studio Circuits (AREA)

Abstract

根据画中画PIP系统和方法，第一图像传感器装置检测来自第一主体的光，并生成指示所述第一主体的图像数据的第一信号。第二图像传感器装置检测来自第二主体的光，并生成指示所述第二主体的图像数据的第二信号。覆盖逻辑将所述第一信号和第二信号组合，以生成指示所述第一主体的图像和所述第二主体的图像的组合的画中画信号，其中，所述覆盖逻辑位于所述第一图像传感器装置内。第一图像传感器装置生成同步信号，该同步信号由所述第二图像传感器装置接收，并触发所述第二图像传感器装置，以生成指示所述第二主体的图像数据的第二信号。

Description

用于生成画中画（PIP）图像的设备和方法
技术领域
本公开涉及视频图像的生成，更具体地，涉及用于生成画中画视频图像的设备和方法。
背景技术
在传统的画中画（PIP）系统中，第一图像传感器生成第一图像，第二图像传感器生成更小和更低分辨率的第二图像。每个图像传感器为其各自的图像提供视频图像数据流形式的视频图像数据。通常，第二更小图像的视频图像数据流的数据存储在帧存储器中。覆盖逻辑接收来自第一图像传感器的视频图像数据流和来自帧存储器的第二图像的视频图像数据流，并将这两个图像组合以生成用于PIP图像输出的视频图像数据流。从覆盖逻辑输出的PIP视频图像数据流然后被用来生成复合PIP视频图像。
用于这些传统系统的帧存储器必然很大，原因是存储大量的视频数据需要如此。由于帧存储器占据集成电路芯片上的大量空间，它不能与图像传感器集成，因此，在传统的PIP系统中被制造成占据大量空间的单独的单个装置元件。同样，由于需要大量的存储器访问操作，单独的帧存储器导致相对高的总体系统功率损耗。
发明内容
根据第一方面，提供了一种画中画（PIP）系统。所述系统包括：第一图像传感器装置，用于检测来自第一主体（subject）的光，并生成指示所述第一主体的图像数据的第一信号；和第二图像传感器装置，用于检测来自第二主体的光，并生成指示所述第二主体的图像数据的第二信号。覆盖逻辑将所述第一信号和第二信号组合，以生成指示所述第一主体的图像和所述第二主体的图像的组合的画中画信号。所述覆盖逻辑位于所述第一图像传感器装置内。
根据另一方面，提供了一种画中画（PIP）系统。所述系统包括：第一图像传感器装置，用于检测来自第一主体的光，并生成指示所述第一主体的图像数据的第一信号；所述第一信号包括第一视频图像数据流，所述第一图像传感器装置生成同步信号。第二图像传感器装置检测来自第二主体的光，并生成指示所述第二主体的图像数据的第二信号；所述第二信号包括第二视频图像数据流，响应于所述同步信号，所述第二视频图像数据流被触发。覆盖逻辑将所述第一信号和第二信号组合，以生成指示所述第一主体的图像和所述第二主体的图像的组合的画中画信号。
根据另一方面，提供了一种画中画（PIP）方法。根据所述方法，使用第一图像传感器装置检测来自第一主体的光，并生成指示所述第一主体的图像数据的第一信号。使用第二图像传感器装置检测来自第二主体的光，并生成指示所述第二主体的图像数据的第二信号。将所述第一信号和第二信号组合，以生成指示所述第一主体的图像和所述第二主体的图像的组合的画中画信号。所述第一和第二信号由所述第一图像传感器装置组合。
根据另一方面，提供了一种画中画（PIP）方法。根据所述方法，使用第一图像传感器装置检测来自第一主体的光，并生成指示所述第一主体的图像数据的第一信号。所述第一信号包括第一视频图像数据流，所述第一图像传感器装置生成同步信号。使用第二图像传感器装置检测来自第二主体的光，并生成指示所述第二主体的图像数据的第二信号。所述第二信号包括第二视频图像数据流。响应于所述同步信号，触发所述第二视频图像数据流。将所述第一信号和第二信号组合，以生成指示所述第一主体的图像和所述第二主体的图像的组合的画中画信号。
附图说明
通过如在附图中图示的对优选实施例的更具体描述，前述和其它特征及优点是显然的，图中，相同的附图标记在不同的图中指相同部件。附图不一定是按比例绘制的。在图中，为了清楚起见，特征的大小可能被放大。
图1包括用于形成画中画（PIP）图像的传统系统和方法的示意性框图。
图2包括根据一些示例性实施例用于形成画中画（PIP）图像的系统和方法的示意性功能框图。
图3A和图3B包括根据一些示例性实施例图解说明第一和第二视频图像数据流和同步信号SYNC的定时的示意性定时图。
图4包括根据一些示例性实施例第一和第二视频图像传感器装置的至少一些部分的示意性详细框图。
图5包括根据一些示例性实施例的定时图，其图解说明了由第一视频图像，第二视频图像和PIP边界图像数据生成复合PIP视频图像。
具体实施方式
图1包括用于形成画中画（PIP）图像的传统系统100和方法的示意性功能框图。参照图1，系统100包括第一视频图像传感器102，它用于生成第一场景的第一视频图像“F”103。系统100还包括第二视频图像传感器104，它用于生成第二场景的第二视频图像“s”105。通常，与第一视频图像传感器102的第一视频图像“F”103相比，第二视频图像传感器104生成具有更低分辨率的更小的视频图像“s”105。在最终的复合PIP视频图像109中，第二视频图像“s”105与第一视频图像“F”103组合，并且第二视频图像“s”105位于第一视频图像“F”103内。
图1的系统100还包括覆盖逻辑106。覆盖逻辑106包含用来将第一视频图像传感器102的第一视频图像“F”103和第二图像传感器104的第二视频图像“s”105组合以生成复合PIP视频图像109所需的视频图像数据的处理和逻辑电路。覆盖逻辑106将复合PIP视频图像109的PIP视频图像数据流输出到装置108，诸如用于显示复合PIP视频图像109的显示器和/或用于存储复合PIP视频图像109的存储器。复合PIP视频图像109是第一视频图像“F”103和第二视频图像“s”105的组合。
参照图1，覆盖逻辑106直接从第一视频图像传感器102接收第一视频图像“F”103的视频图像数据流。而覆盖逻辑106从帧存储器110接收第二视频图像“s”105的视频图像数据流。第二视频图像“s”105的视频图像数据暂时性地由第二视频图像传感器104存储在帧存储器110中。视频图像数据的这种暂时性存储在传统的PIP系统100中是必需的，原因是第一视频图像传感器102和第二视频图像传感器104及它们各自的视频图像数据流不是同步的。结果，第二视频图像“s”105的视频图像数据被暂时性地存储在帧存储器110中，以确保在覆盖逻辑106执行将第一视频图像“F”103和第二视频图像“s”105组合所需的处理时，第二视频图像“s”105的视频图像数据没有任何丢失。
帧存储器110通常是存储大量的视频图像数据所需的非常大的存储器。因此，它不能与第一视频图像传感器102或第二视频图像传感器104集成，被制造为单独的装置。因此，造成系统100尺寸的大大增大。单独的帧存储器110还会消耗相对大量的功率。
图2包括根据一些示例性实施例用于形成画中画（PIP）图像的系统200和方法的示意性功能框图。参照图2，根据一些示例性实施例，系统200包括：第一视频图像传感器202，它用于生成第一场景的第一视频图像“F”203；和第二视频图像传感器204，它用于生成第二场景的第二视频图像“s”205。通常，与第一视频图像传感器202的第一视频图像“F”203相比，第二视频图像传感器204生成具有更低分辨率的更小的视频图像“s”205。在最终的复合PIP视频图像209中，第二视频图像“s”205与第一视频图像“F”203组合，并且第二视频图像“s”205位于第一视频图像“F”203内。
在一些示例性实施例中，在复合PIP视频图像209内围绕第二视频图像“s”205，包括可选的和/或可调整的PIP边界207。PIP边界207可以是任何所需厚度和颜色。还可以被完全省去。PIP边界207包括顶部水平线、底部水平线和左、右竖直线。这些PIP边界线是由复合PIP视频图像209中的相关图像数据限定的，这在下面更详细地描述。
图2的系统200还包括覆盖逻辑206，覆盖逻辑206包含用来将第一视频图像传感器202的第一视频图像“F”203和第二图像传感器204的第二视频图像“s”205组合以生成复合PIP视频图像209所需的视频图像数据的处理和逻辑电路。覆盖逻辑206将复合PIP视频图像209的PIP视频图像数据流输出到装置208，诸如用于显示复合PIP视频图像209的显示器和/或用于存储复合PIP视频图像209的存储器。复合PIP视频图像209是第一图像“F”203和第二视频图像“s”205的组合。
参照图2，覆盖逻辑206直接从第一视频图像传感器202接收第一图像“F”203的第一视频图像数据流，还直接从第二视频图像传感器204接收第二视频图像“s”205的第二视频图像数据流。即，在图2所示的示例性实施例中，没有使用在上文中描述并在图1中图解说明的传统系统100中使用的帧存储器110。在图2所示的系统200中，帧存储器不是必要的，原因是在示例性实施例中，第一视频图像传感器202和第二视频图像传感器204及它们各自的第一和第二视频图像数据流是同步的。结果，第二视频图像“s”205的视频图像数据不需要被暂时性地存储在帧存储器中来确保在覆盖逻辑206执行组合第一视频图像“F”203和第二视频图像“s”205所需的处理时，第二视频图像“s”205的视频图像数据没有任何丢失。实际上，覆盖逻辑206直接从相应的视频图像传感器202、204接收两个视频图像数据流，并对它们进行处理以产生复合PIP视频图像数据流，而不需要介于其间的帧存储器。
如图2中所示，在一些示例性实施例中，第一视频图像传感器202可以与覆盖逻辑206一体地形成，原因是在示例性实施例中，不包括帧存储器。即，参照图2，第一视频图像传感器202和覆盖逻辑206可形成为同一视频图像传感器装置220的一部分。第一视频图像传感器装置220可以是基板或芯片或其它单个的装置配置。第一视频图像传感器装置220还可以包括执行第一视频图像传感器装置220的操作所需的附加处理或支持电路216。附加处理或支持电路216还可被集成在与第一视频图像传感器202和覆盖逻辑206相同的基板或芯片或其它单个的装置配置中。如图2中进一步图示的，第二视频图像传感器204可以被制造为与第一视频图像传感器装置220分开的另一单个的第二视频图像传感器装置222的一部分。第二视频图像传感器装置222还可以包括执行第二视频图像传感器装置222的操作所需的附加处理或支持电路218。附加处理或支持电路218可以集成在与第二视频图像传感器202相同的基板或芯片管芯或其它单个的装置配置中。第一视频图像传感器220和第二视频图像传感器222可以一起形成PIP视频图像传感器的套件或组件，它可以作为一套来一起提供。
如上文所述，根据一些示例性实施例，由第一视频图像传感器装置220生成的第一视频图像数据流和由第二视频图像传感器装置222生成的第二视频图像数据流是同步的。为此，如图2中所示，在一些示例性实施例中，第一视频图像传感器装置220生成同步信号SYNC，并将信号SYNC在信号线或总线224上传输到第二视频图像传感器装置222，以分别地使两个视频图像传感器装置220和222和第一和第二视频图像数据流同步。
在一些示例性实施例中，同步信号SYNC以单个脉冲信号生成。它被第二视频图像传感器装置222接收，并被第二视频图像传感器装置222使用，以触发第二视频图像“s”205的第二视频图像数据流到第一视频图像传感器装置220中的覆盖逻辑206的传输的开始。第二视频图像“s”205的第二视频图像数据流的传输定时决定第二视频图像“s”205在第一视频图像“F”203中及在复合PIP视频图像209中的位置。因此，同步信号SYNC的定时被选择为将第二视频图像“s”205定位在复合PIP视频图像209中。
图3A和图3B包括根据一些示例性实施例的一些示意性定时图，图解说明了传输到覆盖逻辑206的第一和第二视频图像数据流和从第一视频图像传感器装置220传输到第二视频图像传感器装置222的同步信号SYNC的定时。图3A和图3B图解说明了同步信号SYNC的定时和两个视频图像数据流的相对定时之间的关系和第二视频图像“s”205在复合PIP视频图像209中的第一视频图像“F”203内的位置的两个例子。
参照图3A，图解说明了在第一视频图像流开始时发出同步信号SYNC的情形。在此特别的示例性说明中，第二视频图像数据流在发出同步信号SYNC后非常短的时间内发起，使得第一和第二视频图像数据流在帧开始时或接近开始时开始。结果，第二视频图像“s”205会被定位在复合PIP视频图像209中的第一视频图像“F”203的顶部或接近顶部处。
参照图3B，图解说明了在第一视频图像数据流中间处或接近中间处发出同步信号SYNC的情形。在此特别的示例性说明中，在发出同步信号SYNC之后非常短的时间内发起第二视频图像数据流，使得第二视频图像数据流在帧（即第一视频图像数据流）的中间或接近中间处开始。结果，第二视频图像“s”205会被定位在复合PIP视频图像209中的第一视频图像“F”203的中间或接近中间处。
可以理解图3A和图3B只图解说明了示例性情形。例如，同步信号SYNC的定时可以根据需要被调节为将第二视频图像数据流的发起定时为任何时间，使得第二视频图像“s”205可以被定位在复合PIP视频图像209中的第一视频图像“F”203内的任何位置。同样，还可以理解，第二视频图像数据流可以在由第一视频图像传感器装置220发出同步信号SYNC之后的任何时间发起，并由第二视频图像传感器装置222接收。图示于图3A和图3B中的示例性实施例示出了第二视频图像数据流几乎在发出同步信号SYNC之后立即开始。不需要总是这种情况，即根据一些示例性实施例，时间延迟可以被设置为任何所需延迟，其可根据需要进行调节。
图4包括根据一些示例性实施例，第一视频图像传感器装置220和第二视频图像传感器装置222的至少一些部分的示意性详细框图。参照图4，第一视频图像传感器装置220包括用于生成第一视频图像“F”203的第一视频图像传感器202。如上文描述的，第一视频图像传感器装置220根据需要还可包括附加处理或支持电路216以执行第一视频图像传感器装置220的操作。此附加处理或支持电路216可包括PIP图像边界生成器电路231，其生成围绕复合PIP视频图像209中的第二视频图像“s”205的可选PIP边界207的图像数据。附加处理或支持电路216还可包括数据接收器/数据缓冲电路232，其可以是串行数据接收器/数据缓冲电路，此接收器或数据缓冲电路接收并且可以暂时性地存储从第二视频图像传感器装置222接收的第二视频图像“s”205的第二视频图像数据流的数据。附加处理或支持电路216还可包括定时控制电路234。定时控制电路234包括生成同步信号SYNC并将此信号SYNC传输到第二视频图像传感器装置222所需的处理和定时电路，以触发来自第二视频图像传感器204的第二视频图像“s”205的第二视频图像数据流的发起。定时控制电路234针对第一视频图像传感器202的数据而对同步信号SYNC进行定时。为此，定时控制电路234从第一视频图像传感器202接收定时信号。
定时控制电路234可接收选择输入，其可以是例如通过用户提供的，或者可以是预先编程好的。选择输入限定第二视频图像“s”205在复合PIP视频图像209的第一视频图像“F”203内的期望位置。基于在选择输入处的所需位置输入，定时控制电路234关于来自第一视频图像传感器202的第一视频图像数据流生成同步信号SYNC，将此信号SYNC在线或总线224上传输到在第二视频图像传感器222中的定时控制电路238，以由第二视频图像传感器装置222中的第二视频图像传感器204发起第二视频图像“s”205的视频图像数据流，使得当第一视频图像“F”203和第二视频图像“s”205被组合时，第二视频图像“s”205出现在复合PIP视频图像209中的第一视频图像“F”203内的选择的期望位置。
第二视频图像传感器装置222包括视频图像传感器204，其生成第二视频图像“s”205的第二视频图像数据流并将其输出到数据传输电路240，数据传输电路可以是例如串行数据传输器，它将第二视频图像数据流通过串行数据端口传输到第一视频图像传感器装置220。第二视频图像数据流从第二视频图像传感器204到数据传输电路240的传输是通过定时控制电路238触发的，定时控制电路238响应于从第一视频图像传感器装置220接收的同步信号SYNC，通过控制信号命令第二视频图像传感器204发起第二视频图像数据流的传输。
如上文描述的，第一视频图像传感器装置220中的数据接收器/数据缓冲电路232从第二视频图像传感器装置222中的数据传输电路240接收第二视频图像数据流。第二视频图像数据流由数据接收器/数据缓冲电路232传输到PIP图像组合逻辑236，PIP图像组合逻辑236可以被认为是上文详细描述的覆盖逻辑206的至少一部分。PIP图像组合逻辑236还从第一视频图像传感器202接收第一视频图像数据流，从PIP图像边界生成器电路231接收PIP图像边界数据。PIP图像边界生成器电路231还从数据接收器/数据缓冲电路232接收关于第二视频图像“s”205的信息，使得由PIP边界生成器电路231生成的PIP边界207的数据包括适当的位置信息，使得PIP边界207被适当地定位成围绕第二视频图像“s”205。PIP图像组合逻辑236将第一视频图像数据流中的第一视频图像“F”203的数据，第二视频图像数据流中的第二视频图像“s”205的数据和来自PIP图像边界生成器电路231的PIP图像边界数据进行组合，以生成复合PIP视频图像209的数据。复合PIP视频图像209的视频图像数据流从第一视频图像传感器装置220输出到装置208，以显示和/或存储复合PIP视频图像209。
图5包括根据一些示例性实施例的示意性定时图，其图解说明了由第一视频图像“F”203，第二视频图像“s”205和PIP边界图像数据生成复合PIP视频图像209。参照图5，最上面的定时图图解说明了来自第一视频图像传感器202（“传感器1”）的第一视频图像“F”203中两个典型直线N和N+1的第一视频图像数据流的数据有效时间周期。第二定时图图解说明了来自第二视频图像传感器204（“传感器2”）的第二视频图像“s”205中两个典型直线M和M+1的第二视频图像数据流的数据有效时间周期。第三定时图图解说明了在第二视频图像“s”205中两个典型直线M和M+1的可选边界207的数据有效时间周期。应当注意，直线M和M+1的边界数据的定时图图解说明了直线中边界207的被使用部分是边界207的左和右竖直线。对于边界207的顶部水平线和底部水平线的情况，边界数据的数据有效周期将基本上与图5的第二定时图的直线M和M+1的传感器2数据有效时间周期相同。
图5的第四图图解说明了在第一和第二视频图像数据流和边界数据的组合完成之后的复合PIP视频图像数据流的定时。参照图5中的第四定时图，组合的PIP视频图像数据包括数据无效时间周期，其出现在第一视频图像“F”203的直线之间。接着，定时包括传感器1数据周期，其与复合PIP视频图像209中的在第二视频图像“s”205左边的直线部分重合。接着，定时包括第一边界数据周期，其与PIP边界207的左竖直线重合。接着，定时包括传感器2数据周期，其与复合PIP视频图像209的当前直线内的第二视频图像“s”205的直线重合。接着，定时包括第二边界数据周期，其与PIP边界207的右竖直线重合。接着，定时包括另一传感器1数据周期，其与复合PIP视频图像209中的在第二视频图像“s”205的右边的当前直线部分重合。在第二传感器1数据周期结束时，当前直线的末端由另一数据无效时间周期指示。下一直线，即直线N+1从下一直线的第一传感器1数据时间周期开始。对包括第二视频图像“s”205的直线的复合PIP视频图像209的每条直线重复此定时。
如上文描述，图5的定时图呈现出大致为直线的复合PIP视频图像209，其包括PIP边界207的左竖直线和右竖直线。如上文指出的，PIP边界207是任选的，不一定被包括在复合PIP视频图像209中。如果PIP边界207省略，则不会出现图5的第三定时图的PIP边界数据时间周期。结果，图5的第四定时图只包括数据无效时间周期，传感器1数据时间周期和传感器2数据时间周期。
应当注意，图5的定时图是用来提供清楚描述的图示例子。各个数据有效和数据无效周期的定时取决于第二视频图像“s”205在复合PIP视频图像209的第一视频图像“F”203内的二维位置。如在图5的示例性图示中图示的，第二视频图像“s”205在第一视频图像“F”203中水平居中。如上文指出的，此定位可以通过控制同步信号SYNC的定时来控制。第二视频图像“s”205在复合PIP视频图像209的第一视频图像“F”203内的竖直定位没有在图5中图示，但如上文描述的，它还可以通过控制同步信号SYNC的定时来被控制。
特征的组合
已经在上文中详细地描述了本公开的各个特征。除了描述明确地排除特征的组合之外，此公开覆盖了本文中描述的许多特征的任何和所有组合。以下的例子图解说明了根据此公开在本文中考虑和公开的特征组合中的一些。
在详细描述和/或本文中要求保护的任一实施例中，第一图像传感器装置和覆盖逻辑形成于第一基板中。
在详细描述和/或本文中要求保护的任一实施例中，第二图像传感器装置形成于第二基板中。
在详细描述和/或本文中要求保护的任一实施例中，第一信号包括第一视频图像数据流，第二信号包括第二视频图像数据流。
在详细描述和/或本文中要求保护的任一实施例中，第一图像传感器装置生成同步信号，第二视频图像数据流响应于该同步信号被触发。
在详细描述和/或本文中要求保护的任一实施例中，同步信号触发第二视频图像数据流以在第一视频图像数据流的选择位置开始。
在详细描述和/或本文中要求保护的任一实施例中，第一和第二视频图像数据流分别具有第一和第二帧速率。
在详细描述和/或本文中要求保护的任一实施例中，第一和第二帧速率基本上是相等的。
尽管本公开参考示例性实施例，但本领域技术人员应理解在不偏离本公开的精神和范围下，可以进行形式上和细节上的各种变化。

Claims (19)

1.一种画中画PIP系统，包括：
第一图像传感器装置，用于检测来自第一主体的光，并生成指示所述第一主体的图像数据的第一信号，所述第一信号包括第一视频图像数据流；
第二图像传感器装置，用于检测来自第二主体的光，并生成指示所述第二主体的图像数据的第二信号，所述第二信号包括第二视频图像数据流；和
覆盖逻辑，用于将所述第一信号和第二信号组合，以生成指示所述第一主体的图像和所述第二主体的图像的组合的画中画信号，其中，所述覆盖逻辑位于所述第一图像传感器装置内，
其中，所述第一图像传感器装置生成同步信号，响应于所述同步信号，所述第二视频图像数据流被触发。
2.根据权利要求1所述的PIP系统，其中，所述第一图像传感器装置和所述覆盖逻辑形成于第一基板中。
3.根据权利要求2所述的PIP系统，其中，所述第二图像传感器装置形成于第二基板中。
4.根据权利要求1所述的PIP系统，其中，所述同步信号触发所述第二视频图像数据流，以在所述第一视频图像数据流的选择位置开始。
5.根据权利要求1所述的PIP系统，其中，所述第一视频图像数据流和第二视频图像数据流分别具有第一和第二帧速率。
6.根据权利要求5所述的PIP系统，其中，所述第一和第二帧速率基本上是相等的。
7.一种画中画PIP系统，包括：
第一图像传感器装置，用于检测来自第一主体的光，并生成指示所述第一主体的图像数据的第一信号，所述第一信号包括第一视频图像数据流，所述第一图像传感器装置生成同步信号；
第二图像传感器装置，用于检测来自第二主体的光，并生成指示所述第二主体的图像数据的第二信号，所述第二信号包括第二视频图像数据流，响应于所述同步信号，所述第二视频图像数据流被触发；和
覆盖逻辑，用于将所述第一信号和第二信号组合，以生成指示所述第一主体的图像和所述第二主体的图像的组合的画中画信号。
8.根据权利要求7所述的PIP系统，其中，所述覆盖逻辑位于所述第一图像传感器装置内。
9.根据权利要求7所述的PIP系统，其中，所述同步信号触发所述第二视频图像数据流，以在所述第一视频图像数据流的选择位置开始。
10.根据权利要求7所述的PIP系统，其中，所述第一视频图像数据流和第二视频图像数据流分别具有第一和第二帧速率。
11.根据权利要求10所述的PIP系统，其中，所述第一和第二帧速率基本上是相等的。
12.一种画中画PIP方法，包括：
用第一图像传感器装置检测来自第一主体的光，并生成指示所述第一主体的图像数据的第一信号，所述第一信号包括第一视频图像数据流；
用第二图像传感器装置检测来自第二主体的光，并生成指示所述第二主体的图像数据的第二信号，所述第二信号包括第二视频图像数据流；
将所述第一信号和第二信号组合，以生成指示所述第一主体的图像和所述第二主体的图像的组合的画中画信号，所述组合是由所述第一图像传感器装置执行的；和
响应于由所述第一图像传感器装置生成的同步信号，触发所述第二视频图像数据流。
13.根据权利要求12所述的PIP方法，其中，所述同步信号触发所述第二视频图像数据流，以在所述第一视频图像数据流的选择位置开始。
14.根据权利要求12所述的PIP方法，其中，所述第一视频图像数据流和第二视频图像数据流分别具有第一和第二帧速率。
15.根据权利要求14所述的PIP方法，其中，所述第一和第二帧速率基本上是相等的。
16.一种画中画PIP方法，包括：
用第一图像传感器装置检测来自第一主体的光，并生成指示所述第一主体的图像数据的第一信号，所述第一信号包括第一视频图像数据流，所述第一图像传感器装置生成同步信号；
用第二图像传感器装置检测来自第二主体的光，并生成指示所述第二主体的图像数据的第二信号，所述第二信号包括第二视频图像数据流；
响应于所述同步信号，触发所述第二视频图像数据流；和
将所述第一信号和第二信号组合，以生成指示所述第一主体的图像和所述第二主体的图像的组合的画中画信号。
17.根据权利要求16所述的PIP方法，其中，所述同步信号触发所述第二视频图像数据流，以在所述第一视频图像数据流的选择位置开始。
18.根据权利要求16所述的PIP方法，其中，所述第一视频图像数据流和第二视频图像数据流分别具有第一和第二帧速率。
19.根据权利要求18所述的PIP方法，其中，所述第一和第二帧速率基本上是相等的。
CN201310301227.5A 2012-07-25 2013-07-17 用于生成画中画（pip）图像的设备和方法 Active CN103581586B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/558,207 2012-07-25
US13/558,207 US9088750B2 (en) 2012-07-25 2012-07-25 Apparatus and method for generating picture-in-picture (PIP) image

Publications (2)

Publication Number Publication Date
CN103581586A CN103581586A (zh) 2014-02-12
CN103581586B true CN103581586B (zh) 2017-05-10

Family

ID=49994552

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310301227.5A Active CN103581586B (zh) 2012-07-25 2013-07-17 用于生成画中画（pip）图像的设备和方法

Country Status (3)

Country Link
US (1) US9088750B2 (zh)
CN (1) CN103581586B (zh)
TW (1) TWI533701B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3200450A4 (en) * 2014-09-26 2018-05-30 Olympus Corporation Transmission system and processing device
CN105847657A (zh) * 2015-01-16 2016-08-10 中兴通讯股份有限公司 一种照片合成的处理方法、装置及终端
KR102679016B1 (ko) * 2019-01-23 2024-06-28 에스케이하이닉스 주식회사 이미지 센서 칩, 전자 장치 및 이미지 센서 칩의 동작 방법

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101009790A (zh) * 2006-01-23 2007-08-01 三星电子株式会社 能够与图像源进行通信的图像处理装置及其方法
CN101390040A (zh) * 2006-02-27 2009-03-18 罗伯特.博世有限公司 在至少两个显示器上输出不同的图像的装置和方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100186409B1 (ko) 1996-04-23 1999-05-01 구자홍 피씨와 티브이 적응형 피아이피 영상신호 처리회로
US20040168185A1 (en) * 2003-02-24 2004-08-26 Dawson Thomas Patrick Multimedia network picture-in-picture
US8436889B2 (en) * 2005-12-22 2013-05-07 Vidyo, Inc. System and method for videoconferencing using scalable video coding and compositing scalable video conferencing servers
US7548272B2 (en) 2006-06-07 2009-06-16 Onlive, Inc. System and method for performing motion capture using phosphor application techniques
US20110102671A1 (en) 2009-10-29 2011-05-05 Apple Inc. Picture in Picture Video Display for Low Power Device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101009790A (zh) * 2006-01-23 2007-08-01 三星电子株式会社 能够与图像源进行通信的图像处理装置及其方法
CN101390040A (zh) * 2006-02-27 2009-03-18 罗伯特.博世有限公司 在至少两个显示器上输出不同的图像的装置和方法

Also Published As

Publication number Publication date
US9088750B2 (en) 2015-07-21
TW201406151A (zh) 2014-02-01
US20140028913A1 (en) 2014-01-30
TWI533701B (zh) 2016-05-11
CN103581586A (zh) 2014-02-12

Similar Documents

Publication Publication Date Title
CN106454319B (zh) 用于多传感器照相机装置的同步控制器和相关同步方法
CN103647918B (zh) 一种视频同步化的方法及装置
US10008175B2 (en) Signal output apparatus for reducing power consumption during display on a plurality of image display apparatuses
FI115802B (fi) Kuvakehyksien päivittäminen muistillisessa näytössä
JP5925812B2 (ja) リアルタイムの画像の取得および表示
TW201741996A (zh) 處理裝置，影像感測器及系統
AU2012288349A1 (en) Moving image capture device, information processing system, information processing device, and image data processing method
CN105340266A (zh) 图像处理系统
CN103581586B (zh) 用于生成画中画（pip）图像的设备和方法
CN102857703A (zh) 高清视频字符叠加系统及控制方法
TW201805891A (zh) 處理裝置、影像感測器及系統
CN102625086B (zh) 一种用于高清数字矩阵的ddr2存储方法和系统
CN105761705B (zh) 屏幕墙同步显示方法及系统
KR20110097512A (ko) 영상합성장치 및 그 파노라마 영상 생성방법
CN107544124A (zh) 摄像设备及其控制方法和存储介质
US20060215050A1 (en) Driving controlling method for image sensing device, and imaging device
CN111124341A (zh) 双屏异显同步显示的方法及装置
CN105635601A (zh) 一种多传感器多通道视频数据输入方法和装置
JP2020188323A (ja) 撮像装置および撮像方法
JP2014064138A (ja) センサ用周辺装置、センサモジュールおよびセンサシステム
KR101989307B1 (ko) 차량용 영상신호와 제어신호를 동기화 시키기 위한 장치
CN102184724B (zh) 一种图像显示方法及装置
CN106664355A (zh) 摄像装置、图像处理装置以及摄像显示装置
US20180213139A1 (en) Image processing apparatus and method
CN102982759B (zh) 显示驱动器及其操作方法、控制显示驱动器的主机及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1191786

Country of ref document: HK

C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: American California

Applicant after: OmniVision Technologies, Inc.

Address before: American California

Applicant before: Full Vision Technology Co., Ltd.

COR Change of bibliographic data
GR01 Patent grant
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1191786

Country of ref document: HK