CN101795418A - 一种实现无线通信的方法和系统 - Google Patents

一种实现无线通信的方法和系统 Download PDF

Info

Publication number
CN101795418A
CN101795418A CN201010005536A CN201010005536A CN101795418A CN 101795418 A CN101795418 A CN 101795418A CN 201010005536 A CN201010005536 A CN 201010005536A CN 201010005536 A CN201010005536 A CN 201010005536A CN 101795418 A CN101795418 A CN 101795418A
Authority
CN
China
Prior art keywords
video
resolution
data stream
video data
full resolution
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201010005536A
Other languages
English (en)
Inventor
查尔斯·麦克法兰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Broadcom Corp
Zyray Wireless Inc
Original Assignee
Zyray Wireless Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zyray Wireless Inc filed Critical Zyray Wireless Inc
Publication of CN101795418A publication Critical patent/CN101795418A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/139—Format conversion, e.g. of frame-rate or size
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/25—Image signal generators using stereoscopic image cameras using two or more image sensors with different characteristics other than in their location or field of view, e.g. having different resolutions or colour pickup characteristics; using image signals from one sensor to control the characteristics of another sensor

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明涉及一种实现无线通信的方法和系统，无线通信设备包括一个和多个处理器和/或电路，用于使用由高分辨率视频源生成的第一视频数据流和低分辨率视频源生成的第二视频数据流生成输出全分辨率3D视频。所述输出全分辨率3D视频的分辨率大于所述第一视频数据流和第二视频数据流。对数据流进行的3D视频或图像处理可在无线通信设备中执行。3D视频或图像处理也可在无线通信设备外部执行。在为外部3D视频或图像处理传送数据流之前要对数据流进行压缩。3D视频或图像可本地显示在无线通信设备上。3D视频或图像被格式化处理以便本地显示在无线通信设备上。

Description

一种实现无线通信的方法和系统
技术领域
本发明涉及无线通信，更具体地说，涉及一种使用全分辨率视频流和低分辨率视频流实现3D视频和图像处理的方法和系统。
背景技术
3D或2D视频系统中，图像显示在显示设备中，例如电视、监控器和/或游戏机(gaming console)中。当今，大多数视频广播使用视频处理应用程序，该视频处理应用程序能够以比特流的形式广播视频图像，该比特流包括有关所要显示图像的特性的信息。这些视频应用程序使用各种插值(interpolation)和/或速率转换功能将包括静态和/或动态图像的内容显示在显示器上。例如，使用解交错处理(de-interlacing)功能将运动和/或静止图像转换为适合于某些不能处理交错内容的显示设备所需的格式。
交错3D和/或2D视频包括场，在不同的时间间隔捕捉每一场。一帧包括一对场，例如，顶场(top field)和底场(bottom field)。构成视频的图像包括多个有序行(ordered line)。在一个时间间隔中，捕捉偶数行的视频内容。在下一个时间间隔中，捕捉奇数行的视频内容。偶数行可选地视作顶场，而奇数行可选地视为底场。或者，奇数行可选地视作顶场，而偶数行可选地视为底场。
在连续的2D和/或3D视频帧的情况下，在一时间间隔内按顺序捕捉或播放帧的所有行。交错视频包括从连续帧转换来的场。例如，通过将偶数行编组到一个场并将奇数行编组到另一场，从而将连续帧转换成2个交错的场。
比较本发明后续将要结合附图介绍的系统，现有技术的其它缺陷和弊端对于本领域的技术人员来说是显而易见的。
发明内容
本发明提出一种使用全分辨率(full-resolution)视频流和较低分辨率视频流实现3D视频和图像处理的系统和/或方法。下面将结合至少一幅附图来充分展示和/或说明。
根据本发明的一方面，提出一种实现无线通信的方法，包括：
由单个视频处理设备中的一个或多个处理器和/或电路执行：
使用由高分辨率视频源生成的第一视频数据流和低分辨率视频源生成的第二视频数据流生成输出全分辨率3D视频，其中所述输出全分辨率3D视频的分辨率大于所述第一视频数据流和第二视频数据流的分辨率。
作为优选，所述方法进一步包括使用来自所述第一视频数据流和/或第二视频数据流中的信息生成所述全分辨率3D视频的左视图视频。
作为优选，所述方法进一步包括使用来自所述第一视频数据流和/或第二视频数据流中的信息生成所述全分辨率3D视频的右视图视频。
作为优选，所述方法进一步包括压缩所述生成的输出全分辨率3D视频。
作为优选，所述方法进一步包括将已压缩的所述生成的输出全分辨率3D视频传送至所述无线通信设备外部的设备进行处理。
作为优选，所述无线通信设备外部的设备对所述已压缩的生成的输出全分辨率3D视频进行解压缩。
作为优选，所述无线通信设备外部的设备处理和显示所述已解压缩的生成的输出全分辨率3D视频。
作为优选，所述方法进一步包括对所述输出全分辨率3D视频进行格式化处理以便由所述无线通信设备本地显示。
作为优选，所述方法进一步包括由所述无线通信设备显示所述已格式化的输出全分辨率3D视频。
作为优选，一个或多个所述输出全分辨率3D视频、所述第一视频数据流和/或所述第二视频数据流包括静止和/或运动图像。
根据本发明的一方面，提出了一种实现无线通信的系统，包括：
视频处理设备中的一个或多个处理器和/或电路，所述一个或多个处理器和/或电路用于：
使用由高分辨率视频源生成的第一视频数据流和低分辨率视频源生成的第二视频数据流生成输出全分辨率3D视频，其中所述输出全分辨率3D视频的分辨率大于所述第一视频数据流和第二视频数据流的分辨率。
作为优选，所述一个或多个处理器和/或电路用于使用来自所述第一视频数据流和/或第二视频数据流中的信息生成所述全分辨率3D视频的左视图视频。
作为优选，所述一个或多个处理器和/或电路用于使用来自所述第一视频数据流和/或第二视频数据流中的信息生成所述全分辨率3D视频的右视图视频。
作为优选，所述一个或多个处理器和/或电路用于压缩所述生成的输出全分辨率3D视频。
作为优选，所述一个或多个处理器和/或电路用于将已压缩的所述生成的输出全分辨率3D视频传送至所述无线通信设备外部的设备进行处理。
作为优选，所述无线通信设备外部的设备对所述已压缩的生成的输出全分辨率3D视频进行解压缩。
作为优选，所述无线通信设备外部的设备处理和显示所述已解压缩的生成的输出全分辨率3D视频。
作为优选，所述一个或多个处理器和/或电路用于对所述输出全分辨率3D视频进行格式化处理以便由所述无线通信设备本地显示。
作为优选，所述一个或多个处理器和/或电路用于通过所述无线通信设备显示所述已格式化的输出全分辨率3D视频。
作为优选，一个或多个所述输出全分辨率3D视频、所述第一视频数据流和/或所述第二视频数据流包括静止和/或运动图像。
下文将结合附图对具体实施例进行详细描述，以帮助理解本发明的各种优点、各个方面和创新特征。
附图说明
图1A是依据本发明一实施例的示范性无线系统的模块示意图，用于使用一个全分辨率视频流和一个较低分辨率视频流来提供3D视频和图像处理；
图1B是依据本发明一实施例的示范性3D视频捕捉的示意图；
图2是依据本发明一实施例的示范性3D视频捕捉和处理序列模块示意图；
图3是依据本发明一实施例的示范性3D视频实施示意图；
图4是依据本发明一实施例的示范性网络化(networked)3D视频实施示意图；
图5是依据本发明一实施例的使用一个全分辨率视频流和一个较低分辨率视频流实现3D视频和图像处理的示范性步骤流程图。
具体实施方式
本发明提供一种使用一个全分辨率视频流和一个较低分辨率视频流实现3D视频和图像处理的方法和系统。在本发明的各个示范性方面，使用由高分辨率视频源生成的第一视频数据流和低分辨率视频源生成的第二视频数据流生成输出全分辨率3D视频，其中所述输出全分辨率3D视频的分辨率大于所述第一视频数据流和第二视频数据流。在本发明一实施例中，对数据流进行的3D视频或图像处理可在无线通信设备中执行。在本发明另一实施例中，3D视频或图像处理还可在无线通信设备外部执行。在为外部3D视频或图像处理传送数据流之前要对数据流进行压缩。3D视频或图像可本地显示在无线通信设备上。可对3D视频或图像进行格式化处理，使其能够本地显示在无线通信设备的显示器上。
图1A是依据本发明一实施例的示范性无线系统的模块示意图，用于使用一个全分辨率视频流和一个较低分辨率视频流来提供3D视频和图像处理。参考图1A，无线设备150包括天线151、芯片162、收发器152、基带处理器154、处理器155、系统存储器158、逻辑模块160、高分辨率摄像机164A、低分辨率摄像机164B、音频编译码器(CODEC)172A、视频CODEC 172B、和外部耳机端口166。无线设备150还包括模拟麦克风168、集成免提(integrated hands-free，IHF)立体声扬声器170、助听器兼容(hearing aidcompatible，HAC)线圈174、数字双麦克风(dual digital microphone)176、振动传感器(vibration transducer)178、触摸屏/显示器180。
大多数视频内容普遍地以二维(2D)形式生成和播放。在各种视频相关的应用中，例如DVD/蓝光(blue-ray)电影和/或数字TV，3D视频是更值得拥有，因为对人们来说感知3D比感知2D更逼真。
收发器152包括适当的逻辑、电路、接口和/或代码，用于将基带信号调制和上变频为RF信号，以便一个或多个天线(由天线151表示)发射。收发器152还用于将接收到的RF信号下变频和解调为基带信号。射频信号可以通过一个或多个天线(由天线151表示)接收。不同的无线系统使用不同的天线进行发射和接收。收发器152还用于执行其他功能，例如，过滤基带信号和/或RF信号、和/或放大基带信号和/或RF信号。尽管每一芯片示出的是单个收发器，本发明并不限于此。总之，收发器152可通过单独的发射器和单独的接收器来实施。另外，可以设置有多个收发器、发射器和/或接收器。有关这一点，多个收发器、发射器和/或接收器使得无线设备150能够处理多个无线协议和/或标准，包括蜂窝、WLAN和PAN。由无线设备150处理的无线技术包括例如GPS、GALILEO、GLONASS、GSM、CDMA、CDMA2000、WCDMA、GNSS、GMS、GPRS、EDGE、WIMAX、WLAN、LTE、3GPP、UMTS、BLUETOOTH和ZIGBEE。
基带处理器154包括适当的逻辑、电路、接口和/或代码，用于处理基带信号以便借助于收发器152发射和/或接收来自收发器152的基带信号。处理器155可为任何适当的处理器或控制器，诸如CPU、DSP、ARM或任何类型的集成电路处理器。处理器155包括适当的逻辑、电路、接口和/或代码，用于控制收发器152和/或基带处理器154的操作。例如，处理器155用于更新和/或修改收发器152和/或基带处理器154中的多个组件、设备和/或处理部件的可编程参数和/或值。至少一部分可编程参数存储在系统存储器158中。
包括可编程参数的控制和/或数据信息可从无线设备的其他部分(图1未示出)传输至处理器155。类似地，处理器155也可传输包括可编程参数的控制和/或数据信息至无线设备150的其他部分(图1中未示出)，该其他部分可为无线设备150的一部分。
处理器155使用接收的控制和/或数据信息确定收发器152的操作模式，该控制和/或数据信息包括可编程参数或视频源数据。例如，处理器155用于为本地振荡器选择特定频率、为可变增益放大器选择特定增益、配置本地振荡器和/或配置可变增益放大器依据本发明各个实施例进行操作。而且，接收的视频源数据和/或已处理的全分辨率3D视频数据例如借助于处理器155存储在系统存储器158中。借助于处理器155将存储在系统存储器158中的信息从系统存储器158传输至收发器152。
处理器155用于处理接收自高分辨率视频源和低分辨率视频源的数据流。处理器155因此从接收的数据流中生成全分辨率3D视频。
系统存储器158包括适当的逻辑、电路、接口和/或代码，用于存储多个控制和/或视频数据信息，包括视频或图像处理参数、或全分辨率3D视频数据。系统存储器158可存储至少一部分由处理器155所管理/控制的可编程参数。
逻辑模块160包括适当的逻辑、电路、接口和/或代码，用于控制无线设备150的各种功能。例如，逻辑模块160包括一个或多个状态机，该状态机可生成信号以便控制收发器152和/或基带处理器154。逻辑模块160还包括寄存器，可保持(hold)用于控制例如收发器152和/或基带处理器154的数据。逻辑模块160还生成和/或存储状态(status)信息，该状态信息可由例如处理器155读取。放大器增益和/或滤波特性可由例如逻辑模块160控制。
BT无线收发器/处理器163包括适当的逻辑、电路、接口和/或代码，用于发射和/接收蓝牙信号。BT无线收发器/处理器163可处理和/或操作BT基带信号。就此而言，BT无线收发器/处理器163处理或操作借助于无线通信媒介接收和/或发射的BT信号。基于来自于已处理BT信号中的信息，BT无线收发器/处理器163还提供发往/接收自基带处理器154和/或处理器155的控制和/或反馈信息。BT无线收发器/处理器163将来自于已处理的BT信号的信息和/或数据传送至处理器155和/或系统存储器158。而且，BT无线收发器/处理器163可接收来自处理器155和/或系统存储器158的信息、对其进行处理，并经由无线通信媒介发射至蓝牙耳机。
高分辨率摄像机164A包括适当的逻辑、电路、接口和/或代码，用于捕捉视频和图像。高分辨率摄像机164A能够捕捉高清晰度(high definition)图像和视频，并由例如处理器155控制。高分辨率摄像机164A包括例如几百万像素。
低分辨率摄像机164B包括适当的逻辑、电路、接口和/或代码，用于捕捉视频和图像。低分辨率摄像机164B包括比高分辨率摄像机164A更小且成本更低的摄像机，可包括例如VGA图像/视频摄像机。在此方式下，无线设备150包括两个用于全分辨率3D图像和视频的摄像机，而无需两个高分辨率摄像机。3D图像和/或视频可显示在例如触摸屏/显示器180上，可存储在系统存储器158中，和/或借助于收发器152和天线151向外部传送。
音频CODEC 172A包括适当的逻辑、电路、接口和/或代码，用于处理接收自和/或传送至输入/输出设备的音频信号。输入设备可位于无线设备150中或与无线设备150通信连接，输入/输出设备包括例如模拟麦克风168、立体声扬声器170、助听器兼容(HAC)线圈174、数字双麦克风176、振动传感器178。音频CODEC 172A可上变频和/或下变频信号频率至期望频率，以便处理和/或借助于输出设备发射。
视频CODEC 172B包括适当的逻辑、电路、接口和/或代码，用于处理接收和/或传送来自和/或发往输入输出设备的视频信号，诸如高分辨率摄像机164A和低分辨率摄像机164B。视频CODEC 172B将已处理的视频信号传送至处理器155以便进一步处理，或借助于收发器152传送至无线设备150外部的设备。
芯片162包括内部集成有多个功能模块的集成电路，诸如收发器152、基带处理器154、BT无线电收发器/处理器163、音频CODEC 172A、以及视频CODEC 172B。集成在芯片162中的功能模块的数量并不限于图1所示的数量。总之，芯片162中可集成有任何数量的模块，包括诸如高分辨率摄像机164A和低分辨率摄像机164B的摄像机，依赖于例如芯片空间和无线设备150的需求。
外部耳机端口166包括外部耳机与无线设备150通信连接的物理连接。模拟麦克风168包括适当的电路、逻辑和/或代码，用于检测声波并借助于例如压电效应(piezoelectric effect)将其转换为电信号。由模拟麦克风168生成的电信号包括模拟信号，在处理之前需要进行模数转换。
立体声扬声器170包括一对扬声器，用于从接收自音频CODEC 172A的电信号中生成音频信号。HAC线圈174包括适当的电路、逻辑和/或代码，用于例如无线设备150与助听器中T-线圈的通信。在此方式下，电音频信号传送至使用助听器的用户，随后在用户耳中转换回放大的声音信号，而无需例如借助于诸如立体声扬声器170的扬声器生成声音信号，并在助听器中将生成的声音信号转换回电信号。
数字双麦克风176包括适当的电路、逻辑和/或代码，用于检测声波并将其转换为电信号。由数字双麦克风176生成的电信号包括数字信号，在音频CODEC 172A进行数字处理之前无需进行模数转换。数字双麦克风176具有例如波束成形(beamforming)能力。
振动传感器178包括适当的电路、逻辑和/或代码，用于将传入的呼叫、警报和/或消息通知给无线设备150，无需使用声音。振动传感器生成振动，该振动例如与诸如语音或音乐的音频信号同步。
在操作中，视频流数据从诸如高分辨率摄像机164A和低分辨率摄像机164B的图像和/或视频源传送至视频CODEC 172B。在传送数据至处理器以便进一步处理或将数据传送至无线设备150的外部设备之前，视频CODEC172B处理所接收的视频数据。
在本发明一实施例中，高分辨率摄像机164A和低分辨率摄像机164B用于捕捉图像和/或视频。通过使用两个空间分离的摄像机，可从两个图像/视频信号生成3D图像/视频。高分辨率摄像机164A和低分辨率摄像机164B将视频数据流传送至视频CODEC 172B，并在将已处理的信号传送至处理器以便进一步处理之前处理接收的信号。处理器155用于处理由高分辨率摄像机164A和低分辨率摄像机164B获取的3D图像和/或视频。在此方式下，通过使用一个更小体积、成本更低、具有较低分辨率的摄像机配合一个高分辨率摄像机来减少无线设备150的空间和成本，然而仍然能够提供全分辨率3D图像和视频。处理器155所执行的处理包括右视图和左视图生成，以便提供3D视频，该3D视频包括静止和/或运动图像。
可使用各种方法来捕捉、生成(在捕捉或娱乐时间(playtime))和/或提供3D视频图像。实施3D视频的多个常用方法中的一个是立体3D视频。在基于立体3D视频的应用中，通过提供多个视图来生产3D视频效果，通常大多数情况为2个视图：左视图和右视图，对应于观看者的左眼和右眼，以便为所显示图像赋予景深(give depth to)。就此而言，捕捉和/或处理左视图和右视图视频序列以制作3D图像。左视图和右视图再作为单独的流传送，或并入到单个传输流中并由终端用户接收/显示设备分离为不同视图序列。
在传送立体3D视频的过程中，可使用各种压缩/编码标准将视图序列压缩和/或编码为传输流。例如，可基于MPEG-2MVP、H.264和/或MPEG-4高级视频编码(Advanced Video Coding，AVC)或MPEG-4多视图视频编码(MVC)，对单独的左视图和右视图视频序列进行压缩。
在本发明一实施例中，可使用一个全分辨率视频流和一个较低分辨率视频流获取3D视频和图像处理。就此而言，无线设备150包括一个或多个处理器和/或电路，用于使用由高分辨率视频源生成的第一视频数据流和低分辨率视频源生成的第二视频数据流生成输出全分辨率3D视频。输出全分辨率3D视频的分辨率大于第一视频数据流和第二视频数据流的分辨率。对数据流进行的3D视频或图像处理可在无线通信设备150中和/或无线通信设备150的外部执行。
图1B是依据本发明一实施例的示范性3D视频捕捉的示意图。参考图1B，示出了无线设备150和触摸屏/显示器180，可参考图1A所述。
在操作中，无线设备150中的高分辨率摄像机164A和低分辨率摄像机164B可用于捕捉图像和/或视频。通过使用空间分离的摄像机从两个图像/视频信号生成3D图像/视频，以及通过使用与高分辨率摄像机相配合的较低分辨率摄像机生成全高分辨率3D图像和/或视频，同时减少无线设备150的成本和空间需求。
在无线设备中处理捕捉的图像和/或视频并随后显示在触摸屏/显示器180上。在本发明另一实施例中，处理的图像和/或视频可传送至无线设备150外部。另外，在由外部设备进行处理之前，无线设备150无需处理直接传送捕捉的图像和/或图像。在此方式下，无线设备150中的处理器的需求会减少。
在本发明的各个实施例中，无线设备150包括一个或多个处理器和/或电路，用于使用由高分辨率视频源生成的第一视频数据流和低分辨率视频源生成的第二视频数据流生成输出全分辨率3D视频。输出全分辨率3D视频的分辨率大于所述第一视频数据流和第二视频数据流的分辨率。对数据流进行的3D视频或图像处理可在无线通信设备150中和/或无线通信设备150外部执行。
图2是依据本发明一实施例的示范性3D视频捕捉和处理序列示意图。参考图2，示出了3D视频处理模块201、重新格式化模块203以及3D视频输出205。还示出了全分辨率视频流207、低分辨率视频流209以及多个视频流211。
3D视频处理模块201包括适当的电路、逻辑、接口和/或代码，用于处理接收的视频流，诸如全分辨率视频流207和低分辨率视频流209。3D视频处理模块201可例如集成在无线设备150中，诸如处理器155中；或集成在外部设备中，诸如计算机或适用于接收和处理视频流的音频/视频系统。在3D视频处理模块201在无线设备150外部的情况下，全分辨率视频流207和低分辨率视频流209并行传送至外部设备。
重新格式化模块203包括适当的电路、逻辑、接口和/或代码，用于将已处理的3D图像或视频数据格式化为多个视频流211。重新格式化模块203格式化图像和/或视频数据为适合目标视频输出设备的合适格式。
3D视频输出205包括适当的电路、逻辑、接口和/或代码，用于显示3D图像和/或视频。3D视频输出205包括例如高清电视机。
在操作中，两个摄像机，诸如高分辨率摄像机164A和低分辨率摄像机164B，生成两个输入流：全分辨率视频流207、低分辨率视频流209。全分辨率视频流207包括目标压缩或LCD分辨率需要的全分辨率流。低分辨率视频流209例如包括已减少分辨率流，诸如VGA视频流。这些流可传送至3D视频处理模块201，该模块将两个流合并生成全分辨率3D视频流。在本发明一实施例中，这种处理方法可应用于视频或静止图像。
3D视频处理模块201生成的3D视频流传送至重新格式化模块203，重新格式化模块203用于将已处理的3D视频流格式化为多个视频流211。多个视频流211可传送至3D视频输出205进行显示。
图3是依据本发明一实施例的示范性3D视频实施示意图。参考图3，示出的3D视频实施300包括高分辨率摄像机301A、低分辨率摄像机301B、3D处理模块303、格式化模块305、电视机307、无线设备150、触摸屏/显示器180。高分辨率摄像机301A和低分辨率摄像机301B基本上类似于图1A中所述的高分辨率摄像机164A和低分辨率摄像机164B，3D处理模块303基本上类似于图2中所述的3D处理模块201，无线设备150和触摸屏/显示器180如图1A所述。
格式化模块305包括适当的电路、逻辑、接口和/或代码，用于按照需要的显示类型将视频和/或图像数据格式化。例如格式化模块305可以按照无线设备150或电视机307的需要定义适当的屏幕高宽比或扫描速率。
在操作中，高分辨率摄像机301A和低分辨率摄像机301B生成传送至3D视频处理模块303的两个输入流，3D视频处理模块303将两个流合并生成全分辨率3D视频流。在本发明一实施例中，该处理可应用于视频或静止图像。3D视频处理模块301生成的3D视频流传送至格式化模块305，格式化模块305用于将已处理的3D视频流格式化为合适格式，以便在无线设备150、电视机307或类似显示设备上显示。
图4是依据本发明一实施例的示范性网络化(networked)3D视频实施示意图。参考图4，示出的网络化3D视频实现400包括高分辨率摄像机301A、低分辨率摄像机301B、压缩模块401A和401B、解压缩模块403A和403B、3D视频处理模块405、格式化模块407、无线设备409、电视机307。高分辨率摄像机301A、低分辨率摄像机301B和电视机307与之前描述的相同。3D视频处理模块405、格式化模块407、无线设备409基本上类似于之前描述的3D视频处理模块303、格式化模块305和无线设备150。无线设备409包括触摸屏/显示器411。
压缩模块401A和401B包括适当的逻辑、电路、接口和/或代码，用于压缩所接收的图像和/或视频数据，以便随后传送至远程设备。例如，压缩模块401A和401B集成在诸如无线设备150的无线设备中，能够通过减少数据大小在网络上更有效的传送数据。
解压缩模块403A和403B包括适当的逻辑、电路、接口和/或代码，用于解压缩所接收的压缩数据。解压缩模块403A和403B可远离图像/视频数据源。
在操作中，高分辨率摄像机301A和低分辨率摄像机301B生成传送至压缩模块401A和401B的两个输入流，其中可对所述数据流压缩以便更有效地传送。压缩的流传送至包括解压缩模块403A和403B的远程设备，解压缩模块403A和403B用于解压缩所接收的数据以便进一步的处理。
解压缩数据被传送至3D视频处理模块405，3D视频处理模块405将两个流合并生成全分辨率3D视频流。在本发明一实施例中，该处理可应用在视频或静止图像上。3D视频处理模块405生成的3D视频流传送至格式化模块407，格式化模块407用于将已处理的3D视频流格式化为合适格式，以便在无线设备409、电视机307或类似显示设备上显示。
图5是依据本发明一实施例的使用一个全分辨率视频流和一个较低分辨率视频流实现3D视频和图像处理的示范性步骤流程图。参考图5，在开始步骤501之后的步骤503中，使用高分辨率摄像机和低分辨率摄像机捕捉视频和/或图像数据。如果在步骤505中，确认在本地诸如无线设备150中对视频/图像数据进行处理，示范性步骤进入步骤511，其中合并和处理数据流以生成全分辨率3D视频/图像。如果在步骤505中，确认数据不在本地处理，数据流可在步骤507中进行压缩，随后在示范性步骤进入步骤511之前在步骤509中将压缩的数据传送至远程设备，在步骤511中合并和处理数据流以生成全分辨率3D视频/图像。该处理再进入步骤513，其中，为期望的显示设备格式化3D视频/图像，并随后显示在所述设备上，最后进入结束步骤515。
在本发明一实施例中，提供一种使用一个全分辨率视频流和一个较低分辨率视频流实现3D视频和图像处理的方法和系统。就此而言，无线设备包括一个或多个处理器和/或电路，用于使用由高分辨率视频源164A生成的第一视频数据流207和低分辨率视频源164B生成的第二视频数据流209生成输出全分辨率3D视频。其中输出全分辨率3D视频的分辨率大于所述第一视频数据流和第二视频数据流的分辨率。对数据流207/209进行的3D视频或图像处理可在无线通信设备150中执行。3D视频或图像处理201/303也可在无线通信设备外部执行。在为外部3D视频或图像处理405传送数据流之前要对数据流207/209进行压缩401A/401B。3D视频或图像可本地显示在无线通信设备150上。可对3D视频或图像进行格式化处理，使其能够本地显示180在无线通信设备150上。
本发明的另一实施例提供一种机器和/或计算机可读存储器和/或介质，其上存储的机器代码和/或计算机程序具有至少一个可由机器和/或计算机执行的代码段，使得机器和/或计算机能够实现本文所描述使用一个全分辨率视频流和一个较低分辨率视频流实现3D视频和图像处理。
总之，本发明可用硬件、软件、固件或其中的组合来实现。本发明可以在至少一个计算机系统中以集成的方式实现，或将不同的组件置于多个相互相连的计算机系统中以分立的方式实现。任何计算机系统或其他适于执行本发明所描述方法的装置都是适用的。典型的硬件、软件和固件的组合为带有计算机程序的专用计算机系统，当该程序被装载和执行，就会控制计算机系统使其执行本发明所描述的方法。
本发明的实施例可作为板级产品(board level product)来实施，如单个芯片、专用集成电路(ASIC)、或者作为单独的部件以不同的集成度与系统的其它部分一起集成在单个芯片上。系统的集成度主要取决于速度和成本考虑。现代处理器品种繁多，使得能够采用目前市场上可找到的处理器，可在本系统ASIC实施的外部来实施。另外，如果作为ASIC核心或逻辑模块的该处理器是可获得的，那么经济可行的处理器可作为多种功能由固件实现的ASIC设备的一部分来实现。
本发明还可以通过计算机程序产品进行实施，所述程序包含能够实现本发明方法的全部特征，当其安装到计算机系统中时，通过运行，可以实现本发明的方法。本申请文件中的计算机程序所指的是：可以采用任何程序语言、代码或符号编写的一组指令的任何表达式，该指令组使系统具有信息处理能力，以直接实现特定功能，或在进行下述一个或两个步骤之后，a)转换成其它语言、代码或符号；b)以不同的格式再现，实现特定功能。
本发明是通过一些实施例进行描述的，本领域技术人员知悉，在不脱离本发明的精神和范围的情况下，可以对这些特征和实施例进行各种改变或等同替换。另外，在本发明的教导下，可以对这些特征和实施例进行修改以适应具体的情况及材料而不会脱离本发明的精神和范围。因此，本发明不受此处所公开的具体实施例的限制，所有落入本申请的权利要求范围内的实施例都属于本发明的保护范围。

Claims (10)

1.一种实现无线通信的方法，其特征在于，包括：
由单个视频处理设备中的一个或多个处理器和/或电路执行：
使用由高分辨率视频源生成的第一视频数据流和低分辨率视频源生成的第二视频数据流生成输出全分辨率3D视频，其中所述输出全分辨率3D视频的分辨率大于所述第一视频数据流和第二视频数据流的分辨率。
2.根据权利要求1所述的实现无线通信的方法，其特征在于，包括使用来自所述第一视频数据流和/或第二视频数据流中的信息生成所述全分辨率3D视频的左视图视频。
3.根据权利要求1所述的实现无线通信的方法，其特征在于，包括使用来自所述第一视频数据流和/或第二视频数据流中的信息生成所述全分辨率3D视频的右视图视频。
4.根据权利要求1所述的实现无线通信的方法，其特征在于，包括压缩所述生成的输出全分辨率3D视频。
5.根据权利要求4所述的实现无线通信的方法，其特征在于，包括将已压缩的所述生成的输出全分辨率3D视频传送至所述无线通信设备外部的设备进行处理。
6.根据权利要求5所述的实现无线通信的方法，其特征在于，所述无线通信设备外部的设备对所述已压缩的生成的输出全分辨率3D视频进行解压缩。
7.根据权利要求6所述的实现无线通信的方法，其特征在于，所述无线通信设备外部的设备处理和显示所述已解压缩的生成的输出全分辨率3D视频。
8.一种实现无线通信的系统，其特征在于，包括：
视频处理设备中的一个或多个处理器和/或电路，所述一个或多个处理器和/或电路用于：
使用由高分辨率视频源生成的第一视频数据流和低分辨率视频源生成的第二视频数据流生成输出全分辨率3D视频，其中所述输出全分辨率3D视频的分辨率大于所述第一视频数据流和第二视频数据流的分辨率。
9.根据权利要求8所述的实现无线通信的系统，其特征在于，所述一个或多个处理器和/或电路用于使用来自所述第一视频数据流和/或第二视频数据流中的信息生成所述全分辨率3D视频的左视图视频。
10.根据权利要求8所述的实现无线通信的系统，其特征在于，所述一个或多个处理器和/或电路用于使用来自所述第一视频数据流和/或第二视频数据流中的信息生成所述全分辨率3D视频的右视图视频。
CN201010005536A 2009-01-15 2010-01-15 一种实现无线通信的方法和系统 Pending CN101795418A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US14495909P 2009-01-15 2009-01-15
US61/144,959 2009-01-15
US12/629,247 US20100177162A1 (en) 2009-01-15 2009-12-02 Method and system for enabling 3d video and image processing using one full resolution video stream and one lower resolution video stream
US12/629,247 2009-12-02

Publications (1)

Publication Number Publication Date
CN101795418A true CN101795418A (zh) 2010-08-04

Family

ID=41858891

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201010005536A Pending CN101795418A (zh) 2009-01-15 2010-01-15 一种实现无线通信的方法和系统

Country Status (3)

Country Link
US (1) US20100177162A1 (zh)
EP (1) EP2209321A3 (zh)
CN (1) CN101795418A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103339933A (zh) * 2010-11-12 2013-10-02 韩国电子通信研究院 3dtv服务中的图像压缩规格确定方法及装置
CN103814572A (zh) * 2011-09-16 2014-05-21 杜比实验室特许公司 帧兼容的全分辨率立体3d压缩和解压缩
CN103828358A (zh) * 2011-09-29 2014-05-28 杜比实验室特许公司 具有对称图片分辨率和质量的帧兼容全分辨率立体3d视频递送
CN103841335A (zh) * 2014-03-20 2014-06-04 梁红 一种新的提高夜视图像效果的方法
CN104041023A (zh) * 2011-09-29 2014-09-10 杜比实验室特许公司 双层帧相容全分辨率立体3d视频输送

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8836580B2 (en) * 2005-05-09 2014-09-16 Ehud Mendelson RF proximity tags providing indoor and outdoor navigation and method of use
US20170111593A1 (en) * 2005-06-21 2017-04-20 Cedar Crest Partners Inc. System, method and apparatus for capture, conveying and securing information including media information such as video
JP5627860B2 (ja) * 2009-04-27 2014-11-19 三菱電機株式会社 立体映像配信システム、立体映像配信方法、立体映像配信装置、立体映像視聴システム、立体映像視聴方法、立体映像視聴装置
CN104486612B (zh) * 2009-04-27 2016-11-30 Lg电子株式会社 用于广播发射机的3d视频数据处理方法及广播接收机
JP6013920B2 (ja) 2010-02-15 2016-10-25 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ ビデオコンテンツを処理するための装置および方法
JP2013546238A (ja) * 2010-10-22 2013-12-26 ユニバーシティ オブ ニュー ブランズウィック カメラ撮像システムおよび方法
WO2012112142A1 (en) 2011-02-15 2012-08-23 Thomson Licensing Apparatus and method for generating a disparity map in a receiving device
US20130069825A1 (en) * 2011-09-21 2013-03-21 Rio Systems Ltd. Methods, circuits and systems for generating navigation beacon signals
DE102012106860A1 (de) * 2012-07-27 2014-02-13 Jenoptik Robot Gmbh Vorrichtung und Verfahren zum Identifizieren und Dokumentieren mindestens eines ein Strahlungsfeld durchfahrenden Objektes
CN115460461B (zh) * 2022-09-07 2024-04-26 北京奇艺世纪科技有限公司 视频处理方法及装置、终端设备、计算机可读存储介质

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2887272B2 (ja) * 1987-07-14 1999-04-26 株式会社 エイ・ティ・ア−ル通信システム研究所 立体画像装置
EP2268015B1 (en) * 1996-12-04 2013-10-16 Panasonic Corporation Optical disk for high resolution and three dimensional video recording, optical disk reproduction apparatus, and optical disk recording apparatus
EP1418766A3 (en) * 1998-08-28 2010-03-24 Imax Corporation Method and apparatus for processing images
US20020009137A1 (en) * 2000-02-01 2002-01-24 Nelson John E. Three-dimensional video broadcasting system
EP1354292B1 (en) * 2000-12-01 2012-04-04 Imax Corporation Method and apparatus FOR DEVELOPING HIGH-RESOLUTION IMAGERY
US7102683B2 (en) * 2002-04-17 2006-09-05 Mitsubishi Electric Research Laboratories, Inc. Single lens 3D camera
US7131262B2 (en) * 2004-07-28 2006-11-07 Ford Global Technologies, Llc Secondary airflow system for engine exhaust emission diagnostics
WO2006079963A2 (en) * 2005-01-28 2006-08-03 Koninklijke Philips Electronics N.V. Device for registering images
US7956930B2 (en) * 2006-01-06 2011-06-07 Microsoft Corporation Resampling and picture resizing operations for multi-resolution video coding and decoding
JP4818053B2 (ja) * 2006-10-10 2011-11-16 株式会社東芝 高解像度化装置および方法
TWI466547B (zh) * 2007-01-05 2014-12-21 Marvell World Trade Ltd 用於改善低解析度視訊之方法與系統
KR20080066408A (ko) * 2007-01-12 2008-07-16 삼성전자주식회사 3차원 영상 처리 장치 및 방법
KR101345379B1 (ko) * 2007-06-28 2014-01-22 삼성전자주식회사 3차원 그래픽스 데이터 렌더링 방법 및 장치
MY162861A (en) * 2007-09-24 2017-07-31 Koninl Philips Electronics Nv Method and system for encoding a video data signal, encoded video data signal, method and system for decoding a video data signal
US8442355B2 (en) * 2008-05-23 2013-05-14 Samsung Electronics Co., Ltd. System and method for generating a multi-dimensional image
DE112008003983T5 (de) * 2008-09-15 2011-07-21 Hewlett-Packard Development Co., L.P., Tex. Berührungsbildschirmanzeige mit mehreren Kameras
EP2395772A3 (en) * 2008-09-30 2013-09-18 Panasonic Corporation Glasses and display device
EP2259599A1 (en) * 2009-05-29 2010-12-08 Telefonaktiebolaget L M Ericsson (Publ) Method and arrangement for processing a stereo image for three-dimensional viewing

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103339933A (zh) * 2010-11-12 2013-10-02 韩国电子通信研究院 3dtv服务中的图像压缩规格确定方法及装置
CN103339933B (zh) * 2010-11-12 2016-04-27 韩国电子通信研究院 3dtv服务中的图像压缩规格确定方法及装置
CN103814572A (zh) * 2011-09-16 2014-05-21 杜比实验室特许公司 帧兼容的全分辨率立体3d压缩和解压缩
CN103814572B (zh) * 2011-09-16 2017-02-22 杜比实验室特许公司 帧兼容的全分辨率立体3d压缩和解压缩
CN103828358A (zh) * 2011-09-29 2014-05-28 杜比实验室特许公司 具有对称图片分辨率和质量的帧兼容全分辨率立体3d视频递送
CN104041023A (zh) * 2011-09-29 2014-09-10 杜比实验室特许公司 双层帧相容全分辨率立体3d视频输送
CN103828358B (zh) * 2011-09-29 2016-05-18 杜比实验室特许公司 具有对称图片分辨率和质量的帧兼容全分辨率立体3d视频递送
US10097820B2 (en) 2011-09-29 2018-10-09 Dolby Laboratories Licensing Corporation Frame-compatible full-resolution stereoscopic 3D video delivery with symmetric picture resolution and quality
CN103841335A (zh) * 2014-03-20 2014-06-04 梁红 一种新的提高夜视图像效果的方法

Also Published As

Publication number Publication date
EP2209321A2 (en) 2010-07-21
US20100177162A1 (en) 2010-07-15
EP2209321A3 (en) 2013-03-20

Similar Documents

Publication Publication Date Title
CN101795418A (zh) 一种实现无线通信的方法和系统
CN108769646B (zh) 三维视频通信方法及系统、电子装置、服务器和可读存储介质
CN103248939B (zh) 一种实现多屏同步显示的方法及系统
CN105791895B (zh) 基于时间戳记的音频与视频处理方法及其系统
US8400570B2 (en) System and method for displaying multiple images/videos on a single display
WO2016202887A1 (en) Providing low & high quality streams
CN101681614A (zh) 具有自适应刷新率选择的显示设备
KR101416062B1 (ko) 무선 통신 시스템에서의 데이터 전송률 조절 방법 및 장치
CN103021377A (zh) 一种超高清多屏图像处理系统
CN107018448A (zh) 数据处理方法及装置
CN105721934A (zh) 视频的无线传输设备、视频播放设备、方法及系统
CN109547724A (zh) 一种视频流数据的处理方法、电子设备及存储装置
WO2010099178A2 (en) System and method for displaying multiple images/videos on a single display
CN1710817B (zh) 天线模块
CN107707841B (zh) 一种矩阵切换器
CN205105347U (zh) 视频的无线传输设备、视频播放设备及系统
US10244207B2 (en) Videoconference communication device
CN103929607A (zh) 基于屏幕录制的通信方法及应用客户端
CN203204998U (zh) 一种超高清多屏图像处理系统
CN105898455A (zh) 一种音视频播放设备
EP2693426A1 (en) Display apparatus, image post-processing apparatus and method for image post-processing of contents
US11716544B2 (en) Image capture module and electronic terminal
US20140375755A1 (en) Apparatus and method for changing main screen based on distributed telepresence
CN203982167U (zh) 一种远程环境信息采集与互动通讯装置
JP5626883B2 (ja) テレビ電話装置およびその制御方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1147001

Country of ref document: HK

C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20100804

REG Reference to a national code

Ref country code: HK

Ref legal event code: WD

Ref document number: 1147001

Country of ref document: HK