CN101420585A

CN101420585A - 由可视电话终端传输非视频信息的系统和方法

Info

Publication number: CN101420585A
Application number: CNA2007100474455A
Authority: CN
Inventors: 陈磊
Original assignee: Shanghai Simcom Ltd
Current assignee: Shanghai Simcom Ltd
Priority date: 2007-10-26
Filing date: 2007-10-26
Publication date: 2009-04-29

Abstract

一种将用户的非视频输入信息通过可视电话系统进行传输的方法，其特征在于包含以下步骤：获取用户的非视频输入信息；将上述非视频输入信息转化为图像信息；将上述图像信息插入或取代由摄像头生成的视频输入信息；将上述混合的视频输入信息按照可视电话协议进行压缩和协议处理，并通过通信信道发送出去。一种将用户的非视频输入信息通过可视电话系统进行传输的可视电话终端系统，其特征在于包含以下子系统：视频输入子系统，视频输出子系统，音频输入子系统，音频输出子系统，视频编码子系统，视频解码子系统，音频编码子系统，音频解码子系统，可视电话传输与控制子系统，非视频输入子系统，图像信息转化生成子系统和图形信息插入子系统。

Description

由可视电话终端传输非视频信息的系统和方法

技术领域

本发明涉及一种通信系统，特别是在固定通信和移动通信网络中的一种传输非视频输入信息的可视电话终端系统和方法。

背景技术

随着技术的发展，能同时传递语音和图像信息的可视电话系统得到了越来越广泛的部署。这种可视电话系统可以用于固定通信网络(如ISDN网络)也可以用于移动网络(如WCDMA网络和TD-SCDMA网络)；这种可视电话系统可以基于电路交换(Circuit Switched，CS)也可以基于包交换(PacketSwitched，PS)。实际上有多种针对可视电话系统的国际技术标准被制定出来，包括适用于固定ISDN网络的ITU H.324标准，适用于包交换IP网络的ITU H.323标准和SIP协议以及基于H.324发展起来并适用于3GPP(第3代伙伴计划，3^rd Generation Partnership Project)移动通信网络的3G-H.324M标准。普通的可视电话通信系统终端的逻辑构成如图1所示，可以分为视频输入子系统(摄像头)11，视频输出子系统(LCD显示屏)14，音频输入子系统(麦克风)16，音频输出子系统(扬声器)9，视频编码子系统12，视频解码子系统13，音频编码子系统17，音频解码子系统18，可视电话控制与传输子系统15等逻辑组成部分。其中视频输入子系统11通过镜头以一定频率连续拍摄外部图像并生成数字格式的图像数据，视频输出子系统14用于显示本方和通信对方摄像机拍摄的画面，音频输入子系统16以一定速率连续录制外部声音并生成数字格式的声音数据，音频输出子系统19用于播放通信对方发送过来的声音数据，视频编码子系统12将摄像头生成的未压缩图像数据编码为一定格式的压缩图像数据，视频解码子系统13将接收到的通信对方发送的编码压缩图像数据解码为未压缩的图像数据，音频编码子系统17将麦克风生成的未压缩音频数据编码为一定格式的压缩音频数据，音频编码子系统18将接收到的通信对方发送的编码压缩音频数据解码为未压缩的音频数据，而可视电话控制与传输子系统15则按照相应协议进行控制和协议处理，并通过通信信道将处理后的音频、视频数据发送给通信对方或从对方接收处理过的音频、视频数据。

可视电话可以认为是普通的语音电话的一种加强，它使得通话双方不仅能进行语音交流，也能同时看到对方的视频图像。一般来说，可视电话中双方传输的视频图像是双方电话上的摄像头拍摄下来的。另外一方面，可视电话的通信双方可能同时也希望交流一些别的信息，比如通过键盘输入的数字和文字，或者通过触摸屏输入的草图等。在目前的解决方案中，要在可视电话系统中传输这些信息，需要采用一些额外的信令处理软件或模块，如一些电子白板协议如T.120等，这就需要双方都支持相关协议。但是出于成本考虑，大部分的可视电话终端都不具备相关协议处理能力。这样就存在兼容性问题，比如一个支持电子白板协议的终端向一个不支持相应协议终端发送的文字或草图信息就不会被正确处理或显示。

发明内容

本发明的目的在于提供一种将用户的非视频输入信息通过可视电话系统进行传输的方法，这种方法包含以下步骤：

(1)获取用户的非视频输入信息；

(2)将上述非视频输入信息转化为图像信息；

(3)将上述图像信息插入或取代由摄像头生成的视频输入信息，并形成混合的视频输入信息；

(4)将上述混合的视频输入信息按照可视电话协议进行压缩和协议处理，并通过通信信道发送出去；

(5)通信对方在接收到上述信息后进行协议处理和解压缩，得到视频信息并在视频显示模块上显示出来。

在上述步骤中的非视频输入信息是指所有不是由摄像头或类似光学设备实时生成或事先生成的信息；

上述非视频输入信息可以是用户通过键盘输入的信息，包括数字或文字；

上述非视频输入信息可以是用户通过触摸屏输入的信息，包括用户在触摸屏上输入的几何坐标集合；

所述的将非视频输入信息转化为图像信息的步骤：

(1)获取非视频输入信息的几何数据，也就是说获取组成相关信息的所有的点的坐标集合，以及相关点的颜色信息；键盘输入的数字或文字，以及通过触摸屏输入的点的集合都被转换为相应的几何信息；

(2)根据当前视频电话系统设置的帧的格式(包括分辨率和颜色数)，上述输入信息的几何数据会进行相关的几何转换和颜色转换，以适应帧的格式；

将所述经过转换的图像信息插入或取代由摄像头生成的视频输入信息的步骤是指对由摄像头产生的每一个视频帧，将上述图像信息中包含的每一个点插入该帧中，也就是说将视频帧对应坐标上的颜色改为图像信息中对应的颜色，或

(1)先生成一个单色帧；

(2)再将上述图像信息中包含的每一个点插入该帧中，也就是说将视频帧对应，坐标上的颜色改为图像信息中对应的颜色；

(3)然后将上述帧插入或取代由摄像头产生的视频帧。

属于同一个总的发明构思，本发明提供一种将用户的非视频输入信息，通过可视电话系统进行传输的可视电话终端系统，其特征在于该可视电话终端是由以下子系统组成：视频输入子系统，视频输出子系统，音频输入子系统，音频输出子系统，视频编码子系统，视频解码子系统，音频编码子系统，音频解码子系统，可视电话传输与控制子系统，非视频输入子系统，图像信息转化生成子系统和图形信息插入子系统。

上述可视电话终端系统的特征在于，其中的图像信息转化生成子系统可以从非视频输入子系统获取用户的非视频输入信息，并将上述非视频输入信息转化为图像信息；其中的图形信息插入子系统可以将上述图像信息插入或取代由摄像头生成的视频输入信息；其中的视频编码子系统可以对上述混合的视频信息进行压缩；其中的可视电话传输与控制子系统可以将上述信息进行协议处理并发送出去。

上述可视电话终端系统的特征在于，其中的音频编解码子系统支持AMR-NB，AMR-WB，G.723或与之兼容的音频编解码格式；所述的视频编解码子系统支持H.263，H.264，MPeg4或与之兼容的视频编解码格式。

本发明的优点是：可以方便地在可视电话系统中发送非视频输入信息，同时对接收方没有更多的要求，只要接收方能进行基本的视频通话就能收到相应信息。

附图说明

图1是现有的普通可视电话系统组成示意图。

图2是本发明所述的将用户的非视频输入信息通过可视电话系统进行传输的可视电话终端系统组成示意图；

图3是本发明的一种将用户的非视频输入信息通过可视电话系统进行传输的流程示意图。

具体实施方式

下面根据图2和图3给出本发明一个较好实施例，并予以详细说明，以使本技术领域的技术人员更易于理解本发明的结构特征和方法特点，而不是用来限定本发明的范围。

如图2所示，本发明提出了一种将用户的非视频输入信息通过可视电话系统进行传输的可视电话终端系统，与普通的可视电话终端系统相比新增了3个子系统：非视频输入子系统(键盘，触摸屏等)21，图像信息转化生成子系统22，图形信息插入子系统23。

其中非视频输入子系统21可以获取用户通过键盘输入的数字或文字，也可以获取用户通过触摸屏输入的图形信息。

而图形信息转化生成子系统22则可以将上述从非视频输入子系统21获取的输入转化为图形信息。

如果相关输入是通过键盘输入的数字或文字(包括中文文字或其它语言文字)，那么可以通过以下2种方法来获取这些数字或文字的图形信息：

1.一般数字或文字的图形信息会存储在相关的字库文件中，字库文件包含了组成每个字符的所有点的坐标信息，因此，可以直接从字库文件中获取相关字符的图形信息；

2.用户输入数字和文字最终会显示到LCD显示器上，因此，可以通过LCD的驱动程序获取所有被显示出来的点的图形信息。

如果相关输入是通过触摸屏输入的，那么触摸屏的驱动程序会获取用户所输入的每个点的坐标信息，因此，只需要截获触摸屏的驱动程序所获取的输入就能得到用户输入的图形信息。

另外一方面，系统正在传输的可视电话的视频信息帧会有一个特定的格式，这个格式可以用分辨率(长度方向和宽度方向的点的个数)和颜色数(在一帧中最多可以支持的颜色数量)来描述。为了保证图形信息转化生成子系统生成的输出可以适应这样的帧格式，对生成的点阵将进行坐标转换和颜色转换。坐标转换的目的是保证相关图形点阵可以落在上述帧格式的范围，在这个前提下具体的转换规则有多种，但并不影响本发明的实施；同样的道理，颜色转换的目的是保证相关图形点阵的颜色信息可以由当前的帧格式表示，在这个前提下具体的转换规则有多种，但并不影响本发明的实施。

在本发明中，图形信息插入子系统23用于将上述图形点阵插入或取代视频输入子系统生成的视频信息帧。这里有两种方法：如果采用叠加方法，则将图形信息转化生成子系统输出的点阵叠加到视频输入子系统生成的视频帧的相应坐标点上，即实现了视频输入信息上叠加非视频输入信息的效果；如果采用替代方法，则利用图形信息转化生成子系统输出的点阵生成一个完整的视频帧，具体方法可以先生成一个单色帧，再将图形信息转化生成子系统输出的点阵叠加上去。最后再用生成的新视频帧替代掉视频输入子系统生成的视频帧。

本发明的整个流程100可以用图3来表示，首先S₁₀₀₀从非视频输入设备获取用户输入；S₁₀₀₁然后获取组成相关信息的所有的点的坐标集合，以及相关点的颜色信息，S₁₀₀₂并根据当前视频电话系统设置的帧的格式进行相关的几何转换和颜色转换；S₁₀₀₃如果采用叠加方法，S₁₀₀₅则将上述图形信息叠加到视频输入系统生成的视频帧上，S₁₀₀₄否则利用上述图形信息生成完整的新视频帧，并用其取代视频输入系统生成的视频帧；S₁₀₀₆，最后按照可视电话协议进行压缩和协议处理，并发送出去。

Claims

1、一种由可视电话终端传输非视频信息的方法，包括步骤：

S₁、获取用户的非视频输入信息；

S₂、将所获取的非视频输入信息转化成图像信息；

S₃、将所述的图像信息插入或取代由摄像头生成的视频输入信息，并形成混合的视频输入信息；

S₄、将形成的混合的视频输入信息按照可视电话协议进行压缩和协议处理，并通过通信信道发送出去；

S₅、通信对方在接收到上述信息后，进行协议处理和解压缩，得到视频信息并在视频模块上显示出来。

2、根据权利要求1所述的由可视电话终端传输非视频信息的方法，其特征在于，所述的非视频输入信息是指所有不是由摄像头或类似光学设备实时生成或事先生成的信息。

3、根据权利要求1或2所述的由可视电话终端传输非视频信息的方法，其特征在于，所述的非视频输入信息是指由用户通过键盘输入的信息，包括数字或文字。

4、根据权利要求1或2所述的由可视电话终端传输非视频信息的方法，其特征在于，所述的非视频信息是指由用户通过触摸屏输入的信息，包括用户在触摸屏上输入的几何坐标集合。

5、根据权利要求1所述的由可视电话终端传输非视频信息的方法，其特征在于，所述的非视频信息转化为图像信息的步骤是：先获取非视频输入信息的几何数据，再根据当前视频电话系统设置的包括分辨率和颜色数构成的帧格式，将所述的输入信息的几何数据进行相关的几何转换和颜色转换以适应帧的格式。

6、根据权利要求1或5所述的由可视电话终端传输非视频信息的方法，其特征在于，所述的获取非视频输入信息的几何数据是指获取组成相关信息的所有的点的坐标集合，以及相关点的颜色信息：键盘输入的数字或文字，以及通过触摸屏输入的点的集合都被转换为相应的几何信息。

7、根据权利要求1所述的由可视电话终端传输非视频信息的方法，其特征在于，所述的将经过转换的图像信息插入或取代由摄像头生成的视频输入信息的步骤是指对由摄像头产生的每一个视频帧，将所述图像信息中包含的每一个点插入该帧中，将该视频帧对应坐标上的颜色改为图像信息中对应的颜色。

8、根据权利要求1所述的由可视电话终端传输非视频信息的方法，其特征在于，所述的将经过转换的图像信息插入或取代由摄像头生成的视频输入信息，其步骤是：先生成一个单色帧，再将该图像信息中包含的每一个点插入该单色帧中，将视频帧对应坐标上的颜色改为图像信息中对应的颜色，然后，将所述帧插入或取代由摄像头产生的视频帧。

9、一种将用户的非视频输入信息通过可视电话系统进行传输的可视电话终端系统，包括如下子系统：视频输入子系统、视频输出子系统、音频输入子系统、音频输出子系统、视频编码子系统、视频解码子系统、音频编码子系统、音频解码子系统、可视电话传输与控制子系统，其特征在于，还包括非视频输入子系统、图像信息转化生成子系统和图形信息插入子系统：

该图像信息转化生成子系统连接非视频输入子系统获取用户的非视频输入信息，并将所述非视频输入信息转化为图像信息；该图像信息插入子系统将所述图像信息插入或取代由摄像头生成的视频输入信息；该视频编码子系统对所述混合的视频信息进行压缩；可视电话传输与控制子系统可以将所述信息进行协议处理并发送出去。

10、根据权利要求9所述的将用户的非视频输入信息通过可视电话系统进行传输的可视电话终端系统，其特征在于，所述的音频编解码子系统支持AMR-NB，AMR-WB，G7223音频编解码或与之兼容的格式。

11、根据权利要求9所述的将用户的非视频输入信息通过可视电话系统进行传输的可视电话终端系统，其特征在于，所述的视频编解码子系统支持H.263；H.264；MPeg4或与之相兼容的编解码格式。