CN108307137A - 一种将手机作为iptv机顶盒音源输入设备从而优化视频通话声音质量的方法 - Google Patents

一种将手机作为iptv机顶盒音源输入设备从而优化视频通话声音质量的方法 Download PDF

Info

Publication number
CN108307137A
CN108307137A CN201711380354.3A CN201711380354A CN108307137A CN 108307137 A CN108307137 A CN 108307137A CN 201711380354 A CN201711380354 A CN 201711380354A CN 108307137 A CN108307137 A CN 108307137A
Authority
CN
China
Prior art keywords
mobile phone
video
video calling
top box
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711380354.3A
Other languages
English (en)
Inventor
孙俊
徐琤
王远峰
成国强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianyi Smart Family Technology Co Ltd
Original Assignee
JIANGSU PUBLIC INFORMATION CO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JIANGSU PUBLIC INFORMATION CO Ltd filed Critical JIANGSU PUBLIC INFORMATION CO Ltd
Priority to CN201711380354.3A priority Critical patent/CN108307137A/zh
Publication of CN108307137A publication Critical patent/CN108307137A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephone Function (AREA)

Abstract

本发明公开了一种将手机作为IPTV机顶盒音源输入设备从而优化视频通话声音质量的方法，该方法将手机作为视频通话的音频输入设备，且通过蓝牙将机顶盒与手机进行配对连接，其中手机作为视频通话的音频输入设备的处理步骤为：a、视频通话软件通过摄像头采集视频流，通过蓝牙连接的手机获取音频流；b、视频通话软件对采集的音/视频流进行优化、合并处理；c、视频通话软件通过网络传输处理过的媒体流。本发明解决了摄像头自带麦克风的一系列缺点；通过时间戳对音、视频流进行校正解决音视频同步问题。

Description

一种将手机作为IPTV机顶盒音源输入设备从而优化视频通话 声音质量的方法
技术领域
本发明属于信息技术领域，具体是一种通过将手机作为IPTV机顶盒的音源输入设备从而优化视频通话声音质量的方法。
背景技术
基于机顶盒的视频通话业务，是一种随着IPTV的急速发展而来的新兴业务。
机顶盒通过USB口安装摄像头后，用户即可在机顶盒上安装视频通话软件，使用电视屏与其他已在机顶盒安装摄像头与视频通话软件的用户，或者手机与PAD进行视频通话。通话时，摄像头负责采集音频和视频源，通过编码处理后传输至另一端，接收端解码后播放音频与视频。
然而摄像头自带的麦克风，存在着以下缺点：
（1）指向性广：会将多余的背景音一并摄入，导致通话的另一端听到过多的杂音；
（2）拾音距离近：人必须在距离摄像头较近的位置通话，才能保证通话的清晰度；
（3）易产生回授音：普通摄像头自带的麦克风降噪功能较弱，加上灵敏度较高，极易产生回授音（啸叫）。
（4）多方通话时，多个摄像头同时采集音频并传输，导致通话效果比较嘈杂。
如何解决这些缺点，优化通话时的声音质量，是视频通话业务需要解决的一个问题。
发明内容
针对摄像头自带的麦克风指向性广、拾音距离近、易产生回授音的缺点，本发明利用蓝牙技术，在手机与机顶盒通过蓝牙连接后，将手机端作为视频通话的音频输入设备采集音源，不再使用摄像头自带的麦克风。
本发明采取的技术方案是：一种将手机作为IPTV机顶盒音源输入设备从而优化视频通话声音质量的方法，其特征在于将手机作为视频通话的音频输入设备，且通过蓝牙将机顶盒与手机进行配对连接，其中手机作为视频通话的音频输入设备的处理步骤为：
a、视频通话软件通过摄像头采集视频流，通过蓝牙连接的手机获取音频流；
b、视频通话软件对采集的音/视频流进行优化、合并处理；
c、视频通话软件通过网络传输处理过的媒体流。
进一步的，所述对音/视频流进行优化、合并处理的步骤为：
a、视频通话软件检测摄像头录制的视频流中是否存在音频数据，若存在，则删除音频帧数据；
b、对音频数据进行优化，通过AEC、AECM或NLMS算法抑制回声，降低底噪，突出人声；
c、通过时间戳对音、视频流进行序列校正，并合并音视频流；
d、输出合并成功的媒体流。
进一步的，所述设备的各部件之间的连接关系如下：
a、机顶盒通过USB接口连接摄像头；
b、机顶盒通过蓝牙与手机配对连接；
c、机顶盒通过HDMI接口或其他视频输出接口连接显示器；
d、机顶盒通过网线与路由器或光猫连接。
相对现有技术而言，本发明具有以下效果：
1、不会将多余的背景音一并摄入，导致通话的另一端听到过多的杂音。
2、采用蓝牙协议，可保证10米内的通话质量，使用者无需正对摄像头近距离说话。
3、可有效降低回授音，避免啸叫的产生。
4、多方通话时可通过手机按键发音，减少杂音与混音，提高多方通话的质量。
本发明的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
图1是本发明实现手机作为视频通话的音频输入设备的连接图。
图2是本发明实现手机作为视频通话的音频输入设备的总流程图。
图3是本发明实现手机作为视频通话的音频输入设备的媒体流处理流程图。
具体实施方式
下面结合附图和具体实施例对本发明进行详细说明。
本发明主要通过将手机端作为视频通话的音频输入设备采集音源解决摄像头自带麦克风的一系列缺点；通过时间戳对音、视频流进行校正解决音视频同步问题。
如图1所示，手机作为视频通话的音频输入设备的连接图，本发明设备之间的连接情况如下：
a、机顶盒通过USB接口连接摄像头；
b、机顶盒通过蓝牙与手机配对连接；
c、机顶盒通过HDMI接口或其他视频输出接口连接显示器；
d、机顶盒通过网线与路由器或光猫连接。
本发明实现手机作为视频通话的音频输入设备的总流程图如图2所示，包括以下步骤：
a、视频通话软件通过摄像头采集视频流，通过蓝牙连接的手机获取音频流；
b、视频通话软件对采集的音/视频流进行优化、合并处理
c、视频通话软件通过网络传输处理过的媒体流。
本发明优化音频流，整合音、视频流的流程如图3所示，包括以下步骤：
由于音、视频流的获取非同一个设备，故存在音、视频流不同步的问题，同时为了优化音频流，降低底噪突出人声，需要对音频流进行优化。
a、视频通话软件检测摄像头录制的视频流中是否存在音频数据，若存在，则去除音频数据；
b、对音频数据进行优化，通过AEC、AECM、NLMS等算法抑制回声，降低底噪，突出人声；
c、通过时间戳对音、视频流进行序列校正，并合并音视频流；
d、输出合并成功的媒体流。
以上显示和描述了本发明的基本原理、主要特征和优点。本领域的普通技术人员应该了解，上述实施例不以任何形式限制本发明的保护范围，凡采用等同替换等方式所获得的技术方案，均落于本发明的保护范围内。
本发明未涉及部分均与现有技术相同或可采用现有技术加以实现。

Claims (3)

1.一种将手机作为IPTV机顶盒音源输入设备从而优化视频通话声音质量的方法，其特征在于将手机作为视频通话的音频输入设备，且通过蓝牙将机顶盒与手机进行配对连接，其中手机作为视频通话的音频输入设备的处理步骤为：
a、视频通话软件通过摄像头采集视频流，通过蓝牙连接的手机获取音频流；
b、视频通话软件对采集的音/视频流进行优化、合并处理；
c、视频通话软件通过网络传输处理过的媒体流。
2.根据权利要求1所述的一种将手机作为IPTV机顶盒音源输入设备从而优化视频通话声音质量的方法，其特征在于所述对音/视频流进行优化、合并处理的步骤为：
a、视频通话软件检测摄像头录制的视频流中是否存在音频数据，若存在，则删除音频帧数据；
b、对音频数据进行优化，通过AEC、AECM或NLMS算法抑制回声，降低底噪，突出人声；
c、通过时间戳对音、视频流进行序列校正，并合并音视频流；
d、输出合并成功的媒体流。
3.根据权利要求1所述的一种将手机作为IPTV机顶盒音源输入设备从而优化视频通话声音质量的方法，其特征在于所述设备的各部件之间的连接关系如下：
a、机顶盒通过USB接口连接摄像头；
b、机顶盒通过蓝牙与手机配对连接；
c、机顶盒通过HDMI接口或其他视频输出接口连接显示器；
d、机顶盒通过网线与路由器或光猫连接。
CN201711380354.3A 2017-12-20 2017-12-20 一种将手机作为iptv机顶盒音源输入设备从而优化视频通话声音质量的方法 Pending CN108307137A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711380354.3A CN108307137A (zh) 2017-12-20 2017-12-20 一种将手机作为iptv机顶盒音源输入设备从而优化视频通话声音质量的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711380354.3A CN108307137A (zh) 2017-12-20 2017-12-20 一种将手机作为iptv机顶盒音源输入设备从而优化视频通话声音质量的方法

Publications (1)

Publication Number Publication Date
CN108307137A true CN108307137A (zh) 2018-07-20

Family

ID=62870374

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711380354.3A Pending CN108307137A (zh) 2017-12-20 2017-12-20 一种将手机作为iptv机顶盒音源输入设备从而优化视频通话声音质量的方法

Country Status (1)

Country Link
CN (1) CN108307137A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111355915A (zh) * 2018-12-20 2020-06-30 中国移动通信集团山东有限公司 一种视频通话方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101827242A (zh) * 2010-05-10 2010-09-08 南京邮电大学 一种基于网络电视机顶盒的可视电话系统实现方法
CN102857729A (zh) * 2012-08-08 2013-01-02 青岛海信宽带多媒体技术有限公司 基于机顶盒的视频通话方法及系统
CN202918417U (zh) * 2012-11-28 2013-05-01 青岛海信宽带多媒体技术有限公司 基于Android机顶盒的视频通话系统
CN103583032A (zh) * 2011-05-11 2014-02-12 锐德世加拿大公司 Ip网络中资源高效的声回波消除
CN206775634U (zh) * 2017-04-20 2017-12-19 山东新媒体研究院有限公司 一种手机与电视机的视频通话系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101827242A (zh) * 2010-05-10 2010-09-08 南京邮电大学 一种基于网络电视机顶盒的可视电话系统实现方法
CN103583032A (zh) * 2011-05-11 2014-02-12 锐德世加拿大公司 Ip网络中资源高效的声回波消除
CN102857729A (zh) * 2012-08-08 2013-01-02 青岛海信宽带多媒体技术有限公司 基于机顶盒的视频通话方法及系统
CN202918417U (zh) * 2012-11-28 2013-05-01 青岛海信宽带多媒体技术有限公司 基于Android机顶盒的视频通话系统
CN206775634U (zh) * 2017-04-20 2017-12-19 山东新媒体研究院有限公司 一种手机与电视机的视频通话系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
RALF STEINMETZ: "《多媒体技术 计算、通信和应用》", 31 December 2000, 清华大学出版社 *
海涛: "《计算机网络通信技术》", 30 September 2015, 重庆大学出版社 *
雷体南: "《现代教育技术教程 第3版》", 30 April 2016, 华中科技大学出版社 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111355915A (zh) * 2018-12-20 2020-06-30 中国移动通信集团山东有限公司 一种视频通话方法及系统
CN111355915B (zh) * 2018-12-20 2021-07-09 中国移动通信集团山东有限公司 一种视频通话方法及系统

Similar Documents

Publication Publication Date Title
US10129729B2 (en) Smartphone Bluetooth headset receiver
US9973561B2 (en) Conferencing based on portable multifunction devices
US8972251B2 (en) Generating a masking signal on an electronic device
JP2018528479A (ja) スーパー広帯域音楽のための適応雑音抑圧
US9712866B2 (en) Cancelling TV audio disturbance by set-top boxes in conferences
US20140278423A1 (en) Audio Transmission Channel Quality Assessment
CN112770212B (zh) 一种无线耳机、视频录制系统及方法、存储介质
TWI449438B (zh) 具有迴音消除機制之通訊系統及方法
CN114845144A (zh) 一种投屏方法、辅助投屏装置及存储介质
CN108307137A (zh) 一种将手机作为iptv机顶盒音源输入设备从而优化视频通话声音质量的方法
KR101280964B1 (ko) 영상통화를 위한 에코제거 기능을 가진 셋톱박스
US11363147B2 (en) Receive-path signal gain operations
CN204231479U (zh) 一种智能会议电话机
JP5745475B2 (ja) エコー消去方法とそのシステムと各装置
CN104301561A (zh) 一种智能会议电话机
CN104301564A (zh) 一种带嘴型识别的智能会议电话机
CN204231472U (zh) 一种带特征识别的智能会议电话机
CN204013869U (zh) 一种提升网络视频会议一体式终端音效的装置
CN204231481U (zh) 一种带嘴型识别的智能会议电话机
TWI783344B (zh) 聲源追蹤系統及其方法
CN102915743A (zh) 一种会议系统中播放提示语音的方法及设备
CN106375537A (zh) 一种现场声音优化装置、终端和方法
CN103188402B (zh) 具有共地机制的通讯系统
CN104301487A (zh) 一种带特征识别的智能会议电话机
CN204231480U (zh) 一种智能会议电话机

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20190401

Address after: 210006 Tongyu Building, 501 Zhongshan South Road, Nanjing City, Jiangsu Province

Applicant after: Tianyi Smart Family Technology Co., Ltd.

Address before: 210037 No. 260 Central Road, Xuanwu District, Nanjing City, Jiangsu Province

Applicant before: Jiangsu Public Information Co., Ltd.

TA01 Transfer of patent application right
RJ01 Rejection of invention patent application after publication

Application publication date: 20180720

RJ01 Rejection of invention patent application after publication