WO2012051870A1 - 一种基于蓝牙耳机实现可视通话的方法及可视通信终端 - Google Patents

一种基于蓝牙耳机实现可视通话的方法及可视通信终端 Download PDF

Info

Publication number
WO2012051870A1
WO2012051870A1 PCT/CN2011/076817 CN2011076817W WO2012051870A1 WO 2012051870 A1 WO2012051870 A1 WO 2012051870A1 CN 2011076817 W CN2011076817 W CN 2011076817W WO 2012051870 A1 WO2012051870 A1 WO 2012051870A1
Authority
WO
WIPO (PCT)
Prior art keywords
module
bluetooth
audio
communication terminal
bluetooth headset
Prior art date
Application number
PCT/CN2011/076817
Other languages
English (en)
French (fr)
Inventor
钟日丽
李香来
周敬高
Original Assignee
惠州Tcl移动通信有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 惠州Tcl移动通信有限公司 filed Critical 惠州Tcl移动通信有限公司
Priority to EP11833776.5A priority Critical patent/EP2632228A4/en
Priority to US13/878,896 priority patent/US8885011B2/en
Priority to EP20177144.1A priority patent/EP3726924A1/en
Publication of WO2012051870A1 publication Critical patent/WO2012051870A1/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/60—Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033—Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041—Portable telephones adapted for handsfree use
    • H04M1/6058—Portable telephones adapted for handsfree use involving the use of a headset accessory device connected to the portable telephone
    • H04M1/6066—Portable telephones adapted for handsfree use involving the use of a headset accessory device connected to the portable telephone including a wireless connection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/02—Details of telephonic subscriber devices including a Bluetooth interface
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/62—Details of telephonic subscriber devices user interface aspects of conference calls
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H04N2007/145—Handheld terminals

Definitions

  • the present invention relates to video call technology, and more particularly to a method for implementing a visual call based on a Bluetooth headset and a visual communication terminal.
  • Bluetooth headsets Bluetooth headsets
  • a Bluetooth headset can also have problems with how to transfer upstream and downstream voice to an audio device (Bluetooth headset).
  • Bluetooth headset for 3G mobile phones for video calls.
  • the technical problem to be solved by the present invention is to provide a liquid crystal display device and a driving method thereof, which can reduce the number of LEDs and reduce the cost.
  • an object of the present invention is to provide a method and a visual communication terminal for realizing a visual call based on a Bluetooth headset, which can realize a Bluetooth visual call through a Bluetooth headset.
  • a method for implementing a visual call based on a Bluetooth headset comprising the following steps: A. Open the visual communication terminal;
  • the VT CALL instruction and the AG instruction are sent by the AP module to the audio module;
  • step E includes:
  • the audio broadcast module starts the recording and broadcasting mode of the visual communication terminal, collects the uplink and downlink audio data, and transmits the uplink and downlink audio data to the Bluetooth module;
  • the Bluetooth module transmits uplink and downlink audio data to the Bluetooth headset
  • a method for implementing a visual call based on a Bluetooth headset comprising the following steps:
  • the VT CALL instruction and the AG instruction are sent by the AP module to the audio module;
  • the audio module switches the audio channel to the BTVTCALL channel according to the VT CALL instruction and the AG instruction;
  • the audio broadcast module starts the recording and broadcasting mode of the visual communication terminal, and collects the uplink and downlink audio data. And transmitting the uplink and downlink audio data to the Bluetooth module;
  • the Bluetooth module transmits the uplink and downlink audio data to the Bluetooth headset
  • the method for implementing a video call based on a Bluetooth headset wherein after the step H, the method further includes:
  • the method for implementing a video call based on a Bluetooth headset wherein, before step C, the method further includes:
  • VT CALL dialing is performed by the AP module.
  • step E further includes:
  • the method for implementing a video call based on a Bluetooth headset wherein the normal working mode includes a normal voice recording and broadcasting working mode and a normal Bluetooth calling mode.
  • the method for implementing a video call based on a Bluetooth headset wherein when the audio module transmits voice data to the Bluetooth module, the uplink and downlink audio data are transmitted through the PCM port.
  • a visual communication terminal for realizing a visual call based on a Bluetooth headset wherein the visual communication terminal is a 3G mobile phone, which includes:
  • An AP module for implementing various interface operations of the visual communication terminal; for switching the audio channel to the BTVTCAL channel, collecting the uplink and downlink audio data, and transmitting the uplink and downlink audio data to the audio module of the Bluetooth module; Bluetooth module for data transmission; and CP for data interaction with the AP module a DBB module; the AP module is connected to an audio module and a CP DBB module, and the Bluetooth module is connected to an AP module, an audio module, and a Bluetooth headset;
  • the AP module includes a system layer and a VTCALL unit, and the system layer is configured to search for a Bluetooth headset paired with the visual communication terminal, perform VTCALL dialing, and open an AG unit in the VTCALL unit and the Bluetooth module; Send a VTCALL instruction to the audio module.
  • a visual communication terminal for realizing a visual call based on a Bluetooth headset wherein:
  • An AP module for implementing various interface operations of the visual communication terminal; for switching the audio channel to the BTVTCAL channel, collecting the uplink and downlink audio data, and transmitting the uplink and downlink audio data to the audio module of the Bluetooth module; a Bluetooth module that performs data transmission; the AP module is connected to an audio module, and the Bluetooth module is connected to an AP module, an audio module, and a Bluetooth headset;
  • the AP module includes a system layer and a VTCALL unit, and the system layer is configured to search for a Bluetooth headset paired with the visual communication terminal, perform VTCALL dialing, and open an AG unit in the VTCALL unit and the Bluetooth module; Send a VTCALL instruction to the audio module.
  • the visual communication terminal for realizing a visual call based on the Bluetooth headset, further comprising a CP DBB module for performing data interaction with the AP module, wherein the CP DBB module is connected to the AP module.
  • the visual communication terminal that implements a visual call based on a Bluetooth headset, wherein the visual communication terminal is a 3G mobile phone.
  • the method for visually speaking based on a Bluetooth headset and the visual communication terminal provided by the invention change the broadcast path from the original SSP3 I 2 S mode to the SSP4 PCM mode (Pulse Code) without changing the hardware design. Modulation, pulse code modulation), and the recording path is changed from the original AP module (application processor) - audio module to the AP module - Bluetooth module mode, and other modules are passed through the AG unit (Audio Gateway). : AP module, Bluetooth module and SCO module (synchronous connection-oriented) are linked to realize BT VTCALL (Bluetooth video telephone call), and achieve the following benefits:
  • the uplink and downlink audio data are all transmitted by SCO. Only the Bluetooth headset is required to support the SCO function. It can be compatible with the Bluetooth headset that does not support A2DP (stereo Bluetooth headset), realizing the true sense of Bluetooth videophone.
  • the visual communication terminal has no limitations on the configuration requirements of the Bluetooth headset, and has a wide application range, thereby increasing the use range of the visual communication terminal.
  • the main modification of the present invention is placed in an audio driver (ie, an audio module), and other modules are mainly matched and debugged, and do not need to be modified too much, which has two advantages: First, strong portability, Because in the process of function migration, porting multiple modules is more complicated than porting one module. The porting of the present invention is equivalent to transplanting an audio driver, which does not appear unstable, interface confusion, etc. Second, it is convenient for unified management. Porting a module makes the chain interface driver flow simple and clear, simple and efficient.
  • FIG. 1 is a structural block diagram of a visual communication terminal according to an embodiment of the present invention.
  • FIG. 2 is a hardware block diagram of a communication interface of a visual communication terminal of the present invention.
  • FIG. 3 is a flowchart of a method for implementing a video call based on a Bluetooth headset provided by an embodiment
  • FIG. 4 is a flowchart of the operation of the VT CALL unit of the present invention.
  • Figure 5 is a flow chart showing the operation of the AG unit of the present invention.
  • FIG. 6 is a flow chart of the overall joint adjustment of the AP module, the Bluetooth module, and the Bluetooth headset of the present invention
  • FIG. 7 is a flowchart of the operation of the chain interface driver of the present invention
  • FIG. 9 is a flow chart showing the operation of each module of the visual communication terminal for performing a Bluetooth visual call.
  • the present invention provides a method for implementing a visual call based on a Bluetooth headset and a visual communication terminal.
  • a unique visual communication terminal framework is fundamentally designed for a Bluetooth video call, and the software and hardware platform of the visual communication terminal is first analyzed:
  • the Bluetooth module only considers ordinary voice calls, the internal and downstream channels of the CP DBB module (communication processor, ie, the communication baseband chip) are selected through the internal selection of the audio module, and the audio data of the visual communication terminal is composed of the AP module. This is a collection and transmission, so you must consider how the AP module can connect the upstream and downstream audio data to the Bluetooth module.
  • the CP DBB module communication processor, ie, the communication baseband chip
  • the audio framework basically does not need to be modified, but from the information obtained, this scheme is not feasible.
  • the main reasons are: First, the Bluetooth module and the Bluetooth headset do not support A2DP and SCO work at the same time; Second, the Bluetooth handle Even A2DP does not support it.
  • the SSP4 TX port (send port) of the AP module is connected to the PCM RX port (receive port) of the Bluetooth module
  • the SSP4 RX port of the AP module is the PCM TX port of the Bluetooth module.
  • the HI-Z port of the audio module In this way, the audio framework (ie the audio module) needs to be changed 4: First, the PLAYBACK path (broadcast path) is changed from the original SSP3 I2S mode to the SSP4 PCM mode, and the RECORD path (recording path) is changed from the original AP module-audio module to the AP module-Bluetooth module.
  • PLAYBACK and RECORD based on SSP4 port require concurrent operation.
  • AP module needs to be larger when INPUT DMA (input dynamic memory access) and OUTPUT DMA (output dynamic internal access). change.
  • the AP module and the Bluetooth module are connected through the PCM port, and the uplink and downlink audio data are transmitted through the SCO mode, that is, the SSP4 TX port of the AP module is connected with the PCM RX port of the Bluetooth module, and the AP is connected.
  • the SSP4 RX port of the module is connected to the PCM TX port of the Bluetooth module and the HI-Z port of the audio module.
  • the master-slave relationship between the SSP4 port of the AP module and the Bluetooth module can be flexibly adjusted. Since the conventional AP module and the Bluetooth module are both in the main mode, the GPIO (General Purpose Input Output) of the AP module is used in this embodiment.
  • the port) function reverses the SSP4 TX function and RX function of the AP module, thereby avoiding hardware modification and hardware compatibility.
  • the original AP module-audio module is changed to the AP module-Bluetooth module, and the audio module is modified in the places of INPUT DMA and OUTPUT DMA, that is, Modify the playback send buffer address.
  • the physical sample rate of the PLAYBACK channel needs to be changed to the same PCM (Pulse Code Modulation) sampling rate as the RECORD channel.
  • PCM Pulse Code Modulation
  • a visual communication terminal provided by an embodiment of the present invention includes an AP module 110, an audio module 120, and a Bluetooth module 130.
  • SSP4 port of the AP module 110 and PCM of the audio module 120 The PCM port of the Bluetooth module 130 is connected to the SSP4 port of the AP module 110 and the PCM port of the audio module 120, and the Bluetooth module 130 is connected to the Bluetooth headset 140 by the SCO method.
  • the AP module 110 uses an integrated chip of the Marvell PXA series
  • the audio module 120 uses an audio codec chip produced by Dialog
  • the Bluetooth module 130 uses a Bluetooth chip produced by CSR.
  • the AP module 110 is configured to implement various interface operations of the visual communication terminal, and includes a system layer (not shown) and a VTCALL module (not shown).
  • the system layer is configured to find a Bluetooth headset paired with the visual communication terminal, enter a dialing panel to perform VT CALL (video telephone call) dialing, and open an AG unit in the audio module 120 and the Bluetooth module 130.
  • An operation such as an AG command is sent to the audio module 120.
  • the VTCALL module is configured to send a VTCALL command to the audio module.
  • the audio module 120 is configured to decode and encode the audio signals output by the AP module 110 and the Bluetooth module 130, and switch the audio channel to the BTVTCAL channel according to the AG command and the VTCALL command, and collect the uplink and downlink audio data, and The uplink and downlink audio data is sent to the Bluetooth module.
  • the Bluetooth module 130 is configured to perform data transmission with the Bluetooth headset 140 according to the control command of the AP module 110.
  • the PCM port is used between the AP module 110 and the Bluetooth module 130 to implement voice signal transmission during the Bluetooth video call. Since the AP module 110, the audio module 120, and the Bluetooth module 130 are all connected to the PCM bus, the visual communication terminal has the following three working modes:
  • the Bluetooth module 130 is set to the master state, the AP module 110 is in the slave state, and the PCM port of the audio module 120 needs to be configured to be in a high impedance state.
  • the SSP port of the AP module 110 is simulated to be connected to the audio module 120 by the PCM timing, the AP module 110 is set to the master state, and the audio module 120 is set to the slave state, and the The PCM pin (PCM port) of the Bluetooth module 130 is configured to be in a high impedance state.
  • the Bluetooth module 130 is set to the master state, the audio module 120 is set to the slave state, and the SSP pin (SSP port) of the AP module 110 needs to be configured to be in a high impedance state.
  • the visual communication terminal further includes a CP DBB module 150 (communication baseband chip) for data interaction with the AP module, and the CP DBB module 150 communicates with the AP module 110 via a USB interface.
  • the visual communication path of the visual communication terminal is the same as that of the conventional videophone, and the uplink and downlink audio data is communicated between the AP module 110 and the CP DBB module 150 via the USB interface.
  • the AP module 110 sends the obtained digital uplink audio data to the CP DBB module 150 through the USB interface, and the latter transmits the data through the wireless baseband.
  • the CP DBB module 150 receives the digital downlink audio data from the wireless baseband. Then, it is sent to the AP module 110 through the USB interface, thereby completing the interaction of the uplink and downlink audio data.
  • the embodiment of the present invention further provides a method for implementing a visual call based on a Bluetooth headset.
  • the method is implemented by three aspects: interface call, parameter transmission, and data sharing. Specifically, the following steps are included:
  • the visual communication terminal is a 3G mobile phone.
  • the VGCALL dialing is required to enter the dial panel of the 3G mobile phone through the system layer of the AP module.
  • the VT CALL instruction and the AG instruction are sent by the AP module to the audio module.
  • the audio module switches the audio channel to a BTVTCALL channel according to the VT CALL command and the AG command.
  • the audio broadcast mode is started by the audio module, and the uplink and downlink audio data is collected, and the uplink and downlink audio data is transmitted to the Bluetooth module.
  • the audio module transmits data to the Bluetooth module, the PCM port full-duplex transmission VACALL uplink and downlink audio data is utilized, and the existing hardware resources are fully utilized.
  • the Bluetooth module transmits the uplink and downlink audio data to the Bluetooth headset.
  • the Bluetooth module performs uplink and downlink audio data transmission between the Bluetooth headset through the SOC mode.
  • the module mainly involved in the visual communication terminal includes an AP module, a Bluetooth module, and an audio module.
  • the AP module includes a system layer of the AP module and a VT CALL unit
  • the Bluetooth module includes an AG unit and an SCO unit. Therefore, each module needs to be individually debugged, and finally they are integrated for overall joint debugging.
  • FIG. 4 is a working flow chart of the VT CALL unit.
  • the visual communication terminal enters the dialing panel to perform VT CALL dialing; then, the VT CALL unit is started by the system layer of the AP module; after that, by the VT CALL unit
  • the audio module sends a VT CALL command, and the audio module collects uplink and downlink audio data.
  • the system layer of the AP module enters the dialing panel to perform VT CALL dialing; then the AG unit is opened by the system layer, and an AG command is sent to the audio module to notify that the AG unit is turned on; The audio channel is switched to the BTVTCALL channel by the audio module, and the AG unit enables the SCO unit to turn the SOC unit on.
  • FIG. 6 is a working flow diagram of overall joint debugging of each module.
  • the AP module of the visual communication terminal searches for a Bluetooth headset paired with the visual communication terminal.
  • the second step is performed by the AP module system.
  • the layer enters the dialing panel for VT CALL dialing; the third step is to open the VT CALL unit and the AG single
  • the fourth step the audio interface is switched to the PCM port by the audio module, that is, the audio channel is switched to the BTVTCALL channel, and the fifth step, the audio module transmits the uplink and downlink audio data to the Bluetooth module through the PCM port in full duplex transmission mode;
  • Six steps open the SCO unit in the Bluetooth module, and transmit analog audio data (ie, uplink and downlink audio data) to the Bluetooth headset through the SCO method.
  • the embodiment of the invention provides a chain interface driver unified management method, referred to as "chain interface driver", thereby effectively avoiding the above problems.
  • the system command of the AP module first sends an AG command to the audio module, and the VT CALL unit sends a VT CALL command to the audio module; then the audio channel is switched to the BTVTCALL channel through the audio module; then in the audio module, Bluetooth
  • the uplink and downlink audio data is transmitted between the module and the Bluetooth headset to realize the Bluetooth visual call; after the call ends, the audio module restores the channel in the same manner.
  • the chain interface is driven, and the other modules: the AP module, the Bluetooth module, and the SCO unit are linked and managed by the AG unit, thereby effectively avoiding isolation and inconsistency between the modules.
  • the collaborative work between the modules in the overall joint adjustment can be carried out in an orderly, synchronous and efficient manner, thus ensuring the stability and quality of the Bluetooth videophone.
  • the first step is to set the GPIO function of the AP module to reverse the SSP4 (PCM) TX function and the RX function of the AP module;
  • PCM SSP4
  • the AP module and the Bluetooth module are connected through the PCM port, and the master-slave relationship between the AP module and the Bluetooth module can be flexibly adjusted.
  • the embodiment of the present invention puts the modification in the audio module. Therefore, the Bluetooth module does not need to be modified, so the AP module is changed from the original PCM main state to the slave state, and the Bluetooth module remains in the main state.
  • this embodiment needs to be the AP module.
  • the TX and RX of the SSP4 port need to be reversed, and the SSP4 TX and RX inversion are selected by setting the GPIO function of the AP module, so as to avoid modifying the hardware and achieving hardware compatibility;
  • the original CODEC channel ie audio channel
  • the PCM channel of the module ie the BTGTCALL module
  • the second step is to change the broadcast transmission buffer address to SSP4 (PCM);
  • the broadcast send buffer address in the audio module is changed from the original SSP3 (I2S) to SSP4 (PCM).
  • the third step is to set the SSP4 interface of the AP module to the PCM slave mode;
  • the fourth step is to set the physical sample rate of the broadcast to the same PCM sample rate as the recording; since the broadcast channel is changed from the original SSP3 I2S mode (I2S bus mode) to the SSP4 PCM mode (PCM bus mode;),
  • the physical sample rate of the broadcast needs to be modified to the same PCM (pulse modulation) sampling rate as the recording, and the data format conversion is performed at the broadcast sample rate conversion layer of the audio module.
  • the fifth step is to set the downlink voice gain of the Bluetooth headset through the Bluetooth module.
  • the Bluetooth module By setting the Bluetooth module, modify the gain of the downlink voice of the Bluetooth headset. Because the interface of the Bluetooth module that sets the MIC (microphone) gain of the Bluetooth headset has been blocked, only the downlink voice gain can be set through the Bluetooth module, and the uplink voice gain needs to be It is set in the audio driver, and the operation of this voice setting is automatically completed when the AG unit turns on the SOC, which is not described here in the prior art.
  • the sixth step is to initialize the audio dynamic memory access in the AP module after the Bluetooth video call ends.
  • the AP module is correctly restored to the I2S broadcast after the BTVTCALL by initializing the audio dynamic memory access in the AP module. Channel, to avoid the phenomenon of dynamic memory access buffer hangs.
  • the embodiment of the present invention further provides a general working process for implementing a visual communication terminal to implement a Bluetooth visual call.
  • the workflow includes: a) opening a visual communication terminal, and the AP module in the visual communication terminal System layer looks for a Bluetooth headset paired with the visual communication terminal; b) by the AP module The system layer enters the dialing panel for VT CALL dialing; c) the VT CALL unit (ie VT CALL application) and the AG unit in the Bluetooth module are opened by the system layer; d) the AG layer is sent to the audio module by the system layer, and by the VT The CALL unit sends a VT CALL command to the audio module; e) the audio broadcast function of the visual communication terminal is activated by the audio module, and the VT CALL uplink and downlink audio data is collected; f) the audio module transmits the digital audio data in full dual mode through the PCM interface; g) transmitting analog audio data to the Bluetooth headset through the SOC transmission mode by the Bluetooth module;
  • the main operation of the visual communication terminal is completed by the audio module.
  • the following is respectively to broadcast the PCM port, the SSP of the AP module is simulated into the PCM slave mode, and the broadcast channel is restored by the PCM mode.
  • the implementation method of the uplink voice digital gain amplification is described in detail:
  • a. Use ordinary headphone channel to debug, switch the headphone broadcast channel, change the I2S broadcast channel originally input to the headphone channel to PCM broadcast channel, and then remove the original enabled I2S port of the AP module; b, turn the broadcast channel from the original The I2S port is modified to be a PCM port; c. Modify the broadcast dynamic memory access channel, and change the original XLLP-DMAC-SSP-3-TX to: XLLP-DMAC-SSP-4-TX; d. Set the broadcast channel.
  • the Loopback Mode of the SSP port of the AP module is used, which can realize the internal loop of the PCM port transmission and reception, that is, The broadcast and recording are self-looping, and their setting positions are as follows:
  • the module for amplifying the uplink voice signal has a Bluetooth module.
  • the audio module according to the principle of signal amplification, the gain amplification of the signal is generally done in two stages:
  • Analog gain amplification The MIC gain amplification is performed in the Bluetooth module. This work is automatically done by the Bluetooth module after the visual communication terminal is equipped with a Bluetooth headset. In order to be compatible with the normal conversation of the Bluetooth headset, this analog gain cannot be placed too large, so that both the normal Bluetooth call and the Bluetooth visual call can be heard clearly.
  • the recording digital gain amplification function is added to the recording portion of the audio module, but the function is not performed in the audio design of the AP module, and the digital gain amplification function of the broadcast has been implemented, so the embodiment of the present invention can The recording digital gain amplification function is designed with reference to the digital gain amplification function of the broadcast.
  • the present invention provides a method for visually speaking based on a Bluetooth headset and a visual communication terminal, and changes the software to change the broadcast path from the original SSP3 I 2 S mode to SSP4 without changing the hardware design.
  • PCM mode Pulse Code Modulation
  • the recording path is changed from the original AP module-audio module to the AP module-Bluetooth module mode.
  • Other modules are passed through the AG unit: AP module, Bluetooth module and SCO (synchronous Connection-oriented, synchronous connection-oriented) links to achieve Bluetooth video calls, and achieve the following benefits:
  • the Bluetooth visual call can be realized completely by modifying the software, and the full-duplex operation through the PCM port during recording and broadcasting can make full use of the existing hardware resources, thereby greatly reducing the cost.
  • the uplink and downlink audio data are all transmitted by SCO. Only the Bluetooth headset is required to support the SCO function. It can be compatible with the Bluetooth headset that does not support A2DP (stereo Bluetooth headset), realizing the true sense of Bluetooth videophone.
  • the visual communication terminal has no limitations on the configuration requirements of the Bluetooth headset, and has a wide application range, thereby increasing the use range of the visual communication terminal.
  • the invention uses a self-designed "chain interface driver" to link the VT CALL unit (video telephone call), the audio module, the SCO module and the AG unit to realize BTVTCALL (bluetooth video telephone call, Bluetooth can be used).
  • VT CALL unit video telephone call
  • audio module audio module
  • SCO module SCO module
  • AG unit AG unit
  • BTVTCALL blue video telephone call
  • Bluetooth Bluetooth
  • data sharing is through the way of memory, so that hierarchical design and interface calls are clear, communication between modules is stable and efficient.
  • the main modification of the present invention is placed in an audio driver (ie, an audio module), and other modules are mainly matched and debugged, and do not need to be modified too much, so that there are two advantages: First, strong portability, Because in the process of function migration, porting multiple modules is more complicated than porting one module.
  • the porting of the present invention is equivalent to transplanting an audio driver, which does not appear unstable, interface confusion, etc. Second, it is convenient for unified management. Porting a module makes the chain interface driver flow simple and clear, simple and efficient.

Abstract

本发明公开了一种基于蓝牙耳机实现可视通话的方法及可视通信终端，其方法包括：由可视通信终端中的AP模块查找与其配对的蓝牙耳机；启动AP模块中的VTCALL单元和蓝牙模块中的AG单元；由AP模块向音频模块发送VTCALL指令和AG指令；音频模块根据VTCALL指令和AG指令，将音频通道切换为BTVTCALL通道；由音频模块启动录音播音功能，并采集上下行音频数据，且传输给蓝牙模块；蓝牙模块将上下行音频数据传输给蓝牙耳机；在CPDBB模块、AP模块、音频模块、蓝牙模块和蓝牙耳机之间进行上下行音频数据交互，实现蓝牙可视通话。本发明通过修改软件实现蓝牙可视通话，充分利用了现有硬件资源降低了成本。

Description

一种基于蓝牙耳机实现可视通话的方法及可视通信终端
【技术领域】
本发明涉及可视通话技术， 特别涉及一种基于蓝牙耳机实现可视通话的方 法及可视通信终端。
【背景技术】
随着视频电话在 3G Ord-generation, 第三代移动通信技术）手机上的普及 和应用， 人们也会越来越多地使用各种音频设备 (蓝牙耳机 )连接 3G手机进行 视频通话， 与普通视频通话一样， 使用蓝牙耳机进行视频通话也会存在如何将 上下行语音转移到音频设备（蓝牙耳机）上的问题。
目前， 按照传统的可视电话框架来设计蓝牙可视通话在硬件上存在技术冲 突。 传统的解决方法一般为： 在保持原有的总体设计框架不变的基础上， 通过 简单的硬件接口重组， 来避免技术冲突。
而上述的方法不仅受到蓝牙芯片功能的限制， 而且对于不支持 A2DP ( Advanced Audio Distribution Profile 蓝牙音频传输模型协定， 即立体声耳机 ) 的蓝牙耳机来说也不兼容， 这导致目前市场上还没有出现支持蓝牙耳机实现可 视通话的 3G手机。
因而， 现有技术还有待改进和提高。
【发明内容】
本发明主要解决的技术问题是提供一种液晶显示装置及其驱动方法， 以减 少 LED颗数， 降低成本的问题。
鉴于上述现有技术的不足之处， 本发明的目的在于提供一种基于蓝牙耳机 实现可视通话的方法和可视通信终端， 能通过蓝牙耳机实现蓝牙可视通话。
为了达到上述目的， 本发明釆取了以下技术方案：
一种基于蓝牙耳机实现可视通话的方法， 该方法包括以下步骤： A、 开启可视通信终端；
B、 由可视通信终端中的 AP模块查找与其配对的蓝牙耳机；
C、 启动 AP模块中的 VT CALL单元和蓝牙模块中的 AG单元；
D、 由 AP模块向音频模块发送 VT CALL指令和 AG指令；
E、音频模块根据 VT CALL指令和 AG指令，将音频通道切换为 BTVTCALL 通道， 其中， 步骤 E包括：
El、 设置 AP模块的 GPIO功能， 使 AP模块的 SSP4 TX和 RX反转；
E2、 将播音发送緩冲器地址改为 SSP4;
E3、 将 AP模块的 SSP4接口设置为 PCM从模式；
E4、 将播音的物理釆样率设置为与录音相同的 PCM的釆样率；
E5、 通过蓝牙模块设置蓝牙耳机下行语音增益。
F、由音频模块启动可视通信终端的录音播音模式，并釆集上下行音频数据， 且将该上下行音频数据传输给蓝牙模块；
G、 蓝牙模块将上下行音频数据传输给蓝牙耳机；
H、 在 CP DBB模块、 AP模块、 音频模块、 蓝牙模块和蓝牙耳机之间进行 上下行音频数据交互， 实现蓝牙可视通；
I、 关闭 AP模块、 蓝牙模块和音频模块结束蓝牙视通话；
J、 将音频通道恢复为常规工作模式。
一种基于蓝牙耳机实现可视通话的方法， 其中， 该方法包括以下步骤：
A、 开启可视通信终端；
B、 由所述可视通信终端中的 AP模块查找与其配对的蓝牙耳机；
C、 启动 AP模块中的 VT CALL单元和蓝牙模块中的 AG单元；
D、 由 AP模块向音频模块发送 VT CALL指令和 AG指令；
E、 音频模块根据所述 VT CALL 指令和 AG 指令， 将音频通道切换为 BTVTCALL通道；
F、由音频模块启动可视通信终端的录音播音模式，并釆集上下行音频数据， 且将该上下行音频数据传输给蓝牙模块；
G、 蓝牙模块将所述上下行音频数据传输给蓝牙耳机；
H、 在 CP DBB模块、 AP模块、 音频模块、 蓝牙模块和蓝牙耳机之间进行 上下行音频数据交互， 实现蓝牙可视通。
所述的基于蓝牙耳机实现可视通话的方法， 其中， 在步骤 H之后， 所述的 方法进一步包括：
I、 关闭 AP模块、 蓝牙模块和音频模块结束蓝牙视通话；
J、 将音频通道恢复为常规工作模式。
所述的基于蓝牙耳机实现可视通话的方法， 其中， 在步骤 C之前， 所述的 方法进一步包括：
C0、 由 AP模块进行 VT CALL拨号。
所述的基于蓝牙耳机实现可视通话的方法， 其中， 所述的步骤 E还包括：
El、 设置 AP模块的 GPIO功能， 使 AP模块的 SSP4 TX和 RX反转；
E2、 将播音发送緩冲器地址改为 SSP4;
E3、 将 AP模块的 SSP4接口设置为 PCM从模式；
E4、 将播音的物理釆样率设置为与录音相同的 PCM的釆样率；
E5、 通过蓝牙模块设置蓝牙耳机下行语音增益。
所述的基于蓝牙耳机实现可视通话的方法， 其中， 所述常规工作模式包括 普通语音录音及播音工作模式和普通蓝牙通话模式。
所述的基于蓝牙耳机实现可视通话的方法， 其中， 在音频模块向蓝牙模块 传输语音数据时通过 PCM端口全双工传输上下行音频数据。
一种基于蓝牙耳机实现可视通话的可视通信终端， 其中， 可视通信终端为 3G手机， 其包括：
用于实现可视通信终端各种界面操作的 AP模块； 用于将音频通道切换为 BTVTCAL通道后釆集上下行音频数据，并将该上下行音频数据发送给蓝牙模块 的音频模块； 用于进行数据传输的蓝牙模块； 及与 AP模块进行数据交互的 CP DBB模块;所述 AP模块与音频模块和 CP DBB模块连接， 所述蓝牙模块与 AP 模块、 音频模块和蓝牙耳机连接；
其中， 所述 AP模块包括系统层和 VTCALL单元， 所述系统层用于查找与 可视通信终端配对的蓝牙耳机，进行 VTCALL拨号，打开 VTCALL单元和蓝牙 模块中的 AG单元； 所述 VTCALL模块用于向音频模块发送 VTCALL指令。
一种基于蓝牙耳机实现可视通话的可视通信终端， 其中， 包括：
用于实现可视通信终端各种界面操作的 AP模块； 用于将音频通道切换为 BTVTCAL通道后釆集上下行音频数据，并将该上下行音频数据发送给蓝牙模块 的音频模块； 及用于进行数据传输的蓝牙模块； 所述 AP模块与音频模块连接， 所述蓝牙模块与 AP模块、 音频模块和蓝牙耳机连接；
其中， 所述 AP模块包括系统层和 VTCALL单元， 所述系统层用于查找与 可视通信终端配对的蓝牙耳机，进行 VTCALL拨号，打开 VTCALL单元和蓝牙 模块中的 AG单元； 所述 VTCALL模块用于向音频模块发送 VTCALL指令。
所述的基于蓝牙耳机实现可视通话的可视通信终端， 其中，还包括与 AP模 块进行数据交互的 CP DBB模块， 所述 CP DBB模块与 AP模块连接。
所述的基于蓝牙耳机实现可视通话的可视通信终端， 其中， 所述可视通信 终端为 3G手机。
本发明提供的基于蓝牙耳机实现可视通话的方法和可视通信终端， 在不改 变硬件设计的情况下， 通过修改软件将播音通路由原来的 SSP3 I2S模式改为 SSP4 PCM模式（Pulse Code Modulation, 脉码调制）， 并将录音通路由原来的 AP模块（application processor, 应用处理器） -音频模块改为 AP模块-蓝牙模 块的模式， 通过 AG单元（ Audio Gateway, 音频网关）将其它模块： AP模块、 蓝牙模块和 SCO模块 ( synchronous connection-oriented , 同步面向连接 )链接起 来实现了 BT VTCALL ( bluetooth video telephone call蓝牙可视电话）， 并实现了 以下有益效果：
1、 在不改变硬件设计的情况下， 完全通过修改软件实现蓝牙可视通话， 并 在录音和播音时通过音频模块和蓝牙模块的 PCM端口全双工工作， 充分利用了 现有硬件资源， 从而大大降低了成本。
2、 釆用上行、 下行音频数据均走 SCO传输的方式， 只要求蓝牙耳机支持 SCO 功能， 能兼容不支持 A2DP (立体声蓝牙耳机） 的蓝牙耳机， 实现了真正 意义上的蓝牙可视电话， 使可视通信终端对蓝牙耳机的配置要求没有局限性， 应用范围广， 从而增加了可视通信终端的使用范围。
3、 为了便于统一管理， 本发明将主要的修改放在音频驱动 （即音频模块） 中， 其它模块主要是配合和调试， 不需要太大修改， 这样有两个优点： 一是移 植性强， 因为在功能的移植过程中， 移植多个模块比移植一个模块要复杂的多， 本发明的移植则相当于移植一个音频驱动， 不会出现不稳定， 接口混乱等现象； 二是便于统一管理， 移植一个模块使链式接口驱动的流程简洁明朗， 操作简单、 高效。
4、 随着 3G技术的不断发展， 可视电话显得越来越重要， 其使用频率也越 来越高， 釆用各种音频设备进行可视通话越来越适应人们的需要， 而蓝牙耳机 的使用是一个趋势， 所以使用蓝牙耳机拨打可视电话将逐渐成为一种潮流， 也 将成为可视通信终端的必备功能。
【附图说明】
为了更清楚地说明本发明实施例中的技术方案， 下面将对实施例描述中所 需要使用的附图作简单地介绍， 显而易见地， 下面描述中的附图仅仅是本发明 的一些实施例， 对于本领域普通技术人员来讲， 在不付出创造性劳动的前提下， 还可以根据这些附图获得其他的附图。 其中：
图 1为本发明实施例提供的可视通信终端的结构框图；
图 2为本发明可视通信终端通讯接口的硬件框图；
图 3为实施例提供的基于蓝牙耳机实现可视通话的方法流程图；
图 4为本发明 VT CALL单元的工作流程图； 图 5为本发明 AG单元的工作流程图；
图 6为本发明 AP模块、 蓝牙模块、 蓝牙耳机进行整体联调的流程图； 图 7为本发明链式接口驱动的工作流程图；
图 8为本发明 BTVTCALL音频通道切换的工作流程图；
图 9为本发明可视通信终端进行蓝牙可视通话的各模块的工作流程图。
【具体实施方式】
本发明提供一种基于蓝牙耳机实现可视通话的方法及可视通信终端， 为使 本发明的目的、 技术方案及效果更加清楚、 明确， 以下参照附图并举实例对本 发明进一步详细说明。 应当理解， 此处所描述的具体实施例仅用以解释本发明， 并不用于限定本发明。
为了实现蓝牙视频通话， 在本发明实施例中从根本上为蓝牙视频通话设计 独特的可视通信终端框架， 首先对可视通信终端的软硬件平台进行分析：
一、 在蓝牙模块只考虑普通语音通话时， 即通过音频模块内部选择打通 CP DBB 模块 (通讯处理器， 即通讯基带芯片）的上行、 下行通路， 而可视通信终端 的音频数据均由 AP模块釆集和发送， 所以此处必须考虑 AP模块怎么把上行、 下行的音频数据和蓝牙模块对接起来。
二、在下行音频数据走蓝牙 A2DP,上行音频数据走 SCO方式传输时,由 AP 模块的 SSP4端口与蓝牙模块 PCM端口和音频模块的 HI-Z (高阻态）端口 （即 音频模块的 PCM端口）对接。 这种方式下音频框架基本不用做任何改动， 但从 得到的信息看这种方案不可行， 其主要原因是： 第一、 蓝牙模块和蓝牙耳机不 支持 A2DP和 SCO同时工作； 第二、 蓝牙手柄连 A2DP都不支持。
三、在釆用上下行音频数据均走 SCO传输时， AP模块的 SSP4 TX端口（发 送端口 )对蓝牙模块的 PCM RX端口 （接收端口）， AP模块的 SSP4 RX端口对 蓝牙模块的 PCM TX端口和音频模块的 HI-Z端口。 这种方式下， 音频框架（即 音频模块 )需要改动 4艮大： 第一、 PLAYBACK通路（播音通路）由原来的 SSP3 I2S模式变为 SSP4 PCM 模式， RECORD通路（录音通路 ) 由原来的 AP模块-音频模块改为 AP模块-蓝 牙模块。
第二、 基于 SSP4端口的 PLAYBACK (播音）和 RECORD (放音）要求并 发运行， AP模块在 INPUT DMA (输入动态内存存取 )和 OUTPUT DMA (输 出动态内在存取） 时都要做较大的改动。
第三、 由于 PLAYBACK和 RECORD需要并发运行， PLAYBACK的物理釆 样率和釆样位数受限， 所以音频模块的釆样率转换层也要改写。
根据上面的分析， 本实施方式釆用将 AP模块与蓝牙模块之间通过 PCM端 口对接， 上下行音频数据均通过 SCO方式传输， 即将 AP模块的 SSP4 TX端口 与蓝牙模块的 PCM RX端口对接， AP模块的 SSP4 RX端口对蓝牙模块的 PCM TX端口和音频模块的 HI-Z端口。
其中， AP模块的 SSP4端口和蓝牙模块的主从关系可以灵活调整， 由于传 统的 AP模块和蓝牙模块都是主模式， 所以本实施例通过 AP模块的 GPIO ( General Purpose Input Output,通用输入 /输出端口）功能将 AP模块的 SSP4 TX 功能和 RX功能反转， 从而可以避免修改硬件， 做到硬件的兼容性。
并且， 由于 AP模块的 SSP4 端口 （ PCM ) 的 PLAYBACK和 RECORD并 发运行， 由原来的 AP模块-音频模块改为 AP模块 -蓝牙模块， 在音频模块的有 关 INPUT DMA和 OUTPUT DMA的地方进行修改， 即修改 playback发送緩冲 器地址。
由于 PLAYBACK通道由原来的 SSP3 I2S模式变为 SSP4 PCM模式， PLAYBACK通道的物理釆样率需要修改为与 RECORD通道相同的 PCM (脉码 调制）的釆样率。本实例中只需在音频模块的 PLAYBACK釆样率转换层进行修 改即可。
请参阅图 1 , 本发明实施例提供的可视通信终端包括 AP模块 110、 音频模 块 120和蓝牙模块 130。 所述 AP模块 110的 SSP4端口与音频模块 120的 PCM 端口连接， 所述蓝牙模块 130的 PCM端口分别与 AP模块 110的 SSP4端口和 音频模块 120的 PCM端口连接， 蓝牙模块 130通过 SCO方式与蓝牙耳机 140 连接。
其中， 所述 AP模块 110釆用 marvell PXA系列的集成芯片， 音频模块 120 釆用 Dialog公司生产的音频编解码芯片， 蓝牙模块 130釆用 CSR公司生产的蓝 牙芯片。
所述 AP模块 110用于实现可视通信终端各种界面操作， 其包括系统层 (图 中未示出）和 VTCALL模块（图中未示出）。 其中， 所述系统层用于查找与该 可视通信终端配对的蓝牙耳机， 进入拨号面板进行 VT CALL ( video telephone call, 可视电话）拨号， 打开音频模块 120和蓝牙模块 130中的 AG单元， 向音 频模块 120 发送 AG指令等操作。 所述 VTCALL模块用于向音频模块发送 VTCALL指令。
音频模块 120用于对 AP模块 110和蓝牙模块 130输出的音频信号进行解码 和编码， 还可根据所述 AG指令和 VTCALL指令将音频通道切换为 BTVTCAL 通道后釆集上下行音频数据， 并将该上下行音频数据发送给蓝牙模块。 蓝牙模 块 130用于根据 AP模块 110的控制指令与蓝牙耳机 140进行数据传输。
所述的可视通信终端在釆用上下行语音数据均走 SCO方式传输时， 在 AP 模块 110和蓝牙模块 130之间使用 PCM端口， 用于实现蓝牙可视通话时的语音 信号传输。 由于 AP模块 110、 音频模块 120、 蓝牙模块 130都连接在 PCM总线 上， 所以可视通信终端有以下三种工作方式：
在可视通信终端进行蓝牙可视通话时， 将蓝牙模块 130设为主状态， AP模 块 110为从状态， 并需要将音频模块 120的 PCM口配置成高阻状态。
在可视通信终端进行普通录音、播音功能时， 由 AP模块 110的 SSP端口模 拟成 PCM时序与音频模块 120连接，将 AP模块 110设为主状态，音频模块 120 设为从状态， 并需要将蓝牙模块 130的 PCM引脚（PCM端口 ) 配置成高阻状 态。 在可视通信终端进行普通蓝牙通话功能时， 将蓝牙模块 130设为主状态， 将音频模块 120设置从状态， 并需要将 AP模块 110的 SSP引脚（ SSP端口）要 配置成高阻状态。
请参阅图 2,所述的可视通信终端还包括与 AP模块进行数据交互的 CP DBB 模块 150(通讯基带芯片 ),所述 CP DBB模块 150与 AP模块 110之间通过 USB 接口进行通讯。 本实施例中， 可视通信终端的可视通讯通路与传统可视电话一 样， 其上下行音频数据在 AP模块 110和 CP DBB模块 150之间通过 USB接口 进行通讯。
上行通话中， AP模块 110将得到的数字上行音频数据通过 USB接口发送 给 CP DBB模块 150, 后者再通过无线基带发送出去； 下行通话中， CP DBB模 块 150从无线基带接收数字下行音频数据， 再将其通过 USB接口发送给 AP模 块 110, 从而完成上下行音频数据的交互。
基于上述的可视通信终端， 本发明实施例还对应提供一种基于蓝牙耳机实 现可视通话的方法， 请参阅图 3 , 所述的方法通过接口调用、 参数传递和数据共 享这三个方面实现， 具体包括以下步骤：
5101、 开启可视通信终端；
5102、 由所述可视通信终端中的 AP模块查找与其配对的蓝牙耳机；
5103、 启动 AP模块中的 VT CALL单元和 AG单元；
本实施例中， 可视通信终端为 3G手机， 在 VT CALL单元和 AG单元启动 之前， 还需要通过 AP模块的系统层进入 3G手机的拨号面板进行 VGCALL拨 号。
5104、 由 AP模块向音频模块发送 VT CALL指令和 AG指令；
5105、 音频模块根据所述 VT CALL指令和 AG指令， 将音频通道切换为 BTVTCALL通道；
5106、 由音频模块启动可视通信终端的录音播音模式， 并釆集上下行音频 数据， 且将该上下行音频数据传输给蓝牙模块； 在音频模块向蓝牙模块传输数据时釆用 PCM端口全双工传输 VACALL上 下行音频数据， 充分利用了现有硬件资源。
5107、 蓝牙模块将所述上下行音频数据传输给蓝牙耳机； 在本实施方式中， 所述蓝牙模块通过 SOC方式与蓝牙耳机之间进行上下行音频数据传输；
5108、 由 CP DBB模块、 AP模块、 音频模块、 蓝牙模块和蓝牙耳机之间进 行上下行音频数据交互， 实现蓝牙可视通话；
5109、 关闭 AP模块、 蓝牙模块和音频模块结束蓝牙可视通话；
5110、 将音频通道恢复为常规工作模式。
由于可视通信终端涉及的模块较多， 所以在设计时需要将各模块分别进行 单独设计， 并单独进行功能测试， 在测试各模块单独工作正常后， 再将它们进 行联调。
根据这样的设计原理， 可视通信终端主要涉及的模块包括 AP模块、蓝牙模 块和音频模块， 其中， 所述 AP模块包括 AP模块的系统层和 VT CALL单元， 蓝牙模块包括 AG单元和 SCO单元。 因此先需要对各个模块进行单独调试， 最 终将它们整合起来进行整体联调。
请参阅图 4, 其为 VT CALL单元的工作流程图， 首先， 由可视通信终端进 入拨号面板进行 VT CALL拨号； 然后， 由 AP模块的系统层启动 VT CALL单 元； 之后， 由 VT CALL单元向音频模块发送 VT CALL指令， 音频模块釆集上 下行音频数据。
请参阅图 5, 其为 AG单元的工作流程图， 先由 AP模块的系统层进入拨号 面板进行 VT CALL拨号； 然后由系统层打开 AG单元， 并给音频模块发送 AG 指令通知 AG单元已打开； 再由音频模块将音频通道切换为 BTVTCALL通道， 同时 AG单元使能 SCO单元， 使 SOC单元打开。
请参阅图 6, 其为各模块进行整体联调的工作流程图， 第一步、 由可视通信 终端的 AP模块查找与该可视通信终端配对的蓝牙耳机； 第二步、 由 AP模块系 统层进入拨号面板进行 VT CALL拨号； 第三步、 开启 VT CALL单元和 AG单 元； 第四步、 由音频模块将音频接口切换为 PCM端口， 即将音频通道切换为 BTVTCALL通道， 第五步、 音频模块通过 PCM端口以全双工传输方式向蓝牙 模块传输上下行音频数据； 第六步、 开启蓝牙模块中的 SCO单元， 并通过 SCO 方式向蓝牙耳机传输模拟音频数据 (即上下行音频数据）。
因此， 在涉及到多个模块配合完成工作的技术中， 其工作流程非常重要， 否则会出现意想不到的结果， 譬如： 导致功能不稳定、 影响其它功能、 不能正 常的恢复相关功能的状态等。 本发明实施例提供了一种链式接口驱动统一管理 方法， 简称"链式接口驱动"， 从而有效避免了上述问题。
请参阅图 7, 首先由 AP模块的系统层向音频模块发送 AG指令， 同时由 VT CALL单元向音频模块发送 VT CALL指令； 然后通过音频模块将音频通道 切换到 BTVTCALL通道； 之后在音频模块、 蓝牙模块和蓝牙耳机之间传输上下 行音频数据实现蓝牙可视通话； 在通话结束之后音频模块釆用同样的方式恢复 通道。
本发明实施例釆用链式接口驱动的方式， 通过 AG单元将其它模块： AP模 块、 蓝牙模块、 SCO单元链接起来进行统一管理， 从而有效避免各模块之间的 孤立性、 不协调性， 使得在整体联调时模块之间的协同工作能够有序、 同步、 高效进行， 从而保障了蓝牙可视电话的稳定性和质量。
请参阅图 8, 音频模块将音频通道切换为 BTVTCALL通道的主要工程过程 下：
第一步、 设置 AP模块的 GPIO功能， 使 AP模块的 SSP4 ( PCM ) TX功 能和 RX功能反转；
在本实施方式中， AP模块与蓝牙模块之间通过 PCM端口对接， 其中 AP 模块和蓝牙模块的主从关系可以灵活调整， 为了统一管理通道切换， 本发明实 施例将修改放在音频模块中， 而使蓝牙模块不需要修改， 所以将 AP模块由原来 的 PCM主状态改为从状态， 而蓝牙模块则保持主状态不变。
由于原来 AP模块和蓝牙模块都是主模式， 所以本实施例需要将 AP模块的 SSP4端口的 TX、RX需要反接，并通过设置 AP模块的 GPIO功能选择 SSP4 TX、 RX反转， 这样可以避免修改硬件， 做到硬件的兼容性；
由于 ΑΡ模块的 SSP4 PCM端口的播音和录音并发运行， 并且都由原来的 ΑΡ模块-音频模块改为 ΑΡ模块 -蓝牙模块， 所以在音频模块中将原来的 CODEC 通道 (即音频通道） 改为蓝牙模块的 PCM通道 (即 BTGTCALL模块）。
第二步、 将播音发送緩冲器地址改为 SSP4 ( PCM );
在音频模块中播音发送緩冲器地址由原来的 SSP3(I2S)改为 SSP4(PCM)。 第三步、 将 AP模块的 SSP4接口设置为 PCM从模式；
由于 BTVTCALL通道中， 播音和录音都釆用 PCM从模式， 所以只需在音 频模块中将 PCM设置为从模式， 而不需要分别在播音和录音各自的通道中都进 行设置， 这样提高了效率， 而且还便于统一管理。
第四步、 将播音的物理釆样率设置为与录音相同的 PCM的釆样率； 由于播音通道由原来的 SSP3 I2S模式（I2S总线模式） 变为 SSP4 PCM模 式（ PCM总线模式；)，所以播音的物理釆样率需要修改为与录音相同的 PCM (脉 冲调制） 的釆样率， 在音频模块的播音釆样率转换层进行数据格式的转换。
第五步、 通过蓝牙模块设置蓝牙耳机下行语音增益。
通过设置蓝牙模块， 修改蓝牙耳机下行语音的增益大小， 因为蓝牙模块中 设置蓝牙耳机 MIC (麦克风）增益的接口已经屏蔽了， 所以通过蓝牙模块只能 设置下行语音增益， 而上行语音增益则需要在音频驱动程序中设置， 并且这个 语音设置的工作在 AG单元打开 SOC时自动完成，其为现有技术此处不再赘述。
第六步、在蓝牙可视通话结束之后 ,初始化 AP模块中的音频动态内存存取； 本实施例中 , 通过初始化 AP模块中的音频动态内存存取， 使 BTVTCALL 之后 AP模块正确的恢复 I2S播音通道， 避免动态内存存取緩冲器挂死的现象。
本发明实施例还对应提供一种可视通信终端实现蓝牙可视通话的总的工作 过程， 请参阅图 9, 其工作流程包括： a )开启可视通信终端， 由可视通信终端 中 AP模块的系统层查找与该可视通信终端配对的蓝牙耳机； b ) 由 AP模块的 系统层进入拨号面板进行 VT CALL拨号； c )由系统层打开 VT CALL单元（即 VT CALL应用程序 )和蓝牙模块中的 AG单元； d )再由系统层给音频模块发送 AG指令， 同时由 VT CALL单元向音频模块发送 VT CALL指令； e ) 由音频模 块启动可视通信终端的录音播音功能， 并釆集 VT CALL上下行音频数据； f ) 音频模块通过 PCM接口全双式传输数字音频数据； g ) 由蓝牙模块通过 SOC传 输方式向蓝牙耳机传输模拟音频数据； h )在 CP DBB模块、 AP模块、 音频模 块、 蓝牙模块和蓝牙耳机之间进行上下行音频数据交互， 实现蓝牙可视通； i ) 由 AP模块系统层的拨号面板结束蓝牙可视电话，并按照同样的方式关闭相关模 块； j ) AP模块的系统层通知音频模块蓝牙可视通话已结束； k )将音频通道恢 复至正常工作模式。
从上述方法可以看出， 可视通信终端在实现 BTVTCALL的过程中， 其主要 工作由音频模块完成， 以下分别对 PCM端口实现播音， AP模块的 SSP模拟成 PCM从模式，播音通道由 PCM方式恢复为 I2S方式，上行语音数字增益放大的 实现方法进行详细描述：
(一）用于 PCM端口实现播音的方式如下：
a、 釆用普通耳机通道调试， 将耳机播音通道切换， 将原来输入到耳机通道 的 I2S播音通道改成 PCM播音通道，然后将 AP模块原来的使能 I2S端口去掉； b、 将播音通道由原来的 I2S端口修改为 PCM端口； c、 修改播音动态内存存取 信道， 将原来的 XLLP— DMAC— SSP— 3— TX改为： XLLP— DMAC— SSP— 4— TX; d、 设置播音通道的釆样率， 进行数据格式的转换， 即将 AP模块发送的播音音频数 据流转换成 PCM格式的数据， 并将播音通道的釆样率改为与录音通道相同的釆 样率， 并且在播音通道的中间转换层修改； e、 在完成了以上几个步骤之后， 便 可以从普通耳机中听到用 PCM端口播放的声音， 然后进行通道切换， 将该通道 切换至蓝牙耳机通道， 通过 PCM端口实现播音。
(二）将 AP模块的 SSP模拟成 PCM从模式的实现方法如下：
1 ) 由于 AP模块的 SSP4端口从原来的 PCM端口主模式改为 PCM端口从 模式， 所以需要将 AP模块的 SSP4 TX, RX反转， 此处， 只需要修改 SSP4的 GPIO功能选择， 将 AP模块的 ALT— FN1改为 ALT— FN5。
2 )为了配置 SSP4 PCM从模式， 在 AP模块的寄存器 sscrl中找到 AP模块 设置 SSP口主从模式的寄存器位置， 如下表所示：
Figure imgf000016_0001
这两位分别是设置 AP模块的 PCM— CLK和 PCM— FRAME的方向， 将它们 都设置为 1即可。
3 )为了验证 PCM端口的全双工工作， 即实现播音和录音的并发运行， 釆用 AP模块的 SSP端口的 Loopback Mode (本地循环方式 ), 它可以实现 PCM 端口发送和接收的内部循环， 即播音和录音自循环， 其设置位置如下表：
Figure imgf000016_0002
(三）播音通道由 PCM方式恢复为 I2S方式的实现方法如下：
由于 AP模块 DMA机制的原因， 在使用 PCM模块做播音工作之后， 如果 直接恢复成 I2S方式会导致 DMA buffer (动态内存存取緩冲器）挂死的现象， 所以需要重新初始化 AP模块的 Audio DMA (音频动态内存存取）， 由于 Audio DMA 的设置和播音中断过程紧密相连， 所以此处需要重新创建播音中断过程 (即重新初始化 AP模块）。
(四）上行语音数字增益放大的实现方法
从图 9 的工作流程可以看出， 对上行语音信号进行放大的模块有蓝牙模块 和音频模块， 根据信号放大原理， 要对信号进行增益放大一般做两级放大：
1 )模拟增益放大： 即在蓝牙模块中进行 MIC增益放大， 这个工作在可视通 信终端配上蓝牙耳机之后， 会由蓝牙模块自动完成。 为了兼容蓝牙耳机的普通 通话， 所以这个模拟增益不能放的太大， 做到普通蓝牙通话和蓝牙可视通话都 能听清楚即可。
2 )数字增益放大： 在音频模块中的录音部分增加录音数字增益放大功能， 而在 AP模块的音频设计中并没有做此功能， 而播音的数字增益放大功能已实 现， 所以本发明实施例可以参照播音的数字增益放大功能设计录音数字增益放 大功能。
综上所述， 本发明提供的基于蓝牙耳机实现可视通话的方法和可视通信终 端， 在不改变硬件设计的情况下， 通过修改软件将播音通路由原来的 SSP3 I2S 模式改为 SSP4 PCM模式（Pulse Code Modulation, 脉码调制 ), 并将录音通路 由原来的 AP模块-音频模块改为 AP模块 -蓝牙模块的模式，通过 AG单元将其 它模块： AP模块、 蓝牙模块和 SCO ( synchronous connection-oriented, 同步面 向连接）链接起来实现了蓝牙可视通话， 并实现了以下有益效果：
1、 在不改变硬件设计的情况下， 完全通过修改软件实现蓝牙可视通话， 并 在录音和播音时通过 PCM端口全双工工作， 充分利用了现有硬件资源， 从而大 大降低了成本。
2、 釆用上行、 下行音频数据均走 SCO传输的方式， 只要求蓝牙耳机支持 SCO 功能， 能兼容不支持 A2DP (立体声蓝牙耳机） 的蓝牙耳机， 实现了真正 意义上的蓝牙可视电话， 使可视通信终端对蓝牙耳机的配置要求没有局限性， 应用范围广， 从而增加了可视通信终端的使用范围。
3、 本发明釆用自行设计的"链式接口驱动"， 将 VT CALL 单元 （video telephone call , 可视电话）、 音频模块、 SCO 模块和 AG 单元链接起来实现 BTVTCALL ( bluetooth video telephone call, 蓝牙可视电话 ), 并且各模块之间的 通讯和参数传递是釆用特定的接口 （包括 win mobile系统的标准接口和自定义 接口）， 数据共享是通过内存的方式， 从而做到层次设计和接口调用清晰， 各模 块之间的通讯稳定性好， 效率高。
4、 为了便于统一管理， 本发明将主要的修改放在音频驱动 （即音频模块） 中， 其它模块主要是配合和调试， 不需要太大修改， 这样有两个优点： 一是移 植性强， 因为在功能的移植过程中， 移植多个模块比移植一个模块要复杂的多， 本发明的移植则相当于移植一个音频驱动， 不会出现不稳定， 接口混乱等现象； 二是便于统一管理， 移植一个模块使链式接口驱动的流程简洁明朗， 操作简单、 高效。
5、 随着 3G技术的不断发展， 可视电话显得越来越重要， 其使用频率也越 来越高， 釆用各种音频设备进行可视通话越来越适应人们的需要， 而蓝牙耳机 的使用是一个趋势， 所以使用蓝牙耳机拨打可视电话将逐渐成为一种潮流， 也 将成为可视通信终端的必备功能。
可以理解的是， 对本领域普通技术人员来说， 可以根据本发明的技术方案 及其发明构思加以等同替换或改变， 而所有这些改变或替换都应属于本发明所 附的权利要求的保护范围。

Claims

权 利 要求
1、 一种基于蓝牙耳机实现可视通话的方法， 其特征在于， 该方法包括以下 步骤：
A、 开启可视通信终端；
B、 由所述可视通信终端中的 AP模块查找与其配对的蓝牙耳机；
C、 启动 AP模块中的 VT CALL单元和蓝牙模块中的 AG单元；
D、 由 AP模块向音频模块发送 VT CALL指令和 AG指令；
E、 音频模块根据所述 VT CALL 指令和 AG 指令， 将音频通道切换为 BTVTCALL通道， 其中， 所述步骤 E包括：
El、 设置 AP模块的 GPIO功能， 使 AP模块的 SSP4 TX和 RX反转；
E2、 将播音发送緩冲器地址改为 SSP4;
E3、 将 AP模块的 SSP4接口设置为 PCM从模式；
E4、 将播音的物理釆样率设置为与录音相同的 PCM的釆样率；
E5、 通过蓝牙模块设置蓝牙耳机下行语音增益。
F、由音频模块启动可视通信终端的录音播音模式，并釆集上下行音频数据， 且将该上下行音频数据传输给蓝牙模块；
G、 蓝牙模块将所述上下行音频数据传输给蓝牙耳机；
H、 在 CP DBB模块、 AP模块、 音频模块、 蓝牙模块和蓝牙耳机之间进行 上下行音频数据交互， 实现蓝牙可视通；
I、 关闭 AP模块、 蓝牙模块和音频模块结束蓝牙视通话；
J、 将音频通道恢复为常规工作模式。
2、 一种基于蓝牙耳机实现可视通话的方法， 其特征在于， 该方法包括以下 步骤：
A、 开启可视通信终端；
B、 由所述可视通信终端中的 AP模块查找与其配对的蓝牙耳机；
C、 启动 AP模块中的 VT CALL单元和蓝牙模块中的 AG单元； D、 由 AP模块向音频模块发送 VT CALL指令和 AG指令；
E、 音频模块根据所述 VT CALL 指令和 AG 指令， 将音频通道切换为 BTVTCALL通道；
F、由音频模块启动可视通信终端的录音播音模式，并釆集上下行音频数据， 且将该上下行音频数据传输给蓝牙模块；
G、 蓝牙模块将所述上下行音频数据传输给蓝牙耳机；
H、 在 CP DBB模块、 AP模块、 音频模块、 蓝牙模块和蓝牙耳机之间进行 上下行音频数据交互， 实现蓝牙可视通。
3、根据权利要求 2所述的基于蓝牙耳机实现可视通话的方法，其特征在于， 在步骤 H之后， 所述的方法进一步包括：
I、 关闭 AP模块、 蓝牙模块和音频模块结束蓝牙视通话；
J、 将音频通道恢复为常规工作模式。
4、根据权利要求 2所述的基于蓝牙耳机实现可视通话的方法，其特征在于， 在步骤 C之前， 所述的方法进一步包括：
C0、 由 AP模块进行 VT CALL拨号。
5、根据权利要求 2所述的基于蓝牙耳机实现可视通话的方法，其特征在于， 所述的步骤 E还包括：
El、 设置 AP模块的 GPIO功能， 使 AP模块的 SSP4 TX和 RX反转；
E2、 将播音发送緩冲器地址改为 SSP4;
E3、 将 AP模块的 SSP4接口设置为 PCM从模式；
E4、 将播音的物理釆样率设置为与录音相同的 PCM的釆样率；
E5、 通过蓝牙模块设置蓝牙耳机下行语音增益。
6、根据权利要求 3所述的基于蓝牙耳机实现可视通话的方法，其特征在于， 所述常规工作模式包括普通语音录音及播音工作模式和普通蓝牙通话模式。
7、根据权利要求 2所述的基于蓝牙耳机实现可视通话的方法，其特征在于， 在音频模块向蓝牙模块传输语音数据时通过 PCM端口全双工传输上下行音频数 据。
8、 一种基于蓝牙耳机实现可视通话的可视通信终端， 其特征在于， 所述可 视通信终端为 3G手机， 其包括：
用于实现可视通信终端各种界面操作的 AP模块；
用于将音频通道切换为 BTVTCAL通道后釆集上下行音频数据， 并将该上 下行音频数据发送给蓝牙模块的音频模块；
用于进行数据传输的蓝牙模块； 及
与 AP模块进行数据交互的 CP DBB模块；
所述 AP模块与音频模块和 CP DBB模块连接， 所述蓝牙模块与 AP模块、 音频模块和蓝牙耳机连接；
其中， 所述 AP模块包括系统层和 VTCALL单元， 所述系统层用于查找与 可视通信终端配对的蓝牙耳机， 进行 VTCALL拨号， 打开音频模块和蓝牙模块 中的 AG单元； 所述 VTCALL模块用于向音频模块发送 VTCALL指令。
9、 一种基于蓝牙耳机实现可视通话的可视通信终端， 其特征在于， 包括： 用于实现可视通信终端各种界面操作的 AP模块；
用于将音频通道切换为 BTVTCAL通道后釆集上下行音频数据， 并将该上 下行音频数据发送给蓝牙模块的音频模块； 及
用于进行数据传输的蓝牙模块；
所述 AP模块与音频模块连接， 所述蓝牙模块与 AP模块、 音频模块和蓝牙 耳机连接；
其中， 所述 AP模块包括系统层和 VTCALL单元， 所述系统层用于查找与 可视通信终端配对的蓝牙耳机， 进行 VTCALL拨号， 打开音频模块和蓝牙模块 中的 AG单元； 所述 VTCALL模块用于向音频模块发送 VTCALL指令。
10、 根据权利要求 9 所述的基于蓝牙耳机实现可视通话的可视通信终端， 其特征在于，还包括与 AP模块进行数据交互的 CP DBB模块， 所述 CP DBB模 块与 AP模块连接。
11、 根据权利要求 9 所述的基于蓝牙耳机实现可视通话的可视通信终端， 其特征在于， 所述可视通信终端为 3G手机。
PCT/CN2011/076817 2010-10-22 2011-07-04 一种基于蓝牙耳机实现可视通话的方法及可视通信终端 WO2012051870A1 (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP11833776.5A EP2632228A4 (en) 2010-10-22 2011-07-04 Method for bluetooth-based headset to make video call and video call enabled terminal
US13/878,896 US8885011B2 (en) 2010-10-22 2011-07-04 Method for implementing video call with bluetooth-based headset and video communication terminal for the same
EP20177144.1A EP3726924A1 (en) 2010-10-22 2011-07-04 Method for implementing video call with bluetooh-based headset and video communication terminal for the same

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN2010105188837A CN101984728B (zh) 2010-10-22 2010-10-22 一种基于蓝牙耳机实现可视通话的方法及可视通信终端
CN201010518883.7 2010-10-22

Publications (1)

Publication Number Publication Date
WO2012051870A1 true WO2012051870A1 (zh) 2012-04-26

Family

ID=43641897

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2011/076817 WO2012051870A1 (zh) 2010-10-22 2011-07-04 一种基于蓝牙耳机实现可视通话的方法及可视通信终端

Country Status (4)

Country Link
US (1) US8885011B2 (zh)
EP (2) EP2632228A4 (zh)
CN (1) CN101984728B (zh)
WO (1) WO2012051870A1 (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101984728B (zh) 2010-10-22 2013-10-02 惠州Tcl移动通信有限公司 一种基于蓝牙耳机实现可视通话的方法及可视通信终端
CN102413216B (zh) * 2011-11-18 2015-05-13 努比亚技术有限公司 实现Android智能移动终端语音通话的方法及系统
TWI517614B (zh) * 2013-05-24 2016-01-11 凌通科技股份有限公司 藍牙資料／控制訊息傳輸模組、互動系統及其方法
CN104540061B (zh) * 2014-12-31 2018-05-22 中科创达软件股份有限公司 一种蓝牙耳机录音方法及装置
CN105208591A (zh) * 2015-09-22 2015-12-30 上海寰创通信科技股份有限公司 一种广播型近场传输设备管理系统
CN108063745B (zh) * 2016-11-08 2019-03-01 视联动力信息技术股份有限公司 一种基于安卓设备的视频通话方法及其系统
TWI636455B (zh) * 2017-05-02 2018-09-21 國立臺灣師範大學 Wearable recording device
CN109640309A (zh) * 2019-01-25 2019-04-16 合肥星空物联信息科技有限公司 一种不被手机通话打断的蓝牙录音装置
CN110166890B (zh) 2019-01-30 2022-05-31 腾讯科技（深圳）有限公司 音频的播放采集方法、设备及存储介质
CN110010139B (zh) * 2019-03-28 2021-12-21 南昌黑鲨科技有限公司 音频输入输出方法、系统及计算机可读存储介质
CN110087215B (zh) * 2019-05-06 2022-05-13 北京百度网讯科技有限公司 基于蓝牙连接的信息播报方法、装置、终端及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101246417A (zh) 2007-02-13 2008-08-20 艾威梯软件技术(北京)有限公司 音频数据流输入/输出无间断软件切换的方法和系统
CN101360141A (zh) 2008-09-10 2009-02-04 嘉兴闻泰通讯科技有限公司 具有多种录音功能的移动终端
CN101388996A (zh) 2008-09-26 2009-03-18 中兴通讯股份有限公司 一种实现可视电话的方法及系统
US20100159834A1 (en) 2008-12-24 2010-06-24 Plantronics, Inc. Selection of a paired device from a wireless headset
CN101984728A (zh) * 2010-10-22 2011-03-09 惠州Tcl移动通信有限公司 一种基于蓝牙耳机实现可视通话的方法及可视通信终端

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080024593A1 (en) * 2006-07-25 2008-01-31 Larisa Tsirinsky Multimedia Communication System
US20090253457A1 (en) * 2008-04-04 2009-10-08 Apple Inc. Audio signal processing for certification enhancement in a handheld wireless communications device
US20100080379A1 (en) * 2008-09-30 2010-04-01 Shaohai Chen Intelligibility boost
US8219063B2 (en) * 2009-06-26 2012-07-10 Vmware, Inc. Controlling usage in mobile devices via a virtualization software layer
KR20110028056A (ko) * 2009-09-11 2011-03-17 삼성전자주식회사 블루투스 통신 연결 방법 및 시스템
US8751667B2 (en) * 2010-04-07 2014-06-10 Apple Inc. Supporting hands-free services via a hands-free device for IP video calls
US8320974B2 (en) * 2010-09-02 2012-11-27 Apple Inc. Decisions on ambient noise suppression in a mobile communications handset device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101246417A (zh) 2007-02-13 2008-08-20 艾威梯软件技术(北京)有限公司 音频数据流输入/输出无间断软件切换的方法和系统
CN101360141A (zh) 2008-09-10 2009-02-04 嘉兴闻泰通讯科技有限公司 具有多种录音功能的移动终端
CN101388996A (zh) 2008-09-26 2009-03-18 中兴通讯股份有限公司 一种实现可视电话的方法及系统
US20100159834A1 (en) 2008-12-24 2010-06-24 Plantronics, Inc. Selection of a paired device from a wireless headset
CN101984728A (zh) * 2010-10-22 2011-03-09 惠州Tcl移动通信有限公司 一种基于蓝牙耳机实现可视通话的方法及可视通信终端

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2632228A4

Also Published As

Publication number Publication date
CN101984728A (zh) 2011-03-09
EP2632228A1 (en) 2013-08-28
CN101984728B (zh) 2013-10-02
EP2632228A4 (en) 2017-08-16
US20130201275A1 (en) 2013-08-08
US8885011B2 (en) 2014-11-11
EP3726924A1 (en) 2020-10-21

Similar Documents

Publication Publication Date Title
WO2012051870A1 (zh) 一种基于蓝牙耳机实现可视通话的方法及可视通信终端
CN101246417B (zh) 音频数据流输入/输出无间断软件切换的方法和系统
US7844224B2 (en) Method for supporting simultaneously multiple-path Bluetooth audio applications
CN101577986B (zh) 移动通信终端
US20090088208A1 (en) Apparatus having mobile terminal as input/output device of computer and related system and method
CN104092825A (zh) 蓝牙语音控制方法、装置及智能终端
CN103716459B (zh) 一种兼具手机和对讲机通话功能的音频系统
CN103312912A (zh) 一种混音系统及方法
CN110191389A (zh) 无线耳机的多点连接方法、装置、蓝牙耳机及tws耳机
WO2012068814A1 (zh) 音频处理方法及双模数字移动通信终端
WO2011116572A1 (zh) 语音业务的控制方法和语音业务系统
CN102271197A (zh) 用户界面音调的回声消除
WO2013000213A1 (zh) 一种音频数据的处理方法和设备
CN102075218A (zh) 近距离手机多方通话的方法
WO2012106858A1 (zh) 一种双网双待终端进行电话业务的方法和装置
CN2847716Y (zh) 具有传统电话及网络电话功能的电话机
EP2533601B1 (en) Method and terminal for talk recording implementation
JP3073440U (ja) データネットの即時常時双方向音声伝送装置
CN102752459B (zh) 集团无绳电话交换机
CN113572888B (zh) 一种多路设备工作系统
CN116033404B (zh) 多路蓝牙链接的混合通信系统及方法
CN206865751U (zh) 一种基于移动终端的组群手持扩展系统
WO2018227377A1 (zh) 一种多模设备的通信方法、多模装置及通信终端
CN202634472U (zh) 数据接入服务器和视频会议的数据传输系统
CN117812178A (zh) 一种基于多路通话链路任意切换的装置和方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11833776

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2011833776

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 13878896

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE