CN109147803B - 多人语音通信方法、存储介质、电子设备及系统 - Google Patents

多人语音通信方法、存储介质、电子设备及系统 Download PDF

Info

Publication number
CN109147803B
CN109147803B CN201710508716.6A CN201710508716A CN109147803B CN 109147803 B CN109147803 B CN 109147803B CN 201710508716 A CN201710508716 A CN 201710508716A CN 109147803 B CN109147803 B CN 109147803B
Authority
CN
China
Prior art keywords
voice
synthesized
client
module
local
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710508716.6A
Other languages
English (en)
Other versions
CN109147803A (zh
Inventor
杨亮
陈少杰
张文明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yami Technology Guangzhou Co ltd
Original Assignee
Wuhan Douyu Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Douyu Network Technology Co Ltd filed Critical Wuhan Douyu Network Technology Co Ltd
Priority to CN201710508716.6A priority Critical patent/CN109147803B/zh
Publication of CN109147803A publication Critical patent/CN109147803A/zh
Application granted granted Critical
Publication of CN109147803B publication Critical patent/CN109147803B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • G10L13/02Methods for producing synthetic speech; Speech synthesisers
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/0017Lossless audio signal coding; Perfect reconstruction of coded audio signal by transmission of coding error
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40Support for services or applications
    • H04L65/403Arrangements for multi-party communication, e.g. for conferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/565Conversion or adaptation of application format or content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Quality & Reliability (AREA)
  • Mathematical Physics (AREA)
  • General Engineering & Computer Science (AREA)
  • Telephonic Communication Services (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明公开了一种多人语音通信方法、存储介质、电子设备及系统,涉及多人语音通信领域。该方法步骤为:服务端在同一时刻收到客户端发送的编码本地语音后,对每条编码本地语音进行解码,得到客户端的解码本地语音;服务端对所有解码本地语音进行合成,得到合成语音;服务端对合成语音进行ACC编码,得到编码合成语音;服务端将编码合成语音和客户端的解码本地语音,发送至对应的客户端;客户端对编码合成语音进行ACC解码,得到合成语音;将合成语音中与解码本地语音相同的语音剔除后进行播放。本发明能够将N条本地语音进行1次合成、1次编码和N次转发,显著减轻了服务端的工作压力和负载压力。

Description

多人语音通信方法、存储介质、电子设备及系统
技术领域
本发明涉及多人语音通信领域,具体涉及一种多人语音通信方法、存储介质、电子设备及系统。
背景技术
多人语音通信在社交类软件中非常常见,例如QQ群聊天室等。当每个人进入到群聊室后,可以听到其他人说话的声音,并且自己所说的也能够被其他人听见;要实现上述效果,需要将自己所说的内容需要让其他所有人听到。
目前,现有的多人语音通信的方法一般为以下两种:
(1)客户端A将本地语音A(即自己的所说的内容)发送至中间服务端,中间服务端将本地语音A转发至所有处于多人语音状态(即处于同一聊天室)的其他客户端。
方法(1)的缺陷为:定义有N个人进行多人语音,则中间服务端转发1人本地语音至其他人的次数为N-1(自己不用转发),当N个人同时说话时,中间服务端转发本地语音的次数为N·(N-1),当N较大时,中间服务端的工作压力较大。
(2)中间服务端将同一时刻收到的本地语音进行语音合成,将合成后的语音进行编码后,发送至所有人的客户端;当有N个人进行多人语音时,方法(2)转发合成语音的次数为N,远小于方法(1)中的N·(N-1)。
方法(2)的缺陷为:因为需要实现本人听不到自己的语音(即不会出现回音),所以进行语音合成时,需要针对每个人合成一次剔除本地语音后的合成语音。当所有人为N时,中间服务端同一时刻会收到N路语音,此时中间服务端需要针对每个人合成一次(N-1)路的合成语音;即中间服务端总共需要合成N次N-1路的合成语音,同理,还需要进行N次N-1路的合成语音编码。因此,方法(2)虽然能降低中间服务端的工作压力,但是增加了中间服务端对语音的合成次数和编码次数,即增加了中间服务端的负载压力。
发明内容
针对现有技术中存在的缺陷,本发明解决的技术问题为:在多人语音时,如何减少服务端对语音进行转发、合成和编码的次数。本发明能够将N条本地语音进行1次合成、1次编码和N次转发,显著减轻了服务端的工作压力和负载压力。
为达到以上目的,本发明提供的多人语音通信方法,其特征在于,该方法包括以下步骤:
S1:服务端在同一时刻收到客户端发送的编码本地语音后,对每条编码本地语音进行解码,得到客户端的解码本地语音,转到S2;
S2:服务端对所有解码本地语音进行合成,得到合成语音,转到S3;
S3:服务端对合成语音进行ACC编码,得到编码合成语音,转到S4;
S4:服务端将编码合成语音和客户端的解码本地语音,发送至对应的客户端,转到S5;
S5:客户端对编码合成语音进行ACC解码,得到合成语音;将合成语音中与解码本地语音相同的语音剔除后进行播放。
在上述技术方案的基础上,S2流程包括:服务端对每条解码本地语音设置对应的合成权重因子后,对所有解码本地语音进行合成,得到合成语音。
本发明提供的存储介质,该存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述多人语音通信方法。
本发明提供的电子设备,包括存储器和处理器,存储器上储存有在处理器上运行的计算机程序,处理器执行计算机程序时实现上述多人语音通信方法。
本发明提供的多人语音通信系统,包括设置于服务端上的语音接收解码模块、语音合成模块、合成语音编码模块、合成语音发送模块,以及设置于客户端上的语音播放模块;
语音接收解码模块用于:在同一时刻收到客户端发送的编码本地语音后,对每条编码本地语音进行解码,得到客户端的解码本地语音,向语音合成模块发送语音合成信号;
语音合成模块用于:收到语音合成信号后,对所有解码本地语音进行合成,得到合成语音,向合成语音编码模块发送合成语音编码信号;
合成语音编码模块用于:收到合成语音编码信号后,对合成语音进行ACC编码,得到编码合成语音,向合成语音发送模块发送合成语音发送信号;
合成语音发送模块用于:收到合成语音发送信号后,将编码合成语音和客户端的解码本地语音,发送至客户端的语音播放模块;
语音播放模块用于:对编码合成语音进行ACC解码,得到合成语音;将合成语音中与解码本地语音相同的语音剔除后进行播放。
与现有技术相比,本发明的优点在于:
(1)参见本发明S1至S5可知,当同一时刻发送本地语音的客户端数量为N时,与现有技术中方法(2)中进行N次语音合成和语音编码相比,本发明能够将N条本地语音进行1次合成,将合成语音进行1次编码,显著减轻了服务端的负载压力;与现有技术中方法(1)中转发N·(N-1)次本地语音相比,本发明能够将编码合成语音进行N次转发,显著减轻了服务端的工作压力。
在此基础上,参见本发明S5可知,本发明将剔除本地语音的工作交给客户端来完成,进一步减轻服务端的负载压力。
(2)参见本发明S2可知,本发明进行语音合成时,对每条解码本地语音设置了对应的合成权重因子,解码本地语音的合成权重因子的值越大,该解码本地语音在合成语音中所占的比重越大。当服务端需要重点突出1路或几路解码本地语音时,则将对应的合成权重因子的值设置的较大;例如某条语音为聊天室的房管发出,为重点语音,此时可以通过设置合成权重因子的值,来使得房管的语音加重,进而提高用户体验。
附图说明
图1为本发明实施例中多人语音通信方法的流程图;
图2为本发明实施例中电子设备的连接框图。
具体实施方式
以下结合附图及实施例对本发明作进一步详细说明。
参见图1所示,本发明实施例中的多人语音通信方法,包括以下步骤:
S1:服务端在同一时刻收到客户端发送的经AAC(Advanced Audio Coding,高级音频编码)编码的编码本地语音后,对每条编码语音进行解码,得到客户端的解码本地语音,例如同一时刻有N台客户端总共发送N条本地语音,每台客户端发送一条,则解码总共得到N条解码本地语音,转到S2。
S2:服务端对每条解码本地语音设置对应的合成权重因子后,对N条解码本地语音进行合成,得到合成语音;所有解码本地语音的合成权重因子的和为1,解码本地语音的合成权重因子的值越大,该解码本地语音在合成语音中所占的比重越大,其好处为:当服务端需要重点突出1路或几路本地语音时,则将对应的合成权重因子的值设置的较大;例如某条语音为聊天室的房管发出,为重点语音,此时可以通过设置合成权重因子的值,来使得房管的语音加重,进而提高用户体验,转到S3。
S3:服务端对合成语音进行ACC编码,得到编码合成语音,转到S4。
S4:服务端将编码合成语音和客户端的解码本地语音,形成合成语音压缩包后(压缩包能够便于传输),发送至客户端,其目的为:S3中的编码合成语音中包括所有客户端的语音,因此当客户端收到后,会在合成语音中听到本地语音,即会出现回音,此时客户端需要识别本地语音并剔除合成语音中相同的声音,转到S5。
S5:客户端收到合成语音压缩包后,对合成语音压缩包进行解压缩,得到编码合成语音和客户端的解码本地语音;对编码合成语音进行ACC解码,得到合成语音。将合成语音中与解码本地语音相同的语音剔除后进行播放。
S5的目的在于:将剔除本地语音的工作交给客户端来完成,进一步减轻服务端的负载压力。
参见S1至S5可知,当同一时刻发送本地语音的客户端数量为N时,与现有技术中方法(2)中进行N次语音合成和语音编码相比,本发明实施例能够将N条本地语音进行1次合成,将合成语音进行1次编码,显著减轻了服务端的负载压力;与现有技术中方法(1)中转发N·(N-1)次本地语音相比,本发明实施例能够将编码合成语音进行N次转发,显著减轻了服务端的工作压力。
本发明实施例还提供一种存储介质,存储介质上存储有计算机程序,计算机程序被处理器执行时实现上述多人语音通信方法。需要说明的是,所述存储介质包括U盘、移动硬盘、ROM(Read-Only Memory,只读存储器)、RAM(Random Access Memory,随机存取存储器)、磁碟或者光盘等各种可以存储程序代码的介质。
参见图2所示,本发明实施例还提供一种电子设备,包括存储器和处理器,存储器上储存有在处理器上运行的计算机程序,处理器执行计算机程序时实现上述多人语音通信方法。
本发明实施例提供的多人语音通信系统,包括设置于服务端上的语音接收解码模块、语音合成模块、合成语音编码模块、合成语音发送模块,以及设置于客户端上的语音播放模块。
语音接收解码模块用于:在同一时刻收到客户端发送的编码本地语音后,对每条编码本地语音进行解码,得到客户端的解码本地语音,向语音合成模块发送语音合成信号。
语音合成模块用于:收到语音合成信号后,对每条解码本地语音设置对应的合成权重因子后(所有解码本地语音的合成权重因子的和为1),对所有解码本地语音进行合成,得到合成语音,向合成语音编码模块发送合成语音编码信号。
合成语音编码模块用于:收到合成语音编码信号后,对合成语音进行ACC编码,得到编码合成语音,向合成语音发送模块发送合成语音发送信号。
合成语音发送模块用于:收到合成语音发送信号后,将编码合成语音和客户端的解码本地语音形成合成语音压缩包后,发送至客户端的语音播放模块。
语音播放模块用于:收到合成语音压缩包后,对合成语音压缩包进行解压缩,得到编码合成语音和客户端的解码本地语音;对编码合成语音进行ACC解码,得到合成语音;将合成语音中与解码本地语音相同的语音剔除后进行播放。
需要说明的是:本发明实施例提供的系统在进行模块间通信时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将系统的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
进一步,本发明不局限于上述实施方式,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也视为本发明的保护范围之内。本说明书中未作详细描述的内容属于本领域专业技术人员公知的现有技术。

Claims (10)

1.一种多人语音通信方法,其特征在于,该方法包括以下步骤:
S1:服务端在同一时刻收到客户端发送的编码本地语音后,对每条编码本地语音进行解码,得到客户端的解码本地语音,转到S2;
S2:服务端对所有解码本地语音进行合成,得到合成语音,转到S3;
S3:服务端对合成语音进行ACC编码,得到编码合成语音,转到S4;
S4:服务端将编码合成语音和客户端的解码本地语音,发送至对应的客户端,转到S5;
S5:客户端对编码合成语音进行ACC解码,得到合成语音;将合成语音中与解码本地语音相同的语音剔除后进行播放。
2.如权利要求1所述的多人语音通信方法,其特征在于,S2流程包括:服务端对每条解码本地语音设置对应的合成权重因子后,对所有解码本地语音进行合成,得到合成语音。
3.如权利要求2所述的多人语音通信方法,其特征在于:所有解码本地语音的合成权重因子的和为1。
4.如权利要求1至3任一项所述的多人语音通信方法,其特征在于,S4的流程包括:服务端将编码合成语音和客户端的解码本地语音形成合成语音压缩包后,发送至客户端;S5中所述客户端对编码合成语音进行ACC解码之前,还包括以下流程:客户端收到合成语音压缩包后,对合成语音压缩包进行解压缩,得到编码合成语音和客户端的解码本地语音。
5.一种存储介质,该存储介质上存储有计算机程序,其特征在于:所述计算机程序被处理器执行时实现权利要求1至4任一项所述的方法。
6.一种电子设备,包括存储器和处理器,存储器上储存有在处理器上运行的计算机程序,其特征在于:处理器执行计算机程序时实现权利要求1至4任一项所述的方法。
7.一种多人语音通信系统,其特征在于:该系统包括设置于服务端上的语音接收解码模块、语音合成模块、合成语音编码模块、合成语音发送模块,以及设置于客户端上的语音播放模块;
语音接收解码模块用于:在同一时刻收到客户端发送的编码本地语音后,对每条编码本地语音进行解码,得到客户端的解码本地语音,向语音合成模块发送语音合成信号;
语音合成模块用于:收到语音合成信号后,对所有解码本地语音进行合成,得到合成语音,向合成语音编码模块发送合成语音编码信号;
合成语音编码模块用于:收到合成语音编码信号后,对合成语音进行ACC编码,得到编码合成语音,向合成语音发送模块发送合成语音发送信号;
合成语音发送模块用于:收到合成语音发送信号后,将编码合成语音和客户端的解码本地语音,发送至对应客户端的语音播放模块;
语音播放模块用于:对编码合成语音进行ACC解码,得到合成语音;将合成语音中与解码本地语音相同的语音剔除后进行播放。
8.如权利要求7所述的多人语音通信系统,其特征在于:所述语音合成模块的工作流程包括:对每条解码本地语音设置对应的合成权重因子后,对所有解码本地语音进行合成,得到合成语音。
9.如权利要求8所述的多人语音通信系统,其特征在于:所有解码本地语音的合成权重因子的和为1。
10.如权利要求7至9任一项所述的多人语音通信系统,其特征在于:所述合成语音发送模块的工作流程包括:将编码合成语音和客户端的解码本地语音形成合成语音压缩包后,发送至客户端的语音播放模块;所述语音播放模块对编码合成语音进行ACC解码之前,还包括以下工作流程:收到合成语音压缩包后,对合成语音压缩包进行解压缩,得到编码合成语音和客户端的解码本地语音。
CN201710508716.6A 2017-06-28 2017-06-28 多人语音通信方法、存储介质、电子设备及系统 Active CN109147803B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710508716.6A CN109147803B (zh) 2017-06-28 2017-06-28 多人语音通信方法、存储介质、电子设备及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710508716.6A CN109147803B (zh) 2017-06-28 2017-06-28 多人语音通信方法、存储介质、电子设备及系统

Publications (2)

Publication Number Publication Date
CN109147803A CN109147803A (zh) 2019-01-04
CN109147803B true CN109147803B (zh) 2020-10-23

Family

ID=64803649

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710508716.6A Active CN109147803B (zh) 2017-06-28 2017-06-28 多人语音通信方法、存储介质、电子设备及系统

Country Status (1)

Country Link
CN (1) CN109147803B (zh)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8887067B2 (en) * 2008-05-30 2014-11-11 Microsoft Corporation Techniques to manage recordings for multimedia conference events
CN103259715B (zh) * 2013-05-14 2016-11-02 华为软件技术有限公司 一种管理多人会话的方法、装置及系统
CN104378520A (zh) * 2013-08-16 2015-02-25 北京三星通信技术研究有限公司 语音通信方法、系统及设备
US20160227025A1 (en) * 2015-01-30 2016-08-04 Christian Soby System and method of multiple voice call handling
WO2016187795A1 (zh) * 2015-05-25 2016-12-01 程抒一 多用户会议系统
CN105304079B (zh) * 2015-09-14 2019-05-07 上海可言信息技术有限公司 一种多方通话的多模式语音合成方法与系统以及服务器
CN106210099B (zh) * 2016-07-18 2019-07-09 珠海格力电器股份有限公司 数据处理系统及方法

Also Published As

Publication number Publication date
CN109147803A (zh) 2019-01-04

Similar Documents

Publication Publication Date Title
CN107623614B (zh) 用于推送信息的方法和装置
CN105979197B (zh) 基于啸叫音自动识别的远程会议控制方法及装置
CN109951743A (zh) 弹幕信息处理方法、系统及计算机设备
US9294834B2 (en) Method and apparatus for reducing noise in voices of mobile terminal
US20130179161A1 (en) Network/peer assisted speech coding
CN107993646A (zh) 一种实现实时语音互译的方法
WO2017206842A1 (zh) 话音信号处理方法和相关装置和系统
CN104766608A (zh) 一种语音控制方法及装置
JP2011512549A (ja) 多数の分解能分析を使用するコンテキストの処理のためのシステム、方法、および装置
CN104780091B (zh) 一种具有语音音频处理功能的即时通信方法和系统
JP2013543146A (ja) ビットストリーム・ドメインにおけるコード化オーディオフレームのレベルを推定する装置及び方法
CN110299144B (zh) 音频混音方法、服务器及客户端
CN101715643B (zh) 多地点连接装置、信号分析以及装置、其方法及程序
CN107979686A (zh) 一种实现实时语音互译的系统
CN113436609A (zh) 语音转换模型及其训练方法、语音转换方法及系统
CN113299306B (zh) 回声消除方法、装置、电子设备及计算机可读存储介质
CN102484762A (zh) 听觉显示装置及方法
CN109147803B (zh) 多人语音通信方法、存储介质、电子设备及系统
CN109215668B (zh) 一种声道间相位差参数的编码方法及装置
US11323803B2 (en) Earphone, earphone system, and method in earphone system
TWI282547B (en) A method and apparatus to perform speech recognition over a voice channel
CN107547469A (zh) 一种信息处理方法和终端
CN110164411A (zh) 一种语音交互方法、设备及存储介质
CN110808054B (zh) 多路音频的压缩与解压缩方法及系统
CN111415669B (zh) 一种声纹模型构建方法和装置以及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20240129

Address after: Room 801, 85 Kefeng Road, Huangpu District, Guangzhou City, Guangdong Province

Patentee after: Yami Technology (Guangzhou) Co.,Ltd.

Country or region after: China

Address before: 430000 Wuhan Donghu Development Zone, Wuhan, Hubei Province, No. 1 Software Park East Road 4.1 Phase B1 Building 11 Building

Patentee before: WUHAN DOUYU NETWORK TECHNOLOGY Co.,Ltd.

Country or region before: China

TR01 Transfer of patent right