CN115989667A - 电子设备及控制方法 - Google Patents

电子设备及控制方法 Download PDF

Info

Publication number
CN115989667A
CN115989667A CN202180053291.9A CN202180053291A CN115989667A CN 115989667 A CN115989667 A CN 115989667A CN 202180053291 A CN202180053291 A CN 202180053291A CN 115989667 A CN115989667 A CN 115989667A
Authority
CN
China
Prior art keywords
audio signal
electronic device
recording
external device
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180053291.9A
Other languages
English (en)
Inventor
金相掀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN115989667A publication Critical patent/CN115989667A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/162—Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026—Details of the structure or mounting of specific components
    • H04M1/0264—Details of the structure or mounting of specific components for a camera module assembly
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026—Details of the structure or mounting of specific components
    • H04M1/0266—Details of the structure or mounting of specific components for a display module assembly
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/60—Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6008—Substation equipment, e.g. for use by subscribers including speech amplifiers in the transmitter circuit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72415—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories for remote control of appliances
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/02—Casings; Cabinets ; Supports therefor; Mountings therein
    • H04R1/028—Casings; Cabinets ; Supports therefor; Mountings therein associated with devices performing functions other than acoustics, e.g. electric candles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1041—Mechanical or electronic switches, or control elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/326—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only for microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00—Monitoring arrangements; Testing arrangements
    • H04R29/008—Visual indication of individual signal levels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/027—Spatial or constructional arrangements of microphones, e.g. in dummy heads
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/34—Microprocessors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/36—Memories
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2203/00—Aspects of automatic or semi-automatic exchanges
    • H04M2203/30—Aspects of automatic or semi-automatic exchanges related to audio recordings in general
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/12—Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/52—Details of telephonic subscriber devices including functional features of a camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00—Details of connection covered by H04R, not provided for in its groups
    • H04R2420/07—Applications of wireless loudspeakers or wireless microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/11—Transducers incorporated or for use in hand-held devices, e.g. mobile phones, PDA's, camera's
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/01—Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/13—Aspects of volume control, not necessarily automatic, in stereophonic sound systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/15—Aspects of sound capture and related signal processing for recording or reproduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/40—Visual indication of stereophonic sound image

Abstract

公开了一种电子设备及控制方法。该电子设备包括用于以UWB方式与外部装置进行通信的通信接口、麦克风、相机、传感器、显示器和处理器，其中，处理器基于从外部装置接收的数据来获得关于外部装置的距离信息和角度信息，基于所检测到的相机方向来获得拍摄方向信息，基于所获取的拍摄方向信息、距离信息和角度信息来识别外部装置，基于与外部装置的距离来控制麦克风或通信接口获取音频信号，以及控制显示器将指示所获取的音频信号的幅度的UI与所显示的图像一起显示。

Description

电子设备及控制方法
技术领域
本公开涉及一种电子设备及控制方法，并且更具体地，涉及一种以超宽带(UWB)方式进行通信的电子设备及其控制方法。
背景技术
最近，5G通信方法已经被商业化，并且已经开发了包括智能电话在内的高端电子设备。过去，智能电话包括一个相机和一个麦克风。最近发布的智能电话包括多个相机和多个麦克风并且可以执行各种功能。
然而，在许多情况下，即使是最近发布的智能电话，如果主体距离较远或如果周围有噪声，在捕获视频期间也无法正确听到一些主体的声音。另外，当在视频捕获期间存在多个主体时，无法选择性地仅对特定主体进行跟踪和记录。另外，如果一个应用占用了麦克风资源，则由于芯片组限制等，另一应用无法使用该麦克风资源。因此，即使在最近的智能电话中，也无法进行多重记录。
另外，由于在视频捕获期间无法调节音量或识别输入音频信号的幅度，并且在视频捕获期间记录的音量取决于主体或外围设备而变化，因此用户很难调节麦克风电平。
因此，需要用于改进包括智能电话在内的电子设备中与音频信号相关的功能和质量的技术，例如在视频捕获期间根据主体跟踪音频信号或均衡所记录的音频信号的幅度，而不管主体或周围设备的距离如何。
发明内容
技术问题
本公开是为了解决上述问题，并且本公开的目的是提供一种用于通过使用超宽带(UWB)通信方法与外部设备进行通信来控制主体的音频信号的电子设备和控制方法。
技术方案
根据本公开的实施例，一种电子设备包括：通信接口，被配置为以超宽带UWB方式与外部设备进行通信；麦克风，被配置为接收音频信号；相机，被配置为捕获包括在所述外部设备附近的主体的图像；传感器，被配置为检测所述相机的方向；显示器，被配置为显示所捕获的图像；以及处理器，其中处理器被配置为：基于从外部设备接收的数据来获取关于外部设备的测距信息和角度信息；基于由传感器检测到的相机的方向来获取图像捕获方向信息；基于所获取的图像捕获方向信息、测距信息和角度信息来识别用于获取主体的音频信号的外部设备；当与外部设备的距离小于预定距离时，控制麦克风获取主体的音频信号，并且当与外部设备的距离大于或等于预定距离时，控制通信接口获取输入到外部设备的主体的音频信号；以及控制显示器将指示所获取的音频信号的幅度的用户界面(UI)与所显示的图像一起显示。
另外，该电子设备还可以包括：存储器，其中，处理器被配置为识别录制线程是否处于活动状态，并且当所述录制线程处于非活动状态时，处理器被配置为：执行初始录制设置过程以存储所获取的音频信号，生成所述录制线程，针对所生成的录制线程生成多个录制音轨，基于所生成的多个录制音轨将与所获取的音频信号相关的数据存储在所述存储器中，以及在所述显示器上显示所述数据。
同时，该初始录制设置过程可以包括编解码器设置过程、音频DS P设置过程、内核驱动器设置过程、或音频硬件抽象层(HAL)设置过程中的至少一个。
另外，当录制线程处于活动状态时，该处理器可以被配置为：省略初始录制设置过程，生成与所获取的音频信号相关的多个录制音轨，以及将与音频信号相关的多个录制音轨连接到处于活动状态的录制线程以形成多个录制线程。
另外，处理器可以被配置为使用与所获取的音频信号相关的至少一个录制音轨来识别音频信号的峰值电平。
另外，处理器可以被配置为控制显示器将所识别的峰值电平显示为所获取的音频信号的幅度。
另外，处理器可以被配置为：当所获取的音频信号满足波束成形条件时，基于方向性将所获取的音频信号分离为多个通道并存储多个通道；以及当所获取的音频信号不满足波束成形条件时，基于麦克风的数量将所获取的音频信号分离为多个通道并存储多个通道。
另外，处理器可以被配置为控制每个录制音轨或每个通道的音频信号的音量。
同时，处理器可以被配置为控制通信接口向外部设备发送响应请求信号并接收响应信号，并且被配置为基于从发送响应请求信号的时间到接收到响应信号的时间的发送/接收时间来获取测距信息。
另外，麦克风可以包括定向麦克风，并且处理器使在除了定向麦克风所指向的方向之外的方向上获取的音频信号静音。
根据本公开的另一实施例，一种以超宽带(UWB)方式与外部设备进行通信的电子设备的控制方法包括：捕获包括在所述外部设备附近的主体的图像；基于从所述外部设备接收的数据来获取关于所述外部设备的测距信息和角度信息；基于由传感器检测到的相机的方向来获取图像捕获方向信息；基于所获取的图像捕获方向信息、测距信息和角度信息来识别用于获取所述主体的音频信号的外部设备；当与外部设备的距离小于预定距离时，控制麦克风获取主体的音频信号，并且当与外部设备的距离大于或等于预定距离时，通过外部设备获取主体的音频信号，以及将指示所获取的音频信号的幅度的用户界面(UI)与所捕获的图像一起显示。
同时，该控制方法还可以包括：识别录制线程是否处于活动状态；当所述录制线程处于非活动状态时，执行初始录制设置过程以存储所获取的音频信号；生成录制线程；针对所生成的录制线程生成多个录制音轨；以及基于所生成的多个录制音轨来存储并显示与所获取的音频信号相关的数据。
同时，该初始录制设置过程可以包括：编解码器设置过程、音频DSP设置过程、内核驱动器设置过程、或音频硬件抽象层(HAL)设置过程中的至少一个。
另外，该控制方法还可以包括：当录制线程处于活动状态时，省略初始录制设置过程并生成处理所获取的音频信号的多个录制音轨；以及在生成录制线程的过程中，将与音频信号相关的多个录制音轨连接到处于活动状态的录制线程，以形成多个录制线程。
另外，该控制方法还可以包括：使用与所获取的音频信号相关的至少一个录制音轨来识别所述音频信号的峰值电平。
另外，在显示UI的过程中，可以将所识别的峰值电平显示为所获取的音频信号的幅度。
另外，在存储所获取的音频信号的过程中，当所获取的音频信号满足波束成形条件时，所获取的音频信号可以基于方向性被分离为多个通道并被存储，并且当所获取的音频信号不满足波束成形条件时，所获取的音频信号可以基于麦克风的数量被分离为多个通道并被存储。
该控制方法还可以包括：控制每个录制音轨或每个通道的音频信号的音量。
同时，在获取测距信息和角度信息的过程中，可以将响应请求信号发送给外部设备以接收响应信号，并且基于从发送响应请求信号的时间到接收到响应信号的时间的发送/接收时间来获取测距信息。
另外，麦克风可以包括定向麦克风，并且在获取音频信号中，可以使在除了定向麦克风所指向的方向之外的方向上获取的音频信号静音。
有益效果
根据本公开的各种实施例，该电子设备和控制方法可以通过如下操作改善用户体验：通过使用UWB通信方法与外部设备进行通信来操作主体的音频信号。
本公开的效果不限于上面提到的效果，并且本领域技术人员根据以下描述将清楚地理解未被提及的其他效果。
附图说明
图1是示出了根据本公开的实施例的基于超宽带(UWB)的多音频操作方法的图。
图2是示出了根据本公开的实施例的电子设备的配置的框图。
图3是根据本公开的实施例的电子设备的特定配置的框图。
图4是示出了根据本公开的实施例的处理器的架构的框图。
图5是示出了根据本公开的实施例的控制多麦克风的音量的过程的框图。
图6是示出了根据本公开的实施例的控制多个设备的音频信号的音量的过程的框图。
图7是示出了根据本公开的实施例的接收主体的电子设备的信息的过程的流程图。
图8是示出了以UWB通信方式接收外部设备的信息的实施例的图。
图9是示出了根据本公开的实施例的获取远距离主体的音频信号的过程的图。
图10是示出了根据本公开的实施例的监测音轨的电平的图。
图11是示出了根据本公开的实施例的测量音频信号的峰值电平的过程的流程图。
图12是示出了根据实施例的录制过程的图。
图13是示出了根据本公开的实施例的获取音频信号的过程的流程图。
图14是示出了根据本公开的实施例的分析所获取的音频信号的过程的流程图。
图15是示出了根据实施例的音频信号的通道的图。
图16是示出了根据本公开的实施例的将音频信号的电平可视化的过程的流程图。
图17是示出了根据本公开的实施例的包括音频信号的电平的用户界面(UI)的图。
图18是示出了根据本公开的实施例的控制录制电平的过程的流程图。
图19是示出了根据本公开的实施例的电子设备的控制方法的流程图。
图20a是示出了根据本公开的实施例的显示对象的音频信号的音量的UI的图。
图20b是示出了根据本公开的实施例的用于控制对象的音频信号的音量的UI的图。
图21是示出了使拍摄者的声音静音的实施例的图。
图22是示出了根据主体的移动来跟踪并显示声音的实施例的图。
图23是示出了单独地显示并控制多个外部设备的音频信号的实施例的图。
具体实施方式
在下文中，将参考附图来详细地描述各种实施例。可以对本文描述的实施例进行各种修改。具体实施例可以在附图中示出并且在具体实施方式中被详细描述。但应当理解，附图中所公开的具体实施例仅旨在促进对各种实施例的理解。因此，技术思想不受本附图中公开的具体实施例的限制，而是包括落入本公开的精神和范围内的所有等同物或替代物。
包括诸如第一、第二等序数在内的术语可被用于描述各种元件，但这种元件不限于上述术语。上述术语仅用于将一个组件与另一组件彼此区分的目的。
在本说明书中，术语“包括”或“具有”等旨在指定所述特征、整数、步骤、操作、元件、部件或其组合的存在，但不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件或其组合。应当理解，当元件被称为“连接”到另一元件时，它可以直接在另一元件或层上或直接连接到另一元件或层，或者可以存在介入中间的元件或层。同时，当元件被称为“直接连接”到另一元件时，应当理解为它们之间不存在其他元件。
同时，本说明书中使用的组件的“模块”或“部分”执行至少一种功能或操作。另外，“模块”或“部分”可以通过硬件、软件、或硬件和软件的组合来执行功能或操作。另外，除了要在特定硬件中执行或在至少一个处理器中执行的“模块”或“部分”之外，多个“模块”或多个“部分”可以集成到至少一个模块中。除非上下文另外明确指出，否则单数表述包括复数表述。
在本公开的描述中，除非前面的步骤必须在逻辑上和时间上在后续步骤之前执行，否则每个步骤的顺序应当被理解为是非限制性的。换言之，除了上述例外情况之外，即使被描述为后续步骤的过程在被描述为前面步骤的过程之前执行，也不影响本公开的性质，并且权利要求应当被定义为与步骤的顺序无关。在本公开中，“A或B”被定义为指代包括A和B两者以及选择性地指示A或B。还应当理解，术语“包括”旨在涵盖除了被列为包括的元件之外的其他元件。
同时，对于本公开中执行的信息(数据)传输过程，可以取决于需要来应用密文/解密，并且本公开和权利要求中的描述信息(数据)传输过程的所有表述应当被解释为包括以下情况：执行密文/解密，即使在这方面未单独地提及。另外，在本公开中，诸如“从A向B发送(传输)”或“A从B接收”等形式的表述还包括发送(传输)或接收对象而另一介质被包括在其间的情况，并且表述不一定仅表示仅将对象从A直接发送(传输)或接收到B的情况。
在本说明书中，仅描述了描述本公开所必需的必要组件，并且未提及与本公开的实质无关的组件。另外，仅所提及的组件不应被解释为排他性地包括，而应被解释为非排他性地包括任何其他组件。
另外，在本公开的描述中，当确定与其相关的已知功能或组件的详细描述可能会不必要地模糊本公开的主旨时，将缩减或省略其详细描述。同时，可以独立地实现或操作每个实施例，但可以组合地实现或操作每个实施例。
图1是示出了根据本公开的实施例的基于超宽带(UWB)的多音频操作方法的图。
参考图1，示出了电子设备100和外部设备200。电子设备100执行应用。例如，该应用可以是执行诸如视频录制、动画(moving pictu re)、录音、语音识别之类的功能的应用。电子设备100响应于应用执行来捕获包括主体的图像。该主体可以位于外部设备200附近。另外，可以存在多个主体和多个外部设备200。例如，如图1所示，第一外部设备至第三外部设备200-1、200-2和200-3可以位于电子设备100周围。
另外，电子设备100可以使用超宽带(UWB)通信方法与外部设备200进行通信并从外部设备200接收数据。例如，从外部设备200接收到的数据可以包括基于电子设备100的外部设备200的测距信息和角度信息(例如，到达角(AOA))。电子设备100可以基于从外部设备200接收的测距信息和角度信息来确定电子设备100和外部设备200之间的相对位置。UWB通信方法是一种使用约500MHz的非常宽的频率带宽的短程无线通信技术。UWB通信方法可以以约100Mbps或更高的速度并且以低功率发送数据。
电子设备100基于由传感器检测到的相机方向来获取图像捕获方向信息。另外，电子设备100可以提高通过接收GPS信息所获取的图像捕获方向信息的准确性。电子设备100基于所获取的图像捕获方向信息、测距信息和角度信息来识别用于获取主体的音频信号的外部设备200。例如，当所识别的外部设备200比预定距离近时，电子设备100通过电子设备100中包括的麦克风来获得主体的音频信号(例如，语音)。即，电子设备100可以通过麦克风接收主体的音频信号。当所识别的外部设备200比预定距离远时，电子设备100通过外部设备200获取主体的音频信号。即，电子设备100可以通过通信接口从外部设备200接收主体音频信号。作为示例，预定距离可以被设置为0.5m、1m、1.5m等。上述示例是实施例，并且可以根据麦克风的性能、方向性等适当地设置预定距离。
电子设备100可以分析获取的音频信号和捕获的图像。电子设备100可以从捕获的图像中识别主体。另外，电子设备100可以确定与所识别的主体相对应的音频信号，并确定音频信号的电平(或幅度)。电子设备100基于确定结果将指示音频信号的电平的用户界面(UI)与捕获的图像一起显示。指示音频信号电平的UI可以包括增强现实(AR)。即，可以将音频信号电平作为AR来显示。例如，电子设备100可以通过分析所捕获的图像来识别第一主体和第二主体。另外，电子设备100可以基于输入到麦克风的音频信号的距离和方向来确定与音频信号相对应的主体。备选地，电子设备100可以基于外部设备200的距离和方向来确定与音频信号相对应的主体。电子设备100可以将所识别的主体映射到对应的音频信号。电子设备100显示包括映射到所识别的主体的音频信号电平的UI。
例如，电子设备100可以包括智能电话、平板型PC、膝上型计算机、导航设备、平板PC和可穿戴设备。另外，外部设备200可以包括智能电话、平板型PC、膝上型计算机、导航设备、平板PC、可穿戴设备、耳机、头戴式耳机、麦克风、扬声器等。在下文中，将描述电子设备的配置。
图2是示出了根据本公开的实施例的电子设备的配置的框图，并且图3是示出了根据本公开的实施例的电子设备的特定配置的框图。将一起参考图2和图3描述该电子设备。
参考图2，电子设备100包括通信接口110、麦克风120、相机130、传感器140、显示器150和处理器160。
通信接口110以UWB通信方式与外部设备进行通信。例如，通信接口110可以包括UWB通信模块。通信接口110可以使用UWB通信模块向外部设备发送请求数据的消息并从外部设备接收响应消息。另外，由于UWB是定向的，因此通信接口110可以接收外部设备的方向或角度信息。另外，通信接口110可以从外部设备接收识别信息。例如，识别信息可以包括主体的姓名、电话号码、主体的面部图像、以及外部设备的唯一信息。另外，通信接口110可以接收关于与外部设备连接的外围设备的信息。作为实施例，主体的面部图像可以由外部设备使用外部设备或连接的SNS中存储的图像来提取。处理器160可以基于请求消息的发送与响应消息的接收之间的发送/接收时间来计算电子设备100和外部设备之间的距离。即，处理器160可以基于从响应请求信号的发送时间到响应信号的接收时间的发送/接收时间来获取测距信息。
另外，当外部设备位于比预定距离(远程距离)远时，通信接口110可以从外部设备接收音频信号。同时，通信接口110可以包括能够以除了UWB之外的方法(例如，LTE、Wi-Fi和蓝牙)执行通信的模块。因此，通信接口110可以通过诸如UWB、LTE、Wi-Fi或蓝牙之类的通信方法连接到外部设备，并且根据连接的通信方法来接收音频信号。另外，通信接口110可以包括GPS模块。通信接口110可以通过GPS模块来接收位置信息。当处理器160确定电子设备100的位置和方向时，可以一起考虑所接收的位置信息。通信接口120与外部设备进行通信，并且可以被称为通信单元、通信模块、收发器等。
麦克风120可以接收音频信号。作为示例，电子设备100可以包括多个麦克风。多个麦克风可以设置在电子设备100的上区域、下区域、前区域、后区域、相机布置区域等中。多个麦克风中的至少一个可以是定向麦克风。麦克风120可以在处理器160的控制下从位于预定距离内的主体获取音频信号。
相机130捕获包括主体的图像。作为示例，电子设备100可以包括多个相机。多个相机中的至少一个可以是深度相机。
传感器140检测相机130所面向的方向。例如，相机130可以被固定设置在电子设备100上。因此，相机130所指向的方向可以与电子设备100所指向的方向一致。另外，相机130所面向的方向可以是图像捕获方向。因此，处理器160可以根据由传感器140检测到的方向信息来获取图像捕获方向信息。例如，传感器140可以包括加速度传感器、重力传感器、陀螺仪传感器、地磁传感器、方向传感器、运动识别传感器、接近传感器等。
显示器150显示所捕获的图像。另外，显示器150可以将包括所获取的音频信号的电平的UI与所捕获的图像一起显示。例如，显示器150可以以电平表的形式在UI中显示音频信号的电平。另外，包括音频信号的电平的UI可以包括增强现实(AR)。显示器150可以实现为液晶显示器(LCD)、有机发光二极管(OLED)、柔性显示器或触摸屏。
处理器160可以控制电子设备100的每个组件。例如，处理器160可以控制通信接口110与外部设备发送/接收数据，并控制传感器140检测图像捕获方向。如上所述，处理器160可以基于请求消息的发送与响应消息的接收之间的发送/接收时间来获取电子设备100与外部设备之间的测距信息。另外，处理器160可以基于由传感器感测的相机130的方向来获取图像捕获方向信息。处理器160可以通过使用所接收的位置信息获取图像捕获方向信息来提高所获取的图像捕获方向信息的准确性。处理器160基于所获取的图像捕获方向信息、测距信息和角度信息来识别用于获取主体的音频信号的外部设备。当外部设备位于比预定距离近时，处理器160控制麦克风120从主体接收音频信号。当外部设备位于比预定距离远时，处理器160控制通信接口110接收输入到外部设备的主体的音频信号。
处理器160可以分析所捕获的图像。处理器160可以确定所捕获的图像中的主体，并且可以确定主体的方向、角度等。当电子设备100包括深度相机时，处理器160可以确定与主体的距离。处理器160可以基于从所分析的图像确定的外部设备的方向信息、角度信息和测距信息连同通过通信接口110接收的识别信息来识别主体和主体的位置。
处理器160可以控制相机130(例如，可变快门等)，并且基于通过分析所捕获的图像获取的信息和通过UWB通信方法从外部设备接收的信息来设置对应的控制界面。同时，处理器160可以向特定外部设备发送所捕获的图像。处理器160可以处理所获取的音频信号并确定音频信号的峰值电平。下面将详细描述处理器160处理音频信号的实施例。
处理器160控制显示器150显示所捕获的图像。处理器160控制显示器150将指示所获取的音频信号的电平(幅度)的UI(例如，AR)与所显示的图像一起显示。处理器160可以基于通过分析所捕获的图像获取的信息来识别主体，并且识别所获取的音频信号的发声位置。处理器160可以确定对应于主体的音频信号。处理器160可以将所识别的主体映射到对应的音频信号。另外，处理器160可以控制显示器150显示映射到在所捕获的图像的主体附近的区域的音频信号的电平。
因此，当基于UWB距离和角度信息对多个主体进行成像时，本公开的电子设备100可以在录制时仅选择和跟踪特定主体。
同时，电子设备100还可以包括除了上述组件之外的其他组件。
参考图3，电子设备100还可以包括输入接口170、扬声器180和存储器190。
输入接口170可以从用户接收控制命令。例如，输入接口170可以实现为键盘或触摸板。输入接口170执行从用户接收命令的功能，并且也可以被称为输入单元或输入模块。
同时，除了上述的键盘和触摸板之外，输入接口170还可以实现为相机130、麦克风120、传感器140或显示器150。例如，当输入接口170实现为相机130时，电子设备100可以对用户的面部表情或动作进行成像。处理器160可以基于所成像的面部表情或动作来识别控制命令。当输入接口170实现为麦克风120时，电子设备100可以接收用户的语音。处理器160可以基于输入的语音来识别控制命令。当输入接口170实现为传感器140时，传感器140可以接收用户的动作等的输入。处理器160可以基于输入的信号来识别控制命令。另外，当显示器150实现为触摸屏时，电子设备100可以通过触摸屏接收控制命令。
扬声器180可以输出所获取的音频信号。另外，扬声器180可以通过语音或通知声音输出用户的输入命令、电子设备100的状态相关信息或操作相关信息。
存储器190可以存储用于执行电子设备100的功能的数据，并且可以存储在电子设备100中运行的程序和命令。存储器190可以存储所获取的音频信号或所捕获的图像。另外，存储器190可以存储识别信息。例如，存储器190可以以诸如ROM、RAM、HDD、SSD或存储卡之类的类型来实现。
电子设备100可以包括上述所有组件，或者可以包括一些组件。另外，除了上述组件之外，电子设备100还可以包括执行各种功能的其他组件。
图4是示出了根据本公开的实施例的处理器的架构的框图。
参见图4，处理器160可以包括预处理模块161、录制线程162、监测录制音轨163、音频电平计算模块164、图像分析模块165、录制电平调节模块166和录制音轨167。另外，处理器160可以执行应用10。前述模块160可以以硬件或软件的形式实现，并且可以被包括在处理器160中或被存储在存储器190中。当前述模块存储在存储器190中时，处理器160可以在处理音频信号时从存储器190中加载该模块。
预处理模块161可以从麦克风120接收音频信号。备选地，预处理模块161可以通过通信接口从外部设备接收音频信号。预处理模块161可以处理从音频驱动器接收的脉冲编码调制(PCM)音频数据。音频驱动器可以被包括在预处理模块161中或者可以实现为麦克风120和预处理模块161之间的单独模块。例如，预处理模块161可以执行诸如噪声抑制和动态范围控制(DRC)之类的处理。另外，预处理模块161可以在接收到全局录制电平调节事件时执行灵敏度调节。当灵敏度高时，可以将具有相同幅度的音频信号放大到更大的大小。由于预处理模块161中调节的灵敏度是全局的，因此灵敏度可以影响n个录制音轨167的音量。
录制线程162可以缓存预处理模块161中处理的PCM数据。录制线程162可以对音频驱动器的操作与录制音轨的操作之间的音频属性进行同步。例如，录制线程162可以执行用于同步采样速率属性的重采样操作和用于同步音频格式属性的重新格式化操作。另外，录制线程162可以将单个音频数据复制(或拷贝)到n个录制音轨167。由于音频数据被复制到n个录制音轨167，因此可以克服仅一个应用可以占用一个音频信号的资源的限制。即，n个应用中的每一个可以使用被复制到n个录制音轨167的音频信号的资源中的一个音频信号的资源。因此，在本公开中，当一个应用占用音频信号的资源时，另一应用可以使用该音频信号的资源，从而解决了无法执行多重录制的问题。
监测录制音轨163可以在录制开始之前预先准备好麦克风120(或音频信号设置)，并监测录制周围的噪声电平。由于监测录制音轨163预先设置了要由录制音轨167使用的音频信号资源，因此可以缩短录制开始时间。因此，本公开具有在不丢失录制开始时刻的情况下开始录制的效果。另外，监测录制音轨163可以在录制开始之前监测环境噪声电平，并将所监测到的噪声电平显示在屏幕上。因此，本公开可以帮助用户当在嘈杂的环境中录制时将录制电平设置得较高。
音频电平计算模块164可以计算输入音频信号的电平。音频电平计算模块164可以从输入音频信号中分离PCM通道。例如，音频电平计算模块164可以针对每个通道分离所接收的PCM音频数据。音频电平计算模块164可以针对每个分离的通道计算音频数据的电平。
图像分析模块165可以分析从相机130输入的所捕获的图像。图像分析模块165可以确定所捕获的图像中的主体，并且可以确定主体的方向、角度等。当电子设备100包括深度相机时，图像分析模块165可以确定与主体的距离。另外，图像分析模块165可以确定引起噪声的对象的存在。
录制电平调节模块166可以生成用于调节录制音量的事件。录制音量调节事件可以包括全局录制调节事件和局部录制调节事件。可以将全局录制调节事件传递给预处理模块161，并且预处理模块161可以调节灵敏度，以及可以将局部录制调节事件传递给录制音轨167，并且录制音轨167可以调节录制音量。例如，录制音量调节可能包括两种方法：自动或手动。在自动录制音量调节的情况下，录制电平调节模块166可以基于从相机130接收的场景分析数据和从监测录制音轨163接收的环境噪声来自动地调节录制音量。
录制音轨167可以向编码器传递从录制线程162提供的PCM音频数据。编码器可以对所传递的PCM音频数据进行编码，并将经编码的数据存储在存储器190中。另外，当局部录制电平调节事件被传递时，录制音轨167可以通过录制电平放大或衰减PCM音频数据。由于录制音轨167中调节的录制电平是局部的，因此录制电平可以仅影响与对应录制音轨相对应的应用(App)的录制音量。
同时，处理器可以包括可视化模块。PCM音频数据可以被分类为麦克风模式或定向模式，并且被分离为通道。预处理模块161可以确定可视化模式，并且根据对应的模式对每个通道的所提取的PCM音频数据进行分类。可视化模块可以存储根据模式分类的每个PCM通道或者可视化每个PCM通道以将其显示在显示器上。
下面详细描述录制线程162和录制音轨167。
图5是示出了根据本公开的实施例的控制多麦克风的音量的过程的框图，并且图6是示出了根据本公开的实施例的控制多个设备的音频信号的音量的过程的框图。一起参考图5和图6给出描述。
参考图5，电子设备可以包括多个麦克风，包括第一麦克风120-1、第二麦克风120-2和第n麦克风120-n。另外，处理器160可以包括音频模块20和录制线程162，并且可以包括多个录制音轨，包括第一录制音轨167-1、第二录制音轨167-2和第n录制音轨167-n。
例如，可以通过电子设备的多个麦克风120-1、120-2和120-n输入单个用户的语音。可以将一个输入音频信号传递给音频模块20。音频模块20可以包括用于将输入音频信号转换为PCM音频数据的音频驱动器。处理器160可以生成与所转换的PCM音频数据相对应的录制线程162。尽管输入音频信号是通过多个麦克风120-1、120-2和120-n输入的，但输入音频信号是同一音频信号。因此，在图5的情况下，可以生成一个录制线程162。处理器160可以将一个录制线程162生成为多个录制音轨167-1、167-2和167-n。可以在每个应用中使用每个录制音轨。因此，当生成n个音轨时，n个应用可以使用音频信号资源。
同时，如上所述，当电子设备与外部设备之间的距离大于或等于预定距离时，电子设备可以从外部设备获取音频信号。例如，外部设备可以通过麦克风接收相邻用户(主体)的音频信号，并且通过通信接口向电子设备发送所接收的音频信号。作为实施例，如图6所示，电子设备可以通过电子设备中包括的多个麦克风120来获取第一用户的音频信号，通过第二电子设备中包括的麦克风210来获取第二用户的音频信号，以及通过第N电子设备中包括的麦克风310来获取第三用户的音频信号。可以将所获取的用户的音频信号传递给音频模块20。音频模块20可以包括音频驱动器，并且将每个输入音频信号转换为PCM音频数据。处理器160可以生成与所转换的PCM音频数据相对应的多个录制线程162-1、162-2和162-N。录制线程162-1、162-2和162-N中的每一个可以对应于通过每个设备的麦克风120、210和310输入的音频信号。处理器160可以分别针对录制线程162-1、162-2和162-N生成多个录制音轨1671、1672和1673。
因此，本公开的电子设备可以支持多重录制。
图7是示出了根据本公开的实施例的接收主体的电子设备的信息的流程图，图8是示出了以UWB通信方式接收外部设备的信息的实施例的图，以及图9是示出了根据本公开的实施例的获取远距离主体的音频信号的过程的图。一起参考图7至图9给出描述。
参考图7，电子设备可以请求来自外部设备的数据传输(S710)，并且确定外部设备是否支持UWB通信(S720)。作为示例，电子设备可以使用UWB来识别外部设备。电子设备可以通过UWB信号确定关于外部设备的测距信息和角度信息。电子设备可以请求来自一个或多个外部设备的数据传输，并且确定外部设备是否支持UWB通信。外部设备可以是位于在主体附近的区域中的设备。备选地，外部设备可以是主体所拥有(或占有)的设备。
电子设备可以改变UWB通信状态信息并与外部设备进行通信(S730)。电子设备可以以UWB通信方式接收信息(S740)。电子设备可以将通信状态信息改变为UWB，并且开始与外部设备的指定通信。电子设备可以通过UWB通信方法从外部设备接收识别信息。例如，识别信息可以包括主体信息，并且可以包括主体的姓名、电话号码、主体的面部图像、以及外部设备的唯一信息。另外，通信接口110可以接收关于与外部设备连接的外围设备的信息。电子设备可以向外部设备发送请求消息，并接收响应消息。电子设备可以测量消息发送/接收时间，并且基于所测量的时间来确定与外部设备的距离。由于UWB是定向的，因此电子设备可以接收位置相关信息(例如，外部设备的方向、测距信息和角度信息)，并且可以基于所接收的位置相关信息来识别外部设备。电子设备可以从多个外部设备中选择所识别的外部设备。即，电子设备可以接收与所选择的外部设备相对应的音频信号。
作为实施例，如图8所示，用户的电子设备100的周围可以是简(Jane)的智能电话201、汤姆(Tom)的智能电话202、布朗(Brown)的智能电话203、以及凯特(Kate)的智能电话204。电子设备可以通过UWB通信来识别简的智能电话201、汤姆的智能电话202、布朗的智能电话203、以及凯特的智能电话204的位置和用户。当电子设备100选择布朗的智能电话203时，它可以从布朗的智能电话203接收布朗的音频信号。
同时，当与主体(或外部设备)的距离小于预定距离时，电子设备可以通过麦克风接收音频信号。当与主体(或外部设备)的距离大于或等于预定距离时，电子设备可以通过外部设备的麦克风接收音频信号。作为实施例，如图9所示，电子设备100可以请求数据的传输，并以UWB通信方式与主体的外部设备200-1发送/接收消息。当主体使用无线耳机200-3时，无线耳机200-3可以通信地连接到主体的外部设备200-1。主体的外部设备200-1可以向电子设备100发送关于无线耳机200-3的信息。电子设备100可以识别无线耳机200-3的存在。另外，电子设备100可以通过无线耳机200-3和外部设备200-1来接收主体的音频信号。备选地，电子设备100可以通过无线耳机200-3直接接收主体的音频信号。
电子设备100可以在所接收的音频信号的监测录制音轨中监测环境噪声。
图10是示出了根据本公开的实施例的监测音轨的电平的图。
在用户开始声音录制或视频录制之前，电子设备可以实时显示环境噪声的电平。电子设备可以通过提供可视化的音量电平在声音录制或视频录制期间向用户提供周围环境信息。
电子设备可以在开始声音录制或视频录制之前生成监测音轨。监测音轨可以在预处理模块中以帧为单位分析音频信号的峰值电平。另外，电子设备可以实时显示所分析的峰值电平。分析音频信号的幅度的方法可以包括均方根(RMS)分析方法和峰值电平分析方法。如图10所示，峰值电平是指实时的最大幅度，并且RMS是指区间的平均幅度。RMS可以获取区间的平均音频电平值，但它不适合于测量实时音频电平。同时，由于峰值电平计算短时间的音频能量，因此它适合于表示实时音频能量。因此，本公开的电子设备监测环境噪声，并实时显示噪声的峰值电平能量。
图11是示出了根据本公开的实施例的测量音频信号的峰值电平的过程的流程图。峰值电平可以指帧周期期间的最大值。
参考图11，电子设备100可以将峰值电平值初始化为最小值(S1110)。电子设备可以确定是否存在下一帧(S1120)。如果存在下一帧，则电子设备可以确定当前帧的PCM值是否小于峰值电平(S1130)。
如果当前帧的PCM值大于峰值电平，则电子设备可以再次确定是否存在下一帧(S1120)。如果当前帧的PCM值小于峰值电平，则电子设备可以将当前帧的PCM值改变为峰值电平(S1140)并再次确定是否存在下一帧(S1120)。
如果不存在下一帧，则电子设备可以转换峰值电平(S1150)。另外，电子设备可以可视化并显示峰值电平。
同时，当录制功能已经在使用中时，电子设备可以省略现有的录制设置过程。
图12是示出了根据实施例的录制过程的图。
当录制开始时，电子设备需要设置各种模块来处理音频信号。例如，电子设备需要设置(初始化)编解码器、音频DSP、内核驱动器、音频硬件抽象层(HAL)等，并生成录制线程25和录制音轨26。即，初始录制设置过程可以包括编解码器设置过程21、音频DSP设置过程22、内核驱动器设置过程23和音频HAL设置过程24中的至少一个。因此，电子设备可能花费时间来设置音频信号处理过程，并且在接收到声音录制或视频录制命令之后可能出现几毫秒到几十毫秒的延迟。
如果电子设备已经使用了录制功能，则可以连接现有的录制线程，并复制相同的数据。即，当录制线程是活动的时，电子设备可以省略初始录制设置过程并生成多个录制音轨以处理所获取的音频信号。另外，电子设备可以通过将与音频信号相关的多个录制音轨连接到活动的录制线程来形成多个录制线程。因此，本公开的电子设备可以通过精简内核和音频信号处理的准备时间来经验性地减少用户开始声音录制和视频录制的时间。
图13是示出了根据本公开的实施例的获取音频信号的过程的流程图。
参考图13，电子设备可以确定是否使用录制功能(S1310)。例如，电子设备可以确定录制线程是处于活动状态还是处于非活动状态。如果录制线程处于非活动状态，则电子设备可以生成监测录制音轨(S1320)。例如，如果不存在正在使用的录制，则电子设备可以新生成环境噪声监测录制音轨。
电子设备可以连接麦克风路径(S1330)。例如，当新生成了要监测的录制音轨时，电子设备可以控制麦克风模块与音频驱动器之间的移动路径以从特定麦克风设备获取音频信号。电子设备可以获取音频数据(S1340)。电子设备可以执行录制线程循环麦克风数据获取操作。例如，电子设备可以通过以固定的时间间隔对连接的麦克风设备的输入信号重复执行录制线程循环来实时获取麦克风的输入信号。
电子设备可以对所获取的音频数据执行预处理(S1350)。例如，电子设备可以处理所接收的PCM音频数据。作为实施例，电子设备可以对PCM音频数据执行诸如噪声衰减、滤波和放大之类的信号处理。另外，电子设备可以使用两个或更多个麦克风数据之间的信号差(波束成形)来提取定向音频数据。
同时，如果录制线程处于活动状态，则电子设备可以生成重复录制音轨(S1360)。例如，如果n个应用均请求录制操作，则电子设备可以省略麦克风路径连接过程(S1330)(或初始录制设置过程)，并重用先前建立的麦克风路径。因此，电子设备可以在减少设置时间的同时生成n个重复的录制音轨。
电子设备可以连接现有的录制线程并复制相同的数据(S1370)。例如，电子设备可以将所生成的重复录制音轨连接到先前生成的录制线程循环的子音轨。另外，电子设备在获取麦克风数据(音频数据)时，可以复制同一数据并将其发送给连接的子音轨中的每一个。
图14是示出了根据本公开的实施例的分析所获取的音频信号的过程的流程图。
电子设备可以分析所接收的音频，提取并存储通道。例如，在录制操作期间，电子设备可以根据方向性、对象或麦克风设备对从第N麦克风输入的音频信号进行分类，并且测量每个声音的响度。
参考图14，电子设备可以执行预处理功能(S1410)。例如，电子设备可以在预处理模块中处理从音频驱动器接收的PCM音频数据。
电子设备可以确定波束成形使用条件(S1420)。例如，电子设备可以确定所获取的PCM数据是否满足波束成形使用条件。至少需要三个物理固定的麦克风来满足波束成形使用条件。电子设备可以检查所接收的PCM数据中是否存在三个或更多个麦克风数据。
当满足波束成形使用条件时，电子设备可以执行定向模式操作(S1430)。例如，电子设备可以通过将波束成形应用于三个或更多个麦克风信号来针对每个方向(例如，八个方向)提取数据。
如果不满足波束成形使用条件，则电子设备可以执行麦克风模式操作(S1450)。例如，电子设备可以将所获取的PCM数据的每个通道分离为第一麦克风数据、第二麦克风数据、……、第n麦克风数据。另外，电子设备可以从第N外部设备接收第N外部设备的第一麦克风数据、第二麦克风数据、……、第N麦克风数据，并且分离每个麦克风数据。电子设备可以提取并存储PCM通道(S1440)。
图15是示出了根据实施例的音频信号的通道的图。
如图15所示，可以针对每个定向通道或麦克风通道存储分离的音频信号。
例如，当所获取的音频信号满足波束成形条件时，电子设备可以基于方向性来将所获取的音频信号分离为多个定向通道并进行存储。备选地，当所获取的音频信号不满足波束成形条件时，电子设备可以基于麦克风的数量来将所获取的音频信号分离为多个麦克风通道并进行存储。
图16是示出了根据本公开的实施例的将音频信号的电平可视化的过程的流程图。
电子设备可以可视化并显示音频信号的电平。例如，电子设备可以通过根据定向模式或麦克风模式对音频信号进行分类来确定可视化模式。另外，电子设备可以对根据每个通道的对应模式提取的PCM数据进行分类和可视化，并以音频信号的电平显示通道。
参考图16，电子设备可以执行可视化模块操作(S1610)。例如，电子设备可以将所获取的PCM通道数据用于可视化模块。电子设备可以分离PCM通道数据(S1620)。例如，电子设备可以根据每个通道分离所获取的PCM通道数据。
电子设备可以计算通道电平(S1630)。例如，电子设备可以针对分离的PCM数据计算每个通道的电平。电子设备可以显示通道电平屏幕(S1640)。例如，电子设备可以使用各个通道的电平值将图像中包括的对象与定向通道或麦克风通道的电平值进行映射。另外，电子设备可以显示所映射的对象和麦克风通道的电平值。
图17是示出了根据本公开的实施例的包括音频信号电平的UI的图。
参考图17，电子设备可以显示包括音频指示符31、麦克风选项类型32、麦克风灵敏度范围33和直方图34在内的音频设置UI，该音频指示符31包括通道或对象的音频电平值。
音频设置的输入电平可以具有0dBFs至-48dBFs的值。dBFs没有参考值，并且表示量化的动态范围。电平应以减号为前缀，并且最大值可以是零。0dBFs是指电平在内部DSP处理中作为数据而不是电压被最大化的状态，并且dBFs可以是峰值。电子设备的麦克风可以具有方向性。因此，电子设备可以显示麦克风的选项类型32的UI，其显示全方位、前方和后方模式。电子设备可以包括显示外部麦克风的选项类型的USB和蓝牙菜单。麦克风灵敏度的范围33可以是-12至+12(总共25级)。直方图34可以显示关于所捕获的图像的亮度的信息。
另外，电子设备还可以显示变焦杆(zoom rocker)、比例等。变焦锁可以以恒定速度调节放大/缩小。
因此，本公开允许用户通过显示用户麦克风电平来识别麦克风电平。另外，本公开可以在各种场景(例如录制、语音识别、通话、VL OG+USB、BT、终端MIC)中始终监测麦克风音量。
同时，图17所示的UI是示例，并且可以取决于电子设备的形状、显示器的大小和显示器的形状以各种形式显示UI。备选地，可以以各种布置和形状显示UI中包括的菜单。
图18是示出了根据本公开的实施例的控制录制电平的过程的流程图。
电子设备可以接收并处理对应于可视化音频的事件。例如，当声音录制或视频录制开始时，电子设备可以调节录制电平。例如，电子设备可以响应于附近主体来调节音频电平，并且响应于远距离主体来调节音频电平。
参考图18，电子设备可以确定是否选择了自动录制电平模式(S1810)。例如，电子设备可以确定用户是否选择了自动录制电平控制模式。
当选择了自动录制电平模式时，电子设备可以确定噪声电平范围(S1820)。例如，电子设备可以从监测模块获取环境噪声的音量电平。当所获取的音量电平在由用户指定的噪声电平范围内时，电子设备可以执行自动音量调节以避免噪声电平。
如果未确定噪声电平范围，则电子设备可以通过分析所获取的图像来控制音量(S1830)。例如，在视频录制的情况下，电子设备可以分析所获取的图像以确定是否存在引起环境噪声的因素。如果存在噪声引起因素，则可以执行音量调节操作。备选地，电子设备可以确定图像的对象是人、动物还是物体，并且自动地控制每个因素的音量。
电子设备可以执行预处理音量调节操作(S1840)。例如，当确定了噪声电平范围时(S1820)或者当通过分析图像来控制音量时(S1830)，电子设备可以执行预处理音量调节。对于每个通道可以存在音频信号的音量值，并且电子设备可以控制每个通道的音量值。即，电子设备可以控制每个定向通道或每个麦克风通道的音量。
同时，电子设备当不处于自动录制电平模式时，可以确定是否接收到录制音量控制事件(S1850)。例如，电子设备可以手动地接收音量控制命令。手动控制可以通过屏幕UI上的音量调节窗口或通过硬件音量键来控制。
当接收到录制音量控制事件时，电子设备可以确定是否控制局部音轨音量(S1860)。例如，电子设备可以根据用户的命令仅单独地控制特定应用的音量，并且仅控制特定录制音轨的音量。
当接收到局部音轨音量控制事件(单独录制音轨音量控制事件)时，电子设备可以控制局部录制音轨的音量(S1870)。例如，电子设备可以仅控制所选局部录制音轨的音频数据的音量。
电子设备可以确定是否终止录制(S188)。当电子设备确定录制尚未终止时，电子设备可以获取下一个音频数据(S1340)。
因此，本公开的电子设备可以在录制视频的同时调节麦克风音量，并且可以基于环境噪声来调节麦克风或录制电平。另外，即使在使用外部麦克风设备时，电子设备也可以以统一的电平进行录制。另外，电子设备可以根据每个操作情况来控制麦克风音量。
图19是示出了根据本公开的实施例的电子设备的控制方法的流程图。电子设备可以以UWB方式与外部设备进行通信。
参考图19，电子设备捕获包括在外部设备附近的主体的图像(S1910)。然后，电子设备基于从外部设备接收的数据来获取关于外部设备的测距信息和角度信息(S1920)。例如，电子设备可以向外部设备发送响应请求信号并接收响应信号。另外，电子设备可以基于从响应请求信号的发送时间到响应信号的接收时间的发送/接收时间来获取测距信息。
电子设备基于由传感器感测到的相机方向来获取图像捕获方向信息(S1930)。同时，电子设备可以接收卫星定位信息以增加图像捕获方向信息的准确性。电子设备基于所获取的图像捕获方向信息、测距信息和角度信息来识别用于获取主体的音频信号的外部设备(S1940)。
电子设备基于预定距离来通过麦克风或外部设备获取主体的音频信号(S1950)。例如，电子设备可以在与外部设备的距离小于预定距离时，通过麦克风获取主体的音频信号，并且在与外部设备的距离大于或等于预定距离，通过外部设备获取主体的音频信号。
同时，电子设备可以识别录制线程是否处于活动状态。当录制线程处于非活动状态时，电子设备可以执行初始录制设置过程以存储所获取的音频信号。例如，该初始录制设置过程可以包括编解码器设置过程、音频DSP设置过程、内核驱动器设置过程、以及音频硬件抽象层(HAL)设置过程中的至少一个。电子设备可以生成录制线程，并针对所生成的录制线程生成多个录制音轨。同时，当录制线程处于活动状态时，电子设备可以省略初始录制设置过程，并生成多个录制音轨以处理所获取的音频信号。另外，电子设备可以通过将与音频信号相关的多个录制音轨连接到活动的录制线程来形成多个录制线程。
电子设备可以使用与获取的音频信号相关的至少一个录制音轨来识别音频信号的峰值电平。例如，监测音轨可以识别周围环境中的噪声的峰值电平。
电子设备将指示所获取的音频信号的幅度的UI与所捕获的图像一起显示(S1960)。电子设备可以将所识别的峰值电平显示为所获取的音频信号的幅度。另外，电子设备可以存储所获取的音频信号。例如，电子设备可以基于所生成的多个录制音轨来存储并显示与所获取的音频信号相关的数据。
当所获取的音频信号满足波束成形条件时，电子设备可以基于方向性来将所获取的音频信号分离为多个通道并进行存储。如果所获取的音频信号不满足波束成形条件时，电子设备可以基于麦克风的数量来将所获取的音频信号分离为多个通道并且进行存储。
同时，电子设备可以控制每个录制音轨或每个通道的音频信号的音量。
图20a是示出了根据本公开的实施例的显示对象的音频信号的音量的UI的图，并且图20b描述了根据本公开的实施例的用于控制对象的音频信号的音量的UI。
参考图20a，电子设备可以捕获并显示包括主体的图像。另外，电子设备可以通过UWB通信方法接收外部设备的方向信息、角度信息和识别信息。另外，电子设备可以接收图像捕获方向信息。电子设备可以获取音频信号，并生成录制线程和多个录制音轨。例如，录制线程可以对应于从一个主体获取的音频信号，并且录制音轨可以对应于正在执行的多个应用。电子设备可以根据波束成形条件来基于定向模式或麦克风模式将音频信号划分为多个通道。被划分为多个通道的音频信号可以通过可视化处理在显示器上被显示为可视化的音频信号，或者存储在存储器中。同时，电子设备可以通过分析所捕获的图像来识别主体。另外，可以基于图像分析信息和所接收的信息来映射主体和音频信号。另外，如图20a所示，可以通过将音频信号映射到主体来显示音频信号。另外，如图20b所示，电子设备可以控制每个主体或每个通道的音频信号。
图21是示出了使拍摄者的声音静音的实施例的图。
作为示例，电子设备可以包括多个麦克风，并且多个麦克风可以包括定向麦克风。定向麦克风可以获取基于特定主体的音频信号。
如图21所示，定向麦克风可以优先获取儿童的语音。另外，定向麦克风可以使位于其他方向的母亲的语音静音。另外，电子设备可以录制所获取的语音。同时，电子设备可以在实时录制期间显示峰值电平能量。
即，电子设备可以包括定向麦克风，并且可以去除在除了定向麦克风所指向的方向之外的方向上获取的音频信号。
图22是示出了根据主体的移动来跟踪并显示声音的实施例的图。
如图22所示，电子设备可以跟踪并可视化与主体的移动相对应的声音。电子设备可以使用从定向麦克风获取的音频以及图像中包括的主体的面部来跟踪主体。电子设备可以通过跟踪主体以及主体的语音来录制目标主体的声音。另外，电子设备可以在实时录制期间显示峰值电平能量。
图23是示出了单独地显示并控制多个外部设备的音频信号的实施例的图。
参考图23，电子设备可以连接一个或多个外部设备并同时显示或控制音频信号。如上所述，电子设备可以根据音频信号的数量生成多个多录制线程，并且在多录制线程下生成多个录制音轨。另外，电子设备可以将所获取的音频信号分离为多个通道。因此，电子设备可以显示或存储从多个设备获取的所有音频信号，并且可以单独地控制所获取的音频信号。另外，电子设备可以实时显示与每个外部设备相对应的音频信号的峰值电平能量。
可以将根据上述各种实施例的电子设备的控制方法提供为计算机程序产品。计算机程序产品可以包括S/W程序本身或存储S/W程序的非暂时性计算机可读介质。
非暂时性计算机可读介质是在其中半永久性地存储数据的介质，而不是短时间地存储数据的介质(例如，寄存器、高速缓存、内存等)，并且可以由设备读取。具体地，上述各种应用或程序可以在非暂时性计算机可读介质中存储并提供，例如压缩盘(CD)、数字多功能盘(DVD)、硬盘、蓝光盘、通用串行总线(USB)、存储卡、以及只读存储器(ROM)。
尽管已经参考实施例描述了本公开，但本公开不限于前述具体实施例，并且相关领域技术人员应当理解，在不脱离由所附权利要求限定的本公开的范围的情况下可以进行各种修改和变化，并且这些修改和变化不应该与本公开的技术精神和前景分开理解。

Claims (15)

1.一种电子设备，包括：
通信接口，被配置为以超宽带UWB方式与外部设备进行通信；
麦克风，被配置为接收音频信号；
相机，被配置为捕获包括在所述外部设备附近的主体的图像；
传感器，被配置为检测所述相机的方向；
显示器，被配置为显示所捕获的图像；以及
处理器，
其中，所述处理器被配置为：
基于从所述外部设备接收的数据来获取关于所述外部设备的测距信息和角度信息，
基于由所述传感器检测到的所述相机的方向来获取图像捕获方向信息，
基于所获取的图像捕获方向信息、测距信息和角度信息来识别用于获取所述主体的音频信号的外部设备，
当与所述外部设备的距离小于预定距离时，控制所述麦克风获取所述主体的音频信号，并且
当与所述外部设备的距离大于或等于预定距离时，控制所述通信接口获取输入到所述外部设备的所述主体的音频信号，以及
控制所述显示器将指示所获取的音频信号的幅度的用户界面UI与所显示的图像一起显示。
2.根据权利要求1所述的电子设备，还包括：
存储器，
其中，所述处理器被配置为识别录制线程是否处于活动状态，并且当所述录制线程处于非活动状态时，所述处理器被配置为：执行初始录制设置过程以存储所获取的音频信号，生成所述录制线程，针对所生成的录制线程生成多个录制音轨，基于所生成的多个录制音轨将与所获取的音频信号相关的数据存储在所述存储器中，以及在所述显示器上显示所述数据。
3.根据权利要求2所述的电子设备，其中，所述初始录制设置过程包括编解码器设置过程、音频DSP设置过程、内核驱动器设置过程、或音频硬件抽象层HAL设置过程中的至少一个。
4.根据权利要求2所述的电子设备，其中，当所述录制线程处于活动状态时，所述处理器被配置为：省略所述初始录制设置过程，生成与所获取的音频信号相关的多个录制音轨，以及将与所述音频信号相关的多个录制音轨连接到处于活动状态的所述录制线程以形成多个录制线程。
5.根据权利要求2所述的电子设备，其中，所述处理器被配置为：使用与所获取的音频信号相关的至少一个录制音轨来识别所述音频信号的峰值电平。
6.根据权利要求5所述的电子设备，其中，所述处理器被配置为：控制所述显示器将所识别的峰值电平显示为所获取的音频信号的幅度。
7.根据权利要求2所述的电子设备，其中，
所述处理器被配置为：当所获取的音频信号满足波束成形条件时，基于方向性将所获取的音频信号分离为多个通道并存储所述多个通道，以及
当所获取的音频信号不满足所述波束成形条件时，基于麦克风的数量将所获取的音频信号分离为多个通道并存储所述多个通道。
8.根据权利要求7所述的电子设备，其中，所述处理器被配置为：控制每个录制音轨或每个通道的音频信号的音量。
9.根据权利要求1所述的电子设备，其中，
所述处理器被配置为控制所述通信接口向所述外部设备发送响应请求信号并接收响应信号，并且
所述处理器被配置为基于从发送所述响应请求信号的时间到接收到所述响应信号的时间的发送/接收时间来获取所述测距信息。
10.根据权利要求1所述的电子设备，其中，
所述麦克风包括定向麦克风，并且
所述处理器使在除了所述定向麦克风所指向的方向之外的方向上获取的音频信号静音。
11.一种以超宽带UWB方式与外部设备进行通信的电子设备的控制方法，所述控制方法包括：
捕获包括在所述外部设备附近的主体的图像；
基于从所述外部设备接收的数据来获取关于所述外部设备的测距信息和角度信息；
基于由传感器检测到的相机的方向来获取图像捕获方向信息；
基于所获取的图像捕获方向信息、测距信息和角度信息来识别用于获取所述主体的音频信号的外部设备；
当与所述外部设备的距离小于预定距离时，控制麦克风获取所述主体的音频信号，并且当与所述外部设备的距离大于或等于预定距离时，通过所述外部设备获取所述主体的音频信号，以及
将指示所获取的音频信号的幅度的用户界面UI与所捕获的图像一起显示。
12.根据权利要求11所述的控制方法，还包括：
识别录制线程是否处于活动状态；
当所述录制线程处于非活动状态时，执行初始录制设置过程以存储所获取的音频信号；
生成所述录制线程；
针对所生成的录制线程生成多个录制音轨；以及
基于所生成的多个录制音轨来存储并显示与所获取的音频信号相关的数据。
13.根据权利要求12所述的控制方法，其中，所述初始录制设置过程包括编解码器设置过程、音频DSP设置过程、内核驱动器设置过程、或音频硬件抽象层HAL设置过程中的至少一个。
14.根据权利要求12所述的控制方法，还包括：
当所述录制线程处于活动状态时，省略所述初始录制设置过程并生成处理所获取的音频信号的多个录制音轨；以及
在生成所述录制线程的过程中，将与所述音频信号相关的所述多个录制音轨连接到处于活动状态的所述录制线程，以形成多个录制线程。
15.根据权利要求12所述的控制方法，还包括：
使用与所获取的音频信号相关的至少一个录制音轨来识别所述音频信号的峰值电平。
CN202180053291.9A 2020-09-01 2021-07-13 电子设备及控制方法 Pending CN115989667A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020200111324A KR20220029866A (ko) 2020-09-01 2020-09-01 전자 장치 및 제어 방법
KR10-2020-0111324 2020-09-01
PCT/KR2021/008974 WO2022050561A1 (ko) 2020-09-01 2021-07-13 전자 장치 및 제어 방법

Publications (1)

Publication Number Publication Date
CN115989667A true CN115989667A (zh) 2023-04-18

Family

ID=80491261

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180053291.9A Pending CN115989667A (zh) 2020-09-01 2021-07-13 电子设备及控制方法

Country Status (5)

Country Link
US (1) US20230209255A1 (zh)
EP (1) EP4181493A4 (zh)
KR (1) KR20220029866A (zh)
CN (1) CN115989667A (zh)
WO (1) WO2022050561A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024048955A1 (ko) * 2022-08-31 2024-03-07 삼성전자 주식회사 동영상을 촬영하기 위한 전자 장치, 그 동작 방법 및 저장 매체
CN115665716B (zh) * 2022-12-27 2023-04-07 合肥炬芯智能科技有限公司 音频数据传输方法、电子设备以及计算机可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140362253A1 (en) * 2013-06-11 2014-12-11 Samsung Electronics Co., Ltd. Beamforming method and apparatus for sound signal
US20160064002A1 (en) * 2014-08-29 2016-03-03 Samsung Electronics Co., Ltd. Method and apparatus for voice recording and playback
US20180350405A1 (en) * 2017-05-31 2018-12-06 Apple Inc. Automatic Processing of Double-System Recording
CN111148036A (zh) * 2019-04-08 2020-05-12 广东小天才科技有限公司 一种移动设备寻找方法及系统、相关设备
US20200150262A1 (en) * 2018-11-09 2020-05-14 Samsung Electronics Co., Ltd. Method and apparatus for controlling ranging in wireless communication system
CN111526476A (zh) * 2020-04-17 2020-08-11 Oppo广东移动通信有限公司 数据传输方法、数据传输装置、存储介质与终端设备

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102044498B1 (ko) * 2012-07-02 2019-11-13 삼성전자주식회사 영상 통화 서비스를 제공하기 위한 방법 및 그 전자 장치.
KR102344045B1 (ko) * 2015-04-21 2021-12-28 삼성전자주식회사 화면을 표시하는 전자 장치 및 그 제어 방법

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140362253A1 (en) * 2013-06-11 2014-12-11 Samsung Electronics Co., Ltd. Beamforming method and apparatus for sound signal
US20160064002A1 (en) * 2014-08-29 2016-03-03 Samsung Electronics Co., Ltd. Method and apparatus for voice recording and playback
US20180350405A1 (en) * 2017-05-31 2018-12-06 Apple Inc. Automatic Processing of Double-System Recording
US20200150262A1 (en) * 2018-11-09 2020-05-14 Samsung Electronics Co., Ltd. Method and apparatus for controlling ranging in wireless communication system
CN111148036A (zh) * 2019-04-08 2020-05-12 广东小天才科技有限公司 一种移动设备寻找方法及系统、相关设备
CN111526476A (zh) * 2020-04-17 2020-08-11 Oppo广东移动通信有限公司 数据传输方法、数据传输装置、存储介质与终端设备

Also Published As

Publication number Publication date
WO2022050561A1 (ko) 2022-03-10
EP4181493A1 (en) 2023-05-17
US20230209255A1 (en) 2023-06-29
KR20220029866A (ko) 2022-03-10
EP4181493A4 (en) 2024-01-17

Similar Documents

Publication Publication Date Title
CN108401124B (zh) 视频录制的方法和装置
US20230209255A1 (en) Electronic device and control method
US20210217433A1 (en) Voice processing method and apparatus, and device
CN108335703B (zh) 确定音频数据的重音位置的方法和装置
CN111917980B (zh) 拍照控制方法及装置、存储介质和电子设备
CN108769738B (zh) 视频处理方法、装置、计算机设备和存储介质
CN112929654B (zh) 检测音画同步的方法、装置、设备及存储介质
CN112040333B (zh) 视频发布方法、装置、终端及存储介质
WO2022160958A1 (zh) 一种页面分类方法、页面分类装置和终端设备
CN115497082A (zh) 判断视频中字幕的方法、设备和存储介质
CN111314763A (zh) 流媒体播放方法及装置、存储介质与电子设备
CN111416996A (zh) 多媒体文件检测方法、播放方法、装置、设备及存储介质
CN114666433B (zh) 一种终端设备中啸叫处理方法及装置、终端
WO2023231787A1 (zh) 音频处理方法和装置
CN110136752B (zh) 音频处理的方法、装置、终端及计算机可读存储介质
CN109360577B (zh) 对音频进行处理的方法、装置存储介质
WO2022033344A1 (zh) 视频防抖方法、终端设备和计算机可读存储介质
WO2021254294A1 (zh) 一种切换音频输出通道的方法、装置和电子设备
CN112203020B (zh) 配置终端设备的相机配置参数的方法、装置和系统
CN112463086A (zh) 一种显示控制方法及电子设备
CN116708751B (zh) 一种拍照时长的确定方法、装置和电子设备
CN114488313B (zh) 一种耳机在位检测方法及装置
EP4270937A1 (en) Video recording method and electronic device
US11330151B2 (en) Selecting a type of synchronization
US9992406B2 (en) Electronic device, control method, and non-transitory storage medium for image correction responsive to environment change

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination