WO2024117506A1 - 사운드를 모드에 따라 상이하게 처리하기 위한 전자 장치 및 그 제어 방법 - Google Patents

사운드를 모드에 따라 상이하게 처리하기 위한 전자 장치 및 그 제어 방법 Download PDF

Info

Publication number
WO2024117506A1
WO2024117506A1 PCT/KR2023/015170 KR2023015170W WO2024117506A1 WO 2024117506 A1 WO2024117506 A1 WO 2024117506A1 KR 2023015170 W KR2023015170 W KR 2023015170W WO 2024117506 A1 WO2024117506 A1 WO 2024117506A1
Authority
WO
WIPO (PCT)
Prior art keywords
signal
electronic device
speaker
mode
mixed
Prior art date
Application number
PCT/KR2023/015170
Other languages
English (en)
French (fr)
Inventor
김종우
박해광
김선민
김한기
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Publication of WO2024117506A1 publication Critical patent/WO2024117506A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/12—Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/02—Details casings, cabinets or mounting therein for transducers covered by H04R1/02 but not provided for in any of its subgroups
    • H04R2201/028—Structural combinations of loudspeakers with built-in power amplifiers, e.g. in the same acoustic enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/01—Aspects of volume control, not necessarily automatic, in sound systems

Definitions

  • This disclosure relates to an electronic device and a control method thereof, and more specifically, to an electronic device that processes sound differently depending on the mode and a control method thereof.
  • Audio equipment can be classified in various classification ways.
  • audio devices can be classified into devices that are used by families or at the same time and devices that are used by individuals, based on the user.
  • the former may include a sound bar
  • the latter may include WiFi speakers, Bluetooth speakers, etc.
  • WiFi speakers When equipped with a sound bar, it may be difficult to provide additional audio equipment for individuals due to issues such as cost and space.
  • Sound bars are generally installed together with a TV that provides a screen in spaces shared by families, such as the living room, so many products support multi-channel output.
  • Multi-channel output provides a relatively wide sweet spot, allowing multiple people to enjoy the sound at the same time.
  • recent multi-channel sound bars also support wireless rear speakers that connect wirelessly to the main body for convenient installation.
  • many WiFi speakers support only mono or stereo output for easy movement and installation.
  • Multi-channel soundbars may be difficult to use as personal audio devices due to their relatively large size and limitations in movement.
  • WiFi speakers, etc. have difficulty providing a wide sound image due to their small size and small number of output channels, so they may not be suitable for many people to enjoy, like a sound bar.
  • WiFi speakers can be used as audio devices for the family by linking with multiple WiFi speakers. For example, you can link two Bluetooth speakers that support the link function and use them as stereo speakers for your TV, or you can link four WiFi speakers to use them as 4-channel speakers for your TV. In this case, it is important to synchronize signals between each speaker, synchronize (lip sync) between the TV screen and sound, and prevent sound interruption. For synchronization, the response between the input and output of the sound system is an important factor. However, if the response is fast, synchronization between speakers may be difficult or sound interruption may occur due to wireless communication environment, and if the response is slow, the sound may come out later than the screen. This may cause problems with synchronization with the screen.
  • an electronic device includes at least one speaker, a communication interface, and at least one processor connected to the at least one speaker and the communication interface to control the electronic device. It includes, when the electronic device is in a first mode, the processor outputs a signal of at least one first channel included in the sound through the at least one speaker, and outputs a signal of at least one first channel included in the sound through the at least one speaker. Control the communication interface to transmit a signal to at least one external speaker, and when the electronic device is in a second mode, at least one of the signals of the at least one first channel is transmitted to the signal of the at least one second channel. The communication interface can be controlled to mix and transmit the mixed signal to the at least one external speaker.
  • the processor may apply at least one of dynamic range control (DRC) or a filter to the mixed signal.
  • DRC dynamic range control
  • the processor applies a first DRC to increase the loudness of the user's voice in the mixed signal, applies a second DRC to reduce the loudness of the background sound in the mixed signal, and You can apply a filter that improves the clarity of the voice.
  • the processor further includes an amplifier that amplifies the signal of the at least one first channel and provides it to the at least one speaker
  • the processor includes a mixer that performs the mixing and the DRC or the filter. and an applied sound processing module, wherein the processor turns off the sound processing module when the electronic device is in the first mode, and turns off the amplifier when the electronic device is in the second mode.
  • the processor may change the mode of the electronic device to one of the first mode and the second mode based on the volume of the electronic device.
  • the processor applies a first gain to the at least one signal of the at least one first channel, applies a second gain to the signal of the at least one second channel, and applies the first gain to the signal of the at least one second channel.
  • At least one signal to which this is applied and the signal of at least one second channel to which the second gain is applied can be mixed.
  • the signal of the at least one first channel includes a front left signal, a front right signal, a center signal, and a sub woofer signal
  • the signal of the at least one second channel includes a rear left signal and a rear right signal.
  • the processor outputs the front left signal, the front right signal, and the center signal through the at least one speaker when the electronic device is in the first mode, and the rear left signal, the rear right signal, and the sub Controlling the communication interface to transmit a woofer signal to the at least one external speaker, mixing the front left signal, the center signal, and the rear left signal when the electronic device is in the second mode, and the front right signal
  • the communication interface can be controlled to mix the center signal and the rear right signal and transmit the mixed signals to the at least one external speaker.
  • the at least one external speaker includes a rear left speaker, a rear right speaker, and a woofer speaker
  • the processor transmits the rear left signal to the rear left speaker when the electronic device is in the first mode, and the processor transmits the rear left signal to the rear left speaker, and Controls the communication interface to transmit a rear right signal to the rear right speaker and transmit the sub woofer signal to the woofer speaker, and when the electronic device is in the second mode, the front left signal, the center signal, and the front left signal
  • the communication interface can be controlled so that the rear left signal is mixed and transmitted to the rear left speaker, and the front right signal, the center signal, and the rear right signal are mixed and transmitted to the rear right speaker.
  • the processor mixes the front left signal and the rear left signal, mixes the front right signal and the rear right signal, and mixes the mixed signals. It can be output through the at least one speaker.
  • the processor further includes a sensor, wherein the processor identifies at least one of the number of users or the location of the user in the vicinity of the electronic device through the sensor, and sets the mode of the electronic device based on the identified information. It can be changed to either the first mode or the second mode.
  • a method of controlling an electronic device includes, when the electronic device is in a first mode, transmitting a signal of at least one first channel included in the sound through at least one speaker included in the electronic device. outputting and transmitting at least one second channel signal included in the sound to at least one external speaker, and when the electronic device is in a second mode, at least one of the at least one first channel signal It includes mixing the signal of the at least one second channel and transmitting the mixed signal to the at least one external speaker.
  • step of applying at least one of dynamic range control (DRC) or a filter to the mixed signal may be further included.
  • DRC dynamic range control
  • the step of applying the at least one includes applying a first DRC to increase the loudness of the user's voice in the mixed signal, and applying a second DRC to reduce the loudness of the background sound in the mixed signal, A filter that increases voice clarity can be applied to the user's voice.
  • the step of applying the at least one applies the DRC or the filter through a sound processing module
  • the step of transmitting the signal of the at least one second channel to the at least one external speaker uses an amplifier.
  • Amplifying the signal of the at least one first channel and providing it to the at least one speaker, turning off the sound processing module, and transmitting the mixed signal to the at least one external speaker include the amplifier Can be turned off.
  • the method may further include changing the mode of the electronic device to one of the first mode and the second mode based on the volume of the electronic device.
  • the step of transmitting the mixed signal to the at least one external speaker includes applying a first gain to the at least one of the signals of the at least one first channel, and applying a first gain to the at least one signal of the at least one second channel.
  • a second gain may be applied to the signal, and at least one signal to which the first gain is applied and a signal of at least one second channel to which the second gain is applied may be mixed.
  • the signal of the at least one first channel includes a front left signal, a front right signal, a center signal, and a sub woofer signal
  • the signal of the at least one second channel includes a rear left signal and a rear right signal
  • the step of transmitting the signal of the at least one second channel to the at least one external speaker includes, when the electronic device is in the first mode, the front left signal, the front right signal, and the center signal Outputting through a speaker, transmitting the rear left signal, the rear right signal, and the sub woofer signal to the at least one external speaker, and transmitting the mixed signal to the at least one external speaker are performed by the electronic device. If is the second mode, the front left signal, the center signal, and the rear left signal are mixed, the front right signal, the center signal, and the rear right signal are mixed, and the mixed signals are mixed with the at least one It can be transmitted to an external speaker.
  • the at least one external speaker includes a rear left speaker, a rear right speaker, and a woofer speaker
  • the step of transmitting the signal of the at least one second channel to the at least one external speaker is performed by the electronic device.
  • the rear left signal is transmitted to the rear left speaker
  • the rear right signal is transmitted to the rear right speaker
  • the sub woofer signal is transmitted to the woofer speaker
  • the mixed signal is transmitted to the at least one
  • the step of transmitting to the external speaker if the electronic device is in the second mode, the front left signal, the center signal, and the rear left signal are mixed and transmitted to the rear left speaker, and the front right signal and the center signal are mixed.
  • the rear right signal can be mixed and transmitted to the rear right speaker.
  • the rear left speaker and the rear right speaker are not identified, the front left signal and the rear left signal are mixed, the front right signal and the rear right signal are mixed, and the mixed signals are mixed with the at least one
  • the step of outputting through a speaker may further be included.
  • FIGS. 1A to 1C are diagrams briefly explaining a method of using an audio device for a family to help understand the present disclosure.
  • Figure 2 is a block diagram showing the configuration of an electronic system according to an embodiment of the present disclosure.
  • Figure 3 is a block diagram showing the configuration of an electronic device according to an embodiment of the present disclosure.
  • Figure 4 is a block diagram showing the detailed configuration of an electronic device according to an embodiment of the present disclosure.
  • FIG. 5 is a diagram illustrating a circuit configuration for operation according to a mode of the electronic device 100 according to an embodiment of the present disclosure.
  • FIG. 6 is a diagram for explaining the operation of the first mode of the electronic device 100 according to an embodiment of the present disclosure.
  • FIG. 7 is a diagram for explaining the operation of the second mode of the electronic device 100 according to an embodiment of the present disclosure.
  • Figure 8 is a diagram for explaining a sound processing module according to an embodiment of the present disclosure.
  • FIG. 9 is a flowchart illustrating a method of controlling an electronic device according to an embodiment of the present disclosure.
  • the purpose of the present disclosure is to provide an electronic device and a control method for processing sound differently depending on the mode in order to use a family audio device as a personal audio device.
  • expressions such as “have,” “may have,” “includes,” or “may include” refer to the presence of the corresponding feature (e.g., a numerical value, function, operation, or component such as a part). , and does not rule out the existence of additional features.
  • a or/and B should be understood as referring to either “A” or “B” or “A and B”.
  • expressions such as “first,” “second,” “first,” or “second,” can modify various components regardless of order and/or importance, and can refer to one component. It is only used to distinguish from other components and does not limit the components.
  • the term user may refer to a person using an electronic device or a device (eg, an artificial intelligence electronic device) using an electronic device.
  • a device eg, an artificial intelligence electronic device
  • FIGS. 1A to 1C are diagrams briefly explaining a method of using an audio device for a family to help understand the present disclosure.
  • the sound bar can be used as a personal audio device, the family can usually use it together, but when necessary, an individual can use it as a personal audio device in a location of his or her choice.
  • a sound bar can be used by a family, as shown in Figure 1A.
  • the sound bar directly outputs signals from some channels and transmits signals from remaining channels to the sub-woofer speaker, rear L speaker, and rear R speaker, and the sub-woofer speaker, rear L speaker, and rear R speaker each.
  • the signal of the received channel can be output.
  • the user may use the rear L speaker and rear R speaker as personal audio devices, as shown in FIGS. 1B and 1C.
  • an appropriate volume is provided to users located nearby, and a low volume is provided to users located far away, reducing the possibility that the sound of TV content will disturb others even if a sound bar is used.
  • the volume when used as a personal audio device, if you use DRC to control loud sounds not too loud and soft sounds not too quiet, the volume can always be maintained within a certain range and the volume can be maintained at a low level. Additionally, if the intelligibility of the voice is improved to increase transmission at the same volume, the volume can be lowered to reduce interference to other users.
  • FIG. 2 is a block diagram showing the configuration of an electronic system 1000 according to an embodiment of the present disclosure. As shown in FIG. 2 , the display system 1000 includes an electronic device 100 and an external speaker 200.
  • the electronic device 100 is a device that processes sound and can be implemented as a sound bar, TV, desktop PC, laptop, smartphone, tablet PC, smart glasses, smart watch, etc. However, it is not limited to this, and the electronic device 100 may be any device that can process sound.
  • the electronic device 100 may transmit at least one channel included in the sound to the external speaker 200. Alternatively, the electronic device 100 may mix some channels included in the sound and transmit the mixed signal to the external speaker 200.
  • the external speaker 200 may be a device that receives a sound signal from the electronic device 100 and outputs the received sound signal.
  • the external speaker 200 may be a device that receives a sound signal from the electronic device 100 through wireless communication and outputs the received sound signal.
  • wireless communication may be a communication standard unique to the electronic device 100 and the external speaker 200. Accordingly, issues such as synchronization with the screen, synchronization between speakers, and sound interruption issues may all have been verified.
  • the external speaker 200 may be implemented in plural numbers.
  • the external speaker 200 may include a rear left speaker, a rear right speaker, and a woofer speaker. However, it is not limited to this, and the implementation method of the external speaker 200 may vary.
  • the external speaker 200 may be movable.
  • the external speaker 200 is implemented in a relatively small size compared to the electronic device 100 and can move its position more freely than the electronic device 100.
  • FIG. 3 is a block diagram showing the configuration of an electronic device 100 according to an embodiment of the present disclosure.
  • the electronic device 100 includes a speaker 110, a communication interface 120, and a processor 130.
  • the speaker 110 is a component that outputs not only various audio data processed by the processor 130 but also various notification sounds or voice messages.
  • the processor 130 may output signals of some channels included in the sound through the speaker 110.
  • Speakers 110 may be implemented in plural numbers.
  • the speaker 110 may include a front left speaker, a front right speaker, and a center speaker. However, it is not limited to this, and the implementation method of the speaker 110 may vary.
  • the communication interface 120 is a component that communicates with various types of external devices according to various types of communication methods.
  • the electronic device 100 may communicate with the external speaker 200 through the communication interface 120.
  • the communication interface 120 may include a dedicated communication standard for communication with the external speaker 200.
  • the electronic device 100 and the external speaker 200 may be able to communicate without a separate connection operation, and interference with other communication signals may be minimal.
  • the communication interface 120 may include a Wi-Fi module, a Bluetooth module, an infrared communication module, and a wireless communication module.
  • each communication module may be implemented in the form of at least one hardware chip.
  • the WiFi module and Bluetooth module communicate using WiFi and Bluetooth methods, respectively.
  • various connection information such as SSID and session key are first transmitted and received, and various information can be transmitted and received after establishing a communication connection using this.
  • the infrared communication module performs communication according to infrared communication (IrDA, infrared data association) technology, which transmits data wirelessly over a short distance using infrared rays between optical light and millimeter waves.
  • IrDA infrared data association
  • wireless communication modules include zigbee, 3G (3rd Generation), 3GPP (3rd Generation Partnership Project), LTE (Long Term Evolution), LTE-A (LTE Advanced), 4G (4th Generation), and 5G. It may include at least one communication chip that performs communication according to various wireless communication standards such as (5th Generation).
  • the communication interface 120 may include a wired communication interface such as HDMI, DP, Thunderbolt, USB, RGB, D-SUB, DVI, etc.
  • the communication interface 120 may include at least one of a LAN (Local Area Network) module, an Ethernet module, or a wired communication module that performs communication using a pair cable, a coaxial cable, or an optical fiber cable.
  • LAN Local Area Network
  • Ethernet Ethernet
  • wired communication module that performs communication using a pair cable, a coaxial cable, or an optical fiber cable.
  • the processor 130 generally controls the operation of the electronic device 100. Specifically, the processor 130 is connected to each component of the electronic device 100 and can generally control the operation of the electronic device 100. For example, the processor 130 may be connected to components such as a speaker 110, a communication interface 120, an amplifier (not shown), a sensor (not shown), etc. to control the operation of the electronic device 100.
  • At least one processor 130 may include one or more of a CPU, graphics processing unit (GPU), accelerated processing unit (APU), many integrated core (MIC), neural processing unit (NPU), hardware accelerator, or machine learning accelerator. You can. At least one processor 130 may control one or any combination of other components of the electronic device 100 and perform operations related to communication or data processing. At least one processor 130 may execute one or more programs or instructions stored in memory. For example, at least one processor 130 may perform a method according to an embodiment of the present disclosure by executing one or more instructions stored in memory.
  • the plurality of operations may be performed by one processor or by a plurality of processors.
  • the first operation, the second operation, and the third operation may all be performed by the first processor
  • the first operation and the second operation may be performed by a first processor (eg, a general-purpose processor)
  • the third operation may be performed by a second processor (eg, an artificial intelligence-specific processor).
  • At least one processor 130 may be implemented as a single core processor including one core, or one or more multi-core processors including a plurality of cores (e.g., homogeneous multi-core or heterogeneous multi-core). It may also be implemented as a core processor (multicore processor).
  • multicore processor When at least one processor 130 is implemented as a multi-core processor, each of the plurality of cores included in the multi-core processor may include processor internal memory such as cache memory and on-chip memory, and may include a plurality of processor internal memories such as cache memory and on-chip memory.
  • a common cache shared by cores may be included in a multi-core processor.
  • each of the plurality of cores (or some of the plurality of cores) included in the multi-core processor may independently read and perform program instructions for implementing the method according to an embodiment of the present disclosure, and all of the plurality of cores may (or part of) may be linked to read and perform program instructions for implementing the method according to an embodiment of the present disclosure.
  • the plurality of operations may be performed by one core among a plurality of cores included in a multi-core processor, or may be performed by a plurality of cores.
  • the first operation, the second operation, and the third operation are performed by the method according to an embodiment, the first operation, the second operation, and the third operation are all performed on the first core included in the multi-core processor.
  • the first operation and the second operation may be performed by the first core included in the multi-core processor, and the third operation may be performed by the second core included in the multi-core processor.
  • At least one processor 130 is included in a system-on-chip (SoC), a single-core processor, a multi-core processor, or a single-core processor or multi-core processor in which one or more processors and other electronic components are integrated.
  • SoC system-on-chip
  • a single-core processor may mean a core, where the core may be implemented as a CPU, GPU, APU, MIC, NPU, hardware accelerator, or machine learning accelerator, but embodiments of the present disclosure are not limited thereto.
  • the operation of the electronic device 100 will be described using the term processor 130.
  • the processor 130 may identify the mode of the electronic device 100. For example, the processor 130 may change the mode of the electronic device 100 to one of the first mode and the second mode based on the volume of the electronic device 100.
  • the first mode is a family use mode, which may be a case where a family member uses the electronic device 100
  • the second mode is a personal use mode, which may be a case where an individual among family members uses the electronic device 100. there is.
  • the electronic device 100 further includes a sensor, and the processor 130 identifies the number of users or the user's location in the vicinity of the electronic device 100 through the sensor and provides the identified information. Based on , the mode of the electronic device 100 may be changed to one of the first mode and the second mode. For example, the processor 130 may determine the mode of the electronic device 100 based on the number of users within a preset distance from the electronic device 100.
  • the electronic device 100 further includes a camera, and the processor 130 photographs the front of the electronic device 100 through the camera and identifies at least one of the number of users or the user's location from the captured image. It may be possible.
  • the processor 130 When the electronic device 100 is in the first mode, the processor 130 outputs at least one first channel signal included in the sound through at least one speaker 110, and outputs at least one second channel signal included in the sound.
  • the communication interface 120 is controlled to transmit the signal of the channel to at least one external speaker 200, and when the electronic device 100 is in the second mode, at least one of the signals of the at least one first channel is transmitted to the at least one external speaker 200.
  • the communication interface 120 can be controlled to mix the signal of the second channel and transmit the mixed signal to at least one external speaker 200. That is, if the electronic device 100 is in the second mode, the sound is not output through the at least one speaker 110, and the sound is output only through the at least one external speaker 200, thereby causing damage to people nearby due to the sound output. can be minimized.
  • the signal of at least one first channel may include a front left signal, a front right signal, a center signal, and a sub woofer signal
  • the signal of at least one second channel may include a rear left signal and a rear right signal.
  • the processor 130 when the electronic device 100 is in the first mode, the processor 130 outputs a front left signal, a front right signal, and a center signal through at least one speaker 110, a rear left signal, a rear right signal, and
  • the communication interface 120 is controlled to transmit a sub woofer signal to at least one external speaker 200, and when the electronic device 100 is in the second mode, the front left signal, center signal, and rear left signal are mixed, and the front left signal is mixed.
  • the communication interface 120 can be controlled to mix the right signal, center signal, and rear right signal and transmit the mixed signals to at least one external speaker 200.
  • the at least one external speaker 200 includes a rear left speaker, a rear right speaker, and a woofer speaker
  • the processor 130 transmits a rear left signal to the rear left speaker when the electronic device 100 is in the first mode.
  • the communication interface 120 is controlled to transmit the rear right signal to the rear right speaker and the sub woofer signal to the woofer speaker. If the electronic device 100 is in the second mode, the front left signal, center signal, and rear The communication interface 120 can be controlled so that the left signal is mixed and transmitted to the rear left speaker, and the front right signal, center signal, and rear right signal are mixed and transmitted to the rear right speaker.
  • the processor 130 mixes the front left signal and the rear left signal, mixes the front right signal and the rear right signal, and transmits the mixed signals to at least one speaker 110. You can also print it out.
  • mixing was described as mixing between left signals and mixing between right signals, but the process is not limited to this.
  • the processor 130 may provide an effect by mixing the left signal and the right signal.
  • At least one speaker 110 may include a front left speaker, a front right speaker, and a center speaker.
  • the processor 130 when the electronic device 100 is in the first mode, the processor 130 outputs a front left signal through the front left speaker, outputs a front right signal through the front right speaker, and outputs a center signal through the center speaker. Can be printed.
  • the processor 130 mixes the two signals 1:1, but the process is not limited to this.
  • the processor 130 applies a first gain to at least one of the signals of at least one first channel, applies a second gain to the signal of at least one second channel, and applies the first gain to the signal of at least one second channel.
  • At least one signal to which this signal is applied and the signal of at least one second channel to which the second gain is applied may be mixed.
  • the number and type of channels included in the sound, and the configuration of at least one speaker 110 and at least one external speaker 200 can be varied.
  • the processor 130 may apply at least one of dynamic range control (DRC) or a filter to the mixed signal.
  • DRC dynamic range control
  • the processor 130 applies a first DRC to increase the loudness of the user's voice in the mixed signal, applies a second DRC to reduce the loudness of the background sound in the mixed signal, and applies a second DRC to the user's voice.
  • the processor 130 may identify the user's voice and background sound in the mixed signal.
  • the present invention is not limited to this, and the processor 130 may apply DRC to the mixed signal itself without identifying the user's voice and background sound in the mixed signal.
  • the processor 130 may apply DRC by increasing the size of the mixed signal if it is less than a preset size and decreasing the size if the size of the mixed signal is more than the preset size.
  • the user can more clearly identify the user's voice in the sound, while minimizing damage to people around them due to the sound output.
  • the electronic device 100 further includes an amplifier that amplifies the signal of at least one first channel and provides it to at least one speaker
  • the processor 130 includes a mixer and DRC that perform mixing. or a sound processing module that applies a filter, wherein the processor turns off the sound processing module when the electronic device 100 is in the first mode and turns off the amplifier when the electronic device 100 is in the second mode. there is.
  • FIG. 4 is a block diagram showing the detailed configuration of the electronic device 100 according to an embodiment of the present disclosure.
  • the electronic device 100 may include a speaker 110, a communication interface 120, and a processor 130. Additionally, according to FIG. 4, the electronic device 100 further includes an amplifier 140, a sensor 150, a memory 160, a display 170, a user interface 180, a microphone 190, and a camera 195. It may also be included.
  • FIG. 4 detailed descriptions of parts that overlap with the components shown in FIG. 3 will be omitted.
  • the amplifier 140 may be configured to receive a sound signal, amplify the sound signal, and provide it to a speaker.
  • the amplifier 140 may amplify the signal of at least one first channel and provide the amplified signal to at least one speaker 110.
  • the sensor 150 can identify a user located in front of the electronic device 100.
  • the sensor 150 includes a motion sensor, an infrared sensor, etc., and can identify a user through the motion sensor, an infrared sensor, etc.
  • the senor 150 includes a plurality of infrared sensors
  • the plurality of infrared sensors are arranged in a row on the electronic device 100 and determine the approximate location of the user located around the electronic device 100 depending on the presence or absence of reflected waves. can be identified.
  • the senor 150 may include an ultrasonic sensor, a depth map, etc., and may be of any configuration as long as it can identify the presence of a user.
  • the processor 130 may identify at least one of the number of users or the user's location through at least one of the microphone 190 or the camera 195, which will be described later, instead of the sensor 150.
  • the memory 160 may refer to hardware that stores information such as data in electrical or magnetic form so that the processor 130 or the like can access it. To this end, the memory 160 may be implemented with at least one hardware selected from non-volatile memory, volatile memory, flash memory, hard disk drive (HDD) or solid state drive (SSD), RAM, ROM, etc. .
  • At least one instruction required for operation of the electronic device 100 or the processor 130 may be stored in the memory 160.
  • an instruction is a code unit that instructs the operation of the electronic device 100 or the processor 130, and may be written in machine language, a language that a computer can understand.
  • a plurality of instructions for performing specific tasks of the electronic device 100 or the processor 130 may be stored in the memory 160 as an instruction set.
  • the memory 160 may store data, which is information in bits or bytes that can represent letters, numbers, images, etc. For example, mode information and mixing information may be stored in the memory 160.
  • the memory 160 is accessed by the processor 130, and the processor 130 can read/write/modify/delete/update instructions, instruction sets, or data.
  • the display 170 is a component that displays images and may be implemented as various types of displays, such as a Liquid Crystal Display (LCD), Organic Light Emitting Diodes (OLED) display, or Plasma Display Panel (PDP).
  • the display 170 may also include a driving circuit and a backlight unit that may be implemented in the form of a-si TFT, low temperature poly silicon (LTPS) TFT, or organic TFT (OTFT).
  • LTPS low temperature poly silicon
  • OTFT organic TFT
  • the display 170 may be implemented as a touch screen combined with a touch sensor, a flexible display, a 3D display, etc.
  • the user interface 180 may be implemented with buttons, a touch pad, a mouse, and a keyboard, or may be implemented with a touch screen that can also perform display functions and manipulation input functions.
  • the button may be various types of buttons such as mechanical buttons, touch pads, wheels, etc. formed on any area of the exterior of the main body of the electronic device 100, such as the front, side, or back.
  • the microphone 190 is configured to receive sound input and convert it into an audio signal.
  • the microphone 190 is electrically connected to the processor 130 and can receive sound under the control of the processor 130.
  • the microphone 190 may be formed as an integrated piece, such as on the top, front, or side surfaces of the electronic device 100.
  • the microphone 190 may be provided on a remote control separate from the electronic device 100. In this case, the remote control may receive sound through the microphone 190 and provide the received sound to the electronic device 100.
  • the microphone 190 includes a microphone that collects analog sound, an amplifier circuit that amplifies the collected sound, an A/D conversion circuit that samples the amplified sound and converts it into a digital signal, and removes noise components from the converted digital signal. It may include various configurations such as filter circuits, etc.
  • the microphone 190 may be implemented in the form of a sound sensor, and any configuration that can collect sound may be used.
  • the camera 195 is configured to capture still images or moving images.
  • the camera 195 can capture still images at a specific point in time, but can also capture still images continuously.
  • the camera 195 can capture the actual environment in front of the electronic device 100 by photographing the front of the electronic device 100 .
  • the processor 130 may identify the user from an image captured through the camera 195.
  • the camera 195 includes a lens, a shutter, an aperture, a solid-state imaging device, an analog front end (AFE), and a timing generator (TG).
  • the shutter controls the time when light reflected by the subject enters the camera 195, and the aperture mechanically increases or decreases the size of the opening through which light enters, thereby controlling the amount of light incident on the lens.
  • a solid-state imaging device outputs the image due to the photocharge as an electrical signal.
  • the TG outputs a timing signal to read out pixel data from the solid-state imaging device, and the AFE samples and digitizes the electrical signal output from the solid-state imaging device.
  • the electronic device 100 provides a plurality of modes, and even in the personal use mode, damage to surrounding people due to sound output can be minimized.
  • user convenience can be improved by applying DRC or a filter that increases voice clarity to the mixed sound.
  • FIG. 5 is a diagram illustrating a circuit configuration for operation according to a mode of the electronic device 100 according to an embodiment of the present disclosure.
  • the electronic device 100 includes a decoder/preprocessing module, a mixer, an amplifier 140, a control unit, a sound processing module (DRC, voice clear), a speaker 110, and a communication interface 120.
  • the decoder/preprocessing module, mixer, sound processing module, and control unit may be implemented as a component of the processor 130.
  • the decoder/preprocessing module, mixer, sound processing module, and control unit are described as individually implemented.
  • the decoder/preprocessing module can perform decoding, preprocessing, bass management, etc. on signals received from an external device and provide sound including a plurality of channels to the mixer.
  • the decoder/preprocessing module performs decoding and preprocessing bass management on signals received from an external device to produce front left signal (FL), front right signal (FR), center signal (CT), and sub woofer signal ( SW), rear left signal (RL), and rear right signal (RR) can be provided to the mixer.
  • the mixer may process signals of a plurality of channels received from the decoder/preprocessing module based on the control of the controller. For example, when the electronic device 100 is in the first mode, the mixer provides a front left signal, a front right signal, and a center signal to the amplifier 140, and a rear left signal and a rear right signal to the sound processing module. , a sub woofer signal can be transmitted to the woofer speaker (200-3) through the communication interface 120.
  • the amplifier 140 amplifies the front left signal, front right signal, and center signal and provides them to the speaker 110, and the speaker 110 can output the amplified front left signal, front right signal, and center signal.
  • the sound processing module processes the rear left signal and the rear right signal, and sends the sound-processed rear left signal and rear right signal through the communication interface 120 to the rear left speaker (200-1) and the rear right speaker (200-1). 2) It can be transmitted.
  • the mixer mixes the front left signal, center signal, and rear left signal, mixes the front right signal, center signal, and rear right signal, and uses a communication interface ( 120), the mixed signals can be transmitted to the rear left speaker (200-1) and rear right speaker (200-2).
  • the mixer can perform mixing operations through block 510.
  • the mixing operation will be explained in more detail with reference to FIG. 7.
  • the sound processing module may apply at least one of DRC or a filter that increases voice clarity to the mixed signal based on the control of the controller.
  • the control unit can control each configuration.
  • the control unit may identify the mode of the electronic device 100 and control each configuration based on the identified mode.
  • the mode can be determined according to user commands.
  • the controller may change the mode of the electronic device 100 based on the volume of the electronic device 100.
  • the control unit may change the mode of the electronic device 100 based on at least one of the number or location of users identified in front of the electronic device 100.
  • FIG. 6 is a diagram for explaining the operation of the first mode of the electronic device 100 according to an embodiment of the present disclosure.
  • the portion marked with a dotted line in FIG. 6 indicates that there is no signal flow.
  • the controller may control block 510 of the mixer so that signals of each channel are not mixed.
  • block 510 may include a first mixing unit that mixes a front left signal, a rear left signal, and a center signal, and a second mixing unit that mixes a front right signal, a rear right signal, and a center signal.
  • the mixer's 510 block may include switches at the input terminals of the front left signal, front right signal, and center signal, respectively.
  • the control unit opens switches at each of the input terminals of the front left signal, front right signal, and center signal to control mixing so that no mixing is actually performed in the first mixing unit and the second mixing unit.
  • block 510 may include a third mixing unit that mixes the front left signal, rear right signal, and center signal. Additionally, each mixing unit may be implemented not to mix the center signal.
  • the control unit may turn off the sound processing module.
  • the sound processing module is designed to facilitate user voice identification when the electronic device 100 is in the second mode and to minimize damage to people around by sound output, and is turned off in the first mode, which is the family listening mode. Power consumption can be reduced.
  • FIG. 7 is a diagram for explaining the operation of the second mode of the electronic device 100 according to an embodiment of the present disclosure.
  • the portion marked with a dotted line in FIG. 7 indicates that there is no signal flow.
  • the controller may not output sound through the speaker 110. Accordingly, the control unit may turn off the amplifier 140 when the electronic device 100 is in the second mode.
  • the controller may control block 510 of the mixer so that signals of each channel are mixed.
  • block 510 may include a first mixing unit that mixes a front left signal, a rear left signal, and a center signal, and a second mixing unit that mixes a front right signal, a rear right signal, and a center signal.
  • the mixer's 510 block may include switches at the input terminals of the front left signal, front right signal, and center signal, respectively.
  • the control unit can control the mixing operation of the first mixing unit and the second mixing unit by short-circuiting switches at the input terminals of the front left signal, front right signal, and center signal, respectively.
  • each mixing unit may be implemented to perform mixing after applying gain to the signals of each channel.
  • the controller may apply at least one of DRC or a filter that increases voice clarity to the mixed signal.
  • Figure 8 is a diagram for explaining a sound processing module according to an embodiment of the present disclosure.
  • the control unit applies at least one of DRC or a filter that increases voice clarity to the user's voice in the mixed signal and removes the background from the mixed signal.
  • DRC can be applied to sound.
  • the controller may apply the first DRC to increase the volume of the user's voice and apply the second DRC to decrease the volume of the background sound.
  • control unit may change the application strength of the DRC or filter based on a user command.
  • controller may change the application intensity of the DRC or filter based on the volume of the electronic device 100.
  • FIG. 9 is a flowchart illustrating a method of controlling an electronic device according to an embodiment of the present disclosure.
  • At least one first channel signal included in the sound is output through at least one speaker included in the electronic device, and at least one second channel signal included in the sound is output. Transmit to at least one external speaker (S910). Then, when the electronic device is in the second mode, at least one of the signals of at least one first channel is mixed with the signal of at least one second channel, and the mixed signal is transmitted to at least one external speaker (S920).
  • step of applying at least one of dynamic range control (DRC) or a filter to the mixed signal may be further included.
  • DRC dynamic range control
  • applying at least one step includes applying a first DRC to increase the loudness of the user's voice in the mixed signal, applying a second DRC to reduce the loudness of the background sound in the mixed signal, and applying the second DRC to the user's voice. You can apply a filter that increases the clarity of the voice.
  • the step of applying at least one DRC or filter is applied through a sound processing module, and the step of transmitting the signal of at least one second channel to at least one external speaker (S910) is performed by using at least one amplifier.
  • the step of amplifying a signal of one first channel and providing it to at least one speaker, turning off the sound processing module, and transmitting the mixed signal to at least one external speaker may turn off the amplifier.
  • the method may further include changing the mode of the electronic device to one of the first mode and the second mode based on the volume of the electronic device.
  • the step of transmitting the mixed signal to at least one external speaker includes applying a first gain to at least one of the signals of the at least one first channel and applying a first gain to the signal of the at least one second channel.
  • a second gain may be applied, and at least one signal to which the first gain is applied and at least one signal of a second channel to which the second gain is applied may be mixed.
  • the signal of at least one first channel includes a front left signal, a front right signal, a center signal, and a sub woofer signal
  • the signal of at least one second channel includes a rear left signal and a rear right signal
  • step (S920) of transmitting the left signal, rear right signal, and sub woofer signal to at least one external speaker, and transmitting the mixed signal to at least one external speaker if the electronic device is in the second mode, the front left signal, center It is possible to mix signals and rear left signals, mix front right signals, center signals, and rear right signals, and transmit the mixed signals to at least one external speaker.
  • the at least one external speaker includes a rear left speaker, a rear right speaker, and a woofer speaker
  • the step of transmitting the signal of at least one second channel to the at least one external speaker (S910) is performed when the electronic device is in the first mode. If so, transmitting the rear left signal to the rear left speaker, transmitting the rear right signal to the rear right speaker, transmitting the sub woofer signal to the woofer speaker, and transmitting the mixed signal to at least one external speaker (S920)
  • the front left signal, center signal, and rear left signal can be mixed and transmitted to the rear left speaker, and the front right signal, center signal, and rear right signal can be mixed and transmitted to the rear right speaker.
  • mixing the front left signal and rear left signal, mixing the front right signal and rear right signal, and outputting the mixed signals through at least one speaker More may be included.
  • the method may further include identifying at least one of the number of users or the user's location in the vicinity of the electronic device and changing the mode of the electronic device to one of the first mode and the second mode based on the identified information. there is.
  • an electronic device provides a plurality of modes, and even in a personal use mode, damage to people around by sound output can be minimized.
  • the external speakers are two left and right speakers and one woofer speaker, but the speaker configuration may also vary.
  • the various embodiments described above may be implemented as software including instructions stored in a machine-readable storage media (e.g., a computer).
  • the device is a device capable of calling instructions stored from a storage medium and operating according to the called instructions, and may include an electronic device (eg, electronic device A) according to the disclosed embodiments.
  • the processor may perform the function corresponding to the instruction directly or using other components under the control of the processor.
  • Instructions may contain code generated or executed by a compiler or interpreter.
  • a storage medium that can be read by a device may be provided in the form of a non-transitory storage medium.
  • 'non-transitory' only means that the storage medium does not contain signals and is tangible, and does not distinguish whether the data is stored semi-permanently or temporarily in the storage medium.
  • the method according to the various embodiments described above may be included and provided in a computer program product.
  • Computer program products are commodities and can be traded between sellers and buyers.
  • the computer program product may be distributed on a machine-readable storage medium (e.g. compact disc read only memory (CD-ROM)) or online through an application store (e.g. Play StoreTM).
  • an application store e.g. Play StoreTM
  • at least a portion of the computer program product may be at least temporarily stored or created temporarily in a storage medium such as the memory of a manufacturer's server, an application store server, or a relay server.
  • the various embodiments described above are stored in a recording medium that can be read by a computer or similar device using software, hardware, or a combination thereof. It can be implemented in . In some cases, embodiments described herein may be implemented with a processor itself. According to software implementation, embodiments such as procedures and functions described in this specification may be implemented as separate software. Each piece of software may perform one or more functions and operations described herein.
  • Non-transitory computer-readable media refers to a medium that stores data semi-permanently and can be read by a device, rather than a medium that stores data for a short period of time, such as registers, caches, and memories.
  • Specific examples of non-transitory computer-readable media may include CD, DVD, hard disk, Blu-ray disk, USB, memory card, ROM, etc.
  • each component e.g., module or program
  • each component may be composed of a single or multiple entities, and some of the sub-components described above may be omitted, or other sub-components may be omitted. Additional components may be included in various embodiments. Alternatively or additionally, some components (e.g., modules or programs) may be integrated into a single entity and perform the same or similar functions performed by each corresponding component prior to integration. According to various embodiments, operations performed by a module, program, or other component may be executed sequentially, in parallel, iteratively, or heuristically, or at least some operations may be executed in a different order, omitted, or other operations may be added. It can be.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Otolaryngology (AREA)
  • Stereophonic System (AREA)

Abstract

전자 장치가 개시된다. 본 전자 장치는 적어도 하나의 스피커, 통신 인터페이스 및 적어도 하나의 스피커 및 통신 인터페이스와 연결되어 전자 장치를 제어하는 적어도 하나의 프로세서를 포함하며, 프로세서는 전자 장치가 제1 모드이면, 사운드에 포함된 적어도 하나의 제1 채널의 신호를 적어도 하나의 스피커를 통해 출력하고, 사운드에 포함된 적어도 하나의 제2 채널의 신호를 적어도 하나의 외부 스피커로 전송하도록 통신 인터페이스를 제어하고, 전자 장치가 제2 모드이면, 적어도 하나의 제1 채널의 신호 중 적어도 하나를 적어도 하나의 제2 채널의 신호에 믹싱하고, 믹싱된 신호를 적어도 하나의 외부 스피커로 전송하도록 통신 인터페이스를 제어할 수 있다.

Description

사운드를 모드에 따라 상이하게 처리하기 위한 전자 장치 및 그 제어 방법
본 개시는 전자 장치 및 그 제어 방법에 대한 것으로, 더욱 상세하게는 사운드를 모드에 따라 상이하게 처리하는 전자 장치 및 그 제어 방법에 대한 것이다.
음향 기기는 다양한 분류 방법으로 분류될 수 있다. 특히, 음향 기기는 사용 주체를 기준으로 가족이 함께 또는 동시에 사용하는 기기와 개인이 사용하는 기기로 분류될 수 있다. 예를 들어, 전자로는 사운드바가 있고, 후자로는 WiFi 스피커, 블루투스 스피커 등이 있을 수 있다. 사운드바를 구비한 경우 비용, 공간 등의 문제로 인해 개인을 위한 음향 기기를 추가로 구비하기는 어려울 수 있다.
사운드바는 일반적으로 거실과 같이 가족이 공유하는 공간에 화면을 제공하는 TV와 같이 설치되는 경우가 많아 멀티 채널 출력을 지원하는 제품이 다수이다. 멀티 채널 출력은 상대적으로 넓은 sweet spot을 제공해 다수의 사람이 동시에 사운드를 즐길 수 있다. 특히, 최근의 멀티 채널 사운드바는 편리한 설치를 위해 본체와 무선으로 연결되는 무선 후방 스피커를 지원하기도 한다. 반면, WiFi 스피커 등은 이동이 자유롭고 설치가 편리한 모노 또는 스테레오 출력만을 지원하는 경우가 다수이다.
멀티 채널 사운드바는 비교적 큰 크기와 이동의 제약으로 인해, 개인 음향 기기로 사용하기는 어려울 수 있다. 반면, WiFi 스피커 등은 작은 크기와 적은 출력 채널 수로 인해 넓은 음상을 제공하기가 어려워 사운드바와 같이 다수의 사람이 즐기기에는 부족할 수 있다.
일부 WiFi 스피커 등은 복수의 WiFi 스피커 등과 연동하여 가족을 위한 음향 기기처럼 사용할 수 있다. 가령, 연동 기능이 지원되는 블루투스 스피커 2대를 연동하여 TV의 스테레오 스피커로 사용하거나 WiFi 스피커 4대를 연동하여 TV의 4 채널 스피커로 사용할 수도 있다. 이 경우, 각 스피커 간 신호 동기화, TV 화면과 사운드 간 동기화(립 싱크) 및 음 끊김 방지가 중요하다. 동기화를 위해서는 사운드 시스템의 입출력 간 응답성이 중요한 요소이나, 응답성을 빠르게 하면 스피커 간 동기화가 어렵거나 무선 통신 환경에서 기인하는 음 끊김이 발생할 수 있고, 응답성을 느리게 하면 화면보다 소리가 늦게 나오게 되어 화면과의 동기화에 문제가 발생할 수 있다.
그에 따라, 개인 음향 기기를 가족을 위한 음향 기기로 이용하기에는 한계가 있다.
이상과 같은 목적을 달성하기 위한 본 개시의 일 실시 예에 따르면, 전자 장치는 적어도 하나의 스피커, 통신 인터페이스 및 상기 적어도 하나의 스피커 및 상기 통신 인터페이스와 연결되어 상기 전자 장치를 제어하는 적어도 하나의 프로세서를 포함하며, 상기 프로세서는 상기 전자 장치가 제1 모드이면, 사운드에 포함된 적어도 하나의 제1 채널의 신호를 상기 적어도 하나의 스피커를 통해 출력하고, 상기 사운드에 포함된 적어도 하나의 제2 채널의 신호를 적어도 하나의 외부 스피커로 전송하도록 상기 통신 인터페이스를 제어하고, 상기 전자 장치가 제2 모드이면, 상기 적어도 하나의 제1 채널의 신호 중 적어도 하나를 상기 적어도 하나의 제2 채널의 신호에 믹싱하고, 상기 믹싱된 신호를 상기 적어도 하나의 외부 스피커로 전송하도록 상기 통신 인터페이스를 제어할 수 있다.
또한, 상기 프로세서는 상기 믹싱된 신호에 DRC(dynamic range control) 또는 필터 중 적어도 하나를 적용할 수 있다.
그리고, 상기 프로세서는 상기 믹싱된 신호에서 사용자 음성의 크기를 증가시키도록 제1 DRC를 적용하고, 상기 믹싱된 신호에서 배경 사운드의 크기를 감소시키도록 제2 DRC를 적용하고, 상기 사용자 음성에 대해 음성의 선명도를 높이는 필터를 적용할 수 있다.
또한, 상기 적어도 하나의 제1 채널의 신호를 증폭하여 상기 적어도 하나의 스피커로 제공하는 앰프(amp)를 더 포함하며, 상기 프로세서는 상기 믹싱을 수행하는 믹서(mixer) 및 상기 DRC 또는 상기 필터를 적용하는 사운드 처리 모듈을 포함하며, 상기 프로세서는 상기 전자 장치가 상기 제1 모드이면, 상기 사운드 처리 모듈을 턴 오프하고, 상기 전자 장치가 상기 제2 모드이면, 상기 앰프를 턴 오프할 수 있다.
그리고, 상기 프로세서는 상기 전자 장치의 볼륨에 기초하여 상기 전자 장치의 모드를 상기 제1 모드 및 상기 제2 모드 중 하나로 변경할 수 있다.
또한, 상기 프로세서는 상기 적어도 하나의 제1 채널의 신호 중 상기 적어도 하나에 제1 게인(gain)을 적용하고, 상기 적어도 하나의 제2 채널의 신호에 제2 게인을 적용하고, 상기 제1 게인이 적용된 적어도 하나의 신호 및 상기 제2 게인이 적용된 적어도 하나의 제2 채널의 신호를 믹싱할 수 있다.
그리고, 상기 적어도 하나의 제1 채널의 신호는 front left 신호, front right 신호, center 신호 및 sub woofer 신호를 포함하고, 상기 적어도 하나의 제2 채널의 신호는 rear left 신호 및 rear right 신호를 포함하고, 상기 프로세서는 상기 전자 장치가 상기 제1 모드이면, 상기 front left 신호, 상기 front right 신호 및 상기 center 신호를 상기 적어도 하나의 스피커를 통해 출력하고, 상기 rear left 신호, 상기 rear right 신호 및 상기 sub woofer 신호를 상기 적어도 하나의 외부 스피커로 전송하도록 상기 통신 인터페이스를 제어하고, 상기 전자 장치가 상기 제2 모드이면, 상기 front left 신호, 상기 center 신호 및 상기 rear left 신호를 믹싱하고, 상기 front right 신호, 상기 center 신호 및 상기 rear right 신호를 믹싱하고, 상기 믹싱된 신호들을 상기 적어도 하나의 외부 스피커로 전송하도록 상기 통신 인터페이스를 제어할 수 있다.
또한, 상기 적어도 하나의 외부 스피커는 rear left 스피커, rear right 스피커 및 woofer 스피커를 포함하며, 상기 프로세서는 상기 전자 장치가 상기 제1 모드이면, 상기 rear left 신호를 상기 rear left 스피커로 전송하고, 상기 rear right 신호를 상기 rear right 스피커로 전송하고, 상기 sub woofer 신호를 상기 woofer 스피커로 전송하도록 상기 통신 인터페이스를 제어하고, 상기 전자 장치가 상기 제2 모드이면, 상기 front left 신호, 상기 center 신호 및 상기 rear left 신호를 믹싱하여 상기 rear left 스피커로 전송하고, 상기 front right 신호, 상기 center 신호 및 상기 rear right 신호를 믹싱하여 상기 rear right 스피커로 전송하도록 상기 통신 인터페이스를 제어할 수 있다.
그리고, 상기 프로세서는 상기 rear left 스피커 및 상기 rear right 스피커가 식별되지 않으면, 상기 front left 신호 및 상기 rear left 신호를 믹싱하고, 상기 front right 신호 및 상기 rear right 신호를 믹싱하고, 상기 믹싱된 신호들을 상기 적어도 하나의 스피커를 통해 출력할 수 있다.
또한, 센서를 더 포함하며, 상기 프로세서는 상기 센서를 통해 상기 전자 장치의 주변에서 사용자의 수 또는 상기 사용자의 위치 중 적어도 하나를 식별하고, 상기 식별된 정보에 기초하여 상기 전자 장치의 모드를 상기 제1 모드 및 상기 제2 모드 중 하나로 변경할 수 있다.
한편, 본 개시의 일 실시 예에 따르면, 전자 장치의 제어 방법은 상기 전자 장치가 제1 모드이면, 사운드에 포함된 적어도 하나의 제1 채널의 신호를 상기 전자 장치에 포함된 적어도 하나의 스피커를 통해 출력하고, 상기 사운드에 포함된 적어도 하나의 제2 채널의 신호를 적어도 하나의 외부 스피커로 전송하는 단계 및 상기 전자 장치가 제2 모드이면, 상기 적어도 하나의 제1 채널의 신호 중 적어도 하나를 상기 적어도 하나의 제2 채널의 신호에 믹싱하고, 상기 믹싱된 신호를 상기 적어도 하나의 외부 스피커로 전송하는 단계를 포함한다.
또한, 상기 믹싱된 신호에 DRC(dynamic range control) 또는 필터 중 적어도 하나를 적용하는 단계를 더 포함할 수 있다.
그리고, 상기 적어도 하나를 적용하는 단계는 상기 믹싱된 신호에서 사용자 음성의 크기를 증가시키도록 제1 DRC를 적용하고, 상기 믹싱된 신호에서 배경 사운드의 크기를 감소시키도록 제2 DRC를 적용하고, 상기 사용자 음성에 대해 음성의 선명도를 높이는 필터를 적용할 수 있다.
또한, 상기 적어도 하나를 적용하는 단계는 사운드 처리 모듈를 통해 상기 DRC 또는 상기 필터를 적용하고, 상기 적어도 하나의 제2 채널의 신호를 상기 적어도 하나의 외부 스피커로 전송하는 단계는 앰프(amp)를 이용하여 상기 적어도 하나의 제1 채널의 신호를 증폭하여 상기 적어도 하나의 스피커로 제공하고, 상기 사운드 처리 모듈을 턴 오프하고, 상기 믹싱된 신호를 상기 적어도 하나의 외부 스피커로 전송하는 단계는 상기 앰프를 턴 오프할 수 있다.
그리고, 상기 전자 장치의 볼륨에 기초하여 상기 전자 장치의 모드를 상기 제1 모드 및 상기 제2 모드 중 하나로 변경하는 단계를 더 포함할 수 있다.
또한, 상기 상기 믹싱된 신호를 상기 적어도 하나의 외부 스피커로 전송하는 단계는 상기 적어도 하나의 제1 채널의 신호 중 상기 적어도 하나에 제1 게인(gain)을 적용하고, 상기 적어도 하나의 제2 채널의 신호에 제2 게인을 적용하고, 상기 제1 게인이 적용된 적어도 하나의 신호 및 상기 제2 게인이 적용된 적어도 하나의 제2 채널의 신호를 믹싱할 수 있다.
그리고, 상기 적어도 하나의 제1 채널의 신호는 front left 신호, front right 신호, center 신호 및 sub woofer 신호를 포함하고, 상기 적어도 하나의 제2 채널의 신호는 rear left 신호 및 rear right 신호를 포함하고, 상기 적어도 하나의 제2 채널의 신호를 상기 적어도 하나의 외부 스피커로 전송하는 단계는 상기 전자 장치가 상기 제1 모드이면, 상기 front left 신호, 상기 front right 신호 및 상기 center 신호를 상기 적어도 하나의 스피커를 통해 출력하고, 상기 rear left 신호, 상기 rear right 신호 및 상기 sub woofer 신호를 상기 적어도 하나의 외부 스피커로 전송하고, 상기 믹싱된 신호를 상기 적어도 하나의 외부 스피커로 전송하는 단계는 상기 전자 장치가 상기 제2 모드이면, 상기 front left 신호, 상기 center 신호 및 상기 rear left 신호를 믹싱하고, 상기 front right 신호, 상기 center 신호 및 상기 rear right 신호를 믹싱하고, 상기 믹싱된 신호들을 상기 적어도 하나의 외부 스피커로 전송할 수 있다.
또한, 상기 적어도 하나의 외부 스피커는 rear left 스피커, rear right 스피커 및 woofer 스피커를 포함하며, 상기 적어도 하나의 제2 채널의 신호를 상기 적어도 하나의 외부 스피커로 전송하는 단계는 상기 전자 장치가 상기 제1 모드이면, 상기 rear left 신호를 상기 rear left 스피커로 전송하고, 상기 rear right 신호를 상기 rear right 스피커로 전송하고, 상기 sub woofer 신호를 상기 woofer 스피커로 전송하고, 상기 믹싱된 신호를 상기 적어도 하나의 외부 스피커로 전송하는 단계는 상기 전자 장치가 상기 제2 모드이면, 상기 front left 신호, 상기 center 신호 및 상기 rear left 신호를 믹싱하여 상기 rear left 스피커로 전송하고, 상기 front right 신호, 상기 center 신호 및 상기 rear right 신호를 믹싱하여 상기 rear right 스피커로 전송할 수 있다.
그리고, 상기 rear left 스피커 및 상기 rear right 스피커가 식별되지 않으면, 상기 front left 신호 및 상기 rear left 신호를 믹싱하고, 상기 front right 신호 및 상기 rear right 신호를 믹싱하고, 상기 믹싱된 신호들을 상기 적어도 하나의 스피커를 통해 출력하는 단계를 더 포함할 수 있다.
또한, 상기 전자 장치의 주변에서 사용자의 수 또는 상기 사용자의 위치 중 적어도 하나를 식별하는 단계 및 상기 식별된 정보에 기초하여 상기 전자 장치의 모드를 상기 제1 모드 및 상기 제2 모드 중 하나로 변경하는 단계를 더 포함할 수 있다.
도 1a 내지 도 1c는 본 개시의 이해를 돕기 위한 가족을 위한 음향 기기의 활용 방법을 간략하게 설명하기 위한 도면들이다.
도 2는 본 개시의 일 실시 예에 따른 전자 시스템의 구성을 나타내는 블럭도이다.
도 3은 본 개시의 일 실시 예에 따른 전자 장치의 구성을 나타내는 블럭도이다.
도 4는 본 개시의 일 실시 예에 따른 전자 장치의 세부 구성을 나타내는 블럭도이다.
도 5는 본 개시의 일 실시 예에 따른 전자 장치(100)의 모드에 따른 동작을 위한 회로 구성을 설명하기 위한 도면이다.
도 6은 본 개시의 일 실시 예에 따른 전자 장치(100)의 제1 모드의 동작을 설명하기 위한 도면이다.
도 7은 본 개시의 일 실시 예에 따른 전자 장치(100)의 제2 모드의 동작을 설명하기 위한 도면이다.
도 8은 본 개시의 일 실시 예에 따른 사운드 처리 모듈을 설명하기 위한 도면이다.
도 9는 본 개시의 일 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 흐름도이다.
본 개시의 목적은 가족을 위한 음향 기기를 개인 음향 기기로서 이용하기 위해 사운드를 모드에 따라 상이하게 처리하는 전자 장치 및 그 제어 방법을 제공함에 있다.
이하에서는 첨부 도면을 참조하여 본 개시를 상세히 설명한다.
본 개시의 실시 예에서 사용되는 용어는 본 개시에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 개시의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 개시에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 개시의 전반에 걸친 내용을 토대로 정의되어야 한다.
본 명세서에서, "가진다," "가질 수 있다," "포함한다," 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.
A 또는/및 B 중 적어도 하나라는 표현은 "A" 또는 "B" 또는 "A 및 B" 중 어느 하나를 나타내는 것으로 이해되어야 한다.
본 명세서에서 사용된 "제1," "제2," "첫째," 또는 "둘째,"등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "구성되다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 명세서에서, 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공 지능 전자 장치)를 지칭할 수 있다.
이하 첨부된 도면들을 참조하여 본 개시의 다양한 실시 예를 보다 상세하게 설명한다.
도 1a 내지 도 1c는 본 개시의 이해를 돕기 위한 가족을 위한 음향 기기의 활용 방법을 간략하게 설명하기 위한 도면들이다.
사운드바를 개인 음향 기기처럼 사용할 수 있다면 평소 가족이 같이 사용하다가 필요한 경우에 개인이 원하는 위치에서 개인 음향 기기로 사용할 수 있다.
예를 들어, 사운드바는 도 1a에 도시된 바와 같이, 가족이 같이 사용할 수 있다. 이 경우, 사운드바는 일부 채널의 신호는 직접 출력하고, 나머지 채널의 신호는 sub-woofer 스피커, rear L 스피커 및 rear R 스피커로 전송하고, sub-woofer 스피커, rear L 스피커 및 rear R 스피커 각각이 수신한 채널의 신호를 출력할 수 있다.
이때, 사용자는 도 1b 및 도 1c에 도시된 바와 같이, rear L 스피커 및 rear R 스피커를 개인 음향 기기로 이용할 수도 있다. 이 경우, 가까이 위치한 사용자에게 적당한 음량이 제공되고, 멀리 있는 사용자에게는 작은 음량이 제공되어 사운드바를 이용하더라도 TV 컨텐츠의 사운드가 다른 사람을 방해할 가능성을 낮출 수 있다.
특히, 개인 음향 기기로 이용되는 경우, DRC를 이용해 큰 소리를 너무 크지 않고 작은 소리를 너무 작지 않게 조절한다면 음량을 항상 일정한 범위로 유지할 수 있어 낮은 음량을 유지할 수 있다. 또한, 음성의 명료도를 향상시켜 같은 크기의 음량에서 전달력을 높인다면 음량을 좀더 낮추어 다른 사용자에 대한 방해를 줄일 수 있다.
사운드바를 이용하는 경우는 WiFi 스피커를 연동하여 가족을 위한 음향 기기를 구성하는 경우보다 화면과의 동기화, 스피커 간 동기화, 음 끊김 이슈 등으로부터 자유롭다. 사용자가 구성해야 하는 멀티 채널 시스템과는 달리, 사운드바는 출고 당시 이상의 이슈가 모두 검증된 상태로 출고되기 때문이다.
도 2는 본 개시의 일 실시 예에 따른 전자 시스템(1000)의 구성을 나타내는 블럭도이다. 도 2에 도시된 바와 같이, 디스플레이 시스템(1000)는 전자 장치(100) 및 외부 스피커(200)를 포함한다.
전자 장치(100)는 사운드를 처리하는 장치로서, 사운드바, TV, 데스크탑 PC, 노트북, 스마트폰, 태블릿 PC, 스마트 안경, 스마트 워치 등으로 구현될 수 있다. 다만, 이에 한정되는 것은 아니며, 전자 장치(100)는 사운드를 처리할 수 있는 장치라면 어떠한 장치라도 무방하다.
전자 장치(100)는 사운드에 포함된 적어도 하나의 채널을 외부 스피커(200)로 전송할 수 있다. 또는, 전자 장치(100)는 사운드에 포함된 일부 채널을 믹싱하고 믹싱된 신호를 외부 스피커(200)로 전송할 수도 있다.
외부 스피커(200)는 전자 장치(100)로부터 사운드 신호를 수신하고, 수신된 사운드 신호를 출력하는 장치일 수 있다. 예를 들어, 외부 스피커(200)는 전자 장치(100)로부터 무선 통신을 통해 사운드 신호를 수신하고, 수신된 사운드 신호를 출력하는 장치일 수 있다. 여기서, 무선 통신은 전자 장치(100)와 외부 스피커(200) 고유의 통신 규격일 수 있다. 그에 따라, 화면과의 동기화, 스피커 간 동기화, 음 끊김 이슈 등의 이슈가 모두 검증된 상태일 수 있다.
외부 스피커(200)는 복수로 구현될 수도 있다. 예를 들어, 외부 스피커(200)는 rear left 스피커, rear right 스피커 및 woofer 스피커를 포함할 수 있다. 다만, 이에 한정되는 것은 아니며, 외부 스피커(200)의 구현 방식은 얼마든지 다양할 수 있다.
외부 스피커(200)는 이동이 가능할 수 있다. 예를 들어, 외부 스피커(200)는 전자 장치(100)와 비교하여 상대적으로 소형으로 구현되어 전자 장치(100)보다 위치 이동이 자유로울 수 있다.
도 3은 본 개시의 일 실시 예에 따른 전자 장치(100)의 구성을 나타내는 블럭도이다.
도 2에 따르면, 전자 장치(100)는 스피커(110), 통신 인터페이스(120) 및 프로세서(130)를 포함한다.
스피커(110)는 프로세서(130)에서 처리된 각종 오디오 데이터 뿐만 아니라 각종 알림 음이나 음성 메시지 등을 출력하는 구성요소이다. 예를 들어, 프로세서(130)는 사운드에 포함된 일부 채널의 신호를 스피커(110)를 통해 출력할 수 있다.
스피커(110)는 복수로 구현될 수도 있다. 예를 들어, 스피커(110)는 front left 스피커, front right 스피커 및 center 스피커를 포함할 수 있다. 다만, 이에 한정되는 것은 아니며, 스피커(110)의 구현 방식은 얼마든지 다양할 수 있다.
통신 인터페이스(120)는 다양한 유형의 통신 방식에 따라 다양한 유형의 외부 장치와 통신을 수행하는 구성이다. 예를 들어, 전자 장치(100)는 통신 인터페이스(120)를 통해 외부 스피커(200)와 통신을 수행할 수 있다.
통신 인터페이스(120)는 외부 스피커(200)와의 통신을 위한 전용의 통신 규격을 포함할 수 있다. 예를 들어, 이 경우, 전자 장치(100)와 외부 스피커(200)는 별도의 연결 동작 없이도 통신이 가능할 수 있고, 다른 통신 신호와의 간섭도 적을 수 있다.
다만, 이에 한정되는 것은 아니며, 통신 인터페이스(120)는 와이파이 모듈, 블루투스 모듈, 적외선 통신 모듈 및 무선 통신 모듈 등을 포함할 수도 있다. 여기서, 각 통신 모듈은 적어도 하나의 하드웨어 칩 형태로 구현될 수 있다.
와이파이 모듈, 블루투스 모듈은 각각 WiFi 방식, 블루투스 방식으로 통신을 수행한다. 와이파이 모듈이나 블루투스 모듈을 이용하는 경우에는 SSID 및 세션 키 등과 같은 각종 연결 정보를 먼저 송수신하여, 이를 이용하여 통신 연결한 후 각종 정보들을 송수신할 수 있다. 적외선 통신 모듈은 시 광선과 밀리미터파 사이에 있는 적외선을 이용하여 근거리에 무선으로 데이터를 전송하는 적외선 통신(IrDA, infrared Data Association)기술에 따라 통신을 수행한다.
무선 통신 모듈은 상술한 통신 방식 이외에 지그비(zigbee), 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evolution), LTE-A(LTE Advanced), 4G(4th Generation), 5G(5th Generation)등과 같은 다양한 무선 통신 규격에 따라 통신을 수행하는 적어도 하나의 통신 칩을 포함할 수 있다.
또는, 통신 인터페이스(120)는 HDMI, DP, 썬더볼트, USB, RGB, D-SUB, DVI 등과 같은 유선 통신 인터페이스를 포함할 수 있다.
그 밖에 통신 인터페이스(120)는 LAN(Local Area Network) 모듈, 이더넷 모듈, 또는 페어 케이블, 동축 케이블 또는 광섬유 케이블 등을 이용하여 통신을 수행하는 유선 통신 모듈 중 적어도 하나를 포함할 수도 있다.
프로세서(130)는 전자 장치(100)의 동작을 전반적으로 제어한다. 구체적으로, 프로세서(130)는 전자 장치(100)의 각 구성과 연결되어 전자 장치(100)의 동작을 전반적으로 제어할 수 있다. 예를 들어, 프로세서(130)는 스피커(110), 통신 인터페이스(120), 앰프(미도시), 센서(미도시) 등과 같은 구성과 연결되어 전자 장치(100)의 동작을 제어할 수 있다.
적어도 하나의 프로세서(130)는 CPU, GPU(Graphics Processing Unit), APU(Accelerated Processing Unit), MIC(Many Integrated Core), NPU(Neural Processing Unit), 하드웨어 가속기 또는 머신 러닝 가속기 중 하나 이상을 포함할 수 있다. 적어도 하나의 프로세서(130)는 전자 장치(100)의 다른 구성 요소 중 하나 또는 임의의 조합을 제어할 수 있으며, 통신에 관한 동작 또는 데이터 처리를 수행할 수 있다. 적어도 하나의 프로세서(130)는 메모리에 저장된 하나 이상의 프로그램 또는 명령어(instruction)을 실행할 수 있다. 예를 들어, 적어도 하나의 프로세서(130)는 메모리에 저장된 하나 이상의 명령어를 실행함으로써, 본 개시의 일 실시 예에 따른 방법을 수행할 수 있다.
본 개시의 일 실시 예에 따른 방법이 복수의 동작을 포함하는 경우, 복수의 동작은 하나의 프로세서에 의해 수행될 수도 있고, 복수의 프로세서에 의해 수행될 수도 있다. 예를 들어, 일 실시 예에 따른 방법에 의해 제1 동작, 제2 동작, 제3 동작이 수행될 때, 제1 동작, 제2 동작 및 제3 동작 모두 제1 프로세서에 의해 수행될 수도 있고, 제1 동작 및 제2 동작은 제1 프로세서(예를 들어, 범용 프로세서)에 의해 수행되고 제3 동작은 제2 프로세서(예를 들어, 인공지능 전용 프로세서)에 의해 수행될 수도 있다.
적어도 하나의 프로세서(130)는 하나의 코어를 포함하는 단일 코어 프로세서(single core processor)로 구현될 수도 있고, 복수의 코어(예를 들어, 동종 멀티 코어 또는 이종 멀티 코어)를 포함하는 하나 이상의 멀티 코어 프로세서(multicore processor)로 구현될 수도 있다. 적어도 하나의 프로세서(130)가 멀티 코어 프로세서로 구현되는 경우, 멀티 코어 프로세서에 포함된 복수의 코어 각각은 캐시 메모리, 온 칩(On-chip) 메모리와 같은 프로세서 내부 메모리를 포함할 수 있으며, 복수의 코어에 의해 공유되는 공통 캐시가 멀티 코어 프로세서에 포함될 수 있다. 또한, 멀티 코어 프로세서에 포함된 복수의 코어 각각(또는 복수의 코어 중 일부)은 독립적으로 본 개시의 일 실시 예에 따른 방법을 구현하기 위한 프로그램 명령을 판독하여 수행할 수도 있고, 복수의 코어 전체(또는 일부)가 연계되어 본 개시의 일 실시 예에 따른 방법을 구현하기 위한 프로그램 명령을 판독하여 수행할 수도 있다.
본 개시의 일 실시 예에 따른 방법이 복수의 동작을 포함하는 경우, 복수의 동작은 멀티 코어 프로세서에 포함된 복수의 코어 중 하나의 코어에 의해 수행될 수도 있고, 복수의 코어에 의해 수행될 수도 있다. 예를 들어, 일 실시 예에 따른 방법에 의해 제1 동작, 제2 동작 및 제3 동작이 수행될 때, 제1 동작, 제2 동작 및 제3 동작 모두 멀티 코어 프로세서에 포함된 제1 코어에 의해 수행될 수도 있고, 제1 동작 및 제2 동작은 멀티 코어 프로세서에 포함된 제1 코어에 의해 수행되고 제3 동작은 멀티 코어 프로세서에 포함된 제2 코어에 의해 수행될 수도 있다.
본 개시의 실시 예들에서, 적어도 하나의 프로세서(130)는 하나 이상의 프로세서 및 기타 전자 부품들이 집적된 시스템 온 칩(SoC), 단일 코어 프로세서, 멀티 코어 프로세서, 또는 단일 코어 프로세서 또는 멀티 코어 프로세서에 포함된 코어를 의미할 수 있으며, 여기서 코어는 CPU, GPU, APU, MIC, NPU, 하드웨어 가속기 또는 기계 학습 가속기 등으로 구현될 수 있으나, 본 개시의 실시 예들이 이에 한정되는 것은 아니다. 다만, 이하에서는 설명의 편의를 위해, 프로세서(130)라는 표현으로 전자 장치(100)의 동작을 설명한다.
프로세서(130)는 전자 장치(100)의 모드를 식별할 수 있다. 예를 들어, 프로세서(130)는 전자 장치(100)의 볼륨에 기초하여 전자 장치(100)의 모드를 제1 모드 및 제2 모드 중 하나로 변경할 수 있다. 여기서, 제1 모드는 가족 사용 모드로서, 가족 구성원이 전자 장치(100)를 이용하는 경우일 수 있고, 제2 모드는 개인 사용 모드로서, 가족 구성원 중 개인이 전자 장치(100)를 이용하는 경우일 수 있다.
다만, 이에 한정되는 것은 아니며, 전자 장치(100)는 센서를 더 포함하며, 프로세서(130)는 센서를 통해 전자 장치(100)의 주변에서 사용자의 수 또는 사용자의 위치를 식별하고, 식별된 정보에 기초하여 전자 장치(100)의 모드를 제1 모드 및 제2 모드 중 하나로 변경할 수도 있다. 예를 들어, 프로세서(130)는 전자 장치(100)로부터 기설정된 거리 내의 사용자의 수에 기초하여 전자 장치(100)의 모드를 결정할 수도 있다. 여기서, 전자 장치(100)는 카메라를 더 포함하며, 프로세서(130)는 카메라를 통해 전자 장치(100)의 전방을 촬영하고, 촬영된 이미지로부터 사용자의 수 또는 사용자의 위치 중 적어도 하나를 식별할 수도 있다.
프로세서(130)는 전자 장치(100)가 제1 모드이면, 사운드에 포함된 적어도 하나의 제1 채널의 신호를 적어도 하나의 스피커(110)를 통해 출력하고, 사운드에 포함된 적어도 하나의 제2 채널의 신호를 적어도 하나의 외부 스피커(200)로 전송하도록 통신 인터페이스(120)를 제어하고, 전자 장치(100)가 제2 모드이면, 적어도 하나의 제1 채널의 신호 중 적어도 하나를 적어도 하나의 제2 채널의 신호에 믹싱하고, 믹싱된 신호를 적어도 하나의 외부 스피커(200)로 전송하도록 통신 인터페이스(120)를 제어할 수 있다. 즉, 전자 장치(100)가 제2 모드이면, 적어도 하나의 스피커(110)를 통해 사운드가 출력되지 않고, 적어도 하나의 외부 스피커(200)만을 통해 사운드가 출력되어 사운드 출력에 의한 주변 사람의 피해를 최소화할 수 있다.
예를 들어, 적어도 하나의 제1 채널의 신호는 front left 신호, front right 신호, center 신호 및 sub woofer 신호를 포함하고, 적어도 하나의 제2 채널의 신호는 rear left 신호 및 rear right 신호를 포함할 수 있다. 이 경우, 프로세서(130)는 전자 장치(100)가 제1 모드이면, front left 신호, front right 신호 및 center 신호를 적어도 하나의 스피커(110)를 통해 출력하고, rear left 신호, rear right 신호 및 sub woofer 신호를 적어도 하나의 외부 스피커(200)로 전송하도록 통신 인터페이스(120)를 제어하고, 전자 장치(100)가 제2 모드이면, front left 신호, center 신호 및 rear left 신호를 믹싱하고, front right 신호, center 신호 및 rear right 신호를 믹싱하고, 믹싱된 신호들을 적어도 하나의 외부 스피커(200)로 전송하도록 통신 인터페이스(120)를 제어할 수 있다.
여기서, 적어도 하나의 외부 스피커(200)는 rear left 스피커, rear right 스피커 및 woofer 스피커를 포함하며, 프로세서(130)는 전자 장치(100)가 제1 모드이면, rear left 신호를 rear left 스피커로 전송하고, rear right 신호를 rear right 스피커로 전송하고, sub woofer 신호를 woofer 스피커로 전송하도록 통신 인터페이스(120)를 제어하고, 전자 장치(100)가 제2 모드이면, front left 신호, center 신호 및 rear left 신호를 믹싱하여 rear left 스피커로 전송하고, front right 신호, center 신호 및 rear right 신호를 믹싱하여 rear right 스피커로 전송하도록 통신 인터페이스(120)를 제어할 수 있다.
프로세서(130)는 rear left 스피커 및 rear right 스피커가 식별되지 않으면, front left 신호 및 rear left 신호를 믹싱하고, front right 신호 및 rear right 신호를 믹싱하고, 믹싱된 신호들을 적어도 하나의 스피커(110)를 통해 출력할 수도 있다.
이상에서는 left 신호 간에 믹싱하고, right 신호 간에 믹싱하는 것으로 설명하였으나, 이에 한정되는 것은 아니다. 예를 들어, 프로세서(130)는 left 신호 및 right 신호를 믹싱하여 이펙트를 제공할 수도 있다.
한편, 적어도 하나의 스피커(110)는 front left 스피커, front right 스피커 및 center 스피커를 포함할 수 있다. 이 경우, 프로세서(130)는 전자 장치(100)가 제1 모드이면, front left 신호를 front left 스피커를 통해 출력하고, front right 신호를 front right 스피커를 통해 출력하고, center 신호를 center 스피커를 통해 출력할 수 있다.
이상에서는 프로세서(130)는 두 신호를 1:1로 믹싱하는 것으로 설명하였으나, 이에 한정되는 것은 아니다. 예를 들어, 프로세서(130)는 적어도 하나의 제1 채널의 신호 중 적어도 하나에 제1 게인(gain)을 적용하고, 적어도 하나의 제2 채널의 신호에 제2 게인을 적용하고, 제1 게인이 적용된 적어도 하나의 신호 및 제2 게인이 적용된 적어도 하나의 제2 채널의 신호를 믹싱할 수도 있다.
또한, 사운드에 포함된 채널의 개수, 종류, 적어도 하나의 스피커(110) 및 적어도 하나의 외부 스피커(200)의 구성은 얼마든지 다양하게 변형 가능하다.
프로세서(130)는 믹싱된 신호에 DRC(dynamic range control) 또는 필터 중 적어도 하나를 적용할 수도 있다. 예를 들어, 프로세서(130)는 믹싱된 신호에서 사용자 음성의 크기를 증가시키도록 제1 DRC를 적용하고, 믹싱된 신호에서 배경 사운드의 크기를 감소시키도록 제2 DRC를 적용하고, 사용자 음성에 대해 음성의 선명도를 높이는 필터를 적용할 수 있다. 이 경우, 프로세서(130)는 믹싱된 신호에서 사용자 음성 및 배경 사운드를 식별할 수 있다.
다만, 이에 한정되는 것은 아니며, 프로세서(130)는 믹싱된 신호에서 사용자 음성 및 배경 사운드를 식별하지 않고, 믹싱된 신호 자체로서 DRC를 적용할 수도 있다. 예를 들어, 프로세서(130)는 믹싱된 신호의 크기가 기설정된 크기 미만이면 크기를 증가시키고, 믹싱된 신호의 크기가 기설정된 크기 이상이면 크기를 감소시키는 방식으로 DRC를 적용할 수도 있다.
이러한 방식을 통해, 사용자는 사운드에서 사용자 음성을 좀더 명확하게 식별할 수 있으면서도 사운드 출력에 의한 주변 사람의 피해를 최소화할 수 있다.
한편, 전자 장치(100)는 적어도 하나의 제1 채널의 신호를 증폭하여 적어도 하나의 스피커로 제공하는 앰프(amp)를 더 포함하며, 프로세서(130)는 믹싱을 수행하는 믹서(mixer) 및 DRC 또는 필터를 적용하는 사운드 처리 모듈을 포함하며, 프로세서는 전자 장치(100)가 제1 모드이면, 사운드 처리 모듈을 턴 오프하고, 전자 장치(100)가 제2 모드이면, 앰프를 턴 오프할 수 있다.
이러한 동작을 통해 사운드 처리 모듈, 앰프 등에서 소모되는 전력을 줄일 수 있다.
도 4는 본 개시의 일 실시 예에 따른 전자 장치(100)의 세부 구성을 나타내는 블럭도이다. 전자 장치(100)는 스피커(110), 통신 인터페이스(120) 및 프로세서(130)를 포함할 수 있다. 또한, 도 4에 따르면, 전자 장치(100)는 앰프(140), 센서(150), 메모리(160), 디스플레이(170), 사용자 인터페이스(180), 마이크(190), 카메라(195)를 더 포함할 수도 있다. 도 4에 도시된 구성 요소들 중 도 3에 도시된 구성 요소와 중복되는 부분에 대해서는 자세한 설명을 생략하도록 한다.
앰프(140)는 사운드 신호를 입력받고, 사운드 신호를 증폭하여 스피커로 제공하는 구성일 수 있다. 예를 들어, 앰프(140)는 적어도 하나의 제1 채널의 신호를 증폭하여 적어도 하나의 스피커(110)로 제공할 수 있다.
센서(150)는 전자 장치(100)의 전방에 위치한 사용자를 식별할 수 있다. 예를 들어, 센서(150)는 모션 센서, 적외선 센서 등을 포함하며, 모션 센서, 적외선 센서 등을 통해 사용자를 식별할 수 있다.
센서(150)가 복수의 적외선 센서를 포함하는 경우, 복수의 적외선 센서는 전자 장치(100)에 일렬로 배치되며, 반사파의 유무에 따라 전자 장치(100)의 주변에 위치한 사용자의 대략적인 위치를 식별할 수 있다.
또는, 센서(150)는 초음파 센서, 뎁스 맵 등을 포함할 수도 있으며, 사용자의 존재를 식별할 수 있는 구성이라면 어떠한 구성이라도 무방하다.
다만, 이에 한정되는 것은 아니며, 프로세서(130)는 센서(150) 대신 후술할 마이크(190) 또는 카메라(195) 중 적어도 하나를 통해 사용자의 수 또는 사용자의 위치 중 적어도 하나를 식별할 수도 있다.
메모리(160)는 프로세서(130) 등이 접근할 수 있도록 데이터 등의 정보를 전기 또는 자기 형태로 저장하는 하드웨어를 지칭할 수 있다. 이를 위해, 메모리(160)는 비휘발성 메모리, 휘발성 메모리, 플래시 메모리(Flash Memory), 하드디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD), RAM, ROM 등 중에서 적어도 하나의 하드웨어로 구현될 수 있다.
메모리(160)에는 전자 장치(100) 또는 프로세서(130)의 동작에 필요한 적어도 하나의 인스트럭션(instruction)이 저장될 수 있다. 여기서, 인스트럭션은 전자 장치(100) 또는 프로세서(130)의 동작을 지시하는 부호 단위로서, 컴퓨터가 이해할 수 있는 언어인 기계어로 작성된 것일 수 있다. 또는, 메모리(160)에는 전자 장치(100) 또는 프로세서(130)의 특정 작업을 수행하는 복수의 인스트럭션이 인스트럭션 집합체(instruction set)로서 저장될 수도 있다.
메모리(160)에는 문자, 수, 영상 등을 나타낼 수 있는 비트 또는 바이트 단위의 정보인 데이터가 저장될 수 있다. 예를 들어, 메모리(160)에는 모드 정보, 믹싱 정보가 저장될 수 있다.
메모리(160)는 프로세서(130)에 의해 액세스되며, 프로세서(130)에 의해 인스트럭션, 인스트럭션 집합체 또는 데이터에 대한 독취/기록/수정/삭제/갱신 등이 수행될 수 있다.
디스플레이(170)는 이미지를 디스플레이하는 구성으로, LCD(Liquid Crystal Display), OLED(Organic Light Emitting Diodes) 디스플레이, PDP(Plasma Display Panel) 등과 같은 다양한 형태의 디스플레이로 구현될 수 있다. 디스플레이(170) 내에는 a-si TFT, LTPS(low temperature poly silicon) TFT, OTFT(organic TFT) 등과 같은 형태로 구현될 수 있는 구동 회로, 백라이트 유닛 등도 함께 포함될 수 있다. 한편, 디스플레이(170)는 터치 센서와 결합된 터치 스크린, 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 등으로 구현될 수 있다.
사용자 인터페이스(180)는 버튼, 터치 패드, 마우스 및 키보드 등으로 구현되거나, 디스플레이 기능 및 조작 입력 기능도 함께 수행 가능한 터치 스크린으로도 구현될 수 있다. 여기서, 버튼은 전자 장치(100)의 본체 외관의 전면부나 측면부, 배면부 등의 임의의 영역에 형성된 기계적 버튼, 터치 패드, 휠 등과 같은 다양한 유형의 버튼이 될 수 있다.
마이크(190)는 사운드를 입력받아 오디오 신호로 변환하기 위한 구성이다. 마이크(190)는 프로세서(130)와 전기적으로 연결되며, 프로세서(130)의 제어에 의해 사운드를 수신할 수 있다.
예를 들어, 마이크(190)는 전자 장치(100)의 상측이나 전면 방향, 측면 방향 등에 일체화된 일체형으로 형성될 수 있다. 또는, 마이크(190)는 전자 장치(100)와는 별도의 리모컨 등에 구비될 수도 있다. 이 경우, 리모컨은 마이크(190)를 통해 사운드를 수신하고, 수신된 사운드를 전자 장치(100)로 제공할 수도 있다.
마이크(190)는 아날로그 형태의 사운드를 수집하는 마이크, 수집된 사운드를 증폭하는 앰프 회로, 증폭된 사운드를 샘플링하여 디지털 신호로 변환하는 A/D 변환회로, 변환된 디지털 신호로부터 노이즈 성분을 제거하는 필터 회로 등과 같은 다양한 구성을 포함할 수 있다.
한편, 마이크(190)는 사운드 센서의 형태로 구현될 수도 있으며, 사운드를 수집할 수 있는 구성이라면 어떠한 방식이라도 무방하다.
카메라(195)는 정지 영상 또는 동영상을 촬상하기 위한 구성이다. 카메라(195)는 특정 시점에서의 정지 영상을 촬영할 수 있으나, 연속적으로 정지 영상을 촬영할 수도 있다.
카메라(195)는 전자 장치(100)의 전방을 촬영하여 전자 장치(100) 전방의 실제 환경을 촬영할 수 있다. 프로세서(130)는 카메라(195)를 통해 촬영된 이미지로부터 사용자를 식별할 수도 있다.
카메라(195)는 렌즈, 셔터, 조리개, 고체 촬상 소자, AFE(Analog Front End), TG(Timing Generator)를 포함한다. 셔터는 피사체에 반사된 빛이 카메라(195)로 들어오는 시간을 조절하고, 조리개는 빛이 들어오는 개구부의 크기를 기계적으로 증가 또는 감소시켜 렌즈에 입사되는 광량을 조절한다. 고체 촬상 소자는 피사체에 반사된 빛이 광전하로 축적되면, 광전하에 의한 상을 전기 신호로 출력한다. TG는 고체 촬상 소자의 픽셀 데이터를 리드아웃 하기 위한 타이밍 신호를 출력하며, AFE는 고체 촬상 소자로부터 출력되는 전기 신호를 샘플링하여 디지털화한다.
이상과 같이 전자 장치(100)는 복수의 모드를 제공하며, 개인 사용 모드인 경우에도 사운드 출력에 의한 주변 사람의 피해를 최소화할 수 있다. 특히, 전자 장치(100)는 개인 사용 모드인 경우 믹싱된 사운드에 DRC 또는 음성의 선명도를 높이는 필터를 적용하여 사용자 편의성을 높일 수 있다.
이하에서는 도 5 내지 도 8을 통해 전자 장치(100)의 동작을 좀더 구체적으로 설명한다. 도 5 내지 도 8에서는 설명의 편의를 위해 개별적인 실시 예에 대하여 설명한다. 다만, 도 5 내지 도 8의 개별적인 실시 예는 얼마든지 조합된 상태로 실시될 수도 있다.
도 5는 본 개시의 일 실시 예에 따른 전자 장치(100)의 모드에 따른 동작을 위한 회로 구성을 설명하기 위한 도면이다.
전자 장치(100)는 도 5에 도시된 바와 같이, 디코더/전처리 모듈, 믹서, 앰프(140), 제어부, 사운드 처리 모듈(DRC, voice clear), 스피커(110) 및 통신 인터페이스(120)를 포함할 수 있다. 여기서, 디코더/전처리 모듈, 믹서, 사운드 처리 모듈, 제어부는 프로세서(130)의 일 구성으로 구현될 수도 있다. 도 5에서는 설명의 편의를 위해, 디코더/전처리 모듈, 믹서, 사운드 처리 모듈, 제어부가 개별적으로 구현된 것으로 설명한다.
디코더/전처리 모듈은 외부 장치로부터 수신된 신호에 대해 디코딩, 전처리, bass management 등을 수행하여 복수의 채널을 포함하는 사운드를 믹서로 제공할 수 있다. 예를 들어, 디코더/전처리 모듈은 외부 장치로부터 수신된 신호에 대해 디코딩, 전처리 bass management 등을 수행하여 front left 신호(FL), front right 신호(FR), center 신호(CT), sub woofer 신호(SW), rear left 신호(RL) 및 rear right 신호(RR)를 믹서로 제공할 수 있다.
믹서는 제어부의 제어에 기초하여 디코더/전처리 모듈로부터 수신된 복수의 채널의 신호를 처리할 수 있다. 예를 들어, 믹서는 전자 장치(100)가 제1 모드이면, front left 신호, front right 신호 및 center 신호를 앰프(140)로 제공하고, rear left 신호, rear right 신호를 사운드 처리 모듈로 제공하고, 통신 인터페이스(120)를 통해 sub woofer 신호를 woofer 스피커(200-3)로 전송할 수 있다. 여기서, 앰프(140)는 front left 신호, front right 신호 및 center 신호를 증폭하여 스피커(110)로 제공하고, 스피커(110)는 증폭된 front left 신호, front right 신호 및 center 신호를 출력할 수 있다. 사운드 처리 모듈은 rear left 신호, rear right 신호를 사운드 처리하고, 통신 인터페이스(120)를 통해 사운드 처리된 rear left 신호, rear right 신호를 각각 rear left 스피커(200-1), rear right 스피커(200-2)로 전송할 수 있다.
믹서는 제어부의 제어에 기초하여 전자 장치(100)가 제2 모드이면, front left 신호, center 신호 및 rear left 신호를 믹싱하고, front right 신호, center 신호 및 rear right 신호를 믹싱하고, 통신 인터페이스(120)를 통해 믹싱된 신호들을 rear left 스피커(200-1), rear right 스피커(200-2)로 전송할 수 있다.
여기서, 믹서는 510 블록을 통해 믹싱 동작을 수행할 수 있다. 믹싱 동작에 대하여는 도 7을 통해 좀더 구체적으로 설명한다.
사운드 처리 모듈은 제어부의 제어에 기초하여 믹싱된 신호에서 DRC 또는 음성의 선명도를 높이는 필터 중 적어도 하나를 적용할 수 있다.
제어부는 각 구성을 제어할 수 있다. 특히, 제어부는 전자 장치(100)의 모드를 식별하고, 식별된 모드에 기초하여 각 구성을 제어할 수 있다. 여기서, 모드는 사용자 명령에 따라 결정될 수 있다. 다만, 이에 한정되는 것은 아니며, 제어부는 전자 장치(100)의 볼륨에 기초하여 전자 장치(100)의 모드를 변경할 수도 있다. 또는, 제어부는 전자 장치(100)의 전방에서 식별된 사용자의 수 또는 위치 중 적어도 하나에 기초하여 전자 장치(100)의 모드를 변경할 수도 있다.
각 모드에서의 구체적인 동작은 이후의 도면에서 설명한다.
도 6은 본 개시의 일 실시 예에 따른 전자 장치(100)의 제1 모드의 동작을 설명하기 위한 도면이다. 도 6에서 점선으로 표시된 부분은 신호의 흐름이 없는 것을 나타낸다.
제어부는 전자 장치(100)가 제1 모드인 경우, 각 채널의 신호들이 믹싱되지 않도록 믹서의 510 블록을 제어할 수 있다. 예를 들어, 510 블록은 front left 신호, rear left 신호 및 center 신호를 믹싱하는 제1 믹싱 유닛 및 front right 신호, rear right 신호 및 center 신호를 믹싱하는 제2 믹싱 유닛을 포함할 수 있다. 또한, 믹서의 510 블록은 front left 신호, front right 신호, center 신호의 입력단 각각에 스위치를 포함할 수 있다. 제어부는 front left 신호, front right 신호, center 신호의 입력단 각각에 스위치를 개방시켜 제1 믹싱 유닛 및 제2 믹싱 유닛에서 실질적으로 믹싱이 이루어지지 않도록 제어할 수 있다.
다만, 이에 한정되는 것은 아니며, 믹싱 방식은 얼마든지 다양할 수 있다. 예를 들어, 510 블록은 front left 신호, rear right 신호 및 center 신호를 믹싱하는 제3 믹싱 유닛을 포함할 수도 있다. 또한, 각 믹싱 유닛은 center 신호를 믹싱하지 않도록 구현될 수도 있다.
제어부는 전자 장치(100)가 제1 모드인 경우, 사운드 처리 모듈을 턴 오프시킬 수 있다. 사운드 처리 모듈은 전자 장치(100)가 제2 모드인 경우, 사용자의 음성 식별을 용이하게 하고, 사운드 출력에 의한 주변 사람의 피해를 최소화하기 위한 것으로, 가족 청취 모드인 제1 모드에서는 턴 오프시켜 전력 소모를 줄일 수 있다.
도 7은 본 개시의 일 실시 예에 따른 전자 장치(100)의 제2 모드의 동작을 설명하기 위한 도면이다. 도 7에서 점선으로 표시된 부분은 신호의 흐름이 없는 것을 나타낸다.
제어부는 전자 장치(100)가 제2 모드인 경우, 스피커(110)를 통해 사운드를 출력하지 않을 수 있다. 그에 따라, 제어부는 전자 장치(100)가 제2 모드인 경우, 앰프(140)를 턴 오프시킬 수 있다.
제어부는 전자 장치(100)가 제2 모드인 경우, 각 채널의 신호들이 믹싱되도록 믹서의 510 블록을 제어할 수 있다. 예를 들어, 510 블록은 front left 신호, rear left 신호 및 center 신호를 믹싱하는 제1 믹싱 유닛 및 front right 신호, rear right 신호 및 center 신호를 믹싱하는 제2 믹싱 유닛을 포함할 수 있다. 또한, 믹서의 510 블록은 front left 신호, front right 신호, center 신호의 입력단 각각에 스위치를 포함할 수 있다. 제어부는 front left 신호, front right 신호, center 신호의 입력단 각각에 스위치를 단락시켜 제1 믹싱 유닛 및 제2 믹싱 유닛의 믹싱 동작을 수행하도록 제어할 수 있다.
다만, 이에 한정되는 것은 아니며, 각 믹싱 유닛은 각 채널의 신호들에 게인을 적용한 후 믹싱을 수행하도록 구현될 수도 있다.
제어부는 전자 장치(100)가 제2 모드인 경우, 믹싱된 신호에 대해 DRC 또는 음성의 선명도를 높이는 필터 중 적어도 하나를 적용할 수 있다.
도 8은 본 개시의 일 실시 예에 따른 사운드 처리 모듈을 설명하기 위한 도면이다.
제어부는 전자 장치(100)가 제2 모드인 경우, 도 8에 도시된 바와 같이, 믹싱된 신호에서 사용자 음성에 대해 DRC 또는 음성의 선명도를 높이는 필터 중 적어도 하나를 적용하고, 믹싱된 신호에서 배경 사운드에 대해 DRC를 적용할 수 있다. 예를 들어, 제어부는 사용자 음성의 크기를 증가시키도록 제1 DRC를 적용하고, 배경 사운드의 크기를 감소시키도록 제2 DRC를 적용할 수 있다.
또한, 제어부는 사용자 명령에 기초하여 DRC 또는 필터의 적용 강도를 변경할 수 있다. 또는, 제어부는 전자 장치(100)의 볼륨에 기초하여 DRC 또는 필터의 적용 강도를 변경할 수도 있다.
이러한 동작을 통해, 사용자는 전자 장치(100)의 볼륨이 낮은 경우에도 음성을 좀더 선명하게 청취할 수 있다.
도 9는 본 개시의 일 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 흐름도이다.
먼저, 전자 장치가 제1 모드이면, 사운드에 포함된 적어도 하나의 제1 채널의 신호를 전자 장치에 포함된 적어도 하나의 스피커를 통해 출력하고, 사운드에 포함된 적어도 하나의 제2 채널의 신호를 적어도 하나의 외부 스피커로 전송한다(S910). 그리고, 전자 장치가 제2 모드이면, 적어도 하나의 제1 채널의 신호 중 적어도 하나를 적어도 하나의 제2 채널의 신호에 믹싱하고, 믹싱된 신호를 적어도 하나의 외부 스피커로 전송한다(S920).
또한, 믹싱된 신호에 DRC(dynamic range control) 또는 필터 중 적어도 하나를 적용하는 단계를 더 포함할 수 있다.
그리고, 적어도 하나를 적용하는 단계는 믹싱된 신호에서 사용자 음성의 크기를 증가시키도록 제1 DRC를 적용하고, 믹싱된 신호에서 배경 사운드의 크기를 감소시키도록 제2 DRC를 적용하고, 사용자 음성에 대해 음성의 선명도를 높이는 필터를 적용할 수 있다.
또한, 적어도 하나를 적용하는 단계는 사운드 처리 모듈를 통해 DRC 또는 필터를 적용하고, 적어도 하나의 제2 채널의 신호를 적어도 하나의 외부 스피커로 전송하는 단계(S910)는 앰프(amp)를 이용하여 적어도 하나의 제1 채널의 신호를 증폭하여 적어도 하나의 스피커로 제공하고, 사운드 처리 모듈을 턴 오프하고, 믹싱된 신호를 적어도 하나의 외부 스피커로 전송하는 단계는 앰프를 턴 오프할 수 있다.
그리고, 전자 장치의 볼륨에 기초하여 전자 장치의 모드를 제1 모드 및 제2 모드 중 하나로 변경하는 단계를 더 포함할 수 있다.
또한, 믹싱된 신호를 적어도 하나의 외부 스피커로 전송하는 단계(S920)는 적어도 하나의 제1 채널의 신호 중 적어도 하나에 제1 게인(gain)을 적용하고, 적어도 하나의 제2 채널의 신호에 제2 게인을 적용하고, 제1 게인이 적용된 적어도 하나의 신호 및 제2 게인이 적용된 적어도 하나의 제2 채널의 신호를 믹싱할 수 있다.
그리고, 적어도 하나의 제1 채널의 신호는 front left 신호, front right 신호, center 신호 및 sub woofer 신호를 포함하고, 적어도 하나의 제2 채널의 신호는 rear left 신호 및 rear right 신호를 포함하고, 적어도 하나의 제2 채널의 신호를 적어도 하나의 외부 스피커로 전송하는 단계(S910)는 전자 장치가 제1 모드이면, front left 신호, front right 신호 및 center 신호를 적어도 하나의 스피커를 통해 출력하고, rear left 신호, rear right 신호 및 sub woofer 신호를 적어도 하나의 외부 스피커로 전송하고, 믹싱된 신호를 적어도 하나의 외부 스피커로 전송하는 단계(S920)는 전자 장치가 제2 모드이면, front left 신호, center 신호 및 rear left 신호를 믹싱하고, front right 신호, center 신호 및 rear right 신호를 믹싱하고, 믹싱된 신호들을 적어도 하나의 외부 스피커로 전송할 수 있다.
또한, 적어도 하나의 외부 스피커는 rear left 스피커, rear right 스피커 및 woofer 스피커를 포함하며, 적어도 하나의 제2 채널의 신호를 적어도 하나의 외부 스피커로 전송하는 단계(S910)는 전자 장치가 제1 모드이면, rear left 신호를 rear left 스피커로 전송하고, rear right 신호를 rear right 스피커로 전송하고, sub woofer 신호를 woofer 스피커로 전송하고, 믹싱된 신호를 적어도 하나의 외부 스피커로 전송하는 단계(S920)는 전자 장치가 제2 모드이면, front left 신호, center 신호 및 rear left 신호를 믹싱하여 rear left 스피커로 전송하고, front right 신호, center 신호 및 rear right 신호를 믹싱하여 rear right 스피커로 전송할 수 있다.
그리고, rear left 스피커 및 rear right 스피커가 식별되지 않으면, front left 신호 및 rear left 신호를 믹싱하고, front right 신호 및 rear right 신호를 믹싱하고, 믹싱된 신호들을 적어도 하나의 스피커를 통해 출력하는 단계를 더 포함할 수 있다.
또한, 전자 장치의 주변에서 사용자의 수 또는 사용자의 위치 중 적어도 하나를 식별하는 단계 및 식별된 정보에 기초하여 전자 장치의 모드를 제1 모드 및 제2 모드 중 하나로 변경하는 단계를 더 포함할 수 있다.
이상과 같은 본 개시의 다양한 실시 예에 따르면, 전자 장치는 복수의 모드를 제공하며, 개인 사용 모드인 경우에도 사운드 출력에 의한 주변 사람의 피해를 최소화할 수 있다.
특히, 전자 장치는 개인 사용 모드인 경우 믹싱된 사운드에 DRC 또는 음성의 선명도를 높이는 필터를 적용하여 사용자 편의성을 높일 수 있다.
한편, 이상에서는 대부분의 설명이 5.1 채널의 사운드인 것으로 설명하였으나, 얼마든지 다양한 채널의 사운드에 대하여도 이상에서 설명한 방식과 유사한 방식이 적용될 수도 있다.
또한, 이상에서는 외부 스피커가 2개의 좌우 스피커 및 1개의 woofer 스피커인 것으로 설명하였으나, 스피커 구성 역시 얼마든지 다양할 수도 있다.
한편, 본 개시의 일시 예에 따르면, 이상에서 설명된 다양한 실시 예들은 기기(machine)(예: 컴퓨터)로 읽을 수 있는 저장 매체(machine-readable storage media)에 저장된 명령어를 포함하는 소프트웨어로 구현될 수 있다. 기기는, 저장 매체로부터 저장된 명령어를 호출하고, 호출된 명령어에 따라 동작이 가능한 장치로서, 개시된 실시 예들에 따른 전자 장치(예: 전자 장치(A))를 포함할 수 있다. 명령이 프로세서에 의해 실행될 경우, 프로세서가 직접, 또는 프로세서의 제어 하에 다른 구성요소들을 이용하여 명령에 해당하는 기능을 수행할 수 있다. 명령은 컴파일러 또는 인터프리터에 의해 생성 또는 실행되는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장매체는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장매체가 신호(signal)를 포함하지 않으며 실재(tangible)한다는 것을 의미할 뿐 데이터가 저장매체에 반영구적 또는 임시적으로 저장됨을 구분하지 않는다.
또한, 본 개시의 일 실시 예에 따르면, 이상에서 설명된 다양한 실시 예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 온라인으로 배포될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
또한, 본 개시의 일 실시 예에 따르면, 이상에서 설명된 다양한 실시 예들은 소프트웨어(software), 하드웨어(hardware) 또는 이들의 조합을 이용하여 컴퓨터(computer) 또는 이와 유사한 장치로 읽을 수 있는 기록 매체 내에서 구현될 수 있다. 일부 경우에 있어 본 명세서에서 설명되는 실시 예들이 프로세서 자체로 구현될 수 있다. 소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시 예들은 별도의 소프트웨어로서 구현될 수도 있다. 소프트웨어 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 동작을 수행할 수 있다.
한편, 상술한 다양한 실시 예들에 따른 기기의 프로세싱 동작을 수행하기 위한 컴퓨터 명령어(computer instructions)는 비일시적 컴퓨터 판독 가능 매체(non-transitory computer-readable medium)에 저장될 수 있다. 이러한 비일시적 컴퓨터 판독 가능 매체에 저장된 컴퓨터 명령어는 특정 기기의 프로세서에 의해 실행되었을 때 상술한 다양한 실시 예에 따른 기기에서의 처리 동작을 특정 기기가 수행하도록 한다. 비일시적 컴퓨터 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 비일시적 컴퓨터 판독 가능 매체의 구체적인 예로는, CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등이 있을 수 있다.
또한, 상술한 다양한 실시 예들에 따른 구성 요소(예: 모듈 또는 프로그램) 각각은 단수 또는 복수의 개체로 구성될 수 있으며, 전술한 해당 서브 구성 요소들 중 일부 서브 구성 요소가 생략되거나, 또는 다른 서브 구성 요소가 다양한 실시 예에 더 포함될 수 있다. 대체적으로 또는 추가적으로, 일부 구성 요소들(예: 모듈 또는 프로그램)은 하나의 개체로 통합되어, 통합되기 이전의 각각의 해당 구성 요소에 의해 수행되는 기능을 동일 또는 유사하게 수행할 수 있다. 다양한 실시예들에 따른, 모듈, 프로그램 또는 다른 구성 요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱하게 실행되거나, 적어도 일부 동작이 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
이상에서는 본 개시의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 개시는 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 개시의 요지를 벗어남이 없이 당해 개시에 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 개시의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

Claims (15)

  1. 전자 장치에 있어서,
    적어도 하나의 스피커;
    통신 인터페이스; 및
    상기 적어도 하나의 스피커 및 상기 통신 인터페이스와 연결되어 상기 전자 장치를 제어하는 적어도 하나의 프로세서;를 포함하며,
    상기 프로세서는,
    상기 전자 장치가 제1 모드이면, 사운드에 포함된 적어도 하나의 제1 채널의 신호를 상기 적어도 하나의 스피커를 통해 출력하고, 상기 사운드에 포함된 적어도 하나의 제2 채널의 신호를 적어도 하나의 외부 스피커로 전송하도록 상기 통신 인터페이스를 제어하고,
    상기 전자 장치가 제2 모드이면, 상기 적어도 하나의 제1 채널의 신호 중 적어도 하나를 상기 적어도 하나의 제2 채널의 신호에 믹싱하고, 상기 믹싱된 신호를 상기 적어도 하나의 외부 스피커로 전송하도록 상기 통신 인터페이스를 제어하는, 전자 장치.
  2. 제1항에 있어서,
    상기 프로세서는,
    상기 믹싱된 신호에 DRC(dynamic range control) 또는 필터 중 적어도 하나를 적용하는, 전자 장치.
  3. 제2항에 있어서,
    상기 프로세서는,
    상기 믹싱된 신호에서 사용자 음성의 크기를 증가시키도록 제1 DRC를 적용하고, 상기 믹싱된 신호에서 배경 사운드의 크기를 감소시키도록 제2 DRC를 적용하고,
    상기 사용자 음성에 대해 음성의 선명도를 높이는 필터를 적용하는, 전자 장치.
  4. 제2항에 있어서,
    상기 적어도 하나의 제1 채널의 신호를 증폭하여 상기 적어도 하나의 스피커로 제공하는 앰프(amp);를 더 포함하며,
    상기 프로세서는,
    상기 믹싱을 수행하는 믹서(mixer); 및
    상기 DRC 또는 상기 필터를 적용하는 사운드 처리 모듈;을 포함하며,
    상기 프로세서는,
    상기 전자 장치가 상기 제1 모드이면, 상기 사운드 처리 모듈을 턴 오프하고,
    상기 전자 장치가 상기 제2 모드이면, 상기 앰프를 턴 오프하는, 전자 장치.
  5. 제1항에 있어서,
    상기 프로세서는,
    상기 전자 장치의 볼륨에 기초하여 상기 전자 장치의 모드를 상기 제1 모드 및 상기 제2 모드 중 하나로 변경하는, 전자 장치.
  6. 제1항에 있어서,
    상기 프로세서는,
    상기 적어도 하나의 제1 채널의 신호 중 상기 적어도 하나에 제1 게인(gain)을 적용하고,
    상기 적어도 하나의 제2 채널의 신호에 제2 게인을 적용하고,
    상기 제1 게인이 적용된 적어도 하나의 신호 및 상기 제2 게인이 적용된 적어도 하나의 제2 채널의 신호를 믹싱하는, 전자 장치.
  7. 제1항에 있어서,
    상기 적어도 하나의 제1 채널의 신호는,
    front left 신호, front right 신호, center 신호 및 sub woofer 신호를 포함하고,
    상기 적어도 하나의 제2 채널의 신호는,
    rear left 신호 및 rear right 신호를 포함하고,
    상기 프로세서는,
    상기 전자 장치가 상기 제1 모드이면, 상기 front left 신호, 상기 front right 신호 및 상기 center 신호를 상기 적어도 하나의 스피커를 통해 출력하고, 상기 rear left 신호, 상기 rear right 신호 및 상기 sub woofer 신호를 상기 적어도 하나의 외부 스피커로 전송하도록 상기 통신 인터페이스를 제어하고,
    상기 전자 장치가 상기 제2 모드이면, 상기 front left 신호, 상기 center 신호 및 상기 rear left 신호를 믹싱하고, 상기 front right 신호, 상기 center 신호 및 상기 rear right 신호를 믹싱하고, 상기 믹싱된 신호들을 상기 적어도 하나의 외부 스피커로 전송하도록 상기 통신 인터페이스를 제어하는, 전자 장치.
  8. 제7항에 있어서,
    상기 적어도 하나의 외부 스피커는,
    rear left 스피커, rear right 스피커 및 woofer 스피커를 포함하며,
    상기 프로세서는,
    상기 전자 장치가 상기 제1 모드이면, 상기 rear left 신호를 상기 rear left 스피커로 전송하고, 상기 rear right 신호를 상기 rear right 스피커로 전송하고, 상기 sub woofer 신호를 상기 woofer 스피커로 전송하도록 상기 통신 인터페이스를 제어하고,
    상기 전자 장치가 상기 제2 모드이면, 상기 front left 신호, 상기 center 신호 및 상기 rear left 신호를 믹싱하여 상기 rear left 스피커로 전송하고, 상기 front right 신호, 상기 center 신호 및 상기 rear right 신호를 믹싱하여 상기 rear right 스피커로 전송하도록 상기 통신 인터페이스를 제어하는, 전자 장치.
  9. 제8항에 있어서,
    상기 프로세서는,
    상기 rear left 스피커 및 상기 rear right 스피커가 식별되지 않으면, 상기 front left 신호 및 상기 rear left 신호를 믹싱하고, 상기 front right 신호 및 상기 rear right 신호를 믹싱하고, 상기 믹싱된 신호들을 상기 적어도 하나의 스피커를 통해 출력하는, 전자 장치.
  10. 제1항에 있어서,
    센서;를 더 포함하며,
    상기 프로세서는,
    상기 센서를 통해 상기 전자 장치의 주변에서 사용자의 수 또는 상기 사용자의 위치 중 적어도 하나를 식별하고,
    상기 식별된 정보에 기초하여 상기 전자 장치의 모드를 상기 제1 모드 및 상기 제2 모드 중 하나로 변경하는, 전자 장치.
  11. 전자 장치의 제어 방법에 있어서,
    상기 전자 장치가 제1 모드이면, 사운드에 포함된 적어도 하나의 제1 채널의 신호를 상기 전자 장치에 포함된 적어도 하나의 스피커를 통해 출력하고, 상기 사운드에 포함된 적어도 하나의 제2 채널의 신호를 적어도 하나의 외부 스피커로 전송하는 단계; 및
    상기 전자 장치가 제2 모드이면, 상기 적어도 하나의 제1 채널의 신호 중 적어도 하나를 상기 적어도 하나의 제2 채널의 신호에 믹싱하고, 상기 믹싱된 신호를 상기 적어도 하나의 외부 스피커로 전송하는 단계;를 포함하는, 제어 방법.
  12. 제11항에 있어서,
    상기 믹싱된 신호에 DRC(dynamic range control) 또는 필터 중 적어도 하나를 적용하는 단계;를 더 포함하는, 제어 방법.
  13. 제12항에 있어서,
    상기 적용하는 단계는,
    상기 믹싱된 신호에서 사용자 음성의 크기를 증가시키도록 제1 DRC를 적용하고, 상기 믹싱된 신호에서 배경 사운드의 크기를 감소시키도록 제2 DRC를 적용하고,
    상기 사용자 음성에 대해 음성의 선명도를 높이는 필터를 적용하는, 제어 방법.
  14. 제12항에 있어서,
    상기 적어도 하나를 적용하는 단계는,
    사운드 처리 모듈를 통해 상기 DRC 또는 상기 필터를 적용하고,
    상기 적어도 하나의 제2 채널의 신호를 상기 적어도 하나의 외부 스피커로 전송하는 단계는,
    앰프(amp)를 이용하여 상기 적어도 하나의 제1 채널의 신호를 증폭하여 상기 적어도 하나의 스피커로 제공하고, 상기 사운드 처리 모듈을 턴 오프하고,
    상기 믹싱된 신호를 상기 적어도 하나의 외부 스피커로 전송하는 단계는,
    상기 앰프를 턴 오프하는, 제어 방법.
  15. 제11항에 있어서,
    상기 전자 장치의 볼륨에 기초하여 상기 전자 장치의 모드를 상기 제1 모드 및 상기 제2 모드 중 하나로 변경하는 단계;를 더 포함하는, 제어 방법.
PCT/KR2023/015170 2022-11-30 2023-10-04 사운드를 모드에 따라 상이하게 처리하기 위한 전자 장치 및 그 제어 방법 WO2024117506A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020220164882A KR20240081023A (ko) 2022-11-30 2022-11-30 사운드를 모드에 따라 상이하게 처리하기 위한 전자 장치 및 그 제어 방법
KR10-2022-0164882 2022-11-30

Publications (1)

Publication Number Publication Date
WO2024117506A1 true WO2024117506A1 (ko) 2024-06-06

Family

ID=91324374

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2023/015170 WO2024117506A1 (ko) 2022-11-30 2023-10-04 사운드를 모드에 따라 상이하게 처리하기 위한 전자 장치 및 그 제어 방법

Country Status (2)

Country Link
KR (1) KR20240081023A (ko)
WO (1) WO2024117506A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030092351A (ko) * 2002-05-29 2003-12-06 엘지전자 주식회사 5.1 채널 음향 출력 장치
US20080118092A1 (en) * 2006-11-20 2008-05-22 Ming-Hsiung Chen Speaker System of utilizing Pulse Width Modulation Signals for Saving Idling Power Consumption
KR101519435B1 (ko) * 2015-02-27 2015-05-12 주식회사 카이다스 엑티브스피커용 대기전력 차단 장치
US20160359512A1 (en) * 2015-06-05 2016-12-08 Braven LC Multi-channel mixing console
KR20200018537A (ko) * 2016-09-30 2020-02-19 애플 인크. 빔형성 라우드스피커 어레이를 위한 공간적 오디오 렌더링

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030092351A (ko) * 2002-05-29 2003-12-06 엘지전자 주식회사 5.1 채널 음향 출력 장치
US20080118092A1 (en) * 2006-11-20 2008-05-22 Ming-Hsiung Chen Speaker System of utilizing Pulse Width Modulation Signals for Saving Idling Power Consumption
KR101519435B1 (ko) * 2015-02-27 2015-05-12 주식회사 카이다스 엑티브스피커용 대기전력 차단 장치
US20160359512A1 (en) * 2015-06-05 2016-12-08 Braven LC Multi-channel mixing console
KR20200018537A (ko) * 2016-09-30 2020-02-19 애플 인크. 빔형성 라우드스피커 어레이를 위한 공간적 오디오 렌더링

Also Published As

Publication number Publication date
KR20240081023A (ko) 2024-06-07

Similar Documents

Publication Publication Date Title
WO2021071155A1 (en) Electronic apparatus and control method thereof
WO2017057866A1 (ko) 오디오 출력 장치 및 오디오 출력 장치의 제어 방법
WO2024117506A1 (ko) 사운드를 모드에 따라 상이하게 처리하기 위한 전자 장치 및 그 제어 방법
WO2019164326A1 (ko) 실시간 콘텐트 데이터를 공유하는 전자 장치
WO2022114516A1 (ko) 전자 장치 및 이의 제어 방법
WO2022092535A1 (ko) 전자 장치 및 그 제어 방법
WO2022025420A1 (ko) 전자장치 및 그 제어방법
WO2018097554A1 (en) Electronic device and method for controlling thereof
WO2023182667A1 (ko) 디스플레이 장치 및 그 제어 방법
WO2024085473A1 (ko) P2p 연결을 형성하기 위한 전자 장치 및 그 제어 방법
WO2024147482A1 (ko) 이미지를 업스케일링하기 위한 전자 장치 및 그 제어 방법
WO2024090778A1 (ko) 오디오 데이터로부터 오디오 객체를 분리하기 위한 전자 장치 및 그 제어 방법
WO2024053841A1 (ko) 오동작을 방지하기 위한 원격 제어 장치, 전자 장치 및 그 제어 방법들
WO2024122821A1 (ko) 리모트 컨트롤 신호로 주변 기기를 제어하기 위한 전자 장치 및 그 제어 방법
WO2024185988A1 (ko) 복수의 모드를 제공하기 위한 전자 장치 및 그 제어 방법
WO2023043032A1 (ko) 전자 장치 및 그 제어 방법
WO2024048917A1 (ko) Easy setup을 재수행하기 위한 전자 장치, 사용자 단말 장치 및 그 제어 방법들
WO2024117548A1 (ko) 청소기 및 그 제어 방법
WO2022124560A1 (ko) 전자 장치 및 이의 제어 방법
WO2024085381A1 (ko) 이미지에서 관심 영역을 식별하기 위한 전자 장치 및 그 제어 방법
WO2024043446A1 (ko) 사용자의 위치를 식별하기 위한 전자 장치 및 그 제어 방법
WO2024111905A1 (ko) 전자 장치 및 이의 제어 방법
WO2024071650A1 (ko) 균일성을 향상시키기 위한 디스플레이 장치, 전자 장치 및 그 제어 방법들
WO2023249208A1 (ko) 디스플레이 장치 및 그 제어 방법
WO2024071646A1 (ko) Easy setup을 수행하기 위한 전자 장치, 사용자 단말 장치 및 그 제어 방법들

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23898040

Country of ref document: EP

Kind code of ref document: A1