WO2022060023A1 - 전자 장치 및 그 제어 방법 - Google Patents

전자 장치 및 그 제어 방법 Download PDF

Info

Publication number
WO2022060023A1
WO2022060023A1 PCT/KR2021/012392 KR2021012392W WO2022060023A1 WO 2022060023 A1 WO2022060023 A1 WO 2022060023A1 KR 2021012392 W KR2021012392 W KR 2021012392W WO 2022060023 A1 WO2022060023 A1 WO 2022060023A1
Authority
WO
WIPO (PCT)
Prior art keywords
signal
carrier frequency
electronic device
received
communication interface
Prior art date
Application number
PCT/KR2021/012392
Other languages
English (en)
French (fr)
Inventor
허재명
김민섭
진경신
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to CN202180062838.1A priority Critical patent/CN116113852A/zh
Priority to EP21869645.8A priority patent/EP4191283A4/en
Publication of WO2022060023A1 publication Critical patent/WO2022060023A1/ko
Priority to US18/108,837 priority patent/US20230198623A1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B10/00Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/40Transceivers
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/04Systems determining the presence of a target
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/86Combinations of lidar systems with systems other than lidar, radar or sonar, e.g. with direction finders
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S3/00Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
    • G01S3/80Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using ultrasonic, sonic or infrasonic waves
    • G01S3/802Systems for determining direction or deviation from predetermined direction
    • G01S3/808Systems for determining direction or deviation from predetermined direction using transducers spaced apart and measuring phase or time difference between signals therefrom, i.e. path-difference systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B10/00Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/11Arrangements specific to free-space transmission, i.e. transmission through air or vacuum
    • H04B10/114Indoor or close-range type systems
    • H04B10/1143Bidirectional transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B10/00Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/11Arrangements specific to free-space transmission, i.e. transmission through air or vacuum
    • H04B10/114Indoor or close-range type systems
    • H04B10/1149Arrangements for indoor wireless networking of information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2410/00Microphones

Definitions

  • the present disclosure relates to an electronic device and a method for controlling the same, and more particularly, to an electronic device for identifying a user or a user's movement and a method for controlling the same.
  • the electronic device may detect the user in various ways.
  • the electronic device may detect a user using a sensor such as a passive infrared ray (PIR) sensor.
  • PIR passive infrared ray
  • the electronic device may detect a user if the distance between the electronic device and the user is within the operating radius of the sensor. may not be able to detect
  • the electronic device may detect a user using a camera.
  • power consumption according to the operation of the camera and resource use for identifying a user from an image captured by the camera may be a problem.
  • the present disclosure has been made in accordance with the above-described needs, and an object of the present disclosure is to provide an electronic device and a control method thereof for improving the accuracy of user sensing, which is easy to implement and does not have problems with power and resources of the device.
  • an electronic device controls the communication interface to transmit a communication interface and a signal of a first carrier frequency, and after the signal of the first carrier frequency is transmitted If the signal of the first carrier frequency is not received through the communication interface through the communication interface, the first carrier frequency is determined as the search carrier frequency, and If the reflected signal is received via the communication interface within the first threshold time after the signal of the first carrier frequency is transmitted, the communication interface is configured to transmit a signal of a second carrier frequency different from the first carrier frequency. control, and control the communication interface to transmit a signal of the determined discovery carrier frequency, based on whether a signal is received through the communication interface within a second threshold time after the signal of the discovery carrier frequency is transmitted. and a processor that identifies the presence of
  • the processor identifies that the object exists when a signal is received through the communication interface within the second threshold time after the signal of the discovery carrier frequency is transmitted, and the received signal is a signal of the discovery carrier frequency may be a signal reflected by the object.
  • the processor may identify that the object exists when a difference between the carrier frequency of the reflected signal and the search carrier frequency is less than or equal to a threshold value.
  • the device may further include a microphone, wherein the processor turns on the microphone when it is identified that the object exists, and identifies whether the object is a user based on a sound received from the turned-on microphone.
  • the processor changes the first mode to a second mode and displays a UI corresponding to the second mode
  • the display can be controlled to do so.
  • the first mode may be a power-off mode or a standby mode
  • the second mode may be an ambient mode
  • the processor may control the communication interface to transmit the signal at the second carrier frequency when a difference between the carrier frequency of the reflected signal and the first carrier frequency is equal to or less than a threshold value.
  • the processor may control the communication interface to transmit a signal of the search carrier frequency at a preset time interval.
  • the processor identifies that the object does not exist if a signal is not received through the communication interface within the second threshold time after the signal of the search carrier frequency is transmitted at the predetermined interval, and the object is If it is identified as not present, the operation of determining the search carrier frequency may be re-performed.
  • the communication interface includes an IR (infrared ray) transmitter and an IR receiver
  • the processor controls the IR transmitter to transmit a signal of the first carrier frequency, and after the signal of the first carrier frequency is transmitted If the reflected signal is not received through the IR receiver within the first threshold time, the first carrier frequency is determined as the search carrier frequency, and after the signal of the first carrier frequency is transmitted, the first threshold In time, when the reflected signal is received through the IR receiver, control the IR transmitter to transmit a signal of a second carrier frequency different from the first carrier frequency, and transmit a signal of the determined search carrier frequency
  • the IR transmitter may be controlled, and the existence of the object may be identified based on whether a signal is received through the IR receiver within the second threshold time after the signal of the discovery carrier frequency is transmitted.
  • the method of controlling an electronic device includes transmitting a signal of a first carrier frequency, and within a first threshold time after the signal of the first carrier frequency is transmitted, determining the first carrier frequency as a search carrier frequency when the signal reflected by the space in which the electronic device is disposed is not received, the first threshold time after the signal of the first carrier frequency is transmitted In, when the reflected signal is received, transmitting a signal of a second carrier frequency different from the first carrier frequency, transmitting a signal of the determined search carrier frequency, and the signal of the search carrier frequency is transmitted and identifying the presence or absence of the object based on whether the signal is received within a second threshold time.
  • a signal of may be a signal reflected by the object.
  • identifying step if a difference between the carrier frequency of the reflected signal and the search carrier frequency is less than or equal to a threshold value, it may be identified that the object exists.
  • the method may further include turning on a microphone provided in the electronic device when it is identified that the object exists, and identifying whether the object is a user based on a sound received from the turned-on microphone.
  • the method may further include, when the user is identified while the electronic device operates in the first mode, changing the first mode to the second mode and displaying a UI corresponding to the second mode. .
  • the first mode may be a power-off mode or a standby mode
  • the second mode may be an ambient mode
  • the transmitting of the signal of the second carrier frequency may include transmitting the signal at the second carrier frequency when a difference between the carrier frequency of the reflected signal and the first carrier frequency is less than or equal to a threshold value.
  • the method may further include transmitting a signal of the discovery carrier frequency at a preset time interval.
  • the method may further include re-performing the operation of determining the search carrier frequency.
  • the step of transmitting the signal of the first carrier frequency includes transmitting a first IR signal of the first carrier frequency
  • the determining step includes: within the first threshold time after the first IR signal is transmitted, the When the second IR signal reflected by the space in which the first IR signal is disposed is not received, the first carrier frequency is determined as the search carrier frequency, and the signal of the second carrier frequency is transmitted
  • the step is to transmit a third IR signal of a second carrier frequency different from the first carrier frequency when the second IR signal is received within the first threshold time after the 1 IR signal is transmitted, the discovery carrier
  • the step of transmitting the signal of the frequency includes transmitting a fourth IR signal of the search carrier frequency, and the step of identifying is that the fifth IR signal is within the second threshold time after the fourth IR signal of the search carrier frequency is transmitted. It is possible to identify the existence of the object based on whether or not it is received.
  • the electronic device may adaptively detect a user in the surrounding space of the electronic device by changing the carrier frequency of the sensor.
  • the electronic device detects the user through an auxiliary means such as a microphone, so that accuracy of user detection can be improved.
  • the senor can be provided inside the electronic device by using a carrier frequency that can pass through the injection-molded product of the electronic device, it can be implemented irrespective of the design of the electronic device.
  • FIG. 1 is a view for explaining an arrangement space of an electronic device according to an embodiment of the present disclosure.
  • FIG. 2A is a block diagram illustrating a configuration of an electronic device according to an embodiment of the present disclosure.
  • 2B is a block diagram illustrating a detailed configuration of an electronic device according to an embodiment of the present disclosure.
  • FIG. 3 is a diagram for explaining a discovery carrier frequency according to an embodiment of the present disclosure.
  • 4A and 4B are diagrams for explaining a complex sensing operation according to an embodiment of the present disclosure.
  • FIG. 5 is a diagram for explaining a determination of whether a transmission/reception signal is the same according to an embodiment of the present disclosure
  • 6A and 6B are flowcharts for explaining a change in an operation mode according to an embodiment of the present disclosure.
  • FIG. 7 is a sequence diagram illustrating an operation of a crime prevention mode according to an embodiment of the present disclosure.
  • FIG. 8 is a sequence diagram illustrating a seamless play operation according to an embodiment of the present disclosure.
  • FIG. 9 is a flowchart illustrating a method of controlling an electronic device according to an embodiment of the present disclosure.
  • expressions such as “have,” “may have,” “include,” or “may include” indicate the presence of a corresponding characteristic (eg, a numerical value, function, operation, or component such as a part). and does not exclude the presence of additional features.
  • the term user may refer to a person who uses an electronic device or a device (eg, an artificial intelligence electronic device) using the electronic device.
  • a device eg, an artificial intelligence electronic device
  • FIG. 1 is a view for explaining an arrangement space of an electronic device 100 according to an embodiment of the present disclosure.
  • the electronic device 100 may be a device disposed in a specific space to detect the existence of an object.
  • the electronic device 100 may be a device implemented as a TV to detect the presence of a user.
  • the present invention is not limited thereto, and the electronic device 100 may be any device capable of detecting the presence of an object.
  • the electronic device 100 may adaptively detect the presence of an object according to characteristics of a space in which the electronic device 100 is disposed. For example, as shown in FIG. 1 , the electronic device 100 operates differently when it is disposed in a living room and when it is disposed in a room, and may detect the presence of an object.
  • FIG. 2A is a block diagram illustrating a configuration of an electronic device 100 according to an embodiment of the present disclosure.
  • the electronic device 100 includes a communication interface 110 and a processor 120 as shown in FIG. 2A .
  • the communication interface 110 is a configuration for transmitting and receiving signals according to various types of communication methods.
  • the communication interface 110 includes an IR (infrared ray) transmitter and an IR receiver, and may transmit and receive infrared signals.
  • the communication interface 110 may communicate with various types of external devices according to various types of communication methods.
  • the electronic device 100 may communicate with the user terminal 200 , the server 300 , and the like through the communication interface 110 .
  • the communication interface 110 may include a Wi-Fi module, a Bluetooth module, an infrared communication module, and a wireless communication module.
  • each communication module may be implemented in the form of at least one hardware chip.
  • the Wi-Fi module and the Bluetooth module perform communication using a WiFi method and a Bluetooth method, respectively.
  • various types of connection information such as an SSID and a session key are first transmitted and received, and then various types of information can be transmitted/received after communication connection using this.
  • the infrared communication module communicates according to the infrared data association (IrDA) technology, which wirelessly transmits data in a short distance using infrared that is between visible light and millimeter waves.
  • IrDA infrared data association
  • the wireless communication module includes Zigbee, 3rd Generation (3G), 3rd Generation Partnership Project (3GPP), Long Term Evolution (LTE), LTE Advanced (LTE-A), 4th Generation (4G), 5G It may include at least one communication chip that performs communication according to various wireless communication standards such as (5th Generation).
  • 3G 3rd Generation
  • 3GPP 3rd Generation Partnership Project
  • LTE Long Term Evolution
  • LTE-A LTE Advanced
  • 4G 4th Generation
  • 5G 5G It may include at least one communication chip that performs communication according to various wireless communication standards such as (5th Generation).
  • the communication interface 110 may include a wired communication interface such as HDMI, DP, Thunderbolt, USB, RGB, D-SUB, DVI, or the like.
  • the communication interface 110 may include at least one of a local area network (LAN) module, an Ethernet module, or a wired communication module for performing communication using a pair cable, a coaxial cable, or an optical fiber cable.
  • LAN local area network
  • Ethernet Ethernet
  • wired communication module for performing communication using a pair cable, a coaxial cable, or an optical fiber cable.
  • the processor 120 controls the overall operation of the electronic device 100 .
  • the processor 120 may be connected to each component of the electronic device 100 to control the overall operation of the electronic device 100 .
  • the processor 120 may be connected to a component such as the communication interface 110 to control the operation of the electronic device 100 .
  • the processor 120 may be implemented as a digital signal processor (DSP), a microprocessor, or a time controller (TCON).
  • DSP digital signal processor
  • TCON time controller
  • the present invention is not limited thereto, and the central processing unit (central processing unit (CPU)), micro controller unit (MCU), micro processing unit (MPU), controller, application processor (AP), or communication processor (CP), ARM processor
  • the processor 120 may be implemented as a SoC (System on Chip) or LSI (large scale integration) in which a processing algorithm is embedded, or an FPGA ( Field programmable gate array) may be implemented.
  • SoC System on Chip
  • LSI large scale integration
  • FPGA Field programmable gate array
  • the processor 120 controls the communication interface 110 to transmit a signal of a specific carrier frequency, and when a signal is not received through the communication interface 110 within a first threshold time after the signal is transmitted, based on the specific carrier frequency to determine the search carrier frequency.
  • the processor 120 controls the communication interface 110 to transmit a signal of a first carrier frequency, and a signal through the communication interface 110 within a first threshold time after the signal of the first carrier frequency is transmitted.
  • the communication interface 110 may be controlled to transmit a signal of a second carrier frequency different from the first carrier frequency.
  • the processor 120 receives the signal of the second carrier frequency through the communication interface 110 within the first threshold time, when the signal of the first carrier frequency is reflected by the space in which the electronic device is disposed.
  • the communication interface 110 may be controlled to transmit. That is, the processor 120 may gradually change the carrier frequency and identify whether a signal is received through the communication interface 110 within a first threshold time after transmission of the signal.
  • the processor 120 controls the communication interface 110 to transmit a signal of a first carrier frequency, and a signal is received through the communication interface 110 within a first threshold time after the signal of the first carrier frequency is transmitted. Otherwise, the first carrier frequency may be determined as the search carrier frequency. Specifically, if the reflected signal is not received through the communication interface 110 within the first threshold time, the processor 120 may determine the first carrier frequency as the search carrier frequency. That is, the processor 120 may gradually change the carrier frequency until a signal is not received through the communication interface 110 within the first threshold time after transmission of the signal.
  • the processor 120 is configured to transmit a signal of a second carrier frequency different from the first carrier frequency when a signal is received through the communication interface 110 within a first threshold time after the signal of the first carrier frequency is transmitted.
  • the communication interface 110 may be controlled.
  • the processor 120 may repeatedly perform the above operation until the signal is not received through the communication interface 110 within the first threshold time, and when it is confirmed that the signal is not received after being received, the signal is not received.
  • a carrier frequency corresponding to a non-existent time may be determined as a search carrier frequency.
  • the processor 120 may repeatedly perform the above operation until a signal is received through the communication interface 110 within the first threshold time, and when it is confirmed that the signal is not received and it is finally received, the signal is A carrier frequency corresponding to a non-received time may be determined as a search carrier frequency.
  • the processor 120 may determine the search carrier frequency based on whether or not the reception of the signal is changed within the first threshold time after the signal of the specific carrier frequency is transmitted.
  • the processor 120 may gradually increase the carrier frequency if the signal is received within the first threshold time, and may gradually decrease the carrier frequency if the signal is not received within the first threshold time.
  • the present invention is not limited thereto, and the processor 120 may gradually lower the carrier frequency if a signal is received within the first threshold time, and may gradually increase the carrier frequency if the signal is not received within the first threshold time.
  • the processor 120 may reflect the characteristics of the space in which the electronic device 100 is disposed. Specifically, the signal transmitted from the electronic device 100 is reflected in the surrounding space, and the processor 120 may receive the reflected signal through the communication interface 110 . At this time, the reception rate varies according to the size of the carrier frequency, and the processor 120 identifies a carrier frequency on which a signal is not received, and then identifies the existence of an object to be described later based on the identified carrier frequency.
  • the identified carrier frequency is according to the current space, and when the space is changed, the carrier frequency may also be changed. That is, by using the method of gradually changing the carrier frequency, adaptive operation in space is possible.
  • the present invention is not limited thereto.
  • the processor 120 may control the communication interface 110 to transmit the signal at the second carrier frequency. That is, the processor 120 identifies whether the transmitted signal and the received signal are the same, and controls the communication interface 110 to transmit the signal on the second carrier frequency only when it is identified as being identical, and the two signals are not identical. If it is identified as not, the corresponding carrier frequency may be determined as the discovery carrier frequency.
  • the processor 120 controls the communication interface 110 to transmit a signal of the discovery carrier frequency, and within a second threshold time after the signal of the discovery carrier frequency is transmitted, the communication interface Based on whether a signal is received through , it is possible to identify whether the object exists.
  • the processor 120 may identify that the object exists.
  • the received signal may be a signal of a signal of the search carrier frequency reflected by the object.
  • the present invention is not limited thereto.
  • the processor 120 may identify the object as being present. That is, the processor 120 identifies whether the signal transmitted with the search carrier frequency is the same as the received signal, identifies that the object exists only when it is identified as the same, and when the two signals are identified as not the same, the object exists It can also be identified as not doing.
  • the electronic device 100 further includes a microphone, and when it is identified that the object exists, the processor 120 turns on the microphone and identifies whether the object is a user based on a sound received from the turned-on microphone. . That is, the processor 120 may identify the existence of an object through the communication interface 110 , and then turn on the microphone to reduce power consumption and identify whether the object is a user.
  • the electronic device 100 may include a stereo microphone, and the processor 120 may identify the direction of the user through the stereo microphone.
  • the stereo microphones may be disposed on both sides of the center of the electronic device 100 , respectively.
  • the electronic device 100 may further include any configuration for improving object identification accuracy.
  • the electronic device 100 further includes a camera, and the processor 120 turns on the camera when it is identified that the object exists, and identifies whether the object is a user based on an image received from the turned-on camera. may be
  • the processor 120 may control the communication interface 110 to transmit a signal of a search carrier frequency at a preset time interval. That is, after the object is identified, the processor 120 may periodically identify whether the object's existence is maintained.
  • the present invention is not limited thereto, and the processor 120 controls the communication interface 110 to transmit a signal of a search carrier frequency at a first preset time interval, and when it is identified that the object exists, a second preset time
  • the communication interface 110 may be controlled to transmit a signal of a search carrier frequency at intervals. That is, the processor 120 performs an operation of periodically identifying whether the object exists, and thereafter, when the existence of the object is identified, the period may be changed. For example, when it is identified that the object exists, the processor 120 may control the communication interface 110 to transmit a signal of a search carrier frequency with a further reduced time interval.
  • the processor 120 identifies that the object does not exist, and a signal of a specific carrier frequency may control the communication interface 110 to retransmit , and if a signal is not received through the communication interface 110 within a first threshold time after the signal is retransmitted, the discovery carrier frequency may be updated based on a specific carrier frequency.
  • the processor 120 updates the search carrier frequency to adaptively set the search carrier frequency in the space in which the electronic device 100 is disposed. can be changed Such an operation may be useful when the user changes the arrangement of home appliances, furniture, etc. in the space.
  • the communication interface 110 includes an IR transmitter and an IR receiver
  • the processor 120 controls the IR transmitter to transmit a signal of a specific carrier frequency, and within a first threshold time after the signal is transmitted through the IR receiver
  • the search carrier frequency is determined based on the specific carrier frequency
  • the IR transmitter is controlled to transmit a signal of the search carrier frequency
  • the IR receiver is configured within a second threshold time after the signal of the search carrier frequency is transmitted.
  • the existence of the object may be identified based on whether a signal is received through the .
  • the processor 120 may identify whether an object exists by using an infrared signal.
  • the present invention is not limited thereto, and any standard may be used as long as it is a communication standard that can identify the existence of an object by gradually changing the carrier frequency.
  • the electronic device 100 may include a communication interface 110 and a processor 120 . Also, according to FIG. 2B , the electronic device 100 may further include a memory 130 , a microphone 140 , a display 150 , and a user interface 160 . Among the components shown in FIG. 2B , detailed descriptions of parts overlapping with those shown in FIG. 2A will be omitted.
  • the memory 130 may refer to hardware that stores information such as data in an electrical or magnetic form so that the processor 120 can access it. To this end, the memory 130 may be implemented with at least one hardware selected from among non-volatile memory, volatile memory, flash memory, hard disk drive (HDD) or solid state drive (SSD), RAM, ROM, etc. .
  • At least one instruction or module necessary for the operation of the electronic device 100 or the processor 120 may be stored in the memory 130 .
  • the instruction is a code unit for instructing the operation of the electronic device 100 or the processor 120 , and may be written in machine language, which is a language that a computer can understand.
  • a module may be a set of instructions that perform a specific task of a unit of work.
  • the memory 130 may store data that is information in units of bits or bytes that can represent characters, numbers, images, and the like.
  • a module for identifying a search carrier frequency may be stored in the memory 130 .
  • the memory 130 is accessed by the processor 120 , and reading/writing/modification/deletion/update of instructions, modules, or data may be performed by the processor 120 .
  • the microphone 140 is configured to receive a user's voice or other sound and convert it into audio data.
  • the display 150 may be implemented as various types of displays, such as a liquid crystal display (LCD), an organic light emitting diode (OLED) display, a plasma display panel (PDP), and the like.
  • the display 150 may include a driving circuit, a backlight unit, and the like, which may be implemented in the form of an a-si TFT, a low temperature poly silicon (LTPS) TFT, or an organic TFT (OTFT).
  • the display 150 may be implemented as a touch screen combined with a touch sensor, a flexible display, a three-dimensional display, or the like.
  • the user interface 160 may be implemented as a button, a touch pad, a mouse, and a keyboard, or may be implemented as a touch screen capable of performing the above-described display function and manipulation input function together.
  • the button may be various types of buttons such as a mechanical button, a touch pad, a wheel, etc. formed in an arbitrary area such as the front, side, or rear of the exterior of the main body of the electronic device 100 .
  • the electronic device 100 may identify the presence of an object by identifying the discovery carrier frequency and transmitting a signal of the discovery carrier frequency.
  • FIG. 3 is a diagram for explaining a discovery carrier frequency according to an embodiment of the present disclosure.
  • the x-axis represents the magnitude of the carrier frequency
  • the y-axis represents the reception rate.
  • the processor 120 may control the communication interface 110 to transmit a signal of a carrier frequency of about 38 kHz having the best reception rate.
  • the processor 120 may transmit the signal by changing the carrier frequency.
  • the processor 120 may control the communication interface 110 to transmit a signal of a carrier frequency of 40 kHz.
  • the processor 120 may repeat this operation until a signal is not received through the communication interface 110 within the first threshold time after the signal is transmitted.
  • the processor 120 controls the communication interface 110 to transmit a signal of a carrier frequency of 48 kHz, and if a signal is not received through the communication interface 110 within a first threshold time after the signal is transmitted,
  • the search carrier frequency may be determined based on the carrier frequency of 48 kHz.
  • the processor 120 may determine a carrier frequency of 48 kHz as the search carrier frequency.
  • the processor 120 may determine the carrier frequency of 50 kHz as the search carrier frequency by rounding up the carrier frequency of 48 kHz.
  • the present invention is not limited thereto, and it does not matter which method determines the search carrier frequency as long as it is 48 kHz or higher.
  • the initial processor 120 transmits a signal of a carrier frequency having the best reception rate, but a search operation may be performed at any other frequency.
  • the processor 120 may control the communication interface 110 to first transmit a signal of a previously set discovery carrier frequency.
  • the size of the search carrier frequency may be gradually decreased according to a change in the location of the electronic device 100 or a change in the arrangement of home appliances and furniture in the space.
  • the processor 120 controls the communication interface 110 to first transmit a signal of a search carrier frequency when the existence of an object is no longer identified, and connects the communication interface 110 within a first threshold time after the signal is transmitted. If a signal is not received through the communication interface 110 , the communication interface 110 may be controlled to transmit a signal of a carrier frequency smaller than the search carrier frequency.
  • 4A and 4B are diagrams for explaining a complex sensing operation according to an embodiment of the present disclosure.
  • 4A is a diagram in which the IR transmitter 110-1, the IR receiver 110-2, and the microphones 140-1 and 140-2 are implemented as one module.
  • the IR transmitter 110 - 1 and the IR receiver 110 - 2 may be provided in one module, and the IR transmitter 110 - 1 transmits the injection product of the electronic device 100 .
  • the module may be disposed inside the electronic device 100 .
  • the IR receiver 110-2 may also receive a signal of a corresponding carrier frequency.
  • Microphones 140-1 and 140-2 are provided one on both sides of the module, and after the signal of the target carrier frequency is transmitted by the IR transmitter 110-1, it is transmitted to the IR receiver 110-2 within a second threshold time. When the signal is received by the 410, it is turned on as shown in FIG. 4B to receive ambient sound.
  • the mode of the electronic device 100 may be changed to the ambient mode.
  • the processor 120 may identify the direction of the sound through the two microphones 140 - 1 and 140 - 2 , and may perform various interactions with the user based on the direction of the sound. For example, the processor 120 may provide a UI effect in the direction of the sound or display a UI in which a touch operation is possible in the direction of the sound.
  • the ambient mode may be a mode for displaying additional information when the user does not watch content.
  • the electronic device 100 may display additional information according to a turn-off command or an Ambient Mode entry command.
  • the additional information may be at least one of weather, time, or real-time news.
  • the additional information may be the same image as the surface of the wall behind the electronic device 100 .
  • the user may identify only the edge of the electronic device 100 and the display area of the electronic device 100 may be identified as a wall to minimize the sense of heterogeneity caused by the electronic device 100 .
  • the electronic device 100 may operate in the ambient mode according to various conditions.
  • the electronic device 100 may operate in the ambient mode when the user's presence is not identified but the user's presence is identified.
  • the electronic device 100 may operate in the ambient mode when the user is viewing content and the user's presence is no longer identified or the user's attention is not identified.
  • the module of FIG. 4A is only one embodiment, and a module including an IR transceiver and a microphone may be implemented in any other form.
  • the IR transmitter 110-1, the IR receiver 110-2, and the microphones 140-1 and 140-2 of FIG. 4A may be implemented as separate modules, respectively.
  • FIG. 5 is a diagram for explaining a determination of whether a transmission/reception signal is the same according to an embodiment of the present disclosure
  • the period and phase of the signal of the IR transmitter and the signal of the IR receiver may be different from each other.
  • a signal of the IR transmitter may have a period of t1
  • a signal of the IR receiver may have a different period of t2. This is because there is a possibility that the frequency will change according to the reflection.
  • the processor 120 may identify whether the two signals are the same signal based on the period of the signal of the IR transmitter and the signal of the IR receiver. For example, if the difference between the period of the signal of the IR transmitter and the signal of the IR receiver is within the first threshold value, the processor 120 may identify the two signals as the same signal.
  • the processor 120 may identify whether the two signals are the same based on the phase difference t3 between the signal of the IR transmitter and the signal of the IR receiver. For example, if the phase difference between the signal of the IR transmitter and the signal of the IR receiver is within the second threshold value, the processor 120 may identify the two signals as the same signal.
  • the processor 120 may determine the search carrier frequency based on whether the two signals are identical or identify the existence of an object.
  • 6A and 6B are flowcharts for explaining a change in an operation mode according to an embodiment of the present disclosure. 6A and 6B, it is assumed that the discovery carrier frequency is determined.
  • the electronic device 100 may be turned on to operate in a power-on mode (S610).
  • the electronic device 100 may display a screen and output a sound in the power-on mode.
  • the processor 120 may control the IR transmitter (LED) and the IR receiver (receiver) to identify the existence of the object (S615, S620). Specifically, when a signal is suddenly received in a state in which a signal is not received through the IR receiver, the processor 120 may identify that the object exists (S620-Y).
  • the processor 120 may turn on the microphone and identify whether the object is a user based on the sound received from the turned-on microphone (S625). When it is identified that the user does not exist (S630), the processor 120 may change the operation mode of the electronic device 100 to a picture off mode (S635). The electronic device 100 may output only sound without providing a screen in the picture off mode.
  • the processor 120 may control the IR transmitter LED and the IR receiver to identify the existence of the object (S640). ). And, when a predetermined time elapses after the picture off mode operation (S645-Y), the processor 120 may identify the presence of the user through camera shooting (S650). If the user's presence is not identified (S655-N), the processor 120 changes the operation mode of the electronic device 100 to the standby mode (S660), and when the user's presence is identified (S655-Y), the electronic device The operation mode of ( 100 ) may be changed to a power-on mode ( S680 ). The electronic device 100 does not provide a screen and does not output a sound in the standby mode.
  • the processor 120 may control the IR transmitter (LED), the IR receiver (receiver), and the microphone to identify the existence of the object (S665, S670) ). Then, when it is identified that the user is present (S675), the processor 120 may change the operation mode of the electronic device 100 to the power-on mode (S680).
  • the present invention is not limited thereto.
  • any sensor that can identify the presence of a user instead of a microphone or a camera may be used.
  • the processor 120 may omit the step of identifying the user's presence by the microphone or the camera and identify the user's presence based only on the received IR signal.
  • the processor 120 may change the operation mode of the electronic device 100 based on at least one of whether an object exists or a time to enter a specific mode.
  • FIG. 7 is a sequence diagram illustrating an operation of a crime prevention mode according to an embodiment of the present disclosure.
  • the user terminal 200 may receive an outing mode request input (S710).
  • the user terminal 200 transmits the outing mode request information to the server 300 (S720), the server 300 enters the outing mode (S730), and transmits outing mode determination information to the electronic device 100 and It can be transmitted to the user terminal 200 (S740-1, S740-2).
  • the electronic device 100 may identify the presence of an outsider through the IR transceiver and the microphone according to the user's going out (S750), and when the outsider is detected, transmit the corresponding information to the server 300 (S760).
  • the server 300 provides the detection information of the outsider to the user terminal 200 (S770), and the user terminal 200 may provide the user with an outsider intrusion notification (S780).
  • the electronic device 100 and the server 300 are illustrated as separate devices in FIG. 7 , the present invention is not limited thereto, and the electronic device 100 may also perform the role of the server 300 .
  • FIG. 8 is a sequence diagram illustrating a seamless play operation according to an embodiment of the present disclosure.
  • each of the electronic device 100 and the other electronic device 400 will be described as a TV for convenience of description.
  • the electronic devices TV1 and 100 and the other electronic devices TV2 and 400 operate in the power-on mode and the standby mode, respectively (S810), and may identify the user's presence through the IR transceiver and the microphone, respectively (S820, S850).
  • the electronic device 100 transmits information indicating that the user is not identified, the current playback channel, content, and playback time information to the server 300 . It can be (S840).
  • the other electronic device 400 identifies the user's presence using the IR transceiver and the microphone (S850, S860)
  • the corresponding information may be transmitted to the server 300 (S870).
  • the server 300 transmits the current playback channel, content, and playback time information received from the electronic device 100 to the other electronic device 400 (S880), and the other electronic device 400 operates in a power-on mode.
  • content may be provided to the user based on the information received from the server.
  • the electronic device 100 may change the operation mode to the standby mode. Through the above operation, the user can use the seamless content providing service.
  • the electronic device 100 and the other electronic device 400 directly identify the user, the present invention is not limited thereto.
  • the electronic device 100 identifies the user's presence through the IR transceiver, and when the user's presence is identified, IoT devices connected to the electronic device 100 are identified. (things) may be identified and sensing data may be requested from the identified IoT devices.
  • the electronic device 100 identifies IoT devices connected to the electronic device 100 , and senses the IoT devices having a sensor capable of identifying the user among the identified IoT devices. You can also request data.
  • the electronic device 100 may secondarily identify the user's existence based on sensing data received from the IoT devices, and thus accuracy may be improved.
  • the IoT devices may include a home appliance equipped with a sensor for identifying the user's presence as well as a sensor for identifying the user's existence.
  • the electronic device 100 may identify IoT devices connected to the electronic device 100 and request sensing data from the identified IoT devices even before the presence of the user is identified. In this case, the electronic device 100 may identify the presence of the user beyond the range that the electronic device 100 can identify. For example, in the embodiment of FIG. 8 , the electronic device 100 may receive sensing data indicating that a user is present in the vicinity of another electronic device 400 . Thereafter, when the presence of the user is identified in the vicinity of the electronic device 100 , the electronic device 100 requests and receives the current playback channel, content, and playback time information of the other electronic device 400 from the other electronic device 400 . can The electronic device 100 may provide a seamless content providing service based on the received information. Also, the electronic device 100 may transmit a control signal for changing the mode of the other electronic device 400 to the other electronic device 400 .
  • the electronic device 100 may not be directly connected to the IoT devices, but may be indirectly connected to the IoT devices through an access point (AP).
  • the electronic device 100 may request sensing data from an access point, and the access point may request sensing data from IoT devices.
  • the access point may transmit sensing data received from the IoT devices to the electronic device 100 .
  • the present invention is not limited thereto, and the collection of the sensing data of the access point may be independent of the request of the electronic device 100 .
  • the access point may request and store sensing data from IoT devices at a preset time interval.
  • the access point may transmit sensing data of a predetermined time range before and after the request time of the electronic device 100 to the electronic device 100 according to the request of the electronic device 100 .
  • FIG. 9 is a flowchart illustrating a method of controlling an electronic device according to an embodiment of the present disclosure.
  • a signal of a first carrier frequency is transmitted ( S910 ). And, within a first threshold time after the signal of the first carrier frequency is transmitted, when the signal reflected by the space in which the electronic device is disposed is not received, the first carrier frequency is searched for the carrier frequency is determined (S920). Then, when the reflected signal is received within a first threshold time after the signal of the first carrier frequency is transmitted, a signal of a second carrier frequency different from the first carrier frequency is transmitted ( S930 ).
  • a signal of the determined search carrier frequency is transmitted (S940). Then, the existence of the object is identified based on whether a signal is received within a second threshold time after the signal of the discovery carrier frequency is transmitted ( S950 ).
  • the identifying step (S950) if a signal is received within a second threshold time after the signal of the search carrier frequency is transmitted, it is identified that the object exists, and the received signal is a signal of the search carrier frequency reflected by the object. It could be a signal.
  • the identifying step ( S950 ) if the difference between the carrier frequency of the reflected signal and the search carrier frequency is less than or equal to a threshold value, it may be identified that the object exists.
  • the method may further include turning on a microphone provided in the electronic device when it is identified that the object exists, and identifying whether the object is a user based on a sound received from the turned-on microphone.
  • the method may further include changing the first mode to the second mode and displaying a UI corresponding to the second mode.
  • the first mode may be a power off mode or a standby mode
  • the second mode may be an ambient mode
  • the signal may be transmitted at the second carrier frequency.
  • the method may further include transmitting a signal of a search carrier frequency at a preset time interval.
  • identifying the object as non-existent and determining the discovery carrier frequency when the object is identified as non-existent may further include the step of re-performing the operation.
  • the step of transmitting the signal of the first carrier frequency transmits the first IR signal of the first carrier frequency
  • the step of determining (S920) is within a first threshold time after the first IR signal is transmitted
  • the second IR signal reflected by the space in which the first IR signal is disposed is not received, determining the first carrier frequency as the search carrier frequency, and transmitting the signal of the second carrier frequency (S930)
  • a second IR signal is received within a first threshold time after the 1 IR signal is transmitted, it transmits a third IR signal of a second carrier frequency different from the first carrier frequency, and transmits a signal of a search carrier frequency.
  • Step S940 transmits the fourth IR signal of the discovery carrier frequency, and the identifying step S950 is based on whether the fifth IR signal is received within a second threshold time after the fourth IR signal of the discovery carrier frequency is transmitted. Based on the existence of the object can be identified.
  • the electronic device may adaptively detect a user in the surrounding space of the electronic device by changing the carrier frequency of the sensor.
  • the electronic device detects the user through an auxiliary means such as a microphone, so that accuracy of user detection can be improved.
  • the senor can be provided inside the electronic device by using a carrier frequency that can pass through the injection-molded product of the electronic device, it can be implemented irrespective of the design of the electronic device.
  • the various embodiments described above may be implemented as software including instructions stored in a machine-readable storage media readable by a machine (eg, a computer).
  • the device is a device capable of calling a stored command from a storage medium and operating according to the called command, and may include an electronic device (eg, the electronic device A) according to the disclosed embodiments.
  • the processor may perform a function corresponding to the instruction by using other components directly or under the control of the processor.
  • Instructions may include code generated or executed by a compiler or interpreter.
  • the device-readable storage medium may be provided in the form of a non-transitory storage medium.
  • 'non-transitory' means that the storage medium does not include a signal and is tangible, and does not distinguish that data is semi-permanently or temporarily stored in the storage medium.
  • the method according to the various embodiments described above may be included in a computer program product and provided.
  • Computer program products may be traded between sellers and buyers as commodities.
  • the computer program product may be distributed in the form of a machine-readable storage medium (eg, compact disc read only memory (CD-ROM)) or online through an application store (eg, Play StoreTM).
  • an application store eg, Play StoreTM
  • at least a portion of the computer program product may be temporarily stored or temporarily generated in a storage medium such as a memory of a server of a manufacturer, a server of an application store, or a relay server.
  • the various embodiments described above are stored in a recording medium readable by a computer or a similar device using software, hardware, or a combination thereof. can be implemented in In some cases, the embodiments described herein may be implemented by the processor itself. According to the software implementation, embodiments such as procedures and functions described in this specification may be implemented as separate software modules. Each of the software modules may perform one or more functions and operations described herein.
  • non-transitory computer-readable medium refers to a medium that stores data semi-permanently, not a medium that stores data for a short moment, such as a register, cache, memory, etc., and can be read by a device.
  • Specific examples of the non-transitory computer-readable medium may include a CD, DVD, hard disk, Blu-ray disk, USB, memory card, ROM, and the like.
  • each of the components may be composed of a single or a plurality of entities, and some sub-components of the aforementioned sub-components may be omitted, or other sub-components may be omitted. Components may be further included in various embodiments.
  • some components eg, a module or a program
  • operations performed by a module, program, or other component may be sequentially, parallelly, repetitively or heuristically executed, or at least some operations may be executed in a different order, omitted, or other operations may be added.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Computing Systems (AREA)
  • Telephone Function (AREA)
  • Geophysics And Detection Of Objects (AREA)

Abstract

전자 장치가 개시된다. 본 전자 장치는 통신 인터페이스 및 제1 캐리어 주파수의 신호를 송신하도록 통신 인터페이스를 제어하고, 제1 캐리어 주파수의 신호가 송신된 후 제1 임계 시간 내에, 제1 캐리어 주파수의 신호가 전자 장치가 배치된 공간에 의해 반사된 신호가 통신 인터페이스를 통해 수신되지 않는 경우, 제1 캐리어 주파수를 탐색 캐리어 주파수로 결정하고, 제1 캐리어 주파수의 신호가 송신된 후 제1 임계 시간 내에, 반사된 신호가 통신 인터페이스를 통해 수신되면, 제1 캐리어 주파수와는 상이한 제2 캐리어 주파수의 신호를 송신하도록 통신 인터페이스를 제어하고, 결정된 탐색 캐리어 주파수의 신호를 송신하도록 통신 인터페이스를 제어하며, 탐색 캐리어 주파수의 신호가 송신된 후 제2 임계 시간 내에 통신 인터페이스를 통해 신호가 수신되는지 여부에 기초하여 객체의 존재 여부를 식별하는 프로세서를 포함한다.

Description

전자 장치 및 그 제어 방법
본 개시는 전자 장치 및 그 제어 방법에 대한 것으로, 더욱 상세하게는 사용자 또는 사용자의 움직임을 식별하는 전자 장치 및 그 제어 방법에 대한 것이다.
CROSS-REFERENCE TO RELATED APPLICATIONS
본 출원은 2020년 09월 15일에 출원된 대한민국 특허출원 제10-2020-0118297호에 기초하여 우선권을 주장하며, 해당 출원의 모든 내용은 그 전체가 본 출원에 레퍼런스로 포함된다.
전자 기술의 발달에 힘입어 다양한 유형의 전자 장치가 개발 및 보급되고 있다. 특히, 최근의 전자 장치는 전자 장치의 주변의 사용자를 감지하고, 사용자의 감지 여부 등에 기초하여 다양한 기능을 제공하고 있다.
여기서, 전자 장치는 다양한 방법으로 사용자를 감지할 수 있다. 예를 들어, 전자 장치는 PIR(Passive Infrared Ray) 센서와 같이 센서를 이용하여 사용자를 감지할 수 있다. 다만, 센서는 동작 반경, 각도 등이 기설정되어 있기 때문에 주변 공간의 특성을 반영하지 못하는 문제가 있다. 예를 들어, 전자 장치는 전자 장치와 사용자 간의 거리가 센서의 동작 반경 내라면 사용자를 감지할 수 있으나, 사용자가 전자 장치로부터 가령 5m 이상의 거리에 있거나 천장과 벽면 일측이 개방된 형태의 공간에서는 사용자를 감지하지 못할 수도 있다.
또는, 전자 장치는 카메라를 이용하여 사용자를 감지할 수도 있다. 다만, 이 경우 카메라의 동작에 따른 전력 소모 및 카메라에 의해 촬영된 이미지로부터 사용자를 식별하기 위한 리소스 사용 등이 문제일 수 있다.
그에 따라, 전력 소모나 리소스 문제를 해결하면서도 사용자 감지의 정확도를 개선하기 위한 방법이 개발될 필요가 있다.
본 개시는 상술한 필요성에 따른 것으로, 본 개시의 목적은 구현이 용이하고 장치의 전력 및 리소스 문제 없이 사용자 감지의 정확도를 개선하기 위한 전자 장치 및 그 제어 방법을 제공함에 있다.
이상과 같은 목적을 달성하기 위한 본 개시의 일 실시 예에 따른 전자 장치는 통신 인터페이스 및 제1 캐리어 주파수의 신호를 송신하도록 상기 통신 인터페이스를 제어하고, 상기 제1 캐리어 주파수의 신호가 송신된 후 제1 임계 시간 내에, 상기 제1 캐리어 주파수의 신호가 상기 전자 장치가 배치된 공간에 의해 반사된 신호가 상기 통신 인터페이스를 통해 수신되지 않는 경우, 상기 제1 캐리어 주파수를 탐색 캐리어 주파수로 결정하고, 상기 제1 캐리어 주파수의 신호가 송신된 후 상기 제1 임계 시간 내에, 상기 반사된 신호가 상기 통신 인터페이스를 통해 수신되면, 상기 제1 캐리어 주파수와는 상이한 제2 캐리어 주파수의 신호를 송신하도록 상기 통신 인터페이스를 제어하고, 상기 결정된 탐색 캐리어 주파수의 신호를 송신하도록 상기 통신 인터페이스를 제어하며, 상기 탐색 캐리어 주파수의 신호가 송신된 후 제2 임계 시간 내에 상기 통신 인터페이스를 통해 신호가 수신되는지 여부에 기초하여 객체의 존재 여부를 식별하는 프로세서를 포함한다.
또한, 상기 프로세서는 상기 탐색 캐리어 주파수의 신호가 송신된 후 상기 제2 임계 시간 내에 상기 통신 인터페이스를 통해 신호가 수신되면 상기 객체가 존재하는 것으로 식별하고, 상기 수신된 신호는 상기 탐색 캐리어 주파수의 신호가 상기 객체에 의해 반사된 신호일 수 있다.
그리고, 상기 프로세서는 상기 반사된 신호의 캐리어 주파수와 상기 탐색 캐리어 주파수의 차이가 임계 값 이하이면 상기 객체가 존재하는 것으로 식별할 수 있다.
또한, 마이크를 더 포함하며, 상기 프로세서는 상기 객체가 존재하는 것으로 식별되면 상기 마이크를 턴 온시키고, 상기 턴 온된 마이크로부터 수신된 사운드에 기초하여 상기 객체가 사용자인지 식별할 수 있다.
그리고, 디스플레이를 더 포함하며, 상기 프로세서는 상기 전자 장치가 제1 모드로 동작하는 동안 상기 사용자가 식별되면, 상기 제1 모드를 제2 모드로 변경하고, 상기 제2 모드에 대응되는 UI를 디스플레이하도록 상기 디스플레이를 제어할 수 있다.
또한, 상기 제1 모드는 파워 오프 모드 또는 스탠바이 모드이고, 상기 제2 모드는 Ambient Mode일 수 있다.
그리고, 상기 프로세서는 상기 반사된 신호의 캐리어 주파수와 상기 제1 캐리어 주파수의 차이가 임계 값 이하이면 상기 제2 캐리어 주파수로 상기 신호를 송신하도록 상기 통신 인터페이스를 제어할 수 있다.
또한, 상기 프로세서는 상기 객체가 존재하는 것으로 식별되면, 기설정된 시간 간격으로 상기 탐색 캐리어 주파수의 신호를 송신하도록 상기 통신 인터페이스를 제어할 수 있다.
그리고, 상기 프로세서는 상기 기설정된 간격으로 상기 탐색 캐리어 주파수의 신호가 송신된 후 상기 제2 임계 시간 내에 상기 통신 인터페이스를 통해 신호가 수신되지 않으면, 상기 객체가 존재하지 않는 것으로 식별하고, 상기 객체가 존재하지 않는 것으로 식별되면, 상기 탐색 캐리어 주파수를 결정하는 동작을 재수행할 수 있다.
또한, 상기 통신 인터페이스는 IR(infrared ray) 송신부 및 IR 수신부를 포함하며, 상기 프로세서는 상기 제1 캐리어 주파수의 신호를 송신하도록 상기 IR 송신부를 제어하고, 상기 제1 캐리어 주파수의 신호가 송신된 후 상기 제1 임계 시간 내에, 상기 반사된 신호가 상기 IR 수신부를 통해 수신되지 않는 경우 상기 제1 캐리어 주파수를 상기 탐색 캐리어 주파수로 결정하고, 상기 제1 캐리어 주파수의 신호가 송신된 후 상기 제1 임계 시간 내에, 상기 반사된 신호가 상기 IR 수신부를 통해 수신되면, 상기 제1 캐리어 주파수와는 상이한 제2 캐리어 주파수의 신호를 송신하도록 상기 IR 송신부를 제어하고, 상기 결정된 탐색 캐리어 주파수의 신호를 송신하도록 상기 IR 송신부를 제어하며, 상기 탐색 캐리어 주파수의 신호가 송신된 후 상기 제2 임계 시간 내에 상기 IR 수신부를 통해 신호가 수신되는지 여부에 기초하여 상기 객체의 존재 여부를 식별할 수 있다.
한편, 본 개시의 일 실시 예에 따른 전자 장치의 제어 방법은 제1 캐리어 주파수의 신호를 송신하는 단계, 상기 제1 캐리어 주파수의 신호가 송신된 후 제1 임계 시간 내에, 상기 제1 캐리어 주파수의 신호가 상기 전자 장치가 배치된 공간에 의해 반사된 신호가 수신되지 않는 경우, 상기 제1 캐리어 주파수를 탐색 캐리어 주파수로 결정하는 단계, 상기 제1 캐리어 주파수의 신호가 송신된 후 상기 제1 임계 시간 내에, 상기 반사된 신호가 수신되면, 상기 제1 캐리어 주파수와는 상이한 제2 캐리어 주파수의 신호를 송신하는 단계, 상기 결정된 탐색 캐리어 주파수의 신호를 송신하는 단계 및 상기 탐색 캐리어 주파수의 신호가 송신된 후 제2 임계 시간 내에 신호가 수신되는지 여부에 기초하여 객체의 존재 여부를 식별하는 단계를 포함한다.
또한, 상기 식별하는 단계는 상기 탐색 캐리어 주파수의 신호가 송신된 후 상기 제2 임계 시간 내에 상기 통신 인터페이스를 통해 신호가 수신되면 상기 객체가 존재하는 것으로 식별하고, 상기 수신된 신호는 상기 탐색 캐리어 주파수의 신호가 상기 객체에 의해 반사된 신호일 수 있다.
그리고, 상기 식별하는 단계는 상기 반사된 신호의 캐리어 주파수와 상기 탐색 캐리어 주파수의 차이가 임계 값 이하이면 상기 객체가 존재하는 것으로 식별할 수 있다.
또한, 상기 객체가 존재하는 것으로 식별되면 상기 전자 장치에 구비된 마이크를 턴 온시키는 단계 및 상기 턴 온된 마이크로부터 수신된 사운드에 기초하여 상기 객체가 사용자인지 식별하는 단계를 더 포함할 수 있다.
그리고, 상기 전자 장치가 제1 모드로 동작하는 동안 상기 사용자가 식별되면, 상기 제1 모드를 제2 모드로 변경하는 단계 및 상기 제2 모드에 대응되는 UI를 디스플레이하는 단계를 더 포함할 수 있다.
또한, 상기 제1 모드는 파워 오프 모드 또는 스탠바이 모드이고, 상기 제2 모드는 Ambient Mode일 수 있다.
그리고, 상기 제2 캐리어 주파수의 신호를 송신하는 단계는 상기 반사된 신호의 캐리어 주파수와 상기 제1 캐리어 주파수의 차이가 임계 값 이하이면 상기 제2 캐리어 주파수로 상기 신호를 송신할 수 있다.
또한, 상기 객체가 존재하는 것으로 식별되면, 기설정된 시간 간격으로 상기 탐색 캐리어 주파수의 신호를 송신하는 단계를 더 포함할 수 있다.
그리고, 상기 기설정된 간격으로 상기 탐색 캐리어 주파수의 신호가 송신된 후 상기 제2 임계 시간 내에 신호가 수신되지 않으면, 상기 객체가 존재하지 않는 것으로 식별하는 단계 및 상기 객체가 존재하지 않는 것으로 식별되면, 상기 탐색 캐리어 주파수를 결정하는 동작을 재수행하는 단계를 더 포함할 수 있다.
또한, 상기 제1 캐리어 주파수의 신호를 송신하는 단계는 상기 제1 캐리어 주파수의 제1 IR 신호를 송신하고, 상기 결정하는 단계는 상기 제1 IR 신호가 송신된 후 상기 제1 임계 시간 내에, 상기 제1 IR 신호가 상기 전자 장치가 배치된 공간에 의해 반사된 제2 IR 신호가 수신되지 않는 경우, 상기 제1 캐리어 주파수를 상기 탐색 캐리어 주파수로 결정하고, 상기 제2 캐리어 주파수의 신호를 송신하는 단계는 상기 1 IR 신호가 송신된 후 상기 제1 임계 시간 내에, 상기 제2 IR 신호가 수신되면, 상기 제1 캐리어 주파수와는 상이한 제2 캐리어 주파수의 제3 IR 신호를 송신하며, 상기 탐색 캐리어 주파수의 신호를 송신하는 단계는 상기 탐색 캐리어 주파수의 제4 IR 신호를 송신하며, 상기 식별하는 단계는 상기 탐색 캐리어 주파수의 제4 IR 신호가 송신된 후 상기 제2 임계 시간 내에 제5 IR 신호가 수신되는지 여부에 기초하여 상기 객체의 존재 여부를 식별할 수 있다.
이상과 같은 본 개시의 다양한 실시 예에 따르면, 전자 장치는 센서의 캐리어 주파수를 변경함에 따라 전자 장치의 주변 공간에 대해 적응적으로 사용자를 감지할 수 있다.
또한, 전자 장치는 센서에 의해 사용자의 존재가 감지되면 마이크 등과 같은 보조 수단을 통해 사용자를 감지하여 사용자 감지의 정확도가 개선될 수 있다.
그리고, 전자 장치의 사출물을 투과할 수 있는 캐리어 주파수를 이용함에 따라 센서를 전자 장치 내부에 구비할 수 있어, 전자 장치의 디자인과 무관하게 구현 가능하다.
도 1은 본 개시의 일 실시 예에 따른 전자 장치의 배치 공간을 설명하기 위한 도면이다.
도 2a는 본 개시의 일 실시 예에 따른 전자 장치의 구성을 나타내는 블록도이다.
도 2b는 본 개시의 일 실시 예에 따른 전자 장치의 세부 구성을 나타내는 블럭도이다.
도 3은 본 개시의 일 실시 예에 따른 탐색 캐리어 주파수를 설명하기 위한 도면이다.
도 4a 및 도 4b는 본 개시의 일 실시 예에 따른 복합 센싱 동작을 설명하기 위한 도면들이다.
도 5는 본 개시의 일 실시 예에 따른 송수신 신호의 동일 여부의 판단을 설명하기 위한 도면이다.
도 6a 및 도 6b는 본 개시의 일 실시 예에 따른 동작 모드의 변경을 설명하기 위한 흐름도이다.
도 7은 본 개시의 일 실시 예에 따른 방범 모드의 동작을 설명하기 위한 시퀀스도이다.
도 8은 본 개시의 일 실시 예에 따른 seamless play 동작을 설명하기 위한 시퀀스도이다.
도 9는 본 개시의 일 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 흐름도이다.
-
이하에서는 첨부 도면을 참조하여 본 개시를 상세히 설명한다.
본 개시의 실시 예에서 사용되는 용어는 본 개시에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 개시의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 개시에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 개시의 전반에 걸친 내용을 토대로 정의되어야 한다.
본 명세서에서, "가진다," "가질 수 있다," "포함한다," 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.
A 또는/및 B 중 적어도 하나라는 표현은 "A" 또는 "B" 또는 "A 및 B" 중 어느 하나를 나타내는 것으로 이해되어야 한다.
본 명세서에서 사용된 "제1," "제2," "첫째," 또는 "둘째,"등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "구성되다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 명세서에서, 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공 지능 전자 장치)를 지칭할 수 있다.
이하 첨부된 도면들을 참조하여 본 개시의 다양한 실시 예를 보다 상세하게 설명한다.
도 1은 본 개시의 일 실시 예에 따른 전자 장치(100)의 배치 공간을 설명하기 위한 도면이다.
전자 장치(100)는 특정 공간에 배치되어 객체의 존재를 감지하는 장치일 수 있다. 예를 들어, 전자 장치(100)는 도 1에 도시된 바와 같이, TV로 구현되어 사용자의 존재를 감지하는 장치일 수 있다. 다만, 이에 한정되는 것은 아니며, 전자 장치(100)는 객체의 존재를 감지할 수 있는 장치라면 어떠한 장치라도 무방하다.
전자 장치(100)는 전자 장치(100)가 배치된 공간의 특성에 따라 적응적으로 객체의 존재를 감지할 수 있다. 예를 들어, 전자 장치(100)는 도 1에 도시된 바와 같이 거실에 배치된 경우 및 방에 배치된 경우에 상이하게 동작하며 객체의 존재를 감지할 수도 있다.
도 2a는 본 개시의 일 실시 예에 따른 전자 장치(100)의 구성을 나타내는 블록도이다. 전자 장치(100)는 도 2a에 도시된 바와 같이, 통신 인터페이스(110) 및 프로세서(120)를 포함한다.
통신 인터페이스(110)는 다양한 유형의 통신 방식에 따라 신호를 송수신하는 구성이다. 예를 들어, 통신 인터페이스(110)는 IR(infrared ray) 송신부 및 IR 수신부를 포함하며, 적외선 신호를 송수신할 수 있다.
또는, 통신 인터페이스(110)는 다양한 유형의 통신 방식에 따라 다양한 유형의 외부 장치와 통신을 수행할 수도 있다. 예를 들어, 전자 장치(100)는 통신 인터페이스(110)를 통해 사용자 단말(200), 서버(300) 등과 통신을 수행할 수 있다.
통신 인터페이스(110)는 와이파이 모듈, 블루투스 모듈, 적외선 통신 모듈 및 무선 통신 모듈 등을 포함할 수 있다. 여기서, 각 통신 모듈은 적어도 하나의 하드웨어 칩 형태로 구현될 수 있다.
와이파이 모듈, 블루투스 모듈은 각각 WiFi 방식, 블루투스 방식으로 통신을 수행한다. 와이파이 모듈이나 블루투스 모듈을 이용하는 경우에는 SSID 및 세션 키 등과 같은 각종 연결 정보를 먼저 송수신하여, 이를 이용하여 통신 연결한 후 각종 정보들을 송수신할 수 있다. 적외선 통신 모듈은 시 광선과 밀리미터파 사이에 있는 적외선을 이용하여 근거리에 무선으로 데이터를 전송하는 적외선 통신(IrDA, infrared Data Association)기술에 따라 통신을 수행한다.
무선 통신 모듈은 상술한 통신 방식 이외에 지그비(zigbee), 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evolution), LTE-A(LTE Advanced), 4G(4th Generation), 5G(5th Generation)등과 같은 다양한 무선 통신 규격에 따라 통신을 수행하는 적어도 하나의 통신 칩을 포함할 수 있다.
또는, 통신 인터페이스(110)는 HDMI, DP, 썬더볼트, USB, RGB, D-SUB, DVI 등과 같은 유선 통신 인터페이스를 포함할 수 있다.
그 밖에 통신 인터페이스(110)는 LAN(Local Area Network) 모듈, 이더넷 모듈, 또는 페어 케이블, 동축 케이블 또는 광섬유 케이블 등을 이용하여 통신을 수행하는 유선 통신 모듈 중 적어도 하나를 포함할 수도 있다.
프로세서(120)는 전자 장치(100)의 동작을 전반적으로 제어한다. 구체적으로, 프로세서(120)는 전자 장치(100)의 각 구성과 연결되어 전자 장치(100)의 동작을 전반적으로 제어할 수 있다. 예를 들어, 프로세서(120)는 통신 인터페이스(110) 등과 같은 구성과 연결되어 전자 장치(100)의 동작을 제어할 수 있다.
일 실시 예에 따라 프로세서(120)는 디지털 시그널 프로세서(digital signal processor(DSP), 마이크로 프로세서(microprocessor), TCON(Time controller)으로 구현될 수 있다. 다만, 이에 한정되는 것은 아니며, 중앙처리장치(central processing unit(CPU)), MCU(Micro Controller Unit), MPU(micro processing unit), 컨트롤러(controller), 어플리케이션 프로세서(application processor(AP)), 또는 커뮤니케이션 프로세서(communication processor(CP)), ARM 프로세서 중 하나 또는 그 이상을 포함하거나, 해당 용어로 정의될 수 있다. 또한, 프로세서(120)는 프로세싱 알고리즘이 내장된 SoC(System on Chip), LSI(large scale integration)로 구현될 수도 있고, FPGA(Field Programmable gate array) 형태로 구현될 수도 있다.
프로세서(120)는 특정 캐리어 주파수의 신호를 송신하도록 통신 인터페이스(110)를 제어하고, 신호가 송신된 후 제1 임계 시간 내에 통신 인터페이스(110)를 통해 신호가 수신되지 않는 경우 특정 캐리어 주파수에 기초하여 탐색 캐리어 주파수를 결정할 수 있다.
예를 들어, 프로세서(120)는 제1 캐리어 주파수의 신호를 송신하도록 통신 인터페이스(110)를 제어하고, 제1 캐리어 주파수의 신호가 송신된 후 제1 임계 시간 내에 통신 인터페이스(110)를 통해 신호가 수신되면, 제1 캐리어 주파수와는 상이한 제2 캐리어 주파수의 신호를 송신하도록 통신 인터페이스(110)를 제어할 수 있다. 구체적으로, 프로세서(120)는 제1 임계 시간 내에 통신 인터페이스(110)를 통해, 제1 캐리어 주파수의 신호가 전자 장치가 배치된 공간에 의해 반사된 신호가 수신되면, 제2 캐리어 주파수의 신호를 송신하도록 통신 인터페이스(110)를 제어할 수 있다. 즉, 프로세서(120)는 캐리어 주파수를 점진적으로 변경하며, 신호의 송신 후 제1 임계 시간 내에 통신 인터페이스(110)를 통해 신호가 수신되는지 식별할 수 있다.
또는, 프로세서(120)는 제1 캐리어 주파수의 신호를 송신하도록 통신 인터페이스(110)를 제어하고, 제1 캐리어 주파수의 신호가 송신된 후 제1 임계 시간 내에 통신 인터페이스(110)를 통해 신호가 수신되지 않으면, 제1 캐리어 주파수를 탐색 캐리어 주파수로 결정할 수 있다. 구체적으로, 프로세서(120)는 제1 임계 시간 내에 통신 인터페이스(110)를 통해, 반사된 신호가 수신되지 않으면, 제1 캐리어 주파수를 탐색 캐리어 주파수로 결정할 수 있다. 즉, 프로세서(120)는 신호의 송신 후 제1 임계 시간 내에 통신 인터페이스(110)를 통해 신호가 수신되지 않을 때까지 캐리어 주파수를 점진적으로 변경할 수 있다.
또는, 프로세서(120)는 제1 캐리어 주파수의 신호가 송신된 후 제1 임계 시간 내에 통신 인터페이스(110)를 통해 신호가 수신되면, 제1 캐리어 주파수와는 상이한 제2 캐리어 주파수의 신호를 송신하도록 통신 인터페이스(110)를 제어할 수 있다. 이때, 프로세서(120)는 제1 임계 시간 내에 통신 인터페이스(110)를 통해 신호가 수신되지 않을 때까지 상기 동작을 반복 수행할 수 있으며, 신호가 수신되다가 수신되지 않는 것으로 확인되면, 신호가 수신되지 않는 시점에 해당하는 캐리어 주파수를 탐색 캐리어 주파수로 결정할 수 있다.
또는, 프로세서(120)는 제1 캐리어 주파수의 신호가 송신된 후 제1 임계 시간 내에 통신 인터페이스(110)를 통해 신호가 수신되지 않으면, 제1 캐리어 주파수와는 상이한 제2 캐리어 주파수의 신호를 송신하도록 통신 인터페이스(110)를 제어할 수 있다. 이때, 프로세서(120)는 제1 임계 시간 내에 통신 인터페이스(110)를 통해 신호가 수신될 때까지 상기 동작을 반복 수행할 수 있으며, 신호가 수신되지 않다가 수신되는 것으로 확인되면, 마지막으로 신호가 수신되지 않은 시점에 해당하는 캐리어 주파수를 탐색 캐리어 주파수로 결정할 수 있다.
즉, 프로세서(120)는 특정 캐리어 주파수의 신호가 송신된 후 제1 임계 시간 내에 신호의 수신 여부가 변경되는지에 기초하여 탐색 캐리어 주파수를 결정할 수도 있다. 여기서, 프로세서(120)는 제1 임계 시간 내에 신호가 수신되면 캐리어 주파수를 점진적으로 높이고, 제1 임계 시간 내에 신호가 수신되지 않으면 캐리어 주파수를 점진적으로 낮출 수 있다. 다만, 이에 한정되는 것은 아니며, 프로세서(120)는 제1 임계 시간 내에 신호가 수신되면 캐리어 주파수를 점진적으로 낮추고, 제1 임계 시간 내에 신호가 수신되지 않으면 캐리어 주파수를 점진적으로 높일 수도 있다.
이러한 동작을 통해 프로세서(120)는 전자 장치(100)가 배치된 공간의 특성을 반영할 수 있다. 구체적으로, 전자 장치(100)로부터 송신된 신호는 주변 공간에 반사되며, 프로세서(120)는 통신 인터페이스(110)를 통해 반사된 신호를 수신할 수 있다. 이때, 캐리어 주파수의 크기에 따라 수신률이 달라지며, 프로세서(120)는 신호가 수신되지 않는 캐리어 주파수를 식별하고, 이후 식별된 캐리어 주파수에 기초하여 후술하는 객체의 존재를 식별하게 된다.
여기서, 식별된 캐리어 주파수는 현재의 공간에 따른 것으로, 공간이 변경되면 캐리어 주파수 역시 변경될 수 있다. 즉, 점진적으로 캐리어 주파수를 변경하는 방법을 이용함에 따라 공간에 적응적인 동작이 가능하다.
한편, 이상에서는 신호를 송신한 후, 수신되는 신호에 대하여 특별히 제한을 두지 않는 것으로 설명하였으나, 이에 한정되는 것은 아니다. 예를 들어, 프로세서(120)는 반사된 신호의 캐리어 주파수와 제1 캐리어 주파수의 차이가 임계 값 이하이면 제2 캐리어 주파수로 신호를 송신하도록 통신 인터페이스(110)를 제어할 수도 있다. 즉, 프로세서(120)는 송신된 신호와 수신된 신호의 동일 여부를 식별하고, 동일하다고 식별되는 경우에만 제2 캐리어 주파수로 신호를 송신하도록 통신 인터페이스(110)를 제어하고, 두 신호가 동일하지 않다고 식별되면 해당 캐리어 주파수를 탐색 캐리어 주파수로 결정할 수도 있다.
이상과 같은 방법으로 탐색 캐리어 주파수가 결정되면, 프로세서(120)는 탐색 캐리어 주파수의 신호를 송신하도록 통신 인터페이스(110)를 제어하며, 탐색 캐리어 주파수의 신호가 송신된 후 제2 임계 시간 내에 통신 인터페이스를 통해 신호가 수신되는지 여부에 기초하여 객체의 존재 여부를 식별할 수 있다.
예를 들어, 프로세서(120)는 탐색 캐리어 주파수의 신호가 송신된 후 제2 임계 시간 내에 통신 인터페이스(110)를 통해 신호가 수신되면 객체가 존재하는 것으로 식별할 수 있다. 여기서, 수신된 신호는 탐색 캐리어 주파수의 신호가 객체에 의해 반사된 신호일 수 있다.
한편, 이상에서는 탐색 캐리어 주파수의 신호를 송신한 후, 수신되는 신호에 대하여 특별히 제한을 두지 않는 것으로 설명하였으나, 이에 한정되는 것은 아니다. 예를 들어, 프로세서(120)는 객체에 반사된 신호의 캐리어 주파수와 탐색 캐리어 주파수의 차이가 임계 값 이하이면 객체가 존재하는 것으로 식별할 수도 있다. 즉, 프로세서(120)는 탐색 캐리어 주파수로 송신된 신호와 수신된 신호의 동일 여부를 식별하고, 동일하다고 식별되는 경우에만 객체가 존재하는 것으로 식별하고, 두 신호가 동일하지 않다고 식별되면 객체가 존재하지 않는 것으로 식별할 수도 있다.
한편, 전자 장치(100)는 마이크를 더 포함하며, 프로세서(120)는 객체가 존재하는 것으로 식별되면 마이크를 턴 온시키고, 턴 온된 마이크로부터 수신된 사운드에 기초하여 객체가 사용자인지 식별할 수 있다. 즉, 프로세서(120)는 통신 인터페이스(110)를 통해 객체의 존재 여부를 식별하고, 이후 마이크를 턴 온시킴으로써 전력 소모를 줄이면서도 객체가 사용자인지 식별할 수도 있다.
또는, 전자 장치(100)는 스테레오 마이크를 구비하고, 프로세서(120)는 스테레오 마이크를 통해 사용자의 방향을 식별할 수도 있다. 이 경우, 스테레오 마이크는 각각 전자 장치(100)의 중앙을 기준으로 양쪽에 배치될 수 있다.
다만, 이에 한정되는 것은 아니며, 전자 장치(100)는 객체의 식별 정확도를 향상시키기 위한 어떠한 구성이라도 더 포함할 수도 있다. 예를 들어, 전자 장치(100)는 카메라를 더 포함하며, 프로세서(120)는 객체가 존재하는 것으로 식별되면 카메라를 턴 온시키고, 턴 온된 카메라로부터 수신된 이미지에 기초하여 객체가 사용자인지 식별할 수도 있다.
프로세서(120)는 객체가 존재하는 것으로 식별되면, 기설정된 시간 간격으로 탐색 캐리어 주파수의 신호를 송신하도록 통신 인터페이스(110)를 제어할 수 있다. 즉, 프로세서(120)는 객체가 식별된 후에는 주기적으로 객체의 존재가 유지되는지 식별할 수도 있다.
다만, 이에 한정되는 것은 아니며, 프로세서(120)는 기설정된 제1 시간 간격으로 탐색 캐리어 주파수의 신호를 송신하도록 통신 인터페이스(110)를 제어하고, 객체가 존재하는 것으로 식별되면, 기설정된 제2 시간 간격으로 탐색 캐리어 주파수의 신호를 송신하도록 통신 인터페이스(110)를 제어할 수도 있다. 즉, 프로세서(120)는 객체가 존재하는지 주기적으로 식별하는 동작을 수행하며, 이후 객체의 존재가 식별되면 주기를 변경할 수도 있다. 가령, 프로세서(120)는 객체가 존재하는 것으로 식별되면, 시간 간격을 좀더 줄인 상태로 탐색 캐리어 주파수의 신호를 송신하도록 통신 인터페이스(110)를 제어할 수도 있다.
프로세서(120)는 기설정된 간격으로 탐색 캐리어 주파수의 신호가 송신된 후 제2 임계 시간 내에 통신 인터페이스(110)를 통해 신호가 수신되지 않으면, 객체가 존재하지 않는 것으로 식별하고, 특정 캐리어 주파수의 신호를 재송신하도록 통신 인터페이스(110)를 제어하고, 신호가 재송신된 후 제1 임계 시간 내에 통신 인터페이스(110)를 통해 신호가 수신되지 않는 경우 특정 캐리어 주파수에 기초하여 탐색 캐리어 주파수를 업데이트할 수 있다.
즉, 프로세서(120)는 객체의 존재가 식별된 후, 다시 객체의 존재가 식별되지 않으면 탐색 캐리어 주파수를 업데이트하는 동작을 수행하여 전자 장치(100)가 배치된 공간에 적응적으로 탐색 캐리어 주파수를 변경할 수 있다. 이러한 동작은 사용자가 공간 내에서 가전, 가구 등의 배치를 변경한 경우에 유용할 수 있다.
한편, 통신 인터페이스(110)는 IR 송신부 및 IR 수신부를 포함하며, 프로세서(120)는 특정 캐리어 주파수의 신호를 송신하도록 IR 송신부를 제어하고, 신호가 송신된 후 제1 임계 시간 내에 IR 수신부를 통해 신호가 수신되지 않는 경우 특정 캐리어 주파수에 기초하여 탐색 캐리어 주파수를 결정하고, 탐색 캐리어 주파수의 신호를 송신하도록 IR 송신부를 제어하며, 탐색 캐리어 주파수의 신호가 송신된 후 제2 임계 시간 내에 IR 수신부를 통해 신호가 수신되는지 여부에 기초하여 객체의 존재 여부를 식별할 수 있다.
즉, 프로세서(120)는 적외선 신호를 이용하여 객체의 존재 여부를 식별할 수도 있다. 다만, 이에 한정되는 것은 아니며, 캐리어 주파수를 점진적으로 변경하는 방법으로 객체의 존재 여부를 식별할 수 있는 통신 규격이라면 어떠한 규격이라도 무방하다.
도 2b는 본 개시의 일 실시 예에 따른 전자 장치의 세부 구성을 나타내는 블럭도이다. 전자 장치(100)는 통신 인터페이스(110) 및 프로세서(120)를 포함할 수 있다. 또한, 도 2b에 따르면, 전자 장치(100)는 메모리(130), 마이크(140), 디스플레이(150), 사용자 인터페이스(160)를 더 포함할 수도 있다. 도 2b에 도시된 구성요소들 중 도 2a에 도시된 구성요소와 중복되는 부분에 대해서는 자세한 설명을 생략하도록 한다.
메모리(130)는 프로세서(120) 등이 접근할 수 있도록 데이터 등의 정보를 전기 또는 자기 형태로 저장하는 하드웨어를 지칭할 수 있다. 이를 위해, 메모리(130)는 비휘발성 메모리, 휘발성 메모리, 플래시 메모리(Flash Memory), 하드디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD), RAM, ROM 등 중에서 적어도 하나의 하드웨어로 구현될 수 있다.
메모리(130)에는 전자 장치(100) 또는 프로세서(120)의 동작에 필요한 적어도 하나의 인스트럭션(instruction) 또는 모듈이 저장될 수 있다. 여기서, 인스트럭션은 전자 장치(100) 또는 프로세서(120)의 동작을 지시하는 부호 단위로서, 컴퓨터가 이해할 수 있는 언어인 기계어로 작성된 것일 수 있다. 모듈은 작업 단위의 특정 작업을 수행하는 일련의 인스트럭션의 집합체(instruction set)일 수 있다.
메모리(130)에는 문자, 수, 영상 등을 나타낼 수 있는 비트 또는 바이트 단위의 정보인 데이터가 저장될 수 있다. 예를 들어, 메모리(130)에는 탐색 캐리어 주파수를 식별하기 위한 모듈이 저장될 수 있다.
메모리(130)는 프로세서(120)에 의해 액세스되며, 프로세서(120)에 의해 인스트럭션, 모듈 또는 데이터에 대한 독취/기록/수정/삭제/갱신 등이 수행될 수 있다.
마이크(140)는 사용자 음성이나 기타 소리를 입력받아 오디오 데이터로 변환하기 위한 구성이다.
디스플레이(150)는 LCD(Liquid Crystal Display), OLED(Organic Light Emitting Diodes) 디스플레이, PDP(Plasma Display Panel) 등과 같은 다양한 형태의 디스플레이로 구현될 수 있다. 디스플레이(150) 내에는 a-si TFT, LTPS(low temperature poly silicon) TFT, OTFT(organic TFT) 등과 같은 형태로 구현될 수 있는 구동 회로, 백라이트 유닛 등도 함께 포함될 수 있다. 한편, 디스플레이(150)는 터치 센서와 결합된 터치 스크린, 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 등으로 구현될 수 있다.
사용자 인터페이스(160)는 버튼, 터치 패드, 마우스 및 키보드 등으로 구현되거나, 상술한 디스플레이 기능 및 조작 입력 기능도 함께 수행 가능한 터치 스크린으로도 구현될 수 있다. 여기서, 버튼은 전자 장치(100)의 본체 외관의 전면부나 측면부, 배면부 등의 임의의 영역에 형성된 기계적 버튼, 터치 패드, 휠 등과 같은 다양한 유형의 버튼이 될 수 있다.
이상과 같이 전자 장치(100)는 탐색 캐리어 주파수를 식별하고, 탐색 캐리어 주파수의 신호를 송신하는 방법으로 객체의 존재를 식별할 수 있다.
이하에서는 도면을 통해 전자 장치(100)의 동작을 좀더 구체적으로 설명한다.
도 3은 본 개시의 일 실시 예에 따른 탐색 캐리어 주파수를 설명하기 위한 도면이다. 도 3에서 x축은 캐리어 주파수의 크기를 나타내고, y축은 수신률을 나타낸다.
프로세서(120)는 수신률이 가장 좋은 약 38kHz의 캐리어 주파수의 신호를 송신하도록 통신 인터페이스(110)를 제어할 수 있다. 프로세서(120)는 신호가 송신된 후 제1 임계 시간 내에 통신 인터페이스(110)를 통해 신호가 수신되면, 캐리어 주파수를 변경하여 신호를 송신할 수 있다. 가령, 프로세서(120)는 40kHz의 캐리어 주파수의 신호를 송신하도록 통신 인터페이스(110)를 제어할 수 있다. 프로세서(120)는 이러한 동작을 신호가 송신된 후 제1 임계 시간 내에 통신 인터페이스(110)를 통해 신호가 수신되지 않을 때까지 반복할 수 있다.
예를 들어, 프로세서(120)는 48kHz의 캐리어 주파수의 신호를 송신하도록 통신 인터페이스(110)를 제어하고, 신호가 송신된 후 제1 임계 시간 내에 통신 인터페이스(110)를 통해 신호가 수신되지 않으면, 48kHz의 캐리어 주파수에 기초하여 탐색 캐리어 주파수를 결정할 수 있다.
가령, 프로세서(120)는 48kHz의 캐리어 주파수를 탐색 캐리어 주파수로 결정할 수 있다. 또는, 프로세서(120)는 48kHz의 캐리어 주파수를 올림하여 50kHz의 캐리어 주파수를 탐색 캐리어 주파수로 결정할 수도 있다. 다만, 이에 한정되는 것은 아니며, 48kHz 이상이라면 어떠한 방법으로 탐색 캐리어 주파수를 결정해도 무관하다.
한편, 이상에서는 최초 프로세서(120)가 수신률이 가장 좋은 캐리어 주파수의 신호를 송신하는 것으로 설명하였으나, 얼마든지 다른 주파수로 탐색 동작이 수행될 수도 있다. 예를 들어, 프로세서(120)는 이전에 설정된 탐색 캐리어 주파수의 신호를 먼저 송신하도록 통신 인터페이스(110)를 제어할 수도 있다. 이 경우, 전자 장치(100)의 위치 변경, 공간 내에서 가전, 가구 등의 배치 변경에 따라 탐색 캐리어 주파수의 크기를 점진적으로 작게 변경할 수도 있다. 가령, 프로세서(120)는 객체의 존재가 더이상 식별되지 않는 경우 탐색 캐리어 주파수의 신호를 먼저 송신하도록 통신 인터페이스(110)를 제어하고, 신호가 송신된 후 제1 임계 시간 내에 통신 인터페이스(110)를 통해 신호가 수신되지 않으면 탐색 캐리어 주파수보다 작은 캐리어 주파수의 신호를 송신하도록 통신 인터페이스(110)를 제어할 수도 있다.
도 4a 및 도 4b는 본 개시의 일 실시 예에 따른 복합 센싱 동작을 설명하기 위한 도면들이다.
도 4a는 IR 송신부(110-1), IR 수신부(110-2) 및 마이크(140-1, 140-2)가 하나의 모듈로 구현된 도면이다.
도 4a에 도시된 바와 같이, IR 송신부(110-1), IR 수신부(110-2)는 하나의 모듈에 구비될 수 있고, IR 송신부(110-1)는 전자 장치(100)의 사출물을 투과할 수 있는 캐리어 주파수를 이용함에 따라 모듈이 전자 장치(100) 내부에 배치될 수 있다. IR 수신부(110-2) 역시 해당 캐리어 주파수의 신호를 수신할 수 있다.
마이크(140-1, 140-2)는 모듈의 양측에 하나씩 구비되며, IR 송신부(110-1)에 의해 타겟 캐리어 주파수의 신호가 송신된 후 제2 임계 시간 내에 IR 수신부(110-2)에 의해 신호가 수신(410)되면, 도 4b에 도시된 바와 같이 턴 온되어 주변의 사운드를 수신할 수 있다.
마이크(140-1, 140-2)를 통해 사용자의 존재가 식별되면, 전자 장치(100)의 모드를 Ambient Mode로 변경할 수 있다. 또한, 프로세서(120)는 두 개의 마이크(140-1, 140-2)를 통해 사운드의 방향을 식별할 수 있으며, 사운드에 방향에 기초하여 사용자와의 다양한 인터랙션을 수행할 수 있다. 예를 들어, 프로세서(120)는 사운드의 방향에 UI 효과를 제공하거나, 사운드의 방향에 터치 조작이 가능한 UI를 디스플레이할 수도 있다.
여기서, Ambient Mode는 사용자가 컨텐츠를 시청하지 않을 때, 부가 정보를 디스플레이하는 모드일 수 있다. 예를 들어, 전자 장치(100)는 턴 오프 명령 또는 Ambient Mode 진입 명령에 따라 부가 정보를 디스플레이할 수 있다. 부가 정보는 날씨, 시간 또는 실시간 뉴스 중 적어도 하나일 수 있다. 또는, 부가 정보는 전자 장치(100) 후방의 벽 표면과 동일한 이미지일 수 있다. 이 경우, 사용자는 전자 장치(100)의 테두리만을 식별하고, 전자 장치(100)의 디스플레이 영역은 벽으로서 식별하여 전자 장치(100)에 의한 이질감을 최소화할 수 있다.
다만, 이에 한정되는 것은 아니며, 전자 장치(100)는 다양한 조건에 의해 Ambient Mode로 동작할 수 있다. 예를 들어, 전자 장치(100)는 사용자의 존재가 식별되지 않다가 사용자의 존재가 식별되면 Ambient Mode로 동작할 수 있다. 또는, 전자 장치(100)는 사용자가 컨텐츠를 시청하다가 사용자의 존재가 더 이상 식별되지 않거나 사용자의 주의가 없다고 식별되면, Ambient Mode로 동작할 수도 있다.
한편, 도 4a의 모듈은 일 실시 예에 불과하고, 얼마든지 다른 형태로 IR 송수신부, 마이크를 구비한 모듈이 구현될 수도 있다. 예를 들어, 도 4a의 IR 송신부(110-1), IR 수신부(110-2) 및 마이크(140-1, 140-2)는 각각 별도의 모듈로 구현될 수도 있다.
도 5는 본 개시의 일 실시 예에 따른 송수신 신호의 동일 여부의 판단을 설명하기 위한 도면이다.
도 5에 도시된 바와 같이, IR 송신부의 신호와 IR 수신부의 신호는 주기 및 위상이 상이할 수 있다. 구체적으로, IR 송신부의 신호는 주기가 t1이고, IR 수신부의 신호는 주기가 t2로 상이할 수 있다. 이는 반사에 따라 주파수가 변경될 가능성이 있기 때문이다.
프로세서(120)는 IR 송신부의 신호와 IR 수신부의 신호의 주기에 기초하여 두 신호가 동일한 신호인지 식별할 수 있다. 예를 들어, 프로세서(120)는 IR 송신부의 신호와 IR 수신부의 신호의 주기의 차이가 제1 임계 값 이내이면 두 신호가 동일한 신호라고 식별할 수 있다.
또는, 프로세서(120)는 IR 송신부의 신호와 IR 수신부의 신호의 위상 차이(t3)에 기초하여 두 신호가 동일한 신호인지 식별할 수도 있다. 예를 들어, 프로세서(120)는 IR 송신부의 신호와 IR 수신부의 신호의 위상 차이가 제2 임계 값 이내이면 두 신호가 동일한 신호라고 식별할 수 있다.
상술한 바와 같이, 프로세서(120)는 두 신호의 동일성 여부에 기초하여 탐색 캐리어 주파수를 결정하거나 객체의 존재 여부를 식별할 수 있다.
도 6a 및 도 6b는 본 개시의 일 실시 예에 따른 동작 모드의 변경을 설명하기 위한 흐름도이다. 도 6a 및 도 6b에서는 탐색 캐리어 주파수가 결정된 상태를 가정하였다.
먼저, 도 6a에 도시된 바와 같이, 전자 장치(100)는 턴 온되어 파워 온(power on) 모드로 동작할 수 있다(S610). 전자 장치(100)는 파워 온 모드에서 화면을 디스플레이하고 사운드를 출력할 수 있다.
그리고, 프로세서(120)는 IR 송신부(LED) 및 IR 수신부(receiver)를 제어하여 객체의 존재를 식별할 수 있다(S615, S620). 구체적으로, 프로세서(120)는 IR 수신부를 통해 신호가 수신되지 않는 상태에서 갑자기 신호가 수신되면 객체가 존재하는 것으로 식별할 수 있다(S620-Y).
프로세서(120)는 객체가 존재하는 것으로 식별되면 마이크를 턴 온 시키고, 턴 온된 마이크로부터 수신된 사운드에 기초하여 객체가 사용자인지 식별할 수 있다(S625). 프로세서(120)는 사용자가 존재하지 않는 것으로 식별되면(S630), 전자 장치(100)의 동작 모드를 Picture off 모드로 변경할 수 있다(S635). 전자 장치(100)는 Picture off 모드에서 화면을 제공하지 않고 사운드만을 출력할 수 있다.
전자 장치(100)가 Picture off 모드로 진입하면, 도 6b에 도시된 바와 같이, 프로세서(120)는 IR 송신부(LED) 및 IR 수신부(receiver)를 제어하여 객체의 존재를 식별할 수 있다(S640). 그리고, Picture off 모드 동작 후 일정 시간이 경과하면(S645-Y), 프로세서(120)는 카메라 촬영 등을 통한 사용자의 존재를 식별할 수 있다(S650). 프로세서(120)는 사용자의 존재가 식별되지 않으면(S655-N) 전자 장치가(100)의 동작 모드를 스탠바이 모드로 변경하고(S660), 사용자의 존재가 식별되면(S655-Y) 전자 장치가(100)의 동작 모드를 파워 온 모드로 변경할 수 있다(S680). 전자 장치(100)는 스탠바이 모드에서 화면을 제공하지 않고 사운드도 출력하지 않는다.
또는, Picture off 모드 동작 후 일정 시간 내라면(S645-N), 프로세서(120)는 IR 송신부(LED), IR 수신부(receiver) 및 마이크를 제어하여 객체의 존재를 식별할 수 있다(S665, S670). 그리고, 프로세서(120)는 사용자가 존재하는 것으로 식별되면(S675), 전자 장치가(100)의 동작 모드를 파워 온 모드로 변경할 수 있다(S680).
한편, 도 6a 및 도 6b에서는 마이크 또는 카메라 등을 통해 사용자의 존재를 식별하는 것으로 설명하였으나, 이에 한정되는 것은 아니다. 예를 들어, 마이크 또는 카메라를 대신하여 사용자의 존재 여부를 식별할 수 있는 센서라면 어떠한 것이라도 무방하다. 또한, 도 6a 및 도 6b에서 프로세서(120)는 마이크 또는 카메라에 의해 사용자 존재를 식별하는 단계를 생략하고 수신된 IR 신호에만 기초하여 사용자의 존재 여부를 식별할 수도 있다.
이상과 같이, 프로세서(120)는 객체의 존재 여부 또는 특정 모드로 진입한 시간 중 적어도 하나에 기초하여 전자 장치(100)의 동작 모드를 변경할 수 있다.
도 7은 본 개시의 일 실시 예에 따른 방범 모드의 동작을 설명하기 위한 시퀀스도이다.
먼저, 사용자 단말(200)은 외출 모드 요청 입력을 수신할 수 있다(S710). 이 경우, 사용자 단말(200)은 외출 모드 요청 정보를 서버(300)로 전달하고(S720), 서버(300)는 외출 모드로 진입(S730)하고, 외출 모드 결정 정보를 전자 장치(100) 및 사용자 단말(200)로 전송할 수 있다(S740-1, S740-2).
전자 장치(100)는 사용자의 외출에 따라 IR 송수신부 및 마이크를 통해 외부인의 존재를 식별하고(S750), 외부인이 감지되면 해당 정보를 서버(300)로 전송할 수 있다(S760). 서버(300)는 외부인의 감지 정보를 사용자 단말(200)로 제공하며(S770), 사용자 단말(200)은 사용자에게 외부인 침입 알림을 제공할 수 있다(S780).
도 7에서는 전자 장치(100) 및 서버(300)가 별개의 장치인 것으로 도시되었으나, 이에 한정되는 것은 아니며, 전자 장치(100)가 서버(300)의 역할을 수행할 수도 있다.
도 8은 본 개시의 일 실시 예에 따른 seamless play 동작을 설명하기 위한 시퀀스도이다. 도 8에서는 설명의 편의를 위해 전자 장치(100) 및 타 전자 장치(400) 각각이 TV인 것으로 설명한다.
전자 장치(TV1, 100) 및 타 전자 장치(TV2, 400)는 각각 파워 온 모드 및 스탠바이 모드로 동작하고(S810), 각각 IR 송수신부 및 마이크를 통해 사용자의 존재를 식별할 수 있다(S820, S850).
전자 장치(100)는 사용자의 존재를 식별하던 중, 사용자가 더이상 식별되지 않으면(S830), 사용자가 식별되지 않음을 나타내는 정보, 현재의 재생 채널, 컨텐츠, 재생 시간 정보를 서버(300)로 전송할 수 있다(S840).
이후, 타 전자 장치(400)가 IR 송수신부, 마이크를 이용하여 사용자의 존재를 식별하면(S850, S860), 해당 정보를 서버(300)로 전송할 수 있다(S870). 서버(300)는 전자 장치(100)로부터 수신된 현재의 재생 채널, 컨텐츠, 재생 시간 정보를 타 전자 장치(400)로 전송하고(S880), 타 전자 장치(400)는 파워 온 모드로 동작하며(S890), 서버로부터 수신된 정보에 기초하여 사용자에게 컨텐츠를 제공할 수 있다. 이 경우, 전자 장치(100)는 동작 모드를 스탠바이 모드로 변경할 수 있다. 이상과 같은 동작을 통해 사용자는 seamless한 컨텐츠 제공 서비스를 이용할 수 있다.
한편, 이상에서는 전자 장치(100) 및 타 전자 장치(400)가 직접 사용자의 존재를 식별하는 것으로 설명하였으나, 이에 한정되는 것은 아니다. 예를 들어, 전자 장치(100)가 IoT Hub로서 동작하는 경우, 전자 장치(100)는 IR 송수신부를 통해 사용자의 존재를 식별하고, 사용자의 존재가 식별되면 전자 장치(100)에 연결된 IoT 장치들(things)을 식별하고, 식별된 IoT 장치들에게 센싱 데이터를 요청할 수 있다. 또는, 전자 장치(100)는 사용자의 존재가 식별되면 전자 장치(100)에 연결된 IoT 장치들을 식별하고, 식별된 IoT 장치들 중 사용자의 존재를 식별할 수 있는 센서가 구비된 IoT 장치들에게 센싱 데이터를 요청할 수도 있다. 전자 장치(100)는 IoT 장치들로부터 수신된 센싱 데이터에 기초하여 2차적으로 사용자의 존재를 식별할 수 있고, 그에 따라 정확도가 향상될 수 있다. 여기서, IoT 장치들은 사용자의 존재를 식별하기 위한 센서 자체 뿐만 아니라 사용자의 존재를 식별하기 위한 센서가 구비된 가전 기기를 포함할 수 있다.
또는, 전자 장치(100)는 사용자의 존재가 식별되기 전이라도, 전자 장치(100)에 연결된 IoT 장치들을 식별하고, 식별된 IoT 장치들에게 센싱 데이터를 요청할 수도 있다. 이 경우, 전자 장치(100)는 전자 장치(100)가 식별할 수 있는 범위를 넘어서 사용자의 존재를 식별할 수도 있다. 가령, 도 8의 실시 예에서, 전자 장치(100)는 타 전자 장치(400) 부근에서 사용자가 존재한다는 센싱 데이터를 수신할 수 있다. 이후, 전자 장치(100)는 전자 장치(100) 부근에서 사용자의 존재가 식별되면, 타 전자 장치(400)로 타 전자 장치(400)의 현재 재생 채널, 컨텐츠, 재생 시간 정보를 요청하여 수신할 수 있다. 전자 장치(100)는 수신된 정보에 기초하여 seamless한 컨텐츠 제공 서비스를 제공할 수 있다. 또한, 전자 장치(100)는 타 전자 장치(400)의 모드를 변경하는 제어 신호를 타 전자 장치(400)로 전송할 수 있다.
또는, 전자 장치(100)는 IoT 장치들과 직접 연결되지 않고, 액세스 포인트(Access Point, AP)를 통해 IoT 장치들과 간접적으로 연결될 수도 있다. 이 경우, 전자 장치(100)는 액세스 포인트로 센싱 데이터를 요청하고, 액세스 포인트는 IoT 장치들에게 센싱 데이터를 요청할 수 있다. 액세스 포인트는 IoT 장치들로부터 수신된 센싱 데이터를 전자 장치(100)로 전송할 수 있다.
다만, 이에 한정되는 것은 아니며, 액세스 포인트의 센싱 데이터의 수집은 전자 장치(100)의 요청과 무관할 수도 있다. 예를 들어, 액세스 포인트는 기설정된 시간 간격으로 IoT 장치들에게 센싱 데이터를 요청하여 저장할 수 있다. 이 경우, 액세스 포인트는 전자 장치(100)의 요청에 따라 전자 장치(100)의 요청 시점 전후의 일정 시간 범위의 센싱 데이터를 전자 장치(100)로 전송할 수도 있다.
도 9는 본 개시의 일 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 흐름도이다.
먼저, 제1 캐리어 주파수의 신호를 송신한다(S910). 그리고, 제1 캐리어 주파수의 신호가 송신된 후 제1 임계 시간 내에, 제1 캐리어 주파수의 신호가 전자 장치가 배치된 공간에 의해 반사된 신호가 수신되지 않는 경우, 제1 캐리어 주파수를 탐색 캐리어 주파수로 결정한다(S920). 그리고, 제1 캐리어 주파수의 신호가 송신된 후 제1 임계 시간 내에, 반사된 신호가 수신되면, 제1 캐리어 주파수와는 상이한 제2 캐리어 주파수의 신호를 송신한다(S930).
그리고, 결정된 탐색 캐리어 주파수의 신호를 송신한다(S940). 그리고, 탐색 캐리어 주파수의 신호가 송신된 후 제2 임계 시간 내에 신호가 수신되는지 여부에 기초하여 객체의 존재 여부를 식별한다(S950).
여기서, 식별하는 단계(S950)는 탐색 캐리어 주파수의 신호가 송신된 후 제2 임계 시간 내에 신호가 수신되면 객체가 존재하는 것으로 식별하고, 수신된 신호는 탐색 캐리어 주파수의 신호가 객체에 의해 반사된 신호일 수 있다.
그리고, 식별하는 단계(S950)는 반사된 신호의 캐리어 주파수와 탐색 캐리어 주파수의 차이가 임계 값 이하이면 객체가 존재하는 것으로 식별할 수 있다.
한편, 객체가 존재하는 것으로 식별되면 전자 장치에 구비된 마이크를 턴 온시키는 단계 및 턴 온된 마이크로부터 수신된 사운드에 기초하여 객체가 사용자인지 식별하는 단계를 더 포함할 수 있다.
여기서, 전자 장치가 제1 모드로 동작하는 동안 사용자가 식별되면, 제1 모드를 제2 모드로 변경하는 단계 및 제2 모드에 대응되는 UI를 디스플레이하는 단계를 더 포함할 수 있다.
그리고, 제1 모드는 파워 오프 모드 또는 스탠바이 모드이고, 제2 모드는 Ambient Mode일 수 있다.
또한, 제2 캐리어 주파수의 신호를 송신하는 단계(S930)는 반사된 신호의 캐리어 주파수와 제1 캐리어 주파수의 차이가 임계 값 이하이면 제2 캐리어 주파수로 신호를 송신할 수 있다.
한편, 객체가 존재하는 것으로 식별되면, 기설정된 시간 간격으로 탐색 캐리어 주파수의 신호를 송신하는 단계를 더 포함할 수 있다.
여기서, 기설정된 간격으로 탐색 캐리어 주파수의 신호가 송신된 후 제2 임계 시간 내에 신호가 수신되지 않으면, 객체가 존재하지 않는 것으로 식별하는 단계 및 객체가 존재하지 않는 것으로 식별되면, 탐색 캐리어 주파수를 결정하는 동작을 재수행하는 단계를 더 포함할 수 있다.
한편, 제1 캐리어 주파수의 신호를 송신하는 단계(S910)는 제1 캐리어 주파수의 제1 IR 신호를 송신하고, 결정하는 단계(S920)는 제1 IR 신호가 송신된 후 제1 임계 시간 내에, 제1 IR 신호가 전자 장치가 배치된 공간에 의해 반사된 제2 IR 신호가 수신되지 않는 경우, 제1 캐리어 주파수를 탐색 캐리어 주파수로 결정하고, 제2 캐리어 주파수의 신호를 송신하는 단계(S930)는 1 IR 신호가 송신된 후 제1 임계 시간 내에, 제2 IR 신호가 수신되면, 제1 캐리어 주파수와는 상이한 제2 캐리어 주파수의 제3 IR 신호를 송신하며, 탐색 캐리어 주파수의 신호를 송신하는 단계(S940)는 탐색 캐리어 주파수의 제4 IR 신호를 송신하며, 식별하는 단계(S950)는 탐색 캐리어 주파수의 제4 IR 신호가 송신된 후 제2 임계 시간 내에 제5 IR 신호가 수신되는지 여부에 기초하여 객체의 존재 여부를 식별할 수 있다.
이상과 같은 본 개시의 다양한 실시 예에 따르면, 전자 장치는 센서의 캐리어 주파수를 변경함에 따라 전자 장치의 주변 공간에 대해 적응적으로 사용자를 감지할 수 있다.
또한, 전자 장치는 센서에 의해 사용자의 존재가 감지되면 마이크 등과 같은 보조 수단을 통해 사용자를 감지하여 사용자 감지의 정확도가 개선될 수 있다.
그리고, 전자 장치의 사출물을 투과할 수 있는 캐리어 주파수를 이용함에 따라 센서를 전자 장치 내부에 구비할 수 있어, 전자 장치의 디자인과 무관하게 구현 가능하다.
한편, 본 개시의 일시 예에 따르면, 이상에서 설명된 다양한 실시 예들은 기기(machine)(예: 컴퓨터)로 읽을 수 있는 저장 매체(machine-readable storage media)에 저장된 명령어를 포함하는 소프트웨어로 구현될 수 있다. 기기는, 저장 매체로부터 저장된 명령어를 호출하고, 호출된 명령어에 따라 동작이 가능한 장치로서, 개시된 실시 예들에 따른 전자 장치(예: 전자 장치(A))를 포함할 수 있다. 명령이 프로세서에 의해 실행될 경우, 프로세서가 직접, 또는 프로세서의 제어 하에 다른 구성요소들을 이용하여 명령에 해당하는 기능을 수행할 수 있다. 명령은 컴파일러 또는 인터프리터에 의해 생성 또는 실행되는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장매체는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장매체가 신호(signal)를 포함하지 않으며 실재(tangible)한다는 것을 의미할 뿐 데이터가 저장매체에 반영구적 또는 임시적으로 저장됨을 구분하지 않는다.
또한, 본 개시의 일 실시 예에 따르면, 이상에서 설명된 다양한 실시 예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 온라인으로 배포될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
또한, 본 개시의 일 실시 예에 따르면, 이상에서 설명된 다양한 실시 예들은 소프트웨어(software), 하드웨어(hardware) 또는 이들의 조합을 이용하여 컴퓨터(computer) 또는 이와 유사한 장치로 읽을 수 있는 기록 매체 내에서 구현될 수 있다. 일부 경우에 있어 본 명세서에서 설명되는 실시 예들이 프로세서 자체로 구현될 수 있다. 소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시 예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 동작을 수행할 수 있다.
한편, 상술한 다양한 실시 예들에 따른 기기의 프로세싱 동작을 수행하기 위한 컴퓨터 명령어(computer instructions)는 비일시적 컴퓨터 판독 가능 매체(non-transitory computer-readable medium)에 저장될 수 있다. 이러한 비일시적 컴퓨터 판독 가능 매체에 저장된 컴퓨터 명령어는 특정 기기의 프로세서에 의해 실행되었을 때 상술한 다양한 실시 예에 따른 기기에서의 처리 동작을 특정 기기가 수행하도록 한다. 비일시적 컴퓨터 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 비일시적 컴퓨터 판독 가능 매체의 구체적인 예로는, CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등이 있을 수 있다.
또한, 상술한 다양한 실시 예들에 따른 구성 요소(예: 모듈 또는 프로그램) 각각은 단수 또는 복수의 개체로 구성될 수 있으며, 전술한 해당 서브 구성 요소들 중 일부 서브 구성 요소가 생략되거나, 또는 다른 서브 구성 요소가 다양한 실시 예에 더 포함될 수 있다. 대체적으로 또는 추가적으로, 일부 구성 요소들(예: 모듈 또는 프로그램)은 하나의 개체로 통합되어, 통합되기 이전의 각각의 해당 구성 요소에 의해 수행되는 기능을 동일 또는 유사하게 수행할 수 있다. 다양한 실시 예들에 따른, 모듈, 프로그램 또는 다른 구성 요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱하게 실행되거나, 적어도 일부 동작이 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
이상에서는 본 개시의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 개시는 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 개시의 요지를 벗어남이 없이 당해 개시에 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 개시의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

Claims (15)

  1. 전자 장치에 있어서,
    통신 인터페이스; 및
    제1 캐리어 주파수의 신호를 송신하도록 상기 통신 인터페이스를 제어하고, 상기 제1 캐리어 주파수의 신호가 송신된 후 제1 임계 시간 내에, 상기 제1 캐리어 주파수의 신호가 상기 전자 장치가 배치된 공간에 의해 반사된 신호가 상기 통신 인터페이스를 통해 수신되지 않는 경우, 상기 제1 캐리어 주파수를 탐색 캐리어 주파수로 결정하고,
    상기 제1 캐리어 주파수의 신호가 송신된 후 상기 제1 임계 시간 내에, 상기 반사된 신호가 상기 통신 인터페이스를 통해 수신되면, 상기 제1 캐리어 주파수와는 상이한 제2 캐리어 주파수의 신호를 송신하도록 상기 통신 인터페이스를 제어하고,
    상기 결정된 탐색 캐리어 주파수의 신호를 송신하도록 상기 통신 인터페이스를 제어하며,
    상기 탐색 캐리어 주파수의 신호가 송신된 후 제2 임계 시간 내에 상기 통신 인터페이스를 통해 신호가 수신되는지 여부에 기초하여 객체의 존재 여부를 식별하는 프로세서;를 포함하는 전자 장치.
  2. 제1항에 있어서,
    상기 프로세서는,
    상기 탐색 캐리어 주파수의 신호가 송신된 후 상기 제2 임계 시간 내에 상기 통신 인터페이스를 통해 신호가 수신되면 상기 객체가 존재하는 것으로 식별하고,
    상기 수신된 신호는,
    상기 탐색 캐리어 주파수의 신호가 상기 객체에 의해 반사된 신호인, 전자 장치.
  3. 제2항에 있어서,
    상기 프로세서는,
    상기 반사된 신호의 캐리어 주파수와 상기 탐색 캐리어 주파수의 차이가 임계 값 이하이면 상기 객체가 존재하는 것으로 식별하는, 전자 장치.
  4. 제1항에 있어서,
    마이크;를 더 포함하며,
    상기 프로세서는,
    상기 객체가 존재하는 것으로 식별되면 상기 마이크를 턴 온시키고,
    상기 턴 온된 마이크로부터 수신된 사운드에 기초하여 상기 객체가 사용자인지 식별하는, 전자 장치.
  5. 제4항에 있어서,
    디스플레이;를 더 포함하며,
    상기 프로세서는,
    상기 전자 장치가 제1 모드로 동작하는 동안 상기 사용자가 식별되면, 상기 제1 모드를 제2 모드로 변경하고,
    상기 제2 모드에 대응되는 UI를 디스플레이하도록 상기 디스플레이를 제어하는, 전자 장치.
  6. 제5항에 있어서,
    상기 제1 모드는, 파워 오프 모드 또는 스탠바이 모드이고,
    상기 제2 모드는, Ambient Mode인, 전자 장치.
  7. 제1항에 있어서,
    상기 프로세서는,
    상기 반사된 신호의 캐리어 주파수와 상기 제1 캐리어 주파수의 차이가 임계 값 이하이면 상기 제2 캐리어 주파수로 상기 신호를 송신하도록 상기 통신 인터페이스를 제어하는, 전자 장치.
  8. 제1항에 있어서,
    상기 프로세서는,
    상기 객체가 존재하는 것으로 식별되면, 기설정된 시간 간격으로 상기 탐색 캐리어 주파수의 신호를 송신하도록 상기 통신 인터페이스를 제어하는, 전자 장치.
  9. 제8항에 있어서,
    상기 프로세서는,
    상기 기설정된 간격으로 상기 탐색 캐리어 주파수의 신호가 송신된 후 상기 제2 임계 시간 내에 상기 통신 인터페이스를 통해 신호가 수신되지 않으면, 상기 객체가 존재하지 않는 것으로 식별하고,
    상기 객체가 존재하지 않는 것으로 식별되면, 상기 탐색 캐리어 주파수를 결정하는 동작을 재수행하는, 전자 장치.
  10. 제1항에 있어서,
    상기 통신 인터페이스는,
    IR(infrared ray) 송신부; 및
    IR 수신부;를 포함하며,
    상기 프로세서는,
    상기 제1 캐리어 주파수의 신호를 송신하도록 상기 IR 송신부를 제어하고, 상기 제1 캐리어 주파수의 신호가 송신된 후 상기 제1 임계 시간 내에, 상기 반사된 신호가 상기 IR 수신부를 통해 수신되지 않는 경우, 상기 제1 캐리어 주파수를 상기 탐색 캐리어 주파수로 결정하고,
    상기 제1 캐리어 주파수의 신호가 송신된 후 상기 제1 임계 시간 내에, 상기 반사된 신호가 상기 IR 수신부를 통해 수신되면, 상기 제1 캐리어 주파수와는 상이한 제2 캐리어 주파수의 신호를 송신하도록 상기 IR 송신부를 제어하고,
    상기 결정된 탐색 캐리어 주파수의 신호를 송신하도록 상기 IR 송신부를 제어하며,
    상기 탐색 캐리어 주파수의 신호가 송신된 후 상기 제2 임계 시간 내에 상기 IR 수신부를 통해 신호가 수신되는지 여부에 기초하여 상기 객체의 존재 여부를 식별하는, 전자 장치.
  11. 전자 장치의 제어 방법에 있어서,
    제1 캐리어 주파수의 신호를 송신하는 단계;
    상기 제1 캐리어 주파수의 신호가 송신된 후 제1 임계 시간 내에, 상기 제1 캐리어 주파수의 신호가 상기 전자 장치가 배치된 공간에 의해 반사된 신호가 수신되지 않는 경우, 상기 제1 캐리어 주파수를 탐색 캐리어 주파수로 결정하는 단계;
    상기 제1 캐리어 주파수의 신호가 송신된 후 상기 제1 임계 시간 내에, 상기 반사된 신호가 수신되면, 상기 제1 캐리어 주파수와는 상이한 제2 캐리어 주파수의 신호를 송신하는 단계;
    상기 결정된 탐색 캐리어 주파수의 신호를 송신하는 단계; 및
    상기 탐색 캐리어 주파수의 신호가 송신된 후 제2 임계 시간 내에 신호가 수신되는지 여부에 기초하여 객체의 존재 여부를 식별하는 단계;를 포함하는 제어 방법.
  12. 제11항에 있어서,
    상기 식별하는 단계는,
    상기 탐색 캐리어 주파수의 신호가 송신된 후 상기 제2 임계 시간 내에 신호가 수신되면 상기 객체가 존재하는 것으로 식별하고,
    상기 수신된 신호는,
    상기 탐색 캐리어 주파수의 신호가 상기 객체에 의해 반사된 신호인, 제어 방법.
  13. 제12항에 있어서,
    상기 식별하는 단계는,
    상기 반사된 신호의 캐리어 주파수와 상기 탐색 캐리어 주파수의 차이가 임계 값 이하이면 상기 객체가 존재하는 것으로 식별하는, 제어 방법.
  14. 제11항에 있어서,
    상기 객체가 존재하는 것으로 식별되면 상기 전자 장치에 구비된 마이크를 턴 온시키는 단계; 및
    상기 턴 온된 마이크로부터 수신된 사운드에 기초하여 상기 객체가 사용자인지 식별하는 단계;를 더 포함하는, 제어 방법.
  15. 제14항에 있어서,
    상기 전자 장치가 제1 모드로 동작하는 동안 상기 사용자가 식별되면, 상기 제1 모드를 제2 모드로 변경하는 단계; 및
    상기 제2 모드에 대응되는 UI를 디스플레이하는 단계;를 더 포함하는, 제어 방법.
PCT/KR2021/012392 2020-09-15 2021-09-13 전자 장치 및 그 제어 방법 WO2022060023A1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202180062838.1A CN116113852A (zh) 2020-09-15 2021-09-13 电子装置及其控制方法
EP21869645.8A EP4191283A4 (en) 2020-09-15 2021-09-13 ELECTRONIC DEVICE AND CONTROL METHOD THEREOF
US18/108,837 US20230198623A1 (en) 2020-09-15 2023-02-13 Electronic apparatus and controlling method thereof

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2020-0118297 2020-09-15
KR1020200118297A KR20220036108A (ko) 2020-09-15 2020-09-15 전자 장치 및 그 제어 방법

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US18/108,837 Continuation US20230198623A1 (en) 2020-09-15 2023-02-13 Electronic apparatus and controlling method thereof

Publications (1)

Publication Number Publication Date
WO2022060023A1 true WO2022060023A1 (ko) 2022-03-24

Family

ID=80777166

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2021/012392 WO2022060023A1 (ko) 2020-09-15 2021-09-13 전자 장치 및 그 제어 방법

Country Status (5)

Country Link
US (1) US20230198623A1 (ko)
EP (1) EP4191283A4 (ko)
KR (1) KR20220036108A (ko)
CN (1) CN116113852A (ko)
WO (1) WO2022060023A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102478245B1 (ko) * 2016-06-09 2022-12-15 엘지전자 주식회사 스마트홈 컨트롤러 냉장고 및 이를 제어하는 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100109938A1 (en) * 2007-01-31 2010-05-06 Gordon Kenneth Andrew Oswald Adaptive radar
US20160054440A1 (en) * 2014-08-25 2016-02-25 Younis Technologies, Inc. Indoor position location using delayed scanned directional reflectors
KR20180025693A (ko) * 2016-09-01 2018-03-09 현대자동차주식회사 동작 감지 장치, 동작 감지 방법 및 동작 감지 안테나
KR20180076814A (ko) * 2016-12-28 2018-07-06 클라트 주식회사 Fmcw 레이더 기반의 객체 탐지 시스템 및 방법
KR20180088155A (ko) * 2017-01-26 2018-08-03 (주)더블유알티랩 레이더를 이용하여 객체 탐지를 위한 임계 값을 적응적으로 설정하는 방법 및 장치

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160205236A1 (en) * 2015-01-13 2016-07-14 Motorola Mobility Llc Portable Electronic Device with Dual, Diagonal Proximity Sensors and Mode Switching Functionality
DE102018133312B4 (de) * 2018-12-21 2021-08-05 Irlbacher Blickpunkt Glas Gmbh Vorrichtung zur abstandsabhängigen Erkennung eines mobilen Objektes sowie Verfahren zu deren Betrieb

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100109938A1 (en) * 2007-01-31 2010-05-06 Gordon Kenneth Andrew Oswald Adaptive radar
US20160054440A1 (en) * 2014-08-25 2016-02-25 Younis Technologies, Inc. Indoor position location using delayed scanned directional reflectors
KR20180025693A (ko) * 2016-09-01 2018-03-09 현대자동차주식회사 동작 감지 장치, 동작 감지 방법 및 동작 감지 안테나
KR20180076814A (ko) * 2016-12-28 2018-07-06 클라트 주식회사 Fmcw 레이더 기반의 객체 탐지 시스템 및 방법
KR20180088155A (ko) * 2017-01-26 2018-08-03 (주)더블유알티랩 레이더를 이용하여 객체 탐지를 위한 임계 값을 적응적으로 설정하는 방법 및 장치

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP4191283A4 *

Also Published As

Publication number Publication date
US20230198623A1 (en) 2023-06-22
EP4191283A1 (en) 2023-06-07
CN116113852A (zh) 2023-05-12
KR20220036108A (ko) 2022-03-22
EP4191283A4 (en) 2023-12-27

Similar Documents

Publication Publication Date Title
WO2017131335A1 (ko) 사용자 단말 장치 및 그 제어 방법
WO2016072635A1 (en) User terminal device and method for control thereof and system for providing contents
WO2019088793A1 (ko) 전자 장치 및 이를 이용한 화면 공유 방법
WO2016060371A1 (en) Terminal for internet of things and operation method of the same
WO2014088236A1 (en) Method and mobile terminal for controlling screen lock
WO2016080747A1 (en) User terminal and method for controlling display apparatus
WO2017065535A1 (ko) 전자 장치 및 그 제어 방법
WO2020226289A1 (en) Electronic apparatus, user terminal, and method of controlling the electronic apparatus and the user terminal
WO2021145597A1 (en) Electronic device and operating method thereof
WO2020096288A1 (en) Display apparatus and control method thereof
WO2019059483A1 (ko) 전자 장치 및 이의 제어방법
WO2019074243A1 (en) DISPLAY DEVICE, USER TERMINAL DEVICE, DISPLAY SYSTEM COMPRISING THE SAME, AND ASSOCIATED COMAND METHOD
WO2022060023A1 (ko) 전자 장치 및 그 제어 방법
WO2016035950A1 (ko) 디지털 디바이스 및 그 제어 방법
WO2020080675A1 (en) Remote control apparatus and control method thereof
WO2022124752A1 (ko) 전자 장치 및 전자 장치의 제어 방법
WO2017104977A1 (en) Electronic device and method of operating the same
WO2017082448A1 (ko) 디바이스 및 이의 동작방법
WO2021080290A1 (en) Electronic apparatus and control method thereof
WO2015072816A1 (ko) 디스플레이 장치 및 제어 방법
WO2018110956A1 (en) Display apparatus presenting status of external electronic apparatus and controlling method thereof
WO2016122153A1 (en) Display apparatus and control method thereof
WO2017047985A1 (en) Display apparatus and method for controlling the same
WO2019160256A1 (en) Electronic apparatus and method for controlling thereof
WO2019074181A1 (ko) 영상 처리 장치 및 이를 포함하는 디스플레이 장치, 그 제어 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21869645

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2021869645

Country of ref document: EP

Effective date: 20230228

NENP Non-entry into the national phase

Ref country code: DE