WO2020111727A1 - 전자 장치 및 전자 장치의 제어 방법 - Google Patents

전자 장치 및 전자 장치의 제어 방법 Download PDF

Info

Publication number
WO2020111727A1
WO2020111727A1 PCT/KR2019/016363 KR2019016363W WO2020111727A1 WO 2020111727 A1 WO2020111727 A1 WO 2020111727A1 KR 2019016363 W KR2019016363 W KR 2019016363W WO 2020111727 A1 WO2020111727 A1 WO 2020111727A1
Authority
WO
WIPO (PCT)
Prior art keywords
electronic device
information
audio sound
external electronic
location
Prior art date
Application number
PCT/KR2019/016363
Other languages
English (en)
French (fr)
Inventor
조와룡
박경민
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to US17/296,761 priority Critical patent/US11802951B2/en
Publication of WO2020111727A1 publication Critical patent/WO2020111727A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S11/00—Systems for determining distance or velocity not using reflection or reradiation
    • G01S11/14—Systems for determining distance or velocity not using reflection or reradiation using ultrasonic, sonic, or infrasonic waves
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2807—Exchanging configuration information on appliance services in a home automation network
    • H04L12/2809—Exchanging configuration information on appliance services in a home automation network indicating that an appliance service is present in a home automation network
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/02—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems using reflection of acoustic waves
    • G01S15/06—Systems determining the position data of a target
    • G01S15/08—Systems for measuring distance only
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/74—Systems using reradiation of acoustic waves, e.g. IFF, i.e. identification of friend or foe
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/18—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using ultrasonic, sonic, or infrasonic waves
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/162—Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L2012/284—Home automation networks characterised by the type of medium used
    • H04L2012/2841—Wireless
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L2012/2847—Home automation networks characterised by the type of home appliance used
    • H04L2012/2849—Audio/video appliances

Definitions

  • Various embodiments of the present disclosure relate to an electronic device that measures distance and transmits/receives location information using audio non-audible sound.
  • a user using a smart phone at home may connect to a cloud server to check the operation status or location information of an external electronic device such as a refrigerator, TV, or air purifier, and instruct necessary operations.
  • an external electronic device such as a refrigerator, TV, or air purifier
  • a user may use the functions according to the positions by inputting the positions of the plurality of electronic devices.
  • the electronic device is newly installed or the electronic device is moved, there may be inconvenience in that the user must manually enter the location each time.
  • An electronic device includes a display, a communication module, at least one microphone, at least one speaker, a processor operatively connected to the display, the wireless communication circuit, the microphone, and the speaker, and the processor A memory that is operatively connected, wherein the memory, when executed, the processor, through the speaker, transmits a first audio sound including the first information, through the microphone, the first external electronic device And receiving third audio sound including second information responsive to the first information, and receiving the second audio sound, and including third information for obtaining a distance from the first external electronic device The third audio sound is transmitted through the speaker, and a fourth audio sound including fourth information responsive to the third information is received from the first external device through the microphone, and the third information and/or Alternatively, based on the fourth information, a distance from the first external electronic device is obtained, and when the obtained distance is within a specified distance, a fifth audio sound including fifth information may be obtained through the speaker. Sending to a first external electronic device, receiving a sixth audio sound including the sixth information in response to the fifth information through the microphone
  • a control method of an electronic device includes transmitting a first audio sound including first information through a speaker and including second information responsive to the first information from a first external electronic device. Receiving a second audio sound through the microphone and transmitting a third audio sound including third information for identifying a distance to the first external electronic device through the speaker, from the first external electronic device A fourth audio sound including fourth information responsive to the third information is received through the microphone, and a distance from the first external electronic device is obtained based on the third information and/or the fourth information Operation, if the pre-obtained distance is within a specified distance, transmitting a fifth audio sound including fifth information to the first external electronic device through the speaker, and sixth information responsive to the fifth information And receiving the sixth audio sound including the microphone through the microphone and registering the location of the electronic device based on the sixth information.
  • the location of the electronic device can be easily registered by receiving location information of the electronic device from an external electronic device.
  • location information of the electronic device may be received from an external electronic device.
  • the electronic device may register a location of the external electronic device by receiving the location from the external electronic device.
  • FIGS. 1A to 1C are diagrams illustrating a situation in which a location of an electronic device is registered according to an embodiment.
  • FIG. 2 is a schematic block diagram of an electronic device according to an embodiment.
  • FIG. 3 is a diagram illustrating a situation in which an electronic device according to an embodiment registers a location received from another electronic device.
  • FIG. 4 is a diagram illustrating a situation in which an electronic device manually adds a location of an electronic device according to an embodiment.
  • 5A to 5B are diagrams illustrating a situation in which an electronic device moves a location after registering a location according to an embodiment.
  • FIG. 6 is a diagram illustrating a situation in which an electronic device registers a plurality of external electronic devices that are not registered according to an embodiment.
  • FIG. 7 is a flowchart illustrating a schematic location registration process of an electronic device according to an embodiment.
  • FIG. 8 is a flowchart illustrating a location registration process of an electronic device according to various embodiments of the present disclosure.
  • FIG. 9 is a block diagram of an electronic device in a network environment, according to various embodiments.
  • expressions such as “having”, “having”, “comprising”, or “can include” include the presence of a corresponding characteristic (eg, a component such as a numerical value, function, operation, or part). And does not exclude the presence of additional features.
  • expressions such as “at least one of A or B”, “at least one of A or/and B”, or “one or more of A or/and B” may include all possible combinations of items listed together.
  • “A or B”, “at least one of A and B”, or “at least one of A or B” includes (1) at least one A, (2) at least one B, Or (3) all cases including both at least one A and at least one B.
  • first”, “second”, “first”, or “second” may modify various components, regardless of order and/or importance, and change one component to another It is used to distinguish from the components, but does not limit the components.
  • the first user device and the second user device may indicate different user devices regardless of order or importance.
  • the first component may be referred to as a second component without departing from the scope of the rights described in the present disclosure, and similarly, the second component may also be referred to as a first component.
  • Some component eg, first component
  • another component eg, second component
  • “connected to” it should be understood that any of the above components may be directly connected to the other components or may be connected through other components (eg, a third component).
  • a component eg, the first component
  • the component is not It can be understood that other components (eg, the third component) do not exist between the other components.
  • the expression “configured to” used in the present disclosure may be “having the capacity to,” for example, “suitable for”, depending on the situation. It can be used interchangeably with “, “designed to”, “adapted to”, “made to”, or “capable of”.
  • the term “configured (or set) to” may not necessarily mean only “specifically designed to” in hardware. Instead, in some situations, the expression “a device configured to” may mean that the device “can” with other devices or parts.
  • the phrase “processors configured (or set) to perform A, B, and C” means by executing a dedicated processor (eg, an embedded processor) to perform the operation, or one or more software programs stored in the memory device. , It may mean a general-purpose processor (for example, a CPU or an application processor) capable of performing the corresponding operations.
  • An electronic device includes, for example, a smart phone, a tablet personal computer (PC), a mobile phone, a video phone, an e-book reader, Desktop PC (desktop personal computer), laptop PC (laptop personal computer), netbook computer (netbook computer), workstation (workstation), server, PDA (personal digital assistant), PMP (portable multimedia player), MP3 player, mobile medical It may include at least one of a device, a camera, or a wearable device.
  • PC personal computer
  • PMP portable multimedia player
  • MP3 player mobile medical It may include at least one of a device, a camera, or a wearable device.
  • the wearable device may be an accessory type (for example, a watch, ring, bracelet, anklet, necklace, glasses, contact lens, or head-mounted device (HMD)), a fabric or clothing integrated type ( Examples may include at least one of an electronic garment), a body attachment type (eg, a skin pad or tattoo), or a bio-implantable type (eg, an implantable circuit).
  • an accessory type for example, a watch, ring, bracelet, anklet, necklace, glasses, contact lens, or head-mounted device (HMD)
  • HMD head-mounted device
  • fabrics or clothing integrated type Examples may include at least one of an electronic garment), a body attachment type (eg, a skin pad or tattoo), or a bio-implantable type (eg, an implantable circuit).
  • the term user may refer to a person using an electronic device or a device using an electronic device (eg, an artificial intelligence electronic device).
  • FIGS. 1A to 1C are diagrams illustrating a situation in which a location of an electronic device is registered according to an embodiment.
  • a space 1 in which the electronic device 10 is located includes a plurality of areas (for example, a living room 1a, a master room 1b, a kitchen 1c, and a first small room 1d) ), the second small room (1e).
  • a plurality of electronic devices eg, the first external electronic device 110, the second external electronic device 120, or the third external electronic device 130 are located in the space 1 can do.
  • a plurality of electronic devices 10, 110, 120, or 130 may be in a state in which communication is established with each other in the space 1.
  • the plurality of electronic devices 10, 110, 120, or 130 may use each first electronic device using a first network (eg, a short-range communication network such as Bluetooth, WiFi direct, or infrared data association (IrDA)).
  • a first network eg, a short-range communication network such as Bluetooth, WiFi direct, or infrared data association (IrDA)
  • Information can be transmitted and received between the fields 10, 110, 120, or 130.
  • the plurality of electronic devices 10, 110, 120, or 130 may establish a second network (eg, a telecommunication network such as a cellular network, the Internet, or a computer network (eg, a LAN or WAN)). It is connected to the cloud server to transmit and receive information between each of the electronic devices (10, 110, 120, or 130).
  • the cloud server may collect, store, and manage information of each of the electronic devices 10, 110, 120, or 130.
  • the cloud server may generate and transmit a command to control each of the electronic devices 10, 110, 120, or 130 based on the user's control.
  • a plurality of electronic devices 10, 110, 120, or 130 are connected to a cloud server to transmit and receive information.
  • 1B is a process in which the electronic device 10 is registered in a cloud server in which a plurality of electronic devices 110, 120, or 130 are registered.
  • the electronic device 10 may display an execution screen 140 of the IoT application by executing an IoT application that executes a process of registering the electronic device to the cloud server.
  • the electronic device 10 when the electronic device 10 includes a display, the electronic device 10 may display the execution screen 140 of the IoT application on the display. According to various embodiments, when the electronic device 10 does not include a display, the electronic device 10 may display an execution screen of an IoT application using another electronic device including a display. For example, an electronic device without a display may first establish communication with an external electronic device with a display, and then proceed to a process described below using the external electronic device with a display.
  • the execution screen 140 of the IoT application may display, for example, a registration start execution object 142 that starts the process of registering the electronic device 10 to the cloud server.
  • the electronic device 10 may perform a cloud server connection operation in response to a user input selecting the registration start execution object 142.
  • the electronic device 10 may display the guide 144 indicating that the connection operation with the cloud server is in progress and the object 146 indicating the progress of the IoT application on the execution screen 140 of the IoT application. have.
  • the electronic device 10 for example, while displaying the guide 144 and the object 146 indicating the progress of the progress on the execution screen 140 of the IoT application, while establishing communication with the cloud server, the electronic device 10 Information (for example, the name of the electronic device (or identification information (ID)), battery information, or information about a main function) may be transmitted to a cloud server. Also, the electronic device 10 may receive information on other electronic devices that are already registered in the cloud, for example.
  • ID identification information
  • the electronic device 10 displays the guide message 148 informing that the connection operation with the cloud server is completed and the completion object 150 requesting confirmation to the user on the execution screen 140 of the IoT application. Can be.
  • the electronic device 10 may terminate the connection operation with the cloud server in response to a user input for selecting the completion object 150 requesting confirmation from the user.
  • the plurality of electronic devices 10, 110, 120, or 130 may form a network to provide a service (or function) to a user.
  • the user instructs the artificial intelligence speaker (not shown) connected to the cloud server to "operate the air purifier (eg, the third external electronic device 130) in the first small room 1d". can do.
  • the artificial intelligence speaker may transmit a signal for operating the air purifier of the first small room 1d connected through the cloud server.
  • a plurality of electronic devices 10, 110, 120, or 130 need to register their respective locations in the space 1.
  • the electronic device 10 may communicate with the first external electronic device 110 and the second external electronic device 120 using audio sound.
  • the electronic device 10 and the external electronic devices 110 or 120 may measure a distance between each other using audio sound.
  • the electronic device 10 and the external electronic devices 110 or 120 may include data in the audio sound to transmit and receive each other.
  • the audio sound may be, for example, an inaudible audio sound that cannot be heard by human hearing.
  • the electronic device 10, the first external electronic device 110, and the second external electronic device 120 include at least one speaker capable of outputting audio sound and at least one speaker capable of receiving audio sound. It may include a microphone.
  • the electronic device 10 may control the speaker to transmit a first audio sound including first information.
  • the first information may include, for example, a message (for example, Hello) indicating the existence of the electronic device 10.
  • the electronic device 10 may identify whether location information of the electronic device is stored before transmitting the first audio sound. For example, when the electronic device 10 is booted, when the movement of the electronic device 10 is detected, when the set period has been reached, or when the user requests, the electronic device 10 It is possible to identify whether location information is already stored. As a result of the identification, if the location information is not already stored, the electronic device 10 may perform the following process of transmitting the first audio sound to register the location. Also, the electronic device 10 may not transmit the first audio sound when location information is pre-stored as a result of the identification.
  • the electronic device 10 may modulate information and include it in an audio sound for transmission.
  • the modulation method may include, for example, at least one of an amplitude shift keying (ASK), a frequency shift keying (FSK), or a phase shift keying (PSK). Can be used.
  • ASK amplitude shift keying
  • FSK frequency shift keying
  • PSK phase shift keying
  • the electronic device 10 uses external electronic devices 110 or 120 and audio sound using the technology of “Beepbeep: A High Accuracy Acoustic Ranging System using COTS Mobile Devices” published as a paper. Communication can be performed.
  • the electronic device 10 may control the microphone to receive a second audio sound including second information responsive to the first information from the first external electronic device 110.
  • the first external electronic device 110 may be an electronic device that is already located in the space 1 in which the electronic device 10 is located.
  • the first external electronic device 110 may be, for example, in a state where it is located and stores information about a place.
  • the second information included in the second audio sound received from the first external electronic device 110 may include a unique identification number (or identification (ID)) of the first external electronic device 110.
  • the electronic device 10 after receiving the second audio sound, receives a third audio sound including third information for identifying a distance from the first external electronic device 110. It can be transmitted through the speaker.
  • the third information may include time information, for example.
  • the electronic device 10 may receive a fourth audio sound including fourth information responsive to third information from the first external electronic device 110 through the microphone.
  • the fourth information may include time information, for example.
  • the electronic device 10 may obtain a distance from the first external electronic device 110 based on the third information and/or the fourth information.
  • the electronic device 10 may measure the delay time.
  • the delay time may include, for example, a signal processing time required for the electronic device 10 to transmit a third audio sound using a speaker.
  • the delay time may include, for example, a signal processing time required for the electronic device 10 to receive a fourth audio sound using a microphone.
  • the delay time may include a time synchronization error between the speaker and the microphone.
  • the electronic device 10 performs a command for transmitting a third audio sound, and a delay time and sound required for a speaker to receive a signal from a sound card or digital analog converter to transmit the third audio sound
  • the delay time required to receive the fourth audio sound can be measured through a card or digital analog conversion.
  • the electronic device 10 may acquire a phase value.
  • the electronic device 10 may obtain a phase value of at least one frequency corresponding to the received fourth audio sound.
  • the electronic device 10 generates a sine function matrix and a cosine function matrix corresponding to the received fourth audio sound, and divides the coefficients corresponding to the cosine function matrix by the coefficients corresponding to the sine function matrix. 4 It is possible to obtain a phase value of at least one frequency corresponding to the audio sound.
  • the electronic device 10 may include a plurality of speakers and a plurality of microphones. In this case, the electronic device 10 acquires a phase value of a frequency corresponding to the audio sound transmitted from one speaker, obtains a phase value of a frequency corresponding to the audio sound transmitted from the other speaker, and each phase The difference value can be obtained. In this case, the electronic device 10 may acquire a phase value corresponding to the obtained difference value.
  • the electronic device 10 may obtain a distance from the first external electronic device 110.
  • the electronic device 10 may obtain a distance based on the obtained phase value.
  • the electronic device 10 receives the third audio sound and the fourth audio sound in a situation in which the fourth audio sound is received through the microphone.
  • a distance from the first external electronic device 110 may be obtained based on the number of vibrations.
  • the electronic device 10 when the acquired distance is within a specified distance, the electronic device 10 generates a fifth audio sound including fifth information, through a speaker, through the first external electronic device 110.
  • the fifth information may include, for example, content for inquiring location information of the first external electronic device 110.
  • the designated distance may be determined based on the intensity of the first audio sound transmitted by the electronic device 10. For example, if the intensity of the first audio sound is strong, the designated distance can be increased, and if the intensity of the first audio sound is weak, the designated distance can be reduced.
  • the electronic device 10 may receive the sixth audio sound including the sixth information in response to the fifth information through the microphone.
  • the sixth information may include, for example, content about location information of the first external electronic device 110.
  • the electronic device 10 may register the location of the electronic device 10 based on the sixth information.
  • the electronic device 10 may transmit and receive audio sound to and from the second external electronic device 120 to register the location of the electronic device 10.
  • the electronic device 10 may control the speaker to transmit a first audio sound including first information.
  • the first information may include, for example, a message (for example, Hello) indicating the existence of the electronic device 10.
  • the electronic device 10 may control the microphone to receive a seventh audio sound including seventh information responsive to the first information from the second external electronic device 120.
  • the second external electronic device 120 may be another electronic device already located in the space 1 in which the electronic device 10 is located.
  • the second external electronic device 120 may be, for example, in a state in which it is located and stores information about a place.
  • the seventh information included in the seventh audio sound received from the second external electronic device 120 may include a unique identification number (or identification (ID)) of the second external electronic device 120.
  • the electronic device 10 after receiving the seventh audio sound, the electronic device 10 receives the eighth audio sound including the eighth information for identifying the distance from the second external electronic device 120. It can be transmitted through the speaker.
  • the eighth information may include time information, for example.
  • the electronic device 10 may receive a ninth audio sound including ninth information responsive to the eighth information from the second external electronic device 120 through the microphone.
  • the ninth information may include time information, for example.
  • the electronic device 10 may obtain a distance from the second external electronic device 120 based on the eighth information and/or the ninth information.
  • the electronic device 10 may use the eighth information and/or the ninth information in the same way as the distance from the first external electronic device 110 is obtained based on the third information and/or fourth information described above. Based on this, a distance from the second external device 120 may be obtained.
  • the electronic device 10 when the obtained distance is within a specified distance, transmits a tenth audio sound including tenth information through the speaker, to the second external electronic device 120 ).
  • the tenth information may include, for example, content for querying location information of the second external electronic device 120.
  • the electronic device 10 may receive the eleventh audio sound including the eleventh information responsive to the tenth information through the microphone.
  • the eleventh information may include, for example, content about location information of the second external electronic device 120.
  • the electronic device 10 may register the location of the electronic device 10 based on the eleventh information.
  • the electronic device 10 performs an operation (eg, operation 1, operation 2, operation 3, operation 4, operation 5 and operation 6) in connection with the first external electronic device 110 and the second Operations performed with the external electronic device 120 (eg, operation 1, operation 7, operation 8, operation 9, operation 10 and operation 11) may be performed simultaneously or in parallel.
  • an operation eg, operation 1, operation 2, operation 3, operation 4, operation 5 and operation 6
  • the second Operations performed with the external electronic device 120 eg, operation 1, operation 7, operation 8, operation 9, operation 10 and operation 11
  • the electronic device 10 may include an audio sound including a message informing that the electronic device is present, an audio sound including time information, or an audio sound including content inquiring location information of an external electronic device. At least some can be merged.
  • the electronic device 10 may be recommended a location to be registered using external electronic devices 110 or 120 previously registered in the cloud server.
  • FIG. 2 is a schematic block diagram of an electronic device according to an embodiment.
  • the electronic device 10 may include a processor 210, a microphone 220, a speaker 230, and a memory 240. However, it is not limited thereto.
  • the electronic device 10 may further include a plurality of components or at least one of the components.
  • the electronic device 10 may further include a display 250 and/or a wireless communication module 260.
  • the processor 210 may control the overall operation of the electronic device 10.
  • the processor 210 may control the memory 240 to execute a program stored in the memory 240, and load or store necessary information.
  • the processor 210 transmits a first audio sound including the first information through the speaker 230, and through the microphone 220, a first external electronic device (eg, FIG. 1A) After receiving the second audio sound including the second information in response to the first information from the first external electronic device 110, and after receiving the second audio sound, the distance to the first external electronic device 110
  • the third audio sound including the third information for identification is transmitted through the speaker 230
  • the fourth audio sound including the fourth information responsive to the third information from the first external electronic device 110 is microphone Received through 220, and based on the third information and / or the fourth information to obtain a distance from the first external electronic device 110, and if the obtained distance is within a specified distance, including the fifth information
  • the fifth audio sound is transmitted to the first external electronic device 110 through the speaker 230, and the sixth audio sound including the sixth information responsive to the fifth information is received through the microphone 220.
  • the location of the electronic device 10 may be registered based on the sixth information.
  • the microphone 220 may acquire sound (eg, audio sound) generated in the vicinity of the electronic device 10 by an element that vibrates by sound waves and converts mechanical vibration into an electrical signal.
  • the microphone 220 receives audio sound from the first external electronic device 110 and the second external electronic device (eg, the second external electronic device 120 of FIG. 1A) under the control of the processor 210.
  • Can receive sound e.g, audio sound
  • the microphone 220 receives audio sound from the first external electronic device 110 and the second external electronic device (eg, the second external electronic device 120 of FIG. 1A) under the control of the processor 210.
  • the speaker 230 may change the electrical signal to the vibration of the diaphragm to generate a waveform in the air to copy sound waves.
  • the speaker 230 may transmit sound waves toward the first external electronic device 110 and the second external electronic device 120 under the control of the processor 210.
  • the memory 240 is a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory, etc.), RAM (RAM, Random Access Memory) SRAM (Static Random Access Memory), ROM (ROM, Read-Only Memory), EEPROM (Electrically Erasable Programmable Read-Only Memory), PROM (Programmable Read-Only Memory) , A storage medium of at least one type of a magnetic memory, a magnetic disk, or an optical disk.
  • the memory 240 transmits a first audio sound including first information through the speaker 230, and through the microphone 220, first information from the first external electronic device 110.
  • a third audio sound including second information for identifying a distance from the first external electronic device 110 after receiving the second audio sound and receiving the second audio sound Is transmitted through the speaker 230, the fourth audio sound including the fourth information in response to the third information from the first external electronic device 110 is received through the microphone 220, and the third information and/or
  • a distance from the first external electronic device 110 is obtained, and when the obtained distance is within a specified distance, a fifth audio sound including the fifth information, through the speaker 230
  • the first external electronic device 110 receives the sixth audio sound including the sixth information responsive to the fifth information through the microphone 220, and based on the sixth information, the electronic device 10 Commands set to register the location of can be saved.
  • the display 250 may display an image, a video, or an execution screen of an application program.
  • the display 250 may include a touch screen display that acquires a touch input.
  • the display 250 may acquire a sensing value by sensing a user's touch input, for example.
  • the processor 210 may output feedback using the sensing value acquired by the display 250.
  • the communication module 260 controls the electronic device 10 under the control of the processor 210, other electronic devices including the first external electronic device 110 and the second external electronic device 120. Can connect with The communication module 260 may include one of components that implement various wired or wireless communication methods, such as wireless LAN, Bluetooth, and wired Ethernet, in response to the performance and structure of the electronic device 10. .
  • FIG. 3 is a diagram illustrating a situation in which an electronic device according to an embodiment registers a location received from another electronic device.
  • the electronic device 10 may display an execution screen 340 of an IoT application including a user interface for registering the location of the electronic device 10.
  • the execution screen 340 of the IoT application that executes registering the location may proceed after the cloud server registration process of the electronic device 10, for example, as illustrated in FIG. 1 is finished.
  • the electronic device 10 receives location information from pre-registered external electronic devices (eg, the first external electronic device 110 or the second external electronic device 120). You can register your location.
  • the electronic device 10 may perform a location registration process using an external electronic device and audio sound located in response to a user input for selecting an execution object 310 that executes a location registration function. have.
  • the electronic device 10 transmits a first audio sound including information indicating the existence of the electronic device, and a second audio including identification information of the external electronic device in response to the information indicating the existence of the electronic device Sound can be received from an external electronic device.
  • the electronic device 10 transmits a third audio sound including time information to obtain a distance from the external electronic device, and a time corresponding to the third audio sound including time information.
  • a fourth audio sound including information may be received from an external electronic device.
  • the electronic device 10 obtains a distance from the external electronic device using time information, and when the distance is within a specified distance.
  • the fifth audio sound including the location information inquiry may be transmitted to the external electronic device, and the sixth audio sound including the response to the location information inquiry may be received from the external electronic device.
  • the electronic device 10 may guide to register the location of the electronic device 10 based on the received location information.
  • the electronic device 10 may display a location received from an external electronic device on the execution screen 340 of the IoT application.
  • the electronic device 10 may display location information received from the external electronic device in proportion to the distance between the external electronic device and the electronic device 10.
  • the electronic device 10 may display the living room 321, which is location information received from the first external electronic device 110 closest to the electronic device 10, on the top. Then, the electronic device 10 may display the kitchen 322 and the first small room 323 according to the distance from the electronic device 10.
  • the electronic device 10 may not receive location information from the external electronic device. For example, the electronic device 10 does not belong to a distance (for example, 3 to 4 m) from the third external electronic device 130 in the second small room in FIG. 3 The external electronic device 130 may not request location information. As a result, the electronic device 10 may not display the second small room on the execution screen 340 of the IoT application.
  • the electronic device 10 may not display the location information of the external electronic device. For example, the electronic device 10 may not receive an audio sound from the third external electronic device 130 in the second small room in FIG. 1A. As a result, the electronic device 10 may not display the second small room on the execution screen 340 of the IoT application.
  • the electronic device 10 may display a location adding object 324 that newly adds the location of the electronic device 10 to the execution screen 340 of the IoT application.
  • the electronic device 10 may newly add the location of the electronic device 10 rather than the location received from the external electronic device.
  • the electronic device 10 may register the living room 321 as a location of the electronic device 10 in response to a user input for selecting the living room 321. According to an embodiment, the electronic device 10 may display a list 330 of the locations of external electronic devices and external electronic devices pre-registered on the execution screen 340 of the IoT application.
  • FIG. 4 is a diagram illustrating a situation in which an electronic device manually adds a location of an electronic device according to an embodiment.
  • the electronic device 10 may display the execution screen 440 of the IoT application in which the user of the electronic device 10 directly registers the location.
  • the electronic device 10 displays, on the execution screen 440 of the IoT application, a user interface in which the user directly registers a location in response to a user input for selecting the location addition object 324 described above in FIG. 3, for example. can do.
  • the electronic device 10 may display a location input object 410 capable of inputting a name of a region in which the electronic device 10 is located.
  • the electronic device 10 may display a pre-stored location list 420 on the execution screen 440 of the IoT application in response to a user input selecting the location input object 410. have.
  • the electronic device 10 may display areas that have been stored while registering another electronic device in the cloud server in the location list 420.
  • the electronic device 10 may display a location name adding object 430 in which the user can directly add names of areas in which the electronic device can be located on the IoT application execution screen 440. .
  • the user may select the location name adding object 330 to add names of regions in which the electronic device may be located.
  • 5A to 5B are diagrams illustrating a situation in which an electronic device moves a location after registering a location according to an embodiment.
  • the electronic device 10 may identify whether the surrounding situation has been changed by transmitting an audio sound when the power is turned off and then turned on again. Alternatively, the electronic device 10 may transmit an audio sound every set period to identify whether the surrounding situation has changed.
  • the electronic device 10 may move from the A position to the B position. As described above, the electronic device 10 may identify whether the surrounding situation has been changed by transmitting an audio sound when the power is turned off and then turned on again while moving or when a set period arrives.
  • the electronic device 10 may transmit a first audio sound including information indicating the existence of the electronic device 10.
  • the electronic device 10 may receive, from the first external electronic device 110, a second audio sound including identification information of the first external electronic device 110 corresponding to the first audio sound.
  • the electronic device 10 may transmit a third audio sound including time information to obtain a distance from the first external electronic device 110.
  • the electronic device 10 may receive a fourth audio sound including time information from the first external electronic device 110 corresponding to the third audio sound including time information from the first external electronic device 110. .
  • the electronic device 10 may obtain a distance from the first external electronic device 110 using the transmitted time information and received time information.
  • the electronic device 10 may identify that the distance from the first external electronic device 110 is not included within a specified distance. Due to this, the electronic device 10 may not transmit an audio sound inquiring about location information of the first external electronic device 110.
  • the electronic device 10 may receive, from the second external electronic device 120, a seventh audio sound including identification information of the second external electronic device 120 corresponding to the first audio sound. have.
  • the electronic device 10 may transmit an eighth audio sound including time information to obtain a distance from the second external electronic device 120.
  • the electronic device 10 may receive a ninth audio sound including time information from the second external electronic device 120 corresponding to the eighth audio sound including time information from the second external electronic device 120. .
  • the electronic device 10 may obtain a distance from the second external electronic device 120 using the transmitted time information and received time information. The electronic device 10 may identify that the distance from the second external electronic device 120 is included within a specified distance.
  • the electronic device 10 may transmit the tenth audio sound inquiring of location information to the second external electronic device 120.
  • the electronic device 10 may receive an eleventh audio sound from the second external electronic device 120 including an answer to the tenth audio sound inquiring about location information.
  • the electronic device 10 may display a location received from an external electronic device on the execution screen 540 of the IoT application.
  • the electronic device 10 may display location information 510 received from external electronic devices in proportion to the distance between the external electronic device and the electronic device 10.
  • the electronic device 10 may display the kitchen 511 which is location information received from the second external electronic device 120 closest to the electronic device 10 on the top.
  • the electronic device 10 provides the same operation as obtaining location information of the second external electronic device 120 while transmitting and receiving audio sound to and from the electronic device 10 and the second external electronic device 120 in FIG. 5A. 3 Can be performed with the external electronic device 130.
  • the electronic device 10 may continuously display the first small room 512, which is location information received from the third external electronic device 130, following the kitchen 511.
  • the electronic device 10 may not receive location information from the external electronic device. For example, the electronic device 10 may identify that the distance from the first external electronic device 110 exceeds a specified distance, and may not receive location information from the first external electronic device 110. Therefore, the electronic device 10 may not display the execution screen 140 of the IoT application and the living room in which the first external electronic device 110 is located.
  • the electronic device 10 may transmit the audio sound to the surroundings periodically or according to a set condition to identify the changed surroundings. For this reason, the user can easily register the changed location even if the location of the electronic device 10 is changed.
  • FIG. 6 is a diagram illustrating a situation in which an electronic device registers a plurality of external electronic devices that are not registered according to an embodiment.
  • the electronic device 10 may identify whether the surrounding situation has been changed by transmitting an audio sound when the power is turned off and then turned on again. Alternatively, the electronic device 10 may transmit an audio sound every set period to identify whether the surrounding situation has changed.
  • the electronic device 10 may guide a user that external electronic devices that are not registered in the vicinity of the electronic device 10 are found using the execution screen 640 of the IoT application. .
  • the electronic device 10 transmits an audio sound including information indicating the existence of the electronic device 10, and responds to information indicating the existence of the electronic device 10 from the external electronic device.
  • An external electronic device that is not registered may be discovered by receiving an audio sound including identification information.
  • the electronic device 10 may manage a list of at least one external electronic devices in the vicinity or receive a list from an external server. For example, when receiving an audio sound from an external electronic device that is not included in the list, the electronic device 10 may determine that an external electronic device that is not registered exists.
  • the electronic device 10 may display the number of external electronic devices found as a number 611 while guiding the user that new electronic devices have been discovered.
  • the electronic device 10 may display a new device location registration execution object 610 for registering an external electronic device found on the execution screen 640 of the IoT application.
  • the electronic device 10 may proceed with a registration process for the external electronic device found in response to a user input for selecting the new device location registration execution object 610. That is, the user may use the electronic device 10 to perform a registration process for an external electronic device that has not yet been registered in the cloud.
  • the electronic device 10 may transmit an audio sound including time information for obtaining a distance.
  • the electronic device 10 may receive an audio sound including time information from at least one external electronic device corresponding to an audio sound including time information for obtaining a distance from at least one external electronic device.
  • the electronic device 10 may obtain the distance between the external electronic devices and the electronic device based on the transmitted time information and the received time information.
  • the electronic device 10 may sequentially perform the registration process for at least one external electronic device found.
  • the electronic device 10 may register the location of the external electronic device (eg, identification information SM-001) using the execution screen 640 of the IoT application.
  • the electronic device 10 may display the location list 620 that SM-001 can register on the execution screen 640 of the IoT application.
  • the location list 620 may be provided using, for example, location information stored in the electronic device 10.
  • the electronic device 10 may obtain location information of the current electronic device 10 from an external electronic device (eg, the first external electronic device 110 or the second external electronic device 120). It may receive and provide a location list 620 based on the received information.
  • the electronic device 10 may register the location of the external electronic device (eg, identification information SM-001) in response to a user input selecting at least one location.
  • the electronic device 10 may register the location of the external electronic device (eg, identification information SD-003) using the execution screen 640 of the IoT application.
  • the electronic device 10 may display the location list 630 that the SD-003 can register on the execution screen 640 of the IoT application.
  • the location list 630 may be provided using, for example, location information stored by the electronic device 10 or information received from a pre-registered external electronic device.
  • the electronic device 10 may register the location of the external electronic device (eg, identification information SD-003) in response to a user input selecting at least one location.
  • the electronic device 10 can easily register a plurality of external electronic devices that are not registered.
  • FIG. 7 is a flowchart illustrating a schematic location registration process of an electronic device according to an embodiment.
  • the electronic device 10 may transmit an audio sound through the speaker 230.
  • the electronic device 10 may transmit an audio sound for location registration through the speaker 230.
  • the electronic device 10 may check whether there is a response from an external electronic device.
  • the electronic device 10 transmits an audio sound including information indicating the existence of the electronic device 10, and the external electronic device (eg, the first external electronic device 110 or the second external electronic device ( 120)) in response to information informing the existence of the electronic device 10, an audio sound including identification information of the external electronic device may be received through the microphone 220.
  • the external electronic device eg, the first external electronic device 110 or the second external electronic device ( 120)
  • an audio sound including identification information of the external electronic device may be received through the microphone 220.
  • the electronic device 10 may obtain location information from the external electronic device.
  • the electronic device 10 may transmit an audio sound including time information for obtaining a distance.
  • the electronic device 10 may receive an audio sound including time information from external electronic devices in response to an audio sound including time information for obtaining a distance.
  • the electronic device 10 may obtain the distance between the external electronic devices and the electronic device based on the transmitted time information and the received time information.
  • the electronic device 10 may transmit an audio sound inquiring of location information.
  • the electronic device 10 may receive audio sound including location information from external electronic devices in response to the location information inquiry.
  • the electronic device 10 may identify the user's confirmation of the acquired location information.
  • the electronic device 10 may provide the user with at least one location information obtained based on audio sound received from external electronic devices.
  • the electronic device 10 may register the location of the electronic device 10 based on the received location information.
  • the electronic device 10 may register the location of the electronic device 10 in response to a user input selecting one of the received at least one location.
  • the electronic device 10 may provide a user interface to directly input a new location and register the new location.
  • FIG. 8 is a flowchart illustrating a location registration process of an electronic device according to various embodiments of the present disclosure.
  • the electronic device 10 may transmit a first audio sound including first information.
  • the first information may include, for example, a message (for example, Hello) indicating the existence of the electronic device 10.
  • the electronic device 10 receives a second audio sound including second information responsive to the first information from the first external electronic device 110.
  • a third audio sound including third information for obtaining a distance from the first external electronic device 110 may be transmitted.
  • the second information may include, for example, a unique identification number (or identification (ID)) of the first external electronic device 110.
  • ID identification
  • the electronic device 10 receives a fourth audio sound including fourth information responsive to third information from the first external electronic device 110.
  • a distance from the first external electronic device 110 may be obtained based on the third audio information and/or the fourth information.
  • the third information and the fourth information may include time information, for example.
  • the electronic device 10 may transmit a fifth audio sound including the fifth information to the first external electronic device 110.
  • the fifth information may include, for example, content for inquiring location information of the first external electronic device 110.
  • the electronic device 10 may receive a sixth audio sound including sixth information in response to the fifth information, and register the location of the electronic device 10 based on the sixth information.
  • the sixth information may include, for example, content about location information of the first external electronic device 110.
  • the electronic device 901 may include the electronic device 10 of FIG. 1.
  • the electronic device 901 communicates with the electronic device 902 through the first network 998 (eg, a short-range wireless communication network), or the second network 999
  • the electronic device 904 or the server 908 may be communicated through (eg, a remote wireless communication network).
  • the electronic device 901 may communicate with the electronic device 904 through the server 908.
  • the electronic device 901 includes a processor 920 (eg, the processor 210 of FIG. 2 ), a memory 930 (eg, the memory 240 of FIG.
  • the components may be omitted or one or more other components may be added to the electronic device 901.
  • some of these components may be implemented in one integrated circuit.
  • the sensor module 976 eg, fingerprint sensor, iris sensor, or illuminance sensor
  • the display device 960 eg, display
  • the processor 920 executes software (eg, the program 940) to execute at least one other component (eg, hardware or software component) of the electronic device 901 connected to the processor 920. It can be controlled and can perform various data processing or operations. According to one embodiment, as at least part of data processing or computation, the processor 920 may receive instructions or data received from other components (eg, sensor module 976 or communication module 990) in volatile memory 932. Loaded into, process instructions or data stored in volatile memory 932, and store the resulting data in nonvolatile memory 934.
  • software eg, the program 940
  • the processor 920 may receive instructions or data received from other components (eg, sensor module 976 or communication module 990) in volatile memory 932. Loaded into, process instructions or data stored in volatile memory 932, and store the resulting data in nonvolatile memory 934.
  • the processor 920 includes a main processor 921 (eg, a central processing unit or application processor), and a coprocessor 923 (eg, a graphics processing unit, an image signal processor) that can be operated independently or together. , Sensor hub processor, or communication processor). Additionally or alternatively, the coprocessor 923 may be configured to use less power than the main processor 921, or to be specialized for a specified function. The coprocessor 923 may be implemented separately from, or as part of, the main processor 921.
  • main processor 921 eg, a central processing unit or application processor
  • a coprocessor 923 eg, a graphics processing unit, an image signal processor
  • the coprocessor 923 may be configured to use less power than the main processor 921, or to be specialized for a specified function.
  • the coprocessor 923 may be implemented separately from, or as part of, the main processor 921.
  • the coprocessor 923 may replace, for example, the main processor 921 while the main processor 921 is in an inactive (eg, sleep) state, or the main processor 921 may be active (eg, execute an application) ) With the main processor 921, at least one of the components of the electronic device 901 (eg, the display device 960, the sensor module 976, or the communication module 990) It can control at least some of the functions or states associated with.
  • the coprocessor 923 eg, image signal processor or communication processor
  • may be implemented as part of other functionally relevant components eg, camera module 980 or communication module 990). have.
  • the memory 930 may store various data used by at least one component of the electronic device 901 (eg, the processor 920 or the sensor module 976).
  • the data may include, for example, software (eg, the program 940) and input data or output data for commands related thereto.
  • the memory 930 may include a volatile memory 932 or a nonvolatile memory 934.
  • the program 940 may be stored as software in the memory 930, and may include, for example, an operating system 942, middleware 944, or an application 946.
  • the input device 950 may receive commands or data to be used for components (eg, the processor 920) of the electronic device 901 from outside (eg, a user) of the electronic device 901.
  • the input device 950 may include, for example, a microphone, mouse, keyboard, or digital pen (eg, a stylus pen).
  • the sound output device 955 may output the sound signal to the outside of the electronic device 901.
  • the audio output device 955 may include, for example, a speaker or a receiver.
  • the speaker can be used for general purposes such as multimedia playback or recording playback, and the receiver can be used to receive an incoming call.
  • the receiver may be implemented separately from, or as part of, a speaker.
  • the display device 960 may visually provide information to the outside of the electronic device 901 (eg, a user).
  • the display device 960 may include, for example, a display, a hologram device, or a projector and a control circuit for controlling the device.
  • the display device 960 may include a touch circuitry configured to sense a touch, or a sensor circuit (eg, a pressure sensor) configured to measure the intensity of the force generated by the touch. have.
  • the audio module 970 may convert sound into an electrical signal, or vice versa. According to an embodiment, the audio module 970 acquires sound through the input device 950 or directly or wirelessly connects to the sound output device 955 or the electronic device 901 (for example, an external electronic device).
  • the electronic device 902 eg, speaker or headphone
  • the electronic device 902 may output sound.
  • the sensor module 976 detects an operating state (eg, power or temperature) of the electronic device 901 or an external environmental state (eg, a user state), and generates an electrical signal or data value corresponding to the detected state can do.
  • the sensor module 976 includes, for example, a gesture sensor, a gyro sensor, a barometric pressure sensor, a magnetic sensor, an acceleration sensor, a grip sensor, a proximity sensor, a color sensor, an infrared (IR) sensor, a biological sensor, It may include a temperature sensor, a humidity sensor, or an illuminance sensor.
  • the interface 997 may support one or more designated protocols that the electronic device 901 can be used to connect directly or wirelessly with an external electronic device (eg, the electronic device 902).
  • the interface 997 may include, for example, a high definition multimedia interface (HDMI), a universal serial bus (USB) interface, an SD card interface, or an audio interface.
  • HDMI high definition multimedia interface
  • USB universal serial bus
  • SD card interface Secure Digital Card
  • connection terminal 978 may include a connector through which the electronic device 901 can be physically connected to an external electronic device (eg, the electronic device 902 ).
  • the connection terminal 978 may include, for example, an HDMI connector, a USB connector, an SD card connector, or an audio connector (eg, a headphone connector).
  • the haptic module 979 may convert electrical signals into mechanical stimuli (eg, vibration or movement) or electrical stimuli that the user can perceive through tactile or motor sensations.
  • the haptic module 979 may include, for example, a motor, a piezoelectric element, or an electrical stimulation device.
  • the camera module 980 may capture still images and videos. According to one embodiment, the camera module 980 may include one or more lenses, image sensors, image signal processors, or flashes.
  • the power management module 988 may manage power supplied to the electronic device 901. According to one embodiment, the power management module 988 may be implemented, for example, as at least part of a power management integrated circuit (PMIC).
  • PMIC power management integrated circuit
  • the battery 989 may supply power to at least one component of the electronic device 901.
  • the battery 989 may include, for example, a non-rechargeable primary cell, a rechargeable secondary cell, or a fuel cell.
  • the communication module 990 is a direct (eg, wired) communication channel or a wireless communication channel between the electronic device 901 and an external electronic device (eg, the electronic device 902, the electronic device 904, or the server 908). It can support establishing and performing communication through the established communication channel.
  • the communication module 990 operates independently of the processor 920 (eg, an application processor), and may include one or more communication processors supporting direct (eg, wired) communication or wireless communication.
  • the communication module 990 is a wireless communication module 992 (eg, a cellular communication module, a short-range wireless communication module, or a global navigation satellite system (GNSS) communication module) or a wired communication module 994 (eg : Local area network (LAN) communication module, or power line communication module.
  • a wireless communication module 992 eg, a cellular communication module, a short-range wireless communication module, or a global navigation satellite system (GNSS) communication module
  • GNSS global navigation satellite system
  • wired communication module 994 eg : Local area network (LAN) communication module, or power line communication module.
  • Corresponding communication module among these communication modules includes a first network 998 (eg, a short-range communication network such as Bluetooth, WiFi direct, or an infrared data association (IrDA)) or a second network 999 (eg, a cellular network, the Internet, or It may communicate with the external electronic device 904 through a computer network (eg, a telecommunication network such as
  • the wireless communication module 992 uses a subscriber information (eg, International Mobile Subscriber Identifier (IMSI)) stored in the subscriber identification module 996 within a communication network such as the first network 998 or the second network 999.
  • IMSI International Mobile Subscriber Identifier
  • the antenna module 997 may transmit or receive a signal or power to the outside (eg, an external electronic device).
  • the antenna module 997 may include a single antenna including a conductor formed on a substrate (eg, a PCB) or a radiator made of a conductive pattern.
  • the antenna module 997 may include a plurality of antennas. In this case, at least one antenna suitable for a communication method used in a communication network such as the first network 998 or the second network 999 is, for example, transmitted from the plurality of antennas by the communication module 990. Can be selected.
  • the signal or power may be transmitted or received between the communication module 990 and an external electronic device through the at least one selected antenna.
  • other components eg, RFIC in addition to the radiator may be further formed as part of the antenna module 997.
  • the electronic device (eg, the electronic device 10) includes a display (eg, the display 250), a communication module (eg, the communication module 260), and at least one microphone (eg, a microphone (eg, 220), at least one speaker (eg, speaker 230), the display, the wireless communication circuit, the microphone, and a processor operatively connected to the speaker (eg, processor 21); And a memory (eg, memory 240) operably connected to the processor.
  • a display eg, the display 250
  • a communication module eg, the communication module 260
  • at least one microphone eg, a microphone (eg, 220), at least one speaker (eg, speaker 230), the display, the wireless communication circuit, the microphone, and a processor operatively connected to the speaker (eg, processor 21);
  • a memory eg, memory 240 operably connected to the processor.
  • the processor transmits a first audio sound including first information through the speaker, and through the microphone, the first from the first external electronic device A third audio including third information for receiving a second audio sound including second information responsive to information, and for obtaining a distance from the first external electronic device after receiving the second audio sound
  • the sound is transmitted through the speaker, and a fourth audio sound including fourth information responsive to the third information from the first external device is received through the microphone, and the third information and/or the fourth Acquiring a distance from the first external electronic device based on information, and when the obtained distance is within a specified distance, a fifth audio sound including fifth information, through the speaker, through the first external electronic
  • the instructions, the processor, the third information and the fourth information include time information, and based on the time information, the distance between the first external electronic device and the electronic device Can be identified.
  • the instructions receive, through the microphone, a seventh audio sound including seventh information responsive to the first information from a second external electronic device, and the seventh audio.
  • an eighth audio sound including eighth information for identifying a distance from the second external electronic device is transmitted through the speaker, and the eighth information is responded to from the second external electronic device.
  • receiving the ninth audio sound including the ninth information through the microphone identifying a distance from the second external electronic device based on the eighth information and/or the ninth information, and the identified distance If is within a specified distance, the tenth audio sound including the tenth information is transmitted to the second external electronic device through the speaker, and the eleventh audio includes the eleventh information responsive to the tenth information. Sound can be received through the microphone.
  • the instructions may cause the processor to register the location of the electronic device based on at least a part of the tenth information and/or the eleventh information.
  • the instructions may cause the processor to provide a user interface for registering the location of the electronic device through the display.
  • the instructions may cause the processor to check whether location information of the electronic device is stored in the memory, and to transmit the first audio sound based on the confirmation result.
  • the specified distance may be determined based on the intensity of the first audio sound.
  • the instructions may cause the processor to transmit the first audio sound in at least one of situations in which the power of the electronic device is terminated and then turned on again or a set period of time arrives.
  • the processor when the processor registers the location of the electronic device and then transmits the first audio sound, when the processor identifies that the external electronic device whose location is not registered is within a specified distance, the electronic The location of the device can be registered as the location of the external electronic device.
  • the instructions include a user interface through which the processor transmits information related to the location of the electronic device to an external electronic device including a display, so that the external electronic device registers the location of the electronic device. It can be provided.
  • a method of controlling an electronic device includes transmitting a first audio sound including first information through a speaker, and including second information responsive to the first information from a first external electronic device. Receiving a second audio sound through a microphone, and transmitting a third audio sound including third information for identifying a distance to the first external electronic device through the speaker, the first external electronic device A fourth audio sound including fourth information responsive to the third information is received from the microphone through the microphone, and a distance from the first external electronic device is determined based on the third information and/or the fourth information.
  • control method includes the third information and the fourth information including time information, and identifying a distance between the first external electronic device and the electronic device based on the time information It may include.
  • the control method may receive a seventh audio sound including seventh information responsive to the first information from a second external electronic device through the microphone, and the second external electronic device. Transmitting an eighth audio sound including the eighth information for identifying the distance of the camera through the speaker, a ninth audio sound including the ninth information responsive to the eighth information from the second external electronic device Receiving through the microphone. Obtaining a distance from the second external electronic device based on the eighth information and/or the ninth information, and if the obtained distance is within a specified distance, the tenth audio sound including the tenth information is supplied to the speaker.
  • the operation may include transmitting to the second external electronic device and receiving an eleventh audio sound including eleventh information responsive to the tenth information through the speaker.
  • control method may include registering a location of the electronic device based on at least a part of the tenth information and/or the eleventh information.
  • control method may include providing a user interface for registering the location of the electronic device through the display of the electronic device.
  • control method may include an operation of checking whether location information of the electronic device is stored, and transmitting the first audio sound based on the confirmation result.
  • the specified distance may be determined based on the intensity of the first audio sound.
  • control method may include an operation of transmitting the first audio sound in at least one of situations in which the power of the electronic device is terminated and then turned on again, or when a set period of time arrives.
  • the control method transmits the first audio sound to identify that the external electronic device whose location is not registered is within a specified distance. And registering the location as the location of the external electronic device.
  • a computer-readable storage medium for storing instructions may include transmitting a first audio sound including first information through a speaker, and responding to the first information from a first external electronic device. Receiving a second audio sound including information through a microphone, and transmitting a third audio sound including third information for identifying a distance to the first external electronic device through the speaker, the first A fourth audio sound including fourth information responsive to the third information is received from the external electronic device through the microphone, and the first external electronic device is based on the third information and/or the fourth information.
  • An operation of acquiring a distance, an operation of transmitting a fifth audio sound including the fifth information to the first external electronic device through the speaker, and a sixth audio sound including the sixth information responsive to the fifth information May be received through the microphone and register the location of the electronic device based on the sixth information.
  • peripheral devices for example, a bus, a general purpose input and output (GPIO), a serial peripheral interface (SPI), or a mobile industry processor interface (MIPI)
  • GPIO general purpose input and output
  • SPI serial peripheral interface
  • MIPI mobile industry processor interface
  • the command or data may be transmitted or received between the electronic device 901 and the external electronic device 904 through a server 908 connected to the second network 999.
  • Each of the external electronic devices 902 and 904 may be the same or a different type of device from the electronic device 901.
  • all or some of the operations executed in the electronic device 901 may be performed in one or more external electronic devices of the external electronic devices 902, 904, or 908.
  • the electronic device 901 executes the function or service itself.
  • one or more external electronic devices may be requested to perform at least a portion of the function or the service.
  • the one or more external electronic devices receiving the request may execute at least a part of the requested function or service, or an additional function or service related to the request, and deliver the result of the execution to the electronic device 901.
  • the electronic device 901 may process the result, as it is or additionally, and provide it as at least part of a response to the request.
  • cloud computing, distributed computing, or client-server computing technology can be used, for example.
  • Various embodiments of the present disclosure may include one or more instructions stored in a storage medium (eg, internal memory 936 or external memory 938) readable by a machine (eg, electronic device 901). It may be implemented as software (eg, program 940) that includes.
  • a processor eg, processor 920
  • a device eg, electronic device 901
  • the one or more instructions may include code generated by a compiler or code executable by an interpreter.
  • the storage medium readable by the device may be provided in the form of a non-transitory storage medium.
  • non-transitory only means that the storage medium is a tangible device and does not contain a signal (eg, electromagnetic waves), and this term is used when data is stored semi-permanently in a storage medium. It does not distinguish between temporary storage cases.
  • a signal eg, electromagnetic waves
  • a method according to various embodiments disclosed in the present disclosure may be provided as being included in a computer program product.
  • Computer program products can be traded between sellers and buyers as products.
  • the computer program product is distributed in the form of a device-readable storage medium (e.g. compact disc read only memory (CD-ROM)), or through an application store (e.g. Play Store TM ) or two user devices ( For example, it can be distributed directly between smartphones) and online (eg, downloaded or uploaded).
  • a portion of the computer program product may be temporarily stored at least temporarily in a storage medium readable by a device such as a memory of a manufacturer's server, an application store's server, or a relay server, or may be temporarily generated.
  • each component (eg, module or program) of the above-described components may include a singular or a plurality of entities.
  • one or more components or operations of the above-described corresponding components may be omitted, or one or more other components or operations may be added.
  • a plurality of components eg, modules or programs
  • the integrated component may perform one or more functions of each component of the plurality of components the same or similar to that performed by the corresponding component among the plurality of components prior to the integration. .
  • operations performed by a module, program, or other component may be executed sequentially, in parallel, repeatedly, or heuristically, or one or more of the operations may be executed in a different order, or omitted Or, one or more other actions can be added.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Automation & Control Theory (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • Telephone Function (AREA)

Abstract

다양한 실시 예들에 따른 전자 장치는, 디스플레이, 통신 모듈, 적어도 하나의 마이크, 적어도 하나의 스피커, 상기 디스플레이, 상기 무선 통신 회로, 상기 마이크, 및 상기 스피커에 작동적으로 연결되는 프로세서, 및 상기 프로세서에 작동적으로 연결되는 메모리를 포함하고, 상기 메모리는, 실행 시, 상기 프로세서가, 상기 스피커를 통해, 제1 정보를 포함하는 제1 오디오 사운드를 송출하고, 상기 마이크를 통해, 제1 외부 전자 장치로부터 상기 제1 정보에 응답하는 제2 정보를 포함하는 제2 오디오 사운드를 수신하고, 상기 제2 오디오 사운드를 수신한 후, 상기 제1 외부 전자 장치와의 거리를 획득하기 위한 제3 정보를 포함하는 제3 오디오 사운드를 상기 스피커를 통해 송출하고, 상기 제1 외부 장치로부터 상기 제3 정보에 응답하는 제4 정보를 포함하는 제4 오디오 사운드를 상기 마이크를 통해 수신하고, 상기 제3 정보 및/또는 상기 제4 정보에 기반하여 상기 제1 외부 전자 장치와의 거리를 획득하고, 상기 획득된 거리가 지정된 거리 이내인 경우, 제5 정보를 포함하는 제5 오디오 사운드를, 상기 스피커를 통해, 상기 제1 외부 전자 장치로 송출하고, 상기 제5 정보에 응답하는 제6 정보를 포함하는 제6 오디오 사운드를 상기 마이크를 통해 수신하고, 상기 제6 정보에 기반하여 상기 전자 장치의 위치를 등록하도록 하는 인스트럭션들을 저장할 수 있다. 그 외 다양한 실시예가 가능하다.

Description

전자 장치 및 전자 장치의 제어 방법
본 개시의 다양한 실시예들은 오디오 비 가청 사운드를 이용하여 거리를 측정하고 위치 정보를 송수신하는 전자 장치에 관한 것이다.
최근 복수 개의 전자 장치들 간에 통신을 수립하고 전자 장치들의 정보를 송수신하는 기술이 널리 사용되고 있다. 이로 인해, 사용자는 하나의 전자 장치를 이용하여 다른 전자 장치들을 제어할 수 있다. 또는, 사용자는 특별한 조작을 하지 않아도 다른 전자 장치들이 수집한 데이터를 전자 장치를 통하여 확인할 수 있다.
예를 들어, 가정에서 스마트 폰을 사용하는 사용자는 클라우드 서버에 연결하여 냉장고, TV, 또는 공기 청정기와 같은 외부 전자 장치의 동작 상태, 또는 위치 정보를 확인하고, 필요한 동작을 지시할 수 있다.
가정에서 복수 개의 전자 장치를 이용하는 상황에서, 사용자는 복수 개의 전자 장치의 위치를 입력하여 위치에 따른 기능을 활용할 수 있다. 이 경우, 전자 장치를 새로 설치하거나, 또는 전자 장치를 이동한 경우에 사용자는 매번 위치를 수동으로 입력해야 하는 불편함이 있을 수 있다.
일 실시예에 따른 전자 장치는, 디스플레이, 통신 모듈, 적어도 하나의 마이크, 적어도 하나의 스피커, 상기 디스플레이, 상기 무선 통신 회로, 상기 마이크, 및 상기 스피커에 작동적으로 연결되는 프로세서, 및 상기 프로세서에 작동적으로 연결되는 메모리를 포함하고, 상기 메모리는, 실행 시, 상기 프로세서가, 상기 스피커를 통해, 제1 정보를 포함하는 제1 오디오 사운드를 송출하고, 상기 마이크를 통해, 제1 외부 전자 장치로부터 상기 제1 정보에 응답하는 제2 정보를 포함하는 제2 오디오 사운드를 수신하고, 상기 제2 오디오 사운드를 수신한 후, 상기 제1 외부 전자 장치와의 거리를 획득하기 위한 제3 정보를 포함하는 제3 오디오 사운드를 상기 스피커를 통해 송출하고, 상기 제1 외부 장치로부터 상기 제3 정보에 응답하는 제4 정보를 포함하는 제4 오디오 사운드를 상기 마이크를 통해 수신하고, 상기 제3 정보 및/또는 상기 제4 정보에 기반하여 상기 제1 외부 전자 장치와의 거리를 획득하고, 상기 획득된 거리가 지정된 거리 이내인 경우, 제5 정보를 포함하는 제5 오디오 사운드를, 상기 스피커를 통해, 상기 제1 외부 전자 장치로 송출하고, 상기 제5 정보에 응답하는 제6 정보를 포함하는 제6 오디오 사운드를 상기 마이크를 통해 수신하고, 상기 제6 정보에 기반하여 상기 전자 장치의 위치를 등록하도록 하는 인스트럭션들을 저장할 수 있다.
일 실시예에 따른 전자 장치의 제어 방법은, 제1 정보를 포함하는 제1 오디오 사운드를 스피커를 통하여, 송출하는 동작, 제1 외부 전자 장치로부터 상기 제1 정보에 응답하는 제2 정보를 포함하는 제2 오디오 사운드를 마이크를 통해 수신하고, 상기 제1 외부 전자 장치와의 거리를 식별하기 위한 제3 정보를 포함하는 제3 오디오 사운드를 상기 스피커를 통해 송출하는 동작, 상기 제1 외부 전자 장치로부터 상기 제3 정보에 응답하는 제4 정보를 포함하는 제4 오디오 사운드를 상기 마이크를 통해 수신하고, 상기 제3 정보 및/또는 상기 제4 정보에 기반하여 상기 제1 외부 전자 장치와의 거리를 획득하는 동작, 기 획득된 거리가 지정된 거리 이내이면, 제5 정보를 포함하는 제5 오디오 사운드를 상기 스피커를 통해 상기 제1 외부 전자 장치로 송출하는 동작, 및 상기 제5 정보에 응답하는 제6 정보를 포함하는 제6 오디오 사운드를 상기 마이크를 통해 수신하고, 상기 제6 정보에 기반하여 상기 전자 장치의 위치를 등록하는 동작을 포함할 수 있다.
본 개시의 일 실시 예에 따르면, 전자 장치의 위치 정보를 외부 전자 장치로부터 수신하여 용이하게 전자 장치의 위치를 등록할 수 있다.
본 개시의 일 실시 예에 따르면, 기 설정된 조건을 만족하는 경우에, 전자 장치의 위치 정보를 외부 전자 장치로부터 수신할 수 있다.
본 개시의 일 실시 예에 따르면, 전자 장치가 외부 전자 장치로부터 위치를 수신하여 외부 전자 장치의 위치를 등록할 수 있다.
도 1a 내지 1c는 일 실시예에 따른 전자 장치의 위치를 등록하는 상황을 설명하는 도면들이다.
도 2는 일 실시예에 따른 전자 장치의 개략적인 블록도이다.
도 3은 일 실시예에 따른 전자 장치가 타 전자 장치로부터 수신된 위치를 등록하는 상황을 설명하는 도면들이다.
도 4는 일 실시예에 따른 전자 장치가 수동으로 전자 장치의 위치를 추가하는 상황을 설명하는 도면들이다.
도 5a 내지 도 5b는 일 실시예에 따른 전자 장치가 위치 등록 후 위치를 이동하는 상황을 설명하는 도면이다.
도 6은 일 실시예에 따른 전자 장치가 등록되지 않은 복수의 외부 전자 장치들을 등록시키는 상황을 설명하는 도면이다.
도 7은 일 실시예에 따른 전자 장치의 개략적인 위치 등록 과정을 설명하는 흐름도이다.
도 8은 다양한 실시예에 따른 전자 장치의 위치 등록 과정을 설명하는 흐름도이다.
도 9는, 다양한 실시예들에 따른, 네트워크 환경내의 전자 장치의 블럭도이다.
이하, 본 개시의 다양한 실시 예가 첨부된 도면을 참조하여 기재된다. 그러나, 이는 본 개시에 기재된 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 개시의 실시 예의 다양한 변경(modifications), 균등물(equivalents), 및/또는 대체물(alternatives)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.
본 개시에서, "가진다", "가질 수 있다", "포함한다", 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.
본 개시에서, "A 또는 B", "A 또는/및 B 중 적어도 하나", 또는 "A 또는/및 B 중 하나 또는 그 이상" 등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들면, "A 또는 B", "A 및 B 중 적어도 하나", 또는 "A 또는 B 중 적어도 하나"는, (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는 (3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다.
본 개시에서 사용된 "제1", "제2", "첫째", 또는 "둘째" 등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다. 예를 들면, 제1 사용자 기기와 제2 사용자 기기는, 순서 또는 중요도와 무관하게, 서로 다른 사용자 기기를 나타낼 수 있다. 예를 들면, 본 개시에 기재된 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 바꾸어 명명될 수 있다.
어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "(기능적으로 또는 통신적으로) 연결되어((operatively or communicatively) coupled with/to)" 있다거나 "접속되어(connected to)" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제3 구성요소)를 통하여 연결될 수 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 다른 구성요소(예: 제3 구성요소)가 존재하지 않는 것으로 이해될 수 있다.
본 개시에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합한(suitable for)", "~하는 능력을 가지는(having the capacity to)", "~하도록 설계된(designed to)", "~하도록 변경된(adapted to)", "~하도록 만들어진(made to)", 또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성된(또는 설정된)"은 하드웨어적으로 "특별히 설계된(specifically designed to)" 것만을 반드시 의미하지 않을 수 있다. 대신, 어떤 상황에서는, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성된(또는 설정된) 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU 또는 application processor)를 의미할 수 있다.
본 개시에서 사용된 용어들은 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 다른 실시 예의 범위를 한정하려는 의도가 아닐 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 용어들은 본 개시에 기재된 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가질 수 있다. 본 개시에 사용된 용어들 중 일반적인 사전에 정의된 용어들은, 관련 기술의 문맥상 가지는 의미와 동일 또는 유사한 의미로 해석될 수 있으며, 본 개시에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다. 경우에 따라서, 본 개시에서 정의된 용어일지라도 본 개시의 실시 예들을 배제하도록 해석될 수 없다.
본 개시의 다양한 실시 예들에 따른 전자 장치는, 예를 들면, 스마트폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 영상 전화기, 전자책 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), 워크스테이션(workstation), 서버, PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device) 중 적어도 하나를 포함할 수 있다. 다양한 실시 예에 따르면, 웨어러블 장치는 액세서리형(예: 시계, 반지, 팔찌, 발찌, 목걸이, 안경, 콘택트 렌즈, 또는 머리 착용형 장치(head-mounted-device(HMD)), 직물 또는 의류 일체형(예: 전자 의복), 신체 부착형(예: 스킨 패드(skin pad) 또는 문신), 또는 생체 이식형(예: implantable circuit) 중 적어도 하나를 포함할 수 있다.
이하, 첨부 도면을 참조하여, 다양한 실시 예에 따른 전자 장치가 설명된다. 본 개시에서, 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다.
도 1a 내지 도 1c는 일 실시예에 따른 전자 장치의 위치를 등록하는 상황을 설명하는 도면들이다.
도 1 a를 참조하면, 전자 장치(10)가 위치하는 공간(1)은 복수 개의 영역들(예를 들면, 거실(1a), 안방(1b), 주방(1c), 제1 작은방(1d), 제2 작은방(1e))로 구분될 수 있다. 상기 공간(1)에는 전자 장치(10) 이외에도 다수의 전자 장치들(예: 제1 외부 전자 장치(110), 제2 외부 전자 장치(120), 또는 제3 외부 전자 장치(130))이 위치할 수 있다.
일 실시예에 따르면, 복수 개의 전자 장치들(10, 110, 120, 또는 130)은 상기 공간(1)에서 서로 통신이 수립된 상태일 수 있다. 예를 들면, 복수 개의 전자 장치들(10, 110, 120, 또는 130)은 제1 네트워크(예를 들면, 블루투스, WiFi direct 또는 IrDA(infrared data association) 같은 근거리 통신 네트워크)를 이용하여 각 전자 장치들(10, 110, 120, 또는 130) 간의 정보를 송수신 할 수 있다.
다양한 실시예에 따르면, 복수 개의 전자 장치들(10, 110, 120, 또는 130)은 제2 네트워크(예: 셀룰러 네트워크, 인터넷, 또는 컴퓨터 네트워크(예: LAN 또는 WAN)와 같은 원거리 통신 네트워크)을 이용하여 클라우드 서버에 연결되어 각 전자 장치들(10, 110, 120, 또는 130) 간의 정보를 송수신 할 수 있다. 이 경우, 클라우드 서버는 각 전자 장치들(10, 110, 120, 또는 130)의 정보를 수집하고 저장하고 관리할 수 있다. 또는, 클라우드 서버는 사용자의 제어에 기반하여 각 전자 장치들(10, 110, 120, 또는 130)을 제어하는 명령을 생성하고 전달할 수 있다. 이하에서는, 복수 개의 전자 장치들(10, 110, 120, 또는 130)이 클라우드 서버에 연결되어 정보를 송수신하는 것을 가정하여 설명한다.
도 1b는 전자 장치(10)가 복수 개의 전자 장치들(110, 120, 또는 130)이 기 등록된 클라우드 서버에 등록되는 과정이다.
도 1b를 참조하면, 전자 장치(10)는 전자 장치를 클라우드 서버에 등록시키는 과정을 실행하는 IoT 어플리케이션을 실행하여 IoT 어플리케이션의 실행 화면(140)을 표시할 수 있다.
일 실시예에 따르면, 전자 장치(10)가 디스플레이를 포함하는 경우, 전자 장치(10)는 디스플레이에 IoT 어플리케이션의 실행 화면(140)을 표시할 수 있다. 다양한 실시예에 따르면, 전자 장치(10)가 디스플레이를 포함하지 않는 경우, 전자 장치(10)는 디스플레이를 포함하는 타 전자 장치를 이용하여 IoT 어플리케이션의 실행 화면을 표시할 수 있다. 예를 들어, 디스플레이가 없는 전자 장치는 먼저 디스플레이가 있는 외부 전자 장치와 통신을 수립하고, 디스플레이가 있는 외부 전자 장치를 이용하여 후술하는 과정을 진행할 수 있다.
IoT 어플리케이션의 실행 화면(140)은, 예를 들면, 전자 장치(10)를 클라우드 서버에 등록시키는 과정을 시작하는 등록 시작 실행 객체(142)를 표시할 수 있다. 전자 장치(10)는 등록 시작 실행 객체(142)를 선택하는 사용자 입력에 대응하여 클라우드 서버 연결 작업을 수행할 수 있다.
일 실시예에 따르면, 전자 장치(10)는 클라우드 서버와의 연결 작업을 진행되고 있음을 알리는 안내문(144)과 진행 경과를 나타내는 객체(146)를 IoT 어플리케이션의 실행 화면(140)에 표시할 수 있다.
전자 장치(10)는, 예를 들면, IoT 어플리케이션의 실행 화면(140)에 안내문(144)과 진행 경과를 나타내는 객체(146)를 표시하면서, 클라우드 서버와 통신을 수립하면서 전자 장치(10)의 정보(예를 들면, 전자 장치의 명칭(또는, ID(identification) 정보), 배터리 정보, 또는 주요 기능에 대한 정보)를 클라우드 서버로 전송할 수 있다. 또한, 전자 장치(10)는, 예를 들면, 클라우드에 기 등록된 타 전자 장치들에 대한 정보를 수신할 수 있다.
일 실시예에 따르면, 전자 장치(10)는 클라우드 서버와의 연결 작업이 완료되었음을 알리는 안내문(148)과 사용자에게 확인을 요청하는 완료 객체(150)를 IoT 어플리케이션의 실행 화면(140)에 표시할 수 있다.
전자 장치(10)는 사용자에게 확인을 요청하는 완료 객체(150)를 선택하는 사용자의 입력에 대응하여 클라우드 서버와의 연결 작업을 종료할 수 있다.
일 실시예에 따르면, 복수 개의 전자 장치들(10, 110, 120, 또는 130)은 하나의 네트워크를 형성하여 사용자에게 서비스(또는, 기능)을 제공할 수 있다. 예를 들어, 사용자는 클라우드 서버와 연결된 인공 지능 스피커(미도시)에게 "제1 작은방(1d)에 있는 공기청정기(예를 들면, 제3 외부 전자 장치(130))를 가동해줘"라고 지시할 수 있다. 이 경우, 인공 지능 스피커는 클라우드 서버를 통해 연결된 제1 작은방(1d)의 공기 청정기를 동작시키는 신호를 전송할 수 있다. 이를 위해, 복수 개의 전자 장치들(10, 110, 120, 또는 130)은 상기 공간(1)에서 각각의 위치를 등록할 필요가 있다.
도 1c를 참조하면, 전자 장치(10)는 제1 외부 전자 장치(110), 및 제2 외부 전자 장치(120)와 오디오 사운드를 이용하여 통신을 수행할 수 있다. 예를 들면, 전자 장치(10)와 외부 전자 장치들(110, 또는 120)은 오디오 사운드를 이용하여 상호 간의 거리를 측정할 수 있다. 또는, 전자 장치(10)와 외부 전자 장치들(110, 또는 120)은 오디오 사운드에 데이터를 포함하여 상호 송수신할 수 있다. 오디오 사운드는, 예를 들면, 인간의 청력으로는 들을 수 없는 비가청 오디오 사운드일 수 있다. 이를 위해, 전자 장치(10), 제1 외부 전자 장치(110), 및 제2 외부 전자 장치(120)는 오디오 사운드를 출력할 수 있는 적어도 하나의 스피커와 오디오 사운드를 수신할 수 있는 적어도 하나의 마이크를 포함할 수 있다.
일 실시예에 따르면, 동작 ①에서, 전자 장치(10)는 스피커를 제어하여, 제1 정보를 포함하는 제1 오디오 사운드를 송출할 수 있다. 제1 정보는, 예를 들면, 전자 장치(10)의 존재를 알리는 메시지(예를 들면, Hello)를 포함할 수 있다.
다양한 실시예에 따르면, 전자 장치(10)는 제1 오디오 사운드를 송출하기 전에 전자 장치의 위치 정보가 기 저장되어 있는지 식별할 수 있다. 예를 들면, 전자 장치(10)는 전자 장치(10)가 부팅되는 경우, 전자 장치(10)의 이동이 감지된 경우, 설정된 주기가 도달한 경우, 또는 사용자의 요청이 있는 경우에 전자 장치의 위치 정보가 기 저장되어 있는지 식별할 수 있다. 전자 장치(10)는 식별 결과, 위치 정보가 기 저장되어 있지 않은 경우에는 제1 오디오 사운드를 송출하여 위치를 등록하는 하기의 과정을 수행할 수 있다. 또한, 전자 장치(10)는 식별 결과, 위치 정보가 기 저장되어 있는 경우에는 제1 오디오 사운드를 송출하지 않을 수 있다.
전자 장치(10)는, 예를 들면, 정보를 변조(modulation)하여 오디오 사운드에 포함시켜 송출할 수 있다. 변조 방식은, 예를 들면, 진폭 편이 변조 방식(amplitude shift keying: ASK), 주파수 변이 변조 방식(frequency shift keying: FSK), 또는 위상 편이 변조 방식(phase shift keying: PSK) 중 적어도 하나의 방법을 이용할 수 있다.
다양한 실시예에 따르면, 전자 장치(10)는 논문으로 발표된 "Beepbeep: A High Accuracy Acoustic Ranging System using COTS Mobile Devices"의 기술을 이용하여 외부 전자 장치들(110, 또는 120)과 오디오 사운드를 이용한 통신을 수행할 수 있다.
일 실시예에 따르면, 동작 ②에서, 전자 장치(10)는 마이크를 제어하여, 제1 외부 전자 장치(110)로부터 제1 정보에 응답하는 제2 정보를 포함하는 제2 오디오 사운드를 수신할 수 있다. 제1 외부 전자 장치(110)는 전자 장치(10)가 위치하는 공간(1)에 이미 위치하고 있는 전자 장치일 수 있다. 제1 외부 전자 장치(110)는, 예를 들면, 자신이 위치하고 장소에 대한 정보를 저장하고 있는 상태일 수 있다. 제1 외부 전자 장치(110)로부터 수신된 제2 오디오 사운드에 포함된 제2 정보는, 제1 외부 전자 장치(110)의 고유한 식별 번호(또는, ID(identification))를 포함할 수 있다.
일 실시예에 따르면, 동작 ③에서, 전자 장치(10)는 제2 오디오 사운드를 수신한 후, 제1 외부 전자 장치(110)와의 거리를 식별하기 위한 제3 정보를 포함하는 제3 오디오 사운드를 스피커를 통해 송출할 수 있다. 제3 정보는, 예를 들면, 시간 정보를 포함할 수 있다.
일 실시예에 따르면, 동작 ④에서, 전자 장치(10)는 제1 외부 전자 장치(110)로부터 제3 정보에 응답하는 제4 정보를 포함하는 제4 오디오 사운드를 마이크를 통해 수신할 수 있다. 제4 정보는, 예를 들면, 시간 정보를 포함할 수 있다.
일 실시예에 따르면, 전자 장치(10)는 제3 정보 및/또는 제4 정보에 기반하여 제1 외부 전자 장치(110)와의 거리를 획득할 수 있다.
예를 들면, 전자 장치(10)는 지연 시간을 측정할 수 있다. 지연 시간은, 예를 들면, 전자 장치(10)가 스피커를 이용하여 제3 오디오 사운드를 송출하기까지 소요되는 신호 처리 시간을 포함할 수 있다. 지연 시간은, 예를 들면, 전자 장치(10)가 마이크를 이용하여 제4 오디오 사운드를 수신하기까지 소요되는 신호 처리 시간을 포함할 수 있다. 지연 시간은 스피커와 마이크 간의 시간 동기 오차를 포함할 수 있다.
예를 들면, 전자 장치(10)는 제3 오디오 사운드를 송출하기 위한 명령을 수행하고, 사운드 카드 또는 디지털 아날로그 변환기로부터 스피커가 신호를 전달 받아서 제3 오디오 사운드를 송출하기까지 소요되는 지연 시간 및 사운드 카드 또는 디지털 아날로그 변환을 통하여 제4 오디오 사운드를 수신하기까지 소요되는 지연 시간을 측정할 수 있다.
일 실시예에 따르면, 전자 장치(10)는 위상값을 획득할 수 있다. 전자 장치(10)는 수신된 제4 오디오 사운드에 대응하는 적어도 하나 이상의 주파수의 위상값을 획득할 수 있다. 예를 들어, 전자 장치(10)는 수신된 제4 오디오 사운드에 대응하는 사인 함수 행렬 및 코사인 함수 행렬을 생성하고, 코사인 함수 행렬에 대응하는 계수를 사인 함수 행렬에 대응하는 계수로 나눔으로써, 제4 오디오 사운드에 대응하는 적어도 하나 이상의 주파수의 위상값을 획득할 수 있다.
다양한 실시예에 따르면, 전자 장치(10)는 복수 개의 스피커들과 복수 개의 마이크들을 포함할 수 있다. 이 경우, 전자 장치(10)는 하나의 스피커에서 송출한 오디오 사운드에 대응하는 주파수의 위상값을 획득하고, 다른 하나의 스피커에서 송출한 오디오 사운드에 대응하는 주파수의 위상값을 획득하고, 각 위상값의 차이값을 획득할 수 있다. 이 경우, 전자 장치(10)는 획득한 차이값에 대응하는 위상값을 획득할 수 있다.
일 실시예에 따르면, 전자 장치(10)는 제1 외부 전자 장치(110)와의 거리를 획득할 수 있다. 전자 장치(10)는 획득한 위상값에 기초하여 거리를 획득할 수 있다.
예를 들면, 전자 장치(10)는 획득한 위상값과 스피커를 이용하여 제3 오디오 사운드가 송신된 후, 마이크를 통하여 제4 오디오 사운드가 수신되는 상황에서, 제3 오디오 사운드와 제4 오디오 사운드의 진동 횟수에 기초하여 제1 외부 전자 장치(110)와의 거리를 획득할 수 있다.
일 실시예에 따르면, 동작 ⑤에서, 전자 장치(10)는 획득된 거리가 지정된 거리 이내인 경우, 제5 정보를 포함하는 제5 오디오 사운드를, 스피커를 통해, 제1 외부 전자 장치(110)로 송출할 수 있다. 제5 정보는, 예를 들면, 제1 외부 전자 장치(110)의 위치 정보를 문의하는 내용을 포함할 수 있다.
다양한 실시예에 따르면, 지정된 거리는 전자 장치(10)가 송출하는 제1 오디오 사운드의 세기에 기반하여 결정될 수 있다. 예를 들어, 제1 오디오 사운드의 세기가 강하면, 지정된 거리는 늘어날 수 있고, 제1 오디오 사운드의 세기가 약하면, 지정된 거리를 줄어들 수 있다.
일 실시예에 따르면, 동작 ⑥에서, 전자 장치(10)는 제5 정보에 응답하는 제6 정보를 포함하는 제6 오디오 사운드를 마이크를 통해 수신할 수 있다. 제6 정보는, 예를 들면, 제1 외부 전자 장치(110)의 위치 정보에 대한 내용을 포함할 수 있다.
일 실시예에 따르면, 전자 장치(10)는 제6 정보에 기반하여 전자 장치(10)의 위치를 등록할 수 있다.
도 1c를 참조하면, 전자 장치(10)는 제2 외부 전자 장치(120)와 오디오 사운드를 송수신하여 전자 장치(10)의 위치를 등록할 수 있다.
일 실시예에 따르면, 동작 ①에서, 전자 장치(10)는 스피커를 제어하여, 제1 정보를 포함하는 제1 오디오 사운드를 송출할 수 있다. 제1 정보는, 예를 들면, 전자 장치(10)의 존재를 알리는 메시지(예를 들면, Hello)를 포함할 수 있다.
일 실시예에 따르면, 동작 ⑦에서, 전자 장치(10)는 마이크를 제어하여, 제2 외부 전자 장치(120)로부터 제1 정보에 응답하는 제7 정보를 포함하는 제7 오디오 사운드를 수신할 수 있다. 제2 외부 전자 장치(120)는 전자 장치(10)가 위치하는 공간(1)에 이미 위치하고 있는 또 다른 전자 장치일 수 있다. 제2 외부 전자 장치(120)는, 예를 들면, 자신이 위치하고 장소에 대한 정보를 저장하고 있는 상태일 수 있다. 제2 외부 전자 장치(120)로부터 수신된 제7 오디오 사운드에 포함된 제7 정보는, 제2 외부 전자 장치(120)의 고유한 식별 번호(또는, ID(identification))를 포함할 수 있다.
일 실시예에 따르면, 동작 ⑧에서, 전자 장치(10)는 제7 오디오 사운드를 수신한 후, 제2 외부 전자 장치(120)와의 거리를 식별하기 위한 제8 정보를 포함하는 제8 오디오 사운드를 스피커를 통해 송출할 수 있다. 제8 정보는, 예를 들면, 시간 정보를 포함할 수 있다.
일 실시예에 따르면, 동작 ⑨에서, 전자 장치(10)는 제2 외부 전자 장치(120)로부터 제8 정보에 응답하는 제9 정보를 포함하는 제9 오디오 사운드를 마이크를 통해 수신할 수 있다. 제9 정보는, 예를 들면, 시간 정보를 포함할 수 있다.
일 실시예에 따르면, 전자 장치(10)는 제8 정보 및/또는 제9 정보에 기반하여 제2 외부 전자 장치(120)와의 거리를 획득할 수 있다. 예를 들면, 전자 장치(10)는 상술한 제3 정보 및/또는 제4 정보에 기반하여 제1 외부 전자 장치(110)와의 거리를 획득한 것과 동일하게 제8 정보 및/또는 제9 정보에 기반하여 제2 외부 장치(120)와의 거리를 획득할 수 있다.
일 실시예에 따르면, 동작 ⑩에서, 전자 장치(10)는 획득된 거리가 지정된 거리 이내인 경우, 제10 정보를 포함하는 제10 오디오 사운드를, 상기 스피커를 통해, 제2 외부 전자 장치(120)로 송출할 수 있다. 제10 정보는, 예를 들면, 제2 외부 전자 장치(120)의 위치 정보를 문의하는 내용을 포함할 수 있다.
일 실시예에 따르면, 동작 ⑪에서, 전자 장치(10)는 제10 정보에 응답하는 제11 정보를 포함하는 제11 오디오 사운드를 마이크를 통해 수신할 수 있다. 제11 정보는, 예를 들면, 제2 외부 전자 장치(120)의 위치 정보에 대한 내용을 포함할 수 있다.
일 실시예에 따르면, 전자 장치(10)는 제11 정보에 기반하여 전자 장치(10)의 위치를 등록할 수 있다.
다양한 실시예에 따르면, 전자 장치(10)는 제1 외부 전자 장치(110)와 연관하여 수행하는 동작(예: 동작 ①, 동작 ②, 동작 ③, 동작 ④, 동작 ⑤ 및 동작 ⑥)과 제2 외부 전자 장치(120)와 수행하는 동작(예: 동작 ①, 동작 ⑦, 동작 ⑧, 동작 ⑨, 동작 ⑩ 및 동작 ⑪)을 동시에 또는 병렬적으로 수행할 수 있다.
다양한 실시예에 따르면, 전자 장치(10)는 전자 장치의 존재를 알리는 메시지를 포함하는 오디오 사운드, 시간 정보를 포함하는 오디오 사운드, 또는 외부 전자 장치의 위치 정보를 문의하는 내용을 포함하는 오디오 사운드 중 적어도 일부는 병합할 수 있다.
이와 같이, 본 개시의 일 실시예에 따르면, 전자 장치(10)는 클라우드 서버에 기 등록된 외부 전자 장치들(110, 또는 120)을 이용하여 등록하고자 하는 위치를 추천 받을 수 있다.
도 2는 일 실시예에 따른 전자 장치의 개략적인 블록도이다.
도 2를 참조하면, 전자 장치(10)는 프로세서(210), 마이크(220), 스피커(230), 및 메모리(240)를 포함할 수 있다. 그러나 이에 한정되는 것은 아니다. 전자 장치(10)는 복수 개의 구성 요소들을 더 포함하거나, 또는 구성 요소 중 적어도 하나를 제외 할 수 있다. 예를 들어, 전자 장치(10)는 디스플레이(250), 및/또는 무선 통신 모듈(260)을 더 포함할 수 있다.
일 실시예에 따르면, 프로세서(210)는 전자 장치(10)의 전반적인 동작을 제어할 수 있다. 예를 들면, 프로세서(210)는 메모리(240)를 제어하여 메모리(240)에 저장된 프로그램을 실행시키고, 필요한 정보를 불러오거나 저장할 수 있다.
일 실시예에 따르면, 프로세서(210)는 스피커(230)를 통해, 제1 정보를 포함하는 제1 오디오 사운드를 송출하고, 마이크(220)를 통해, 제1 외부 전자 장치(예: 도 1a의 제1 외부 전자 장치(110))로부터 제1 정보에 응답하는 제2 정보를 포함하는 제2 오디오 사운드를 수신하고, 제2 오디오 사운드를 수신한 후, 제1 외부 전자 장치(110)와의 거리를 식별하기 위한 제3 정보를 포함하는 제3 오디오 사운드를 스피커(230)를 통해 송출하고, 제1 외부 전자 장치(110)로부터 제3 정보에 응답하는 제4 정보를 포함하는 제4 오디오 사운드를 마이크(220)를 통해 수신하고, 제3 정보 및/또는 제4 정보에 기반하여 제1 외부 전자 장치(110)와의 거리를 획득하고, 획득된 거리가 지정된 거리 이내인 경우, 제5 정보를 포함하는 제5 오디오 사운드를, 스피커(230)를 통해, 제1 외부 전자 장치(110)로 송출하고, 제5 정보에 응답하는 제6 정보를 포함하는 제6 오디오 사운드를 마이크(220)를 통해 수신하고, 제6 정보에 기반하여 상기 전자 장치(10)의 위치를 등록할 수 있다.
일 실시예에 따르면, 마이크(220)는 음파에 의해 진동하고 기계적 진동을 전기신호로 변환시키는 소자에 의해 전자 장치(10)의 주변에서 발생하는 소리(예를 들면, 오디오 사운드)를 획득할 수 있다. 예를 들면, 마이크(220)는 프로세서(210)의 제어에 따라 제1 외부 전자 장치(110) 및 제2 외부 전자 장치(예: 도 1a의 제2 외부 전자 장치(120))로부터 오디오 사운드를 수신할 수 있다
일 실시예에 따르면, 스피커(230)는 전기 신호를 진동판의 진동으로 변경하여 공기에 파형을 발생시켜 음파를 복사할 수 있다. 예를 들면, 스피커(230)는 프로세서(210)의 제어에 따라 제1 외부 전자 장치(110) 및 제2 외부 전자 장치(120)를 향하여 음파를 송출할 수 있다.
일 실시예에 따르면, 메모리(240)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다.
일 실시예에 따르면 메모리(240)는 스피커(230)를 통해, 제1 정보를 포함하는 제1 오디오 사운드를 송출하고, 마이크(220)를 통해, 제1 외부 전자 장치(110)로부터 제1 정보에 응답하는 제2 정보를 포함하는 제2 오디오 사운드를 수신하고, 제2 오디오 사운드를 수신한 후, 제1 외부 전자 장치(110)와의 거리를 식별하기 위한 제3 정보를 포함하는 제3 오디오 사운드를 스피커(230)를 통해 송출하고, 제1 외부 전자 장치(110)로부터 제3 정보에 응답하는 제4 정보를 포함하는 제4 오디오 사운드를 마이크(220)를 통해 수신하고, 제3 정보 및/또는 제4 정보에 기반하여 제1 외부 전자 장치(110)와의 거리를 획득하고, 획득된 거리가 지정된 거리 이내인 경우, 제5 정보를 포함하는 제5 오디오 사운드를, 스피커(230)를 통해, 제1 외부 전자 장치(110)로 송출하고, 제5 정보에 응답하는 제6 정보를 포함하는 제6 오디오 사운드를 마이크(220)를 통해 수신하고, 제6 정보에 기반하여 상기 전자 장치(10)의 위치를 등록하도록 설정된 명령어들을 저장할 수 있다.
일 실시예에 따르면, 디스플레이(250)는 이미지, 비디오, 또는 어플리케이션 프로그램의 실행 화면을 표시할 수 있다. 디스플레이(250)는 터치 입력을 획득하는 터치 스크린 디스플레이를 포함할 수 있다. 디스플레이(250)는, 예를 들면, 사용자의 터치 입력을 감지하여 센싱값을 획득할 수 있다. 프로세서(210)는 디스플레이(250)가 획득한 센싱값을 이용하여 피드백을 출력할 수 있다.
일 실시예에 따르면, 통신 모듈(260)은 프로세서(210)의 제어에 의해 전자 장치(10)를 제1 외부 전자 장치(110) 및 제2 외부 전자 장치(120)를 포함하는 타 전자 장치들과 연결할 수 있다. 통신 모듈(260)는 전자 장치(10)의 성능 및 구조에 대응하여 무선 랜, 블루투스, 및 유선 이더넷(Ethernet)과 같이 다양한 유선 또는 무선 통신 방법을 구현하는 구성 요소들 중 하나를 포함할 수 있다.
도 3은 일 실시예에 따른 전자 장치가 타 전자 장치로부터 수신된 위치를 등록하는 상황을 설명하는 도면들이다.
도 3의 (a)를 참조하면, 전자 장치(10)는 전자 장치(10)의 위치를 등록하는 사용자 인터페이스를 포함하는 IoT 어플리케이션의 실행 화면(340)을 표시할 수 있다. 위치를 등록하는 실행하는 IoT 어플리케이션의 실행 화면(340)은, 예를 들면, 도 1에서 설명한, 전자 장치(10)의 클라우드 서버 등록과정이 종료된 후 진행될 수 있다. 도 1에서 상술한 바와 같이, 전자 장치(10)는 주변에 기 등록된 외부 전자 장치들(예: 제1 외부 전자 장치(110) 또는 제2 외부 전자 장치(120))로부터 위치 정보를 수신하여 위치를 등록할 수 있다.
일 실시예에 따르면, 전자 장치(10)는 위치 등록 받는 기능을 실행하는 실행 객체(310)를 선택하는 사용자 입력에 대응하여 주변에 위치한 외부 전자 장치와 오디오 사운드를 이용하여 위치 등록 과정을 진행할 수 있다.
예를 들면, 전자 장치(10)는 전자 장치의 존재를 알리는 정보를 포함하는 제1 오디오 사운드를 송출하고, 전자 장치의 존재를 알리는 정보에 대응하여 외부 전자 장치의 식별 정보를 포함하는 제2 오디오 사운드를 외부 전자 장치로부터 수신할 수 있다.
전자 장치(10)는 제2 오디오 사운드가 수신되면, 외부 전자 장치와의 거리를 획득하기 위해 시간 정보를 포함하는 제3 오디오 사운드를 송출하고, 시간 정보를 포함하는 제3 오디오 사운드에 대응하여 시간 정보를 포함하는 제4 오디오 사운드를 외부 전자 장치로부터 수신할 수 있다.
전자 장치(10)는 시간 정보들을 이용하여 외부 전자 장치와의 거리를 획득하고, 거리가 지정된 거리 이내인 경우에. 위치 정보 문의를 포함하는 제5 오디오 사운드를 외부 전자 장치로 송출하고, 위치 정보 문의에 대한 답변을 포함하는 제6 오디오 사운드를 외부 전자 장치로부터 수신할 수 있다.
전자 장치(10)는 수신된 위치 정보에 기반하여 전자 장치(10)의 위치를 등록하도록 안내할 수 있다.
도 3의 (b)를 참조하면, 전자 장치(10)는 IoT 어플리케이션의 실행 화면(340)에 외부 전자 장치로부터 수신된 위치를 표시할 수 있다. 일 실시예에 따르면, 전자 장치(10)는 외부 전자 장치와 전자 장치(10)의 거리에 비례하여 외부 전자 장치로부터 수신된 위치 정보를 표시할 수 있다. 예를 들면, 전자 장치(10)는 전자 장치(10)와 거리가 가장 가까운 제1 외부 전자 장치(110)로부터 수신한 위치 정보인 거실(321)을 가장 위에 표시할 수 있다. 그리고, 전자 장치(10)는 전자 장치(10)와의 거리에 따라서 주방(322), 제1 작은방(323)을 표시할 수 있다.
일 실시예에 따르면, 전자 장치(10)는 외부 전자 장치와 전자 장치(10)의 거리가 지정된 거리 이내에 있지 않으면, 해당 외부 전자 장치로부터는 위치 정보를 수신하지 않을 수 있다. 예를 들어, 전자 장치(10)는 도 1의 (a)에서 제2 작은방에 있는 제3 외부 전자 장치(130)와의 거리가 지정된 거리(예를 들면, 3 ~ 4m) 이내에 속하지 않아, 제3 외부 전자 장치(130)에게는 위치 정보를 요청하지 않을 수 있다. 결과적으로, 전자 장치(10)는 IoT 어플리케이션의 실행 화면(340)에 제2 작은방은 표시하지 않을 수 있다.
다양한 실시예에 따르면, 전자 장치(10)는 외부 전자 장치로부터 오디오 사운드를 수신하지 못한 경우에, 해당 외부 전자 장치가 놓여져 있는 위치 정보를 표시하지 않을 수 있다. 예를 들어, 전자 장치(10)는 도 1의 (a)에서 제2 작은방에 있는 제3 외부 전자 장치(130)로부터 오디오 사운드를 수신하지 못할 수 있다. 결과적으로, 전자 장치(10)는 IoT 어플리케이션의 실행 화면(340)에 제2 작은방은 표시하지 않을 수 있다.
일 실시예에 따르면, 전자 장치(10)는 IoT 어플리케이션의 실행 화면(340)에 전자 장치(10)의 위치를 새롭게 추가하는 위치 추가 객체(324)를 표시할 수 있다. 사용자가 위치 추가 객체(324)를 선택하는 경우, 전자 장치(10)는 외부 전자 장치로부터 수신된 위치가 아니라 새롭게 전자 장치(10)의 위치를 추가할 수 있다.
도 3의 (c)를 참조하면, 전자 장치(10)는 거실(321)을 선택하는 사용자 입력에 대응하여 거실(321)을 전자 장치(10)의 위치로 등록할 수 있다. 일 실시예에 따르면, 전자 장치(10)는 IoT 어플리케이션의 실행 화면(340)에 기 등록된 외부 전자 장치들과 외부 전자 장치들의 위치에 대한 리스트(330)를 함께 표시할 수 있다.
도 4는 일 실시예에 따른 전자 장치가 수동으로 전자 장치의 위치를 추가하는 상황을 설명하는 도면들이다.
일 실시예에 따르면, 전자 장치(10)는 전자 장치(10)의 사용자가 직접 위치를 등록하는 IoT 어플리케이션의 실행 화면(440)을 표시할 수 있다. 전자 장치(10)는, 예를 들면, 도 3에서 상술한 위치 추가 객체(324)를 선택하는 사용자 입력에 대응하여 사용자가 직접 위치를 등록하는 사용자 인터페이스를 IoT 어플리케이션의 실행 화면(440)에 표시할 수 있다.
도 4의 (a)를 참조하면, 전자 장치(10)는 전자 장치(10)가 위치하는 영역의 이름을 입력할 수 있는 위치 입력 객체(410)를 표시할 수 있다.
도 4의 (b)를 참조하면, 전자 장치(10)는 위치 입력 객체(410)를 선택하는 사용자 입력에 대응하여 기 저장된 위치 리스트(420)를 IoT 어플리케이션의 실행 화면(440)에 표시할 수 있다. 예를 들면, 전자 장치(10)는 과거에 다른 전자 장치를 클라우드 서버에 등록하면서 저장되었던 영역들을 위치 리스트(420)로 표시할 수 있다.
다양한 실시예에 따르면, 전자 장치(10)는 IoT 어플리케이션 실행 화면(440)에 전자 장치가 위치할 수 있는 영역들의 이름을 사용자가 직접 추가할 수 있는 위치 이름 추가 객체(430)를 표시할 수 있다. 사용자는 위치 이름 추가 객체(330)를 선택하여 전자 장치가 위치할 수 있는 영역들의 이름을 추가할 수 있다.
도 5a 내지 도 5b는 일 실시예에 따른 전자 장치가 위치 등록 후 위치를 이동하는 상황을 설명하는 도면이다.
일 실시예에 따르면, 전자 장치(10)는 전원이 종료되었다가 다시 켜지는 경우에 오디오 사운드를 송출하여 주변 상황이 변경되었는지 식별할 수 있다. 또는 전자 장치(10)는 설정된 기간마다 오디오 사운드를 송출하여 주변 상황이 변경되었는지 식별할 수 있다.
도 5a를 참조하면, 전자 장치(10)는 A 위치에서 B위치로 이동할 수 있다. 상술한 바와 같이 전자 장치(10)는 이동하면서 전원이 종료 되었다가 다시 켜지거나 또는 설정된 기간이 도래하는 경우에 오디오 사운드를 송출하여 주변 상황이 변경되었는지 식별할 수 있다.
예를 들면, 전자 장치(10)는 전자 장치(10)의 존재를 알리는 정보를 포함하는 제1 오디오 사운드를 송출할 수 있다. 전자 장치(10)는 제1 오디오 사운드에 대응하여 제1 외부 전자 장치(110)의 식별 정보를 포함하는 제2 오디오 사운드를 제1 외부 전자 장치(110)로부터 수신할 수 있다.
전자 장치(10)는 제2 오디오 사운드를 수신한 후, 제1 외부 전자 장치(110)와의 거리를 획득하기 위해 시간 정보를 포함하는 제3 오디오 사운드를 송출할 수 있다. 전자 장치(10)는 제1 외부 전자 장치(110)로부터 시간 정보를 포함하는 제3 오디오 사운드에 대응하여 시간 정보를 포함하는 제4 오디오 사운드를 제1 외부 전자 장치(110)로부터 수신할 수 있다.
전자 장치(10)는 송출한 시간 정보 및 수신된 시간 정보를 이용하여 제1 외부 전자 장치(110)와의 거리를 획득할 수 있다. 전자 장치(10)는 제1 외부 전자 장치(110)와의 거리가 지정된 거리 이내에 포함되지 않는 것을 식별할 수 있다. 이로 인해, 전자 장치(10)는 제1 외부 전자 장치(110)의 위치 정보를 문의하는 오디오 사운드를 송출하지 않을 수 있다.
일 실시예에 따르면, 전자 장치(10)는 제1 오디오 사운드에 대응하여 제2 외부 전자 장치(120)의 식별 정보를 포함하는 제7 오디오 사운드를 제2 외부 전자 장치(120)로부터 수신할 수 있다.
전자 장치(10)는 제7 오디오 사운드를 수신한 후, 제2 외부 전자 장치(120)와의 거리를 획득하기 위해 시간 정보를 포함하는 제8 오디오 사운드를 송출할 수 있다. 전자 장치(10)는 제2 외부 전자 장치(120)로부터 시간 정보를 포함하는 제8 오디오 사운드에 대응하여 시간 정보를 포함하는 제9 오디오 사운드를 제2 외부 전자 장치(120)로부터 수신할 수 있다.
전자 장치(10)는 송출한 시간 정보 및 수신된 시간 정보를 이용하여 제2 외부 전자 장치(120)와의 거리를 획득할 수 있다. 전자 장치(10)는 제2 외부 전자 장치(120)와의 거리가 지정된 거리 이내에 포함되는 것을 식별할 수 있다.
전자 장치(10)는 위치 정보를 문의하는 제10 오디오 사운드를 제2 외부 전자 장치(120)로 송출할 수 있다. 전자 장치(10)는 위치 정보를 문의하는 제10 오디오 사운드에 대한 답변을 포함하는 제11 오디오 사운드를 제2 외부 전자 장치(120)로부터 수신할 수 있다.
도 5b를 참조하면, 전자 장치(10)는 IoT 어플리케이션의 실행 화면(540)에 외부 전자 장치로부터 수신된 위치를 표시할 수 있다. 일 실시예에 따르면, 전자 장치(10)는 외부 전자 장치와 전자 장치(10)의 거리에 비례하여 외부 전자 장치들로부터 수신된 위치 정보(510)를 표시할 수 있다. 예를 들면, 전자 장치(10)는 전자 장치(10)와 거리가 가장 가까운 제2 외부 전자 장치(120)로부터 수신한 위치 정보인 주방(511)을 가장 위에 표시할 수 있다.
또한, 전자 장치(10)는 도 5a에서 전자 장치(10)와 제2 외부 전자 장치(120)와 오디오 사운드를 송수신하면서 제2 외부 전자 장치(120)의 위치 정보를 획득한 것과 동일한 동작을 제3 외부 전자 장치(130)와 수행할 수 있다. 그 결과, 전자 장치(10)는 제3 외부 전자 장치(130)로부터 수신한 위치 정보인 제1 작은방(512)을 주방(511)에 이어서 표시할 수 있다.
도 5a에서 상술한 바와 같이, 전자 장치(10)는 외부 전자 장치와 전자 장치(10)의 거리가 지정된 거리 이내에 있지 않으면, 해당 외부 전자 장치로부터는 위치 정보를 수신하지 않을 수 있다. 예를 들면, 전자 장치(10)는 제1 외부 전자 장치(110)와의 거리가 지정된 거리를 초과하는 것으로 식별하고, 제1 외부 전자 장치(110)로부터는 위치 정보를 수신하지 않을 수 있다. 따라서, 전자 장치(10)는 IoT 어플리케이션의 실행 화면(140)와 제1 외부 전자 장치(110)가 위치한 거실은 표시하지 않을 수 있다.
이와 같이, 본 개시의 일 실시예에 따르면, 전자 장치(10)는 주기적으로 또는 설정된 조건에 따라서 오디오 사운드를 주변에 송출하여 변경된 주변 상황을 식별할 수 있다. 이로 인해, 사용자는 전자 장치(10)의 위치를 변경하여도 용이하게 변경된 위치를 등록할 수 있다.
도 6은 일 실시예에 따른 전자 장치가 등록되지 않은 복수의 외부 전자 장치들을 등록시키는 상황을 설명하는 도면이다.
일 실시예에 따르면, 전자 장치(10)는 전원이 종료되었다가 다시 켜지는 경우에 오디오 사운드를 송출하여 주변 상황이 변경되었는지 식별할 수 있다. 또는 전자 장치(10)는 설정된 기간마다 오디오 사운드를 송출하여 주변 상황이 변경되었는지 식별할 수 있다.
도 6의 (a)를 참조하면, 전자 장치(10)는 IoT 어플리케이션의 실행 화면(640)을 이용하여 전자 장치(10)의 주변에서 등록되지 않은 외부 전자 장치들을 발견했음을 사용자에게 안내할 수 있다. 예를 들면, 전자 장치(10)는 전자 장치(10)의 존재를 알리는 정보를 포함하는 오디오 사운드를 송출하고, 외부 전자 장치로부터 전자 장치(10)의 존재를 알리는 정보에 응답하여 외부 전자 장치의 식별 정보를 포함하는 오디오 사운드를 수신하여 등록되지 않은 외부 전자 장치를 발견할 수 있다. 일 실시예에 따르면, 전자 장치(10)는 주변에 있는 적어도 하나의 외부 전자 장치들의 목록을 관리하거나 외부 서버로부터 목록을 수신할 수 있다. 예를 들어, 목록에 포함되지 않는 외부 전자 장치로부터 오디오 사운드를 수신하는 경우, 전자 장치(10)는 등록되지 않은 외부 전자 장치가 존재한다고 판단할 수 있다. 다양한 실시예에 따르면, 전자 장치(10)는 새로운 전자 장치들을 발견했음을 사용자에게 안내하면서 발견된 외부 전자 장치의 개수를 숫자(611)로 표시할 수 있다.
일 실시예에 따르면, 전자 장치(10)는 IoT 어플리케이션의 실행 화면(640)에 발견된 외부 전자 장치에 대한 등록을 진행하는 새 장치 위치 등록 실행 객체(610)를 표시할 수 있다. 전자 장치(10)는 새 장치 위치 등록 실행 객체(610)를 선택하는 사용자 입력에 대응하여 발견된 외부 전자 장치에 대한 등록 과정을 진행할 수 있다. 즉, 사용자는 전자 장치(10)를 이용하여 아직 클라우드에 등록되지 않은 외부 전자 장치에 대한 등록 과정을 진행할 수 있다.
예를 들면, 전자 장치(10)는 거리를 획득하기 위한 시간 정보를 포함하는 오디오 사운드를 송출할 수 있다. 전자 장치(10)는 적어도 하나의 외부 전자 장치로부터 거리를 획득하기 위한 시간 정보를 포함하는 오디오 사운드에 대응하여 시간 정보를 포함하는 오디오 사운드를 적어도 하나의 외부 전자 장치로부터 수신할 수 있다. 전자 장치(10)는 송출한 시간 정보와 수신한 시간 정보에 기반하여 외부 전자 장치들과 전자 장치의 거리를 획득할 수 있다.
도 6의 (b) 내지 도 6의 (c)를 참조하면, 전자 장치(10)는 발견된 적어도 하나의 외부 전자 장치에 대하여 순차적으로 등록 과정을 수행할 수 있다.
도 6의 (b)를 참조하면, 전자 장치(10)는 IoT 어플리케이션의 실행 화면(640)을 이용하여 외부 전자 장치(예를 들면, 식별 정보 SM-001)의 위치를 등록할 수 있다. 예를 들어, 전자 장치(10)는 SM-001이 등록할 수 있는 위치 리스트(620)를 IoT 어플리케이션의 실행 화면(640)에 표시할 수 있다. 위치 리스트는(620)는, 예를 들면, 전자 장치(10)가 기 저장하고 있는 위치 정보를 이용하여 제공될 수 있다. 다른 예를 들어, 전자 장치(10)는 현재 전자 장치(10)가 위치한 위치 정보를 기 등록된 외부 전자 장치(예: 제1 외부 전자 장치(110) 또는 제2 외부 전자 장치(120))로부터 수신하고, 수신된 정보에 기반하여 위치 리스트(620)를 제공할 수 있다. 전자 장치(10)는 적어도 하나의 위치를 선택하는 사용자 입력에 대응하여 외부 전자 장치(예를 들면, 식별 정보 SM-001)의 위치를 등록할 수 있다.
도 6의 (c)를 참조하면, 전자 장치(10)는 IoT 어플리케이션의 실행 화면(640)을 이용하여 외부 전자 장치(예를 들면, 식별 정보 SD-003)의 위치를 등록할 수 있다. 예를 들어, 전자 장치(10)는 SD-003이 등록할 수 있는 위치 리스트(630)를 IoT 어플리케이션의 실행 화면(640)에 표시할 수 있다. 위치 리스트는(630)는, 예를 들면, 전자 장치(10)가 기 저장하고 있는 위치 정보 또는 기 등록된 외부 전자 장치로부터 수신된 정보를 이용하여 제공될 수 있다. 전자 장치(10)는 적어도 하나의 위치를 선택하는 사용자 입력에 대응하여 외부 전자 장치(예를 들면, 식별 정보 SD-003)의 위치를 등록할 수 있다.
이와 같이, 본 개시의 일 실시예에 따르면, 전자 장치(10)는 등록되지 않은 복수 개의 외부 전자 장치들을 용이하게 등록할 수 있다.
도 7은 일 실시예에 따른 전자 장치의 개략적인 위치 등록 과정을 설명하는 흐름도이다.
동작 710을 참조하면, 전자 장치(10)는 스피커(230)를 통하여, 오디오 사운드를 송출할 수 있다. 예를 들어, 전자 장치(10)는 전자 장치(10)의 위치 정보가 등록되지 않은 경우, 위치 등록을 위한 오디오 사운드를 스피커(230)를 통하여 송출할 수 있다.
동작 720을 참조하면, 전자 장치(10)는 외부 전자 장치로부터 응답이 있는지 확인할 수 있다.
예를 들면, 전자 장치(10)는 전자 장치(10)의 존재를 알리는 정보를 포함하는 오디오 사운드를 송출하고, 외부 전자 장치(예: 제1 외부 전자 장치(110) 또는 제2 외부 전자 장치(120))로부터 전자 장치(10)의 존재를 알리는 정보에 응답하여 외부 전자 장치의 식별 정보를 포함하는 오디오 사운드를 마이크(220)를 통해 수신할 수 있다.
동작 730을 참조하면, 외부 전자 장치로부터 응답이 있는 경우, 전자 장치(10)는 외부 전자 장치로부터 위치 정보를 획득할 수 있다.
예를 들면, 전자 장치(10)는 거리를 획득하기 위한 시간 정보를 포함하는 오디오 사운드를 송출할 수 있다. 전자 장치(10)는 거리를 획득하기 위한 시간 정보를 포함하는 오디오 사운드에 대응하여 시간 정보를 포함하는 오디오 사운드를 외부 전자 장치들로부터 수신할 수 있다. 전자 장치(10)는 송출한 시간 정보와 수신한 시간 정보에 기반하여 외부 전자 장치들과 전자 장치의 거리를 획득할 수 있다.
전자 장치(10)는 획득된 거리가 지정된 거리 이내인 경우에, 위치 정보를 문의하는 오디오 사운드를 송출할 수 있다. 전자 장치(10)는 위치 정보 문의에 대한 응답으로 위치 정보를 포함하는 오디오 사운드를 외부 전자 장치들로부터 수신할 수 있다.
동작 740을 참조하면, 전자 장치(10)는 획득한 위치 정보에 대한 사용자의 확인을 식별할 수 있다.
예를 들면, 전자 장치(10)는 외부 전자 장치들로부터 수신된 오디오 사운드에 기반하여 획득된 적어도 하나 이상의 위치 정보를 사용자에게 제공할 수 있다.
동작 750을 참조하면, 사용자의 확인이 식별된 경우에, 전자 장치(10)는 수신된 위치 정보에 기반하여 전자 장치(10)의 위치를 등록할 수 있다.
예를 들면, 전자 장치(10)는 수신된 적어도 하나 이상의 위치 중 하나를 선택하는 사용자 입력에 대응하여 전자 장치(10)의 위치를 등록할 수 있다.
동작 760을 참조하면, 외부 전자 장치로부터 응답이 없는 경우, 전자 장치(10)는 신규 위치를 사용자가 직접 입력할 수 있는 사용자 인터페이스를 제공하여 등록할 수 있다.
도 8은 다양한 실시예에 따른 전자 장치의 위치 등록 과정을 설명하는 흐름도이다.
동작 810을 참조하면, 전자 장치(10)는 제1 정보를 포함하는 제1 오디오 사운드를 송출할 수 있다. 제1 정보는, 예를 들면, 전자 장치(10)의 존재를 알리는 메시지(예를 들면, Hello)를 포함할 수 있다.
동작 820을 참조하면, 전자 장치(10)는 제1 외부 전자 장치(110)로부터 제1 정보에 응답하는 제2 정보를 포함하는 제2 오디오 사운드를 수신하고. 제1 외부 전자 장치(110)와의 거리를 획득하기 위한 제3 정보를 포함하는 제3 오디오 사운드를 송출할 수 있다.
제2 정보는, 예를 들면, 제1 외부 전자 장치(110)의 고유한 식별 번호(또는, ID(identification))를 포함할 수 있다.
동작 830을 참조하면, 전자 장치(10)는 제1 외부 전자 장치(110)로부터 제3 정보에 응답하는 제4 정보를 포함하는 제4 오디오 사운드를 수신하고. 제3 오디오 정보 및/또는 제4 정보에 기반하여 제1 외부 전자 장치(110)와의 거리를 획득할 수 있다. 제3 정보 및 제4 정보는, 예를 들면, 시간 정보를 포함할 수 있다.
동작 840을 참조하면, 전자 장치(10)는 획득된 거리가 지정된 거리인 경우, 제5 정보를 포함하는 제5 오디오 사운드를 제1 외부 전자 장치(110)로 송출할 수 있다. 제5 정보는, 예를 들면, 제1 외부 전자 장치(110)의 위치 정보를 문의하는 내용을 포함할 수 있다.
동작 850을 참조하면, 전자 장치(10)는 제5 정보에 응답하는 제6 정보를 포함하는 제6 오디오 사운드를 수신하고, 제6 정보에 기반하여 전자 장치(10)의 위치를 등록할 수 있다. 제6 정보는, 예를 들면, 제1 외부 전자 장치(110)의 위치 정보에 대한 내용을 포함할 수 있다.
도 9는, 다양한 실시예들에 따른, 네트워크 환경(900) 내의 전자 장치(901)의 블록도이다. 전자 장치(901)는 도 1의 전자 장치(10)를 포함할 수 있다. 도 9을 참조하면, 네트워크 환경(900)에서 전자 장치(901)는 제 1 네트워크(998)(예: 근거리 무선 통신 네트워크)를 통하여 전자 장치(902)와 통신하거나, 또는 제 2 네트워크(999)(예: 원거리 무선 통신 네트워크)를 통하여 전자 장치(904) 또는 서버(908)와 통신할 수 있다. 일 실시예에 따르면, 전자 장치(901)는 서버(908)를 통하여 전자 장치(904)와 통신할 수 있다. 일 실시예에 따르면, 전자 장치(901)는 프로세서(920)(예: 도 2의 프로세서(210)), 메모리(930)(예: 도 2의 메모리(240)), 입력 장치(950)(예: 도 2의 마이크(220)), 음향 출력 장치(955)(예: 도 2의 스피커(230)), 표시 장치(960)(예: 도 2의 디스플레이(250)), 오디오 모듈(970), 센서 모듈(976), 인터페이스(977), 햅틱 모듈(979), 카메라 모듈(980), 전력 관리 모듈(988), 배터리(989), 통신 모듈(990)(예: 도 2의 통신 모듈(260)), 가입자 식별 모듈(996), 또는 안테나 모듈(997)을 포함할 수 있다. 어떤 실시예에서는, 전자 장치(901)에는, 이 구성요소들 중 적어도 하나(예: 표시 장치(960) 또는 카메라 모듈(980))가 생략되거나, 하나 이상의 다른 구성요소가 추가될 수 있다. 어떤 실시예에서는, 이 구성요소들 중 일부들은 하나의 통합된 회로로 구현될 수 있다. 예를 들면, 센서 모듈(976)(예: 지문 센서, 홍채 센서, 또는 조도 센서)은 표시 장치(960)(예: 디스플레이)에 임베디드된 채 구현될 수 있다
프로세서(920)는, 예를 들면, 소프트웨어(예: 프로그램(940))를 실행하여 프로세서(920)에 연결된 전자 장치(901)의 적어도 하나의 다른 구성요소(예: 하드웨어 또는 소프트웨어 구성요소)를 제어할 수 있고, 다양한 데이터 처리 또는 연산을 수행할 수 있다. 일 실시예에 따르면, 데이터 처리 또는 연산의 적어도 일부로서, 프로세서(920)는 다른 구성요소(예: 센서 모듈(976) 또는 통신 모듈(990))로부터 수신된 명령 또는 데이터를 휘발성 메모리(932)에 로드하고, 휘발성 메모리(932)에 저장된 명령 또는 데이터를 처리하고, 결과 데이터를 비휘발성 메모리(934)에 저장할 수 있다. 일 실시예에 따르면, 프로세서(920)는 메인 프로세서(921)(예: 중앙 처리 장치 또는 어플리케이션 프로세서), 및 이와는 독립적으로 또는 함께 운영 가능한 보조 프로세서(923)(예: 그래픽 처리 장치, 이미지 시그널 프로세서, 센서 허브 프로세서, 또는 커뮤니케이션 프로세서)를 포함할 수 있다. 추가적으로 또는 대체적으로, 보조 프로세서(923)는 메인 프로세서(921)보다 저전력을 사용하거나, 또는 지정된 기능에 특화되도록 설정될 수 있다. 보조 프로세서(923)는 메인 프로세서(921)와 별개로, 또는 그 일부로서 구현될 수 있다.
보조 프로세서(923)는, 예를 들면, 메인 프로세서(921)가 인액티브(예: 슬립) 상태에 있는 동안 메인 프로세서(921)를 대신하여, 또는 메인 프로세서(921)가 액티브(예: 어플리케이션 실행) 상태에 있는 동안 메인 프로세서(921)와 함께, 전자 장치(901)의 구성요소들 중 적어도 하나의 구성요소(예: 표시 장치(960), 센서 모듈(976), 또는 통신 모듈(990))와 관련된 기능 또는 상태들의 적어도 일부를 제어할 수 있다. 일 실시예에 따르면, 보조 프로세서(923)(예: 이미지 시그널 프로세서 또는 커뮤니케이션 프로세서)는 기능적으로 관련 있는 다른 구성요소(예: 카메라 모듈(980) 또는 통신 모듈(990))의 일부로서 구현될 수 있다.
메모리(930)는, 전자 장치(901)의 적어도 하나의 구성요소(예: 프로세서(920) 또는 센서모듈(976))에 의해 사용되는 다양한 데이터를 저장할 수 있다. 데이터는, 예를 들어, 소프트웨어(예: 프로그램(940)) 및, 이와 관련된 명령에 대한 입력 데이터 또는 출력 데이터를 포함할 수 있다. 메모리(930)는, 휘발성 메모리(932) 또는 비휘발성 메모리(934)를 포함할 수 있다.
프로그램(940)은 메모리(930)에 소프트웨어로서 저장될 수 있으며, 예를 들면, 운영 체제(942), 미들 웨어(944) 또는 어플리케이션(946)을 포함할 수 있다.
입력 장치(950)는, 전자 장치(901)의 구성요소(예: 프로세서(920))에 사용될 명령 또는 데이터를 전자 장치(901)의 외부(예: 사용자)로부터 수신할 수 있다. 입력 장치(950)는, 예를 들면, 마이크, 마우스, 키보드, 또는 디지털 펜(예: 스타일러스 펜)을 포함할 수 있다.
음향 출력 장치(955)는 음향 신호를 전자 장치(901)의 외부로 출력할 수 있다. 음향 출력 장치(955)는, 예를 들면, 스피커 또는 리시버를 포함할 수 있다. 스피커는 멀티미디어 재생 또는 녹음 재생과 같이 일반적인 용도로 사용될 수 있고, 리시버는 착신 전화를 수신하기 위해 사용될 수 있다. 일 실시예에 따르면, 리시버는 스피커와 별개로, 또는 그 일부로서 구현될 수 있다.
표시 장치(960)는 전자 장치(901)의 외부(예: 사용자)로 정보를 시각적으로 제공할 수 있다. 표시 장치(960)는, 예를 들면, 디스플레이, 홀로그램 장치, 또는 프로젝터 및 해당 장치를 제어하기 위한 제어 회로를 포함할 수 있다. 일 실시예에 따르면, 표시 장치(960)는 터치를 감지하도록 설정된 터치 회로(touch circuitry), 또는 상기 터치에 의해 발생되는 힘의 세기를 측정하도록 설정된 센서 회로(예: 압력 센서)를 포함할 수 있다.
오디오 모듈(970)은 소리를 전기 신호로 변환시키거나, 반대로 전기 신호를 소리로 변환시킬 수 있다. 일 실시예에 따르면, 오디오 모듈(970)은, 입력 장치(950)를 통해 소리를 획득하거나, 음향 출력 장치(955), 또는 전자 장치(901)와 직접 또는 무선으로 연결된 외부 전자 장치(예: 전자 장치(902))(예: 스피커 또는 헤드폰)를 통해 소리를 출력할 수 있다.
센서 모듈(976)은 전자 장치(901)의 작동 상태(예: 전력 또는 온도), 또는 외부의 환경 상태(예: 사용자 상태)를 감지하고, 감지된 상태에 대응하는 전기 신호 또는 데이터 값을 생성할 수 있다. 일 실시예에 따르면, 센서 모듈(976)은, 예를 들면, 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, 컬러 센서, IR(infrared) 센서, 생체 센서, 온도 센서, 습도 센서, 또는 조도 센서를 포함할 수 있다.
인터페이스(977)는 전자 장치(901)가 외부 전자 장치(예: 전자 장치(902))와 직접 또는 무선으로 연결되기 위해 사용될 수 있는 하나 이상의 지정된 프로토콜들을 지원할 수 있다. 일 실시예에 따르면, 인터페이스(977)는, 예를 들면, HDMI(high definition multimedia interface), USB(universal serial bus) 인터페이스, SD카드 인터페이스, 또는 오디오 인터페이스를 포함할 수 있다.
연결 단자(978)는, 그를 통해서 전자 장치(901)가 외부 전자 장치(예: 전자 장치(902))와 물리적으로 연결될 수 있는 커넥터를 포함할 수 있다. 일 실시예에 따르면, 연결 단자(978)는, 예를 들면, HDMI 커넥터, USB 커넥터, SD 카드 커넥터, 또는 오디오 커넥터(예: 헤드폰 커넥터)를 포함할 수 있다.
햅틱 모듈(979)은 전기적 신호를 사용자가 촉각 또는 운동 감각을 통해서 인지할 수 있는 기계적인 자극(예: 진동 또는 움직임) 또는 전기적인 자극으로 변환할 수 있다. 일 실시예에 따르면, 햅틱 모듈(979)은, 예를 들면, 모터, 압전 소자, 또는 전기 자극 장치를 포함할 수 있다.
카메라 모듈(980)은 정지 영상 및 동영상을 촬영할 수 있다. 일 실시예에 따르면, 카메라 모듈(980)은 하나 이상의 렌즈들, 이미지 센서들, 이미지 시그널 프로세서들, 또는 플래시들을 포함할 수 있다.
전력 관리 모듈(988)은 전자 장치(901)에 공급되는 전력을 관리할 수 있다. 일 실시예에 따르면, 전력 관리 모듈(988)은, 예를 들면, PMIC(power management integrated circuit)의 적어도 일부로서 구현될 수 있다.
배터리(989)는 전자 장치(901)의 적어도 하나의 구성요소에 전력을 공급할 수 있다. 일 실시예에 따르면, 배터리(989)는, 예를 들면, 재충전 불가능한 1차 전지, 재충전 가능한 2차 전지 또는 연료 전지를 포함할 수 있다.
통신 모듈(990)은 전자 장치(901)와 외부 전자 장치(예: 전자 장치(902), 전자 장치(904), 또는 서버(908)) 간의 직접(예: 유선) 통신 채널 또는 무선 통신 채널의 수립, 및 수립된 통신 채널을 통한 통신 수행을 지원할 수 있다. 통신 모듈(990)은 프로세서(920)(예: 어플리케이션 프로세서)와 독립적으로 운영되고, 직접(예: 유선) 통신 또는 무선 통신을 지원하는 하나 이상의 커뮤니케이션 프로세서를 포함할 수 있다. 일 실시예에 따르면, 통신 모듈(990)은 무선 통신 모듈(992)(예: 셀룰러 통신 모듈, 근거리 무선 통신 모듈, 또는 GNSS(global navigation satellite system) 통신 모듈) 또는 유선 통신 모듈(994)(예: LAN(local area network) 통신 모듈, 또는 전력선 통신 모듈)을 포함할 수 있다. 이들 통신 모듈 중 해당하는 통신 모듈은 제 1 네트워크(998)(예: 블루투스, WiFi direct 또는 IrDA(infrared data association) 같은 근거리 통신 네트워크) 또는 제 2 네트워크(999)(예: 셀룰러 네트워크, 인터넷, 또는 컴퓨터 네트워크(예: LAN 또는 WAN)와 같은 원거리 통신 네트워크)를 통하여 외부 전자 장치(904)와 통신할 수 있다. 이런 여러 종류의 통신 모듈들은 하나의 구성요소(예: 단일 칩)로 통합되거나, 또는 서로 별도의 복수의 구성요소들(예: 복수 칩들)로 구현될 수 있다. 무선 통신 모듈(992)은 가입자 식별 모듈(996)에 저장된 가입자 정보(예: 국제 모바일 가입자 식별자(IMSI))를 이용하여 제 1 네트워크(998) 또는 제 2 네트워크(999)와 같은 통신 네트워크 내에서 전자 장치(901)를 확인 및 인증할 수 있다.
안테나 모듈(997)은 신호 또는 전력을 외부(예: 외부 전자 장치)로 송신하거나 외부로부터 수신할 수 있다. 일 실시예에 따르면, 안테나 모듈(997)은 서브스트레이트(예: PCB) 위에 형성된 도전체 또는 도전성 패턴으로 이루어진 방사체를 포함하는 하나의 안테나를 포함할 수 있다. 일 실시예에 따르면, 안테나 모듈(997)은 복수의 안테나들을 포함할 수 있다. 이런 경우, 제 1 네트워크(998) 또는 제 2 네트워크(999)와 같은 통신 네트워크에서 사용되는 통신 방식에 적합한 적어도 하나의 안테나가, 예를 들면, 통신 모듈(990)에 의하여 상기 복수의 안테나들로부터 선택될 수 있다. 신호 또는 전력은 상기 선택된 적어도 하나의 안테나를 통하여 통신 모듈(990)과 외부 전자 장치 간에 송신되거나 수신될 수 있다. 어떤 실시예에 따르면, 방사체 이외에 다른 부품(예: RFIC)이 추가로 안테나 모듈(997)의 일부로 형성될 수 있다.
다양한 실시 예에 따르면, 전자 장치(예: 전자 장치(10))는, 디스플레이(예: 디스플레이(250)), 통신 모듈(예: 통신 모듈(260)), 적어도 하나의 마이크(예: 마이크(220)), 적어도 하나의 스피커(예: 스피커(230)), 상기 디스플레이, 상기 무선 통신 회로, 상기 마이크, 및 상기 스피커에 작동적으로 연결되는 프로세서(예: 프로세서(21)); 및 상기 프로세서에 작동적으로 연결되는 메모리(예: 메모리(240))를 포함할 수 있다. 일 실시 예에 따르면, 상기 메모리는, 실행 시, 상기 프로세서가, 상기 스피커를 통해, 제1 정보를 포함하는 제1 오디오 사운드를 송출하고, 상기 마이크를 통해, 제1 외부 전자 장치로부터 상기 제1 정보에 응답하는 제2 정보를 포함하는 제2 오디오 사운드를 수신하고, 상기 제2 오디오 사운드를 수신한 후, 상기 제1 외부 전자 장치와의 거리를 획득하기 위한 제3 정보를 포함하는 제3 오디오 사운드를 상기 스피커를 통해 송출하고, 상기 제1 외부 장치로부터 상기 제3 정보에 응답하는 제4 정보를 포함하는 제4 오디오 사운드를 상기 마이크를 통해 수신하고, 상기 제3 정보 및/또는 상기 제4 정보에 기반하여 상기 제1 외부 전자 장치와의 거리를 획득하고, 상기 획득된 거리가 지정된 거리 이내인 경우, 제5 정보를 포함하는 제5 오디오 사운드를, 상기 스피커를 통해, 상기 제1 외부 전자 장치로 송출하고, 상기 제5 정보에 응답하는 제6 정보를 포함하는 제6 오디오 사운드를 상기 마이크를 통해 수신하고, 상기 제6 정보에 기반하여 상기 전자 장치의 위치를 등록하도록 하는 인스트럭션들을 저장할 수 있다.
다양한 실시 예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 제3 정보 및 상기 제4 정보는 시간 정보를 포함하고, 상기 시간 정보에 기반하여 상기 제1 외부 전자 장치 및 상기 전자 장치 사이의 거리를 식별하도록 할 수 있다.
다양한 실시 예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 마이크를 통해, 제2 외부 전자 장치로부터 상기 제1 정보에 응답하는 제7 정보를 포함하는 제7 오디오 사운드를 수신하고, 상기 제7 오디오 사운드를 수신한 후, 상기 제2 외부 전자 장치와의 거리를 식별하기 위한 제8 정보를 포함하는 제8 오디오 사운드를 상기 스피커를 통해 송출하고, 상기 제2 외부 전자 장치로부터 상기 제8 정보에 응답하는 제9 정보를 포함하는 제9 오디오 사운드를 상기 마이크를 통해 수신하고, 상기 제8 정보 및/또는 상기 제9 정보에 기반하여 상기 제2 외부 전자 장치와의 거리를 식별하고, 상기 식별된 거리가 지정된 거리 이내인 경우, 제10 정보를 포함하는 제10 오디오 사운드를, 상기 스피커를 통해, 상기 제2 외부 전자 장치로 송출하고, 상기 제10 정보에 응답하는 제11 정보를 포함하는 제11 오디오 사운드를 상기 마이크를 통해 수신하도록 할 수 있다.
다양한 실시 예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 제10 정보 및/또는 상기 제11 정보의 적어도 일부에 기초하여 상기 전자 장치의 위치를 등록하도록 할 수 있다.
다양한 실시 예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 전자 장치의 위치를 등록하는 사용자 인터페이스를 상기 디스플레이를 통하여 제공하도록 할 수 있다.
다양한 실시 예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 전자 장치의 위치 정보가 상기 메모리에 저장되어 있는지 확인하고, 상기 확인 결과에 기반하여 상기 제1 오디오 사운드를 전송하도록 할 수 있다.
다양한 실시 예에 따르면, 상기 지정된 거리는, 상기 제1 오디오 사운드의 세기에 기반하여 결정되도록 할 수 있다.
다양한 실시 예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 전자 장치의 전원이 종료되었다가 다시 켜지거나 또는 설정된 기간이 도래하는 경우 중 적어도 하나의 상황에서 상기 제1 오디오 사운드를 송출하도록 할 수 있다.
다양한 실시 예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 전자 장치의 위치를 등록한 후, 상기 제1 오디오 사운드를 송출하여 위치가 등록되지 않은 외부 전자 장치가 지정된 거리 이내에 있는 것을 식별하면, 상기 전자 장치의 위치를 상기 외부 전자 장치의 위치로 등록하도록 할 수 있다.
다양한 실시 예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 전자 장치의 위치와 관련되는 정보를 디스플레이를 포함하는 외부 전자 장치로 전송하여, 상기 외부 전자 장치가 상기 전자 장치의 위치를 등록하는 사용자 인터페이스를 제공하도록 할 수 있다.
다양한 실시 예에 따르면, 전자 장치의 제어 방법은, 제1 정보를 포함하는 제1 오디오 사운드를 스피커를 통하여, 송출하는 동작, 제1 외부 전자 장치로부터 상기 제1 정보에 응답하는 제2 정보를 포함하는 제2 오디오 사운드를 마이크를 통해 수신하고, 상기 제1 외부 전자 장치와의 거리를 식별하기 위한 제3 정보를 포함하는 제3 오디오 사운드를 상기 스피커를 통해 송출하는 동작, 상기 제1 외부 전자 장치로부터 상기 제3 정보에 응답하는 제4 정보를 포함하는 제4 오디오 사운드를 상기 마이크를 통해 수신하고, 상기 제3 정보 및/또는 상기 제4 정보에 기반하여 상기 제1 외부 전자 장치와의 거리를 획득하는 동작, 상기 획득된 거리가 지정된 거리 이내이면, 제5 정보를 포함하는 제5 오디오 사운드를 상기 스피커를 통해 상기 제1 외부 전자 장치로 송출하는 동작 및 상기 제5 정보에 응답하는 제6 정보를 포함하는 제6 오디오 사운드를 상기 마이크를 통해 수신하고, 상기 제6 정보에 기반하여 상기 전자 장치의 위치를 등록하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 제어 방법은, 상기 제3 정보 및 상기 제4 정보는 시간 정보를 포함하고, 상기 시간 정보에 기반하여 상기 제1 외부 전자 장치 및 상기 전자 장치 사이의 거리를 식별하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 제어 방법은, 상기 마이크를 통해, 제2 외부 전자 장치로부터 상기 제1 정보에 응답하는 제7 정보를 포함하는 제7 오디오 사운드를 수신하고, 상기 제2 외부 전자 장치와의 거리를 식별하기 위한 제8 정보를 포함하는 제8 오디오 사운드를 상기 스피커를 통해 송출하는 동작, 상기 제2 외부 전자 장치로부터 상기 제8 정보에 응답하는 제9 정보를 포함하는 제9 오디오 사운드를 상기 마이크를 통해 수신하고. 제8 정보 및/또는 제9 정보에 기반하여 상기 제2 외부 전자 장치와의 거리를 획득하는 동작, 상기 획득된 거리가 지정된 거리 이내이면, 제10 정보를 포함하는 제10 오디오 사운드를 상기 스피커를 통해 상기 제2 외부 전자 장치로 송출하는 동작 및 상기 제10 정보에 응답하는 제11 정보를 포함하는 제11 오디오 사운드를 상기 스피커를 통해 수신하도록 하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 제어 방법은, 상기 제10 정보 및/또는 상기 제11 정보의 적어도 일부에 기초하여 상기 전자 장치의 위치를 등록하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 제어 방법은, 상기 전자 장치의 위치를 등록하는 사용자 인터페이스를 상기 전자 장치의 디스플레이를 통하여 제공하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 제어 방법은, 상기 전자 장치의 위치 정보를 저장되어 있는지 확인하고, 상기 확인 결과에 기반하여 상기 제1 오디오 사운드를 전송하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 지정된 거리는, 상기 제1 오디오 사운드의 세기에 기반하여 결정될 수 있다.
다양한 실시 예에 따르면, 상기 제어 방법은, 상기 전자 장치의 전원이 종료되었다가 다시 켜지거나 또는 설정된 기간이 도래하는 경우 중 적어도 하나의 상황에서 상기 제1 오디오 사운드를 송출하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 제어 방법은, 상기 전자 장치의 위치를 등록한 후, 상기 제1 오디오 사운드를 송출하여 위치가 등록되지 않은 외부 전자 장치가 지정된 거리 이내에 있는 것을 식별함에 따라, 상기 전자 장치의 위치를 상기 외부 전자 장치의 위치로 등록하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 명령어들을 저장하는 컴퓨터 판독가능 저장 매체는, 제1 정보를 포함하는 제1 오디오 사운드를 스피커를 통해 송출하는 동작, 제1 외부 전자 장치로부터 상기 제1 정보에 응답하는 제2 정보를 포함하는 제2 오디오 사운드를 마이크를 통해 수신하고, 상기 제1 외부 전자 장치와의 거리를 식별하기 위한 제3 정보를 포함하는 제3 오디오 사운드를 상기 스피커를 통해 송출하는 동작, 상기 제1 외부 전자 장치로부터 상기 제3 정보에 응답하는 제4 정보를 포함하는 제4 오디오 사운드를 상기 마이크를 통해 수신하고, 상기 제3 정보 및/또는 상기 제4 정보에 기반하여 상기 제1 외부 전자 장치와의 거리를 획득하는 동작, 제5 정보를 포함하는 제5 오디오 사운드를 상기 스피커를 통해 상기 제1 외부 전자 장치로 송출하는 동작 및 상기 제5 정보에 응답하는 제6 정보를 포함하는 제6 오디오 사운드를 상기 마이크를 통해 수신하고, 상기 제6 정보에 기반하여 상기 전자 장치의 위치를 등록하는 동작을 수행하도록 할 수 있다.
상기 구성요소들 중 적어도 일부는 주변 기기들간 통신 방식(예: 버스, GPIO(general purpose input and output), SPI(serial peripheral interface), 또는 MIPI(mobile industry processor interface))을 통해 서로 연결되고 신호(예: 명령 또는 데이터)를 상호간에 교환할 수 있다.
일 실시예에 따르면, 명령 또는 데이터는 제 2 네트워크(999)에 연결된 서버(908)를 통해서 전자 장치(901)와 외부의 전자 장치(904)간에 송신 또는 수신될 수 있다. 외부 전자 장치(902, 904) 각각은 전자 장치(901)와 동일한 또는 다른 종류의 장치일 수 있다. 일 실시예에 따르면, 전자 장치(901)에서 실행되는 동작들의 전부 또는 일부는 외부 전자 장치들(902, 904, 또는 908) 중 하나 이상의 외부 전자 장치들에서 실행될 수 있다. 예를 들면, 전자 장치(901)가 어떤 기능이나 서비스를 자동으로, 또는 사용자 또는 다른 장치로부터의 요청에 반응하여 수행해야 할 경우에, 전자 장치(901)는 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 하나 이상의 외부 전자 장치들에게 그 기능 또는 그 서비스의 적어도 일부를 수행하라고 요청할 수 있다. 상기 요청을 수신한 하나 이상의 외부 전자 장치들은 요청된 기능 또는 서비스의 적어도 일부, 또는 상기 요청과 관련된 추가 기능 또는 서비스를 실행하고, 그 실행의 결과를 전자 장치(901)로 전달할 수 있다. 전자 장치(901)는 상기 결과를, 그대로 또는 추가적으로 처리하여, 상기 요청에 대한 응답의 적어도 일부로서 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅, 분산 컴퓨팅, 또는 클라이언트-서버 컴퓨팅 기술이 이용될 수 있다.
본 개시의 다양한 실시예들은 기기(machine)(예: 전자 장치(901)) 의해 읽을 수 있는 저장 매체(storage medium)(예: 내장 메모리(936) 또는 외장 메모리(938))에 저장된 하나 이상의 명령어들을 포함하는 소프트웨어(예: 프로그램(940))로서 구현될 수 있다. 예를 들면, 기기(예: 전자 장치(901))의 프로세서(예: 프로세서(920))는, 저장 매체로부터 저장된 하나 이상의 명령어들 중 적어도 하나의 명령을 호출하고, 그것을 실행할 수 있다. 이것은 기기가 상기 호출된 적어도 하나의 명령어에 따라 적어도 하나의 기능을 수행하도록 운영되는 것을 가능하게 한다. 상기 하나 이상의 명령어들은 컴파일러에 의해 생성된 코드 또는 인터프리터에 의해 실행될 수 있는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장매체 는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장매체가 실재(tangible)하는 장치이고, 신호(signal)(예: 전자기파)를 포함하지 않는다는 것을 의미할 뿐이며, 이 용어는 데이터가 저장매체에 반영구적으로 저장되는 경우와 임시적으로 저장되는 경우를 구분하지 않는다.
일 실시예에 따르면, 본 개시에 개시된 다양한 실시예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로 배포되거나, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 또는 두 개의 사용자 장치들(예: 스마트폰들) 간에 직접, 온라인으로 배포(예: 다운로드 또는 업로드)될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 기기로 읽을 수 있는 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
다양한 실시예들에 따르면, 상기 기술한 구성요소들의 각각의 구성요소(예: 모듈 또는 프로그램)는 단수 또는 복수의 개체를 포함할 수 있다. 다양한 실시예들에 따르면, 전술한 해당 구성요소들 중 하나 이상의 구성요소들 또는 동작들이 생략되거나, 또는 하나 이상의 다른 구성요소들 또는 동작들이 추가될 수 있다. 대체적으로 또는 추가적으로, 복수의 구성요소들(예: 모듈 또는 프로그램)은 하나의 구성요소로 통합될 수 있다. 이런 경우, 통합된 구성요소는 상기 복수의 구성요소들 각각의 구성요소의 하나 이상의 기능들을 상기 통합 이전에 상기 복수의 구성요소들 중 해당 구성요소에 의해 수행되는 것과 동일 또는 유사하게 수행할 수 있다. 다양한 실시예들에 따르면, 모듈, 프로그램 또는 다른 구성요소에 의해 수행되는 동작들은 순차적으로, 병렬적으로, 반복적으로, 또는 휴리스틱하게 실행되거나, 상기 동작들 중 하나 이상이 다른 순서로 실행되거나, 생략되거나, 또는 하나 이상의 다른 동작들이 추가될 수 있다.

Claims (15)

  1. 전자 장치에 있어서,
    디스플레이;
    통신 모듈;
    적어도 하나의 마이크;
    적어도 하나의 스피커;
    상기 디스플레이, 상기 무선 통신 회로, 상기 마이크, 및 상기 스피커에 작동적으로 연결되는 프로세서; 및
    상기 프로세서에 작동적으로 연결되는 메모리; 를 포함하고,
    상기 메모리는, 실행 시, 상기 프로세서가,
    상기 스피커를 통해, 제1 정보를 포함하는 제1 오디오 사운드를 송출하고,
    상기 마이크를 통해, 제1 외부 전자 장치로부터 상기 제1 정보에 응답하는 제2 정보를 포함하는 제2 오디오 사운드를 수신하고,
    상기 제2 오디오 사운드를 수신한 후, 상기 제1 외부 전자 장치와의 거리를 획득하기 위한 제3 정보를 포함하는 제3 오디오 사운드를 상기 스피커를 통해 송출하고,
    상기 제1 외부 장치로부터 상기 제3 정보에 응답하는 제4 정보를 포함하는 제4 오디오 사운드를 상기 마이크를 통해 수신하고,
    상기 제3 정보 및/또는 상기 제4 정보에 기반하여 상기 제1 외부 전자 장치와의 거리를 획득하고,
    상기 획득된 거리가 지정된 거리 이내인 경우, 제5 정보를 포함하는 제5 오디오 사운드를, 상기 스피커를 통해, 상기 제1 외부 전자 장치로 송출하고,
    상기 제5 정보에 응답하는 제6 정보를 포함하는 제6 오디오 사운드를 상기 마이크를 통해 수신하고,
    상기 제6 정보에 기반하여 상기 전자 장치의 위치를 등록하도록 하는 인스트럭션들을 저장하는, 전자 장치.
  2. 제1항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 제3 정보 및 상기 제4 정보는 시간 정보를 포함하고, 상기 시간 정보에 기반하여 상기 제1 외부 전자 장치 및 상기 전자 장치 사이의 거리를 식별하도록 하는, 전자 장치.
  3. 제2항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 마이크를 통해, 제2 외부 전자 장치로부터 상기 제1 정보에 응답하는 제7 정보를 포함하는 제7 오디오 사운드를 수신하고,
    상기 제7 오디오 사운드를 수신한 후, 상기 제2 외부 전자 장치와의 거리를 식별하기 위한 제8 정보를 포함하는 제8 오디오 사운드를 상기 스피커를 통해 송출하고,
    상기 제2 외부 전자 장치로부터 상기 제8 정보에 응답하는 제9 정보를 포함하는 제9 오디오 사운드를 상기 마이크를 통해 수신하고,
    상기 제8 정보 및/또는 상기 제9 정보에 기반하여 상기 제2 외부 전자 장치와의 거리를 식별하고,
    상기 식별된 거리가 지정된 거리 이내인 경우, 제10 정보를 포함하는 제10 오디오 사운드를, 상기 스피커를 통해, 상기 제2 외부 전자 장치로 송출하고,
    상기 제10 정보에 응답하는 제11 정보를 포함하는 제11 오디오 사운드를 상기 마이크를 통해 수신하도록 하는, 전자 장치.
  4. 제3항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 제10 정보 및/또는 상기 제11 정보의 적어도 일부에 기초하여 상기 전자 장치의 위치를 등록하도록 하는, 전자 장치.
  5. 제1항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 전자 장치의 위치를 등록하는 사용자 인터페이스를 상기 디스플레이를 통하여 제공하도록 하는, 전자 장치.
  6. 제1항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 전자 장치의 위치 정보가 상기 메모리에 저장되어 있는지 확인하고, 상기 확인 결과에 기반하여 상기 제1 오디오 사운드를 전송하도록 하는, 전자 장치.
  7. 제1항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 전자 장치의 위치를 등록한 후, 상기 제1 오디오 사운드를 송출하여 위치가 등록되지 않은 외부 전자 장치가 지정된 거리 이내에 있는 것을 식별하면, 상기 전자 장치의 위치를 상기 외부 전자 장치의 위치로 등록하도록 하는, 전자 장치.
  8. 제1항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 전자 장치의 위치와 관련되는 정보를 디스플레이를 포함하는 외부 전자 장치로 전송하여, 상기 외부 전자 장치가 상기 전자 장치의 위치를 등록하는 사용자 인터페이스를 제공하도록 하는, 전자 장치.
  9. 전자 장치의 제어 방법에 있어서,
    제1 정보를 포함하는 제1 오디오 사운드를 스피커를 통하여, 송출하는 동작;
    제1 외부 전자 장치로부터 상기 제1 정보에 응답하는 제2 정보를 포함하는 제2 오디오 사운드를 마이크를 통해 수신하고, 상기 제1 외부 전자 장치와의 거리를 식별하기 위한 제3 정보를 포함하는 제3 오디오 사운드를 상기 스피커를 통해 송출하는 동작;
    상기 제1 외부 전자 장치로부터 상기 제3 정보에 응답하는 제4 정보를 포함하는 제4 오디오 사운드를 상기 마이크를 통해 수신하고, 상기 제3 정보 및/또는 상기 제4 정보에 기반하여 상기 제1 외부 전자 장치와의 거리를 획득하는 동작;
    상기 획득된 거리가 지정된 거리 이내이면, 제5 정보를 포함하는 제5 오디오 사운드를 상기 스피커를 통해 상기 제1 외부 전자 장치로 송출하는 동작; 및
    상기 제5 정보에 응답하는 제6 정보를 포함하는 제6 오디오 사운드를 상기 마이크를 통해 수신하고, 상기 제6 정보에 기반하여 상기 전자 장치의 위치를 등록하는 동작; 을 포함하는, 전자 장치의 제어 방법.
  10. 제9항에 있어서,
    상기 제어 방법은,
    상기 제3 정보 및 상기 제4 정보는 시간 정보를 포함하고, 상기 시간 정보에 기반하여 상기 제1 외부 전자 장치 및 상기 전자 장치 사이의 거리를 식별하는 동작; 을 포함하는, 전자 장치의 제어 방법.
  11. 제9항에 있어서,
    상기 제어 방법은,
    상기 마이크를 통해, 제2 외부 전자 장치로부터 상기 제1 정보에 응답하는 제7 정보를 포함하는 제7 오디오 사운드를 수신하고, 상기 제2 외부 전자 장치와의 거리를 식별하기 위한 제8 정보를 포함하는 제8 오디오 사운드를 상기 스피커를 통해 송출하는 동작;
    상기 제2 외부 전자 장치로부터 상기 제8 정보에 응답하는 제9 정보를 포함하는 제9 오디오 사운드를 상기 마이크를 통해 수신하고. 제8 정보 및/또는 제9 정보에 기반하여 상기 제2 외부 전자 장치와의 거리를 획득하는 동작;
    상기 획득된 거리가 지정된 거리 이내이면, 제10 정보를 포함하는 제10 오디오 사운드를 상기 스피커를 통해 상기 제2 외부 전자 장치로 송출하는 동작; 및
    상기 제10 정보에 응답하는 제11 정보를 포함하는 제11 오디오 사운드를 상기 스피커를 통해 수신하도록 하는 동작; 을 포함하는, 전자 장치의 제어 방법.
  12. 제11항에 있어서,
    상기 제어 방법은,
    상기 제10 정보 및/또는 상기 제11 정보의 적어도 일부에 기초하여 상기 전자 장치의 위치를 등록하는 동작; 을 포함하는, 전자 장치의 제어 방법.
  13. 제9항에 있어서,
    상기 제어 방법은,
    상기 전자 장치의 위치를 등록하는 사용자 인터페이스를 상기 전자 장치의 디스플레이를 통하여 제공하는 동작; 을 포함하는, 전자 장치의 제어 방법.
  14. 제9항에 있어서,
    상기 제어 방법은,
    상기 전자 장치의 위치 정보를 저장되어 있는지 확인하고, 상기 확인 결과에 기반하여 상기 제1 오디오 사운드를 전송하는 동작; 을 포함하는, 전자 장치의 제어 방법.
  15. 제9항에 있어서,
    상기 제어 방법은,
    상기 전자 장치의 위치를 등록한 후, 상기 제1 오디오 사운드를 송출하여 위치가 등록되지 않은 외부 전자 장치가 지정된 거리 이내에 있는 것을 식별함에 따라, 상기 전자 장치의 위치를 상기 외부 전자 장치의 위치로 등록하는 동작; 을 포함하는, 전자 장치의 제어 방법.
PCT/KR2019/016363 2018-11-30 2019-11-26 전자 장치 및 전자 장치의 제어 방법 WO2020111727A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US17/296,761 US11802951B2 (en) 2018-11-30 2019-11-26 Electronic device and electronic device control method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2018-0152882 2018-11-30
KR1020180152882A KR102607787B1 (ko) 2018-11-30 2018-11-30 전자 장치 및 전자 장치의 제어 방법

Publications (1)

Publication Number Publication Date
WO2020111727A1 true WO2020111727A1 (ko) 2020-06-04

Family

ID=70852002

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2019/016363 WO2020111727A1 (ko) 2018-11-30 2019-11-26 전자 장치 및 전자 장치의 제어 방법

Country Status (3)

Country Link
US (1) US11802951B2 (ko)
KR (1) KR102607787B1 (ko)
WO (1) WO2020111727A1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220103543A (ko) * 2021-01-15 2022-07-22 삼성전자주식회사 자동 음량 제어를 수행하는 웨어러블 장치
WO2024112185A1 (ko) * 2022-11-27 2024-05-30 삼성전자주식회사 외부 객체에 대응하는 시각적 객체의 표시를 제어하기 위한 웨어러블 장치 및 그 방법

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150029880A1 (en) * 2013-07-29 2015-01-29 Qualcomm Incorporated PROXIMITY DETECTION OF INTERNET OF THINGS (IoT) DEVICES USING SOUND CHIRPS
US9042906B1 (en) * 2011-09-20 2015-05-26 Google Inc. Identifying a geographically nearby mobile computing device
KR20160118923A (ko) * 2015-04-02 2016-10-12 삼성전자주식회사 전자 장치를 이용한 위치 측정 장치 및 방법
US20170131402A1 (en) * 2015-11-06 2017-05-11 Mitsubishi Electric Research Laboratories, Inc. System and Method for Augmented Localization of WiFi Devices
US20170289149A1 (en) * 2015-02-05 2017-10-05 Google Inc. Systems and methods for mutual authentication of electronic devices
KR20180124435A (ko) * 2017-05-11 2018-11-21 한양대학교 산학협력단 인증 디바이스 및 인증 디바이스의 데이터 통신 방법

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8483725B2 (en) * 2010-12-03 2013-07-09 Qualcomm Incorporated Method and apparatus for determining location of mobile device
US20140181683A1 (en) * 2012-12-21 2014-06-26 Samsung Electronics Co., Ltd. Method and system for controlling external device
KR20150073366A (ko) * 2013-12-23 2015-07-01 삼성전자주식회사 전자 장치 간의 거리를 측정하는 방법 및 전자 장치
US9753129B2 (en) * 2014-02-03 2017-09-05 Google Inc. Mapping positions of devices using audio
KR101673579B1 (ko) * 2014-04-30 2016-11-07 광주과학기술원 이동체의 위치감지장치, 이동체의 위치감지방법, 조명장치, 공조장치, 보안장치, 및 주차장관리장치
KR102414522B1 (ko) * 2014-09-25 2022-06-30 삼성전자주식회사 무선 거리 측정 장치 및 방법
US9769564B2 (en) 2015-02-11 2017-09-19 Google Inc. Methods, systems, and media for ambient background noise modification based on mood and/or behavior information
US11079481B2 (en) 2015-04-02 2021-08-03 Samsung Electronics Co., Ltd. Apparatus and method for measuring distance and location
US10401473B2 (en) * 2015-07-30 2019-09-03 Roku, Inc. Mobile device based control device locator
KR20170019804A (ko) * 2015-08-12 2017-02-22 삼성전자주식회사 전자 장치의 위치 정보 확인 방법 및 그 전자 장치
KR102592492B1 (ko) * 2016-03-31 2023-10-23 삼성전자주식회사 무선 전력 송신기 및 그 제어 방법
KR101862922B1 (ko) 2016-07-25 2018-07-05 연세대학교 산학협력단 실내 무선 측위 장치 및 방법
US10827450B2 (en) 2016-09-20 2020-11-03 Qualcomm Incorporated Wireless device registration
KR102598491B1 (ko) * 2016-11-10 2023-11-06 삼성전자주식회사 위치 정보 획득을 위한 보조 데이터를 획득하는 전자 장치 및 방법
US10670693B2 (en) * 2017-12-29 2020-06-02 Sonitor Technologies As Position determination system having a deconvolution decoder

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9042906B1 (en) * 2011-09-20 2015-05-26 Google Inc. Identifying a geographically nearby mobile computing device
US20150029880A1 (en) * 2013-07-29 2015-01-29 Qualcomm Incorporated PROXIMITY DETECTION OF INTERNET OF THINGS (IoT) DEVICES USING SOUND CHIRPS
US20170289149A1 (en) * 2015-02-05 2017-10-05 Google Inc. Systems and methods for mutual authentication of electronic devices
KR20160118923A (ko) * 2015-04-02 2016-10-12 삼성전자주식회사 전자 장치를 이용한 위치 측정 장치 및 방법
US20170131402A1 (en) * 2015-11-06 2017-05-11 Mitsubishi Electric Research Laboratories, Inc. System and Method for Augmented Localization of WiFi Devices
KR20180124435A (ko) * 2017-05-11 2018-11-21 한양대학교 산학협력단 인증 디바이스 및 인증 디바이스의 데이터 통신 방법

Also Published As

Publication number Publication date
US11802951B2 (en) 2023-10-31
US20220026549A1 (en) 2022-01-27
KR20200065930A (ko) 2020-06-09
KR102607787B1 (ko) 2023-11-30

Similar Documents

Publication Publication Date Title
WO2020204611A1 (en) Method for detecting wearing of acoustic device and acoustic device supporting the same
WO2020060073A1 (en) Electronic device and method for controlling multi-wireless charging
WO2020022780A1 (en) Method and apparatus for establishing device connection
EP3808097A1 (en) Method and apparatus for establishing device connection
WO2020067639A1 (en) Electronic device for pairing with stylus pen and method thereof
WO2018208093A1 (ko) 햅틱 피드백을 제공하는 방법 및 이를 수행하는 전자 장치
WO2021085902A1 (ko) 복수의 어플리케이션들의 오디오 데이터를 출력하는 전자 장치 및 그 동작 방법
WO2019209075A1 (ko) 외부 전자 장치를 제어하는 전자 장치 및 방법
WO2020256497A1 (ko) 블루투스 통신 연결 방법 및 그 전자 장치
WO2020122502A1 (en) Electronic device for supporting audio enhancement and method for the same
WO2019066293A1 (ko) 외부 마이크로폰의 그라운드 단자와 전기적으로 연결될 수 있는 커넥터에 포함된 지정된 핀이 회로 기판의 지정된 그라운드와 전기적으로 연결된 회로 구조를 갖는 전자 장치
WO2019135603A1 (ko) 전자 장치 및 전자 장치의 동작 방법
WO2019103471A1 (en) Method of providing vibration and electronic device for supporting same
WO2021075716A1 (en) Electronic device supporting improved speech recognition
WO2020111727A1 (ko) 전자 장치 및 전자 장치의 제어 방법
WO2020171608A1 (en) Electronic device for providing handwriting input function and method of operating the same
AU2019384601B2 (en) Electronic device and method for obtaining information associated with fingerprint
WO2020106019A1 (en) Electronic device and method for providing in-vehicle infotainment service
WO2019039729A1 (en) METHOD FOR CHANGING THE CONTENT SIZE DISPLAYED ON A DISPLAY DEVICE, AND RELATED ELECTRONIC DEVICE
EP3900415A1 (en) Method for sharing bluetooth communication information and electronic device therefor
WO2019231296A1 (en) An electronic device and method for preventing corrosion of an audio jack
EP3814879A1 (en) Electronic device including pen input device and method of operating the same
WO2020153818A1 (en) Method of controlling external electronic device and electronic device for supporting same
WO2022197088A1 (ko) Iot 서비스를 제공하는 장치 및 그 방법
WO2020226353A1 (en) Electronic device for establishing communication with external electronic device and method of controlling the same

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19889820

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19889820

Country of ref document: EP

Kind code of ref document: A1