WO2020141640A1 - Electronic device - Google Patents

Electronic device Download PDF

Info

Publication number
WO2020141640A1
WO2020141640A1 PCT/KR2019/000114 KR2019000114W WO2020141640A1 WO 2020141640 A1 WO2020141640 A1 WO 2020141640A1 KR 2019000114 W KR2019000114 W KR 2019000114W WO 2020141640 A1 WO2020141640 A1 WO 2020141640A1
Authority
WO
WIPO (PCT)
Prior art keywords
signal
mobile terminal
processor
beamforming
electronic device
Prior art date
Application number
PCT/KR2019/000114
Other languages
French (fr)
Korean (ko)
Inventor
정정윤
신치호
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to PCT/KR2019/000114 priority Critical patent/WO2020141640A1/en
Publication of WO2020141640A1 publication Critical patent/WO2020141640A1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B17/00Monitoring; Testing
    • H04B17/20Monitoring; Testing of receivers
    • H04B17/27Monitoring; Testing of receivers for locating or positioning the transmitter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B7/00Radio transmission systems, i.e. using radiation field
    • H04B7/02Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas
    • H04B7/04Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas using two or more spaced independent antennas
    • H04B7/0408Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas using two or more spaced independent antennas using two or more beams, i.e. beam diversity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W64/00Locating users or terminals or network equipment for network management purposes, e.g. mobility management

Definitions

  • the present invention relates to an electronic device capable of providing an artificial intelligence service based on a user's location by obtaining a distance from an external device based on RTT and determining an external device's location based on RSSI.
  • Artificial intelligence is a field of computer science and information technology that studies how computers can do thinking, learning, and self-development that human intelligence can do. It means to be able to imitate.
  • the conventional method for locating a mobile terminal is limited to recognizing a distance based on RSSI or measuring a location based on RTT.
  • the RSSI-based distance recognition method has a large error due to surrounding environments, places and obstacles, and the movement of a mobile terminal, and the RTT-based location measurement method requires at least three devices.
  • the present invention is to solve the above-described problem, the object of the present invention is to obtain a distance from an external device based on RTT and determine the location of the external device by obtaining the direction of the external device based on RSSI, based on user location This is to provide an electronic device capable of providing artificial intelligence services.
  • An electronic device that transmits and receives a wireless signal, and transmits a first signal to the outside and uses a response signal for the first signal based on RTT to establish a connection with the mobile terminal. Acquiring a distance, transmitting a beamforming signal in a plurality of directions, obtaining a direction of the mobile terminal using a response signal to the beamforming signal based on RSSI, and using the distance and the direction to the mobile terminal It includes a processor that provides services for.
  • An operation method of an electronic device includes transmitting a first signal to the outside, obtaining a distance from a mobile terminal by using a response signal to the first signal based on RTT, a plurality of Transmitting a beamforming signal in a direction, obtaining a direction of the mobile terminal using a response signal to the beamforming signal based on RSSI, and service for the mobile terminal using the distance and the direction It includes the steps of providing.
  • the present invention combines RSSI and RTT to determine the location of the mobile terminal, it minimizes errors due to surrounding environment, obstacles, movement of the mobile terminal, etc., and has the advantage that the electronic device alone can locate the mobile terminal. In addition, due to these advantages, the present invention can be particularly efficiently used in a house having a complicated structure and many obstacles.
  • the present invention has an advantage that can provide a user-customized service by receiving information about the user during automatic connection.
  • the beamforming signal is transmitted in a plurality of directions to determine the direction of the mobile terminal, the greater the distance between the electronic device and the mobile terminal, the greater the error in direction.
  • the beamforming signal is transmitted while forming a dense angle, so that the error increases as the distance increases.
  • a second beamforming signal is transmitted between two directions having a large received signal sensitivity and the direction is determined using the second beamforming signal.
  • the beamforming signal is transmitted in a plurality of directions to determine the direction of the mobile terminal, the greater the distance between the electronic device and the mobile terminal, the greater the error in direction.
  • the beamforming signal is additionally transmitted to measure the direction, so that the error can be prevented from increasing as the distance increases.
  • the measurement error is small when the distance is close, even in this case, when the beamforming signal is additionally transmitted, a delay is caused and the effect of reducing the measurement error may be insignificant. Therefore, the shorter the distance is, the less the number of beamforming signals are transmitted, which has the advantage of quickly determining the direction of the mobile terminal.
  • connection can be automatically established by detecting the access of the mobile terminal.
  • FIG. 1A is a block diagram illustrating a terminal related to the present invention.
  • 1B is a block diagram illustrating an electronic device related to the present invention.
  • FIG. 2 is a view for explaining a method of operating an electronic device according to an embodiment of the present invention.
  • FIG. 3 is a diagram for explaining a method of obtaining a distance from a mobile terminal based on RTT according to an embodiment of the present invention.
  • FIG. 4 is a diagram for explaining a method of obtaining a direction of a mobile terminal based on RSSI according to an embodiment of the present invention.
  • FIG. 5 is a diagram for explaining a method of obtaining a direction of a mobile terminal based on RSSI according to another embodiment of the present invention.
  • FIG. 6 is a view for explaining a method for automatically establishing a connection with a mobile terminal according to an embodiment of the present invention.
  • FIG. 7 is a view for explaining a method of providing a service for a mobile terminal according to an embodiment of the present invention.
  • the terminals described herein include mobile phones, smart phones, laptop computers, digital broadcasting terminals, personal digital assistants (PDAs), portable multimedia players (PMPs), navigation, and slate PCs. It may include a tablet PC (tablet PC), ultrabook (ultrabook), wearable device (wearable device, for example, a watch-type terminal (smartwatch), glass-type terminal (smart glass), HMD (head mounted display), etc. .
  • PDAs personal digital assistants
  • PMPs portable multimedia players
  • slate PCs slate PC
  • It may include a tablet PC (tablet PC), ultrabook (ultrabook), wearable device (wearable device, for example, a watch-type terminal (smartwatch), glass-type terminal (smart glass), HMD (head mounted display), etc.
  • FIG. 1A is a block diagram illustrating a terminal related to the present invention.
  • the terminal 100 may also be applied to a fixed terminal such as a smart TV, a desktop computer, and a digital signage.
  • the terminal 100 may be applied to a fixed or movable robot.
  • the terminal 100 may perform the function of a voice agent.
  • the voice agent may be a program that recognizes a user's voice and outputs a response suitable for the recognized user's voice as a voice.
  • the terminal 100 includes a wireless communication unit 110, an input unit 120, a running processor 130, a sensing unit 140, an output unit 150, an interface unit 160, a memory 170, a processor 180, and It may include a power supply 190.
  • the wireless communication unit 110 may include at least one of a broadcast receiving module 111, a mobile communication module 112, a wireless Internet module 113, a short-range communication module 114, and a location information module 115.
  • the broadcast receiving module 111 receives a broadcast signal and/or broadcast related information from an external broadcast management server through a broadcast channel.
  • the mobile communication module 112 includes technical standards or communication methods for mobile communication (eg, Global System for Mobile Communication (GSM), Code Division Multi Access (CDMA), Code Division Multi Access 2000 (CDMA2000), EV -Enhanced Voice-Data Optimized or Enhanced Voice-Data Only (DO), Wideband CDMA (WCDMA), High Speed Downlink Packet Access (HSDPA), High Speed Uplink Packet Access (HSUPA), Long Term Evolution (LTE), LTE-A (Long Term Evolution-Advanced) transmits and receives wireless signals to and from at least one of a base station, an external terminal, and a server on a mobile communication network constructed according to (Long Term Evolution-Advanced).
  • GSM Global System for Mobile Communication
  • CDMA Code Division Multi Access
  • CDMA2000 Code Division Multi Access 2000
  • WCDMA Wideband CDMA
  • HSDPA High Speed Downlink Packet Access
  • HSUPA High Speed Uplink Packet Access
  • the wireless Internet module 113 refers to a module for wireless Internet access, and may be built in or external to the terminal 100.
  • the wireless Internet module 113 is configured to transmit and receive wireless signals in a communication network according to wireless Internet technologies.
  • Wireless Internet technologies include, for example, WLAN (Wireless LAN), Wi-Fi (Wireless-Fidelity), Wi-Fi (Wireless Fidelity) Direct, DLNA (Digital Living Network Alliance), WiBro (Wireless Broadband), WiMAX (World) Interoperability for Microwave Access (HSDPA), High Speed Downlink Packet Access (HSDPA), High Speed Uplink Packet Access (HSUPA), Long Term Evolution (LTE), and Long Term Evolution-Advanced (LTE-A).
  • WLAN Wireless LAN
  • Wi-Fi Wireless-Fidelity
  • Wi-Fi Wireless Fidelity
  • Direct Wireless Internet technologies
  • DLNA Digital Living Network Alliance
  • WiBro Wireless Broadband
  • WiMAX Worldwide Interoperability for Microwave Access
  • HSDPA High Speed Downlink Packet Access
  • HSUPA High Speed Uplink Packet Access
  • LTE Long Term Evolution
  • LTE-A Long Term Evolution-Advanced
  • the short-range communication module 114 is for short-range communication, BluetoothTM, Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, NFC (Near Field Communication), Wi-Fi (Wireless-Fidelity), Wi-Fi Direct, Wireless USB (Wireless Universal Serial Bus) using at least one of the technology, it can support short-range communication.
  • RFID Radio Frequency Identification
  • IrDA Infrared Data Association
  • UWB Ultra Wideband
  • ZigBee ZigBee
  • NFC Near Field Communication
  • Wi-Fi Wireless-Fidelity
  • Wi-Fi Direct Wireless USB (Wireless Universal Serial Bus) using at least one of the technology, it can support short-range communication.
  • the location information module 115 is a module for acquiring a location (or current location) of a mobile terminal, and typical examples thereof include a Global Positioning System (GPS) module or a Wireless Fidelity (WiFi) module.
  • GPS Global Positioning System
  • WiFi Wireless Fidelity
  • the terminal utilizes a GPS module, the location of the mobile terminal can be acquired using a signal sent from a GPS satellite.
  • the input unit 120 may include a camera 121 for inputting a video signal, a microphone 122 for receiving an audio signal, and a user input unit 123 for receiving information from a user.
  • the voice data or image data collected by the input unit 120 may be analyzed and processed by a user's control command.
  • the input unit 120 is for input of image information (or signals), audio information (or signals), data, or information input from a user.
  • the terminal 100 includes one or more cameras It may be provided with (121).
  • the camera 121 processes image frames such as still images or moving pictures obtained by an image sensor in a video call mode or a shooting mode.
  • the processed image frame may be displayed on the display unit 151 or stored in the memory 170.
  • the microphone 122 processes external sound signals as electrical voice data.
  • the processed voice data may be used in various ways according to a function (or a running application program) being performed by the terminal 100. Meanwhile, various noise reduction algorithms for removing noise generated in the process of receiving an external sound signal may be implemented in the microphone 122.
  • the user input unit 123 is for receiving information from a user. When information is input through the user input unit 123,
  • the processor 180 may control the operation of the terminal 100 to correspond to the inputted information.
  • the user input unit 123 is a mechanical input means (or a mechanical key, for example, a button located on the front or rear or side of the terminal 100, a dome switch, a jog wheel, a jog switch, etc.) ) And a touch-type input means.
  • the touch-type input means is made of a virtual key, a soft key or a visual key displayed on the touch screen through software processing, or a part other than the touch screen It may be made of a touch key (touch key) disposed on.
  • the learning processor 130 may be configured to receive, classify, store, and output information to be used for data mining, data analysis, intelligent decision making, and machine learning algorithms and techniques.
  • the learning processor 130 may be received, detected, detected, generated, predefined, or otherwise output by the terminal or communicated with other components, devices, terminals, or terminals in a received, detected, detected, generated, predefined, or otherwise manner It may include one or more memory units configured to store data output by the device.
  • the learning processor 130 may include a memory integrated or implemented in a terminal. In some embodiments, the learning processor 130 may be implemented using the memory 170.
  • the learning processor 130 may be implemented using memory associated with the terminal, such as external memory coupled directly to the terminal or memory maintained in a server communicating with the terminal.
  • the learning processor 130 may be implemented using memory maintained in a cloud computing environment, or other remote memory location accessible by a terminal through a communication method such as a network.
  • the learning processor 130 typically includes one or more databases for identifying, indexing, categorizing, manipulating, storing, retrieving, and outputting data for use in supervised or unsupervised learning, data mining, predictive analytics, or other machines. It can be configured to store on.
  • the information stored in the learning processor 130 can be utilized by one or more other controllers of the processor 180 or terminal using any of a variety of different types of data analysis algorithms and machine learning algorithms.
  • fuzzy logic e.g probability theory
  • neural networks Boltzmann machines, vector quantization, pulse neural networks, support vector machines, maximum margin classifier, hill climbing, inductive logic system Bayesian network , Peritnet (e.g. finite state machine, milli machine, Moore finite state machine), classifier tree (e.g. perceptron tree, support vector tree, Markov tree, decision tree forest, random forest), stake models and systems, artificial Convergence, sensor fusion, image fusion, reinforcement learning, augmented reality, pattern recognition, automated planning, and more.
  • fuzzy logic eg probability theory
  • neural networks Boltzmann machines, vector quantization, pulse neural networks, support vector machines, maximum margin classifier, hill climbing, inductive logic system Bayesian network , Peritnet (e.g. finite state machine, milli machine, Moore finite state machine), classifier tree (e.g. perceptron tree, support vector tree, Markov tree, decision tree forest, random forest), stake models and systems, artificial Convergence, sensor fusion, image fusion
  • the processor 180 may determine or predict at least one executable action of the terminal based on the generated information, or determined using data analysis and machine learning algorithms. To this end, the processor 180 may request, search, receive, or utilize data of the learning processor 130, and may use the terminal to perform a predicted operation or an operation determined to be preferable among the at least one executable operation. Can be controlled.
  • the processor 180 may perform various functions for implementing intelligent emulation (ie, a knowledge-based system, a reasoning system, and a knowledge acquisition system). It can be applied to various types of systems (eg, fuzzy logic systems), including adaptive systems, machine learning systems, artificial neural networks, and the like.
  • intelligent emulation ie, a knowledge-based system, a reasoning system, and a knowledge acquisition system. It can be applied to various types of systems (eg, fuzzy logic systems), including adaptive systems, machine learning systems, artificial neural networks, and the like.
  • the processor 180 also involves speech and natural language speech processing, such as an I/O processing module, an environmental condition module, a speech-to-text (STT) processing module, a natural language processing module, a work flow processing module, and a service processing module. It may include sub-modules that enable calculation.
  • speech and natural language speech processing such as an I/O processing module, an environmental condition module, a speech-to-text (STT) processing module, a natural language processing module, a work flow processing module, and a service processing module. It may include sub-modules that enable calculation.
  • Each of these sub-modules can have access to one or more systems or data and models at the terminal, or a subset or superset thereof.
  • each of these sub-modules can provide various functions, including vocabulary index, user data, work flow model, service model, and automatic speech recognition (ASR) system.
  • ASR automatic speech recognition
  • processor 180 or terminal may be implemented with the submodules, systems, or data and models.
  • the processor 180 may be configured to detect and detect requirements based on the user's intention or contextual conditions expressed in user input or natural language input.
  • the processor 180 may actively derive and acquire information necessary to completely determine a requirement based on a context condition or a user's intention. For example, the processor 180 may actively derive information necessary to determine a requirement by analyzing historical data including historical input and output, pattern matching, unambiguous words, and input intention.
  • the processor 180 may determine a task flow for executing a function that responds to a requirement based on a context condition or a user's intention.
  • the processor 180 collects, detects, extracts, and detects signals or data used in data analysis and machine learning operations through one or more sensing components in the terminal, in order to collect information for processing and storage in the learning processor 130 And/or receive.
  • Collecting information may include sensing information through a sensor, extracting information stored in the memory 170, or receiving information from another terminal, entity, or external storage device through communication means.
  • the processor 180 may collect and store usage history information in the terminal.
  • the processor 180 may use the stored usage history information and predictive modeling to determine the best match for executing a specific function.
  • the processor 180 may receive or sense surrounding environment information or other information through the sensing unit 140.
  • the processor 180 may receive a broadcast signal and/or broadcast-related information, a radio signal, and radio data through the radio communication unit 110.
  • the processor 180 may receive image information (or a corresponding signal), audio information (or a corresponding signal), data, or user input information from the input unit 120.
  • the processor 180 collects information in real time, processes or classifies information (for example, a knowledge graph, command policy, personalization database, conversation engine, etc.), and processes the processed information in the memory 170 or the learning processor 130 ).
  • information for example, a knowledge graph, command policy, personalization database, conversation engine, etc.
  • the processor 180 can control the components of the terminal to perform the determined operation. In addition, the processor 180 may perform the determined operation by controlling the terminal according to the control command.
  • the processor 180 analyzes historical information indicating execution of a specific operation through data analysis and machine learning algorithms and techniques, and performs updating of previously learned information based on the analyzed information. Can.
  • the processor 180 may improve the accuracy of future performance of data analysis and machine learning algorithms and techniques based on the updated information along with the learning processor 130.
  • the sensing unit 140 may include one or more sensors for sensing at least one of information in the mobile terminal, surrounding environment information surrounding the mobile terminal, and user information.
  • the sensing unit 140 includes a proximity sensor 141, an illumination sensor 142, a touch sensor, an acceleration sensor, a magnetic sensor, and gravity G-sensor, gyroscope sensor, motion sensor, RGB sensor, infrared sensor (IR sensor), fingerprint scan sensor, ultrasonic sensor , Optical sensor (e.g., camera (see 121)), microphone (refer to 122), battery gauge, environmental sensor (e.g. barometer, hygrometer, thermometer, radioactivity sensor, Thermal sensor, gas sensor, etc.), and a chemical sensor (eg, an electronic nose, a health care sensor, a biometric sensor, etc.).
  • the mobile terminal disclosed in the present specification may combine and use information sensed by at least two or more of these sensors.
  • the output unit 150 is for generating output related to vision, hearing, or tactile sense, and includes at least one of a display unit 151, an audio output unit 152, a hap tip module 153, and an optical output unit 154 can do.
  • the display unit 151 displays (outputs) information processed by the terminal 100.
  • the display unit 151 may display execution screen information of an application program driven by the terminal 100, or UI (User Interface) or GUI (Graphic User Interface) information according to the execution screen information.
  • UI User Interface
  • GUI Graphic User Interface
  • the display unit 151 may form a mutual layer structure with the touch sensor or may be integrally formed, thereby realizing a touch screen.
  • the touch screen may function as a user input unit 123 that provides an input interface between the terminal 100 and the user, and at the same time, provide an output interface between the terminal 100 and the user.
  • the audio output unit 152 may output audio data received from the wireless communication unit 110 or stored in the memory 170 in a call signal reception, call mode or recording mode, voice recognition mode, broadcast reception mode, or the like.
  • the audio output unit 152 may include at least one of a receiver, a speaker, and a buzzer.
  • the haptic module 153 generates various tactile effects that the user can feel.
  • a typical example of the tactile effect generated by the haptic module 153 may be vibration.
  • the light output unit 154 outputs a signal for notifying the occurrence of an event using the light of the light source of the terminal 100.
  • Examples of events generated in the terminal 100 may include receiving messages, receiving call signals, missed calls, alarms, schedule notifications, receiving emails, and receiving information through applications.
  • the interface unit 160 serves as a passage with various types of external devices connected to the terminal 100.
  • the interface unit 160 connects a device equipped with a wired/wireless headset port, an external charger port, a wired/wireless data port, a memory card port, and an identification module. It may include at least one of a port, an audio input/output (I/O) port, a video input/output (I/O) port, and an earphone port.
  • I/O audio input/output
  • I/O video input/output
  • earphone port an earphone port
  • the identification module is a chip that stores various information for authenticating the usage rights of the terminal 100, a user identification module (UIM), a subscriber identity module (SIM), and a universal user authentication module (universal subscriber identity module; USIM).
  • the device provided with the identification module (hereinafter referred to as an'identification device') may be manufactured in a smart card format. Accordingly, the identification device may be connected to the terminal 100 through the interface unit 160.
  • the memory 170 stores data supporting various functions of the terminal 100.
  • the memory 170 is a plurality of application programs (application programs or applications) running in the terminal 100, data for the operation of the terminal 100, instructions, data for the operation of the running processor 130 Fields (eg, at least one algorithm information for machine learning, etc.).
  • the processor 180 controls the overall operation of the terminal 100 in addition to the operations related to the application program.
  • the processor 180 may provide or process appropriate information or functions to the user by processing signals, data, information, etc. input or output through the above-described components or by driving an application program stored in the memory 170.
  • the processor 180 may control at least some of the components described with reference to FIG. 1A in order to drive an application program stored in the memory 170. Furthermore, the processor 180 may operate by combining at least two or more of the components included in the terminal 100 for driving the application program.
  • the power supply unit 190 receives external power and internal power to supply power to each component included in the terminal 100.
  • the power supply unit 190 includes a battery, and the battery may be a built-in battery or a replaceable battery.
  • the processor 180 controls the operation related to the application program and generally the overall operation of the terminal 100. For example, when the state of the mobile terminal satisfies a set condition, the processor 180 may execute or release a lock state that restricts input of a user's control command to applications.
  • 1B is a diagram for describing an electronic device according to an embodiment of the present invention.
  • the electronic device according to an embodiment of the present invention is a display device.
  • the present disclosure is not limited thereto, and the electronic device according to an embodiment of the present invention may be applied to electronic devices capable of transmitting a wireless signal and a beam forming signal.
  • An electronic device is, for example, an intelligent electronic device in which a computer support function is added to a broadcast reception function, while an Internet function or the like is added while faithful to the broadcast reception function, a handwritten input device, a touch screen Or, it may have a more convenient interface such as a space remote control. And, it is connected to the Internet and a computer with the support of a wired or wireless Internet function, and it is also possible to perform functions such as email, web browsing, banking, or games.
  • a standardized general-purpose OS can be used for these various functions.
  • the electronic device described in the present invention can be freely added or deleted in various applications, for example, on a general-purpose OS kernel, various user-friendly functions can be performed.
  • the electronic device may be, for example, a network TV, an HBBTV, a smart TV, an LED TV, or an OLED TV, and may be applied to a smartphone in some cases.
  • the electronic device 200 includes a broadcast receiving unit 230, an external device interface unit 235, a storage unit 240, a user input interface unit 250, a control unit 270, and a local area communication unit 273. , A display unit 280, an audio output unit 285, and a power supply unit 290.
  • the broadcast reception unit 230 may include a tuner 231, a demodulation unit 232, and a network interface unit 233.
  • the tuner 231 may select a specific broadcast channel according to a channel selection command.
  • the tuner 231 may receive a broadcast signal for a selected specific broadcast channel.
  • the demodulator 232 may separate the received broadcast signal into a video signal, an audio signal, and a data signal related to a broadcast program, and restore the separated video signal, audio signal, and data signal to a form capable of output.
  • the external device interface unit 235 may receive an application or a list of applications in an adjacent external device, and transmit it to the control unit 270 or the storage unit 240.
  • the external device interface unit 235 may provide a connection path with the external device.
  • the external device interface 235 may receive one or more of video and audio output from the external device, and transmit them to the controller 270.
  • the external device connectable to the external device interface unit 235 may be any one of a set top box, a Blu-ray player, a DVD player, a game machine, a sound bar, a smartphone, a PC, a USB memory, and a home theater.
  • the network interface unit 233 may provide an interface for connecting the electronic device 200 to a wired/wireless network including an Internet network.
  • the network interface unit 233 may transmit or receive data with other users or other electronic devices through a connected network or another network linked to the connected network.
  • some content data stored in the electronic device 200 may be transmitted to another user registered in advance in the electronic device 200 or to a selected user or selected electronic device among other electronic devices.
  • the network interface unit 233 may access a predetermined web page through a connected network or another network linked to the connected network. That is, it is possible to connect to a predetermined web page through a network and transmit or receive data with the corresponding server.
  • the network interface unit 233 may receive content or data provided by a content provider or a network operator. That is, the network interface unit 233 may receive content such as a movie, advertisement, game, VOD, broadcast signal, and related information provided by a content provider or a network provider through a network.
  • the network interface unit 233 may receive update information and update files of firmware provided by a network operator, and may transmit data to the Internet or a content provider or a network operator.
  • the network interface unit 233 may select and receive a desired application from among applications that are open to the public through a network.
  • the storage unit 240 may store programs for each signal processing and control in the control unit 270, and store a signal-processed image, audio, or data signal.
  • the storage unit 240 may perform a function for temporarily storing an image, audio, or data signal input from the external device interface unit 235 or the network interface unit 233, and is predetermined through a channel memory function. You can also store information about the image.
  • the storage unit 240 may store an application or application list input from the external device interface unit 235 or the network interface unit 233.
  • the electronic device 200 may play a content file (video file, still image file, music file, document file, application file, etc.) stored in the storage unit 240 and provide it to the user.
  • a content file video file, still image file, music file, document file, application file, etc.
  • the user input interface unit 250 may transmit a signal input by the user to the control unit 270 or a signal from the control unit 270 to the user.
  • the user input interface unit 250 may be configured according to various communication methods such as Bluetooth, Ultra Wideband (WB), ZigBee, Radio Frequency (RF) communication, or IR (IR) communication.
  • a control signal such as power on/off, channel selection, screen setting, etc. may be received and processed from the remote control device, or a control signal from the control unit 270 may be transmitted to the remote control device.
  • the user input interface unit 250 may transmit a control signal input from a local key (not shown) such as a power key, a channel key, a volume key, and a set value to the control unit 270.
  • a local key such as a power key, a channel key, a volume key, and a set value
  • the image signal processed by the control unit 270 may be input to the display unit 280 and displayed as an image corresponding to the corresponding image signal. Also, the image signal processed by the control unit 270 may be input to an external output device through the external device interface unit 235.
  • the audio signal processed by the control unit 270 may be audio output to the audio output unit 285.
  • the voice signal processed by the control unit 270 may be input to the external output device through the external device interface unit 235.
  • controller 270 may control the overall operation in the electronic device 200.
  • control unit 270 may control the electronic device 200 by a user command or an internal program input through the user input interface unit 250, and access the network to display a list of applications or applications desired by the user. It can be made available for download within (200).
  • the control unit 270 allows the channel information or the like selected by the user to be output through the display unit 280 or the audio output unit 285 together with the processed image or audio signal.
  • control unit 270 according to an external device image playback command received through the user input interface unit 250, from an external device input through the external device interface unit 235, for example, a camera or a camcorder,
  • the video signal or the audio signal can be output through the display unit 280 or the audio output unit 285.
  • control unit 270 may control the display unit 280 to display an image, for example, a broadcast image input through the tuner 231, or an external input input through the external device interface unit 235.
  • the image or an image input through the network interface unit or an image stored in the storage unit 240 may be controlled to be displayed on the display unit 280.
  • the image displayed on the display unit 280 may be a still image or a video, and may be a 2D image or a 3D image.
  • control unit 270 may control content stored in the electronic device 200 or received broadcast content, external input content input from the outside to be played, and the content may be broadcast video, external input video, audio file , Still images, connected web screens, and document files.
  • the short-range communication unit 273 may communicate with an external device through wired or wireless communication.
  • the short-range communication unit 273 may perform short-range communication with an external device.
  • the short-range communication unit 273 includes Bluetooth (BluetoothTM), Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, Near Field Communication (NFC), Wi-Fi By using at least one of (Wireless-Fidelity), Wi-Fi Direct, and Wireless USB (Wireless Universal Serial Bus) technology, short-range communication can be supported.
  • the short-range communication unit 273 may be provided between the electronic device 200 and a wireless communication system, between the electronic device 200 and another electronic device 200, or through the electronic device 200 through wireless area networks.
  • the electronic device 200 or an external server may support wireless communication between networks.
  • the wireless local area network may be wireless personal area networks.
  • the other electronic device 200 is a wearable device capable of exchanging data with the electronic device 200 according to the present invention (or interoperable), for example, a smartwatch, a smart glass (smart glass), HMD (head mounted display), can be a mobile terminal such as a smart phone.
  • the short-range communication unit 273 may detect (or recognize) a wearable device capable of communication in the vicinity of the electronic device 200.
  • the control unit 270 may transmit at least a portion of data processed by the electronic device 200 to the short-range communication unit 273. It can be transmitted to the wearable device. Therefore, a user of the wearable device can use data processed by the electronic device 200 through the wearable device.
  • the display unit 280 converts the image signal, data signal, OSD signal, or image signal received from the external device interface unit 235 processed by the control unit 270 into R, G, and B signals, respectively, and then drives them. You can generate a signal.
  • the electronic device 200 shown in FIG. 1B is only an embodiment of the present invention. Some of the illustrated components may be integrated, added, or omitted according to specifications of the electronic device 200 that is actually implemented.
  • the electronic device 200 does not have a tuner 231 and a demodulator 232, as shown in FIG. 1B, and has a network interface 233 or an external device interface ( 235) may be received and reproduced.
  • the electronic device 200 is divided into an image processing device such as a set-top box for receiving broadcast signals or contents according to various network services, and a content playback device for playing content input from the image processing device. Can be implemented.
  • an image processing device such as a set-top box for receiving broadcast signals or contents according to various network services
  • a content playback device for playing content input from the image processing device. Can be implemented.
  • short-range communication unit 273 may be used interchangeably with the term wireless communication unit 273.
  • controller 2740 may be used interchangeably with terms such as a processor, a microprocessor, a controller, and a microcontroller.
  • the configuration and function of the electronic device 200 are not limited to those described with reference to FIG. 1B, and some or all of the configuration and function of the mobile terminal 100 described with reference to FIG. 1A may be mounted on the electronic device 200.
  • FIG. 2 is a view for explaining a method of operating an electronic device according to an embodiment of the present invention.
  • the operation method of the electronic device 200 includes transmitting a first signal to the outside (S210), and obtaining a distance from the mobile terminal using a response signal for the first signal based on RTT Step (S220), transmitting a beam forming signal in a plurality of directions (S230), obtaining a direction of a mobile terminal using a response to a beam forming signal based on RSSI (S240) and using distance and direction To provide a service for the mobile terminal (S250).
  • the step of transmitting the first signal to the outside (S210) and the step of obtaining the distance from the mobile terminal using the response signal for the first signal based on RTT (S220) will be described with reference to FIG. 3.
  • FIG. 3 is a diagram for explaining a method of obtaining a distance from a mobile terminal based on RTT according to an embodiment of the present invention.
  • the processor of the electronic device 200 transmits the first signal to the outside and uses the response signal for the first signal based on the RTT to determine the distance from the mobile terminal 100. Can be obtained.
  • Round Trip Time means round trip delay time.
  • RTT Random Trip Time
  • RTT may mean a round-trip time from when the signal is transmitted from the transmitting side and transmitted to the receiving side until the response signal reaches the transmitting side again.
  • the processor of the electronic device 200 may transmit the first signal 310.
  • the processor of the mobile terminal 100 that has received the first signal may transmit a response signal 320 to the first signal.
  • the processor of the electronic device 200 moves with the electronic device 200 by using the time taken from the time when the first signal is transmitted to the time when the response signal for the first signal is received and the speed of the first signal. The distance between the terminals 100 can be obtained.
  • the first signal and the response signal for the first signal may be signals of the same type (for example, both the first signal and the response signal for the first signal are Wi-Fi signals).
  • the processor of the electronic device 200 may measure a propagation delay to obtain a distance between the electronic device 200 and the mobile terminal 100.
  • the processor of the electronic device 200 is based on the round-trip delay time and the time required for the mobile terminal 100 to confirm receipt of the first signal. Propagation delay between the electronic device 200 and the mobile terminal 100. delay) can be measured. In addition, the processor of the electronic device 200 may obtain a distance between the electronic device 200 and the mobile terminal 100 using the propagation delay and the speed of the first signal.
  • the first signal and the first may be any one of signals used by the wireless communication unit 273 for wireless communication.
  • the first signal is Bluetooth (BluetoothTM), Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, Near Field Communication (NFC), Wi-Fi ( Wireless-Fidelity), Wi-Fi Direct, and Wireless USB (Wireless Universal Serial Bus) signals.
  • FIG. 4 is a diagram for explaining a method of obtaining a direction of a mobile terminal based on RSSI according to an embodiment of the present invention.
  • the processor of the electronic device 200 may transmit a beam forming signal in a plurality of directions, and obtain a direction of the mobile terminal 100 by using a response signal for a beam forming signal based on RSSI.
  • RSSI Received signal strength indication
  • obtaining the direction of the mobile terminal based on the received signal strength indication means that the mobile terminal 100 receives the signal transmitted from the electronic device 200 and the signal received from the mobile terminal 100. It may mean that the direction of the mobile terminal 100 is obtained by using the received signal strength of.
  • the processor of the electronic device 200 may control the wireless communication unit to transmit beamforming signals 410, 420, 430, 440, 450, 460, 470, 480 in a plurality of directions.
  • the beamforming signal includes a first-first beamforming signal 410 in a first direction, a first-2 beamforming signal 420 in a second direction, and a first-3 beamforming signal 430 in a third direction.
  • 1-4th beamforming signal 440 in the 4th direction 1-5th beamforming signal 450 in the 5th direction, 1-6th beamforming signal 460 in the 6th direction, 7th direction
  • the 1-7th beamforming signal 470 of the 1-8th beamforming signal 480 in the eighth direction may be included.
  • each of the plurality of beamforming signals 410, 420, 430, 440, 450, 460, 470, and 480 may have the same angle with which adjacent beamforming signals are formed.
  • the angle formed by the first-first beamforming signal 410 in the first direction and the first-2 beamforming signal 420 in the second direction is 45 degrees, and the first-2 beamforming in the second direction.
  • the angle formed by the signal 420 and the first-3 beamforming signal 430 in the third direction is 45 degrees, the first-3 beamforming signal 430 in the third direction and the first-4 in the fourth direction
  • the angle formed by the beamforming signal 440 may be 45 degrees.
  • each of the plurality of beamforming signals 410, 420, 430, 440, 450, 460, 470, and 480, each of the plurality of beamforming signals 410, 420, 430, 440, 450, 460, 470, 480 Information may be included.
  • the 1-1st beamforming signal 410 is the 1st-1 identification information unique to the 1st-1st beamforming signal
  • the 1st-2 beamforming signal 420 is the 1st-2nd beamforming signal unique. It may include the identification information of 1-2.
  • the processor of the mobile terminal 100 may receive a beamforming signal through a wireless communication unit. In this case, the processor of the mobile terminal 100 may acquire identification information included in the received beamforming signal. Also, the processor of the mobile terminal 100 may determine the received signal strength of the received beamforming signal.
  • the processor of the mobile terminal 100 receiving the beamforming signal may transmit a response signal to the received beamforming signal to the electronic device 200.
  • the response signal may include received signal strength and identification information of the received beamforming signal.
  • the mobile terminal 100 has a 1-8 beamforming signal 410, a 1-1 beamforming signal 410, a 1-2 beamforming signal 420, and a 1-3 beamforming signal ( 430).
  • the processor of the mobile terminal may transmit a response signal to the 1-8 beamforming signal 480 to the electronic device 200.
  • the response signal to the 1-8 beamforming signal 480 may include identification information of the 1-8 beamforming signal 480 and the received signal strength of the 1-8 beamforming signal 480.
  • the processor of the mobile terminal may transmit a response signal to the first-first beamforming signal 410 to the electronic device 200.
  • the response signal to the first-first beamforming signal 410 may include identification information of the first-first beamforming signal 410 and the received signal strength of the first-first beamforming signal 410.
  • the processor of the mobile terminal may transmit a response signal to the 1-2-2 beamforming signal 420 to the electronic device 200.
  • the response signal to the 1-2-2 beamforming signal 420 may include identification information of the 1-2 beamforming signal 420 and the received signal strength of the 1-2 beamforming signal 420.
  • the processor of the mobile terminal may transmit a response signal to the 1-3rd beamforming signal 430 to the electronic device 200.
  • the response signal to the 1-3 beamforming signal 430 may include identification information of the 1-3 beamforming signal 420 and the received signal strength of the 1-3 beamforming signal 430.
  • the processor of the electronic device 200 may acquire the direction of the mobile terminal 100 using a response signal to the beamforming signal.
  • the processor of the electronic device 200 may determine that the mobile terminal exists between two directions in which the received signal strength of the beam forming signal is greater among the plurality of directions in which the beam forcing signal is transmitted.
  • the received signal strength of the 1-8th beamforming signal 410 in the 8th direction is 3dBm
  • the received signal strength of the 1-1st beamforming signal 410 in the first direction is 8dBm
  • the second When the received signal strength of the 1-2 beamforming signal 420 is 10 dBm
  • the received signal strength of the 1-3 beamforming signal 430 in the third direction is 4 dBm
  • the processor of the electronic device 200 receives the beamforming signal. It may be determined that the mobile terminal is present between the first direction and the second direction in which the received signal strength is large.
  • the processor of the electronic device 200 may determine the direction of the mobile terminal based on the received signal strength in two directions where the received signal strength is large.
  • the processor of the electronic device 200 receives the received signal strength in the first direction and the received signal strength in the second direction It is possible to determine the direction of the mobile terminal corresponding to the ratio.
  • the received signal strength of the first-first beamforming signal 410 in the first direction is 9 dBm
  • the received signal strength of the first-2 beamforming signal 420 in the second direction is 6 dBm.
  • the first direction is 0 degrees and the second direction is 45 degrees.
  • the ratio of the received signal strength in the first direction and the received signal strength in the second direction is 9:6.
  • the processor of the electronic device 200 may determine that the mobile terminal is located in the 18 degree direction. That is, the ratio between the angle formed by the second direction and the 18 degree direction and the angle formed by the first direction and the 18 degree direction is 9:6 days, which is the same as the ratio of the received signal strength in the first direction and the received signal strength in the second direction. Can.
  • the processor of the electronic device 200 can determine the direction of the mobile terminal.
  • the processor of the electronic device 200 may determine the number of a plurality of directions for transmitting the beam forming signal based on the distance from the mobile terminal.
  • the processor of the electronic device 200 may transmit the first number of beamforming signals in the first number direction.
  • each of the first number of beamforming signals may have the same angle as an adjacent beamforming signal.
  • the processor of the electronic device 200 may transmit the second number of beamforming signals in a direction of a second number that is greater than the first number.
  • each of the second number of beamforming signals may have the same angle as an adjacent beamforming signal.
  • the processor of the electronic device 200 may transmit the 1-1 to 1-8 beamforming signals in eight directions.
  • an angle at which a specific beamforming signal forms with an adjacent beamforming signal may be 45 degrees.
  • the processor of the electronic device 200 may transmit the 1-1 to 1-12 beamforming signals in 12 directions.
  • an angle at which a specific beamforming signal forms with an adjacent beamforming signal may be 30 degrees.
  • the beamforming signal is transmitted in a plurality of directions to determine the direction of the mobile terminal, the greater the distance between the electronic device 200 and the mobile terminal 100, the greater the error in direction.
  • the beamforming signal is transmitted while forming a dense angle, so that the error increases as the distance increases.
  • FIG. 5 is a diagram for explaining a method of obtaining a direction of a mobile terminal based on RSSI according to another embodiment of the present invention.
  • the processor of the electronic device may transmit the second beamforming signal between two directions in which the received signal strength of the beamforming signal is large, and obtain a direction of the mobile terminal by using a response signal for the second beamforming signal based on RSSI. .
  • the processor of the electronic device 200 is second in the tenth direction between the first direction and the second direction.
  • the beamforming signal 510 may be transmitted.
  • the second beamforming signal 510 may include second identification information unique to the second beamforming signal.
  • the processor of the mobile terminal 100 may receive a second beamforming signal through a wireless communication unit. In this case, the processor of the mobile terminal 100 may acquire second identification information included in the received second beamforming signal. Also, the processor of the mobile terminal 100 may determine the received signal strength of the received second beam forming signal.
  • the processor of the mobile terminal 100 that has received the second beamforming signal may transmit a response signal to the received second beamforming signal to the electronic device 200.
  • the response signal may include received signal strength and second identification information of the received second beam forming signal.
  • the processor of the electronic device 200 may acquire the direction of the mobile terminal 100 using a response signal to the second beamforming signal.
  • the processor of the electronic device 200 is between'two directions having a large received signal strength among the plurality of first beamforming signals' and two directions having a large received signal strength among the ten directions in which the second beamforming signals are transmitted. It can be determined that the mobile terminal is present.
  • the received signal strength of the 1-8 beamforming signal 410 is 3 dBm
  • the received signal strength of the 1-1 beamforming signal 410 is 8 dBm
  • the received signal of the 1-2 beamforming signal 420 When the intensity is 10 dBm and the received signal strength of the 1-3 beamforming signal 430 is 4 dBm, the processor of the electronic device 200 is provided in a tenth direction between the first direction and the second direction where the received signal strength is large. 2 Beamforming signals can be transmitted.
  • the received signal strength of the second beamforming signal is 8.5 dBm.
  • the processor of the electronic device the'first direction (8dBm), the second direction (10dBm)' having a large received signal strength among the plurality of first beamforming signals and the tenth direction in which the second beamforming signal is transmitted (8.5 dBm), it may be determined that the mobile terminal exists between the second direction (10 dBm) and the tenth direction (8.5 dBm), where the received signal strength is large.
  • the processor of the electronic device 200 may determine the direction of the mobile terminal based on the received signal strengths in two directions where the received signal strength is large.
  • the processor of the electronic device 200 determines the direction of the mobile terminal corresponding to the ratio of the received signal strength in the second direction and the received signal strength in the tenth direction. Can.
  • the processor of the electronic device 200 controls the tenth direction between the first direction and the second direction. It has been described that the 2 beamforming signal 510 is transmitted.
  • the tenth direction may be a central direction between the first direction and the second direction.
  • the processor of the electronic device may transmit the second beamforming signal 510 in a central direction between two directions having a large reception sensitivity among the plurality of first beamforming signals.
  • the processor of the electronic device may transmit the second beamforming signal 510 in the direction of 22.5 degrees.
  • the second beamforming signal is transmitted between the two directions having high received signal sensitivity and the second beamforming signal is used.
  • the direction there is an advantage that can more accurately measure the direction of the mobile terminal.
  • the processor of the electronic device may determine to transmit the second beamforming signal 510 when the distance from the mobile terminal is greater than the first preset distance (a).
  • the processor of the electronic device may determine to transmit the second beamforming signal 510 when the distance to the mobile terminal is greater than 1 m.
  • the processor of the electronic device transmits the second beamforming signal 510 between two directions in which the received signal strength is greater among the plurality of first beamforming signals.
  • the processor of the electronic device may acquire the direction of the mobile terminal by using a response signal to the second beamforming signal 510 based on RSSI.
  • the processor of the electronic device is'two directions in which the reception sensitivity is high among the plurality of first beamforming signals' and Among the directions in which the second beamforming signal 510 is transmitted, the third beamforming signal 520 may be transmitted between two directions having high reception sensitivity.
  • the processor of the electronic device may determine to transmit the third beamforming signal 520 when the distance to the mobile terminal is greater than 2 m.
  • the processor of the electronic device may acquire the direction of the mobile terminal by using a response signal to the third beamforming signal 520.
  • the processor of the electronic device is in the direction in which the third beamforming signal 520 and the beamforming signal are transmitted.
  • the fourth beamforming signal 530 may be transmitted between directions closest to the third beamforming signal 520.
  • the processor of the electronic device may acquire a direction of the mobile terminal by using a response signal to the fourth beamforming signal 530.
  • the beamforming signal is transmitted in a plurality of directions to determine the direction of the mobile terminal, the greater the distance between the electronic device 200 and the mobile terminal 100, the greater the error in direction.
  • the beamforming signal is additionally transmitted to measure the direction, so that the error can be prevented from increasing as the distance increases.
  • the measurement error is small when the distance is close, even in this case, when the beamforming signal is additionally transmitted, a delay is caused and the effect of reducing the measurement error may be insignificant. Therefore, the shorter the distance is, the less the number of beamforming signals are transmitted, which has the advantage of quickly determining the direction of the mobile terminal.
  • an operation method of the electronic device 200 may include providing a service for a mobile terminal using a distance and a direction (S250 ).
  • the processor of the electronic device may acquire location information of the mobile terminal using a distance and a direction from the mobile terminal. Also, the processor of the electronic device may provide a service for the mobile terminal by using the location information of the mobile terminal.
  • FIG. 6 is a view for explaining a method for automatically establishing a connection with a mobile terminal according to an embodiment of the present invention.
  • the processor may establish a connection with the mobile terminal when the mobile terminal is located within a specific area 610 based on the distance to the mobile terminal and the direction of the mobile terminal.
  • the specific area 610 may mean an area within a specific range from the electronic device.
  • a user equipped with the mobile terminal 100 is in a kitchen.
  • the distance between the mobile terminal 100 and the electronic device 200 is 10 meters away.
  • the processor of the electronic device may not establish a connection with the mobile terminal.
  • the processor of the electronic device may output a message, "The connection is established when the electronic device is accessed.”
  • a user equipped with the mobile terminal 100 moves to the front of the electronic device 200, and the distance between the mobile terminal 100 and the electronic device 200 is 3 meters away. to be.
  • the processor of the electronic device may automatically establish a connection with the mobile terminal.
  • a user equipped with the mobile terminal 100 has moved to the side of the electronic device 200, and the distance between the mobile terminal 100 and the electronic device 200 is 3 meters away.
  • the processor of the electronic device may not establish a connection with the mobile terminal.
  • connection is automatically established may mean that the electronic device 200 and the mobile terminal 100 are connected without additional input in order to provide a service for the mobile terminal 100.
  • connection can be automatically established by detecting the access of the mobile terminal.
  • the processor of the electronic device may receive information about the user of the mobile terminal from the mobile terminal.
  • the processor of the electronic device may receive health information (blood pressure, body temperature, etc.) or medical information (hospital medical information, prescription drug information, etc.) of the user of the mobile terminal.
  • health information blood pressure, body temperature, etc.
  • medical information hospital medical information, prescription drug information, etc.
  • FIG. 7 is a view for explaining a method of providing a service for a mobile terminal according to an embodiment of the present invention.
  • the electronic device 200 may provide a service for the mobile terminal (ie, for a user equipped with the mobile terminal) based on information about the user received from the mobile terminal.
  • the information about the user may include the user's preference information (eg, preference channel, preference screen brightness, etc.).
  • the processor of the electronic device 200 may recommend the user's preferred channel or adjust the brightness of the screen.
  • the electronic device 200 may communicate with the air conditioner 400.
  • the processor of the electronic device 200 may transmit a command to control at least one of the wind strength and direction of the air conditioner based on the distance to the mobile terminal and the direction of the mobile terminal.
  • the command may include location information of the mobile terminal obtained based on the distance to the mobile terminal and the direction of the mobile terminal.
  • the command may include a control command for the wind strength and direction of the air conditioner.
  • the air conditioner 400 may control at least one of the wind strength and direction of the air conditioner based on the received location information.
  • the air conditioner 400 may perform control such as sending strong wind or sending weak wind to the position of the mobile terminal 100 (ie, to the user's location equipped with the mobile terminal).
  • the air conditioner 400 may control at least one of the wind strength and direction of the air conditioner based on the received control command.
  • the electronic device 200 may communicate with the directional speaker 300.
  • the processor of the electronic device 200 may transmit a command to control at least one of the magnitude and direction of the output sound of the directional speaker based on the distance to the mobile terminal and the direction of the mobile terminal.
  • the command may include location information of the mobile terminal obtained based on the distance to the mobile terminal and the direction of the mobile terminal.
  • the command may include a control command for the magnitude and direction of the output sound of the directional speaker.
  • the directional speaker 300 may control at least one of the magnitude and direction of the output sound based on the received location information.
  • the directional speaker 300 may perform control such as outputting a sound of a user's preferred size to the location of the mobile terminal 100 (ie, to the user's location equipped with the mobile terminal).
  • the directional speaker 300 may control at least one of the magnitude and direction of the output sound of the directional speaker 300 based on the received control command.
  • the processor of the electronic device receives information about the user of the mobile terminal from the mobile terminal when the connection with the mobile terminal is established.
  • the processor of the electronic device may transmit information about the user to the external device.
  • the external device may provide a service for the mobile terminal based on the location information of the mobile terminal and information about the user.
  • the air conditioner 400 may use the user's health information or medical information to determine that the user is in a cold. In this case, the air conditioner 400 may discharge wind by avoiding the position of the mobile terminal using the location information of the mobile terminal.
  • the present invention combines RSSI and RTT to determine the location of the mobile terminal, errors due to surrounding environment, obstacles, and movement of the mobile terminal are minimized, and the electronic device alone can locate the mobile terminal. .
  • the present invention can be particularly efficiently used in a house having a complicated structure and many obstacles.
  • the present invention has an advantage that can provide a user-customized service by receiving information about the user during automatic connection.
  • the above-described present invention can be embodied as computer readable codes on a medium on which a program is recorded.
  • the computer-readable medium includes all types of recording devices in which data that can be read by a computer system are stored. Examples of computer-readable media include a hard disk drive (HDD), solid state disk (SSD), silicon disk drive (SDD), ROM, RAM, CD-ROM, magnetic tape, floppy disk, and optical data storage device. There is this.
  • the computer may include a processor 180 of the terminal.

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Telephone Function (AREA)

Abstract

An electronic device is disclosed. The electronic device, according to one embodiment of the present invention, comprises: a wireless communication unit which transmits and receives a wireless signal; and a processor which transmits a first signal to the outside, acquires the distance from a mobile terminal on the basis of RTT by using a response signal for the first signal, transmits a beamforming signal in a plurality of directions, acquires the direction of the mobile terminal on the basis of RSSI by using a response signal for the beamforming signal, and provides a service for the mobile terminal by using the distance and the direction.

Description

전자 장치Electronic device
본 발명은 RTT 기반으로 외부기기와의 거리를 획득하고 RSSI 기반으로 외부 기기의 방향을 획득하여 외부 기기의 위치를 결정함으로써, 사용자 위치 기반의 인공지능 서비스를 제공할 수 있는 전자 장치에 관한 것이다.The present invention relates to an electronic device capable of providing an artificial intelligence service based on a user's location by obtaining a distance from an external device based on RTT and determining an external device's location based on RSSI.
인공 지능(artificial intelligence)은 인간의 지능으로 할 수 있는 사고, 학습, 자기계발 등을 컴퓨터가 할 수 있도록 하는 방법을 연구하는 컴퓨터 공학 및 정보기술의 한 분야로, 컴퓨터가 인간의 지능적인 행동을 모방할 수 있도록 하는 것을 의미한다. Artificial intelligence is a field of computer science and information technology that studies how computers can do thinking, learning, and self-development that human intelligence can do. It means to be able to imitate.
또한, 인공지능은 그 자체로 존재하는 것이 아니라, 컴퓨터 과학의 다른 분야와 직간접으로 많은 관련을 맺고 있다. 특히 현대에는 정보기술의 여러 분야에서 인공지능적 요소를 도입하여, 그 분야의 문제 풀이에 활용하려는 시도가 매우 활발하게 이루어지고 있다.In addition, artificial intelligence does not exist by itself, but has many connections directly or indirectly with other fields of computer science. In particular, in recent years, attempts have been made to actively utilize artificial intelligence elements in various fields of information technology to solve problems in those fields.
최근에는 이동 단말기의 위치를 파악하고, 이동 단말기의 위치에 기초하여 각종 서비스를 제공하는 인공지능 장치가 개발되고 있다.2. Description of the Related Art Recently, artificial intelligence devices that locate a mobile terminal and provide various services based on the location of the mobile terminal have been developed.
한편 종래의 이동 단말기의 위치 파악 방식은, RSSI 기반으로 거리를 인식하거나 RTT 기반으로 위치를 측정하는 것에 국한되었다.On the other hand, the conventional method for locating a mobile terminal is limited to recognizing a distance based on RSSI or measuring a location based on RTT.
한편 RSSI 기반의 거리 인식 방식은 주변의 환경, 장소 및 장애물, 이동 단말기의 움직임 등에 따라 오차가 크게 발생하며, RTT 기반의 위치 측정 방식은 최소 세 개 이상의 디바이스가 필요한 문제가 있었다.On the other hand, the RSSI-based distance recognition method has a large error due to surrounding environments, places and obstacles, and the movement of a mobile terminal, and the RTT-based location measurement method requires at least three devices.
또한 사용자 위치 기반 인공지능 서비스의 제공을 위해서는, 핀 코드(Pin code) 입력 등 기기의 연결 설정 절차가 필요한 문제가 있었다.In addition, in order to provide a user location based AI service, there is a problem in that a connection setting procedure of a device such as a pin code input is required.
본 발명은 상술한 문제점을 해결하기 위한 것으로, 본 발명의 목적은 RTT 기반으로 외부기기와의 거리를 획득하고 RSSI 기반으로 외부 기기의 방향을 획득하여 외부 기기의 위치를 결정함으로써, 사용자 위치 기반의 인공지능 서비스를 제공할 수 있는 전자 장치를 제공하기 위함이다.The present invention is to solve the above-described problem, the object of the present invention is to obtain a distance from an external device based on RTT and determine the location of the external device by obtaining the direction of the external device based on RSSI, based on user location This is to provide an electronic device capable of providing artificial intelligence services.
본 발명의 실시 예에 따른 전자 장치는, 무선 신호를 송신 및 수신하는 무선 통신부, 및, 외부로 제1 신호를 전송하고, RTT 기반으로 상기 제1 신호에 대한 응답 신호를 이용하여 이동 단말기와의 거리를 획득하고, 복수의 방향으로 빔포밍 신호를 전송하고, RSSI 기반으로 상기 빔포밍 신호에 대한 응답 신호를 이용하여 상기 이동 단말기의 방향을 획득하고, 상기 거리 및 상기 방향을 이용하여 상기 이동 단말기에 대한 서비스를 제공하는 프로세서를 포함한다.An electronic device according to an embodiment of the present invention, a wireless communication unit that transmits and receives a wireless signal, and transmits a first signal to the outside and uses a response signal for the first signal based on RTT to establish a connection with the mobile terminal. Acquiring a distance, transmitting a beamforming signal in a plurality of directions, obtaining a direction of the mobile terminal using a response signal to the beamforming signal based on RSSI, and using the distance and the direction to the mobile terminal It includes a processor that provides services for.
본 발명의 실시 예에 따른 전자 장치의 동작 방법은, 외부로 제1 신호를 전송하는 단계, RTT 기반으로 상기 제1 신호에 대한 응답 신호를 이용하여 이동 단말기와의 거리를 획득하는 단계, 복수의 방향으로 빔포밍 신호를 전송하는 단계, RSSI 기반으로 상기 빔포밍 신호에 대한 응답 신호를 이용하여 상기 이동 단말기의 방향을 획득하는 단계, 및, 상기 거리 및 상기 방향을 이용하여 상기 이동 단말기에 대한 서비스를 제공하는 단계를 포함한다.An operation method of an electronic device according to an embodiment of the present invention includes transmitting a first signal to the outside, obtaining a distance from a mobile terminal by using a response signal to the first signal based on RTT, a plurality of Transmitting a beamforming signal in a direction, obtaining a direction of the mobile terminal using a response signal to the beamforming signal based on RSSI, and service for the mobile terminal using the distance and the direction It includes the steps of providing.
본 발명은 RSSI 및 RTT를 결합하여 이동 단말기의 위치를 파악하기 때문에, 주변 환경, 장애물, 이동 단말기의 이동 등에 따른 오차를 최소화 하고, 전자 장치 단독으로 이동 단말기의 위치를 파악할 수 있는 장점이 있다. 또한 이러한 장점으로 인하여, 본 발명은 구조가 복잡하고 장애물이 많은 댁 내에서 특히 효율적으로 사용될 수 있다.Since the present invention combines RSSI and RTT to determine the location of the mobile terminal, it minimizes errors due to surrounding environment, obstacles, movement of the mobile terminal, etc., and has the advantage that the electronic device alone can locate the mobile terminal. In addition, due to these advantages, the present invention can be particularly efficiently used in a house having a complicated structure and many obstacles.
또한 본 발명은 자동 연결 시 사용자에 대한 정보를 수신하여 사용자 맞춤형의 서비스를 제공할 수 있는 장점이 있다.In addition, the present invention has an advantage that can provide a user-customized service by receiving information about the user during automatic connection.
본 발명에서는, 빔포밍 신호를 복수의 방향으로 전송하여 이동 단말기의 방향을 결정하기 때문에, 전자 장치와 이동 단말기의 거리가 멀수록 방향의 오차가 커지게 된다. 다만 본 실시 예에 따르면 이동 단말기와의 거리가 멀수록 빔포밍 신호가 조밀한 각도를 형성하며 전송되기 때문에, 거리가 멀어짐에 따라 오차가 커지는 것을 방지할 수 있다.In the present invention, since the beamforming signal is transmitted in a plurality of directions to determine the direction of the mobile terminal, the greater the distance between the electronic device and the mobile terminal, the greater the error in direction. However, according to the present embodiment, as the distance from the mobile terminal increases, the beamforming signal is transmitted while forming a dense angle, so that the error increases as the distance increases.
본 발명에 따르면, 수신 신호 감도가 큰 두 방향 사이에 이동 단말기가 있을 것으로 예측한 후, 수신 신호 감도가 큰 두 방향 사이에 제2 빔포밍 신호를 전송하고 제2 빔포밍 신호를 이용하여 방향을 측정함으로써, 이동 단말기의 방향을 더욱 정밀하게 측정할 수 있는 장점이 있다.According to the present invention, after predicting that there is a mobile terminal between two directions having a large received signal sensitivity, a second beamforming signal is transmitted between two directions having a large received signal sensitivity and the direction is determined using the second beamforming signal. By measuring, there is an advantage that can more accurately measure the direction of the mobile terminal.
본 발명에서는, 빔포밍 신호를 복수의 방향으로 전송하여 이동 단말기의 방향을 결정하기 때문에, 전자 장치와 이동 단말기의 거리가 멀수록 방향의 오차가 커지게 된다. 다만 본 실시 예에 따르면 이동 단말기와의 거리가 멀수록 빔포밍 신호를 추가적으로 전송하여 방향을 측정하기 때문에, 거리가 멀어짐에 따라 오차가 커지는 것을 방지할 수 있다.In the present invention, since the beamforming signal is transmitted in a plurality of directions to determine the direction of the mobile terminal, the greater the distance between the electronic device and the mobile terminal, the greater the error in direction. However, according to the present embodiment, since the distance from the mobile terminal is farther, the beamforming signal is additionally transmitted to measure the direction, so that the error can be prevented from increasing as the distance increases.
또한 거리가 가까운 경우에는 측정 오차가 작기 때문에, 이 경우에도 빔포밍 신호를 추가적으로 전송하게 되면 딜레이가 야기될 뿐 측정 오차를 줄이는 효과는 미미할 수 있다. 따라서 거리가 가까울 수록 빔포밍 신호를 전송하는 횟수를 줄임으로써, 이동 단말기의 방향을 빠르게 결정할 수 있는 장점이 있다.In addition, since the measurement error is small when the distance is close, even in this case, when the beamforming signal is additionally transmitted, a delay is caused and the effect of reducing the measurement error may be insignificant. Therefore, the shorter the distance is, the less the number of beamforming signals are transmitted, which has the advantage of quickly determining the direction of the mobile terminal.
본 발명에 따르면, 핀 코드(Pin code) 입력 등 연결을 설정하기 위한 별도의 입력 없이도, 이동 단말기의 접근을 감지하여 연결을 자동으로 설정할 수 있는 장점이 있다.According to the present invention, even without a separate input for establishing a connection, such as a pin code input, there is an advantage that the connection can be automatically established by detecting the access of the mobile terminal.
도 1a은 본 발명과 관련된 단말기를 설명하기 위한 블록도이다.1A is a block diagram illustrating a terminal related to the present invention.
도 1b는 본 발명과 관련된 전자 장치를 설명하기 위한 블록도이다.1B is a block diagram illustrating an electronic device related to the present invention.
도 2는 본 발명의 실시 예에 따른 전자 장치의 동작 방법을 설명하기 위한 도면이다.2 is a view for explaining a method of operating an electronic device according to an embodiment of the present invention.
도 3은 본 발명의 실시 예에 따른, RTT 기반으로 이동 단말기와의 거리를 획득하는 방법을 설명하기 위한 도면이다.3 is a diagram for explaining a method of obtaining a distance from a mobile terminal based on RTT according to an embodiment of the present invention.
도 4는 본 발명의 실시 예에 따른, RSSI 기반으로 이동 단말기의 방향을 획득하는 방법을 설명하기 위한 도면이다.4 is a diagram for explaining a method of obtaining a direction of a mobile terminal based on RSSI according to an embodiment of the present invention.
도 5는 본 발명의 또 실시 예에 따른, RSSI 기반으로 이동 단말기의 방향을 획득하는 방법을 설명하기 위한 도면이다.5 is a diagram for explaining a method of obtaining a direction of a mobile terminal based on RSSI according to another embodiment of the present invention.
도 6은 본 발명의 실시 예에 따른 이동 단말기와의 연결을 자동 설정하는 방법을 설명하기 위한 도면이다.6 is a view for explaining a method for automatically establishing a connection with a mobile terminal according to an embodiment of the present invention.
도 7은 본 발명의 실시 예에 따른, 이동 단말기에 대한 서비스를 제공하는 방법을 설명하기 위한 도면이다.7 is a view for explaining a method of providing a service for a mobile terminal according to an embodiment of the present invention.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.Hereinafter, exemplary embodiments disclosed in the present specification will be described in detail with reference to the accompanying drawings, but the same or similar elements are assigned the same reference numbers regardless of the reference numerals, and overlapping descriptions thereof will be omitted. The suffixes "modules" and "parts" for components used in the following description are given or mixed only considering the ease of writing the specification, and do not have meanings or roles that are distinguished from each other. In addition, in describing the embodiments disclosed in this specification, detailed descriptions of related well-known technologies are omitted when it is determined that they may obscure the gist of the embodiments disclosed herein. In addition, the accompanying drawings are only for easy understanding of the embodiments disclosed in the present specification, and the technical spirit disclosed in the specification is not limited by the accompanying drawings, and all modifications included in the spirit and technical scope of the present invention , It should be understood to include equivalents or substitutes.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.Terms including ordinal numbers such as first and second may be used to describe various components, but the components are not limited by the terms. The terms are used only for the purpose of distinguishing one component from other components.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.When an element is said to be "connected" or "connected" to another component, it is understood that other components may be directly connected or connected to the other component, but other components may exist in the middle. It should be. On the other hand, when a component is said to be "directly connected" or "directly connected" to another component, it should be understood that no other component exists in the middle.
본 명세서에서 설명되는 단말기에는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(laptop computer), 디지털방송용 단말기, PDA(personal digital assistants), PMP(portable multimedia player), 네비게이션, 슬레이트 PC(slate PC), 태블릿 PC(tablet PC), 울트라북(ultrabook), 웨어러블 디바이스(wearable device, 예를 들어, 워치형 단말기 (smartwatch), 글래스형 단말기 (smart glass), HMD(head mounted display)) 등이 포함될 수 있다. The terminals described herein include mobile phones, smart phones, laptop computers, digital broadcasting terminals, personal digital assistants (PDAs), portable multimedia players (PMPs), navigation, and slate PCs. It may include a tablet PC (tablet PC), ultrabook (ultrabook), wearable device (wearable device, for example, a watch-type terminal (smartwatch), glass-type terminal (smart glass), HMD (head mounted display), etc. .
도 1a은 본 발명과 관련된 단말기를 설명하기 위한 블록도이다.1A is a block diagram illustrating a terminal related to the present invention.
본 명세서에 기재된 실시 예에 따른 단말기(100)는 스마트 TV, 데스크탑 컴퓨터, 디지털사이니지 등과 같은 고정 단말기에도 적용될 수도 있다.The terminal 100 according to the embodiment described in this specification may also be applied to a fixed terminal such as a smart TV, a desktop computer, and a digital signage.
또한, 본 발명의 실시 예에 따른 단말기(100)는 고정 또는 이동 가능한 로봇에도 적용될 수 있다.In addition, the terminal 100 according to an embodiment of the present invention may be applied to a fixed or movable robot.
또한, 본 발명의 실시 예에 따른 단말기(100)는 음성 에이전트의 기능을 수행할 수 있다. 음성 에이전트는 사용자의 음성을 인식하고, 인식된 사용자의 음성에 적합한 응답을 음성으로 출력하는 프로그램일 수 있다.In addition, the terminal 100 according to an embodiment of the present invention may perform the function of a voice agent. The voice agent may be a program that recognizes a user's voice and outputs a response suitable for the recognized user's voice as a voice.
단말기(100)는 무선 통신부(110), 입력부(120), 러닝 프로세서(130), 센싱부(140), 출력부(150), 인터페이스부(160), 메모리(170), 프로세서(180) 및 전원 공급부(190)를 포함할 수 있다. The terminal 100 includes a wireless communication unit 110, an input unit 120, a running processor 130, a sensing unit 140, an output unit 150, an interface unit 160, a memory 170, a processor 180, and It may include a power supply 190.
무선 통신부(110)는, 방송 수신 모듈(111), 이동통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114), 위치정보 모듈(115) 중 적어도 하나를 포함할 수 있다.The wireless communication unit 110 may include at least one of a broadcast receiving module 111, a mobile communication module 112, a wireless Internet module 113, a short-range communication module 114, and a location information module 115.
방송 수신 모듈(111)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다.The broadcast receiving module 111 receives a broadcast signal and/or broadcast related information from an external broadcast management server through a broadcast channel.
이동통신 모듈(112)은, 이동통신을 위한 기술표준들 또는 통신방식(예를 들어, GSM(Global System for Mobile communication), CDMA(Code Division Multi Access), CDMA2000(Code Division Multi Access 2000), EV-DO(Enhanced Voice-Data Optimized or Enhanced Voice-Data Only), WCDMA(Wideband CDMA), HSDPA(High Speed Downlink Packet Access), HSUPA(High Speed Uplink Packet Access), LTE(Long Term Evolution), LTE-A(Long Term Evolution-Advanced) 등)에 따라 구축된 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. The mobile communication module 112 includes technical standards or communication methods for mobile communication (eg, Global System for Mobile Communication (GSM), Code Division Multi Access (CDMA), Code Division Multi Access 2000 (CDMA2000), EV -Enhanced Voice-Data Optimized or Enhanced Voice-Data Only (DO), Wideband CDMA (WCDMA), High Speed Downlink Packet Access (HSDPA), High Speed Uplink Packet Access (HSUPA), Long Term Evolution (LTE), LTE-A (Long Term Evolution-Advanced) transmits and receives wireless signals to and from at least one of a base station, an external terminal, and a server on a mobile communication network constructed according to (Long Term Evolution-Advanced).
무선 인터넷 모듈(113)은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 단말기(100)에 내장되거나 외장될 수 있다. 무선 인터넷 모듈(113)은 무선 인터넷 기술들에 따른 통신망에서 무선 신호를 송수신하도록 이루어진다.The wireless Internet module 113 refers to a module for wireless Internet access, and may be built in or external to the terminal 100. The wireless Internet module 113 is configured to transmit and receive wireless signals in a communication network according to wireless Internet technologies.
무선 인터넷 기술로는, 예를 들어 WLAN(Wireless LAN), Wi-Fi(Wireless-Fidelity), Wi-Fi(Wireless Fidelity) Direct, DLNA(Digital Living Network Alliance), WiBro(Wireless Broadband), WiMAX(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access), HSUPA(High Speed Uplink Packet Access), LTE(Long Term Evolution), LTE-A(Long Term Evolution-Advanced) 등이 있다.Wireless Internet technologies include, for example, WLAN (Wireless LAN), Wi-Fi (Wireless-Fidelity), Wi-Fi (Wireless Fidelity) Direct, DLNA (Digital Living Network Alliance), WiBro (Wireless Broadband), WiMAX (World) Interoperability for Microwave Access (HSDPA), High Speed Downlink Packet Access (HSDPA), High Speed Uplink Packet Access (HSUPA), Long Term Evolution (LTE), and Long Term Evolution-Advanced (LTE-A).
근거리 통신 모듈(114)은 근거리 통신(Short range communication)을 위한 것으로서, 블루투스(Bluetooth™), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association; IrDA), UWB(Ultra Wideband), ZigBee, NFC(Near Field Communication), Wi-Fi(Wireless-Fidelity), Wi-Fi Direct, Wireless USB(Wireless Universal Serial Bus) 기술 중 적어도 하나를 이용하여, 근거리 통신을 지원할 수 있다.The short-range communication module 114 is for short-range communication, Bluetooth™, Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, NFC (Near Field Communication), Wi-Fi (Wireless-Fidelity), Wi-Fi Direct, Wireless USB (Wireless Universal Serial Bus) using at least one of the technology, it can support short-range communication.
위치정보 모듈(115)은 이동 단말기의 위치(또는 현재 위치)를 획득하기 위한 모듈로서, 그의 대표적인 예로는 GPS(Global Positioning System) 모듈 또는 WiFi(Wireless Fidelity) 모듈이 있다. 예를 들어, 단말기는 GPS모듈을 활용하면, GPS 위성에서 보내는 신호를 이용하여 이동 단말기의 위치를 획득할 수 있다. The location information module 115 is a module for acquiring a location (or current location) of a mobile terminal, and typical examples thereof include a Global Positioning System (GPS) module or a Wireless Fidelity (WiFi) module. For example, if the terminal utilizes a GPS module, the location of the mobile terminal can be acquired using a signal sent from a GPS satellite.
입력부(120)는 영상 신호 입력을 위한 카메라(121), 오디오 신호를 수신하기 위한 마이크로폰(122), 사용자로부터 정보를 입력 받기 위한 사용자 입력부(123)를 포함할 수 있다. The input unit 120 may include a camera 121 for inputting a video signal, a microphone 122 for receiving an audio signal, and a user input unit 123 for receiving information from a user.
입력부(120)에서 수집한 음성 데이터나 이미지 데이터는 분석되어 사용자의 제어명령으로 처리될 수 있다.The voice data or image data collected by the input unit 120 may be analyzed and processed by a user's control command.
입력부(120)는 영상 정보(또는 신호), 오디오 정보(또는 신호), 데이터, 또는 사용자로부터 입력되는 정보의 입력을 위한 것으로서, 영상 정보의 입력을 위하여, 단말기(100)는 하나 또는 복수의 카메라(121)들을 구비할 수 있다.The input unit 120 is for input of image information (or signals), audio information (or signals), data, or information input from a user. For input of image information, the terminal 100 includes one or more cameras It may be provided with (121).
카메라(121)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 처리된 화상 프레임은 디스플레이부(151)에 표시되거나 메모리(170)에 저장될 수 있다. The camera 121 processes image frames such as still images or moving pictures obtained by an image sensor in a video call mode or a shooting mode. The processed image frame may be displayed on the display unit 151 or stored in the memory 170.
마이크로폰(122)은 외부의 음향 신호를 전기적인 음성 데이터로 처리한다. 처리된 음성 데이터는 단말기(100)에서 수행 중인 기능(또는 실행 중인 응용 프로그램)에 따라 다양하게 활용될 수 있다. 한편, 마이크로폰(122)에는 외부의 음향 신호를 입력 받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.The microphone 122 processes external sound signals as electrical voice data. The processed voice data may be used in various ways according to a function (or a running application program) being performed by the terminal 100. Meanwhile, various noise reduction algorithms for removing noise generated in the process of receiving an external sound signal may be implemented in the microphone 122.
사용자 입력부(123)는 사용자로부터 정보를 입력 받기 위한 것으로서, 사용자 입력부(123)를 통해 정보가 입력되면, The user input unit 123 is for receiving information from a user. When information is input through the user input unit 123,
프로세서(180)는 입력된 정보에 대응되도록 단말기(100)의 동작을 제어할 수 있다. The processor 180 may control the operation of the terminal 100 to correspond to the inputted information.
사용자 입력부(123)는 기계식 (mechanical) 입력수단(또는, 메커니컬 키, 예를 들어, 단말기(100)의 전?후면 또는 측면에 위치하는 버튼, 돔 스위치 (dome switch), 조그 휠, 조그 스위치 등) 및 터치식 입력수단을 포함할 수 있다. 일 예로서, 터치식 입력수단은, 소프트웨어적인 처리를 통해 터치스크린에 표시되는 가상 키(virtual key), 소프트 키(soft key) 또는 비주얼 키(visual key)로 이루어지거나, 상기 터치스크린 이외의 부분에 배치되는 터치 키(touch key)로 이루어질 수 있다.The user input unit 123 is a mechanical input means (or a mechanical key, for example, a button located on the front or rear or side of the terminal 100, a dome switch, a jog wheel, a jog switch, etc.) ) And a touch-type input means. As an example, the touch-type input means is made of a virtual key, a soft key or a visual key displayed on the touch screen through software processing, or a part other than the touch screen It may be made of a touch key (touch key) disposed on.
러닝 프로세서(130)는 데이터 마이닝, 데이터 분석, 지능형 의사 결정, 및 기계 학습 알고리즘 및 기술을 위해 이용될 정보를 수신, 분류, 저장 및 출력하도록 구성 될 수 있다.The learning processor 130 may be configured to receive, classify, store, and output information to be used for data mining, data analysis, intelligent decision making, and machine learning algorithms and techniques.
러닝 프로세서(130)는 단말기에 의해 수신, 검출, 감지, 생성, 사전 정의 또는 다른 방식으로 출력되거나 수신, 검출, 감지, 생성, 사전 정의 또는 다른 방식으로 다른 컴포넌트, 디바이스, 단말기 또는 단말기와 통신하는 장치에 의해 출력되는 데이터를 저장하도록 구성된 하나 이상의 메모리 유닛을 포함 할 수 있다.The learning processor 130 may be received, detected, detected, generated, predefined, or otherwise output by the terminal or communicated with other components, devices, terminals, or terminals in a received, detected, detected, generated, predefined, or otherwise manner It may include one or more memory units configured to store data output by the device.
러닝 프로세서(130)는 단말기에 통합되거나 구현된 메모리를 포함 할 수 있다. 일부 실시 예에서, 러닝 프로세서(130)는 메모리(170)를 사용하여 구현 될 수 있다.The learning processor 130 may include a memory integrated or implemented in a terminal. In some embodiments, the learning processor 130 may be implemented using the memory 170.
선택적으로 또는 부가 적으로, 러닝 프로세서(130)는 단말기에 직접 결합된 외부 메모리 또는 단말기와 통신하는 서버에서 유지되는 메모리와 같이 단말기와 관련된 메모리를 사용하여 구현 될 수 있다.Alternatively or additionally, the learning processor 130 may be implemented using memory associated with the terminal, such as external memory coupled directly to the terminal or memory maintained in a server communicating with the terminal.
다른 실시 예에서, 러닝 프로세서(130)는 클라우드 컴퓨팅 환경에서 유지되는 메모리, 또는 네트워크와 같은 통신 방식을 통해 단말기에 의해 액세스 가능한 다른 원격 메모리 위치를 이용하여 구현 될 수 있다. In another embodiment, the learning processor 130 may be implemented using memory maintained in a cloud computing environment, or other remote memory location accessible by a terminal through a communication method such as a network.
러닝 프로세서(130)는 일반적으로 감독 또는 감독되지 않은 학습, 데이터 마이닝, 예측 분석 또는 다른 머신에서 사용하기 위해 데이터를 식별, 색인화, 카테고리화, 조작, 저장, 검색 및 출력하기 위해 데이터를 하나 이상의 데이터베이스에 저장하도록 구성될 수 있다.The learning processor 130 typically includes one or more databases for identifying, indexing, categorizing, manipulating, storing, retrieving, and outputting data for use in supervised or unsupervised learning, data mining, predictive analytics, or other machines. It can be configured to store on.
러닝 프로세서(130)에 저장된 정보는 다양한 상이한 유형의 데이터 분석 알고리즘 및 기계 학습 알고리즘 중 임의의 것을 사용하여 프로세서(180) 또는 단말기의 하나 이상의 다른 제어기에 의해 이용될 수 있다.The information stored in the learning processor 130 can be utilized by one or more other controllers of the processor 180 or terminal using any of a variety of different types of data analysis algorithms and machine learning algorithms.
이러한, 알고리즘의 예로는, k-최근 인접 시스템, 퍼지 논리 (예: 가능성 이론), 신경 회로망, 볼츠만 기계, 벡터 양자화, 펄스 신경망, 지원 벡터 기계, 최대 마진 분류기, 힐 클라이밍, 유도 논리 시스템 베이지안 네트워크, 페리트넷 (예: 유한 상태 머신, 밀리 머신, 무어 유한 상태 머신), 분류기 트리 (예: 퍼셉트론 트리, 지원 벡터 트리, 마코프 트리, 의사 결정 트리 포리스트, 임의의 포리스트), 판돈 모델 및 시스템, 인공 융합, 센서 융합, 이미지 융합, 보강 학습, 증강 현실, 패턴 인식, 자동화 된 계획 등을 포함한다. Examples of these, algorithms, k-recent neighbor systems, fuzzy logic (eg probability theory), neural networks, Boltzmann machines, vector quantization, pulse neural networks, support vector machines, maximum margin classifier, hill climbing, inductive logic system Bayesian network , Peritnet (e.g. finite state machine, milli machine, Moore finite state machine), classifier tree (e.g. perceptron tree, support vector tree, Markov tree, decision tree forest, random forest), stake models and systems, artificial Convergence, sensor fusion, image fusion, reinforcement learning, augmented reality, pattern recognition, automated planning, and more.
프로세서(180)는 데이터 분석 및 기계 학습 알고리즘을 사용하여 결정되거나, 생성된 정보에 기초하여 단말기의 적어도 하나의 실행 가능한 동작을 결정 또는 예측할 수 있다. 이를 위해, 프로세서(180)는 러닝 프로세서(130)의 데이터를 요청, 검색, 수신 또는 활용할 수 있고, 상기 적어도 하나의 실행 가능한 동작 중 예측되는 동작이나, 바람직한 것으로 판단되는 동작을 실행하도록 상기 단말기를 제어할 수 있다.The processor 180 may determine or predict at least one executable action of the terminal based on the generated information, or determined using data analysis and machine learning algorithms. To this end, the processor 180 may request, search, receive, or utilize data of the learning processor 130, and may use the terminal to perform a predicted operation or an operation determined to be preferable among the at least one executable operation. Can be controlled.
프로세서(180)는 지능적 에뮬레이션(즉, 지식 기반 시스템, 추론 시스템 및 지식 획득 시스템)을 구현하는 다양한 기능을 수행 할 수 있다. 이는 적응 시스템, 기계 학습 시스템, 인공 신경망 등을 포함하는, 다양한 유형의 시스템(예컨대, 퍼지 논리 시스템)에 적용될 수 있다.The processor 180 may perform various functions for implementing intelligent emulation (ie, a knowledge-based system, a reasoning system, and a knowledge acquisition system). It can be applied to various types of systems (eg, fuzzy logic systems), including adaptive systems, machine learning systems, artificial neural networks, and the like.
프로세서(180)는, 또한 I/O 처리 모듈, 환경 조건 모듈, 음성 - 텍스트 (STT) 처리 모듈, 자연어 처리 모듈, 작업 흐름 처리 모듈 및 서비스 처리 모듈과 같이, 음성 및 자연 언어 음성 처리를 수반하는 연산을 가능하게 하는 서브 모듈을 포함할 수 있다.The processor 180 also involves speech and natural language speech processing, such as an I/O processing module, an environmental condition module, a speech-to-text (STT) processing module, a natural language processing module, a work flow processing module, and a service processing module. It may include sub-modules that enable calculation.
이들 서브 모듈들 각각은, 단말기에서의 하나 이상의 시스템 또는 데이터 및 모델, 또는 이들의 서브셋 또는 수퍼 셋에 대한 액세스를 가질 수 있다. 또한, 이들 서브 모듈들 각각은, 어휘 색인, 사용자 데이터, 작업 흐름 모델, 서비스 모델 및 자동 음성 인식 (ASR) 시스템을 비롯한 다양한 기능을 제공할 수 있다.Each of these sub-modules can have access to one or more systems or data and models at the terminal, or a subset or superset thereof. In addition, each of these sub-modules can provide various functions, including vocabulary index, user data, work flow model, service model, and automatic speech recognition (ASR) system.
다른 실시 예에서, 프로세서(180) 또는 단말기의 다른 양태는 상기 서브 모듈, 시스템, 또는 데이터 및 모델로 구현 될 수 있다.In other embodiments, other aspects of the processor 180 or terminal may be implemented with the submodules, systems, or data and models.
일부 예에서, 러닝 프로세서(130)의 데이터에 기초하여, 프로세서(180)는 사용자 입력 또는 자연 언어 입력으로 표현된 문맥 조건 또는 사용자의 의도에 기초하여 요구 사항을 검출하고 감지하도록 구성 될 수 있다.In some examples, based on data from the running processor 130, the processor 180 may be configured to detect and detect requirements based on the user's intention or contextual conditions expressed in user input or natural language input.
프로세서(180)는 문맥 조건 또는 사용자의 의도에 기초하여 요구 사항을 완전히 결정하는데 필요한 정보를 능동적으로 이끌어 내고, 획득할 수 있다. 예를 들어, 프로세서(180)는 역사적 입력 및 출력, 패턴 매칭, 모호하지 않은 단어, 입력 의도 등을 포함하는 과거 데이터를 분석함으로써 요구 사항을 결정하는데, 필요한 정보를 능동적으로 이끌어낼 수 있다.The processor 180 may actively derive and acquire information necessary to completely determine a requirement based on a context condition or a user's intention. For example, the processor 180 may actively derive information necessary to determine a requirement by analyzing historical data including historical input and output, pattern matching, unambiguous words, and input intention.
프로세서(180)는 문맥 조건 또는 사용자의 의도에 기초하여 요구 사항에 응답하는 기능을 실행하기 위한 태스크 흐름을 결정할 수 있다.The processor 180 may determine a task flow for executing a function that responds to a requirement based on a context condition or a user's intention.
프로세서(180)는 러닝 프로세서(130)에서 프로세싱 및 저장을 위한 정보를 수집하기 위해, 단말기에서 하나 이상의 감지 컴포넌트를 통해 데이터 분석 및 기계 학습 작업에 사용되는 신호 또는 데이터를 수집, 감지, 추출, 검출 및/또는 수신하도록 구성 될 수 있다.The processor 180 collects, detects, extracts, and detects signals or data used in data analysis and machine learning operations through one or more sensing components in the terminal, in order to collect information for processing and storage in the learning processor 130 And/or receive.
정보 수집은 센서를 통해 정보를 감지하는 것, 메모리(170)에 저장된 정보를 추출하는 것 또는 통신 수단을 통해 다른 단말기, 엔티티 또는 외부 저장 장치로부터 정보를 수신하는 것을 포함 할 수 있다.Collecting information may include sensing information through a sensor, extracting information stored in the memory 170, or receiving information from another terminal, entity, or external storage device through communication means.
프로세서(180)는 단말기에서 사용 히스토리 정보를 수집하여, 저장할 수 있다.The processor 180 may collect and store usage history information in the terminal.
프로세서(180)는 저장된 사용 히스토리 정보 및 예측 모델링을 사용하여 특정 기능을 실행하기 위한 최상의 매치를 결정할 수 있다.The processor 180 may use the stored usage history information and predictive modeling to determine the best match for executing a specific function.
프로세서(180)는 센싱부(140)를 통해 주변 환경 정보 또는 기타 정보를 수신하거나 감지 할 수 있다. The processor 180 may receive or sense surrounding environment information or other information through the sensing unit 140.
프로세서(180)는 무선 통신부(110)을 통해 방송 신호 및/또는 방송 관련 정보, 무선 신호, 무선 데이터를 수신할 수 있다.The processor 180 may receive a broadcast signal and/or broadcast-related information, a radio signal, and radio data through the radio communication unit 110.
프로세서(180)는 입력부(120)로부터 이미지 정보 (또는 해당 신호), 오디오 정보 (또는 해당 신호), 데이터 또는 사용자 입력 정보를 수신 할 수 있다.The processor 180 may receive image information (or a corresponding signal), audio information (or a corresponding signal), data, or user input information from the input unit 120.
프로세서(180)는 정보를 실시간으로 수집하고, 정보 (예를 들어, 지식 그래프, 명령 정책, 개인화 데이터베이스, 대화 엔진 등)를 처리 또는 분류하고, 처리 된 정보를 메모리(170) 또는 러닝 프로세서(130)에 저장할 수 있다.The processor 180 collects information in real time, processes or classifies information (for example, a knowledge graph, command policy, personalization database, conversation engine, etc.), and processes the processed information in the memory 170 or the learning processor 130 ).
단말기의 동작이 데이터 분석 및 기계 학습 알고리즘 및 기술에 기초하여 결정될 때, 프로세서(180)는 결정된 동작을 실행하기 위해 단말기의 구성 요소를 제어 할 수 있다. 그리고 프로세서(180)는 제어 명령에 따라 단말을 제어하여 결정된 동작을 수행 할 수 있다.When the operation of the terminal is determined based on data analysis and machine learning algorithms and techniques, the processor 180 can control the components of the terminal to perform the determined operation. In addition, the processor 180 may perform the determined operation by controlling the terminal according to the control command.
프로세서(180)는 특정 동작이 수행되는 경우, 데이터 분석 및 기계 학습 알고리즘 및 기법을 통해 특정 동작의 실행을 나타내는 이력 정보를 분석하고, 분석된 정보에 기초하여 이전에 학습 한 정보의 업데이트를 수행 할 수 있다.When a specific operation is performed, the processor 180 analyzes historical information indicating execution of a specific operation through data analysis and machine learning algorithms and techniques, and performs updating of previously learned information based on the analyzed information. Can.
따라서, 프로세서(180)는 러닝 프로세서(130)과 함께, 업데이트 된 정보에 기초하여 데이터 분석 및 기계 학습 알고리즘 및 기법의 미래 성능의 정확성을 향상시킬 수 있다.Accordingly, the processor 180 may improve the accuracy of future performance of data analysis and machine learning algorithms and techniques based on the updated information along with the learning processor 130.
센싱부(140)는 이동 단말기 내 정보, 이동 단말기를 둘러싼 주변 환경 정보 및 사용자 정보 중 적어도 하나를 센싱 하기 위한 하나 이상의 센서를 포함할 수 있다. The sensing unit 140 may include one or more sensors for sensing at least one of information in the mobile terminal, surrounding environment information surrounding the mobile terminal, and user information.
예를 들어, 센싱부(140)는 근접센서(141, proximity sensor), 조도 센서(142, illumination sensor), 터치 센서(touch sensor), 가속도 센서(acceleration sensor), 자기 센서(magnetic sensor), 중력 센서(G-sensor), 자이로스코프 센서(gyroscope sensor), 모션 센서(motion sensor), RGB 센서, 적외선 센서(IR 센서: infrared sensor), 지문인식 센서(finger scan sensor), 초음파 센서(ultrasonic sensor), 광 센서(optical sensor, 예를 들어, 카메라(121 참조)), 마이크로폰(microphone, 122 참조), 배터리 게이지(battery gauge), 환경 센서(예를 들어, 기압계, 습도계, 온도계, 방사능 감지 센서, 열 감지 센서, 가스 감지 센서 등), 화학 센서(예를 들어, 전자 코, 헬스케어 센서, 생체 인식 센서 등) 중 적어도 하나를 포함할 수 있다. 한편, 본 명세서에 개시된 이동 단말기는, 이러한 센서들 중 적어도 둘 이상의 센서에서 센싱되는 정보들을 조합하여 활용할 수 있다.For example, the sensing unit 140 includes a proximity sensor 141, an illumination sensor 142, a touch sensor, an acceleration sensor, a magnetic sensor, and gravity G-sensor, gyroscope sensor, motion sensor, RGB sensor, infrared sensor (IR sensor), fingerprint scan sensor, ultrasonic sensor , Optical sensor (e.g., camera (see 121)), microphone (refer to 122), battery gauge, environmental sensor (e.g. barometer, hygrometer, thermometer, radioactivity sensor, Thermal sensor, gas sensor, etc.), and a chemical sensor (eg, an electronic nose, a health care sensor, a biometric sensor, etc.). Meanwhile, the mobile terminal disclosed in the present specification may combine and use information sensed by at least two or more of these sensors.
출력부(150)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 디스플레이부(151), 음향 출력부(152), 햅팁 모듈(153), 광 출력부(154) 중 적어도 하나를 포함할 수 있다. The output unit 150 is for generating output related to vision, hearing, or tactile sense, and includes at least one of a display unit 151, an audio output unit 152, a hap tip module 153, and an optical output unit 154 can do.
디스플레이부(151)는 단말기(100)에서 처리되는 정보를 표시(출력)한다. 예를 들어, 디스플레이부(151)는 단말기(100)에서 구동되는 응용 프로그램의 실행화면 정보, 또는 이러한 실행화면 정보에 따른 UI(User Interface), GUI(Graphic User Interface) 정보를 표시할 수 있다. The display unit 151 displays (outputs) information processed by the terminal 100. For example, the display unit 151 may display execution screen information of an application program driven by the terminal 100, or UI (User Interface) or GUI (Graphic User Interface) information according to the execution screen information.
디스플레이부(151)는 터치 센서와 상호 레이어 구조를 이루거나 일체형으로 형성됨으로써, 터치 스크린을 구현할 수 있다. 이러한 터치 스크린은, 단말기(100)와 사용자 사이의 입력 인터페이스를 제공하는 사용자 입력부(123)로써 기능함과 동시에, 단말기(100)와 사용자 사이의 출력 인터페이스를 제공할 수 있다.The display unit 151 may form a mutual layer structure with the touch sensor or may be integrally formed, thereby realizing a touch screen. The touch screen may function as a user input unit 123 that provides an input interface between the terminal 100 and the user, and at the same time, provide an output interface between the terminal 100 and the user.
음향 출력부(152)는 호신호 수신, 통화모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(170)에 저장된 오디오 데이터를 출력할 수 있다. The audio output unit 152 may output audio data received from the wireless communication unit 110 or stored in the memory 170 in a call signal reception, call mode or recording mode, voice recognition mode, broadcast reception mode, or the like.
음향 출력부(152)는 리시버(receiver), 스피커(speaker), 버저(buzzer) 중 적어도 하나 이상을 포함할 수 있다.The audio output unit 152 may include at least one of a receiver, a speaker, and a buzzer.
햅틱 모듈(haptic module)(153)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(153)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 될 수 있다.The haptic module 153 generates various tactile effects that the user can feel. A typical example of the tactile effect generated by the haptic module 153 may be vibration.
광출력부(154)는 단말기(100)의 광원의 빛을 이용하여 이벤트 발생을 알리기 위한 신호를 출력한다. 단말기(100)에서 발생 되는 이벤트의 예로는 메시지 수신, 호 신호 수신, 부재중 전화, 알람, 일정 알림, 이메일 수신, 애플리케이션을 통한 정보 수신 등이 될 수 있다.The light output unit 154 outputs a signal for notifying the occurrence of an event using the light of the light source of the terminal 100. Examples of events generated in the terminal 100 may include receiving messages, receiving call signals, missed calls, alarms, schedule notifications, receiving emails, and receiving information through applications.
인터페이스부(160)는 단말기(100)에 연결되는 다양한 종류의 외부 기기와의 통로 역할을 수행한다. 이러한 인터페이스부(160)는, 유/무선 헤드셋 포트(port), 외부 충전기 포트(port), 유/무선 데이터 포트(port), 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트(port), 오디오 I/O(Input/Output) 포트(port), 비디오 I/O(Input/Output) 포트(port), 이어폰 포트(port)중 적어도 하나를 포함할 수 있다. 단말기(100)에서는, 상기 인터페이스부(160)에 외부 기기가 연결되는 것에 대응하여, 연결된 외부 기기와 관련된 적절할 제어를 수행할 수 있다.The interface unit 160 serves as a passage with various types of external devices connected to the terminal 100. The interface unit 160 connects a device equipped with a wired/wireless headset port, an external charger port, a wired/wireless data port, a memory card port, and an identification module. It may include at least one of a port, an audio input/output (I/O) port, a video input/output (I/O) port, and an earphone port. In the terminal 100, in response to an external device being connected to the interface unit 160, appropriate control related to the connected external device may be performed.
한편, 식별 모듈은 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(user identify module; UIM), 가입자 인증 모듈(subscriber identity module; SIM), 범용 사용자 인증 모듈(universal subscriber identity module; USIM) 등을 포함할 수 있다. 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서 식별 장치는 상기 인터페이스부(160)를 통하여 단말기(100)와 연결될 수 있다.Meanwhile, the identification module is a chip that stores various information for authenticating the usage rights of the terminal 100, a user identification module (UIM), a subscriber identity module (SIM), and a universal user authentication module (universal subscriber identity module; USIM). The device provided with the identification module (hereinafter referred to as an'identification device') may be manufactured in a smart card format. Accordingly, the identification device may be connected to the terminal 100 through the interface unit 160.
메모리(170)는 단말기(100)의 다양한 기능을 지원하는 데이터를 저장한다. The memory 170 stores data supporting various functions of the terminal 100.
메모리(170)는 단말기(100)에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), 단말기(100)의 동작을 위한 데이터들, 명령어들을, 러닝 프로세서(130)의 동작을 위한 데이터들(예를 들어, 머신 러닝을 위한 적어도 하나의 알고리즘 정보 등)을 저장할 수 있다. The memory 170 is a plurality of application programs (application programs or applications) running in the terminal 100, data for the operation of the terminal 100, instructions, data for the operation of the running processor 130 Fields (eg, at least one algorithm information for machine learning, etc.).
프로세서(180)는 상기 응용 프로그램과 관련된 동작 외에도, 통상적으로 단말기(100)의 전반적인 동작을 제어한다. 프로세서(180)는 위에서 살펴본 구성요소들을 통해 입력 또는 출력되는 신호, 데이터, 정보 등을 처리하거나 메모리(170)에 저장된 응용 프로그램을 구동함으로써, 사용자에게 적절한 정보 또는 기능을 제공 또는 처리할 수 있다.The processor 180 controls the overall operation of the terminal 100 in addition to the operations related to the application program. The processor 180 may provide or process appropriate information or functions to the user by processing signals, data, information, etc. input or output through the above-described components or by driving an application program stored in the memory 170.
또한, 프로세서(180)는 메모리(170)에 저장된 응용 프로그램을 구동하기 위하여, 도 1a와 함께 살펴본 구성요소들 중 적어도 일부를 제어할 수 있다. 나아가, 프로세서(180)는 상기 응용프로그램의 구동을 위하여, 단말기(100)에 포함된 구성요소들 중 적어도 둘 이상을 서로 조합하여 동작시킬 수 있다.In addition, the processor 180 may control at least some of the components described with reference to FIG. 1A in order to drive an application program stored in the memory 170. Furthermore, the processor 180 may operate by combining at least two or more of the components included in the terminal 100 for driving the application program.
전원공급부(190)는 프로세서(180)의 제어 하에서, 외부의 전원, 내부의 전원을 인가 받아 단말기(100)에 포함된 각 구성요소들에 전원을 공급한다. 이러한 전원공급부(190)는 배터리를 포함하며, 상기 배터리는 내장형 배터리 또는 교체 가능한 형태의 배터리가 될 수 있다.Under the control of the processor 180, the power supply unit 190 receives external power and internal power to supply power to each component included in the terminal 100. The power supply unit 190 includes a battery, and the battery may be a built-in battery or a replaceable battery.
한편, 앞서 살펴본 것과 같이, 프로세서(180)는 응용 프로그램과 관련된 동작과, 통상적으로 단말기(100)의 전반적인 동작을 제어한다. 예를 들어, 프로세서(180)는 상기 이동 단말기의 상태가 설정된 조건을 만족하면, 애플리케이션들에 대한 사용자의 제어 명령의 입력을 제한하는 잠금 상태를 실행하거나, 해제할 수 있다. Meanwhile, as described above, the processor 180 controls the operation related to the application program and generally the overall operation of the terminal 100. For example, when the state of the mobile terminal satisfies a set condition, the processor 180 may execute or release a lock state that restricts input of a user's control command to applications.
도 1b는 본 발명의 실시 예에 따른 전자 장치를 설명하기 위한 도면이다.1B is a diagram for describing an electronic device according to an embodiment of the present invention.
도 1b에서는 본 발명의 실시 예에 따른 전자 장치가 디스플레이 장치인 것으로 설명한다. 다만 이에 한정되지 않으며 본 발명의 실시 예에 따른 전자 장치는, 무선 신호와 빔 포밍 신호를 전송할 수 있는 전자 장치 들에 적용될 수 있다.1B, it is described that the electronic device according to an embodiment of the present invention is a display device. However, the present disclosure is not limited thereto, and the electronic device according to an embodiment of the present invention may be applied to electronic devices capable of transmitting a wireless signal and a beam forming signal.
본 발명의 실시 예에 따른 전자 장치는, 예를 들어 방송 수신 기능에 컴퓨터 지원 기능을 추가한 지능형 전자 장치로서, 방송 수신 기능에 충실하면서도 인터넷 기능 등이 추가되어, 수기 방식의 입력 장치, 터치 스크린 또는 공간 리모콘 등 보다 사용에 편리한 인터페이스를 갖출 수 있다. 그리고, 유선 또는 무선 인터넷 기능의 지원으로 인터넷 및 컴퓨터에 접속되어, 이메일, 웹브라우징, 뱅킹 또는 게임 등의 기능도 수행가능하다. 이러한 다양한 기능을 위해 표준화된 범용 OS가 사용될 수 있다.An electronic device according to an embodiment of the present invention is, for example, an intelligent electronic device in which a computer support function is added to a broadcast reception function, while an Internet function or the like is added while faithful to the broadcast reception function, a handwritten input device, a touch screen Or, it may have a more convenient interface such as a space remote control. And, it is connected to the Internet and a computer with the support of a wired or wireless Internet function, and it is also possible to perform functions such as email, web browsing, banking, or games. A standardized general-purpose OS can be used for these various functions.
따라서, 본 발명에서 기술되는 전자 장치는, 예를 들어 범용의 OS 커널 상에, 다양한 애플리케이션이 자유롭게 추가되거나 삭제 가능하므로, 사용자 친화적인 다양한 기능이 수행될 수 있다. 상기 전자 장치는, 보다 구체적으로 예를 들면, 네트워크 TV, HBBTV, 스마트 TV, LED TV, OLED TV 등이 될 수 있으며, 경우에 따라 스마트폰에도 적용 가능하다.Accordingly, since the electronic device described in the present invention can be freely added or deleted in various applications, for example, on a general-purpose OS kernel, various user-friendly functions can be performed. The electronic device may be, for example, a network TV, an HBBTV, a smart TV, an LED TV, or an OLED TV, and may be applied to a smartphone in some cases.
도 1b을 참조하면, 전자 장치(200)는 방송 수신부(230), 외부장치 인터페이스부(235), 저장부(240), 사용자입력 인터페이스부(250), 제어부(270), 근거리 통신부(273), 디스플레이부(280), 오디오 출력부(285), 전원공급부(290)를 포함할 수 있다. Referring to FIG. 1B, the electronic device 200 includes a broadcast receiving unit 230, an external device interface unit 235, a storage unit 240, a user input interface unit 250, a control unit 270, and a local area communication unit 273. , A display unit 280, an audio output unit 285, and a power supply unit 290.
방송 수신부(230)는 튜너(231), 복조부(232) 및 네트워크 인터페이스부(233)를 포함할 수 있다. The broadcast reception unit 230 may include a tuner 231, a demodulation unit 232, and a network interface unit 233.
튜너(231)는 채널 선국 명령에 따라 특정 방송 채널을 선국할 수 있다. 튜너(231)는 선국된 특정 방송 채널에 대한 방송 신호를 수신할 수 있다.The tuner 231 may select a specific broadcast channel according to a channel selection command. The tuner 231 may receive a broadcast signal for a selected specific broadcast channel.
복조부(232)는 수신한 방송 신호를 비디오 신호, 오디오 신호, 방송 프로그램과 관련된 데이터 신호로 분리할 수 있고, 분리된 비디오 신호, 오디오 신호 및 데이터 신호를 출력이 가능한 형태로 복원할 수 있다.The demodulator 232 may separate the received broadcast signal into a video signal, an audio signal, and a data signal related to a broadcast program, and restore the separated video signal, audio signal, and data signal to a form capable of output.
외부장치 인터페이스부(235)는 인접하는 외부 장치 내의 애플리케이션 또는 애플리케이션 목록을 수신하여, 제어부(270) 또는 저장부(240)로 전달할 수 있다.The external device interface unit 235 may receive an application or a list of applications in an adjacent external device, and transmit it to the control unit 270 or the storage unit 240.
외부장치 인터페이스부(235)는 외부장치와의 연결 경로를 제공할 수 있다. 외부장치 인테퍼이스부(235)는 외부장치로부터 출력된 영상, 오디오 중 하나 이상을 수신하여, 제어부(270)로 전달할 수 있다. 외부장치 인터페이스부(235)에 연결 가능한 외부 장치는 셋톱박스, 블루레이 플레이어, DVD 플레이어, 게임기, 사운드 바, 스마트폰, PC, USB 메모리, 홈 씨어터 중 어느 하나일 수 있다.The external device interface unit 235 may provide a connection path with the external device. The external device interface 235 may receive one or more of video and audio output from the external device, and transmit them to the controller 270. The external device connectable to the external device interface unit 235 may be any one of a set top box, a Blu-ray player, a DVD player, a game machine, a sound bar, a smartphone, a PC, a USB memory, and a home theater.
네트워크 인터페이스부(233)는 전자 장치(200)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공할 수 있다. 네트워크 인터페이스부(233)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 다른 사용자 또는 다른 전자 기기와 데이터를 송신 또는 수신할 수 있다. The network interface unit 233 may provide an interface for connecting the electronic device 200 to a wired/wireless network including an Internet network. The network interface unit 233 may transmit or receive data with other users or other electronic devices through a connected network or another network linked to the connected network.
또한, 전자 장치(200)에 미리 등록된 다른 사용자 또는 다른 전자 기기 중 선택된 사용자 또는 선택된 전자기기에, 전자 장치(200)에 저장된 일부의 컨텐츠 데이터를 송신할 수 있다.In addition, some content data stored in the electronic device 200 may be transmitted to another user registered in advance in the electronic device 200 or to a selected user or selected electronic device among other electronic devices.
네트워크 인터페이스부(233)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 소정 웹 페이지에 접속할 수 있다. 즉, 네트워크를 통해 소정 웹 페이지에 접속하여, 해당 서버와 데이터를 송신 또는 수신할 수 있다.The network interface unit 233 may access a predetermined web page through a connected network or another network linked to the connected network. That is, it is possible to connect to a predetermined web page through a network and transmit or receive data with the corresponding server.
그리고, 네트워크 인터페이스부(233)는 컨텐츠 제공자 또는 네트워크 운영자가 제공하는 컨텐츠 또는 데이터들을 수신할 수 있다. 즉, 네트워크 인터페이스부(233)는 네트워크를 통하여 컨텐츠 제공자 또는 네트워크 제공자로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 컨텐츠 및 그와 관련된 정보를 수신할 수 있다.Also, the network interface unit 233 may receive content or data provided by a content provider or a network operator. That is, the network interface unit 233 may receive content such as a movie, advertisement, game, VOD, broadcast signal, and related information provided by a content provider or a network provider through a network.
또한, 네트워크 인터페이스부(233)는 네트워크 운영자가 제공하는 펌웨어의 업데이트 정보 및 업데이트 파일을 수신할 수 있으며, 인터넷 또는 컨텐츠 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다.Also, the network interface unit 233 may receive update information and update files of firmware provided by a network operator, and may transmit data to the Internet or a content provider or a network operator.
네트워크 인터페이스부(233)는 네트워크를 통해, 공중에 공개(open)된 애플리케이션들 중 원하는 애플리케이션을 선택하여 수신할 수 있다. The network interface unit 233 may select and receive a desired application from among applications that are open to the public through a network.
저장부(240)는 제어부(270) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장하고, 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수 있다.The storage unit 240 may store programs for each signal processing and control in the control unit 270, and store a signal-processed image, audio, or data signal.
또한, 저장부(240)는 외부장치 인터페이스부(235) 또는 네트워크 인터페이스부(233)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있으며, 채널 기억 기능을 통하여 소정 이미지에 관한 정보를 저장할 수도 있다.Also, the storage unit 240 may perform a function for temporarily storing an image, audio, or data signal input from the external device interface unit 235 or the network interface unit 233, and is predetermined through a channel memory function. You can also store information about the image.
저장부(240)는 외부장치 인터페이스부(235) 또는 네트워크 인터페이스부(233)로부터 입력되는 애플리케이션 또는 애플리케이션 목록을 저장할 수 있다.The storage unit 240 may store an application or application list input from the external device interface unit 235 or the network interface unit 233.
전자 장치(200)는 저장부(240) 내에 저장되어 있는 컨텐츠 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일, 애플리케이션 파일 등)을 재생하여 사용자에게 제공할 수 있다.The electronic device 200 may play a content file (video file, still image file, music file, document file, application file, etc.) stored in the storage unit 240 and provide it to the user.
사용자입력 인터페이스부(250)는 사용자가 입력한 신호를 제어부(270)로 전달하거나, 제어부(270)로부터의 신호를 사용자에게 전달할 수 있다. 예를 들어, 사용자입력 인터페이스부(250)는 블루투스(Bluetooth), WB(Ultra Wideband), 지그비(ZigBee) 방식, RF(Radio Frequency) 통신 방식 또는 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 원격제어장치로부터 전원 온/오프, 채널 선택, 화면 설정 등의 제어 신호를 수신하여 처리하거나, 제어부(270)로부터의 제어 신호를 원격제어장치로 송신하도록 처리할 수 있다.The user input interface unit 250 may transmit a signal input by the user to the control unit 270 or a signal from the control unit 270 to the user. For example, the user input interface unit 250 may be configured according to various communication methods such as Bluetooth, Ultra Wideband (WB), ZigBee, Radio Frequency (RF) communication, or IR (IR) communication. A control signal such as power on/off, channel selection, screen setting, etc. may be received and processed from the remote control device, or a control signal from the control unit 270 may be transmitted to the remote control device.
또한, 사용자입력 인터페이스부(250)는, 전원키, 채널키, 볼륨키, 설정치 등의 로컬키(미도시)에서 입력되는 제어 신호를 제어부(270)에 전달할 수 있다.In addition, the user input interface unit 250 may transmit a control signal input from a local key (not shown) such as a power key, a channel key, a volume key, and a set value to the control unit 270.
제어부(270)에서 영상 처리된 영상 신호는 디스플레이부(280)로 입력되어 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(270)에서 영상 처리된 영상 신호는 외부장치 인터페이스부(235)를 통하여 외부 출력장치로 입력될 수 있다.The image signal processed by the control unit 270 may be input to the display unit 280 and displayed as an image corresponding to the corresponding image signal. Also, the image signal processed by the control unit 270 may be input to an external output device through the external device interface unit 235.
제어부(270)에서 처리된 음성 신호는 오디오 출력부(285)로 오디오 출력될 수 있다. 또한, 제어부(270)에서 처리된 음성 신호는 외부장치 인터페이스부(235)를 통하여 외부 출력장치로 입력될 수 있다. The audio signal processed by the control unit 270 may be audio output to the audio output unit 285. In addition, the voice signal processed by the control unit 270 may be input to the external output device through the external device interface unit 235.
그 외, 제어부(270)는, 전자 장치(200) 내의 전반적인 동작을 제어할 수 있다. In addition, the controller 270 may control the overall operation in the electronic device 200.
또한, 제어부(270)는 사용자입력 인터페이스부(250)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 전자 장치(200)를 제어할 수 있으며, 네트워크에 접속하여 사용자가 원하는 애플리케이션 또는 애플리케이션 목록을 전자 장치(200) 내로 다운받을 수 있도록 할 수 있다.In addition, the control unit 270 may control the electronic device 200 by a user command or an internal program input through the user input interface unit 250, and access the network to display a list of applications or applications desired by the user. It can be made available for download within (200).
제어부(270)는 사용자가 선택한 채널 정보 등이 처리한 영상 또는 음성신호와 함께 디스플레이부(280) 또는 오디오 출력부(285)를 통하여 출력될 수 있도록 한다.The control unit 270 allows the channel information or the like selected by the user to be output through the display unit 280 or the audio output unit 285 together with the processed image or audio signal.
또한, 제어부(270)는 사용자입력 인터페이스부(250)를 통하여 수신한 외부장치 영상 재생 명령에 따라, 외부장치 인터페이스부(235)를 통하여 입력되는 외부 장치, 예를 들어, 카메라 또는 캠코더로부터의, 영상 신호 또는 음성 신호가 디스플레이부(280) 또는 오디오 출력부(285)를 통해 출력될 수 있도록 한다.In addition, the control unit 270 according to an external device image playback command received through the user input interface unit 250, from an external device input through the external device interface unit 235, for example, a camera or a camcorder, The video signal or the audio signal can be output through the display unit 280 or the audio output unit 285.
한편, 제어부(270)는 영상을 표시하도록 디스플레이부(280)를 제어할 수 있으며, 예를 들어 튜너(231)를 통해 입력되는 방송 영상, 또는 외부장치 인터페이스부(235)를 통해 입력되는 외부 입력 영상, 또는 네트워크 인터페이스부를 통해 입력되는 영상, 또는 저장부(240)에 저장된 영상이 디스플레이부(280)에서 표시되도록 제어할 수 있다. 이 경우, 디스플레이부(280)에 표시되는 영상은 정지 영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.Meanwhile, the control unit 270 may control the display unit 280 to display an image, for example, a broadcast image input through the tuner 231, or an external input input through the external device interface unit 235. The image or an image input through the network interface unit or an image stored in the storage unit 240 may be controlled to be displayed on the display unit 280. In this case, the image displayed on the display unit 280 may be a still image or a video, and may be a 2D image or a 3D image.
또한, 제어부(270)는 전자 장치(200) 내에 저장된 컨텐츠, 또는 수신된 방송 컨텐츠, 외부로 부터 입력되는 외부 입력 컨텐츠가 재생되도록 제어할 수 있으며, 상기 컨텐츠는 방송 영상, 외부 입력 영상, 오디오 파일, 정지 영상, 접속된 웹 화면, 및 문서 파일 등 다양한 형태일 수 있다.In addition, the control unit 270 may control content stored in the electronic device 200 or received broadcast content, external input content input from the outside to be played, and the content may be broadcast video, external input video, audio file , Still images, connected web screens, and document files.
근거리 통신부(273)는 유선 또는 무선 통신을 통해 외부 기기와 통신을 수행할 수 있다. 근거리 통신부(273)는 외부 기기와 근거리 통신(Short range communication)을 수행할 수 있다. 이를 위해, 근거리 통신부(273)는 블루투스(Bluetooth™), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association; IrDA), UWB(Ultra Wideband), ZigBee, NFC(Near Field Communication), Wi-Fi(Wireless-Fidelity), Wi-Fi Direct, Wireless USB(Wireless Universal Serial Bus) 기술 중 적어도 하나를 이용하여, 근거리 통신을 지원할 수 있다. 이러한, 근거리 통신부(273)는 근거리 무선 통신망(Wireless Area Networks)을 통해 전자 장치(200)와 무선 통신 시스템 사이, 전자 장치(200)와 다른 전자 장치(200) 사이, 또는 전자 장치(200)와 전자 장치(200, 또는 외부서버)가 위치한 네트워크 사이의 무선 통신을 지원할 수 있다. 근거리 무선 통신망은 근거리 무선 개인 통신망(Wireless Personal Area Networks)일 수 있다.The short-range communication unit 273 may communicate with an external device through wired or wireless communication. The short-range communication unit 273 may perform short-range communication with an external device. To this end, the short-range communication unit 273 includes Bluetooth (Bluetooth™), Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, Near Field Communication (NFC), Wi-Fi By using at least one of (Wireless-Fidelity), Wi-Fi Direct, and Wireless USB (Wireless Universal Serial Bus) technology, short-range communication can be supported. The short-range communication unit 273 may be provided between the electronic device 200 and a wireless communication system, between the electronic device 200 and another electronic device 200, or through the electronic device 200 through wireless area networks. The electronic device 200 or an external server may support wireless communication between networks. The wireless local area network may be wireless personal area networks.
여기에서, 다른 전자 장치(200)는 본 발명에 따른 전자 장치(200)와 데이터를 상호 교환하는 것이 가능한(또는 연동 가능한) 웨어러블 디바이스(wearable device, 예를 들어, 스마트워치(smartwatch), 스마트 글래스(smart glass), HMD(head mounted display)), 스마트 폰과 같은 이동 단말기가 될 수 있다. 근거리 통신부(273)는 전자 장치(200) 주변에, 통신 가능한 웨어러블 디바이스를 감지(또는 인식)할 수 있다. 나아가, 제어부(270)는 감지된 웨어러블 디바이스가 본 발명에 따른 전자 장치(200)와 통신하도록 인증된 디바이스인 경우, 전자 장치(200)에서 처리되는 데이터의 적어도 일부를, 근거리 통신부(273)를 통해 웨어러블 디바이스로 송신할 수 있다. 따라서, 웨어러블 디바이스의 사용자는, 전자 장치(200)에서 처리되는 데이터를, 웨어러블 디바이스를 통해 이용할 수 있다. Here, the other electronic device 200 is a wearable device capable of exchanging data with the electronic device 200 according to the present invention (or interoperable), for example, a smartwatch, a smart glass (smart glass), HMD (head mounted display), can be a mobile terminal such as a smart phone. The short-range communication unit 273 may detect (or recognize) a wearable device capable of communication in the vicinity of the electronic device 200. Furthermore, when the sensed wearable device is a device authenticated to communicate with the electronic device 200 according to the present invention, the control unit 270 may transmit at least a portion of data processed by the electronic device 200 to the short-range communication unit 273. It can be transmitted to the wearable device. Therefore, a user of the wearable device can use data processed by the electronic device 200 through the wearable device.
디스플레이부(280)는 제어부(270)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부장치 인터페이스부(235)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R, G, B 신호로 변환하여 구동 신호를 생성할 수 있다.The display unit 280 converts the image signal, data signal, OSD signal, or image signal received from the external device interface unit 235 processed by the control unit 270 into R, G, and B signals, respectively, and then drives them. You can generate a signal.
한편, 도 1b에 도시된 전자 장치(200)는 본 발명의 일 실시 예에 불과하므로. 도시된 구성요소들 중 일부는 실제 구현되는 전자 장치(200)의 사양에 따라 통합, 추가, 또는 생략될 수 있다.Meanwhile, the electronic device 200 shown in FIG. 1B is only an embodiment of the present invention. Some of the illustrated components may be integrated, added, or omitted according to specifications of the electronic device 200 that is actually implemented.
즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.That is, two or more components may be combined into one component, or one component may be divided into two or more components as necessary. In addition, the function performed in each block is for explaining an embodiment of the present invention, the specific operation or device does not limit the scope of the present invention.
본 발명의 또 다른 실시예에 따르면, 전자 장치(200)는 도 1b에 도시된 바와 달리, 튜너(231)와 복조부(232)를 구비하지 않고 네트워크 인터페이스부(233) 또는 외부장치 인터페이스부(235)를 통해서 영상을 수신하여 재생할 수도 있다.According to another embodiment of the present invention, the electronic device 200 does not have a tuner 231 and a demodulator 232, as shown in FIG. 1B, and has a network interface 233 or an external device interface ( 235) may be received and reproduced.
예를 들어, 전자 장치(200)는 방송 신호 또는 다양한 네트워크 서비스에 따른 컨텐츠들을 수신하기 위한 등과 같은 셋탑 박스 등과 같은 영상 처리 장치와 상기 영상 처리 장치로부터 입력되는 컨텐츠를 재생하는 컨텐츠 재생 장치로 분리되어 구현될 수 있다.For example, the electronic device 200 is divided into an image processing device such as a set-top box for receiving broadcast signals or contents according to various network services, and a content playback device for playing content input from the image processing device. Can be implemented.
이 경우, 이하에서 설명할 본 발명의 실시예에 따른 전자 장치의 동작 방법은 도 1b을 참조하여 설명한 바와 같은 전자 장치(200)뿐 아니라, 상기 분리된 셋탑 박스 등과 같은 영상 처리 장치 또는 디스플레이부(280) 및 오디오출력부(285)를 구비하는 컨텐츠 재생 장치 중 어느 하나에 의해 수행될 수도 있다.In this case, the operation method of the electronic device according to an embodiment of the present invention will be described below, as well as the electronic device 200 as described with reference to FIG. 1B, as well as an image processing device or display unit such as the separated set-top box ( 280) and an audio output unit 285.
한편 본 발명에서 용어 근거리 통신부(273)는 용어 무선 통신부(273)와 혼용되어 사용될 수 있다.Meanwhile, in the present invention, the term short-range communication unit 273 may be used interchangeably with the term wireless communication unit 273.
한편 본 발명에서 용어 제어부(2740)는 프로세서, 마이크로 프로세서, 컨트롤러, 마이크로 컨트롤러 등의 용어와 혼용되어 사용될 수 있다. Meanwhile, in the present invention, the term controller 2740 may be used interchangeably with terms such as a processor, a microprocessor, a controller, and a microcontroller.
한편 전자 장치(200)의 구성 및 기능은 도 1b에서 설명한 것에 한정되지 아니하며, 도 1a에서 설명한 이동 단말기(100)의 구성 및 기능의 일부 또는 전부가 전자 장치(200)에 탑재될 수도 있다.Meanwhile, the configuration and function of the electronic device 200 are not limited to those described with reference to FIG. 1B, and some or all of the configuration and function of the mobile terminal 100 described with reference to FIG. 1A may be mounted on the electronic device 200.
도 2는 본 발명의 실시 예에 따른 전자 장치의 동작 방법을 설명하기 위한 도면이다.2 is a view for explaining a method of operating an electronic device according to an embodiment of the present invention.
본 발명의 실시 예에 따른 전자 장치(200)의 동작 방법은, 외부로 제1 신호를 전송하는 단계(S210), RTT 기반으로 제1 신호에 대한 응답 신호를 이용하여 이동 단말기와의 거리를 획득하는 단계(S220), 복수의 방향으로 빔 포밍 신호를 전송하는 단계(S230), RSSI 기반으로 빔 포밍 신호에 대한 응답을 이용하여 이동 단말기의 방향을 획득하는 단계(S240) 및 거리 및 방향을 이용하여 이동 단말기에 대한 서비스를 제공하는 단계(S250)를 포함할 수 있다.The operation method of the electronic device 200 according to an embodiment of the present invention includes transmitting a first signal to the outside (S210), and obtaining a distance from the mobile terminal using a response signal for the first signal based on RTT Step (S220), transmitting a beam forming signal in a plurality of directions (S230), obtaining a direction of a mobile terminal using a response to a beam forming signal based on RSSI (S240) and using distance and direction To provide a service for the mobile terminal (S250).
외부로 제1 신호를 전송하는 단계(S210) 및 RTT 기반으로 제1 신호에 대한 응답 신호를 이용하여 이동 단말기와의 거리를 획득하는 단계(S220)에 대하여 도 3을 참고하여 설명한다.The step of transmitting the first signal to the outside (S210) and the step of obtaining the distance from the mobile terminal using the response signal for the first signal based on RTT (S220) will be described with reference to FIG. 3.
도 3은 본 발명의 실시 예에 따른, RTT 기반으로 이동 단말기와의 거리를 획득하는 방법을 설명하기 위한 도면이다.3 is a diagram for explaining a method of obtaining a distance from a mobile terminal based on RTT according to an embodiment of the present invention.
블루투스 LE 기술을 이용하여 주변 기기가 검색된 경우, 전자 장치(200)의 프로세서는 외부로 제1 신호를 전송하고, RTT 기반으로 제1 신호에 대한 응답 신호를 이용하여 이동 단말기(100)와의 거리를 획득할 수 있다.When a peripheral device is searched using Bluetooth LE technology, the processor of the electronic device 200 transmits the first signal to the outside and uses the response signal for the first signal based on the RTT to determine the distance from the mobile terminal 100. Can be obtained.
RTT(Round Trip Time)는 왕복 지연시간을 의미한다. 구체적으로 RTT(Round Trip Time)는 신호가 송신 측에서 전송되어 수신 측에 전달된 후 그 응답 신호가 다시 송신 측에 도달하기 까지의 왕복 시간을 의미할 수 있다.Round Trip Time (RTT) means round trip delay time. Specifically, RTT (Round Trip Time) may mean a round-trip time from when the signal is transmitted from the transmitting side and transmitted to the receiving side until the response signal reaches the transmitting side again.
따라서 본 명세서에서 RTT(Round Trip Time) 기반으로 이동 단말기와의 거리를 획득한다는 것은, 전자 장치(200)에서 전송한 신호에 대한 왕복 지연 시간을 이용하여 전자 장치(200)와 이동 단말기(100)의 거리를 획득한다는 것을 의미할 수 있다.Therefore, in this specification, obtaining a distance from a mobile terminal based on RTT (Round Trip Time), the electronic device 200 and the mobile terminal 100 using the round-trip delay time for the signal transmitted from the electronic device 200 It can mean that you get the distance.
구체적으로 전자 장치(200)의 프로세서는 제1 신호(310)를 전송할 수 있다. 또한 제1 신호를 수신한 이동 단말기(100)의 프로세서는 제1 신호에 대한 응답 신호(320)를 전송할 수 있다. 이 경우 전자 장치(200)의 프로세서는 제1 신호를 전송한 시점으로부터 제1 신호에 대한 응답 신호가 수신된 시점까지의 소요된 시간 및 제1 신호의 속도를 이용하여 전자 장치(200)와 이동 단말기(100) 사이의 거리를 획득할 수 있다. 이 경우 제1 신호와 제1 신호에 대한 응답신호는 동종의 신호(예를 들어 제1 신호와 제1 신호에 대한 응답 신호 모두 와이파이 신호)일 수 있다.Specifically, the processor of the electronic device 200 may transmit the first signal 310. In addition, the processor of the mobile terminal 100 that has received the first signal may transmit a response signal 320 to the first signal. In this case, the processor of the electronic device 200 moves with the electronic device 200 by using the time taken from the time when the first signal is transmitted to the time when the response signal for the first signal is received and the speed of the first signal. The distance between the terminals 100 can be obtained. In this case, the first signal and the response signal for the first signal may be signals of the same type (for example, both the first signal and the response signal for the first signal are Wi-Fi signals).
전자 장치(200)의 프로세서는 전파 지연(Propagation delay)을 측정하여 전자 장치(200)와 이동 단말기(100) 사이의 거리를 획득할 수도 있다.The processor of the electronic device 200 may measure a propagation delay to obtain a distance between the electronic device 200 and the mobile terminal 100.
구체적으로 전자 장치(200)의 프로세서는 왕복 지연시간 및 이동 단말기(100)가 제1 신호의 수신 확인에 소요되는 시간에 기초하여 전자 장치(200)와 이동 단말기(100) 사이의 전파 지연(Propagation delay)을 측정할 수 있다. 그리고 전자 장치(200)의 프로세서는 전파 지연(Propagation delay) 및 제1 신호의 속도를 이용하여 전자 장치(200)와 이동 단말기(100) 사이의 거리를 획득할 수 있다.Specifically, the processor of the electronic device 200 is based on the round-trip delay time and the time required for the mobile terminal 100 to confirm receipt of the first signal. Propagation delay between the electronic device 200 and the mobile terminal 100. delay) can be measured. In addition, the processor of the electronic device 200 may obtain a distance between the electronic device 200 and the mobile terminal 100 using the propagation delay and the speed of the first signal.
한편 제1 신호 및 제1는 무선 통신부(273)가 무선 통신을 위하여 사용하는 신호들 중 어느 하나일 수 있다. 예를 들어 제1 신호는, 블루투스(Bluetooth™), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association; IrDA), UWB(Ultra Wideband), ZigBee, NFC(Near Field Communication), Wi-Fi(Wireless-Fidelity), Wi-Fi Direct, Wireless USB(Wireless Universal Serial Bus) 신호 중 어느 하나일 수 있다.Meanwhile, the first signal and the first may be any one of signals used by the wireless communication unit 273 for wireless communication. For example, the first signal is Bluetooth (Bluetooth™), Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, Near Field Communication (NFC), Wi-Fi ( Wireless-Fidelity), Wi-Fi Direct, and Wireless USB (Wireless Universal Serial Bus) signals.
다음은 복수의 방향으로 빔 포밍 신호를 전송하는 단계(S230) 및 RSSI 기반으로 빔 포밍 신호에 대한 응답을 이용하여 이동 단말기의 방향을 획득하는 단계(S240)에 대하여 도 4를 참고하여 설명한다.Next, the step of transmitting the beam forming signal in a plurality of directions (S230) and the step of obtaining the direction of the mobile terminal using the response to the beam forming signal based on RSSI (S240) will be described with reference to FIG. 4.
도 4는 본 발명의 실시 예에 따른, RSSI 기반으로 이동 단말기의 방향을 획득하는 방법을 설명하기 위한 도면이다.4 is a diagram for explaining a method of obtaining a direction of a mobile terminal based on RSSI according to an embodiment of the present invention.
전자 장치(200)의 프로세서는 복수의 방향으로 빔 포밍 신호를 전송하고, RSSI 기반으로 빔 포밍 신호에 대한 응답 신호를 이용하여 이동 단말기(100)의 방향을 획득할 수 있다.The processor of the electronic device 200 may transmit a beam forming signal in a plurality of directions, and obtain a direction of the mobile terminal 100 by using a response signal for a beam forming signal based on RSSI.
RSSI(Received signal strength indication)는 수신 신호 강도를 의미한다.RSSI (Received signal strength indication) means the received signal strength.
따라서 본 명세서에서 RSSI(Received signal strength indication) 기반으로 이동 단말기의 방향을 획득한다는 것은, 전자 장치(200)에서 전송한 신호를 이동 단말기(100)에서 수신하고, 이동 단말기(100)에서 수신한 신호의 수신 신호 강도를 이용하여 이동 단말기(100)의 방향을 획득한다는 것을 의미할 수 있다.Therefore, in this specification, obtaining the direction of the mobile terminal based on the received signal strength indication (RSSI) means that the mobile terminal 100 receives the signal transmitted from the electronic device 200 and the signal received from the mobile terminal 100. It may mean that the direction of the mobile terminal 100 is obtained by using the received signal strength of.
구체적으로 전자 장치(200)의 프로세서는 복수의 방향으로 빔포밍(beamforming) 신호(410, 420, 430, 440, 450, 460, 470, 480)를 전송하도록 무선 통신부를 제어할 수 있다.Specifically, the processor of the electronic device 200 may control the wireless communication unit to transmit beamforming signals 410, 420, 430, 440, 450, 460, 470, 480 in a plurality of directions.
예를 들어 빔포밍 신호는 제1 방향의 제1-1 빔포밍 신호(410), 제2 방향의 제1-2 빔포밍 신호(420), 제3 방향의 제1-3 빔포밍 신호(430), 제4 방향의 제1-4 빔포밍 신호(440), 제5 방향의 제1-5 빔포밍 신호(450), 제6 방향의 제1-6 빔포밍 신호(460), 제7 방향의 제1-7 빔포밍 신호(470), 제8 방향의 제1-8 빔포밍 신호(480)를 포함할 수 있다.For example, the beamforming signal includes a first-first beamforming signal 410 in a first direction, a first-2 beamforming signal 420 in a second direction, and a first-3 beamforming signal 430 in a third direction. ), 1-4th beamforming signal 440 in the 4th direction, 1-5th beamforming signal 450 in the 5th direction, 1-6th beamforming signal 460 in the 6th direction, 7th direction The 1-7th beamforming signal 470 of the 1-8th beamforming signal 480 in the eighth direction may be included.
이 경우 복수의 빔포밍 신호(410, 420, 430, 440, 450, 460, 470, 480) 각각이 인접한 빔포밍 신호와 형성하는 각도는 모두 동일할 수 있다.In this case, each of the plurality of beamforming signals 410, 420, 430, 440, 450, 460, 470, and 480 may have the same angle with which adjacent beamforming signals are formed.
예를 들어 제1 방향의 제1-1 빔포밍 신호(410)와 제2 방향의 제1-2 빔포밍 신호(420)가 형성하는 각은 45도, 제2 방향의 제1-2 빔포밍 신호(420)와 제3 방향의 제1-3 빔포밍 신호(430)가 형성하는 각은 45도, 제3 방향의 제1-3 빔포밍 신호(430)와 제4 방향의 제1-4 빔포밍 신호(440)가 형성하는 각은 45도일 수 있다.For example, the angle formed by the first-first beamforming signal 410 in the first direction and the first-2 beamforming signal 420 in the second direction is 45 degrees, and the first-2 beamforming in the second direction. The angle formed by the signal 420 and the first-3 beamforming signal 430 in the third direction is 45 degrees, the first-3 beamforming signal 430 in the third direction and the first-4 in the fourth direction The angle formed by the beamforming signal 440 may be 45 degrees.
한편 복수의 빔포밍 신호(410, 420, 430, 440, 450, 460, 470, 480) 각각은 복수의 빔포밍 신호(410, 420, 430, 440, 450, 460, 470, 480) 각각의 식별 정보를 포함할 수 있다.Meanwhile, each of the plurality of beamforming signals 410, 420, 430, 440, 450, 460, 470, and 480, each of the plurality of beamforming signals 410, 420, 430, 440, 450, 460, 470, 480 Information may be included.
예를 들어 제1-1 빔포밍 신호(410)는 제1-1 빔포밍 신호 고유의 제1-1 식별 정보를, 제1-2 빔포밍 신호(420)는 제1-2 빔포밍 신호 고유의 제1-2 식별 정보를 포함할 수 있다.For example, the 1-1st beamforming signal 410 is the 1st-1 identification information unique to the 1st-1st beamforming signal, and the 1st-2 beamforming signal 420 is the 1st-2nd beamforming signal unique. It may include the identification information of 1-2.
한편 이동 단말기(100)의 프로세서는 무선 통신부를 통하여 빔포밍 신호를 수신할 수 있다. 이 경우 이동 단말기(100)의 프로세서는 수신한 빔포밍 신호에 포함되는 식별 정보를 획득할 수 있다. 또한 이동 단말기(100)의 프로세서는 수신한 빔 포밍 신호의 수신 신호 강도를 결정할 수 있다.Meanwhile, the processor of the mobile terminal 100 may receive a beamforming signal through a wireless communication unit. In this case, the processor of the mobile terminal 100 may acquire identification information included in the received beamforming signal. Also, the processor of the mobile terminal 100 may determine the received signal strength of the received beamforming signal.
한편 빔포밍 신호를 수신한 이동 단말기(100)의 프로세서는 수신한 빔 포밍 신호에 대한 응답 신호를 전자 장치(200)에 전송할 수 있다. 여기서 응답 신호는 수신한 빔 포밍 신호의 수신 신호 강도 및 식별 정보를 포함할 수 있다.Meanwhile, the processor of the mobile terminal 100 receiving the beamforming signal may transmit a response signal to the received beamforming signal to the electronic device 200. Here, the response signal may include received signal strength and identification information of the received beamforming signal.
예를 들어 이동 단말기(100)가 제1-8 빔포밍 신호(410), 제1-1 빔포밍 신호(410), 제1-2 빔포밍 신호(420) 및 제1-3 빔포밍 신호(430)를 수신하였다고 가정한다. For example, the mobile terminal 100 has a 1-8 beamforming signal 410, a 1-1 beamforming signal 410, a 1-2 beamforming signal 420, and a 1-3 beamforming signal ( 430).
이 경우 이동 단말기의 프로세서는 제1-8 빔포밍 신호(480)에 대한 응답 신호를 전자 장치(200)에 전송할 수 있다. 여기서 제1-8 빔포밍 신호(480)에 대한 응답 신호는 제1-8 빔포밍 신호(480)의 식별 정보 및 제1-8 빔포밍 신호(480)의 수신 신호 강도를 포함할 수 있다.In this case, the processor of the mobile terminal may transmit a response signal to the 1-8 beamforming signal 480 to the electronic device 200. Here, the response signal to the 1-8 beamforming signal 480 may include identification information of the 1-8 beamforming signal 480 and the received signal strength of the 1-8 beamforming signal 480.
또한 이동 단말기의 프로세서는 제1-1 빔포밍 신호(410)에 대한 응답 신호를 전자 장치(200)에 전송할 수 있다. 여기서 제1-1 빔포밍 신호(410)에 대한 응답 신호는 제1-1 빔포밍 신호(410)의 식별 정보 및 제1-1 빔포밍 신호(410)의 수신 신호 강도를 포함할 수 있다.In addition, the processor of the mobile terminal may transmit a response signal to the first-first beamforming signal 410 to the electronic device 200. Here, the response signal to the first-first beamforming signal 410 may include identification information of the first-first beamforming signal 410 and the received signal strength of the first-first beamforming signal 410.
또한 이동 단말기의 프로세서는 제1-2 빔포밍 신호(420)에 대한 응답 신호를 전자 장치(200)에 전송할 수 있다. 여기서 제1-2 빔포밍 신호(420)에 대한 응답 신호는 제1-2 빔포밍 신호(420)의 식별 정보 및 제1-2 빔포밍 신호(420)의 수신 신호 강도를 포함할 수 있다.In addition, the processor of the mobile terminal may transmit a response signal to the 1-2-2 beamforming signal 420 to the electronic device 200. Here, the response signal to the 1-2-2 beamforming signal 420 may include identification information of the 1-2 beamforming signal 420 and the received signal strength of the 1-2 beamforming signal 420.
또한 이동 단말기의 프로세서는 제1-3 빔포밍 신호(430)에 대한 응답 신호를 전자 장치(200)에 전송할 수 있다. 여기서 제1-3 빔포밍 신호(430)에 대한 응답 신호는 제1-3 빔포밍 신호(420)의 식별 정보 및 제1-3 빔포밍 신호(430)의 수신 신호 강도를 포함할 수 있다.In addition, the processor of the mobile terminal may transmit a response signal to the 1-3rd beamforming signal 430 to the electronic device 200. Here, the response signal to the 1-3 beamforming signal 430 may include identification information of the 1-3 beamforming signal 420 and the received signal strength of the 1-3 beamforming signal 430.
한편 전자 장치(200)의 프로세서는 빔포밍 신호에 대한 응답 신호를 이용하여 이동 단말기(100)의 방향을 획득할 수 있다.Meanwhile, the processor of the electronic device 200 may acquire the direction of the mobile terminal 100 using a response signal to the beamforming signal.
구체적으로 전자 장치(200)의 프로세서는 빔 포빙 신호가 전송된 복수의 방향 중 빔 포밍 신호의 수신 신호 강도가 큰 두 방향 사이에 이동 단말기가 존재하는 것으로 결정할 수 있다.Specifically, the processor of the electronic device 200 may determine that the mobile terminal exists between two directions in which the received signal strength of the beam forming signal is greater among the plurality of directions in which the beam forcing signal is transmitted.
예를 들어 제8 방향의 제1-8 빔포밍 신호(410)의 수신 신호 강도가 3dBm, 제1 방향의 제1-1 빔포밍 신호(410)의 수신 신호 강도가 8dBm, 제2 방향의 제1-2 빔포밍 신호(420)의 수신 신호 강도가 10dBm, 제3 방향의 제1-3 빔포밍 신호(430)의 수신 신호 강도가 4dBm 인 경우, 전자 장치(200)의 프로세서는 빔포밍 신호의 수신 신호 강도가 큰 제1 방향 및 제2 방향 사이에 이동 단말기가 존재하는 것으로 결정할 수 있다.For example, the received signal strength of the 1-8th beamforming signal 410 in the 8th direction is 3dBm, the received signal strength of the 1-1st beamforming signal 410 in the first direction is 8dBm, the second When the received signal strength of the 1-2 beamforming signal 420 is 10 dBm, and the received signal strength of the 1-3 beamforming signal 430 in the third direction is 4 dBm, the processor of the electronic device 200 receives the beamforming signal. It may be determined that the mobile terminal is present between the first direction and the second direction in which the received signal strength is large.
한편 전자 장치(200)의 프로세서는 수신 신호 강도가 큰 두 방향의 수신 신호 강도에 기초하여 이동 단말기의 방향을 결정할 수 있다.On the other hand, the processor of the electronic device 200 may determine the direction of the mobile terminal based on the received signal strength in two directions where the received signal strength is large.
구체적으로 빔 포밍 신호가 전송된 복수의 방향 중 제1 방향과 제2 방향의 수신 신호 강도가 큰 경우, 전자 장치(200)의 프로세서는 제1 방향의 수신 신호 강도 및 제2 방향의 수신 신호 강도의 비율에 대응하는 이동 단말기의 방향을 결정할 수 있다.Specifically, when the received signal strengths in the first direction and the second direction among the plurality of directions in which the beamforming signal is transmitted are large, the processor of the electronic device 200 receives the received signal strength in the first direction and the received signal strength in the second direction It is possible to determine the direction of the mobile terminal corresponding to the ratio.
예를 들어 제1 방향의 제1-1 빔포밍 신호(410)의 수신 신호 강도가 9dBm, 제2 방향의 제1-2 빔포밍 신호(420)의 수신 신호 강도가 6dBm이라고 가정한다. 또한 제1 방향은 0도이고 제2 방향은 45도라고 가정한다.For example, it is assumed that the received signal strength of the first-first beamforming signal 410 in the first direction is 9 dBm, and the received signal strength of the first-2 beamforming signal 420 in the second direction is 6 dBm. It is also assumed that the first direction is 0 degrees and the second direction is 45 degrees.
이 경우 제1 방향의 수신 신호 강도 및 제2 방향의 수신 신호 강도의 비율은 9:6이다. In this case, the ratio of the received signal strength in the first direction and the received signal strength in the second direction is 9:6.
이 경우 전자 장치(200)의 프로세서는 18도 방향에 이동 단말기가 위치하는 것으로 결정할 수 있다. 즉 제2 방향과 18도 방향이 형성하는 각도 및 제1 방향과 18도 방향이 형성하는 각도의 비율은 제1 방향의 수신 신호 강도 및 제2 방향의 수신 신호 강도의 비율과 동일한 9:6일 수 있다.In this case, the processor of the electronic device 200 may determine that the mobile terminal is located in the 18 degree direction. That is, the ratio between the angle formed by the second direction and the 18 degree direction and the angle formed by the first direction and the 18 degree direction is 9:6 days, which is the same as the ratio of the received signal strength in the first direction and the received signal strength in the second direction. Can.
이와 같은 방식으로 전자 장치(200)의 프로세서는 이동 단말기의 방향을 결정할 수 있다.In this way, the processor of the electronic device 200 can determine the direction of the mobile terminal.
한편 전자 장치(200)의 프로세서는 이동 단말기와의 거리에 기초하여 빔 포밍 신호를 전송하는 복수의 방향의 수를 결정할 수 있다.Meanwhile, the processor of the electronic device 200 may determine the number of a plurality of directions for transmitting the beam forming signal based on the distance from the mobile terminal.
구체적으로 이동 단말기와의 거리가 제1 거리이면, 전자 장치(200)의 프로세서는 제1 개수의 방향으로 제1 개수의 빔포밍 신호들을 전송할 수 있다. 이 경우 제1 개수의 빔포밍 신호들 각각이 인접한 빔포밍 신호와 형성하는 각도는 모두 동일할 수 있다.Specifically, when the distance from the mobile terminal is the first distance, the processor of the electronic device 200 may transmit the first number of beamforming signals in the first number direction. In this case, each of the first number of beamforming signals may have the same angle as an adjacent beamforming signal.
또한 이동 단말기와의 거리가 제1 거리보다 먼 제2 거리이면, 전자 장치(200)의 프로세서는 제1 개수보다 많은 제2 개수의 방향으로 상기 제2 개수의 빔포밍 신호들을 전송할 수 있다. 이 경우 제2 개수의 빔포밍 신호들 각각이 인접한 빔포밍 신호와 형성하는 각도는 모두 동일할 수 있다.In addition, if the distance from the mobile terminal is a second distance that is farther than the first distance, the processor of the electronic device 200 may transmit the second number of beamforming signals in a direction of a second number that is greater than the first number. In this case, each of the second number of beamforming signals may have the same angle as an adjacent beamforming signal.
예를 들어 전자 장치(200)와 이동 단말기(100)의 거리가 2m라고 가정한다. 이 경우 전자 장치(200)의 프로세서는 제1-1 내지 제1-8 빔포밍 신호를 8개의 방향에 전송할 수 있다. 이 경우 특정 빔포밍 신호가 인접한 빔 포밍 신호와 형성하는 각도는 45도일 수 있다.For example, assume that the distance between the electronic device 200 and the mobile terminal 100 is 2m. In this case, the processor of the electronic device 200 may transmit the 1-1 to 1-8 beamforming signals in eight directions. In this case, an angle at which a specific beamforming signal forms with an adjacent beamforming signal may be 45 degrees.
다른 예를 들어 전자 장치(200)와 이동 단말기(100)의 거리가 4m라고 가정한다. 이 경우 전자 장치(200)의 프로세서는 제1-1 내지 제1-12 빔포밍 신호를 12개의 방향에 전송할 수 있다. 이 경우 특정 빔포밍 신호가 인접한 빔 포밍 신호와 형성하는 각도는 30도일 수 있다.For another example, assume that the distance between the electronic device 200 and the mobile terminal 100 is 4m. In this case, the processor of the electronic device 200 may transmit the 1-1 to 1-12 beamforming signals in 12 directions. In this case, an angle at which a specific beamforming signal forms with an adjacent beamforming signal may be 30 degrees.
즉 본 발명에서는, 빔포밍 신호를 복수의 방향으로 전송하여 이동 단말기의 방향을 결정하기 때문에, 전자 장치(200)와 이동 단말기(100)의 거리가 멀수록 방향의 오차가 커지게 된다. 다만 본 실시 예에 따르면 이동 단말기와의 거리가 멀수록 빔포밍 신호가 조밀한 각도를 형성하며 전송되기 때문에, 거리가 멀어짐에 따라 오차가 커지는 것을 방지할 수 있다.That is, in the present invention, since the beamforming signal is transmitted in a plurality of directions to determine the direction of the mobile terminal, the greater the distance between the electronic device 200 and the mobile terminal 100, the greater the error in direction. However, according to the present embodiment, as the distance from the mobile terminal increases, the beamforming signal is transmitted while forming a dense angle, so that the error increases as the distance increases.
도 5는 본 발명의 또 실시 예에 따른, RSSI 기반으로 이동 단말기의 방향을 획득하는 방법을 설명하기 위한 도면이다.5 is a diagram for explaining a method of obtaining a direction of a mobile terminal based on RSSI according to another embodiment of the present invention.
전자 장치의 프로세서는 빔 포밍 신호의 수신 신호 강도가 큰 두 방향 사이로 제2 빔포밍 신호를 전송하고, RSSI 기반으로 제2 빔포밍 신호에 대한 응답 신호를 이용하여 이동 단말기의 방향을 획득할 수 있다.The processor of the electronic device may transmit the second beamforming signal between two directions in which the received signal strength of the beamforming signal is large, and obtain a direction of the mobile terminal by using a response signal for the second beamforming signal based on RSSI. .
구체적으로 빔 포밍 신호가 전송된 복수의 방향 중 제1 방향과 제2 방향의 수신 신호 강도가 큰 경우, 전자 장치(200)의 프로세서는 제1 방향 및 제2 방향 사이의 제10 방향으로 제2 빔포밍 신호(510)를 전송할 수 있다. 이 경우 제2 빔포밍 신호(510)는 제2 빔포밍 신호 고유의 제2 식별 정보를 포함할 수 있다.Specifically, when the received signal strengths of the first direction and the second direction are large among the plurality of directions in which the beamforming signal is transmitted, the processor of the electronic device 200 is second in the tenth direction between the first direction and the second direction. The beamforming signal 510 may be transmitted. In this case, the second beamforming signal 510 may include second identification information unique to the second beamforming signal.
한편 이동 단말기(100)의 프로세서는 무선 통신부를 통하여 제2 빔포밍 신호를 수신할 수 있다. 이 경우 이동 단말기(100)의 프로세서는 수신한 제2 빔포밍 신호에 포함되는 제2 식별 정보를 획득할 수 있다. 또한 이동 단말기(100)의 프로세서는 수신한 제2 빔 포밍 신호의 수신 신호 강도를 결정할 수 있다.Meanwhile, the processor of the mobile terminal 100 may receive a second beamforming signal through a wireless communication unit. In this case, the processor of the mobile terminal 100 may acquire second identification information included in the received second beamforming signal. Also, the processor of the mobile terminal 100 may determine the received signal strength of the received second beam forming signal.
한편 제2 빔포밍 신호를 수신한 이동 단말기(100)의 프로세서는 수신한 제2 빔 포밍 신호에 대한 응답 신호를 전자 장치(200)에 전송할 수 있다. 여기서 응답 신호는 수신한 제2 빔 포밍 신호의 수신 신호 강도 및 제2 식별 정보를 포함할 수 있다.Meanwhile, the processor of the mobile terminal 100 that has received the second beamforming signal may transmit a response signal to the received second beamforming signal to the electronic device 200. Here, the response signal may include received signal strength and second identification information of the received second beam forming signal.
이 경우 전자 장치(200)의 프로세서는 제2 빔포밍 신호에 대한 응답 신호를 이용하여 이동 단말기(100)의 방향을 획득할 수 있다.In this case, the processor of the electronic device 200 may acquire the direction of the mobile terminal 100 using a response signal to the second beamforming signal.
구체적으로 전자 장치(200)의 프로세서는 ‘복수의 제1 빔포밍 신호 중 수신 신호 강도가 큰 두 방향’ 및 제2 빔포밍 신호가 전송된 제10 방향 중, 수신 신호 강도가 큰 두 방향 사이에 이동 단말기가 존재하는 것으로 결정할 수 있다.Specifically, the processor of the electronic device 200 is between'two directions having a large received signal strength among the plurality of first beamforming signals' and two directions having a large received signal strength among the ten directions in which the second beamforming signals are transmitted. It can be determined that the mobile terminal is present.
예를 들어 제1-8 빔포밍 신호(410)의 수신 신호 강도가 3dBm, 제1-1 빔포밍 신호(410)의 수신 신호 강도가 8dBm, 제1-2 빔포밍 신호(420)의 수신 신호 강도가 10dBm, 제1-3 빔포밍 신호(430)의 수신 신호 강도가 4dBm 인 경우, 전자 장치(200)의 프로세서는 수신 신호 강도가 큰 제1 방향 및 제2 방향 사이의 제10 방향으로 제2 빔포밍 신호를 전송할 수 있다.For example, the received signal strength of the 1-8 beamforming signal 410 is 3 dBm, the received signal strength of the 1-1 beamforming signal 410 is 8 dBm, and the received signal of the 1-2 beamforming signal 420 When the intensity is 10 dBm and the received signal strength of the 1-3 beamforming signal 430 is 4 dBm, the processor of the electronic device 200 is provided in a tenth direction between the first direction and the second direction where the received signal strength is large. 2 Beamforming signals can be transmitted.
그리고 제2 빔포밍 신호의 수신 신호 강도가 8.5dBm라고 가정한다.In addition, it is assumed that the received signal strength of the second beamforming signal is 8.5 dBm.
이 경우 전자장치의 프로세서는, 복수의 제1 빔포밍 신호 중 수신 신호 강도가 큰 ‘제1 방향(8dBm), 제2 방향(10dBm)’ 및 제2 빔포밍 신호가 전송된 제10 방향(8.5dBm) 중, 수신 신호 강도가 큰 제2 방향(10dBm) 및 제10 방향(8.5dBm) 사이에 이동 단말기가 존재하는 것으로 결정할 수 있다.In this case, the processor of the electronic device, the'first direction (8dBm), the second direction (10dBm)' having a large received signal strength among the plurality of first beamforming signals and the tenth direction in which the second beamforming signal is transmitted (8.5 dBm), it may be determined that the mobile terminal exists between the second direction (10 dBm) and the tenth direction (8.5 dBm), where the received signal strength is large.
이 경우 전자 장치(200)의 프로세서는 수신 신호 강도가 큰 두 방향의 수신 신호 강도에 기초하여 이동 단말기의 방향을 결정할 수 있다.In this case, the processor of the electronic device 200 may determine the direction of the mobile terminal based on the received signal strengths in two directions where the received signal strength is large.
구체적으로 제2 방향과 제10 방향의 수신 강도가 큰 경우, 전자 장치(200)의 프로세서는 제2 방향의 수신 신호 강도 및 제10 방향의 수신 신호 강도의 비율에 대응하는 이동 단말기의 방향을 결정할 수 있다.Specifically, when the reception strength in the second direction and the tenth direction is large, the processor of the electronic device 200 determines the direction of the mobile terminal corresponding to the ratio of the received signal strength in the second direction and the received signal strength in the tenth direction. Can.
한편 앞서, 빔 포밍 신호가 전송된 복수의 방향 중 제1 방향과 제2 방향의 수신 신호 강도가 큰 경우, 전자 장치(200)의 프로세서가 제1 방향 및 제2 방향 사이의 제10 방향으로 제2 빔포밍 신호(510)를 전송한다고 설명한 바 있다.On the other hand, if the received signal strengths of the first direction and the second direction among the plurality of directions in which the beamforming signal is transmitted are large, the processor of the electronic device 200 controls the tenth direction between the first direction and the second direction. It has been described that the 2 beamforming signal 510 is transmitted.
이 경우 제 10방향은 제1 방향 및 제2 방향 사이의 중앙 방향일 수 있다.In this case, the tenth direction may be a central direction between the first direction and the second direction.
즉 전자장치의 프로세서는 복수의 제1 빔포밍 신호 중 수신 감도가 큰 두 방향 사이의 중앙 방향으로 제2 빔포밍 신호(510)를 전송할 수 있다.That is, the processor of the electronic device may transmit the second beamforming signal 510 in a central direction between two directions having a large reception sensitivity among the plurality of first beamforming signals.
예를 들어 제1 방향의 각도가 0도이고 제2 방향의 각도가 45도인 경우, 전자장치의 프로세서는 22.5도 방향으로 제2 빔포밍 신호(510)를 전송할 수 있다.For example, when the angle in the first direction is 0 degrees and the angle in the second direction is 45 degrees, the processor of the electronic device may transmit the second beamforming signal 510 in the direction of 22.5 degrees.
이와 같이 본 발명에 따르면, 수신 신호 감도가 큰 두 방향 사이에 이동 단말기가 있을 것으로 예측한 후, 수신 신호 감도가 큰 두 방향 사이에 제2 빔포밍 신호를 전송하고 제2 빔포밍 신호를 이용하여 방향을 측정함으로써, 이동 단말기의 방향을 더욱 정밀하게 측정할 수 있는 장점이 있다.As described above, according to the present invention, after predicting that the mobile terminal is located between two directions having high received signal sensitivity, the second beamforming signal is transmitted between the two directions having high received signal sensitivity and the second beamforming signal is used. By measuring the direction, there is an advantage that can more accurately measure the direction of the mobile terminal.
한편 전자장치의 프로세서는 이동 단말기와의 거리가 제1 기 설정된 거리(a)보다 크면 제2 빔포밍 신호(510)를 전송하는 것으로 결정할 수 있다.Meanwhile, the processor of the electronic device may determine to transmit the second beamforming signal 510 when the distance from the mobile terminal is greater than the first preset distance (a).
예를 들어 전자장치의 프로세서는 이동 단말기와의 거리가 1m보다 크면 제2 빔포밍 신호(510)를 전송하는 것으로 결정할 수 있다.For example, the processor of the electronic device may determine to transmit the second beamforming signal 510 when the distance to the mobile terminal is greater than 1 m.
그리고 이동 단말기와의 거리가 제1 기 설정된 거리(a)보다 큰 경우, 전자 장치의 프로세서는 복수의 제1 빔 포밍 신호 중 수신 신호 강도가 큰 두 방향 사이로 제2 빔포밍 신호(510)를 전송할 수 있다. 또한 전자 장치의 프로세서는 RSSI 기반으로 제2 빔포밍 신호(510)에 대한 응답 신호를 이용하여 이동 단말기의 방향을 획득할 수 있다.In addition, when the distance from the mobile terminal is greater than the first preset distance (a), the processor of the electronic device transmits the second beamforming signal 510 between two directions in which the received signal strength is greater among the plurality of first beamforming signals. Can. In addition, the processor of the electronic device may acquire the direction of the mobile terminal by using a response signal to the second beamforming signal 510 based on RSSI.
한편 이동 단말기와의 거리가 제1 기 설정된 거리(a)보다 큰 제2 기 설정된 거리(b)보다 크면, 전자장치의 프로세서는 ‘복수의 제1 빔 포밍 신호 중 수신감도가 큰 두 방향’ 및 제2 빔포밍 신호(510)가 전송된 방향 중 수신 감도가 큰 두 방향 사이로 제3 빔포밍 신호(520)를 전송할 수 있다.On the other hand, if the distance from the mobile terminal is greater than the second preset distance (b), which is greater than the first preset distance (a), the processor of the electronic device is'two directions in which the reception sensitivity is high among the plurality of first beamforming signals' and Among the directions in which the second beamforming signal 510 is transmitted, the third beamforming signal 520 may be transmitted between two directions having high reception sensitivity.
예를 들어 전자장치의 프로세서는 이동 단말기와의 거리가 2m보다 크면 제3 빔포밍 신호(520)를 전송하는 것으로 결정할 수 있다.For example, the processor of the electronic device may determine to transmit the third beamforming signal 520 when the distance to the mobile terminal is greater than 2 m.
이 경우 전자장치의 프로세서는 제3 빔포밍 신호(520)에 대한 응답 신호를 이용하여 이동 단말기의 방향을 획득할 수 있다.In this case, the processor of the electronic device may acquire the direction of the mobile terminal by using a response signal to the third beamforming signal 520.
또한 이동 단말기와의 거리가 제2 기 설정된 거리(b)보다 큰 제3 기 설정된 거리(c)보다 크면, 전자장치의 프로세서는 제3 빔포밍 신호(520) 및 빔 포밍 신호가 전송된 방향 중 제3 빔포밍 신호(520)에 가장 인접한 방향 사이로 제4 빔포밍 신호(530)를 전송할 수 있다.In addition, if the distance from the mobile terminal is greater than the third preset distance (c) greater than the second preset distance (b), the processor of the electronic device is in the direction in which the third beamforming signal 520 and the beamforming signal are transmitted. The fourth beamforming signal 530 may be transmitted between directions closest to the third beamforming signal 520.
그리고 전자장치의 프로세서는 제4 빔포밍 신호(530)에 대한 응답 신호를 이용하여 이동 단말기의 방향을 획득할 수 있다.In addition, the processor of the electronic device may acquire a direction of the mobile terminal by using a response signal to the fourth beamforming signal 530.
본 발명에서는, 빔포밍 신호를 복수의 방향으로 전송하여 이동 단말기의 방향을 결정하기 때문에, 전자 장치(200)와 이동 단말기(100)의 거리가 멀수록 방향의 오차가 커지게 된다. 다만 본 실시 예에 따르면 이동 단말기와의 거리가 멀수록 빔포밍 신호를 추가적으로 전송하여 방향을 측정하기 때문에, 거리가 멀어짐에 따라 오차가 커지는 것을 방지할 수 있다.In the present invention, since the beamforming signal is transmitted in a plurality of directions to determine the direction of the mobile terminal, the greater the distance between the electronic device 200 and the mobile terminal 100, the greater the error in direction. However, according to the present embodiment, since the distance from the mobile terminal is farther, the beamforming signal is additionally transmitted to measure the direction, so that the error can be prevented from increasing as the distance increases.
또한 거리가 가까운 경우에는 측정 오차가 작기 때문에, 이 경우에도 빔포밍 신호를 추가적으로 전송하게 되면 딜레이가 야기될 뿐 측정 오차를 줄이는 효과는 미미할 수 있다. 따라서 거리가 가까울 수록 빔포밍 신호를 전송하는 횟수를 줄임으로써, 이동 단말기의 방향을 빠르게 결정할 수 있는 장점이 있다.In addition, since the measurement error is small when the distance is close, even in this case, when the beamforming signal is additionally transmitted, a delay is caused and the effect of reducing the measurement error may be insignificant. Therefore, the shorter the distance is, the less the number of beamforming signals are transmitted, which has the advantage of quickly determining the direction of the mobile terminal.
다시 도 2로 돌아가서, 본 발명의 실시 예에 따른 전자 장치(200)의 동작 방법은 거리 및 방향을 이용하여 이동 단말기에 대한 서비스를 제공하는 단계(S250)를 포함할 수 있다.Returning to FIG. 2 again, an operation method of the electronic device 200 according to an embodiment of the present invention may include providing a service for a mobile terminal using a distance and a direction (S250 ).
구체적으로 전자 장치의 프로세서는 이동 단말기와의 거리 및 방향을 이용하여 이동 단말기의 위치 정보를 획득할 수 있다. 또한 전자 장치의 프로세서는 이동 단말기의 위치 정보를 이용하여 이동 단말기에 대한 서비스를 제공할 수 있다.Specifically, the processor of the electronic device may acquire location information of the mobile terminal using a distance and a direction from the mobile terminal. Also, the processor of the electronic device may provide a service for the mobile terminal by using the location information of the mobile terminal.
이와 관련해서는 도 6 내지 도 7을 참고하여 설명한다.This will be described with reference to FIGS. 6 to 7.
도 6은 본 발명의 실시 예에 따른 이동 단말기와의 연결을 자동 설정하는 방법을 설명하기 위한 도면이다.6 is a view for explaining a method for automatically establishing a connection with a mobile terminal according to an embodiment of the present invention.
프로세서는 이동 단말기와의 거리 및 이동 단말기의 방향에 기초하여 이동 단말기가 특정 영역(610) 이내에 위치하면 이동 단말기와의 연결을 설정할 수 있다. 여기서 특정 영역(610)은 전자 장치로부터 특정 범위 이내의 영역을 의미할 수 있다.The processor may establish a connection with the mobile terminal when the mobile terminal is located within a specific area 610 based on the distance to the mobile terminal and the direction of the mobile terminal. Here, the specific area 610 may mean an area within a specific range from the electronic device.
예를 들어 도 6a를 참고하면 이동 단말기(100)를 장착한 사용자가 주방에 있는 상태이다. 그리고 이동 단말기(100)와 전자 장치(200)의 거리는 10미터 떨어진 상태이다. 이 경우 전자장치의 프로세서는 이동 단말기와의 연결을 설정하지 않을 수 있다. 한편 블루투스 LE에 의해 이동 단말기가 검색된 경우, 전자장치의 프로세서는 “전자 장치에 접근하면 연결이 설정됩니다”라는 메시지를 출력할 수 있다.For example, referring to FIG. 6A, a user equipped with the mobile terminal 100 is in a kitchen. In addition, the distance between the mobile terminal 100 and the electronic device 200 is 10 meters away. In this case, the processor of the electronic device may not establish a connection with the mobile terminal. On the other hand, when the mobile terminal is searched by the Bluetooth LE, the processor of the electronic device may output a message, "The connection is established when the electronic device is accessed."
다른 예를 들어 도 6b를 참고하면, 이동 단말기(100)를 장착한 사용자가 전자 장치(200)의 정면으로 이동한 상태이며, 이동 단말기(100)와 전자 장치(200)의 거리는 3미터 떨어진 상태이다. 이 경우 전자장치의 프로세서는 이동 단말기와의 연결을 자동으로 설정할 수 있다.For another example, referring to FIG. 6B, a user equipped with the mobile terminal 100 moves to the front of the electronic device 200, and the distance between the mobile terminal 100 and the electronic device 200 is 3 meters away. to be. In this case, the processor of the electronic device may automatically establish a connection with the mobile terminal.
다른 예를 들어, 이동 단말기(100)를 장착한 사용자가 전자 장치(200)의 측면으로 이동한 상태이며, 이동 단말기(100)와 전자 장치(200)의 거리는 3미터 떨어진 상태이다. 이 경우 전자장치의 프로세서는 이동 단말기와의 연결을 설정하지 않을 수 있다.For another example, a user equipped with the mobile terminal 100 has moved to the side of the electronic device 200, and the distance between the mobile terminal 100 and the electronic device 200 is 3 meters away. In this case, the processor of the electronic device may not establish a connection with the mobile terminal.
한편 자동으로 연결이 설정된다는 것은, 이동 단말기(100)에 대한 서비스를 제공하기 위하여, 별도의 입력 없이도 전자 장치(200)와 이동 단말기(100)를 연결한다는 의미일 수 있다.Meanwhile, the connection is automatically established may mean that the electronic device 200 and the mobile terminal 100 are connected without additional input in order to provide a service for the mobile terminal 100.
이와 같이 본 발명에 따르면, 핀 코드(Pin code) 입력 등 연결을 설정하기 위한 별도의 입력 없이도, 이동 단말기의 접근을 감지하여 연결을 자동으로 설정할 수 있는 장점이 있다.As described above, according to the present invention, even without a separate input for establishing a connection, such as a pin code input, there is an advantage that the connection can be automatically established by detecting the access of the mobile terminal.
한편 이동 단말기와의 연결이 설정된 경우, 전자장치의 프로세서는 이동 단말기로부터 이동 단말기의 사용자에 대한 정보를 수신할 수 있다.Meanwhile, when a connection with the mobile terminal is established, the processor of the electronic device may receive information about the user of the mobile terminal from the mobile terminal.
구체적으로 전자장치의 프로세서는 이동 단말기의 사용자의 건강정보(혈압, 체온 등) 또는 의료 정보(병원 진료 정보, 처방약 정보 등)를 수신할 수 있다.Specifically, the processor of the electronic device may receive health information (blood pressure, body temperature, etc.) or medical information (hospital medical information, prescription drug information, etc.) of the user of the mobile terminal.
도 7은 본 발명의 실시 예에 따른, 이동 단말기에 대한 서비스를 제공하는 방법을 설명하기 위한 도면이다.7 is a view for explaining a method of providing a service for a mobile terminal according to an embodiment of the present invention.
전자 장치(200)는 이동 단말기로부터 수신한 사용자에 대한 정보에 기초하여 이동 단말기에 대한(즉 이동 단말기를 장착한 사용자에 대한) 서비스를 제공할 수 있다.The electronic device 200 may provide a service for the mobile terminal (ie, for a user equipped with the mobile terminal) based on information about the user received from the mobile terminal.
예를 들어 사용자에 대한 정보는 사용자의 선호 정보(예를 들어 선호 채널, 선호 화면 밝기 등)을 포함할 수 있다. 이 경우 전자 장치(200)의 프로세서는 사용자의 선호 채널을 추천하거나, 화면의 밝기를 조절할 수 있다.For example, the information about the user may include the user's preference information (eg, preference channel, preference screen brightness, etc.). In this case, the processor of the electronic device 200 may recommend the user's preferred channel or adjust the brightness of the screen.
한편 전자 장치(200)는 공기 조화기(400)와 통신할 수 있다.Meanwhile, the electronic device 200 may communicate with the air conditioner 400.
이 경우 전자 장치(200)의 프로세서는 이동 단말기와의 거리 및 이동 단말기의 방향에 기초하여 공기 조화기의 바람의 세기 및 방향 중 적어도 하나가 제어되도록 명령을 전송할 수 있다.In this case, the processor of the electronic device 200 may transmit a command to control at least one of the wind strength and direction of the air conditioner based on the distance to the mobile terminal and the direction of the mobile terminal.
여기서 명령은, 이동 단말기와의 거리 및 이동 단말기의 방향에 기초하여 획득된 이동 단말기의 위치 정보를 포함할 수 있다.Here, the command may include location information of the mobile terminal obtained based on the distance to the mobile terminal and the direction of the mobile terminal.
다른 실시 예로, 명령은 공기 조화기의 바람의 세기 및 방향에 대한 제어 명령을 포함할 수 있다.In another embodiment, the command may include a control command for the wind strength and direction of the air conditioner.
위치 정보가 수신되는 경우, 공기 조화기(400)는 수신된 위치 정보에 기초하여 공기 조화기의 바람의 세기 및 방향 중 적어도 하나를 제어할 수 있다.When the location information is received, the air conditioner 400 may control at least one of the wind strength and direction of the air conditioner based on the received location information.
예를 들어 공기 조화기(400)는 이동 단말기(100)의 위치로(즉 이동 단말기를 장착한 사용자의 위치로) 센 바람을 보내거나 약한 바람을 보내는 등의 제어를 수행할 수 있다.For example, the air conditioner 400 may perform control such as sending strong wind or sending weak wind to the position of the mobile terminal 100 (ie, to the user's location equipped with the mobile terminal).
다른 실시 예로 제어 명령이 수신되는 경우, 공기 조화기(400)는 수신된 제어 명령에 기초하여 공기 조화기의 바람의 세기 및 방향 중 적어도 하나를 제어할 수 있다.In another embodiment, when a control command is received, the air conditioner 400 may control at least one of the wind strength and direction of the air conditioner based on the received control command.
한편 전자 장치(200)는 지향성 스피커(300)와 통신할 수 있다.Meanwhile, the electronic device 200 may communicate with the directional speaker 300.
이 경우 전자 장치(200)의 프로세서는 이동 단말기와의 거리 및 이동 단말기의 방향에 기초하여 지향성 스피커의 출력 사운드의 크기 및 방향 중 적어도 하나가 제어되도록 명령을 전송할 수 있다.In this case, the processor of the electronic device 200 may transmit a command to control at least one of the magnitude and direction of the output sound of the directional speaker based on the distance to the mobile terminal and the direction of the mobile terminal.
여기서 명령은, 이동 단말기와의 거리 및 이동 단말기의 방향에 기초하여 획득된 이동 단말기의 위치 정보를 포함할 수 있다.Here, the command may include location information of the mobile terminal obtained based on the distance to the mobile terminal and the direction of the mobile terminal.
다른 실시 예로, 명령은 지향성 스피커의 출력 사운드의 크기 및 방향에 대한 제어 명령을 포함할 수 있다.In another embodiment, the command may include a control command for the magnitude and direction of the output sound of the directional speaker.
위치 정보가 수신되는 경우, 지향성 스피커(300)는 수신된 위치 정보에 기초하여 출력 사운드의 크기 및 방향 중 적어도 하나를 제어할 수 있다.When location information is received, the directional speaker 300 may control at least one of the magnitude and direction of the output sound based on the received location information.
예를 들어 지향성 스피커(300)는 이동 단말기(100)의 위치로(즉 이동 단말기를 장착한 사용자의 위치로) 사용자가 선호하는 크기의 사운드를 출력하는 등의 제어를 수행할 수 있다.For example, the directional speaker 300 may perform control such as outputting a sound of a user's preferred size to the location of the mobile terminal 100 (ie, to the user's location equipped with the mobile terminal).
다른 실시 예로 제어 명령이 수신되는 경우, 지향성 스피커(300)는 수신된 제어 명령에 기초하여 지향성 스피커(300)의 출력 사운드의 크기 및 방향 중 적어도 하나를 제어할 수 있다.In another embodiment, when a control command is received, the directional speaker 300 may control at least one of the magnitude and direction of the output sound of the directional speaker 300 based on the received control command.
한편 앞서, 이동 단말기와의 연결이 설정된 경우 전자장치의 프로세서는 이동 단말기로부터 이동 단말기의 사용자에 대한 정보를 수신한다고 설명한 바 있다.Meanwhile, it has been described above that the processor of the electronic device receives information about the user of the mobile terminal from the mobile terminal when the connection with the mobile terminal is established.
이 경우 전자 장치의 프로세서는 사용자에 대한 정보를 외부 기기에 전송할 수 있다. In this case, the processor of the electronic device may transmit information about the user to the external device.
이 경우 외부 기기는 이동 단말기의 위치 정보 및 사용자에 대한 정보에 기초하여 이동 단말기에 대한 서비스를 제공할 수 있다.In this case, the external device may provide a service for the mobile terminal based on the location information of the mobile terminal and information about the user.
예를 들어 공기 조화기(400)는 사용자의 건강 정보 또는 의료 정보를 이용하여 사용자가 감기에 걸려있는 상태라는 것을 결정할 수 있다. 이 경우 공기 조화기(400)는 이동 단말기의 위치 정보를 이용하여 이동 단말기의 위치를 피해서 바람을 토출할 수 있다.For example, the air conditioner 400 may use the user's health information or medical information to determine that the user is in a cold. In this case, the air conditioner 400 may discharge wind by avoiding the position of the mobile terminal using the location information of the mobile terminal.
종래의 RSSI 기반의 거리 인식 방식은 주변의 환경, 장소 및 장애물, 이동 단말기의 움직임 등에 따라 오차가 크게 발생하며, RTT 기반의 위치 측정 방식은 최소 세 개 이상의 디바이스가 필요한 문제가 있었다.In the conventional RSSI-based distance recognition method, errors are largely generated according to surrounding environments, places and obstacles, and movement of a mobile terminal, and the RTT-based location measurement method has a problem that requires at least three devices.
다만 본 발명은 RSSI 및 RTT를 결합하여 이동 단말기의 위치를 파악하기 때문에, 주변 환경, 장애물, 이동 단말기의 이동 등에 따른 오차를 최소화 하고, 전자 장치 단독으로 이동 단말기의 위치를 파악할 수 있는 장점이 있다. 또한 이러한 장점으로 인하여, 본 발명은 구조가 복잡하고 장애물이 많은 댁 내에서 특히 효율적으로 사용될 수 있다.However, since the present invention combines RSSI and RTT to determine the location of the mobile terminal, errors due to surrounding environment, obstacles, and movement of the mobile terminal are minimized, and the electronic device alone can locate the mobile terminal. . In addition, due to these advantages, the present invention can be particularly efficiently used in a house having a complicated structure and many obstacles.
또한 본 발명은 자동 연결 시 사용자에 대한 정보를 수신하여 사용자 맞춤형의 서비스를 제공할 수 있는 장점이 있다.In addition, the present invention has an advantage that can provide a user-customized service by receiving information about the user during automatic connection.
전술한 본 발명은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, HDD(Hard Disk Drive), SSD(Solid State Disk), SDD(Silicon Disk Drive), ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있다. 또한, 상기 컴퓨터는 단말기의 프로세서(180)를 포함할 수도 있다.The above-described present invention can be embodied as computer readable codes on a medium on which a program is recorded. The computer-readable medium includes all types of recording devices in which data that can be read by a computer system are stored. Examples of computer-readable media include a hard disk drive (HDD), solid state disk (SSD), silicon disk drive (SDD), ROM, RAM, CD-ROM, magnetic tape, floppy disk, and optical data storage device. There is this. In addition, the computer may include a processor 180 of the terminal.

Claims (15)

  1. 무선 신호를 송신 및 수신하는 무선 통신부; 및A wireless communication unit for transmitting and receiving wireless signals; And
    외부로 제1 신호를 전송하고, RTT 기반으로 상기 제1 신호에 대한 응답 신호를 이용하여 이동 단말기와의 거리를 획득하고, 복수의 방향으로 빔포밍 신호를 전송하고, RSSI 기반으로 상기 빔포밍 신호에 대한 응답 신호를 이용하여 상기 이동 단말기의 방향을 획득하고, 상기 거리 및 상기 방향을 이용하여 상기 이동 단말기에 대한 서비스를 제공하는 프로세서를 포함하는A first signal is transmitted to the outside, a distance from a mobile terminal is obtained using a response signal to the first signal based on RTT, a beamforming signal is transmitted in a plurality of directions, and the beamforming signal is based on RSSI And a processor for obtaining a direction of the mobile terminal using a response signal to and providing a service for the mobile terminal using the distance and the direction.
    전자 장치.Electronic devices.
  2. 제 1항에 있어서,According to claim 1,
    상기 프로세서는,The processor,
    상기 빔 포밍 신호의 수신 신호 강도가 큰 두 방향 사이에 상기 이동 단말기가 존재하는 것으로 결정하는It is determined that the mobile terminal exists between two directions in which the received signal strength of the beam forming signal is large.
    전자 장치.Electronic devices.
  3. 제 2항에 있어서,According to claim 2,
    상기 프로세서는,The processor,
    상기 두 방향의 수신 신호 강도에 기초하여 상기 이동 단말기의 방향을 결정하는Determining the direction of the mobile terminal based on the received signal strength in the two directions
    전자 장치.Electronic devices.
  4. 제 2항에 있어서,According to claim 2,
    상기 프로세서는,The processor,
    상기 빔 포밍 신호의 수신 신호 강도가 큰 두 방향 사이로 제2 빔포밍 신호를 전송하고, RSSI 기반으로 상기 제2 빔포밍 신호에 대한 응답 신호를 이용하여 상기 이동 단말기의 방향을 획득하는Transmitting a second beamforming signal between two directions in which the received signal strength of the beamforming signal is large, and obtaining a direction of the mobile terminal by using a response signal for the second beamforming signal based on RSSI
    전자 장치.Electronic devices.
  5. 제 4항에 있어서,The method of claim 4,
    상기 프로세서는,The processor,
    상기 거리가 제1 기 설정된 거리보다 크면 상기 제2 빔포밍 신호를 전송하는 것으로 결정하는If the distance is greater than the first preset distance, it is determined that the second beamforming signal is transmitted.
    전자 장치.Electronic devices.
  6. 제 4항에 있어서,The method of claim 4,
    상기 프로세서는,The processor,
    상기 빔 포밍 신호의 수신감도가 큰 두 방향 사이의 중앙 방향으로 상기 제2 빔포밍 신호를 전송하는The second beamforming signal is transmitted in a central direction between two directions in which the reception sensitivity of the beamforming signal is large.
    전자 장치.Electronic devices.
  7. 제 5항에 있어서,The method of claim 5,
    상기 거리가 제1 기 설정된 거리보다 큰 제2 기 설정된 거리보다 크면, 상기 빔 포밍 신호의 수신감도가 큰 두 방향 및 상기 제2 빔포밍 신호가 전송된 방향 중 수신 감도가 큰 두 방향 사이로 제3 빔포밍 신호를 전송하고, 상기 제3 빔포밍 신호에 대한 응답 신호를 이용하여 상기 이동 단말기의 방향을 획득하는If the distance is greater than the second preset distance greater than the first preset distance, the third direction is between two directions in which the reception sensitivity of the beamforming signal is large and two directions in which the second beamforming signal is transmitted, which has greater reception sensitivity. Transmitting a beamforming signal, and obtaining a direction of the mobile terminal by using a response signal to the third beamforming signal
    전자 장치.Electronic devices.
  8. 제 1항에 있어서,According to claim 1,
    상기 프로세서는,The processor,
    상기 거리에 기초하여 상기 복수의 방향의 수를 결정하는Determining the number of the plurality of directions based on the distance
    전자 장치.Electronic devices.
  9. 제 1항에 있어서,According to claim 1,
    상기 프로세서는,The processor,
    상기 거리 및 상기 방향에 기초하여 상기 이동 단말기가 특정 영역 이내에 위치하면 상기 이동 단말기와의 연결을 설정하는Establishing a connection with the mobile terminal when the mobile terminal is located within a specific area based on the distance and the direction
    전자 장치.Electronic devices.
  10. 제 1항에 있어서,According to claim 1,
    상기 프로세서는,The processor,
    상기 거리 및 상기 방향에 기초하여 공기 조화기의 바람의 세기 및 방향 중 적어도 하나가 제어되도록 명령을 전송하는Sending a command to control at least one of the wind strength and direction of the air conditioner based on the distance and the direction
    전자 장치.Electronic devices.
  11. 제 1항에 있어서,According to claim 1,
    상기 프로세서는,The processor,
    상기 거리 및 방향에 기초하여 지향성 스피커의 출력 사운드의 크기 및 방향 중 적어도 하나가 제어되도록 명령을 전송하는Sending a command to control at least one of the magnitude and direction of the output sound of the directional speaker based on the distance and direction
    전자 장치.Electronic devices.
  12. 외부로 제1 신호를 전송하는 단계;Transmitting a first signal to the outside;
    RTT 기반으로 상기 제1 신호에 대한 응답 신호를 이용하여 이동 단말기와의 거리를 획득하는 단계;Obtaining a distance from a mobile terminal using a response signal for the first signal based on RTT;
    복수의 방향으로 빔포밍 신호를 전송하는 단계;Transmitting a beamforming signal in a plurality of directions;
    RSSI 기반으로 상기 빔포밍 신호에 대한 응답 신호를 이용하여 상기 이동 단말기의 방향을 획득하는 단계; 및Obtaining a direction of the mobile terminal using a response signal to the beamforming signal based on RSSI; And
    상기 거리 및 상기 방향을 이용하여 상기 이동 단말기에 대한 서비스를 제공하는 단계를 포함하는And providing a service for the mobile terminal using the distance and the direction.
    전자 장치의 동작 방법.How the electronic device works.
  13. 제 1항에 있어서,According to claim 1,
    상기 이동 단말기의 방향을 획득하는 단계는,The step of obtaining the direction of the mobile terminal,
    상기 빔 포밍 신호의 수신감도가 큰 두 방향 사이에 상기 이동 단말기가 존재하는 것으로 결정하는 단계를 포함하는And determining that the mobile terminal exists between two directions in which the reception sensitivity of the beam forming signal is large.
    전자 장치의 동작 방법.How the electronic device works.
  14. 제 13항에 있어서,The method of claim 13,
    상기 이동 단말기의 방향을 획득하는 단계는,The step of obtaining the direction of the mobile terminal,
    상기 빔 포밍 신호의 수신감도가 큰 두 방향 사이로 제2 빔포밍 신호를 전송하고, RSSI 기반으로 상기 제2 빔포밍 신호에 대한 응답 신호를 이용하여 상기 이동 단말기의 방향을 획득하는 단계를 더 포함하는The method further includes transmitting a second beamforming signal between two directions in which the reception sensitivity of the beamforming signal is large, and obtaining a direction of the mobile terminal using a response signal for the second beamforming signal based on RSSI.
    전자 장치의 동작 방법.How the electronic device works.
  15. 제 4항에 있어서,The method of claim 4,
    상기 거리가 제1 기 설정된 거리보다 크면 상기 제2 빔포밍 신호를 전송하는 것으로 결정하는 단계를 더 포함하는And determining that the second beamforming signal is transmitted when the distance is greater than a first preset distance.
    전자 장치의 동작 방법.How the electronic device works.
PCT/KR2019/000114 2019-01-03 2019-01-03 Electronic device WO2020141640A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/KR2019/000114 WO2020141640A1 (en) 2019-01-03 2019-01-03 Electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/KR2019/000114 WO2020141640A1 (en) 2019-01-03 2019-01-03 Electronic device

Publications (1)

Publication Number Publication Date
WO2020141640A1 true WO2020141640A1 (en) 2020-07-09

Family

ID=71407190

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2019/000114 WO2020141640A1 (en) 2019-01-03 2019-01-03 Electronic device

Country Status (1)

Country Link
WO (1) WO2020141640A1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100713529B1 (en) * 2000-08-24 2007-04-30 삼성전자주식회사 Apparatus and method for positioning mobile station in mobile communication system
KR20100123486A (en) * 2009-05-15 2010-11-24 엘지전자 주식회사 Air conditioner and controlling method thereof
US20130275881A1 (en) * 2012-04-16 2013-10-17 Samsung Electronics Co., Ltd. Method and system for providing service for searching friends
KR20160011419A (en) * 2014-07-22 2016-02-01 엘지전자 주식회사 A mobile device, a method for controlling the mobile device, and a control system having the mobile device
KR20170081916A (en) * 2016-01-05 2017-07-13 삼성전자주식회사 The apparatus and method for providing the service information

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100713529B1 (en) * 2000-08-24 2007-04-30 삼성전자주식회사 Apparatus and method for positioning mobile station in mobile communication system
KR20100123486A (en) * 2009-05-15 2010-11-24 엘지전자 주식회사 Air conditioner and controlling method thereof
US20130275881A1 (en) * 2012-04-16 2013-10-17 Samsung Electronics Co., Ltd. Method and system for providing service for searching friends
KR20160011419A (en) * 2014-07-22 2016-02-01 엘지전자 주식회사 A mobile device, a method for controlling the mobile device, and a control system having the mobile device
KR20170081916A (en) * 2016-01-05 2017-07-13 삼성전자주식회사 The apparatus and method for providing the service information

Similar Documents

Publication Publication Date Title
WO2019031707A1 (en) Mobile terminal and method for controlling mobile terminal using machine learning
WO2018128362A1 (en) Electronic apparatus and method of operating the same
WO2019013510A1 (en) Voice processing method and electronic device supporting the same
WO2017090947A1 (en) Question and answer processing method and electronic device for supporting the same
WO2019164146A1 (en) System for processing user utterance and controlling method thereof
EP3545436A1 (en) Electronic apparatus and method of operating the same
WO2020162709A1 (en) Electronic device for providing graphic data based on voice and operating method thereof
WO2020096172A1 (en) Electronic device for processing user utterance and controlling method thereof
WO2020032563A1 (en) System for processing user voice utterance and method for operating same
WO2021006404A1 (en) Artificial intelligence server
WO2018066859A1 (en) Method for providing emergency service, electronic device therefor, and computer readable recording medium
WO2019182252A1 (en) Electronic device and server for processing data received from electronic device
WO2020032443A1 (en) Electronic device supporting personalized device connection and method thereof
WO2020180034A1 (en) Method and device for providing user-selection-based information
WO2020091248A1 (en) Method for displaying content in response to speech command, and electronic device therefor
WO2020226213A1 (en) Artificial intelligence device for providing voice recognition function and method for operating artificial intelligence device
WO2020167006A1 (en) Method of providing speech recognition service and electronic device for same
WO2021075716A1 (en) Electronic device supporting improved speech recognition
WO2020130301A1 (en) Electronic device for tracking user activity and method of operating the same
WO2020130260A1 (en) Mobile terminal and method of operating the same
WO2020096218A1 (en) Electronic device and operation method thereof
WO2015199430A1 (en) Method and apparatus for managing data
WO2019031693A1 (en) Mobile terminal
WO2021118229A1 (en) Information providing method and electronic device for supporting the same
WO2018124464A1 (en) Electronic device and search service providing method of electronic device

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19907162

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19907162

Country of ref document: EP

Kind code of ref document: A1