WO2023018086A1 - 외부 장치의 자동 완성 텍스트를 동기화하는 전자 장치 및 방법 - Google Patents

외부 장치의 자동 완성 텍스트를 동기화하는 전자 장치 및 방법 Download PDF

Info

Publication number
WO2023018086A1
WO2023018086A1 PCT/KR2022/011311 KR2022011311W WO2023018086A1 WO 2023018086 A1 WO2023018086 A1 WO 2023018086A1 KR 2022011311 W KR2022011311 W KR 2022011311W WO 2023018086 A1 WO2023018086 A1 WO 2023018086A1
Authority
WO
WIPO (PCT)
Prior art keywords
electronic device
text
user
display
data
Prior art date
Application number
PCT/KR2022/011311
Other languages
English (en)
French (fr)
Inventor
김석원
강연구
김상헌
신민철
임연욱
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to EP22856085.0A priority Critical patent/EP4350488A1/en
Priority to CN202280056410.0A priority patent/CN117859109A/zh
Priority to US17/885,735 priority patent/US20230049881A1/en
Publication of WO2023018086A1 publication Critical patent/WO2023018086A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G06F3/0237—Character input methods using prediction or retrieval techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G06F3/0236—Character input methods using selection techniques to select from displayed items
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus

Definitions

  • This document relates to an electronic device, for example, a wearable device including a smart watch and a synchronization method thereof.
  • a wearable device can be used while being worn by a user, and has at least a function to perform audio output or video output, a function to input/output information, and a function to store data while worn. It may refer to a portable device equipped with one or more. As these wearable devices are miniaturized, a smart watch that can be worn on a user's wrist or the like is being developed.
  • an electronic device may transmit and receive data with an external device through a wireless (eg, Bluetooth communication) connection (eg, pairing or communication network (LTE, 5G)).
  • a wireless (eg, Bluetooth communication) connection eg, pairing or communication network (LTE, 5G)
  • the form of wireless communication with the external device may be a 1:1 pairing method between the electronic device and the external device, storing information in the cloud (eg Samsung Cloud), and uploading information together with multiple external devices connected. and/or downloadable multiple connection schemes.
  • the electronic device may provide the same user experience by transmitting and receiving the same data when the accounts are the same based on a specific user account (eg, Samsung account).
  • a specific user account eg, Samsung account
  • Electronic devices including smart phones and tablet PCs can learn and store words that users frequently input (the storage method and exposure rate may vary depending on the frequency of word input) using an advanced software input device.
  • word information frequently input by a user may not be interlocked or synchronized with the wearable device, and thus all words may have to be directly input on the wearable device.
  • a wearable device including a smart watch may include a relatively small display, which may make it difficult for a user to manipulate. That is, it may be difficult for a user to register, modify, or delete a word frequently used by the user or a shortcut defined by the user.
  • An electronic device includes a display and a processor, and the processor controls a keyboard process of an external device and a data reception manager of the electronic device to be operatively connected, and inputs autocomplete text from the external device.
  • Input information refers to user data, which refers to data that an electronic device collects data on words frequently used by users, learns on its own, and recommends data to the user as complete words, and/or abbreviations set by the user and completed words corresponding to the abbreviations. It can include user-defined shortcut data that means.
  • An auto-completion text input method of an electronic device includes an operation of controlling a keyboard process of an external device and a data reception manager of the electronic device to be operatively connected, and obtaining auto-completion text input information from the external device. It includes an operation of synchronizing the acquired auto-completion text input information with a keyboard process of an electronic device and an operation of controlling display of a suggested word based on the auto-completion text input information using a display,
  • Completion text input information refers to data that an electronic device collects data on frequently used words by the user, learns on its own, and recommends data to the user as completion words, and/or abbreviations and shortcuts set by the user. It may contain user-defined abbreviation data meaning the corresponding completed word.
  • a user's frequently input words and registered words in an external device can be equally used or recommended in an electronic device (eg, a wearable device) to provide a convenient user experience.
  • an external device eg, a smartphone
  • an electronic device eg, a wearable device
  • a word frequently input by a user and a registered word in an external device are equally exposed to a suggested word area of the electronic device (eg, a wearable device), and the electronic device (eg, a wearable device) It is possible to reduce the number of user inputs (eg, touch input) on a device) and increase convenience.
  • an electronic device eg, a wearable device
  • an external device e.g. a smartphone
  • the electronic device e.g. a smartphone
  • Wearable devices can use the same or receive recommendations to provide convenience to the user.
  • FIG. 1 is a block diagram of an electronic device in a network environment, according to various embodiments.
  • FIG. 2A is a front perspective view of an electronic device according to various embodiments
  • FIG. 2B is a rear perspective view of an electronic device according to various embodiments.
  • FIG. 3 is an exploded perspective view of the main body 210 of the electronic device 200 of FIG. 2A according to an embodiment.
  • FIG. 4 is a block diagram illustrating configurations of an electronic device and an external device according to various embodiments.
  • 5A and 5B illustrate a word input process of a wearable device according to a comparative embodiment.
  • FIG. 6 illustrates a situation in which a connection service with an external device 405 is initiated using an electronic device according to various embodiments.
  • FIG. 7A to 7C illustrate processes of transmitting and receiving user word data between an electronic device and an external device according to various embodiments.
  • FIG. 8 illustrates a shortcut input screen of an external device according to various embodiments.
  • 9A to 9C illustrate a process of synchronizing a user word on an electronic device and results thereof according to various embodiments.
  • FIG. 10 illustrates a method for changing a shortcut of an electronic device according to various embodiments.
  • FIG. 11 illustrates a word input process through a new input method other than a keyboard on an electronic device according to various embodiments.
  • 12A to 12E illustrate a process of connecting external devices and synchronizing user words according to various embodiments.
  • FIG. 1 is a block diagram of an electronic device 101 within a network environment 100, according to various embodiments.
  • an electronic device 101 communicates with an electronic device 102 through a first network 198 (eg, a short-range wireless communication network) or through a second network 199. It may communicate with at least one of the electronic device 104 or the server 108 through (eg, a long-distance wireless communication network). According to one embodiment, the electronic device 101 may communicate with the electronic device 104 through the server 108 .
  • a first network 198 eg, a short-range wireless communication network
  • the server 108 e.g, a long-distance wireless communication network
  • the electronic device 101 includes a processor 120, a memory 130, an input module 150, an audio output module 155, a display module 160, an audio module 170, a sensor module ( 176), interface 177, connection terminal 178, haptic module 179, camera module 180, power management module 188, battery 189, communication module 190, subscriber identification module 196 , or the antenna module 197 may be included.
  • at least one of these components eg, the connection terminal 178) may be omitted or one or more other components may be added.
  • some of these components eg, sensor module 176, camera module 180, or antenna module 197) are integrated into a single component (eg, display module 160). It can be.
  • the processor 120 for example, executes software (eg, the program 140) to cause at least one other component (eg, hardware or software component) of the electronic device 101 connected to the processor 120. It can control and perform various data processing or calculations. According to one embodiment, as at least part of data processing or operation, the processor 120 transfers instructions or data received from other components (e.g., sensor module 176 or communication module 190) to volatile memory 132. , processing commands or data stored in the volatile memory 132 , and storing resultant data in the non-volatile memory 134 .
  • software eg, the program 140
  • the processor 120 transfers instructions or data received from other components (e.g., sensor module 176 or communication module 190) to volatile memory 132. , processing commands or data stored in the volatile memory 132 , and storing resultant data in the non-volatile memory 134 .
  • the processor 120 may include a main processor 121 (eg, a central processing unit or an application processor) or a secondary processor 123 (eg, a graphic processing unit, a neural network processing unit ( NPU: neural processing unit (NPU), image signal processor, sensor hub processor, or communication processor).
  • a main processor 121 eg, a central processing unit or an application processor
  • a secondary processor 123 eg, a graphic processing unit, a neural network processing unit ( NPU: neural processing unit (NPU), image signal processor, sensor hub processor, or communication processor.
  • NPU neural network processing unit
  • the secondary processor 123 may be implemented separately from or as part of the main processor 121 .
  • the secondary processor 123 may, for example, take the place of the main processor 121 while the main processor 121 is in an inactive (eg, sleep) state, or the main processor 121 is active (eg, running an application). ) state, together with the main processor 121, at least one of the components of the electronic device 101 (eg, the display module 160, the sensor module 176, or the communication module 190) It is possible to control at least some of the related functions or states.
  • the auxiliary processor 123 eg, image signal processor or communication processor
  • the auxiliary processor 123 may include a hardware structure specialized for processing an artificial intelligence model.
  • AI models can be created through machine learning. Such learning may be performed, for example, in the electronic device 101 itself where the artificial intelligence model is performed, or may be performed through a separate server (eg, the server 108).
  • the learning algorithm may include, for example, supervised learning, unsupervised learning, semi-supervised learning or reinforcement learning, but in the above example Not limited.
  • the artificial intelligence model may include a plurality of artificial neural network layers.
  • Artificial neural networks include deep neural networks (DNNs), convolutional neural networks (CNNs), recurrent neural networks (RNNs), restricted boltzmann machines (RBMs), deep belief networks (DBNs), bidirectional recurrent deep neural networks (BRDNNs), It may be one of deep Q-networks or a combination of two or more of the foregoing, but is not limited to the foregoing examples.
  • the artificial intelligence model may include, in addition or alternatively, software structures in addition to hardware structures.
  • the memory 130 may store various data used by at least one component (eg, the processor 120 or the sensor module 176) of the electronic device 101 .
  • the data may include, for example, input data or output data for software (eg, program 140) and commands related thereto.
  • the memory 130 may include volatile memory 132 or non-volatile memory 134 .
  • the program 140 may be stored as software in the memory 130 and may include, for example, an operating system 142 , middleware 144 , or an application 146 .
  • the input module 150 may receive a command or data to be used by a component (eg, the processor 120) of the electronic device 101 from the outside of the electronic device 101 (eg, a user).
  • the input module 150 may include, for example, a microphone, a mouse, a keyboard, a key (eg, a button), or a digital pen (eg, a stylus pen).
  • the sound output module 155 may output sound signals to the outside of the electronic device 101 .
  • the sound output module 155 may include, for example, a speaker or a receiver.
  • the speaker can be used for general purposes such as multimedia playback or recording playback.
  • a receiver may be used to receive an incoming call. According to one embodiment, the receiver may be implemented separately from the speaker or as part of it.
  • the display module 160 may visually provide information to the outside of the electronic device 101 (eg, a user).
  • the display module 160 may include, for example, a display, a hologram device, or a projector and a control circuit for controlling the device.
  • the display module 160 may include a touch sensor set to detect a touch or a pressure sensor set to measure the intensity of force generated by the touch.
  • the audio module 170 may convert sound into an electrical signal or vice versa. According to one embodiment, the audio module 170 acquires sound through the input module 150, the sound output module 155, or an external electronic device connected directly or wirelessly to the electronic device 101 (eg: Sound may be output through the electronic device 102 (eg, a speaker or a headphone).
  • the audio module 170 acquires sound through the input module 150, the sound output module 155, or an external electronic device connected directly or wirelessly to the electronic device 101 (eg: Sound may be output through the electronic device 102 (eg, a speaker or a headphone).
  • the sensor module 176 detects an operating state (eg, power or temperature) of the electronic device 101 or an external environmental state (eg, a user state), and generates an electrical signal or data value corresponding to the detected state. can do.
  • the sensor module 176 may include, for example, a gesture sensor, a gyro sensor, an air pressure sensor, a magnetic sensor, an acceleration sensor, a grip sensor, a proximity sensor, a color sensor, an IR (infrared) sensor, a bio sensor, It may include a temperature sensor, humidity sensor, or light sensor.
  • the interface 177 may support one or more designated protocols that may be used to directly or wirelessly connect the electronic device 101 to an external electronic device (eg, the electronic device 102).
  • the interface 177 may include, for example, a high definition multimedia interface (HDMI), a universal serial bus (USB) interface, an SD card interface, or an audio interface.
  • HDMI high definition multimedia interface
  • USB universal serial bus
  • SD card interface Secure Digital Card interface
  • audio interface audio interface
  • connection terminal 178 may include a connector through which the electronic device 101 may be physically connected to an external electronic device (eg, the electronic device 102).
  • the connection terminal 178 may include, for example, an HDMI connector, a USB connector, an SD card connector, or an audio connector (eg, a headphone connector).
  • the haptic module 179 may convert electrical signals into mechanical stimuli (eg, vibration or motion) or electrical stimuli that a user may perceive through tactile or kinesthetic senses.
  • the haptic module 179 may include, for example, a motor, a piezoelectric element, or an electrical stimulation device.
  • the camera module 180 may capture still images and moving images. According to one embodiment, the camera module 180 may include one or more lenses, image sensors, image signal processors, or flashes.
  • the power management module 188 may manage power supplied to the electronic device 101 .
  • the power management module 188 may be implemented as at least part of a power management integrated circuit (PMIC), for example.
  • PMIC power management integrated circuit
  • the battery 189 may supply power to at least one component of the electronic device 101 .
  • the battery 189 may include, for example, a non-rechargeable primary cell, a rechargeable secondary cell, or a fuel cell.
  • the communication module 190 is a direct (eg, wired) communication channel or a wireless communication channel between the electronic device 101 and an external electronic device (eg, the electronic device 102, the electronic device 104, or the server 108). Establishment and communication through the established communication channel may be supported.
  • the communication module 190 may include one or more communication processors that operate independently of the processor 120 (eg, an application processor) and support direct (eg, wired) communication or wireless communication.
  • the communication module 190 is a wireless communication module 192 (eg, a cellular communication module, a short-range wireless communication module, or a global navigation satellite system (GNSS) communication module) or a wired communication module 194 (eg, : a local area network (LAN) communication module or a power line communication module).
  • a wireless communication module 192 eg, a cellular communication module, a short-range wireless communication module, or a global navigation satellite system (GNSS) communication module
  • GNSS global navigation satellite system
  • wired communication module 194 eg, : a local area network (LAN) communication module or a power line communication module.
  • a corresponding communication module is a first network 198 (eg, a short-range communication network such as Bluetooth, wireless fidelity (WiFi) direct, or infrared data association (IrDA)) or a second network 199 (eg, legacy It may communicate with the external electronic device 104 through a cellular network, a 5G network, a next-generation communication network, the Internet, or a telecommunications network such as a computer network (eg, a LAN or a WAN).
  • a telecommunications network such as a computer network (eg, a LAN or a WAN).
  • These various types of communication modules may be integrated as one component (eg, a single chip) or implemented as a plurality of separate components (eg, multiple chips).
  • the wireless communication module 192 uses subscriber information (eg, International Mobile Subscriber Identifier (IMSI)) stored in the subscriber identification module 196 within a communication network such as the first network 198 or the second network 199.
  • subscriber information eg, International Mobile Subscriber Identifier (IMSI)
  • IMSI International Mobile Subscriber Identifier
  • the electronic device 101 may be identified or authenticated.
  • the wireless communication module 192 may support a 5G network after a 4G network and a next-generation communication technology, for example, NR access technology (new radio access technology).
  • NR access technologies include high-speed transmission of high-capacity data (enhanced mobile broadband (eMBB)), minimization of terminal power and access of multiple terminals (massive machine type communications (mMTC)), or high reliability and low latency (ultra-reliable and low latency (URLLC)).
  • eMBB enhanced mobile broadband
  • mMTC massive machine type communications
  • URLLC ultra-reliable and low latency
  • -latency communications can be supported.
  • the wireless communication module 192 may support a high frequency band (eg, mmWave band) to achieve a high data rate, for example.
  • the wireless communication module 192 uses various technologies for securing performance in a high frequency band, such as beamforming, massive multiple-input and multiple-output (MIMO), and full-dimensional multiplexing. Technologies such as input/output (FD-MIMO: full dimensional MIMO), array antenna, analog beam-forming, or large scale antenna may be supported.
  • the wireless communication module 192 may support various requirements defined for the electronic device 101, an external electronic device (eg, the electronic device 104), or a network system (eg, the second network 199).
  • the wireless communication module 192 is a peak data rate for eMBB realization (eg, 20 Gbps or more), a loss coverage for mMTC realization (eg, 164 dB or less), or a U-plane latency for URLLC realization (eg, Example: downlink (DL) and uplink (UL) each of 0.5 ms or less, or round trip 1 ms or less) may be supported.
  • eMBB peak data rate for eMBB realization
  • a loss coverage for mMTC realization eg, 164 dB or less
  • U-plane latency for URLLC realization eg, Example: downlink (DL) and uplink (UL) each of 0.5 ms or less, or round trip 1 ms or less
  • the antenna module 197 may transmit or receive signals or power to the outside (eg, an external electronic device).
  • the antenna module 197 may include an antenna including a radiator formed of a conductor or a conductive pattern formed on a substrate (eg, PCB).
  • the antenna module 197 may include a plurality of antennas (eg, an array antenna). In this case, at least one antenna suitable for a communication method used in a communication network such as the first network 198 or the second network 199 is selected from the plurality of antennas by the communication module 190, for example. can be chosen A signal or power may be transmitted or received between the communication module 190 and an external electronic device through the selected at least one antenna.
  • other components eg, a radio frequency integrated circuit (RFIC) may be additionally formed as a part of the antenna module 197 in addition to the radiator.
  • RFIC radio frequency integrated circuit
  • the antenna module 197 may form a mmWave antenna module.
  • the mmWave antenna module includes a printed circuit board, an RFIC disposed on or adjacent to a first surface (eg, a lower surface) of the printed circuit board and capable of supporting a designated high frequency band (eg, mmWave band); and a plurality of antennas (eg, array antennas) disposed on or adjacent to a second surface (eg, a top surface or a side surface) of the printed circuit board and capable of transmitting or receiving signals of the designated high frequency band. can do.
  • peripheral devices eg, a bus, general purpose input and output (GPIO), serial peripheral interface (SPI), or mobile industry processor interface (MIPI)
  • signal e.g. commands or data
  • commands or data may be transmitted or received between the electronic device 101 and the external electronic device 104 through the server 108 connected to the second network 199 .
  • Each of the external electronic devices 102 or 104 may be the same as or different from the electronic device 101 .
  • all or part of operations executed in the electronic device 101 may be executed in one or more external electronic devices among the external electronic devices 102 , 104 , or 108 .
  • the electronic device 101 when the electronic device 101 needs to perform a certain function or service automatically or in response to a request from a user or another device, the electronic device 101 instead of executing the function or service by itself.
  • one or more external electronic devices may be requested to perform the function or at least part of the service.
  • One or more external electronic devices receiving the request may execute at least a part of the requested function or service or an additional function or service related to the request, and deliver the execution result to the electronic device 101 .
  • the electronic device 101 may provide the result as at least part of a response to the request as it is or additionally processed.
  • cloud computing distributed computing, mobile edge computing (MEC), or client-server computing technology may be used.
  • the electronic device 101 may provide an ultra-low latency service using, for example, distributed computing or mobile edge computing.
  • the external electronic device 104 may include an internet of things (IoT) device.
  • Server 108 may be an intelligent server using machine learning and/or neural networks. According to one embodiment, the external electronic device 104 or server 108 may be included in the second network 199 .
  • the electronic device 101 may be applied to intelligent services (eg, smart home, smart city, smart car, or health care) based on 5G communication technology and IoT-related technology.
  • Electronic devices may be devices of various types.
  • the electronic device may include, for example, a portable communication device (eg, a smart phone), a computer device, a portable multimedia device, a portable medical device, a camera, a wearable device, or a home appliance.
  • a portable communication device eg, a smart phone
  • a computer device e.g., a smart phone
  • a portable multimedia device e.g., a portable medical device
  • a camera e.g., a portable medical device
  • a camera e.g., a portable medical device
  • a camera e.g., a portable medical device
  • a camera e.g., a camera
  • a wearable device e.g., a smart bracelet
  • first, second, or first or secondary may simply be used to distinguish a given component from other corresponding components, and may be used to refer to a given component in another aspect (eg, importance or order) is not limited.
  • a (e.g., first) component is said to be “coupled” or “connected” to another (e.g., second) component, with or without the terms “functionally” or “communicatively.”
  • the certain component may be connected to the other component directly (eg by wire), wirelessly, or through a third component.
  • module used in various embodiments of this document may include a unit implemented in hardware, software, or firmware, and is interchangeable with terms such as, for example, logic, logical blocks, parts, or circuits.
  • a module may be an integrally constructed component or a minimal unit of components or a portion thereof that performs one or more functions.
  • the module may be implemented in the form of an application-specific integrated circuit (ASIC).
  • ASIC application-specific integrated circuit
  • a storage medium eg, internal memory 136 or external memory 138
  • a machine eg, electronic device 101
  • a processor eg, the processor 120
  • a device eg, the electronic device 101
  • the one or more instructions may include code generated by a compiler or code executable by an interpreter.
  • the device-readable storage medium may be provided in the form of a non-transitory storage medium.
  • the storage medium is a tangible device and does not contain a signal (e.g. electromagnetic wave), and this term refers to the case where data is stored semi-permanently in the storage medium. It does not discriminate when it is temporarily stored.
  • a signal e.g. electromagnetic wave
  • the method according to various embodiments disclosed in this document may be included and provided in a computer program product.
  • Computer program products may be traded between sellers and buyers as commodities.
  • a computer program product is distributed in the form of a device-readable storage medium (e.g. compact disc read only memory (CD-ROM)), or through an application store (e.g. Play StoreTM) or on two user devices (e.g. It can be distributed (eg downloaded or uploaded) online, directly between smart phones.
  • a device-readable storage medium e.g. compact disc read only memory (CD-ROM)
  • an application store e.g. Play StoreTM
  • two user devices e.g. It can be distributed (eg downloaded or uploaded) online, directly between smart phones.
  • at least part of the computer program product may be temporarily stored or temporarily created in a device-readable storage medium such as a manufacturer's server, an application store server, or a relay server's memory.
  • each component (eg, module or program) of the above-described components may include a single object or a plurality of entities, and some of the plurality of entities may be separately disposed in other components. there is.
  • one or more components or operations among the aforementioned corresponding components may be omitted, or one or more other components or operations may be added.
  • a plurality of components eg modules or programs
  • the integrated component may perform one or more functions of each of the plurality of components identically or similarly to those performed by a corresponding component of the plurality of components prior to the integration. .
  • FIG. 2A is a front perspective view of an electronic device according to various embodiments
  • FIG. 2B is a diagram illustrating a rear perspective view of an electronic device according to various embodiments.
  • an electronic device 200 (eg, the electronic device 101 of FIG. 1 ) according to various embodiments has a first side (or front side) 210A and a second side (or back side).
  • 210B, and a housing 210 including a side surface 210C surrounding a space between the first surface 210A and the second surface 210B, and an electronic device connected to at least a part of the housing 210 ( 200) may include coupling members 250 and 260 that enable detachability of the user's body (eg, a wrist, an ankle, etc.).
  • the housing may refer to a structure forming some of the first face 210A, the second face 210B, and the side face 210C of FIG. 2 .
  • the first surface 210A may be formed by a front plate 201 (eg, a glass plate or a polymer plate including various coating layers) that is substantially transparent at least in part.
  • the second face 210B may be formed by the substantially opaque back plate 207 .
  • Back plate 207 may be formed, for example, of coated or tinted glass, ceramic, polymer, metal (eg, aluminum, stainless steel (STS), or magnesium), or a combination of at least two of the foregoing.
  • the side surface 210C is coupled to the front plate 201 and the back plate 207 and may be formed by a side bezel structure (or "side member") 206 including metal and/or polymer.
  • the back plate 207 and the side bezel structure 206 may be integrally formed and may include the same material (eg, a metal material such as aluminum).
  • the binding members 250 and 260 may be formed of various materials and shapes. Integral and plurality of unit links may be formed to flow with each other by woven material, leather, rubber, urethane, metal, ceramic, or a combination of at least two of the above materials.
  • the electronic device 200 includes a display 220 (eg, the display module 160 of FIG. 1 ), audio modules 205 and 208 (eg, the audio module 170 of FIG. 1 ), At least one of the sensor module 211 (eg, the sensor module 176 of FIG. 1), the key input devices 202, 203, and 204 (eg, the input module 150 of FIG. 1) and the connector hole 209. can include In some embodiments, the electronic device 200 omits at least one of the components (eg, the key input devices 202, 203, 204, the connector hole 209, or the sensor module 211) or has other components. Additional elements may be included.
  • the display 220 may be exposed through a substantial portion of the front plate 201 , for example.
  • the shape of the display 220 may be a shape corresponding to the shape of the front plate 201, and may have various shapes such as a circle, an ellipse, or a polygon.
  • the display 220 may be coupled to or disposed adjacent to a touch sensing circuit, a pressure sensor capable of measuring the strength (pressure) of a touch, and/or a fingerprint sensor.
  • the audio modules 205 and 208 may include a microphone hole 205 and a speaker hole 208 .
  • a microphone for acquiring external sound may be disposed inside the microphone hole 205, and in some embodiments, a plurality of microphones may be disposed to detect the direction of sound.
  • the speaker hole 208 can be used as an external speaker and a receiver for a call.
  • the sensor module 211 may generate an electrical signal or data value corresponding to an internal operating state of the electronic device 200 or an external environmental state.
  • the sensor module 211 may include, for example, a biometric sensor module 211 (eg, a heart rate monitoring (HRM) sensor) disposed on the second surface 210B of the housing 210 .
  • the electronic device 200 includes a sensor module (not shown), for example, a gesture sensor, a gyro sensor, an air pressure sensor, a magnetic sensor, an acceleration sensor, a grip sensor, a color sensor, an IR (infrared) sensor, a bio sensor, a temperature sensor, At least one of a humidity sensor and an illuminance sensor may be further included.
  • the key input devices 202, 203, and 204 include a wheel key 202 disposed on a first surface 210A of the housing 210 and rotatable in at least one direction, and/or a side surface 210C of the housing 210. ) may include side key buttons 202 and 203 disposed on.
  • the wheel key may have a shape corresponding to the shape of the front plate 201 .
  • the electronic device 200 may not include some or all of the key input devices 202 , 203 , and 204 , and the key input devices 202 , 203 , and 204 that are not included may be displayed on the display 220 . It may be implemented in other forms such as soft keys on the screen.
  • the connector hole 209 may accommodate a connector (eg, a USB connector) for transmitting and receiving power and/or data to and from an external electronic device and a connector for transmitting and receiving an audio signal to and from an external electronic device.
  • a connector eg, a USB connector
  • Other connector holes may be included.
  • the electronic device 200 may further include, for example, a connector cover (not shown) that covers at least a portion of the connector hole 209 and blocks external foreign substances from entering the connector hole.
  • the binding members 250 and 260 may be detachably attached to at least a partial region of the housing 210 using the locking members 251 and 261 .
  • the fastening members 250 and 260 may include one or more of a fixing member 252 , a fixing member fastening hole 253 , a band guide member 254 , and a band fixing ring 255 .
  • the fixing member 252 may be configured to fix the housing 210 and the fastening members 250 and 260 to a part of the user's body (eg, wrist, ankle, etc.).
  • the fixing member fastening hole 253 corresponds to the fixing member 252 to fix the housing 210 and the fastening members 250 and 260 to a part of the user's body.
  • the band guide member 254 is configured to limit the movement range of the fixing member 252 when the fixing member 252 is fastened to the fixing member fastening hole 253, so that the fastening members 250 and 260 are attached to a part of the user's body. It can be tightly bonded.
  • the band fixing ring 255 may limit the movement range of the fastening members 250 and 260 in a state in which the fixing member 252 and the fixing member fastening hole 253 are fastened.
  • FIG. 3 is an exploded perspective view of the main body 210 of the electronic device 200 of FIG. 2A according to an embodiment.
  • the body 210 of the electronic device 200 includes a front cover 241, a rear cover 242, a side member 243, a support member (eg, a bracket) 310, a display 320 , a printed circuit board 330 , a battery 340 , or a plurality of conductive patterns 351 , 352 , 353 , and 354 .
  • At least one of the components of the main body 210 may be the same as or similar to at least one of the components included in the main body 210 of FIG. 2A or 2B, and overlapping descriptions will be omitted below.
  • the support member 310 may be disposed between the front cover 241 and the rear cover 242 .
  • the display 320 may be disposed on one surface 311 of the support member 310 facing the front cover 241 .
  • the printed circuit board 330 may be disposed on the other surface (not shown) of the support member 310 facing the rear cover 242 .
  • the display 320 and the printed circuit board 330 may be supported by the support member 310 to ensure rigidity.
  • the support member 310 may be formed of, for example, a metal material and/or a non-metal material (eg, polymer).
  • the display 320 may be disposed between the front cover 241 and the support member 310 .
  • the display 320 may be implemented based on various light emitting devices such as organic light-emitting diodes (OLEDs).
  • the display 320 may include a touch sensing circuit (eg, a touch sensor).
  • the touch sensing circuit may be implemented with a transparent conductive layer (or film) based on various conductive materials such as indium tin oxide (ITO).
  • ITO indium tin oxide
  • the touch sensing circuit may be disposed between the front cover 241 and a polarization layer (not shown) (eg, an add-on type).
  • the touch sensing circuit may be disposed between a polarization layer and a light emitting layer (eg, a layer including a plurality of pixels implemented as a light emitting device such as OLED) (eg, an on-cell type).
  • the light emitting layer may include a touch sensing circuit or a touch sensing function (eg, in-cell type).
  • the display 320 may further include a pressure sensor capable of measuring the intensity (pressure) of a touch.
  • the display 320 may include an electrical path such as a flexible printed circuit (FPCB) 321 for electrical connection with the printed circuit board 330 .
  • FPCB 321 may be disposed in a bent form to be electrically connected to the printed circuit board 330 through a gap between the side 313 and the side member 243 of the support member 310 .
  • a processor, memory, and/or interface may be mounted on the printed circuit board 330 .
  • the processor may include, for example, one or more of a central processing unit, an application processor, a graphics processing unit, an image signal processor, a sensor hub processor, or a communication processor.
  • Memory may include, for example, volatile memory or non-volatile memory.
  • the interface may include, for example, a high definition multimedia interface (HDMI), a universal serial bus (USB) interface, an SD card interface, and/or an audio interface.
  • HDMI high definition multimedia interface
  • USB universal serial bus
  • the interface may electrically or physically connect the main body 210 to an external electronic device, and may include a USB connector, an SD card/MMC connector, or an audio connector.
  • a connector hole for electrical connection with an external electronic device may be formed in the side member 243 or the rear cover 242 .
  • FIG. 4 is a block diagram illustrating configurations of an electronic device and an external device according to various embodiments.
  • the electronic device 400 may include a processor 410, a display 420, and a first application 431, and some of the illustrated components may be omitted or replaced.
  • the electronic device 400 may further include at least some of the configurations and/or functions of the electronic device 200 of FIG. 2 . At least some of the components of the illustrated (or not illustrated) electronic device 400 may be operatively, functionally, and/or electrically connected to each other.
  • the processor 410 is a component capable of performing calculations or data processing related to control and/or communication of each component of an electronic device, and may include one or more processors 410 .
  • the processor 410 may include at least some of the components and/or functions of the processor 120 of FIG. 1 .
  • calculation and data processing functions that the processor 410 can implement on an electronic device will not be limited, but features related to communication with the external device 405 will be described in detail below. Operations of the processor 410 may be performed by loading instructions stored in a memory (not shown).
  • the first application 431 may communicate with an external device through a wireless network under the control of the processor 410 .
  • the first application 431 is hardware for transmitting and receiving data from a cellular network (eg, a long term evolution (LTE) network, a 5G network, a new radio (NR) network) and a local area network (eg, Wi-Fi, bluetooth) and It may contain software modules.
  • the first application 431 may include at least some of the components and/or functions of the communication module 190 of FIG. 1 .
  • the display 420 may display various images under the control of the processor 410 .
  • the display 420 may be implemented as any one of a liquid crystal display (LCD), a light-emitting diode (LED) display, or an organic light-emitting diode (OLED) display. Yes, but not limited thereto.
  • the display 420 may be formed as a touch screen that senses a touch and/or proximity touch (or hovering) input using a user's body part (eg, a finger) or an input device (eg, a stylus pen).
  • the display 420 may include at least some of the components and/or functions of the display module 160 of FIG. 1 .
  • the external device 405 may include a second application 432 and a third application 433 .
  • the external device 405 is illustrated as a smart phone in FIGS. 6 to 9 , but is not limited thereto, and may include a mobile terminal including a flexible display (eg, a slider, foldable, or rollable display).
  • the external device 405 may further include at least some of the configurations and/or functions of the electronic device 101 of FIG. 1 . At least some of the components of the external device 405 shown (or not shown) may be operatively, functionally, and/or electrically connected.
  • the second application 432 may communicate with the electronic device 400 through a wireless network under the control of a processor (not shown) on the external device.
  • the second application 432 is hardware for transmitting and receiving data from a cellular network (eg, a long term evolution (LTE) network, a 5G network, a new radio (NR) network) and a local area network (eg, Wi-Fi, bluetooth) and It may contain software modules.
  • LTE long term evolution
  • 5G e.g, a new radio (NR) network
  • NR new radio
  • a local area network eg, Wi-Fi, bluetooth
  • the second application 432 may include at least some of the components and/or functions of the communication module 190 of FIG. 1 .
  • the second application 432 may perform a fetch operation.
  • a fetch operation is at least one of a first operation (eg, a text shortcut operation), a second operation (eg, a user data model collection operation), or a third operation (eg, a query delivery operation).
  • a first operation eg, a text shortcut operation
  • a second operation eg, a user data model collection operation
  • a third operation eg, a query delivery operation.
  • the first operation may refer to an operation of preparing to collect text shortcut data defined by a user.
  • the second operation may refer to an operation of preparing to collect user data.
  • the third operation may refer to an operation of requesting text shortcut data and/or user data defined by the user from the third application 433 .
  • a query may refer to an act of requesting information from a server or database.
  • the third application 433 may transmit the first content to the second application 432 in response to a fetch operation of the second application 432 .
  • the first content may include user data and/or user-defined text shortcut data.
  • User data may refer to data that is not separately defined by the user according to settings, but is recommended as a complete word after the program collects data on words that are frequently used and learns on its own.
  • text shortcut data may refer to data including a shortcut set by a user and a completed word corresponding to the shortcut.
  • the second application 432 may receive a transmission signal from the third application 433 and determine whether the first content exists.
  • the second application 432 may receive the first content from the third application 433 using a file uniform resource identifier (fileuri).
  • fileuri may mean a unique identifier of the first content file.
  • the second application 432 may transfer the received first content onto the first application 431 .
  • the first application 431 of the electronic device 400 may receive the first content from the second application 432 and synchronize it.
  • the processor 410 may synchronize the first content and display it on the display 420 .
  • the processor 410 may control the first content stored in the external device 405 to be used in the electronic device 400 .
  • due to the relatively small size of the display 420 on the electronic device 400 it may be difficult to register, modify, or delete user learning words and/or user-defined shortcuts.
  • the electronic device 400 registers, modifies, or deletes user learning words and/or user-defined shortcuts on the external device 405 using the first application 431, and synchronizes them on the electronic device 400. and can be used.
  • the processor 410 connects the external device 405 and the electronic device 400, obtains and obtains autocomplete text input information that can be linked with an application from the external device 405.
  • One auto-completion text input information may be synchronized with the first application 431, and a recommended word based on the auto-completion text input information may be displayed using the display 420.
  • the processor 410 may recognize the change when autocompletion text input information is changed on the external device 405 and transmit the change to the electronic device 400 in real time.
  • 5A and 5B illustrate a word input process of a wearable device according to a comparative embodiment.
  • the electronic device 501 is a wearable device and can be worn on a user's body.
  • the electronic device 501 may include a display 420 and may receive input of words or characters using a user's touch input.
  • the shape of the display 420 is not limited to a circular shape like the electronic device 501, and may include various shapes other than a rectangular shape like the electronic device 502.
  • the display 420 may be relatively small in size compared to a display on a smart phone or tablet PC. It may be difficult for a user to input words or characters due to the size of the small display 420 .
  • frequently input word information or abbreviation may not be recorded. In this case, the user may experience inconvenience in having to input all the letters using the small display 420 even for frequently used words (eg, hello world!, forever).
  • the external device 405 may display the first content within the keyboard 510 of the terminal.
  • the first content may include user-defined shortcut data that stores words or shortcuts used by the user and/or user data that is extracted as data through program self-learning about words frequently input by the user and displayed as suggested words. there is.
  • the external device 405 displays words or abbreviations such as 'Samsung Electronics, Samsung, Samjeon' that the user has previously used. It can be presented on the recommendation area 520b.
  • the external device 405 may display the user's stored shortcut on the recommendation area 520b. Thereafter, the external device 405 may display the recommended word selected by the user on the word display area 530 .
  • the electronic device 400 of FIG. 5B according to the comparative embodiment is not synchronized with the external device 405, it may be difficult to present words or abbreviations such as 'Samsung Electronics, Samsung, Samchun' on the recommendation area 520a.
  • words eg, me, ah, today
  • the user may feel uncomfortable compared to inputting words into the external device 405 .
  • the electronic device 400 may provide the same recommended word and user experience as the external device 405 by synchronizing user word data with the external device 405 .
  • the electronic device 400 for synchronizing user word data with the external device 405 and the automatic completion text input method of the electronic device 400 will be described.
  • the electronic device 400 is a wearable device and the external device 405 is a smart phone, but various embodiments may not be limited thereto.
  • the electronic device 400 and the external device 405 may include various devices capable of simple wireless communication with each other.
  • the electronic device 400 may be a wearable device worn by the user, and the external device 405 may be a smart phone being operated by the user.
  • the electronic device 400 may be a TV or a display device, and the external device 405 may be a smart phone being operated by a user.
  • FIGS. 12A to 12E Various embodiments of this will be described with reference to FIGS. 12A to 12E.
  • FIG. 6 illustrates a situation in which a connection service with an external device 405 is initiated using an electronic device according to various embodiments.
  • a user may execute an application related to wireless connection setup using the electronic device 400 .
  • the electronic device 400 may provide a user interface (or execution screen) related to the application through the display 420 in response to a user's application execution request.
  • the electronic device 400 searches for external devices 405 around it internally (or as a background operation) based on application execution, and provides information on the searched external devices 405.
  • a user interface including a list of related information may be provided to the user.
  • a user may perform a user input for connection with the external device 405 based on a user interface provided through the electronic device 400 .
  • the user selects (eg, touches) an icon corresponding to a specific external device 405 from the list to execute the connection service 600 with the specific external device 405 (eg, the first connection method).
  • the user can directly connect a specific external device 405 between processes or indirectly run the connection service 600 through an intermediate process (eg, the second application 432 of FIG. 4 ).
  • the user designates one of the searched external devices, and the input function process of the designated external device 405 and the input function of the electronic device 400 It may be a method of directly connecting between processes.
  • the second connection method is, for example, the user designates one external device among the searched external devices, the designated external device, and an intermediate process (eg, the second application 432 of FIG. 4). ) may mean a method of indirectly connecting using.
  • the electronic device 400 when the electronic device 400 detects the start of the connection service 600 based on a user input, it may transmit an invitation message to the external device 405, and the external device 405 A response message corresponding to the invitation message may be received from According to an embodiment, when receiving a response message from the external device 405, the electronic device 400 may provide a first user interface related to the proximity induction guide to the user.
  • FIG. 7A to 7C illustrate processes of transmitting and receiving user word data between an electronic device and an external device according to various embodiments.
  • the second application 432 on the external device 405 may perform a fetch operation.
  • the fetch operation is one of the first operation (eg, text shortcut operation), the second operation (eg, user data model collection operation), or the third operation (eg, query request forwarding operation). At least one may be included.
  • Each operation has been previously described in FIG. 4 .
  • the third application 433 may transmit the first content to the second application 432 in response to a fetch operation of the second application 432 .
  • the first content may include user data and/or user-defined text shortcut data.
  • User data may refer to data that is not separately defined by the user according to settings, but is recommended as a complete word after the program collects data on words that are frequently used and learns on its own.
  • user-defined shortcut data (text shortcut data) may mean a shortcut set by a user and a completed word corresponding to the shortcut.
  • the third application 433 on the external device 405 may determine whether there is a request for a fetch operation from the second application 432 .
  • the third application 433 may first determine whether there is a processing request for a user-defined text shortcut.
  • the third application 433 transfers the requested user-defined shortcut data to the second application using the database (DB) of the user-defined shortcut. It can be transmitted on the application 432.
  • the third application 433 extracts user data on the prediction engine and uses the second application ( 432).
  • the third application 433 may transmit the first content to the second application 432 in response to the requested fetch operation.
  • the second application 432 may receive a transmission signal from the third application 433 and determine whether the first content exists.
  • fileuri may mean a unique identifier of the first content file.
  • the second application 432 may convert the received first content so that it can be delivered to the first application 431 using a specific function (eg, toAsset()). Certain functions (e.g. toAsset()) can be used to pack large data into smaller ones.
  • the second application 432 may divide and contain the first content holding large file-level information in specific units (eg, asset units).
  • the second application 432 may deliver a bundle of specific units (eg, asset units) to the first application 431 .
  • the first application 431 may receive the first content in asset units.
  • the second application 432 may perform a fetch operation.
  • the fetch operation is one of the first operation (eg, text shortcut operation), the second operation (eg, user data model collection operation), or the third operation (eg, query request forwarding operation). At least one may be included.
  • the third application 433 may transmit the first content to the second application 432 in response to a fetch operation of the second application 432 .
  • the first content may include user data and/or user-defined text shortcut data.
  • the first application 431 of the electronic device 400 may receive the first content from the second application 432 and synchronize it.
  • the processor 410 may synchronize the first content and display it on the display 420 .
  • FIG. 8 illustrates a shortcut input screen of an external device according to various embodiments.
  • the external device 405 may store a user-defined shortcut.
  • the external device 405 may present a word corresponding to the shortcut to the user as a recommended word. The user can select suggested words or keep the entered shortcut.
  • the external device 405 may receive and store a shortcut corresponding to 'hbd'-honeyboard from the user. Then, when the user inputs 'hbd', the completed word 'honeyboard' or the saved word can be recommended to the user.
  • a 'keybaord' menu and a 'Text shortcuts' menu may exist on the electronic device 400 .
  • the electronic device 400 may move the screen to the 'Text shortcuts' setting page of the external device.
  • the electronic device 400 may receive text shortcuts DB information of the external device 405 by performing this process and synchronize the text shortcuts DB information on the electronic device 400 with the text shortcuts DB information.
  • the text shortcuts DB information of the external device 405 is modified (eg, a shortcut is added, deleted, or edited in the external device)
  • the electronic device 400 receives the modified text shortcuts DB information and , can be synchronized with the text shortcuts DB on the electronic device 400
  • 9A to 9C illustrate a process of synchronizing a user word on an electronic device and results thereof according to various embodiments.
  • the electronic device 400 may be connected to the external device 405 using a first connection method (eg, direct connection) or a second connection method (eg, indirect connection).
  • a first connection method e.g, direct connection
  • a second connection method e.g, indirect connection
  • a user designates one of the searched external devices, and a direct connection is made between the input function process of the designated external device 405 and the input function process of the electronic device 400. It may be a way to connect.
  • the second connection method the user designates any one external device among the searched external devices, and uses the specified external device and an intermediate process (eg, the second application 432 of FIG. 4 ). It can mean an indirect connection method.
  • the keyboard of the electronic device 400 may not have its own text shortcut management function.
  • the electronic device 400 can receive a text shortcut used on the keyboard of the external device 405 and utilize it on the keyboard of the electronic device 400 .
  • it may be difficult to directly communicate between the keyboard of the electronic device 400 and the keyboard of the external device 405, and in this case, indirect communication may be performed using an intermediate process (eg, Galaxy Watch CompanionApp).
  • the first application 431 of the electronic device 400 may receive the first content from the second application 432 and synchronize it.
  • the external device 405 stores words or shortcuts frequently used by the user in the keyboard 910 of the terminal, or extracts words input by the user as data through learning and displays recommended words.
  • the external device 405 displays words or abbreviations such as 'Samsung Electronics, Samsung, Samjeon' that the user has previously used. It can be presented on the recommendation area 920b. Thereafter, the external device 405 may display the recommended word selected by the user on the word display area 930 .
  • the electronic device 400 may receive the first content from the second application 432 and synchronize it. Similar to the external device 405, the electronic device 400 may present a word or abbreviation such as 'Samsung Electronics, Samsung, Samchun' that has been previously used by the user on the recommendation area 920a.
  • the displays of the electronic device 400 and the external device 405 include a character display area 930 representing input characters, a character recommendation area 920 for completing characters to be input and presenting them to the user, and a character keyboard. area 910 .
  • the electronic device 400 recommends text using the learned user word or abbreviation.
  • the completed word 'honeyboard' may be displayed as a recommended word on the area 920 .
  • FIG. 10 illustrates a method for changing a shortcut of an electronic device according to various embodiments.
  • the electronic device 400 may obtain first content (eg, user-defined shortcut data or user data) on the external device 405 using the first application 431 . Also, when the first content of the external device 405 is changed, the electronic device 400 may reflect and synchronize the change.
  • first content eg, user-defined shortcut data or user data
  • the first application 431 may check whether a text shortcut deleted or added exists on the external device 405 .
  • the first application 431 may request changed user-defined text shortcut data from the second application 432 .
  • the second application 432 may receive a request for data from the first application 431 and transmit user-defined shortcut data to the third application 433 .
  • the third application 433 may send changed user-defined text shortcut data including information about the deleted or added user-defined text shortcut to the second application 432 .
  • the second application 432 may receive the changed user-defined text shortcut data, confirm it, and transmit the changed user-defined text shortcut data to the first application 431 .
  • the first application 431 may receive the changed text shortcut data and synchronize it with the keyboard process of the electronic device 400 .
  • the electronic device 400 can also synchronize user data with the keyboard process of the external device 405 through the above process.
  • FIG. 11 illustrates a word input process through a new input method other than a keyboard on an electronic device according to various embodiments.
  • a processor in a text input mode, includes a text display area 930 representing an input text, a text recommendation area for completing text to be input and presenting it to the user ( 920) and the text keyboard area 910 are controlled to be displayed on a display (eg, the display 420 of FIG. 4), and when a handwriting input by touch is recognized on the text display area 930, the text display area Control may be performed to display a trajectory according to an input on 930, control to display a character corresponding to a handwriting input, or control to display a recommended character corresponding to a displayed character in the character recommendation area 920.
  • the text keyboard area 910 may be displayed in the form of a keyboard like the electronic device 400 in FIG. 9B , or may provide an empty space where handwriting can be input according to whether or not the user touches input like the electronic device 400 in FIG. 11 . there is.
  • the processor 410 deactivates a character keyboard input in the character keyboard area 910 when there is a touch-based handwriting input on the text display area 930, and displays the text keyboard area on the display 420. 910 may be hidden and only the text display area 920 and the text recommendation area 930 may be displayed.
  • the processor 410 controls a character corresponding to the handwriting input to be displayed on the text display area 930, and a character that can be subsequently input in the text recommendation area 920. can be controlled to display them.
  • 12A to 12E illustrate a process of connecting external devices and synchronizing user words according to various embodiments.
  • the electronic device is at least one of a smartphone, an internet of things (IoT) device, a smart car, an AR device, a VR device, an MR device, a desktop, a laptop, and a tablet PC.
  • IoT internet of things
  • the electronic device 400 may be connected to an external device 405 to receive and synchronize autocompletion text input information.
  • the electronic device 400 may include a refrigerator.
  • the type of electronic device 400 is not limited to a refrigerator and may include any Internet of Things (IoT) device that can be connected to the external device 405 wired or wirelessly.
  • the electronic device 400 may include a keyboard area 1200 for display and word input. In this case, the electronic device 400 may provide suggested words to the user through the process of synchronizing input information of the auto-completion text described in FIGS. 6 to 10 .
  • the electronic device 400 may be connected to an external device 405 to receive and synchronize autocompletion text input information.
  • the electronic device 400 may include a smart car.
  • the electronic device 400 may include a keyboard area 1200 for display and word input.
  • the keyboard area 1200 on a smart car may be utilized, for example, by inputting a destination on a navigation system or inputting a message in conjunction with a smart phone.
  • the electronic device 400 may provide suggested words to the user through the process of synchronizing input information of the auto-completion text described in FIGS. 6 to 10 .
  • the electronic device 400 may be connected to an external device 405 to receive and synchronize autocompletion text input information.
  • the electronic device 400 may include a smart TV.
  • the electronic device 400 may include a keyboard area 1200 for display and word input.
  • the keyboard area 1200 on the smart TV can be used, for example, to search for channels or content (movies, dramas, etc.).
  • the electronic device 400 may provide suggested words to the user through the process of synchronizing input information of the auto-completion text described in FIGS. 6 to 10 .
  • the electronic device 400 may be connected to an external device 405 to receive and synchronize autocompletion text input information.
  • the electronic device 400 may include augmented reality (AR), virtual reality (VR), and mixed reality (MR) devices.
  • the electronic device 400 may display a keyboard area 1200 for display and word input on the virtual space.
  • the keyboard area 1200 on augmented reality (AR), virtual reality (VR), and mixed reality (MR) devices may be displayed on glass.
  • the electronic device 400 may provide suggested words to the user through the process of synchronizing input information of the auto-completion text described in FIGS. 6 to 10 .
  • the electronic device 400 may be connected to an external device 405 to receive and synchronize autocompletion text input information.
  • the electronic device 400 may include a tablet PC or a laptop computer.
  • the electronic device 400 may include a keyboard area 1200 for display and word input.
  • the electronic device 400 may provide suggested words to the user through the process of synchronizing input information of the auto-completion text described in FIGS. 6 to 10 .
  • the electronic device may connect to an external device (eg, the external device 500 of FIG. 5).
  • the user may execute an application related to wireless connection setup using the electronic device 400 .
  • the electronic device 400 may provide a user interface (or execution screen) related to the application through the display 420 in response to a user's application execution request.
  • the electronic device 400 searches for external devices 405 around it internally (or as a background operation) based on application execution, and provides information on the searched external devices 405.
  • a user interface including a list of related information may be provided to the user.
  • a user may perform a user input for connection with the external device 405 based on a user interface provided through the electronic device 400 .
  • the user selects (eg, touches) an icon corresponding to a specific external device 405 from the list to execute the connection service 600 with the specific external device 405 (eg, the first connection method).
  • the user may have the connection service 600 executed (eg, the second connection method) for all discovered external devices 405 without specifying a specific external device 405 .
  • the first connection method may be, for example, a method in which the user designates one external device among the searched external devices and connects to the specified external device.
  • the user initiates a connection service based on all discovered external devices without specifying any one external device among the discovered external devices, and performs the connection service. It may be a method of closely connecting with the external device 405 that the user wants to connect while (eg, while the first user interface is provided).
  • the electronic device 400 may obtain auto-completion text input information compatible with an application from the external device 405.
  • the second application 432 on the external device 405 may perform a fetch operation.
  • the fetch operation is one of the first operation (eg, text shortcut operation), the second operation (eg, user data model collection operation), or the third operation (eg, query request forwarding operation). At least one may be included.
  • the first operation may refer to an operation of preparing to collect text shortcut data defined by a user.
  • the second operation may refer to an operation of preparing to collect user data.
  • the third operation may refer to an operation of requesting text shortcut data and/or user data defined by the user from the third application 433 .
  • a query may refer to an act of requesting information from a server or database.
  • the third application 433 may transmit the first content to the second application 432 in response to a fetch operation of the second application 432 .
  • the first content may include user data and/or user-defined text shortcut data.
  • User data may refer to data that is not separately defined by the user according to settings, but is recommended as a complete word after the program collects data on words that are frequently used and learns on its own.
  • user-defined shortcut data (text shortcut data) may mean a shortcut set by a user and a completed word corresponding to the shortcut.
  • the third application 433 on the external device 405 may determine whether there is a request for a fetch operation from the second application 432 .
  • the third application 433 may first determine whether there is a processing request for a user-defined text shortcut.
  • the third application 433 transfers the requested user-defined shortcut data to the second application using the database (DB) of the user-defined shortcut. It can be transmitted on the application 432.
  • the third application 433 extracts user data on the prediction engine and uses the second application ( 432).
  • the third application 433 may transmit the first content to the second application 432 in response to the requested fetch operation.
  • the second application 432 may receive a transmission signal from the third application 433 and determine whether the first content exists.
  • the second application 432 may receive the first content from the third application 433 using a file uniform resource identifier (fileuri).
  • fileuri may mean a unique identifier of the first content file.
  • the second application 432 may transfer the received first content onto the first application 431 .
  • the electronic device 400 may synchronize the acquired autocomplete text input information with the application.
  • the third application 433 may transmit the first content to the second application 432 in response to a fetch operation of the second application 432 .
  • the first content may include user data and/or user-defined text shortcut data.
  • the first application 431 of the electronic device 400 may receive the first content from the second application 432 and synchronize it.
  • the processor 410 may synchronize the first content and display it on the display 420 .
  • the first application 431 of the electronic device 400 may receive the first content from the second application 432 and synchronize it.
  • the electronic device 400 may display a recommended word based on input information of auto-completion text using the display.
  • a processor in a text input mode, selects a text display area (eg, the text display area 930 of FIG. 9 ) representing an input text and a text to be input.
  • the character recommendation area eg, the character recommendation area 920 of FIG. 9
  • the character keyboard area eg, the character keyboard area 910 of FIG. 9
  • the external device 405 stores words or shortcuts frequently used by the user in the keyboard of the terminal (for example, the keyboard 910 of FIG. 9), or extracts the words input by the user as data through learning and recommends words. can be displayed. For example, when the user inputs the word 'three' on the external device 405, the external device 405 displays words or abbreviations such as 'Samsung Electronics, Samsung, Samjeon' that the user has previously used. It can be presented on the recommendation area 920b. Thereafter, the external device 405 may display the recommended word selected by the user on the word display area 930 .
  • the electronic device 400 may receive the user's content data from the second application 432 and synchronize them. Similar to the external device 405, the electronic device 400 may present a word or abbreviation such as 'Samsung Electronics, Samsung, Samchun' that has been previously used by the user on the recommendation area 920a.
  • the displays of the electronic device 400 and the external device 405 include a character display area 930 representing input characters, a character recommendation area 920 for completing characters to be input and presenting them to the user, and a character keyboard area 910 ) may be included.
  • a character display area 930 representing input characters
  • a character recommendation area 920 for completing characters to be input and presenting them to the user
  • a character keyboard area 910 may be included.
  • the electronic device 400 recommends text using the learned user word or abbreviation.
  • the completed word 'honeyboard' may be displayed as a recommended word on the area 920 .
  • an automatic completion text input method of an electronic device includes an operation of operatively connecting the electronic device to an external device, an operation of obtaining automatic completion text input information that can be linked with an application from the external device, and an operation of acquiring An operation of synchronizing one auto-completion text input information with an application and an operation of controlling to display a recommended word based on the auto-completion text input information using a display may be included.
  • the processor may recognize the change when autocompletion text input information is changed on the external device, and transmit the changed content to the keyboard process of the electronic device in real time.
  • the contents of the change of the auto-completion text input information include at least one of the addition, modification, and deletion of user data and/or at least one of the addition, modification, and deletion of user-defined shortcuts.
  • the processor controls a text display area representing input text, a text recommendation area for completing text to be input and presented to the user, and a text keyboard area to be displayed on the display, and displaying the text
  • a handwriting input by a touch is recognized on the area
  • the trajectory according to the input is displayed on the text display area, and a character corresponding to the handwriting input is controlled to be displayed, or a recommended character corresponding to the handwriting input is recommended. It can be controlled to display in the area.
  • the processor disables the text keyboard input in the text keyboard area when there is a touch-based handwriting input on the text display area, hides the text keyboard area, and displays only the text display area and the text recommendation area on the display. You can control it.
  • the processor may control a character corresponding to the handwriting input to be displayed in the text display area and may display characters that can be subsequently input in the text recommendation area.
  • the processor may receive autocompletion text input information of an external device and/or a language database of a keyboard process of the external device, and may synchronize such that the electronic device may also use the input information.
  • the recommended words based on input information of auto-completion text may include words and abbreviations used by a user in an external device with a frequency equal to or greater than a first level.
  • the processor may display words and abbreviations used by the user at a frequency of a first level or higher in the external device on a display, and may control the external device to recommend them to the user.
  • the electronic device may include at least one of an internet of things (IoT) device, a smart car, an AR device, a VR device, an MR device, a desktop, a laptop, and a tablet PC.
  • IoT internet of things
  • An auto-completion text input method of an electronic device includes an operation of controlling a keyboard process of an external device and a data reception manager of the electronic device to be operatively connected, and obtaining auto-completion text input information from the external device. It includes an operation of synchronizing the acquired auto-completion text input information with a keyboard process of an electronic device and an operation of controlling display of a suggested word based on the auto-completion text input information using a display,
  • Completion text input information refers to data that an electronic device collects data on frequently used words by the user, learns on its own, and recommends data to the user as completion words, and/or abbreviations and shortcuts set by the user. It may contain user-defined abbreviation data meaning the corresponding completed word.
  • an operation of controlling a keyboard process of an external device and a data reception manager of an electronic device to be operatively connected includes an operation of checking a pairing process, and notifying the electronic device when a pairing process is completed. It may include an operation of instructing an external device to receive data related to an operation, keyboard, or user language, and an operation of storing the fact that a pairing process has been completed in an internal memory.
  • the operation of acquiring autocomplete text input information from an external device includes the operation of recognizing the change when the autocomplete text input information is changed on the external device and electronically transmitting the changed content in real time. This may include actions that are passed to the device's keyboard process.
  • the change contents of the auto-completion text input information include at least one of the addition, modification, and deletion of user data and/or at least one of the addition, modification, and deletion of user-defined shortcuts.
  • the operation of controlling displaying a suggested word based on input information of auto-completion text using a display is to complete a text display area representing an input text and a text to be input in a text input mode, and provide information to the user. Controlling so that the suggested text recommendation area and text keyboard area are displayed on the display, controlling to display a trajectory according to the input on the text display area when a handwriting input by touch is recognized on the text display area, and An operation of controlling to display a character corresponding to the handwriting input or displaying a recommended character corresponding to the handwriting input in a character recommendation area may be included.
  • the operation of disabling text keyboard input in the text keyboard area, hiding the text keyboard area on the display, and displaying only the text display area and text recommendation area may further include.
  • the operation of controlling displaying a suggested word based on input information of auto-completion text using a display is to complete a text display area representing an input text and a text to be input in a text input mode, and provide information to the user.
  • An operation of controlling the suggested character recommendation area and the character keyboard area to be displayed on the display, an operation of controlling to display a character corresponding to the handwriting input in the text display area when there is a handwriting input by a touch, and an operation following the character recommendation area An operation of controlling to display inputable characters may be included.
  • the operation of synchronizing the acquired auto-completion text input information with the keyboard process of the electronic device includes the auto-completion text input information of the external device and/or the language database of the keyboard process of the external device ( data base) may be received and synchronized so that the electronic device can also use it.
  • the suggested words based on the auto-completion text input information include words and shortcuts used by the user at a frequency of a first level or higher in an external device, and the auto-completion text input information using a display.
  • the operation of controlling to display the recommended word based on may include an operation of controlling the external device to display words and abbreviations used by the user at a frequency of a first level or higher on a display and to recommend them to the user.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

다양한 실시예들에 따른 전자 장치는 디스플레이 및 프로세서를 포함하며, 프로세서는 외부 장치의 키보드 프로세스 및 전자 장치의 데이터 수신 매니저가 작동적으로 연결되도록 제어하고, 외부 장치로부터 자동완성 텍스트(text) 입력 정보를 획득하고,획득한 자동완성 텍스트(text) 입력 정보를 전자 장치의 키보드 프로세스와 동기화하고, 디스플레이를 이용해 자동완성 텍스트(text) 입력 정보에 기반한 추천 단어를 표시하도록 제어하며 자동완성 텍스트(text) 입력 정보는 사용자가 자주 사용하는 단어에 대한 데이터를 전자 장치가 수집하고 스스로 학습하여 사용자에게 완성 단어로 추천하는 데이터를 의미하는 사용자 데이터 및/또는 사용자가 설정한 단축어 및 단축어에 대응하는 완성된 단어를 의미하는 사용자 정의 단축어 데이터를 포함할 수 있다.

Description

외부 장치의 자동 완성 텍스트를 동기화하는 전자 장치 및 방법
본 문서는 전자 장치에 관한 것이며, 예를 들어 스마트 워치(smart watch)를 포함하는 웨어러블 장치 및 그의 동기화 방법에 관한 것이다.
웨어러블 기기는, 사용자에게 착용된 상태로 사용 가능하며, 착용된 상태에서, 음성 출력 또는 영상 출력을 수행할 수 있는 기능, 정보를 입·출력할 수 있는 기능 및 데이터를 저장할 수 있는 기능 등을 적어도 하나 이상 갖춘 휴대용 기기를 의미할 수 있다. 이러한 웨어러블 기기가 소형화되면서, 사용자의 손목 등에 착용이 가능한 스마트 워치 등이 개발되고 있는 상황이다.
일 실시예에 따르면, 전자 장치는 외부 장치와 무선(예: 블루투스(Bluetooth) 통신) 연결(예: 페어링(pairing) 또는 통신망(LTE, 5G))을 통해 데이터를 송수신 할 수 있다. 이 때 외부 장치와의 무선 통신 형태는 전자 장치와 외부 장치 간 1:1 페어링 방식이 될 수도 있고, 클라우드(예: 삼성 클라우드)에 정보를 저장하고, 복수의 외부 장치가 연결되어 함께 정보를 업로드하거나 및/또는 다운로드할 수 있는 다중 연결 방식을 포함할 수도 있다.
전자 장치는 특정 사용자 계정(예: 삼성 어카운트)을 기반으로 계정이 같은 경우 동일한 데이터를 송수신하여 동일한 사용자 경험(user experience)을 제공할 수 있다.
스마트 폰이나 태블릿 PC를 포함하는 전자 장치는 고도화 된 소프트웨어(software) 입력기를 이용하여 사용자가 자주 입력하는 단어를 학습 및 저장(단어 입력 빈도에 따라 저장 방식 및 노출 rate가 달라질 수 있음.)할 수 있다. 스마트 폰이나 태블릿 PC를 포함하는 전자 장치에서 사용자가 자주 입력하는 단어 정보가 웨어러블(Wearable) 기기로 연동되거나 또는 동기화되지 않아 웨어러블(Wearable) 기기 상에서 직접 모든 단어를 입력해야 할 수 있다.
이 때 스마트 워치(smart watch)를 포함하는 웨어러블 기기는 상대적으로 작은 디스플레이를 포함할 수 있으며, 이로 인해 사용자가 조작하기 어려울 수 있다. 즉, 사용자는 사용자가 자주 사용하는 단어 및 사용자가 정의하는 단축어에 대해 등록, 수정 또는 삭제 작업을 진행하기 어려울 수 있다.
다양한 실시예들에 따른 전자 장치는 디스플레이 및 프로세서를 포함하며, 프로세서는 외부 장치의 키보드 프로세스 및 전자 장치의 데이터 수신 매니저가 작동적으로 연결되도록 제어하고, 외부 장치로부터 자동완성 텍스트(text) 입력 정보를 획득하고,획득한 자동완성 텍스트(text) 입력 정보를 전자 장치의 키보드 프로세스와 동기화하고, 디스플레이를 이용해 자동완성 텍스트(text) 입력 정보에 기반한 추천 단어를 표시하도록 제어하며 자동완성 텍스트(text) 입력 정보는 사용자가 자주 사용하는 단어에 대한 데이터를 전자 장치가 수집하고 스스로 학습하여 사용자에게 완성 단어로 추천하는 데이터를 의미하는 사용자 데이터 및/또는 사용자가 설정한 단축어 및 단축어에 대응하는 완성된 단어를 의미하는 사용자 정의 단축어 데이터를 포함할 수 있다.
다양한 실시예들에 따른 전자 장치의 자동 완성 텍스트 입력 방법은 외부 장치의 키보드 프로세스 및 전자 장치의 데이터 수신 매니저가 작동적으로 연결되도록 제어하는 동작, 외부 장치로부터 자동완성 텍스트(text) 입력 정보를 획득하는 동작, 획득한 자동완성 텍스트(text) 입력 정보를 전자 장치의 키보드 프로세스와 동기화하는 동작 및 디스플레이를 이용해 자동완성 텍스트(text) 입력 정보에 기반한 추천 단어를 표시하도록 제어하는 동작을 포함하며, 자동완성 텍스트(text) 입력 정보는 사용자가 자주 사용하는 단어에 대한 데이터를 전자 장치가 수집하고 스스로 학습하여 사용자에게 완성 단어로 추천하는 데이터를 의미하는 사용자 데이터 및/또는 사용자가 설정한 단축어 및 단축어에 대응하는 완성된 단어를 의미하는 사용자 정의 단축어 데이터를 포함할 수 있다.
다양한 실시예에 따르면, 외부 장치(예: 스마트폰)에서 사용자가 자주 입력하던 단어 및 등록된 단어를, 전자 장치(예: 웨어러블 기기)에서도 동일하게 사용하거나 추천을 받아 편리한 사용자 경험을 제공할 수 있다.
다양한 실시예에 따르면, 외부 장치(예: 스마트폰)에서 사용자가 자주 입력하던 단어 및 등록된 단어를, 전자 장치(예: 웨어러블 기기)의 추천 단어 영역에 동일하게 노출시켜 전자 장치(예: 웨어러블 기기) 상에서 사용자 입력 횟수(예: 터치 입력)를 줄이고 편의성을 높일 수 있다.
다양한 실시예에 따르면, 전자 장치(예: 웨어러블 기기)에서 상대적으로 작은 디스플레이를 포함하여 조작이 불편하더라도 외부 장치(예: 스마트폰)에서 사용자가 자주 입력하던 단어 및 등록된 단어를, 전자 장치(예: 웨어러블 기기)에서도 동일하게 사용하거나 추천을 받아 사용자에게 편리함을 제공할 수 있다.
도 1은 다양한 실시예들에 따른, 네트워크 환경 내의 전자 장치의 블록도이다.
도 2a는 다양한 실시예들에 따른 전자 장치의 전면 사시도이고, 도 2b는 다양한 실시예들에 따른 전자 장치의 후면 사시도를 도시한 도면이다.
도 3은 일 실시예에 따른 도 2a의 전자 장치(200)의 본체(210)에 관한 전개 사시도이다.
도 4는 다양한 실시예들에 따른 전자 장치 및 외부 장치의 구성을 블록도로 나타낸 것이다.
도 5a 및 도 5b는 비교 실시예에 따른 웨어러블 장치의 단어 입력 과정을 나타낸 것이다.
도 6은 다양한 실시예들에 따른 전자 장치를 이용하여 외부 장치(405)와 연결 서비스를 개시하는 상황을 도시한 것이다.
도 7a 내지 도 7c는 다양한 실시예들에 따른 전자 장치 및 외부 장치 간 사용자 단어 데이터를 송신 및 수신하는 과정을 나타낸 것이다.
도 8은 다양한 실시예들에 따른 외부 장치의 단축어 입력 화면을 도시한 것이다.
도 9a 내지 도 9c는 다양한 실시예들에 따른 전자 장치 상에서 사용자 단어를 동기화하는 과정 및 그 결과를 도시한 것이다.
도 10은 다양한 실시예들에 따른 전자 장치의 단축어 변경 방법을 도시한 것이다.
도 11은 다양한 실시예들에 따른 전자 장치 상에서 키보드가 아닌 새로운 입력 방식을 통한 단어 입력 과정을 도시한 것이다.
도 12a 내지 도 12e는 다양한 실시예들에 따른 외부 장치 간 연결 및 사용자 단어의 동기화 과정을 도시한 것이다.
도 13은 다양한 실시예들에 따른 전자 장치의 사용자 단어 동기화 과정을 순서대로 도시한 것이다.
도 1은 , 다양한 실시예들에 따른, 네트워크 환경(100) 내의 전자 장치(101)의 블록도이다. 도 1을 참조하면, 네트워크 환경(100)에서 전자 장치(101)는 제 1 네트워크(198)(예: 근거리 무선 통신 네트워크)를 통하여 전자 장치(102)와 통신하거나, 또는 제 2 네트워크(199)(예: 원거리 무선 통신 네트워크)를 통하여 전자 장치(104) 또는 서버(108) 중 적어도 하나와 통신할 수 있다. 일실시예에 따르면, 전자 장치(101)는 서버(108)를 통하여 전자 장치(104)와 통신할 수 있다. 일실시예에 따르면, 전자 장치(101)는 프로세서(120), 메모리(130), 입력 모듈(150), 음향 출력 모듈(155), 디스플레이 모듈(160), 오디오 모듈(170), 센서 모듈(176), 인터페이스(177), 연결 단자(178), 햅틱 모듈(179), 카메라 모듈(180), 전력 관리 모듈(188), 배터리(189), 통신 모듈(190), 가입자 식별 모듈(196), 또는 안테나 모듈(197)을 포함할 수 있다. 어떤 실시예에서는, 전자 장치(101)에는, 이 구성요소들 중 적어도 하나(예: 연결 단자(178))가 생략되거나, 하나 이상의 다른 구성요소가 추가될 수 있다. 어떤 실시예에서는, 이 구성요소들 중 일부들(예: 센서 모듈(176), 카메라 모듈(180), 또는 안테나 모듈(197))은 하나의 구성요소(예: 디스플레이 모듈(160))로 통합될 수 있다.
프로세서(120)는, 예를 들면, 소프트웨어(예: 프로그램(140))를 실행하여 프로세서(120)에 연결된 전자 장치(101)의 적어도 하나의 다른 구성요소(예: 하드웨어 또는 소프트웨어 구성요소)를 제어할 수 있고, 다양한 데이터 처리 또는 연산을 수행할 수 있다. 일실시예에 따르면, 데이터 처리 또는 연산의 적어도 일부로서, 프로세서(120)는 다른 구성요소(예: 센서 모듈(176) 또는 통신 모듈(190))로부터 수신된 명령 또는 데이터를 휘발성 메모리(132)에 저장하고, 휘발성 메모리(132)에 저장된 명령 또는 데이터를 처리하고, 결과 데이터를 비휘발성 메모리(134)에 저장할 수 있다. 일실시예에 따르면, 프로세서(120)는 메인 프로세서(121)(예: 중앙 처리 장치 또는 어플리케이션 프로세서) 또는 이와는 독립적으로 또는 함께 운영 가능한 보조 프로세서(123)(예: 그래픽 처리 장치, 신경망 처리 장치(NPU: neural processing unit), 이미지 시그널 프로세서, 센서 허브 프로세서, 또는 커뮤니케이션 프로세서)를 포함할 수 있다. 예를 들어, 전자 장치(101)가 메인 프로세서(121) 및 보조 프로세서(123)를 포함하는 경우, 보조 프로세서(123)는 메인 프로세서(121)보다 저전력을 사용하거나, 지정된 기능에 특화되도록 설정될 수 있다. 보조 프로세서(123)는 메인 프로세서(121)와 별개로, 또는 그 일부로서 구현될 수 있다.
보조 프로세서(123)는, 예를 들면, 메인 프로세서(121)가 인액티브(예: 슬립) 상태에 있는 동안 메인 프로세서(121)를 대신하여, 또는 메인 프로세서(121)가 액티브(예: 어플리케이션 실행) 상태에 있는 동안 메인 프로세서(121)와 함께, 전자 장치(101)의 구성요소들 중 적어도 하나의 구성요소(예: 디스플레이 모듈(160), 센서 모듈(176), 또는 통신 모듈(190))와 관련된 기능 또는 상태들의 적어도 일부를 제어할 수 있다. 일실시예에 따르면, 보조 프로세서(123)(예: 이미지 시그널 프로세서 또는 커뮤니케이션 프로세서)는 기능적으로 관련 있는 다른 구성요소(예: 카메라 모듈(180) 또는 통신 모듈(190))의 일부로서 구현될 수 있다. 일실시예에 따르면, 보조 프로세서(123)(예: 신경망 처리 장치)는 인공지능 모델의 처리에 특화된 하드웨어 구조를 포함할 수 있다. 인공지능 모델은 기계 학습을 통해 생성될 수 있다. 이러한 학습은, 예를 들어, 인공지능 모델이 수행되는 전자 장치(101) 자체에서 수행될 수 있고, 별도의 서버(예: 서버(108))를 통해 수행될 수도 있다. 학습 알고리즘은, 예를 들어, 지도형 학습(supervised learning), 비지도형 학습(unsupervised learning), 준지도형 학습(semi-supervised learning) 또는 강화 학습(reinforcement learning)을 포함할 수 있으나, 전술한 예에 한정되지 않는다. 인공지능 모델은, 복수의 인공 신경망 레이어들을 포함할 수 있다. 인공 신경망은 심층 신경망(DNN: deep neural network), CNN(convolutional neural network), RNN(recurrent neural network), RBM(restricted boltzmann machine), DBN(deep belief network), BRDNN(bidirectional recurrent deep neural network), 심층 Q-네트워크(deep Q-networks) 또는 상기 중 둘 이상의 조합 중 하나일 수 있으나, 전술한 예에 한정되지 않는다. 인공지능 모델은 하드웨어 구조 이외에, 추가적으로 또는 대체적으로, 소프트웨어 구조를 포함할 수 있다.
메모리(130)는, 전자 장치(101)의 적어도 하나의 구성요소(예: 프로세서(120) 또는 센서 모듈(176))에 의해 사용되는 다양한 데이터를 저장할 수 있다. 데이터는, 예를 들어, 소프트웨어(예: 프로그램(140)) 및, 이와 관련된 명령에 대한 입력 데이터 또는 출력 데이터를 포함할 수 있다. 메모리(130)는, 휘발성 메모리(132) 또는 비휘발성 메모리(134)를 포함할 수 있다.
프로그램(140)은 메모리(130)에 소프트웨어로서 저장될 수 있으며, 예를 들면, 운영 체제(142), 미들 웨어(144) 또는 어플리케이션(146)을 포함할 수 있다.
입력 모듈(150)은, 전자 장치(101)의 구성요소(예: 프로세서(120))에 사용될 명령 또는 데이터를 전자 장치(101)의 외부(예: 사용자)로부터 수신할 수 있다. 입력 모듈(150)은, 예를 들면, 마이크, 마우스, 키보드, 키(예: 버튼), 또는 디지털 펜(예: 스타일러스 펜)을 포함할 수 있다.
음향 출력 모듈(155)은 음향 신호를 전자 장치(101)의 외부로 출력할 수 있다. 음향 출력 모듈(155)은, 예를 들면, 스피커 또는 리시버를 포함할 수 있다. 스피커는 멀티미디어 재생 또는 녹음 재생과 같이 일반적인 용도로 사용될 수 있다. 리시버는 착신 전화를 수신하기 위해 사용될 수 있다. 일실시예에 따르면, 리시버는 스피커와 별개로, 또는 그 일부로서 구현될 수 있다.
디스플레이 모듈(160)은 전자 장치(101)의 외부(예: 사용자)로 정보를 시각적으로 제공할 수 있다. 디스플레이 모듈(160)은, 예를 들면, 디스플레이, 홀로그램 장치, 또는 프로젝터 및 해당 장치를 제어하기 위한 제어 회로를 포함할 수 있다. 일실시예에 따르면, 디스플레이 모듈(160)은 터치를 감지하도록 설정된 터치 센서, 또는 상기 터치에 의해 발생되는 힘의 세기를 측정하도록 설정된 압력 센서를 포함할 수 있다.
오디오 모듈(170)은 소리를 전기 신호로 변환시키거나, 반대로 전기 신호를 소리로 변환시킬 수 있다. 일실시예에 따르면, 오디오 모듈(170)은, 입력 모듈(150)을 통해 소리를 획득하거나, 음향 출력 모듈(155), 또는 전자 장치(101)와 직접 또는 무선으로 연결된 외부 전자 장치(예: 전자 장치(102))(예: 스피커 또는 헤드폰)를 통해 소리를 출력할 수 있다.
센서 모듈(176)은 전자 장치(101)의 작동 상태(예: 전력 또는 온도), 또는 외부의 환경 상태(예: 사용자 상태)를 감지하고, 감지된 상태에 대응하는 전기 신호 또는 데이터 값을 생성할 수 있다. 일실시예에 따르면, 센서 모듈(176)은, 예를 들면, 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, 컬러 센서, IR(infrared) 센서, 생체 센서, 온도 센서, 습도 센서, 또는 조도 센서를 포함할 수 있다.
인터페이스(177)는 전자 장치(101)가 외부 전자 장치(예: 전자 장치(102))와 직접 또는 무선으로 연결되기 위해 사용될 수 있는 하나 이상의 지정된 프로토콜들을 지원할 수 있다. 일실시예에 따르면, 인터페이스(177)는, 예를 들면, HDMI(high definition multimedia interface), USB(universal serial bus) 인터페이스, SD카드 인터페이스, 또는 오디오 인터페이스를 포함할 수 있다.
연결 단자(178)는, 그를 통해서 전자 장치(101)가 외부 전자 장치(예: 전자 장치(102))와 물리적으로 연결될 수 있는 커넥터를 포함할 수 있다. 일실시예에 따르면, 연결 단자(178)는, 예를 들면, HDMI 커넥터, USB 커넥터, SD 카드 커넥터, 또는 오디오 커넥터(예: 헤드폰 커넥터)를 포함할 수 있다.
햅틱 모듈(179)은 전기적 신호를 사용자가 촉각 또는 운동 감각을 통해서 인지할 수 있는 기계적인 자극(예: 진동 또는 움직임) 또는 전기적인 자극으로 변환할 수 있다. 일실시예에 따르면, 햅틱 모듈(179)은, 예를 들면, 모터, 압전 소자, 또는 전기 자극 장치를 포함할 수 있다.
카메라 모듈(180)은 정지 영상 및 동영상을 촬영할 수 있다. 일실시예에 따르면, 카메라 모듈(180)은 하나 이상의 렌즈들, 이미지 센서들, 이미지 시그널 프로세서들, 또는 플래시들을 포함할 수 있다.
전력 관리 모듈(188)은 전자 장치(101)에 공급되는 전력을 관리할 수 있다. 일실시예에 따르면, 전력 관리 모듈(188)은, 예를 들면, PMIC(power management integrated circuit)의 적어도 일부로서 구현될 수 있다.
배터리(189)는 전자 장치(101)의 적어도 하나의 구성요소에 전력을 공급할 수 있다. 일실시예에 따르면, 배터리(189)는, 예를 들면, 재충전 불가능한 1차 전지, 재충전 가능한 2차 전지 또는 연료 전지를 포함할 수 있다.
통신 모듈(190)은 전자 장치(101)와 외부 전자 장치(예: 전자 장치(102), 전자 장치(104), 또는 서버(108)) 간의 직접(예: 유선) 통신 채널 또는 무선 통신 채널의 수립, 및 수립된 통신 채널을 통한 통신 수행을 지원할 수 있다. 통신 모듈(190)은 프로세서(120)(예: 어플리케이션 프로세서)와 독립적으로 운영되고, 직접(예: 유선) 통신 또는 무선 통신을 지원하는 하나 이상의 커뮤니케이션 프로세서를 포함할 수 있다. 일실시예에 따르면, 통신 모듈(190)은 무선 통신 모듈(192)(예: 셀룰러 통신 모듈, 근거리 무선 통신 모듈, 또는 GNSS(global navigation satellite system) 통신 모듈) 또는 유선 통신 모듈(194)(예: LAN(local area network) 통신 모듈, 또는 전력선 통신 모듈)을 포함할 수 있다. 이들 통신 모듈 중 해당하는 통신 모듈은 제 1 네트워크(198)(예: 블루투스, WiFi(wireless fidelity) direct 또는 IrDA(infrared data association)와 같은 근거리 통신 네트워크) 또는 제 2 네트워크(199)(예: 레거시 셀룰러 네트워크, 5G 네트워크, 차세대 통신 네트워크, 인터넷, 또는 컴퓨터 네트워크(예: LAN 또는 WAN)와 같은 원거리 통신 네트워크)를 통하여 외부의 전자 장치(104)와 통신할 수 있다. 이런 여러 종류의 통신 모듈들은 하나의 구성요소(예: 단일 칩)로 통합되거나, 또는 서로 별도의 복수의 구성요소들(예: 복수 칩들)로 구현될 수 있다. 무선 통신 모듈(192)은 가입자 식별 모듈(196)에 저장된 가입자 정보(예: 국제 모바일 가입자 식별자(IMSI))를 이용하여 제 1 네트워크(198) 또는 제 2 네트워크(199)와 같은 통신 네트워크 내에서 전자 장치(101)를 확인 또는 인증할 수 있다.
무선 통신 모듈(192)은 4G 네트워크 이후의 5G 네트워크 및 차세대 통신 기술, 예를 들어, NR 접속 기술(new radio access technology)을 지원할 수 있다. NR 접속 기술은 고용량 데이터의 고속 전송(eMBB(enhanced mobile broadband)), 단말 전력 최소화와 다수 단말의 접속(mMTC(massive machine type communications)), 또는 고신뢰도와 저지연(URLLC(ultra-reliable and low-latency communications))을 지원할 수 있다. 무선 통신 모듈(192)은, 예를 들어, 높은 데이터 전송률 달성을 위해, 고주파 대역(예: mmWave 대역)을 지원할 수 있다. 무선 통신 모듈(192)은 고주파 대역에서의 성능 확보를 위한 다양한 기술들, 예를 들어, 빔포밍(beamforming), 거대 배열 다중 입출력(massive MIMO(multiple-input and multiple-output)), 전차원 다중입출력(FD-MIMO: full dimensional MIMO), 어레이 안테나(array antenna), 아날로그 빔형성(analog beam-forming), 또는 대규모 안테나(large scale antenna)와 같은 기술들을 지원할 수 있다. 무선 통신 모듈(192)은 전자 장치(101), 외부 전자 장치(예: 전자 장치(104)) 또는 네트워크 시스템(예: 제 2 네트워크(199))에 규정되는 다양한 요구사항을 지원할 수 있다. 일실시예에 따르면, 무선 통신 모듈(192)은 eMBB 실현을 위한 Peak data rate(예: 20Gbps 이상), mMTC 실현을 위한 손실 Coverage(예: 164dB 이하), 또는 URLLC 실현을 위한 U-plane latency(예: 다운링크(DL) 및 업링크(UL) 각각 0.5ms 이하, 또는 라운드 트립 1ms 이하)를 지원할 수 있다.
안테나 모듈(197)은 신호 또는 전력을 외부(예: 외부의 전자 장치)로 송신하거나 외부로부터 수신할 수 있다. 일실시예에 따르면, 안테나 모듈(197)은 서브스트레이트(예: PCB) 위에 형성된 도전체 또는 도전성 패턴으로 이루어진 방사체를 포함하는 안테나를 포함할 수 있다. 일실시예에 따르면, 안테나 모듈(197)은 복수의 안테나들(예: 어레이 안테나)을 포함할 수 있다. 이런 경우, 제 1 네트워크(198) 또는 제 2 네트워크(199)와 같은 통신 네트워크에서 사용되는 통신 방식에 적합한 적어도 하나의 안테나가, 예를 들면, 통신 모듈(190)에 의하여 상기 복수의 안테나들로부터 선택될 수 있다. 신호 또는 전력은 상기 선택된 적어도 하나의 안테나를 통하여 통신 모듈(190)과 외부의 전자 장치 간에 송신되거나 수신될 수 있다. 어떤 실시예에 따르면, 방사체 이외에 다른 부품(예: RFIC(radio frequency integrated circuit))이 추가로 안테나 모듈(197)의 일부로 형성될 수 있다.
다양한 실시예에 따르면, 안테나 모듈(197)은 mmWave 안테나 모듈을 형성할 수 있다. 일실시예에 따르면, mmWave 안테나 모듈은 인쇄 회로 기판, 상기 인쇄 회로 기판의 제 1 면(예: 아래 면)에 또는 그에 인접하여 배치되고 지정된 고주파 대역(예: mmWave 대역)을 지원할 수 있는 RFIC, 및 상기 인쇄 회로 기판의 제 2 면(예: 윗 면 또는 측 면)에 또는 그에 인접하여 배치되고 상기 지정된 고주파 대역의 신호를 송신 또는 수신할 수 있는 복수의 안테나들(예: 어레이 안테나)을 포함할 수 있다.
상기 구성요소들 중 적어도 일부는 주변 기기들간 통신 방식(예: 버스, GPIO(general purpose input and output), SPI(serial peripheral interface), 또는 MIPI(mobile industry processor interface))을 통해 서로 연결되고 신호(예: 명령 또는 데이터)를 상호간에 교환할 수 있다.
일실시예에 따르면, 명령 또는 데이터는 제 2 네트워크(199)에 연결된 서버(108)를 통해서 전자 장치(101)와 외부의 전자 장치(104)간에 송신 또는 수신될 수 있다. 외부의 전자 장치(102, 또는 104) 각각은 전자 장치(101)와 동일한 또는 다른 종류의 장치일 수 있다. 일실시예에 따르면, 전자 장치(101)에서 실행되는 동작들의 전부 또는 일부는 외부의 전자 장치들(102, 104, 또는 108) 중 하나 이상의 외부의 전자 장치들에서 실행될 수 있다. 예를 들면, 전자 장치(101)가 어떤 기능이나 서비스를 자동으로, 또는 사용자 또는 다른 장치로부터의 요청에 반응하여 수행해야 할 경우에, 전자 장치(101)는 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 하나 이상의 외부의 전자 장치들에게 그 기능 또는 그 서비스의 적어도 일부를 수행하라고 요청할 수 있다. 상기 요청을 수신한 하나 이상의 외부의 전자 장치들은 요청된 기능 또는 서비스의 적어도 일부, 또는 상기 요청과 관련된 추가 기능 또는 서비스를 실행하고, 그 실행의 결과를 전자 장치(101)로 전달할 수 있다. 전자 장치(101)는 상기 결과를, 그대로 또는 추가적으로 처리하여, 상기 요청에 대한 응답의 적어도 일부로서 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅, 분산 컴퓨팅, 모바일 에지 컴퓨팅(MEC: mobile edge computing), 또는 클라이언트-서버 컴퓨팅 기술이 이용될 수 있다. 전자 장치(101)는, 예를 들어, 분산 컴퓨팅 또는 모바일 에지 컴퓨팅을 이용하여 초저지연 서비스를 제공할 수 있다. 다른 실시예에 있어서, 외부의 전자 장치(104)는 IoT(internet of things) 기기를 포함할 수 있다. 서버(108)는 기계 학습 및/또는 신경망을 이용한 지능형 서버일 수 있다. 일실시예에 따르면, 외부의 전자 장치(104) 또는 서버(108)는 제 2 네트워크(199) 내에 포함될 수 있다. 전자 장치(101)는 5G 통신 기술 및 IoT 관련 기술을 기반으로 지능형 서비스(예: 스마트 홈, 스마트 시티, 스마트 카, 또는 헬스 케어)에 적용될 수 있다.
본 문서에 개시된 다양한 실시예들에 따른 전자 장치는 다양한 형태의 장치가 될 수 있다. 전자 장치는, 예를 들면, 휴대용 통신 장치(예: 스마트폰), 컴퓨터 장치, 휴대용 멀티미디어 장치, 휴대용 의료 기기, 카메라, 웨어러블 장치, 또는 가전 장치를 포함할 수 있다. 본 문서의 실시예에 따른 전자 장치는 전술한 기기들에 한정되지 않는다.
본 문서의 다양한 실시예들 및 이에 사용된 용어들은 본 문서에 기재된 기술적 특징들을 특정한 실시예들로 한정하려는 것이 아니며, 해당 실시예의 다양한 변경, 균등물, 또는 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 또는 관련된 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 아이템에 대응하는 명사의 단수 형은 관련된 문맥상 명백하게 다르게 지시하지 않는 한, 상기 아이템 한 개 또는 복수 개를 포함할 수 있다. 본 문서에서, "A 또는 B", "A 및 B 중 적어도 하나", "A 또는 B 중 적어도 하나", "A, B 또는 C", "A, B 및 C 중 적어도 하나", 및 "A, B, 또는 C 중 적어도 하나"와 같은 문구들 각각은 그 문구들 중 해당하는 문구에 함께 나열된 항목들 중 어느 하나, 또는 그들의 모든 가능한 조합을 포함할 수 있다. "제 1", "제 2", 또는 "첫째" 또는 "둘째"와 같은 용어들은 단순히 해당 구성요소를 다른 해당 구성요소와 구분하기 위해 사용될 수 있으며, 해당 구성요소들을 다른 측면(예: 중요성 또는 순서)에서 한정하지 않는다. 어떤(예: 제 1) 구성요소가 다른(예: 제 2) 구성요소에, "기능적으로" 또는 "통신적으로"라는 용어와 함께 또는 이런 용어 없이, "커플드" 또는 "커넥티드"라고 언급된 경우, 그것은 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로(예: 유선으로), 무선으로, 또는 제 3 구성요소를 통하여 연결될 수 있다는 것을 의미한다.
본 문서의 다양한 실시예들에서 사용된 용어 "모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구현된 유닛을 포함할 수 있으며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로와 같은 용어와 상호 호환적으로 사용될 수 있다. 모듈은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는, 상기 부품의 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 일실시예에 따르면, 모듈은 ASIC(application-specific integrated circuit)의 형태로 구현될 수 있다.
본 문서의 다양한 실시예들은 기기(machine)(예: 전자 장치(101)) 의해 읽을 수 있는 저장 매체(storage medium)(예: 내장 메모리(136) 또는 외장 메모리(138))에 저장된 하나 이상의 명령어들을 포함하는 소프트웨어(예: 프로그램(140))로서 구현될 수 있다. 예를 들면, 기기(예: 전자 장치(101))의 프로세서(예: 프로세서(120))는, 저장 매체로부터 저장된 하나 이상의 명령어들 중 적어도 하나의 명령을 호출하고, 그것을 실행할 수 있다. 이것은 기기가 상기 호출된 적어도 하나의 명령어에 따라 적어도 하나의 기능을 수행하도록 운영되는 것을 가능하게 한다. 상기 하나 이상의 명령어들은 컴파일러에 의해 생성된 코드 또는 인터프리터에 의해 실행될 수 있는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장 매체는, 비일시적(non-transitory) 저장 매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장 매체가 실재(tangible)하는 장치이고, 신호(signal)(예: 전자기파)를 포함하지 않는다는 것을 의미할 뿐이며, 이 용어는 데이터가 저장 매체에 반영구적으로 저장되는 경우와 임시적으로 저장되는 경우를 구분하지 않는다.
일실시예에 따르면, 본 문서에 개시된 다양한 실시예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory(CD-ROM))의 형태로 배포되거나, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 또는 두 개의 사용자 장치들(예: 스마트 폰들) 간에 직접, 온라인으로 배포(예: 다운로드 또는 업로드)될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 기기로 읽을 수 있는 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
다양한 실시예들에 따르면, 상기 기술한 구성요소들의 각각의 구성요소(예: 모듈 또는 프로그램)는 단수 또는 복수의 개체를 포함할 수 있으며, 복수의 개체 중 일부는 다른 구성요소에 분리 배치될 수도 있다. 다양한 실시예들에 따르면, 전술한 해당 구성요소들 중 하나 이상의 구성요소들 또는 동작들이 생략되거나, 또는 하나 이상의 다른 구성요소들 또는 동작들이 추가될 수 있다. 대체적으로 또는 추가적으로, 복수의 구성요소들(예: 모듈 또는 프로그램)은 하나의 구성요소로 통합될 수 있다. 이런 경우, 통합된 구성요소는 상기 복수의 구성요소들 각각의 구성요소의 하나 이상의 기능들을 상기 통합 이전에 상기 복수의 구성요소들 중 해당 구성요소에 의해 수행되는 것과 동일 또는 유사하게 수행할 수 있다. 다양한 실시예들에 따르면, 모듈, 프로그램 또는 다른 구성요소에 의해 수행되는 동작들은 순차적으로, 병렬적으로, 반복적으로, 또는 휴리스틱하게 실행되거나, 상기 동작들 중 하나 이상이 다른 순서로 실행되거나, 생략되거나, 또는 하나 이상의 다른 동작들이 추가될 수 있다.도 2a는 다양한 실시예들에 따른 전자 장치의 전면 사시도이고, 도 2b는 다양한 실시예들에 따른 전자 장치의 후면 사시도를 도시한 도면이다.
도 2a 및 2b를 참조하면, 다양한 실시예들에 따른 전자 장치(200)(예: 도 1의 전자 장치(101))는 제1 면(또는 전면)(210A), 제2 면(또는 후면)(210B), 및 제1 면(210A) 및 제2 면(210B) 사이의 공간을 둘러싸는 측면(210C)을 포함하는 하우징(210)과, 하우징(210)의 적어도 일부에 연결되고 전자 장치(200)를 사용자의 신체(예: 손목, 발목 등)에 탈착 가능하게 하는 결착 부재(250, 260)를 포함할 수 있다. 다른 실시예(미도시)에서는, 하우징은, 도 2의 제1 면(210A), 제2 면(210B) 및 측면(210C)들 중 일부를 형성하는 구조를 지칭할 수도 있다.
일 실시예에 따르면, 제1 면(210A)은 적어도 일부분이 실질적으로 투명한 전면 플레이트(201)(예: 다양한 코팅 레이어들을 포함하는 글라스 플레이트, 또는 폴리머 플레이트)에 의하여 형성될 수 있다. 제2 면(210B)은 실질적으로 불투명한 후면 플레이트(207)에 의하여 형성될 수 있다. 후면 플레이트(207)는, 예를 들어, 코팅 또는 착색된 유리, 세라믹, 폴리머, 금속(예: 알루미늄, 스테인레스 스틸(STS), 또는 마그네슘), 또는 상기 물질들 중 적어도 둘의 조합에 의하여 형성될 수 있다. 측면(210C)은, 전면 플레이트(201) 및 후면 플레이트(207)와 결합하며, 금속 및/또는 폴리머를 포함하는 측면 베젤 구조 (또는 "측면 부재")(206)에 의하여 형성될 수 있다. 어떤 실시예에서는, 후면 플레이트(207) 및 측면 베젤 구조(206)는 일체로 형성될 수 있고, 동일한 물질(예: 알루미늄과 같은 금속 물질)을 포함할 수 있다. 결착 부재(250, 260)는 다양한 재질 및 형태로 형성될 수 있다. 직조물, 가죽, 러버, 우레탄, 금속, 세라믹, 또는 상기 물질들 중 적어도 둘의 조합에 의하여 일체형 및 복수의 단위 링크가 서로 유동 가능하도록 형성될 수 있다.
다양한 실시예들에 따르면, 전자 장치(200)는 디스플레이(220)(예: 도 1의 디스플레이 모듈(160)), 오디오 모듈(205, 208)(예: 도 1의 오디오 모듈(170)), 센서 모듈(211)(예: 도 1의 센서 모듈(176)), 키 입력 장치(202, 203, 204)(예: 도 1의 입력 모듈(150)) 및 커넥터 홀(209) 중 적어도 하나를 포함할 수 있다. 어떤 실시예에서는, 전자 장치(200)는, 구성요소들 중 적어도 하나(예: 키 입력 장치(202, 203, 204), 커넥터 홀(209), 또는 센서 모듈(211))를 생략하거나 다른 구성요소를 추가적으로 포함할 수 있다.
디스플레이(220)는, 예를 들어, 전면 플레이트(201)의 상당 부분을 통하여 노출될 수 있다. 디스플레이(220)의 형태는, 전면 플레이트(201)의 형태에 대응하는 형태일 수 있으며, 원형, 타원형, 또는 다각형 등 다양한 형태일 수 있다. 디스플레이(220)는, 터치 감지 회로, 터치의 세기(압력)를 측정할 수 있는 압력 센서, 및/또는 지문 센서와 결합되거나 인접하여 배치될 수 있다.
오디오 모듈(205, 208)은, 마이크 홀(205) 및 스피커 홀(208)을 포함할 수 있다. 마이크 홀(205)은 외부의 소리를 획득하기 위한 마이크가 내부에 배치될 수 있고, 어떤 실시예에서는 소리의 방향을 감지할 수 있도록 복수개의 마이크가 배치될 수 있다. 스피커 홀(208)은, 외부 스피커 및 통화용 리시버로 사용할 수 있다.
센서 모듈(211)은, 전자 장치(200)의 내부의 작동 상태, 또는 외부의 환경 상태에 대응하는 전기 신호 또는 데이터 값을 생성할 수 있다. 센서 모듈(211)은, 예를 들어, 하우징(210)의 제2 면(210B)에 배치된 생체 센서 모듈(211)(예: HRM(Heart Rate Monitoring) 센서)을 포함할 수 있다. 전자 장치(200)는, 도시되지 않은 센서 모듈, 예를 들어, 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 컬러 센서, IR(infrared) 센서, 생체 센서, 온도 센서, 습도 센서, 또는 조도 센서 중 적어도 하나를 더 포함할 수 있다.
키 입력 장치(202, 203, 204)는, 하우징(210)의 제1 면(210A)에 배치되고 적어도 하나의 방향으로 회전 가능한 휠 키(202), 및/또는 하우징(210)의 측면(210C)에 배치된 사이드 키 버튼(202, 203)을 포함할 수 있다. 휠 키는 전면 플레이트(201)의 형태에 대응하는 형태일 수 있다. 다른 실시예에서는, 전자 장치(200)는 키 입력 장치(202, 203, 204)들 중 일부 또는 전부를 포함하지 않을 수 있고 포함 되지 않은 키 입력 장치(202, 203, 204)는 디스플레이(220) 상에 소프트 키 등 다른 형태로 구현될 수 있다. 커넥터 홀(209)은, 외부 전자 장치와 전력 및/또는 데이터를 송수신하기 위한 커넥터(예를 들어, USB 커넥터)를 수용할 수 있고 외부 전자 장치와 오디오 신호를 송수신하기 위한 커넥터를 수용할 수 있는 다른 커넥터 홀(미도시))을 포함할 수 있다. 전자 장치(200)는, 예를 들면, 커넥터 홀(209)의 적어도 일부를 덮고, 커넥터 홀에 대한 외부 이물질의 유입을 차단하는 커넥터 커버(미도시)를 더 포함할 수 있다.
결착 부재(250, 260)는 락킹 부재(251, 261)를 이용하여 하우징(210)의 적어도 일부 영역에 탈착 가능하도록 결착될 수 있다. 결착 부재(250, 260)는 고정 부재(252), 고정 부재 체결 홀(253), 밴드 가이드 부재(254), 밴드 고정 고리(255) 중 하나 또는 그 이상을 포함할 수 있다.
고정 부재(252)는 하우징(210)과 결착 부재(250, 260)를 사용자의 신체 일부(예: 손목, 발목 등)에 고정시키도록 구성될 수 있다. 고정 부재 체결 홀(253)은 고정 부재(252)에 대응하여 하우징(210)과 결착 부재(250, 260)를 사용자의 신체 일부에 고정시킬 수 있다. 밴드 가이드 부재(254)는 고정 부재(252)가 고정 부재 체결 홀(253)과 체결 시 고정 부재(252)의 움직임 범위를 제한하도록 구성됨으로써, 결착 부재(250, 260)가 사용자의 신체 일부에 밀착하여 결착되도록 할 수 있다. 밴드 고정 고리(255)는 고정 부재(252)와 고정 부재 체결 홀(253)이 체결된 상태에서, 결착 부재(250,260)의 움직임 범위를 제한할 수 있다.
도 3은 일 실시예에 따른 도 2a의 전자 장치(200)의 본체(210)에 관한 전개 사시도이다.
도 3을 참조하면, 전자 장치(200)의 본체(210)는 전면 커버(241), 후면 커버(242), 측면 부재(243), 지지 부재(예: 브래킷(bracket))(310), 디스플레이(320), 인쇄 회로 기판(printed circuit board)(330), 배터리(340), 또는 복수의 도전성 패턴들(351, 352, 353, 354)을 포함할 수 있다. 본체(210)의 구성 요소들 중 적어도 하나는, 도 2a 또는 2b의 본체(210)에 포함되는 구성 요소들 중 적어도 하나와 동일, 또는 유사할 수 있으며, 중복되는 설명은 이하 생략한다.
일 실시예에 따르면, 지지 부재(310)는 전면 커버(241) 및 후면 커버(242) 사이에 배치될 수 있다. 디스플레이(320)는 전면 커버(241)와 대면하는 지지 부재(310)의 일면(311)에 배치될 수 있다. 인쇄 회로 기판(330)은 후면 커버(242)와 대면하는 지지 부재(310)의 타면(미도시)에 배치될 수 있다. 디스플레이(320) 및 인쇄 회로 기판(330)은 지지 부재(310)에 의해 지지되어 강성을 확보할 수 있다. 지지 부재(310)는, 예를 들어, 금속 재질 및/또는 비금속 재질(예: 폴리머)로 형성될 수 있다.
일 실시예에 따르면, 디스플레이(320)는 전면 커버(241) 및 지지 부재(310) 사이에 배치될 수 있다. 디스플레이(320)는 OLED(organic light-emitting diode)와 같은 다양한 발광 소자를 기초로 구현될 수 있다. 다양한 실시예에 따르면(미도시), 디스플레이(320)는 터치 감지 회로(예: 터치 센서)를 포함할 수 있다. 터치 감지 회로는 ITO(indium tin oxide)와 같은 다양한 도전성 물질을 기초로 하는 투명한 전도성 층(또는, 필름)으로 구현될 수 있다. 일 실시예에 따르면, 터치 감지 회로는 전면 커버(241) 및 편광 층(미도시) 사이에 배치될 수 있다 (예: add-on type). 다른 실시예에 따르면, 터치 감지 회로는 편광 층 및 발광 층(예: OLED와 같은 발광 소자로 구현되는 복수의 픽셀들(pixels)을 포함하는 층) 사이에 배치될 수 있다 (예: on-cell type). 다른 실시예에 따르면, 발광 층은 터치 감지 회로 또는 터치 감지 기능을 포함할 수 있다 (예: in-cell type). 다양한 실시예에 따르면(미도시), 디스플레이(320)는 터치의 세기(압력)를 측정할 수 있는 압력 센서를 더 포함할 수도 있다.
일 실시예에 따르면, 디스플레이(320)는 인쇄 회로 기판(330)과의 전기적 연결을 위한 FPCB(flexible printed circuit)(321)와 같은 전기적 경로를 포함할 수 있다. 예를 들어, FPCB(321)는 지지 부재(310)의 측면(313) 및 측면 부재(243) 사이를 통해 인쇄 회로 기판(330)과 전기적으로 연결되도록 구부린 형태로 배치될 수 있다. 인쇄 회로 기판(330)에는, 프로세서, 메모리, 및/또는 인터페이스가 장착될 수 있다. 프로세서는, 예를 들어, 중앙처리장치, 어플리케이션 프로세서, 그래픽 처리 장치, 이미지 시그널 프로세서, 센서 허브 프로세서, 또는 커뮤니케이션 프로세서 중 하나 또는 그 이상을 포함할 수 있다. 메모리는, 예를 들어, 휘발성 메모리 또는 비휘발성 메모리를 포함할 수 있다. 인터페이스는, 예를 들어, HDMI(high definition multimedia interface), USB(universal serial bus) 인터페이스, SD카드 인터페이스, 및/또는 오디오 인터페이스를 포함할 수 있다. 인터페이스는, 예를 들어, 본체(210)를 외부 전자 장치와 전기적 또는 물리적으로 연결시킬 수 있으며, USB 커넥터, SD 카드/MMC 커넥터, 또는 오디오 커넥터를 포함할 수 있다. 예를 들어, 측면 부재(243) 또는 후면 커버(242)에는 외부 전자 장치와의 전기적 연결을 위한 커넥터 홀이 형성될 수 있다.
도 4는 다양한 실시예들에 따른 전자 장치 및 외부 장치의 구성을 블록도로 나타낸 것이다.
다양한 실시예에 따르면, 전자 장치(400)는 프로세서(410), 디스플레이(420) 및 제1어플리케이션(431)을 포함할 수 있으며, 도시된 구성 중 일부가 생략 또는 치환 될 수도 있다. 전자 장치(400)는 도 2의 전자 장치(200)의 구성 및/또는 기능 중 적어도 일부를 더 포함할 수 있다. 도시된(또는 도시되지 않은) 전자 장치(400)의 각 구성 중 적어도 일부는 상호 작동적으로(operatively), 기능적으로(functionally) 및/또는 전기적으로 (electrically) 연결될 수 있다.
다양한 실시예에 따르면, 프로세서(410)는 전자 장치의 각 구성 요소들의 제어 및/또는 통신에 관한 연산이나 데이터 처리를 수행할 수 있는 구성으로써, 하나 이상의 프로세서(410)들로 구성될 수 있다. 프로세서(410)는 도 1의 프로세서(120)의 구성 및/또는 기능 중 적어도 일부를 포함할 수 있다.
다양한 실시예에 따르면, 프로세서(410)가 전자 장치 상에서 구현할 수 있는 연산 및 데이터 처리 기능에는 한정됨이 없을 것이나, 이하에서는 외부 장치(405)와의 통신과 관련된 특징에 대해 상세히 설명하기로 한다. 프로세서(410)의 동작들은 메모리(미도시)에 저장된 인스트럭션들을 로딩(loading)함으로써 수행될 수 있다.
다양한 실시예에 따르면, 제1어플리케이션(431)은 프로세서(410)의 제어에 따라 무선 네트워크를 통해 외부 장치와 통신할 수 있다. 제1어플리케이션(431)은 셀룰러 네트워크(예: LTE(long term evolution) 네트워크, 5G 네트워크, NR(new radio) 네트워크) 및 근거리 네트워크(예: Wi-Fi, bluetooth)로부터 데이터를 송수신 하기 위한 하드웨어 및 소프트웨어 모듈들을 포함할 수 있다. 제1어플리케이션(431)은 도 1의 통신 모듈(190)의 구성 및/또는 기능 중 적어도 일부를 포함할 수 있다.
다양한 실시예에 따르면, 디스플레이(420)는 프로세서(410)의 제어에 따라 다양한 영상을 표시할 수 있다. 디스플레이(420)는 액정 디스플레이(liquid crystal display(LCD)), 발광 다이오드(light-emitting diode(LED)) 디스플레이, 또는 유기 발광 다이오드(organic light-emitting diode(OLED)) 디스플레이 중 어느 하나로 구현될 수 있으며, 이에 한정되지는 않는다. 디스플레이(420)는 사용자의 신체 일부(예: 손가락) 또는 입력 장치(예: 스타일러스 펜)를 이용한 터치 및/또는 근접 터치(또는 호버링) 입력을 감지하는 터치 스크린으로 형성될 수 있다. 디스플레이(420)는 도 1의 디스플레이 모듈(160)의 구성 및/또는 기능 중 적어도 일부를 포함할 수 있다.
다양한 실시예에 따르면, 외부 장치(405)는 제2어플리케이션(432) 및 제3어플리케이션(433)을 포함할 수 있다. 외부 장치(405)는 도 6 내지 도 9 에서는 스마트폰으로 도시되나 이에 한정되는 것은 아니며, 플렉서블 디스플레이(예: 슬라이더블, 폴더블, 롤러블 디스플레이)를 포함하는 이동 단말기를 포함할 수 있다. 외부 장치(405)는 도 1의 전자 장치(101)의 구성 및/또는 기능 중 적어도 일부를 더 포함할 수 있다. 도시된(또는 도시되지 않은) 외부 장치(405)의 각 구성 중 적어도 일부는 상호 작동적으로(operatively), 기능적으로(functionally) 및/또는 전기적으로 (electrically) 연결될 수 있다.
다양한 실시예에 따르면, 제2어플리케이션(432)은 외부 장치 상의 프로세서(미도시)의 제어에 따라 무선 네트워크를 통해 전자 장치(400)와 통신할 수 있다. 제2어플리케이션(432)은 셀룰러 네트워크(예: LTE(long term evolution) 네트워크, 5G 네트워크, NR(new radio) 네트워크) 및 근거리 네트워크(예: Wi-Fi, bluetooth)로부터 데이터를 송수신 하기 위한 하드웨어 및 소프트웨어 모듈들을 포함할 수 있다. 제2어플리케이션(432)은 도 1의 통신 모듈(190)의 구성 및/또는 기능 중 적어도 일부를 포함할 수 있다.
다양한 실시예에 따르면, 제2어플리케이션(432)은 페치(fetch)동작을 수행할 수 있다. 페치(fetch)동작은 제1동작(예: text shortcut 동작), 제2동작(예: 사용자 데이터 모델(user data model) 수집 동작) 또는 제3동작(예: 쿼리(query) 전달 동작) 중 적어도 어느 하나를 포함할 수 있다. 여기서 제1동작은 사용자에 의해 정의된 단축어(text shortcut) 데이터의 수집을 준비하는 동작을 의미할 수 있다. 제2동작은 사용자 데이터(user data)의 수집을 준비하는 동작을 의미할 수 있다. 제3동작은 사용자에 의해 정의된 단축어(text shortcut) 데이터 및/또는 사용자 데이터(user data)를 제3어플리케이션(433) 상으로 요청하는 동작을 의미할 수 있다. 쿼리(query)는 서버 또는 데이터 베이스에 정보를 요청하는 행위를 의미할 수 있다.
다양한 실시예에 따르면, 제3어플리케이션(433)은 제2어플리케이션(432)의 페치(fetch)동작에 대응하여 제2어플리케이션(432) 상으로 제1컨텐츠를 전송할 수 있다. 제1컨텐츠는 사용자 데이터 및/또는 사용자 정의 단축어 데이터(text shortcut data)를 포함할 수 있다. 사용자 데이터(user data)는 사용자가 설정 상으로 따로 정의하지는 않았으나 자주 사용하는 단어에 대한 데이터를 프로그램이 수집하고 스스로 학습하여 완성 단어로 추천하는 데이터를 의미할 수 있다. 또한 사용자 정의 단축어 데이터(text shortcut data)는 사용자가 설정한 단축어 및 단축어에 대응하는 완성된 단어를 포함하는 데이터를 의미할 수 있다.
다양한 실시예에 따르면, 제2어플리케이션(432)은 제3어플리케이션(433)으로부터 전송 신호를 수신하고, 제1컨텐츠가 존재하는지 판단할 수 있다. 제2어플리케이션(432)은 제1컨텐츠가 존재하는 경우 제3어플리케이션(433)으로부터 fileuri(file uniform resource identifier) 를 이용하여 제1컨텐츠를 수신할 수 있다. fileuri 는 제1컨텐츠 파일의 고유 식별자를 의미할 수 있다. 제2어플리케이션(432)은 수신된 제1컨텐츠를 제1어플리케이션(431) 상으로 전달할 수 있다.
다양한 실시예에 따르면, 전자 장치(400)의 제1어플리케이션(431)은 제2어플리케이션(432)으로부터 제1컨텐츠를 수신하고, 이를 동기화시킬 수 있다. 프로세서(410)는 제1컨텐츠를 동기화시켜 디스플레이(420) 상에 표시할 수 있다. 또한, 프로세서(410)는 외부 장치(405)에서 저장된 제1컨텐츠를 전자 장치(400)에서 사용할 수 있도록 제어할 수 있다. 또한, 전자 장치(400) 상에서는 상대적으로 작은 디스플레이(420)의 크기로 인해 사용자 학습 단어 및/또는 사용자 정의 단축어에 대해 등록, 수정 또는 삭제 작업을 진행하기 어려울 수 있다. 전자 장치(400)는 제1어플리케이션(431)을 이용하여 외부 장치(405) 상에서 사용자 학습 단어 및/또는 사용자 정의 단축어에 대해 등록, 수정 또는 삭제 작업을 진행하고, 이를 전자 장치(400) 상에서 동기화하여 사용할 수 있다.
다양한 실시예들에 따르면, 프로세서(410)는 외부 장치(405)와 전자 장치(400)를 연결하고, 외부 장치(405)로부터 어플리케이션과 연동 가능한 자동완성 텍스트(text) 입력 정보를 획득하고, 획득한 자동완성 텍스트(text) 입력 정보를 제1어플리케이션(431)과 동기화하고, 디스플레이(420)를 이용해 자동완성 텍스트(text) 입력 정보에 기반한 추천 단어를 표시하도록 제어할 수 있다.
다양한 실시예들에 따르면, 프로세서(410)는 외부 장치(405) 상에서 자동완성 텍스트(text) 입력 정보가 변경되는 경우 변경 내용을 인지하고, 실시간으로 전자 장치(400)로 전달할 수 있다.
도 5a 및 도 5b는 비교 실시예에 따른 웨어러블 장치의 단어 입력 과정을 나타낸 것이다.
도 5a에 따르면 전자 장치(501)는 웨어러블(wearable)기기로서 사용자의 신체에 착용될 수 있다. 전자 장치(501)는 디스플레이(420)를 포함할 수 있으며, 사용자의 터치 입력을 이용하여 단어 또는 문자를 입력 받을 수 있다. 디스플레이(420)의 형태는 전자 장치(501)처럼 원형으로 한정되는 것은 아니며, 전자 장치(502)처럼 사각형의 형태 외에도 다양한 형태를 포함할 수 있다. 그러나 디스플레이(420)는 스마트폰이나 태블릿 PC 상의 디스플레이와 비교하여 상대적으로 크기가 작을 수 있다. 사용자는 작은 디스플레이(420)의 크기로 인하여 단어나 문자를 입력하기 어려울 수 있다. 그리고 웨어러블(wearable)기기는 자주 입력하는 단어 정보나 단축어가 기록되어 있지 않을 수 있다. 이 경우 사용자는 자주 사용하는 단어(예:hello world!, forever)에 대해서도 작은 디스플레이(420)를 이용하여 모든 글자를 입력해야만 하는 불편함을 겪을 수 있다.
도 5b에 따르면, 외부 장치(405)는 단말의 키보드(510) 내에서 제1컨텐츠를 표시할 수 있다. 제1컨텐츠는 사용자가 사용하는 단어 또는 단축어를 저장한 사용자 정의 단축어 데이터 및/또는 사용자가 자주 입력한 단어에 대해 프로그램 자체적으로 학습을 통해 데이터로 추출하여 추천 단어로 표시하는 사용자 데이터를 포함할 수 있다. 예를 들어, 사용자가 외부 장치(405) 상에 '삼'이라는 단어를 입력하는 경우 외부 장치(405)는 사용자가 이전에 사용한 이력이 있는 '삼성전자, 삼성, 삼전' 등의 단어 또는 단축어를 추천 영역(520b) 상에 제시할 수 있다. 또는 사용자가 '삼'이라는 단어를 '삼성전자, 삼성, 삼전' 이라는 단어의 단축어로 정의한 경우 외부 장치(405)는 사용자가 저장해 둔 단축어를 추천 영역(520b) 상에 표시할 수 있다. 이후 외부 장치(405)는 사용자에 의해 선택된 추천 단어를 단어 표시 영역(530)에 표시할 수 있다.
그러나 비교 실시예에 따른 도 5b의 전자 장치(400)는 외부 장치(405)와 동기화되지 않아 삼성전자, 삼성, 삼전' 등의 단어 또는 단축어를 추천 영역(520a) 상에 제시하기 어려울 수 있다. 또한, 사용자가 자주 사용하는 단어 또는 단축어와 별개의 단어들(예: 난, 아, 오늘)을 추천 영역(520a)에 표시할 수 있다. 이로 인해 사용자는 외부 장치(405)에 단어를 입력할 때와 비교하여 불편함을 느낄 수 있다.
본 문서에 따른 전자 장치(400)는 외부 장치(405)와 사용자 단어 데이터를 동기화하여 외부 장치(405)와 동일한 추천 단어 및 사용자 경험을 제공할 수 있다. 이하에서는 외부 장치(405)와 사용자 단어 데이터를 동기화하기 위한 전자 장치(400) 및 전자 장치(400)의 자동 완성 텍스트 입력 방법에 대해 설명될 것이다.
일 실시예에 따라, 도 5a 내지 도 9b에서는, 전자 장치(400)가 웨어러블 장치이고, 외부 장치(405)가 스마트 폰인 것으로 도시하였으나, 다양한 실시예들은 이에 제한되지 않을 수 있다. 전자 장치(400)와 외부 장치(405)는, 도 2에 예시한 바와 같이, 서로 간이 무선 통신이 가능한 다양한 디바이스를 포함할 수 있다. 일 예로, 전자 장치(400)는 사용자에게 착용된 상태의 웨어러블 장치이고, 외부 장치(405)는 사용자가 조작 중인 스마트 폰일 수 있다. 다른 예로, 전자 장치(400)는 TV 또는 디스플레이 장치이고, 외부 장치(405)는 사용자가 조작 중인 스마트 폰일 수 있다. 이에 대한 다양한 실시예들은 도 12a 내지 도12e에서 설명될 것이다.
도 6은 다양한 실시예들에 따른 전자 장치를 이용하여 외부 장치(405)와 연결 서비스를 개시하는 상황을 도시한 것이다.
일 실시예에 따라, 도 6에 도시된 바와 같이, 사용자는 전자 장치(400)를 이용하여 무선 연결 설정에 관련된 어플리케이션을 실행할 수 있다. 전자 장치(400)는 사용자의 어플리케이션 실행 요청에 응답하여, 어플리케이션에 관련된 사용자 인터페이스(또는 실행 화면)를 디스플레이(420)를 통해 제공할 수 있다. 일 실시예에 따르면, 전자 장치(400)는 어플리케이션 실행에 기반하여, 내부적으로(또는 백그라운드(background) 동작으로) 주변의 외부 장치(405)를 탐색하고, 탐색된 주변의 외부 장치(405)에 관련된 정보를 리스트로 포함하는 사용자 인터페이스를 사용자에게 제공할 수 있다.
일 실시예에 따라, 사용자는 전자 장치(400)를 통해 제공된 사용자 인터페이스에 기반하여 외부 장치(405)와 연결을 위한 사용자 입력을 수행할 수 있다. 예를 들면, 사용자는 리스트에서 특정 외부 장치(405)에 대응하는 아이콘을 선택(예: 터치)하여 특정 외부 장치(405)와의 연결 서비스(600)를 실행(예: 제1 연결 방식)하도록 할 수 있다. 어떤 실시예에 따르면, 사용자는 특정 외부 장치(405)에 대해 프로세스 간 직접 연결하거나 또는 중간 프로세스(예: 도 4의 제2어플리케이션(432))를 거쳐 간접적으로 연결 서비스(600)를 실행하도록 할 수도 있다.
일 실시예에서, 제1연결 방식은, 예를 들면, 사용자가 탐색된 외부 장치 중 어느 하나의 외부 장치를 지정하고, 지정된 외부 장치(405)의 입력 기능 프로세스와 전자 장치(400)의 입력 기능 프로세스 사이를 직접적으로 연결하는 방식일 수 있다. 일 실시예에서, 제2연결 방식은, 예를 들면, 사용자가 탐색된 외부 장치 중 어느 하나의 외부 장치를 지정하고, 지정된 외부 장치와, 중간 프로세스(예: 도 4의 제2어플리케이션(432))를 이용하여 간접적으로 연결하는 방식을 의미할 수 있다.
일 실시예에 따르면, 전자 장치(400)는 사용자 입력에 기반하여 연결 서비스(600) 개시를 감지하는 경우, 초대 메시지(invite message)를 외부 장치(405)로 전송할 수 있고, 외부 장치(405)로부터 초대 메시지에 대응하는 응답 메시지를 수신할 수 있다. 일 실시예에 따라, 전자 장치(400)는 외부 장치(405)로부터 응답 메시지를 수신하는 경우, 근접 유도 가이드에 관련된 제1 사용자 인터페이스를 사용자에게 제공할 수 있다.
도 7a 내지 도 7c는 다양한 실시예들에 따른 전자 장치 및 외부 장치 간 사용자 단어 데이터를 송신 및 수신하는 과정을 나타낸 것이다.
도 7a에 따르면, 외부 장치(405) 상의 제2어플리케이션(432)은 페치(fetch)동작을 수행할 수 있다. 페치(fetch)동작은 제1동작(예: text shortcut 동작), 제2동작(예: 사용자 데이터 모델(user data model) 수집 동작) 또는 제3동작(예: 쿼리(query) 요청 전달 동작) 중 적어도 어느 하나를 포함할 수 있다. 각 동작에 대해서는 앞선 도 4에서 설명된 바 있다.
다양한 실시예에 따르면, 제3어플리케이션(433)은 제2어플리케이션(432)의 페치(fetch)동작에 대응하여 제2어플리케이션(432) 상으로 제1컨텐츠를 전송할 수 있다. 제1컨텐츠는 사용자 데이터 및/또는 사용자 정의 단축어 데이터(text shortcut data)를 포함할 수 있다. 사용자 데이터(user data)는 사용자가 설정 상으로 따로 정의하지는 않았으나 자주 사용하는 단어에 대한 데이터를 프로그램이 수집하고 스스로 학습하여 완성 단어로 추천하는 데이터를 의미할 수 있다. 또한 사용자 정의 단축어 데이터(text shortcut data)는 사용자가 설정한 단축어 및 단축어에 대응하는 완성된 단어를 의미할 수 있다.
도 7b에 따르면, 외부 장치(405) 상의 제3어플리케이션(433)은 제2어플리케이션(432)으로부터 페치(fetch)동작에 대한 요청이 있는지 판단할 수 있다. 페치(fetch)동작에 대한 요청이 있는 경우 제3어플리케이션(433)은 우선 사용자 정의 단축어(text shortcut)에 대한 처리 요청이 있는지 판단할 수 있다. 사용자 정의 단축어(text shortcut)에 대한 처리 요청이 있는 경우 제3어플리케이션(433)은 사용자 정의 단축어(text shortcut)의 데이터 베이스(DB)를 이용하여 요청된 사용자 정의 단축어(text shortcut) 데이터를 제2어플리케이션(432) 상으로 전송할 수 있다.
또는 사용자 정의 단축어(text shortcut) 정보에 대한 처리 요청은 없으나 사용자 데이터에 대한 요청이 있는 경우 제3어플리케이션(433)은 예측 엔진(prediction engine)상에서 사용자 데이터(user data)를 추출하여 제2어플리케이션(432) 상으로 전송할 수 있다.
도 7c에 따르면, 제3어플리케이션(433)은 제2어플리케이션(432) 상으로 요청된 페치(fetch)동작에 대응하여 제1컨텐츠를 전송할 수 있다. 제2어플리케이션(432)은 제3어플리케이션(433)으로부터 전송 신호를 수신하고, 제1컨텐츠가 존재하는지 판단할 수 있다. 제2어플리케이션(432)은 제1컨텐츠가 존재하는 경우 제3어플리케이션(433)으로부터 fileuri(file uniform resource identifier) 를 이용하여 제1컨텐츠를 수신할 수 있다. fileuri 는 제1컨텐츠 파일의 고유 식별자를 의미할 수 있다. 제2어플리케이션(432)은 수신한 제1컨텐츠에 대하여 특정 함수(예: toAsset())를 이용하여 제1어플리케이션(431) 상으로 전달할 수 있도록 변환할 수 있다. 특정 함수(예: toAsset())는 큰 데이터를 작은 크기로 묶을 때 사용될 수 있다. 제2어플리케이션(432)은 파일 단위의 큰 정보를 보유하는 제1컨텐츠를 특정 단위(예: asset단위)로 나누어 담을 수 있다. 제2어플리케이션(432)은 만들어진 특정 단위(예: asset단위)의 묶음을 제1어플리케이션(431) 상으로 전달할 수 있다. 제1어플리케이션(431)은 asset단위로 제1컨텐츠를 수신할 수 있다.
다양한 실시예에 따르면, 제2어플리케이션(432)은 페치(fetch)동작을 수행할 수 있다. 페치(fetch)동작은 제1동작(예: text shortcut 동작), 제2동작(예: 사용자 데이터 모델(user data model) 수집 동작) 또는 제3동작(예: 쿼리(query) 요청 전달 동작) 중 적어도 어느 하나를 포함할 수 있다.
다양한 실시예에 따르면, 제3어플리케이션(433)은 제2어플리케이션(432)의 페치(fetch)동작에 대응하여 제2어플리케이션(432) 상으로 제1컨텐츠를 전송할 수 있다. 제1컨텐츠는 사용자 데이터 및/또는 사용자 정의 단축어 데이터(text shortcut data)를 포함할 수 있다. 다양한 실시예에 따르면, 전자 장치(400)의 제1어플리케이션(431)은 제2어플리케이션(432)으로부터 제1컨텐츠를 수신하고, 이를 동기화시킬 수 있다. 프로세서(410)는 제1컨텐츠를 동기화시켜 디스플레이(420) 상에 표시할 수 있다.
도 8은 다양한 실시예들에 따른 외부 장치의 단축어 입력 화면을 도시한 것이다.
일 실시예에 따르면, 외부 장치(405)는 사용자가 정의하는 단축어를 저장할 수 있다. 그림 810에 따르면, 사용자가 단축어를 입력한 상황에서 외부 장치(405)는 단축어에 대응하는 단어를 사용자에게 추천 단어로 제시할 수 있다. 사용자는 제시된 추천 단어를 선택하거나 또는 입력한 단축어를 유지할 수 있다. 예를 들어, 외부 장치(405)는 사용자로부터 'hbd'- honeyboard로 대응되는 단축어를 입력받아 저장할 수 있다. 이후 사용자가 'hbd'를 입력하면 'honeyboard'라는 완성된 단어 또는 저장된 단어를 사용자에게 추천할 수 있다.
또한, 전자 장치(400) 상에는 'keybaord' 메뉴 및 'Text shortcuts' 메뉴가 존재할 수 있다. 사용자가 'Text shortcuts' 메뉴를 선택 시 전자 장치(400)는 외부 장치의 'Text shortcuts' setting page 로 화면을 이동시킬 수 있다. 전자 장치(400) 이러한 과정을 진행하여 외부 장치(405)의 단축어(text shortcuts) DB 정보를 받아 전자 장치(400) 상의 단축어(text shortcuts) DB와 동기화시킬 수 있다. 또한, 외부 장치(405)의 단축어(text shortcuts) DB 정보가 수정되는 경우(예: 외부 장치에서 단축어 추가, 삭제 또는 편집) 전자 장치(400)는 수정된 단축어(text shortcuts) DB 정보를 수신하고, 전자 장치(400) 상의 단축어(text shortcuts) DB와 동기화시킬 수 있다
도 9a 내지 도 9c는 다양한 실시예들에 따른 전자 장치 상에서 사용자 단어를 동기화하는 과정 및 그 결과를 도시한 것이다.
일 실시예에 따르면, 전자 장치(400) 는 외부 장치(405)와 제1연결 방식(예:직접 연결) 또는 제2연결 방식(예: 간접 연결)을 이용하여 연결 될 수 있다. 일 실시예에서, 제1연결 방식은, 사용자가 탐색된 외부 장치 중 어느 하나의 외부 장치를 지정하고, 지정된 외부 장치(405)의 입력 기능 프로세스와 전자 장치(400)의 입력 기능 프로세스 사이를 직접적으로 연결하는 방식일 수 있다. 일 실시예에서, 제2연결 방식은, 사용자가 탐색된 외부 장치 중 어느 하나의 외부 장치를 지정하고, 지정된 외부 장치와, 중간 프로세스(예: 도 4의 제2어플리케이션(432))를 이용하여 간접적으로 연결하는 방식을 의미할 수 있다.
전자 장치(400)의 키보드는 자체적인 단축어(text shortcut) 관리 기능이 존재하지 않을 수 있다. 이 경우 전자 장치(400)는 외부 장치(405)의 키보드에서 사용되는 단축어(text shortcut) 를 넘겨 받아 전자 장치(400)의 키보드 상에서 활용할 수 있다. 다만, 전자 장치(400)의 키보드 및 외부 장치(405)의 키보드 간 직접 통신을 하기 어려울 수 있으며, 이 경우 중간 프로세스(예: 갤럭시 워치 CompanionApp)을 이용하여 간접적으로 통신할 수 있다.
다양한 실시예에 따르면, 전자 장치(400)의 제1어플리케이션(431)은 제2어플리케이션(432)으로부터 제1컨텐츠를 수신하고, 이를 동기화시킬 수 있다.
도 9b에 따르면, 외부 장치(405)는 단말의 키보드(910) 내에서 사용자가 자주 사용하는 단어 또는 단축어를 저장하거나, 사용자가 입력한 단어에 대해 학습을 통해 데이터로 추출하여 추천 단어를 표시할 수 있다. 예를 들어, 사용자가 외부 장치(405) 상에 '삼'이라는 단어를 입력하는 경우 외부 장치(405)는 사용자가 이전에 사용한 이력이 있는 '삼성전자, 삼성, 삼전' 등의 단어 또는 단축어를 추천 영역(920b) 상에 제시할 수 있다. 이후 외부 장치(405)는 사용자에 의해 선택된 추천 단어를 단어 표시 영역(930)에 표시할 수 있다. 전자 장치(400)는 제2어플리케이션(432)으로부터 제1컨텐츠를 수신하고, 이를 동기화할 수 있다. 전자 장치(400)는 외부 장치(405)와 마찬가지로 사용자가 이전에 사용한 이력이 있는 '삼성전자, 삼성, 삼전' 등의 단어 또는 단축어를 추천 영역(920a) 상에 제시할 수 있다.
도 9c에 따르면, 전자 장치(400) 및 외부 장치(405)의 디스플레이는 입력된 문자를 나타내는 문자 표시 영역(930), 입력할 문자를 완성하여 사용자에게 제시하는 문자 추천 영역(920) 및 문자 자판 영역(910)을 포함할 수 있다. 예를 들어, 사용자가 문자 자판 영역(910)을 이용하여 문자 표시 영역(930) 상에 'hbd'라는 문자를 입력한 경우, 전자 장치(400)는 학습된 사용자 단어 또는 단축어를 이용하여 문자 추천 영역(920) 상에 'honeyboard'라는 완성된 단어를 추천 단어로 표시할 수 있다.
도 10은 다양한 실시예들에 따른 전자 장치의 단축어 변경 방법을 도시한 것이다.
일 실시예에 따르면, 전자 장치(400)는 제1어플리케이션(431)을 이용하여 외부 장치(405)상의 제1컨텐츠(예: 사용자 정의 단축어 데이터 또는 사용자 데이터)를 획득할 수 있다. 또한, 외부 장치(405)의 제1컨텐츠가 변경되는 경우 전자 장치(400)는 이를 반영하여 동기화시킬 수 있다.
예를 들어, 제1어플리케이션(431)은 외부 장치(405) 상에서 삭제되거나 추가된 사용자 정의 단축어(text shortcut)가 존재하는지 확인할 수 있다. 삭제되거나 추가된 사용자 정의 단축어(text shortcut)가 존재하는 경우 제1어플리케이션(431)은 제2어플리케이션(432)으로 변경된 사용자 정의 단축어(text shortcut) 데이터를 요청할 수 있다. 제2어플리케이션(432)은 제1어플리케이션(431)으로부터 데이터를 요청 받아 제3어플리케이션(433) 상으로 사용자 정의 단축어 데이터를 전달할 수 있다. 제3어플리케이션(433)은 제2어플리케이션(432) 상으로 삭제되거나 추가된 사용자 정의 단축어(text shortcut)에 대한 정보를 포함하는 변경된 사용자 정의 단축어(text shortcut) 데이터를 보낼 수 있다. 제2어플리케이션(432)은 변경된 사용자 정의 단축어(text shortcut) 데이터를 수신하여 확인 후 제1어플리케이션(431)으로 전달할 수 있다. 제1어플리케이션(431)은 변경된 단축어(text shortcut) 데이터를 수신하여 전자 장치(400)의 키보드 프로세스와 동기화시킬 수 있다. 전자 장치(400)는 사용자 데이터에 대해서도 위의 과정을 거쳐 외부 장치(405)의 키보드 프로세스와 동기화시킬 수 있다.
도 11은 다양한 실시예들에 따른 전자 장치 상에서 키보드가 아닌 새로운 입력 방식을 통한 단어 입력 과정을 도시한 것이다.
일 실시예에 따르면, 프로세서(예: 도 4의 프로세서(410))는 문자 입력 모드에서, 입력된 문자를 나타내는 문자 표시 영역(930), 입력할 문자를 완성하여 사용자에게 제시하는 문자 추천 영역(920) 및 문자 자판 영역(910)이 디스플레이(예: 도 4의 디스플레이(420)) 상에 표시되도록 제어하며, 문자 표시 영역(930) 상에 터치에 의한 필기 입력이 인식되는 경우, 문자 표시 영역(930) 상에 입력에 따른 궤적을 표시하도록 제어하며, 필기 입력에 대응하는 문자를 표시하도록 제어하거나, 표시 문자에 대응하는 추천 문자를 문자 추천 영역(920)에 표시하도록 제어할 수 있다. 문자 자판 영역(910)은 도 9b 상의 전자 장치(400)처럼 키보드 형태로 표시될 수도 있고, 사용자의 터치 입력 여부에 따라 도 11 상의 전자 장치(400)처럼 필기 입력이 가능한 빈 공간을 제공할 수도 있다.
일 실시예에 따르면, 프로세서(410)는 문자 표시 영역(930) 상에 터치에 기반한 필기 입력이 있는 경우, 문자 자판 영역(910) 내의 문자 자판 입력을 비활성화시키고, 디스플레이(420) 상에서 문자 자판 영역(910)을 숨기고 문자 표시 영역(920)과 문자 추천 영역(930)만을 표시하도록 제어할 수 있다.
일 실시예에 따르면, 프로세서(410)는 터치에 의한 필기 입력이 있는 경우 필기 입력에 대응하는 문자를 문자 표시 영역(930)에 표시되도록 제어하고, 문자 추천 영역(920)에 후속으로 입력 가능한 문자들을 표시하도록 제어할 수 있다.
도 12a 내지 도 12e는 다양한 실시예들에 따른 외부 장치 간 연결 및 사용자 단어의 동기화 과정을 도시한 것이다.
일 실시예에 따르면, 전자 장치는 스마트 폰(smartphone), IoT(internet of things) 기기, 스마트 카(smart car), AR 기기, VR기기, MR기기, 데스크 탑, 노트북, 태블릿 PC 중 적어도 어느 하나를 포함할 수 있다.
도 12a에 따르면, 전자 장치(400)는 외부 장치(405)와 연결되어 자동완성 텍스트(text) 입력 정보를 수신하고, 동기화시킬 수 있다. 예를 들어, 전자 장치(400)는 냉장고를 포함할 수 있다. 전자 장치(400)의 종류는 냉장고로 한정되는 것은 아니며 외부 장치(405)와 유, 무선으로 연결될 수 있는 IoT(internet of things) 기기라면 무엇이든 포함될 수 있다. 전자 장치(400)는 디스플레이 및 단어 입력을 위한 키보드 영역(1200)을 포함할 수 있다. 이 경우 전자 장치(400)는 도 6 내지 도 10에서 설명된 자동완성 텍스트(text) 입력 정보의 동기화 과정을 거쳐 사용자에게 추천 단어를 제공할 수 있다.
도 12b에 따르면, 전자 장치(400)는 외부 장치(405)와 연결되어 자동완성 텍스트(text) 입력 정보를 수신하고, 동기화시킬 수 있다. 예를 들어, 전자 장치(400)는 스마트 카(smart car)를 포함할 수 있다. 전자 장치(400)는 디스플레이 및 단어 입력을 위한 키보드 영역(1200)을 포함할 수 있다. 스마트 카(smart car)상의 키보드 영역(1200)은 예를 들어, 네비게이션 상에 목적지를 입력하거나, 스마트 폰과 연동되어 메시지를 입력하는 방식으로 활용될 수 있다. 이 경우 전자 장치(400)는 도 6 내지 도 10에서 설명된 자동완성 텍스트(text) 입력 정보의 동기화 과정을 거쳐 사용자에게 추천 단어를 제공할 수 있다.
도 12c에 따르면, 전자 장치(400)는 외부 장치(405)와 연결되어 자동완성 텍스트(text) 입력 정보를 수신하고, 동기화시킬 수 있다. 예를 들어, 전자 장치(400)는 스마트 TV를 포함할 수 있다. 전자 장치(400)는 디스플레이 및 단어 입력을 위한 키보드 영역(1200)을 포함할 수 있다. 스마트 TV상의 키보드 영역(1200)은 예를 들어, 채널 검색 또는 컨텐츠(영화, 드라마 등) 검색에 활용될 수 있다. 이 경우 전자 장치(400)는 도 6 내지 도 10에서 설명된 자동완성 텍스트(text) 입력 정보의 동기화 과정을 거쳐 사용자에게 추천 단어를 제공할 수 있다.
도 12d에 따르면, 전자 장치(400)는 외부 장치(405)와 연결되어 자동완성 텍스트(text) 입력 정보를 수신하고, 동기화시킬 수 있다. 예를 들어, 전자 장치(400)는 AR(augmented reality), VR(virtual reality) 및 MR(mixed reality) 기기를 포함할 수 있다. 전자 장치(400)는 디스플레이 및 단어 입력을 위한 키보드 영역(1200)을 가상 공간 상에 표시할 수 있다. AR(augmented reality), VR(virtual reality) 및 MR(mixed reality) 기기 상의 키보드 영역(1200)은 글래스(glass) 상에 표시될 수 있다. 이 경우 전자 장치(400)는 도 6 내지 도 10에서 설명된 자동완성 텍스트(text) 입력 정보의 동기화 과정을 거쳐 사용자에게 추천 단어를 제공할 수 있다.
도 12e에 따르면, 전자 장치(400)는 외부 장치(405)와 연결되어 자동완성 텍스트(text) 입력 정보를 수신하고, 동기화시킬 수 있다. 예를 들어, 전자 장치(400)는 태블릿 PC 또는 노트북을 포함할 수 있다. 전자 장치(400)는 디스플레이 및 단어 입력을 위한 키보드 영역(1200)을 포함할 수 있다. 이 경우 전자 장치(400)는 도 6 내지 도 10에서 설명된 자동완성 텍스트(text) 입력 정보의 동기화 과정을 거쳐 사용자에게 추천 단어를 제공할 수 있다.
도 13은 다양한 실시예들에 따른 전자 장치의 사용자 단어 동기화 과정을 순서대로 도시한 것이다.
동작 1310에서 전자 장치(예: 도 4의 전자 장치(400))는 외부 장치(예: 도 5의 외부 장치(500))와 연결할 수 있다. 앞선 도 6에서 설명된 것처럼, 사용자는 전자 장치(400)를 이용하여 무선 연결 설정에 관련된 어플리케이션을 실행할 수 있다. 전자 장치(400)는 사용자의 어플리케이션 실행 요청에 응답하여, 어플리케이션에 관련된 사용자 인터페이스(또는 실행 화면)를 디스플레이(420)를 통해 제공할 수 있다. 일 실시예에 따르면, 전자 장치(400)는 어플리케이션 실행에 기반하여, 내부적으로(또는 백그라운드(background) 동작으로) 주변의 외부 장치(405)를 탐색하고, 탐색된 주변의 외부 장치(405)에 관련된 정보를 리스트로 포함하는 사용자 인터페이스를 사용자에게 제공할 수 있다.
일 실시예에 따라, 사용자는 전자 장치(400)를 통해 제공된 사용자 인터페이스에 기반하여 외부 장치(405)와 연결을 위한 사용자 입력을 수행할 수 있다. 예를 들면, 사용자는 리스트에서 특정 외부 장치(405)에 대응하는 아이콘을 선택(예: 터치)하여 특정 외부 장치(405)와의 연결 서비스(600)를 실행(예: 제1 연결 방식)하도록 할 수 있다. 어떤 실시예에 따르면, 사용자는 특정 외부 장치(405)의 지정 없이, 탐색된 모든 외부 장치(405)에 대해 연결 서비스(600)를 실행(예: 제2 연결 방식)하도록 할 수도 있다. 일 실시예에서, 제1 연결 방식은, 예를 들면, 사용자가 탐색된 외부 장치 중 어느 하나의 외부 장치를 지정하고, 지정된 외부 장치와 연결하는 방식일 수 있다. 일 실시예에서, 제2 연결 방식은, 예를 들면, 사용자가 탐색된 외부 장치 중 어느 하나의 외부 장치를 지정하지 않고, 탐색된 모든 외부 장치에 기반하여 연결 서비스를 개시하고, 연결 서비스를 수행하는 동안에(예: 제1 사용자 인터페이스가 제공된 동안) 사용자가 연결하고자 하는 외부 장치(405)와 근접하여 연결하는 방식일 수 있다.
동작 1320에서 전자 장치(400)는 외부 장치(405)로부터 어플리케이션과 연동 가능한 자동완성 텍스트(text) 입력 정보를 획득할 수 있다. 도 7a 내지 도 7c에서 설명된 것처럼, 외부 장치(405) 상의 제2어플리케이션(432)은 페치(fetch)동작을 수행할 수 있다. 페치(fetch)동작은 제1동작(예: text shortcut 동작), 제2동작(예: 사용자 데이터 모델(user data model) 수집 동작) 또는 제3동작(예: 쿼리(query) 요청 전달 동작) 중 적어도 어느 하나를 포함할 수 있다. 여기서 제1동작은 사용자에 의해 정의된 단축어(text shortcut) 데이터의 수집을 준비하는 동작을 의미할 수 있다. 제2동작은 사용자 데이터(user data)의 수집을 준비하는 동작을 의미할 수 있다. 제3동작은 사용자에 의해 정의된 단축어(text shortcut) 데이터 및/또는 사용자 데이터(user data)를 제3어플리케이션(433) 상으로 요청하는 동작을 의미할 수 있다. 쿼리(query)는 서버 또는 데이터 베이스에 정보를 요청하는 행위를 의미할 수 있다.
다양한 실시예에 따르면, 제3어플리케이션(433)은 제2어플리케이션(432)의 페치(fetch)동작에 대응하여 제2어플리케이션(432) 상으로 제1컨텐츠를 전송할 수 있다. 제1컨텐츠는 사용자 데이터 및/또는 사용자 정의 단축어 데이터(text shortcut data)를 포함할 수 있다. 사용자 데이터(user data)는 사용자가 설정 상으로 따로 정의하지는 않았으나 자주 사용하는 단어에 대한 데이터를 프로그램이 수집하고 스스로 학습하여 완성 단어로 추천하는 데이터를 의미할 수 있다. 또한 사용자 정의 단축어 데이터(text shortcut data)는 사용자가 설정한 단축어 및 단축어에 대응하는 완성된 단어를 의미할 수 있다.
외부 장치(405) 상의 제3어플리케이션(433)은 제2어플리케이션(432)으로부터 페치(fetch)동작에 대한 요청이 있는지 판단할 수 있다. 페치(fetch)동작에 대한 요청이 있는 경우 제3어플리케이션(433)은 우선 사용자 정의 단축어(text shortcut)에 대한 처리 요청이 있는지 판단할 수 있다. 사용자 정의 단축어(text shortcut)에 대한 처리 요청이 있는 경우 제3어플리케이션(433)은 사용자 정의 단축어(text shortcut)의 데이터 베이스(DB)를 이용하여 요청된 사용자 정의 단축어(text shortcut) 데이터를 제2어플리케이션(432) 상으로 전송할 수 있다.
또는 사용자 정의 단축어(text shortcut) 정보에 대한 처리 요청은 없으나 사용자 데이터에 대한 요청이 있는 경우 제3어플리케이션(433)은 예측 엔진(prediction engine)상에서 사용자 데이터(user data)를 추출하여 제2어플리케이션(432) 상으로 전송할 수 있다.
제3어플리케이션(433)은 제2어플리케이션(432) 상으로 요청된 페치(fetch)동작에 대응하여 제1컨텐츠를 전송할 수 있다. 제2어플리케이션(432)은 제3어플리케이션(433)으로부터 전송 신호를 수신하고, 제1컨텐츠가 존재하는지 판단할 수 있다. 제2어플리케이션(432)은 제1컨텐츠가 존재하는 경우 제3어플리케이션(433)으로부터 fileuri(file uniform resource identifier) 를 이용하여 제1컨텐츠를 수신할 수 있다. fileuri 는 제1컨텐츠 파일의 고유 식별자를 의미할 수 있다. 제2어플리케이션(432)은 수신된 제1컨텐츠를 제1어플리케이션(431) 상으로 전달할 수 있다.
동작 1330에서 전자 장치(400)는 획득한 자동완성 텍스트(text) 입력 정보를 어플리케이션과 동기화시킬 수 있다.
다양한 실시예에 따르면, 제3어플리케이션(433)은 제2어플리케이션(432)의 페치(fetch)동작에 대응하여 제2어플리케이션(432) 상으로 제1컨텐츠를 전송할 수 있다. 제1컨텐츠는 사용자 데이터 및/또는 사용자 정의 단축어 데이터(text shortcut data)를 포함할 수 있다. 다양한 실시예에 따르면, 전자 장치(400)의 제1어플리케이션(431)은 제2어플리케이션(432)으로부터 제1컨텐츠를 수신하고, 이를 동기화시킬 수 있다. 프로세서(410)는 제1컨텐츠를 동기화시켜 디스플레이(420) 상에 표시할 수 있다.
다양한 실시예에 따르면, 전자 장치(400)의 제1어플리케이션(431)은 제2어플리케이션(432)으로부터 제1컨텐츠를 수신하고, 이를 동기화시킬 수 있다.
동작 1340에서 전자 장치(400)는 디스플레이를 이용해 자동완성 텍스트(text) 입력 정보에 기반한 추천 단어를 표시할 수 있다.
일 실시예에 따르면, 프로세서(예: 도 4의 프로세서(410))는 문자 입력 모드에서, 입력된 문자를 나타내는 문자 표시 영역(예: 도 9의 문자 표시 영역(930)), 입력할 문자를 완성하여 사용자에게 제시하는 문자 추천 영역(예: 도 9의 문자 추천 영역(920)) 및 문자 자판 영역(예: 도 9의 문자 자판 영역(910))이 디스플레이(예: 도 4의 디스플레이(420)) 상에 표시되도록 제어할 수 있다.
외부 장치(405)는 단말의 키보드(예: 도 9의 키보드(910)) 내에서 사용자가 자주 사용하는 단어 또는 단축어를 저장하거나, 사용자가 입력한 단어에 대해 학습을 통해 데이터로 추출하여 추천 단어를 표시할 수 있다. 예를 들어, 사용자가 외부 장치(405) 상에 '삼'이라는 단어를 입력하는 경우 외부 장치(405)는 사용자가 이전에 사용한 이력이 있는 '삼성전자, 삼성, 삼전' 등의 단어 또는 단축어를 추천 영역(920b) 상에 제시할 수 있다. 이후 외부 장치(405)는 사용자에 의해 선택된 추천 단어를 단어 표시 영역(930)에 표시할 수 있다. 전자 장치(400)는 제2어플리케이션(432)으로부터 사용자의 컨텐츠 데이터를 수신하고, 이를 동기화할 수 있다. 전자 장치(400)는 외부 장치(405)와 마찬가지로 사용자가 이전에 사용한 이력이 있는 '삼성전자, 삼성, 삼전' 등의 단어 또는 단축어를 추천 영역(920a) 상에 제시할 수 있다.
또한, 전자 장치(400) 및 외부 장치(405)의 디스플레이는 입력된 문자를 나타내는 문자 표시 영역(930), 입력할 문자를 완성하여 사용자에게 제시하는 문자 추천 영역(920) 및 문자 자판 영역(910)을 포함할 수 있다. 예를 들어, 사용자가 문자 자판 영역(910)을 이용하여 문자 표시 영역(930) 상에 'hbd'라는 문자를 입력한 경우, 전자 장치(400)는 학습된 사용자 단어 또는 단축어를 이용하여 문자 추천 영역(920) 상에 'honeyboard'라는 완성된 단어를 추천 단어로 표시할 수 있다.
다양한 실시예들에 따르면, 전자 장치의 자동 완성 텍스트 입력 방법은 전자 장치를 외부 장치와 작동적으로 연결하는 동작, 외부 장치로부터 어플리케이션과 연동 가능한 자동완성 텍스트(text) 입력 정보를 획득하는 동작, 획득한 자동완성 텍스트(text) 입력 정보를 어플리케이션과 동기화하는 동작 및 디스플레이를 이용해 자동완성 텍스트(text) 입력 정보에 기반한 추천 단어를 표시하도록 제어하는 동작을 포함할 수 있다.
일 실시예에 따르면, 프로세서는 외부 장치 상에서 자동완성 텍스트(text) 입력 정보가 변경되는 경우 변경 내용을 인지하고, 실시간으로 전자 장치의 키보드 프로세스로 전달할 수 있다.
일 실시예에 따르면, 자동완성 텍스트(text) 입력 정보의 변경 내용은 사용자 데이터의 추가, 수정 및 삭제 중 적어도 어느 하나를 포함하거나 및/또는 사용자 정의 단축어의 추가, 수정 및 삭제 중 적어도 어느 하나를 포함할 수 있다.
일 실시예에 따르면, 프로세서는 문자 입력 모드에서, 입력된 문자를 나타내는 문자 표시 영역, 입력할 문자를 완성하여 사용자에게 제시하는 문자 추천 영역 및 문자 자판 영역이 디스플레이 상에 표시되도록 제어하며, 문자 표시 영역 상에 터치에 의한 필기 입력이 인식되는 경우, 문자 표시 영역 상에 입력에 따른 궤적을 표시하도록 제어하며, 필기 입력에 대응하는 문자를 표시하도록 제어하거나, 필기 입력에 대응하는 추천 문자를 문자 추천 영역에 표시하도록 제어할 수 있다.
일 실시예에 따르면, 프로세서는 문자 표시 영역 상에 터치에 기반한 필기 입력이 있는 경우, 문자 자판 영역 내의 문자 자판 입력을 비활성화시키고, 디스플레이 상에서 문자 자판 영역을 숨기고 문자 표시 영역과 문자 추천 영역만을 표시하도록 제어할 수 있다.
일 실시예에 따르면, 프로세서는 터치에 의한 필기 입력이 있는 경우 필기 입력에 대응하는 문자를 문자 표시 영역에 표시되도록 제어하고, 문자 추천 영역에 후속으로 입력 가능한 문자들을 표시하도록 제어할 수 있다.
일 실시예에 따르면, 프로세서는 외부 장치의 자동완성 텍스트(text) 입력 정보 및/또는 외부 장치의 키보드 프로세스의 언어 데이터베이스(data base)를 수신하여 전자 장치에서도 사용할 수 있도록 동기화할 수 있다.
일 실시예에 따르면, 자동완성 텍스트(text) 입력 정보에 기반한 추천 단어는 외부 장치에서 사용자가 제1수준 이상의 빈도로 사용하는 단어 및 단축어를 포함할 수 있다.
일 실시예에 따르면, 프로세서는 외부 장치에서 사용자가 제1수준 이상의 빈도로 사용하는 단어 및 단축어를 디스플레이 상에 표시하고, 사용자에게 추천하도록 제어할 수 있다.
일 실시예에 따르면, 전자 장치는 IoT(internet of things) 기기, 스마트 카(smart car), AR 기기, VR기기, MR기기, 데스크 탑, 노트북, 태블릿 PC 중 적어도 어느 하나를 포함할 수 있다.
다양한 실시예들에 따른 전자 장치의 자동 완성 텍스트 입력 방법은 외부 장치의 키보드 프로세스 및 전자 장치의 데이터 수신 매니저가 작동적으로 연결되도록 제어하는 동작, 외부 장치로부터 자동완성 텍스트(text) 입력 정보를 획득하는 동작, 획득한 자동완성 텍스트(text) 입력 정보를 전자 장치의 키보드 프로세스와 동기화하는 동작 및 디스플레이를 이용해 자동완성 텍스트(text) 입력 정보에 기반한 추천 단어를 표시하도록 제어하는 동작을 포함하며, 자동완성 텍스트(text) 입력 정보는 사용자가 자주 사용하는 단어에 대한 데이터를 전자 장치가 수집하고 스스로 학습하여 사용자에게 완성 단어로 추천하는 데이터를 의미하는 사용자 데이터 및/또는 사용자가 설정한 단축어 및 단축어에 대응하는 완성된 단어를 의미하는 사용자 정의 단축어 데이터를 포함할 수 있다.
일 실시예에 따르면, 외부 장치의 키보드 프로세스 및 전자 장치의 데이터 수신 매니저가 작동적으로 연결되도록 제어하는 동작은 페어링(pairing) 과정을 확인하는 동작, 페어링(pairing) 과정이 완료된 경우 전자 장치에 알리는 동작, 키보드 또는 사용자 언어와 관련한 데이터를 수신할 수 있도록 외부 장치에 명령하는 동작 및 페어링(pairing) 과정이 완료된 사실을 내부 메모리에 저장하는 동작을 포함할 수 있다.
일 실시예에 따르면, 외부 장치로부터 자동완성 텍스트(text) 입력 정보를 획득하는 동작은 외부 장치 상에서 자동완성 텍스트(text) 입력 정보가 변경되는 경우 변경 내용을 인지하는 동작 및 실시간으로 변경 내용을 전자 장치의 키보드 프로세스로 전달하는 동작을 포함할 수 있다.
일 실시예에 따르면, 자동완성 텍스트(text) 입력 정보의 변경 내용은 사용자 데이터의 추가, 수정 및 삭제 중 적어도 어느 하나를 포함하거나 및/또는 사용자 정의 단축어의 추가, 수정 및 삭제 중 적어도 어느 하나를 포함할 수 있다.
일 실시예에 따르면, 디스플레이를 이용해 자동완성 텍스트(text) 입력 정보에 기반한 추천 단어를 표시하도록 제어하는 동작은 문자 입력 모드에서, 입력된 문자를 나타내는 문자 표시 영역, 입력할 문자를 완성하여 사용자에게 제시하는 문자 추천 영역 및 문자 자판 영역이 디스플레이 상에 표시되도록 제어하는 동작, 문자 표시 영역 상에 터치에 의한 필기 입력이 인식되는 경우, 문자 표시 영역 상에 입력에 따른 궤적을 표시하도록 제어하는 동작 및 필기 입력에 대응하는 문자를 표시하도록 제어하거나, 필기 입력에 대응하는 추천 문자를 문자 추천 영역에 표시하도록 제어하는 동작을 포함할 수 있다.
일 실시예에 따르면, 문자 표시 영역 상에 터치에 기반한 필기 입력이 있는 경우, 문자 자판 영역 내의 문자 자판 입력을 비활성화시키고 디스플레이 상에서 문자 자판 영역을 숨기고 문자 표시 영역과 문자 추천 영역만을 표시하도록 제어하는 동작을 더 포함할 수 있다.
일 실시예에 따르면, 디스플레이를 이용해 자동완성 텍스트(text) 입력 정보에 기반한 추천 단어를 표시하도록 제어하는 동작은 문자 입력 모드에서, 입력된 문자를 나타내는 문자 표시 영역, 입력할 문자를 완성하여 사용자에게 제시하는 문자 추천 영역 및 문자 자판 영역이 디스플레이 상에 표시되도록 제어하는 동작, 터치에 의한 필기 입력이 있는 경우 필기 입력에 대응하는 문자를 문자 표시 영역에 표시되도록 제어하는 동작 및 문자 추천 영역에 후속으로 입력 가능한 문자들을 표시하도록 제어하는 동작을 포함할 수 있다.
일 실시예에 따르면, 획득한 자동완성 텍스트(text) 입력 정보를 전자 장치의 키보드 프로세스와 동기화하는 동작은 외부 장치의 자동완성 텍스트(text) 입력 정보 및/또는 외부 장치의 키보드 프로세스의 언어 데이터베이스(data base)를 수신하여 전자 장치에서도 사용할 수 있도록 동기화하는 동작을 포함할 수 있다.
일 실시예에 따르면, 자동완성 텍스트(text) 입력 정보에 기반한 추천 단어는 외부 장치에서 사용자가 제1수준 이상의 빈도로 사용하는 단어 및 단축어를 포함하며, 디스플레이를 이용해 자동완성 텍스트(text) 입력 정보에 기반한 추천 단어를 표시하도록 제어하는 동작은 외부 장치에서 사용자가 제1수준 이상의 빈도로 사용하는 단어 및 단축어를 디스플레이 상에 표시하고, 사용자에게 추천하도록 제어하는 동작을 포함할 수 있다.

Claims (15)

  1. 전자 장치에 있어서,
    통신 회로;
    디스플레이;
    인스트럭션들을 저장하는 메모리;및
    상기 통신회로, 상기 디스플레이, 상기 메모리와 작동적으로 연결된 프로세서를 포함하며,
    상기 메모리는, 실행 시에 상기 프로세서가
    상기 통신 회로를 이용하여 외부 장치와 통신 연결을 수립하고,
    상기 외부 장치로부터 자동완성 텍스트(text) 입력 정보를 수신하고,
    수신된 상기 자동완성 텍스트(text) 입력 정보를 상기 전자 장치의 키보드 프로세스에서 사용할 수 있도록 상기 메모리에 저장하고,
    상기 디스플레이를 이용해 상기 메모리에 저장된 상기 자동완성 텍스트(text) 입력 정보에 기반한 추천 단어를 표시하도록 제어하는 인스트럭션들을 저장하며
    상기 자동완성 텍스트(text) 입력 정보는 사용자가 자주 사용하는 단어에 대한 데이터를 상기 전자 장치가 수집하고 스스로 학습하여 사용자에게 완성 단어로 추천하는 데이터를 의미하는 사용자 데이터 또는 사용자가 설정한 단축어 및 단축어에 대응하는 완성된 단어를 의미하는 사용자 정의 단축어 데이터 중 적어도 어느 하나를 포함하는 전자 장치.
  2. 제 1항에 있어서,
    상기 프로세서는
    상기 외부 장치 상에서 상기 자동완성 텍스트(text) 입력 정보가 변경되는 경우 변경 내용을 인지하고, 실시간으로 상기 전자 장치의 키보드 프로세스로 전달하는 전자 장치.
  3. 제 2항에 있어서,
    상기 자동완성 텍스트(text) 입력 정보의 변경 내용은
    사용자 데이터의 추가, 수정 및 삭제 중 적어도 어느 하나를 포함하거나 및/또는
    사용자 정의 단축어의 추가, 수정 및 삭제 중 적어도 어느 하나를 포함하는 전자 장치.
  4. 제 1항에 있어서,
    상기 프로세서는
    문자 입력 모드에서, 입력된 문자를 나타내는 문자 표시 영역, 입력할 문자를 완성하여 사용자에게 제시하는 문자 추천 영역 및 문자 자판 영역이 상기 디스플레이 상에 표시되도록 제어하며,
    상기 문자 표시 영역 상에 터치에 의한 필기 입력이 인식되는 경우, 상기 문자 표시 영역 상에 입력에 따른 궤적을 표시하도록 제어하며,
    상기 필기 입력에 대응하는 문자를 표시하도록 제어하거나, 상기 필기 입력에 대응하는 추천 문자를 상기 문자 추천 영역에 표시하도록 제어하는 전자 장치.
  5. 제 4항에 있어서,
    상기 프로세서는
    상기 문자 표시 영역 상에 터치에 기반한 필기 입력이 있는 경우, 상기 문자 자판 영역 내의 문자 자판 입력을 비활성화시키고,
    상기 디스플레이 상에서 문자 자판 영역을 숨기고 상기 문자 표시 영역과 상기 문자 추천 영역만을 표시하도록 제어하는 전자 장치.
  6. 제 4항에 있어서,
    상기 프로세서는
    상기 터치에 의한 필기 입력이 있는 경우 상기 필기 입력에 대응하는 문자를 상기 문자 표시 영역에 표시되도록 제어하고, 상기 문자 추천 영역에 후속으로 입력 가능한 문자들을 표시하도록 제어하는 전자 장치.
  7. 제 1항에 있어서,
    상기 프로세서는
    상기 외부 장치의 자동완성 텍스트(text) 입력 정보 및/또는 상기 외부 장치의 키보드 프로세스의 언어 데이터베이스(data base)를 수신하여 상기 전자 장치에서도 사용할 수 있도록 동기화하는 전자 장치.
  8. 제 1항에 있어서,
    상기 자동완성 텍스트(text) 입력 정보에 기반한 추천 단어는
    상기 외부 장치에서 사용자가 제1수준 이상의 빈도로 사용하는 단어 및 단축어를 포함하는 전자 장치.
  9. 제 8항에 있어서,
    상기 프로세서는
    상기 외부 장치에서 사용자가 제1수준 이상의 빈도로 사용하는 단어 및 단축어를 상기 디스플레이 상에 표시하고, 사용자에게 추천하도록 제어하는 전자 장치.
  10. 제 1항에 있어서,
    상기 전자 장치는
    IoT(internet of things) 기기, 스마트 카(smart car), AR 기기, VR기기, MR기기, 데스크 탑, 노트북, 태블릿 PC 중 적어도 어느 하나를 포함하는 전자 장치.
  11. 전자 장치의 자동 완성 텍스트 입력 방법에 있어서,
    통신 회로를 이용하여 외부 장치와 통신 연결을 수립하는 동작;
    상기 외부 장치로부터 자동완성 텍스트(text) 입력 정보를 수신하는 동작;
    수신된 상기 자동완성 텍스트(text) 입력 정보를 상기 전자 장치의 키보드 프로세스에서 사용할 수 있도록 메모리에 저장하는 동작;;및
    디스플레이를 이용해 상기 메모리에 저장된 상기 자동완성 텍스트(text) 입력 정보에 기반한 추천 단어를 표시하는 동작을 포함하며,
    상기 자동완성 텍스트(text) 입력 정보는 사용자가 자주 사용하는 단어에 대한 데이터를 상기 전자 장치가 수집하고 스스로 학습하여 사용자에게 완성 단어로 추천하는 데이터를 의미하는 사용자 데이터 또는 사용자가 설정한 단축어 및 단축어에 대응하는 완성된 단어를 의미하는 사용자 정의 단축어 데이터 중 적어도 어느 하나를 포함하는 방법.
  12. 제 11항에 있어서,
    상기 외부 장치의 키보드 프로세스 및 상기 전자 장치의 데이터 수신 매니저가 작동적으로 연결되도록 제어하는 동작은
    페어링(pairing) 과정을 확인하는 동작;
    상기 페어링(pairing) 과정이 완료된 경우 상기 전자 장치에 알리는 동작;
    키보드 또는 사용자 언어와 관련한 데이터를 수신할 수 있도록 상기 외부 장치에 명령하는 동작;및
    상기 페어링(pairing) 과정이 완료된 사실을 내부 메모리에 저장하는 동작을 포함하는 방법.
  13. 제 11항에 있어서,
    상기 외부 장치로부터 자동완성 텍스트(text) 입력 정보를 획득하는 동작 은
    상기 외부 장치 상에서 상기 자동완성 텍스트(text) 입력 정보가 변경되는 경우 변경 내용을 인지하는 동작;및
    실시간으로 상기 변경 내용을 상기 전자 장치의 키보드 프로세스로 전달하는 동작을 포함하는 방법.
  14. 제 13항에 있어서,
    상기 자동완성 텍스트(text) 입력 정보의 변경 내용은
    사용자 데이터의 추가, 수정 및 삭제 중 적어도 어느 하나를 포함하거나 및/또는
    사용자 정의 단축어의 추가, 수정 및 삭제 중 적어도 어느 하나를 포함하는 방법.
  15. 제 11항에 있어서,
    상기 디스플레이를 이용해 상기 자동완성 텍스트(text) 입력 정보에 기반한 추천 단어를 표시하도록 제어하는 동작은
    문자 입력 모드에서, 입력된 문자를 나타내는 문자 표시 영역, 입력할 문자를 완성하여 사용자에게 제시하는 문자 추천 영역 및 문자 자판 영역이 상기 디스플레이 상에 표시되도록 제어하는 동작;
    상기 문자 표시 영역 상에 터치에 의한 필기 입력이 인식되는 경우, 상기 문자 표시 영역 상에 입력에 따른 궤적을 표시하도록 제어하는 동작 및
    상기 필기 입력에 대응하는 문자를 표시하도록 제어하거나, 상기 필기 입력에 대응하는 추천 문자를 상기 문자 추천 영역에 표시하도록 제어하는 동작을 포함하는 방법.
PCT/KR2022/011311 2021-08-10 2022-08-01 외부 장치의 자동 완성 텍스트를 동기화하는 전자 장치 및 방법 WO2023018086A1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP22856085.0A EP4350488A1 (en) 2021-08-10 2022-08-01 Electronic device and method for synchronizing autocomplete text on external device
CN202280056410.0A CN117859109A (zh) 2021-08-10 2022-08-01 在外部装置上同步自动完成文本的电子装置和方法
US17/885,735 US20230049881A1 (en) 2021-08-10 2022-08-11 Electronic device and methods for synchronizing auto-complete text from external device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020210105003A KR20230023157A (ko) 2021-08-10 2021-08-10 외부 장치의 자동 완성 텍스트를 동기화하는 전자 장치 및 방법
KR10-2021-0105003 2021-08-10

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US17/885,735 Continuation US20230049881A1 (en) 2021-08-10 2022-08-11 Electronic device and methods for synchronizing auto-complete text from external device

Publications (1)

Publication Number Publication Date
WO2023018086A1 true WO2023018086A1 (ko) 2023-02-16

Family

ID=85200795

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2022/011311 WO2023018086A1 (ko) 2021-08-10 2022-08-01 외부 장치의 자동 완성 텍스트를 동기화하는 전자 장치 및 방법

Country Status (2)

Country Link
KR (1) KR20230023157A (ko)
WO (1) WO2023018086A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160101567A (ko) * 2015-02-17 2016-08-25 엘지전자 주식회사 웨어러블 기기
KR20170019811A (ko) * 2015-08-12 2017-02-22 삼성전자주식회사 전자 장치 및 전자 장치의 문자 입력 방법
KR20180087608A (ko) * 2017-01-25 2018-08-02 네이버 주식회사 검색 서비스를 제공하는 시스템 및 방법
US20200042174A1 (en) * 2017-01-24 2020-02-06 International Business Machines Corporation Display of supplemental content on a wearable mobile device
KR20200098068A (ko) * 2019-02-11 2020-08-20 삼성전자주식회사 단어 추천 방법 및 그 전자 장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160101567A (ko) * 2015-02-17 2016-08-25 엘지전자 주식회사 웨어러블 기기
KR20170019811A (ko) * 2015-08-12 2017-02-22 삼성전자주식회사 전자 장치 및 전자 장치의 문자 입력 방법
US20200042174A1 (en) * 2017-01-24 2020-02-06 International Business Machines Corporation Display of supplemental content on a wearable mobile device
KR20180087608A (ko) * 2017-01-25 2018-08-02 네이버 주식회사 검색 서비스를 제공하는 시스템 및 방법
KR20200098068A (ko) * 2019-02-11 2020-08-20 삼성전자주식회사 단어 추천 방법 및 그 전자 장치

Also Published As

Publication number Publication date
KR20230023157A (ko) 2023-02-17

Similar Documents

Publication Publication Date Title
WO2021075786A1 (en) Electronic device and method of processing pop-up window using multi-window thereof
WO2019182403A1 (en) Method for supporting user input and electronic device supporting the same
WO2022131549A1 (ko) 전자 장치 및 전자 장치의 동작 방법
WO2023106895A1 (ko) 가상 입력 장치를 이용하기 위한 전자 장치 및 그 전자 장치에서의 동작 방법
WO2023277380A1 (ko) 입력 필드를 기반으로 사용자 인터페이스를 구성하는 방법 및 전자 장치
WO2022220659A1 (ko) 전자 장치 및 전자 장치에서 외부 전자 장치를 이용하여 정보를 입력하는 방법
WO2023058860A1 (ko) 멀티 서명된 apk 파일을 처리하는 전자 장치 및 그 동작 방법
WO2023018086A1 (ko) 외부 장치의 자동 완성 텍스트를 동기화하는 전자 장치 및 방법
WO2022030890A1 (ko) 다중 윈도우 이미지 캡쳐 방법 및 이를 위한 전자 장치
WO2022065845A1 (ko) 입력 데이터 처리 방법 및 이를 지원하는 전자 장치
WO2022030933A1 (ko) 전자 장치 및 그의 필기 입력을 처리하는 방법
WO2023163375A1 (ko) 웨어러블 디바이스의 데이터 이전 방법 및 전자 장치
WO2023018095A1 (ko) 전자 장치 및 전자 장치의 외부 장치 연결 방법
WO2024080709A1 (ko) 음성 신호에 기반하여 실행가능한 객체를 제어하는 전자 장치, 방법, 및 비일시적 컴퓨터 판독가능 저장 매체
WO2023054905A1 (ko) 외부 전자 장치의 데이터를 활용하는 방법 및 전자 장치
WO2024063342A1 (ko) 잠금 화면을 표시하는 전자 장치 및 그 동작 방법
WO2023146095A1 (ko) 멀티 윈도우 화면을 제어하는 방법 및 이를 지원하는 전자 장치
WO2021242025A1 (ko) 전자 장치, 전자 장치에서의 동작 방법 및 비일시적 저장 매체
WO2024090787A1 (ko) 전자 장치 및 이의 생체 인증 ui 운용 방법
WO2024080680A1 (ko) 상황 특정 설정을 위한 사용자 인터페이스를 표시하는 전자 장치, 방법, 및 비일시적 컴퓨터 판독가능 저장 매체
WO2022196984A1 (ko) 카메라를 포함하는 전자 장치 및 이의 동작 방법
WO2023163403A1 (ko) 스크린샷 생성 방법 및 상기 방법을 수행하는 전자 장치
WO2023054897A1 (ko) 영상 통화를 수행하는 전자 장치 및 방법
WO2023043073A1 (ko) 복수의 사물 인터넷 장치들을 제어하기 위한 웨어러블 전자 장치, 그 동작 방법 및 저장 매체
WO2024035037A1 (ko) 초기화 동작을 위한 전자 장치 및 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22856085

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2022856085

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 2022856085

Country of ref document: EP

Effective date: 20240104

NENP Non-entry into the national phase

Ref country code: DE