WO2024122890A1 - 전자 장치 및 가전기기 제어 어플리케이션 제어 방법 - Google Patents

전자 장치 및 가전기기 제어 어플리케이션 제어 방법 Download PDF

Info

Publication number
WO2024122890A1
WO2024122890A1 PCT/KR2023/017453 KR2023017453W WO2024122890A1 WO 2024122890 A1 WO2024122890 A1 WO 2024122890A1 KR 2023017453 W KR2023017453 W KR 2023017453W WO 2024122890 A1 WO2024122890 A1 WO 2024122890A1
Authority
WO
WIPO (PCT)
Prior art keywords
pop
home appliance
size
displayed
electronic device
Prior art date
Application number
PCT/KR2023/017453
Other languages
English (en)
French (fr)
Inventor
남영욱
박서린
문재희
조형래
추희영
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Publication of WO2024122890A1 publication Critical patent/WO2024122890A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication

Definitions

  • the disclosed invention relates to a method for controlling electronic devices and home appliance control applications.
  • Home appliances are devices that are mainly installed in the user's home to help the user with housework. They are fixed in the user's home and operate according to the user's operation commands.
  • Users can control home appliances using electronic devices. Specifically, a user can control home appliances by manipulating the user interface of the electronic device.
  • the user can use the home appliance control screen as a pop-up for more convenient operation, and the minimum size of the pop-up that can control the home appliance may vary depending on the home appliance the user wants to control.
  • the disclosed invention can provide a home appliance control application control method and electronic device that can automatically change the size of a pop-up displayed on the screen.
  • a home appliance control application control method includes displaying an icon of at least one home appliance on the screen as a pop-up; Receiving a selection from the user of a home appliance to be controlled among the at least one home appliance; and maintaining or changing the size of the pop-up displayed on the screen based on the selected home appliance.
  • the home appliance control application control method may maintain or change the size of the pop-up displayed on the screen by comparing the size of the pop-up displayed on the screen with the standard size of the selected home appliance pop-up.
  • the home appliance control application control method is, when the size of the pop-up displayed on the screen is less than the standard size of the selected home appliance pop-up, the size of the pop-up displayed on the screen can be changed to the standard size of the selected home appliance pop-up. there is.
  • the home appliance control application control method may maintain the size of the pop-up displayed on the screen when the size of the pop-up displayed on the screen is greater than or equal to the standard size of the selected home appliance pop-up.
  • the standard size of the home appliance pop-up may be determined based on the number of control elements of the selected home appliance and characteristics of the home appliance.
  • the home appliance control application control method can change the layout of the pop-up displayed on the screen when the size of the pop-up displayed on the screen changes.
  • the step of displaying the icon of at least one home appliance as a pop-up on the screen may include displaying the pop-up at a predetermined minimum size.
  • the step of displaying a size change notification of the pop-up displayed on the screen on the screen may further include.
  • An electronic device includes a processor; and a display module that receives input from the user or visually outputs various information, wherein the processor controls the display module to display an icon of at least one home appliance in a pop-up, and controls the control target selected by the user.
  • the size of the pop-up displayed on the display module is maintained or changed based on the home appliance.
  • the processor may maintain or change the size of the pop-up displayed on the display module by comparing the size of the pop-up displayed on the display module with a standard size of the selected home appliance pop-up.
  • the processor may change the size of the pop-up displayed on the display module to the standard size of the selected home appliance pop-up.
  • the processor may maintain the size of the pop-up displayed on the display module when the size of the pop-up displayed on the display module is greater than or equal to the standard size of the selected home appliance pop-up.
  • the standard size of the home appliance pop-up may be determined based on the number of control elements of the selected home appliance and characteristics of the home appliance.
  • the processor may change the layout of the pop-up displayed on the display module when the size of the pop-up displayed on the display module changes.
  • the processor may control the display module to display the icon of at least one home appliance as a pop-up of a predetermined minimum size.
  • the processor may control the display module to output a size change notification of the pop-up displayed on the display module to the display module when the size of the pop-up displayed on the display module changes.
  • the electronic device further includes a communication module that communicates with a server, wherein the processor transmits a home appliance selected by the user to be controlled to the server, and displays a pop-up of the selected home appliance from the server.
  • the communication module can be controlled to receive a reference size of .
  • the size of a pop-up displayed on the screen can be automatically changed.
  • Figure 1 is a diagram illustrating a home appliance control system according to one embodiment.
  • Figure 2 is a diagram illustrating a screen of an application that controls a cooking appliance.
  • Figure 3 is a diagram illustrating a screen of an application that controls a television.
  • Figure 4 is a diagram illustrating a screen of an application that controls a lighting device.
  • Figure 5 is a block diagram of an electronic device according to an embodiment.
  • Figure 6 is a flowchart explaining a method of controlling a home appliance control application according to an embodiment.
  • Figure 7 is a diagram illustrating an icon of a home appliance displayed as a pop-up on the screen according to one embodiment.
  • FIG. 8 is a diagram illustrating a user selecting a TV to be controlled according to an embodiment.
  • FIG. 9 is a diagram illustrating a change in the size of a pop-up when the control target is a TV, according to one embodiment.
  • FIG. 10 is a diagram illustrating a user selecting a lighting device to be controlled according to an embodiment.
  • FIG. 11 is a diagram illustrating that the size of a pop-up is maintained when the control target is a lighting device, according to one embodiment.
  • first may be named a second component without departing from the scope of the present invention, and similarly, the second component may also be named a first component.
  • ⁇ unit may refer to a unit that processes at least one function or operation.
  • the terms may refer to at least one hardware such as a field-programmable gate array (FPGA) / application specific integrated circuit (ASIC), at least one software stored in memory, or at least one process processed by a processor. there is.
  • FPGA field-programmable gate array
  • ASIC application specific integrated circuit
  • the codes attached to each step are used to identify each step, and these codes do not indicate the order of each step.
  • Each step is performed differently from the specified order unless a specific order is clearly stated in the context. It can be.
  • FIG. 1 is a diagram illustrating a home appliance control system according to an embodiment
  • FIG. 2 is a diagram illustrating a screen of an application that controls a cooking appliance
  • FIG. 3 is a diagram illustrating a screen of an application that controls a television
  • Figure 4 is a diagram showing the screen of an application that controls a lighting device.
  • the home appliance control system 1 includes an electronic device 100 carried by a user (U), a home appliance 300 provided in the home (H), and an electronic device. It may include a server 200 that generates a control command for the home appliance 300 and a control command for the electronic device 100 based on various information received from the 100 and the home appliance 300.
  • the electronic device 100 carried by the user (U) is an easily portable electronic device, such as a video phone, a mobile phone, a smart phone, a wideband code division multiple access (WCDMA) user terminal device, and a UMTS ( universal mobile telecommunication service) user terminal device, PDA (personal digital assistant), PMP (portable multimedia player), DMB (digital multimedia broadcasting) user terminal device, E-Book, portable computer (notebook, tablet, etc.), or digital camera (digital camera) camera), etc.
  • a video phone such as a video phone, a mobile phone, a smart phone, a wideband code division multiple access (WCDMA) user terminal device, and a UMTS ( universal mobile telecommunication service) user terminal device, PDA (personal digital assistant), PMP (portable multimedia player), DMB (digital multimedia broadcasting) user terminal device, E-Book, portable computer (notebook, tablet, etc.), or digital camera (digital camera) camera), etc.
  • WCDMA wideband code division multiple access
  • the electronic device 100 may use LTE, LTE Advance (LTE-A), code division multiple access (CDMA), wideband CDMA (WCDMA), universal mobile telecommunications system (UMTS), wireless broadband (Wibro), or global system for GSM (GSM). It can be connected to a wide area communication network (199) through mobile communications, etc. To this end, the electronic device 100 may include a communication module corresponding to each communication protocol.
  • LTE-A LTE Advance
  • CDMA code division multiple access
  • WCDMA wideband CDMA
  • UMTS universal mobile telecommunications system
  • Wibro wireless broadband
  • GSM global system for GSM
  • a home appliance control application may be installed in the electronic device 100.
  • the user can control the home appliance 300 by manipulating the home appliance control application.
  • a method of controlling the home appliance 300 through the electronic device 100 will be described with reference to FIGS. 2 to 4.
  • Figures 2 to 4 are diagrams illustrating a screen of a home appliance control application according to an embodiment.
  • the display module 153 of the electronic device 100 may output information for controlling the cooking appliance and various information about the cooking appliance.
  • the object controlled through the application can be displayed at the top left of the display (102a).
  • the object of control is a cooking device, so it can be displayed as a cooking device at the top of the display.
  • an icon indicating the status of the cooking appliance may be displayed in the upper left corner of the window 102b below the control object. For example, like READY in FIG. 2, an icon that can indicate the progress of cooking, such as preparation for cooking, completion of cooking, etc., can be displayed.
  • “send to cooker” is displayed at the bottom center of the window 102b below the control target, so that when the user selects “send to cooker,” the cooking device can be operated.
  • elements that can control the cooking appliance can be displayed in the window 102c below the window 102b, which can display the cooking process, etc.
  • elements that can control the cooking device such as the mode of the cooking device (e.g., air fry), the operating temperature of the cooking device, and the cooking time, can be displayed.
  • the electronic device 100 When the user manipulates cooking device control elements such as the cooking device's mode, operating temperature, and cooking time, the electronic device 100 transmits this to the cooking device so that the user can control the cooking device through the electronic device 100. there is.
  • the electronic device 100 transmits this to the cooking device through the communication module and It can be operated in air fry mode at 190°C for 15 minutes.
  • the information displayed on the display is not limited to this, and various information regarding the cooking appliance can be additionally displayed.
  • various information about cooking appliances and cooking can be output, such as recommended recipes using cooking appliances 102d and cooking appliance-related information 102e, such as cooking appliance filter information.
  • the display module 153 of the electronic device 100 may output information for controlling the television and various information related to the television.
  • the object controlled through the application can be displayed at the top left of the display (103a).
  • the object of control is a television, and TV can be displayed at the top of the display.
  • an icon for entering a search term can be displayed in the window 103b below the control object.
  • an icon through which a user can enter a search term may be displayed.
  • elements that can control the television can be displayed in the window 103c below the search window 103b.
  • a remote control icon and a volume control icon can be displayed. Users can control the television by manipulating television control elements such as remote control icons and volume control icons.
  • the electronic device 100 When a user manipulates a television control element, such as changing a television channel or adjusting the volume, the electronic device 100 transmits this to the television, so that the user can control the television through the electronic device 100.
  • a television control element such as changing a television channel or adjusting the volume
  • the electronic device 100 can transmit this to the television through a communication module so that the television is muted.
  • the information output on the display is not limited to this, and various information related to the television can be additionally output.
  • various information about the television such as information 103d on apps and devices that can be connected to the television, television setting mode 103e, and content recommendation information 103d, can be output.
  • the display module 153 of the electronic device 100 may output information for controlling a lighting device and various information about the lighting device.
  • the object controlled through the application can be displayed at the top of the display (104a).
  • the object of control is a lighting device, so Light can be displayed at the top of the display.
  • elements that can control the lighting device can be displayed in the windows 104b and 104c below the control target.
  • elements that can control the lighting device such as the power of the lighting device and the operating time of the lighting device, can be displayed.
  • the electronic device 100 When a user manipulates lighting device control elements, such as power and timer settings of the lighting device, the electronic device 100 transmits this to the lighting device, so that the user can control the lighting device through the electronic device 100.
  • lighting device control elements such as power and timer settings of the lighting device
  • the electronic device 100 can transmit this to the lighting device through a communication module so that the lighting device is turned off.
  • the information output on the display is not limited to this, and various types of information regarding the lighting device can be further output. Referring to FIG. 4, information about the lighting device, such as power information 104d consumed by the lighting device, can be output.
  • the home appliance 300 controlled through a home appliance control application installed on the electronic device 100, may be installed in the home (H) and may provide various outputs depending on the type.
  • the home appliance 300 includes an air conditioner that controls the indoor temperature in the home (H), a television that outputs various multimedia information such as broadcast signals, a refrigerator that refrigerates or freezes food, a cooking device that cooks food, and a laundry machine that washes clothes. Or, a washing machine that dries, a clothes care machine that dries clothes or removes dust from clothes, a robot vacuum cleaner that performs cleaning within the home (H) and a speaker that outputs sound, and a lighting device provided in an indoor space that emits light into the indoor space. It may include etc.
  • the type of home appliance 300 is not limited to the above example, and may be included without limitation as long as it is a device that performs a specific operation for the convenience of the user within the home H.
  • the home appliance 300 can be connected to the wide area communication network 199 using the communication unit of the home appliance, and through this, can communicate with other electronic devices such as the server 200.
  • the wide area network 199 may include at least one of a telecommunication network, for example, a computer network (e.g., a local area network (LAN) or a wide area network (WAN)), the Internet, or a telephone network.
  • a computer network e.g., a local area network (LAN) or a wide area network (WAN)
  • WAN wide area network
  • the server 200 may generate a home appliance control command based on various information received from the electronic device 100 and the home appliance 300 and generate a command to control the home appliance control application.
  • the server 200 may transmit to the electronic device 100 the standard size of the home appliance pop-up that is the control target selected by the user, and the size of the current pop-up and the standard of the home appliance pop-up that is the selected control target. By comparing the sizes, a control command to maintain or change the pop-up size may be transmitted to the electronic device 100.
  • Figure 5 is a block diagram of an electronic device according to an embodiment.
  • the electronic device 100 includes a processor 120, a memory 130, a user interface 150, an audio module 170, a sensor module 176, an interface 177, and a connection terminal 178.
  • a haptic module 179 may include a camera module 180, a power management module 188, a battery 189, a communication module 190, a subscriber identification module 196, or an antenna module 197.
  • At least one of these components may be omitted, or one or more other components may be added to the electronic device 100.
  • some of these components e.g., sensor module 176, camera module 180, or antenna module 197) are integrated into one component (e.g., display module 153). It can be.
  • the processor 120 for example, executes software (e.g., program 140) to operate at least one other component (e.g., hardware or software component) of the electronic device 100 connected to the processor 120. It can be controlled and various data processing or calculations can be performed.
  • software e.g., program 140
  • the processor 120 executes software (e.g., program 140) to operate at least one other component (e.g., hardware or software component) of the electronic device 100 connected to the processor 120. It can be controlled and various data processing or calculations can be performed.
  • the processor 120 stores commands or data received from another component (e.g., sensor module 176 or communication module 190) in volatile memory 132.
  • the commands or data stored in the volatile memory 132 can be processed, and the resulting data can be stored in the non-volatile memory 134.
  • the processor 120 includes a main processor 121 (e.g., a central processing unit or an application processor) or an auxiliary processor 123 that can operate independently or together (e.g., a graphics processing unit, a neural network processing unit ( It may include a neural processing unit (NPU), an image signal processor, a sensor hub processor, or a communication processor).
  • a main processor 121 e.g., a central processing unit or an application processor
  • auxiliary processor 123 e.g., a graphics processing unit, a neural network processing unit ( It may include a neural processing unit (NPU), an image signal processor, a sensor hub processor, or a communication processor).
  • the auxiliary processor 123 may be set to use lower power than the main processor 121 or be specialized for a designated function. You can.
  • the auxiliary processor 123 may be implemented separately from the main processor 121 or as part of it.
  • the auxiliary processor 123 may, for example, act on behalf of the main processor 121 while the main processor 121 is in an inactive (e.g., sleep) state, or while the main processor 121 is in an active (e.g., application execution) state. ), together with the main processor 121, at least one of the components of the electronic device 100 (e.g., the display module 153, the sensor module 176, or the communication module 190) At least some of the functions or states related to can be controlled.
  • the components of the electronic device 100 e.g., the display module 153, the sensor module 176, or the communication module 190
  • coprocessor 123 may be implemented as part of another functionally related component (e.g., camera module 180 or communication module 190). there is.
  • the auxiliary processor 123 e.g, neural network processing device
  • the auxiliary processor 123 may include a hardware structure specialized for processing artificial intelligence models. Artificial intelligence models can be created through machine learning.
  • the memory 130 may store various data used by at least one component (eg, the processor 120 or the sensor module 176) of the electronic device 100. Data may include, for example, input data or output data for software (e.g., program 140) and instructions related thereto.
  • Memory 130 may include volatile memory 132 or non-volatile memory 134.
  • the program 140 may be stored as software in the memory 130 and may include, for example, an operating system 142, middleware 144, or application 146.
  • the user interface 150 can receive input from a user or output various types of information.
  • the user interface 150 may include an input module 151, an audio output module 152, and a display module 153.
  • the input module 151 may receive commands or data to be used in a component of the electronic device 100 (e.g., the processor 120) from outside the electronic device 100 (e.g., a user).
  • the input module 151 may include, for example, a microphone, mouse, keyboard, keys (eg, buttons), or digital pen (eg, stylus pen).
  • the sound output module 152 may output sound signals to the outside of the electronic device 100.
  • the sound output module 152 may include, for example, a speaker or a receiver. Speakers can be used for general purposes such as multimedia playback or recording playback.
  • the receiver can be used to receive incoming calls. According to one embodiment, the receiver may be implemented separately from the speaker or as part of it.
  • the display module 153 may visually provide information to the outside of the electronic device 100 (eg, a user).
  • the display module 153 may include, for example, a display, a hologram device, or a projector, and a control circuit for controlling the device.
  • the display module 153 may include a touch sensor configured to detect a touch, or a pressure sensor configured to measure the intensity of force generated by the touch.
  • the audio module 170 can convert sound into an electrical signal or, conversely, convert an electrical signal into sound. According to one embodiment, the audio module 170 acquires sound through the input module 151, the sound output module 152, or an external electronic device (e.g., directly or wirelessly connected to the electronic device 100). Sound can be output through a home appliance 310 (e.g., speaker or headphone).
  • a home appliance 310 e.g., speaker or headphone
  • the sensor module 176 detects the operating state (e.g., power or temperature) of the electronic device 100 or the external environmental state (e.g., user state) and generates an electrical signal or data value corresponding to the detected state. can do.
  • the operating state e.g., power or temperature
  • the external environmental state e.g., user state
  • the interface 177 may support one or more designated protocols that can be used to directly or wirelessly connect the electronic device 100 to an external electronic device (eg, home appliance 310).
  • an external electronic device eg, home appliance 310
  • the connection terminal 178 may include a connector through which the electronic device 100 can be physically connected to an external electronic device (eg, home appliance 310).
  • the connection terminal 178 may include, for example, a DisplayPort connector, an HDMI connector, a USB connector, an SD card connector, or an audio connector (eg, a headphone connector).
  • the haptic module 179 can convert electrical signals into mechanical stimulation (e.g., vibration or movement) or electrical stimulation that the user can perceive through tactile or kinesthetic senses.
  • the haptic module 179 may include, for example, a motor, a piezoelectric element, or an electrical stimulation device.
  • the camera module 180 can capture still images and moving images.
  • the camera module 180 may include one or more lenses, image sensors, image signal processors, or flashes.
  • the power management module 188 can manage power supplied to the electronic device 100.
  • the power management module 188 may be implemented as at least a part of, for example, a power management integrated circuit (PMIC).
  • PMIC power management integrated circuit
  • the battery 189 may supply power to at least one component of the electronic device 100.
  • the battery 189 may include, for example, a non-rechargeable primary battery, a rechargeable secondary battery, or a fuel cell.
  • the communication module 190 is a direct (e.g., wired) communication channel or wireless communication channel between the electronic device 100 and an external electronic device (e.g., home appliance 310, home appliance 320, or server 200). It can support establishment and communication through established communication channels.
  • an external electronic device e.g., home appliance 310, home appliance 320, or server 200. It can support establishment and communication through established communication channels.
  • Communication module 190 operates independently of processor 120 (e.g., an application processor) and may include one or more communication processors that support direct (e.g., wired) communication or wireless communication.
  • processor 120 e.g., an application processor
  • Communication module 190 operates independently of processor 120 (e.g., an application processor) and may include one or more communication processors that support direct (e.g., wired) communication or wireless communication.
  • the communication module 190 may be a wireless communication module 192 (e.g., a cellular communication module, a short-range wireless communication module, or a global navigation satellite system (GNSS) communication module) or a wired communication module 194 (e.g., : LAN (local area network) communication module, or power line communication module) may be included.
  • GNSS global navigation satellite system
  • wired communication module 194 e.g., : LAN (local area network) communication module, or power line communication module
  • These various types of communication modules may be integrated into one component (e.g., a single chip) or may be implemented as a plurality of separate components (e.g., multiple chips).
  • the wireless communication module 192 uses subscriber information (e.g., International Mobile Subscriber Identifier (IMSI)) stored in the subscriber identification module 196 to communicate with a communication wide area such as the first wide area network 198 or the second wide area network 199.
  • subscriber information e.g., International Mobile Subscriber Identifier (IMSI)
  • IMSI International Mobile Subscriber Identifier
  • the electronic device 100 can be confirmed or authenticated within the communication network.
  • the antenna module 197 may transmit or receive signals or power to or from the outside (eg, an external electronic device).
  • the antenna module 197 may include an antenna including a radiator made of a conductor or a conductive pattern formed on a substrate (e.g., PCB).
  • the antenna module 197 may include A mmWave antenna module can be formed.
  • peripheral devices e.g., bus, general purpose input and output (GPIO), serial peripheral interface (SPI), or mobile industry processor interface (MIPI)
  • signal e.g. commands or data
  • commands or data may be transmitted or received between the electronic device 100 and an external home appliance 300 through the server 200 connected to the wide area communication network 199.
  • all or part of the operations performed in the electronic device 100 may be executed in one or more of the external electronic devices 310, 320, or 200.
  • the electronic device 100 when the electronic device 100 needs to perform a certain function or service automatically or in response to a request from a user or another device, the electronic device 100 does not execute the function or service on its own.
  • one or more external electronic devices may be requested to perform at least part of the function or service.
  • One or more external electronic devices that have received the request may execute at least part of the requested function or service, or an additional function or service related to the request, and transmit the result of the execution to the electronic device 100.
  • the electronic device 100 may process the result as is or additionally and provide it as at least part of a response to the request.
  • cloud computing distributed computing, mobile edge computing (MEC), or client-server computing technology can be used.
  • MEC mobile edge computing
  • the electronic device 100 may provide an ultra-low latency service using, for example, distributed computing or mobile edge computing.
  • the server 200 may be an intelligent server using machine learning and/or neural networks.
  • first, second, or first or second may be used simply to distinguish one component from another, and to refer to those components in other respects (e.g., importance or order) is not limited.
  • One (e.g., first) component is said to be “coupled” or “connected” to another (e.g., second) component, with or without the terms “functionally” or “communicatively.” Where mentioned, it means that any of the components can be connected to the other components directly (e.g. wired), wirelessly, or through a third component.
  • module used in various embodiments of this document may include a unit implemented in hardware, software, or firmware, and is interchangeable with terms such as logic, logic block, component, or circuit, for example. It can be used as A module may be an integrated part or a minimum unit of the parts or a part thereof that performs one or more functions. For example, according to one embodiment, the module may be implemented in the form of an application-specific integrated circuit (ASIC).
  • ASIC application-specific integrated circuit
  • Figure 6 is a flowchart explaining a method of controlling a home appliance control application according to an embodiment
  • Figure 7 is a diagram showing an icon of a home appliance displayed on the screen as a pop-up according to an embodiment
  • Figure 8 is an embodiment
  • it is a diagram illustrating a user selecting a TV as a control object
  • FIG. 9 is a diagram illustrating a change in the size of a pop-up when the control object is a TV according to an embodiment
  • FIG. 10 is an example.
  • this is a diagram illustrating a user selecting a lighting device to be controlled
  • FIG. 11 is a diagram illustrating that the size of a pop-up is maintained when the control object is a lighting device, according to an embodiment.
  • Figure 6 is a flowchart explaining a method of controlling a home appliance control application according to an embodiment.
  • the processor 120 may execute the home appliance control application when receiving a home appliance control application execution command from the user (1000).
  • the processor 120 may control the display module 153 to display at least one home appliance icon as a pop-up (1100). Referring to FIG. 7 , the processor 120 may control the display module 153 to display a TV icon and a light icon as a pop-up (P1) in order to guide the user in selecting a home appliance.
  • the icon may be displayed as the name of the control object, such as TV or Light.
  • the icon is not limited to the examples described above, and as long as it is a sign for selecting a home appliance, there are no restrictions on its form or method.
  • an icon can be a picture of a home appliance, or it can be a sign indicating the name and status of the display device.
  • a pop-up refers to a screen displayed in a portion of the home appliance control application screen rather than the entire area of the display module 153.
  • the processor 120 may display at least one home appliance icon as a pop-up based on the input received from the user. For example, when the user operates the application and sets it to pop-up mode, the processor 120 may display at least one home appliance icon as a pop-up.
  • the processor 120 may display at least one home appliance icon as a pop-up when running a home appliance control application even without user input.
  • the size of the pop-up in which at least one home appliance icon is displayed may be a preset size stored in the memory 130. For example, it may be the size when executing the previous pop-up mode stored in the memory 130, and may be the minimum size for executing a home appliance control application (e.g., resolution 280 x 280).
  • the processor 120 may receive home appliances to be controlled from the user (1200).
  • the user can select a home appliance to be controlled from among at least one home appliance. Referring to Figure 8, if there is a TV icon and a light icon, the user can select the TV icon to control the TV.
  • the processor 120 may control the communication module 190 to transmit information about the selected home appliance to the server 200.
  • the processor 120 may compare the size of the pop-up displayed on the display module 153 with the standard size of the pop-up of the selected home appliance to be controlled (1300).
  • the standard size of the home appliance pop-up may be the size stored in the memory 130 or the server 200.
  • the standard size of a home appliance pop-up may be the minimum size that can display control elements for controlling the home appliance on the screen.
  • the standard size of the home appliance pop-up can be determined based on the number of control elements of the home appliance to be controlled and the characteristics of the home appliance.
  • the standard size of the lighting device pop-up may be the minimum size for running the home appliance control application (e.g., resolution 280
  • the standard size of the cooking device pop-up may be larger than the standard size of the lighting device pop-up (e.g.
  • the standard size of the TV pop-up is larger than that of the lighting device pop-up and the standard size of the cooking device pop-up is larger than that of the cooking device pop-up. It may be smaller than the standard size (e.g. resolution 284 x 526).
  • the memory 130 or the server 200 may store a layout of the pop-up according to the standard size of the pop-up of the home appliance. For example, the layout of a pop-up in which the size of the icon on which the control element is displayed is set small according to the standard size of the pop-up of the home appliance, the layout of the pop-up in which text is changed to a picture, etc. may be stored in the memory.
  • the processor 120 changes the size of the pop-up displayed on the display module 153 to the standard size of the selected home appliance pop-up.
  • Can (1400) If the size of the pop-up displayed on the display module 153 is less than the standard size of the selected home appliance pop-up (example of 1300), the processor 120 changes the size of the pop-up displayed on the display module 153 to the standard size of the selected home appliance pop-up. Can (1400).
  • the processor 120 may maintain the size of the pop-up displayed on the display module 153 when the size of the pop-up displayed on the display module 153 is greater than or equal to the standard size of the selected home appliance pop-up (No in 1300) (1500).
  • the process of comparing the size of the pop-up displayed on the display module 153 with the standard size of the home appliance pop-up that is the selected control target is not only performed by the processor 120, but can also be performed by the server 200.
  • the server 200 compares the size of the pop-up displayed on the display module 153 with the standard size of the home appliance pop-up that is the selected control target, the server 200 issues a pop-up size control command based on the comparison result. can be transmitted to the electronic device 100, and the processor 120 can change the size of the pop-up based on this.
  • the processor 120 may compare the size of the pop-up (P1) displaying the TV icon and the light icon with the standard size of the TV pop-up (P2). .
  • the processor 120 compared the size of the pop-up (P1) displaying the TV icon and the light icon with the standard size of the TV pop-up (P2), and as a result, the size of the pop-up (P1) displaying the TV icon and the light icon was changed to the TV pop-up ( Since it is less than the standard size of P2), the size of the pop-up (P1) displaying the TV icon and the light icon can be changed to the standard size of the TV pop-up (P2), as shown in FIG. 9.
  • the processor 120 can control the display module 153 to output a pop-up size change notification.
  • the processor 120 can compare the size of the pop-up (P1) displaying the TV icon and the icon of Light with the standard size of the lighting device pop-up (P2). there is.
  • the processor 120 compares the size of the pop-up (P1) displaying the TV icon and the light icon with the standard size of the lighting device pop-up (P3), and as a result, the size of the pop-up (P1) displaying the TV icon and the light icon is changed to the lighting device pop-up (P3). Since it is larger than the standard size of the pop-up (P3), the size of the pop-up (P1) with the TV icon and the light icon displayed can be maintained, as shown in Figure 11.
  • the disclosed embodiments may be implemented in the form of a recording medium that stores instructions executable by a computer. Instructions may be stored in the form of program code, and when executed by a processor, may create program modules to perform operations of the disclosed embodiments.
  • the recording medium may be implemented as a computer-readable recording medium.
  • Computer-readable recording media include all types of recording media storing instructions that can be decoded by a computer. For example, there may be read only memory (ROM), random access memory (RAM), magnetic tape, magnetic disk, flash memory, optical data storage, etc.
  • ROM read only memory
  • RAM random access memory
  • magnetic tape magnetic tape
  • magnetic disk magnetic disk
  • flash memory optical data storage

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

일 실시예에 따른 가전기기 제어 어플리케이션 제어 방법은, 적어도 하나의 가전기기의 아이콘을 팝업으로 화면에 표시하는 단계; 상기 적어도 하나의 가전기기 중에서 제어 대상이 되는 가전기기의 선택을 사용자로부터 수신하는 단계; 및 상기 선택된 가전기기에 기초하여 상기 화면에 표시된 팝업의 크기를 유지하거나 변경하는 단계;를 포함한다.

Description

전자 장치 및 가전기기 제어 어플리케이션 제어 방법
개시된 발명은 전자 장치 및 가전기기 제어 어플리케이션 제어 방법에 관한 것이다.
가전기기는, 주로 사용자의 가정 내에 마련되어 사용자의 가사에 도움이 되는 기기를 의미하며, 사용자의 가정 내에 고정되어 사용자의 동작 명령에 따라 동작한다.
사용자는 전자 장치를 이용하여 가전기기를 제어할 수 있다. 구체적으로, 사용자는 전자 장치의 사용자 인터페이스를 조작함으로써 가전기기를 제어할 수 있다.
사용자는 보다 편리한 조작을 위하여 가전기기 제어 화면을 팝업으로 사용할 수 있고, 사용자가 제어하고자 하는 가전기기에 따라 가전기기를 제어할 수 있는 팝업의 최소 크기가 달라질 수 있다.
개시된 발명은 화면에 표시되는 팝업의 크기를 자동으로 변경할 수 있는 가전기기 제어 어플리케이션 제어 방법 및 전자 장치를 제공할 수 있다.
일 실시예에 따른 가전기기 제어 어플리케이션 제어 방법은 적어도 하나의 가전기기의 아이콘을 팝업으로 화면에 표시하는 단계; 상기 적어도 하나의 가전기기 중에서 제어 대상이 되는 가전기기의 선택을 사용자로부터 수신하는 단계; 및 상기 선택된 가전기기에 기초하여 상기 화면에 표시된 팝업의 크기를 유지하거나 변경하는 단계;를 포함한다.
일 실시예에 따른 가전기기 제어 어플리케이션 제어 방법은 상기 화면에 표시된 팝업의 크기와 상기 선택된 가전기기 팝업의 기준 크기를 비교하여, 상기 화면에 표시된 팝업의 크기를 유지하거나 변경할 수 있다.
일 실시예에 따른 가전기기 제어 어플리케이션 제어 방법은 상기 화면에 표시된 팝업의 크기가 상기 선택된 가전기기 팝업의 기준 크기 미만인 경우, 상기 화면에 표시된 팝업의 크기를 상기 선택된 가전기기 팝업의 기준 크기로 변경할 수 있다.
일 실시예에 따른 가전기기 제어 어플리케이션 제어 방법은 상기 화면에 표시된 팝업의 크기가 상기 선택된 가전기기 팝업의 기준 크기 이상인 경우, 상기 화면에 표시된 팝업의 크기를 유지할 수 있다.
일 실시예에 따른 가전기기 제어 어플리케이션 제어 방법에 있어서 상기 가전기기 팝업의 기준 크기는, 상기 선택된 가전기기의 제어 요소의 개수 및 상기 가전기기의 특성에 기초하여 결정될 수 있다.
일 실시예에 따른 가전기기 제어 어플리케이션 제어 방법은 상기 화면에 표시된 팝업의 크기가 변경되면 상기 화면에 표시된 팝업의 레이아웃을 변경할 수 있다.
일 실시예에 따른 가전기기 제어 어플리케이션 제어 방법에 있어서, 적어도 하나의 가전기기의 아이콘을 화면에 팝업으로 표시하는 단계는, 미리 정해진 최소 크기로 팝업을 표시하는 것;을 포함할 수 있다.
일 실시예에 따른 가전기기 제어 어플리케이션 제어 방법에 있어서, 상기 화면에 표시된 팝업의 크기 변경 시에, 상기 화면에 상기 화면에 표시된 팝업의 크기 변경 알림을 표시하는 단계;를 더 포함할 수 있다.
일 실시예에 따른 전자 장치는, 프로세서; 및 사용자로부터 입력을 수신하거나 각종 정보를 시각적으로 출력하는 디스플레이 모듈;을 포함하고, 상기 프로세서는, 적어도 하나의 가전기기의 아이콘을 팝업으로 표시하도록 상기 디스플레이 모듈을 제어하고, 상기 사용자로부터 선택된 제어 대상이 되는 가전기기에 기초하여 상기 디스플레이 모듈에 표시된 팝업의 크기를 유지하거나 변경한다.
상기 프로세서는, 상기 디스플레이 모듈에 표시된 팝업의 크기와 상기 선택된 가전기기 팝업의 기준 크기를 비교하여, 상기 디스플레이 모듈에 표시된 팝업의 크기를 유지하거나 변경할 수 있다.
상기 프로세서는, 상기 디스플레이 모듈에 표시된 팝업의 크기가 상기 선택된 가전기기 팝업의 기준 크기 미만인 경우, 상기 디스플레이 모듈에 표시된 팝업의 크기를 상기 선택된 가전기기 팝업의 기준 크기로 변경할 수 있다.
상기 프로세서는, 상기 디스플레이 모듈에 표시된 팝업의 크기가 상기 선택된 가전기기 팝업의 기준 크기 이상인 경우, 상기 디스플레이 모듈에 표시된 팝업의 크기를 유지할 수 있다.
일 실시예에 따른 전자 장치에서 상기 가전기기 팝업의 기준 크기는, 상기 선택된 가전기기의 제어 요소의 개수 및 상기 가전기기의 특성에 기초하여 결정될 수 있다.
상기 프로세서는, 상기 디스플레이 모듈에 표시된 팝업의 크기가 변경되면 상기 디스플레이 모듈에 표시된 팝업의 레이아웃을 변경할 수 있다.
상기 프로세서는, 적어도 하나의 가전기기의 아이콘을 미리 정해진 최소 크기의 팝업으로 표시하도록 상기 디스플레이 모듈을 제어할 수 있다.
상기 프로세서는, 상기 디스플레이 모듈에 표시된 팝업의 크기 변경 시에 상기 디스플레이 모듈에 상기 디스플레이 모듈에 표시된 팝업의 크기 변경 알림을 출력하도록 상기 디스플레이 모듈을 제어할 수 있다.
일 실시예에 따른 전자 장치는, 서버와 통신하는 통신 모듈;을 더 포함하고, 상기 프로세서는, 상기 사용자로부터 선택된 제어 대상이 되는 가전기기를 상기 서버에 송신하고, 상기 서버로부터 상기 선택된 가전기기 팝업의 기준 크기를 수신하도록 상기 통신 모듈을 제어할 수 있다.
일 측면에 따른 가전기기 제어 어플리케이션 제어 방법 및 전자 장치에 의하면, 화면에 표시되는 팝업의 크기를 자동으로 변경할 수 있다.
도 1은 일 실시예에 따른 가전기기 제어 시스템을 도시한 도면이다.
도 2는 조리기기를 제어하는 어플리케이션의 화면을 도시한 도면이다.
도 3은 텔레비전을 제어하는 어플리케이션의 화면을 도시한 도면이다.
도 4는 조명장치를 제어하는 어플리케이션의 화면을 도시한 도면이다.
도 5는 일 실시예에 따른 전자 장치의 블록도이다.
도 6은 일 실시예에 따른 가전기기 제어 어플리케이션 제어 방법을 설명하는 순서도이다.
도 7은 일 실시예에 따른 가전기기의 아이콘을 팝업으로 화면에 표시한 것을 도시한 도면이다.
도 8은 일 실시예에 따라 사용자가 제어 대상이 되는 TV를 선택하는 것을 도시한 도면이다.
도 9는 일 실시예에 따라 제어 대상이 TV인 경우에 팝업의 크기가 변경되는 것을 도시한 도면이다.
도 10은 일 실시예에 따라 사용자가 제어 대상이 되는 조명 장치를 선택하는 것을 도시한 도면이다.
도 11은 일 실시예에 따라 제어 대상이 조명 장치인 경우에 팝업의 크기가 유지되는 것을 도시한 도면이다.
본 명세서에 기재된 실시예와 도면에 도시된 구성은 개시된 발명의 바람직한 일 예에 불과할 뿐이며, 본 출원의 출원시점에 있어서 본 명세서의 실시예와 도면을 대체할 수 있는 다양한 변형 예들이 있을 수 있다.
본 명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐 아니라, 간접적으로 연결되어 있는 경우를 포함하고, 간접적인 연결은 무선 통신망을 통해 연결되는 것을 포함한다.
또한, 본 명세서에서 사용한 용어는 실시예를 설명하기 위해 사용된 것으로, 개시된 발명을 제한 및/또는 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는다.
또한, 본 명세서에서 사용한 "제1", "제2" 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않으며, 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
또한, "~부", "~기", "~블록", "~부재", "~모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미할 수 있다. 예를 들어, 상기 용어들은 FPGA(field-programmable gate array) / ASIC(application specific integrated circuit) 등 적어도 하나의 하드웨어, 메모리에 저장된 적어도 하나의 소프트웨어 또는 프로세서에 의하여 처리되는 적어도 하나의 프로세스를 의미할 수 있다.
각 단계들에 붙여지는 부호는 각 단계들을 식별하기 위해 사용되는 것으로 이들 부호는 각 단계들 상호 간의 순서를 나타내는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 실시될 수 있다.
이하에서는 본 발명에 따른 실시예를 첨부된 도면을 참조하여 상세히 설명한다.
도 1은 일 실시예에 따른 가전기기 제어 시스템을 도시한 도면이고, 도 2는 조리기기를 제어하는 어플리케이션의 화면을 도시한 도면이고, 도 3은 텔레비전을 제어하는 어플리케이션의 화면을 도시한 도면이고, 도 4는 조명장치를 제어하는 어플리케이션의 화면을 도시한 도면이다.
도 1을 참조하면, 일 실시예에 따른 가전기기 제어 시스템(1)은, 사용자(U)가 휴대하는 전자 장치(100)와, 가정(H) 내 마련되는 가전기기(300)와, 전자 장치(100) 및 가전기기(300)로부터 수신한 각종 정보에 기초하여 가전기기(300) 제어 명령 생성하고 전자 장치(100)제어 명령을 생성하는 서버(200)를 포함할 수 있다.
사용자(U)가 휴대하는 전자 장치(100)는, 휴대가 용이하게 이동 가능한 전자 기기로서, 화상전화기, 휴대폰, 스마트 폰(smart phone), WCDMA(wideband code division multiple access) 사용자 단말장치, UMTS(universal mobile telecommunication service) 사용자 단말장치, PDA(personal digital assistant), PMP(portable multimedia player), DMB(digital multimedia broadcasting) 사용자 단말장치, E-Book, 휴대용 컴퓨터(notebook, tablet 등) 또는 디지털 카메라(digital camera) 등이 될 수 있다.
전자 장치(100)는 LTE, LTE-A(LTE Advance), CDMA(code division multiple access), WCDMA(wideband CDMA), UMTS(universal mobile telecommunications system), Wibro(wireless broadband), 또는 GSM(global system for mobile communications) 등을 통하여 광역 통신망(199)에 연결될 수 있다. 이를 위하여, 전자 장치(100)는 각 통신 프로토콜에 대응하는 통신모듈을 포함할 수 있다.
전자 장치(100)에는 가전기기 제어 어플리케이션이 설치될 수 있다. 사용자는 가전기기 제어 어플리케이션을 조작하여 가전기기(300)를 제어할 수 있다. 이하, 도2 내지 도4를 통하여 전자 장치(100)를 통한 가전기기(300) 제어 방법에 대하여 설명한다.
도 2 내지 도 4는 일 실시예에 따른 가전기기 제어 어플리케이션의 화면을 도시한 도면이다.
구체적으로, 도 2를 참조하면, 가전기기 제어 어플리케이션 실행 시에 전자 장치(100)의 디스플레이 모듈(153)은 조리 기기를 제어할 수 있는 정보 및 조리 기기에 관한 각종 정보를 출력할 수 있다.
구체적으로, 디스플레이 좌측 상단에 어플리케이션을 통해 제어되는 대상을 표시(102a)할 수 있고, 본 실시예에서 제어 대상은 조리기기인바 디스플레이 상단에 조리기기라고 표시할 수 있다.
또한, 제어 대상 아래 창(102b) 좌측 상단에 조리 기기의 상태를 나타낼 수 있는 아이콘을 표시할 수 있다. 예를 들어, 도 2의 READY와 같이 조리 준비 완료, 조리 완료 등과 같은 조리의 진행과정을 나타낼 수 있는 아이콘을 표시할 수 있다.
또한, 제어 대상 아래 창(102b) 중앙 하단에 “send to cooker"를 표시하여, 사용자가 “send to cooker"를 선택하는 경우 조리기기를 동작시킬 수 있다.
또한, 조리의 진행과정 등을 나타낼 수 있는 창(102b) 아래 창(102c)에 조리기기를 제어할 수 있는 요소를 표시할 수 있다. 예를 들어, 조리기기의 모드(예: air fry), 조리기기의 동작 온도 및 조리 시간 등과 같은 조리기기를 제어할 수 있는 요소를 표시할 수 있다.
사용자가 조리기기의 모드, 동작 온도 및 조리 시간 등과 같은 조리기기 제어 요소를 조작하는 경우, 전자 장치(100)는 이를 조리기기에 전송하여 사용자는 전자 장치(100)를 통하여 조리기기를 제어할 수 있다.
예를 들어, 사용자가 air fry모드로 190 ℃에서 15분간 동작하도록 설정한 후 "send to cooker" 아이콘(102b)을 선택한 경우 전자 장치(100)는 이를 통신모듈을 통해 조리기기에 전송하여 조리기기가 air fry모드로 190 ℃에서 15분간 동작하도록 할 수 있다.
디스플레이에 출력되는 정보는 이에 한정되는 것은 아니고 조리기기에 관한 각종 정보를 더 출력할 수 있다. 도 2를 참조하면, 조리기기를 이용한 추천 레시피(102d) 및 조리기기 필터 정보 등과 같은 조리기기 관련 정보(102e) 등과 같은 조리기기 및 조리에 관한 각종 정보를 출력할 수 있다.
도 3을 참조하면, 가전기기 제어 어플리케이션 실행 시에 전자 장치(100)의 디스플레이 모듈(153)은 텔레비전을 제어할 수 있는 정보 및 텔레비전에 관한 각종 정보를 출력할 수 있다.
구체적으로, 디스플레이 좌측 상단에 어플리케이션을 통해 제어되는 대상을 표시(103a)할 수 있고, 본 실시예에서 제어 대상은 텔레비전인바 디스플레이 상단에 TV라고 표시할 수 있다.
또한, 제어 대상 아래 창(103b)에 검색어를 입력할 수 있는 아이콘을 표시할 수 있다. 예를 들어, 도 3의 검색 창과 같이 사용자가 검색어를 입력할 수 있는 아이콘을 표시할 수 있다.
또한, 검색 창(103b) 아래 창(103c)에 텔레비전을 제어할 수 있는 요소를 표시할 수 있다. 예를 들어, 리모컨 아이콘 및 볼륨 조절 아이콘 등을 표시할 수 있다. 사용자는 리모컨 아이콘 및 볼륨 조절 아이콘 등과 같은 텔레비전 제어 요소를 조작하여 텔레비전을 제어할 수 있다.
사용자가 텔레비전의 채널 변경, 볼륨 조절 등과 같은 텔레비전 제어 요소를 조작하는 경우, 전자 장치(100)는 이를 텔레비전에 전송하여 사용자는 전자 장치(100)를 통하여 텔레비전을 제어할 수 있다.
예를 들어, 사용자가 음소거 아이콘을 선택한 경우, 전자 장치(100)는 이를 통신모듈을 통해 텔레비전에 전송하여 텔레비전이 음소거 되도록 할 수 있다.
디스플레이에 출력되는 정보는 이에 한정되는 것은 아니고 텔레비전에 관한 각종 정보를 더 출력할 수 있다. 도 3을 참조하면, 텔레비전에 연결될 수 있는 앱(App) 및 디바이스의 정보(103d), 텔레비전 설정 모드(103e) 및 컨텐츠 추천 정보(103d) 등과 같은 텔레비전에 관한 각종 정보를 출력할 수 있다.
도 4를 참조하면, 가전기기 제어 어플리케이션 실행 시에 전자 장치(100)의 디스플레이 모듈(153)은 조명 장치를 제어할 수 있는 정보 및 조명 장치에 관한 각종 정보를 출력할 수 있다.
구체적으로, 디스플레이 상단에 어플리케이션을 통해 제어되는 대상을 표시(104a)할 수 있고, 본 실시예에서 제어 대상은 조명 장치인바 디스플레이 상단에 Light라고 표시할 수 있다.
또한, 제어 대상 아래 창들(104b, 104c)에 조명 장치를 제어할 수 있는 요소를 표시할 수 있다. 예를 들어, 조명 장치의 전원 및 조명 장치의 동작 시간 등과 같은 조명 장치를 제어할 수 있는 요소를 표시할 수 있다.
사용자가 조명 장치의 전원 및 타이머 설정 등과 같은 조명 장치 제어 요소를 조작하는 경우, 전자 장치(100)는 이를 조명 장치에 전송하여 사용자는 전자 장치(100)를 통하여 조명 장치를 제어할 수 있다.
예를 들어, 사용자가 조명 장치의 전원을 오프(Off)한 경우, 전자 장치(100)는 이를 통신모듈을 통해 조명장치에 전송하여 조명장치가 오프(Off) 되도록 할 수 있다.
디스플레이에 출력되는 정보는 이에 한정되는 것은 아니고 조명장치에 관한 각종 정보를 더 출력할 수 있다. 도 4를 참조하면, 조명장치가 소비한 전력 정보(104d) 등과 같은 조명장치에 관한 정보를 출력할 수 있다.
전자장치(100)에 설치된 가전기기 제어 어플리케이션을 통해 제어 되는 가전기기(300)는, 가정(H) 내 마련될 수 있으며, 유형에 따라 각종 출력을 제공할 수 있다.
가전기기(300)는, 가정(H) 내 실내 온도를 조절하는 공기 조화기, 방송 신호 등 각종 멀티미디어 정보를 출력하는 텔레비전, 음식물을 냉장 또는 냉동하는 냉장고, 음식물을 조리하는 조리 기기, 의류를 세탁 또는 건조하는 세탁기, 의류를 건조하거나 의류에의 먼지를 제거하는 의류 관리기, 가정(H) 내 청소를 수행하는 로봇 청소기 및 사운드를 출력하는 스피커, 실내 공간에 마련되어 실내 공간으로 광을 방출하는 조명 장치 등을 포함할 수 있다. 다만, 가전기기(300)의 유형은, 상기 예에 한정되는 것은 아니며, 가정(H) 내에서 사용자의 편의를 위하여 특정 동작을 수행하는 장치이면 제한 없이 포함될 수 있다.
가전기기(300)는 가전기기의 통신부를 이용하여 광역 통신망(199)에 연결될 수 있으며, 이를 통해, 서버(200) 등 다른 전자 장치와 통신을 수행할 수 있다.
이 때, 광역 통신망(199)은, 텔레커뮤니케이션 네트워크, 예를 들면, 컴퓨터 네트워크(예: LAN(local area network) 또는 WAN(wide area network)), 인터넷, 또는 텔레폰 네트워크 중 적어도 하나를 포함할 수 있다.
서버(200)는 전술한 바와 같이, 전자 장치(100) 및 가전기기(300)로부터 수신한 각종 정보에 기초하여 가전기기 제어 명령 생성하고 가전기기 제어 어플리케이션을 제어하는 명령을 생성할 수 있다.
또한 서버(200)는 일 실시예에 따르면 사용자로부터 선택된 제어 대상이 되는 가전기기 팝업의 기준 크기를 전자 장치(100)에 전달할 수 있으며, 현재 팝업의 크기와 선택된 제어 대상이 되는 가전기기 팝업의 기준 크기를 비교하여 팝업 크기 유지 또는 변경 제어 명령을 전자 장치(100)에 전달할 수도 있다.
도 5는 일 실시예에 따른 전자 장치의 블록도이다.
도 5를 참조하면, 전자 장치(100)는 프로세서(120), 메모리(130), 사용자 인터페이스(150), 오디오 모듈(170), 센서 모듈(176), 인터페이스(177), 연결 단자(178), 햅틱 모듈(179), 카메라 모듈(180), 전력 관리 모듈(188), 배터리(189), 통신 모듈(190), 가입자 식별 모듈(196), 또는 안테나 모듈(197)을 포함할 수 있다.
어떤 실시예에서는, 전자 장치(100)에는, 이 구성요소들 중 적어도 하나(예: 연결 단자(178))가 생략되거나, 하나 이상의 다른 구성요소가 추가될 수 있다. 어떤 실시예에서는, 이 구성요소들 중 일부들(예: 센서 모듈(176), 카메라 모듈(180), 또는 안테나 모듈(197))은 하나의 구성요소(예: 디스플레이 모듈(153))로 통합될 수 있다.
프로세서(120)는, 예를 들면, 소프트웨어(예: 프로그램(140))를 실행하여 프로세서(120)에 연결된 전자 장치(100)의 적어도 하나의 다른 구성요소(예: 하드웨어 또는 소프트웨어 구성요소)를 제어할 수 있고, 다양한 데이터 처리 또는 연산을 수행할 수 있다.
일 실시예에 따르면, 데이터 처리 또는 연산의 적어도 일부로서, 프로세서(120)는 다른 구성요소(예: 센서 모듈(176) 또는 통신 모듈(190))로부터 수신된 명령 또는 데이터를 휘발성 메모리(132)에 저장하고, 휘발성 메모리(132)에 저장된 명령 또는 데이터를 처리하고, 결과 데이터를 비휘발성 메모리(134)에 저장할 수 있다.
일 실시예에 따르면, 프로세서(120)는 메인 프로세서(121)(예: 중앙 처리 장치 또는 어플리케이션 프로세서) 또는 이와는 독립적으로 또는 함께 운영 가능한 보조 프로세서(123)(예: 그래픽 처리 장치, 신경망 처리 장치(NPU: neural processing unit), 이미지 시그널 프로세서, 센서 허브 프로세서, 또는 커뮤니케이션 프로세서)를 포함할 수 있다.
예를 들어, 전자 장치(100)가 메인 프로세서(121) 및 보조 프로세서(123)를 포함하는 경우, 보조 프로세서(123)는 메인 프로세서(121)보다 저전력을 사용하거나, 지정된 기능에 특화되도록 설정될 수 있다. 보조 프로세서(123)는 메인 프로세서(121)와 별개로, 또는 그 일부로서 구현될 수 있다.
보조 프로세서(123)는, 예를 들면, 메인 프로세서(121)가 인액티브(예: 슬립) 상태에 있는 동안 메인 프로세서(121)를 대신하여, 또는 메인 프로세서(121)가 액티브(예: 어플리케이션 실행) 상태에 있는 동안 메인 프로세서(121)와 함께, 전자 장치(100)의 구성요소들 중 적어도 하나의 구성요소(예: 디스플레이 모듈(153), 센서 모듈(176), 또는 통신 모듈(190))와 관련된 기능 또는 상태들의 적어도 일부를 제어할 수 있다.
일 실시예에 따르면, 보조 프로세서(123)(예: 이미지 시그널 프로세서 또는 커뮤니케이션 프로세서)는 기능적으로 관련 있는 다른 구성요소(예: 카메라 모듈(180) 또는 통신 모듈(190))의 일부로서 구현될 수 있다. 일 실시예에 따르면, 보조 프로세서(123)(예: 신경망 처리 장치)는 인공지능 모델의 처리에 특화된 하드웨어 구조를 포함할 수 있다. 인공지능 모델은 기계 학습을 통해 생성될 수 있다.
메모리(130)는, 전자 장치(100)의 적어도 하나의 구성요소(예: 프로세서(120) 또는 센서 모듈(176))에 의해 사용되는 다양한 데이터를 저장할 수 있다. 데이터는, 예를 들어, 소프트웨어(예: 프로그램(140)) 및, 이와 관련된 명령에 대한 입력 데이터 또는 출력 데이터를 포함할 수 있다. 메모리(130)는, 휘발성 메모리(132) 또는 비휘발성 메모리(134)를 포함할 수 있다.
프로그램(140)은 메모리(130)에 소프트웨어로서 저장될 수 있으며, 예를 들면, 운영 체제(142), 미들웨어(144) 또는 어플리케이션(146)을 포함할 수 있다.
사용자 인터페이스(150) 사용자로부터 입력을 수신하거나 각종 정보를 출력하는 출력할 수 있다. 일 실시예에 따른 사용자 인터페이스(150)는 입력 모듈(151), 음향 출력 모듈(152) 및 디스플레이 모듈(153)을 포함할 수 있다.
입력 모듈(151)은, 전자 장치(100)의 구성요소(예: 프로세서(120))에 사용될 명령 또는 데이터를 전자 장치(100)의 외부(예: 사용자)로부터 수신할 수 있다. 입력 모듈(151)은, 예를 들면, 마이크, 마우스, 키보드, 키(예: 버튼), 또는 디지털 펜(예: 스타일러스 펜)을 포함할 수 있다.
음향 출력 모듈(152)은 음향 신호를 전자 장치(100)의 외부로 출력할 수 있다. 음향 출력 모듈(152)은, 예를 들면, 스피커 또는 리시버를 포함할 수 있다. 스피커는 멀티미디어 재생 또는 녹음 재생과 같이 일반적인 용도로 사용될 수 있다. 리시버는 착신 전화를 수신하기 위해 사용될 수 있다. 일 실시예에 따르면, 리시버는 스피커와 별개로, 또는 그 일부로서 구현될 수 있다.
디스플레이 모듈(153)은 전자 장치(100)의 외부(예: 사용자)로 정보를 시각적으로 제공할 수 있다. 디스플레이 모듈(153)은, 예를 들면, 디스플레이, 홀로그램 장치, 또는 프로젝터 및 해당 장치를 제어하기 위한 제어 회로를 포함할 수 있다. 일 실시예에 따르면, 디스플레이 모듈(153)은 터치를 감지하도록 설정된 터치 센서, 또는 상기 터치에 의해 발생되는 힘의 세기를 측정하도록 설정된 압력 센서를 포함할 수 있다.
오디오 모듈(170)은 소리를 전기 신호로 변환시키거나, 반대로 전기 신호를 소리로 변환시킬 수 있다. 일 실시예에 따르면, 오디오 모듈(170)은, 입력 모듈(151)을 통해 소리를 획득하거나, 음향 출력 모듈(152), 또는 전자 장치(100)와 직접 또는 무선으로 연결된 외부 전자 장치(예: 가전기기(310))(예: 스피커 또는 헤드폰)를 통해 소리를 출력할 수 있다.
센서 모듈(176)은 전자 장치(100)의 작동 상태(예: 전력 또는 온도), 또는 외부의 환경 상태(예: 사용자 상태)를 감지하고, 감지된 상태에 대응하는 전기 신호 또는 데이터 값을 생성할 수 있다.
인터페이스(177)는 전자 장치(100)가 외부 전자 장치(예: 가전기기(310))와 직접 또는 무선으로 연결되기 위해 사용될 수 있는 하나 이상의 지정된 프로토콜들을 지원할 수 있다.
연결 단자(178)는, 그를 통해서 전자 장치(100)가 외부 전자 장치(예: 가전기기(310))와 물리적으로 연결될 수 있는 커넥터를 포함할 수 있다. 일 실시예에 따르면, 연결 단자(178)는, 예를 들면, 디스플레이포트 커넥터, HDMI 커넥터, USB 커넥터, SD 카드 커넥터, 또는 오디오 커넥터(예: 헤드폰 커넥터)를 포함할 수 있다.
햅틱 모듈(179)은 전기적 신호를 사용자가 촉각 또는 운동 감각을 통해서 인지할 수 있는 기계적인 자극(예: 진동 또는 움직임) 또는 전기적인 자극으로 변환할 수 있다. 일 실시예에 따르면, 햅틱 모듈(179)은, 예를 들면, 모터, 압전 소자, 또는 전기 자극 장치를 포함할 수 있다.
카메라 모듈(180)은 정지 영상 및 동영상을 촬영할 수 있다. 일 실시예에 따르면, 카메라 모듈(180)은 하나 이상의 렌즈들, 이미지 센서들, 이미지 시그널 프로세서들, 또는 플래시들을 포함할 수 있다.
전력 관리 모듈(188)은 전자 장치(100)에 공급되는 전력을 관리할 수 있다. 일 실시예에 따르면, 전력 관리 모듈(188)은, 예를 들면, PMIC(power management integrated circuit)의 적어도 일부로서 구현될 수 있다.
배터리(189)는 전자 장치(100)의 적어도 하나의 구성요소에 전력을 공급할 수 있다. 일 실시예에 따르면, 배터리(189)는, 예를 들면, 재충전 불가능한 1차 전지, 재충전 가능한 2차 전지 또는 연료 전지를 포함할 수 있다.
통신 모듈(190)은 전자 장치(100)와 외부 전자 장치(예: 가전기기(310), 가전기기(320), 또는 서버(200)) 간의 직접(예: 유선) 통신 채널 또는 무선 통신 채널의 수립, 및 수립된 통신 채널을 통한 통신 수행을 지원할 수 있다.
통신 모듈(190)은 프로세서(120)(예: 어플리케이션 프로세서)와 독립적으로 운영되고, 직접(예: 유선) 통신 또는 무선 통신을 지원하는 하나 이상의 커뮤니케이션 프로세서를 포함할 수 있다.
일 실시예에 따르면, 통신 모듈(190)은 무선 통신 모듈(192)(예: 셀룰러 통신 모듈, 근거리 무선 통신 모듈, 또는 GNSS(global navigation satellite system) 통신 모듈) 또는 유선 통신 모듈(194)(예: LAN(local area network) 통신 모듈, 또는 전력선 통신 모듈)을 포함할 수 있다. 이런 여러 종류의 통신 모듈들은 하나의 구성요소(예: 단일 칩)로 통합되거나, 또는 서로 별도의 복수의 구성요소들(예: 복수 칩들)로 구현될 수 있다.
무선 통신 모듈(192)은 가입자 식별 모듈(196)에 저장된 가입자 정보(예: 국제 모바일 가입자 식별자(IMSI))를 이용하여 제 1 광역통신망(198) 또는 제 2 광역통신망(199)와 같은 통신 광역통신망 내에서 전자 장치(100)를 확인 또는 인증할 수 있다.
안테나 모듈(197)은 신호 또는 전력을 외부(예: 외부의 전자 장치)로 송신하거나 외부로부터 수신할 수 있다. 일 실시예에 따르면, 안테나 모듈(197)은 서브스트레이트(예: PCB) 위에 형성된 도전체 또는 도전성 패턴으로 이루어진 방사체를 포함하는 안테나를 포함할 수 있다다양한 실시예에 따르면, 안테나 모듈(197)은 mmWave 안테나 모듈을 형성할 수 있다.
상기 구성요소들 중 적어도 일부는 주변 기기들 간 통신 방식(예: 버스, GPIO(general purpose input and output), SPI(serial peripheral interface), 또는 MIPI(mobile industry processor interface))을 통해 서로 연결되고 신호(예: 명령 또는 데이터)를 상호간에 교환할 수 있다.
일 실시예에 따르면, 명령 또는 데이터는 광역통신망(199)에 연결된 서버(200)를 통해서 전자 장치(100)와 외부의 가전기기(300)간에 송신 또는 수신될 수 있다.
일 실시예에 따르면, 전자 장치(100)에서 실행되는 동작들의 전부 또는 일부는 외부의 전자 장치들(310, 320, 또는 200) 중 하나 이상의 외부의 전자 장치들에서 실행될 수 있다.
예를 들면, 전자 장치(100)가 어떤 기능이나 서비스를 자동으로, 또는 사용자 또는 다른 장치로부터의 요청에 반응하여 수행해야 할 경우에, 전자 장치(100)는 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 하나 이상의 외부의 전자 장치들에게 그 기능 또는 그 서비스의 적어도 일부를 수행하라고 요청할 수 있다.
상기 요청을 수신한 하나 이상의 외부의 전자 장치들은 요청된 기능 또는 서비스의 적어도 일부, 또는 상기 요청과 관련된 추가 기능 또는 서비스를 실행하고, 그 실행의 결과를 전자 장치(100)로 전달할 수 있다.
전자 장치(100)는 상기 결과를, 그대로 또는 추가적으로 처리하여, 상기 요청에 대한 응답의 적어도 일부로서 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅, 분산 컴퓨팅, 모바일 에지 컴퓨팅(MEC: mobile edge computing), 또는 클라이언트-서버 컴퓨팅 기술이 이용될 수 있다.
전자 장치(100)는, 예를 들어, 분산 컴퓨팅 또는 모바일 에지 컴퓨팅을 이용하여 초저지연 서비스를 제공할 수 있다. 다른 실시예에 있어서, 서버(200)는 기계 학습 및/또는 신경망을 이용한 지능형 서버일 수 있다.
본 문서의 다양한 실시예들 및 이에 사용된 용어들은 본 문서에 기재된 기술적 특징들을 특정한 실시예들로 한정하려는 것이 아니며, 해당 실시예의 다양한 변경, 균등물, 또는 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 또는 관련된 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 아이템에 대응하는 명사의 단수 형은 관련된 문맥상 명백하게 다르게 지시하지 않는 한, 상기 아이템 한 개 또는 복수 개를 포함할 수 있다. 본 문서에서, "A 또는 B", "A 및 B 중 적어도 하나", "A 또는 B 중 적어도 하나", "A, B 또는 C", "A, B 및 C 중 적어도 하나", 및 "A, B, 또는 C 중 적어도 하나"와 같은 문구들 각각은 그 문구들 중 해당하는 문구에 함께 나열된 항목들 중 어느 하나, 또는 그들의 모든 가능한 조합을 포함할 수 있다. "제 1", "제 2", 또는 "첫째" 또는 "둘째"와 같은 용어들은 단순히 해당 구성요소를 다른 해당 구성요소와 구분하기 위해 사용될 수 있으며, 해당 구성요소들을 다른 측면(예: 중요성 또는 순서)에서 한정하지 않는다. 어떤(예: 제 1) 구성요소가 다른(예: 제 2) 구성요소에, "기능적으로" 또는 "통신적으로"라는 용어와 함께 또는 이런 용어 없이, "커플드" 또는 "커넥티드"라고 언급된 경우, 그것은 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로(예: 유선으로), 무선으로, 또는 제 3 구성요소를 통하여 연결될 수 있다는 것을 의미한다.
본 문서의 다양한 실시예들에서 사용된 용어 "모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구현된 유닛을 포함할 수 있으며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로와 같은 용어와 상호 호환적으로 사용될 수 있다. 모듈은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는, 상기 부품의 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 일 실시예에 따르면, 모듈은 ASIC(application-specific integrated circuit)의 형태로 구현될 수 있다.
도 6은 일 실시예에 따른 가전기기 제어 어플리케이션 제어 방법을 설명하는 순서도이고, 도 7은 일 실시예에 따른 가전기기의 아이콘을 팝업으로 화면에 표시한 것을 도시한 도면이고, 도 8은 일 실시예에 따라 사용자가 제어 대상이 되는 TV를 선택하는 것을 도시한 도면이고, 도 9는 일 실시예에 따라 제어 대상이 TV인 경우에 팝업의 크기가 변경되는 것을 도시한 도면이고, 도 10은 일 실시예에 따라 사용자가 제어 대상이 되는 조명 장치를 선택하는 것을 도시한 도면이고, 도 11은 일 실시예에 따라 제어 대상이 조명 장치인 경우에 팝업의 크기가 유지되는 것을 도시한 도면이다.
도 6은 일 실시예에 따른 가전기기 제어 어플리케이션 제어 방법을 설명하는 순서도이다.
프로세서(120)는 사용자로부터 가전기기 제어 어플리케이션 실행 명령을 입력 받은 경우 가전기기 제어 어플리케이션을 실행 할 수 있다(1000).
가전기기 제어 어플리케이션 실행 시에 프로세서(120)는 디스플레이 모듈(153)을 제어하여 적어도 하나의 가전기기 아이콘을 팝업으로 표시할 수 있다(1100). 도 7을 참조하면, 프로세서(120)는 사용자로부터 가전기기 선택을 유도하기 위해 디스플레이 모듈(153)을 제어하여 TV아이콘과 Light 아이콘을 팝업(P1)으로 표시할 수 있다.
도 7을 참조하면, 아이콘은 TV, Light와 같이 제어 대상의 명칭으로 표시될 수 있다. 다만 아이콘은 전술한 예시에 한정되는 것은 아닌바, 가전기기 선택을 위한 표시이면 그 형태나 방식 등에 대해서는 제한을 두지 않는다. 예를 들어, 아이콘은 가전기기의 사진이 될 수 있으며, 표시기기의 이름 및 상태를 나타내는 표시가 될 수도 있다.
팝업은 가전기기 제어 어플리케이션 화면을 디스플레이 모듈(153)의 전체 영역이 아닌 일부 영역에서 표시된 화면을 의미한다.
프로세서(120)는 사용자로부터 수신된 입력에 기초하여 적어도 하나의 가전기기 아이콘을 팝업으로 표시할 수 있다. 예를 들어, 사용자가 어플리케이션을 조작하여 팝업 모드로 설정한 경우, 프로세서(120)는 적어도 하나의 가전기기 아이콘을 팝업으로 표시할 수 있다.
또한, 일 실시예에 따르면, 프로세서(120)는 사용자 입력이 없어도 가전기기 제어 어플리케이션 실행 시에 적어도 하나의 가전기기 아이콘을 팝업으로 표시할 수 있다.
이때, 적어도 하나의 가전기기 아이콘이 표시되는 팝업의 크기는 메모리(130)에 저장된 미리 설정된 크기일 수 있다. 예를 들어, 메모리(130)에 저장된 이전 팝업 모드 실행 시에 크기 일 수 있으며, 가전기기 제어 어플리케이션을 실행하기 위한 최소 크기 일 수 있다(예: 해상도 280 x 280).
프로세서(120)는 사용자로부터 제어 대상 되는 가전기기를 수신 받을 수 있다(1200). 사용자는 적어도 하나의 가전기기 중에서 제어 대상이 되는 가전기기를 선택할 수 있다. 도 8을 참조하면, TV 아이콘과 Light의 아이콘이 있는 경우 사용자는 TV를 제어하기 위해 TV 아이콘을 선택할 수 있다.
또한, 프로세서(120)는 제어 대상이 되는 가전기기가 선택된 경우, 통신 모듈(190)을 제어하여 선택된 가전기기에 대한 정보를 서버(200)에 송신할 수도 있다.
프로세서(120)는 제어 대상이 되는 가전기기가 선택된 경우 디스플레이 모듈(153)에 표시된 팝업의 크기와 선택된 제어 대상이 되는 가전기기 팝업의 기준 크기를 비교할 수 있다(1300).
가전기기 팝업의 기준 크기는 메모리(130) 또는 서버(200)에 저장된 크기일 수 있다. 예를 들어, 가전기기 팝업의 기준 크기는 가전기기를 제어하기 위한 제어 요소를 화면에 출력할 수 있는 최소한의 크기일 수 있다.
따라서, 가전기기 팝업의 기준 크기는 제어 대상이 되는 가전기기의 제어 요소의 개수 및 가전기기의 특성에 기초하여 결정될 수 있다.
예를 들어, 조명 장치의 경우 전원 버튼, 타이머만을 제어 요소로 포함하기 때문에 조명 장치 팝업의 기준 크기는 가전기기 제어 어플리케이션을 실행하기 위한 최소 크기 일 수 있고(예: 해상도 280 x 280), 조리 기기의 경우 조리기기의 모드, 조리기기의 동작 온도 및 조리 시간 등을 제어 요소로 포함하기 때문에 조리 기기 팝업의 기준 크기는 조명 장치 팝업의 기준 크기보다 클 수 있으며(예: 해상도 320 x 640), TV의 경우 채널 변경, 볼륨 조절을 제어 요소로 포함하며, 채널 변경 및 볼륨 조절의 터치 영역은 조명 기기의 터치 영역에 비해 넓기 때문에 TV 팝업의 기준 크기는 조명 장치 팝업의 기준 크기보다 크고 조리기기 팝업의 기준 크기보다 작을 수 있다(예: 해상도 284 x 526).
또한, 메모리(130) 또는 서버(200)에는 가전기기의 팝업의 기준 크기에 따른 팝업의 레이아웃이 저장될 수 있다. 예를 들어, 메모리에는 가전기기의 팝업의 기준 크기에 따라 제어요소가 표시되는 아이콘의 크기가 작게 설정된 팝업의 레이아웃, 텍스트를 그림으로 변경한 팝업의 레이아웃 등이 저장될 수 있다.
프로세서(120)는 디스플레이 모듈(153)에 표시된 팝업의 크기가 선택된 가전기기 팝업의 기준 크기 미만인 경우(1300의 예) 디스플레이 모듈(153)에 표시된 팝업의 크기를 선택된 가전기기 팝업의 기준 크기로 변경할 수 있다(1400).
또한, 프로세서(120)는 디스플레이 모듈(153)에 표시된 팝업의 크기가 선택된 가전기기 팝업의 기준 크기 이상인 경우(1300의 아니오) 디스플레이 모듈(153)에 표시된 팝업의 크기를 유지할 수 있다(1500).
디스플레이 모듈(153)에 표시된 팝업의 크기와 선택된 제어 대상이 되는 가전기기 팝업의 기준 크기를 비교하는 과정은 프로세서(120)에서만 수행되는 것은 아니고, 서버(200)에서도 수행될 수 있다.
서버(200)에서 디스플레이 모듈(153)에 표시된 팝업의 크기와 선택된 제어 대상이 되는 가전기기 팝업의 기준 크기를 비교하는 것을 수행하는 경우, 서버(200)는 비교 결과에 기초하여 팝업의 크기 제어 명령을 전자 장치(100)에 송신할 수 있고, 프로세서(120)는 이에 기초하여 팝업의 크기를 변경할 수 있다.
도 8를 참조하면, 사용자가 제어 대상 가전기기를 TV로 선택한 경우, 프로세서(120)는 TV 아이콘 및 Light의 아이콘이 표시된 팝업(P1)의 크기와 TV 팝업(P2)의 기준 크기를 비교할 수 있다.
프로세서(120)는 TV 아이콘 및 Light의 아이콘이 표시된 팝업(P1)의 크기와 TV 팝업(P2)의 기준 크기를 비교한 결과 TV 아이콘 및 Light의 아이콘이 표시된 팝업(P1)의 크기가 TV 팝업(P2)의 기준 크기 미만이므로 도 9와 같이, TV 아이콘 및 Light의 아이콘이 표시된 팝업(P1)의 크기를 TV 팝업(P2)의 기준 크기로 변경할 수 있다.
또한, 프로세서(120)는 팝업의 크기 변경 시에, 디스플레이 모듈(153)을 제어하여 팝업 크기 변경 알림을 출력하도록 할 수 있다.
도 10을 참조하면, 사용자가 제어 대상 가전기기를 Light로 선택한 경우, 프로세서(120)는 TV 아이콘 및 Light의 아이콘이 표시된 팝업(P1)의 크기와 조명 장치 팝업(P2)의 기준 크기를 비교할 수 있다.
프로세서(120)는 TV 아이콘 및 Light의 아이콘이 표시된 팝업(P1)의 크기와 조명 장치 팝업(P3)의 기준 크기를 비교한 결과 TV 아이콘 및 Light의 아이콘이 표시된 팝업(P1)의 크기가 조명 장치 팝업(P3)의 기준 크기 이상이므로 도11과 같이, TV 아이콘 및 Light의 아이콘이 표시된 팝업(P1)의 크기를 유지할 수 있다.
한편, 개시된 실시예들은 컴퓨터에 의해 실행 가능한 명령어를 저장하는 기록매체의 형태로 구현될 수 있다. 명령어는 프로그램 코드의 형태로 저장될 수 있으며, 프로세서에 의해 실행되었을 때, 프로그램 모듈을 생성하여 개시된 실시예들의 동작을 수행할 수 있다. 기록매체는 컴퓨터로 읽을 수 있는 기록매체로 구현될 수 있다.
컴퓨터가 읽을 수 있는 기록매체로는 컴퓨터에 의하여 해독될 수 있는 명령어가 저장된 모든 종류의 기록 매체를 포함한다. 예를 들어, ROM(read only memory), RAM(random access memory), 자기 테이프, 자기 디스크, 플래쉬 메모리, 광 데이터 저장장치 등이 있을 수 있다.
이상에서와 같이 첨부된 도면을 참조하여 개시된 실시예들을 설명하였다. 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고도, 개시된 실시예들과 다른 형태로 본 발명이 실시될 수 있음을 이해할 것이다. 개시된 실시예들은 예시적인 것이며, 한정적으로 해석되어서는 안 된다.

Claims (15)

  1. 적어도 하나의 가전기기의 아이콘을 팝업으로 화면에 표시하는 단계;
    상기 적어도 하나의 가전기기 중에서 제어 대상이 되는 가전기기의 선택을 사용자로부터 수신하는 단계; 및
    상기 선택된 가전기기에 기초하여 상기 화면에 표시된 팝업의 크기를 유지하거나 변경하는 단계;를 포함하는 가전기기 제어 어플리케이션 제어 방법.
  2. 제 1 항에 있어서,
    상기 화면에 표시된 팝업의 크기와 상기 선택된 가전기기 팝업의 기준 크기를 비교하여, 상기 화면에 표시된 팝업의 크기를 유지하거나 변경하는 가전기기 제어 어플리케이션 제어 방법.
  3. 제 2 항에 있어서,
    상기 화면에 표시된 팝업의 크기가 상기 선택된 가전기기 팝업의 기준 크기 미만인 경우, 상기 화면에 표시된 팝업의 크기를 상기 선택된 가전기기 팝업의 기준 크기로 변경하는 가전기기 제어 어플리케이션 제어 방법.
  4. 제 2 항에 있어서,
    상기 화면에 표시된 팝업의 크기가 상기 선택된 가전기기 팝업의 기준 크기 이상인 경우, 상기 화면에 표시된 팝업의 크기를 유지하는 가전기기 제어 어플리케이션 제어 방법.
  5. 제 2 항에 있어서,
    상기 가전기기 팝업의 기준 크기는,
    상기 선택된 가전기기의 제어 요소의 개수 및 상기 가전기기의 특성에 기초하여 결정되는 가전기기 제어 어플리케이션 제어 방법.
  6. 제 2 항에 있어서,
    상기 화면에 표시된 팝업의 크기가 변경되면 상기 화면에 표시된 팝업의 레이아웃을 변경하는 단계;를 더 포함하는 가전기기 제어 어플리케이션 제어 방법.
  7. 제 1 항에 있어서,
    적어도 하나의 가전기기의 아이콘을 화면에 팝업으로 표시하는 단계는
    미리 정해진 최소 크기로 팝업을 표시하는 것;을 포함하는 가전기기 제어 어플리케이션 제어 방법.
  8. 제 1 항에 있어서,
    상기 화면에 표시된 팝업의 크기 변경 시에, 상기 화면에 상기 화면에 표시된 팝업의 크기 변경 알림을 표시하는 단계;를 더 포함하는 가전기기 제어 어플리케이션 제어 방법.
  9. 프로세서; 및
    사용자로부터 입력을 수신하거나 각종 정보를 시각적으로 출력하는 디스플레이 모듈;를 포함하고,
    상기 프로세서는,
    적어도 하나의 가전기기의 아이콘을 팝업으로 표시하도록 상기 디스플레이 모듈을 제어하고, 상기 사용자로부터 선택된 제어 대상이 되는 가전기기에 기초하여 상기 디스플레이 모듈에 표시된 팝업의 크기를 유지하거나 변경하는 전자 장치.
  10. 제 9 항에 있어서,
    상기 프로세서는,
    상기 디스플레이 모듈에 표시된 팝업의 크기와 상기 선택된 가전기기 팝업의 기준 크기를 비교하여, 상기 디스플레이 모듈에 표시된 팝업의 크기를 유지하거나 변경하는 전자 장치.
  11. 제 10 항에 있어서,
    상기 프로세서는,
    상기 디스플레이 모듈에 표시된 팝업의 크기가 상기 선택된 가전기기 팝업의 기준 크기 미만인 경우, 상기 디스플레이 모듈에 표시된 팝업의 크기를 상기 선택된 가전기기 팝업의 기준 크기로 변경하는 전자 장치.
  12. 제 10 항에 있어서,
    상기 프로세서는,
    상기 디스플레이 모듈에 표시된 팝업의 크기가 상기 선택된 가전기기 팝업의 기준 크기 이상인 경우, 상기 디스플레이 모듈에 표시된 팝업의 크기를 유지하는 전자 장치.
  13. 제 10 항에 있어서,
    상기 가전기기 팝업의 기준 크기는,
    상기 선택된 가전기기의 제어 요소의 개수 및 상기 가전기기의 특성에 기초하여 결정되는 전자 장치.
  14. 제 10 항에 있어서,
    상기 프로세서는,
    상기 디스플레이 모듈에 표시된 팝업의 크기가 변경되면 상기 디스플레이 모듈에 표시된 팝업의 레이아웃을 변경하는 전자 장치.
  15. 제 9 항에 있어서,
    상기 프로세서는,
    적어도 하나의 가전기기의 아이콘을 미리 정해진 최소 크기의 팝업으로 표시하도록 상기 디스플레이 모듈을 제어하는 전자 장치.
PCT/KR2023/017453 2022-12-05 2023-11-03 전자 장치 및 가전기기 제어 어플리케이션 제어 방법 WO2024122890A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2022-0168040 2022-12-05
KR1020220168040A KR20240083677A (ko) 2022-12-05 2022-12-05 전자 장치 및 가전기기 제어 어플리케이션 제어 방법

Publications (1)

Publication Number Publication Date
WO2024122890A1 true WO2024122890A1 (ko) 2024-06-13

Family

ID=91379687

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2023/017453 WO2024122890A1 (ko) 2022-12-05 2023-11-03 전자 장치 및 가전기기 제어 어플리케이션 제어 방법

Country Status (2)

Country Link
KR (1) KR20240083677A (ko)
WO (1) WO2024122890A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150033844A (ko) * 2013-09-25 2015-04-02 삼성전자주식회사 윈도우 제어 방법 및 이를 지원하는 전자장치
KR20160018758A (ko) * 2013-06-27 2016-02-17 가부시끼가이샤 도시바 가전기기 및 네트워크 시스템
KR20160060386A (ko) * 2014-11-20 2016-05-30 삼성전자주식회사 윈도우의 크기를 변경하는 디바이스 및 그 제어 방법
KR20190059375A (ko) * 2017-11-23 2019-05-31 주식회사 엘지유플러스 IoT 가전기기의 제어범주를 설정하는 방법 및 그 장치
KR20220100408A (ko) * 2021-01-08 2022-07-15 삼성전자주식회사 냉장고 및 그 제어 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160018758A (ko) * 2013-06-27 2016-02-17 가부시끼가이샤 도시바 가전기기 및 네트워크 시스템
KR20150033844A (ko) * 2013-09-25 2015-04-02 삼성전자주식회사 윈도우 제어 방법 및 이를 지원하는 전자장치
KR20160060386A (ko) * 2014-11-20 2016-05-30 삼성전자주식회사 윈도우의 크기를 변경하는 디바이스 및 그 제어 방법
KR20190059375A (ko) * 2017-11-23 2019-05-31 주식회사 엘지유플러스 IoT 가전기기의 제어범주를 설정하는 방법 및 그 장치
KR20220100408A (ko) * 2021-01-08 2022-07-15 삼성전자주식회사 냉장고 및 그 제어 방법

Also Published As

Publication number Publication date
KR20240083677A (ko) 2024-06-12

Similar Documents

Publication Publication Date Title
WO2021261722A1 (ko) 플렉서블 디스플레이를 포함하는 전자 장치
WO2018143711A1 (en) System and method of providing sensing data to electronic device
WO2022030890A1 (ko) 다중 윈도우 이미지 캡쳐 방법 및 이를 위한 전자 장치
WO2019164248A1 (en) Method for adaptively controlling low power display mode and electronic device thereof
WO2022098190A1 (ko) 전자 장치 및 복수의 오디오 출력 장치와의 연결에 따른 오디오 출력 모드 설정 방법
WO2020159213A1 (ko) 상황에 기반한 사용자 맞춤형 설정 방법 및 장치
WO2024122890A1 (ko) 전자 장치 및 가전기기 제어 어플리케이션 제어 방법
WO2022211307A1 (ko) 올웨이즈 온 디스플레이 컨텐트를 표시를 지원하는 전자 장치 및 이의 제어 방법
WO2022065845A1 (ko) 입력 데이터 처리 방법 및 이를 지원하는 전자 장치
WO2022149763A1 (ko) 요청된 기능을 수행하는 외부 전자 장치를 관리하기 위한 전자 장치 및 그 작동 방법
WO2022055178A1 (ko) 다양한 형태의 콘텐트를 표시하기 위한 폴더블 전자 장치 및 그의 동작 방법
WO2022030921A1 (ko) 전자 장치 및 그의 화면을 제어하는 방법
WO2021049770A1 (ko) 복수의 어플리케이션을 실행하는 전자 장치 및 방법
WO2024049088A1 (ko) 미디어 기반의 조명 제어 서비스를 제공하기 위한 전자 장치, 그 동작 방법 및 저장 매체
WO2023214675A1 (ko) 터치 입력을 처리하기 위한 전자 장치 및 방법
WO2022215865A1 (ko) 전자 장치 및 iot 제어 정보 공유 방법
WO2021172804A1 (ko) 제스쳐 입력에 대응하는 시각적 효과를 제공하기 위한 전자 장치 및 그의 동작 방법
WO2022182025A1 (ko) 전자 장치 및 그 제어 방법
WO2024076008A1 (ko) 파일을 공유하는 전자 장치, 방법, 및 비일시적 컴퓨터 판독가능 저장 매체
WO2024025194A1 (ko) 알림과 관련된 동작을 수행하기 위한 방법 및 이를 지원하는 전자 장치
WO2024151042A1 (ko) 어플리케이션 목록을 제공하기 위한 전자 장치, 그 동작 방법 및 저장 매체
WO2022086057A1 (ko) 전자 장치 및 통화 녹음 방법
WO2024096304A1 (ko) 가구에 포함되는 장치의 사용 및 관리를 위한 사용자 인터페이스를 표시하기 위한 전자 장치 및 그 동작 방법
WO2024034784A1 (ko) 다른 전자 장치의 어드버타이징 프로세스와 동기화된 어드버타이징 프로세스를 수행하는 전자 장치, 방법, 및 비일시적 컴퓨터 판독가능 저장 매체
WO2024025086A1 (ko) 상호작용에 기반하여 이미지를 표시하기 위한 전자 장치 및 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23900910

Country of ref document: EP

Kind code of ref document: A1