WO2019177437A1 - 화면 제어 방법 및 이를 지원하는 전자 장치 - Google Patents

화면 제어 방법 및 이를 지원하는 전자 장치 Download PDF

Info

Publication number
WO2019177437A1
WO2019177437A1 PCT/KR2019/003085 KR2019003085W WO2019177437A1 WO 2019177437 A1 WO2019177437 A1 WO 2019177437A1 KR 2019003085 W KR2019003085 W KR 2019003085W WO 2019177437 A1 WO2019177437 A1 WO 2019177437A1
Authority
WO
WIPO (PCT)
Prior art keywords
region
electronic device
meaning
processor
different
Prior art date
Application number
PCT/KR2019/003085
Other languages
English (en)
French (fr)
Inventor
박미지
오영학
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to US16/962,775 priority Critical patent/US11630574B2/en
Priority to CN201980018456.1A priority patent/CN111886595B/zh
Priority to EP19767629.9A priority patent/EP3731114A4/en
Publication of WO2019177437A1 publication Critical patent/WO2019177437A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/30—Semantic analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/454—Multi-language systems; Localisation; Internationalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174—Facial expression recognition
    • G06V40/176—Dynamic expression
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/005—Language recognition
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04804—Transparency, e.g. transparent or translucent windows

Definitions

  • Embodiments disclosed in this document relate to screen control technology.
  • Electronic devices such as smart phones may support various methods for communicating with users of other regions (or countries or cultures).
  • the electronic device may provide an environment in which a message application, an email application, or a chat application (for example, an instant messenger (IM) application) may transmit and receive a message with another user.
  • a chat application for example, an instant messenger (IM) application
  • the electronic device may transmit and receive a message including an image, audio, or video as well as text.
  • the electronic device may support transmission and reception of emoticons, stickers, audio, or video.
  • the wearable (wearable) electronic device that can be worn directly on the body has been actively spread. Since the wearable electronic device may be used by being mounted on a part of the body, such as a wrist, ankle, neck, waist, or head, mobility and portability may be improved.
  • the wearable electronic device may include a head-mounted display apparatus (HMD) or a smart glass mounted on a user's head to display an image.
  • the wearable electronic device may provide a virtual reality (VR) environment or an augmented reality (AR) environment for communicating with a user in another region.
  • VR virtual reality
  • AR augmented reality
  • An electronic device that provides an environment for communicating with users in other regions may provide a translation function.
  • the electronic device may provide a translation function for text that is transmitted and received to facilitate communication between users having different languages.
  • the existing electronic device only provides a translation function for text, and transmits and receives objects that may have different meanings by region (or country or culture) without undergoing a separate processing process.
  • the existing electronic device outputs an image representing an emoticon, a sticker, or a gesture, which may have a different meaning for each region, as it is received from an external electronic device used by a user of another region on the screen, or as it is to the external electronic device. Sending. In this case, a situation in which messages of different meanings are exchanged may occur.
  • Embodiments disclosed in this document may provide a screen control method for providing a notification for an object having a different meaning for each region, and an electronic device supporting the same.
  • An electronic device includes a display, a memory, and a processor, wherein the processor identifies a first area set in the electronic device and outputs the first area to the display. Identify a second region associated with an object, determine whether the first region is different from the second region, and if the second region is different from the first region, the second object output on the display is the first region; Confirming the first meaning used in the region and the second meaning used in the second region, determining whether the first meaning and the second meaning are different, and when the first meaning and the second meaning are different, The display may be configured to provide a notification that the first meaning is different from the second meaning.
  • the screen control method of the electronic device may include: checking a first area set in the electronic device, checking a second area related to the first object output on the display, Determining whether the first region is different from the second region, and when the second region is different from the first region, a first meaning that the second object output on the display is used in the first region, and the Checking a second meaning used in a second region, determining whether the first meaning is different from the second meaning, and when the first meaning is different from the second meaning, the first through the display It may include an operation of providing a notification that the meaning and the second meaning is different.
  • FIG. 1 is a block diagram of an electronic device associated with screen control according to an embodiment of the present disclosure.
  • FIG. 2 is a diagram for describing a method of communicating between users in different regions according to an exemplary embodiment.
  • FIG. 3 is a flowchart illustrating a method of operating an electronic device related to screen control according to an embodiment of the present disclosure.
  • FIG. 4 is a diagram for describing a method of prohibiting the use of an object having a different meaning, according to an exemplary embodiment.
  • FIG. 5 is a diagram for describing a method of notifying another meaning of an object, according to an exemplary embodiment.
  • FIG. 6 is a diagram for describing a method of changing an object having a different meaning, according to an exemplary embodiment.
  • FIG. 7 is a diagram for describing a method of changing an object when an object having another meaning is transmitted according to an exemplary embodiment.
  • FIG. 8 is a diagram for describing a method of changing an object when selecting an object having a different meaning according to an exemplary embodiment.
  • FIG. 9 is a diagram for describing a screen control method in a VR environment, according to an exemplary embodiment.
  • FIG. 10 illustrates a screen control method in an AR environment according to an exemplary embodiment.
  • FIG. 11 is a block diagram of an electronic device in a network environment according to various embodiments of the present disclosure.
  • FIG. 1 is a block diagram of an electronic device associated with screen control according to an embodiment of the present disclosure.
  • the electronic device 100 may be connected to a user (hereinafter referred to as a counterpart) of a user of the electronic device 100 in another region (or country or culture).
  • Translation function can be provided for smooth communication.
  • the electronic device 100 may provide a translation function to a message application, an email application, or a chat application.
  • the electronic device 100 may provide a notification to the user about an object that may have a different meaning by region (or country or culture).
  • the electronic device 100 may provide a notification about an emoticon or a sticker that may have a different meaning for each region.
  • the electronic device 100 may provide a notification for an image representing a gesture that may have a different meaning for each region.
  • the electronic device 100 may prevent the object from being used or change the object to another object.
  • the electronic device 100 for performing the above-described function may include a display 110 (eg, at least a portion of the display device 1160 of FIG. 11), and a memory 130 (eg, the memory of FIG. 11). 1130), and a processor 150 (eg, the processor 1120 of FIG. 11).
  • the configuration of the electronic device 100 is not limited thereto.
  • the electronic device 100 may further include at least one other component in addition to the above-described components.
  • the electronic device 100 may further include a communication circuit 170 (eg, at least a part of the communication module 1190 of FIG. 11).
  • the display 110 may display various contents (for example, text, an image, a video, an icon, a symbol, etc.) to the user.
  • the display 110 may include a touch screen.
  • the display 110 may receive a touch, gesture, proximity, or hovering input using an electronic pen or a user's body part (eg, a finger).
  • the memory 130 may store commands or data related to at least one other component of the electronic device 100.
  • the memory 130 may store software and / or a program.
  • the memory 130 may store an application (for example, a message application, an email application, or a chat application) for communicating with the counterpart.
  • Instructions included in software and / or a program stored in the memory 130 may be executed by the processor 150.
  • the memory 130 may store a cultural database (DB) 131.
  • the culture database 131 may include information about objects (eg, emoticons, stickers, gestures, etc.) having different meanings by region (or country or culture).
  • the processor 150 may execute operations or data processing related to control and / or communication of at least one other component of the electronic device 100.
  • the processor 150 may control, for example, a plurality of hardware or software components connected to the processor 150 by running an operating system or an application program, and may perform various data processing or operations.
  • the processor 150 may include one or more of a central processing unit, an application processor, or a communication processor. According to an embodiment, the processor 150 may be implemented as a system on chip (SoC).
  • SoC system on chip
  • the processor 150 may identify a region set in the electronic device 100. For example, the processor 150 may check configuration information related to an area of the electronic device 100. As another example, the processor 150 may identify a region of the electronic device 100 through profile information (or account information) for the user of the electronic device 100.
  • the processor 150 may identify a region related to an object output on the display 110.
  • the processor 150 may identify a region related to an object included in an execution screen of a message application, an email application, or a chat application.
  • the processor 150 may identify a region related to an object included in the VR image or the AR image.
  • the object may be an object related to the other party to be communicated with.
  • the object may include information (eg, a name, a screen name, an account ID, or a phone number) for identifying the counterpart.
  • the object may include an image photographing the other party.
  • the processor 150 may identify the area of the counterpart using the information. For example, the processor 150 may identify the other party's region by using the other party's name, screen name, account ID, or phone number.
  • the processor 150 when the object includes an image of photographing the other party, the processor 150 analyzes the image, recognizes the other party's face based on the analyzed information, and identifies the other party through the recognized information. After confirming, the other party's region may be confirmed using the verified counterpart's profile information. Alternatively, the processor 150 may determine the facial feature of the other party based on the information analyzed by the image, and determine (inferred) the region of the other party through the facial feature. Alternatively, the processor 150 may analyze the voice information included in the image, identify the other party by recognizing the other party's voice based on the analyzed information, and identify the other party's region using the identified other party's profile information. have. Alternatively, the processor 150 may determine (inferred) the region of the counterpart based on the language or linguistic feature (eg, intonation) used by the counterpart based on the voice-analyzed information.
  • the processor 150 may determine (inferred) the region of the counterpart based on the language or linguistic feature (eg, into
  • the processor 150 may check the meaning that the object output on the display 110 is used for each region.
  • the processor 150 may check the meaning that an image representing an emoticon, a sticker, or a gesture output on the display 110 is used for each region.
  • the meaning that the object is used for each region may be managed through the culture database 131 stored in the memory 130.
  • the processor 150 may provide a notification to the user that the object has a different meaning for each region. For example, the processor 150 may output text, an image, etc. indicating that the object has a different meaning for each region to the display 110.
  • the processor 150 may prevent an object having a different meaning from region to region from being used.
  • the processor 150 may limit the selection input for the object to prevent the object from being used. For example, even if the user selects the object, the processor 150 may ignore the touch input as if the object is not selected.
  • the processor 150 may control the screen to prevent the object from being used. For example, the processor 150 may delete or transparently process the object so that the object is not visible.
  • the processor 150 may change an object having a different meaning for each region into another object. For example, when the first object has a first meaning in the first region and a second meaning in the second region, the processor 150 displays the first object as it is to the user in the first region, and the user in the second region. May be displayed by changing the first object to a second object having the first meaning.
  • the communication circuit 170 may support the establishment of a communication channel between the electronic device 100 and the external electronic device and the execution of wired or wireless communication through the established communication channel.
  • an electronic device may include a display (eg, the display 110), a memory (eg, the memory 130), and a processor (eg, a processor ( 150)), wherein the processor is configured to identify a first region set in the electronic device, identify a second region related to a first object output on the display, and determine whether the first region and the second region are different from each other. If the second region is different from the first region, the first object used in the first region and the second meaning used in the second region are determined. Determine whether the first meaning is different from the second meaning, and if the first meaning is different from the second meaning, provide a notification that the first meaning is different from the second meaning through the display. Can be.
  • the memory may store information on at least one object having a different meaning for each region.
  • the processor may include an operation of confirming the information stored in the memory as at least part of an operation of confirming the first meaning and the second meaning.
  • the processor may be configured to identify the first region based on at least one of setting information of the electronic device and profile information of a user of the electronic device. You can check it.
  • the processor may identify the second region using the identification information when the first object includes identification information of the other party as at least part of the operation of identifying the second region. have.
  • the processor may be configured to at least part of the operation of identifying the second region, and if the first object includes an image photographing the counterpart, analyze the image and based on the analyzed information.
  • the other party's face may be recognized, the other party may be identified through the recognized information, and the second region may be identified using the identified profile information of the other party.
  • the processor may be configured to at least part of the operation of identifying the second region, and if the first object includes an image photographing the counterpart, analyze the image and based on the analyzed information.
  • the face feature of the counterpart may be determined, and the second region may be determined based on the face feature.
  • the processor when the first object includes a voice of the other party, analyzes the voice and based on the analyzed information as at least part of the operation of identifying the second region. Recognizes the voice of the user, and confirms the other party through the recognized information, and the second region by using the profile information of the identified party.
  • the processor when the first object includes a voice of the other party, analyzes the voice and based on the analyzed information as at least part of the operation of identifying the second region. At least one of the language and linguistic features to be used may be determined, and the second region may be determined through at least one of the language and the linguistic features.
  • the processor may output at least one of a text and an image indicating that the first meaning and the second meaning are different as at least a part of the operation of providing the notification to the display.
  • the processor may change the second object to a third object representing a restriction on the use of the second object, or may transparently process the second object.
  • the processor may ignore the touch input to the second object.
  • the processor may change the second object to a third object having the second meaning.
  • the electronic device may further include a communication circuit for communicating with an external electronic device of the second region, and the processor may transmit the second object to the external electronic device through the communication circuit.
  • the second object may be changed to a third object having the second meaning, and the third object may be transmitted to the external electronic device.
  • FIG. 2 is a diagram for describing a method of communicating between users in different regions according to an exemplary embodiment.
  • the first user 201 may communicate with a second user 203 of another region (or country or culture) through an application 250 supporting a translation function.
  • the first user 201 may communicate with the second user 203 through a message application, an email application, or a chat application installed in an electronic device such as the smart phone 211.
  • the second user 203 may also use an electronic device such as a smart phone 231.
  • the first user 201 may communicate with the second user 203 through a virtual reality (VR) environment.
  • the first user 201 may check an image photographed by the second user 203 using the camera 233 through the head mounted display device (HMD) 213.
  • the first user 201 may communicate with the second user 203 by providing feedback to the image to the second user 203.
  • the head mounted display apparatus 213 may inform the first user 201 of an object having a different meaning for each region through the translation function.
  • the first user 201 may communicate with the second user 203 through an augmented reality environment.
  • the first user 201 may check an image including the second user 203 and the object related to the translation function through the smart glasses 215.
  • the voice, gesture, and the like of the second user 203 are analyzed, and the meaning of the words or gestures of the second user 203 is determined by the first user ( If it is different from the meaning in the culture of 201, it may be notified to the first user 201.
  • FIG. 3 is a flowchart illustrating a method of operating an electronic device related to screen control according to an embodiment of the present disclosure.
  • a processor eg, the processor 150 of the electronic device (eg, the electronic device 100) may identify a first region set in the electronic device. For example, the processor may check setting information related to the first region in a memory (eg, the memory 130) of the electronic device. As another example, the processor may identify the first region through profile information (or account information) for the user of the electronic device.
  • the processor may identify a second region related to the first object output on the display (eg, the display 110). For example, the processor may identify a second region related to a first object included in an execution screen of a message application, an email application, or a chat application output on the display. As another example, the processor may identify a second region related to the first object included in the VR image or the AR image output on the display.
  • the first object may be an object related to a counterpart as a communication target.
  • the first object may include information (eg, a name, a screen name, an account ID, or a phone number) for identifying the counterpart.
  • the first object may include an image photographing the other party.
  • the processor may identify the second region of the counterpart using the information.
  • the processor analyzes the image and recognizes the other party's face based on the analyzed information to identify the other party's region or the other party's location.
  • the second region of the opponent can be inferred through the facial feature of the.
  • the processor analyzes the voice information included in the image, recognizes the other party's voice based on the analyzed information to check the other party's region, or uses a language or language feature (for example, intonation) used by the other party. Through the second region of the opponent can be inferred.
  • the processor may determine whether the first region is different from the second region. For example, the processor may determine whether the first region of the user of the electronic device is different from the second region of the counterpart.
  • the processor may identify a first meaning used in the first region and a second meaning used in the second region. For example, the processor may identify a first meaning used in a first region and a second meaning used in a second region of an image representing an emoticon, a sticker, or a gesture displayed on the display. Meanings used by the second object for each region may be managed through a culture database (eg, the culture database 131) stored in the memory.
  • a culture database eg, the culture database 131
  • the processor may determine whether the first meaning is different from the second meaning. For example, the processor may determine whether the first meaning used in the first region and the second meaning used in the second region are different from each other.
  • the processor may provide a notification to the user that the first meaning and the second meaning are different. For example, when the second object having a different meaning for each region is output on the display, the processor may output text, an image, etc. indicating that the second object has a different meaning for each region to the display. .
  • the processor may process not to use the second object having a different meaning for each region.
  • the processor may limit a selection input for the second object so that the second object is not used.
  • the processor may control the screen to prevent the use of the second object.
  • the processor may delete or transparently process the screen so that the second object is not visible.
  • the processor may change the second object having a different meaning for each region into another object.
  • the processor may change the second object to a third object used in the first meaning in the second region.
  • a method of controlling a screen of an electronic device may include: checking a first region set in the electronic device, identifying a second region related to a first object output on a display, and Determining whether the first region is different from the second region, and when the second region is different from the first region, a first meaning and the first meaning that the second object output on the display is used in the first region. Checking a second meaning used in two regions, determining whether the first meaning is different from the second meaning, and when the first meaning is different from the second meaning, the first meaning through the display And providing a notification that the second meaning is different from the second meaning.
  • the providing of the notification may include outputting at least one of a text and an image indicating that the first meaning and the second meaning are different to the display.
  • the screen control method may further include changing the second object to a third object representing a restriction on the use of the second object or transparently processing the second object.
  • the screen control method may further include an operation of ignoring a touch input to the second object.
  • the screen control method may further include changing the second object to a third object having the second meaning.
  • the screen control method may further include receiving a user input of transmitting the second object to an external electronic device of the second region through a communication circuit, and transmitting the second object to the second meaning.
  • the method may further include changing to a third object, and transmitting the third object to the external electronic device.
  • FIG. 4 is a diagram for describing a method of prohibiting the use of an object having a different meaning, according to an exemplary embodiment.
  • the electronic device 400 may display a message application, an email application, or a chat application that supports communication with a counterpart on the display 410 (eg, the display 110).
  • the execution screen, etc. can be output.
  • the electronic device 400 displays, on the display 410, the first object 431 including the other party's identification information, the conversation contents 433 transmitted by the user, or the conversation contents 434 transmitted by the counterpart.
  • the translated content 435 can be displayed.
  • the electronic device 400 may support a translation function for smooth communication between users and counterparts of different regions, and may output a second object 432 including language information to be translated on the display 410. .
  • the electronic device 400 may identify a region associated with the first object 431 output on the display 410.
  • the first object 431 may be an object related to the other party to be communicated with.
  • the first object 431 may include information (eg, a name, a large screen, an account ID, a phone number, etc.) for identifying the counterpart.
  • the electronic device 400 may identify a region of the counterpart using the second object 432 related to the translation function. For example, when the second object 432 includes language information of the counterpart, the location of the counterpart may be determined using the language information.
  • the electronic device 400 may control the screen of the display 410 to transmit emoticons or stickers in addition to text.
  • an interface for selecting an emoticon or a sticker may be provided in the lower area of the screen of the electronic device 400.
  • the electronic device 400 may check the meaning that an object such as an emoticon or a sticker output on the display 410 is used for each region.
  • the electronic device 400 may output text, an image, etc. indicating that the object has a different meaning for each region to the display 410. .
  • the electronic device 400 may prevent an object having a different meaning from region to region from being used.
  • the electronic device 400 may output an emoticon (eg, the third object 436) having the same meaning regardless of the region to the display 410 without any processing, and have a different meaning for each region.
  • the emoticon may be changed to the fourth object 437 indicating the use restriction of the emoticon as in the first state 401.
  • the electronic device 400 may perform the transparent processing 438 on the emoticon having a different meaning for each region, as in the second state 403.
  • the electronic device 400 may limit a selection input for an object having a different meaning for each region. For example, even if the user selects the object, the electronic device 400 may ignore the touch input to the object as if the object is not selected.
  • FIG. 5 is a diagram for describing a method of notifying another meaning of an object, according to an exemplary embodiment.
  • the electronic device 500 (eg, the electronic device 100) has a first object having a different meaning for each region among the objects output on the display 510 (eg, the display 110).
  • a notification that the first object has a different meaning for each region may be provided.
  • the electronic device 500 when there is a first object having a different meaning for each region, changes the first object into a second object 531 indicating a restriction of use of the first object and displays the same. And output to 510.
  • the electronic device 500 displays a third object 533 including a reason why the first object is restricted in use. And output to 510.
  • the electronic device 500 may output, to the display 510, a third object 533 having a form of a speech bubble including a meaning that the first object is used in another region.
  • FIG. 6 is a diagram for describing a method of changing an object having a different meaning, according to an exemplary embodiment.
  • the electronic device 600 may have a first object 631 having a different meaning for each region among the objects output on the display 610 (eg, the display 110). ), The meaning of the first object 631 used in the user's area can be checked. Also, the electronic device 600 may change the first object 631 into a second object 633 having the meaning in the region of the other party and output the same to the display 610. For example, when a user attempts to transmit a first emoticon (first object 631) having a first meaning to the other party, the first emoticon (first object 631) is used as a second meaning in the other party's area. If the meaning is different from each other, communication may not be performed smoothly. To prevent this, the electronic device 600 converts the first emoticon (first object 631) into a second emoticon (second object 633) having a first meaning originally intended by the user in the region of the other party. You can change it.
  • first emoticon first object 631
  • second object 633 having a first meaning originally intended by the user in the
  • FIG. 7 is a diagram for describing a method of changing an object when an object having another meaning is transmitted according to an exemplary embodiment.
  • the electronic device 700 may have a first object 731a having a different meaning for each region among the objects output on the display 710 (eg, the display 110).
  • the meaning of the first object 731a used in the user's area may be checked. For example, when a user of the electronic device 700 inputs a message 731 through a message application, among the objects included in the message 731, there is a first object 731a having a different meaning for each region. In this case, the meaning of the first object 731a used in the user's area may be checked.
  • a button 733 set to transmit a message 731 to an external electronic device 770 used by the other party is selected 750 (eg, for the button 733).
  • the message 731 may be transmitted to the external electronic device 770 and the message 735 transmitted to the display 710 may be output.
  • the electronic device 700 when the electronic device 700 transmits the first object 731a having a different meaning to each other to a counterpart, the electronic device 700 is a second object 791a having a meaning originally intended by the user in the counterpart's area.
  • Can change and send For example, when the electronic device 700 transmits a message 731 including the first object 731a having a different meaning for each region through a communication circuit (for example, the communication circuit 170), the first message is transmitted.
  • the object 731a may be changed and transmitted to the second object 791a having a meaning originally intended by the user in the other party's area.
  • the external electronic device 770 used by the counterpart may output a received message 791 including the second object 791a to the display 771.
  • the external electronic device 770 may translate and output the received message 791.
  • FIG. 8 is a diagram for describing a method of changing an object when selecting an object having a different meaning according to an exemplary embodiment.
  • the electronic device 800 may include a first object 831a having a different meaning for each region among the objects output on the display 810 (eg, the display 110).
  • the meaning of the first object 831a used in the user's area can be checked. For example, when a user of the electronic device 800 inputs a message 831 through a message application, among the objects included in the message 831, a first object 831a having a different meaning for each region exists. In this case, the meaning of the first object 831a used in the user's area may be checked.
  • the electronic device 800 selects 850 (for example, a button 833 set to complete selection of objects (for example, the first object 831a) in the process of inputting the message 831).
  • a user input 850 for the button 833 it may be determined whether an object (eg, the first object 831a) having a different meaning for each region exists among the objects included in the message 831. have.
  • the electronic device 800 moves the object to the second object 831b having a meaning originally intended by the user in the other's region.
  • the change may be output to the display 810. Accordingly, the user may check the changed objects before transmitting the message 831 to the counterpart.
  • FIG. 9 is a diagram for describing a screen control method in a VR environment, according to an exemplary embodiment.
  • a user may communicate with a counterpart through a VR environment.
  • the user may check the image 910 captured by the counterpart using a camera through the electronic device 900 (eg, a head mounted display device (HMD)).
  • the user may communicate with the counterpart by providing feedback to the image 910 to the counterpart.
  • the electronic device 900 may provide an interface 930 for inputting a message on a portion of the screen.
  • the interface 930 may be, for example, a message input screen. Accordingly, the user may provide feedback to the image to the counterpart through the message input screen.
  • the electronic device 900 may include an object 931 related to a translation function in the interface 930.
  • the electronic device 900 may include an area 933 in which not only text but also an emoticon 933a or a sticker may be input to the interface 930.
  • FIG. 10 illustrates a screen control method in an AR environment according to an exemplary embodiment.
  • a user may communicate with a counterpart through an AR environment.
  • the user may check the image 1010 including the counterpart 1031 and the object 1033 related to the translation function through the electronic device 1000 (eg, smart glasses).
  • the electronic apparatus 1000 may analyze the voice spoken by the counterpart 1031 and output the translated text 1035 through the translation function on the screen.
  • the electronic apparatus 1000 may check whether there is a gesture 1037a having a different meaning for each region.
  • the gesture 1037a having a different meaning for each region exists among the gestures that the user can perform to the counterpart 1031 with the feedback, the electronic apparatus 1000 has a gesture having a different meaning for each region in the region of the screen.
  • An object 1037 (eg, a pop-up object) indicating that the 1010a exists may be output.
  • the object 1037 may include, for example, a gesture 1037a having a different meaning for each region and an object 1037b indicating a meaning that the gesture 1037a is used in a region of the other party.
  • FIG. 11 is a block diagram of an electronic device 1101 in a network environment 1100 according to various embodiments.
  • the electronic device 1101 communicates with the electronic device 1102 through the first network 1119 (eg, a short-range wireless communication network) or the second network 1199.
  • the electronic device 1104 or the server 1108 may be communicated through a remote wireless communication network.
  • the electronic device 1101 may communicate with the electronic device 1104 through the server 1108.
  • the electronic device 1101 may include a processor 1120, a memory 1130, an input device 1150, an audio output device 1155, a display device 1160, an audio module 1170, and a sensor module.
  • the components may be included.
  • at least one of the components may be omitted or one or more other components may be added to the electronic device 1101.
  • some of these components may be implemented in one integrated circuit.
  • the sensor module 1176 eg, fingerprint sensor, iris sensor, or illuminance sensor
  • the display device 1160 eg, display
  • the processor 1120 may execute, for example, software (eg, a program 1140) to execute at least one other component (eg, hardware or software component) of the electronic device 1101 connected to the processor 1120. It can control and perform various data processing or operations. According to one embodiment, as at least part of the data processing or operation, the processor 1120 may transmit instructions or data received from another component (eg, the sensor module 1176 or the communication module 1190) to the volatile memory 1132. Can be loaded into, processed in a command or data stored in the volatile memory 1132, and stored in the non-volatile memory 1134.
  • software eg, a program 1140
  • the processor 1120 may transmit instructions or data received from another component (eg, the sensor module 1176 or the communication module 1190) to the volatile memory 1132. Can be loaded into, processed in a command or data stored in the volatile memory 1132, and stored in the non-volatile memory 1134.
  • the processor 1120 is a main processor 1121 (e.g., a central processing unit or an application processor), and a coprocessor 1123 (e.g., a graphics processing unit, an image signal processor) that can operate independently or together. , Sensor hub processor, or communication processor). Additionally or alternatively, coprocessor 1123 may be configured to use lower power than main processor 1121, or to be specific to a designated function. The coprocessor 1123 may be implemented separately from or as part of the main processor 1121.
  • main processor 1121 e.g., a central processing unit or an application processor
  • coprocessor 1123 e.g., a graphics processing unit, an image signal processor
  • coprocessor 1123 may be configured to use lower power than main processor 1121, or to be specific to a designated function.
  • the coprocessor 1123 may be implemented separately from or as part of the main processor 1121.
  • the coprocessor 1123 may, for example, replace the main processor 1121 while the main processor 1121 is in an inactive (eg, sleep) state, or the main processor 1121 may be active (eg, execute an application). Together with the main processor 1121, at least one of the components of the electronic device 1101 (eg, the display device 1160, the sensor module 1176, or the communication module 1190). Control at least some of the functions or states associated with the. According to one embodiment, the coprocessor 1123 (eg, an image signal processor or communication processor) may be implemented as part of other functionally related components (eg, camera module 1180 or communication module 1190). have.
  • the memory 1130 may store various data used by at least one component of the electronic device 1101 (for example, the processor 1120 or the sensor module 1176).
  • the data may include, for example, software (eg, the program 1140) and input data or output data for a command related thereto.
  • the memory 1130 may include a volatile memory 1132 or a nonvolatile memory 1134.
  • the program 1140 may be stored as software in the memory 1130, and may include, for example, an operating system 1142, middleware 1144, or an application 1146.
  • the input device 1150 may receive a command or data to be used for a component (for example, the processor 1120) of the electronic device 1101 from the outside (for example, a user) of the electronic device 1101.
  • the input device 1150 may include, for example, a microphone, a mouse, a keyboard, or a digital pen (eg, a stylus pen).
  • the sound output device 1155 may output a sound signal to the outside of the electronic device 1101.
  • the sound output device 1155 may include, for example, a speaker or a receiver.
  • the speaker may be used for general purposes such as multimedia playback or recording playback, and the receiver may be used to receive an incoming call.
  • the receiver may be implemented separately from or as part of a speaker.
  • the display device 1160 may visually provide information to the outside (eg, a user) of the electronic device 1101.
  • the display device 1160 may include, for example, a display, a hologram device, or a projector and a control circuit for controlling the device.
  • the display device 1160 may include touch circuitry configured to sense a touch, or sensor circuit (eg, a pressure sensor) set to measure the strength of the force generated by the touch. have.
  • the audio module 1170 may convert sound into an electrical signal or, conversely, convert an electrical signal into a sound. According to an embodiment, the audio module 1170 acquires sound through the input device 1150, or an external electronic device (eg, connected directly or wirelessly to the sound output device 1155 or the electronic device 1101). Sound may be output through the electronic device 1102 (eg, a speaker or a headphone).
  • the electronic device 1102 eg, a speaker or a headphone
  • the sensor module 1176 detects an operating state (eg, power or temperature) of the electronic device 1101 or an external environmental state (eg, a user state), and generates an electrical signal or data value corresponding to the detected state. can do.
  • the sensor module 1176 may include, for example, a gesture sensor, a gyro sensor, an air pressure sensor, a magnetic sensor, an acceleration sensor, a grip sensor, a proximity sensor, a color sensor, an infrared sensor, a biometric sensor, It may include a temperature sensor, a humidity sensor, or an illuminance sensor.
  • the interface 1177 may support one or more designated protocols that may be used for the electronic device 1101 to be directly or wirelessly connected to an external electronic device (eg, the electronic device 1102).
  • the interface 1177 may include, for example, a high definition multimedia interface (HDMI), a universal serial bus (USB) interface, an SD card interface, or an audio interface.
  • HDMI high definition multimedia interface
  • USB universal serial bus
  • SD card interface Secure Digital Card
  • connection terminal 1178 may include a connector through which the electronic device 1101 may be physically connected to an external electronic device (eg, the electronic device 1102).
  • the connection terminal 1178 may include, for example, an HDMI connector, a USB connector, an SD card connector, or an audio connector (eg, a headphone connector).
  • the haptic module 1179 may convert an electrical signal into a mechanical stimulus (eg, vibration or movement) or an electrical stimulus that can be perceived by the user through tactile or kinesthetic senses.
  • the haptic module 1179 may include, for example, a motor, a piezoelectric element, or an electrical stimulation device.
  • the camera module 1180 may capture still images and videos. According to one embodiment, the camera module 1180 may include one or more lenses, image sensors, image signal processors, or flashes.
  • the power management module 1188 may manage power supplied to the electronic device 1101. According to one embodiment, the power management module 1188 may be implemented, for example, as at least part of a power management integrated circuit (PMIC).
  • PMIC power management integrated circuit
  • the battery 1189 may supply power to at least one component of the electronic device 1101.
  • the battery 1187 may include, for example, a non-rechargeable primary cell, a rechargeable secondary cell or a fuel cell.
  • the communication module 1190 may be a direct (eg wired) communication channel or wireless communication channel between the electronic device 1101 and an external electronic device (eg, the electronic device 1102, the electronic device 1104, or the server 1108). Establish and perform communication over established communication channels.
  • the communication module 1190 may operate independently of the processor 1120 (eg, an application processor) and include one or more communication processors that support direct (eg, wired) or wireless communication.
  • the communication module 1190 is a wireless communication module 1192 (eg, a cellular communication module, a near field communication module, or a global navigation satellite system (GNSS) communication module) or a wired communication module 1194 (eg It may include a local area network (LAN) communication module, or a power line communication module.
  • LAN local area network
  • Corresponding ones of these communication modules are the first network 1198 (e.g. short range communication network such as Bluetooth, WiFi direct or infrared data association (IrDA)) or the second network 1199 (e.g. cellular network, Internet, or
  • the external electronic device 1104 may communicate with a telecommunication network such as a computer network (for example, a LAN or a WAN).
  • a telecommunication network such as a computer network (for example, a LAN or a WAN).
  • These various types of communication modules may be integrated into one component (eg, a single chip) or may be implemented by a plurality of components (eg, a plurality of chips) separate from each other.
  • the wireless communication module 1192 may use subscriber information (e.g., international mobile subscriber identifier (IMSI)) stored in the subscriber identification module 1196 in a communication network such as the first network 1198 or the second network 1199.
  • subscriber information e.g., international mobile subscriber identifier (IMSI)
  • IMSI international mobile subscriber identifier
  • the antenna module 1197 may transmit or receive a signal or power to an external device (eg, an external electronic device).
  • the antenna module 1197 may include one antenna including a radiator formed of a conductor or a conductive pattern formed on a substrate (eg, a PCB).
  • the antenna module 1197 may include a plurality of antennas. In this case, at least one antenna suitable for a communication scheme used in a communication network, such as the first network 1198 or the second network 1199, may be, for example, from the plurality of antennas by the communication module 1190. Can be selected.
  • the signal or power may be transmitted or received between the communication module 1190 and the external electronic device through the selected at least one antenna.
  • other components eg, RFICs
  • peripheral devices eg, a bus, a general purpose input and output (GPIO), a serial peripheral interface (SPI), or a mobile industry processor interface (MIPI)
  • GPIO general purpose input and output
  • SPI serial peripheral interface
  • MIPI mobile industry processor interface
  • the command or data may be transmitted or received between the electronic device 1101 and the external electronic device 1104 through the server 1108 connected to the second network 1199.
  • Each of the external electronic devices 1102 and 1104 may be a device of the same or different type as the electronic device 1101.
  • all or some of the operations executed in the electronic device 1101 may be executed in one or more of the external electronic devices 1102, 1104, or 1108.
  • the electronic device 1101 may instead execute the function or service itself.
  • one or more external electronic devices may be requested to perform at least a part of the function or the service.
  • the one or more external electronic devices that receive the request may execute at least a part of the requested function or service, or an additional function or service related to the request, and transmit a result of the execution to the electronic device 1101.
  • the electronic device 1101 may process the result as it is or additionally and provide it as at least part of a response to the request.
  • cloud computing distributed computing, or client-server computing technology. This can be used.
  • Electronic devices may be various types of devices.
  • the electronic device may include, for example, a portable communication device (eg, a smartphone), a computer device, a portable multimedia device, a portable medical device, a camera, a wearable device, or a home appliance device.
  • a portable communication device eg, a smartphone
  • a computer device e.g., a tablet, or a smart phone
  • a portable multimedia device e.g., a portable medical device
  • a camera e.g., a camera
  • a wearable device e.g., a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch
  • a or B “At least one of A and B”, “At least one of A or B”, “A, B or C”, “At least one of A, B and C” and “A, Phrases such as “B, or at least one of C” may include any one of the items listed together in the corresponding one of the phrases, or any possible combination thereof.
  • Terms such as “first”, “second”, or “first” or “second” may be used merely to distinguish a component from other corresponding components, and to separate the components from other aspects (e.g. Order).
  • Some (eg first) component may be referred to as “coupled” or “connected” to another (eg second) component, with or without the term “functionally” or “communically”. When mentioned, it means that any component can be connected directly to the other component (eg, by wire), wirelessly, or via a third component.
  • module may include a unit implemented in hardware, software, or firmware, and may be used interchangeably with terms such as logic, logic blocks, components, or circuits.
  • the module may be an integral part or a minimum unit or part of the component, which performs one or more functions.
  • the module may be implemented in the form of an application-specific integrated circuit (ASIC).
  • ASIC application-specific integrated circuit
  • Various embodiments of the present disclosure may include one or more instructions stored in a storage medium (eg, internal memory 1136 or external memory 1138) that can be read by a machine (eg, electronic device 1101). It may be implemented as software (eg, program 1140) including the.
  • the processor eg, the processor 1120 of the device (eg, the electronic device 1101) may call and execute at least one of the one or more instructions stored from the storage medium. This enables the device to be operated to perform at least one function in accordance with the at least one command invoked.
  • the one or more instructions may include code generated by a compiler or code executable by an interpreter.
  • the device-readable storage medium may be provided in the form of a non-transitory storage medium.
  • 'non-transitory' means only that the storage medium is a tangible device and does not contain a signal (e.g. electromagnetic wave), which is the term used when data is stored semi-permanently It does not distinguish cases where it is temporarily stored.
  • a method may be provided included in a computer program product.
  • the computer program product may be traded between the seller and the buyer as a product.
  • the computer program product may be distributed in the form of a device-readable storage medium (eg compact disc read only memory (CD-ROM)), or through an application store (eg Play Store TM) or two user devices ( Example: smartphones) can be distributed (eg downloaded or uploaded) directly or online.
  • a device-readable storage medium such as a server of a manufacturer, a server of an application store, or a relay server, or may be temporarily created.
  • each component eg, module or program of the above-described components may include a singular or plural entity.
  • one or more of the aforementioned components or operations may be omitted, or one or more other components or operations may be added.
  • a plurality of components eg, a module or a program
  • the integrated component may perform one or more functions of the component of each of the plurality of components the same as or similar to that performed by the corresponding component of the plurality of components before the integration. .
  • operations performed by a module, program, or other component may be executed sequentially, in parallel, repeatedly, or heuristically, or one or more of the operations may be executed in a different order, or omitted. Or one or more other actions may be added.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Computer Hardware Design (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

전자 장치에 있어서, 디스플레이, 메모리, 및 프로세서를 포함하고, 상기 프로세서는, 상기 전자 장치에 설정된 제1 지역을 확인하고, 상기 디스플레이에 출력된 제1 객체와 관련된 제2 지역을 확인하고, 상기 제1 지역과 상기 제2 지역이 다른지를 판단하고, 상기 제2 지역이 상기 제1 지역과 다른 경우, 상기 디스플레이에 출력된 제2 객체가 상기 제1 지역에서 사용되는 제1 의미와 상기 제2 지역에서 사용되는 제2 의미를 확인하고, 상기 제1 의미와 상기 제2 의미가 다른지를 판단하고, 상기 제1 의미와 상기 제2 의미가 다른 경우, 상기 디스플레이를 통해 상기 제1 의미와 상기 제2 의미가 다르다는 알림을 제공하도록 설정된 전자 장치가 개시된다. 이 외에도 명세서를 통해 파악되는 다양한 실시 예가 가능하다.

Description

화면 제어 방법 및 이를 지원하는 전자 장치
본 문서에서 개시되는 실시 예들은, 화면 제어 기술과 관련된다.
스마트 폰 등의 전자 장치는 다른 지역(또는 국가 또는 문화)의 사용자와의 소통을 위한 다양한 방법을 지원할 수 있다. 일 예로, 전자 장치는 메시지 어플리케이션, 이메일 어플리케이션, 또는 채팅 어플리케이션(예: IM(instant messenger) 어플리케이션) 등을 통해 다른 사용자와 메시지를 송수신할 수 환경을 제공할 수 있다. 또한, 전자 장치는 텍스트뿐만 아니라 이미지, 오디오, 또는 비디오 등을 포함하는 메시지를 송수신할 수 있다. 예컨대, 전자 장치는 이모티콘, 스티커, 오디오, 또는 비디오 등을 송수신할 수 있도록 지원할 수 있다.
한편, 최근 들어 신체에 직접 착용할 수 있는 웨어러블(wearable) 전자 장치의 보급이 활발히 이루어지고 있다. 웨어러블 전자 장치는 신체의 일부분 예를 들어, 손목, 발목, 목, 허리, 또는 머리 등에 장착되어 사용될 수 있기 때문에 이동성(mobility) 및 휴대성(portability)이 향상될 수 있다. 웨어러블 전자 장치의 일 예로서, 사용자의 머리에 장착되어 영상을 표시하는 헤드 마운트 디스플레이 장치(head-mounted display apparatus, HMD) 또는 스마트 글래스 등을 포함할 수 있다. 상기 웨어러블 전자 장치의 경우, 다른 지역의 사용자와의 소통을 위한 VR(virtual reality) 환경 또는 AR(augmented reality) 환경을 제공할 수 있다.
다른 지역의 사용자와의 소통을 위한 환경을 제공하는 전자 장치는 번역 기능을 제공할 수 있다. 예를 들어, 전자 장치는 사용하는 언어가 서로 다른 사용자들 간의 소통이 원활히 이루어질 수 있도록 송수신되는 텍스트에 대한 번역 기능을 제공할 수 있다.
그러나, 기존의 전자 장치는 텍스트에 대한 번역 기능만을 제공할 뿐, 지역별(또는 국가별 또는 문화별)로 다른 의미를 가질 수 있는 객체에 대해서는 별도의 처리 과정을 거치지 않고 그대로 송수신하고 있다. 예컨대, 기존의 전자 장치는 지역별로 다른 의미를 가질 수 있는 이모티콘, 스티커, 또는 제스처를 나타내는 이미지를 다른 지역의 사용자가 사용하는 외부 전자 장치로부터 수신한 그대로 화면에 출력하거나, 상기 외부 전자 장치로 그대로 전송하고 있다. 이 경우, 서로 다른 의미의 메시지를 주고받는 상황이 발생하게 될 수 있다.
본 문서에서 개시되는 실시 예들은, 지역별로 서로 다른 의미를 가지는 객체에 대해 알림을 제공하는 화면 제어 방법 및 이를 지원하는 전자 장치를 제공할 수 있다.
본 문서에 개시되는 일 실시 예에 따른 전자 장치는, 디스플레이, 메모리, 및 프로세서를 포함하고, 상기 프로세서는, 상기 전자 장치에 설정된(set) 제1 지역을 확인하고, 상기 디스플레이에 출력된 제1 객체와 관련된 제2 지역을 확인하고, 상기 제1 지역과 상기 제2 지역이 다른지를 판단하고, 상기 제2 지역이 상기 제1 지역과 다른 경우, 상기 디스플레이에 출력된 제2 객체가 상기 제1 지역에서 사용되는 제1 의미와 상기 제2 지역에서 사용되는 제2 의미를 확인하고, 상기 제1 의미와 상기 제2 의미가 다른지를 판단하고, 상기 제1 의미와 상기 제2 의미가 다른 경우, 상기 디스플레이를 통해 상기 제1 의미와 상기 제2 의미가 다르다는 알림을 제공하도록 설정될 수 있다.
또한, 본 문서에 개시되는 일 실시 예에 따른 전자 장치의 화면 제어 방법은, 상기 전자 장치에 설정된 제1 지역을 확인하는 동작, 디스플레이에 출력된 제1 객체와 관련된 제2 지역을 확인하는 동작, 상기 제1 지역과 상기 제2 지역이 다른지를 판단하는 동작, 상기 제2 지역이 상기 제1 지역과 다른 경우, 상기 디스플레이에 출력된 제2 객체가 상기 제1 지역에서 사용되는 제1 의미와 상기 제2 지역에서 사용되는 제2 의미를 확인하는 동작, 상기 제1 의미와 상기 제2 의미가 다른지를 판단하는 동작, 상기 제1 의미와 상기 제2 의미가 다른 경우, 상기 디스플레이를 통해 상기 제1 의미와 상기 제2 의미가 다르다는 알림을 제공하는 동작을 포함할 수 있다.
본 문서에 개시되는 실시 예들에 따르면, 지역별로 서로 다른 의미를 가지는 객체에 대해 알림으로써, 다른 지역의 사용자와의 보다 정확한 소통을 지원할 수 있다.
이 외에, 본 문서를 통해 직접적 또는 간접적으로 파악되는 다양한 효과들이 제공될 수 있다.
도 1은 일 실시 예에 따른 화면 제어와 관련한 전자 장치의 블록도이다.
도 2는 일 실시 예에 따른 서로 다른 지역의 사용자들 간 소통하는 방법을 설명하기 위한 도면이다.
도 3은 일 실시 예에 따른 화면 제어와 관련한 전자 장치의 운용 방법을 나타낸 도면이다.
도 4는 일 실시 예에 따른 다른 의미를 가지는 객체의 사용을 금지시키는 방법을 설명하기 위한 도면이다.
도 5는 일 실시 예에 따른 객체의 다른 의미를 알리는 방법을 설명하기 위한 도면이다.
도 6은 일 실시 예에 따른 다른 의미를 가지는 객체를 변경하는 방법을 설명하기 위한 도면이다.
도 7은 일 실시 예에 따른 다른 의미를 가지는 객체의 전송 시 객체를 변경하는 방법을 설명하기 위한 도면이다.
도 8은 일 실시 예에 따른 다른 의미를 가지는 객체의 선택 시 객체를 변경하는 방법을 설명하기 위한 도면이다.
도 9는 일 실시 예에 따른 VR 환경에서의 화면 제어 방법을 설명하기 위한 도면이다.
도 10은 일 실시 예에 따른 AR 환경에서의 화면 제어 방법을 설명하기 위한 도면이다.
도 11은 다양한 실시 예에 따른 네트워크 환경 내의 전자 장치의 블록도이다.
도면의 설명과 관련하여, 동일 또는 유사한 구성 요소에 대해서는 동일 또는 유사한 참조 부호가 사용될 수 있다.
도 1은 일 실시 예에 따른 화면 제어와 관련한 전자 장치의 블록도이다.
일 실시 예에 따르면, 전자 장치(100)(예: 도 11의 전자 장치(1101))는 전자 장치(100)의 사용자가 다른 지역(또는 국가 또는 문화)의 사용자(이하, 상대방이라 한다)와 원활한 소통할 수 있도록 번역 기능을 제공할 수 있다. 예를 들어, 전자 장치(100)는 메시지 어플리케이션, 이메일 어플리케이션, 또는 채팅 어플리케이션 등에 번역 기능을 제공할 수 있다. 또한, 전자 장치(100)는 지역별(또는 국가별 또는 문화별)로 다른 의미를 가질 수 있는 객체에 대해 사용자에게 알림을 제공할 수 있다. 일 예로, 전자 장치(100)는 지역별로 다른 의미를 가질 수 있는 이모티콘 또는 스티커에 대해 알림을 제공할 수 있다. 다른 예로, 전자 장치(100)는 지역별로 다른 의미를 가질 수 있는 제스처를 나타내는 이미지에 대해 알림을 제공할 수 있다. 또한, 전자 장치(100)는 상기 객체를 사용하지 못하도록 처리하거나 다른 객체로 변경할 수도 있다.
상술한 기능을 수행하기 위한 전자 장치(100)는 도 1을 참조하면, 디스플레이(110)(예: 도 11의 표시 장치(1160)의 적어도 일부), 메모리(130) (예: 도 11의 메모리(1130)), 및 프로세서(150)(예: 도 11의 프로세서(1120))를 포함할 수 있다. 그러나, 전자 장치(100)의 구성이 이에 한정되는 것은 아니다. 다양한 실시 예에 따르면, 전자 장치(100)는 상술한 구성요소들 외에 적어도 하나의 다른 구성요소를 더 포함할 수 있다. 일 예로, 전자 장치(100)는 통신 회로(170)(예: 도 11의 통신 모듈(1190)의 적어도 일부)를 더 포함할 수 있다.
디스플레이(110)는 사용자에게 각종 컨텐츠(예: 텍스트, 이미지, 비디오, 아이콘, 또는 심볼 등)를 표시할 수 있다. 일 실시 예에 따르면, 디스플레이(110)는 터치 스크린을 포함할 수 있다. 예를 들어, 디스플레이(110)는 전자 펜 또는 사용자의 신체 일부(예: 손가락)를 이용한 터치, 제스처, 근접, 또는 호버링(hovering) 입력을 수신할 수 있다.
메모리(130)는 전자 장치(100)의 적어도 하나의 다른 구성요소에 관계된 명령 또는 데이터를 저장할 수 있다. 일 실시 예에 따르면, 메모리(130)는 소프트웨어 및/또는 프로그램을 저장할 수 있다. 일 예로, 메모리(130)는 상대방과의 소통을 위한 어플리케이션(예: 메시지 어플리케이션, 이메일 어플리케이션, 또는 채팅 어플리케이션 등)을 저장할 수 있다. 메모리(130)에 저장된 소프트웨어 및/또는 프로그램에 포함된 명령어들은 프로세서(150)에 의해 실행될 수 있다.
일 실시 예에 따르면, 메모리(130)는 문화 데이터베이스(cultural database(DB))(131)를 저장할 수 있다. 상기 문화 데이터베이스(131)는 지역별(또는 국가별 또는 문화별)로 서로 다른 의미를 가지는 객체(예: 이모티콘, 스티커, 또는 제스처 등)에 대한 정보를 포함할 수 있다.
프로세서(150)는 전자 장치(100)의 적어도 하나의 다른 구성요소들의 제어 및/또는 통신에 관한 연산이나 데이터 처리를 실행할 수 있다. 프로세서(150)는 예를 들면, 운영 체제 또는 응용 프로그램을 구동하여 프로세서(150)에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 각종 데이터 처리 또는 연산을 수행할 수 있다. 프로세서(150)는 중앙처리장치, 어플리케이션 프로세서, 또는 커뮤니케이션 프로세서 중 하나 또는 그 이상을 포함할 수 있다. 일 실시 예에 따르면, 프로세서(150)는 SoC(system on chip)로 구현될 수 있다.
일 실시 예에 따르면, 프로세서(150)는 전자 장치(100)에 설정된 지역을 확인할 수 있다. 일 예로, 프로세서(150)는 전자 장치(100)의 지역과 관련된 설정(configuration) 정보를 확인할 수 있다. 다른 예로, 프로세서(150)는 전자 장치(100)의 사용자에 대한 프로필 정보(또는 계정 정보)를 통해 전자 장치(100)의 지역을 확인할 수 있다.
일 실시 예에 따르면, 프로세서(150)는 디스플레이(110)에 출력된 객체와 관련된 지역을 확인할 수 있다. 일 예로, 프로세서(150)는 메시지 어플리케이션, 이메일 어플리케이션, 또는 채팅 어플리케이션 등의 실행 화면에 포함된 객체와 관련된 지역을 확인할 수 있다. 다른 예로, 프로세서(150)는 VR 영상 또는 AR 영상에 포함된 객체와 관련된 지역을 확인할 수 있다. 상기 객체는 소통 대상인 상대방과 관련된 객체일 수 있다. 일 예로, 상기 객체는 상대방을 식별할 수 있는 정보(예: 이름, 대화명, 계정 아이디, 또는 전화 번호 등)를 포함할 수 있다. 다른 예로, 상기 객체는 상대방을 촬영한 이미지를 포함할 수 있다.
일 실시 예에 따르면, 상기 객체가 상대방을 식별할 수 있는 정보를 포함하는 경우, 프로세서(150)는 상기 정보를 이용하여 상대방의 지역을 확인할 수 있다. 예컨대, 프로세서(150)는 상대방의 이름, 대화명, 계정 아이디, 또는 전화 번호 등을 이용하여 상대방의 지역을 확인할 수 있다.
일 실시 예에 따르면, 상기 객체가 상대방을 촬영한 이미지를 포함하는 경우, 프로세서(150)는 상기 이미지를 분석하여, 분석된 정보를 기반으로 상대방의 얼굴을 인식하고, 인식된 정보를 통해 상대방을 확인하고, 확인된 상대방의 프로필 정보를 이용하여 상대방의 지역을 확인할 수 있다. 또는, 프로세서(150)는 이미지를 분석한 정보를 기반으로 상대방의 얼굴 특징을 판단하고, 상기 얼굴 특징을 통해 상대방의 지역을 판단(유추)할 수 있다. 또는, 프로세서(150)는 상기 이미지에 포함된 음성 정보를 분석하고, 분석된 정보를 기반으로 상대방의 음성을 인식하여 상대방을 확인하고, 확인된 상대방의 프로필 정보를 이용하여 상대방의 지역을 확인할 수 있다. 또는, 프로세서(150)는 음성을 분석한 정보를 기반으로 상대방이 사용하는 언어나 언어적 특징(예: 억양 등)을 통해 상대방의 지역을 판단(유추)할 수 있다.
일 실시 예에 따르면, 프로세서(150)는 디스플레이(110)에 출력된 객체가 지역별로 사용되는 의미를 확인할 수 있다. 예컨대, 프로세서(150)는 디스플레이(110)에 출력된 이모티콘, 스티커, 또는 제스처를 나타내는 이미지가 지역별로 사용되는 의미를 확인할 수 있다. 상기 객체가 지역별로 사용되는 의미는 메모리(130)에 저장된 문화 데이터베이스(131)를 통해 관리될 수 있다.
일 실시 예에 따르면, 프로세서(150)는 지역별로 다른 의미를 가지는 객체가 디스플레이(110)에 출력된 경우, 상기 객체가 지역별로 다른 의미를 가진다는 알림을 사용자에게 제공할 수 있다. 일 예로, 프로세서(150)는 상기 객체가 지역별로 다른 의미를 가진다는 내용의 텍스트, 이미지 등을 디스플레이(110)에 출력할 수 있다.
일 실시 예에 따르면, 프로세서(150)는 지역별로 다른 의미를 가지는 객체를 사용하지 못하도록 처리할 수 있다. 일 예로, 프로세서(150)는 상기 객체를 사용하지 못하도록 상기 객체에 대한 선택 입력을 제한할 수 있다. 예컨대, 상기 객체를 사용자가 선택하더라도, 프로세서(150)는 상기 객체가 선택되지 않은 것처럼 터치 입력을 무시할 수 있다. 다른 예로, 프로세서(150)는 상기 객체를 사용하지 못하도록 화면을 제어할 수 있다. 예컨대, 프로세서(150)는 상기 객체가 보이지 않도록 화면에서 삭제하거나 투명 처리할 수 있다.
일 실시 예에 따르면, 프로세서(150)는 지역별로 다른 의미를 가지는 객체를 다른 객체로 변경할 수 있다. 예컨대, 제1 객체가 제1 지역에서는 제1 의미를 가지고 제2 지역에서는 제2 의미를 가지는 경우, 프로세서(150)는 제1 지역의 사용자에게는 제1 객체를 그대로 표시하고, 제2 지역의 사용자에게는 상기 제1 객체를 상기 제1 의미를 가지는 제2 객체로 변경하여 표시할 수 있다.
통신 회로(170)는 전자 장치(100)와 외부 전자 장치 간의 통신 채널 수립 및 수립된 통신 채널을 통한 유선 또는 무선 통신의 수행을 지원할 수 있다.
상술한 바와 같이, 다양한 실시 예에 따르면, 전자 장치(예: 전자 장치(100))는 디스플레이(예: 디스플레이(110)), 메모리(예: 메모리(130)), 및 프로세서(예: 프로세서(150))를 포함하고, 상기 프로세서는, 상기 전자 장치에 설정된 제1 지역을 확인하고, 상기 디스플레이에 출력된 제1 객체와 관련된 제2 지역을 확인하고, 상기 제1 지역과 상기 제2 지역이 다른지를 판단하고, 상기 제2 지역이 상기 제1 지역과 다른 경우, 상기 디스플레이에 출력된 제2 객체가 상기 제1 지역에서 사용되는 제1 의미와 상기 제2 지역에서 사용되는 제2 의미를 확인하고, 상기 제1 의미와 상기 제2 의미가 다른지를 판단하고, 상기 제1 의미와 상기 제2 의미가 다른 경우, 상기 디스플레이를 통해 상기 제1 의미와 상기 제2 의미가 다르다는 알림을 제공하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 메모리는, 지역별로 서로 다른 의미를 가지는 적어도 하나의 객체에 대한 정보를 저장할 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제1 의미와 상기 제2 의미를 확인하는 동작의 적어도 일부로써, 상기 메모리에 저장된 상기 정보를 확인하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제1 지역을 확인하는 동작의 적어도 일부로써, 상기 전자 장치의 설정 정보 및 상기 전자 장치의 사용자에 대한 프로필 정보 중 적어도 하나를 기반으로 상기 제1 지역을 확인할 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제2 지역을 확인하는 동작의 적어도 일부로써, 상기 제1 객체가 상대방의 식별 정보를 포함하는 경우, 상기 식별 정보를 이용하여 상기 제2 지역을 확인할 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제2 지역을 확인하는 동작의 적어도 일부로써, 상기 제1 객체가 상대방을 촬영한 이미지를 포함하는 경우, 상기 이미지를 분석하고, 분석된 정보를 기반으로 상기 상대방의 얼굴을 인식하고, 인식된 정보를 통해 상기 상대방을 확인하고, 확인된 상기 상대방의 프로필 정보를 이용하여 상기 제2 지역을 확인할 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제2 지역을 확인하는 동작의 적어도 일부로써, 상기 제1 객체가 상대방을 촬영한 이미지를 포함하는 경우, 상기 이미지를 분석하고, 분석된 정보를 기반으로 상기 상대방의 얼굴 특징을 판단하고, 상기 얼굴 특징을 통해 상기 제2 지역을 판단할 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제2 지역을 확인하는 동작의 적어도 일부로써, 상기 제1 객체가 상대방의 음성을 포함하는 경우, 상기 음성을 분석하고, 분석된 정보를 기반으로 상기 상대방의 음성을 인식하고, 인식된 정보를 통해 상기 상대방을 확인하고, 확인된 상기 상대방의 프로필 정보를 이용하여 상기 제2 지역을 확인할 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제2 지역을 확인하는 동작의 적어도 일부로써, 상기 제1 객체가 상대방의 음성을 포함하는 경우, 상기 음성을 분석하고, 분석된 정보를 기반으로 상기 상대방이 사용하는 언어 및 언어적 특징 중 적어도 하나를 판단하고, 상기 언어 및 상기 언어적 특징 중 적어도 하나를 통해 상기 제2 지역을 판단할 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 알림을 제공하는 동작의 적어도 일부로써, 상기 제1 의미 및 상기 제2 의미가 다르다는 내용의 텍스트 및 이미지 중 적어도 하나를 상기 디스플레이에 출력할 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제2 객체를 상기 제2 객체의 사용 제한을 나타내는 제3 객체로 변경하거나, 상기 제2 객체를 투명 처리할 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제2 객체에 대한 터치 입력을 무시할 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제2 객체를 상기 제2 의미를 가지는 제3 객체로 변경할 수 있다.
다양한 실시 예에 따르면, 상기 전자 장치는 상기 제2 지역의 외부 전자 장치와 통신하기 위한 통신 회로를 더 포함하고, 상기 프로세서는, 상기 제2 객체를 상기 통신 회로를 통해 상기 외부 전자 장치로 전송하는 사용자 입력을 수신하면, 상기 제2 객체를 상기 제2 의미를 가지는 제3 객체로 변경하고, 상기 제3 객체를 상기 외부 전자 장치로 전송할 수 있다.
도 2는 일 실시 예에 따른 서로 다른 지역의 사용자들 간 소통하는 방법을 설명하기 위한 도면이다.
도 2를 참조하면, 제1 사용자(201)는 번역 기능을 지원하는 어플리케이션(250) 등을 통해 다른 지역(또는 국가 또는 문화)의 제2 사용자(203)와 소통할 수 있다.
일 실시 예에 따르면, 제1 사용자(201)는 스마트 폰(211) 등의 전자 장치에 설치된 메시지 어플리케이션, 이메일 어플리케이션, 또는 채팅 어플리케이션 등을 통해, 제2 사용자(203)와 소통할 수 있다. 이 경우, 제2 사용자(203)도 스마트 폰(231) 등의 전자 장치를 이용할 수 있다.
일 실시 예에 따르면, 제1 사용자(201)는 제2 사용자(203)와 VR(virtual reality) 환경을 통해 소통할 수 있다. 일 예로, 제1 사용자(201)는 헤드 마운트 디스플레이 장치(HMD)(213) 등을 통해, 제2 사용자(203)가 카메라(233) 등을 이용하여 촬영한 영상을 확인할 수 있다. 또한, 제1 사용자(201)는 상기 영상에 대한 피드백을 제2 사용자(203)에게 제공함으로써 제2 사용자(203)와 소통할 수 있다. 상기 영상의 출력 및 피드백 제공 시에, 헤드 마운트 디스플레이 장치(213)는 상기 번역 기능을 통해 지역별로 다른 의미를 가지는 객체를 제1 사용자(201)에게 알릴 수 있다.
일 실시 예에 따르면, 제1 사용자(201)는 제2 사용자(203)와 AR(augmented reality) 환경을 통해 소통할 수 있다. 일 예로, 제1 사용자(201)는 스마트 글래스(215) 등을 통해, 제2 사용자(203) 및 상기 번역 기능과 관련된 객체를 포함하는 영상을 확인할 수 있다. 예를 들어, 다른 문화권의 제2 사용자(203)와 실제로 대화하는 중에 제2 사용자(203)의 음성, 제스처 등을 분석하고, 제2 사용자(203)의 말이나 제스처의 의미가 제1 사용자(201)의 문화권에서의 의미와 다른 경우, 이를 제1 사용자(201)에게 알릴 수 있다.
도 3은 일 실시 예에 따른 화면 제어와 관련한 전자 장치의 운용 방법을 나타낸 도면이다.
도 3을 참조하면, 동작 310에서, 전자 장치(예: 전자 장치(100))의 프로세서(예: 프로세서(150))는 상기 전자 장치에 설정된 제1 지역을 확인할 수 있다. 일 예로, 상기 프로세서는 상기 제1 지역과 관련된 설정 정보를 상기 전자 장치의 메모리(예: 메모리(130))에서 확인할 수 있다. 다른 예로, 상기 프로세서는 상기 전자 장치의 사용자에 대한 프로필 정보(또는 계정 정보)를 통해 상기 제1 지역을 확인할 수 있다.
동작 320에서, 상기 프로세서는 디스플레이(예: 디스플레이(110))에 출력된 제1 객체와 관련된 제2 지역을 확인할 수 있다. 일 예로, 상기 프로세서는 상기 디스플레이에 출력된 메시지 어플리케이션, 이메일 어플리케이션, 또는 채팅 어플리케이션 등의 실행 화면에 포함된 제1 객체와 관련된 제2 지역을 확인할 수 있다. 다른 예로, 상기 프로세서는 상기 디스플레이에 출력된 VR 영상 또는 AR 영상에 포함된 제1 객체와 관련된 제2 지역을 확인할 수 있다. 여기서 상기 제1 객체는 소통 대상인 상대방과 관련된 객체일 수 있다. 일 예로, 상기 제1 객체는 상대방을 식별할 수 있는 정보(예: 이름, 대화명, 계정 아이디, 또는 전화 번호 등)를 포함할 수 있다. 다른 예로, 상기 제1 객체는 상대방을 촬영한 이미지를 포함할 수 있다.
일 실시 예에 따르면, 상기 제1 객체가 상대방을 식별할 수 있는 정보를 포함하는 경우, 상기 프로세서는 상기 정보를 이용하여 상대방의 제2 지역을 확인할 수 있다. 일 실시 예에 따르면, 상기 제1 객체가 상대방을 촬영한 이미지를 포함하는 경우, 상기 프로세서는 상기 이미지를 분석하여, 분석된 정보를 기반으로 상대방의 얼굴을 인식하여 상대방의 지역을 확인하거나, 상대방의 얼굴 특징을 통해 상대방의 제2 지역을 유추할 수 있다. 또는, 상기 프로세서는 상기 이미지에 포함된 음성 정보를 분석하여, 분석된 정보를 기반으로 상대방의 음성을 인식하여 상대방의 지역을 확인하거나, 상대방이 사용하는 언어나 언어적 특징(예: 억양 등)을 통해 상대방의 제2 지역을 유추할 수 있다.
동작 330에서, 상기 프로세서는 상기 제1 지역과 상기 제2 지역이 다른지를 판단할 수 있다. 예컨대, 상기 프로세서는 상기 전자 장치의 사용자의 제1 지역이 상대방의 제2 지역과 다른지를 판단할 수 있다.
동작 340에서, 상기 프로세서는 상기 디스플레이에 출력된 제2 객체가 상기 제1 지역에서 사용되는 제1 의미와 상기 제2 지역에서 사용되는 제2 의미를 확인할 수 있다. 예컨대, 상기 프로세서는 상기 디스플레이에 출력된 이모티콘, 스티커, 또는 제스처를 나타내는 이미지가 제1 지역에서 사용되는 제1 의미와 제2 지역에서 사용되는 제2 의미를 확인할 수 있다. 상기 제2 객체가 지역별로 사용되는 의미들은 상기 메모리에 저장된 문화 데이터베이스(예: 문화 데이터베이스(131))를 통해 관리될 수 있다.
동작 350에서, 상기 프로세서는 상기 제1 의미와 상기 제2 의미가 다른지를 판단할 수 있다. 예컨대, 상기 프로세서는 상기 제2 객체가 상기 제1 지역에서 사용되는 제1 의미와 상기 제2 지역에서 사용되는 제2 의미가 서로 다른지를 판단할 수 있다.
동작 360에서, 상기 프로세서는 상기 제1 의미와 상기 제2 의미가 다르다는 알림을 사용자에게 제공할 수 있다. 일 예로, 상기 프로세서는 지역별로 다른 의미를 가지는 상기 제2 객체가 상기 디스플레이에 출력된 경우, 상기 제2 객체가 지역별로 다른 의미를 가진다는 내용의 텍스트, 이미지 등을 상기 디스플레이에 출력할 수 있다.
일 실시 예에 따르면, 상기 프로세서는 지역별로 다른 의미를 가지는 상기 제2 객체를 사용하지 못하도록 처리할 수 있다. 일 예로, 상기 프로세서는 상기 제2 객체를 사용하지 못하도록 상기 제2 객체에 대한 선택 입력을 제한할 수 있다. 다른 예로, 상기 프로세서는 상기 제2 객체를 사용하지 못하도록 화면을 제어할 수 있다. 예컨대, 상기 프로세서는 상기 제2 객체가 보이지 않도록 화면에서 삭제하거나 투명 처리할 수 있다.
일 실시 예에 따르면, 상기 프로세서는 지역별로 다른 의미를 가지는 상기 제2 객체를 다른 객체로 변경할 수 있다. 예컨대, 상기 프로세서는 상기 제2 객체를 상기 제2 지역에서 상기 제1 의미로 사용되는 제3 객체로 변경할 수 있다.
상술한 바와 같이, 다양한 실시 예에 따르면, 전자 장치의 화면 제어 방법은, 상기 전자 장치에 설정된 제1 지역을 확인하는 동작, 디스플레이에 출력된 제1 객체와 관련된 제2 지역을 확인하는 동작, 상기 제1 지역과 상기 제2 지역이 다른지를 판단하는 동작, 상기 제2 지역이 상기 제1 지역과 다른 경우, 상기 디스플레이에 출력된 제2 객체가 상기 제1 지역에서 사용되는 제1 의미와 상기 제2 지역에서 사용되는 제2 의미를 확인하는 동작, 상기 제1 의미와 상기 제2 의미가 다른지를 판단하는 동작, 상기 제1 의미와 상기 제2 의미가 다른 경우, 상기 디스플레이를 통해 상기 제1 의미와 상기 제2 의미가 다르다는 알림을 제공하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 알림을 제공하는 동작은, 상기 제1 의미 및 상기 제2 의미가 다르다는 내용의 텍스트 및 이미지 중 적어도 하나를 상기 디스플레이에 출력하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 화면 제어 방법은 상기 제2 객체를 상기 제2 객체의 사용 제한을 나타내는 제3 객체로 변경하거나, 상기 제2 객체를 투명 처리하는 동작을 더 포함할 수 있다.
다양한 실시 예에 따르면, 상기 화면 제어 방법은 상기 제2 객체에 대한 터치 입력을 무시하는 동작을 더 포함할 수 있다.
다양한 실시 예에 따르면, 상기 화면 제어 방법은 상기 제2 객체를 상기 제2 의미를 가지는 제3 객체로 변경하는 동작을 더 포함할 수 있다.
다양한 실시 예에 따르면, 상기 화면 제어 방법은 상기 제2 객체를 통신 회로를 통해 상기 제2 지역의 외부 전자 장치로 전송하는 사용자 입력을 수신하는 동작, 상기 제2 객체를 상기 제2 의미를 가지는 제3 객체로 변경하는 동작, 및 상기 제3 객체를 상기 외부 전자 장치로 전송하는 동작을 더 포함할 수 있다.
도 4는 일 실시 예에 따른 다른 의미를 가지는 객체의 사용을 금지시키는 방법을 설명하기 위한 도면이다.
도 4를 참조하면, 전자 장치(400)(예: 전자 장치(100))는 디스플레이(410)(예: 디스플레이(110))에 상대방과의 소통을 지원하는 메시지 어플리케이션, 이메일 어플리케이션, 또는 채팅 어플리케이션 등의 실행 화면을 출력할 수 있다. 예를 들어, 전자 장치(400)는 디스플레이(410)에 상대방의 식별 정보를 포함하는 제1 객체(431), 사용자가 송신한 대화 내용(433), 또는 상대방이 송신한 대화 내용(434)을 번역한 내용(435) 등을 표시할 수 있다. 또한, 전자 장치(400)는 서로 다른 지역의 사용자와 상대방 간의 원활한 소통을 위해 번역 기능을 지원할 수 있고, 번역되는 언어 정보를 포함하는 제2 객체(432)를 디스플레이(410)에 출력할 수 있다.
일 실시 예에 따르면, 전자 장치(400)는 디스플레이(410)에 출력된 제1 객체(431)와 관련된 지역을 확인할 수 있다. 상기 제1 객체(431)는 소통 대상인 상대방과 관련된 객체일 수 있다. 예를 들어, 상기 제1 객체(431)는 상대방을 식별할 수 있는 정보(예: 이름, 대화면, 계정 아이디, 또는 전화 번호 등)를 포함할 수 있다. 어떤 실시 예에서, 전자 장치(400)는 번역 기능과 관련된 제2 객체(432)를 이용해 상대방의 지역을 확인할 수도 있다. 예를 들어, 제2 객체(432)가 상기 상대방의 언어 정보를 포함하는 경우, 상기 언어 정보를 이용해 상기 상대방의 지역을 판단할 수도 있다.
일 실시 예에 따르면, 전자 장치(400)는 텍스트 외에 이모티콘이나 스티커 등을 송신할 수 있도록 디스플레이(410)의 화면을 제어할 수 있다. 예를 들어, 전자 장치(400)의 화면의 하단 영역에 이모티콘 또는 스티커 등을 선택할 수 있는 인터페이스를 제공할 수 있다.
일 실시 예에 따르면, 전자 장치(400)는 디스플레이(410)에 출력된 이모티콘 또는 스티커 등의 객체가 지역별로 사용되는 의미를 확인할 수 있다. 또한, 전자 장치(400)는 상기 이모티콘 또는 스티커 등의 객체가 지역별로 다른 의미를 가지는 경우, 상기 객체가 지역별로 다른 의미를 가진다는 내용의 텍스트, 이미지 등을 디스플레이(410)에 출력할 수 있다.
일 실시 예에 따르면, 전자 장치(400)는 지역별로 다른 의미를 가지는 객체를 사용하지 못하도록 처리할 수 있다. 일 예로, 전자 장치(400)는 지역과는 상관없이 동일한 의미를 가지는 이모티콘(예: 제3 객체(436))에 대해서는 별다른 처리 없이 그대로 디스플레이(410)에 출력할 수 있고, 지역별로 다른 의미를 가지는 이모티콘에 대해서는 제1 상태(401)에서와 같이, 상기 이모티콘의 사용 제한을 나타내는 제4 객체(437)로 변경할 수 있다. 다른 예로, 전자 장치(400)는 지역별로 다른 의미를 가지는 이모티콘에 대해서 제2 상태(403)에서와 같이, 투명 처리(438)를 할 수도 있다.
일 실시 예에 따르면, 전자 장치(400)는 지역별로 다른 의미를 가지는 객체에 대한 선택 입력을 제한할 수도 있다. 예를 들어, 사용자가 상기 객체를 선택하더라도, 전자 장치(400)는 상기 객체가 선택되지 않은 것처럼 상기 객체에 대한 터치 입력을 무시할 수 있다.
도 5는 일 실시 예에 따른 객체의 다른 의미를 알리는 방법을 설명하기 위한 도면이다.
도 5를 참조하면, 전자 장치(500)(예: 전자 장치(100))는 디스플레이(510)(예: 디스플레이(110))에 출력된 객체들 중 지역별로 다른 의미를 가지는 제1 객체가 존재하는 경우, 상기 제1 객체가 지역별로 다른 의미를 가진다는 알림을 제공할 수 있다.
일 실시 예에 따르면, 전자 장치(500)는 지역별로 다른 의미를 가지는 제1 객체가 존재하는 경우, 상기 제1 객체를 상기 제1 객체의 사용 제한을 나타내는 제2 객체(531)로 변경하여 디스플레이(510)에 출력할 수 있다.
일 실시 예에 따르면, 전자 장치(500)는 상기 제2 객체(531)를 선택하는 사용자 입력(550)이 발생하면, 상기 제1 객체가 사용 제한된 이유를 포함하는 제3 객체(533)를 디스플레이(510)에 출력할 수 있다. 일 예로, 전자 장치(500)는 상기 제1 객체가 다른 지역에서 사용되는 의미를 포함하는 말풍선의 형태를 가지는 제3 객체(533)를 디스플레이(510)에 출력할 수 있다.
도 6은 일 실시 예에 따른 다른 의미를 가지는 객체를 변경하는 방법을 설명하기 위한 도면이다.
도 6을 참조하면, 전자 장치(600)(예: 전자 장치(100))는 디스플레이(610)(예: 디스플레이(110))에 출력된 객체들 중 지역별로 다른 의미를 가지는 제1 객체(631)가 존재하는 경우, 상기 제1 객체(631)가 사용자의 지역에서 사용되는 의미를 확인할 수 있다. 또한, 전자 장치(600)는 상기 제1 객체(631)를 상대방의 지역에서 상기 의미를 가지는 제2 객체(633)로 변경하여 디스플레이(610)에 출력할 수 있다. 예컨대, 사용자가 제1 의미를 가지는 제1 이모티콘(제1 객체(631))을 상대방에 전송하려고 할 때, 상기 제1 이모티콘(제1 객체(631))이 상대방의 지역에서는 제2 의미로 사용되는 경우, 의미가 서로 달라 소통이 원활하게 이루어지지 않을 수 있다. 이를 방지하기 위해, 전자 장치(600)는 상기 제1 이모티콘(제1 객체(631))을 상대방의 지역에서 사용자가 원래 의도하던 제1 의미를 가지는 제2 이모티콘(제2 객체(633))으로 변경할 수 있다.
도 7은 일 실시 예에 따른 다른 의미를 가지는 객체의 전송 시 객체를 변경하는 방법을 설명하기 위한 도면이다.
도 7을 참조하면, 전자 장치(700)(예: 전자 장치(100))는 디스플레이(710)(예: 디스플레이(110))에 출력된 객체들 중 지역별로 다른 의미를 가지는 제1 객체(731a)가 존재하는 경우, 상기 제1 객체(731a)가 사용자의 지역에서 사용되는 의미를 확인할 수 있다. 예를 들어, 전자 장치(700)의 사용자가 메시지 어플리케이션을 통해 메시지(731)를 입력할 때, 상기 메시지(731)에 포함된 객체들 중 지역별로 다른 의미를 가지는 제1 객체(731a)가 존재하는 경우, 상기 제1 객체(731a)가 사용자의 지역에서 사용되는 의미를 확인할 수 있다.
일 실시 예에 따르면, 전자 장치(700)는 메시지(731)를 상대방이 사용하는 외부 전자 장치(770)로 전송하도록 설정된 버튼(733)이 선택(750)(예: 상기 버튼(733)에 대한 사용자 입력(750)이 발생)되면, 메시지(731)를 상기 외부 전자 장치(770)로 송신하면서, 디스플레이(710)에 송신된 메시지(735)를 출력할 수 있다.
일 실시 예에 따르면, 전자 장치(700)는 지역별로 다른 의미를 가지는 상기 제1 객체(731a)를 상대방으로 전송할 때, 상대방의 지역에서 사용자가 원래 의도하던 의미를 가지는 제2 객체(791a)로 변경하여 전송할 수 있다. 예를 들어, 전자 장치(700)는 통신 회로(예: 통신 회로(170))를 통해 지역별로 다른 의미를 가지는 상기 제1 객체(731a)를 포함하는 메시지(731)를 전송할 때, 상기 제1 객체(731a)를 상대방의 지역에서 사용자가 원래 의도하던 의미를 가지는 제2 객체(791a)로 변경하여 전송할 수 있다. 이 경우, 상대방이 사용하는 외부 전자 장치(770)는 디스플레이(771)에 상기 제2 객체(791a)를 포함하는 수신 메시지(791)를 출력할 수 있다. 이 경우, 외부 전자 장치(770)는 수신 메시지(791)를 번역하여 출력할 수도 있다.
도 8은 일 실시 예에 따른 다른 의미를 가지는 객체의 선택 시 객체를 변경하는 방법을 설명하기 위한 도면이다.
도 8을 참조하면, 전자 장치(800)(예: 전자 장치(100))는 디스플레이(810)(예: 디스플레이(110))에 출력된 객체들 중 지역별로 다른 의미를 가지는 제1 객체(831a)가 존재하는 경우, 상기 제1 객체(831a)가 사용자의 지역에서 사용되는 의미를 확인할 수 있다. 예를 들어, 전자 장치(800)의 사용자가 메시지 어플리케이션을 통해 메시지(831)를 입력할 때, 상기 메시지(831)에 포함된 객체들 중 지역별로 다른 의미를 가지는 제1 객체(831a)가 존재하는 경우, 상기 제1 객체(831a)가 사용자의 지역에서 사용되는 의미를 확인할 수 있다.
일 실시 예에 따르면, 전자 장치(800)는 메시지(831)의 입력 과정에서 객체들(예: 제1 객체(831a))의 선택을 완료하도록 설정된 버튼(833)이 선택(850)(예: 상기 버튼(833)에 대한 사용자 입력(850)이 발생)되면, 메시지(831)에 포함된 상기 객체들 중 지역별로 다른 의미를 가지는 객체(예: 제1 객체(831a))가 존재하는지를 확인할 수 있다. 지역별로 다른 의미를 가지는 객체(예: 제1 객체(831a))가 존재하는 경우, 전자 장치(800)는 상기 객체를 상대방의 지역에서 사용자가 원래 의도하던 의미를 가지는 제2 객체(831b)로 변경하여 디스플레이(810)에 출력할 수 있다. 이에 따라, 사용자는 메시지(831)를 상대방에게 전송하기 전에, 변경된 객체들을 확인할 수 있다.
도 9는 일 실시 예에 따른 VR 환경에서의 화면 제어 방법을 설명하기 위한 도면이다.
도 9를 참조하면, 사용자는 상대방과와 VR 환경을 통해 소통할 수 있다. 일 예로, 사용자는 전자 장치(900)(예: 헤드 마운트 디스플레이 장치(HMD) 등)를 통해, 상대방이 카메라 등을 이용하여 촬영한 영상(910)을 확인할 수 있다. 또한, 사용자는 상기 영상(910)에 대한 피드백을 상대방에게 제공함으로써 상대방과 소통할 수 있다. 예를 들어, 전자 장치(900)는 화면의 일부 영역에 메시지를 입력할 수 있는 인터페이스(930)를 제공할 수 있다.
상기 인터페이스(930)는 예를 들어, 메시지 입력 화면일 수 있다. 이에 따라, 사용자는 상기 영상에 대한 피드백을 상기 메시지 입력 화면을 통해 상대방에게 제공할 수 있다. 전자 장치(900)는 번역 기능과 관련된 객체(931)를 상기 인터페이스(930)에 포함시킬 수 있다. 또한, 전자 장치(900)는 상기 인터페이스(930)에 텍스트뿐만 아니라 이모티콘(933a) 또는 스티커 등을 입력할 수 있는 영역(933)을 포함할 수 있다.
도 10은 일 실시 예에 따른 AR 환경에서의 화면 제어 방법을 설명하기 위한 도면이다.
도 10을 참조하면, 사용자는 상대방과와 AR 환경을 통해 소통할 수 있다. 일 예로, 사용자는 전자 장치(1000)(예: 스마트 글래스 등)를 통해, 상대방(1031)과 번역 기능과 관련된 객체(1033)를 포함하는 영상(1010)을 확인할 수 있다. 일 예로, 전자 장치(1000)는 상대방(1031)이 발화한 음성을 분석하고, 상기 번역 기능을 통해 번역된 텍스트(1035)를 화면에 출력할 수 있다. 또한, 전자 장치(1000)는 상기 텍스트(1035)에 대한 피드백을 상대방(1031)에게 제공할 시에, 지역별로 다른 의미를 가지는 제스처(1037a)가 존재하는지를 확인할 수 있다. 전자 장치(1000)는 사용자가 상기 피드백으로 상대방(1031)에게 수행할 수 있는 제스처들 중 지역별로 다른 의미를 가지는 제스처(1037a)가 존재하는 경우, 화면의 일부 영역에 지역별로 다른 의미를 가지는 제스처(1037a)가 존재함을 알리는 객체(1037)(예: 팝업 객체)를 출력할 수 있다. 상기 객체(1037)는 예를 들어, 지역별로 다른 의미를 가지는 제스처(1037a) 및 상기 제스처(1037a)가 상대방의 지역에서 사용되는 의미를 나타내는 객체(1037b)를 포함할 수 있다.
도 11은, 다양한 실시예들에 따른, 네트워크 환경(1100) 내의 전자 장치(1101)의 블럭도이다.
도 11을 참조하면, 네트워크 환경(1100)에서 전자 장치(1101)는 제 1 네트워크(1198)(예: 근거리 무선 통신 네트워크)를 통하여 전자 장치(1102)와 통신하거나, 또는 제 2 네트워크(1199)(예: 원거리 무선 통신 네트워크)를 통하여 전자 장치(1104) 또는 서버(1108)와 통신할 수 있다. 일실시예에 따르면, 전자 장치(1101)는 서버(1108)를 통하여 전자 장치(1104)와 통신할 수 있다. 일실시예에 따르면, 전자 장치(1101)는 프로세서(1120), 메모리(1130), 입력 장치(1150), 음향 출력 장치(1155), 표시 장치(1160), 오디오 모듈(1170), 센서 모듈(1176), 인터페이스(1177), 햅틱 모듈(1179), 카메라 모듈(1180), 전력 관리 모듈(1188), 배터리(1189), 통신 모듈(1190), 가입자 식별 모듈(1196), 또는 안테나 모듈(1197)을 포함할 수 있다. 어떤 실시예에서는, 전자 장치(1101)에는, 이 구성요소들 중 적어도 하나(예: 표시 장치(1160) 또는 카메라 모듈(1180))가 생략되거나, 하나 이상의 다른 구성요소가 추가될 수 있다. 어떤 실시예에서는, 이 구성요소들 중 일부들은 하나의 통합된 회로로 구현될 수 있다. 예를 들면, 센서 모듈(1176)(예: 지문 센서, 홍채 센서, 또는 조도 센서)은 표시 장치(1160)(예: 디스플레이)에 임베디드된 채 구현될 수 있다
프로세서(1120)는, 예를 들면, 소프트웨어(예: 프로그램(1140))를 실행하여 프로세서(1120)에 연결된 전자 장치(1101)의 적어도 하나의 다른 구성요소(예: 하드웨어 또는 소프트웨어 구성요소)를 제어할 수 있고, 다양한 데이터 처리 또는 연산을 수행할 수 있다. 일실시예에 따르면, 데이터 처리 또는 연산의 적어도 일부로서, 프로세서(1120)는 다른 구성요소(예: 센서 모듈(1176) 또는 통신 모듈(1190))로부터 수신된 명령 또는 데이터를 휘발성 메모리(1132)에 로드하고, 휘발성 메모리(1132)에 저장된 명령 또는 데이터를 처리하고, 결과 데이터를 비휘발성 메모리(1134)에 저장할 수 있다. 일실시예에 따르면, 프로세서(1120)는 메인 프로세서(1121)(예: 중앙 처리 장치 또는 어플리케이션 프로세서), 및 이와는 독립적으로 또는 함께 운영 가능한 보조 프로세서(1123)(예: 그래픽 처리 장치, 이미지 시그널 프로세서, 센서 허브 프로세서, 또는 커뮤니케이션 프로세서)를 포함할 수 있다. 추가적으로 또는 대체적으로, 보조 프로세서(1123)는 메인 프로세서(1121)보다 저전력을 사용하거나, 또는 지정된 기능에 특화되도록 설정될 수 있다. 보조 프로세서(1123)는 메인 프로세서(1121)와 별개로, 또는 그 일부로서 구현될 수 있다.
보조 프로세서(1123)는, 예를 들면, 메인 프로세서(1121)가 인액티브(예: 슬립) 상태에 있는 동안 메인 프로세서(1121)를 대신하여, 또는 메인 프로세서(1121)가 액티브(예: 어플리케이션 실행) 상태에 있는 동안 메인 프로세서(1121)와 함께, 전자 장치(1101)의 구성요소들 중 적어도 하나의 구성요소(예: 표시 장치(1160), 센서 모듈(1176), 또는 통신 모듈(1190))와 관련된 기능 또는 상태들의 적어도 일부를 제어할 수 있다. 일실시예에 따르면, 보조 프로세서(1123)(예: 이미지 시그널 프로세서 또는 커뮤니케이션 프로세서)는 기능적으로 관련 있는 다른 구성 요소(예: 카메라 모듈(1180) 또는 통신 모듈(1190))의 일부로서 구현될 수 있다.
메모리(1130)는, 전자 장치(1101)의 적어도 하나의 구성요소(예: 프로세서(1120) 또는 센서모듈(1176))에 의해 사용되는 다양한 데이터를 저장할 수 있다. 데이터는, 예를 들어, 소프트웨어(예: 프로그램(1140)) 및, 이와 관련된 명령에 대한 입력 데이터 또는 출력 데이터를 포함할 수 있다. 메모리(1130)는, 휘발성 메모리(1132) 또는 비휘발성 메모리(1134)를 포함할 수 있다.
프로그램(1140)은 메모리(1130)에 소프트웨어로서 저장될 수 있으며, 예를 들면, 운영 체제(1142), 미들 웨어(1144) 또는 어플리케이션(1146)을 포함할 수 있다.
입력 장치(1150)는, 전자 장치(1101)의 구성요소(예: 프로세서(1120))에 사용될 명령 또는 데이터를 전자 장치(1101)의 외부(예: 사용자)로부터 수신할 수 있다. 입력 장치(1150)는, 예를 들면, 마이크, 마우스, 키보드, 또는 디지털 펜(예: 스타일러스 펜)을 포함할 수 있다.
음향 출력 장치(1155)는 음향 신호를 전자 장치(1101)의 외부로 출력할 수 있다. 음향 출력 장치(1155)는, 예를 들면, 스피커 또는 리시버를 포함할 수 있다. 스피커는 멀티미디어 재생 또는 녹음 재생과 같이 일반적인 용도로 사용될 수 있고, 리시버는 착신 전화를 수신하기 위해 사용될 수 있다. 일실시예에 따르면, 리시버는 스피커와 별개로, 또는 그 일부로서 구현될 수 있다.
표시 장치(1160)는 전자 장치(1101)의 외부(예: 사용자)로 정보를 시각적으로 제공할 수 있다. 표시 장치(1160)는, 예를 들면, 디스플레이, 홀로그램 장치, 또는 프로젝터 및 해당 장치를 제어하기 위한 제어 회로를 포함할 수 있다. 일실시예에 따르면, 표시 장치(1160)는 터치를 감지하도록 설정된 터치 회로(touch circuitry), 또는 상기 터치에 의해 발생되는 힘의 세기를 측정하도록 설정된 센서 회로(예: 압력 센서)를 포함할 수 있다.
오디오 모듈(1170)은 소리를 전기 신호로 변환시키거나, 반대로 전기 신호를 소리로 변환시킬 수 있다. 일실시예에 따르면, 오디오 모듈(1170)은, 입력 장치(1150)를 통해 소리를 획득하거나, 음향 출력 장치(1155), 또는 전자 장치(1101)와 직접 또는 무선으로 연결된 외부 전자 장치(예: 전자 장치(1102))(예: 스피커 또는 헤드폰)를 통해 소리를 출력할 수 있다.
센서 모듈(1176)은 전자 장치(1101)의 작동 상태(예: 전력 또는 온도), 또는 외부의 환경 상태(예: 사용자 상태)를 감지하고, 감지된 상태에 대응하는 전기 신호 또는 데이터 값을 생성할 수 있다. 일실시예에 따르면, 센서 모듈(1176)은, 예를 들면, 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, 컬러 센서, IR(infrared) 센서, 생체 센서, 온도 센서, 습도 센서, 또는 조도 센서를 포함할 수 있다.
인터페이스(1177)는 전자 장치(1101)가 외부 전자 장치(예: 전자 장치(1102))와 직접 또는 무선으로 연결되기 위해 사용될 수 있는 하나 이상의 지정된 프로토콜들을 지원할 수 있다. 일실시예에 따르면, 인터페이스(1177)는, 예를 들면, HDMI(high definition multimedia interface), USB(universal serial bus) 인터페이스, SD카드 인터페이스, 또는 오디오 인터페이스를 포함할 수 있다.
연결 단자(1178)는, 그를 통해서 전자 장치(1101)가 외부 전자 장치(예: 전자 장치(1102))와 물리적으로 연결될 수 있는 커넥터를 포함할 수 있다. 일실시예에 따르면, 연결 단자(1178)는, 예를 들면, HDMI 커넥터, USB 커넥터, SD 카드 커넥터, 또는 오디오 커넥터(예: 헤드폰 커넥터)를 포함할 수 있다.
햅틱 모듈(1179)은 전기적 신호를 사용자가 촉각 또는 운동 감각을 통해서 인지할 수 있는 기계적인 자극(예: 진동 또는 움직임) 또는 전기적인 자극으로 변환할 수 있다. 일실시예에 따르면, 햅틱 모듈(1179)은, 예를 들면, 모터, 압전 소자, 또는 전기 자극 장치를 포함할 수 있다.
카메라 모듈(1180)은 정지 영상 및 동영상을 촬영할 수 있다. 일실시예에 따르면, 카메라 모듈(1180)은 하나 이상의 렌즈들, 이미지 센서들, 이미지 시그널 프로세서들, 또는 플래시들을 포함할 수 있다.
전력 관리 모듈(1188)은 전자 장치(1101)에 공급되는 전력을 관리할 수 있다. 일실시예에 따르면, 전력 관리 모듈(1188)은, 예를 들면, PMIC(power management integrated circuit)의 적어도 일부로서 구현될 수 있다.
배터리(1189)는 전자 장치(1101)의 적어도 하나의 구성요소에 전력을 공급할 수 있다. 일실시예에 따르면, 배터리(1189)는, 예를 들면, 재충전 불가능한 1차 전지, 재충전 가능한 2차 전지 또는 연료 전지를 포함할 수 있다.
통신 모듈(1190)은 전자 장치(1101)와 외부 전자 장치(예: 전자 장치(1102), 전자 장치(1104), 또는 서버(1108))간의 직접(예: 유선) 통신 채널 또는 무선 통신 채널의 수립, 및 수립된 통신 채널을 통한 통신 수행을 지원할 수 있다. 통신 모듈(1190)은 프로세서(1120)(예: 어플리케이션 프로세서)와 독립적으로 운영되고, 직접(예: 유선) 통신 또는 무선 통신을 지원하는 하나 이상의 커뮤니케이션 프로세서를 포함할 수 있다. 일실시예에 따르면, 통신 모듈(1190)은 무선 통신 모듈(1192)(예: 셀룰러 통신 모듈, 근거리 무선 통신 모듈, 또는 GNSS(global navigation satellite system) 통신 모듈) 또는 유선 통신 모듈(1194)(예: LAN(local area network) 통신 모듈, 또는 전력선 통신 모듈)을 포함할 수 있다. 이들 통신 모듈 중 해당하는 통신 모듈은 제 1 네트워크(1198)(예: 블루투스, WiFi direct 또는 IrDA(infrared data association) 같은 근거리 통신 네트워크) 또는 제 2 네트워크(1199)(예: 셀룰러 네트워크, 인터넷, 또는 컴퓨터 네트워크(예: LAN 또는 WAN)와 같은 원거리 통신 네트워크)를 통하여 외부 전자 장치(1104)와 통신할 수 있다. 이런 여러 종류의 통신 모듈들은 하나의 구성요소(예: 단일 칩)로 통합되거나, 또는 서로 별도의 복수의 구성요소들(예: 복수 칩들)로 구현될 수 있다. 무선 통신 모듈(1192)은 가입자 식별 모듈(1196)에 저장된 가입자 정보(예: 국제 모바일 가입자 식별자(IMSI))를 이용하여 제 1 네트워크(1198) 또는 제 2 네트워크(1199)와 같은 통신 네트워크 내에서 전자 장치(1101)를 확인 및 인증할 수 있다.
안테나 모듈(1197)은 신호 또는 전력을 외부(예: 외부 전자 장치)로 송신하거나 외부로부터 수신할 수 있다. 일실시예에 따르면, 안테나 모듈(1197)은 서브스트레이트(예: PCB) 위에 형성된 도전체 또는 도전성 패턴으로 이루어진 방사체를 포함하는 하나의 안테나를 포함할 수 있다. 일실시예에 따르면, 안테나 모듈(1197)은 복수의 안테나들을 포함할 수 있다. 이런 경우, 제 1 네트워크(1198) 또는 제 2 네트워크(1199)와 같은 통신 네트워크에서 사용되는 통신 방식에 적합한 적어도 하나의 안테나가, 예를 들면, 통신 모듈(1190)에 의하여 상기 복수의 안테나들로부터 선택될 수 있다. 신호 또는 전력은 상기 선택된 적어도 하나의 안테나를 통하여 통신 모듈(1190)과 외부 전자 장치 간에 송신되거나 수신될 수 있다. 어떤 실시예에 따르면, 방사체 이외에 다른 부품(예: RFIC)이 추가로 안테나 모듈(1197)의 일부로 형성될 수 있다.
상기 구성요소들 중 적어도 일부는 주변 기기들간 통신 방식(예: 버스, GPIO(general purpose input and output), SPI(serial peripheral interface), 또는 MIPI(mobile industry processor interface))을 통해 서로 연결되고 신호(예: 명령 또는 데이터)를 상호간에 교환할 수 있다.
일실시예에 따르면, 명령 또는 데이터는 제 2 네트워크(1199)에 연결된 서버(1108)를 통해서 전자 장치(1101)와 외부의 전자 장치(1104)간에 송신 또는 수신될 수 있다. 외부 전자 장치(1102, 1104) 각각은 전자 장치(1101)와 동일한 또는 다른 종류의 장치일 수 있다. 일실시예에 따르면, 전자 장치(1101)에서 실행되는 동작들의 전부 또는 일부는 외부 전자 장치들(1102, 1104, 또는 1108) 중 하나 이상의 외부 전자 장치들에서 실행될 수 있다. 예를 들면, 전자 장치(1101)가 어떤 기능이나 서비스를 자동으로, 또는 사용자 또는 다른 장치로부터의 요청에 반응하여 수행해야 할 경우에, 전자 장치(1101)는 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 하나 이상의 외부 전자 장치들에게 그 기능 또는 그 서비스의 적어도 일부를 수행하라고 요청할 수 있다. 상기 요청을 수신한 하나 이상의 외부 전자 장치들은 요청된 기능 또는 서비스의 적어도 일부, 또는 상기 요청과 관련된 추가 기능 또는 서비스를 실행하고, 그 실행의 결과를 전자 장치(1101)로 전달할 수 있다. 전자 장치(1101)는 상기 결과를, 그대로 또는 추가적으로 처리하여, 상기 요청에 대한 응답의 적어도 일부로서 제공할 수 있다.. 이를 위하여, 예를 들면, 클라우드 컴퓨팅, 분산 컴퓨팅, 또는 클라이언트-서버 컴퓨팅 기술이 이용될 수 있다.
본 문서에 개시된 다양한 실시예들에 따른 전자 장치는 다양한 형태의 장치가 될 수 있다. 전자 장치는, 예를 들면, 휴대용 통신 장치 (예: 스마트폰), 컴퓨터 장치, 휴대용 멀티미디어 장치, 휴대용 의료 기기, 카메라, 웨어러블 장치, 또는 가전 장치를 포함할 수 있다. 본 문서의 실시예에 따른 전자 장치는 전술한 기기들에 한정되지 않는다.
본 문서의 다양한 실시예들 및 이에 사용된 용어들은 본 문서에 기재된 기술적 특징들을 특정한 실시예들로 한정하려는 것이 아니며, 해당 실시예의 다양한 변경, 균등물, 또는 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 또는 관련된 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 아이템에 대응하는 명사의 단수 형은 관련된 문맥상 명백하게 다르게 지시하지 않는 한, 상기 아이템 한 개 또는 복수 개를 포함할 수 있다. 본 문서에서, "A 또는 B", "A 및 B 중 적어도 하나",“A 또는 B 중 적어도 하나”, "A, B 또는 C", "A, B 및 C 중 적어도 하나” 및 “A, B, 또는 C 중 적어도 하나"와 같은 문구들 각각은 그 문구들 중 해당하는 문구에 함께 나열된 항목들 중 어느 하나, 또는 그들의 모든 가능한 조합을 포함할 수 있다. "제 1", "제 2", 또는 "첫째" 또는 "둘째"와 같은 용어들은 단순히 해당 구성요소를 다른 해당 구성요소와 구분하기 위해 사용될 수 있으며, 해당 구성요소들을 다른 측면(예: 중요성 또는 순서)에서 한정하지 않는다. 어떤(예: 제 1) 구성요소가 다른(예: 제 2) 구성요소에, “기능적으로” 또는 “통신적으로”라는 용어와 함께 또는 이런 용어 없이, “커플드” 또는 “커넥티드”라고 언급된 경우, 그것은 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로(예: 유선으로), 무선으로, 또는 제 3 구성요소를 통하여 연결될 수 있다는 것을 의미한다.
본 문서에서 사용된 용어 "모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구현된 유닛을 포함할 수 있으며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로와 같은 용어와 상호 호환적으로 사용될 수 있다. 모듈은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는, 상기 부품의 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 일실시예에 따르면, 모듈은 ASIC(application-specific integrated circuit)의 형태로 구현될 수 있다.
본 문서의 다양한 실시예들은 기기(machine)(예: 전자 장치(1101)) 의해 읽을 수 있는 저장 매체(storage medium)(예: 내장 메모리(1136) 또는 외장 메모리(1138))에 저장된 하나 이상의 명령어들을 포함하는 소프트웨어(예: 프로그램(1140))로서 구현될 수 있다. 예를 들면, 기기(예: 전자 장치(1101))의 프로세서(예: 프로세서(1120))는, 저장 매체로부터 저장된 하나 이상의 명령어들 중 적어도 하나의 명령을 호출하고, 그것을 실행할 수 있다. 이것은 기기가 상기 호출된 적어도 하나의 명령어에 따라 적어도 하나의 기능을 수행하도록 운영되는 것을 가능하게 한다. 상기 하나 이상의 명령어들은 컴파일러에 의해 생성된 코드 또는 인터프리터에 의해 실행될 수 있는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장 매체는, 비일시적(non-transitory) 저장 매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장 매체가 실재(tangible)하는 장치이고, 신호(signal)(예: 전자기파)를 포함하지 않는다는 것을 의미할 뿐이며, 이 용어는 데이터가 저장 매체에 반영구적으로 저장되는 경우와 임시적으로 저장되는 경우를 구분하지 않는다.
일실시예에 따르면, 본 문서에 개시된 다양한 실시예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory(CD-ROM))의 형태로 배포되거나, 또는 어플리케이션 스토어(예: 플레이 스토어™)를 통해 또는 두 개의 사용자 장치들(예: 스마트폰들) 간에 직접, 온라인으로 배포(예: 다운로드 또는 업로드)될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 기기로 읽을 수 있는 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
다양한 실시예들에 따르면, 상기 기술한 구성요소들의 각각의 구성요소(예: 모듈 또는 프로그램)는 단수 또는 복수의 개체를 포함할 수 있다. 다양한 실시예들에 따르면, 전술한 해당 구성요소들 중 하나 이상의 구성요소들 또는 동작들이 생략되거나, 또는 하나 이상의 다른 구성요소들 또는 동작들이 추가될 수 있다. 대체적으로 또는 추가적으로, 복수의 구성요소들(예: 모듈 또는 프로그램)은 하나의 구성요소로 통합될 수 있다. 이런 경우, 통합된 구성요소는 상기 복수의 구성요소들 각각의 구성요소의 하나 이상의 기능들을 상기 통합 이전에 상기 복수의 구성요소들 중 해당 구성요소에 의해 수행되는 것과 동일 또는 유사하게 수행할 수 있다. 다양한 실시예들에 따르면, 모듈, 프로그램 또는 다른 구성요소에 의해 수행되는 동작들은 순차적으로, 병렬적으로, 반복적으로, 또는 휴리스틱하게 실행되거나, 상기 동작들 중 하나 이상이 다른 순서로 실행되거나, 생략되거나, 또는 하나 이상의 다른 동작들이 추가될 수 있다.

Claims (15)

  1. 전자 장치에 있어서,
    디스플레이;
    메모리; 및
    프로세서를 포함하고,
    상기 프로세서는,
    상기 전자 장치에 설정된 제1 지역을 확인(identify)하고,
    상기 디스플레이에 출력된 제1 객체와 관련된 제2 지역을 확인하고,
    상기 제1 지역과 상기 제2 지역이 다른지를 판단하고,
    상기 제2 지역이 상기 제1 지역과 다른 경우, 상기 디스플레이에 출력된 제2 객체가 상기 제1 지역에서 사용되는 제1 의미와 상기 제2 지역에서 사용되는 제2 의미를 확인하고,
    상기 제1 의미와 상기 제2 의미가 다른지를 판단하고,
    상기 제1 의미와 상기 제2 의미가 다른 경우, 상기 디스플레이를 통해 상기 제1 의미와 상기 제2 의미가 다르다는 알림을 제공하도록 설정된 전자 장치.
  2. 청구항 1에 있어서,
    상기 메모리는,
    지역별로 서로 다른 의미를 가지는 적어도 하나의 객체에 대한 정보를 저장하는 전자 장치.
  3. 청구항 2에 있어서,
    상기 프로세서는,
    상기 제1 의미와 상기 제2 의미를 확인하는 동작의 적어도 일부로써,
    상기 메모리에 저장된 상기 정보를 확인하는 동작을 포함하는 전자 장치.
  4. 청구항 1에 있어서,
    상기 프로세서는,
    상기 제1 지역을 확인하는 동작의 적어도 일부로써,
    상기 전자 장치의 설정 정보 및 상기 전자 장치의 사용자에 대한 프로필 정보 중 적어도 하나를 기반으로 상기 제1 지역을 확인하는 전자 장치.
  5. 청구항 1에 있어서,
    상기 프로세서는,
    상기 제2 지역을 확인하는 동작의 적어도 일부로써,
    상기 제1 객체가 상대방의 식별 정보를 포함하는 경우, 상기 식별 정보를 이용하여 상기 제2 지역을 확인하는 전자 장치.
  6. 청구항 1에 있어서,
    상기 프로세서는,
    상기 제2 지역을 확인하는 동작의 적어도 일부로써,
    상기 제1 객체가 상대방을 촬영한 이미지를 포함하는 경우, 상기 이미지를 분석하고, 분석된 정보를 기반으로 상기 상대방의 얼굴을 인식하고, 인식된 정보를 통해 상기 상대방을 확인하고, 확인된 상기 상대방의 프로필 정보를 이용하여 상기 제2 지역을 확인하는 전자 장치.
  7. 청구항 1에 있어서,
    상기 프로세서는,
    상기 제2 지역을 확인하는 동작의 적어도 일부로써,
    상기 제1 객체가 상대방을 촬영한 이미지를 포함하는 경우, 상기 이미지를 분석하고, 분석된 정보를 기반으로 상기 상대방의 얼굴 특징을 판단하고, 상기 얼굴 특징을 통해 상기 제2 지역을 판단하는 전자 장치.
  8. 청구항 1에 있어서,
    상기 프로세서는,
    상기 제2 지역을 확인하는 동작의 적어도 일부로써,
    상기 제1 객체가 상대방의 음성을 포함하는 경우, 상기 음성을 분석하고, 분석된 정보를 기반으로 상기 상대방의 음성을 인식하고, 인식된 정보를 통해 상기 상대방을 확인하고, 확인된 상기 상대방의 프로필 정보를 이용하여 상기 제2 지역을 확인하는 전자 장치.
  9. 청구항 1에 있어서,
    상기 프로세서는,
    상기 제2 지역을 확인하는 동작의 적어도 일부로써,
    상기 제1 객체가 상대방의 음성을 포함하는 경우, 상기 음성을 분석하고, 분석된 정보를 기반으로 상기 상대방이 사용하는 언어 및 언어적 특징 중 적어도 하나를 판단하고, 상기 언어 및 상기 언어적 특징 중 적어도 하나를 통해 상기 제2 지역을 판단하는 전자 장치.
  10. 청구항 1에 있어서,
    상기 프로세서는,
    상기 알림을 제공하는 동작의 적어도 일부로써,
    상기 제1 의미 및 상기 제2 의미가 다르다는 내용의 텍스트 및 이미지 중 적어도 하나를 상기 디스플레이에 출력하는 전자 장치.
  11. 청구항 1에 있어서,
    상기 프로세서는,
    상기 제2 객체를 상기 제2 객체의 사용 제한을 나타내는 제3 객체로 변경하거나, 상기 제2 객체를 투명 처리하는 전자 장치.
  12. 청구항 1에 있어서,
    상기 프로세서는,
    상기 제2 객체에 대한 터치 입력을 무시하는 전자 장치.
  13. 청구항 1에 있어서,
    상기 프로세서는,
    상기 제2 객체를 상기 제2 의미를 가지는 제3 객체로 변경하는 전자 장치.
  14. 청구항 1에 있어서,
    상기 제2 지역의 외부 전자 장치와 통신하기 위한 통신 회로를 더 포함하고,
    상기 프로세서는,
    상기 제2 객체를 상기 통신 회로를 통해 상기 외부 전자 장치로 전송하는 사용자 입력을 수신하면, 상기 제2 객체를 상기 제2 의미를 가지는 제3 객체로 변경하고, 상기 제3 객체를 상기 외부 전자 장치로 전송하는 전자 장치.
  15. 전자 장치의 화면 제어 방법에 있어서,
    상기 전자 장치에 설정된 제1 지역을 확인하는 동작;
    디스플레이에 출력된 제1 객체와 관련된 제2 지역을 확인하는 동작;
    상기 제1 지역과 상기 제2 지역이 다른지를 판단하는 동작;
    상기 제2 지역이 상기 제1 지역과 다른 경우, 상기 디스플레이에 출력된 제2 객체가 상기 제1 지역에서 사용되는 제1 의미와 상기 제2 지역에서 사용되는 제2 의미를 확인하는 동작;
    상기 제1 의미와 상기 제2 의미가 다른지를 판단하는 동작;
    상기 제1 의미와 상기 제2 의미가 다른 경우, 상기 디스플레이를 통해 상기 제1 의미와 상기 제2 의미가 다르다는 알림을 제공하는 동작을 포함하는 화면 제어 방법.
PCT/KR2019/003085 2018-03-16 2019-03-18 화면 제어 방법 및 이를 지원하는 전자 장치 WO2019177437A1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US16/962,775 US11630574B2 (en) 2018-03-16 2019-03-18 Screen control method for providing notification of objects having different meanings for each region and electronic device supporting same
CN201980018456.1A CN111886595B (zh) 2018-03-16 2019-03-18 屏幕控制方法和支持屏幕控制方法的电子设备
EP19767629.9A EP3731114A4 (en) 2018-03-16 2019-03-18 SCREEN DEPLOYMENT PROCEDURES AND ELECTRONIC DEVICE IN SUPPORT THEREOF

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020180030734A KR102543656B1 (ko) 2018-03-16 2018-03-16 화면 제어 방법 및 이를 지원하는 전자 장치
KR10-2018-0030734 2018-06-16

Publications (1)

Publication Number Publication Date
WO2019177437A1 true WO2019177437A1 (ko) 2019-09-19

Family

ID=67907137

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2019/003085 WO2019177437A1 (ko) 2018-03-16 2019-03-18 화면 제어 방법 및 이를 지원하는 전자 장치

Country Status (5)

Country Link
US (1) US11630574B2 (ko)
EP (1) EP3731114A4 (ko)
KR (1) KR102543656B1 (ko)
CN (1) CN111886595B (ko)
WO (1) WO2019177437A1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4034980A1 (en) * 2019-09-27 2022-08-03 Apple Inc. User interfaces for customizing graphical objects
CN113037607A (zh) * 2020-12-18 2021-06-25 北京字跳网络技术有限公司 通信方法、客户端、服务器控制方法和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010146563A (ja) * 2008-12-19 2010-07-01 Intel Corp 位置支援翻訳のための方法、装置及びシステム
KR20100094021A (ko) * 2009-02-18 2010-08-26 김기미 이동통신 단말기와 아이피 기반 정보 단말기를 이용한 맞춤, 지능형 심볼, 아이콘 인터넷 정보 검색시스템
KR20130020065A (ko) * 2011-08-18 2013-02-27 엘지전자 주식회사 휴대 전자기기 및 이의 제어방법
KR20130083049A (ko) * 2011-12-28 2013-07-22 (주)에스제이기획 전자방명록 장치
KR20150141419A (ko) * 2014-06-10 2015-12-18 삼성전자주식회사 전자 장치에서 이미지의 위치 정보에 기반한 이미지 활용 방법 및 그 장치

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0306875D0 (en) 2003-03-25 2003-04-30 British Telecomm Apparatus and method for generating behavior in an object
US7451188B2 (en) 2005-01-07 2008-11-11 At&T Corp System and method for text translations and annotation in an instant messaging session
US20070143410A1 (en) * 2005-12-16 2007-06-21 International Business Machines Corporation System and method for defining and translating chat abbreviations
JP4218712B2 (ja) * 2006-08-04 2009-02-04 ソニー株式会社 顔検出装置、撮像装置および顔検出方法
CN101584575B (zh) * 2009-06-19 2011-05-04 无锡骏聿科技有限公司 一种基于人脸识别技术的年龄评估方法
EP2490151A1 (en) * 2011-02-17 2012-08-22 Nagravision S.A. Method and device to speed up face recognition
US8965170B1 (en) * 2012-09-04 2015-02-24 Google Inc. Automatic transition of content based on facial recognition
JP2014077994A (ja) * 2012-09-20 2014-05-01 Canon Inc 画像表示装置、その制御方法および制御プログラム並びに撮像装置
CN104143079B (zh) * 2013-05-10 2016-08-17 腾讯科技（深圳）有限公司 人脸属性识别的方法和系统
CN103824090B (zh) * 2014-02-17 2017-02-08 北京旷视科技有限公司 一种自适应的人脸低层特征选择方法及人脸属性识别方法
CN103824054B (zh) * 2014-02-17 2018-08-07 北京旷视科技有限公司 一种基于级联深度神经网络的人脸属性识别方法
CN104036247A (zh) * 2014-06-11 2014-09-10 杭州巨峰科技有限公司 基于脸部特征的人脸种族分类方法
JP6286289B2 (ja) * 2014-06-13 2018-02-28 株式会社Ｎｔｔドコモ 管理装置、会話システム、会話管理方法及びプログラム
KR20160024002A (ko) * 2014-08-21 2016-03-04 삼성전자주식회사 비쥬얼 사운드 이미지를 제공하는 방법 및 이를 구현하는 전자 장치
KR102357340B1 (ko) * 2014-09-05 2022-02-03 삼성전자주식회사 얼굴 인식 방법 및 장치
JP5791219B1 (ja) 2015-02-03 2015-10-07 株式会社モバイルライフジャパン インスタントメッセージ送受信プログラム、情報処理方法及び情報処理装置
KR102317847B1 (ko) * 2015-04-28 2021-10-27 삼성전자주식회사 메시지 처리 방법 및 이를 지원하는 전자 장치
KR20160139132A (ko) * 2015-05-26 2016-12-07 삼성전자주식회사 전자 장치 및 전자 장치에서의 상황 기반의 정보 처리 방법
KR20160149603A (ko) * 2015-06-18 2016-12-28 삼성전자주식회사 전자 장치 및 전자 장치에서의 노티피케이션 처리 방법
US9760766B2 (en) 2015-06-30 2017-09-12 International Business Machines Corporation System and method for interpreting interpersonal communication
CN105224932A (zh) * 2015-10-21 2016-01-06 北京旷视科技有限公司 一种人脸识别方法和系统
EP3284249A2 (en) * 2015-10-30 2018-02-21 2MEE Ltd Communication system and method
CN105872685A (zh) * 2016-03-24 2016-08-17 深圳市国华识别科技开发有限公司 智能终端控制方法和系统、智能终端
CN105847734A (zh) * 2016-03-30 2016-08-10 宁波三博电子科技有限公司 一种基于人脸识别的视频通信方法及系统
CN105912912B (zh) * 2016-05-11 2018-12-18 青岛海信电器股份有限公司 一种终端用户身份登录方法和系统
CN106228146A (zh) * 2016-08-05 2016-12-14 蓝普金睛（北京）科技有限公司 一种分区域动态识别方法及系统
CN106934364A (zh) * 2017-03-09 2017-07-07 腾讯科技（上海）有限公司 人脸图片的识别方法及装置
CN107194817B (zh) * 2017-03-29 2023-06-23 腾讯科技（深圳）有限公司 用户社交信息的展示方法、装置和计算机设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010146563A (ja) * 2008-12-19 2010-07-01 Intel Corp 位置支援翻訳のための方法、装置及びシステム
KR20100094021A (ko) * 2009-02-18 2010-08-26 김기미 이동통신 단말기와 아이피 기반 정보 단말기를 이용한 맞춤, 지능형 심볼, 아이콘 인터넷 정보 검색시스템
KR20130020065A (ko) * 2011-08-18 2013-02-27 엘지전자 주식회사 휴대 전자기기 및 이의 제어방법
KR20130083049A (ko) * 2011-12-28 2013-07-22 (주)에스제이기획 전자방명록 장치
KR20150141419A (ko) * 2014-06-10 2015-12-18 삼성전자주식회사 전자 장치에서 이미지의 위치 정보에 기반한 이미지 활용 방법 및 그 장치

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3731114A4 *

Also Published As

Publication number Publication date
EP3731114A1 (en) 2020-10-28
KR102543656B1 (ko) 2023-06-15
KR20190108977A (ko) 2019-09-25
CN111886595A (zh) 2020-11-03
US11630574B2 (en) 2023-04-18
CN111886595B (zh) 2024-05-28
EP3731114A4 (en) 2021-03-17
US20200356268A1 (en) 2020-11-12

Similar Documents

Publication Publication Date Title
WO2019088793A1 (ko) 전자 장치 및 이를 이용한 화면 공유 방법
WO2020022780A1 (en) Method and apparatus for establishing device connection
WO2019117566A1 (ko) 전자 장치 및 그의 입력 제어 방법
WO2020067639A1 (en) Electronic device for pairing with stylus pen and method thereof
WO2020166894A1 (en) Electronic device and method for recommending word in same
EP3808097A1 (en) Method and apparatus for establishing device connection
WO2021086012A1 (en) Method for transmitting data based on multiple communication schemes and electronic device supporting same
WO2019112373A1 (en) Method for providing artificial intelligence service during phone call and electronic device thereof
WO2019177373A1 (en) Electronic device for controlling predefined function based on response time of external electronic device on user input, and method thereof
WO2020122502A1 (en) Electronic device for supporting audio enhancement and method for the same
WO2019156411A1 (en) Electronic device for connecting with external devices based on connection information and operating method thereof
WO2019177437A1 (ko) 화면 제어 방법 및 이를 지원하는 전자 장치
WO2019107975A1 (en) Electronic device shooting image and method for displaying the image
WO2019164204A1 (ko) 전자 장치 및 그의 동작 방법
WO2021230568A1 (ko) 증강 현실 서비스를 제공하기 위한 전자 장치 및 그의 동작 방법
AU2018321518B2 (en) Method for determining input detection region corresponding to user interface and electronic device thereof
WO2021149938A1 (en) Electronic device and method for controlling robot
WO2021071222A1 (ko) 복수의 외부 전자 장치들로 오디오 데이터를 전송하는 전자 장치 및 그 제어 방법
WO2019066323A1 (ko) 전자 장치 및 그의 시선 정보를 이용한 컨텐트 실행 방법
WO2020204663A1 (en) Electronic device for displaying message and operating method thereof
WO2020180008A1 (en) Method for processing plans having multiple end points and electronic device applying the same method
WO2020138909A1 (ko) 콘텐트 공유 방법 및 그 전자 장치
WO2020106091A1 (en) Electronic device changing identification information based on state information and another electronic device identifying identification information
WO2020130729A1 (ko) 이벤트에 관련된 정보를 제공하는 폴더블 전자 장치 및 그의 동작 방법
WO2019164196A1 (ko) 문자를 인식하기 위한 전자 장치 및 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19767629

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019767629

Country of ref document: EP

Effective date: 20200720

WWE Wipo information: entry into national phase

Ref document number: KR2019003085

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE