KR20200021648A - User terminal for providing chatting service - Google Patents
User terminal for providing chatting service Download PDFInfo
- Publication number
- KR20200021648A KR20200021648A KR1020180097211A KR20180097211A KR20200021648A KR 20200021648 A KR20200021648 A KR 20200021648A KR 1020180097211 A KR1020180097211 A KR 1020180097211A KR 20180097211 A KR20180097211 A KR 20180097211A KR 20200021648 A KR20200021648 A KR 20200021648A
- Authority
- KR
- South Korea
- Prior art keywords
- expression
- expression image
- user
- information
- service
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
-
- H04M1/72522—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72469—User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons
-
- H04M1/72583—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
- H04M2201/34—Microprocessors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
- H04M2201/36—Memories
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
- H04M2201/38—Displays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2250/00—Details of telephonic subscriber devices
- H04M2250/06—Details of telephonic subscriber devices including a wireless LAN interface
Landscapes
- Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
- Information Transfer Between Computers (AREA)
Abstract
Description
본 발명은 채팅 서비스를 제공하기 위한 사용자 단말기에 관한 것이다.The present invention relates to a user terminal for providing a chat service.
의사표현 이미지 아이템은 채팅 서비스에서 서비스 사용자들의 감정을 나타내기 위해 사용하는 기호로써, 감정(Emotion)과 아이콘(Icon)을 합성한 용어이다. The expression image item is a symbol used to express emotions of service users in a chat service, and is a term in which emotions and icons are synthesized.
이러한 의사표현 이미지 아이템은 인간의 감정표현을 더 풍부하게 하는데 도움을 주는 커뮤니케이션의 보조적 역할을 하는 요소이며, 상대방에게 말을 하지 않아도 인간의 감정을 드러내는 복합적인 신호를 통해 감정이 전달되기 때문에 누구와도 쉽게 소통할 수 있다.These expressive image items serve as a supplementary element of communication to help enrich human emotions, and because the emotions are transmitted through a complex signal that reveals human emotions without speaking to the other party, You can also communicate easily.
초창기의 의사표현 이미지 아이템은 키보드에 있는 기호와 문자의 단순 조합으로 만들어지거나 고정된 아이콘 형태로 만들어졌지만, 최근에는 다양한 형태의 캐릭터가 움직이는 반응형 의사표현 이미지 아이템을 사용하여 사용자의 감정을 나타내는 형태로 발전하였다.Early expressional image items were made of simple combinations of symbols and characters on the keyboard or in the form of fixed icons, but recently, various types of characters used to express the emotions of the user using responsive pseudo-expression image items. Developed into.
이러한 의사표현 이미지 아이템에 대한 서비스 사용자들의 수요가 증가하면서, 채팅 서비스에서 다양한 종류의 의사표현 이미지 아이템을 서비스 사용자들에게 제공하는 것이 일반화되었다.As the demands of the service users for such expressive image items increase, it has become common to provide various types of expressive image items to the service users in the chat service.
여기서, 종래의 채팅 서비스에서 서비스 사용자가 채팅 상대에게 감정 표현을 위한 의사표현 이미지 아이템을 전달하기 위해서는 우선, 서비스 사용자가 자신의 감정을 표현하기 위한 채팅 메시지를 도 15와 같은 채팅창의 메시지 표시창에 입력한 후 또는 입력 전에 의사표현 이미지 아이템 입력 아이콘을 선택한다.Here, in the conventional chat service, in order for a service user to deliver a pseudo-expression image item for expressing an emotion to a chat partner, the service user first inputs a chat message for expressing his or her feelings into the message display window of the chat window as shown in FIG. Select the Enter Pseudo Image Item icon after or before input.
그러면, 도 16과 같이 채팅 서비스에서 제공하는 다양한 종류의 의사표현 이미지 아이템에 해당하는 의사표현 이미지 아이템 목록이 채팅창의 일부분에 표시되고, 서비스 사용자는 의사표현 이미지 아이템 목록에서 자신의 감정을 표현하기 위한 특정 의사표현 이미지 아이템을 선택할 수 있다.Then, as shown in FIG. 16, a list of the expression image items corresponding to various kinds of expression image items provided by the chat service is displayed on a part of the chat window, and the service user expresses his or her feelings in the expression image item list. You can select specific expressive image items.
이를 통해 특정 의사표현 이미지 아이템에 해당하는 특정 의사표현 이미지 아이템이 도 17과 같이 채팅창에 표시되어 채팅 상대에게 전달될 수 있다.Through this, a specific expression image item corresponding to the specific expression image item may be displayed on the chat window as shown in FIG. 17 and transmitted to the chat partner.
여기서, 종래의 채팅 서비스에서 제공하는 의사표현 이미지 아이템 목록은 도 15와 같이 여러 종류의 표정 또는 동작을 표현한 다수의 의사표현 이미지 아이템이 불규칙적으로 나열되어 있기 때문에 서비스 사용자가 의사표현 이미지 아이템 목록에서 자신의 감정을 표현하기 위한 특정 의사표현 이미지 아이템을 찾기 위해 많은 시간과 노력을 할애해야 하는 문제점이 있었다.Here, since the pseudo-expression image item list provided by the conventional chat service is irregularly listed with a plurality of pseudo-expression image items expressing various types of expressions or actions as shown in FIG. There was a problem in that a lot of time and effort should be devoted to finding a specific expressive image item for expressing the feelings of the child.
또한, 의사표현 이미지 아이템 중에서도 사용자별로 감정 표현에 따라 선호하는 의사표현 이미지 아이템이 제각기 다름에도 불구하고 항상 동일하게 배치된 의사표현 이미지 아이템 목록을 사용하였기 때문에 사용자가 선호하는 의사표현 이미지 아이템을 효율적으로 사용하지 못하였다.In addition, despite the different expressions of the pseudo-expression image items which are preferred according to the emotional expressions among the expression-expression image items, the same expression expression item items that the user prefers are efficiently used because the list of the pseudo-expression image items is always arranged identically. It was not used.
뿐만 아니라, 종래의 채팅 서비스는 텍스트 기반 데이터를 송신하는 사용자의 다양한 감정을 실시간으로 표현하기 어렵고, 의미 단위의 텍스트 입력이 완료된 이후에나 사용자가 의사표현 이미지 아이템을 부가적으로 선택하여 송신함으로써 감정 표현을 하는 데 불편함이 있었다.In addition, the conventional chat service is difficult to express various emotions of the user who transmits the text-based data in real time, and after the text input in the semantic unit is completed or the user additionally selects and transmits the pseudo-expression image item to express the emotion. There was an inconvenience in doing this.
이러한 배경에서, 본 발명의 목적은, 채팅 서비스를 사용하는 서비스 사용자가 채팅을 위해 작성한 사용자 작성 텍스트에 특정 감정에 해당하는 어구가 포함되어 있으면, 의사표현 이미지 아이템 입력 아이콘에 표시된 아이콘 캐릭터의 표정을 특정 감정에 해당하는 표정으로 변경하고, 기저장한 다수의 의사표현 이미지 아이템 중에서 특정 감정에 해당하는 하나 이상의 의사표현 이미지 아이템을 선별한 후에 하나 이상의 의사표현 이미지 아이템만을 포함한 의사표현 이미지 아이템 목록을 생성하는 채팅 서비스를 제공하기 위한 사용자 단말기를 제공하는 데 그 목적이 있다.Against this background, it is an object of the present invention to provide an expression of an icon character displayed on a pseudo-expression image item input icon when a user-written text written for chatting by a service user using a chat service includes a phrase corresponding to a specific emotion. Changes to the expression corresponding to a specific emotion, selects one or more pseudo-expression image items corresponding to a specific emotion from among a plurality of pre-stored pseudo-expression image items, and then generates a list of the pseudo-expression image items including only one or more expression items Its purpose is to provide a user terminal for providing a chat service.
또한, 본 발명의 다른 목적은, 채팅 서비스를 사용하는 서비스 사용자가 의사표현 이미지 아이템 또는 의사표현 이미지 아이템 목록을 스코어링하여 상기 서비스 사용자가 선호하는 의사표현 이미지 아이템 순으로 재배치된 의사표현 이미지 아이템 또는 의사표현 이미지 아이템 목록을 통해 다양한 감정을 효율적으로 표현할 수 있도록 하는 채팅 서비스를 제공하기 위한 사용자 단말기를 제공하는 데 그 목적이 있다.Another object of the present invention is to provide a pseudo-expression image item or a pseudo-rearranged order of pseudo-expression image items or pseudo-expression image items by a service user using a chat service in order of the pseudo-expression image items preferred by the service user. An object of the present invention is to provide a user terminal for providing a chat service that can efficiently express various emotions through a list of expression image items.
또한, 본 발명의 또 다른 목적은, 채팅 서비스를 사용하는 사용자로부터 텍스트가 입력되는 도중에 사용자의 감정상태를 적절히 표현할 수 있는 실시간 의사표현 이미지 아이템을 제공하는 채팅 서비스를 제공하기 위한 사용자 단말기를 제공하는 데 그 목적이 있다.In addition, another object of the present invention is to provide a user terminal for providing a chat service that provides a real-time expression image item that can properly express the emotional state of the user while text is input from the user using the chat service. Its purpose is to.
전술한 목적을 달성하기 위하여, 일 측면에서, 본 발명은, 서비스 사용자로부터 사용자 작성 텍스트를 입력받는 정보 입력부와 채팅 서비스 제공 서버의 중계를 통한 하나 이상의 채팅 상대 단말기와의 채팅 진행시, 상기 하나 이상의 채팅 상대 단말기와의 채팅을 위한 채팅창을 표시하는 디스플레이부와 다수의 의사표현 이미지 아이템을 저장하고, 상기 다수의 의사표현 이미지 아이템을 포함하는 다수의 의사표현 이미지 아이템 목록을 저장하며, 상기 다수의 의사표현 이미지 아이템에 대한 서비스 사용자의 의사표현 이미지 아이템 사용 빈도 정보와 서비스 사용자의 스코어링 정보 및 리스코어링 정보를 저장하고, 다수의 의사표현 이미지 아이템에 포함된 아이콘 캐릭터의 표정이 다수의 감정 종류별로 표현된 다수의 감정 표현 아이콘을 저장하는 메모리부와 상기 메모리부에 저장되는 하나 이상의 의사 표현 이미지 아이템을 요소 정보에 따라 분류 관리하는 이미지 아이템 관리부 및 상기 이미지 아이템 관리부의 분류 관리 정보에 기초한 머신 러닝을 처리하여 맞춤형 이미지 아이템 학습 모델을 생성하고, 상기 학습 모델을 이용하여 산출된 맞춤형 설정 정보를 획득하며, 상기 맞춤형 설정 정보에 기초한 추천 설정 정보를 생성하여 서비스 사용자에게 맞춤형 서비스를 제공하는 맞춤형 이미지 아이템 제공부를 포함하는 채팅 서비스를 제공하기 위한 사용자 단말기를 제공한다.In order to achieve the above object, in one aspect, the present invention, when the chat proceeds between the information input unit receiving the user-written text from the service user and one or more chat partner terminal through the relay of the chat service providing server, A display unit for displaying a chat window for chatting with a counterpart terminal and a plurality of pseudo-expression image items, a list of a plurality of pseudo-expression image items including the plurality of pseudo-expression image items, Stores the service user's frequency of use of the user's expression image item for the expression of the expression expression item, the scoring information and the rescoring information of the service user, and expresses the expression of the icon character included in the plurality of expression expression items for each emotion type. Multiple emotion expression icons An image item manager for classifying and managing one or more pseudo-expression image items stored in the memory unit according to element information and machine learning based on classification management information of the image item manager to generate a customized image item learning model; A user for providing a chat service including a customized image item providing unit for obtaining customized setting information calculated using the learning model and generating recommended setting information based on the customized setting information to provide a customized service to a service user. Provide a terminal.
이상에서 설명한 바와 같이 본 발명에 의하면, 서비스 사용자가 작성한 사용자 작성 텍스트에 특정 감정을 표현한 어구가 포함되어 있으면, 사용자 단말기가 채팅창의 일부분에 표시한 의사표현 이미지 아이템 입력 아이콘의 아이콘 캐릭터의 표정을 특정 감정에 해당하는 표정으로 변경하여 표시하기 때문에 채팅 서비스에 대한 서비스 사용자의 흥미를 유발할 수 있게 된다.As described above, according to the present invention, if the user-written text created by the service user includes a phrase expressing a specific emotion, the expression of the icon character of the pseudo-expression image item input icon displayed on a part of the chat window by the user terminal is specified. Since the display is changed to an expression corresponding to the emotion, the service user may be interested in the chat service.
또한, 사용자 작성 텍스트에 특정 감정을 표현한 어구가 포함되어 있으면, 기저장한 다수의 의사표현 이미지 아이템 중에서 특정 감정에 해당하는 N 개의 의사표현 이미지 아이템을 선별하고, N 개의 의사표현 이미지 아이템만을 포함한 의사표현 이미지 아이템 목록을 생성하여 화면 상에 표시할 수 있기 때문에 채팅 서비스를 이용중인 서비스 사용자가 특정 감정에 대한 의사표현 이미지 아이템을 간편하게 선택할 수 있게 된다.In addition, if the user-written text includes a phrase expressing a specific emotion, the N pseudo-expression image items corresponding to the specific emotion are selected from among a plurality of pre-stored pseudo-expression image items, and the pseudo-includes only N pseudo-expression image items. Since a list of expression image items can be generated and displayed on the screen, a service user using a chat service can easily select the expression image items for a specific emotion.
또한, 서비스 사용자가 의사표현 이미지 아이템 또는 의사표현 이미지 아이템 목록에 대하여 스코어링함으로써 사용자 단말기로부터 서비스 사용자가 선호하는 특정 감정 의사표현 이미지 아이템을 포함하는 특정 감정 의사표현 이미지 아이템 목록을 추천받아 채팅 서비스에 대한 효율성을 높일 수 있게 된다.In addition, the service user scores a pseudo-expression image item or a list of the expression-expression image item to receive a recommendation of a specific emotion expression image item including a specific emotion expression image item that the service user prefers from the user terminal. The efficiency can be increased.
도 1은 본 발명의 실시예에 따른 채팅 서비스 제공 시스템의 구성을 간략하게 나타낸 도면,
도 2는 본 발명의 실시예에 따른 채팅 서비스 제공 서버의 구성을 간략하게 나타낸 블록 구성도,
도 3은 본 발명의 실시예에 따른 맞춤형 이미지 아이템 제공부를 보다 구체적으로 나타낸 도면,
도 4는 본 발명의 실시예에 따른 다수의 감정 표현 아이콘을 예시적으로 나타낸 도면,
도 6 내지 도 13은 본 발명의 실시예에 따른 사용자 단말기에서 채팅 서비스를 제공하는 과정을 예시적으로 나타낸 도면,
도 14는 본 발명의 실시예에 따른 사용자 단말기에서 채팅 서비스를 제공하는 과정을 나타낸 순서도,
도 15 내지 도 17는 종래의 채팅 서비스의 제공 과정을 예시적으로 나타낸 도면이다.1 is a view briefly showing the configuration of a chat service providing system according to an embodiment of the present invention;
2 is a block diagram schematically showing the configuration of a chat service providing server according to an embodiment of the present invention;
3 is a view showing in more detail the customized image item providing unit according to an embodiment of the present invention;
4 is a diagram illustrating a plurality of emotional expression icons according to an embodiment of the present invention;
6 to 13 are views illustrating a process of providing a chat service in a user terminal according to an embodiment of the present invention.
14 is a flowchart illustrating a process of providing a chat service in a user terminal according to an embodiment of the present invention;
15 to 17 is a diagram illustrating a conventional process of providing a chat service.
이하의 내용은 단지 본 발명의 원리를 예시한다. 그러므로 당업자는 비록 본 명세서에 명확히 설명되거나 도시되지 않았지만 본 발명의 원리를 구현하고 본 발명의 개념과 범위에 포함된 다양한 장치를 발명할 수 있는 것이다. 또한, 본 명세서에 열거된 모든 조건부 용어 및 실시예들은 원칙적으로, 본 발명의 개념이 이해되도록 하기 위한 목적으로만 명백히 의도되고, 이와 같이 특별히 열거된 실시예들 및 상태들에 제한적이지 않는 것으로 이해되어야 한다.The following merely illustrates the principles of the invention. Therefore, those skilled in the art, although not explicitly described or illustrated herein, may embody the principles of the present invention and invent various devices that fall within the spirit and scope of the present invention. In addition, all conditional terms and embodiments listed herein are in principle clearly intended for the purpose of understanding the concept of the invention and are not to be limited to the specifically listed embodiments and states. Should be.
또한, 본 발명의 원리, 관점 및 실시예들 뿐만 아니라 특정 실시예를 열거하는 모든 상세한 설명은 이러한 사항의 구조적 및 기능적 균등물을 포함하도록 의도되는 것으로 이해되어야 한다. 또한 이러한 균등물들은 현재 공지된 균등물뿐만 아니라 장래에 개발될 균등물 즉 구조와 무관하게 동일한 기능을 수행하도록 발명된 모든 소자를 포함하는 것으로 이해되어야 한다.In addition, it is to be understood that all detailed descriptions, including the principles, aspects, and embodiments of the present invention, as well as listing specific embodiments, are intended to include structural and functional equivalents of these matters. In addition, these equivalents should be understood to include not only equivalents now known, but also equivalents to be developed in the future, that is, all devices invented to perform the same function regardless of structure.
따라서, 예를 들어, 본 명세서의 블록도는 본 발명의 원리를 구체화하는 예시적인 회로의 개념적인 관점을 나타내는 것으로 이해되어야 한다. 이와 유사하게, 모든 흐름도, 상태 변환도, 의사 코드 등은 컴퓨터가 판독 가능한 매체에 실질적으로 나타낼 수 있고 컴퓨터 또는 프로세서가 명백히 도시되었는지 여부를 불문하고 컴퓨터 또는 프로세서에 의해 수행되는 다양한 프로세스를 나타내는 것으로 이해되어야 한다.Thus, for example, the block diagrams herein should be understood to represent a conceptual aspect of exemplary circuitry embodying the principles of the invention. Similarly, all flowcharts, state transitions, pseudocodes, etc., are understood to represent various processes performed by the computer or processor, whether the computer may be substantially represented on a readable medium and whether the computer or processor is clearly shown. Should be.
또한 프로세서, 제어 또는 이와 유사한 개념으로 제시되는 용어의 명확한 사용은 소프트웨어를 실행할 능력을 가진 하드웨어를 배타적으로 인용하여 해석되어서는 아니되고, 제한 없이 디지털 신호 프로세서(DSP) 하드웨어, 소프트웨어를 저장하기 위한 롬(ROM), 램(RAM) 및 비 휘발성 메모리를 암시적으로 포함하는 것으로 이해되어야 한다. 주지관용의 다른 하드웨어도 포함될 수 있다.In addition, the explicit use of terms presented in terms of processor, control, or similar concept should not be interpreted exclusively as a citation of hardware capable of executing software, and without limitation, ROM for storing digital signal processor (DSP) hardware, software. (ROM), RAM, and non-volatile memory are to be understood to implicitly include. Other hardware for the governor may also be included.
또한, 본 발명에서 사용되는 ‘단말’이라는 용어는 본 발명을 설명하기 위해 사용된 용어로써, 상기 ‘단말’은 ‘장치’나 ‘서버’로 대체 가능하며, 동일한 의미와 기능을 가진다.In addition, the term 'terminal' used in the present invention is a term used to describe the present invention, and the term 'terminal' may be replaced with 'device' or 'server', and has the same meaning and function.
상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. The above objects, features and advantages will become more apparent from the following detailed description taken in conjunction with the accompanying drawings, whereby those skilled in the art may easily implement the technical idea of the present invention. There will be. In addition, in describing the present invention, when it is determined that the detailed description of the known technology related to the present invention may unnecessarily obscure the gist of the present invention, the detailed description thereof will be omitted.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실시예를 상세히 설명하기로 한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.
도 1은 본 발명의 실시예에 따른 채팅 서비스 제공 시스템의 구성을 간략하게 나타낸 도면이다.1 is a diagram briefly illustrating a configuration of a chat service providing system according to an exemplary embodiment of the present invention.
본 발명의 실시예에 따른 채팅 서비스 제공 시스템(100)은 서비스 사용자 단말기(110), 인터넷 통신망(120) 및 채팅 서비스 제공 서버(130)를 포함한다.The chat
사용자 단말기(110)는 본 발명의 실시예에 따른 채팅 서비스를 이용하기 위한 채팅 애플리케이션이 설치된 단말기로써, 채팅 애플리케이션의 실행을 통해 채팅 서비스 제공 서버(130)에 접속하고, 채팅 서비스 제공 서버(130)를 통해 생성한 채팅창(400)을 통해 하나 이상의 채팅 상대 단말기(미도시)와 채팅 서비스를 이용, 즉 하나 이상의 채팅 상대와 채팅 메시지 및 의사표현 이미지 아이템 등을 주고받을 수 있다.The
이때, 의사표현 이미지 아이템은, 사용자의 감정, 기분, 상태 및 기타 표현하고자 하는 의사를 나타내는 이미지를 포함할 수 있으며, 상기 이미지는 예를 들어, 특정 의사 표현 정보에 매칭되는 그림 문자 이모지 포맷, 문자 이모티콘 포맷 또는 별도 지정된 그림 파일 포맷, 움직임을 허용하는 파일 포맷의 데이터로 구성될 수 있다. 또한, 의사 표현 정보는 감정, 기분, 상태 또는 기타 의사를 키워드, 부가 설명 등을 나타내는 텍스트 및 관련 데이터를 포함할 수 있으며, 하나의 이미지에는 하나 이상의 키워드, 부가설명이 매칭될 수 있다.In this case, the pseudo-expression image item may include an image representing the user's emotions, moods, states, and other intentions to express, and the image may include, for example, a emoji format that matches specific expression information. Character emoticon format, or a separate designated picture file format, may be composed of data of the file format to allow movement. In addition, the expression information may include a text indicating the emotion, mood, state or other intention, keywords, additional descriptions, and the like, and one or more keywords and additional descriptions may be matched to one image.
본 발명의 실시예에서 사용자 단말기(110)는 다수의 의사표현 이미지 아이템을 저장하고, 다수의 의사표현 이미지 아이템을 포함하는 다수의 의사표현 이미지 아이템 목록을 저장한다.In an embodiment of the present invention, the
그리고, 사용자 단말기(110)는 다수의 의사표현 이미지 아이템을 도 4와 같이 아이콘 캐릭터의 표정이 다수의 감정 종류별로 표현된 다수의 감정 표현 아이콘으로 저장할 수 있다. 여기서, 다수의 감정 종류는 분노, 슬픔, 두려움, 즐거움, 우울함 등일 수 있다.In addition, the
이를 통해 사용자 단말기(110)는 본 발명의 실시예에 따른 채팅 서비스를 아래와 같이 제공할 수 있다.Through this, the
우선, 사용자 단말기(110)가 채팅창(400)을 통해 하나 이상의 채팅 상대 단말기(미도시)와 채팅을 진행중인 상태에서 채팅창(400)의 메시지 입력창(410)이 도 5와 같이 공란인 경우, 사용자 단말기(110)는 채팅창(400)의 일부분에 위치한 의사표현 이미지 아이템 입력 아이콘에 표시된 아이콘 캐릭터의 표정을 기본 표정으로 설정한다.First, when the
여기서, 사용자 단말기(110)는 기저장한 다수의 감정 표현 아이콘 중에서 아이콘 캐릭터의 표정이 기본 표정(예를 들어, 무표정한 표정)으로 표현된 의사표현 이미지 아이템 입력 아이콘인 기본 아이콘을 추출하고, 이를 채팅창(400)의 일부분에 표시할 수 있다.Here, the
이후, 사용자 단말기(110)는 사용자 단말기(110)에 구비된 키패드 또는 터치 스크린 등을 통해 서비스 사용자로부터 사용자 작성 텍스트를 입력받을 수 있고, 이러한 사용자 작성 텍스트를 채팅창(400)의 메시지 입력창(410)에 표시할 수 있다.Thereafter, the
이때에, 사용자 단말기(110)는 형태소 분석, 키워드 인식, 화행 분석, 시멘틱 분석 등과 같은 다수의 자연어 이해 기술 중 하나 이상을 통해 사용자 작성 텍스트를 분석하여 특정 감정을 표현한 어구인 특정 감정 표현 어구가 사용자 작성 텍스트에 포함되어 있는 지를 확인할 수 있다. 여기서, 사용자 작성 텍스트는 서비스 사용자가 사용자 단말기(110)의 키패드 또는 터치 스크린 등을 통해 작성한 텍스트를 의미한다.In this case, the
사용자 작성 텍스트를 분석한 결과, 사용자 작성 텍스트에 특정 감정 표현 어구가 포함되어 있으면, 사용자 단말기(110)는 의사표현 이미지 아이템 입력 아이콘에 표시된 아이콘 캐릭터의 표정을 기본 표정에서 특정 감정에 해당하는 특정 표정으로 변경할 수 있다. As a result of analyzing the user-written text, if the user-created text includes a specific emotional expression phrase, the
여기서, 사용자 단말기(110)는 기저장한 다수의 감정 표현 아이콘 중에서 아이콘 캐릭터의 표정이 특정 표정으로 표현된 의사표현 이미지 아이템 입력 아이콘인 특정 감정 표현 아이콘을 추출하고, 채팅창(400)의 일부분에 표시하고 있던 기본 아이콘(430)을 특정 감정 표현 아이콘(510, 710)으로 대체하여 표시할 수 있다.Here, the
이때, 기본 아이콘(430)에서 특정 감정 표현 아이콘(510, 710)으로 변경된 아이콘은 고정형 아이콘이 아닌 사용자의 감정 표현을 보다 더 생동감 있게 나타내주는 애니메이트(Animate)형 아이콘이거나 흔들기 기능, 회전 기능, 크게/작게 기능, 날아오기 기능, 올라오기 기능, 펄스 기능과 같은 기능으로 표시되는 효과형 아이콘일 수 있으며, 상기 애니메이트형 아이콘 및 효과형 아이콘은 시스템 관리자가 설정한 시간 값에 따라 애니메이트 또는 효과를 주는 형태가 반복될 수 있다. 상기 애니메이트형 아이콘 및 효과형 아이콘을 통해 서비스 사용자는 대표 추천 아이콘을 쉽게 파악할 수 있는 효과를 보유한다. 이는 후술되는 특정 감정 표현 아이콘(510, 710)에서도 모두 적용될 수 있음은 물론이다.In this case, the icon changed from the
한편, 사용자 작성 텍스트에 특정 감정 표현 어구가 미포함되어 있으면, 사용자 단말기(110)는 의사표현 이미지 아이템 입력 아이콘에 표시된 아이콘 캐릭터의 표정을 기본 표정으로 표시, 즉 기본 아이콘(430)을 지속적으로 표시할 수 있으며, 상기 기본 아이콘(430)은 애니메이트형 또는 효과형 아이콘이 아닌 고정형 아이콘일 수 있다.On the other hand, if the user-written text does not include a specific emotional expression phrase, the
위와 같이 의사표현 이미지 아이템 입력 아이콘에 표시된 아이콘 캐릭터의 표정을 기본 표정에서 특정 표정으로 변경한 후에 서비스 사용자에 의해 보내기 버튼(미도시)이 선택되면, 사용자 단말기(410)는 사용자 작성 텍스트를 채팅 서비스 제공 서버(130)로 전송함과 아울러 메시지 입력창(410)에 표시되어 있던 사용자 작성 텍스트를 삭제하고, 메시지 표시창(420)에 사용자 작성 텍스트를 표시할 수 있다.After changing the expression of the icon character displayed on the pseudo-expression image item input icon from the default expression to the specific expression as described above, if the send button (not shown) is selected by the service user, the
한편, 사용자 작성 텍스트가 메시지 입력창(410)에 표시된 상태에서 서비스 사용자에 의해 의사표현 이미지 아이템 입력 아이콘이 선택되면, 사용자 단말기(110)는 기저장한 다수의 의사표현 이미지 아이템 중에서 특정 감정에 해당하는 N 개 이상의 의사표현 이미지 아이템만을 1차 선별하고, N 개 이상의 의사표현 이미지 아이템에 해당하는 N 개 이상의 의사표현 이미지 아이템에 대한 서비스 사용자의 의사표현 이미지 아이템 사용 빈도 정보를 확인하여 의사표현 이미지 아이템 사용 빈도가 높은 N 개까지의 의사표현 이미지 아이템에 해당하는 N 개의 의사표현 이미지 아이템을 2차 선별한 후에 N 개의 의사표현 이미지 아이템만을 포함한 특정 감정 의사표현 이미지 아이템 목록을 생성하되, 상기 N 개의 의사표현 이미지 아이템만을 포함한 특정 감정 의사표현 이미지 아이템 목록은 다수 개 생성될 수 있다. 사용자 단말기(110)는 도 7 또는 도 9 과 같이 특정 감정 의사표현 이미지 아이템 목록을 채팅창(400)의 일부분에 표시할 수 있다.On the other hand, if a user expression text item input icon is selected by the service user while the user-written text is displayed on the
이때, 상술한 2차 선별 과정 후에 생성된 특정 감정 의사표현 이미지 아이템 목록은 후술되는 서비스 사용자의 스코어링(scoring) 즉, 사용자별 의사표현 이미지 아이템의 이용 횟수 정보 및 피드백 정보 등에 따라 의사표현 이미지 아이템의 배치가 재배열될 수 있으며, 서비스 사용자에게 의사표현 이미지 아이템 목록을 추천해줄 수도 있다. 상기 스코어링은 사용자 단말기(110)에 미리 구축된 머신 러닝 (Machine Learning)및 인공 신경망 모델(Deep Artificial Neural Network Model)을 통해 학습될 수 있으며, 상기 사용자 단말기(110)는 머신 러닝 및 인공 신경망 모델을 통해 학습된 데이터를 기반으로 서비스 사용자에게 맞춤형 의사표현 이미지 아이템 및 아이템 목록을 추천해주는 기능을 수행한다. 이하에서는 스코어링(scoring)을 통해 서비스 사용자가 맞춤형 의사표현 이미지 아이템을 추천받는 과정을 설명한다. In this case, the specific emotional expression image item list generated after the above-described second screening process may be used to determine the expression of the pseudo expression image item according to the scoring of the service user described later, that is, the number of times of use of the user expression expression item and feedback information. Arrangements can be rearranged and can recommend a list of pseudo-expression image items to service users. The scoring may be learned through machine learning and deep artificial neural network models, which are pre-built in the
우선, 서비스 사용자가 상술한 2차 선별 과정 후에 제공되는 사용 빈도가 높은 N 개의 의사표현 이미지 아이템만을 포함한 N 개의 특정 감정 의사표현 이미지 아이템 목록에서 어느 하나의 의사표현 이미지 아이템을 롱 프레스(long press) 클릭방식, 더블클릭(double click) 클릭방식 등의 이벤트성 기능이 포함된 클릭방식을 통해 클릭한다. 이후, 도 10과 같이 의사표현 이미지 아이템 근방(상방 또는 하방)에 숫자 아이콘이 생성되며, 서비스 사용자가 우선순위로 두고 싶은 의사표현 이미지 아이템을 숏 프레스(short press) 클릭방식, 더블클릭(double click) 클릭방식 등의 이벤트성 기능이 포함된 클릭방식을 통해 클릭한다. 예를 들어, 상기 숏 프레스 방식을 통해 차례대로 클릭된 의사표현 이미지 아이템은 클릭된 순서대로 배열이 재배치되며 상기 의사표현 이미지 아이템 근방에 생성된 숫자 아이콘 또한 클릭된 순서대로 오름차순으로 재배치 된다. 상술한 과정을 거친 뒤, 서비스 사용자가 채팅창(400)의 일부분에 표시된 목록창을 닫을 경우 서비스 사용자만의 의사표현 이미지 아이템 스코어링 정보가 저장될 수 있으며, 이를 리스코어링(rescoring) 하고 싶은 경우, 상술한 과정을 반복한 뒤 스코어를 재저장함으로써 의사표현 이미지 아이템 스코어를 리스코어링할 수 있고, 이후 사용자 단말기(110)에 리스코어링 정보가 저장될 수 있다. 상술한 과정을 거쳐 저장된 의사표현 이미지 아이템 스코어링 정보는 도 11과 같이 의사표현 이미지 아이템이 서비스 사용자가 저장한 스코어링 또는 리스코어링 정보에 따라 재배치된 상태로 표시될 수 있다. First, a long press of a pseudo-expression image item from a list of N specific emotional expression image items including only the frequently used N expression image items provided by the service user after the above-described second screening process is performed. Click through a click method that includes event features such as click method, double click click method. Thereafter, as shown in FIG. 10, a numeric icon is generated near (upward or downward) the pseudo-expression image item, and a short press click method and a double click on the pseudo-expression image item which the service user wants to prioritize. Click through a click method that includes event features such as click method. For example, the pseudo-expression image items that are sequentially clicked through the short press method are rearranged in the order in which they are clicked, and the numeric icons generated near the pseudo-expression image items are also rearranged in the ascending order. After the above-described process, when the service user closes the list window displayed on a part of the
본 발명에서 클릭방식은 발명을 용이하게 설명하기 위하여 롱 프레스 클릭방식 및 숏 프레스 클릭방식으로만 예를 기재하였으나, 상술한 롱 프레스 클릭방식 및 숏 프레스 클릭방식에 한정하지 않고, 사용자가 이벤트성 기능이 포함된 클릭방식을 통해 아이콘 또는 버튼 등을 선택할 수 있는 방식이라면 어떠한 클릭방식도 사용될 수 있음은 물론이다. 이는 후술되는 클릭방식의 예시에서도 동일하게 적용된다.In the present invention, the click method is described only as a long press click method and a short press click method in order to easily explain the invention. However, the click method is not limited to the long press click method and the short press click method. Of course, any click method can be used as long as the method can select an icon or a button through the included click method. The same applies to the example of the click method described below.
다음으로, 서비스 사용자는 2차 선별 과정 후에 제공되는 사용 빈도가 높은 N 개의 의사표현 이미지 아이템만을 포함한 N 개의 특정 감정 의사표현 이미지 아이템 목록 또는 상기 스코어링을 통해 의사표현 이미지 아이템이 재배치된 상태의 특정 감정 의사표현 이미지 아이템 목록을 스코어링하여 사용자 단말기(110)로부터 맞춤형 의사표현 이미지 아이템을 추천받을 수도 있다. 우선, 서비스 사용자가 상술한 스코어링에 따라 재배치된 N 개의 특정 감정 의사표현 이미지 아이템 목록 중 도 12와 같이 어느 하나의 대표 아이콘(810)을 포함한 특정 감정 의사표현 이미지 아이템 목록을 랜덤으로 추천받는다. 이후, 서비스 사용자가 대표 아이콘(810)을 롱 프레스 방식을 통해 클릭하였을 때, 롱 프레스 입력을 지속한 시간에 따라 N 개의 특정 감정 의사표현 이미지 아이템 목록 스코어가 차등적으로 배열되고, 서비스 사용자만의 의사표현 이미지 아이템 목록 스코어링 정보가 저장된다. 이때, 상기 N 개의 특정 감정 의사표현 이미지 아이템 목록에 포함된 의사표현 이미지 아이템은 기저장된 서비스 사용자의 의사표현 이미지 아이템 스코어링 정보를 기반으로 생성되거나 사용자 단말기(110)에 기설정된 추천 값을 기반으로 생성되는 의사표현 이미지 아이템 목록일 수 있다. 또한, 상기 N 개의 특정 감정 의사표현 이미지 아이템 목록은 사용자가 상기 N 개의 의사표현 이미지 아이템 목록을 모두 스코어링하여 스코어를 저장할 때까지 랜덤으로 생성될 수 있으며, 리스코어링 과정은 스코어가 모두 저장된 뒤 실행되거나 스코어링 과정 중 실행될 수 있도록 설계될 수 있다. 또한, 리스코어링된 경우 사용자 단말기(110)에 리스코어링 정보가 저장될 수 있다. 상술한 과정을 거쳐 저장된 의사표현 이미지 아이템 목록 스코어링 정보는 도 13과 같이 의사표현 이미지 아이템 목록이 서비스 사용자가 저장한 스코어에 따라 재배치된 상태로 표시될 수 있다.Next, the service user may select a list of N specific emotional expression image items including only the frequently used N expression image items provided after the second screening process, or specific emotions in which the expression image items have been rearranged through the scoring. A list of pseudo-expression image items may be scored to receive a recommendation of a personalized expression image item from the
상기와 같은 스코어링 방법을 통해 사용자 단말기(110)는 서비스 사용자가 선호하는 특정 감정에 대한 의사표현 이미지 아이템을 학습하여 사용자 단말기(110) 내에 새로운 의사표현 이미지 아이템이 추가되거나 일정기간 동안 서비스 사용자가 동일한 의사표현 이미지 아이템만을 사용할 경우 또는 서비스 사용자가 의사표현 이미지 아이템 목록에 별도로 표시된 새로고침 버튼 등을 클릭할 경우에 상기 학습 된 데이터를 기반으로 서비스 사용자가 선호할만한 새로운 의사표현 이미지 아이템과 새로운 의사표현 이미지 아이템 목록을 추천해줄 수 있다. 이를 통해, 사용자 단말기(110)는 서비스 사용자가 선호하는 특정 감정에 대한 의사표현 이미지 아이템을 우선순위로 하여 배열된 특정 감정 의사표현 이미지 아이템 목록에서 의사표현 이미지 아이템을 간편하게 선택하여 효율적으로 사용할 수 있게 한다.Through the scoring method as described above, the
예를 들어, 도 5와 같이 채팅창(400)의 메시지 입력창(410)을 통해 사용자가 작성 텍스트를 입력받기 전에는 사용자 단말기(110)에서 아이콘 캐릭터의 표정이 기본 표정(도 5의 무표정한 얼굴 이미지 등)으로 표현된 의사표현 이미지 아이템 입력 아이콘인 기본 아이콘(430)을 채팅창(400)의 일부분에 표시할 수 있다.For example, before the user inputs a written text through the
그리고 도 6과 같이 서비스 사용자로부터 '좋아^^' 라는 사용자 작성 텍스트를 키패드 또는 터치 스크린 등을 통해 입력받으면, 사용자 단말기(110)는 사용자 작성 텍스트인 '좋아^^' 를 메시지 입력창(410)에 표시함과 아울러 형태소 분석, 키워드 분석, 화행 분석, 시맨틱 분석 등과 같은 다수의 자연어 이해 기술 중 하나 이상을 통해 사용자 작성 텍스트인 '좋아^^'를 분석하여 특정 감정을 표현한 어구인 특정 감정 표현 어구가 사용자 작성 텍스트에 포함되어 있는 지를 확인할 수 있다. And when receiving the user-written text 'like ^^' from the service user through the keypad or touch screen, as shown in Figure 6, the
여기서, '좋아'는 분노, 슬픔, 두려움, 즐거움 등과 같은 다수의 감정 종류 중 즐거움에 해당하는 감정 표현 어구이므로, 사용자 단말기(110)는 서비스 사용자가 느끼는 특정 감정을 '즐거움'이라고 판단할 수 있고, 도 5의 기본 아이콘(430)을 도 6과 같이 즐거움에 해당하는 특정 감정 표현 아이콘(510)으로 대체하여 표시할 수 있다.Here, since "good" is an emotional expression phrase corresponding to pleasure among a plurality of emotion types such as anger, sadness, fear, and enjoyment, the
이후, 서비스 사용자가 특정 감정 표현 아이콘(510)을 선택하면, 사용자 단말기(110)는 기저장한 다수의 의사표현 이미지 아이템 중 특정 감정인 '즐거움'에 해당하는 N 개 이상의 의사표현 이미지 아이템만을 1차 선별한다. 이후, N 개 이상의 의사표현 이미지 아이템에 해당하는 N 개 이상의 의사표현 이미지 아이템에 대한 서비스 사용자의 의사표현 이미지 아이템 사용 빈도 정보를 확인하여 의사표현 이미지 아이템 사용 빈도가 높은 N 개까지의 의사표현 이미지 아이템에 해당하는 N 개의 의사표현 이미지 아이템을 2차 선별한 후에 N 개의 의사표현 이미지 아이템만을 포함한 특정 감정 의사표현 이미지 아이템 목록을 생성한다. Subsequently, when the service user selects a specific
이때, 서비스 사용자는 N 개 이상의 의사표현 이미지 아이템만을 포함한 특정 감정 의사표현 이미지 아이템 목록에 포함된 의사표현 이미지 아이템에 우선순위를 지정할 수 있다. 우선, 서비스 사용자가 상기 2차 선별 과정 후에 제공되는 사용 빈도가 높은 N 개의 의사표현 이미지 아이템만을 포함한 N 개의 특정 감정 의사표현 이미지 아이템 목록에서 어느 하나의 의사표현 이미지 아이템을 롱 프레스 방식을 통해 클릭한 경우 의사표현 이미지 아이템 근방에 숫자 아이콘이 생성된다. 이후, 서비스 사용자가 우선으로 선호하는 의사표현 이미지 아이템을 숏 프레스 방식을 통해 차례대로 클릭하였을 경우 의사표현 이미지 아이템의 배열이 차례에 맞게 재배치되며, 재배치된 의사표현 이미지 아이템의 배열에 따라 숫자 아이콘 또한 오름차순으로 재배치된다. 상술된 과정을 통하여, 사용자 단말기(110)는 도 11과 같이 채팅창(400)의 일부분에 즐거움에 특정 감정 의사표현 이미지 아이템 목록을 표시하되, 서비스 사용자가 선호하는 순으로 의사표현 이미지 아이템이 배열된 특정 감정 의사표현 이미지 아이템 목록을 제공하여 서비스 사용자가 특정 감정인 '즐거움'에 해당하는 어느 하나의 의사표현 이미지 아이템을 특정 감정 의사표현 이미지 아이템 목록에서 간편하게 선택할 수 있도록 한다. 여기서, 서비스 사용자는 도 11과 같이 '좋아^^' 라는 사용자 작성 텍스트가 메시지 입력창(310)에 표시된 상태에서 1순위로 배치된 특정 감정 표현 아이콘(510)을 선택할 수 있다.In this case, the service user may assign a priority to the pseudo expression image item included in the specific emotional expression image item list including only N or more expression image items. First, a service user clicks through a long press method any one expression image item from the list of N specific emotion expression image items including only the frequently used N expression image items provided after the second screening process. In this case, a number icon is created near the pseudo-expression image item. Subsequently, when the user first clicks on the pseudo-expression image items preferred by the short press method, the arrangement of the pseudo-expression image items is rearranged in order, and the number icon is also displayed according to the arrangement of the rearranged pseudo-expression image items. Reassigned in ascending order. Through the above-described process, the
또 다른 예를 들면, 사용자 단말기(110)가 도 5와 같이 기본 아이콘(430)을 채팅창(400)의 일부분에 표시한 상태에서 도 8과 같이 서비스 사용자로부터 '기분 별로야'라는 사용자 작성 텍스트를 키패드 또는 터치 스크린 등을 통해 입력받으면, 사용자 단말기(110)는 사용자 작성 텍스트인 '기분 별로야'를 메시지 입력창(410)에 표시함과 아울러 형태소 분석, 키워드 인식, 화행 분석, 시맨틱 분석 등과 같은 다수의 자연어 이해 기술 중 하나 이상을 통해 사용자 작성 텍스트인 '기분 별로야'를 분석하여 특정 감정을 표현한 어구인 특정 감정 표현 어구가 사용자 작성 텍스트에 포함되어 있는 지를 확인할 수 있다.For another example, in the state in which the
여기서, '기분 별로야'는 분노, 슬픔, 두려움, 즐거움, 우울함 등과 같은 다수의 감정 종류 중 '우울함'에 해당하는 감정 표현 어구이므로, 사용자 단말기(110)는 서비스 사용자가 느끼는 특정 감정을 '우울함'이라고 판단할 수 있고, 도 5의 기본 아이콘(430)을 도 8과 같이 우울함에 해당하는 특정 감정 표현 아이콘(710)으로 대체하여 표시할 수 있다.In this case, since the 'feeling not good' is an emotional expression phrase corresponding to 'depressed' among a plurality of emotion types such as anger, sadness, fear, pleasure, and depression, the user terminal 110 'depresses' certain emotions felt by the service user. 5, the
이후, 서비스 사용자가 특정 감정 표현 아이콘(710)을 선택하면, 사용자 단말기(110)는 기저장한 다수의 의사표현 이미지 아이템 중 특정 감정인 '우울함'에 해당하는 N 개 이상의 의사표현 이미지 아이템만을 1차 선별하고, N 개 이상의 의사표현 이미지 아이템에 해당하는 N 개 이상의 의사표현 이미지 아이템에 대한 서비스 사용자의 의사표현 이미지 아이템 사용 빈도 정보를 확인하여 의사표현 이미지 아이템 사용 빈도가 높은 N 개까지의 의사표현 이미지 아이템에 해당하는 N 개의 의사표현 이미지 아이템을 2차 선별한 후에 N 개의 의사표현 이미지 아이템만을 포함한 특정 감정 의사표현 이미지 아이템 목록들을 생성한다. Subsequently, when the service user selects a specific
이때, 서비스 사용자는 특정 감정 의사표현 이미지 아이템 목록들에 점수를 부여하여 추후 사용자 단말기(110)로부터 특정 감정 의사표현 이미지 아이템 목록을 추천받을 수 있다. 이때, 상기 특정 감정 의사표현 이미지 아이템 목록에 포함되는 의사표현 이미지 아이템은 상술된 2차 선별과정 후의 N 개의 의사표현 이미지 아이템이거나 서비스 사용자가 우선순위를 지정한 N 개의 의사표현 이미지 아이템 일 수 있다. 우선, 서비스 사용자는 사용자 단말기(110)로부터 어느 하나의 대표 아이콘(810)을 포함하는 특정 감정 의사표현 이미지 아이템 목록을 추천받는다. 이후, 서비스 사용자가 대표 아이콘(810)을 롱 프레스 방식을 통해 클릭하되, 롱 프레스 입력을 지속하는 시간을 달리하여 특정 감정 의사표현 이미지 아이템 목록에 점수를 부여한다. 여기에서 사용자 단말기(110)는 서비스 사용자가 N 개의 특정 감정 의사표현 이미지 아이템 목록에 모두 점수를 부여할 때까지 특정 감정 의사표현 이미지 아이템 목록을 반복하여 추천할 수 있으며, N 개의 특정 감정 의사표현 이미지 아이템 목록에 점수가 모두 부여된 경우, 사용자 단말기(110)는 서비스 사용자가 점수를 부여한 N 개의 특정 감정 의사표현 이미지 아이템 목록을 학습하여 서비스 사용자가 선호할만한 특정 감정 의사표현 이미지 아이템 목록을 새로 추천한다. 상술된 과정을 통하여, 사용자 단말기(110)는 도 13와 같이 채팅창(400)의 일부분에 우울함에 해당하는 특정 감정 의사표현 이미지 아이템 목록을 표시하되, 서비스 사용자가 선호할만한 의사표현 이미지 아이템을 포함하고 있는 의사표현 이미지 아이템 목록을 추천하여 서비스 사용자가 특정 감정인 '우울함'에 해당하는 어느 하나의 의사표현 이미지 아이템을 사용자 단말기(110)로부터 추천받은 특정 감정 의사표현 이미지 아이템 목록에서 간편하게 선택할 수 있도록 한다. 여기서, 서비스 사용자는 도 13 와 같이 '기분 별로야'라는 사용자 작성 텍스트가 메시지 입력창(410)에 표시된 상태에서 특정 감정 표현 아이콘(710)을 선택할 수 있다.In this case, the service user may assign a score to the specific emotional expression image item lists and receive a recommendation of the specific emotional expression image item list from the
한편, 서비스 사용자에 의해 채팅 메시지 보내기 버튼(미도시)이 선택되면, 사용자 단말기(110)는 채팅 메시지 전송 요청 정보를 생성하여 채팅 서비스 제공 서버(130)에 전송함과 아울러 메시지 입력창(410)에 표시되어 있던 사용자 작성 텍스트를 메시지 표시창(420)에 표시할 수 있다.On the other hand, if the send a chat message button (not shown) by the service user is selected, the
그리고 의사표현 이미지 아이템 입력 아이콘에 표시된 아이콘 캐릭터의 표정을 특정 표정에서 기본 표정으로 재변경하여 표시할 수도 있다.In addition, the facial expression of the icon character displayed on the pseudo-expression image item input icon may be changed from a specific facial expression to the basic facial expression.
인터넷 통신망(120)은 사용자 단말기(110)와 채팅 서비스 제공 서버(130) 간의 데이터 송수신과 채팅 서비스 제공 서버(130)와 하나 이상의 채팅 상대 단말기(미도시) 간의 데이터 송수신을 매개하는 수단으로서, 유선랜망, 무선랜망, WCDMA(Wideband Code Division Multiple Access)망, HSDPA(High Speed Downlink Packet Access)망, LTE(Long Term Evolution)망, LTE-A(LTE Advanced)망, 5세대 이동통신망 등을 포함할 수 있다.The
채팅 서비스 제공 서버(130)는 본 발명의 실시예에 따른 채팅 서비스를 사용자 단말기(110)와 하나 이상의 채팅 상대 단말기(미도시)에 제공하는 장치로써, 단일 서버 또는 두 개 이상의 서버로 구성될 수 있다.The chat
이러한 채팅 서비스 제공 서버(130)는 사용자 단말기(110)와 하나 이상의 채팅 상대 단말기(미도시)에 채팅 애플리케이션을 제공한다.The chat
그리고 채팅 서비스 제공 서버(130)는 채팅 애플리케이션을 실행한 사용자 단말기(110)와 하나 이상의 채팅 상대 단말기(미도시) 간의 채팅 메시지 송수신을 중계한다.In addition, the chat
다시 말해서, 채팅 서비스 제공 서버(130)는 사용자 단말기(110)와 하나 이상의 채팅 상대 단말기(미도시)간의 채팅 진행을 위한 채팅창(400)의 메시지 표시창(420)에 사용자 단말기(110)로부터 수신한 채팅 메시지와 하나 이상의 채팅 상대 단말기(미도시)로부터 수신한 채팅 메시지를 게시하고, 사용자 단말기(110)에서 선택한 의사표현 이미지 아이템을 채팅창(400)의 메시지 표시창(420)에 게시하거나, 하나 이상의 채팅 상대 단말기(미도시)에서 선택한 의사표현 이미지 아이템을 채팅창(400)의 메시지 표시창(420)에 게시할 수 있다.In other words, the chat
이상에서 설명한 바와 같이 본 발명의 실시예에서는 사용자 단말기(110)가 사용자 작성 텍스트를 분석하여 사용자 작성 텍스트에 특정 감정을 표현한 어구가 포함되어 있으면, 채팅창(400)에 포함된 의사표현 이미지 아이템 입력 아이콘의 표정을 특정 감정에 해당하는 특정 표정으로 변경하기 때문에 채팅 서비스에 대한 서비스 사용자의 흥미를 유발할 수 있게 된다.As described above, in the embodiment of the present invention, if the
또한, 사용자 단말기(110)가 사용자 작성 텍스트를 분석하여 사용자 작성 텍스트에 특정 감정을 표현한 어구가 포함되어 있으면, 기저장한 다수의 의사표현 이미지 아이템 중에서 특정 감정에 해당하는 하나 이상의 의사표현 이미지 아이템을 선별하고, 하나 이상의 의사표현 이미지 아이템만을 포함한 의사표현 이미지 아이템 목록을 생성 및 채팅창(400)에 표시할 수 있기 때문에 채팅 서비스를 이용중인 서비스 사용자가 특정 감정에 대한 의사표현 이미지 아이템을 간편하게 선택할 수 있게 된다.In addition, when the
또한, 사용자 단말기(110)는 서비스 사용자가 스코어링한 스코어링 정보를 학습하여 사용자가 선호하는 특정 감정 의사표현 이미지 아이템을 포함하는 특정 감정 의사표현 이미지 아이템 목록을 서비스 사용자에게 추천하여 채팅 서비스에 대한 효율성을 높일 수 있게 된다.In addition, the
이하에서는 본 발명의 실시예에 따른 사용자 단말기(110)의 구성에 대해 자세히 설명하도록 한다.Hereinafter, the configuration of the
도 2는 본 발명의 실시예에 따른 사용자 단말기의 구성을 간략하게 나타낸 블록 구성도이다.2 is a block diagram schematically illustrating a configuration of a user terminal according to an exemplary embodiment of the present invention.
본 발명의 실시예에 따른 사용자 단말기(110)는 무선 통신부(210), 디스플레이부(220), 메모리부(230), 정보 입력부(240), 제어부(270) 및 맞춤형 이미지 아이템 제공부(260)를 포함한다.The
무선 통신부(210)는 이동통신망 또는 와이파이망 등을 통해 연결된 채팅 서비스 제공 서버(130)와의 데이터 송수신을 수행한다.The
다시 말해서, 무선 통신부(210)는 서비스 사용자가 정보 입력부(240)를 통해 입력한 사용자 작성 텍스트 및 의사표현 이미지 아이템 중 하나 이상을 채팅 서비스 제공 서버(130)에 전송하고, 하나 이상의 채팅 상대 단말기(미도시) 중 하나 이상의 단말기가 채팅 서비스 제공 서버(130)에 전송한 채팅 메시지 또는 의사표현 이미지 아이템 중 하나 이상을 채팅 서비스 제공 서버(130)로부터 수신할 수 있다.In other words, the
디스플레이부(220)는 사용자 단말기(110)에서 처리되는 정보를 표시한다. 예를 들어, 사용자 단말기(110)가 음성 통화 중인 경우, 음성 통화 관련 UI(User Interface), GUI(Graphic User Interface) 등과 같은 음성 연결화면을 표시한다. 또한, 사용자 단말기(110)에서 채팅 어플리케이션을 실행 중인 경우, 디스플레이부(220)는 채팅 애플리케이션과 관련된 UI 또는 GUI 등과 같은 화면을 표시할 수 있다.The
다시 말해서, 디스플레이부(220)는 사용자 단말기(110)와 하나 이상의 채팅 상대 단말기(미도시) 간의 채팅 진행을 위한 채팅창(400)을 표시할 수 있다.In other words, the
이러한, 디스플레이부(220)는 액정 디스플레이(Liquid Crystal Display), 박막 트랜지스터 액정 디스플레이(Thin Film Transistor Liquid Crystal Display), 유기 발광 다이오드(Organic Light-emitting Diode) 중에서 적어도 하나를 포함할 수 있다.The
메모리부(230)는 제어부(270)의 동작, 즉 사용자 단말기(110)의 전반적인 동작을 제어하기 위한 운영 프로그램, 사용자 단말기(110)에 설치된 애플리케이션, 콘텐츠 등을 저장할 수 있다.The
본 발명의 실시예에서 메모리부(230)는 다수의 의사표현 이미지 아이템을 저장하고, 다수의 의사표현 이미지 아이템을 포함하는 다수의 의사표현 이미지 아이템 목록을 저장한다.In an embodiment of the present invention, the
또한, 메모리부(230)는 다수의 의사표현 이미지 아이템 각각에 대한 서비스 사용자의 의사표현 이미지 아이템 사용 빈도 정보를 저장할 수 있으며, 서비스 사용자의 스코어링 정보 및 리스코어링 정보 등을 저장할 수 있다.In addition, the
그리고, 메모리부(230)는 다수의 의사표현 이미지 아이템에 포함된 아이콘 캐릭터의 표정이 다수의 감정 종류별로 표현된 다수의 감정 표현 아이콘을 저장할 수 있다. 여기서, 다수의 감정 종류는 분노, 슬픔, 두려움, 즐거움, 우울함 등일 수 있다.The
이러한 메모리부(230)는 플래시 메모리 타입(Flash Memory Type), 카드 타입의 메모리(예를 들어, SD 또는 마이크로 SD 메모리 등), 램(Ramdom Access Memory), SRAM(Static Random Access Memory) 롬(Read-Only Memory), PROM(Programmable Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory) 중 적어도 하나를 포함할 수 있다.The
정보 입력부(240)는 서비스 사용자로부터 정보를 입력받기 위한 수단으로써, 키패드, 터치 스크린 등으로 구성될 수 있다.The
본 발명의 실시예에서 정보 입력부(240)는 사용자 작성 텍스트를 서비스 사용자로부터 입력받을 수 있다.In an embodiment of the present invention, the
이미지 아이템 관리부(250)는 메모리부(230)를 통해 저장되는 의사 표현 이미지 아이템들을 그 분류 정보에 따라 매칭시켜 저장 및 관리할 수 있다.The
상기 분류 정보는 이미지 아이템의 각 요소별 속성 정보를 포함할 수 있으며, 요소별 속성 정보는 예를 들어, 의사 표현 종류 정보, 이미지 타입 정보, 스코어링 정보(사용자별 이용 횟수 정보 및 피드백 정보) 등이 예시될 수 있다.The classification information may include attribute information for each element of the image item, and the attribute information for each element may include, for example, pseudo expression type information, image type information, scoring information (user count information and feedback information), and the like. May be exemplified.
그리고, 이미지 아이템 관리부(250)는 정보 입력부(240)를 통해 사용자 단말(110)로부터 수신되는 상기 피드백 정보를 수신하여, 의사 표현 이미지 아이템의 분류 정보에 적용할 수 있으며, 상기 피드백 정보는 예를 들어 의사 표현 이미지 아이템에 대응하는 요소별 평가 정보, 신고 정보 또는 사용율 정보 중 적어도 하나를 포함할 수 있다.In addition, the
특히, 신고 정보가 수신된 경우 이미지 아이템 관리부(250)는 신고 정보에 대응하는 의사 표현 이미지 아이템의 수정 또는 삭제 처리를 수행할 수 있는 바, 이와 같은 메모리부(230) 갱신이 실시간으로 처리됨으로써, 각 의사 표현 이미지 아이템에 대응하는 사용자 피드백이 적극적으로 반영될 수 있다.In particular, when the report information is received, the image
맞춤형 이미지 아이템 제공부(260)는 머신 러닝(Machine Learning) 및 인공 신경망 모델(Deep Artificial Neural Network Model)을 통해 서비스 사용자가 스코어링한 데이터를 학습하고, 학습된 정보를 기반으로 서비스 사용자가 선호할만한 의사표현 이미지 아이템 및 의사표현 이미지 아이템 목록을 서비스 사용자에게 추천한다.The customized image
보다 구체적으로, 맞춤형 이미지 아이템 제공부(260)는, 사용자 맞춤형 추천부(261), 머신 러닝 처리부(263), 피드백 정보 가중치 적용부(265)를 포함하며, 머신 러닝에 따라 생성된 맞춤형 의사표현 이미지 아이템 및 맞춤형 의사표현 이미지 아이템 목록을 포함하는 맞춤형 이미지 아이템 학습 모델(262)이 메모리부(230)를 통해 구비될 수 있다.More specifically, the customized image
머신 러닝 처리부(263)는, 상기 이미지 아이템 관리부(250)의 분류 관리 정보에 기초한 상기 의사 표현 이미지 아이템 및 아이템 목록의 머신 러닝을 처리하여, 맞춤형 이미지 아이템 학습 모델(262)을 생성하고, 생성된 맞춤형 이미지 아이템 학습 모델(262)이 메모리부(230)에 저장되도록 처리한다.The machine
여기서, 맞춤형 이미지 아이템 학습 모델(262)은 이미지 아이템의 생성을 위한 맞춤형 설정 정보 매칭 알고리즘을 도출하기 위한 학습 모델을 포함할 수 있으며, 입력 변수로서 이미지 아이템의 분류 정보를 포함할 수 있고, 출력 변수는 의사 표현 이미지 아이템간 추천을 위한 추천 설정 정보를 포함할 수 있다. 맞춤형 설정 정보는 서비스 사용자의 스코어링 정보를 기반으로 한 맞춤형 의사표현 이미지 아이템 정보 및 맞춤형 의사표현 이미지 아이템 목록 정보를 포함할 수 있으며, 추천 설정 정보는 상기 맞춤형 설정 정보를 기반으로 설정된 이동통신 단말기(110)에서 서비스 사용자에게 추천하는 추천 의사표현 이미지 아이템 정보 및 추천 의사표현 이미지 아이템 목록 정보를 포함할 수 있다.Here, the custom image item learning model 262 may include a learning model for deriving a custom setting information matching algorithm for generating an image item, and may include classification information of an image item as an input variable, and an output variable. May include recommendation setting information for recommendation between the pseudo-expression image items. The customized setting information may include customized expressive image item information and customized expressive image item list information based on the scoring information of the service user, and the recommended setting information is a
머신 러닝 처리부(263)에서의 머신 러닝 알고리즘은 하나 이상의 처리 방식이 이용될 수 있으며, 나아가 입력 변수와 타겟 변수를 복수개의 머신 러닝 알고리즘과 복수개의 머신러닝 알고리즘의 조합에 적용하여 사전 학습하고, 학습한 결과에 따른 알고리즘 각각의 정확도, 정확도 대비 연산시간, 성능비 및 모델의 안정성(fitness) 중에서 적어도 하나를 고려하여 최적의 머신러닝 알고리즘이 결정될 수 있다. One or more processing methods may be used for the machine learning algorithm in the machine
머신 러닝 처리부(263)에서 처리되는 머신러닝 알고리즘은 예를 들어, 리지 회귀 분석(Ridge Regression), 로지스틱 회기분석(Logistic Regression), 일반화선형모형(Generalized Linear Model), 랜덤 포레스트(Random Forest), 변화 부양 모형(GradientBoosting Model) 및 뉴럴 네트워크(Neural Network) 등이 이용될 수 있다.Machine learning algorithms processed by the machine
리지 회귀분석은 기본적인 linear 모델이며 극단치 또는 이상점(outlier)을 핸들하기 위해 추가적인 파라미터를 제공한다. 로지스틱 회기분석은 기본적인 linear 모델이며 타겟변수 즉 예측하려는 대상이 Binomial 분포도를 보일 때 사용하는 것이 효과적이다. 일반화선형모형은 기본적인 linear 모델이며 타겟변수가 Poisson 분포도를 보일 때 사용하는 것이 효과적이다. 랜덤 포레스트 앙상블모델로 다수의 decision tree가 모여 이루어진 모델로서, 각 decision tree는 입력 변수들과 타겟 변수의 연관성을 고려하여 개별적으로 개발되며 상위 linear 모델 대비 더욱 유연(flexible)한 특성을 가지고 있다. 변화 부양 모형은 Generalized Boosting Model 또는 GBM 이라고도 불리며 Random Forest와 비슷한 성향을 띠는 앙상블 모델이나 각 decision tree가 이미 만들어진 decision tree의 정확도를 고려하여 개된다는 차이점이 존재해 종종 Random Forest 대비 정확도가 높은 모델로 간주되기도 한다.Ridge regression is a basic linear model that provides additional parameters to handle extremes or outliers. Logistic regression analysis is a basic linear model and is effective to use when the target variable, that is, the target to be predicted, shows a binomial distribution. The generalized linear model is a basic linear model and it is effective to use it when the target variable shows Poisson distribution. A random forest ensemble model that consists of multiple decision trees. Each decision tree is developed individually considering the correlation between input variables and target variables and has more flexible characteristics than the upper linear model. The change stimulus model, also called the Generalized Boosting Model or GBM, is an ensemble model that has a similar tendency to a random forest, or that each decision tree is opened considering the accuracy of the decision tree that has already been created. It is also considered.
뉴럴 네트워크는 사실상 어떤 타겟이든 예측할 수 있는 아주 유연한 모델로 파라미터를 조정함에 따라 linear 패턴과 non-linear 패턴 둘 다 아우를 수 있다 때문에 파라미터 튜닝이 세밀하게 될 필요성이 있다. 특히, 뉴럴 네트워크는 기계학습과 인지과학에서 생물학의 신경망에서 영감을 얻은 통계학적 학습 알고리즘으로서, 이러한 신경망을 복합적으로 구성함으로써 딥 러닝 방식이 구현될 수 있다.Neural networks are highly flexible models that can predict virtually any target, so parameter tuning needs to be fine-tuned because they can encompass both linear and non-linear patterns. In particular, the neural network is a statistical learning algorithm inspired by the neural network of biology in machine learning and cognitive science, and the deep learning method can be implemented by combining such neural networks.
예를 들어, 뉴럴 네트워크는 전체적인 FC(Fully Connected), Max Pooling 및 convolution을 수반하여 최적화되는 CNN(Convolutional Neural Network), 시계열적 데이터에 유용한 순차 신경망(Recurrent Neural Networks, RNN)을 포함할 수 있다.For example, a neural network may include a convolutional neural network (CNN) that is optimized along with overall fully connected (FC), max pooling, and convolution, and recurrent neural networks (RNNs) useful for time-series data.
신경망 학습 프로세스가 이용되는 경우, 예를 들어, 머신 러닝 처리부(263)는, 이미지 아이템 메모리부(230)의 분류 정보로부터 맞춤형 설정 정보에 따라 생성되는 맞춤형 이미지 아이템 학습 모델(262)의 예측값을 생성하는 프로세스와 예측값과 실제 분류 정보값의 차이를 최소화하기 위해 연결의 가중치를 갱신하는 학습 프로세스(backpropagation)를 수행할 수 있다. 이를 위해, 머신 러닝 처리부(263)는 비용함수(cost function)를 가중치에 대해 편미분한 다음 가중치를 기울기 방향으로 조금씩 이동하는 과정을 반복함으로써 실제값과 예측값이 차이를 최소화하는 가중치를 찾는 방식으로서 경사하강법(gradient descent) 등을 이용하여 실제와 유사한 최적의 맞춤형 설정 정보를 학습할 수 있다.When the neural network learning process is used, for example, the
이와 같이 머신 러닝이 처리되면, 사용자 맞춤형 추천부(261)는 서비스 사용자의 스코어링 정보에 기반하는 추천 의사표현 이미지 아이템과 추천 의사표현 이미지 아이템 목록을 결정하고 생성하여 서비스 사용자에게 추천 설정 정보를 표시함으로써 맞춤형 서비스를 제공할 수 있다.When the machine learning is processed as described above, the user-customized recommendation unit 261 determines and generates a recommendation expression image item and a recommendation expression image item list based on the scoring information of the service user to display the recommended setting information to the service user. Can provide customized service.
한편, 상술한 이미지 아이템 관리부(250)는, 상기 사용자 단말기(110)로부터 생성된 맞춤형 의사표현 이미지 아이템 및 맞춤형 의사표현 이미지 아이템 목록에 대응하는 피드백 정보를 수신하고, 피드백 정보에 대응하는 데이터를 메모리부(230)를 통해 갱신 처리할 수 있다.The
한편, 피드백 정보 가중치 적용부(265)는 상기 피드백 정보로부터 획득되는 요소별 평가 정보 및 사용율 정보 중 적어도 하나에 기초하여, 피드백 대상 맞춤형 이미지 아이템 및 피드백 대상 맞춤형 이미지 아이템 목록에 대응하는 맞춤형 설정 정보의 가중치 튜닝을 처리할 수 있다.On the other hand, the feedback information weight applying unit 265 is based on at least one of the element-specific evaluation information and the utilization information obtained from the feedback information, the customized setting information corresponding to the feedback target customized image item list and the feedback target customized image item list Weight tuning can be handled.
제어부(270)는 사용자 단말기(110)의 전반적인 동작을 제어한다.The
이러한 제어부(270)는 음성 통화, 데이터 통신 및 애플리케이션 프로그램의 실행 등과 관련된 제어 및 처리를 수행하는 애플리케이션 프로세서 유닛(Application Processor Unit) 등 일 수 있다.The
본 발명의 실시예에서 제어부(270)는 채팅 서비스 제공 서버(130)를 통해 하나 이상의 채팅 상대 단말기(미도시)와 채팅을 진행할 때에 본 발명의 실시예에 따른 채팅 서비스를 아래와 같이 제공할 수 있다.In an embodiment of the present invention, the
이를 통해 사용자 단말기(110)는 본 발명의 실시예에 따른 채팅 서비스를 아래와 같이 제공할 수 있다.Through this, the
우선, 사용자 단말기(110)가 채팅창(400)을 통해 하나 이상의 채팅 상대 단말기(미도시)와 채팅을 진행중인 상태에서 채팅창(400)의 메시지 입력창(410)이 도 5와 같이 공란인 경우, 제어부(270)는 채팅창(400)의 일부분에 위치한 의사표현 이미지 아이템 입력 아이콘에 표시된 아이콘 캐릭터의 표정을 기본 표정으로 설정한다.First, when the
여기서, 제어부(270)는 메모리부(230)에 저장된 다수의 감정 표현 아이콘 중에서 아이콘 캐릭터의 표정이 기본 표정(예를 들어, 무표정한 표정)으로 표현된 의사표현 이미지 아이템 입력 아이콘인 기본 아이콘을 추출하고, 디스플레이부(220)에서 기본 아이콘을 채팅창(400)의 일부분에 표시할 수 있도록 한다.Here, the
이후, 제어부(270)는 정보 입력부(240)를 통해 서비스 사용자로부터 사용자 작성 텍스트를 입력받을 수 있고, 이러한 사용자 작성 텍스트를 채팅창(400)의 메시지 입력창(410)에 입력할 수 있다.Thereafter, the
이때에, 제어부(270)는 형태소 분석, 키워드 인식, 화행 분석, 시맨틱 분석 등과 같은 다수의 자연어 이해 기술 중 하나 이상을 통해 사용자 작성 텍스트를 분석하여 특정 감정을 표현한 어구인 특정 감정 표현 어구가 사용자 작성 텍스트에 포함되어 있는 지를 확인할 수 있다.At this time, the
사용자 작성 텍스트를 분석한 결과, 사용자 작성 텍스트에 특정 감정 표현 어구가 포함되어 있으면, 제어부(270)는 의사표현 이미지 아이템 입력 아이콘에 표시된 아이콘 캐릭터의 표정을 기본 표정에서 특정 감정에 해당하는 특정 표정으로 변경한다.As a result of analyzing the user-written text, if the user-written text includes a specific emotional expression phrase, the
여기서, 제어부(270)는 메모리부(230)에 저장된 다수의 감정 표현 아이콘 중에서 아이콘 캐릭터의 표정이 특정 표정으로 표현된 의사표현 이미지 아이템 입력 아이콘인 특정 감정 표현 아이콘을 추출하고, 디스플레이부(220)가 채팅창(400)의 일부분에 표시하고 있던 기본 아이콘(430)을 특정 감정 표현 아이콘(510, 710)으로 대체하여 표시할 수 있도록 한다.Here, the
한편, 사용자 작성 텍스트에 특정 감정 표현 어구가 미포함되어 있으면, 제어부(270)는 의사표현 이미지 아이템 입력 아이콘에 표시된 아이콘 캐릭터의 표정을 기본 표정으로 표시, 즉 디스플레이부(220)에서 기본 아이콘(430)을 지속적으로 표시할 수 있도록 한다.On the other hand, if a specific emotion expression phrase is not included in the user-written text, the
위와 같이 의사표현 이미지 아이템 입력 아이콘에 표시된 아이콘 캐릭터의 표정을 기본 표정에서 특정 표정으로 변경한 후에 서비스 사용자에 의해 채팅창(400)에 포함된 보내기 버튼(미도시)이 선택되면, 제어부(270)는 무선 통신부(210)를 통해 사용자 작성 텍스트를 채팅 서비스 제공 서버(130)로 전송함과 아울러 메시지 입력창(410)에 입력된 사용자 작성 텍스트를 삭제하고, 사용자 작성 텍스트를 메시지 표시창(420)에 입력할 수 있다.After the expression of the icon character displayed on the pseudo-expression image item input icon is changed from the default expression to the specific expression, when the send button (not shown) included in the
그리고 제어부(270)는 의사표현 이미지 아이템 입력 아이콘에 표시된 아이콘 캐릭터의 표정을 특정 표정에서 기본 표정으로 재변경하는 제어를 수행, 즉 디스플레이부(220)에서 아이콘 캐릭터의 표정을 특정 표정에서 기본 표정으로 재변경하여 표시할 수 있도록 한다.The
한편, 사용자 작성 텍스트가 메시지 입력창(410)에 표시된 상태에서 서비스 사용자에 의해 의사표현 이미지 아이템 입력 아이콘이 선택되면, 제어부(270)는 메모리부(230)에 저장된 다수의 의사표현 이미지 아이템 중에서 특정 감정에 해당하는 N 개 이상의 의사표현 이미지 아이템만을 1차 선별한다.Meanwhile, when a pseudo expression image item input icon is selected by the service user while the user-written text is displayed on the
그리고, N 개 이상의 의사표현 이미지 아이템에 해당하는 N 개 이상의 의사표현 이미지 아이템에 대한 서비스 사용자의 의사표현 이미지 아이템 사용 빈도 정보를 확인하여 의사표현 이미지 아이템 사용 빈도가 높은 N 개 까지의 의사표현 이미지 아이템에 해당하는 N 개의 의사표현 이미지 아이템을 2차 선별한 후에 N 개의 의사표현 이미지 아이템만을 포함한 특정 감정 의사표현 이미지 아이템 목록을 생성함과 아울러 도 7 또는 도 9과 같이 특정 감정 의사표현 이미지 아이템 목록을 채팅창(400)의 일부분에 표시할 수 있도록 한다.Then, the service user expresses the frequency of use of the pseudo-expression image item for the N or more pseudo-expression image items corresponding to the N or more pseudo-expression image items, and up to N pseudo-expression image items having a high frequency of use of the pseudo-expression image item. After the N pseudo-expression image items corresponding to the second selection are generated, a specific emotion expression image item list including only N expression image items is generated, and a specific emotion expression image item list as shown in FIG. 7 or 9 is generated. It can be displayed on a portion of the chat window (400).
이를 통해, 서비스 사용자가 특정 감정에 대한 의사표현 이미지 아이템을 특정 감정 의사표현 이미지 아이템 목록에서 간편하게 선택할 수 있게 한다.Through this, the service user can easily select the expression image item for the specific emotion from the specific emotion expression image item list.
본 발명의 실시예에서 제어부(270)는 특정 감정 의사표현 이미지 아이템 목록을 생성할 때에 N 개의 의사표현 이미지 아이템을 사용 빈도가 높은 순으로 배열할 수 있다. In an embodiment of the present invention, the
또한, 제어부(270)는 맞춤형 이미지 아이템 제공부(260)를 통해 머신 러닝 처리된 정보가 메모리부(230)에 저장된 서비스 사용자의 스코어링 정보를 기반으로 맞춤형 이미지 아이템 제공부(260)에서 서비스 사용자에게 사용자가 선호할만한 특정 감정 의사표현 이미지 아이템 및 특정 감정 의사표현 이미지 아이템 목록을 추천할 수 있도록 한다.In addition, the
우선, 서비스 사용자가 디스플레이부(220)에 표시된 상술한 2차 선별 과정 후에 제공되는 사용 빈도가 높은 N 개의 의사표현 이미지 아이템만을 포함한 N 개의 특정 감정 의사표현 이미지 아이템 목록에서 어느 하나의 의사표현 이미지 아이템을 롱 프레스(long press) 방식을 통해 클릭한다. 이후, 디스플레이부(220)에 도 10과 같이 의사표현 이미지 아이템 근방(상방 또는 하방)에 숫자 아이콘이 생성되며, 서비스 사용자가 우선순위로 두고 싶은 의사표현 이미지 아이템을 숏 프레스(short press) 방식을 통해 차례대로 클릭한다. 상기 숏 프레스 방식을 통해 차례대로 클릭된 의사표현 이미지 아이템은 메모리부(230)에 특정 감정 의사표현 이미지 아이템 스코어링 정보로 저장되며, 도 11과 같이 서비스 사용자가 클릭한 순서대로 배열이 재배치되고 상기 의사표현 이미지 아이템 근방에 생성된 숫자 아이콘 또한 서비스 사용자가 클릭한 순서대로 오름차순으로 재배치된다. First, any one of the expressive image items in the list of N specific emotional expressive image items including only the frequently used N expressive image items provided by the service user after the above-described second screening process displayed on the
다음으로, 제어부(270)는 맞춤형 이미지 아이템 제공부(260)를 통해 머신 러닝 처리된 메모리부(230)에 저장된 특정 감정 의사표현 이미지 아이템 스코어링 정보를 기반으로 맞춤형 이미지 아이템 제공부(260)에서 서비스 사용자에게 특정 감정 의사표현 이미지 아이템 목록을 추천할 수 있도록 한다.Next, the
우선, 제어부(270)는 상기 메모리부(230)에 저장된 특정 감정 의사표현 이미지 아이템 스코어링 정보에 따라 의사표현 이미지 아이템이 재배치된 N 개의 특정 감정 의사표현 이미지 아이템 목록 중 도 12와 같이 대표 아이콘(810)을 포함하는 특정 감정 의사표현 이미지 아이템 목록을 디스플레이부(220)에 랜덤으로 표시한다. 이후, 서비스 사용자가 디스플레이부(220)에 표시된 대표 아이콘(810)을 롱 프레스 방식을 통해 클릭하였을 때, 롱 프레스 입력을 지속한 시간에 따라 N 개의 특정 감정 의사표현 이미지 아이템 목록 스코어가 차등적으로 배열되며, 이는 메모리부(230)에 특정 감정 의사표현 이미지 아이템 목록 스코어링 정보로 저장된다. First, the
이때, 서비스 사용자는 상기 스코어 및 목록 스코어를 상술된 과정을 반복하여 리스코어링 할 수 있으며, 이러한 리스코어링된 정보는 메모리부(230)에 리스코어링 정보로 저장될 수 있다.In this case, the service user may re-correlate the score and the list score by repeating the above-described process, and the re-cored information may be stored in the
이하에서는 본 발명의 실시예에 따른 사용자 단말기(110)가 채팅 서비스를 제공하는 과정에 대해 설명하도록 한다.Hereinafter, a process of providing a chat service by the
도 14는 본 발명의 실시예에 따른 사용자 단말기에서 채팅 서비스를 제공하는 과정을 나타낸 순서도이다.14 is a flowchart illustrating a process of providing a chat service in a user terminal according to an embodiment of the present invention.
사용자 단말기(110)와 하나 이상의 채팅 상대 단말기(미도시) 간의 채팅 진행시에 사용자 단말기(110)에서 표시중인 채팅창(400)의 메시지 입력창(410)에 사용자 작성 텍스트가 입력되기 전, 즉 메시지 입력창(410)이 공란인 경우, 사용자 단말기(110)는 채팅창(400)의 일부분에 위치한 의사표현 이미지 아이템 입력 아이콘에 표시된 아이콘 캐릭터의 표정을 기본 표정으로 설정한다(S910). 여기서, 사용자 단말기(110)는 기저장한 다수의 감정 표현 아이콘 중에서 아이콘 캐릭터의 표정이 기본 표정(예를 들어, 무표정한 표정)으로 표현된 의사표현 이미지 아이템 입력 아이콘인 기본 아이콘을 추출하고 이를 채팅창(400)의 일부분에 표시할 수 있다.Before the user-written text is input into the
이후, 사용자 단말기(110)는 사용자 단말기(110)에 구비된 키패드 또는 터치 스크린 등을 통해 서비스 사용자로부터 사용자 작성 텍스트를 입력받을 수 있다(S920).Thereafter, the
그리고 사용자 단말기(110)는 사용자 작성 텍스트를 채팅창(400)의 메시지 입력창(410)에 표시함과 아울러 형태소 분석, 키워드 인식, 화행 분석, 시맨틱 분석 등과 같은 다수의 자연어 이해 기술 중 하나 이상을 통해 사용자 작성 텍스트를 분석하여 특정 감정을 표현한 어구인 특정 감정 표현 어구가 사용자 작성 텍스트에 포함되어 있는 지를 확인할 수 있다(S930).In addition, the
사용자 작성 텍스트를 분석한 결과, 사용자 작성 텍스트에 특정 감정 표현 어구가 포함되어 있으면, 사용자 단말기(110)는 의사표현 이미지 아이템 입력 아이콘에 표시된 아이콘 캐릭터의 표정을 기본 표정에서 특정 감정에 해당하는 특정 표정으로 변경한다(S950).As a result of analyzing the user-written text, if the user-created text includes a specific emotional expression phrase, the
여기서, 사용자 단말기(110)는 기저장한 다수의 감정 표현 아이콘 중에서 아이콘 캐릭터의 표정이 특정 표정으로 표현된 의사표현 이미지 아이템 입력 아이콘인 특정 감정 표현 아이콘을 추출하고, 채팅창(400)의 일부분에 표시하고 있던 기본 아이콘(430)을 특정 감정 표현 아이콘(510, 710)으로 대체하여 표시할 수 있다.Here, the
한편, 사용자 작성 텍스트에 특정 감정 표현 어구가 미포함되어 있으면, 사용자 단말기(110)는 의사표현 이미지 아이템 입력 아이콘에 표시된 아이콘 캐릭터의 표정을 기본 표정으로 표시, 즉 기본 아이콘(430)을 지속적으로 표시할 수 있다.On the other hand, if the user-written text does not include a specific emotional expression phrase, the
아이콘 캐릭터의 표정을 특정 표정으로 변경한 상태에서 서비스 사용자에 의해 의사표현 이미지 아이템 입력 아이콘이 선택되면, 사용자 단말기(110)는 기저장한 다수의 의사표현 이미지 아이템 중에서 특정 감정에 해당하는 N 개 이상의 의사표현 이미지 아이템만을 1차 선별하고, N 개 이상의 의사표현 이미지 아이템에 해당하는 N 개 이상의 의사표현 이미지 아이템에 대한 서비스 사용자의 의사표현 이미지 아이템 사용 빈도 정보를 확인하여 의사표현 이미지 아이템 사용 빈도가 높은 N 개까지의 의사표현 이미지 아이템에 해당하는 N 개의 의사표현 이미지 아이템을 2차 선별한다. 이후, 사용자 단말기(110)는 N 개의 의사표현 이미지 아이템만을 포함한 특정 감정 의사표현 이미지 아이템 목록을 생성 및 저장함과 아울러 도 7 또는 도 9과 같이 특정 감정 의사표현 이미지 아이템 목록을 채팅창(400)의 일부분에 표시할 수 있다(S960, S970).When the expression of the expression expression item item is selected by the service user in a state where the expression of the icon character is changed to a specific expression, the
채팅창(400)의 일부분에 표시된 특정 감정 의사표현 이미지 아이템 목록은 서비스 사용자의 스코어링(scoring) 정보 즉, 이미지 아이템 관리부(250)의 분류 관리 정보에 기초한 의사 표현 이미지 아이템 및 의사 표현 이미지 아이템 목록에 따라 머신 러닝 처리부(263)에서 머신 러닝 처리되어 의사표현 이미지 아이템의 배치가 도 11 또는 도 13과 같이 재배열될 수 있다. 여기에서 상기 스코어링 정보는 서비스 사용자가 직접 이벤트성 기능이 포함된 클릭방식을 통해 의사표현 이미지 아이템을 선택함에 따라 사용자 단말기(110)에 스코어링 정보가 저장될 수 있고, 상기 머신 러닝 처리부(263)는, 상기 이미지 아이템 관리부(250)의 분류 관리 정보에 기초한 상기 의사 표현 이미지 아이템 및 아이템 목록의 머신 러닝을 사용자 단말기(110)에 미리 구축된 리지 회귀 분석(Ridge Regression), 로지스틱 회기분석(Logistic Regression), 일반화선형모형(Generalized Linear Model), 랜덤 포레스트(Random Forest), 변화 부양 모형(GradientBoosting Model) 및 뉴럴 네트워크(Neural Network) 등의 머신러닝 알고리즘을 통해 서비스 사용자가 스코어링한 의사표현 이미지 아이템 목록을 학습하여 맞춤형 이미지 아이템 학습 모델(262)을 생성하고, 생성된 맞춤형 이미지 아이템 학습 모델(262)이 메모리부(230)에 저장되도록 처리하며, 상기 맞춤형 이미지 아이템 학습 모델(262)로부터 산출되는 맞춤형 설정 정보를 획득한다(S980).The specific emotion expression image item list displayed on a portion of the
이후, 맞춤형 설정 정보를 기반으로 이동통신 단말기(110)에서 서비스 사용자에게 추천하는 추천 의사표현 이미지 아이템 정보 및 추천 의사표현 이미지 아이템 목록 정보를 포함하는 추천 설정 정보를 생성 및 표시하여 서비스 사용자에게 맞춤형 서비스를 제공한다(S990).Subsequently, the
이를 통해, 사용자 단말기(110)는 서비스 사용자가 선호하는 특정 감정에 대한 의사표현 이미지 아이템을 우선순위로 하여 배열된 특정 감정 의사표현 이미지 아이템 목록에서 의사표현 이미지 아이템을 간편하게 선택하여 효율적으로 사용할 수 있게 한다.By doing so, the
이상에서, 본 발명의 실시예를 구성하는 모든 구성 요소들이 하나로 결합되거나 결합되어 동작하는 것으로 설명되었다고 해서, 본 발명이 반드시 이러한 실시예에 한정되는 것은 아니다. 즉, 본 발명의 목적 범위 안에서라면, 그 모든 구성 요소들이 하나 이상으로 선택적으로 결합하여 동작할 수도 있다. 이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.In the above description, all the components constituting the embodiments of the present invention are described as being combined or operating in combination, but the present invention is not necessarily limited to the embodiments. In other words, within the scope of the present invention, all of the components may be selectively operated in combination with one or more. The above description is merely illustrative of the technical idea of the present invention, and those skilled in the art may make various modifications and changes without departing from the essential characteristics of the present invention. The scope of protection of the present invention should be interpreted by the following claims, and all technical ideas within the scope equivalent thereto should be construed as being included in the scope of the present invention.
Claims (4)
서비스 사용자로부터 사용자 작성 텍스트를 입력받는 정보 입력부;
채팅 서비스 제공 서버의 중계를 통한 하나 이상의 채팅 상대 단말기와의 채팅 진행시, 상기 하나 이상의 채팅 상대 단말기와의 채팅을 위한 채팅창을 표시하는 디스플레이부;
다수의 의사표현 이미지 아이템을 저장하고, 상기 다수의 의사표현 이미지 아이템을 포함하는 다수의 의사표현 이미지 아이템 목록을 저장하며, 상기 다수의 의사표현 이미지 아이템에 대한 서비스 사용자의 의사표현 이미지 아이템 사용 빈도 정보와 서비스 사용자의 스코어링 정보 및 리스코어링 정보를 저장하고, 다수의 의사표현 이미지 아이템에 포함된 아이콘 캐릭터의 표정이 다수의 감정 종류별로 표현된 다수의 감정 표현 아이콘을 저장하는 메모리부;
상기 메모리부에 저장되는 하나 이상의 의사 표현 이미지 아이템을 요소 정보에 따라 분류 관리하는 이미지 아이템 관리부; 및
상기 이미지 아이템 관리부의 분류 관리 정보에 기초한 머신 러닝을 처리하여 맞춤형 이미지 아이템 학습 모델을 생성하고, 상기 학습 모델을 이용하여 산출된 맞춤형 설정 정보를 획득하며, 상기 맞춤형 설정 정보에 기초한 추천 설정 정보를 생성하여 서비스 사용자에게 맞춤형 서비스를 제공하는 맞춤형 이미지 아이템 제공부를 포함하는 채팅 서비스를 제공하기 위한 사용자 단말기.
In the user terminal for providing a chat service,
An information input unit for receiving a user-written text from a service user;
A display unit configured to display a chat window for chatting with the one or more chatting counterpart terminals during a chat with one or more chatting counterpart terminals through a relay of a chat service providing server;
Store a plurality of expression image items, store a list of expression images items including the plurality of expression image items, and use frequency information of a service expression of the service user for the plurality of expression images items. And a memory unit configured to store scoring information and rescoring information of the service user, and to store a plurality of emotion expression icons in which the expressions of the icon characters included in the plurality of pseudo-expression image items are expressed for each emotion type.
An image item manager configured to classify one or more pseudo-expression image items stored in the memory unit according to element information; And
Machine learning based on classification management information of the image item management unit generates a customized image item learning model, obtains customized setting information calculated using the learning model, and generates recommended setting information based on the customized setting information. User terminal for providing a chat service comprising a custom image item providing unit for providing a customized service to the service user.
상기 이미지 아이템 관리부는 의사 표현 종류 정보, 이미지 타입 정보 및 사용자별 이용 횟수 정보 및 피드백 정보를 포함하는 스코어링 정보를 포함하는 것을 특징으로 하는 채팅 서비스를 제공하기 위한 사용자 단말기.
The method of claim 1,
And the image item manager comprises scoring information including intention expression type information, image type information, user usage count information, and feedback information.
상기 맞춤형 설정 정보는 맞춤형 의사표현 이미지 아이템 정보 및 맞춤형 의사표현 이미지 아이템 목록 정보를 포함하는 것을 특징으로 하는 채팅 서비스를 제공하기 위한 사용자 단말기.
The method of claim 1,
The custom setting information may include a personalized expression image item information and a personalized expression image item list information.
상기 추천 설정 정보는 상기 맞춤형 설정 정보를 기반으로 설정된 이동통신 단말기에서 서비스 사용자에게 추천하는 추천 의사표현 이미지 아이템 정보 및 추천 의사표현 이미지 아이템 목록 정보를 포함하는 것을 특징으로 하는 채팅 서비스를 제공하기 위한 사용자 단말기.The method of claim 1,
The recommendation setting information includes a recommendation expression image item information and recommendation expression image item list information recommended to a service user in a mobile communication terminal set based on the customized setting information. terminal.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020180097211A KR20200021648A (en) | 2018-08-21 | 2018-08-21 | User terminal for providing chatting service |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020180097211A KR20200021648A (en) | 2018-08-21 | 2018-08-21 | User terminal for providing chatting service |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20200021648A true KR20200021648A (en) | 2020-03-02 |
Family
ID=69805600
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020180097211A KR20200021648A (en) | 2018-08-21 | 2018-08-21 | User terminal for providing chatting service |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20200021648A (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20220090304A (en) * | 2020-12-22 | 2022-06-29 | 주식회사 카카오 | Content recommendation method and user terminal |
KR20230079706A (en) * | 2021-11-29 | 2023-06-07 | 김규환 | A character generating apparatus that responds to a reaction of a streamer and a viewer |
-
2018
- 2018-08-21 KR KR1020180097211A patent/KR20200021648A/en not_active Application Discontinuation
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20220090304A (en) * | 2020-12-22 | 2022-06-29 | 주식회사 카카오 | Content recommendation method and user terminal |
JP2022099331A (en) * | 2020-12-22 | 2022-07-04 | 株式会社カカオ | Content recommendation method and user terminal |
KR20230079706A (en) * | 2021-11-29 | 2023-06-07 | 김규환 | A character generating apparatus that responds to a reaction of a streamer and a viewer |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110750971B (en) | Context-based auto-completion suggestion | |
US11366846B2 (en) | Apparatus and a method for providing expression item services which constructing digital communication environments | |
US20150301795A1 (en) | Crowd sourced based training for natural language interface systems | |
US20220078141A1 (en) | Systems and methods for combining and summarizing emoji responses to generate a text reaction from the emoji responses | |
CN110022258A (en) | A kind of conversation controlling method and device, electronic equipment of instant messaging | |
CN111241259A (en) | Interactive information recommendation method and device | |
US11128591B1 (en) | Dynamic interaction of a dynamic ideogram in an electronic messaging environment | |
CN112883181A (en) | Session message processing method and device, electronic equipment and storage medium | |
KR20200021648A (en) | User terminal for providing chatting service | |
US20230043260A1 (en) | Persisting an AI-supported conversation across multiple channels | |
KR20200021663A (en) | Recording Midium | |
KR20200073497A (en) | Method for providing chatting service in user treminal, and the program stored in medium for executing the method | |
KR20200073496A (en) | User treminal for providing chatting service | |
KR20190134080A (en) | Apparatus for providing chatting service | |
KR20200021660A (en) | Program for providing chatting service | |
KR20200021655A (en) | Method for providing chatting service in user terminal | |
KR20200021652A (en) | System for providing chatting service | |
US20240106769A1 (en) | Device for providing message service for actively building expression item database including sub-expression items and method therefor | |
KR20190134049A (en) | User treminal for providing chatting service | |
KR20210039618A (en) | Apparatus for processing a message that analyzing and providing feedback expression items | |
KR20210039626A (en) | Program of processing a message that analyzing and providing feedback expression items | |
KR20210039608A (en) | Recording Medium | |
KR20190134082A (en) | Method for providing chatting service | |
KR20200101537A (en) | Method for processing a message that provides feedback expression items | |
CN112148133A (en) | Method, device, equipment and computer storage medium for determining recommended expression |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E902 | Notification of reason for refusal | ||
E601 | Decision to refuse application |