KR20210146540A - 커뮤니케이션 제공 방법, 그리고 이를 구현하기 위한 사용자 단말 및 커뮤니케이션 제공 장치 - Google Patents

커뮤니케이션 제공 방법, 그리고 이를 구현하기 위한 사용자 단말 및 커뮤니케이션 제공 장치 Download PDF

Info

Publication number
KR20210146540A
KR20210146540A KR1020200063439A KR20200063439A KR20210146540A KR 20210146540 A KR20210146540 A KR 20210146540A KR 1020200063439 A KR1020200063439 A KR 1020200063439A KR 20200063439 A KR20200063439 A KR 20200063439A KR 20210146540 A KR20210146540 A KR 20210146540A
Authority
KR
South Korea
Prior art keywords
communication
analysis target
user terminal
extracting
user
Prior art date
Application number
KR1020200063439A
Other languages
English (en)
Inventor
윤승현
Original Assignee
삼성에스디에스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성에스디에스 주식회사 filed Critical 삼성에스디에스 주식회사
Priority to KR1020200063439A priority Critical patent/KR20210146540A/ko
Publication of KR20210146540A publication Critical patent/KR20210146540A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/50Business processes related to the communications industry
    • G06Q50/30
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying
    • G06F16/9032Query formulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying
    • G06F16/90335Query processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/904Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/40Processing or translation of natural language
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04804Transparency, e.g. transparent or translucent windows

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Mathematical Physics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Artificial Intelligence (AREA)
  • Operations Research (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Information Transfer Between Computers (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명의 일 실시예에 따른 사용자 단말에 의해 수행되는 방법은, 커뮤니케이션 화면에 표시되는 복수의 오브젝트에 대한 사용자 입력을 수신하는 단계; 사용자 입력에 기초하여 선택된 오브젝트와 관련된 분석 대상을 추출하는 단계; 및 기 저장되어 있는 커뮤니케이션 화면의 대화 히스토리 중 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 GUI(Graphic User Interface)를 생성하여 표시하는 단계를 포함한다.

Description

커뮤니케이션 제공 방법, 그리고 이를 구현하기 위한 사용자 단말 및 커뮤니케이션 제공 장치{COMMUNICATION PROVIDING METHOD, AND USER TERMINAL AND COMMUNICATION PROVIDING APPARATUS IMPLEMENTING THE SAME METHOD}
본 발명은 커뮤니케이션 제공 방법, 그리고 이를 구현하기 위한 사용자 단말 및 커뮤니케이션 제공 장치에 관한 것으로서, 보다 자세하게는, 커뮤니케이션과 연관된 검색을 수행하기 위한 커뮤니케이션 제공 방법, 그리고 이를 구현하기 위한 사용자 단말 및 커뮤니케이션 제공 장치에 관한 것이다.
원격 회의나 재택 근무 환경에서 주로 사용되는 채팅 서비스인 단체 채팅방의 경우 타임라인(timeline) 형태로 서비스를 제공하므로 대화를 주고받는 과정에서 필요한 정보가 빠르게 사라지고 다시 찾기 어려운 경우가 발생한다.
또한, 그룹 채팅의 특성상 대화의 맥락이 빠르게 변경되고, 중요한 정보와 그렇지 않은 정보가 섞여 있어 원하는 정보를 찾기 어려운 점이 있다. 대화의 유형에 있어서도 주로 대화를 이끌어가는 유형, 수동적으로 대답만 하는 유형, 이야기의 맥락과 다른 언급을 하는 유형 등 다양한 유형이 존재한다.
따라서, 단체 채팅방에서 원하는 정보를 다시 찾으려면 채팅방에서 이루어진 대화 전체를 타임라인을 따라 눈으로 직접 찾아보거나, 텍스트 검색을 통해 단어 하나하나를 넘겨보는 방식으로 보게 되므로, 빠르게 원하는 정보를 찾고자 하는 사용자의 니즈를 만족시키기 어렵다.
또한, 기존의 단체 채팅방 서비스에서 말풍선을 선택 시 말풍선의 내용을 저장 또는 공유하는 등의 기능을 제공하고 있지만, 이는 말풍선 하나에만 국한된 기능으로서, 사용자가 필요로 하는 대화 내용들을 모아 보는 기능은 제공되고 있지 않다.
등록특허공보 제10-2079221호(2020.02.13. 등록)
본 발명이 해결하고자 하는 기술적 과제는, 커뮤니케이션 화면 내에서 한 번의 사용자 인터랙션을 통해 사용자가 원하는 대화 내용을 재구성 또는 필터링하여 제공할 수 있는 커뮤니케이션 제공 방법, 그리고 이를 구현하기 위한 사용자 단말 및 커뮤니케이션 제공 장치를 제공하는 것이다.
본 발명이 해결하고자 하는 또 다른 기술적 과제는, 커뮤니케이션 화면 내에서 복수의 말풍선의 대화 내용을 분석하여 맥락에 맞는 필터링 결과를 제공할 수 있는 커뮤니케이션 제공 방법, 그리고 이를 구현하기 위한 사용자 단말 및 커뮤니케이션 제공 장치를 제공하는 것이다.
본 발명이 해결하고자 하는 또 다른 기술적 과제는, 커뮤니케이션 화면을 유지한 상태에서 별도의 레이어(layer)를 통해 사용자가 원하는 대화 내용만을 모아서 보여주는 색다른 사용자 경험(UX)을 제공할 수 있는 커뮤니케이션 제공 방법, 그리고 이를 구현하기 위한 사용자 단말 및 커뮤니케이션 제공 장치를 제공하는 것이다.
본 발명의 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 개시의 기술분야에서의 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
상기 기술적 과제를 해결하기 위한, 본 발명의 일 실시예에 따른 사용자 단말에 의해 수행되는 방법은, 커뮤니케이션 화면에 표시되는 복수의 오브젝트에 대한 사용자 입력을 수신하는 단계; 사용자 입력에 기초하여 선택된 오브젝트와 관련된 분석 대상을 추출하는 단계; 및 기 저장되어 있는 커뮤니케이션 화면의 대화 히스토리 중 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 GUI(Graphic User Interface)를 생성하여 표시하는 단계를 포함한다.
일 실시예로서, 상기 오브젝트는, 말풍선 또는 상기 말풍선에 대응하는 참여자의 이미지를 포함할 수 있다.
일 실시예로서, 상기 사용자 입력을 수신하는 단계는, 상기 복수의 오브젝트 중 어느 하나에 대한 롱 클릭 입력을 수신하는 단계를 포함할 수 있다.
일 실시예로서, 상기 사용자 입력을 수신하는 단계는, 상기 적어도 하나의 오브젝트에 대한 드래그 입력을 수신하는 단계; 및 상기 드래그 입력에 의해 선택된 적어도 하나의 오브젝트에 대한 롱 클릭 입력을 수신하는 단계를 포함할 수 있다.
일 실시예로서, 상기 분석 대상을 추출하는 단계는, 상기 선택된 오브젝트에 포함된 텍스트 또는 이미지로부터 분석 대상을 추출하는 단계를 포함할 수 있다.
일 실시예로서, 상기 분석 대상을 추출하는 단계는, 상기 선택된 오브젝트에 포함된 키워드, 사람 이름, 얼굴 이미지, 시간 정보, 질문 내용, 및 사용 언어 중 적어도 하나를 추출하는 단계를 포함할 수 있다.
일 실시예로서, 상기 방법은, 서버와 통신하는 단계; 상기 서버로 상기 분석 대상에 관한 정보를 전송하는 단계; 및 상기 서버로부터 상기 분석 대상과 연관된 적어도 하나의 오브젝트에 관한 정보를 수신하는 단계를 더 포함할 수 있다.
일 실시예로서, 상기 GUI를 생성하여 표시하는 단계는, 상기 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 팝업창을 생성하는 단계; 및 상기 팝업창을 상기 커뮤니케이션 화면 상에 오버랩하여 표시하는 단계를 포함할 수 있다.
일 실시예로서, 상기 GUI를 생성하여 표시하는 단계는, 상기 분석 대상과 연관된 적어도 하나의 오브젝트를 상기 커뮤니케이션 화면과 구분되는 별도의 영역에 표시하는 단계를 포함할 수 있다.
일 실시예로서, 상기 GUI를 생성하여 표시하는 단계는, 기 저장되어 있는 상기 커뮤니케이션 화면의 대화 히스토리 중 상기 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 복수의 검색 결과를 추출하는 단계; 상기 복수의 검색 결과 중 사용자의 응답 성공확률이 높은 검색 결과를 선택하는 단계; 및 상기 선택된 검색 결과에 기초하여 상기 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 GUI를 생성하는 단계를 포함할 수 있다.
일 실시예로서, 상기 GUI를 생성하여 표시하는 단계는, 상기 GUI에 포함된 적어도 하나의 오브젝트를 탐색하기 위한 드래그 입력을 수신하는 단계를 더 포함할 수 있다.
일 실시예로서, 상기 사용자 입력이 종료되면, 상기 GUI의 표시를 해제하는 단계를 더 포함할 수 있다.
일 실시예로서, 상기 GUI에 포함된 적어도 하나의 오브젝트에 관한 정보를 저장하는 단계를 더 포함할 수 있다.
일 실시예로서, 상기 GUI에 포함된 적어도 하나의 오브젝트를 상기 커뮤니케이션 화면에 추가하여 표시하는 단계를 더 포함할 수 있다.
상기 기술적 과제를 해결하기 위한, 본 발명의 일 실시예에 따른 커뮤니케이션 제공 장치에 의해 수행되는 커뮤니케이션 제공 방법은, 사용자 단말로부터 커뮤니케이션 화면에서 선택된 적어도 하나의 오브젝트에 대한 정보를 포함하는 검색 요청을 수신하는 단계; 검색 요청에 포함된 적어도 하나의 오브젝트에 관한 정보를 이용하여 분석 대상을 추출하는 단계; 기 저장되어 있는 커뮤니케이션 화면의 대화 히스토리 중 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 검색 결과를 추출하는 단계; 및 검색 결과를 사용자 단말로 제공하는 단계를 포함한다.
일 실시예로서, 상기 오브젝트는, 말풍선 또는 상기 말풍선에 대응하는 참여자의 이미지를 포함할 수 있다.
일 실시예로서, 상기 분석 대상을 추출하는 단계는, 상기 오브젝트에 관한 정보에 기초하여 상기 오브젝트에 포함된 텍스트 또는 이미지로부터 분석 대상을 추출하는 단계를 포함할 수 있다.
일 실시예로서, 상기 검색 결과를 추출하는 단계는, 상기 분석 대상이 말풍선 내 특수 문자, 특수 색상, 및 일정 중 어느 하나에 해당하는 경우, 상기 분석 대상과 유사한 단어 또는 색상을 포함하는 오브젝트의 검색 결과를 추출하는 단계를 포함할 수 있다.
일 실시예로서, 상기 검색 결과를 추출하는 단계는, 상기 분석 대상이 질문 내용에 해당하는 경우, 상기 질문 내용과 유사한 질문 및 답변 패턴을 포함하는 오브젝트의 검색 결과를 추출하는 단계를 포함할 수 있다.
일 실시예로서, 상기 검색 결과를 추출하는 단계는, 상기 분석 대상이 특정 키워드에 해당하는 경우, 상기 키워드가 소정 횟수 이상 포함된 오브젝트의 검색 결과를 추출하는 단계를 포함할 수 있다.
일 실시예로서, 상기 검색 결과를 추출하는 단계는, 상기 분석 대상이 특정 언어에 해당하는 경우, 상기 특정 언어를 사용자가 주로 사용하는 언어로 번역한 결과를 추출하는 단계를 포함할 수 있다.
일 실시예로서, 상기 검색 결과를 추출하는 단계는, 기 저장되어 있는 상기 커뮤니케이션 화면의 대화 히스토리에 기초하여, 복수의 검색 결과 중 사용자의 응답 성공확률이 높은 검색 결과를 선택하는 단계를 포함할 수 있다.
일 실시예로서, 상기 검색 결과를 상기 사용자 단말로 제공하는 단계는, 상기 검색 결과에 기초하여 상기 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 GUI를 생성하는 단계; 및 상기 GUI에 관한 정보를 상기 사용자 단말로 제공하는 단계를 포함할 수 있다.
상기 기술적 과제를 해결하기 위한, 본 발명의 일 실시예에 따른 사용자 단말은, 외부장치와 통신하는 통신부; 사용자 입력을 수신하는 사용자 입력부; 정보를 표시하는 디스플레이부; 커뮤니케이션 화면에 표시되는 복수의 오브젝트에 대한 사용자 입력을 수신하고, 사용자 입력에 기초하여 선택된 오브젝트와 관련된 분석 대상을 추출하고, 기 저장되어 있는 커뮤니케이션 화면의 대화 히스토리 중 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 GUI를 생성하여 표시하도록 디스플레이부를 제어하는 프로세서를 포함한다.
일 실시예로서, 상기 오브젝트는, 말풍선 또는 상기 말풍선에 대응하는 참여자의 이미지를 포함할 수 있다.
일 실시예로서, 상기 프로세서는, 상기 선택된 오브젝트에 포함된 텍스트 또는 이미지로부터 분석 대상을 추출할 수 있다.
일 실시예로서, 상기 프로세서는, 상기 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 팝업창을 생성하고, 상기 팝업창을 상기 커뮤니케이션 화면 상에 오버랩하여 표시하도록 상기 디스플레이부를 제어할 수 있다.
상기 기술적 과제를 해결하기 위한, 본 발명의 일 실시예에 따른 커뮤니케이션 제공 장치는, 하나 이상의 프로세서; 외부장치와 통신하는 통신 인터페이스; 프로세서에 의하여 수행되는 컴퓨터 프로그램을 로드(load)하는 메모리; 및 컴퓨터 프로그램을 저장하는 스토리지를 포함하되, 컴퓨터 프로그램은, 사용자 단말로부터 커뮤니케이션 화면에서 선택된 적어도 하나의 오브젝트에 대한 정보를 포함하는 검색 요청을 수신하는 동작, 검색 요청에 포함된 적어도 하나의 오브젝트에 관한 정보를 이용하여 분석 대상을 추출하는 동작, 기 저장되어 있는 커뮤니케이션 화면의 대화 히스토리 중 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 검색 결과를 추출하는 동작, 및 검색 결과를 사용자 단말로 제공하는 동작을 수행하기 위한 인스트럭션들(instructions)을 포함한다.
일 실시예로서, 상기 분석 대상을 추출하는 동작은, 상기 오브젝트에 관한 정보에 기초하여 상기 오브젝트에 포함된 텍스트 또는 이미지로부터 분석 대상을 추출하는 동작을 포함할 수 있다.
일 실시예로서, 상기 검색 결과를 추출하는 동작은, 기 저장되어 있는 상기 커뮤니케이션 화면의 대화 히스토리에 기초하여, 복수의 검색 결과 중 사용자의 응답 성공확률이 높은 검색 결과를 선택하는 동작을 포함할 수 있다.
도 1은 본 발명의 일 실시예에 따른 커뮤니케이션 제공 시스템의 구성을 도시한 블록도이다.
도 2는 도 1을 참조하여 설명한 사용자 단말의 구성을 도시한 블록도이다.
도 3은 도 1을 참조하여 설명한 커뮤니케이션 제공 장치의 하드웨어 구성을 도시한 구성도이다.
도 4는 도 2의 사용자 단말에 의해 수행되는 방법을 설명하기 위한 순서도이다.
도 5는 도 3의 커뮤니케이션 제공 장치에 의해 수행되는 커뮤니케이션 제공 방법을 설명하기 위한 순서도이다.
도 6은 본 발명의 일 실시예에 따른 하나의 말풍선과 연관된 말풍선의 모아 보기를 제공하는 사용자 인터페이스의 예이다.
도 7은 본 발명의 다른 실시예에 따른 둘 이상의 말풍선과 연관된 말풍선의 모아 보기를 제공하는 사용자 인터페이스의 예이다.
도 8은 본 발명의 또 다른 실시예에 따른 참여자의 얼굴 이미지를 선택하여 연관된 말풍선의 모아 보기를 제공하는 사용자 인터페이스의 예이다.
도 9는 본 발명의 몇몇 실시예에 따른 말풍선의 모아 보기에서 탐색 기능을 제공하는 예이다.
도 10은 본 발명의 몇몇 실시예에 따른 말풍선의 모아 보기를 해제하는 예이다.
도 11은 본 발명의 몇몇 실시예에 따른 말풍선의 모아 보기를 별도 영역 또는 채팅방으로 이동시키는 예이다.
도 12는 본 발명의 몇몇 실시예에 따른 사용자의 응답 성공확률에 따라 말풍선의 검색 결과를 선택하는 예이다.
이하, 첨부된 도면을 참조하여 본 개시의 바람직한 실시 예들을 상세히 설명한다. 본 개시의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 개시의 기술적 사상은 이하의 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 이하의 실시예들은 본 개시의 기술적 사상을 완전하도록 하고, 본 개시가 속하는 기술분야에서 통상의 지식을 가진 자에게 본 개시의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 개시의 기술적 사상은 청구항의 범주에 의해 정의될 뿐이다.
각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 개시를 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 개시의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 개시가 속하는 기술분야에서 통상의 지식을 가진 자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있다. 또 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다. 본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 개시를 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다.
또한, 본 개시의 구성 요소를 설명하는 데 있어서, 제1, 제2, A, B, (a), (b) 등의 용어를 사용할 수 있다. 이러한 용어는 그 구성 요소를 다른 구성 요소와 구별하기 위한 것일 뿐, 그 용어에 의해 해당 구성 요소의 본질이나 차례 또는 순서 등이 한정되지 않는다. 어떤 구성 요소가 다른 구성요소에 "연결", "결합" 또는 "접속"된다고 기재된 경우, 그 구성 요소는 그 다른 구성요소에 직접적으로 연결되거나 또는 접속될 수 있지만, 각 구성 요소 사이에 또 다른 구성 요소가 "연결", "결합" 또는 "접속"될 수도 있다고 이해되어야 할 것이다.
명세서에서 사용되는 "포함한다 (comprises)" 및/또는 "포함하는 (comprising)"은 언급된 구성 요소, 단계, 동작 및/또는 소자는 하나 이상의 다른 구성 요소, 단계, 동작 및/또는 소자의 존재 또는 추가를 배제하지 않는다.
이하, 본 개시의 몇몇 실시예들에 대하여 첨부된 도면에 따라 상세하게 설명한다.
도 1은 본 발명의 일 실시예에 따른 커뮤니케이션 제공 시스템의 구성을 도시한 블록도이다. 도 1을 참조하면, 본 발명의 실시예에 따른 커뮤니케이션 제공 시스템은 사용자 단말(10) 및 커뮤니케이션 제공 장치(100)를 포함한다.
커뮤니케이션 제공 장치(100)는 예컨대 메신저(messenger)의 채팅방 서비스, 및 이메일 서비스 등과 같이 복수의 사용자 간 커뮤니케이션을 위한 서비스를 제공하는 장치로 구현될 수 있다.
커뮤니케이션 제공 장치(100)는 서버(110)와 데이터베이스(120)를 포함하고, 사용자 단말(10)로부터 수신되는 커뮤니케이션 화면에서의 검색 요청을 처리하여, 그 결과를 제공한다.
서버(110)는 고정식 컴퓨팅 장치로서, 사용자 단말(10) 및 데이터 저장부(30)와 네트워크를 통해 연결된다. 서버(110)는 사용자 단말(10)로부터 수신되는 커뮤니케이션 화면에서의 대한 검색 요청에 대해, 데이터 저장부(30)에 저장되어 있는 커뮤니케이션 화면의 대화 히스토리 데이터를 이용하여 검색 결과를 추출한다. 이 때, 사용자 단말(10)에 표시되는 커뮤니케이션 화면은 예컨대 메신저의 채팅방 서비스, 또는 이메일 서비스를 제공하는 어플리케이션의 화면으로 구현될 수 있다.
데이터 저장부(30)는 커뮤니케이션 제공 장치(100)와 네트워크로 연결되어 있는 별도의 외부 장치 또는 DB 서버로 구현될 수 있고, 복수의 사용자 단말(10)에 의해 생성되는 커뮤니케이션 화면의 대화 히스토리 데이터를 시간 순서대로 저장할 수 있다.
이 때, 데이터 저장부(30)에 저장되는 데이터는 커뮤니케이션 화면에 표시되는 복수의 오브젝트에 관한 정보를 포함한다. 복수의 오브젝트에 관한 정보는 예컨대, 말풍선에 담긴 대화 정보 및 말풍선 각각에 대응하는 참여자의 얼굴 이미지를 포함하는 참여자 정보 등을 포함할 수 있다.
서버(110)는 사용자 단말(10)로부터 요청이 발생할 때마다 데이터 저장부(30)로 필요한 데이터를 요청할 수 있다. 서버(110)는 데이터 저장부(30)로부터 전송받은 데이터를 이용하여 검색 결과를 추출하기 위한 분석을 수행하고, 이에 따른 검색 결과를 사용자 단말(10)로 제공할 수 있다.
데이터베이스(120)는 서버(110)가 데이터 저장부(30)로부터 수신한 커뮤니케이션 화면의 대화 히스토리 데이터 중 커뮤니케이션에 관한 정보(121)를 저장한다. 커뮤니케이션에 관한 정보(121)는 예컨대, 채팅방의 생성일자, 참여자 정보, 대화 정보, 및 이미지 정보 등을 포함할 수 있다.
데이터베이스(120)는 서버(110)가 사용자 단말(10)로부터 수신한 오브젝트에 대한 정보로부터 추출한 분석 대상에 관한 정보(122)를 저장한다. 분석 대상에 관한 정보(122)는 사용자 단말(10)의 커뮤니케이션 화면에서 선택된 오브젝트에 포함된 텍스트 또는 이미지로부터 추출한 정보로, 예컨대 말풍선 내 특수 문자, 특정 색상, 일정, 질문 내용, 특정 키워드, 및 특정 언어 등을 포함할 수 있다.
또한, 데이터베이스(120)는 서버(110)가 커뮤니케이션에 관한 정보(121)로부터 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 복수의 검색 결과를 추출하여 얻은 검색 결과 정보(123)를 저장한다.
데이터베이스(120)는 커뮤니케이션 제공 장치(100)의 서버(110)에서 처리된 분석 대상 및 검색 결과와 관련된 모든 정보를 저장하는 DB 서버로 구현될 수 있다.
사용자 단말(10)은 예컨대, 스마트 폰, 스마트 워치(watch), 태블릿 PC, 랩톱 PC, PDA, VR(Virtual Reality) 영상 장치, AR(Augmented Reality) 영상 장치 등과 같은 이동식 컴퓨팅 장치, 및 개인용 데스크탑 PC와 같은 고정식 컴퓨팅 장치 중 어느 하나일 수 있다. 사용자 단말(10)은 커뮤니케이션 제공 장치(100)의 서버(110)로 커뮤니케이션 화면에 표시되는 복수의 오브젝트 중 선택한 오브젝트에 관한 정보를 포함하는 검색을 요청하고, 서버(110)로부터 제공되는 검색 결과를 GUI(Graphic User Interface)의 형태로 제공하는 단말기로 구현될 수 있다.
상기와 같이 본 발명의 실시예에 따른 커뮤니케이션 제공 시스템의 구성에 의하면, 커뮤니케이션 화면 내에서 사용자가 원하는 대화 내용만을 모아서 보여주는 색다른 사용자 경험(UX)을 제공해줄 수 있다.
도 2는 도 1을 참조하여 설명한 사용자 단말의 구성을 도시한 블록도이다.
도시된 바와 같이, 본 발명의 실시예에 따른 사용자 단말(10)은 서버(110)와 네트워크로 연결된다.
사용자 단말(10)은 사용자 입력부(1010), 디스플레이부(1020), 저장부(1030), 통신부(1040), 및 프로세서(1050)의 구성을 포함한다. 사용자 단말(10)은 예컨대, 스마트 폰, 스마트 워치(watch), 태블릿 PC, 랩톱 PC, PDA, VR(Virtual Reality) 영상 장치, AR(Augmented Reality) 영상 장치 등과 같은 이동식 컴퓨팅 장치, 및 개인용 데스크탑 PC와 같은 고정식 컴퓨팅 장치 중 어느 하나일 수 있다. 사용자 단말(10)에 포함되는 구성은 앞서 기재된 일 실시예에 의해 한정되지 않고 추가적인 다른 구성을 포함하여 구현될 수 있다.
통신부(1040)는 서버(110)와 유선 또는 무선 통신방식을 이용하여 통신한다. 통신부(1040)는 이더넷(Ethernet) 등과 같은 유선 통신방식으로 서버(110)와 통신하거나, 와이파이(Wi-Fi) 또는 블루투스(Bluetooth) 등과 같은 무선 통신방식으로 무선공유기를 통해 서버(110)와 통신할 수 있다. 예로서, 통신부(1040)는 와이파이와 같은 무선통신 모듈을 포함하는 회로기판(PCB: Printed Circuit Board)으로 마련될 수 있다. 통신부(1040)가 통신하는 방식은 이에 한정되지 않고, 다른 통신방식을 이용하여 서버(110)와 통신할 수도 있다.
디스플레이부(1020)는 정보를 표시한다. 예로서, 디스플레이부(1020)는 영상신호에 기반한 영상을 표시할 수 있다. 디스플레이부(1020)는 PDP(Plasma Display Panel), LCD(Liquid Crystal Display), OLED(Organic Light Emitting Diodes), 플렉시블 디스플레이(flexible display) 등 다양한 형태로 구현될 수 있다.
사용자 입력부(1010)는 사용자 입력을 수신한다. 예로서, 사용자 입력부(1010)는 디스플레이부(1020)에 표시되는 사용자 인터페이스(User Interface)의 일부를 선택하기 위한 사용자입력을 수신할 수 있다. 사용자 입력부(1010)는 사용자 단말(10)과 연결되는 키보드, 마우스 등으로 구현될 수 있고, 사용자 단말(10)에 마련되는 터치스크린으로 구현될 수도 있다.
저장부(1030)는 제1메모리(미도시)와 제2메모리(미도시)를 포함하고, 제1메모리는 사용자 단말(10)의 시스템 전원의 제공 유무와 무관하게 데이터를 보존할 수 있도록 플래시메모리(flash-memory)와 같은 비휘발성 메모리로 구현된다.
제1메모리는 적어도 하나의 어플리케이션을 실행하기 위한 복수의 인스트럭션(instruction)을 저장한다. 제1메모리는 저장된 복수의 인스트럭션 각각에 대해 독취(read), 기록(write), 수정(edit), 삭제(delete), 갱신(update) 등이 수행되도록 한다.
제2메모리는 제1메모리와 프로세서(1050) 사이에 마련되는 고속 버퍼 메모리로서, 캐시메모리(cache memory) 또는 로컬메모리(local memory)라고 한다. 제2메모리는 플래시메모리에 비해 고속이며 프로세서(1050)에 의해 직접 액세스 가능하다. 제2메모리는 프로세서(1050)에 의해 자주 액세스되는 데이터나 프로그램 명령을 반복적으로 검색하지 않고 즉각 사용할 수 있도록 저장해두는 영역으로서, 예컨대 RAM으로 구현될 수 있다. 일실시예로서 제2메모리는, 예컨대, 프로세서(1050)의 내부에 일체로 마련될 수도 있다.
프로세서(174)는 예컨대 CPU(Central Processing Unit)로 구현될 수 있다.
프로세서(1050)는 커뮤니케이션 화면에 표시되는 복수의 오브젝트에 대한 사용자 입력을 수신하고, 사용자 입력에 기초하여 선택된 오브젝트와 관련된 분석 대상을 추출한다. 여기서, 오브젝트는 말풍선 또는 말풍선에 대응하는 참여자의 프로필 이미지를 포함할 수 있다.
일 실시예로서, 프로세서(1050)는 사용자 입력을 수신 시, 복수의 오브젝트 중 어느 하나에 대한 롱 클릭 입력을 수신할 수 있다. 또한, 프로세서(1050)는 사용자 입력을 수신 시, 적어도 하나의 오브젝트에 대한 드래그 입력을 수신하고, 드래그 입력에 의해 선택된 적어도 하나의 오브젝트에 대한 롱 클릭 입력을 수신할 수 있다.
일 실시예로서, 프로세서(1050)는 선택된 오브젝트에 포함된 텍스트 또는 이미지로부터 분석 대상을 추출할 수 있다. 여기서, 프로세서(1050)는 선택된 오브젝트에 포함된 키워드, 사람 이름, 얼굴 이미지, 시간 정보, 질문 내용, 및 사용 언어 중 적어도 하나를 추출할 수 있다.
프로세서(1050)는 기 저장되어 있는 커뮤니케이션 화면의 대화 히스토리 중 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 GUI를 생성하여 표시하도록 디스플레이부(1020)를 제어한다. 여기서, 커뮤니케이션 화면의 대화 히스토리는 저장부(1030)에 저장되어 있거나, 서버(110) 또는 서버(110)와 연결된 데이터 저장부(30)에 저장되어 있을 수 있다.
일 실시예로서, 프로세서(1050)는 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 팝업창을 생성하고, 팝업창을 커뮤니케이션 화면 상에 오버랩하여 표시하도록 디스플레이부(1020)를 제어할 수 있다.
일 실시예로서, 프로세서(1050)는 분석 대상과 연관된 적어도 하나의 오브젝트를 커뮤니케이션 화면과 구분되는 별도의 영역에 표시하도록 디스플레이부(1020)를 제어할 수 있다.
일 실시예로서, 프로세서(1050)는 저장부(1030)에 기 저장되어 있는 커뮤니케이션 화면의 대화 히스토리 중 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 복수의 검색 결과를 추출하고, 복수의 검색 결과 중 사용자의 응답 성공확률이 높은 검색 결과를 선택하고, 선택된 검색 결과에 기초하여 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 GUI를 생성하도록 디스플레이부(1020)를 제어할 수 있다.
일 실시예로서, 프로세서(1050)는 사용자 입력이 종료되면, GUI의 표시를 해제할 수 있다. 또한, 프로세서(1050)는 GUI에 포함된 적어도 하나의 오브젝트에 관한 정보를 저장할 수 있다.
일 실시예로서, 프로세서(1050)는 GUI에 포함된 적어도 하나의 오브젝트를 커뮤니케이션 화면에 추가하여 표시할 수 있다.
상기와 같이, 본 발명의 일 실시예에 의한 사용자 단말(10)에 의하면, 채팅방과 같은 커뮤니케이션 화면 내에서 한 번의 사용자 인터랙션을 통해 사용자가 원하는 대화 내용을 재구성 또는 필터링하여 제공할 수 있다. 즉, 채팅방에 타임라인 형태로 표시되는 대화들 중 사용자가 관심있는 대화만을 모아서 별도의 인터페이스로 제공해줄 수 있다.
도 3은 도 1을 참조하여 설명한 커뮤니케이션 제공 장치의 하드웨어 구성을 도시한 구성도이다.
도시된 바와 같이, 커뮤니케이션 제공 장치(100)의 서버(110)는 컴퓨팅 장치로서, 하나 이상의 프로세서(101), 버스(107), 네트워크 인터페이스(102), 프로세서(101)에 의하여 수행되는 컴퓨터 프로그램(105)을 로드(load)하는 메모리(103)와, 컴퓨터 프로그램(105)를 저장하는 스토리지(104)를 포함할 수 있다. 다만, 도 3에는 본 발명의 실시예와 관련 있는 구성요소들 만이 도시되어 있다. 따라서, 본 발명이 속한 기술분야의 통상의 기술자라면 도 3에 도시된 구성요소들 외에 다른 범용적인 구성 요소들이 더 포함될 수 있음을 알 수 있다. 도 3에 도시된 커뮤니케이션 제공 장치(100)의 서버(110)는 IaaS(Infrastructure-as-a-Service) 방식의 클라우드 서비스를 제공하는 서버팜(server farm)에 소속된 물리 서버 중 어느 하나를 가리킬 수 있다.
프로세서(101)는 커뮤니케이션 제공 장치(100)의 서버(110)의 각 구성의 전반적인 동작을 제어한다. 프로세서(101)는 CPU(Central Processing Unit), MPU(Micro Processor Unit), MCU(Micro Controller Unit), GPU(Graphic Processing Unit) 또는 본 발명의 기술 분야에 잘 알려진 임의의 형태의 프로세서 중 적어도 하나를 포함하여 구성될 수 있다. 또한, 프로세서(101)는 본 발명의 다양한 실시예들에 따른 방법/동작을 실행하기 위한 적어도 하나의 애플리케이션 또는 프로그램에 대한 연산을 수행할 수 있다. 커뮤니케이션 제공 장치(100)의 서버(110)는 하나 이상의 프로세서를 구비할 수 있다.
메모리(103)는 각종 데이터, 명령 및/또는 정보를 저장한다. 메모리(103)는 본 발명의 다양한 실시예들에 따른 방법/동작들을 실행하기 위하여 스토리지(104)로부터 하나 이상의 프로그램(105)을 로드(load) 할 수 있다. 예를 들어, 컴퓨터 프로그램(105)이 메모리(103)에 로드 되면, 로직(또는 모듈)이 메모리(103) 상에 구현될 수 있다. 메모리(103)의 예시는 RAM이 될 수 있으나, 이에 한정되는 것은 아니다.
버스(107)는 커뮤니케이션 제공 장치(100)의 서버(110)의 구성 요소 간 통신 기능을 제공한다. 버스(107)는 주소 버스(Address Bus), 데이터 버스(Data Bus) 및 제어 버스(Control Bus) 등 다양한 형태의 버스로 구현될 수 있다.
네트워크 인터페이스(102)는 커뮤니케이션 제공 장치(100)의 서버(110)의 유무선 인터넷 통신을 지원한다. 네트워크 인터페이스(102)는 인터넷 통신 외의 다양한 통신 방식을 지원할 수도 있다. 이를 위해, 네트워크 인터페이스(102)는 본 발명의 기술 분야에 잘 알려진 통신 모듈을 포함하여 구성될 수 있다.
스토리지(104)는 하나 이상의 컴퓨터 프로그램(105)을 비임시적으로 저장할 수 있다. 스토리지(104)는 플래시 메모리 등과 같은 비휘발성 메모리, 하드 디스크, 착탈형 디스크, 또는 본 발명이 속하는 기술 분야에서 잘 알려진 임의의 형태의 컴퓨터로 읽을 수 있는 기록 매체를 포함하여 구성될 수 있다. 또한, 스토리지(104)는 본 발명의 실시예에 따라 서버(110)가 수행하는 커뮤니케이션 제공 방법에 의해 제공되는 검색 결과 정보 등을 저장할 수 있다.
컴퓨터 프로그램(105)은 본 발명의 다양한 실시예들에 따른 방법/동작들이 구현된 하나 이상의 인스트럭션들(instructions)을 포함할 수 있다. 예를 들어, 컴퓨터 프로그램(105)은 사용자 단말(10)로부터 커뮤니케이션 화면에서 선택된 적어도 하나의 오브젝트에 대한 정보를 포함하는 검색 요청을 수신하는 동작, 검색 요청에 포함된 적어도 하나의 오브젝트에 관한 정보를 이용하여 분석 대상을 추출하는 동작, 커뮤니케이션 제공 장치(100)의 데이터베이스(120)에 기 저장되어 있는 커뮤니케이션 화면의 대화 히스토리 중 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 검색 결과를 추출하는 동작, 및 상기 검색 결과를 사용자 단말(10)로 제공하는 동작을 수행하기 위한 인스트럭션들을 포함할 수 있다.
일 실시예로서, 분석 대상을 추출하는 동작은, 오브젝트에 관한 정보에 기초하여 오브젝트에 포함된 텍스트 또는 이미지로부터 분석 대상을 추출하는 동작을 포함할 수 있다.
일 실시예로서, 검색 결과를 추출하는 동작은, 커뮤니케이션 제공 장치(100)의 데이터베이스(120)에 기 저장되어 있는 커뮤니케이션 화면의 대화 히스토리에 기초하여, 복수의 검색 결과 중 사용자의 응답 성공확률이 높은 검색 결과를 선택하는 동작을 포함할 수 있다.
컴퓨터 프로그램(105)이 메모리(103)에 로드 되면, 프로세서(101)는 상기 하나 이상의 인스트럭션들을 실행시킴으로써 본 발명의 다양한 실시예들에 따른 방법/동작들을 수행할 수 있다.
상기와 같이, 본 발명의 실시예에 따른 커뮤니케이션 제공 장치(100)에 의하면, 채팅방과 같은 커뮤니케이션 화면에서 복수의 말풍선에 담긴 대화 내용 중 사용자가 관심 있는 대화와 연관된 말풍선에 관한 정보들을 수집하여 제공해 줄 수 있다.
도 4는 도 2의 사용자 단말에 의해 수행되는 방법을 설명하기 위한 순서도이다. 본 실시예에 따른 방법은 컴퓨팅 장치에 의하여 실행될 수 있고, 예컨대 사용자 단말(10)에 의해 실행될 수 있다.
본 실시예에 따른 방법을 실행하는 상기 컴퓨팅 장치는 프로그램 개발 환경을 구비한 컴퓨팅 장치이거나, 응용 프로그램 실행 환경을 구비한 컴퓨팅 장치일 수 있다. 본 실시예에 따른 방법에 포함되는 일부 동작의 수행 주체에 대한 기재가 생략될 수 있으며, 그러한 경우 그 주체는 상기 컴퓨팅 장치임을 유의한다.
도 4를 참조하면, 먼저, 동작 S41에서, 커뮤니케이션 화면에 표시되는 복수의 오브젝트에 대한 사용자 입력이 수신된다. 여기서, 오브젝트는 예컨대 말풍선 또는 말풍선에 대응하는 참여자의 이미지를 포함할 수 있다.
일 실시예로서, 동작 S41은, 복수의 오브젝트 중 어느 하나에 대한 롱 클릭 입력을 수신하는 동작을 포함할 수 있다. 예로서, 채팅방에 표시되는 말풍선이나 참여자의 프로필 이미지를 롱 클릭하는 단순한 제스처에 의해 해당 말풍선이나 해당 참여자와 연관된 대화 내용들을 제공해줄 수 있다.
일 실시예로서, 동작 S41은, 적어도 하나의 오브젝트에 대한 드래그 입력을 수신하는 동작, 및 드래그 입력에 의해 선택된 적어도 하나의 오브젝트에 대한 롱 클릭 입력을 수신하는 동작을 포함할 수 있다. 예로서, 채팅방에 표시되는 두 개 이상의 말풍선 또는 두 명 이상의 참여자의 프로필 이미지를 드래그 하여 선택하는 제1제스처와, 드래그한 상태에서 롱 클릭하는 제2제스처를 사용하여, 선택된 두 개 이상의 말풍선 또는 두 명 이상의 참여자와 연관된 대화 내용들을 제공해줄 수 있다. 여기서, 적어도 하나의 오브젝트를 선택하기 위한 사용자 입력은 본 발명의 실시예에 의해 한정되지 않고, 다양한 방식의 터치 입력 또는 제스처 입력 등으로 구현될 수 있다.
다음으로, 동작 S42에서, 사용자 입력에 기초하여 선택된 오브젝트와 관련된 분석 대상이 추출된다. 이 때, 동작 S42는, 선택된 오브젝트에 포함된 텍스트 또는 이미지로부터 분석 대상을 추출하는 동작을 포함할 수 있다.
일 실시예로서, 동작 S42는, 선택된 오브젝트에 포함된 키워드, 사람 이름, 얼굴 이미지, 시간 정보, 질문 내용, 및 사용 언어 중 적어도 하나를 추출하는 동작을 포함할 수 있다.
예로서, 도 6에 도시된 바와 같이, 채팅방(60)에 표시되는 말풍선(61)을 롱 클릭(63)하면, 말풍선(61) 내에 포함되어 있는 참여자의 이름, 예컨대 '@David'(62)가 분석 대상으로 추출되고, 이로부터 참여자의 이름인 '@David'을 언급한 말풍선들(64, 65, 66)을 모아서 팝업창(67)에 보여줄 수 있다.
다른 예로서, 사용자가 채팅방에 표시되는 말풍선을 롱 클릭하면, 말풍선 내에 포함되어 있는 질문 내용을 분석 대상으로 추출하고, 이로부터 질문 내용과 유사한 질문 또는 답변을 포함하는 말풍선들을 모아서 보여줄 수 있다.
또 다른 예로서, 도 8에 도시된 바와 같이, 채팅방(80)에 표시되는 참여자의 프로필 이미지(81)을 롱 클릭(82)하면, 해당 참여자(87)가 작성한 말풍선들(83, 84, 85)을 모아서 팝업창(86)에 보여줄 수 있다.
일 실시예로서, 사용자가 채팅방에 표시되는 말풍선을 롱 클릭하면, 말풍선 내에 포함되어 있는 일정(schedule), 기한(due date), 날짜, 시간 등과 같은 시간 정보를 분석 대상으로 추출하고, 이로부터 시간 정보와 연관된 일정을 언급하고 있는 말풍선들을 모아서 보여줄 수 있다.
일 실시예로서, 도 7에 도시된 바와 같이, 채팅방(70)에 표시되는 말풍선들 및 프로필 이미지 이외의 영역을 클릭한 후, 드래그(73)를 통해 두 개의 말풍선(71, 72)를 선택하여 롱 클릭(74)하면, 두 개의 말풍선(71, 72) 내에 포함되어 있는 일정에 관한 논쟁이 담긴 대화를 분석 대상으로 추출하고, 이로부터 과거 채팅방에서 해당 일정을 언급했던 말풍선들(75, 76)을 찾아내어 팝업창(77)에 보여줄 수 있다.
일 실시예로서, 사용자가 채팅방에 표시되는 말풍선을 롱 클릭하면, 말풍선 내에 포함되어 있는 언어를 분석 대상으로 추출하고, 이로부터 추출된 언어가 사용자가 채팅방 내에서 주로 사용하는 언어와 다른 경우, 주로 사용하는 언어로 번역한 내용을 제공해줄 수 있다.
일 실시예로서, 동작 S42은, 서버(110)와 통신하는 동작, 서버(110)로 분석 대상에 관한 정보가 전송되는 동작, 서버(110)로부터 분석 대상과 연관된 적어도 하나의 오브젝트에 관한 정보가 수신되는 동작을 포함할 수 있다. 즉, 사용자 단말(10)에서 사용자에 의해 선택된 말풍선으로부터 분석 대상을 추출한 후, 분석 대상과 연관된 복수의 말풍선들을 모으는 동작을 직접 수행하지 않고, 서버(110)로 분석 대상에 관한 정보를 전송하여 서버(100)로부터 수행된 결과를 받을 수도 있다.
마지막으로, 동작 S43에서, 기 저장되어 있는 커뮤니케이션 화면의 대화 히스토리 중 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 GUI가 생성되어 표시된다.
여기서, 커뮤니케이션 화면의 대화 히스토리에 관한 정보는 본 발명의 실시예에 따른 방법을 수행하는 사용자 단말(10) 또는 컴퓨팅 장치에 저장되어 있을 수 있다. 또는, 커뮤니케이션 화면의 대화 히스토리에 관한 정보는 커뮤니케이션 제공 서비스를 제공하는 커뮤니케이션 제공 장치(100)의 데이터베이스(120) 또는 커뮤니케이션 제공 장치(100)와 별도로 마련되는 외부의 데이터 저장부(30)에 저장되어 있을 수 있다.
일 실시예로서, 동작 S43은, 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 팝업창이 생성되는 동작, 및 팝업창이 커뮤니케이션 화면 상에 오버랩되어 표시되는 동작을 포함할 수 있다.
예로서, 도 6에 도시된 바와 같이, 채팅방(60)에 표시된 말풍선(61)을 롱 클릭 시, 채팅방(60)의 이전 대화 히스토리 중 말풍선(61)으로부터 추출한 분석 대상과 연관 있는 말풍선들(64, 65, 66)을 모아서 팝업창(67)으로 보여줄 수 있다. 이 때, 팝업창(67)은 채팅방(60)의 화면 위에 오버랩하여 표시될 수 있다.
일 실시예로서, 동작 S43은, 분석 대상과 연관된 적어도 하나의 오브젝트를 커뮤니케이션 화면과 구분되는 별도의 영역에 표시하는 동작을 포함할 수 있다. 또한, 동작 S43은, GUI에 포함된 적어도 하나의 오브젝트가 커뮤니케이션 화면에 추가하여 표시되는 동작을 포함할 수 있다.
예로서, 도 11에 도시된 바와 같이, 채팅방(1100)에서 사용자에 의해 선택된 말풍선의 내용과 연관된 말풍선(1102)이 추출되면, 추출된 말풍선(1102)을 팝업창의 형태가 아닌 채팅방(1100)와 구분되는 별도의 화면 영역(1101)에 드래그(1103)하여 표시할 수 있다. 다른 예로서, 추출된 말풍선(1102)을 채팅방(1100) 내의 입력창(1104)으로 드래그(1105)하여 채팅방(1100)의 화면에 추가할 수도 있다.
일 실시예로서, 동작 S43은, 기 저장되어 있는 커뮤니케이션 화면의 대화 히스토리 중 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 복수의 검색 결과가 추출되는 동작, 복수의 검색 결과 중 사용자의 응답 성공확률이 높은 검색 결과가 선택되는 동작, 및 선택된 검색 결과에 기초하여 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 GUI가 생성되는 동작을 포함할 수 있다.
예로서, 도 12에 도시된 바와 같이, 채팅방(1200)에 표시되는 말풍선(1210)을 롱 클릭(1220)하면, 말풍선(1210)의 텍스트로부터 예컨대 사람 이름, 질문 및 답변, 일정과 같은 복수의 분석 대상이 추출될 수 있다.
이와 같이, 말풍선(1210)의 텍스트로부터 복수의 분석 대상이 추출될 수 있고, 각각의 분석 대상을 이용한 검색 결과1, 검색 결과 2, 및 검색 결과 3에 대해 각각의 우선 순위(1260)를 부여할 수 있다. 여기서, 우선 순위는 사용자의 응답 성공확률에 따라 부여될 수 있고, 사용자의 응답 성공확률은 기 저장된 채팅방의 대화 히스토리에서 해당 사용자 혹은 전체 참여자의 응답 성향을 분석하여 산출될 수 있다.
상기와 같이, 우선 순위(1260)에 따라 검색 결과 3이 선택(1270)되면, 검색 결과 3(1250)에 포함되어 있는 오브젝트 6, 오브젝트 7, 오브젝트 8을 포함하는 팝업창을 생성하여 표시할 수 있다.
일 실시예로서, 동작 S43은, GUI에 포함된 적어도 하나의 오브젝트를 탐색하기 위한 드래그 입력이 수신되는 동작을 포함할 수 있다. 예로서, 도 9에 도시된 바와 같이, 채팅방(90)에서 사용자의 롱 클릭에 의해 선택된 말풍선과 연관된 복수의 말풍선들을 포함하는 팝업창(94)이 표시되면, 롱 클릭(91)을 한 위치로부터 클릭을 유지한 상태에서 위쪽 또는 아래쪽 방향으로 드래그(93)하여 복수의 말풍선들을 탐색할 수 있다.
일 실시예로서, 동작 S43은, 사용자 입력이 종료되면, GUI의 표시가 해제되는 동작을 포함할 수 있다. 예로서, 도 10에 도시된 바와 같이, 채팅방(1001)에서 말풍선을 롱 클릭하여 연관된 복수의 말풍선들이 팝업창(1103)에 표시된 상태에서, 롱 클릭을 떼면 팝업창(1103)은 사라지고, 채팅방(1001)의 화면만 표시될 수 있다. 이와 같이, 본 발명의 실시예에 의하면, 단순한 사용자 인터랙션을 통해 사용자가 원하는 정보를 빠르게 얻거나 해제할 수 있다.
또한, 동작 S43은, GUI에 포함된 적어도 하나의 오브젝트에 관한 정보가 저장되는 동작을 포함할 수 있다. 예로서, 사용자의 롱 클릭에 의해 선택된 말풍선과 연관된 복수의 말풍선들이 모아지면, 모아진 복수의 말풍선들을 별도의 채팅방으로 저장하여, 사용자가 추후 활용하도록 할 수 있다.
상기와 같이, 본 발명의 실시예에 따른 커뮤니케이션 제공 방법에 의하면, 채팅방과 같은 커뮤니케이션 화면 내에서 한 번의 사용자 인터랙션을 통해 사용자가 원하는 대화 내용을 재구성 또는 필터링하여 제공할 수 있다. 또한, 채팅방 내에서 복수의 말풍선의 대화 내용을 분석하여 맥락에 맞는 필터링 결과를 제공할 수 있다.
도 5는 도 3의 커뮤니케이션 제공 장치에 의해 수행되는 커뮤니케이션 제공 방법을 설명하기 위한 순서도이다. 본 실시예에 따른 커뮤니케이션 제공 방법은 컴퓨팅 장치에 의하여 실행될 수 있고, 예컨대 커뮤니케이션 제공 장치(100)의 서버(110)에 의해 실행될 수 있다.
본 실시예에 따른 방법을 실행하는 상기 컴퓨팅 장치는 프로그램 개발 환경을 구비한 컴퓨팅 장치이거나, 응용 프로그램 실행 환경을 구비한 컴퓨팅 장치일 수 있다. 본 실시예에 따른 방법에 포함되는 일부 동작의 수행 주체에 대한 기재가 생략될 수 있으며, 그러한 경우 그 주체는 상기 컴퓨팅 장치임을 유의한다.
도 5를 참조하면, 먼저, 동작 S51에서, 사용자 단말로부터 커뮤니케이션 화면에서 선택된 적어도 하나의 오브젝트에 대한 정보를 포함하는 검색 요청이 수신된다. 여기서, 커뮤니케이션 화면은, 예컨대 메신저의 채팅방 서비스, 또는 이메일 서비스를 제공하는 화면일 수 있다. 또한, 오브젝트는 채팅방 화면에 표시되는 말풍선 또는 말풍선 각각에 대응하는 참여자의 프로필 이미지를 포함할 수 있다.
다음으로, 동작 S52에서, 검색 요청에 포함된 적어도 하나의 오브젝트에 관한 정보를 이용하여 분석 대상이 추출된다. 이 때, 동작 S52는, 오브젝트에 관한 정보에 기초하여 오브젝트에 포함된 텍스트 또는 이미지로부터 분석 대상이 추출되는 동작을 포함할 수 있다.
동작 S53에서는, 기 저장되어 있는 상기 커뮤니케이션 화면의 대화 히스토리 중 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 검색 결과가 추출된다.
일 실시예로서, 동작 S53은, 분석 대상이 말풍선 내 특수 문자, 특수 색상, 및 일정 중 어느 하나에 해당하는 경우, 분석 대상과 유사한 단어 또는 색상을 포함하는 오브젝트의 검색 결과를 추출하는 동작을 포함할 수 있다. 또한, 동작 S53은, 분석 대상이 질문 내용에 해당하는 경우, 질문 내용과 유사한 질문 및 답변 패턴을 포함하는 오브젝트의 검색 결과를 추출하는 동작을 포함할 수 있다.
일 실시예로서, 동작 S53은, 분석 대상이 특정 키워드에 해당하는 경우, 키워드가 소정 횟수 이상 포함된 오브젝트의 검색 결과를 추출하는 동작을 포함할 수 있다. 또한, 동작 S53은, 분석 대상이 특정 언어에 해당하는 경우, 특정 언어를 사용자가 주로 사용하는 언어로 번역한 결과를 추출하는 동작을 포함할 수 있다.
일 실시예로서, 동작 S53은, 기 저장되어 있는 커뮤니케이션 화면의 대화 히스토리에 기초하여, 복수의 검색 결과 중 사용자의 응답 성공확률이 높은 검색 결과를 선택하는 동작을 포함할 수 있다. 즉, 동작 S52에서 사용자에 의해 선택된 오브젝트로부터 다양한 종류의 분석 대상이 추출되면, 각각의 분석 대상에 대응하는 검색 결과가 산출될 수 있다. 이 때, 커뮤니케이션 화면의 과거 대화 히스토리를 이용하여 사용자 또는 전체 커뮤니케이션 참여자의 응답 성향을 분석함에 의해 복수의 검색 결과에 대한 우선 순위를 부여할 수 있다. 이에 따라, 우선 순위를 고려하여 복수의 검색 결과 중 사용자 응답 성공율이 높은 하나를 선택할 수 있게 된다.
마지막으로, 동작 S54에서, 동작 S53에서 추출된 검색 결과가 사용자 단말로 제공된다. 이 때, 동작 S54는, 검색 결과에 기초하여 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 GUI를 생성하는 동작, 및 GUI에 관한 정보를 사용자 단말로 제공하는 동작을 포함할 수 있다. 예로서, 사용자의 롱 클릭에 의해 선택된 말풍선과 연관된 말풍선들에 관한 정보만을 사용자 단말(10)로 제공할 수 있으나. 연관된 말풍선들을 포함하는 GUI를 직접 생성하여, 생성한 GUI에 관한 정보를 사용자 단말(10)로 제공할 수도 있다. 이에 따라, 사용자 단말(10)에서 제공된 GUI 정보를 이용하여 팝업창을 표시할 수 있다.
상기와 같이, 본 발명의 실시예에 따른 커뮤니케이션 제공 방법에 의하면, 채팅방과 같은 커뮤니케이션 화면 내에서 복수의 말풍선의 대화 내용을 분석하여 맥락에 맞는 필터링 결과를 제공할 수 있다. 또한, 채팅방과 같은 커뮤니케이션 화면 내에서 오랜 시간이 경과한 정보들도 빠르고 쉽게 찾아볼 수 있도록 하고, 원하는 정보만을 모아서 볼 수 있는 사용자 인터페이스를 제공해줄 수 있다.
도 6은 본 발명의 일 실시예에 따른 하나의 말풍선과 연관된 말풍선의 모아 보기를 제공하는 사용자 인터페이스의 예이다. 도시된 예에서, 본 발명의 실시예에 따라 사용자가 채팅방(60)에 표시되는 복수의 말풍선들 중 하나의 말풍선(61)을 선택함에 의해, 말풍선(61)에 담긴 내용을 분석하여 사용자가 찾아 보기를 원하는 이전의 대화 내용들을 찾아 제공할 수 있다.
도시된 바와 같이, 채팅방(60)에 표시되는 말풍선(61)을 롱 클릭(63)하면, 말풍선(61) 내에 포함되어 있는 참여자의 이름, 예컨대 '@David'(62)가 분석 대상으로 추출될 수 있다. 이로부터 채팅방의 이전 대화 히스토리 중 참여자의 이름인 '@David'을 언급한 말풍선들(64, 65, 66)을 모아서 팝업창(67)에 보여줄 수 있다.
도 7은 본 발명의 다른 실시예에 따른 둘 이상의 말풍선과 연관된 말풍선의 모아 보기를 제공하는 사용자 인터페이스의 예이다. 도시된 예에서, 본 발명의 실시예에 따라 사용자가 채팅방(70)에 표시되는 복수의 말풍선들 중 두 개의 말풍선(71, 72)을 선택함에 의해, 두 개의 말풍선(71, 72)에 담긴 대화 내용을 분석하여 사용자가 찾아 보기를 원하는 이전의 대화 내용들을 찾아 제공할 수 있다.
도시된 바와 같이, 채팅방(70)에 표시되는 말풍선들 및 프로필 이미지 이외의 영역을 클릭한 후, 드래그(73)를 통해 두 개의 말풍선(71, 72)를 선택하여 롱 클릭(74)하면, 두 개의 말풍선(71, 72) 내에 포함되어 있는 일정에 관한 논쟁이 담긴 대화를 분석 대상으로 추출하고, 이로부터 과거 채팅방에서 해당 일정을 언급했던 말풍선들(75, 76)을 찾아내어 팝업창(77)에 보여줄 수 있다.
도 8은 본 발명의 또 다른 실시예에 따른 참여자의 얼굴 이미지를 선택하여 연관된 말풍선의 모아 보기를 제공하는 사용자 인터페이스의 예이다. 도시된 예에서, 본 발명의 실시예에 따라 사용자가 채팅방(80)에 표시되는 참여자의 프로필 이미지(81)를 선택함에 의해, 프로필 이미지(81)에 해당하는 참여자가 작성했던 이전의 대화 내용들을 찾아 제공할 수 있다.
도시된 바와 같이, 채팅방(80)에 표시되는 참여자의 프로필 이미지(81)을 롱 클릭(82)하면, 프로필 이미지(81)에 대응하는 참여자(87)가 작성했던 말풍선들(83, 84, 85)을 모아서 팝업창(86)에 보여줄 수 있다.
도 9는 본 발명의 몇몇 실시예에 따른 말풍선의 모아 보기에서 탐색 기능을 제공하는 예이다. 도시된 예에서, 본 발명의 실시예에 따라 채팅방(90) 화면 위에 모아 보기를 위한 팝업창(94)이 표시된 상태에서 탐색 기능을 제공할 수 있다.
도시된 바와 같이, 채팅방(90)에서 사용자의 롱 클릭에 의해 선택된 말풍선과 연관된 복수의 말풍선들을 포함하는 팝업창(94)이 표시되면, 롱 클릭(91)을 한 위치로부터 클릭을 유지한 상태에서 위쪽 또는 아래쪽 방향으로 드래그(93)하여 복수의 말풍선들을 탐색할 수 있다. 이 때, 스크롤바(92)도 드래그(93)와 동일한 방향으로 이동될 수 있다. 또한, 복수의 말풍선들을 드래그(93)함에 있어 처음 클릭된 위치로부터 멀어질수록 빠르게 탐색될 수 있다.
도 10은 본 발명의 몇몇 실시예에 따른 말풍선의 모아 보기를 해제하는 예이다. 도시된 예에서, 본 발명의 실시예에 따라 채팅방(1001) 화면 위에 팝업창(1103)이 표시된 상태에서 간단한 사용자 조작으로 팝업창(1103)의 표시를 해제할 수 있다.
도시된 바와 같이, 채팅방(1001)에서 말풍선을 롱 클릭(1002)하여 연관된 복수의 말풍선들이 팝업창(1103)에 표시된 상태에서, 롱 클릭(1002)을 떼면 팝업창(1103)은 사라지고, 채팅방(1001)의 화면만 표시될 수 있다.
이와 같이, 본 발명의 실시예에 의하면, 단순한 사용자 인터랙션을 통해 사용자가 원하는 정보를 빠르게 모아볼 수 있을 뿐 아니라, 모아진 정보를 빠르게 화면에서 해제할 수도 있다.
도 11은 본 발명의 몇몇 실시예에 따른 말풍선의 모아 보기를 별도 영역 또는 채팅방으로 이동시키는 예이다. 도시된 예에서, 사용자에 의해 선택된 말풍선과 연관된 말풍선들을 채팅방(1100)과 구분되는 별도의 영역(1101) 또는 채팅방(1100) 내 입력창(1104)으로 이동시킬 수 있다.
도시된 바와 같이, 채팅방(1100)에서 사용자의 롱 클릭에 의해 선택된 말풍선과 연관된 말풍선(1102)이 추출되면, 말풍선(1102)을 팝업창의 형태가 아닌 채팅방(1100)와 구분되는 별도의 화면 영역(1101)에 드래그(1103)하여 표시할 수 있다. 다른 예로서, 추출된 말풍선(1102)을 채팅방(1100) 내의 입력창(1104)으로 드래그(1105)하여 채팅방(1100)의 화면에 추가할 수도 있다.
도 12는 본 발명의 몇몇 실시예에 따른 사용자의 응답 성공확률에 따라 말풍선의 검색 결과를 선택하는 예이다. 도시된 예에서, 본 발명의 실시예에 따라 사용자가 선택한 말풍선(1210)에서 여러 종류의 분석 대상이 추출될 수 있는 경우, 각각의 분석 대상과 연관된 이전 대화 내용들을 포함하는 검색 결과들 중 사용자 응답 성공확률이 높은 검색 결과를 우선적으로 제공할 수 있다.
도시된 바와 같이, 채팅방(1200)에 표시되는 말풍선(1210)을 롱 클릭(1220)하면, 말풍선(1210)의 텍스트로부터 예컨대 사람 이름, 질문 및 답변, 일정과 같은 복수의 분석 대상이 추출될 수 있다.
이 때, 말풍선(1210)으로부터 추출된 분석 대상이 사람 이름인 경우, 사람 이름과 연관된 복수의 말풍선을 포함하는 검색 결과1(1230)이 추출될 수 있다. 또한, 말풍선(1210)으로부터 추출된 분석 대상이 질문 및 답변인 경우, 질문 및 답변의 내용과 연관된 복수의 말풍선을 포함하는 검색 결과2(1240)가 추출될 수 있다. 또한, 말풍선(1210)으로부터 추출된 분석 대상이 일정인 경우, 해당 일정이 언급되었던 복수의 말풍선을 포함하는 검색 결과3(1250)이 추출될 수 있다.
이와 같이, 말풍선(1210)의 텍스트로부터 복수의 분석 대상이 추출될 수 있고, 각각의 분석 대상을 이용한 검색 결과1, 검색 결과 2, 및 검색 결과 3에 대해 각각의 우선 순위(1260)를 부여할 수 있다. 여기서, 우선 순위는 사용자의 응답 성공확률에 따라 부여될 수 있고, 사용자의 응답 성공확률은 기 저장된 채팅방의 대화 히스토리에서 해당 사용자 혹은 전체 참여자의 응답 성향을 분석하여 산출될 수 있다.
이와 같이 부여된 우선 순위(1260)에 따라 검색 결과 3이 선택(1270)되면, 검색 결과 3(1250)에 포함되어 있는 오브젝트 6, 오브젝트 7, 오브젝트 8을 포함하는 팝업창을 생성하여 표시할 수 있다.
상기와 같은 본 발명의 실시예에 의하면, 채팅방의 대화 내용 중 사용자가 찾아보기를 원하는 이전 대화 내용을 추출 시, 사용자 또는 전체 참여자의 응답 성향을 고려하여 사용자에게 가장 맥락에 맞는 정보를 제공해줄 수 있다.
상기와 같이, 본 발명의 실시예에 따른 커뮤니케이션 제공 방법에 의하면, 채팅방과 같은 커뮤니케이션 화면 내에서 한 번의 사용자 인터랙션을 통해 사용자가 원하는 대화 내용을 맥락에 맞게 재구성 또는 필터링하여 제공할 수 있다. 또한, 커뮤니케이션 화면을 유지한 상태에서 별도의 레이어(layer)를 통해 사용자가 원하는 대화 내용만을 모아서 보여주는 색다른 사용자 경험(UX)을 제공할 수 있다.
지금까지 도 1 내지 도 12를 참조하여 본 발명의 다양한 실시예들 및 그 실시예들에 따른 효과들을 언급하였다. 본 발명의 기술적 사상에 따른 효과들은 이상에서 언급한 효과들로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
지금까지 설명된 본 발명의 기술적 사상은 컴퓨터가 읽을 수 있는 매체 상에 컴퓨터가 읽을 수 있는 코드로 구현될 수 있다. 상기 컴퓨터로 읽을 수 있는 기록 매체는, 예를 들어 이동형 기록 매체(CD, DVD, 블루레이 디스크, USB 저장 장치, 이동식 하드 디스크)이거나, 고정식 기록 매체(ROM, RAM, 컴퓨터 구비 형 하드 디스크)일 수 있다. 상기 컴퓨터로 읽을 수 있는 기록 매체에 기록된 상기 컴퓨터 프로그램은 인터넷 등의 네트워크를 통하여 다른 컴퓨팅 장치에 전송되어 상기 다른 컴퓨팅 장치에 설치될 수 있고, 이로써 상기 다른 컴퓨팅 장치에서 사용될 수 있다.
이상에서, 본 발명의 실시예를 구성하는 모든 구성 요소들이 하나로 결합되거나 결합되어 동작하는 것으로 설명되었다고 해서, 본 발명의 기술적 사상이 반드시 이러한 실시예에 한정되는 것은 아니다. 즉, 본 발명의 목적 범위 안에서라면, 그 모든 구성요소들이 하나 이상으로 선택적으로 결합하여 동작할 수도 있다.
도면에서 동작들이 특정한 순서로 도시되어 있지만, 반드시 동작들이 도시된 특정한 순서로 또는 순차적 순서로 실행되어야만 하거나 또는 모든 도시 된 동작들이 실행되어야만 원하는 결과를 얻을 수 있는 것으로 이해되어서는 안 된다. 특정 상황에서는, 멀티태스킹 및 병렬 처리가 유리할 수도 있다. 더욱이, 위에 설명한 실시예들에서 다양한 구성들의 분리는 그러한 분리가 반드시 필요한 것으로 이해되어서는 안 되고, 설명된 프로그램 컴포넌트들 및 시스템들은 일반적으로 단일 소프트웨어 제품으로 함께 통합되거나 다수의 소프트웨어 제품으로 패키지 될 수 있음을 이해하여야 한다.
이상 첨부된 도면을 참조하여 본 발명의 실시예들을 설명하였지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 본 발명이 다른 구체적인 형태로도 실시될 수 있다는 것을 이해할 수 있다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로 이해해야만 한다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명에 의해 정의되는 기술적 사상의 권리범위에 포함되는 것으로 해석되어야 할 것이다.

Claims (25)

  1. 사용자 단말에 의해 수행되는 방법에 있어서,
    커뮤니케이션 화면에 표시되는 복수의 오브젝트에 대한 사용자 입력을 수신하는 단계;
    상기 사용자 입력에 기초하여 선택된 오브젝트와 관련된 분석 대상을 추출하는 단계; 및
    기 저장되어 있는 상기 커뮤니케이션 화면의 대화 히스토리 중 상기 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 GUI(Graphic User Interface)를 생성하여 표시하는 단계를 포함하는,
    사용자 단말에 의해 수행되는 방법.
  2. 제 1항에 있어서,
    상기 오브젝트는,
    말풍선 또는 상기 말풍선에 대응하는 참여자의 이미지를 포함하는,
    사용자 단말에 의해 수행되는 방법.
  3. 제 1항에 있어서,
    상기 사용자 입력을 수신하는 단계는,
    상기 복수의 오브젝트 중 어느 하나에 대한 롱 클릭 입력을 수신하는 단계를 포함하는,
    사용자 단말에 의해 수행되는 방법.
  4. 제 1항에 있어서,
    상기 사용자 입력을 수신하는 단계는,
    상기 적어도 하나의 오브젝트에 대한 드래그 입력을 수신하는 단계; 및
    상기 드래그 입력에 의해 선택된 적어도 하나의 오브젝트에 대한 롱 클릭 입력을 수신하는 단계를 포함하는,
    사용자 단말에 의해 수행되는 방법.
  5. 제 1항에 있어서,
    상기 분석 대상을 추출하는 단계는,
    상기 선택된 오브젝트에 포함된 텍스트 또는 이미지로부터 분석 대상을 추출하는 단계를 포함하는,
    사용자 단말에 의해 수행되는 방법.
  6. 제 1항에 있어서,
    상기 분석 대상을 추출하는 단계는,
    상기 선택된 오브젝트에 포함된 키워드, 사람 이름, 얼굴 이미지, 시간 정보, 질문 내용, 및 사용 언어 중 적어도 하나를 추출하는 단계를 포함하는,
    사용자 단말에 의해 수행되는 방법.
  7. 제 1항에 있어서,
    서버와 통신하는 단계;
    상기 서버로 상기 분석 대상에 관한 정보를 전송하는 단계; 및
    상기 서버로부터 상기 분석 대상과 연관된 적어도 하나의 오브젝트에 관한 정보를 수신하는 단계를 더 포함하는,
    사용자 단말에 의해 수행되는 방법.
  8. 제 1항에 있어서,
    상기 GUI를 생성하여 표시하는 단계는,
    상기 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 팝업창을 생성하는 단계; 및
    상기 팝업창을 상기 커뮤니케이션 화면 상에 오버랩하여 표시하는 단계를 포함하는,
    사용자 단말에 의해 수행되는 방법.
  9. 제 1항에 있어서,
    상기 GUI를 생성하여 표시하는 단계는,
    상기 분석 대상과 연관된 적어도 하나의 오브젝트를 상기 커뮤니케이션 화면과 구분되는 별도의 영역에 표시하는 단계를 포함하는,
    사용자 단말에 의해 수행되는 방법.
  10. 제 1항에 있어서,
    상기 GUI를 생성하여 표시하는 단계는,
    기 저장되어 있는 상기 커뮤니케이션 화면의 대화 히스토리 중 상기 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 복수의 검색 결과를 추출하는 단계;
    상기 복수의 검색 결과 중 사용자의 응답 성공확률이 높은 검색 결과를 선택하는 단계; 및
    상기 선택된 검색 결과에 기초하여 상기 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 GUI를 생성하는 단계를 포함하는,
    사용자 단말에 의해 수행되는 방법.
  11. 제 1항에 있어서,
    상기 GUI를 생성하여 표시하는 단계는,
    상기 GUI에 포함된 적어도 하나의 오브젝트를 탐색하기 위한 드래그 입력을 수신하는 단계를 더 포함하는,
    사용자 단말에 의해 수행되는 방법.
  12. 제 1항에 있어서,
    상기 사용자 입력이 종료되면, 상기 GUI의 표시를 해제하는 단계를 더 포함하는,
    사용자 단말에 의해 수행되는 방법.
  13. 제 1항에 있어서,
    상기 GUI에 포함된 적어도 하나의 오브젝트에 관한 정보를 저장하는 단계를 더 포함하는,
    사용자 단말에 의해 수행되는 방법.
  14. 제 1항에 있어서,
    상기 GUI에 포함된 적어도 하나의 오브젝트를 상기 커뮤니케이션 화면에 추가하여 표시하는 단계를 더 포함하는,
    사용자 단말에 의해 수행되는 방법.
  15. 커뮤니케이션 제공 장치에 의해 수행되는 커뮤니케이션 제공 방법에 있어서,
    사용자 단말로부터 커뮤니케이션 화면에서 선택된 적어도 하나의 오브젝트에 대한 정보를 포함하는 검색 요청을 수신하는 단계;
    상기 검색 요청에 포함된 적어도 하나의 오브젝트에 관한 정보를 이용하여 분석 대상을 추출하는 단계;
    기 저장되어 있는 상기 커뮤니케이션 화면의 대화 히스토리 중 상기 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 검색 결과를 추출하는 단계; 및
    상기 검색 결과를 상기 사용자 단말로 제공하는 단계를 포함하는,
    커뮤니케이션 제공 장치에 의해 수행되는 커뮤니케이션 제공 방법.
  16. 제 15항에 있어서,
    상기 오브젝트는,
    말풍선 또는 상기 말풍선에 대응하는 참여자의 이미지를 포함하는,
    커뮤니케이션 제공 장치에 의해 수행되는 커뮤니케이션 제공 방법.
  17. 제 15항에 있어서,
    상기 분석 대상을 추출하는 단계는,
    상기 오브젝트에 관한 정보에 기초하여 상기 오브젝트에 포함된 텍스트 또는 이미지로부터 분석 대상을 추출하는 단계를 포함하는,
    커뮤니케이션 제공 장치에 의해 수행되는 커뮤니케이션 제공 방법.
  18. 제 15항에 있어서,
    상기 검색 결과를 추출하는 단계는,
    상기 분석 대상이 말풍선 내 특수 문자, 특수 색상, 및 일정 중 어느 하나에 해당하는 경우, 상기 분석 대상과 유사한 단어 또는 색상을 포함하는 오브젝트의 검색 결과를 추출하는 단계를 포함하는,
    커뮤니케이션 제공 장치에 의해 수행되는 커뮤니케이션 제공 방법.
  19. 제 15항에 있어서,
    상기 검색 결과를 추출하는 단계는,
    상기 분석 대상이 질문 내용에 해당하는 경우, 상기 질문 내용과 유사한 질문 및 답변 패턴을 포함하는 오브젝트의 검색 결과를 추출하는 단계를 포함하는,
    커뮤니케이션 제공 장치에 의해 수행되는 커뮤니케이션 제공 방법.
  20. 제 15항에 있어서,
    상기 검색 결과를 추출하는 단계는,
    상기 분석 대상이 특정 키워드에 해당하는 경우, 상기 키워드가 소정 횟수 이상 포함된 오브젝트의 검색 결과를 추출하는 단계를 포함하는,
    커뮤니케이션 제공 장치에 의해 수행되는 커뮤니케이션 제공 방법.
  21. 제 15항에 있어서,
    상기 검색 결과를 추출하는 단계는,
    상기 분석 대상이 특정 언어에 해당하는 경우, 상기 특정 언어를 사용자가 주로 사용하는 언어로 번역한 결과를 추출하는 단계를 포함하는,
    커뮤니케이션 제공 장치에 의해 수행되는 커뮤니케이션 제공 방법.
  22. 제 15항에 있어서,
    상기 검색 결과를 추출하는 단계는,
    기 저장되어 있는 상기 커뮤니케이션 화면의 대화 히스토리에 기초하여, 복수의 검색 결과 중 사용자의 응답 성공확률이 높은 검색 결과를 선택하는 단계를 포함하는,
    커뮤니케이션 제공 장치에 의해 수행되는 커뮤니케이션 제공 방법.
  23. 제 15항에 있어서,
    상기 검색 결과를 상기 사용자 단말로 제공하는 단계는,
    상기 검색 결과에 기초하여 상기 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 GUI를 생성하는 단계; 및
    상기 GUI에 관한 정보를 상기 사용자 단말로 제공하는 단계를 포함하는,
    커뮤니케이션 제공 장치에 의해 수행되는 커뮤니케이션 제공 방법.
  24. 사용자 단말에 있어서,
    외부장치와 통신하는 통신부;
    사용자 입력을 수신하는 사용자 입력부;
    정보를 표시하는 디스플레이부;
    커뮤니케이션 화면에 표시되는 복수의 오브젝트에 대한 상기 사용자 입력을 수신하고,
    상기 사용자 입력에 기초하여 선택된 오브젝트와 관련된 분석 대상을 추출하고,
    기 저장되어 있는 상기 커뮤니케이션 화면의 대화 히스토리 중 상기 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 GUI를 생성하여 표시하도록 상기 디스플레이부를 제어하는 프로세서를 포함하는,
    사용자 단말.
  25. 하나 이상의 프로세서;
    외부장치와 통신하는 통신 인터페이스;
    상기 프로세서에 의하여 수행되는 컴퓨터 프로그램을 로드(load)하는 메모리; 및
    상기 컴퓨터 프로그램을 저장하는 스토리지를 포함하되,
    상기 컴퓨터 프로그램은,
    사용자 단말로부터 커뮤니케이션 화면에서 선택된 적어도 하나의 오브젝트에 대한 정보를 포함하는 검색 요청을 수신하는 동작,
    상기 검색 요청에 포함된 적어도 하나의 오브젝트에 관한 정보를 이용하여 분석 대상을 추출하는 동작,
    기 저장되어 있는 상기 커뮤니케이션 화면의 대화 히스토리 중 상기 분석 대상과 연관된 적어도 하나의 오브젝트를 포함하는 검색 결과를 추출하는 동작, 및
    상기 검색 결과를 상기 사용자 단말로 제공하는 동작을 수행하기 위한 인스트럭션들(instructions)을 포함하는,
    커뮤니케이션 제공 장치.
KR1020200063439A 2020-05-27 2020-05-27 커뮤니케이션 제공 방법, 그리고 이를 구현하기 위한 사용자 단말 및 커뮤니케이션 제공 장치 KR20210146540A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200063439A KR20210146540A (ko) 2020-05-27 2020-05-27 커뮤니케이션 제공 방법, 그리고 이를 구현하기 위한 사용자 단말 및 커뮤니케이션 제공 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200063439A KR20210146540A (ko) 2020-05-27 2020-05-27 커뮤니케이션 제공 방법, 그리고 이를 구현하기 위한 사용자 단말 및 커뮤니케이션 제공 장치

Publications (1)

Publication Number Publication Date
KR20210146540A true KR20210146540A (ko) 2021-12-06

Family

ID=78901409

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200063439A KR20210146540A (ko) 2020-05-27 2020-05-27 커뮤니케이션 제공 방법, 그리고 이를 구현하기 위한 사용자 단말 및 커뮤니케이션 제공 장치

Country Status (1)

Country Link
KR (1) KR20210146540A (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102079221B1 (ko) 2016-12-30 2020-02-19 주식회사 카카오 인터랙션을 이용한 메신저 검색 방법, 그리고 이를 구현한 서버 및 어플리케이션

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102079221B1 (ko) 2016-12-30 2020-02-19 주식회사 카카오 인터랙션을 이용한 메신저 검색 방법, 그리고 이를 구현한 서버 및 어플리케이션

Similar Documents

Publication Publication Date Title
US11868732B2 (en) System for minimizing repetition in intelligent virtual assistant conversations
JP7069778B2 (ja) ビデオベースの通信におけるコンテンツキュレーションのための方法、システム及びプログラム
CN108027873B (zh) 基于捕捉到的笔画信息来与助理组件交互
CN110020411B (zh) 图文内容生成方法及设备
JP6722804B2 (ja) 認知ロボット工学アナライザ
CN104951546B (zh) 在即时通信软件中订阅消息的方法和装置
CN112085090B (zh) 翻译方法、装置以及电子设备
US11093510B2 (en) Relevance ranking of productivity features for determined context
WO2020210008A1 (en) Targeted rewrites
US20190130006A1 (en) Computerized systems and methods for query expansion using displayed objects
CN107977155B (zh) 一种手写识别方法、装置、设备和存储介质
US10606618B2 (en) Contextual assistance system
CN112732386A (zh) 消息处理方法、装置、终端和存储介质
CN108958731B (zh) 一种应用程序界面生成方法、装置、设备和存储介质
CN111737620A (zh) 一种页面访问方法、装置、设备及介质
CN112199135A (zh) 信息引导方法、装置、电子设备以及存储介质
CN112528608A (zh) 页面编辑方法、装置、电子设备和存储介质
CN108369589A (zh) 提供用于对通信进行分类的自动主题标签建议
CN113626441A (zh) 基于扫描设备的文本管理方法、装置、设备以及存储介质
CN112163143A (zh) 页面切换的方法、装置、设备以及存储介质
CN110020279A (zh) 页面数据处理方法、装置及存储介质
CN109145241B (zh) 浏览器及浏览器的内容展现管理方法
KR20210146540A (ko) 커뮤니케이션 제공 방법, 그리고 이를 구현하기 위한 사용자 단말 및 커뮤니케이션 제공 장치
US20210382918A1 (en) Method and apparatus for labeling data
US20170201592A1 (en) Contextual user experience

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal