KR20240057083A - Method, computer program and computing device for recommending an image in a messenger - Google Patents
Method, computer program and computing device for recommending an image in a messenger Download PDFInfo
- Publication number
- KR20240057083A KR20240057083A KR1020220137373A KR20220137373A KR20240057083A KR 20240057083 A KR20240057083 A KR 20240057083A KR 1020220137373 A KR1020220137373 A KR 1020220137373A KR 20220137373 A KR20220137373 A KR 20220137373A KR 20240057083 A KR20240057083 A KR 20240057083A
- Authority
- KR
- South Korea
- Prior art keywords
- video
- data
- user
- messenger
- recommendation
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 69
- 238000004590 computer program Methods 0.000 title claims abstract description 10
- 230000004044 response Effects 0.000 claims abstract description 30
- 238000010801 machine learning Methods 0.000 claims description 10
- 238000004891 communication Methods 0.000 description 23
- 230000006870 function Effects 0.000 description 23
- 238000010586 diagram Methods 0.000 description 12
- 238000012790 confirmation Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 2
- 238000013136 deep learning model Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000033001 locomotion Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/73—Querying
- G06F16/732—Query formulation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/73—Querying
- G06F16/732—Query formulation
- G06F16/7343—Query language or query format
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/73—Querying
- G06F16/735—Filtering based on additional data, e.g. user or group profiles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/73—Querying
- G06F16/738—Presentation of query results
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/50—Business processes related to the communications industry
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
- H04L51/046—Interoperability with other network applications or services
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
- H04L51/10—Multimedia information
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Multimedia (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Tourism & Hospitality (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Mathematical Physics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
메신저에서의 영상 추천 방법, 컴퓨터 프로그램 및 컴퓨팅 디바이스가 제공된다.
프로세서를 포함하는 컴퓨팅 디바이스가 수행하는 메신저에서의 영상 추천 방법은, 메신저에서 관리되는 영상의 부가 정보를 생성하여 태깅(tagging)하는 단계; 상기 부가 정보가 태깅된 영상을 상기 메신저의 추천 리스트에 등록하는 단계; 채팅룸에 참여한 사용자의 공유 요청에 대한 응답으로, 상기 채팅룸의 추천 기준 정보 및 상기 부가 정보에 기반하여 상기 추천 리스트에 등록된 적어도 하나의 영상을 추천하는는 단계; 및 상기 사용자의 상기 추천된 영상에 대한 선택에 응답하여, 선택된 영상을 상기 채팅룸에서 공유하는 단계를 포함한다. A video recommendation method in a messenger, a computer program, and a computing device are provided.
A video recommendation method in a messenger performed by a computing device including a processor includes the steps of generating additional information for a video managed in the messenger and tagging it; registering the video tagged with the additional information in a recommendation list of the messenger; In response to a sharing request from a user participating in the chat room, recommending at least one video registered in the recommendation list based on recommendation standard information of the chat room and the additional information; and in response to the user's selection of the recommended video, sharing the selected video in the chat room.
Description
본 개시는 메신저에서의 영상 추천 방법, 컴퓨터 프로그램 및 컴퓨팅 디바이스에 관한 것이다. 보다 구체적으로는 사용자가 메신저로 공유할 컨텐츠를 용이하게 선정하는데 기여하는 영상 추천 방법, 컴퓨터 프로그램 및 컴퓨팅 디바이스에 관한 것이다. This disclosure relates to a video recommendation method in a messenger, a computer program, and a computing device. More specifically, it relates to video recommendation methods, computer programs, and computing devices that help users easily select content to share through messengers.
최근 인스턴트 메신저 애플리케이션, 소셜 미디어(Social Media) 등을 통한 커뮤니케이션은 대화에만 머무르지 않고, 다양한 형태의 컨텐츠를 교환하여 상호 교류의 범위를 확장하고 있다. 사용자는 개인적으로 촬영하거나 외부로부터 획득한 컨텐츠를 사용자 디바이스 또는 클라우드에 저장하고, 메신저의 다른 사용자에게 컨텐츠를 공유할 수 있다. 컨텐츠는 비디오, 사진과 같은 영상, 음악, 음성과 같은 오디오, 문서 등이며, 사용자들 간에 주로 공유되는 컨텐츠는 영상일 수 있다. Recently, communication through instant messenger applications, social media, etc. is not limited to conversation, but is expanding the scope of mutual exchange by exchanging various types of content. Users can save content that they personally filmed or acquired externally on their device or in the cloud, and share the content with other users of the messenger. Contents include images such as videos and photos, audio such as music and voices, and documents, and the content mainly shared between users may be videos.
메신저로 영상 컨텐츠를 공유하기 위해, 사용자는 메신저가 내장된 자신의 디바이스의 영상 저장소, 예컨대 영상 앨범 폴더, 갤러리 폴더 등에 보관된 다량의 영상을 일일이 확인하여 공유할 영상을 선택하여야 한다. 효율적인 확인을 위해, 사용자는 디바이스 또는 메신저에 별도의 공유 공간, 예컨대 공유 폴더를 마련하여, 상기 영상 저장소에서 관심있는 영상을 공유 공간으로 미리 저장함으로써, 확인할 영상의 양을 대폭 감소시킬 수 있다. 이 방법도 사용자가 상기 영상 저장소를 통해 다량의 영상을 확인하고 이동해야 하는 번거로움을 수반한다. In order to share video content through a messenger, the user must individually check a large amount of videos stored in the video storage of his device with a built-in messenger, such as a video album folder or gallery folder, and select the video to share. For efficient confirmation, the user can create a separate shared space, such as a shared folder, on the device or messenger, and save the images of interest in the video storage in advance into the shared space, thereby significantly reducing the amount of images to be checked. This method also involves the inconvenience of requiring the user to check and move a large amount of images through the image storage.
메신저를 통한 영상 공유가 널리 사용되는 상황에서 공유 영상을 신속하게 탐색하는 기술이 요구되고 있다. In a situation where video sharing through messengers is widely used, technology to quickly search shared videos is required.
본 개시는 사용자가 메신저로 공유할 컨텐츠를 용이하게 선정하는데 기여하는 영상 추천 방법 및 컴퓨팅 디바이스를 제공하는 것을 목적으로 한다.The purpose of the present disclosure is to provide a video recommendation method and computing device that contribute to users easily selecting content to share via messenger.
또한, 본 개시는 상기 방법을 컴퓨팅 장치에 실행시키기 위해 컴퓨터 판독 가능한 기록 매체에 저장된 컴퓨터 프로그램을 제공하는 것을 목적으로 한다. Additionally, the present disclosure aims to provide a computer program stored in a computer-readable recording medium for executing the above method on a computing device.
본 개시의 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 개시가 속하는 기술분야에서 통상의 지식을 가진 자(이하, "통상의 기술자"라 함)에게 명확하게 이해될 수 있을 것이다.The technical problems of the present disclosure are not limited to the technical problems mentioned above, and other technical problems not mentioned can be solved by those skilled in the art in the technical field to which the present disclosure belongs (hereinafter referred to as "those skilled in the art"). ") can be clearly understood.
본 개시의 일 양상에 따르면, 프로세서를 포함하는 컴퓨팅 디바이스가 수행하는 메신저에서의 영상 추천 방법은, 메신저에서 관리되는 영상의 부가 정보를 생성하여 태깅(tagging)하는 단계; 상기 부가 정보가 태깅된 영상을 상기 메신저의 추천 리스트에 등록하는 단계; 채팅룸에 참여한 사용자의 공유 요청에 대한 응답으로, 상기 채팅룸의 추천 기준 정보 및 상기 부가 정보에 기반하여 상기 추천 리스트에 등록된 적어도 하나의 영상을 추천하는는 단계; 및 상기 사용자의 상기 추천된 영상에 대한 선택에 응답하여, 선택된 영상을 상기 채팅룸에서 공유하는 단계를 포함한다. According to one aspect of the present disclosure, a method of recommending an image in a messenger performed by a computing device including a processor includes the steps of generating additional information of an image managed in the messenger and tagging it; registering the video tagged with the additional information in a recommendation list of the messenger; In response to a sharing request from a user participating in the chat room, recommending at least one video registered in the recommendation list based on recommendation standard information of the chat room and the additional information; and in response to the user's selection of the recommended video, sharing the selected video in the chat room.
본 개시의 다른 실시예에 따르면, 상기 부가 정보는 상기 영상의 시간 데이터, 상기 영상의 위치 데이터 및 상기 영상의 적어도 하나의 객체를 식별한 정보를 갖는 객체 데이터 중 적어도 하나가 포함된 상세 데이터를 가질 수 있다.According to another embodiment of the present disclosure, the additional information may have detailed data including at least one of time data of the image, location data of the image, and object data having information identifying at least one object of the image. You can.
본 개시의 또 다른 실시예에 따르면, 상기 객체 데이터는 상기 영상에 포함된 객체 별로 분류하는 개략 식별자를 상기 객체와 연관되도록 관리되고,상기 채팅룸에 참여한 사용자의 프로필 데이터 및 상기 사용자와 관련성을 갖는 객체의 명칭 데이터 중 적어도 하나가 상기 영상에서 인식된 객체와 매칭하는 것에 응답하여, 상기 객체 데이터는 상기 프로필 데이터 및 상기 명칭 데이터 중 적어도 하나를 추출한 세부 식별자를 상기 인식된 객체와 연관되도록 관리될 수 있다. According to another embodiment of the present disclosure, the object data is managed so that a rough identifier that classifies each object included in the video is associated with the object, profile data of a user who participated in the chat room, and an object that is related to the user. In response to matching at least one of the name data with an object recognized in the image, the object data may be managed to associate a detailed identifier from which at least one of the profile data and the name data is extracted with the recognized object. .
본 개시의 또 다른 실시예에 따르면, 상기 부가 정보는 상기 영상의 공유 이력을 관리하는 이력 데이터 및 공유된 영상의 선택에 이용된 키워드를 관리하는 키워드 데이터 중 적어도 하나가 포함된 공유 연관 데이터를 가지되, 상기 이력 데이터는 상기 사용자가 참여하는 현재의 채팅룸 및 상기 사용자가 참여한 다른 채팅룸 중 적어도 하나에서 공유된 영상의 공유 이력을 포함하며, 상기 키워드 데이터는 상기 현재의 채팅룸 및 상기 다른 채팅룸 중 적어도 하나에서 상기 공유된 영상의 선택에 이용된 키워드를 포함할 수 있다. According to another embodiment of the present disclosure, the additional information has shared related data including at least one of history data that manages the sharing history of the video and keyword data that manages keywords used to select the shared video. The history data includes a sharing history of videos shared in at least one of the current chat room in which the user participates and another chat room in which the user participates, and the keyword data includes at least one of the current chat room and the other chat room. may include keywords used to select the shared video.
본 개시의 또 다른 실시예에 따르면, 상기 키워드 데이터는 상기 채팅룸의 사용자들 간에 교환된 대화 데이터들 중 상기 공유된 영상의 선택과 관련된 연관 데이터 및 상기 사용자가 상기 메신저를 통해 상기 공유된 영상을 검색하는데 활용된 질의를 포함하는 쿼리 데이터 중 적어도 하나를 포함하고, 상기 연관 데이터 및 상기 쿼리 데이터는 상기 대화 데이터들 및 상기 질의에 대한 머신 러닝을 통해 추론될 수 있다. According to another embodiment of the present disclosure, the keyword data includes related data related to selection of the shared video among conversation data exchanged between users of the chat room and the user searches for the shared video through the messenger. and at least one of query data including a query used to do so, and the related data and the query data may be inferred through machine learning for the conversation data and the query.
본 개시의 또 다른 실시예에 따르면, 상기 공유 요청은 상기 채팅룸의 메뉴를 이용한 상기 사용자의 영상 공유 요청 및 상기 채팅룸의 메시지 입력창으로 입력되는 키워드에 의한 영상 공유 요청 중 어느 하나일 수 있다. According to another embodiment of the present disclosure, The sharing request may be either a video sharing request by the user using a menu of the chat room or a video sharing request by a keyword entered into a message input window of the chat room.
본 개시의 또 다른 실시예에 따르면, 상기 키워드에 의한 영상 공유 요청의 경우, 상기 영상을 추천하는 단계는 상기 키워드에 따른 상기 추천 기준 정보에 기초하여, 상기 컴퓨팅 디바이스에서 저장된 디바이스 영상 및 검색 엔진에 의해 탐색된 영상 중 적어도 하나를 포함하는 외부 컨텐츠를 제시하는 단계; 상기 사용자의 요청에 의해, 상기 메신저에서 관리하는 영상 리스트 및 상기 추천 리스트 중 적어도 하나에 상기 외부 컨텐츠를 추가하는 단계를 더 포함할 는수 있다. According to another embodiment of the present disclosure, in the case of a video sharing request by the keyword, the step of recommending the video is based on the recommendation criteria information according to the keyword, to the device video stored in the computing device and a search engine. presenting external content including at least one of the images searched for; The method may further include adding the external content to at least one of the video list and the recommendation list managed by the messenger in response to the user's request.
본 개시의 또 다른 실시예에 따르면, 상기 추천 기준 정보는 소정의 조건에 따른 공유 기준 정보, 상기 채팅룸의 컨텍스트 정보 또는 상기 공유 요청을 위해 상기 사용자가 입력하는 키워드 중 적어도 하나를 포함하고, 상기 컨텍스트 정보는 상기 채팅룸에 참여한 사용자와 관련된 사용자 연계 정보 및 상기 채팅룸의 대화 데이터로부터 추출된 대화 정보 중 적어도 하나를 가질 수 있다. According to another embodiment of the present disclosure, the recommendation standard information includes at least one of sharing standard information according to a predetermined condition, context information of the chat room, or a keyword entered by the user for the sharing request, and the context The information may include at least one of user linkage information related to users participating in the chat room and conversation information extracted from conversation data of the chat room.
본 개시의 또 다른 실시예에 따르면, 상기 영상을 추천하는 단계는, 상기 추천 리스트에 등록된 영상을 우선적으로 검색하여 상기 영상을 추천하는 단계; According to another embodiment of the present disclosure, the step of recommending the video includes: preferentially searching for videos registered in the recommendation list and recommending the videos;
상기 추천 리스트에서 상기 추천 기준 정보에 부합하는 상기 영상이 탐색되지 않는 것에 응답하여, 상기 컴퓨팅 디바이스에서 저장된 다비아스 영상에서 상기 추천 기준 정보에 부합하는 상기 디바이스 영상을 검색하여 제시하는 단계; 및 상기 디바이스 영상이 탐색되지 않는 것에 응답하여, 검색 엔진에 의해 상기 추천 기준 정보에 부합하는 영상을 검색하여 제시하는 단계를 포함할 수 있다. In response to the image matching the recommendation standard information not being searched for in the recommendation list, searching for and presenting the device image matching the recommendation standard information in the David video stored in the computing device; And in response to the device image not being searched, it may include searching and presenting an image matching the recommendation criteria information by a search engine.
본 개시의 또 다른 실시예에 따르면, 상기 컴퓨팅 디바이스에서 관리되는 영상의 부가 정보를 생성하여 태깅하는 단계; 및 상기 사용자의 요청에 의해, 상기 부가 정보가 태깅된 영상을 상기 메신저에서 관리하는 영상 리스트 및 상기 추천 리스트 중 적어도 하나에 추가하는 단계를 더 포함할 수 있다. According to another embodiment of the present disclosure, generating and tagging additional information of an image managed by the computing device; and adding the video tagged with the additional information to at least one of a video list managed by the messenger and the recommendation list at the request of the user.
본 개시의 다른 양상에 따르면, 인스트럭션을 구현하는 컴퓨팅 디바이스이며, 상기 컴퓨팅 디바이스는 적어도 하나의 인스트럭션을 저장하는 메모리; 및 상기 메모리에 저장된 상기 적어도 하나의 인스트럭션을 실행하는 프로세서를 포함한다. 상기 프로세서는, 메신저 에서 관리되는 영상의 부가 정보를 생성하여 태깅하고, 상기 부가 정보가 태깅된 영상을 상기 메신저의 추천 리스트에 등록하고, 채팅룸에 참여한 사용자의 공유 요청에 대한 응답으로, 상기 채팅룸의 추천 기준 정보 및 상기 부가 정보에 기반하여 상기 추천 리스트에 등록된 적어도 하나의 영상을 추천하고, 상기 사용자의 상기 추천된 영상에 대한 선택에 응답하여, 선택된 영상을 상기 채팅룸에서 공유하도록 구성된다. According to another aspect of the present disclosure, there is a computing device that implements instructions, the computing device comprising: a memory storing at least one instruction; and a processor executing the at least one instruction stored in the memory. The processor generates and tags additional information of the video managed in the messenger, registers the video tagged with the additional information in the recommended list of the messenger, and in response to a sharing request from a user participating in the chat room, It is configured to recommend at least one video registered in the recommendation list based on recommendation standard information and the additional information, and to share the selected video in the chat room in response to the user's selection of the recommended video.
본 개시의 또 다른 양상에 따른 컴퓨터 판독 가능 기록 매체에 저장된 컴퓨터 프로그램은, 본 개시에 따른 메신저에서의 영상 추천 방법을 실행하는 컴퓨터 프로그램일 수 있다.A computer program stored in a computer-readable recording medium according to another aspect of the present disclosure may be a computer program that executes the image recommendation method in a messenger according to the present disclosure.
본 개시에 대하여 위에서 간략하게 요약된 특징들은 후술하는 본 개시의 상세한 설명의 예시적인 양상일 뿐이며, 본 개시의 범위를 제한하는 것은 아니다.The features briefly summarized above with respect to the present disclosure are merely exemplary aspects of the detailed description of the present disclosure described below, and do not limit the scope of the present disclosure.
본 개시에 따르면, 사용자가 메신저로 공유할 컨텐츠를 용이하게 선정하는데 기여하는 영상 추천 방법이 제공될 수 있다. According to the present disclosure, a video recommendation method that helps users easily select content to share through a messenger can be provided.
또한, 본 개시에 따르면, 상기 방법을 수행하는 컴퓨팅 디바이스가 제공될 수 있다. Additionally, according to the present disclosure, a computing device that performs the method may be provided.
본 개시에 따르면, 상기 방법을 컴퓨팅 장치에 실행시키기 위해 컴퓨터 판독 가능한 비일시적 기록 매체에 저장된 컴퓨터 프로그램이 제공될 수 있다. According to the present disclosure, a computer program stored in a computer-readable non-transitory recording medium may be provided to execute the method on a computing device.
이에 더하여, 본 개시에 따르면, 사용자 간의 대화 특성을 머신 러닝을 통해 분석하여 대화 의도에 적합한 컨텐츠를 효율적으로 선정하여 추천함으로써, 사용자의 컨텐츠 공유에 대한 편의성을 증대시킬 수 있다. In addition, according to the present disclosure, the user's convenience in sharing content can be increased by analyzing conversation characteristics between users through machine learning and efficiently selecting and recommending content suitable for conversation intent.
본 개시에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 개시가 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The effects that can be obtained from the present disclosure are not limited to the effects mentioned above, and other effects not mentioned can be clearly understood by those skilled in the art from the description below. will be.
도 1은 본 개시의 일 실시예에 따른 메신저에서의 영상 추천 방법이 실행되는 시스템을 나타낸 도면이다.
도 2 및 도 3은 본 개시의 일 실시예에 따른 메신저에서의 영상 추천 방법을 구현하는 사용자 디바이스 및 서버를 예시한 블록도이다.
도 4는 본 개시의 일 실시예에 따른 메신저에서의 영상 추천 방법에 관한 순서도이다.
도 5는 영상에 대한 부가 정보의 생성 및 태깅에 관한 순서도이다.
도 6 내지 도 8는 메신저에서 구현되는 영상 추천의 일례를 나타내는 도면이다.
도 9는 메신저에서 구현되는 영상 추천의 다른 예를 나타내는 도면이다.
도 10 및 도 11은 메신저에서 구현되는 영상 추천의 또 다른 예를 나타내는 도면이다.
도 12는 외부 컨텐츠를 메신저의 영상 리스트에 추가하는 방법에 관한 순서도이다.
도 13은 도 12에 따른 외부 컨텐츠의 추가 문의를 예시한 도면이다. 1 is a diagram illustrating a system in which a video recommendation method in a messenger is implemented according to an embodiment of the present disclosure.
2 and 3 are block diagrams illustrating a user device and a server that implement a video recommendation method in a messenger according to an embodiment of the present disclosure.
Figure 4 is a flowchart of a video recommendation method in a messenger according to an embodiment of the present disclosure.
Figure 5 is a flow chart regarding the generation and tagging of additional information for an image.
Figures 6 to 8 are diagrams showing an example of video recommendation implemented in a messenger.
Figure 9 is a diagram showing another example of video recommendation implemented in a messenger.
Figures 10 and 11 are diagrams showing another example of video recommendation implemented in a messenger.
Figure 12 is a flowchart of a method for adding external content to the video list of a messenger.
FIG. 13 is a diagram illustrating an additional inquiry about external content according to FIG. 12.
이하에서는 첨부한 도면을 참고로 하여 본 개시의 실시 예에 대하여 통상의 기술자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나, 본 개시는 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시 예에 한정되지 않는다. Hereinafter, with reference to the attached drawings, embodiments of the present disclosure will be described in detail so that those skilled in the art can easily implement them. However, the present disclosure may be implemented in many different forms and is not limited to the embodiments described herein.
본 개시의 실시 예를 설명함에 있어서 공지 구성 또는 기능에 대한 구체적인 설명이 본 개시의 요지를 흐릴 수 있다고 판단되는 경우에는 그에 대한 상세한 설명은 생략한다. 그리고, 도면에서 본 개시에 대한 설명과 관계없는 부분은 생략하였으며, 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.In describing embodiments of the present disclosure, if it is determined that detailed descriptions of known configurations or functions may obscure the gist of the present disclosure, detailed descriptions thereof will be omitted. In addition, in the drawings, parts that are not related to the description of the present disclosure are omitted, and similar parts are given similar reference numerals.
본 개시에 있어서, 어떤 구성요소가 다른 구성요소와 "연결", "결합" 또는 "접속"되어 있다고 할 때, 이는 직접적인 연결 관계 뿐만 아니라, 그 중간에 또 다른 구성요소가 존재하는 간접적인 연결관계도 포함할 수 있다. 또한 어떤 구성요소가 다른 구성요소를 "포함한다" 또는 "가진다"고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 배제하는 것이 아니라 또 다른 구성요소를 더 포함할 수 있는 것을 의미한다.In the present disclosure, when a component is said to be “connected,” “coupled,” or “connected” to another component, this is not only a direct connection relationship, but also an indirect connection relationship in which another component exists in between. It may also be included. In addition, when a component is said to “include” or “have” another component, this does not mean excluding the other component, but may further include another component, unless specifically stated to the contrary. .
본 개시에 있어서, 제1, 제2 등의 용어는 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용되며, 특별히 언급되지 않는 한 구성요소들 간의 순서 또는 중요도 등을 한정하지 않는다. 따라서, 본 개시의 범위 내에서 일 실시 예에서의 제1 구성요소는 다른 실시 예에서 제2 구성요소라고 칭할 수도 있고, 마찬가지로 일 실시 예에서의 제2 구성요소를 다른 실시 예에서 제1 구성요소라고 칭할 수도 있다.In the present disclosure, terms such as first and second are used only for the purpose of distinguishing one component from other components, and do not limit the order or importance of the components unless specifically mentioned. Therefore, within the scope of the present disclosure, a first component in one embodiment may be referred to as a second component in another embodiment, and similarly, the second component in one embodiment may be referred to as a first component in another embodiment. It may also be called.
본 개시에서, "A 또는 B", "A 및 B 중 적어도 하나", "A 또는 B 중 적어도 하나", "A, B 또는 C", "A, B 및 C 중 적어도 하나", 및 "A, B, 또는 C 중 적어도 하나(at least one of A, B, C or combination thereof)"와 같은 문구들 각각은 그 문구들 중 해당하는 문구에 함께 나열된 항목들 중 어느 하나, 또는 그들의 모든 가능한 조합을 포함할 수 있다. In the present disclosure, “A or B”, “at least one of A and B”, “at least one of A or B”, “A, B or C”, “at least one of A, B and C”, and “A , B, or C or a combination thereof, each of which means one of the items listed together with that phrase, or any possible combination thereof. may include.
본 개시에 있어서, 서로 구별되는 구성요소들은 각각의 특징을 명확하게 설명하기 위함이며, 구성요소들이 반드시 분리되는 것을 의미하지는 않는다. 즉, 복수의 구성요소가 통합되어 하나의 하드웨어 또는 소프트웨어 단위로 이루어질 수도 있고, 하나의 구성요소가 분산되어 복수의 하드웨어 또는 소프트웨어 단위로 이루어질 수도 있다. 따라서, 별도로 언급하지 않더라도 이와 같이 통합된 또는 분산된 실시 예도 본 개시의 범위에 포함된다. In the present disclosure, distinct components are intended to clearly explain each feature, and do not necessarily mean that the components are separated. That is, a plurality of components may be integrated to form one hardware or software unit, or one component may be distributed to form a plurality of hardware or software units. Accordingly, even if not specifically mentioned, such integrated or distributed embodiments are also included in the scope of the present disclosure.
본 개시에 있어서, 다양한 실시 예에서 설명하는 구성요소들이 반드시 필수적인 구성요소들은 의미하는 것은 아니며, 일부는 선택적인 구성요소일 수 있다. 따라서, 일 실시 예에서 설명하는 구성요소들의 부분집합으로 구성되는 실시 예도 본 개시의 범위에 포함된다. 또한, 다양한 실시 예에서 설명하는 구성요소들에 추가적으로 다른 구성요소를 포함하는 실시 예도 본 개시의 범위에 포함된다.In the present disclosure, components described in various embodiments do not necessarily mean essential components, and some may be optional components. Accordingly, embodiments consisting of a subset of the elements described in one embodiment are also included in the scope of the present disclosure. Additionally, embodiments that include other components in addition to the components described in the various embodiments are also included in the scope of the present disclosure.
또한, 본 명세서에서 네트워크는 유무선 네트워크를 모두 포함하는 개념일 수 있다. 이때, 네트워크는 디바이스와 시스템 및 디바이스 상호 간의 데이터 교환이 수행될 수 있는 통신망을 의미할 수 있으며, 특정 네트워크로 한정되는 것은 아니다. Additionally, in this specification, a network may be a concept that includes both wired and wireless networks. At this time, the network may refer to a communication network in which data exchange between devices, systems, and devices can be performed, and is not limited to a specific network.
또한, 본 명세서에서 컴퓨팅 디바이스 또는 디바이스는 스마트폰, 태블릿 PC, 웨어러블 디바이스, 랩탑(laptop), HMD(Head Mounted Display)와 같이 모바일 디바이스일 수 있다. 디바이스는, 예컨대 PC나 디스플레이 기능을 구비한 가전과 같이 고정된 디바이스일 수 있다. 다른 예로, 컴퓨팅 디바이스 또는 디바이스는 서버로 동작 가능한 컴퓨팅 디바이스 또는 IoT (Internet of Things) 디바이스일 수 있다. 즉, 본 명세서에서 디바이스는 본 개시에 따른 방법을 수행할 수 있는 기기들을 지칭할 수 있으며, 특정 타입으로 한정되지 않는다. Additionally, in this specification, the computing device or device may be a mobile device such as a smartphone, tablet PC, wearable device, laptop, or HMD (Head Mounted Display). The device may be a fixed device, such as a PC or a home appliance with a display function. As another example, the computing device or device may be a computing device capable of operating as a server or an Internet of Things (IoT) device. That is, the device in this specification may refer to devices capable of performing the method according to the present disclosure, and is not limited to a specific type.
이하, 첨부한 도면을 참조하여 본 개시의 실시예들에 대해서 설명한다.Hereinafter, embodiments of the present disclosure will be described with reference to the attached drawings.
도 1은 본 개시의 일 실시예에 따른 메신저에서의 영상 추천 방법이 실행되는 시스템을 나타낸 도면이다.1 is a diagram illustrating a system in which a video recommendation method in a messenger is implemented according to an embodiment of the present disclosure.
본 개시에 따른 시스템은 네트워크(300)를 통해 연결된 하나 이상의 사용자 디바이스들(100a, 100b, 100c)과 서버(200)를 포함할 수 있다. The system according to the present disclosure may include one or
각각의 사용자 디바이스들(100a~100c)은 클라이언트 또는 사용자 단말로 지칭될 수 있으며, 네트워크(300)를 통해 서버(200)에 접속하여 다른 사용자 디바이스들 또는 서버와 데이터를 송수신할 수 있다. Each of the
본 개시에 따른 영상 추천 방법은 다양한 온라인 서비스와 연계되어 제공되는 메신저 서비스를 이용하여 수행될 수 있다. 메신저 서비스는 인스턴트 메신저 제공자, 소셜 미디어, 커뮤니티 사이트, 온라인 게임, 포털 사이트, 쇼핑몰 등에서 제공되는 커뮤니케이션 서비스일 수 있다. 구체적으로, 인스턴트 메신저 제공자는 메신저 서비스를 기본 기능을 제공할 수 있으며, 소셜 미디어, 커뮤니티 사이트, 온라인 게임 등은 각각 해당 서비스의 기본 기능에 부가하여 사용자들의 커뮤티케이션을 위한 메신저 서비스를 제공할 수 있다. 본 개시에서, 메신저 서비스는 단순히 인스턴스 메신저를 통한 커뮤니케이션을 포함할 뿐만 아니라, 광의적으로 다양한 서비스에서 부가적으로 제공되는 커뮤니케이션 서비스를 포함할 수 있다. 본 개시에 따른 사용자들 간의 커뮤니케이션를 통한 영상 추천 방법이 적어도 실현되는 서비스이라면, 상기 서비스는 기본적 형태에 무관하게 메신저 서비스를 구현한 것으로 간주될 수 있다. 이하에서는 본 개시에 따른 영상 추천 방법이 실현되는 메신저 서비스가 인스턴트 메신저를 예로 들어 설명하나, 기본적 형태와 무관하게 상기 메신저 서비스가 구현되는 다양한 서비스에게 적용되는 것을 배제하지 않는다. The video recommendation method according to the present disclosure can be performed using a messenger service provided in connection with various online services. Messenger services may be communication services provided by instant messenger providers, social media, community sites, online games, portal sites, shopping malls, etc. Specifically, instant messenger providers can provide basic functions of messenger services, and social media, community sites, online games, etc. can provide messenger services for users' communication in addition to the basic functions of each service. In the present disclosure, the messenger service not only includes communication through an instance messenger, but may also include communication services additionally provided by various services in a broad sense. If the video recommendation method through communication between users according to the present disclosure is at least a service that is realized, the service can be considered to have implemented a messenger service regardless of its basic form. Hereinafter, the instant messenger service will be described as an example of a messenger service in which the video recommendation method according to the present disclosure is implemented, but application to various services in which the messenger service is implemented regardless of the basic form is not excluded.
사용자 디바이스들(101, 102, 103)의 각각에는 메신저 서비스를 이용하기 위한 클라이언트용 모듈이 설치될 수 있다. 또한, 서버(200)에는 메신저 서비스를 지원하기 위한 서버용 모듈이 설치될 수 있다. 본 개시에 있어서 사용자 디바이스에 설치된 애플리케이션은 인스턴트 메신저 서비스의 이용을 위해 사용자 디바이스들(101, 102, 103)의 각각에 설치된 클라이언트용 모듈을 의미할 수 있다. 상기 애플리케이션은 사용자들 간의 커뮤니케이션에서 컨텐츠를 자동적으로 추천하고 공유하는 기능을 포함할 수 있다. A client module for using the messenger service may be installed in each of the user devices 101, 102, and 103. Additionally, a server module to support a messenger service may be installed in the
서버(200)는 메신저 어플리케이션 등과 같은 서비스를 제공할 수 있다. 상기 서비스를 이용하는 사용자는 사용자 디바이스를 통해 소정의 접속 정보(아이디와 패스워드)를 입력하여 상기 서비스를 제공하는 서버(200)에 접속할 수 있다. 서버(200)는 사용자 디바이스로부터 입력 받은 접속 정보를 통해 접속한 사용자를 식별하고 인증할 수 있다. 또한, 서버(200)는 식별된 사용자들에 관한 정보를 수집, 축적, 저장 및 조회하거나, 식별된 사용자들 사이의 데이터 송수신을 지원할 수 있다.The
서버(200)는 사용자 디바이스들(100a~100c)와 유사하게, 사용자들 간의 커뮤니케이션에서 컨텐츠를 자동적으로 추천하고 공유하는 기능을 상기 애플리케이션을 통해 실행하도록 할 수 있다. Similar to the
도 2 및 도 3은 본 개시의 일 실시예에 따른 메신저에서의 영상 추천 방법을 구현하는 사용자 디바이스 및 서버를 예시한 블록도이다. 2 and 3 are block diagrams illustrating a user device and a server that implement a video recommendation method in a messenger according to an embodiment of the present disclosure.
도 2를 참조하면, 사용자 디바이스(100)는 통신부(110), 촬영부(120), 입력부(130), 출력부(140), 메모리(150) 및 프로세서(160)를 포함할 수 있다. 사용자 디바이스(100a~100c)는 디바이스의 동작 및 기능과 관련된 다른 구성 또는 모듈을 더 포함할 수 있으며, 상술한 실시예로 한정되지 않는다.Referring to FIG. 2 , the
통신부(110)는 네트워크를 통해 서버(200) 또는 다른 사용자 디바이스와 데이터를 교환할 수 있다. 통신부(110)는 외부와의 통신을 수행할 수 있는 모든 종류의 유무선 통신 모듈을 포함할 수 있다. The
촬영부(120)는 객체의 정지 영상 또는 동영상을 획득할 수 있는 모든 종류의 촬영 수단을 포함할 수 있다. 스마트폰을 예로 들면, 촬영부는 스마트폰에 구비된 카메라 모듈일 수 있다. 본 개시에서는 생략되었으나, 사용자 디바이스(100a~100c)는 촬영부 외에도 주변 상황, 위치 및 사용자의 모션 등을 감지하기 위한 다중 센서 모듈을 더 구비할 수 있다. The photographing
입력부(130)는 사용자 입력을 수신하는 인터페이스로서 다양한 입력 수단을 구비할 수 있다. 예컨대, 입력부(130)는 압력 감지 센서, 정전식 터치 센서 등을 이용한 입력 수단(일 예로, 터치 스크린에 표시되는 가상 키보드), 기계식 버튼 등을 구비할 수 있다. 사용자 디바이스(100)는 상기 센서에 의해 감지된 정보 또는 기계식 버튼의 입력을 입력 정보로서 획득할 수 있다. 또한, 입력부(130)는 음성, 사운드를 수신하는 마이크로폰 등을 가질 수 있다. The
출력부(140)는 사용자 디바이스(100)가 획득하거나 수신한 정보, 사용자 디바이스(100)에 의해 처리된 정보 등을 외부로 출력할 수 있다. 출력부(140)는 예컨대, 시각 정보를 출력하는 디스플레이, 오디오 정보를 출력하는 스피커 등을 포함할 수 있다.The
메모리(150)는 사용자 디바이스(100)의 다양한 기능을 구현하는 애플리케이션, 프로세서(160) 또는 외부 요청에 의해 생성되거나 전송된 데이터를 저장하여 관리할 수 있다. The
구체적으로, 메모리(150)는 입력부(130)를 통해 획득한 정보 등 사용자로부터 획득한 정보를 저장할 수 있다. 메모리(150)는 통신부(110)를 통해 서버(200) 또는 다른 사용자 디바이스로부터 수신한 정보를 저장할 수 있다. 또한, 메모리(150)는 사용자 디바이스(100)가 촬영한 영상 또는 외부로부터 입수된 외부 영상을 저장할 수 있다. 메모리(150)는 영상을 보관하는 저장 영역을 마련할 수 있으며, 저장 영역은 영상 데이터와 함께, 영상의 고유 정보 및 부가 정보를 저장할 수 있다. 고유 정보는 예컨대 영상 포맷 및 촬영 관련 파라미터 등이며, 영상 포맷은 영상 압축 방식과 관련된 정보일 수 있다. 부가 정보는 영상 재생에 필요한 파라미터가 아닌, 공유 영상을 추천하는데 이용되는 적어도 하나의 디스크립션(description) 데이터를 가질 수 있다. 구체적으로, 부가 정보는 영상의 촬영 시간, 촬영 위치 및 영상 내의 객체와 관련된 상세 데이터를 포함할 수 있다. Specifically, the
메모리(150)는 메신저 애플리케이션에 의해 전송되거나 수신한 공유 영상, 상기 애플리케이션에 의해 선정된 추천 영상을 저장하여 관리할 수 있다. 메모리(150)는 공유 영상 및 추천 영상의 부가 정보를 저장하여 관리할 수 있다. 아울러, 부가 정보는 상술한 데이터 외에, 메신저 애플리케이션을 통해 공유 이력을 가진 영상에 대한 공유 연관 데이터를 포함할 수 있다. The
예를 들어, 사용자가 메신저 애플리케이션을 통해 공유한 영상은 메신저의 하위 메뉴에서 제공하는 영상 리스트에 저장되며, 메모리(150)는 영상 리스트를 위한 저장 영역을 마련할 수 있다. 또한, 메신저 애플리케이션이 본 개시에 따른 영상 추천 방법을 실행함으로써 추천된 영상 및 추천 영상에 태깅된 부가 정보는 메신저의 하위 메뉴에서 제공하는 추천 리스트에 저장될 수 있다. 메모리(150)는 추천 리스트를 위한 저장 영역을 마련할 수 있다. For example, videos shared by a user through a messenger application are stored in a video list provided in a submenu of the messenger, and the
이에 더하여, 메신저 애플리케이션이 사용자 디바이스(100)의 적어도 일부 데이터에 대한 공유 저장 서비스를 제공할 수 있다. 사용자 디바이스(100)의 요청에 따라, 디바이스에 저장된 영상이 메신저의 영상 리스트에서 관리되는 경우, 메모리(150)는 사용자 디바이스(100)가 개별적으로 획득하는 영상 및 이의 부가 정보를 저장할 수 있다. 다른 예로, 사용자가 다른 클라우드 서비스의 서버와 메신저 애플리케이션의 연동을 허용하는 경우, 메모리(150)는 클라우드 서버에서 취득하는 영상 및 이의 부가 정보를 저장하여 관리할 수 있다. In addition, the messenger application may provide a shared storage service for at least some data of the
또한, 메모리(150)는 본 개시에 따른 영상 추천 방법을 프로세서(160)에 의해 구현하도록 메신저 애플리케이션을 내장할 수 있다. 메신저 애플리케이션에서 공유할 영상을 추천하기 위해, 메모리(150)는 상기 애플리케이션의 추천 요청에 따라 영상의 부가 정보를 프로세서(160)에 전달할 수 있다. Additionally, the
프로세서(160)는 사용자 디바이스(100) 내 다른 구성 요소들의 동작을 제어할 수 있다. 예컨대, 프로세서(160)는 입력부(130) 및 통신부(110)를 통해 획득되는 정보를 처리할 수 있다. 또한, 프로세서(160)는 요청에 따라, 메모리(150)에 저장된 정보 및 애플리케이션을 판독하여 처리할 수 있다. 프로세서(160)는 상기 처리된 정보를 출력부(140)를 통해 출력하거나 메모리(150)에 저장하거나, 통신부(110)를 통해 외부에 전송할 수 있다. The
또한, 프로세서(160)는 사용자가 촬영한 영상 또는 외부로부터 입수된 영상 컨텐츠에 관한 부가 정보를 생성하여 영상 또는 영상 관련 정보에 태깅할 수 있다. 프로세서(160)는 메신저 애플리케이션에 의한 영상 추천 요청에 따라, 메모리(150)에서 관리되는 영상의 부가 정보를 분석하여 추천할 영상을 결정할 수 있다. Additionally, the
도 3을 참조하면, 서버(200)는 통신부(210), 메모리(220) 및 프로세서(230)를 포함할 수 있다. 서버(200)는 서버 또는 시스템의 동작과 관련하여 다른 구성 및 모듈을 더 포함할 수 있으며, 상술한 실시예로 한정되지 않는다. Referring to FIG. 3, the
통신부(210)는 네트워크(300)에 연결된 사용자 디바이스 또는 다른 서버와 데이터를 교환할 수 있다. 통신부(210)는 외부와의 통신을 수행할 수 있는 모든 종류의 유무선 통신 모듈을 포함할 수 있다. The
메모리(220)는 통신부(210)를 통해 외부로부터 수신한 정보를 저장할 수 있다. 또한, 메모리(220)는 서버(200)의 내부에서 생성된 정보를 저장할 수 있다. 예컨대, 메신저 애플리케이션을 활용하는 사용자의 프로필 데이터가 메모리(220)에 저장되어 관리될 수 있다. 프로필 데이터는 사용자의 인적 정보 및 사용자 프로필 영상을 포함할 수 있다. 프로필 영상은 사용자가 자신의 대표 이미지로 지정하여 상기 애플리케이션에 등록한 영상이거나, 사용자가 상기 애플리케이션에 누적 저장한 영상 중 사용자가 포함된 것으로 확인된 사용자의 영상일 수 있다. 사용자가 메신저 애플리케이션을 통해 저장한 영상 및 대표 이미지 중 적어도 하나에, 사용자 외의 다른 객체, 예컨대 사용자와 가족, 친분 관계에 있는 다른 인물, 반려 동물 등이 있는 경우, 다른 객체의 명칭 데이터가 메모리(220)에 저장되어 관리될 수 있다. 명칭 데이터는 사용자의 기록에 의해 생성되거나, 영상 공유에 사용된 키워드로부터 추출될 수 있다. 이러한 키워드는 공유 연관 데이터의 일종일 수 있다. 다른 예에서, 프로필 데이터 및 명칭 데이터는 해당 데이터를 유발하는 사용자 디바이스(100)에 관리될 수 있으며, 서버(200) 또는 다른 사용자 디바이스의 요청에 의해 전달될 수도 있다. The
프로세서(230)는 서버(200) 내 다른 구성 요소들의 동작을 제어할 수 있다. 예컨대, 프로세서(230)는 통신부(210)를 통해 획득되는 정보를 처리할 수 있다. 또한, 프로세서(230)는 메모리(220)에 저장된 정보를 독출하여 처리할 수 있다. 프로세서(230)는 상기 처리된 정보를 메모리(220)에 저장하거나, 통신부(210)를 통해 외부에 전송할 수 있다. The
프로세서(230)는 메신저 애플리케이션을 실행하여 사용자 디바이스(100)의 요청을 처리할 수 있다. 프로세서(230)는 일례로, 사용자 디바이스(100)와 유사하게, 본 개시에 따른 영상 추천 방법을 구현할 수 있다. 다른 예로, 프로세서(230)는 사용자 디바이스(100)와 협업하여, 개시에 따른 영상 추천 방법에 따른 다양한 요청을 분산 처리할 수 있다. 이에 따라, 본 개시의 영상 추천 방법을 구현하는 사용자 디바이스(100) 및/또는 서버(200)는 컴퓨팅 디바이스의 일 예일 수 있다. The
도 4는 본 개시의 일 실시예에 따른 메신저에서의 영상 추천 방법에 관한 순서도이다. 본 개시에 따른 영상 추천 방법은 사용자 디바이스(100) 및 서버(200) 중 적어도 하나를 포함하는 컴퓨팅 디바이스에 의해 수행되며, 보다 상세하게는, 사용자 디바이스(100)의 프로세서(160) 및/또는 서버(200)의 프로세서(230)에 의해 구현될 수 있다. 설명의 편의를 위해, 프로세서(160, 230)라는 용어를 생략하고, 상기 방법의 과정은 사용자 디바이스(100)에 의해 수행되는 것으로 주로 서술하기로 한다. 그러나, 이하의 설명에 따른 동작은 메신저 애플리케이션을 운용하는 서버(200)에 의해 구현되거나, 사용자 디바이스(100) 및 서버(200)의 분산 처리에 의해 수행될 수도 있다. Figure 4 is a flowchart of a video recommendation method in a messenger according to an embodiment of the present disclosure. The image recommendation method according to the present disclosure is performed by a computing device including at least one of the
또한, 본 개시에서는 영상 추천 방법이 인스턴트 메신저 서비스에서 제공되는 메신저 애플리케이션에서 실현되는 것을 위주로 설명되나, 다른 서비스에서 부수적으로 서비스되는 메신저에서도 실질적으로 동일하게 적용될 수 있다. 설명의 편의를 위해, 메신저 애플리케이션은 메신저와 혼용하여 서술되기로 한다. In addition, in the present disclosure, the video recommendation method is mainly described as being implemented in a messenger application provided in an instant messenger service, but it can also be substantially applied in the same way to a messenger additionally provided in another service. For convenience of explanation, messenger application will be described interchangeably with messenger.
먼저, 상기 애플리케이션을 통한 영상의 공유 혹은 상기 애플리케이션의 영상 리스트로의 영상의 업로드가 수행되거나, 메신저 애플리케이션을 탑재한 사용자 디바이스(100)가 영상을 취득하는 경우, 상기 영상의 부가 정보가 생성되며 영상에 태깅될(tagging) 수 있다(S105). First, when the video is shared through the application or the video is uploaded to the video list of the application, or the
사용자가 사용자 디바이스(100)에 저장된 영상을 메신저를 통해 공유하는 경우, 사용자 디바이스(100)는 메신저의 저장 영역에 공유 영상을 저장하고, 사용자 디바이스(100)는 공유 영상에 대한 부가 정보를 생성하여 상기 저장 영역에 저장할 수 있다. 상기 저장 영역은 예를 들어, 메신저의 하위 메뉴로 제공되는 영상 리스트와 관련된 저장 공간일 수 있다. 영상 리스트는 공유한 채팅룸(도 6의 402 참조) 별로 마련되거나, 각 채팅룸에서 전송된 전체 공유 영상을 보관하는 저장 공간일 수 있다. 영상 리스트에 보관되는 영상은 예를 들어, 영상 파일이거나, 사용자 디바이스(100)의 저장 용량을 효율적으로 사용하기 위해, 영상의 썸네일 수 있다. 썸네일과 관련된 영상 원본 파일은 사용자 디바이스(100)의 메모리의 소정 영역, 예컨대 디바이스의 영상 저장소에서 저장될 수 있다. 기 공유된 영상을 메신저를 통해 다른 사용자와 공유하는 경우, 사용자 디바이스(100)는 영상 저장소에 저장된 상기 영상을 메신저에서 전송할 수 있다. When a user shares a video stored in the
사용자는 공유와 무관하게, 메신저의 영상 리스트에 영상을 업로드하여 저장할 수 있다. 사용자 디바이스(100)는 저장된 영상의 부가 정보를 생성하여, 영상 리스트에 업로드된 영상과 부가 정보를 저장할 수 있다. Users can upload and save videos to the messenger video list, regardless of sharing. The
사용자가 사용자 디바이스(100)를 통해 영상을 취득한 경우, 사용자 디바이스(100)는 영상을 메모리(150)에 저장함과 아울러서, 영상의 부가 정보를 생성할 수 있다. When a user acquires an image through the
본 개시의 일례로, 자원 및 처리 경감을 위해, 메신저에 저장된 영상 및 공유 영상에 대해서만 부가 정보가 생성되고, 메신저가 아닌 다른 경로를 통해 취득된 사용자 디바이스(100)의 영상에 대해 부가 정보가 생성되지 않을 수 있다. 다른 예로, 사용자의 선택 및 디바이스(100)의 설정에 의해, 사용자 디바이스(100)의 영상의 일부에 대해서만 부가 정보가 생성될 수 있다. 설정의 예로, 메신저에 저장되거나 공유된 영상과의 메타 데이터, 객체의 식별 데이터 중 적어도 일부와 매칭되는 디바이스(100)의 영상에 대해, 부가 정보가 생성될 수 있다. 또 다른 예로, 메신저 및 디바이스(100)의 모든 영상의 부가 정보가 생성될 수도 있다. As an example of the present disclosure, in order to reduce resources and processing, additional information is generated only for images stored in the messenger and shared images, and additional information is generated for images of the
여기서, 부가 정보는 상술한 바와 같이, 영상 재생에 필요한 파라미터가 아닌, 공유 영상을 추천하는데 이용되는 적어도 하나의 디스크립션(description) 데이터를 포함할 수 있다. 구체적으로, 부가 정보는 상세 데이터를 가지며, 경우에 따라 공유 연관 데이터를 가질 수 있다. 상세 데이터는 영상의 시간 데이터, 위치 데이터 및 객체 데이터 중 어느 하나를 포함할 수 있다. 공유 연관 데이터는 영상의 공유 이력을 관리하는 이력 데이터 및 공유된 영상의 선택에 이용된 키워드를 관리하는 키워드 데이터를 포함할 수 있다. 부가 정보를 구성하는 세부 데이터는 아래에서 상세히 서술하기로 한다. Here, as described above, the additional information may include at least one description data used to recommend a shared video, rather than parameters required for video playback. Specifically, the additional information has detailed data and, in some cases, may have shared related data. Detailed data may include any one of image time data, location data, and object data. The sharing related data may include history data that manages the sharing history of the video and keyword data that manages keywords used to select the shared video. Detailed data constituting additional information will be described in detail below.
S105 단계에 따른 부가 정보의 생성 및 태깅 과정은 도 5를 참조하여 설명하기로 한다. 도 5는 영상에 대한 부가 정보의 생성 및 태깅에 관한 순서도이다. The creation and tagging process of additional information according to step S105 will be described with reference to FIG. 5. Figure 5 is a flow chart regarding the generation and tagging of additional information for an image.
우선, 메신저 애플리케이션에 의해 이미 공유되거나 상기 메신저를 이용하여 사용자에 의해 업로드된 영상이 메신저의 영상 리스트에 존재하는 경우, 부가 정보는 각 영상 별로 메타 데이터를 포함하도록 생성될 수 있다(S205). First, if a video already shared by a messenger application or uploaded by a user using the messenger exists in the video list of the messenger, additional information may be generated to include metadata for each video (S205).
메타 데이터는 상세 데이터의 일종으로서, 영상의 촬영 시간 데이터 및 촬영 위치 데이터 중 적어도 하나를 포함할 수 있다. 메타 데이터는 일례로 메신저 애플리케이션의 설정에 의해 생성될 수 있다. Metadata is a type of detailed data and may include at least one of video capture time data and capture location data. Metadata may be generated, for example, by settings of a messenger application.
이에 더하여, 사용자의 설정에 의해, 메신저 애플리케이션은 사용자 디바이스(100)의 영상(이하, 디바이스 영상이라 칭함)의 메타 데이터를 생성시킬 수 있다. 디바이스 영상은 예를 들어, 사용자 디바이스(100)의 갤러리 등으로 명명된 저장 공간에 보관될 수 있다. 부가 정보는 디바이스 영상 별로 메타 데이터를 포함할 수도 있다. 디바이스 영상은 사용자 디바이스(100)의 촬영부(120)에 의해 촬영되거나, 사용자 디바이스(100)가 메신저가 아닌 외부로부터 취득될 수 있다. 다른 예로, 메타 데이터는 사용자 디바이스(100)의 고유 설정에 의해 생성되고, 메신저 애플리케이션에 의해 추출되어 영상의 상세 데이터로 관리될 수도 있다. In addition, according to the user's settings, the messenger application can generate metadata of the image of the user device 100 (hereinafter referred to as device image). For example, device images may be stored in a storage space named gallery of the
디바이스 영상의 경우, 메타 데이터는 영상에 태깅되어, 사용자 디바이스(100)의 영상 저장소에서 관리될 수 있다. 메신저 애플리케이션에서 공유되거나 업로드된 영상의 경우, 메타 데이터는 해당 영상의 저장 영역, 예컨대 상기 애플리케이션에 저장하는 영상 리스트에서 관리될 수 있다. In the case of device video, metadata may be tagged in the video and managed in the video storage of the
다음으로, 사용자 디바이스(100)는 영상의 객체를 식별하여 제 1 객체 데이터를 생성할 수 있다(S210). 여기서, 영상은 공유 영상, 업로드된 영상, 디바이스 영상을 포함할 수 있다. Next, the
객체 데이터는 영상의 적어도 하나 객체를 식별한 정보를 가지며, 식별 정보는 유형에 따라, 1 객체 데이터 및 제 2 객체 데이터로 구분될 수 있다. 객체 데이터는 후술할 영상의 공유 이력에 따라, 제 1 객체 데이터와 함께, 제 2 객체 데이터를 포함할 수도 있다. The object data has information identifying at least one object in the image, and the identification information may be divided into first object data and second object data depending on the type. The object data may include second object data along with first object data, depending on the sharing history of the image, which will be described later.
영상의 객체는 단순한 배경을 제외한 영상 내의 특징적인 요소일 수 있으며, 예를 들어, 인물, 인간 이외의 사물 등일 수 있다. 상기 사물은 예를 들어, 생물체, 영상에 나타난 특이한 인공 구조물 및 자연 경관 등일 수 있다. The object of the image may be a characteristic element in the image other than a simple background, and may be, for example, a person or an object other than a human. The object may be, for example, a living creature, a unique artificial structure shown in an image, or a natural landscape.
제 1 객체 데이터는 영상에 포함된 객체 별로 분류하는 개략 식별자를 객체와 연관되도록 관리될 수 있다. 개략 식별자를 생성하는데 활용되는 객체의 식별은 통상적인 이미지 분석 기법, 예컨대 머신 러닝을 통한 영상 내의 사물 인식 기법을 이용하여 실현될 수 있다. 머신 러닝에 따른 사물 인식 기법의 적어도 일부 과정은 딥러닝 모델이 적용되어 구현될 수 있다. 딥러닝 모델이 적용되는 사물 인식 기술은 R-CNN(Region-Based Convolutional Neural Network) 모델군 및 YOLO 모델군 등일 수 있다. R-CNN 모델군은 R-CNN, Fast R-CNN 및 Faster R-CNN 중 하나일 수 있다. YOLO 모델군은 YOLO, YOLOv2 및 YOLOv3 중 하나일 수 있다. The first object data may be managed so that a rough identifier that classifies each object included in the image is associated with the object. Identification of objects used to generate rough identifiers can be realized using conventional image analysis techniques, such as object recognition techniques in images through machine learning. At least some processes of object recognition techniques based on machine learning can be implemented by applying a deep learning model. Object recognition technologies to which deep learning models are applied may include the R-CNN (Region-Based Convolutional Neural Network) model group and the YOLO model group. The R-CNN model family can be one of R-CNN, Fast R-CNN, and Faster R-CNN. The YOLO model family can be one of YOLO, YOLOv2, and YOLOv3.
복수의 인물이 촬영된 영상을 예로 들면, 영상이 사물 인식 기법에 의해 분석되어 각 인물 별로 식별될 수 있다. 식별된 인물 별로 상이한 개략 식별자가 부여되어 각 인물에 연관될 수 있다. 개략 식별자는 각 인물마다의 인적 정보까지 연계되지 않고, 서로 다른 객체마다 상이한 것을 나타내는 사물 지시자 등으로 구성될 수 있다. For example, if a video of multiple people is captured, the video can be analyzed using an object recognition technique to identify each person. A different rough identifier may be assigned to each identified person and associated with each person. The rough identifier is not linked to personal information for each person, but may be composed of object indicators that indicate something different for each different object.
다음으로, 사용자 디바이스(100)는 메신저의 영상 리스트 및 사용자 디바이스(100)의 영상 보관소에 저장된 영상들 중 채팅룸을 통해 공유된 영상이 있는지를 확인할 수 있다(S215). Next, the
확인 결과 공유 영상이 없는 경우(S215의 N), S205 및 S210 단계에서 생성된 메타 데이터 및 제 1 객체 데이터가 상세 데이터를 구성하고, 상세 데이터는 영상의 부가 정보로 태깅되어 관리될 수 있다. As a result of confirmation, if there is no shared video (N in S215), the metadata and first object data generated in steps S205 and S210 constitute detailed data, and the detailed data can be tagged and managed as additional information of the video.
확인 결과 공유 영상이 있는 경우(S215의 Y), 사용자 디바이스(100)는 공유 영상에 대한 이력 데이터를 생성하고, 소정 조건에 따라 제 2 객체 데이터를 생성할 수 있다(S220). As a result of the confirmation, if there is a shared video (Y in S215), the
이력 데이터는 영상의 공유 이력을 관리하는 데이터이며, 상세하게는, 사용자가 참여한 채팅룸들 중 적어도 하나에서 전송된 영상의 공유 이력과 관련된 데이터일 수 있다. 이력 데이터는 예컨대, 채팅룸 정보, 공유 시점, 공유 빈도 등을 가질 수 있다. 채팅룸 정보는 예를 들어, 영상을 전송한 사용자, 영상을 수신한 참가자 및 공유된 채팅룸에 참여 이력이 있는 모든 사용자와 관련된 데이터, 채팅룸 개설 시점, 채팅룸의 대화 활동도 등을 포함할 수 있다. 공유 빈도는 예컨대, 각 채팅룸 별 공유 횟수, 소정 기간 동안의 공유 횟수, 모든 채팅룸의 공유 횟수를 합산한 전체 횟수, 소정 기간 동안의 공유된 영상 등을 포함할 수 있다. History data is data that manages the sharing history of a video, and in detail, may be data related to the sharing history of a video transmitted in at least one of the chat rooms in which the user participates. Historical data may include, for example, chat room information, sharing time, sharing frequency, etc. Chat room information may include, for example, data related to the user who sent the video, the participant who received the video, and all users who have participated in the shared chat room, when the chat room was opened, conversation activity in the chat room, etc. The sharing frequency may include, for example, the number of shares for each chat room, the number of shares during a predetermined period, the total number of shares shared across all chat rooms, and the videos shared during a predetermined period.
메신저의 채팅룸을 통해 공유된 영상의 경우, 메신저 애플리케이션은 채팅룸에 참여한 사용자의 프로필 데이터 및 사용자와 관련성을 갖는 객체의 명칭 데이터 중 적어도 하나가 공유 영상에서 인식된 객체와 매칭하는지를 확인할 수 있다. 프로필 데이터 및 명칭 데이터는 도 2에 설명된 것과 실질적으로 동일하다. 확인 결과, 상술의 데이터와 매칭하는 객체가 공유 영상에 존재하면, 프로필 데이터 및 명칭 데이터 중 적어도 하나를 추출한 세부 식별자를 인식된 객체와 연관되도록, 제 2 객체 데이터는 생성될 수 있다. 세부 식별자를 생성하는 일련의 과정은 사용자 디바이스(100) 및 서버(200) 중 적어도 하나에 의해 수행될 수 있다. In the case of a video shared through a chat room of a messenger, the messenger application can check whether at least one of the profile data of the user participating in the chat room and the name data of the object related to the user matches the object recognized in the shared video. The profile data and name data are substantially the same as those described in FIG. 2 . As a result of confirmation, if an object matching the above-mentioned data exists in the shared video, second object data may be generated so that a detailed identifier from which at least one of profile data and name data is extracted is associated with the recognized object. A series of processes for generating a detailed identifier may be performed by at least one of the
다음으로, 사용자 디바이스(100)는 공유 영상과 관련된 키워드가 존재하는지를 확인할 수 있다(S225).Next, the
키워드는 영상이 공유된 채팅룸에서 영상을 선택하기 위해 이용되거나 연관되는 인덱싱 요소일 수 있다. 키워드는 예컨대, 텍스트, 이미지, 음성 등 다양한 유형의 요소일 수 있다. 영상이 복수의 채팅룸에 공유되면, 복수의 채팅룸 중 적어도 하나로부터 공유 영상의 키워드를 검출할 수 있다. Keywords may be indexing elements associated with or used to select a video in a chat room where the video is shared. Keywords may be various types of elements, for example, text, image, voice, etc. When a video is shared in multiple chat rooms, keywords of the shared video can be detected from at least one of the multiple chat rooms.
구체적으로, 키워드는 연관 키워드 및 쿼리(query) 키워드를 가질 수 있다. Specifically, keywords may have related keywords and query keywords.
연관 키워드는 채팅룸의 사용자들 간에 교환된 대화 데이터들 중 공유된 영상의 선택과 관련된 키워드일 수 있다. 구체적으로, 메신저 애플리케이션은 대화 데이터 및 공유 영상의 선택 간의 상관 관계에 대한 머신 러닝을 통해 연관 키워드를 추론할 수 있다. 예를 들어, 채팅룸에 참가한 사용자들 간의 대화를 통해, 특정 참가인 및 이의 관계인과 관련된 주제로 대화하면서 컨텐츠 전송/공유가 발생되면, 공유 전의 대화 내용을 학습하여 공유 컨텐츠가 선택된 근거를 추정하는 특정 대화 내용이 키워드로 검출될 수 있다. The related keyword may be a keyword related to the selection of a shared video among conversation data exchanged between users of the chat room. Specifically, the messenger application can infer related keywords through machine learning on the correlation between conversation data and the selection of shared videos. For example, when content is transmitted/shared through conversations between users participating in a chat room and talking about topics related to a specific participant and his or her related people, a specific conversation is made to estimate the basis for selecting the shared content by learning the content of the conversation before sharing. Content can be detected by keyword.
또한, 키워드는 사용자가 공유된 영상을 검색하는데 활용된 질의를 포함하는 쿼리 키워드를 포함할 수 있다. 검색은 예컨대, 사용자가 메신저의 메시지 입력창(도 6의 412 참조)에서 제공되는 영상 검색 기능에 의해 수행될 수 있다. 예를 들어, 사용자는 메시지 입력창(412)에 마련된 영상 검색 키(416)를 터치하여, 메신저(또는 사용자 디바이스(100)는 입력창(412)을 영상 검색 필드로 변환시킬 수 있다. 영상 검색 필드로 기능하는 입력창(412)은 사용자가 텍스트를 입력하더라도 채팅룸(402)의 메시지로 출력되지 않고, 입력되는 텍스트에 부합하는 영상의 추천 리스트를 제시할 수 있다. Additionally, keywords may include query keywords that include queries used by users to search shared videos. For example, the search can be performed by the user using a video search function provided in the message input window of the messenger (see 412 in FIG. 6). For example, the user can touch the video search key 416 provided in the message input window 412, and the messenger (or the user device 100) can convert the input window 412 into a video search field. Video search The input window 412, which functions as a field, is not output as a message in the chat room 402 even if the user inputs text, but can present a recommended list of videos that match the input text.
이에 더하여, 검색은 메신저 애플리케이션과 연계되는 사용자 디바이스(100)의 영상 저장소에서 제공하는 검색 기능 및 채팅룸을 통한 대화 중에 메신저와 다른 서비스를 이용한 검색 기능 중 적어도 하나에 의해서도, 수행될 수 있다. 사용자가 상기 검색에 의해 최종 선택된 영상을 실제 공유한 경우, 메신저 애플리케이션은 공유된 영상의 선택을 위해 검색된 질의를 키워드로 검출할 수 있다. 쿼리 키워드는 사용자가 입력한 질의 뿐만 아니라, 질의를 기반으로 하는 머신 러닝을 통해 추론되는 확장된 쿼리를 포함할 수 있다. In addition, the search may be performed by at least one of the search function provided by the video storage of the
확인 결과 키워드가 존재하지 않는 경우(S225의 N), S205~S220 단계에서 생성된 메타 데이터, 제 1 및 제 2 객체 데이터가 상세 데이터를 구성하고, 이력 데이터는 공유 연관 데이터로 채용될 수 있다. 상세 데이터 및 공유 연관 데이터는 영상의 부가 정보로 태깅되어 관리될 수 있다. As a result of the confirmation, if the keyword does not exist (N in S225), the meta data and the first and second object data generated in steps S205 to S220 constitute detailed data, and the history data may be employed as shared related data. Detailed data and shared related data can be tagged and managed as additional information of the video.
확인 결과 키워드가 있는 경우(S215의 Y), 사용자 디바이스(100)는 확인된 키워드를 공유 영상의 키워드 데이터로 생성할 수 있다(S230). If there is a keyword as a result of the confirmation (Y in S215), the
키워드 데이터는 공유 영상과 관련된 연관 키워드 및 쿼리 키워드에 기반하여 연관 데이터 및 쿼리 데이터를 생성할 수 있다. Keyword data can be generated based on related keywords and query keywords related to shared videos.
이어서, S205~S220 단계 및 S220~S230 단계에서 생성된 상세 데이터 및 공유 연관 데이터는 부가 정보를 구성하여, 부가 정보는 영상에 태깅될 수 있다(S235). Subsequently, the detailed data and shared related data generated in steps S205 to S220 and S220 to S230 constitute additional information, and the additional information can be tagged in the image (S235).
S205~S220 단계는 추천 리스트의 초기 생성 단계에서 생성되나, 추천 리스트의 생성 후, 메신저를 통한 영상 공유 또는 메신저의 영상 리스트로의 영상 업로드 등이 검출되면, S220~S230 단계는 수행될 수 있다. Steps S205 to S220 are generated in the initial creation stage of the recommendation list, but after creation of the recommendation list, if sharing of a video through a messenger or uploading a video to the video list of the messenger is detected, steps S220 to S230 may be performed.
다시 도 4를 참조하면, 사용자 디바이스(100)는 태깅된 영상을 메신저의 추천 리스트에 자동으로 등록시킬 수 있다(S110). Referring again to FIG. 4, the
사용자 디바이스(100)는 적어도 메신저에서의 공유 영상 및 메신저에 업로드된 영상을 부가 정보와 함께 추천 리스트에 등록시킬 수 있다. 이에 더하여, 사용자 디바이스(100)는 메신저에 의해, 부가 정보가 태깅된 디바이스 영상을 추천 리스트에 등록할지 여부를 사용자에게 문의할 수 있다. 사용자의 추가 응답에 따라, 메신저는 태깅된 디바이스 영상을 추천 리스트에 자동으로 등록시킬 수 있다. 또한, 메신저는 태깅된 디바이스 영상 중 사용자가 선택하는 영상을 추천 리스트에 등록시키도록 제어할 수도 있다. 다른 예로, 메신저는 메신저의 영상 리스트 및 추천 리스트 중 적어도 하나에, 태깅된 디바이스 영상을 등록할지 여부를 사용자에게 문의할 수 있다. 메신저는 사용자가 선택한 리스트에 상기 디바이스 영상을 등록시킬 수도 있다. The
본 개시에서는 디바이스 영상의 등록 문의가 S110 단계에서 수행되는 것을 예시하나, 다른 예로 메신저는 S105 단계에서, 사용자에게 상기 등록 문의를 진행할 수도 있다. In the present disclosure, it is exemplified that the registration inquiry for the device image is performed in step S110, but as another example, the messenger may proceed with the registration inquiry to the user in step S105.
다음으로, 사용자 디바이스(100)는 사용자가 참가한 채팅룸에서 영상에 대한 사용자의 공유 요청이 발생한지를 검출할 수 있다(S115). Next, the
여기서, 공유 요청은 다양한 형태로 실현될 수 있다. 추천 관련된 메뉴에 대한 사용자의 선택 또는 영상 검색 기능을 제공하는 메시지 입력창(412)에 입력된 키워드로부터 공유 요청이 발생한지를 검출할 수 있다. 추천 관련 메뉴는 예컨대, 채팅룸(402)의 하위 메뉴로 제공되는 추천 항목(또는 추천 메뉴; 428) 또는 검색 항목 등일 수 있으며, 도 6 내지 도 8를 통해 예시되어 있다. 해당 메뉴는 도 6 내지 도 8에 예시된 실시예에 제한되지 않고, 다양한 방식으로 제공될 수 있다. 다른 예, 즉 키워드에 의한 공유 요청은 도 9 내지 도 11를 통해 예시되어 있다. Here, the sharing request can be realized in various forms. It can be detected whether a sharing request occurred from the user's selection of a recommendation-related menu or from a keyword entered into the message input window 412 that provides a video search function. The recommendation-related menu may be, for example, a recommendation item (or recommendation menu; 428) or a search item provided as a sub-menu of the chat room 402, and is illustrated in FIGS. 6 to 8. The menu is not limited to the embodiments illustrated in FIGS. 6 to 8 and may be provided in various ways. Another example, that is, a sharing request by keyword, is illustrated through FIGS. 9 to 11.
도 6 내지 도 8는 메신저에서 구현되는 영상 추천의 일례를 나타내는 도면이다. Figures 6 to 8 are diagrams showing an example of video recommendation implemented in a messenger.
도 6에서는, 다수의 사용자들 Lee, Kim, Jung, Ahn이 채팅룸(402)에 참여하여, 사용자 Lee의 딸을 주제로 대화(406)를 교환하는 것을 예시하고 있다. 여기서, 사용자들 Lee와 Kim이 딸을 주제로 다량의 대화(406)를 교환하면서, 대화 중에 Lee의 딸 영상(404)을 공유한 상황이 예시된다. 또한, 사용자 Lee와 Kim 간의 많은 대화 후에 사용자 Jung, Ahn이 추후에 채팅룸(402)에 참가하거나, 이미 참가하더라도 사용자 Jung, Ahn은 대화에 장시간 관여하지 않아, 기 공유된 영상(404)은 사용자 Jung, Ahn이 대화를 시작한 채팅룸(402)의 현재의 화면에서 즉시 확인되지 않을 수 있다. 많은 대화가 화면에 전부 표시될 수 없어, 사용자 Jung, Ahn은 채팅룸(402)의 인터페이스에서 제공하는 스크롤 기능을 통해, 사용자 Lee와 Kim 간의 이미 진행된 대화(406) 및 공유 영상(404)을 확인할 수 있다. Figure 6 illustrates that multiple users Lee, Kim, Jung, and Ahn participate in a chat room 402 and exchange a conversation 406 on the topic of user Lee's daughter. Here, a situation is exemplified where users Lee and Kim exchanged a large amount of conversation 406 on the topic of their daughter and shared a video 404 of Lee's daughter during the conversation. In addition, after many conversations between users Lee and Kim, users Jung and Ahn later participate in the chat room 402, or even if they already participate, users Jung and Ahn do not participate in the conversation for a long time, so the already shared video 404 is , it may not be immediately confirmed on the current screen of the chat room 402 where Ahn started the conversation. Since many conversations cannot be displayed in full on the screen, users Jung and Ahn can check the conversations (406) and shared videos (404) that have already taken place between users Lee and Kim through the scroll function provided in the interface of the chat room (402). there is.
도 6에서는 대화 상황의 용이한 이해를 위해, 기 공유된 영상(404)이 Jung 및 Ahn의 대화 화면에 보이는 것으로 도시되어 있으나, 이는 Jung 및 Ahn의 대화 전에 이미 공유된 것을 강조하고자 도시된 것에 불과하다. 도 6은 실제 도시된 바와 같이, 기 공유된 영상(404)이 상기 대화 화면에 동시에 보이는 것을 제외하지 않는다. In Figure 6, for easy understanding of the conversation situation, the already shared video 404 is shown on Jung and Ahn's conversation screen, but this is only shown to emphasize that it was already shared before Jung and Ahn's conversation. do. As actually shown in Figure 6, the previously shared video 404 is not excluded from being displayed simultaneously on the conversation screen.
또한, 도 6에서는 Kim, Jung, Ahn을 서로 구분하도록 다른 사용자에게 보여주길 희망하는 이미지를 포함하는 대표 프로필 영상(408a, 408b, 408c)이 예시되어 있다. 예컨대, Jung의 대표 프로필 영상(408b)은 얼굴 사진을 이용하여 등록되며, Ahn의 대표 프로필 영상(408c)은 자연 경관의 사진을 이용하여 등록된 것으로 예시되어 있다. Kim의 대표 프로필 영상(408a)은 예를 들어, 상기 애플리케이션에서 제공하는 그래픽적 아바타, 다른 서비스에서 제공하는 그래픽적 캐릭터 등으로 등록된 것으로 예시되어 있다. 대표 프로필 영상(408a, 408b, 408c)은 공유할 영상을 추천하는 과정에서, 공유할 사용자가 가진 영상의 제 1 및 제 2 객체 데이터와 비교되는 객체로 사용될 수 있다. Additionally, Figure 6 illustrates representative profile images 408a, 408b, and 408c that include images desired to be shown to other users to distinguish Kim, Jung, and Ahn from each other. For example, Jung's representative profile image 408b is registered using a face photo, and Ahn's representative profile image 408c is registered using a photo of a natural landscape. Kim's representative profile image 408a is illustrated as being registered as, for example, a graphic avatar provided by the application, a graphic character provided by another service, etc. The representative profile images 408a, 408b, and 408c may be used as objects compared with the first and second object data of the image held by the user to be shared in the process of recommending the image to be shared.
이에 더하여, 메신저 애플리케이션은 사용자의 프로필 정보를 관리하는 프로필 메뉴를 가지며, 사용자는 프로필 메뉴를 통해 대표 프로필 영상을 지정하고, 인적 정보 및 다른 영상을 등록할 수도 있다. 사용자 디바이스(100)는 상기 메뉴를 통해 등록된 프로필 영상 및 다른 영상의 객체를 식별할 수 있다. 사용자 디바이스(100)는 공유 요청한 사용자의 추천 리스트 등에 저장된 영상의 제 1 및 제 2 객체 데이터에 기초하여, 프로필 영상 및 다른 영상에서 식별된 객체를 비교, 분석할 수 있다. 객체 식별은 제 1 객체 데이터에서 설명된 방법과 유사하게 수행될 수 있다. 사용자가 프로필 메뉴에서 관리되는 영상에 대해 코멘트를 첨가한 경우, 사용자 디바이스(100)는 코멘트에 기초하여 영상에서 식별된 객체와 관련된 명칭을 추출할 수 있다. 프로필 메뉴의 영상에서 식별된 객체 및 추출된 명칭은 프로필 데이터 및 명칭 데이터로 이용될 수 있다. In addition, the messenger application has a profile menu that manages the user's profile information, and the user can designate a representative profile video and register personal information and other images through the profile menu. The
Lee는 Jung과 Ahn 간의 대화의 상황을 인지하여 딸의 영상을 공유할 예정이며, 문구(420)를 메시지 입력창(412; 이하, 입력창과 혼용 기재)을 통해 입력하여 채팅룸(402)에 메시지 형태로 표시하게 할 수 있다. 입력창(412)은 문구(420)와 같은 텍스트 외에도, 다양한 이모티콘, 아이콘 등을 사용자로부터 입력받을 수 있다. 한편, 입력창(412)에 제공되는 영상 검색 키(416)는 공유 요청을 수신하는 인터페이스이며, 영상 검색 키(416)의 터치 후, 사용자는 입력창(412)을 통해 공유할 영상을 검색하기 위한 키워드 내지 질의를 입력할 수 있다. 영상 검색 키(416) 및 입력창(412)을 이용한 공유 요청은 도 9 내지 도 11에 예시되어 있다. Lee plans to share his daughter's video by recognizing the situation of the conversation between Jung and Ahn, and enters the phrase 420 through the message input window 412 (hereinafter referred to interchangeably with input window) in the form of a message in the chat room 402. It can be displayed as . The input window 412 can receive input from the user, in addition to text such as the phrase 420, as well as various emoticons and icons. Meanwhile, the video search key 416 provided in the input window 412 is an interface that receives a sharing request, and after touching the video search key 416, the user searches for the video to share through the input window 412. You can enter keywords or queries for this purpose. Sharing requests using the image search key 416 and input window 412 are illustrated in Figures 9 to 11.
도 7a 및 도 7b를 참조하면, 메신저 애플리케이션은 Lee의 요청에 의해, 서비스 메뉴의 탭(414), 서비스 메뉴(422)의 하위 서비스로 제공되는 전체 앨범(424) 및 추천 메뉴(428)을 순차적으로 활성화시킬 수 있다. 사용자 디바이스(100)는 추천 메뉴(428)가 선택되면, 사용자 Lee로부터의 공유 요청이 수신된 것을 인지할 수 있다. 전체 앨범(424)은 상기 애플리케이션의 영상 리스트 및 사용자 디바이스(100)의 영상 저장소 중 적어도 하나에 저장되는 영상을 관리할 수 있다. 채팅룸 메뉴(410)는 채팅룸(402)에서 발생된 다양한 정보 및 액티비티를 관리하고 사용자 요청에 의해 제어하기 위한 기능들을 제공할 수 있다. Referring to FIGS. 7A and 7B, at Lee's request, the messenger application sequentially displays the tab 414 of the service menu, the entire album 424 provided as a sub-service of the service menu 422, and the recommendation menu 428. It can be activated with . When the recommended menu 428 is selected, the
다음으로, 사용자 디바이스(100)는 사용자 Lee의 공유 요청에 응답하여, 추천 리스트의 영상 중에, 채팅룸(402)의 추천 기준 정보를 충족하는 부가 정보를 갖는 영상을 추천할 수 있다(S120). Next, in response to user Lee's sharing request, the
추천 기준 정보는 소정의 조건에 따른 공유 기준 정보 및 채팅룸(402)의 컨텍스트 정보 중 적어도 하나를 포함할 수 있다. 공유 기준 정보는 메신저 또는 현재 채팅룸(402)이 추천 영상에 요구하는 공유 빈도 및 현재 채팅룸(402)에서 공유된 영상으로부터 식별된 객체일 수 있다. 예컨대, 공유 빈도는 현재 및 다른 채팅룸(402) 중 적어도 하나에서의 해당 영상에 요구되는 공유 횟수, 특정 기간 동안에 공유된 영상, 소정 기간 동안 해당 영상에 요구되는 공유 횟수 중 적어도 하나를 포함할 수 있다. 도 6을 예로 들면, 상기 식별된 객체는 채팅룸(402)에서 공유된 영상(404)으로부터 추출되는 Lee의 딸의 얼굴일 수 있다. The recommendation standard information may include at least one of sharing standard information according to predetermined conditions and context information of the chat room 402. The sharing criteria information may be the sharing frequency required for the recommended video by the messenger or the current chat room 402 and an object identified from the video shared in the current chat room 402. For example, the sharing frequency may include at least one of the number of shares required for the video in at least one of the current and other chat rooms 402, a video shared during a specific period, and the number of shares required for the video during a predetermined period. . Taking Figure 6 as an example, the identified object may be Lee's daughter's face extracted from a video 404 shared in a chat room 402.
컨텍스트 정보는 채팅룸(402)의 사용자 및 대화로부터 추청되는 상황 정보일 수 있다. 구체적으로, 컨텍스트 정보는 채팅룸(402)에 참여한 사용자와 관련된 사용자 연계 정보 및 채팅룸(402)의 대화 데이터로부터 추출된 대화 정보 중 적어도 하나를 가질 수 있다. 사용자 연계 정보는 사용자 및 사용자와 관계되는 다른 객체와 관련된 정보일 수 있다. 다른 객체는 예컨대, 사용자와 가족, 친분 관계에 있는 사람, 반려 동물 등일 수 있다. 사용자 연계 정보는 메신저 애플리케이션에서 제공하는 각 사용자의 프로필 데이터, 명칭 데이터를 통해 취득될 수 있다. 프로필 데이터는 예를 들면, 대표 프로필 영상(408a, 408b, 408c) 및 메신저에서 관리되는 사용자의 영상을 포함할 수 있다. 대화 정보는 예컨대, 대화 데이터로부터 추출되는 대화 주제어, 대화에서 특징적인 객체, 정보 및 상황을 추정하는 표현 등일 수 있다. 대화 정보는 대화 데이터에 대한 머신 러닝을 통해 추출되는 키워드일 수 있다. Context information may be situational information derived from users and conversations in the chat room 402. Specifically, the context information may have at least one of user linkage information related to users who participated in the chat room 402 and conversation information extracted from conversation data of the chat room 402. User linkage information may be information related to a user and other objects related to the user. Other objects may be, for example, the user, his or her family, a close friend, a companion animal, etc. User linkage information can be obtained through each user's profile data and name data provided by the messenger application. Profile data may include, for example, representative profile images 408a, 408b, and 408c and user images managed in the messenger. Conversation information may be, for example, conversation topic words extracted from conversation data, characteristic objects in a conversation, expressions that estimate information, and situations, etc. Conversation information may be keywords extracted through machine learning on conversation data.
도 6 및 도 7b를 참조하면, 추천 기준 정보는 공유 영상(404)과 관련된 공유 기준 정보, 참가자들(Kim, Jung, Ahn, Lee)과 대화(406)로부터 추청되는 컨텍스트 정보를 예시하고 있다. 공유 기준 정보는 도 7a에서 공유 영상(404)으로부터 식별되는 Lee 딸의 얼굴 및 공유 빈도 등일 수 있다. 도 6에서는 Lee의 딸 영상 1개가 공유되는 것을 예시하고 있으나, 복수의 영상이 이미 공유된 경우, 공유 기준 정보의 식별 객체는 복수의 공유 영상에서 공통적으로 출현하는 객체(예컨대 얼굴 또는 그 외의 사물)이고, 공유 빈도는 공통적으로 출현하는 객체에 요구되는 공유 횟수 등을 더 포함할 수도 있다. Referring to FIGS. 6 and 7B, the recommendation standard information exemplifies sharing standard information related to the shared video 404 and context information extracted from the participants (Kim, Jung, Ahn, Lee) and the conversation 406. The sharing standard information may be the face and sharing frequency of Lee's daughter identified from the shared video 404 in FIG. 7A. Figure 6 illustrates that one video of Lee's daughter is shared, but when multiple videos have already been shared, the identification object of the sharing standard information is an object that commonly appears in the multiple shared videos (e.g., a face or other object). , and the sharing frequency may further include the number of sharing required for commonly appearing objects.
컨텍스트 정보는 도 7a에서 대표 프로필 영상(408a, 408b, 408c)에서 식별되는 Jung의 얼굴, Ahn 경관, 참여한 사용자들의 프로필 데이터와 명칭 데이터, 및 대화(406)로부터 추출되는 주제(Lee의 딸)와 딸의 이름에 관련된 특징 정보 등일 수 있다. The context information includes Jung's face, Officer Ahn, the profile data and name data of the participating users identified in the representative profile images 408a, 408b, and 408c in FIG. 7A, and the topic (Lee's daughter) extracted from the conversation 406. It may be characteristic information related to the daughter's name, etc.
메신저 애플리케이션은 상술한 예시에 따른 정보를 포함하는 추천 기준 정보에 부합하는 부가 정보의 영상을 추천 리스트에서 탐색할 수 있다. 또한, 추천 메뉴(428)를 통한 영상은 다양한 경로를 통해 탐색될 수 있다. 예컨대, 메신저는 추천 리스트 외에도, 디바이스 영상 및 외부 사이트에서 검색되는 영상 등으로부터 추천 기준 정보에 부합하는 영상을 탐색할 수 있다. 탐색 처리의 효율화 및 리소스 부담 경감을 위해, 영상 탐색은 일례로, 메신저 애플리케이션의 추천 리스트에 저장된 영상을 우선적으로 수행될 수 있다. 추천 리스트에서 추천 기준 정보에 따른 영상이 발견되지 않는 경우, 사용자 디바이스(100)에서 저장된 디바이스 영상이 탐색될 수 있다. The messenger application can search for images of additional information that meet recommendation standard information including information according to the above-described example from the recommendation list. Additionally, images through the recommendation menu 428 can be searched through various paths. For example, in addition to the recommendation list, the messenger can search for videos that meet recommendation criteria information from device videos and videos searched from external sites. To improve the efficiency of search processing and reduce resource burden, image search may be performed preferentially on images stored in the recommendation list of a messenger application, for example. If an image according to the recommendation criteria information is not found in the recommendation list, the device image stored in the
사용자 디바이스(100)에서 추천 기준 정보에 매칭되는 영상이 탐색되지 않는 경우, 검색 엔진에 의해 추천 기준 정보에 부합하는 영상을 탐색할 수 있다. 검색 엔진은 예컨대, 메신저 애플리케이션과 연계되는 검색 서비스에서 제공하는 엔진일 수 있다. 검색 엔진의 경우, 공유 기준 정보 및 컨텍스트 정보 중 적어도 하나가 검색 질의로 이용될 수 있다. 검색 엔진의 질의로 제공되는 공유 기준 정보는 예컨대, 공유 영상으로부터 식별된 객체 이미지와 그 특징 정보 등일 수 있다. 상기 질의로 제공되는 컨텍스트 정보는 프로필 데이터 및 명칭 데이터로부터 추출되는 채팅룸(402)의 참가자와 관련된 정보, 참가자들의 대화로부터 추출되는 대화 정보 등일 수 있다. 영상 탐색은 전술의 실시예에 제한되지 않고, 다양한 경로로 처리될 수 있다. 다른 예로, 추천 리스트의 영상, 디바이스(100)의 영상 전부가 동시에 탐색되고, 검색 엔진이 후순위로 이용될 수 있다. 또 다른 예로, 영상은 상술한 3개의 경로를 이용하여 탐색될 수 있다. If an image matching the recommendation standard information is not searched for in the
영상 탐색 및 추천 영상에 대해 도 7b을 예로 들면, 추천 기준 정보는 현재 채팅룸(402)에서 공유된 영상(404)에 나타난 Lee 딸의 얼굴 및 기존 공유 영상의 공유 빈도 등을 포함할 수 있다. 또한, 추천 기준 정보는 도 7a에 예시된 대표 프로필 영상(408a, 408b, 408c)에서 식별되는 Jung의 얼굴, Ahn 경관, 참가자들 Kim, Jung, Ahn, Lee의 프로필 데이터와 명칭 데이터, 및 대화(406)로부터 추출되는 Lee의 딸 관련 대화 텍스트 등일 수 있다. Taking FIG. 7B as an example for video search and recommended videos, recommendation standard information may include Lee's daughter's face shown in the video 404 currently shared in the chat room 402 and the sharing frequency of existing shared videos. In addition, the recommendation standard information includes profile data and name data of Jung's face, Officer Ahn, participants Kim, Jung, Ahn, and Lee, and conversations ( 406), it may be a conversation text related to Lee's daughter, etc.
메신저 애플리케이션은 추천 리스트를 통해, 추천 기준 정보에 대응하는 부가 정보를 우선적으로 검색할 수 있다. 대응되는 부가 정보는 추천 리스트에서 관리되는 영상의 부가 정보이며, 예를 들어, 제 1 및 제 2 객체 데이터, 이력 데이터, 연관 데이터, 쿼리 데이터 등일 수 있다. 기 공유된 영상(404)은 추천 리스트에서 관리될 수 있으나, 추천 기준 정보에 부합하는 다른 영상이 추천 리스트에 존재하지 않는 경우, 메신저 애플리케이션은 순차적으로 디바이스(100) 및 검색 엔진을 통해 영상 및 해당 부가 정보를 검색할 수 있다. The messenger application can preferentially search for additional information corresponding to the recommendation standard information through the recommendation list. The corresponding additional information is additional information of the image managed in the recommendation list, and may be, for example, first and second object data, history data, related data, query data, etc. The already shared video 404 can be managed in the recommendation list, but if no other video matching the recommendation criteria information exists in the recommendation list, the messenger application sequentially searches the video and the corresponding video through the
추천 기준 정보에 부합하는 부가 정보를 갖는 영상은 추천 영상(430)으로 채택되며, 도 7b에 예시된 바와 같이, 공유 후보로 선정된 추천 영상(430)을 포함하는 공유 추천 목록이 디바이스(100)의 화면에 표시될 수 있다. 공유 추천 목록은 추천 메뉴(428)와 동일하거나 별도의 화면을 통해 제공될 수 있다. 도 7b는 추천 리스트의 영상 중에서 추천 영상(430)이 선정된 것을 예시하고 있다. A video with additional information that meets the recommendation criteria information is selected as the recommended video 430, and as illustrated in FIG. 7B, a shared recommendation list including the recommended video 430 selected as a sharing candidate is provided to the
추천 영상(430)은 현 채팅룸(402)에서 기 공유된 영상(404), 공유 영상(404) 및 대화 텍스트와 관련된 Lee 딸의 다른 영상, 대표 프로필 영상(408b)과 관련된 Jung이 포함된 영상 등을 포함하도록 채택될 수 있다. The recommended video (430) includes a video (404) already shared in the current chat room (402), another video of Lee's daughter related to the shared video (404) and conversation text, a video containing Jung related to the representative profile video (408b), etc. may be adopted to include.
다음으로, 메신저 애플리케이션은 공유 추천 목록에서 영상을 선택하는지 여부에 대한 사용자 Lee의 응답을 확인할 수 있다(S125). Lee가 추천 영상(430) 중 적어도 하나를 선택한 경우, 메신저 애플리케이션은 Lee 가 선택한 영상을 채팅룸(402)에서 공유시킴과 아울러서, 공유한 영상의 부가 정보를 업데이트 시킬 수 있다(S130). Next, the messenger application can check user Lee's response as to whether to select a video from the shared recommendation list (S125). When Lee selects at least one of the recommended videos 430, the messenger application can share the video selected by Lee in the chat room 402 and update additional information about the shared video (S130).
도 7b 및 도 8을 예로 들면, Lee는 추천 리스트에 제시된 추천 영상(430)의 우상단의 선택 탭을 통해 추천 영상(430)을 선택할 수 있다. Lee는 대화 내용에 부합하도록 딸과 관련된 영상(432)을 선택하고, Jung과 관련된 영상(432)을 선택하지 않는다. Lee의 선택 응답에 따라, 딸과 관련된 영상(434)이 채팅룸에 공유하도록 업로드될 수 있다. 본 예시는 채팅룸(402)의 모든 참가자가 딸 관련 영상(442)을 공유하는 것을 보여주고 있으나, 다른 예로 참가자 중 일부에게만 영상을 전송하는 비개방형 공유(예컨대, 멘션, 속삭임, 채팅룸(402)에 부수되어 개설되는 비밀 대화방 등)에 의해, 딸 관련 영상(432)이 공유될 수 있다.Taking FIGS. 7B and 8 as an example, Lee can select the recommended video 430 through the selection tab at the top right of the recommended video 430 presented in the recommendation list. Lee selects the video (432) related to his daughter to match the content of the conversation, and does not select the video (432) related to Jung. Depending on Lee's selected response, a video 434 related to his daughter may be uploaded to be shared in the chat room. This example shows all participants in the chat room 402 sharing the daughter-related video 442, but as another example, there is a closed sharing method in which the video is sent to only some of the participants (e.g., mentions, whispers, and chat room 402). A video 432 related to the daughter may be shared through a secret chat room opened separately, etc.
또한, 공유 영상(442)의 부가 정보는 메신저 애플리케이션에 의해 업데이트되어, 사용자 디바이스(100)에 의해 관리될 수 있다. 본 예시에서 업데이트되는 부가 정보는 공유 영상(442)의 이력 데이터 및 연관 데이터 등일 수 있다. Additionally, additional information of the shared video 442 may be updated by a messenger application and managed by the
한편, Lee가 공유 추천 목록에 제공된 추천 영상(430)을 선택하지 않고, 도 7b에 예시된 다른 메뉴, 예컨대 사진, 비디오 등을 통해 비추천 영상을 선택한 경우, 메신저 애플리케이션은 선택된 비추천 영상을 채팅룸(402)에서 공유시킴과 아울러서, 공유된 영상의 부가 정보를 관리할 수 있다(S130). Meanwhile, if Lee does not select the recommended video 430 provided in the shared recommendation list, but selects a non-recommended video through another menu illustrated in FIG. 7B, such as a photo or video, the messenger application sends the selected non-recommended video to the chat room (402) ), in addition to sharing, you can manage additional information of the shared video (S130).
공유된 비추천 영상에 대한 부가 정보가 생성되지 않은 경우, 채팅룸(402)의 공유 상황에 적합한 부가 정보가 생성되어 상기 영상에 태깅될 수 있다. 공유된 비추천 영상에 부가 정보가 이미 태깅되어 있는 경우, 부가 정보는 공유 상황을 반영하도록 업데이트될 수 있다. 상술한 처리는 부가 정보의 관리를 의미할 수 있다. If additional information for the shared non-recommended video is not created, additional information suitable for the sharing situation in the chat room 402 may be generated and tagged to the video. If additional information is already tagged in the shared non-recommended video, the additional information may be updated to reflect the sharing situation. The above-described processing may refer to the management of additional information.
본 개시에서는 사용자의 추천 메뉴를 통한 영상 공유 요청을 예로 들고 있으나, 메뉴를 통한 공유 요청은 추천 메뉴 외에 다른 메뉴에 의해서도 수행될 수 있다. 예를 들어, 애플리케이션이 관리하는 영상 리스트, 도 7b의 최근 항목, 다운로드, 검색 등의 메뉴가 활성화되어, 공유 요청에 따른 추천이 시작될 수 있다. 검색 메뉴는 사용자가 공유할 영상을 찾기 위한 검색 질의를 입력하는 인터페이스를 구비할 수 있다. 검색 질의는 추천 기준 정보에 속하고, 추천 기준 정보는 검색 질의, 검색 질의와 연관된 공유 기준 정보, 연관된 컨텍스트 정보를 전부 포함하도록 생성될 수 있다. 메신저 애플리케이션을 검색 질의와 관련된 추천 기준 정보에 부합하는 부가 정보를 갖는 영상을 추천 영상으로 제공할 수 있다. 사용자가 추천 영상을 공유하면, 메신저 애플리케이션은 검색 질의, 질의와 연관된 컨텍스트 정보를 부가 정보의 쿼리 데이터, 연관 데이터, 이력 데이터 등에 반영시킬 수 있다. In this disclosure, a video sharing request through a user's recommended menu is used as an example, but a sharing request through a menu can also be performed by a menu other than the recommended menu. For example, menus such as the video list managed by the application, recent items in FIG. 7B, download, and search may be activated, and recommendations based on sharing requests may begin. The search menu may have an interface through which a user enters a search query to find an image to share. The search query belongs to recommendation criteria information, and the recommendation criteria information can be created to include all of the search query, shared criteria information associated with the search query, and associated context information. A messenger application can provide a video with additional information that meets recommendation criteria information related to a search query as a recommended video. When a user shares a recommended video, the messenger application can reflect the search query and context information related to the query, such as query data, related data, and history data of additional information.
도 9는 메신저에서 구현되는 영상 추천의 다른 예를 나타내는 도면이다. 도 9는 입력창(412)에서 제공하는 키워드에 의한 영상 검색 기능을 이용하는 공유 요청을 예시한 실시예이며, 도 6의 후속 상황을 보여주고 있다. 상기 관점에서 메뉴의 선택에 따른 공유 요청에 따른 도 6 내지 도 8(특히, 도 7a 및 도 7b)의 실시예와 상이하다. Figure 9 is a diagram showing another example of video recommendation implemented in a messenger. Figure 9 is an example of a sharing request using the image search function based on keywords provided in the input window 412, and shows a follow-up situation to Figure 6. In this respect, it is different from the embodiment of FIGS. 6 to 8 (particularly, FIGS. 7A and 7B) according to a sharing request according to menu selection.
구체적으로, 도 9에 따른 실시예는 도 4의 S115 단계에서 도 6의 실시예와 상이하다. 사용자가 예컨대, 입력창(412) 내의 영상 검색 키(도 6의 416 참고)대해 터치 입력함으로써, 사용자 디바이스(100)는 입력창(412)을 영상 검색 필드로 기능하도록 메신저를 제어할 수 있다. 입력창(412)이 영상 검색 필드로 기능하는 경우, 영상 검색 키(416)는 텍스트 키(418)로 변경될 수 있다. 사용자가 채팅룸(402)에서 대화(406)를 위한 텍스트를 입력하고자 할 경우, 사용자가 텍스트 키(418)에 대해 터치 입력함으로써, 입력창(412)은 텍스트 입력 인터페이스로 기능될 수 있다. Specifically, the embodiment according to FIG. 9 is different from the embodiment of FIG. 6 in step S115 of FIG. 4. When the user, for example, makes a touch input on the image search key (refer to 416 in FIG. 6) in the input window 412, the
사용자 디바이스(100)는 S115 단계에서, 영상 검색 필드로 기능하는 입력창(412)에서 키워드(436)의 입력을 검출하면, 영상의 공유 요청이 있는 것으로 인식할 수 있다. 도 9에서는 사용자 Lee가 영상 검색 필드로 기능하는 입력창(412)에 "내 딸 Jane"과 같은 키워드(436)를 입력하는 것을 예시하고 있다.When the
사용자 디바이스(100)는 도 6 내지 도 8을 통해 설명한 S120 단계와 마찬가지로, 추천 리스트의 영상 중 추천 기준 정보를 충족하는 영상을 추천 영상(444)으로 선정하여, 공유 추천 목록(440)를 생성할 수 있다. Similar to step S120 described with reference to FIGS. 6 to 8 , the
추천 기준 정보는 일례로, 입력된 키워드(436)에 기초하여 생성될 수 있다. 다른 예로, 추천 기준 정보는 입력된 키워드(436)과 함께, 공유 기준 정보에 기반하여 생성될 수도 있다. 상술한 예들에서, 입력된 키워드(436)는 머신 러닝에 의해 분석되어, 입력된 키워드와 동일성 및/또는 관련성을 갖는다고 추정되는 확장 키워드가 도출될 수 있다.Recommendation standard information may be generated based on the input keyword 436, for example. As another example, recommendation standard information may be generated based on shared standard information along with the input keyword 436. In the examples described above, the input keyword 436 may be analyzed by machine learning to derive extended keywords that are estimated to have identity and/or relevance to the input keyword.
도 9에서 추천 기준 정보가 키워드(436) 및 공유 기준 정보에 기반하는 경우, 키워드(436)에 따른 추천 기준 정보는 키워드(436)의 문구 및 확장 키워드를 포함할 수 있다. 키워드(436)에 따른 추천 기준 정보는 예컨대, 키워드 문구인"내 딸 Jane"외에도, 채팅룸(402)의 Lee의 딸 관련 대화 텍스트 등을 참조하여 생성된 확장 키워드인 "Lee 딸", "7살 딸", "딸 Jane" 등을 포함할 수 있다. 공유 기준 정보는 예컨대, 도 6에서 공유 영상(404)으로부터 식별되는 Lee 딸의 얼굴 및 공유 빈도 등일 수 있다.In FIG. 9 , when the recommendation standard information is based on the keyword 436 and the sharing standard information, the recommendation standard information according to the keyword 436 may include a phrase and an extended keyword of the keyword 436. Recommendation standard information based on the keyword 436 includes, for example, in addition to the keyword phrase "My daughter Jane", extended keywords "Lee's daughter" and "7 years old" created by referring to conversation text related to Lee's daughter in the chat room 402. May include “daughter”, “daughter Jane”, etc. The sharing standard information may be, for example, the face and sharing frequency of Lee's daughter identified from the shared video 404 in FIG. 6 .
사용자 디바이스(100)는 추천 리스트를 통해, 추천 기준 정보에 대응하는 부가 정보를 우선적으로 검색할 수 있다. 도 9의 경우, 부가 정보는 예를 들어, 제 1 및 제 2 객체 데이터, 이력 데이터, 연관 데이터, 쿼리 데이터 등일 수 있다. The
추천 기준 정보에 부합하는 부가 정보를 갖는 영상은 추천 영상(440)으로 채택되며, 도 9에 예시된 바와 같이, 추천 영상(440)을 포함하는 공유 추천 목록(440)이 입력창(412)과 동일한 화면에 표시될 수 있다. 추천 영상(440)은 도 6의 설명과 마찬가지로, 현 채팅룸(402)에서 기 공유된 영상(도 6의 404) 및 Lee 딸의 다른 영상을 포함할 수 있다. 여기서, 도 9는 추천 리스트의 영상 중에서 추천 영상이 선정된 것을 예시하고 있다. A video with additional information that meets the recommendation criteria information is selected as the recommended video 440, and as illustrated in FIG. 9, a shared recommendation list 440 including the recommended video 440 is displayed in the input window 412 and Can be displayed on the same screen. Similar to the explanation in FIG. 6 , the recommended video 440 may include a video already shared in the current chat room 402 (404 in FIG. 6 ) and other videos of Lee's daughter. Here, Figure 9 illustrates that a recommended video is selected from among the videos in the recommendation list.
사용자는 공유 추천 목록(440)에서 적어도 하나의 추천 영상을 공유 영상으로 선택하고, 전송키(438)를 터치함으로써, 공유 영상이 채팅룸(402)에 표시될 수 있다. The user may select at least one recommended video as a shared video from the shared recommendation list 440 and touch the transmission key 438 to display the shared video in the chat room 402.
본 개시에 따르면, 사용자가 공유할 영상과 관련된 키워드를 입력함으로써, 사용자의 의도에 보다 부합하는 영상이 추천될 수 있다. According to the present disclosure, by inputting keywords related to the video to be shared by the user, a video that better matches the user's intention can be recommended.
도 10 및 도 11은 메신저에서 구현되는 영상 추천의 또 다른 예를 나타내는 도면이다. 도 10 및 도 11은 도 9와 마찬가지로, 입력창(412)에서 제공하는 키워드에 의한 영상 검색 기능을 이용하는 공유 요청을 예시한 실시예이다. 이에 더하여, 본 개시는 메신저의 추천 리스트 외에도, 외부 컨텐츠, 예컨대 디바이스 영상 및 검색 엔진에 의한 영상으로부터 선정된 추천 영상을 포함하는 공유 추천 목록(440)을 예시하고 있다. 본 개시는 상기 관점에서 도 6 내지 도 8에 예시된 추천 리스트의 영상에만 의존하는 추천과 상이하다. Figures 10 and 11 are diagrams showing another example of video recommendation implemented in a messenger. Figures 10 and 11, like Figure 9, illustrate an example of a sharing request using the image search function by keyword provided in the input window 412. In addition, the present disclosure illustrates a shared recommendation list 440 that includes recommended images selected from external content, such as device images and images from a search engine, in addition to the messenger's recommendation list. In this regard, the present disclosure differs from recommendations that rely only on images in the recommendation list illustrated in FIGS. 6 to 8.
사용자 디바이스(100)는 영상 검색 필드로 기능하는 입력창(412)에서 키워드(436)의 입력을 검출하면, 영상의 공유 요청이 있는 것으로 인식할 수 있다. 도 10에서는 사용자 Lee가 영상 검색 필드로 기능하는 입력창(412)에 "AA 동네 Pub"과 같은 키워드(444)를 입력하는 것을 예시하고 있다.When the
사용자 디바이스(100)는 추천 리스트의 영상, 디바이스 영상 및 검색 엔진에 의한 영상 중 추천 기준 정보를 충족하는 영상을 추천 영상(448)으로 선정하여, 공유 추천 목록(446)을 생성할 수 있다. The
본 개시에서 추천 기준 정보는 키워드(444), 공유 기준 정보, 채팅룸(402)의 대화 데이터 및 컨텐스트 정보에 기초하여 생성될 수 있다. In the present disclosure, recommendation criteria information may be generated based on keywords 444, sharing criteria information, conversation data of the chat room 402, and content information.
키워드(444)에 따른 추천 기준 정보는 키워드(444)의 문구 및 확장 키워드를 포함할 수 있다. 키워드(444)에 따른 추천 기준 정보는 예컨대 키워드 문구인"동네 AA Pub"외에도, 채팅룸(402)과 관련된 대화 텍스트(420a) 등을 참조하여 생성된 확장 키워드인 "동네 AA", "동네 AA에 있는 술집", "동네 AA에 있는 식당", "동네 AA에 있는 명소"등을 포함할 수 있다. 공유 기준 정보는 예컨대, 기존의 공유 영상으로부터 식별되는 Pub, 식당 등의 객체 명 및 공유 빈도 등일 수 있다. Recommendation criteria information according to the keyword 444 may include a phrase and an extended keyword of the keyword 444. Recommendation standard information according to the keyword 444 is, for example, in addition to the keyword phrase "Neighborhood AA Pub", the extended keywords "Neighborhood AA" and "Neighborhood AA" are generated by referring to the conversation text 420a related to the chat room 402. May include “bar in neighborhood”, “restaurant in neighborhood AA”, “attraction in neighborhood AA”, etc. The sharing standard information may be, for example, the name of an object such as a pub or restaurant identified from an existing shared video and the sharing frequency.
참가자들은 며칠 전 특정 동네 AA의 Pub에서 가진 모임을 주제로 대화하고 있다. 사용자 디바이스(100)는 대화 데이터(420a)로부터 대화 정보를 추출할 수 있다. 대화 정보는 예컨대, 현재 대화일 이전의 소정 기간, 특정 위치 AA와 같은 장소, Pub와 관련된 특징적 환경 객체, 복수의 사람이 있는 상황 등일 수 있다. 또한, 사용자 디바이스(100)는 대표 프로필 영상(408a, 408b, 408c)으로부터 Jung, Ahn, Kim, Lee의 얼굴을 식별하고, 경우에 따라 각 사용자가 보유하는 영상, 프로필 데이터 및 명칭 데이터에 기초하여, 각 사용자의 관계인을 식별할 수 있다. 식별된 참가자 등과 관련된 정보는 사용자 연계 정보일 수 있다. 사용자 디바이스(100)는 대화 정보 및 사용자 연계 정보를 포함하는 컨텍스트 정보에 기반하여 추천 기준 정보를 생성할 수 있다. Participants are talking about a meeting held a few days ago at an AA pub in a certain neighborhood. The
사용자 디바이스(100)는 추천 리스트를 통해, 추천 기준 정보에 대응하는 부가 정보를 우선적으로 검색할 수 있다. 도 10의 경우, 부가 정보는 예를 들어, 메타 데이터, 제 1 및 제 2 객체 데이터, 이력 데이터, 연관 데이터, 쿼리 데이터 등일 수 있다. 메타 데이터는 예를 들어, 촬영 시간 데이터 및 촬영 위치 데이터 중 적어도 하나를 포함할 수 있다. 도 10의 경우, 제 1 객체 데이터는 Pub, 술집 등과 관련된 영상의 개략 식별자일 수 있으며, 제 2 객체 데이터는 예컨대, Jung의 프로필 데이터과 관련된 영상의 세부 식별자일 수 있다. 도 10에서, 연관 데이터는 과거의 영상 공유와 연관된 채팅룸(402)의 참가자들의 대화 데이터를 포함하고, 쿼리 데이터는 예컨대, 입력창(412)을 통한 영상 검색시에 사용한 키워드 등을 포함할 수 있다. The
도 10에서, 추천 기준 정보에 부합하는 부가 정보는 예컨대 며칠 전에, 채팅룸(402)의 참가자 중 적어도 하나가 동네 AA에 위치한 술집, Pub, 명소 등에서 모여 있는 것일 수 있다. In FIG. 10 , additional information that meets the recommendation criteria information may be, for example, a few days ago, at least one of the participants in the chat room 402 gathered at a bar, pub, attraction, etc. located in AA in the neighborhood.
도 11에 예시된 바와 같이, 사용자 디바이스(100)는 추천 리스트에서 추천 기준 정보에 근접한 부가 정보를 갖는 영상, 예컨대 Jung이 다른 참가자와 함께 동네 AA 명소에서 촬영된 영상 및 복수의 영상을 추천 영상(448)으로 제시할 수 있다. 이는 도 11의 앨범(추천)으로 예시되어 있다. As illustrated in FIG. 11, the
이에 더하여, 사용자 디바이스(100)는 디바이스 영상 중 추천 기준 정보를 충족하는 부가 정보를 갖는 영상, 예컨대 Jung 및 다른 참가자가 동네 AA의 Pub에서 촬영된 영상 및 다수의 영상을 추천 영상(448)으로 제시할 수 있다. 여기서, 디바이스 영상은 추천 리스트에 포함되지 않은 영상이며, 도 5를 통해 설명된 부가 정보, 예컨대 상세 데이터, 제 1 객체 데이터 등을 포함할 수 있다. 디바이스 영상의 부가 정보는 미리 생성되거나, 추천 영상을 제시하는 과정에서 생성될 수도 있다. 이에 따라, 도 11에서 디바이스 영상의 부가 정보는 동네 AA와 같은 위치, 촬영 날짜, Jung 및 Pub, 술집 등과 관련된 영상의 개략 식별자 등을 포함할 수 있다. In addition, the
도 11에 미도시되어 있으나, 사용자 디바이스(100)는 추천 기준 정보의 키워드(444) 및 영상을 이용한 검색 엔진을 통해, 추천 기준 정보에 부합하는 영상을 탐색하며, 추천 영상(448)을 제시할 수 있다. Although not shown in FIG. 11, the
즉, 공유 추천 목록(446)은 추천 리스트의 영상, 디바이스 영상, 검색 엔진에 의한 영상을 포함하는 추천 영상(448)으로 표시될 수 있다. That is, the shared recommendation list 446 may be displayed as a recommended video 448 including videos from the recommendation list, device videos, and videos from a search engine.
본 개시에서는 추천 리스트의 영상, 디바이스(100)의 영상 전부가 동시에 탐색되는 것을 예시하고 있다. In this disclosure, it is exemplified that all images in the recommended list and images in the
다른 예에서는, 사용자 디바이스(100)가 추천 리스트의 영상, 디바이스 영상, 검색 엔진에 의한 영상을 소정 조건에 따라 순차적으로 탐색하고, 추천 기준 정보에 부합하는 영상만을 추천 영상으로 제시할 수 있다. In another example, the
구체적으로, 도 6 내지 도 8에서 설명한 바와 같이, 사용자 디바이스(100)는 추천 리스트의 영상을 우선적으로 탐색하고, 추천 리스트에서 추천 기준 정보에 따른 영상이 발견되지 않는 경우, 사용자 디바이스(100)에서 저장된 디바이스 영상을 탐색할 수 있다. 또한, 추천 기준 정보에 매칭되는 디바이스 영상이 탐색되지 않는 경우, 사용자 디바이스(100)는 상술한 키워드(444) 등을 이용한 검색 엔진에 의해 추천 기준 정보에 부합하는 영상을 탐색할 수 있다.Specifically, as described in FIGS. 6 to 8, the
상술한 예를 도 11에 적용하면, 사용자 디바이스(100)는 추천 리스트의 영상을 우선적으로 탐색하였으나, 추천 기준 정보에 부합하는 추천 리스트의 영상이 탐색되지 않으므로, 사용자 디바이스(100)는 후속적으로 디바이스 영상을 탐색할 수 있다. 추천 기준 정보에 부합하는 디바이스 영상이 존재하면, 사용자 디바이스(100)는 도 11과 달리, 메신저의 추천 리스트과 관련된 영상을 추천 영상으로 제공하지 않고, 상기 디바이스 영상만을 추천 영상(448)으로 제시할 수 있다. Applying the above-mentioned example to FIG. 11, the
도 12는 외부 컨텐츠를 메신저의 영상 리스트에 추가하는 방법에 관한 순서도이다. 도 13은 도 12에 따른 외부 컨텐츠의 추가 문의를 예시한 도면이다. 본 개시는 도 10 및 도 11의 상황과 관련되는 것으로 예시하고 있다. Figure 12 is a flowchart of a method for adding external content to the video list of a messenger. FIG. 13 is a diagram illustrating an additional inquiry about external content according to FIG. 12. The present disclosure is illustrated as being related to the situation in FIGS. 10 and 11.
도 10 및 도 11과 유사하게, 사용자 디바이스(100)는 영상 검색 필드로 기능하는 입력창(412)에서 키워드(444)의 입력을 검출하면(S305), 영상의 공유 요청이 있는 것으로 인식할 수 있다. 도 13에서는 사용자 Lee가 영상 검색 필드로 기능하는 입력창(412)에 "AA 동네 Pub"과 같은 키워드(444)를 입력하는 것을 예시하고 있다. Similar to FIGS. 10 and 11, when the
다음으로, 사용자 디바이스(100)는 도 13에 예시된 바와 같이, 추천 리스트의 영상, 디바이스 영상 및 검색 엔진에 의한 영상 중 추천 기준 정보를 충족하는 영상을 추천 영상(448)으로 제시할 수 있다. 추천 영상(448)은 디바이스 영상 및 검색 엔진에 의한 영상과 관련된 데이터 중 적어도 하나를 갖는 외부 컨텐츠를 포함할 수 있다(S310). Next, as illustrated in FIG. 13 , the
추천 영상의 제시를 일련의 과정은 도 10 및 도 11의 설명과 실질적으로 동일하다. 디바이스 영상은 추천 리스트에 포함되지 않은 영상이나, 부가 정보를 이미 갖거나, 디바이스 영상의 부가 정보는 추천 과정에서 생성될 수도 있다. 검색 엔진에 의한 영상과 관련된 데이터는 예를 들어, 컨텐츠 파일 및 컨텐츠의 링크 정보 중 적어도 하나를 포함할 수 있다.The series of processes for presenting a recommended video is substantially the same as the description of FIGS. 10 and 11. The device image may be an image that is not included in the recommendation list, may already have additional information, or the additional information of the device image may be generated during the recommendation process. Data related to an image by a search engine may include, for example, at least one of a content file and content link information.
외부 컨텐츠가 추천 영상(448)으로 제시된 경우, 사용자 디바이스(100)는 외부 컨텐츠를 메신저의 영상 리스트에 추가할지 여부를 문의할 수 있다(S315). When external content is presented as a recommended video 448, the
도 13에 예시된 바와 같이, 사용자 디바이스(100)는 디바이스 영상에 대한 선택 탭(450) 및 영상 리스트로의 추가와 관련된 키(예컨대, "앨범 추가")를 표시할 수 있다. "앨범 추가"는 선택 탭(450)으로 선정한 디바이스 영상을 영상 리스트에 추가시키기 위한 인터페이스일 수 있다. "공유"는 선정한 디바이스 영상을 채팅룸(402)에 표시시키기 위한 인터페이스일 수 있다. 본 개시에서는 "앨범 추가"가 공유 추천 목록(440)에 위치되는 것을 예시하고 있으나, 영상 리스트로의 추가와 관련된 인터페이스는 다양한 형태로 변형될 수 있다. As illustrated in FIG. 13 , the
다음으로, 사용자 디바이스(100)는 선택한 디바이스 영상에 대한 추가 요청에 응답하여, 외부 컨텐츠 및 해당 컨텐츠의 링크 정보 중 적어도 하나를 메신저의 영상 리스트에 추가시킬 수 있다(S320). Next, in response to a request to add the selected device video, the
예컨대, 사용자가 디바이스 영상을 선택한 후, "앨범 추가"를 터치함으로써, 상기 디바이스 영상은 영상 리스트에 추가될 수 있다. For example, after the user selects a device image, the device image can be added to the video list by touching “Add album.”
본 개시에서는 영상 리스트의 추가를 위주로 설명하고 있으나, 다른 예로, S315 단계에서 영상 리스트 및 메신저의 추가 리스트 중 적어도 하나에 추가할지 여부를 문의할 수 있다. 다른 예에 의하면, "앨범 추가"를 터치함으로써, 영상 리스트(예컨대, 도 7b의 전체 앨범 또는 메신저에 관리되는 영상 앨범 등)의 추가 및 추천 리스트의 추가와 관련된 인터페이스가 표시될 수 있다. 외부 컨텐츠가 추천 리스트에 추가되면, 입력창(412)에서 입력된 키워드(444) 등을 포함하는 키워드 데이터는 해당 영상의 부가 정보로 생성될 수 있다. In this disclosure, the description is focused on adding a video list, but as another example, in step S315, it may be inquired whether to add to at least one of the video list and the messenger's additional list. According to another example, by touching “Add album”, an interface related to adding a video list (eg, all albums in FIG. 7B or a video album managed in a messenger, etc.) and adding a recommended list may be displayed. When external content is added to the recommendation list, keyword data including the keyword 444 entered in the input window 412 may be generated as additional information for the corresponding video.
본 개시에 따르면, 사용자가 추후 공유할 가능성이 높은 영상이 메신저에서 관리되므로, 사용자가 공유에 적합한 영상을 선택하기 위해, 메신저 및 사용자 디바이스(100) 등의 영상을 전부 찾아야 하는 번거로움이 해소될 수 있다. 아울러, 디바이스 영상 등이 가급적 메신저에서 관리되어, 메신저의 활용성이 증대될 수 있다. According to the present disclosure, since videos that the user is likely to share in the future are managed in the messenger, the hassle of having to search for all videos in the messenger and the
본 개시의 예시적인 방법들은 설명의 명확성을 위해서 동작의 시리즈로 표현되어 있지만, 이는 단계가 수행되는 순서를 제한하기 위한 것은 아니며, 필요한 경우에는 각각의 단계가 동시에 또는 상이한 순서로 수행될 수도 있다. 본 개시에 따른 방법을 구현하기 위해서, 예시하는 단계에 추가적으로 다른 단계를 포함하거나, 일부의 단계를 제외하고 나머지 단계를 포함하거나, 또는 일부의 단계를 제외하고 추가적인 다른 단계를 포함할 수도 있다.Exemplary methods of the present disclosure are expressed as a series of operations for clarity of explanation, but this is not intended to limit the order in which the steps are performed, and each step may be performed simultaneously or in a different order, if necessary. In order to implement the method according to the present disclosure, other steps may be included in addition to the exemplified steps, some steps may be excluded and the remaining steps may be included, or some steps may be excluded and additional other steps may be included.
본 개시의 다양한 실시 예는 모든 가능한 조합을 나열한 것이 아니고 본 개시의 대표적인 양상을 설명하기 위한 것이며, 다양한 실시 예에서 설명하는 사항들은 독립적으로 적용되거나 또는 둘 이상의 조합으로 적용될 수도 있다.The various embodiments of the present disclosure do not list all possible combinations but are intended to explain representative aspects of the present disclosure, and matters described in the various embodiments may be applied independently or in combination of two or more.
또한, 본 개시의 일실시예에 따른 방법은 다양한 컴퓨터 장치에 의해 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 개시를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 분야의 통상의 기술자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드 뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 개시의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.Additionally, the method according to an embodiment of the present disclosure may be implemented in the form of program instructions that can be executed by various computer devices and recorded on a computer-readable medium. Computer-readable media may include program instructions, data files, data structures, etc., singly or in combination. Program instructions recorded on the medium may be specially designed and configured for the present disclosure or may be known and usable by those skilled in the art of computer software. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic media such as floptical disks. -Includes optical media (magneto-optical media) and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, etc. Examples of program instructions include machine language code, such as that produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter, etc. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the present disclosure, and vice versa.
또한, 본 개시의 다양한 실시예는 하드웨어, 펌웨어(firmware), 소프트웨어, 또는 그들의 결합 등에 의해 구현될 수 있다. 하드웨어에 의한 구현의 경우, 하나 또는 그 이상의 ASICs(Application Specific Integrated Circuits), DSPs(Digital Signal Processors), DSPDs(Digital Signal Processing Devices), PLDs(Programmable Logic Devices), FPGAs(Field Programmable Gate Arrays), 범용 프로세서(general processor), 컨트롤러, 마이크로 컨트롤러, 마이크로 프로세서 등에 의해 구현될 수 있다.Additionally, various embodiments of the present disclosure may be implemented by hardware, firmware, software, or a combination thereof. For hardware implementation, one or more ASICs (Application Specific Integrated Circuits), DSPs (Digital Signal Processors), DSPDs (Digital Signal Processing Devices), PLDs (Programmable Logic Devices), FPGAs (Field Programmable Gate Arrays), general purpose It can be implemented by a processor (general processor), controller, microcontroller, microprocessor, etc.
본 개시의 범위는 다양한 실시예의 방법에 따른 동작이 장치 또는 컴퓨터 장치 상에서 실행되도록 하는 소프트웨어 또는 머신-실행가능한 명령들(예를 들어, 운영체제, 애플리케이션, 펌웨어(firmware), 프로그램 등), 및 이러한 소프트웨어 또는 명령 등이 저장되어 장치 또는 컴퓨터 상에서 실행 가능한 비-일시적 컴퓨터-판독가능 매체(non-transitory computer-readable medium)를 포함한다.The scope of the present disclosure includes software or machine-executable instructions (e.g., operating systems, applications, firmware, programs, etc.) that allow operations according to the methods of various embodiments to be executed on a device or computer device, and such software. Or it includes a non-transitory computer-readable medium in which instructions, etc. are stored and can be executed on a device or computer.
Claims (21)
메신저에서 관리되는 영상의 부가 정보를 생성하여 태깅(tagging)하는 단계;
상기 부가 정보가 태깅된 영상을 상기 메신저의 추천 리스트에 등록하는 단계;
채팅룸에 참여한 사용자의 공유 요청에 대한 응답으로, 상기 채팅룸의 추천 기준 정보 및 상기 부가 정보에 기반하여 상기 추천 리스트에 등록된 적어도 하나의 영상을 추천하는는 단계; 및
상기 사용자의 상기 추천된 영상에 대한 선택에 응답하여, 선택된 영상을 상기 채팅룸에서 공유하는 단계를 포함하는 메신저에서의 영상 추천 방법. In a video recommendation method in a messenger performed by a computing device including a processor,
A step of generating and tagging additional information of the video managed in the messenger;
registering the video tagged with the additional information in a recommendation list of the messenger;
In response to a sharing request from a user participating in the chat room, recommending at least one video registered in the recommendation list based on recommendation standard information of the chat room and the additional information; and
In response to the user's selection of the recommended video, a video recommendation method in a messenger comprising sharing the selected video in the chat room.
상기 부가 정보는 상기 영상의 시간 데이터, 상기 영상의 위치 데이터 및 상기 영상의 적어도 하나의 객체를 식별한 정보를 갖는 객체 데이터 중 적어도 하나가 포함된 상세 데이터를 갖는, 메신저에서의 영상 추천 방법.
According to claim 1,
The additional information has detailed data including at least one of time data of the video, location data of the video, and object data containing information identifying at least one object of the video.
상기 객체 데이터는 상기 영상에 포함된 객체 별로 분류하는 개략 식별자를 상기 객체와 연관되도록 관리되고,
상기 채팅룸에 참여한 사용자의 프로필 데이터 및 상기 사용자와 관련성을 갖는 객체의 명칭 데이터 중 적어도 하나가 상기 영상에서 인식된 객체와 매칭하는 것에 응답하여, 상기 객체 데이터는 상기 프로필 데이터 및 상기 명칭 데이터 중 적어도 하나를 추출한 세부 식별자를 상기 인식된 객체와 연관되도록 관리되는, 메신저에서의 영상 추천 방법.
According to claim 3,
The object data is managed so that a rough identifier that classifies each object included in the image is associated with the object,
In response to at least one of profile data of a user participating in the chat room and name data of an object related to the user matching an object recognized in the image, the object data is at least one of the profile data and the name data. A video recommendation method in a messenger that manages the extracted detailed identifier to be associated with the recognized object.
상기 부가 정보는 상기 영상의 공유 이력을 관리하는 이력 데이터 및 공유된 영상의 선택에 이용된 키워드를 관리하는 키워드 데이터 중 적어도 하나가 포함된 공유 연관 데이터를 가지되,
상기 이력 데이터는 상기 사용자가 참여하는 현재의 채팅룸 및 상기 사용자가 참여한 다른 채팅룸 중 적어도 하나에서 공유된 영상의 공유 이력을 포함하며,
상기 키워드 데이터는 상기 현재의 채팅룸 및 상기 다른 채팅룸 중 적어도 하나에서 상기 공유된 영상의 선택에 이용된 키워드를 포함하는, 메신저에서의 영상 추천 방법.
According to claim 1,
The additional information has shared related data that includes at least one of history data that manages the sharing history of the video and keyword data that manages keywords used to select the shared video,
The history data includes a sharing history of videos shared in at least one of the current chat room in which the user participates and another chat room in which the user participates,
The keyword data includes keywords used to select the shared video in at least one of the current chat room and the other chat room.
상기 키워드 데이터는 상기 채팅룸의 사용자들 간에 교환된 대화 데이터들 중 상기 공유된 영상의 선택과 관련된 연관 데이터 및 상기 사용자가 상기 메신저를 통해 상기 공유된 영상을 검색하는데 활용된 질의를 포함하는 쿼리 데이터 중 적어도 하나를 포함하고,
상기 연관 데이터 및 상기 쿼리 데이터는 상기 대화 데이터들 및 상기 질의에 대한 머신 러닝을 통해 추론되는, 메신저에서의 영상 추천 방법.
According to claim 4,
The keyword data is related data related to selection of the shared video among conversation data exchanged between users of the chat room and query data including a query used by the user to search for the shared video through the messenger. contains at least one,
The video recommendation method in a messenger, wherein the related data and the query data are inferred through machine learning on the conversation data and the query.
상기 공유 요청은 상기 채팅룸의 메뉴를 이용한 상기 사용자의 영상 공유 요청 및 상기 채팅룸의 메시지 입력창으로 입력되는 키워드에 의한 영상 공유 요청 중 어느 하나인, 메신저에서의 영상 추천 방법.
According to claim 1,
The sharing request is a video recommendation method in a messenger, which is one of the user's video sharing request using the menu of the chat room and the video sharing request by keyword input into the message input window of the chat room.
상기 키워드에 의한 영상 공유 요청의 경우, 상기 영상을 추천하는 단계는 상기 키워드에 따른 상기 추천 기준 정보에 기초하여, 상기 컴퓨팅 디바이스에서 저장된 디바이스 영상 및 검색 엔진에 의해 탐색된 영상 중 적어도 하나를 포함하는 외부 컨텐츠를 제시하는 단계; 및
상기 사용자의 요청에 의해, 상기 메신저에서 관리하는 영상 리스트 및 상기 추천 리스트 중 적어도 하나에 상기 외부 컨텐츠를 추가하는 단계를 더 포함하는, 메신저에서의 영상 추천 방법.
According to claim 6,
In the case of a video sharing request by the keyword, the step of recommending the video includes at least one of a device video stored in the computing device and a video searched by a search engine based on the recommendation criteria information according to the keyword. presenting external content; and
A video recommendation method in a messenger, further comprising adding the external content to at least one of a video list managed by the messenger and the recommendation list at the request of the user.
상기 추천 기준 정보는 소정의 조건에 따른 공유 기준 정보, 상기 채팅룸의 컨텍스트 정보 또는 상기 공유 요청을 위해 상기 사용자가 입력하는 키워드 중 적어도 하나를 포함하고, 상기 컨텍스트 정보는 상기 채팅룸에 참여한 사용자와 관련된 사용자 연계 정보 및 상기 채팅룸의 대화 데이터로부터 추출된 대화 정보 중 적어도 하나를 갖는, 메신저에서의 영상 추천 방법.
According to claim 1,
The recommendation standard information includes at least one of sharing standard information according to predetermined conditions, context information of the chat room, or a keyword entered by the user for the sharing request, and the context information includes a user related to the user who participated in the chat room. A video recommendation method in a messenger having at least one of linkage information and conversation information extracted from conversation data of the chat room.
상기 영상을 추천하는 단계는,
상기 추천 리스트에 등록된 영상을 우선적으로 검색하여 상기 영상을 추천하는 단계;
상기 추천 리스트에서 상기 추천 기준 정보에 부합하는 상기 영상이 탐색되지 않는 것에 응답하여, 상기 컴퓨팅 디바이스에서 저장된 다비아스 영상에서 상기 추천 기준 정보에 부합하는 상기 디바이스 영상을 검색하여 제시하는 단계; 및
상기 디바이스 영상이 탐색되지 않는 것에 응답하여, 검색 엔진에 의해 상기 추천 기준 정보에 부합하는 영상을 검색하여 제시하는 단계를 포함하는, 메신저에서의 영상 추천 방법.
According to claim 1,
The step of recommending the video is,
preferentially searching for videos registered in the recommendation list and recommending the videos;
In response to the image matching the recommendation standard information not being searched for in the recommendation list, searching for and presenting the device image matching the recommendation standard information in the David video stored in the computing device; and
In response to the device video not being searched, a method of recommending a video in a messenger comprising searching for and presenting an video matching the recommendation criteria information by a search engine.
상기 컴퓨팅 디바이스에서 관리되는 영상의 부가 정보를 생성하여 태깅하는 단계; 및
상기 사용자의 요청에 의해, 상기 부가 정보가 태깅된 영상을 상기 메신저에서 관리하는 영상 리스트 및 상기 추천 리스트 중 적어도 하나에 추가하는 단계를 더 포함하는, 메신저에서의 영상 추천 방법.
According to claim 1,
Generating and tagging additional information of the image managed by the computing device; and
A video recommendation method in a messenger further comprising adding the video tagged with the additional information to at least one of a video list managed by the messenger and the recommendation list at the user's request.
메신저에서 관리되는 영상의 부가 정보를 생성하여 태깅하는 단계;
상기 부가 정보가 태깅된 영상을 상기 메신저의 추천 리스트에 등록하는 단계;
채팅룸에 참여한 사용자의 공유 요청에 대한 응답으로, 상기 채팅룸의 추천 기준 정보 및 상기 부가 정보에 기반하여 상기 추천 리스트에 등록된 적어도 하나의 영상을 추천하는 단계; 및
상기 사용자의 상기 추천된 영상에 대한 선택에 응답하여, 선택된 영상을 상기 채팅룸에서 공유하는 단계를 실행하도록 설정되는 컴퓨터 프로그램. In the computer program stored in a computer-readable non-transitory recording medium for executing a video recommendation method in a messenger on a computer,
Generating and tagging additional information of the video managed in the messenger;
registering the video tagged with the additional information in a recommendation list of the messenger;
In response to a sharing request from a user participating in the chat room, recommending at least one video registered in the recommendation list based on recommendation standard information of the chat room and the additional information; and
In response to the user's selection of the recommended video, the computer program is configured to execute the step of sharing the selected video in the chat room.
적어도 하나의 인스트럭션을 저장하는 메모리; 및
상기 메모리에 저장된 상기 적어도 하나의 인스트럭션을 실행하는 프로세서를 포함하되,
상기 프로세서는,
메신저 에서 관리되는 영상의 부가 정보를 생성하여 태깅하고,
상기 부가 정보가 태깅된 영상을 상기 메신저의 추천 리스트에 등록하고,
채팅룸에 참여한 사용자의 공유 요청에 대한 응답으로, 상기 채팅룸의 추천 기준 정보 및 상기 부가 정보에 기반하여 상기 추천 리스트에 등록된 적어도 하나의 영상을 추천하고,
상기 사용자의 상기 추천된 영상에 대한 선택에 응답하여, 선택된 영상을 상기 채팅룸에서 공유하도록 구성되는, 컴퓨팅 디바이스.
In a computing device implementing instructions,
a memory storing at least one instruction; and
A processor that executes the at least one instruction stored in the memory,
The processor,
Generate and tag additional information for videos managed in the messenger,
Register the video tagged with the additional information in the recommended list of the messenger,
In response to a sharing request from a user participating in the chat room, recommending at least one video registered in the recommendation list based on the recommendation standard information of the chat room and the additional information,
In response to the user's selection of the recommended video, the computing device is configured to share the selected video in the chat room.
상기 부가 정보는 상기 영상의 시간 데이터, 상기 영상의 위치 데이터 및 상기 영상의 적어도 하나의 객체를 식별한 정보를 갖는 객체 데이터 중 적어도 하나가 포함된 상세 데이터를 갖는, 컴퓨팅 디바이스.
According to clause 12,
The additional information has detailed data including at least one of time data of the image, location data of the image, and object data having information identifying at least one object of the image.
상기 객체 데이터는 상기 영상에 포함된 객체 별로 분류하는 개략 식별자를 상기 객체와 연관되도록 관리되고,
상기 채팅룸에 참여한 사용자의 프로필 데이터 및 상기 사용자와 관련성을 갖는 객체의 명칭 데이터 중 적어도 하나가 상기 영상에서 인식된 객체와 매칭하는 것에 응답하여, 상기 객체 데이터는 상기 프로필 데이터 및 상기 명칭 데이터 중 적어도 하나를 추출한 세부 식별자를 상기 인식된 객체와 연관되도록 관리되는, 컴퓨팅 디바이스.
According to clause 13,
The object data is managed so that a rough identifier that classifies each object included in the image is associated with the object,
In response to at least one of profile data of a user participating in the chat room and name data of an object related to the user matching an object recognized in the image, the object data is at least one of the profile data and the name data. A computing device that is managed to associate the extracted detailed identifier with the recognized object.
상기 부가 정보는 상기 영상의 공유 이력을 관리하는 이력 데이터 및 공유된 영상의 선택에 이용된 키워드를 관리하는 키워드 데이터 중 적어도 하나가 포함된 공유 연관 데이터를 가지되,
상기 이력 데이터는 상기 사용자가 참여하는 현재의 채팅룸 및 상기 사용자가 참여한 다른 채팅룸 중 적어도 하나에서 공유된 영상의 공유 이력을 포함하며,
상기 키워드 데이터는 상기 현재의 채팅룸 및 상기 다른 채팅룸 중 적어도 하나에서 상기 공유된 영상의 선택에 이용된 키워드를 포함하는, 컴퓨팅 디바이스.
According to clause 12,
The additional information has shared related data that includes at least one of history data that manages the sharing history of the video and keyword data that manages keywords used to select the shared video,
The history data includes a sharing history of videos shared in at least one of the current chat room in which the user participates and another chat room in which the user participates,
and the keyword data includes keywords used in selection of the shared video in at least one of the current chat room and the other chat room.
상기 키워드 데이터는 상기 채팅룸의 사용자들 간에 교환된 대화 데이터들 중 상기 공유된 영상의 선택과 관련된 연관 데이터 및 상기 사용자가 상기 메신저를 통해 상기 공유된 영상을 검색하는데 활용된 질의를 포함하는 쿼리 데이터 중 적어도 하나를 포함하고,
상기 연관 데이터 및 상기 쿼리 데이터는 상기 대화 데이터들 및 상기 질의에 대한 머신 러닝을 통해 추론되는, 컴퓨팅 디바이스.
According to clause 15,
The keyword data is related data related to selection of the shared video among conversation data exchanged between users of the chat room and query data including a query used by the user to search for the shared video through the messenger. contains at least one,
The computing device wherein the related data and the query data are inferred through machine learning on the conversation data and the query.
상기 공유 요청은 상기 채팅룸의 메뉴를 이용한 상기 사용자의 영상 공유 요청 및 상기 채팅룸의 메시지 입력창으로 입력되는 키워드에 의한 영상 공유 요청 중 어느 하나인, 컴퓨팅 디바이스.
According to clause 12,
The sharing request is one of a video sharing request by the user using a menu of the chat room and a video sharing request by a keyword entered into a message input window of the chat room.
상기 키워드에 의한 영상 공유 요청의 경우, 상기 영상을 추천하는 것은,
상기 키워드에 따른 상기 추천 기준 정보에 기초하여, 상기 컴퓨팅 디바이스에서 저장된 디바이스 영상 및 검색 엔진에 의해 탐색된 영상 중 적어도 하나를 포함하는 외부 컨텐츠를 제시하고,
상기 사용자의 요청에 의해, 상기 메신저에서 관리하는 영상 리스트 및 상기 추천 리스트 중 적어도 하나에 상기 외부 컨텐츠를 추가하는 것을 더 포함하는, 컴퓨팅 디바이스.
According to clause 17,
In the case of a video sharing request based on the above keyword, recommending the video is:
Based on the recommendation criteria information according to the keyword, presenting external content including at least one of a device image stored in the computing device and an image searched by a search engine,
The computing device further includes adding the external content to at least one of a video list and the recommendation list managed by the messenger in response to the user's request.
상기 추천 기준 정보는 소정의 조건에 따른 공유 기준 정보, 상기 채팅룸의 컨텍스트 정보 또는 상기 공유 요청을 위해 상기 사용자가 입력하는 키워드 중 적어도 하나를 포함하고, 상기 컨텍스트 정보는 상기 채팅룸에 참여한 사용자와 관련된 사용자 연계 정보 및 상기 채팅룸의 대화 데이터로부터 추출된 대화 정보 중 적어도 하나를 갖는, 컴퓨팅 디바이스.
According to clause 12,
The recommendation standard information includes at least one of sharing standard information according to predetermined conditions, context information of the chat room, or a keyword entered by the user for the sharing request, and the context information includes a user related to the user who participated in the chat room. A computing device having at least one of linkage information and conversation information extracted from conversation data of the chat room.
상기 영상을 추천하는 것은,
상기 추천 리스트에 등록된 영상을 우선적으로 검색하여 상기 영상을 추천하고,
상기 추천 리스트에서 상기 추천 기준 정보에 부합하는 상기 영상이 탐색되지 않는 것에 응답하여, 상기 컴퓨팅 디바이스에서 저장된 다비아스 영상에서 상기 추천 기준 정보에 부합하는 상기 디바이스 영상을 검색하여 제시하고,
상기 디바이스 영상이 탐색되지 않는 것에 응답하여, 검색 엔진에 의해 상기 추천 기준 정보에 부합하는 영상을 검색하여 제시하는 것을 포함하는, 컴퓨팅 디바이스.
According to claim 12,
I recommend this video:
Recommend the video by preferentially searching for the video registered in the recommendation list,
In response to the fact that the image matching the recommendation standard information is not searched in the recommendation list, searching for and presenting the device image matching the recommendation standard information in the David video stored in the computing device,
In response to the device image not being searched, a computing device comprising searching for and presenting an image matching the recommendation criteria information by a search engine.
상기 프로세서는,
상기 컴퓨팅 디바이스에서 관리되는 디바이스 영상의 부가 정보를 생성하여 태깅하고,
상기 사용자의 요청에 의해, 상기 부가 정보가 태깅된 디바이스 영상을 상기 메신저에서 관리하는 영상 리스트 및 상기 추천 리스트 중 적어도 하나에 추가하도록 더 구성되는, 컴퓨팅 디바이스.According to clause 12,
The processor,
Generate and tag additional information on the device image managed by the computing device,
The computing device is further configured to add the device video tagged with the additional information to at least one of a video list managed by the messenger and the recommendation list at the request of the user.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020220137373A KR20240057083A (en) | 2022-10-24 | 2022-10-24 | Method, computer program and computing device for recommending an image in a messenger |
PCT/KR2023/010496 WO2024090726A1 (en) | 2022-10-24 | 2023-07-20 | Method for recommending image on messenger, recording medium and computing device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020220137373A KR20240057083A (en) | 2022-10-24 | 2022-10-24 | Method, computer program and computing device for recommending an image in a messenger |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20240057083A true KR20240057083A (en) | 2024-05-02 |
Family
ID=90831204
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020220137373A KR20240057083A (en) | 2022-10-24 | 2022-10-24 | Method, computer program and computing device for recommending an image in a messenger |
Country Status (2)
Country | Link |
---|---|
KR (1) | KR20240057083A (en) |
WO (1) | WO2024090726A1 (en) |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20120092457A (en) * | 2011-02-11 | 2012-08-21 | 호서대학교 산학협력단 | Apparatus and method for recommending contents in real time |
KR102211396B1 (en) * | 2014-03-11 | 2021-02-02 | 에스케이플래닛 주식회사 | Contents sharing service system, apparatus for contents sharing and contents sharing service providing method thereof |
US10348658B2 (en) * | 2017-06-15 | 2019-07-09 | Google Llc | Suggested items for use with embedded applications in chat conversations |
JP7102513B2 (en) * | 2017-09-22 | 2022-07-19 | Line株式会社 | Recommendation methods and systems that use content that includes location data |
KR20210130583A (en) * | 2020-04-22 | 2021-11-01 | 라인플러스 주식회사 | Method and system for sharing content on instant messaging application |
-
2022
- 2022-10-24 KR KR1020220137373A patent/KR20240057083A/en unknown
-
2023
- 2023-07-20 WO PCT/KR2023/010496 patent/WO2024090726A1/en unknown
Also Published As
Publication number | Publication date |
---|---|
WO2024090726A1 (en) | 2024-05-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11182643B2 (en) | Ranking clusters based on facial image analysis | |
KR102638612B1 (en) | Apparatus and methods for facial recognition and video analysis to identify individuals in contextual video streams | |
US8983210B2 (en) | Social network system and method for identifying cluster image matches | |
US9342817B2 (en) | Auto-creating groups for sharing photos | |
JP5791605B2 (en) | Metadata tagging system, image search method, device, and gesture tagging method applied thereto | |
US9531823B1 (en) | Processes for generating content sharing recommendations based on user feedback data | |
US9098584B1 (en) | Image search privacy protection techniques | |
US20170093780A1 (en) | Sharing images and image albums over a communication network | |
US20110211737A1 (en) | Event Matching in Social Networks | |
JP2015510622A (en) | Using photos to start and perform actions | |
KR101686830B1 (en) | Tag suggestions for images on online social networks | |
US20110148857A1 (en) | Finding and sharing of digital images based on shared face models | |
US9405964B1 (en) | Processes for generating content sharing recommendations based on image content analysis | |
US9552421B2 (en) | Simplified collaborative searching through pattern recognition | |
US10503777B2 (en) | Method and device relating to information management | |
US20170364537A1 (en) | Image-aided data collection and retrieval | |
WO2020044099A1 (en) | Service processing method and apparatus based on object recognition | |
KR100707969B1 (en) | Method for providing the sympathy of the classified objects having the property and computer readable medium processing the method | |
KR20240057083A (en) | Method, computer program and computing device for recommending an image in a messenger | |
WO2014172827A1 (en) | A method and apparatus for acquaintance management and privacy protection | |
US11853382B2 (en) | Method of generating a webpage and a conference room for each specific topic |