KR20130026565A - Apparatus and method for providing social network service using sound - Google Patents
Apparatus and method for providing social network service using sound Download PDFInfo
- Publication number
- KR20130026565A KR20130026565A KR1020110075734A KR20110075734A KR20130026565A KR 20130026565 A KR20130026565 A KR 20130026565A KR 1020110075734 A KR1020110075734 A KR 1020110075734A KR 20110075734 A KR20110075734 A KR 20110075734A KR 20130026565 A KR20130026565 A KR 20130026565A
- Authority
- KR
- South Korea
- Prior art keywords
- sound
- social network
- network service
- feature value
- group information
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 28
- 238000000605 extraction Methods 0.000 claims description 2
- 239000000284 extract Substances 0.000 abstract description 9
- 238000010586 diagram Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/01—Social networking
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Computing Systems (AREA)
- Health & Medical Sciences (AREA)
- Tourism & Hospitality (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Information Transfer Between Computers (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
본 발명의 실시예들은 사용자가 입력하는 사운드를 이용하여 상기 사용자에게 소셜 네트워크 서비스(SNS: Social Network Service)를 제공하는 사운드를 이용한 소셜 네트워크 서비스 제공 장치 및 방법에 관한 것이다.Embodiments of the present invention relate to an apparatus and method for providing a social network service using a sound for providing a social network service (SNS) to the user using a sound input by the user.
현재 네트워크를 통하여 소셜 네트워크 서비스 제공자로부터 트위터(twitter), 페이스북(facebook), 미투데이(me2day) 등과 같은 다양한 소셜 네트워크 서비스가 제공되고 있다.Currently, various social network services such as twitter, facebook, me2day, etc. are provided from social network service providers through the network.
소셜 네트워크 서비스는 인터넷 상에서 친구, 선후배, 동료 등 지인과의 인맥 관계를 강화시키고 새로운 인맥을 쌓으며 폭넓은 인적 네트워크를 형성할 수 있도록 해주는 서비스이다. 이러한 소셜 네트워크 서비스를 제공하는 방법으로서, 한국 공개특허공보 10-2011-0016349 "소셜 네트워크 서비스 제공 방법 및 장치"가 있다.Social network service is a service that allows you to strengthen your network with friends, seniors, and colleagues on the Internet, build new networks, and build a wider network of people. As a method of providing such a social network service, there is a Korean Patent Application Publication No. 10-2011-0016349 "Method and apparatus for providing social network service".
그러나 오늘날 개인의 표현욕구가 강해짐에 따라 이와 같은 소셜 네트워크 서비스 제공 방법으로는 다른 사람들과 보다 다양한 정보를 공유하기를 원하는 사용자들을 만족시키기에는 어려움이 있다.However, as the individual's desire to express is stronger, there is a difficulty in satisfying users who want to share more diverse information with others through the method of providing such a social network service.
예를 들어, 특정 영화를 관람한 사용자가 상기 영화에 대한 감상을 공유하고자 하는 경우가 있을 수 있다. 이 경우, 기존의 소셜 네트워크 서비스의 이용자는 상기 영화에 대한 자신의 감상을 가상 게시판 등을 통하여 다른 사람과 공유하거나, 상기 영화에 대하여 대화가 진행되고 있는 대화방 등에 입장하여 사람들과 감상을 공유해왔다. 그러나, 가상 게시판을 통하여 다른 사람과 상기 감상을 공유하는 경우, 일반적으로 상기 가상 게시판을 보는 사람은 상기 영화에 별다른 관심이 없는 사람인 경우가 많기 때문에 사용자는 자신이 게시한 감상에 대한 다른 사람의 반응을 통하여 만족감을 얻기에는 부족한 면이 있었다.For example, there may be a case where a user who has watched a specific movie wants to share his or her view of the movie. In this case, the user of the existing social network service has shared his or her view of the movie with another person through a virtual bulletin board or the like, or enters a chat room where a conversation about the movie is taking place and shares the view with the people. However, when sharing the appreciation with other people through the virtual bulletin board, in general, the user who views the virtual bulletin board is often a person who is not interested in the movie. There was not enough to get satisfaction through.
한편, 상기 사용자가 상기 영화에 대한 대화방에 입장하여 감상을 공유하고자 하는 경우, 먼저 상기 영화에 대한 대화방을 검색해야 하는 불편함이 있을 뿐만 아니라, 상기 대화방을 검색하기 위해 적합한 키워드를 선정하는데 어려움이 있었다. 일 예로, 사용자가 특정 시간 또는 특정 장소에서 공연한 연극에 대한 감상을 공유하고자 하는 경우, 종래의 소셜 네트워크 서비스로는 상기 사용자에게 특정 시간 또는 특정 장소에서 공연한 연극을 본 사용자를 추천하기 어렵다는 문제점이 있었다.On the other hand, when the user enters a chat room for the movie and wants to share their views, it is not only inconvenient to search for the chat room for the movie first, but also difficult to select a suitable keyword for searching the chat room. there was. For example, when a user wants to share an appreciation about a play performed at a specific time or a specific place, it is difficult to recommend a user who saw a play performed at a specific time or a specific place to the user using a conventional social network service. There was this.
따라서, 사용자들에게 보다 만족감을 제공할 수 있고, 사용자들이 보다 간편하게 소셜 네트워크 서비스를 이용할 수 있는 방법이 요구되고 있는 실정이다.Therefore, there is a demand for a method that can provide more satisfaction to users and allow users to use social network services more easily.
사운드를 이용하여 소셜 네트워크 서비스를 제공함으로써 사용자가 보다 간편하게 다른 사용자와 정보를 공유할 수 있는 소셜 네트워크 서비스 제공 장치 및 방법이 제공된다.Provided are a method and apparatus for providing a social network service, in which a user can more easily share information with another user by providing a social network service using sound.
특정 이벤트를 공유하는 것뿐만 아니라 특정 시간에 동일한 사운드를 듣고 있는 사용자 또는 특정 장소에 위치하는 사용자와 정보를 공유할 수 있는 소셜 네트워크 서비스 제공 장치 및 방법이 제공된다.Apparatus and a method for providing a social network service capable of sharing information with a user who is listening to the same sound at a specific time or a user located at a specific place as well as sharing a specific event are provided.
소셜 네트워크 서비스 제공 장치는, 사용자 단말로부터 사운드를 수신하는 사운드 수신부, 상기 수신되는 사운드에서 특징값을 추출하는 특징값 추출부 및 상기 추출된 특징값에 매칭되는 사운드를 전송하는 사용자를 그룹화하여 그룹 정보를 생성하는 그룹 정보 생성부를 포함할 수 있다.The apparatus for providing a social network service includes grouping information by grouping a sound receiver that receives a sound from a user terminal, a feature value extractor that extracts a feature value from the received sound, and a user who transmits a sound matching the extracted feature value It may include a group information generation unit for generating a.
일 측에 따르면, 상기 특징값 추출부에서 추출된 특징값을 데이터베이스에 저장된 사운드의 특징값과 비교하여 매칭되는 메타 정보를 검색하는 메타 정보 검색부를 더 포함하고, 상기 그룹 정보 생성부는 상기 검색된 메타 정보에 매칭되는 메타 정보가 검색되는 사용자를 그룹화하여 상기 그룹 정보를 생성할 수 있다.According to one side, the feature value extracted by the feature value extracting unit further comprises a meta information search unit for searching for matching meta information by comparing with the feature value of the sound stored in the database, the group information generation unit the searched meta information The group information may be generated by grouping users whose meta information matched with is searched for.
다른 측면에 따르면, 상기 추출된 특징값에 매칭되는 상기 메타 정보가 검색되지 않는 경우, 상기 사용자 단말로부터 상기 수신되는 사운드에 대한 메타 정보를 등록 받는 메타 정보 등록부를 더 포함할 수 있다.According to another aspect, if the meta information matching the extracted feature value is not retrieved, it may further include a meta information registration unit for registering the meta information on the received sound from the user terminal.
또 다른 측면에 따르면, 상기 그룹 정보 생성부는 상기 사운드가 입력되는 시간을 기초로 상기 사용자를 그룹화하여 상기 그룹 정보를 생성하거나 상기 사용자 단말의 위치 정보를 기초로 상기 사용자를 그룹화하여 상기 그룹 정보를 생성할 수 있다.According to another aspect, the group information generation unit generates the group information by grouping the users based on a time when the sound is input or generates the group information by grouping the users based on location information of the user terminal. can do.
소셜 네트워크 서비스 제공 장치는, 사운드를 입력 받는 사운드 입력부, 상기 입력되는 사운드를 소셜 네트워크 서비스 제공 서버로 전송하는 사운드 전송부 및 상기 전송되는 사운드에서 추출된 특징값에 매칭되는 사운드를 상기 소셜 네트워크 서비스 제공 서버로 전송하는 사용자를 그룹화함으로써 생성된 그룹 정보를 상기 소셜 네트워크 서비스 제공 서버로부터 수신하여 표시하는 그룹 정보 표시부를 포함할 수 있다.The social network service providing apparatus includes a sound input unit for receiving a sound, a sound transmitter for transmitting the input sound to a social network service providing server, and a sound that matches a feature value extracted from the transmitted sound. It may include a group information display for receiving and displaying the group information generated by grouping the user to send to the server from the social network service providing server.
소셜 네트워크 서비스를 제공하는 방법은, 사용자 단말로부터 사운드를 수신하는 단계, 상기 수신되는 사운드에서 특징값을 추출하는 단계, 상기 추출된 특징값에 매칭되는 사운드를 전송하는 사용자를 그룹화하여 그룹 정보를 생성하는 단계 및 상기 생성된 그룹 정보를 상기 사용자 단말로 전송하는 단계를 포함할 수 있다.The method for providing a social network service includes: receiving group sound from a user terminal, extracting a feature value from the received sound, and grouping users transmitting a sound matching the extracted feature value to generate group information And transmitting the generated group information to the user terminal.
사용자 단말로부터 입력되는 사운드에서 특징값을 추출하고 상기 추출된 특징값에 매칭되는 사운드를 전송하는 사용자를 그룹화함으로써 사용자가 보다 간편하게 다른 사용자와 정보를 공유할 수 있다.By extracting feature values from the sound input from the user terminal and grouping users transmitting a sound matching the extracted feature values, the user can more easily share information with other users.
사운드가 입력되는 시간 또는 장소를 기초로 사용자들을 그룹화함으로써 특정 이벤트를 공유하는 것뿐만 아니라 특정 시간에 동일한 사운드를 듣고 있는 사용자 또는 특정 장소에 위치하는 사용자와 정보를 공유할 수 있다.By grouping users on the basis of the time or place where the sound is input, not only sharing a specific event but also sharing information with a user who is listening to the same sound at a specific time or a user located at a specific place.
도 1은 본 발명의 일실시예에 있어서, 사운드를 이용한 소셜 네트워크 서비스 제공 시스템을 나타내는 개념도이다.
도 2는 본 발명의 일실시예에 있어서, 사운드를 이용한 소셜 네트워크 서비스 제공 장치를 설명하기 위한 블록도이다.
도 3 및 도 4는 본 발명의 일실시예에 있어서, 사운드를 이용하여 사용자에게 소셜 네트워크 서비스를 제공하는 일 예를 나타내는 예시도이다.
도 5는 본 발명의 일실시예에 있어서, 소셜 네트워크 서비스를 제공하는 방법을 나타내는 흐름도이다.
도 6은 본 발명의 다른 실시예에 있어서, 소셜 네트워크 서비스를 제공하는 방법을 나타내는 흐름도이다.1 is a conceptual diagram illustrating a social network service providing system using sound according to an embodiment of the present invention.
2 is a block diagram illustrating an apparatus for providing a social network service using sound according to an embodiment of the present invention.
3 and 4 are exemplary views illustrating an example of providing a social network service to a user using sound according to an embodiment of the present invention.
5 is a flowchart illustrating a method of providing a social network service according to an embodiment of the present invention.
6 is a flowchart illustrating a method of providing a social network service according to another embodiment of the present invention.
이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.
도 1은 본 발명의 일실시예에 있어서, 사운드를 이용한 소셜 네트워크 서비스 제공 시스템을 나타내는 개념도이다. 도 1을 참조하면 소셜 네트워크 서비스 제공 시스템은 복수개의 사용자 단말(110, 120), 소셜 네트워크 서비스 제공 서버(130) 및 데이터베이스(140)를 포함할 수 있다.1 is a conceptual diagram illustrating a social network service providing system using sound according to an embodiment of the present invention. Referring to FIG. 1, the social network service providing system may include a plurality of
각각의 사용자 단말(110, 120)은 네트워크를 통하여 사용자가 입력하는 사운드를 소셜 네트워크 서비스 제공 서버(130)로 전송한다. 상기 사용자 단말(110, 120)은 상기 사용자가 소셜 네트워크 서비스 제공 서버로부터 소셜 네트워크 서비스 등과 같은 다양한 서비스를 제공 받는 장치로서, 스마트 폰과 같은 휴대 단말이나 데스크톱 컴퓨터 등과 같이 네트워크 기능을 포함하고 사운드를 입력할 수 있는 장치로 구현될 수 있다.Each of the
소셜 네트워크 서비스 제공 서버(130)는 상기 사용자가 전송한 사운드를 기초로 상기 사운드에 매칭되는 사운드를 전송한 사용자들을 그룹화하여 그룹 정보를 생성하고 이를 다시 네트워크를 통하여 사용자 단말(110, 120)로 전송한다.The social network
이 때, 일 실시예로서 상기 소셜 네트워크 서비스 제공 서버(130)는 사용자 단말로부터 전송되는 각각의 사운드에서 특징값을 추출하고, 이를 비교하여 매칭되는 사운드를 입력하는 사용자를 그룹화함으로써 그룹 정보를 생성할 수 있다.At this time, as an embodiment, the social network
한편, 다른 실시예로서 상기 소셜 네트워크 서비스 제공 서버(130)는 상기 사용자 단말로부터 전송되는 각각의 사운드에서 특징값을 추출하여 이를 데이터베이스(140)에 저장된 사운드의 특징값과 비교하여 매칭되는 메타 정보를 검색하고, 검색된 메타 정보를 기초로 그룹 정보를 생성할 수 있다.Meanwhile, as another embodiment, the social network
도 2는 본 발명의 일실시예에 있어서, 사운드를 이용한 소셜 네트워크 서비스 제공 장치를 설명하기 위한 블록도이다. 이하, 도 2를 참조하여 본 발명에 따른 소셜 네트워크 서비스 제공 장치를 보다 상세히 설명한다.2 is a block diagram illustrating an apparatus for providing a social network service using sound according to an embodiment of the present invention. Hereinafter, a social network service providing apparatus according to the present invention will be described in detail with reference to FIG. 2.
사용자 단말(110)은 사운드 입력부(210), 사운드 전송부(220) 및 그룹 정보 표시부(230)를 포함할 수 있다.The
사운드 입력부(210)는 사용자가 소셜 네트워크 서비스 제공 서버(130)로 전송하고자 하는 사운드를 입력 받는다. 이를 위하여 상기 사운드 입력부(210)는 마이크 등과 같은 사운드 입력 장치로 구현되어, 상기 사용자 단말의 일 측에 구비될 수도 있다.The
사운드 전송부(220)는 상기 사운드 입력부(210)를 통하여 입력되는 사운드를 무선 통신망, 이동 통신망 등의 네트워크를 통하여 소셜 네트워크 서비스 제공 서버(130)로 전송한다.The
그룹 정보 표시부(230)는 소셜 네트워크 서비스 제공 서버(130)로부터 상기 네트워크를 통하여 그룹 정보를 수신하여 이를 표시한다. 상기 그룹 정보는 일 실시예로 소셜 네트워크 서비스 제공 서버(130)가 사용자 단말(110)에서 전송되는 사운드에서 특징값을 추출하여 상기 특징값에 매칭되는 사운드를 상기 소셜 네트워크 서비스 제공 서버로 전송하는 사용자를 그룹화함으로써 생성될 수 있고, 다른 실시예로 데이터베이스(140)에 저장된 복수개의 사운드 중 상기 특징값에 매칭되는 특징값을 가지는 사운드의 메타 정보를 검색하여 검색된 메타 정보에 해당하는 메타 정보가 검색되는 사용자를 그룹화함으로써 생성될 수도 있다.The group
상기 그룹 정보 표시부(230)는 일 예로, 상기 사용자 단말에 어플리케이션의 형태로 포함되어, 상기 소셜 네트워크 서비스 제공 서버(130)로부터 수신한 그룹 정보를 소정의 형태로 표시함으로써 상기 사용자에게 소셜 네트워크 서비스를 제공할 수 있다.For example, the group
한편, 본 발명의 일 실시예에 따른 소셜 네트워크 서비스 제공 서버(130)는 사운드 수신부(240), 특징값 추출부(250) 및 그룹 정보 생성부(260)를 포함할 수 있다.Meanwhile, the social network
사운드 수신부(240)는 사용자 단말로부터 네트워크를 통해 전송되는 상기 사운드를 수신한다.The
특징값 추출부(250)는 상기 사운드 수신부(240)에서 수신되는 사운드에서 특징값(fingerprint)을 추출한다.The
그룹 정보 생성부(260)는 상기 특징값 추출부(250)에서 추출된 특징값에 매칭되는 사운드를 전송하는 사용자를 그룹화하여 그룹 정보를 생성한다. 이 때, 상기 그룹 정보 생성부(260)는 상기 사운드가 입력되는 시간을 기초로 상기 사용자를 그룹화하여 상기 그룹 정보를 생성하거나 상기 사용자 단말의 위치 정보를 기초로 상기 사용자를 그룹화하여 상기 그룹 정보를 생성할 수 있다.The
예를 들어, 그룹 정보 생성부(260)가 사운드가 입력되는 시간을 기초로 그룹 정보를 생성하는 경우, 상기 그룹 정보 생성부(260)는 소정의 시간 동안 사운드 수신부(240)로 수신되는 사운드 각각에서 추출된 특징값을 비교하여, 매칭되는 특징값을 포함하는 사운드를 전송하는 사용자를 그룹화하여 그룹 정보를 생성할 수 있다. 이 경우, 소셜 네트워크 서비스 제공 서버(130)는 특정 시간에 사운드를 전송하는 사용자를 그룹화할 수 있기 때문에, 사용자가 특정 시간에 공연 중인 연극을 감상하던 중 상기 연극을 감상하고 있는 다른 사용자와 상기 연극에 대한 감상을 공유하고자 할 경우에도 간편하게 사운드를 입력함으로써 다른 사용자와 상기 연극에 대한 감상을 공유할 수 있다.For example, when the group
또한, 그룹 정보 생성부(260)가 사용자 단말의 위치 정보를 기초로 그룹 정보를 생성하는 경우, 소셜 네트워크 서비스 제공 서버(130)는 사운드 수신부(240)에서 사운드가 수신될 때 해당 사용자 단말의 위치 정보를 GPS(Global Positioning System) 등을 이용하여 검출하고, 상기 위치 정보와 상기 특징값이 상기 사용자가 전송하는 사운드의 특징값과 매칭되는 사용자를 그룹화하여 그룹 정보를 생성할 수 있다. 이 경우, 소셜 네트워크 서비스 제공 서버(130)는 특정 위치에서 사운드를 전송하는 사용자를 그룹화할 수 있기 때문에, 사용자가 영화 감상 중 상기 영화에 대한 감상을 다른 사용자와 공유하고자 할 경우에도 같은 영화관에서 영화를 감상하는 다른 사용자와 감상을 공유할 수 있도록 할 수 있다.In addition, when the group
한편, 다른 실시예로서, 소셜 네트워크 서비스 제공 서버(130)는 사운드 수신부(240), 특징값 추출부(250) 및 그룹 정보 생성부(260) 외에 메타 정보 검색부(270) 및 메타 정보 등록부(280)를 더 포함할 수 있다.On the other hand, as another embodiment, the social network
이 경우, 메타 정보 검색부(270)는 상기 특징값 추출부(250)에서 추출된 특징값을 데이터베이스(140)에 저장된 사운드의 특징값과 비교하여 매칭되는 메타 정보를 검색한다. 여기서, 상기 메타 정보는 사운드에 대한 정보를 포함하는 정보로서, 예를 들어 상기 사운드가 영화에 대한 사운드일 경우, 상기 영화의 제목, 상기 영화를 상영하는 극장에 대한 정보 등을 포함할 수 있다.In this case, the meta
상기 메타 정보 검색부(270)에서 상기 추출된 특징값에 매칭되는 메타 정보가 검색되지 않는 경우, 메타 정보 등록부(280)는 사용자 단말(110)로 상기 사운드에 대한 메타 정보 등록 요청을 전송하여 상기 수신되는 사운드에 대한 메타 정보를 등록 받아 데이터베이스(140)에 저장할 수 있다. 따라서, 데이터베이스(140)에 등록되어 있지 않은 사운드를 사용자가 입력하더라도 상기 사운드를 등록함으로써 다른 사용자가 상기 사운드에 매칭되는 사운드를 전송 시 상기 사용자가 다른 사용자와 정보를 공유할 수 있도록 할 수 있다.When the meta information matching the extracted feature value is not searched by the meta
그룹 정보 생성부(260)는 상기 메타 정보 검색부(270)에서 검색된 메타 정보에 매칭되는 메타 정보가 검색되는 사용자를 그룹화하여 그룹 정보를 생성한다. 이 때도 상기 그룹 정보 생성부(260)는 상기 사운드가 입력되는 시간을 기초로 상기 사용자를 그룹화하여 상기 그룹 정보를 생성하거나 상기 사용자 단말의 위치 정보를 기초로 상기 사용자를 그룹화하여 상기 그룹 정보를 생성함으로써 특정 시간에 동일한 사운드를 듣고 있는 사용자 또는 특정 장소에 위치하는 사용자와 정보를 공유할 수 있도록 할 수 있다.The group
일 예로, 제1 사용자가 특정 영화의 상영 시간 중 10분에서 12분에 해당하는 사운드를 소셜 네트워크 서비스 제공 서버(130)로 전송하고 제2 사용자가 상기 영화의 11분에서 13분에 해당하는 사운드를 상기 소셜 네트워크 서비스 제공 서버(130)로 전송하는 경우, 상기 소셜 네트워크 서비스 제공 서버(130)는 상기 영화의 11분에서 12분에 해당하는 사운드의 특징값을 이용하여 상기 제1 사용자와 상기 제2 사용자를 그룹화할 수 있지만, 제1 사용자가 특정 영화의 상영 시간 중 10분에서 11분에 해당하는 사운드를 소셜 네트워크 서비스 제공 서버(130)로 전송하고 제2 사용자가 상기 영화의 12분에서 13분에 해당하는 사운드를 상기 소셜 네트워크 서비스 제공 서버(130)로 전송할 경우, 상기 제1 사용자가 전송한 사운드에서 추출되는 특징값과 상기 제2 사용자가 전송한 사운드에서 추출되는 특징값이 매칭되지 않을 수 있기 때문에 이 경우, 상기 메타 정보 검색부(270)는 상기 데이터베이스(140)에 저장된 사운드와 상기 제1 사용자가 전송한 사운드의 특징값을 비교하여 매칭되는 메타 정보를 검색함으로써 제1 사용자가 전송한 사운드가 어떤 영화의 사운드에 해당하는지 검출할 수 있다. 따라서, 그룹 정보 생성부(270)는 사용자가 전송한 사운드의 특징값과 다른 사용자가 전송한 사운드의 특징값이 매칭되지 않더라도, 상기 사용자가 전송한 사운드의 메타 정보와 매칭되는 메타 정보가 검색되는 사용자를 그룹화하여 그룹 정보를 생성할 수 있다.For example, the first user transmits a sound corresponding to 10 to 12 minutes of the running time of a specific movie to the social network
도 3 및 도 4는 본 발명의 일실시예에 있어서, 사운드를 이용하여 사용자에게 소셜 네트워크 서비스를 제공하는 일 예를 나타내는 예시도이다.3 and 4 are exemplary views illustrating an example of providing a social network service to a user using sound according to an embodiment of the present invention.
사용자가 OX 콘서트에 가서 현재 OX 콘서트에 온 사람들과 감상을 공유하고자 하는 경우, 상기 사용자는 도 3에서 나타나는 바와 같이 사용자 단말을 이용하여 소셜 네트워크 서비스 제공 서버로 사운드를 전송할 수 있다. 이 경우, 소셜 네트워크 서비스 제공 서버는 사용자 단말로부터 상기 사운드를 수신하여 상기 사운드에서 특징값을 추출한다. 그리고, 추출된 특징값에 매칭되는 사운드를 전송하는 사용자를 그룹화하여 그룹 정보를 생성한다. 이 때, 소셜 네트워크 서비스 제공 서버는 상기 사운드가 입력되는 시간, 상기 사용자 단말의 위치 정보 등을 기초로 상기 사용자를 그룹화하여 상기 그룹 정보를 생성함으로써 도 4에 도시된 바와 같이 사용자가 상기 그룹 정보를 이용하여 현재 OX 콘서트에 온 사람들과 감상을 공유할 수 있도록 할 수 있다. 한편, 상기 소셜 네트워크 서비스 제공 서버는 상기 사운드에서 추출된 특징값을 데이터베이스에 저장된 사운드의 특징값과 비교하여 매칭되는 메타 정보를 검색하고, 상기 메타 정보에 매칭되는 메타 정보가 검색되는 사용자를 그룹화함으로써 그룹 정보를 생성할 수 있다. 이 경우, 상기 소셜 네트워크 서비스 제공 서버는 상기 메타 정보를 기초로 사용자를 그룹핑하기 때문에 현재 OX 콘서트에 있는 사용자뿐만 아니라 OX 콘서트를 여는 가수의 팬들, OX 콘서트의 입장권을 구매하고자 하는 사람들과도 대화를 하거나, 정보를 공유할 수 있도록 할 수 있다. 따라서, 사용자는 보다 간편하게 자신과 공통된 관심 분야를 가지는 사람들과 정보를 공유할 수 있고, 보다 긴밀한 공감대를 형성할 수 있다.When a user goes to an OX concert and wants to share their appreciation with people who are currently at the OX concert, the user may transmit a sound to the social network service providing server using the user terminal as shown in FIG. 3. In this case, the social network service providing server receives the sound from the user terminal and extracts feature values from the sound. In addition, group information is generated by grouping users transmitting a sound matching the extracted feature value. At this time, the social network service providing server generates the group information by grouping the user on the basis of the time when the sound is input, the location information of the user terminal, etc. You can use it to share your appreciation with people who are currently at the OX concert. Meanwhile, the social network service providing server searches the matching meta information by comparing the feature value extracted from the sound with the feature value of the sound stored in the database, and groups the users whose meta information matching the meta information is searched. Group information can be created. In this case, since the social network service providing server groups the users based on the meta information, not only the user currently in the OX concert but also the fans of the singer who opens the OX concert and the people who want to purchase the tickets for the OX concert. Or to share information. Thus, a user can more easily share information with people who have a common interest with them, and form a closer consensus.
도 5는 본 발명의 일실시예에 있어서, 소셜 네트워크 서비스를 제공하는 방법을 나타내는 흐름도이다.5 is a flowchart illustrating a method of providing a social network service according to an embodiment of the present invention.
본 발명의 일 실시예에 따른 소셜 네트워크 서비스 제공 서버는 복수개의 사용자 단말로부터 네트워크를 통해 사운드를 수신하여(S510), 상기 사운드에서 특징값을 추출한다(S520). 그리고, 추출된 특징값에 매칭되는 사운드를 전송하는 사용자를 그룹화하여 그룹 정보를 생성하고(S530) 이를 사용자 단말로 전송한다. 이 때, 상기 그룹 정보는 상기 사운드가 입력되는 시간 및/또는 상기 사용자 단말의 위치 정보를 기초로 생성될 수 있다. 따라서, 본 발명에 따른 소셜 네트워크 서비스 제공 장치는 특정 시간 및/또는 특정 장소에서 사운드를 전송하는 사용자를 그룹화할 수 있기 때문에, 사용자가 사운드를 이용하여 보다 간편하게 다른 사용자와 정보를 공유할 수 있는 한편, 특정 시간에 동일한 사운드를 듣고 있는 사용자 또는 특정 장소에 위치하는 사용자와 정보를 공유할 수 있다.The social network service providing server according to an exemplary embodiment of the present invention receives a sound through a network from a plurality of user terminals (S510) and extracts feature values from the sound (S520). In addition, grouping users who transmit sound matching the extracted feature value is generated to generate group information (S530) and transmits the same to the user terminal. In this case, the group information may be generated based on the time when the sound is input and / or the location information of the user terminal. Therefore, since the apparatus for providing a social network service according to the present invention can group users who transmit sound at a specific time and / or a specific place, the user can more easily share information with other users by using the sound. For example, information may be shared with a user who is listening to the same sound at a specific time or with a user who is located at a specific place.
도 6은 본 발명의 다른 실시예에 있어서, 소셜 네트워크 서비스를 제공하는 방법을 나타내는 흐름도이다.6 is a flowchart illustrating a method of providing a social network service according to another embodiment of the present invention.
본 발명의 다른 실시예에 따른 소셜 네트워크 서비스 제공 서버는 복수개의 사용자 단말로부터 네트워크를 통해 사운드를 수신하여(S610), 상기 사운드에서 특징값을 추출한다(S620). 그리고, 추출된 특징값을 기 저장된 사운드의 특징값과 비교하여 매칭되는 메타 정보를 검색한다(S630).The social network service providing server according to another exemplary embodiment of the present invention receives a sound through a network from a plurality of user terminals (S610) and extracts feature values from the sound (S620). The extracted feature value is compared with the feature value of the pre-stored sound to search for matching meta information (S630).
이 때, 상기 소셜 네트워크 서비스 제공 서버는 상기 추출된 특징값에 매칭되는 메타 정보가 검색되는지 판단하여(S640), 검색되지 않는 경우 사용자 단말(110)로 상기 사운드에 대한 메타 정보 등록 요청을 전송하여 사용자로부터 메타 정보를 입력 받아 등록한다(S660). 그리고, 동일한 메타 정보가 검색되는 사용자를 그룹화하여 그룹 정보를 생성하고(S670) 이를 사용자 단말로 전송한다. 따라서, 데이터베이스(140)에 등록되어 있지 않은 사운드를 사용자가 입력하더라도 상기 사운드를 등록함으로써 다른 사용자가 상기 사운드에 매칭되는 사운드를 전송 시 상기 사용자가 다른 사용자와 정보를 공유할 수 있도록 할 수 있고, 사용자가 전송한 사운드의 특징값과 다른 사용자가 전송한 사운드의 특징값이 매칭되지 않더라도 상기 사용자가 전송한 사운드의 메타 정보와 매칭되는 메타 정보가 검색되는 사용자를 그룹화하여 상기 사용자에게 소셜 네트워크 서비스를 제공할 수 있다. At this time, the social network service providing server determines whether meta information matching the extracted feature value is searched (S640), and if not found, transmits a meta information registration request for the sound to the
본 발명에 따른 소셜 네트워크 서비스 제공 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method for providing a social network service according to the present invention may be implemented in the form of program instructions that can be executed by various computer means and recorded in a computer readable medium. The computer readable medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the medium may be those specially designed and constructed for the present invention or may be available to those skilled in the art of computer software. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tape, optical media such as CD-ROMs, DVDs, and magnetic disks, such as floppy disks. Magneto-optical media, and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like. The hardware device described above may be configured to operate as one or more software modules to perform the operations of the present invention, and vice versa.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.As described above, the present invention has been described by way of limited embodiments and drawings, but the present invention is not limited to the above embodiments, and those skilled in the art to which the present invention pertains various modifications and variations from such descriptions. This is possible.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined by the equivalents of the claims, as well as the claims.
110, 120: 사용자 단말
130: 소셜 네트워크 서비스 제공 서버
140: 데이터베이스110, 120: user terminal
130: social network service providing server
140: Database
Claims (13)
사용자 단말로부터 사운드를 수신하는 사운드 수신부;
상기 수신되는 사운드에서 특징값을 추출하는 특징값 추출부; 및
상기 추출된 특징값에 매칭되는 사운드를 전송하는 사용자를 그룹화하여 그룹 정보를 생성하는 그룹 정보 생성부
를 포함하는, 소셜 네트워크 서비스 제공 장치.In the social network service providing apparatus,
A sound receiving unit for receiving sound from a user terminal;
A feature value extractor for extracting feature values from the received sound; And
A group information generation unit for generating group information by grouping users transmitting a sound matching the extracted feature value
Social network service providing apparatus comprising a.
상기 특징값 추출부에서 추출된 특징값을 데이터베이스에 저장된 사운드의 특징값과 비교하여 매칭되는 메타 정보를 검색하는 메타 정보 검색부
를 더 포함하고,
상기 그룹 정보 생성부는,
상기 검색된 메타 정보에 매칭되는 메타 정보가 검색되는 사용자를 그룹화하여 상기 그룹 정보를 생성하는, 소셜 네트워크 서비스 제공 장치.The method of claim 1,
Meta information search unit for searching the matching meta information by comparing the feature value extracted from the feature value extraction unit with the feature value of the sound stored in the database
Further comprising:
The group information generation unit,
And generating the group information by grouping users whose meta information matching the searched meta information is searched.
상기 추출된 특징값에 매칭되는 상기 메타 정보가 검색되지 않는 경우, 상기 사용자 단말로부터 상기 수신되는 사운드에 대한 메타 정보를 등록 받는 메타 정보 등록부
를 더 포함하는, 소셜 네트워크 서비스 제공 장치.The method of claim 2,
If the meta information matching the extracted feature value is not retrieved, the meta information registration unit that receives the meta information on the received sound from the user terminal
Further comprising, the social network service providing apparatus.
상기 그룹 정보 생성부는,
상기 사운드가 입력되는 시간을 기초로 상기 사용자를 그룹화하여 상기 그룹 정보를 생성하는, 소셜 네트워크 서비스 제공 장치.4. The method according to any one of claims 1 to 3,
The group information generation unit,
And generating the group information by grouping the users based on a time when the sound is input.
상기 그룹 정보 생성부는,
상기 사용자 단말의 위치 정보를 기초로 상기 사용자를 그룹화하여 상기 그룹 정보를 생성하는, 소셜 네트워크 서비스 제공 장치.The method of claim 3,
The group information generation unit,
And generating the group information by grouping the users based on the location information of the user terminal.
사운드를 입력 받는 사운드 입력부;
상기 입력되는 사운드를 소셜 네트워크 서비스 제공 서버로 전송하는 사운드 전송부; 및
상기 전송되는 사운드에서 추출된 특징값에 매칭되는 사운드를 상기 소셜 네트워크 서비스 제공 서버로 전송하는 사용자를 그룹화함으로써 생성된 그룹 정보를 상기 소셜 네트워크 서비스 제공 서버로부터 수신하여 표시하는 그룹 정보 표시부
를 포함하는, 소셜 네트워크 서비스 제공 장치.In the social network service providing apparatus,
A sound input unit for receiving sound;
A sound transmitter for transmitting the input sound to a social network service providing server; And
A group information display unit for receiving and displaying group information generated by grouping a user who transmits a sound matching the feature value extracted from the transmitted sound to the social network service providing server from the social network service providing server
Social network service providing apparatus comprising a.
상기 그룹 정보는,
상기 추출된 특징값을 데이터베이스에 저장된 사운드의 특징값과 비교하여 매칭되는 메타 정보를 검색하고 상기 검색된 메타 정보에 매칭되는 메타 정보가 검색되는 사용자를 그룹화함으로써 생성되는, 소셜 네트워크 서비스 제공 장치.The method according to claim 6,
The group information,
And comparing the extracted feature value with a feature value of a sound stored in a database to search for matching meta information and grouping users whose meta information matching the searched meta information is searched for.
상기 그룹 정보는,
상기 사운드가 입력되는 시간을 기초로 상기 사용자를 그룹화함으로써 생성되거나, 상기 사용자 단말의 위치 정보를 기초로 상기 사용자를 그룹화함으로써 생성되는, 소셜 네트워크 서비스 제공 장치.The method according to claim 6,
The group information,
The social network service providing apparatus is generated by grouping the user based on a time when the sound is input, or by grouping the user based on location information of the user terminal.
사용자 단말로부터 사운드를 수신하는 단계;
상기 수신되는 사운드에서 특징값을 추출하는 단계;
상기 추출된 특징값에 매칭되는 사운드를 전송하는 사용자를 그룹화하여 그룹 정보를 생성하는 단계; 및
상기 생성된 그룹 정보를 상기 사용자 단말로 전송하는 단계
를 포함하는, 소셜 네트워크 서비스 제공 방법.In the method of providing a social network service,
Receiving sound from a user terminal;
Extracting feature values from the received sound;
Generating group information by grouping users transmitting a sound matching the extracted feature value; And
Transmitting the generated group information to the user terminal.
The social network service providing method comprising a.
상기 특징값을 추출하는 단계 이후에,
상기 추출된 특징값을 기 저장된 사운드의 특징값과 비교하여 매칭되는 메타 정보를 검색하는 단계
를 더 포함하고,
상기 그룹 정보를 생성하는 단계는,
상기 검색된 메타 정보에 매칭되는 메타 정보가 검색되는 사용자를 그룹화하여 상기 그룹 정보를 생성하는 단계인, 소셜 네트워크 서비스 제공 방법.10. The method of claim 9,
After extracting the feature value,
Searching for matching meta information by comparing the extracted feature value with a feature value of a pre-stored sound;
Further comprising:
Generating the group information,
And generating the group information by grouping users whose meta information matching the searched meta information is searched.
상기 메타 정보를 검색하는 단계 이후에,
상기 추출된 특징값에 매칭되는 상기 메타 정보가 검색되지 않는 경우, 상기 사용자 단말로부터 상기 수신되는 사운드에 대한 메타 정보를 등록 받는 단계
를 더 포함하는, 소셜 네트워크 서비스 제공 방법.The method of claim 10,
After retrieving the meta information,
If the meta information matching the extracted feature value is not found, registering meta information about the received sound from the user terminal;
Further comprising, the social network service providing method.
상기 그룹 정보를 생성하는 단계는,
상기 사운드가 입력되는 시간을 기초로 상기 사용자를 그룹화하여 상기 그룹 정보를 생성하거나 상기 사용자 단말의 위치 정보를 기초로 상기 사용자를 그룹화하여 상기 그룹 정보를 생성하는 단계인, 소셜 네트워크 서비스 제공 방법.12. The method according to any one of claims 9 to 11,
Generating the group information,
And generating the group information by grouping the users based on a time when the sound is input, or generating the group information by grouping the users based on location information of the user terminal.
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110075734A KR101786974B1 (en) | 2011-07-29 | 2011-07-29 | Apparatus and method for providing social network service using sound |
JP2012160771A JP5951382B2 (en) | 2011-07-29 | 2012-07-19 | Apparatus and method for providing social network service using sound |
JP2016114596A JP6220420B2 (en) | 2011-07-29 | 2016-06-08 | Social network service providing apparatus using sound, method and program thereof |
JP2017187883A JP6554517B2 (en) | 2011-07-29 | 2017-09-28 | Apparatus and method for providing social network service using sound |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110075734A KR101786974B1 (en) | 2011-07-29 | 2011-07-29 | Apparatus and method for providing social network service using sound |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020170129750A Division KR101827862B1 (en) | 2017-10-11 | 2017-10-11 | Apparatus and method for providing social network service using sound |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20130026565A true KR20130026565A (en) | 2013-03-14 |
KR101786974B1 KR101786974B1 (en) | 2017-10-18 |
Family
ID=47789277
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020110075734A KR101786974B1 (en) | 2011-07-29 | 2011-07-29 | Apparatus and method for providing social network service using sound |
Country Status (2)
Country | Link |
---|---|
JP (3) | JP5951382B2 (en) |
KR (1) | KR101786974B1 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016126623A (en) * | 2015-01-06 | 2016-07-11 | 株式会社Nttドコモ | Action support device, action support system, action support method, and program |
KR101827862B1 (en) | 2017-10-11 | 2018-02-12 | 네이버 주식회사 | Apparatus and method for providing social network service using sound |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4281306B2 (en) * | 2002-07-31 | 2009-06-17 | ソニー株式会社 | Information providing system, information providing method, information processing apparatus, information processing method, and computer program |
JP2006301683A (en) * | 2005-04-15 | 2006-11-02 | Media Socket:Kk | Electronic communication processor and electronic communication processing method |
ES2386977T3 (en) * | 2005-11-29 | 2012-09-10 | Google Inc. | Social and interactive applications for mass media |
JP4965322B2 (en) * | 2007-04-17 | 2012-07-04 | 日本電信電話株式会社 | User support method, user support device, and user support program |
JP2009129257A (en) * | 2007-11-26 | 2009-06-11 | Sony Corp | Server device, terminal device, method for processing and managing sympathetic action, and method and program for sympathetic action |
US8806021B2 (en) * | 2008-01-28 | 2014-08-12 | Sony Corporation | Methods, portable electronic devices, systems and computer program products for automatically creating social networking services (SNS) |
JP2010198501A (en) * | 2009-02-26 | 2010-09-09 | Pioneer Electronic Corp | Voice information selecting device, voice information selecting method, voice information selection program, and recording medium |
US20110041154A1 (en) * | 2009-08-14 | 2011-02-17 | All Media Guide, Llc | Content Recognition and Synchronization on a Television or Consumer Electronics Device |
-
2011
- 2011-07-29 KR KR1020110075734A patent/KR101786974B1/en active IP Right Grant
-
2012
- 2012-07-19 JP JP2012160771A patent/JP5951382B2/en active Active
-
2016
- 2016-06-08 JP JP2016114596A patent/JP6220420B2/en active Active
-
2017
- 2017-09-28 JP JP2017187883A patent/JP6554517B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2016177840A (en) | 2016-10-06 |
JP2017224360A (en) | 2017-12-21 |
JP2013033470A (en) | 2013-02-14 |
KR101786974B1 (en) | 2017-10-18 |
JP5951382B2 (en) | 2016-07-13 |
JP6554517B2 (en) | 2019-07-31 |
JP6220420B2 (en) | 2017-10-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102299239B1 (en) | Private domain for virtual assistant systems on common devices | |
US10824670B2 (en) | Real-time audio stream search and presentation system | |
US9489457B2 (en) | Methods and apparatus for initiating an action | |
KR101894394B1 (en) | Method and terminal for sharing contents | |
US20130019202A1 (en) | Methods and apparatus for delivering information of various types to a user | |
CN107533729B (en) | Building a proximity social network database based on relative distance analysis of two or more operably coupled computers | |
CN106462642A (en) | Methods, Systems And Media For Performing Personalized Actions On Mobile Devices Associated With A Media Presentation Device | |
CN109241301A (en) | Resource recommendation method and device | |
US8635201B2 (en) | Methods and apparatus for employing a user's location in providing information to the user | |
EP3123751B1 (en) | Beacon based privacy centric network communication, sharing, relevancy tools and other tools | |
CN104685854B (en) | Method and system for providing social service based on music information | |
CN104769589B (en) | Communication terminal, information processing device, communication method, information processing method, program, and communication system | |
US20130018864A1 (en) | Methods and apparatus for identifying and providing information of various types to a user | |
US20150128071A1 (en) | System and method for providing social network service | |
JP5982056B1 (en) | Information processing system, information processing device, information processing method, information processing program, portable terminal device, and control program therefor | |
JP2014130445A (en) | Information extraction server, information extraction client, information extraction method, and information extraction program | |
US20120331093A1 (en) | Audio presentation of condensed spatial contextual information | |
KR101428969B1 (en) | Messenger server, system and method for searching data of using instant messaging service | |
JP2012034337A (en) | Communication system | |
JP6351666B2 (en) | Information processing system, information processing apparatus, information processing method, and information processing program | |
JP6554517B2 (en) | Apparatus and method for providing social network service using sound | |
JP2014067306A (en) | Server device, program, and communication system | |
KR101827862B1 (en) | Apparatus and method for providing social network service using sound | |
JP2017027481A (en) | Server for information distribution and information distribution method | |
JP2011217106A (en) | Related information providing server, related information providing system, and related information providing method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E90F | Notification of reason for final refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |