KR20220117676A - Review reliability validation device and method of thereof - Google Patents

Review reliability validation device and method of thereof Download PDF

Info

Publication number
KR20220117676A
KR20220117676A KR1020210021320A KR20210021320A KR20220117676A KR 20220117676 A KR20220117676 A KR 20220117676A KR 1020210021320 A KR1020210021320 A KR 1020210021320A KR 20210021320 A KR20210021320 A KR 20210021320A KR 20220117676 A KR20220117676 A KR 20220117676A
Authority
KR
South Korea
Prior art keywords
review
reviews
reliability
target
verification
Prior art date
Application number
KR1020210021320A
Other languages
Korean (ko)
Other versions
KR102644685B1 (en
Inventor
황상현
Original Assignee
주식회사 스마트캐스트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 스마트캐스트 filed Critical 주식회사 스마트캐스트
Priority to KR1020210021320A priority Critical patent/KR102644685B1/en
Publication of KR20220117676A publication Critical patent/KR20220117676A/en
Application granted granted Critical
Publication of KR102644685B1 publication Critical patent/KR102644685B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/12—Hotels or restaurants
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0278—Product appraisal
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02A—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A10/00—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE at coastal zones; at river basins
    • Y02A10/40—Controlling or monitoring, e.g. of flood or hurricane; Forecasting, e.g. risk assessment or mapping

Landscapes

  • Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • Engineering & Computer Science (AREA)
  • Development Economics (AREA)
  • Accounting & Taxation (AREA)
  • Marketing (AREA)
  • Finance (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Health & Medical Sciences (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Primary Health Care (AREA)
  • Game Theory and Decision Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

Disclosed are a review reliability verification device and method. According to an embodiment of the present invention, the review reliability verification device may comprise: a communication unit which communicates with an external device; a memory for storing customer information, business information, and reviews; a processor which receives customer's order information and contact information from an order input device through the communication unit, transmits a review request for each menu included in the order information to the contact, stores the received review in response to the transmitted review request, if the number of stored reviews exceeding a preset number, selects some of the stored reviews as reviews to be verified, and determines the reliability of each of the selected reviews to be verified. Therefore, by removing malicious reviews, small business owners can be protected from unintentional damage.

Description

리뷰 신뢰도 검증 장치 및 방법{REVIEW RELIABILITY VALIDATION DEVICE AND METHOD OF THEREOF}REVIEW RELIABILITY VALIDATION DEVICE AND METHOD OF THEREOF

본 발명은 리뷰 신뢰도 검증 장치 및 방법에 관한 것으로, 구체적으로 구매 여부 검증이 끝난 고객에 대해서만 리뷰를 수집하고, 수집된 리뷰에 대해서 가짜 리뷰로 의심가는 리뷰를 필터링하며, 필터링된 리뷰의 신뢰도를 검증할 수 있는 리뷰 신뢰도 검증 장치 및 방법에 관한 것이다.The present invention relates to a review reliability verification apparatus and method, specifically, collecting reviews only for customers who have completed purchase verification, filtering the reviews suspected as fake reviews with respect to the collected reviews, and verifying the reliability of the filtered reviews It relates to a review reliability verification apparatus and method that can be performed.

여행을 가는 경우와 같이 새로운 지역에 방문하는 경우 사람들은 맛있는 음식점을 찾아가고자 한다. 이러한 경우 사람들은 대부분 음식점의 리뷰를 찾아보게 된다. 일상 생활에서도 새로운 음식점을 방문하기 이전에 리뷰를 찾아보고 방문 여부나 메뉴를 결정하는 것이 일상화되었다. 이에 따라 리뷰의 중요성이 점점 높아지고 있다.When visiting a new area, such as when traveling, people want to find delicious restaurants. In this case, people mostly look for restaurant reviews. In our daily life, it has become commonplace to look for reviews and decide whether to visit or on a menu before visiting a new restaurant. As a result, the importance of reviews is increasing.

역설적으로 리뷰의 중요성이 높아지며 리뷰의 신뢰도는 점점 떨어지고 있다. 본래 리뷰는 경험에 근거하여 객관적인 평가를 적은 콘텐츠이지만, 업체로부터 대가를 받고 작성하는 리뷰, 경쟁 업체에 대한 악의적인 리뷰, 방문하지도 않고 작성하는 허위 리뷰가 홍수를 이루고 있다. 이러한 점에서 리뷰의 신뢰도를 확보할 수 있는 기술 개발에 대한 수요가 증가하고 있다.Paradoxically, as the importance of reviews increases, the credibility of reviews decreases. Originally, reviews are content that writes objective evaluations based on experience, but reviews written for a fee from companies, malicious reviews about competitors, and false reviews written without visiting are flooding. In this regard, the demand for technology development that can secure the credibility of reviews is increasing.

본 발명은 상술한 문제점을 해결하기 위한 것으로, 실제 주문이 이루어진 고객에 대해서만 리뷰 작성 권한을 부여하고, 작성된 리뷰에 대해서도 필터링과 신뢰도 검증의 두 단계를 거치도록 하여 효율적인 신뢰도 검증 기능을 제공할 수 있는 리뷰 신뢰도 검증 장치 및 방법을 제공하는 것을 목적으로 한다.The present invention is to solve the above-mentioned problem, and it is possible to provide an efficient reliability verification function by granting the right to write a review only to a customer who has actually placed an order, and passing two steps of filtering and reliability verification for the written review. An object of the present invention is to provide a review reliability verification apparatus and method.

상기 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 장치는, 외부 장치와 통신하는 통신부, 고객 정보, 업장 정보, 리뷰를 저장하는 메모리, 상기 통신부를 통해 주문 입력 장치로부터 고객의 주문 정보와 연락처를 수신하고, 상기 주문 정보에 포함된 각각의 메뉴에 대한 리뷰 요청을 상기 연락처로 전송하도록 통신부를 제어하며, 상기 전송된 리뷰 요청에 대응하여 리뷰가 수신되면 상기 수신된 리뷰를 상기 메모리에 저장하고, 상기 저장된 리뷰의 수가 기설정된 수를 초과하면 상기 저장된 리뷰 중 일부를 검증 대상 리뷰로 선정하며, 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 프로세서를 포함할 수 있다.Review reliability verification apparatus according to an embodiment of the present invention for achieving the above object, a communication unit communicating with an external device, customer information, shop information, a memory for storing reviews, the customer's order from the order input device through the communication unit Receive information and contact information, control the communication unit to transmit a review request for each menu included in the order information to the contact information, and when a review is received in response to the transmitted review request, the received review is stored in the memory and a processor for selecting a part of the stored reviews as verification target reviews when the number of stored reviews exceeds a preset number, and determining the reliability of each of the selected verification target reviews.

그리고 상기 프로세서는, 일일 리뷰 요청 건수 및 입력된 리뷰의 수를 각각 카운팅하고, 상기 카운팅된 리뷰 요청 건수와 입력된 리뷰의 수를 기초로 리뷰 요청 대비 입력 리뷰 비율의 평균 값을 산출하며, 특정 일의 리뷰 요청 대비 입력 리뷰 비율이 상기 산출된 평균 값을 상회하면 상기 특정 일의 리뷰를 검증 대상 리뷰로 선정할 수 있다.And, the processor counts the number of daily review requests and the number of input reviews, respectively, and calculates an average value of the ratio of review requests to input reviews based on the counted number of review requests and the number of input reviews, When the ratio of the input review to the review request of is greater than the calculated average value, the review on the specific day may be selected as the review target review.

또한, 상기 프로세서는, 상기 주문 정보 및 연락처가 획득된 경로 별로 일일 리뷰 요청 건수를 카운팅하고, 상기 카운팅된 경로별 일일 리뷰 요청 건수의 평균 값을 산출하며, 특정 일의 특정 경로에서 유발된 리뷰 요청 건수가 상기 산출된 평균 값을 상회하면 상기 특정 일의 특정 경로로 작성된 리뷰를 검증 대상 리뷰로 선정할 수 있다.In addition, the processor counts the number of daily review requests for each route in which the order information and contact information are obtained, calculates an average value of the number of daily review requests for each counted route, and review requests induced in a specific route on a specific day When the number of cases exceeds the calculated average value, a review written in a specific path on the specific day may be selected as a review target review.

그리고 상기 프로세서는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간을 수집하고, 상기 작성자가 기설정된 시간 동안 작성한 리뷰의 수가 기설정된 수를 초과하면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.And the processor collects the writing time of all reviews of the author who wrote the selected verification target review, and when the number of reviews written by the author during the predetermined time exceeds the predetermined number, the reliability of the selected verification target review can be determined as low.

또한, 상기 프로세서는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간 및 리뷰 대상 업장의 위치를 수집하고, 상기 작성자의 리뷰 작성 시간 간격을 상기 시간 간격을 비교할 업장의 위치 간격으로 나눈 값이 기설정된 값 미만이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.In addition, the processor collects the writing time of all reviews of the author who wrote the selected verification target review and the location of the review target business, and divides the review writing time interval of the writer by the location interval of the business to compare the time interval If the value is less than the preset value, it may be determined that the reliability of the selected verification target review is low.

그리고 상기 프로세서는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 리뷰 대상 업장에 대한 모든 리뷰의 평점 및 리뷰의 수를 수집하고, 상기 수집된 리뷰의 수가 기설정된 값 이상이면 상기 작성자의 리뷰 평점 평균 값과 상기 리뷰 대상 업장의 전체 리뷰 평점 평균 값을 비교하며, 비교 결과 두 평균 값의 차이가 기설정된 값 이상이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.And the processor collects the ratings and the number of reviews of all reviews for the review target business of the author who wrote the selected verification target review, and if the number of the collected reviews is greater than or equal to a preset value, the average value of the review score of the author and the overall review rating average value of the review target business, and if the difference between the two average values is greater than or equal to a preset value as a result of the comparison, it may be determined that the reliability of the selected verification target review is low.

또한, 상기 프로세서는, 상기 신뢰도가 낮음으로 결정된 리뷰를 수집하여 메모리에 저장하고, 상기 저장된 리뷰들의 복수의 특성 정보를 분석하여 유사도를 결정하며, 상기 결정된 유사도가 기설정된 값 이상인 특성 정보를 상기 검증 대상 리뷰를 선정하는 기준으로 설정할 수 있다.In addition, the processor collects and stores the reviews determined to have low reliability, determines a similarity by analyzing a plurality of characteristic information of the stored reviews, and verifies the characteristic information in which the determined similarity is equal to or greater than a preset value It can be set as a criterion for selecting a target review.

한편, 상기 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 방법은, 고객의 주문 정보 및 연락처를 획득하는 단계, 상기 주문 정보에 포함된 각각의 메뉴에 대한 리뷰 요청을 상기 연락처로 전송하는 단계, 상기 전송된 리뷰 요청에 대응하여 리뷰가 입력되면 상기 입력된 리뷰를 저장하는 단계, 상기 저장된 리뷰의 수가 기설정된 수를 초과하면 상기 저장된 리뷰 중 일부를 검증 대상 리뷰로 선정하는 단계, 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계를 포함할 수 있다.On the other hand, the review reliability verification method according to an embodiment of the present invention for achieving the above object, the step of obtaining the customer's order information and contact information, the review request for each menu included in the order information to the contact information transmitting, when a review is input in response to the transmitted review request, storing the input review, when the number of stored reviews exceeds a preset number, selecting some of the stored reviews as a review target review; It may include determining the reliability of each of the selected verification target review.

그리고 상기 검증 대상 리뷰로 선정하는 단계는, 일일 리뷰 요청 건수 및 입력된 리뷰의 수를 각각 카운팅하는 단계, 상기 카운팅된 리뷰 요청 건수 및 입력된 리뷰의 수를 기초로 리뷰 요청 대비 입력 리뷰 비율의 평균 값을 산출하는 단계, 특정 일의 리뷰 요청 대비 입력 리뷰 비율이 상기 산출된 평균 값을 상회하면 상기 특정 일의 리뷰를 검증 대상 리뷰로 선정하는 단계를 포함할 수 있다.In addition, the step of selecting the review target for verification includes counting the number of daily review requests and the number of input reviews, respectively, based on the counted number of review requests and the number of input reviews, the average of the ratio of review requests to input reviews The method may include calculating a value, and selecting the review of the specific day as a review target review when the input review ratio to the review request on the specific day exceeds the calculated average value.

또한, 상기 검증 대상 리뷰로 선정하는 단계는, 상기 주문 정보 및 연락처가 획득된 경로 별로 일일 리뷰 요청 건수를 카운팅하는 단계, 상기 카운팅된 경로 별 일일 리뷰 요청 건수의 평균 값을 산출하는 단계, 특정 일의 특정 경로에서 유발된 리뷰 요청 건수가 상기 산출된 평균 값을 상회하면 상기 특정 일의 특정 경로로 작성된 리뷰를 검증 대상 리뷰로 선정하는 단계를 포함할 수 있다.In addition, the step of selecting the review target for verification includes counting the number of daily review requests for each route in which the order information and contact information are obtained, calculating an average value of the number of daily review requests for each counted route, a specific day When the number of review requests induced in the specific path of , exceeds the calculated average value, selecting a review written in the specific path of the specific day as a review target review.

그리고 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간을 수집하는 단계, 상기 작성자가 기설정된 시간 동안 작성한 리뷰의 수가 기설정된 수를 초과하면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 단계를 포함할 수 있다.And the step of determining the reliability of each of the selected verification target reviews, collecting the writing time of all reviews of the author who wrote the selected verification target review, the number of reviews written by the author during the predetermined time is preset If the number is exceeded, the method may include determining the reliability of the selected verification target review to be low.

또한, 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간 및 리뷰 대상 업장의 위치를 수집하는 단계, 상기 작성자의 리뷰 작성 시간 간격을 상기 시간 간격을 비교할 업장들의 위치 간격으로 나눈 값이 기설정된 값 미만이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 단계를 포함할 수 있다.In addition, the step of determining the reliability of each of the selected verification target reviews, collecting the writing time of all reviews of the author who wrote the selected verification target review and the location of the review target business, the review writing time of the author If the value obtained by dividing the interval by the interval of the locations of the businesses to be compared with the time interval is less than a preset value, determining the reliability of the selected verification target review to be low.

그리고 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 리뷰 대상 업장에 대한 모든 리뷰의 평점 및 리뷰의 수를 수집하는 단계, 상기 수집된 리뷰의 수가 기설정된 값 이상이면 상기 작성자의 리뷰 평점 평균 값과 상기 리뷰 대상 업장의 전체 리뷰 평점 평균 값을 비교하는 단계, 상기 비교 결과 두 평균 값의 차이가 기설정된 값 이상이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 단계를 포함할 수 있다.And the step of determining the reliability of each of the selected verification target reviews, collecting the ratings and the number of reviews of all reviews for the review target business of the author who wrote the selected verification target review, the collected reviews Comparing the average value of the review rating of the author and the average value of the overall review ratings of the review target business if the number is greater than or equal to a preset value; and determining the reliability to be low.

또한, 상기 신뢰도가 낮음으로 결정된 리뷰를 수집하여 데이터베이스에 저장하는 단계, 상기 데이터베이스에 저장된 리뷰들의 복수의 특성 정보를 분석하여 유사도를 결정하는 단계, 상기 결정된 유사도가 기설정된 값 이상인 특성 정보를 상기 검증 대상 리뷰를 선정하는 기준 값으로 설정하는 단계를 더 포함할 수 있다.In addition, the steps of collecting and storing the reviews determined as having low reliability in a database, determining the similarity by analyzing a plurality of characteristic information of the reviews stored in the database, and verifying the characteristic information in which the determined similarity is greater than or equal to a preset value The method may further include setting a reference value for selecting a target review.

이상과 같은 본 발명의 다양한 실시 예에 따르면, 실제 주문이 이루어진 고객에 대해서만 리뷰를 작성할 수 있는 권한을 부여할 수 있고, 2단계에 걸친 신뢰도 검증 프로세서를 진행할 수 있어 리뷰 본연의 역할을 하지 못하는 콘텐츠를 제거할 수 있는 효과가 있다. 또한, 본 발명의 다양한 실시 예에 따르면 악의적인 리뷰를 제거함으로써 소상공인들이 불의의 피해를 입는 것에서도 보호할 수 있게 된다.According to various embodiments of the present invention as described above, the right to write a review only for customers who have actually placed an order can be given, and the reliability verification process can be performed in two steps, so content that does not play the original role of the review has the effect of removing In addition, according to various embodiments of the present invention, it is possible to protect small business owners from inadvertent damage by removing malicious reviews.

도 1은 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 시스템의 구성을 설명하기 위한 도면,
도 2는 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 장치의 구성을 개략적으로 도시한 블록도, 그리고,
도 3은 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 방법을 설명하기 위한 흐름도이다.1 is a view for explaining the configuration of a review reliability verification system according to an embodiment of the present invention;
2 is a block diagram schematically showing the configuration of a review reliability verification apparatus according to an embodiment of the present invention;
3 is a flowchart illustrating a review reliability verification method according to an embodiment of the present invention.

이하에서는 본 문서의 다양한 실시 예가 첨부된 도면을 참조하여 기재한다. 그러나 이는 본 문서에 기재된 기술을 특정한 실시 형태로 한정하려는 것이 아니며, 본 문서의 실시 예의 다양한 변형(modifications), 균등물(equivalents), 및/또는 대체물(alternatives)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.Hereinafter, various embodiments of the present document will be described with reference to the accompanying drawings. However, this is not intended to limit the technology described in this document to specific embodiments, and it should be understood that various modifications, equivalents, and/or alternatives of the embodiments of this document are included. In connection with the description of the drawings, like reference numerals may be used for like elements.

본 문서에서, "가진다", "가질 수 있다", "포함한다" 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.In this document, expressions such as "has", "may have", "includes" or "may include" indicate the existence of a corresponding characteristic (eg, a numerical value, function, operation, or component such as a part). , does not exclude the presence of additional features.

본 문서에서 "A 또는 B", "A 및/또는 B 중 적어도 하나" 또는 "A 및/또는 B 중 하나 또는 그 이상" 등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들어, "A 또는 B", "A 및 B 중 적어도 하나" 또는 "A 또는 B 중 적어도 하나"는 (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는 (3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다. 본 문서에서 사용된 "제1", "제2", "첫째" 또는 "둘째" 등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다.In this document, expressions such as "A or B", "at least one of A and/or B", or "one or more of A and/or B" may include all possible combinations of the items listed together. For example, "A or B", "at least one of A and B" or "at least one of A or B" means (1) includes at least one A, (2) includes at least one B, or ( 3) It may refer to all cases including both at least one A and at least one B. Expressions such as "first", "second", "first", or "second" used in this document may modify various elements, regardless of order and/or importance, and convert one element to another. It is used only to distinguish it from an element, and does not limit the corresponding elements.

본 문서에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합한(suitable for)", "~하는 능력을 갖는(having the capacity to)", "~하도록 설계된(designed to)", "~하도록 변경된(adapted to)", "~하도록 만들어진(made to)" 또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성된(또는 설정된)"은 하드웨어적으로 "특별히 설계된(specifically designed to)" 것만을 반드시 의미하지 않을 수 있다. 대신, 어떤 상황에서는 "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들어, "A, B 및 C를 수행하도록 구성된(또는 설정된) 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서) 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써 해당 동작들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU 또는 Application Processor)를 의미할 수 있다.The expression "configured to (or configured to)" as used in this document, depending on the context, for example, "suitable for", "having the capacity to" "," "designed to", "adapted to", "made to" or "capable of" can be used interchangeably. The term “configured (or configured to)” may not necessarily mean only “specifically designed to” in hardware. Instead, in some contexts the expression “a device configured to” may mean that the device is “capable of” with other devices or components. For example, "a processor configured (or configured to perform) A, B, and C" means a dedicated processor (eg, an embedded processor) or memory device to perform the corresponding operations by executing one or more software programs stored in the memory device. It may mean a generic-purpose processor (eg, a CPU or an application processor) capable of performing the execution.

도 1은 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 시스템(1000)을 구성하는 요소들을 도시한 블록도이다. 도 1을 참조하면 리뷰 신뢰도 검증 시스템(1000)은 리뷰 신뢰도 검증 장치(100), 주문 입력 장치(200), 리뷰 입력 장치(300), 리뷰 제공 장치(400)를 포함할 수 있다.1 is a block diagram illustrating elements constituting a review reliability verification system 1000 according to an embodiment of the present invention. Referring to FIG. 1 , a review reliability verification system 1000 may include a review reliability verification device 100 , an order input device 200 , a review input device 300 , and a review providing device 400 .

리뷰 신뢰도 검증 장치(100)는 구매 여부 검증이 끝난 고객에 대해서만 리뷰를 수집하고, 수집된 리뷰에 대해서 가짜 리뷰로 의심가는 리뷰를 필터링하며, 필터링된 리뷰의 신뢰도를 검증할 수 있다. 리뷰 신뢰도 검증 장치(100)는 주문 입력 장치(200)로부터 주문 정보와 고객 연락처를 수신할 수 있다. 이를 통해 리뷰 신뢰도 검증 장치(100)는 1차적으로 실제로 주문한 고객에 대해서만 리뷰 요청을 전송할 수 있다. 도 1에서는 리뷰 신뢰도 검증 장치(100)를 클라우드로 표현하였으나, 일반 서버 장치로 구현될 수 있음은 물론이다.The review reliability verification apparatus 100 may collect reviews only for customers whose purchase or not have been verified, filter a review suspected of being a fake review with respect to the collected reviews, and verify the reliability of the filtered review. The review reliability verification device 100 may receive order information and customer contact information from the order input device 200 . Through this, the review reliability verification apparatus 100 may transmit a review request only to a customer who has actually placed an order in the first place. Although the review reliability verification apparatus 100 is expressed as a cloud in FIG. 1, of course, it may be implemented as a general server apparatus.

주문 입력 장치(200)는 업장의 키오스크와 같은 무인 주문 장치, 업장에서 사장이나 종업원이 직접 주문 정보를 입력하는 POS와 같은 장치, 배달 어플리케이션이나 웹페이지를 통해 음식을 주문하는 스마트폰과 같은 장치일 수 있다. 주문 입력 장치(200)는 고객으로부터 주문 입력을 받을 수 있으며, 연락처 정보를 입력하도록 할 수 있다.The order input device 200 is a device such as an unmanned ordering device such as a kiosk of a business, a device such as a POS in which a boss or an employee directly inputs order information in a business, and a smartphone for ordering food through a delivery application or a web page can The order input device 200 may receive an order input from a customer, and may input contact information.

리뷰 신뢰도 검증 장치(100)는 실제로 주문을 한 고객에게 리뷰를 요청하게 되는데, 이때 리뷰 요청을 받고 리뷰를 입력할 수 있는 장치가 리뷰 입력 장치(300)이다. 예를 들어, 고객이 스마트폰을 통해 주문을 한 경우라면, 고객의 스마트폰은 주문 입력 장치(200)와 리뷰 입력 장치(300)의 기능을 모두 수행할 수 있다.The review reliability verification apparatus 100 requests a review from a customer who has actually placed an order. At this time, a device capable of receiving the review request and inputting a review is the review input device 300 . For example, when a customer places an order through a smartphone, the customer's smartphone may perform both the functions of the order input device 200 and the review input device 300 .

리뷰 제공 장치(400)는 리뷰 신뢰도 검증 장치(100)에서 신뢰도가 높은 리뷰로 선정한 리뷰를 일반 대중에게 제공할 수 있는 장치이다. 리뷰를 제공할 웹페이지나 어플리케이션을 실행할 수 있는 전자장치라면 어느 것이든 리뷰 제공 장치(400)로 기능할 수 있다.The review providing device 400 is a device capable of providing a review selected as a high-reliability review by the review reliability verification device 100 to the general public. Any electronic device capable of executing a web page or application to provide a review may function as the review providing device 400 .

이하에서는 리뷰 신뢰도 검증 장치(100)를 중심으로 리뷰 신뢰도 검증 방법에 대하여 설명하기로 한다. 도 2는 리뷰 신뢰도 검증 장치(100)의 구성을 개략적으로 도시한 블록도이다. 도 2를 참조하면 리뷰 신뢰도 검증 장치(100)는 통신부(110), 메모리(120) 및 프로세서(130)를 포함할 수 있다. 도시된 구성요소 이외에도 입력부(미도시), 출력부(미도시), 디스플레이부(미도시) 등 다양한 구성요소들이 추가적으로 포함될 수 있음은 물론이다.Hereinafter, a review reliability verification method will be described with a focus on the review reliability verification apparatus 100 . 2 is a block diagram schematically illustrating the configuration of the review reliability verification apparatus 100 . Referring to FIG. 2 , the review reliability verification apparatus 100 may include a communication unit 110 , a memory 120 , and a processor 130 . Of course, various components such as an input unit (not shown), an output unit (not shown), and a display unit (not shown) may be additionally included in addition to the illustrated components.

통신부(110)는 유무선 네트워크를 이용하여 주문 입력 장치(200), 리뷰 입력 장치(300), 리뷰 제공 장치(400)와 같은 외부 장치와 통신할 수 있다. 예를 들어, 통신부(110)는 주문 입력 장치(300)로부터 사용자가 입력한 주문 내역(메뉴, 수량 등), 연락처(전화번호, 회원 아이디 등)에 대한 정보를 수신할 수 있다. 통신부(110)는 무선통신 방식으로 블루투스, Zigbee 통신, WiFi, 적외선(InfraRed, IR) 통신, NFC(Near Field Communication) 등 다양한 방식을 이용할 수 있다. 또한, 통신부(110)는 유선통신 방식으로 HDMI(High Definition Multimedia Interface), LVDS(Low Voltage Differential Signaling), LAN(Local Area Network) 등을 이용할 수 있다.The communication unit 110 may communicate with external devices such as the order input device 200 , the review input device 300 , and the review providing device 400 using a wired or wireless network. For example, the communication unit 110 may receive information about the order details (menu, quantity, etc.) and contact information (phone number, member ID, etc.) input by the user from the order input device 300 . The communication unit 110 may use various methods such as Bluetooth, Zigbee communication, WiFi, infrared (InfraRed, IR) communication, and near field communication (NFC) as a wireless communication method. In addition, the communication unit 110 may use a high definition multimedia interface (HDMI), a low voltage differential signaling (LVDS), a local area network (LAN), etc. as a wired communication method.

메모리(120)는 리뷰 신뢰도 검증 장치(100)를 구동하기 위한 다양한 모듈, 소프트웨어, 데이터를 저장할 수 있다. 예를 들어, 메모리(120)에는 수신한 주문 정보, 연락처 정보, 리뷰, 업장 정보, 메뉴 정보와 같은 데이터, 리뷰 신뢰도를 검증하기 위한 소프트웨어, 외부 장치와의 통신 프로토콜과 같은 제어신호 데이터 등이 저장될 수 있다.The memory 120 may store various modules, software, and data for driving the review reliability verification apparatus 100 . For example, the memory 120 stores data such as received order information, contact information, reviews, shop information, menu information, software for verifying review reliability, and control signal data such as a communication protocol with an external device. can be

메모리(120)는 플래쉬 메모리, HDD(Hard Disk Drive), SSD(Solid State Drive) 등의 형태로 구현될 수 있다. 예를 들어, 메모리(120)는 리뷰 신뢰도 검증 장치(100)의 동작 수행을 위한 프로그램 및/또는 어플리케이션을 저장하기 위한 ROM, 리뷰 신뢰도 검증 장치(100)의 동작 수행에 따른 데이터를 일시적으로 저장하기 위한 RAM을 구비할 수 있다. 또한, 메모리(120)는 각종 참조 데이터를 저장하기 위한 EEPROM(Electrically Erasable and Programmable ROM) 등을 더 구비할 수 있다.The memory 120 may be implemented in the form of a flash memory, a hard disk drive (HDD), a solid state drive (SSD), or the like. For example, the memory 120 is a ROM for storing a program and/or an application for performing the operation of the review reliability verification apparatus 100 , and temporarily storing data according to the operation performance of the review reliability verification apparatus 100 . RAM may be provided for In addition, the memory 120 may further include an Electrically Erasable and Programmable ROM (EEPROM) for storing various types of reference data.

프로세서(130)는 리뷰 신뢰도 검증 장치(100)의 상술한 구성들을 제어할 수 있다. 예를 들어, 프로세서(130)는 리뷰 요청을 리뷰 입력 장치(300)로 전송하도록 통신부(110)를 제어할 수 있다. 프로세서(130)는 하나 또는 복수의 하드웨어 칩 형태로 제작되어 컨설팅 제공 장치(100)에 탑재될 수 있다. 예를 들어, 프로세서(130)는 범용 프로세서(예를 들어, CPU 또는 Application Processor)로 제작될 수도 있고, 인공지능을 위한 전용 하드웨어 칩 형태로 제작될 수도 있다.The processor 130 may control the above-described configurations of the review reliability verification apparatus 100 . For example, the processor 130 may control the communication unit 110 to transmit a review request to the review input device 300 . The processor 130 may be manufactured in the form of one or a plurality of hardware chips and mounted on the consulting providing apparatus 100 . For example, the processor 130 may be manufactured as a general-purpose processor (eg, CPU or Application Processor), or may be manufactured in the form of a dedicated hardware chip for artificial intelligence.

프로세서(130)는 통신부(110)를 통해 주문 입력 장치(200)로부터 고객의 주문 정보와 연락처를 수신할 수 있다. 고객의 주문 정보는 메뉴 정보, 수량 정보 등을 포함할 수 있다. 연락처는 일반적으로 전화번호일 수 있으나, 주문 어플리케이션이나 웹페이지, 리뷰 제공 어플리케이션이나 웹페이지의 회원 아이디로써 주문자의 전화번호와 연동될 수 있는 정보인 회원 아이디 등일 수도 있다. 프로세서(130)는 메뉴 정보를 수신하기 때문에 전체 주문이 아닌 메뉴별 리뷰를 요청할 수 있다.The processor 130 may receive the customer's order information and contact information from the order input device 200 through the communication unit 110 . The customer's order information may include menu information, quantity information, and the like. The contact information may generally be a phone number, but may be a member ID, which is information that can be linked with the orderer's phone number, as a member ID of an ordering application or web page, a review providing application or web page. Since the processor 130 receives the menu information, it may request a review for each menu rather than the entire order.

프로세서(130)는 수신된 주문 정보에 포함된 각각의 메뉴에 대한 리뷰 요청을 수신된 연락처로 전송하도록 통신부(110)를 제어할 수 있다. 도 1을 참조하면, 리뷰 요청은 리뷰 입력 장치(300)로 전송될 수 있다. 이와 같이 실제 주문이 이루어진 경우에만 리뷰를 입력할 수 있도록 하기 때문에, 리뷰 신뢰도 검증 장치(100)는 1차적으로 가짜 리뷰 작성을 방지할 수 있다.The processor 130 may control the communication unit 110 to transmit a review request for each menu included in the received order information to the received contact information. Referring to FIG. 1 , a review request may be transmitted to the review input device 300 . In this way, since a review can be input only when an actual order is made, the review reliability verification apparatus 100 can primarily prevent fake reviews from being written.

프로세서(130)는 전송된 리뷰 요청에 대응하여 리뷰가 수신되면, 수신된 리뷰를 메모리(120)에 저장할 수 있다. 앞서 설명한 바와 같이 메모리(120)에는 수신된 리뷰가 주문을 한 업장, 주문 메뉴, 주문 시간, 리뷰 입력 시간 등의 메타 정보가 함께 저장될 수 있다. 프로세서(130)는 저장된 리뷰의 수가 기설정된 수를 초과하면 저장된 리뷰의 신뢰성에 대한 검증을 수행할 수 있다. 저장된 리뷰의 수가 적은 경우에는 가짜 리뷰를 걸러낼 유인이 적고, 가짜 리뷰의 특성 분석을 진행할 충분한 샘플이 부족하기 때문이다.When a review is received in response to the transmitted review request, the processor 130 may store the received review in the memory 120 . As described above, the memory 120 may store meta-information such as a shop where the received review placed an order, an order menu, an order time, and a review input time. When the number of stored reviews exceeds a preset number, the processor 130 may verify the reliability of the stored reviews. This is because, when the number of stored reviews is small, there is less incentive to filter out fake reviews, and there are not enough samples to perform characterization of fake reviews.

프로세서(130)는 저장된 리뷰 중 신뢰성에 의심이 가는 일부 리뷰를 검증 대상 리뷰로 선정할 수 있다. 모든 리뷰에 대해 신뢰도 검증을 하는 것은 비효율적이기 때문에, 프로세서(130)는 이하에서 설명할 여러 기준에 의해 신뢰도를 검증할 대상 리뷰를 선정한다. 그리고 프로세서(130)는 선정된 검증 대상 리뷰 각각에 대해 신뢰도를 결정할 수 있다.The processor 130 may select some reviews having doubts about reliability among the stored reviews as a review target review. Since it is inefficient to verify the reliability of all reviews, the processor 130 selects a target review to verify the reliability according to various criteria to be described below. In addition, the processor 130 may determine reliability for each of the selected verification target reviews.

예를 들어, 특정 일에 주문량 대비 리뷰 작성 건수가 비정상적으로 다수인 경우, 프로세서(130)는 해당 특정 일에 작성된 리뷰들을 검증 대상 리뷰로 선정할 수 있다. 구체적으로, 프로세서(130)는 일일 리뷰 요청 건수와 입력된 리뷰의 수를 각각 카운팅할 수 있다. 모든 리뷰 요청에 대해 리뷰가 입력되는 것이 아니며, 통계적으로 업장마다 리뷰 요청 대비 입력 리뷰의 비율이 결정된다. 프로세서(130)는 특정 기간 동안의 리뷰 요청 대비 입력 리뷰 비율의 평균 값을 산출할 수 있다. 그리고 특정 일의 리뷰 요청 대비 입력 리뷰 비율이 산출된 평균 값을 상회하는 경우에, 프로세서(130)는 특정 일의 리뷰를 검증 대상 리뷰로 선정할 수 있다.For example, when the number of reviews written on a specific day relative to the order quantity is abnormally large, the processor 130 may select reviews written on the specific day as a review target review. Specifically, the processor 130 may count the number of daily review requests and the number of input reviews, respectively. Reviews are not input for all review requests, and the ratio of input reviews to review requests is statistically determined for each business. The processor 130 may calculate an average value of an input review ratio to a review request for a specific period. In addition, when the input review ratio to the review request on the specific day exceeds the calculated average value, the processor 130 may select the review on the specific day as the review target review.

다른 예로, 특정 일에 특정 경로에서 유발된 주문 건수가 비정상적으로 다수인 경우, 프로세서(130)는 해당 특정 일, 특정 경로를 통해 작성된 리뷰들을 검증 대상 리뷰로 선정할 수 있다. 신뢰도가 낮은 리뷰는 악성 고객에 의해 낮은 평점으로 작성된 리뷰만을 포함하지 않는다. 업장에서 자신들의 평점을 높이기 위해 가짜 주문을 발생시키고, 해당 주문에 스스로 높은 평점의 리뷰를 작성함으로써 신뢰도를 떨어뜨리는 경우도 발생한다. 본 실시 예에서는 악성 고객뿐 아니라 업장 스스로 리뷰를 조작하는 경우를 방지할 수 있다.As another example, when the number of orders induced by a specific path on a specific day is abnormally large, the processor 130 may select reviews written through the specific day and specific path as the verification target review. Low credibility reviews do not include only reviews written by bad customers with low ratings. In some cases, the business places fake orders to increase their ratings, and they lower their credibility by writing high-rated reviews on the orders themselves. In the present embodiment, it is possible to prevent not only the malicious customer but also the case of manipulating the review by the store itself.

구체적으로, 프로세서(130)는 주문 정보 및 연락처가 획득된 경로 별로 일일 리뷰 요청 건수를 카운팅할 수 있다. 예를 들어, 프로세서(130)는 키오스크를 통해 주문이 들어온 숫자, 배달 어플리케이션을 통해 주문이 들어온 숫자, 매장에서 POS를 통해 주문을 받은 숫자 등을 카운팅할 수 있다. 그리고 프로세서(130)는 카운팅된 경로 별로 일일 리뷰 요청 건수의 평균 값을 산출할 수 있다. 특정 일의 특정 경로에서 유발된 리뷰 요청 건수가 산출된 평균 값을 상회하면, 프로세서(130)는 특정 일의 특정 경로로 작성된 리뷰를 검증 대상 리뷰로 선정할 수 있다.Specifically, the processor 130 may count the number of daily review requests for each path through which order information and contact information are obtained. For example, the processor 130 may count the number of orders received through the kiosk, the number of orders received through the delivery application, the number of orders received through the POS at the store, and the like. In addition, the processor 130 may calculate an average value of the number of daily review requests for each counted path. When the number of review requests induced on a specific path on a specific day exceeds the calculated average value, the processor 130 may select a review written on a specific path on a specific day as a review target review.

또 다른 예로, 프로세서(130)는 신뢰도가 낮은 것으로 결정된 리뷰들을 수집하여 분석함으로써, 신뢰도를 판단하는 기준을 새로이 설정할 수 있다. 구체적으로 프로세서(130)는 신뢰도가 '낮음'으로 결정된 리뷰를 수집하여 메모리(120)에 저장할 수 있다. 신뢰도는 '높음', '낮음'과 같이 표현될 수도 있고, 점수로 표현될 수도 있다. 프로세서(130)는 신뢰도가 낮은 것으로 판단된 리뷰들의 복수의 특성 정보(feature information)을 분석할 수 있으며, 복수의 특성 정보 중 신뢰도가 낮은 것으로 판단된 리뷰들이 공통적으로 가지고 있는 특성 정보가 무엇인지 판단할 수 있다. 즉 프로세서(130)는 저장된 리뷰들의 복수의 특성 정보를 분석하여 유사도를 결정할 수 있고, 결정된 유사도가 기설정된 값 이상인 특성 정보를 검증 대상 리뷰를 선정하는 기준 값으로 설정할 수 있다.As another example, the processor 130 may set a new criterion for determining reliability by collecting and analyzing reviews determined to have low reliability. Specifically, the processor 130 may collect reviews determined as 'low' in reliability and store them in the memory 120 . Reliability may be expressed as 'high' or 'low', or it may be expressed as a score. The processor 130 may analyze a plurality of feature information of the reviews determined to have low reliability, and determine which characteristic information common to the reviews determined to have low reliability among the plurality of characteristic information can do. That is, the processor 130 may determine the similarity by analyzing a plurality of characteristic information of the stored reviews, and may set characteristic information in which the determined similarity is equal to or greater than a preset value as a reference value for selecting a review to be verified.

검증 대상 리뷰가 선정되면, 프로세서(130)는 각각의 리뷰에 대해 신뢰도를 검증할 수 있다. 예를 들어, 프로세서(130)는 일정 기간 동안 리뷰 작성자가 작성한 리뷰의 수가 과도하게 다수인 경우 신뢰도를 낮음으로 판단할 수 있다. 프로세서(130)가 실제 주문이 있는 경우에만 리뷰를 작성할 수 있도록 1차로 필터링할 수 있기 때문에, 리뷰 작성자가 작성한 리뷰의 수가 과도하게 다수인 경우에는 실제 음식을 먹기 위한 것이 아닌 리뷰 작성을 하기 위한 주문을 발생시켰을 가능성이 높다. 구체적으로 프로세서(130)는 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간을 수집할 수 있다. 그리고 작성자가 기설정된 시간 동안 작성한 리뷰의 수가 기설정된 수를 초과하면, 프로세서(130)는 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.When a review target review is selected, the processor 130 may verify reliability for each review. For example, the processor 130 may determine that the reliability is low when the number of reviews written by the reviewer for a certain period is excessively large. Since the processor 130 can primarily filter so that a review can be written only when there is an actual order, when the number of reviews written by a reviewer is excessively large, an order for writing a review rather than for eating real food is likely to have caused Specifically, the processor 130 may collect the writing time of all reviews of the author who wrote the selected verification target review. And when the number of reviews written by the author for a preset time exceeds the preset number, the processor 130 may determine the reliability of the selected review subject to be verified as low.

다른 예로, 프로세서(130)는 제1주문의 발생 시간과 제2주문의 발생 시간 사이의 시간 동안 제1주문을 한 업장에서 제2주문을 한 업장으로 이동할 수 있는지에 근거하여 신뢰도를 검증할 수 있다. 본 실시 예는 특히 주문이 업장에 위치한 키오스크나 POS를 통해 입력된 경우에 유용하게 사용될 수 있다. 구체적으로, 프로세서(130)는 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간 및 리뷰 대상 업장의 위치를 수집할 수 있다. 작성자의 리뷰 작성 시간 간격을 상기 시간 간격을 비교할 업장들의 위치 간격으로 나눈 값이 기설정된 값 미만이라면, 프로세서(130)는 실제로 고객이 업장 사이를 이동할 수 없었다고 판단할 수 있다. 이에 따라 프로세서(130)는 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.As another example, the processor 130 may verify the reliability based on whether it is possible to move the second order from the place where the first order was placed to the place where the second order was placed during the time period between the occurrence time of the first order and the time of occurrence of the second order. have. This embodiment may be particularly useful when an order is entered through a kiosk or a POS located in a shop. Specifically, the processor 130 may collect the writing time of all reviews of the author who wrote the selected verification target review and the location of the review target business. If the value obtained by dividing the author's review writing time interval by the location interval of the businesses to be compared with the time interval is less than a preset value, the processor 130 may determine that the customer could not actually move between the businesses. Accordingly, the processor 130 may determine that the reliability of the selected verification target review is low.

또 다른 예로, 프로세서(130)는 업장의 특정 메뉴에 대한 리뷰 평점이 전체 평균과 동떨어진 경우에 신뢰성이 낮은 리뷰로 판단할 수 있다. 구체적으로 프로세서(130)는 선정된 검증 대상 리뷰를 작성한 작성자의 리뷰 대상 업장에 대한 모든 리뷰의 평점 및 리뷰의 수를 수집할 수 있다. 수집된 리뷰의 수가 충분히 통계적으로 의미를 가질만큼 다수인 경우, 프로세서(130)는 작성자의 리뷰 평점 평균 값과 리뷰 대상 업장의 전체 리뷰 평점 평균 값을 비교할 수 있다. 그리고 비교 결과 두 평균 값의 차이가 기설정된 값 이상이면, 프로세서(130)는 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.As another example, the processor 130 may determine a review with low reliability when the review rating for a specific menu of the store is different from the overall average. Specifically, the processor 130 may collect the number of reviews and the ratings of all reviews for the review target business of the author who wrote the selected verification target review. When the number of collected reviews is sufficiently large to be statistically significant, the processor 130 may compare the average value of the review rating of the author with the average value of the overall review rating of the review target business. And if the difference between the two average values is equal to or greater than a preset value as a result of the comparison, the processor 130 may determine the reliability of the selected review target review to be low.

도 3은 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 방법을 설명하기 위한 흐름도이다. 도 3을 참조하면 리뷰 신뢰도 검증 장치(100)는 고객의 주문 정보 및 연락처 정보를 수신할 수 있다(S310). 고객의 주문 정보에는 주문을 한 업장의 정보, 주문에 포함된 메뉴 정보, 주문 발생 시간 정보 등이 포함될 수 있다. 연락처 정보에는 전화번호, 아이디 등이 포함될 수 있다.3 is a flowchart illustrating a review reliability verification method according to an embodiment of the present invention. Referring to FIG. 3 , the review reliability verification apparatus 100 may receive the customer's order information and contact information ( S310 ). The customer's order information may include information on a business that placed an order, menu information included in the order, order occurrence time information, and the like. The contact information may include a phone number, ID, and the like.

이어서 리뷰 신뢰도 검증 장치(100)는 수신한 연락처로 주문한 메뉴 각각에 대한 리뷰 요청을 전송할 수 있다(S320). 이에 따라 주문 시 고객이 입력한 연락처에 리뷰 요청을 전송함으로써, 실 구매 고객에 한하여 리뷰가 작성되도록 하는 효과가 있다. 즉, 리뷰 신뢰도 검증 장치(100)는 1차적으로 가짜 리뷰가 작성될 수 있는 환경을 제거하여 리뷰 신뢰도를 높일 수 있다. 또한, 리뷰 신뢰도 검증 장치(100)는 주문에 포함된 메뉴별로 리뷰를 요청함으로써, 보다 상세한 고객 피드백을 받을 수 있다는 점에서 유용하다.Subsequently, the review reliability verification apparatus 100 may transmit a review request for each menu ordered to the received contact (S320). Accordingly, by sending a review request to the contact information entered by the customer when placing an order, there is an effect that only the actual purchasing customer can write a review. That is, the review reliability verification apparatus 100 may increase review reliability by primarily removing an environment in which a fake review may be written. In addition, the review reliability verification apparatus 100 is useful in that it can receive more detailed customer feedback by requesting a review for each menu included in the order.

리뷰 요청에 대응하여 리뷰가 입력되면(S330-Y), 리뷰 신뢰도 검증 장치(100)는 입력된 리뷰를 저장할 수 있다(S340). 그리고 일정 수량 이상의 리뷰가 저장되면(S350-Y), 리뷰 신뢰도 검증 장치(100)는 저장된 리뷰 중 일부를 검증 대상 리뷰로 선정할 수 있다(S360). 이는 모든 리뷰에 대해 신뢰도를 검증하는 것은 비효율적이기 때문에 신뢰도에 의심이 가는 리뷰를 미리 선정하는 절차를 거치는 것이다. 예를 들어, 리뷰 신뢰도 검증 장치(100)는 일일 리뷰 요청 건수 대비 입력된 리뷰의 수가 특정 일에 평균 값을 상회하면, 특정 일에 작성된 리뷰를 검증 대상 리뷰로 선정할 수 있다. 다른 예로, 리뷰 신뢰도 검증 장치(100)는 특정 일에 특정 주문 경로에서 유발된 리뷰 요청 건수가 평균 값을 상회하는 경우, 해당 특정 일에 특정 주문 경로를 통해 작성된 리뷰를 검증 대상 리뷰로 선정할 수 있다.When a review is input in response to a review request (S330-Y), the review reliability verification apparatus 100 may store the input review (S340). And when more than a certain number of reviews are stored (S350-Y), the review reliability verification apparatus 100 may select some of the stored reviews as a review target review (S360). This is because it is inefficient to verify the credibility of all reviews, so it is a process of preselecting the reviews with doubts about the credibility. For example, when the number of reviews input relative to the number of daily review requests exceeds an average value on a specific day, the review reliability verification apparatus 100 may select a review written on a specific day as a review target review. As another example, the review reliability verification apparatus 100 may select a review written through a specific order path on a specific day as a verification target review when the number of review requests induced by a specific order path on a specific day exceeds the average value. have.

이어서 리뷰 신뢰도 검증 장치(100)는 검증 대상 리뷰로 선정된 각각의 리뷰에 대해 신뢰도를 결정할 수 있다(S370). 예를 들어, 리뷰 신뢰도 검증 장치(100)는 일정한 기간 동안 검증 대상 리뷰를 작성한 작성자가 기설정된 수를 초과하는 리뷰를 작성한 경우, 즉 일정한 기간 동안 과도한 주문을 발생시키고 리뷰를 작성한 경우에 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 판단할 수 있다. 다른 예로, 리뷰 신뢰도 검증 장치(100)는 검증 대상 리뷰 작성자가 연속하여 오프라인으로 주문을 발생시켰을 경우에, 주문이 연속하여 발생된 업장들 사이의 거리를 충분히 이동할 수 있는지 판단하여 검증 대상 리뷰의 신뢰도를 검증할 수도 있다. 또 다른 예로, 리뷰 신뢰도 검증 장치(100)는 검증 대상 리뷰의 작성자가 해당 업장에 대해 전체 평점과 동떨어진 평점의 리뷰를 지속적으로 남기는 경우, 해당 작성자가 작성한 검증 대상 리뷰의 신뢰도를 낮음으로 판단할 수도 있다.Subsequently, the review reliability verification apparatus 100 may determine the reliability of each review selected as a verification target review ( S370 ). For example, the review reliability verification apparatus 100 is the verification selected when the author who wrote a review subject to verification for a certain period writes a review exceeding a preset number, that is, generates a review after generating an excessive order for a certain period of time It can be judged that the reliability of the target review is low. As another example, the review reliability verification apparatus 100 determines whether the verification target review author can move the distance between the consecutively generated orders sufficiently when the verification target review author consecutively places an order offline to determine the reliability of the verification target review can also be verified. As another example, the review reliability verification apparatus 100 may determine that the reliability of the review subject to be verified by the author is low when the author of the review to be verified continuously leaves a review of a rating far from the overall rating for the business. have.

추가적으로 리뷰 신뢰도 검증 장치(100)는 신뢰도가 낮음으로 결정된 리뷰를 수집하여 데이터베이스에 저장할 수 있다. 이는 신뢰도가 낮음으로 결정된 리뷰들의 특성을 분석하여, 검증 대상 리뷰를 선정하는 기준으로 활용하기 위함이다. 리뷰들의 특성을 분석하는 것에는 인공지능 모델이 사용될 수도 있다. 이와 같이 리뷰 신뢰도 검증 장치(100)는 리뷰 데이터가 쌓일 수록, 신뢰도가 낮은 리뷰를 걸러낼수록 점점 정교화된 신뢰도 검증 시스템을 구축할 수 있다.Additionally, the review reliability verification apparatus 100 may collect reviews determined as having low reliability and store them in a database. This is to analyze the characteristics of reviews determined to have low reliability and use them as a criterion for selecting a review to be verified. An artificial intelligence model may be used to analyze the characteristics of the reviews. As described above, the review reliability verification apparatus 100 may build an increasingly sophisticated reliability verification system as review data is accumulated and reviews with low reliability are filtered out.

한편, 본 명세서에서 사용된 용어 “부” 또는 “모듈”은 하드웨어, 소프트웨어 또는 펌웨어로 구성된 유닛을 포함하며, 예를 들어, 로직, 논리블록, 부품 또는 회로 등의 용어와 상호 호환적으로 사용될 수 있다. “부” 또는 “모듈”은 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 모듈은 ASIC(application specific integrated circuit)으로 구성될 수 있다.Meanwhile, as used herein, the term “unit” or “module” includes a unit composed of hardware, software, or firmware, and may be used interchangeably with terms such as, for example, logic, logic block, part or circuit. have. A “part” or “module” may be an integrally formed part or a minimum unit that performs one or more functions or a part thereof. For example, the module may be configured as an application specific integrated circuit (ASIC).

본 발명의 다양한 실시 예들은 기기(machine)(예: 컴퓨터)로 읽을 수 있는 저장 매체(machine-readable storage media)에 저장된 명령어를 포함하는 소프트웨어로 구현될 수 있다. 기기는, 저장 매체로부터 저장된 명령어를 호출하고, 호출된 명령어에 따라 동작이 가능한 장치로서, 개시된 실시 예들에 따른 전자 장치(예: 리뷰 신뢰도 검증 장치(100))를 포함할 수 있다. 상기 명령이 프로세서에 의해 실행될 경우, 프로세서가 직접, 또는 상기 프로세서의 제어 하에 다른 구성요소들을 이용하여 상기 명령에 해당하는 기능을 수행할 수 있다. 명령은 컴파일러 또는 인터프리터에 의해 생성 또는 실행되는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장매체는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장매체가 신호(signal)를 포함하지 않으며 실재(tangible)한다는 것을 의미할 뿐 데이터가 저장매체에 반영구적 또는 임시적으로 저장됨을 구분하지 않는다.Various embodiments of the present invention may be implemented as software including instructions stored in a machine-readable storage media readable by a machine (eg, a computer). The device is a device capable of calling a stored command from a storage medium and operating according to the called command, and may include an electronic device (eg, the review reliability verification apparatus 100 ) according to the disclosed embodiments. When the instruction is executed by the processor, the processor may directly or use other components under the control of the processor to perform a function corresponding to the instruction. Instructions may include code generated or executed by a compiler or interpreter. The device-readable storage medium may be provided in the form of a non-transitory storage medium. Here, 'non-transitory' means that the storage medium does not include a signal and is tangible, and does not distinguish that data is semi-permanently or temporarily stored in the storage medium.

일 실시 예에 따르면, 본 문서에 개시된 다양한 실시 예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 온라인으로 배포될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.According to an embodiment, the method according to various embodiments disclosed in this document may be provided by being included in a computer program product. Computer program products may be traded between sellers and buyers as commodities. The computer program product may be distributed in the form of a machine-readable storage medium (eg, compact disc read only memory (CD-ROM)) or online through an application store (eg, Play Store™). In the case of online distribution, at least a portion of the computer program product may be temporarily stored or temporarily generated in a storage medium such as a memory of a server of a manufacturer, a server of an application store, or a relay server.

다양한 실시 예들에 따른 구성 요소(예: 모듈 또는 프로그램) 각각은 단수 또는 복수의 개체로 구성될 수 있으며, 전술한 해당 서브 구성 요소들 중 일부 서브 구성 요소가 생략되거나, 또는 다른 서브 구성 요소가 다양한 실시 예에 더 포함될 수 있다. 대체적으로 또는 추가적으로, 일부 구성 요소들(예: 모듈 또는 프로그램)은 하나의 개체로 통합되어, 통합되기 이전의 각각의 해당 구성 요소에 의해 수행되는 기능을 동일 또는 유사하게 수행할 수 있다. 다양한 실시 예들에 따른, 모듈, 프로그램 또는 다른 구성 요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱하게 실행되거나, 적어도 일부 동작이 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.Each of the components (eg, a module or a program) according to various embodiments may be composed of a singular or a plurality of entities, and some sub-components of the aforementioned sub-components may be omitted, or other sub-components may be various. It may be further included in the embodiment. Alternatively or additionally, some components (eg, a module or a program) may be integrated into a single entity to perform the same or similar functions performed by each corresponding component prior to integration. According to various embodiments, operations performed by a module, program, or other component may be sequentially, parallel, repetitively or heuristically executed, or at least some operations may be executed in a different order, omitted, or other operations may be added. can

100: 리뷰 신뢰도 검증 장치
110: 통신부
120: 메모리
130: 프로세서
200: 주문 입력 장치100: Review reliability verification device
110: communication department
120: memory
130: processor
200: order input device

Claims (14)

외부 장치와 통신하는 통신부;
고객 정보, 업장 정보, 리뷰를 저장하는 메모리;
상기 통신부를 통해 주문 입력 장치로부터 고객의 주문 정보와 연락처를 수신하고, 상기 주문 정보에 포함된 각각의 메뉴에 대한 리뷰 요청을 상기 연락처로 전송하도록 통신부를 제어하며, 상기 전송된 리뷰 요청에 대응하여 리뷰가 수신되면 상기 수신된 리뷰를 상기 메모리에 저장하고, 상기 저장된 리뷰의 수가 기설정된 수를 초과하면 상기 저장된 리뷰 중 일부를 검증 대상 리뷰로 선정하며, 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 프로세서;를 포함하는 리뷰 신뢰도 검증 장치.a communication unit communicating with an external device;
memory for storing customer information, business information, and reviews;
Receives customer's order information and contact information from the order input device through the communication unit, controls the communication unit to transmit a review request for each menu included in the order information to the contact information, and responds to the transmitted review request When a review is received, the received review is stored in the memory, and when the number of the stored reviews exceeds a preset number, some of the stored reviews are selected as the verification target review, and the reliability of each of the selected verification target reviews is obtained. A review reliability verification device comprising a; processor for determining. 제1항에 있어서,
상기 프로세서는,
일일 리뷰 요청 건수 및 입력된 리뷰의 수를 각각 카운팅하고, 상기 카운팅된 리뷰 요청 건수와 입력된 리뷰의 수를 기초로 리뷰 요청 대비 입력 리뷰 비율의 평균 값을 산출하며, 특정 일의 리뷰 요청 대비 입력 리뷰 비율이 상기 산출된 평균 값을 상회하면 상기 특정 일의 리뷰를 검증 대상 리뷰로 선정하는 리뷰 신뢰도 검증 장치.According to claim 1,
The processor is
The number of daily review requests and the number of input reviews are counted, respectively, and based on the counted number of review requests and the number of input reviews, an average value of the review request to input review ratio is calculated, and the input compared to the review request on a specific day A review reliability verification device for selecting a review on the specific day as a review target review when the review ratio exceeds the calculated average value. 제1항에 있어서,
상기 프로세서는,
상기 주문 정보 및 연락처가 획득된 경로 별로 일일 리뷰 요청 건수를 카운팅하고, 상기 카운팅된 경로별 일일 리뷰 요청 건수의 평균 값을 산출하며, 특정 일의 특정 경로에서 유발된 리뷰 요청 건수가 상기 산출된 평균 값을 상회하면 상기 특정 일의 특정 경로로 작성된 리뷰를 검증 대상 리뷰로 선정하는 리뷰 신뢰도 검증 장치.According to claim 1,
The processor is
Counting the number of daily review requests for each route in which the order information and contact information are obtained, calculating an average value of the number of daily review requests for each counted route, and calculating the average number of review requests induced by a specific route on a specific day A review reliability verification device that selects a review written on a specific path of the specific day as a verification target review when the value is exceeded. 제1항에 있어서,
상기 프로세서는,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간을 수집하고, 상기 작성자가 기설정된 시간 동안 작성한 리뷰의 수가 기설정된 수를 초과하면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 리뷰 신뢰도 검증 장치.According to claim 1,
The processor is
A review that collects the writing time of all reviews of the author who wrote the selected verification target review, and determines that the reliability of the selected verification target review is low when the number of reviews written by the author during a predetermined time exceeds the predetermined number Reliability Verification Device. 제1항에 있어서,
상기 프로세서는,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간 및 리뷰 대상 업장의 위치를 수집하고, 상기 작성자의 리뷰 작성 시간 간격을 상기 시간 간격을 비교할 업장의 위치 간격으로 나눈 값이 기설정된 값 미만이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 리뷰 신뢰도 검증 장치.According to claim 1,
The processor is
The value obtained by collecting the writing time of all reviews of the author who wrote the selected review target review and the location of the review target business, and dividing the review writing time interval of the writer by the location interval of the business to compare the time interval is less than a preset value On the other hand, a review reliability verification device for determining the reliability of the selected verification target review as low. 제1항에 있어서,
상기 프로세서는,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 리뷰 대상 업장에 대한 모든 리뷰의 평점 및 리뷰의 수를 수집하고, 상기 수집된 리뷰의 수가 기설정된 값 이상이면 상기 작성자의 리뷰 평점 평균 값과 상기 리뷰 대상 업장의 전체 리뷰 평점 평균 값을 비교하며, 비교 결과 두 평균 값의 차이가 기설정된 값 이상이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 리뷰 신뢰도 검증 장치.According to claim 1,
The processor is
Collects the ratings and the number of reviews of all reviews for the review target business of the author who wrote the selected verification target review, and if the number of collected reviews is greater than or equal to a preset value, the average value of the review rating of the author and the review target business A review reliability verification apparatus that compares the average value of the overall review ratings of , and determines that the reliability of the selected review target review is low when a difference between the two average values is greater than or equal to a preset value as a result of the comparison. 제1항에 있어서,
상기 프로세서는,
상기 신뢰도가 낮음으로 결정된 리뷰를 수집하여 메모리에 저장하고, 상기 저장된 리뷰들의 복수의 특성 정보를 분석하여 유사도를 결정하며, 상기 결정된 유사도가 기설정된 값 이상인 특성 정보를 상기 검증 대상 리뷰를 선정하는 기준으로 설정하는 리뷰 신뢰도 검증 장치.According to claim 1,
The processor is
Criteria for collecting reviews determined to have low reliability and storing them in a memory, determining a similarity by analyzing a plurality of characteristic information of the stored reviews, and selecting the verification target review based on characteristic information in which the determined similarity is greater than or equal to a preset value Review reliability verification device set to . 리뷰 신뢰도 검증 방법에 있어서,
고객의 주문 정보 및 연락처를 획득하는 단계;
상기 주문 정보에 포함된 각각의 메뉴에 대한 리뷰 요청을 상기 연락처로 전송하는 단계;
상기 전송된 리뷰 요청에 대응하여 리뷰가 입력되면, 상기 입력된 리뷰를 저장하는 단계;
상기 저장된 리뷰의 수가 기설정된 수를 초과하면, 상기 저장된 리뷰 중 일부를 검증 대상 리뷰로 선정하는 단계; 및
상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계;를 포함하는 리뷰 신뢰도 검증 방법.In the review reliability verification method,
obtaining the customer's order information and contact information;
transmitting a review request for each menu included in the order information to the contact information;
when a review is input in response to the transmitted review request, storing the input review;
selecting some of the stored reviews as verification target reviews when the number of the stored reviews exceeds a preset number; and
A review reliability verification method comprising a; determining the reliability of each of the selected verification target reviews. 제8항에 있어서,
상기 검증 대상 리뷰로 선정하는 단계는,
일일 리뷰 요청 건수 및 입력된 리뷰의 수를 각각 카운팅하는 단계;
상기 카운팅된 리뷰 요청 건수 및 입력된 리뷰의 수를 기초로, 리뷰 요청 대비 입력 리뷰 비율의 평균 값을 산출하는 단계; 및
특정 일의 리뷰 요청 대비 입력 리뷰 비율이 상기 산출된 평균 값을 상회하면, 상기 특정 일의 리뷰를 검증 대상 리뷰로 선정하는 단계;를 포함하는 리뷰 신뢰도 검증 방법.9. The method of claim 8,
The step of selecting the review target for verification is,
counting the number of daily review requests and the number of input reviews, respectively;
calculating an average value of a review request to input review ratio based on the counted number of review requests and the number of input reviews; and
When the input review ratio to the review request on a specific day exceeds the calculated average value, selecting the review on the specific day as a review target review; review reliability verification method comprising a. 제8항에 있어서,
상기 검증 대상 리뷰로 선정하는 단계는,
상기 주문 정보 및 연락처가 획득된 경로 별로 일일 리뷰 요청 건수를 카운팅하는 단계;
상기 카운팅된 경로 별 일일 리뷰 요청 건수의 평균 값을 산출하는 단계; 및
특정 일의 특정 경로에서 유발된 리뷰 요청 건수가 상기 산출된 평균 값을 상회하면, 상기 특정 일의 특정 경로로 작성된 리뷰를 검증 대상 리뷰로 선정하는 단계;를 포함하는 리뷰 신뢰도 검증 방법.9. The method of claim 8,
The step of selecting the review target for verification includes:
counting the number of daily review requests for each route in which the order information and contact information are obtained;
calculating an average value of the number of daily review requests for each counted route; and
When the number of review requests induced on a specific path on a specific day exceeds the calculated average value, selecting a review written on the specific path on the specific day as a review target review; review reliability verification method comprising a. 제8항에 있어서,
상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계는,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간을 수집하는 단계; 및
상기 작성자가 기설정된 시간 동안 작성한 리뷰의 수가 기설정된 수를 초과하면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 단계;를 포함하는 리뷰 신뢰도 검증 방법.9. The method of claim 8,
The step of determining the reliability of each of the selected verification target reviews,
collecting the writing times of all reviews of authors who have written the selected verification target review; and
When the number of reviews written by the author for a preset time exceeds a preset number, determining the reliability of the selected review target review to be low; review reliability verification method comprising a. 제1항에 있어서,
상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계는,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간 및 리뷰 대상 업장의 위치를 수집하는 단계; 및
상기 작성자의 리뷰 작성 시간 간격을 상기 시간 간격을 비교할 업장들의 위치 간격으로 나눈 값이 기설정된 값 미만이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 단계;를 포함하는 리뷰 신뢰도 검증 방법.According to claim 1,
The step of determining the reliability of each of the selected verification target reviews,
collecting the writing times of all reviews of the author who wrote the selected verification target review and the location of the review target business; and
When the value obtained by dividing the review writing time interval of the author by the location interval of the businesses to be compared with the time interval is less than a preset value, determining the reliability of the selected verification target review as low; review reliability verification method comprising a. 제1항에 있어서,
상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계는,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 리뷰 대상 업장에 대한 모든 리뷰의 평점 및 리뷰의 수를 수집하는 단계;
상기 수집된 리뷰의 수가 기설정된 값 이상이면, 상기 작성자의 리뷰 평점 평균 값과 상기 리뷰 대상 업장의 전체 리뷰 평점 평균 값을 비교하는 단계;
상기 비교 결과 두 평균 값의 차이가 기설정된 값 이상이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 단계;를 포함하는 리뷰 신뢰도 검증 방법.According to claim 1,
The step of determining the reliability of each of the selected verification target reviews,
collecting the ratings of all reviews and the number of reviews for the review target business of the author who wrote the selected verification target review;
if the number of the collected reviews is greater than or equal to a preset value, comparing the average value of the review rating of the author with the average value of the overall review rating of the review target business;
and determining that the reliability of the selected review target review is low when the difference between the two average values is greater than or equal to a preset value as a result of the comparison. 제1항에 있어서,
상기 신뢰도가 낮음으로 결정된 리뷰를 수집하여 데이터베이스에 저장하는 단계;
상기 데이터베이스에 저장된 리뷰들의 복수의 특성 정보를 분석하여 유사도를 결정하는 단계; 및
상기 결정된 유사도가 기설정된 값 이상인 특성 정보를 상기 검증 대상 리뷰를 선정하는 기준 값으로 설정하는 단계;를 더 포함하는 리뷰 신뢰도 검증 방법.According to claim 1,
collecting reviews determined as having low reliability and storing them in a database;
determining similarity by analyzing a plurality of characteristic information of reviews stored in the database; and
and setting the characteristic information having the determined similarity equal to or greater than a preset value as a reference value for selecting the review target review.
KR1020210021320A 2021-02-17 2021-02-17 Review reliability validation device and method of thereof KR102644685B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210021320A KR102644685B1 (en) 2021-02-17 2021-02-17 Review reliability validation device and method of thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210021320A KR102644685B1 (en) 2021-02-17 2021-02-17 Review reliability validation device and method of thereof

Publications (2)

Publication Number Publication Date
KR20220117676A true KR20220117676A (en) 2022-08-24
KR102644685B1 KR102644685B1 (en) 2024-03-11

Family

ID=83111797

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210021320A KR102644685B1 (en) 2021-02-17 2021-02-17 Review reliability validation device and method of thereof

Country Status (1)

Country Link
KR (1) KR102644685B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102666172B1 (en) * 2023-12-29 2024-05-14 주식회사 티맥스핀테크 Method for adjusting review scores

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7519562B1 (en) * 2005-03-31 2009-04-14 Amazon Technologies, Inc. Automatic identification of unreliable user ratings
US20110055104A1 (en) * 2008-05-14 2011-03-03 The Board Of Governors For Higher Education, State Of Rhode Island And Providence Plantations Systems and methods for detecting unfair manipulations of on-line reputation systems
KR20110058064A (en) * 2009-11-25 2011-06-01 에스케이마케팅앤컴퍼니 주식회사 User evaluating system using informing message and method thereof
KR20140101697A (en) * 2013-02-11 2014-08-20 구글 인코포레이티드 Automatic detection of fraudulent ratings/comments related to an application store
US20160070709A1 (en) * 2014-09-09 2016-03-10 Stc.Unm Online review assessment using multiple sources
KR20190123397A (en) * 2018-04-24 2019-11-01 성균관대학교산학협력단 Classification model selection method for discriminating fake review

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7519562B1 (en) * 2005-03-31 2009-04-14 Amazon Technologies, Inc. Automatic identification of unreliable user ratings
US20110055104A1 (en) * 2008-05-14 2011-03-03 The Board Of Governors For Higher Education, State Of Rhode Island And Providence Plantations Systems and methods for detecting unfair manipulations of on-line reputation systems
KR20110058064A (en) * 2009-11-25 2011-06-01 에스케이마케팅앤컴퍼니 주식회사 User evaluating system using informing message and method thereof
KR20140101697A (en) * 2013-02-11 2014-08-20 구글 인코포레이티드 Automatic detection of fraudulent ratings/comments related to an application store
US20160070709A1 (en) * 2014-09-09 2016-03-10 Stc.Unm Online review assessment using multiple sources
KR20190123397A (en) * 2018-04-24 2019-11-01 성균관대학교산학협력단 Classification model selection method for discriminating fake review

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102666172B1 (en) * 2023-12-29 2024-05-14 주식회사 티맥스핀테크 Method for adjusting review scores

Also Published As

Publication number Publication date
KR102644685B1 (en) 2024-03-11

Similar Documents

Publication Publication Date Title
AU2021200523B2 (en) Systems and methods for dynamically detecting and preventing consumer fraud
KR102364491B1 (en) Merchant evaluation method and system
CN107563757B (en) Data risk identification method and device
KR102084125B1 (en) Vending machine and method for providing online to offline based used goods marketplace platform using thereof
US20210264448A1 (en) Privacy preserving ai derived simulated world
US20130144888A1 (en) Dynamic network analytics system
JP6744882B2 (en) Action pattern search system and action pattern search method
WO2017053672A1 (en) Systems and methods for locating merchant terminals based on transaction data
CN109034583A (en) Abnormal transaction identification method, apparatus and electronic equipment
US11017330B2 (en) Method and system for analysing data
US10275812B2 (en) Method and apparatus for denying a transaction detected to be initiated outside of a required application on an endpoint device
CN109697454B (en) Cross-device individual identification method and device based on privacy protection
KR102334404B1 (en) Merchandise recommendation server and control method thereof
US11928741B1 (en) Systems and methods for detecting items at a property
CN106327230B (en) Abnormal user detection method and equipment
JP7266702B2 (en) Distributed logbook for anomaly monitoring
JP2016177583A (en) Traffic line processing system and traffic line processing method
KR102644685B1 (en) Review reliability validation device and method of thereof
CN112347457A (en) Abnormal account detection method and device, computer equipment and storage medium
CN108734366B (en) User identification method and system, nonvolatile storage medium and computer system
US10540682B1 (en) Systems and methods for determining impact of high-affinity baskets
KR20190056075A (en) Server and method for service evaluation
CN113297462A (en) Data processing method, device, equipment and storage medium
CN111091416A (en) Method and device for predicting probability of hotel purchase robot
CN109598525A (en) Data processing method and device

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant