KR20220117676A - Review reliability validation device and method of thereof - Google Patents
Review reliability validation device and method of thereof Download PDFInfo
- Publication number
- KR20220117676A KR20220117676A KR1020210021320A KR20210021320A KR20220117676A KR 20220117676 A KR20220117676 A KR 20220117676A KR 1020210021320 A KR1020210021320 A KR 1020210021320A KR 20210021320 A KR20210021320 A KR 20210021320A KR 20220117676 A KR20220117676 A KR 20220117676A
- Authority
- KR
- South Korea
- Prior art keywords
- review
- reviews
- reliability
- target
- verification
- Prior art date
Links
- 238000012552 review Methods 0.000 title claims abstract description 440
- 238000000034 method Methods 0.000 title claims abstract description 27
- 238000010200 validation analysis Methods 0.000 title 1
- 238000012795 verification Methods 0.000 claims abstract description 114
- 238000004891 communication Methods 0.000 claims abstract description 23
- 230000004044 response Effects 0.000 claims abstract description 6
- 230000006870 function Effects 0.000 description 7
- 230000014509 gene expression Effects 0.000 description 5
- 238000004590 computer program Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 238000012512 characterization method Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/12—Hotels or restaurants
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0278—Product appraisal
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02A—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
- Y02A10/00—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE at coastal zones; at river basins
- Y02A10/40—Controlling or monitoring, e.g. of flood or hurricane; Forecasting, e.g. risk assessment or mapping
Landscapes
- Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- Engineering & Computer Science (AREA)
- Development Economics (AREA)
- Accounting & Taxation (AREA)
- Marketing (AREA)
- Finance (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Health & Medical Sciences (AREA)
- Entrepreneurship & Innovation (AREA)
- Primary Health Care (AREA)
- Game Theory and Decision Science (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
본 발명은 리뷰 신뢰도 검증 장치 및 방법에 관한 것으로, 구체적으로 구매 여부 검증이 끝난 고객에 대해서만 리뷰를 수집하고, 수집된 리뷰에 대해서 가짜 리뷰로 의심가는 리뷰를 필터링하며, 필터링된 리뷰의 신뢰도를 검증할 수 있는 리뷰 신뢰도 검증 장치 및 방법에 관한 것이다.The present invention relates to a review reliability verification apparatus and method, specifically, collecting reviews only for customers who have completed purchase verification, filtering the reviews suspected as fake reviews with respect to the collected reviews, and verifying the reliability of the filtered reviews It relates to a review reliability verification apparatus and method that can be performed.
여행을 가는 경우와 같이 새로운 지역에 방문하는 경우 사람들은 맛있는 음식점을 찾아가고자 한다. 이러한 경우 사람들은 대부분 음식점의 리뷰를 찾아보게 된다. 일상 생활에서도 새로운 음식점을 방문하기 이전에 리뷰를 찾아보고 방문 여부나 메뉴를 결정하는 것이 일상화되었다. 이에 따라 리뷰의 중요성이 점점 높아지고 있다.When visiting a new area, such as when traveling, people want to find delicious restaurants. In this case, people mostly look for restaurant reviews. In our daily life, it has become commonplace to look for reviews and decide whether to visit or on a menu before visiting a new restaurant. As a result, the importance of reviews is increasing.
역설적으로 리뷰의 중요성이 높아지며 리뷰의 신뢰도는 점점 떨어지고 있다. 본래 리뷰는 경험에 근거하여 객관적인 평가를 적은 콘텐츠이지만, 업체로부터 대가를 받고 작성하는 리뷰, 경쟁 업체에 대한 악의적인 리뷰, 방문하지도 않고 작성하는 허위 리뷰가 홍수를 이루고 있다. 이러한 점에서 리뷰의 신뢰도를 확보할 수 있는 기술 개발에 대한 수요가 증가하고 있다.Paradoxically, as the importance of reviews increases, the credibility of reviews decreases. Originally, reviews are content that writes objective evaluations based on experience, but reviews written for a fee from companies, malicious reviews about competitors, and false reviews written without visiting are flooding. In this regard, the demand for technology development that can secure the credibility of reviews is increasing.
본 발명은 상술한 문제점을 해결하기 위한 것으로, 실제 주문이 이루어진 고객에 대해서만 리뷰 작성 권한을 부여하고, 작성된 리뷰에 대해서도 필터링과 신뢰도 검증의 두 단계를 거치도록 하여 효율적인 신뢰도 검증 기능을 제공할 수 있는 리뷰 신뢰도 검증 장치 및 방법을 제공하는 것을 목적으로 한다.The present invention is to solve the above-mentioned problem, and it is possible to provide an efficient reliability verification function by granting the right to write a review only to a customer who has actually placed an order, and passing two steps of filtering and reliability verification for the written review. An object of the present invention is to provide a review reliability verification apparatus and method.
상기 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 장치는, 외부 장치와 통신하는 통신부, 고객 정보, 업장 정보, 리뷰를 저장하는 메모리, 상기 통신부를 통해 주문 입력 장치로부터 고객의 주문 정보와 연락처를 수신하고, 상기 주문 정보에 포함된 각각의 메뉴에 대한 리뷰 요청을 상기 연락처로 전송하도록 통신부를 제어하며, 상기 전송된 리뷰 요청에 대응하여 리뷰가 수신되면 상기 수신된 리뷰를 상기 메모리에 저장하고, 상기 저장된 리뷰의 수가 기설정된 수를 초과하면 상기 저장된 리뷰 중 일부를 검증 대상 리뷰로 선정하며, 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 프로세서를 포함할 수 있다.Review reliability verification apparatus according to an embodiment of the present invention for achieving the above object, a communication unit communicating with an external device, customer information, shop information, a memory for storing reviews, the customer's order from the order input device through the communication unit Receive information and contact information, control the communication unit to transmit a review request for each menu included in the order information to the contact information, and when a review is received in response to the transmitted review request, the received review is stored in the memory and a processor for selecting a part of the stored reviews as verification target reviews when the number of stored reviews exceeds a preset number, and determining the reliability of each of the selected verification target reviews.
그리고 상기 프로세서는, 일일 리뷰 요청 건수 및 입력된 리뷰의 수를 각각 카운팅하고, 상기 카운팅된 리뷰 요청 건수와 입력된 리뷰의 수를 기초로 리뷰 요청 대비 입력 리뷰 비율의 평균 값을 산출하며, 특정 일의 리뷰 요청 대비 입력 리뷰 비율이 상기 산출된 평균 값을 상회하면 상기 특정 일의 리뷰를 검증 대상 리뷰로 선정할 수 있다.And, the processor counts the number of daily review requests and the number of input reviews, respectively, and calculates an average value of the ratio of review requests to input reviews based on the counted number of review requests and the number of input reviews, When the ratio of the input review to the review request of is greater than the calculated average value, the review on the specific day may be selected as the review target review.
또한, 상기 프로세서는, 상기 주문 정보 및 연락처가 획득된 경로 별로 일일 리뷰 요청 건수를 카운팅하고, 상기 카운팅된 경로별 일일 리뷰 요청 건수의 평균 값을 산출하며, 특정 일의 특정 경로에서 유발된 리뷰 요청 건수가 상기 산출된 평균 값을 상회하면 상기 특정 일의 특정 경로로 작성된 리뷰를 검증 대상 리뷰로 선정할 수 있다.In addition, the processor counts the number of daily review requests for each route in which the order information and contact information are obtained, calculates an average value of the number of daily review requests for each counted route, and review requests induced in a specific route on a specific day When the number of cases exceeds the calculated average value, a review written in a specific path on the specific day may be selected as a review target review.
그리고 상기 프로세서는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간을 수집하고, 상기 작성자가 기설정된 시간 동안 작성한 리뷰의 수가 기설정된 수를 초과하면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.And the processor collects the writing time of all reviews of the author who wrote the selected verification target review, and when the number of reviews written by the author during the predetermined time exceeds the predetermined number, the reliability of the selected verification target review can be determined as low.
또한, 상기 프로세서는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간 및 리뷰 대상 업장의 위치를 수집하고, 상기 작성자의 리뷰 작성 시간 간격을 상기 시간 간격을 비교할 업장의 위치 간격으로 나눈 값이 기설정된 값 미만이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.In addition, the processor collects the writing time of all reviews of the author who wrote the selected verification target review and the location of the review target business, and divides the review writing time interval of the writer by the location interval of the business to compare the time interval If the value is less than the preset value, it may be determined that the reliability of the selected verification target review is low.
그리고 상기 프로세서는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 리뷰 대상 업장에 대한 모든 리뷰의 평점 및 리뷰의 수를 수집하고, 상기 수집된 리뷰의 수가 기설정된 값 이상이면 상기 작성자의 리뷰 평점 평균 값과 상기 리뷰 대상 업장의 전체 리뷰 평점 평균 값을 비교하며, 비교 결과 두 평균 값의 차이가 기설정된 값 이상이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.And the processor collects the ratings and the number of reviews of all reviews for the review target business of the author who wrote the selected verification target review, and if the number of the collected reviews is greater than or equal to a preset value, the average value of the review score of the author and the overall review rating average value of the review target business, and if the difference between the two average values is greater than or equal to a preset value as a result of the comparison, it may be determined that the reliability of the selected verification target review is low.
또한, 상기 프로세서는, 상기 신뢰도가 낮음으로 결정된 리뷰를 수집하여 메모리에 저장하고, 상기 저장된 리뷰들의 복수의 특성 정보를 분석하여 유사도를 결정하며, 상기 결정된 유사도가 기설정된 값 이상인 특성 정보를 상기 검증 대상 리뷰를 선정하는 기준으로 설정할 수 있다.In addition, the processor collects and stores the reviews determined to have low reliability, determines a similarity by analyzing a plurality of characteristic information of the stored reviews, and verifies the characteristic information in which the determined similarity is equal to or greater than a preset value It can be set as a criterion for selecting a target review.
한편, 상기 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 방법은, 고객의 주문 정보 및 연락처를 획득하는 단계, 상기 주문 정보에 포함된 각각의 메뉴에 대한 리뷰 요청을 상기 연락처로 전송하는 단계, 상기 전송된 리뷰 요청에 대응하여 리뷰가 입력되면 상기 입력된 리뷰를 저장하는 단계, 상기 저장된 리뷰의 수가 기설정된 수를 초과하면 상기 저장된 리뷰 중 일부를 검증 대상 리뷰로 선정하는 단계, 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계를 포함할 수 있다.On the other hand, the review reliability verification method according to an embodiment of the present invention for achieving the above object, the step of obtaining the customer's order information and contact information, the review request for each menu included in the order information to the contact information transmitting, when a review is input in response to the transmitted review request, storing the input review, when the number of stored reviews exceeds a preset number, selecting some of the stored reviews as a review target review; It may include determining the reliability of each of the selected verification target review.
그리고 상기 검증 대상 리뷰로 선정하는 단계는, 일일 리뷰 요청 건수 및 입력된 리뷰의 수를 각각 카운팅하는 단계, 상기 카운팅된 리뷰 요청 건수 및 입력된 리뷰의 수를 기초로 리뷰 요청 대비 입력 리뷰 비율의 평균 값을 산출하는 단계, 특정 일의 리뷰 요청 대비 입력 리뷰 비율이 상기 산출된 평균 값을 상회하면 상기 특정 일의 리뷰를 검증 대상 리뷰로 선정하는 단계를 포함할 수 있다.In addition, the step of selecting the review target for verification includes counting the number of daily review requests and the number of input reviews, respectively, based on the counted number of review requests and the number of input reviews, the average of the ratio of review requests to input reviews The method may include calculating a value, and selecting the review of the specific day as a review target review when the input review ratio to the review request on the specific day exceeds the calculated average value.
또한, 상기 검증 대상 리뷰로 선정하는 단계는, 상기 주문 정보 및 연락처가 획득된 경로 별로 일일 리뷰 요청 건수를 카운팅하는 단계, 상기 카운팅된 경로 별 일일 리뷰 요청 건수의 평균 값을 산출하는 단계, 특정 일의 특정 경로에서 유발된 리뷰 요청 건수가 상기 산출된 평균 값을 상회하면 상기 특정 일의 특정 경로로 작성된 리뷰를 검증 대상 리뷰로 선정하는 단계를 포함할 수 있다.In addition, the step of selecting the review target for verification includes counting the number of daily review requests for each route in which the order information and contact information are obtained, calculating an average value of the number of daily review requests for each counted route, a specific day When the number of review requests induced in the specific path of , exceeds the calculated average value, selecting a review written in the specific path of the specific day as a review target review.
그리고 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간을 수집하는 단계, 상기 작성자가 기설정된 시간 동안 작성한 리뷰의 수가 기설정된 수를 초과하면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 단계를 포함할 수 있다.And the step of determining the reliability of each of the selected verification target reviews, collecting the writing time of all reviews of the author who wrote the selected verification target review, the number of reviews written by the author during the predetermined time is preset If the number is exceeded, the method may include determining the reliability of the selected verification target review to be low.
또한, 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간 및 리뷰 대상 업장의 위치를 수집하는 단계, 상기 작성자의 리뷰 작성 시간 간격을 상기 시간 간격을 비교할 업장들의 위치 간격으로 나눈 값이 기설정된 값 미만이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 단계를 포함할 수 있다.In addition, the step of determining the reliability of each of the selected verification target reviews, collecting the writing time of all reviews of the author who wrote the selected verification target review and the location of the review target business, the review writing time of the author If the value obtained by dividing the interval by the interval of the locations of the businesses to be compared with the time interval is less than a preset value, determining the reliability of the selected verification target review to be low.
그리고 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 리뷰 대상 업장에 대한 모든 리뷰의 평점 및 리뷰의 수를 수집하는 단계, 상기 수집된 리뷰의 수가 기설정된 값 이상이면 상기 작성자의 리뷰 평점 평균 값과 상기 리뷰 대상 업장의 전체 리뷰 평점 평균 값을 비교하는 단계, 상기 비교 결과 두 평균 값의 차이가 기설정된 값 이상이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 단계를 포함할 수 있다.And the step of determining the reliability of each of the selected verification target reviews, collecting the ratings and the number of reviews of all reviews for the review target business of the author who wrote the selected verification target review, the collected reviews Comparing the average value of the review rating of the author and the average value of the overall review ratings of the review target business if the number is greater than or equal to a preset value; and determining the reliability to be low.
또한, 상기 신뢰도가 낮음으로 결정된 리뷰를 수집하여 데이터베이스에 저장하는 단계, 상기 데이터베이스에 저장된 리뷰들의 복수의 특성 정보를 분석하여 유사도를 결정하는 단계, 상기 결정된 유사도가 기설정된 값 이상인 특성 정보를 상기 검증 대상 리뷰를 선정하는 기준 값으로 설정하는 단계를 더 포함할 수 있다.In addition, the steps of collecting and storing the reviews determined as having low reliability in a database, determining the similarity by analyzing a plurality of characteristic information of the reviews stored in the database, and verifying the characteristic information in which the determined similarity is greater than or equal to a preset value The method may further include setting a reference value for selecting a target review.
이상과 같은 본 발명의 다양한 실시 예에 따르면, 실제 주문이 이루어진 고객에 대해서만 리뷰를 작성할 수 있는 권한을 부여할 수 있고, 2단계에 걸친 신뢰도 검증 프로세서를 진행할 수 있어 리뷰 본연의 역할을 하지 못하는 콘텐츠를 제거할 수 있는 효과가 있다. 또한, 본 발명의 다양한 실시 예에 따르면 악의적인 리뷰를 제거함으로써 소상공인들이 불의의 피해를 입는 것에서도 보호할 수 있게 된다.According to various embodiments of the present invention as described above, the right to write a review only for customers who have actually placed an order can be given, and the reliability verification process can be performed in two steps, so content that does not play the original role of the review has the effect of removing In addition, according to various embodiments of the present invention, it is possible to protect small business owners from inadvertent damage by removing malicious reviews.
도 1은 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 시스템의 구성을 설명하기 위한 도면,
도 2는 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 장치의 구성을 개략적으로 도시한 블록도, 그리고,
도 3은 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 방법을 설명하기 위한 흐름도이다.1 is a view for explaining the configuration of a review reliability verification system according to an embodiment of the present invention;
2 is a block diagram schematically showing the configuration of a review reliability verification apparatus according to an embodiment of the present invention;
3 is a flowchart illustrating a review reliability verification method according to an embodiment of the present invention.
이하에서는 본 문서의 다양한 실시 예가 첨부된 도면을 참조하여 기재한다. 그러나 이는 본 문서에 기재된 기술을 특정한 실시 형태로 한정하려는 것이 아니며, 본 문서의 실시 예의 다양한 변형(modifications), 균등물(equivalents), 및/또는 대체물(alternatives)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.Hereinafter, various embodiments of the present document will be described with reference to the accompanying drawings. However, this is not intended to limit the technology described in this document to specific embodiments, and it should be understood that various modifications, equivalents, and/or alternatives of the embodiments of this document are included. In connection with the description of the drawings, like reference numerals may be used for like elements.
본 문서에서, "가진다", "가질 수 있다", "포함한다" 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.In this document, expressions such as "has", "may have", "includes" or "may include" indicate the existence of a corresponding characteristic (eg, a numerical value, function, operation, or component such as a part). , does not exclude the presence of additional features.
본 문서에서 "A 또는 B", "A 및/또는 B 중 적어도 하나" 또는 "A 및/또는 B 중 하나 또는 그 이상" 등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들어, "A 또는 B", "A 및 B 중 적어도 하나" 또는 "A 또는 B 중 적어도 하나"는 (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는 (3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다. 본 문서에서 사용된 "제1", "제2", "첫째" 또는 "둘째" 등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다.In this document, expressions such as "A or B", "at least one of A and/or B", or "one or more of A and/or B" may include all possible combinations of the items listed together. For example, "A or B", "at least one of A and B" or "at least one of A or B" means (1) includes at least one A, (2) includes at least one B, or ( 3) It may refer to all cases including both at least one A and at least one B. Expressions such as "first", "second", "first", or "second" used in this document may modify various elements, regardless of order and/or importance, and convert one element to another. It is used only to distinguish it from an element, and does not limit the corresponding elements.
본 문서에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합한(suitable for)", "~하는 능력을 갖는(having the capacity to)", "~하도록 설계된(designed to)", "~하도록 변경된(adapted to)", "~하도록 만들어진(made to)" 또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성된(또는 설정된)"은 하드웨어적으로 "특별히 설계된(specifically designed to)" 것만을 반드시 의미하지 않을 수 있다. 대신, 어떤 상황에서는 "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들어, "A, B 및 C를 수행하도록 구성된(또는 설정된) 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서) 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써 해당 동작들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU 또는 Application Processor)를 의미할 수 있다.The expression "configured to (or configured to)" as used in this document, depending on the context, for example, "suitable for", "having the capacity to" "," "designed to", "adapted to", "made to" or "capable of" can be used interchangeably. The term “configured (or configured to)” may not necessarily mean only “specifically designed to” in hardware. Instead, in some contexts the expression “a device configured to” may mean that the device is “capable of” with other devices or components. For example, "a processor configured (or configured to perform) A, B, and C" means a dedicated processor (eg, an embedded processor) or memory device to perform the corresponding operations by executing one or more software programs stored in the memory device. It may mean a generic-purpose processor (eg, a CPU or an application processor) capable of performing the execution.
도 1은 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 시스템(1000)을 구성하는 요소들을 도시한 블록도이다. 도 1을 참조하면 리뷰 신뢰도 검증 시스템(1000)은 리뷰 신뢰도 검증 장치(100), 주문 입력 장치(200), 리뷰 입력 장치(300), 리뷰 제공 장치(400)를 포함할 수 있다.1 is a block diagram illustrating elements constituting a review
리뷰 신뢰도 검증 장치(100)는 구매 여부 검증이 끝난 고객에 대해서만 리뷰를 수집하고, 수집된 리뷰에 대해서 가짜 리뷰로 의심가는 리뷰를 필터링하며, 필터링된 리뷰의 신뢰도를 검증할 수 있다. 리뷰 신뢰도 검증 장치(100)는 주문 입력 장치(200)로부터 주문 정보와 고객 연락처를 수신할 수 있다. 이를 통해 리뷰 신뢰도 검증 장치(100)는 1차적으로 실제로 주문한 고객에 대해서만 리뷰 요청을 전송할 수 있다. 도 1에서는 리뷰 신뢰도 검증 장치(100)를 클라우드로 표현하였으나, 일반 서버 장치로 구현될 수 있음은 물론이다.The review
주문 입력 장치(200)는 업장의 키오스크와 같은 무인 주문 장치, 업장에서 사장이나 종업원이 직접 주문 정보를 입력하는 POS와 같은 장치, 배달 어플리케이션이나 웹페이지를 통해 음식을 주문하는 스마트폰과 같은 장치일 수 있다. 주문 입력 장치(200)는 고객으로부터 주문 입력을 받을 수 있으며, 연락처 정보를 입력하도록 할 수 있다.The
리뷰 신뢰도 검증 장치(100)는 실제로 주문을 한 고객에게 리뷰를 요청하게 되는데, 이때 리뷰 요청을 받고 리뷰를 입력할 수 있는 장치가 리뷰 입력 장치(300)이다. 예를 들어, 고객이 스마트폰을 통해 주문을 한 경우라면, 고객의 스마트폰은 주문 입력 장치(200)와 리뷰 입력 장치(300)의 기능을 모두 수행할 수 있다.The review
리뷰 제공 장치(400)는 리뷰 신뢰도 검증 장치(100)에서 신뢰도가 높은 리뷰로 선정한 리뷰를 일반 대중에게 제공할 수 있는 장치이다. 리뷰를 제공할 웹페이지나 어플리케이션을 실행할 수 있는 전자장치라면 어느 것이든 리뷰 제공 장치(400)로 기능할 수 있다.The
이하에서는 리뷰 신뢰도 검증 장치(100)를 중심으로 리뷰 신뢰도 검증 방법에 대하여 설명하기로 한다. 도 2는 리뷰 신뢰도 검증 장치(100)의 구성을 개략적으로 도시한 블록도이다. 도 2를 참조하면 리뷰 신뢰도 검증 장치(100)는 통신부(110), 메모리(120) 및 프로세서(130)를 포함할 수 있다. 도시된 구성요소 이외에도 입력부(미도시), 출력부(미도시), 디스플레이부(미도시) 등 다양한 구성요소들이 추가적으로 포함될 수 있음은 물론이다.Hereinafter, a review reliability verification method will be described with a focus on the review
통신부(110)는 유무선 네트워크를 이용하여 주문 입력 장치(200), 리뷰 입력 장치(300), 리뷰 제공 장치(400)와 같은 외부 장치와 통신할 수 있다. 예를 들어, 통신부(110)는 주문 입력 장치(300)로부터 사용자가 입력한 주문 내역(메뉴, 수량 등), 연락처(전화번호, 회원 아이디 등)에 대한 정보를 수신할 수 있다. 통신부(110)는 무선통신 방식으로 블루투스, Zigbee 통신, WiFi, 적외선(InfraRed, IR) 통신, NFC(Near Field Communication) 등 다양한 방식을 이용할 수 있다. 또한, 통신부(110)는 유선통신 방식으로 HDMI(High Definition Multimedia Interface), LVDS(Low Voltage Differential Signaling), LAN(Local Area Network) 등을 이용할 수 있다.The
메모리(120)는 리뷰 신뢰도 검증 장치(100)를 구동하기 위한 다양한 모듈, 소프트웨어, 데이터를 저장할 수 있다. 예를 들어, 메모리(120)에는 수신한 주문 정보, 연락처 정보, 리뷰, 업장 정보, 메뉴 정보와 같은 데이터, 리뷰 신뢰도를 검증하기 위한 소프트웨어, 외부 장치와의 통신 프로토콜과 같은 제어신호 데이터 등이 저장될 수 있다.The
메모리(120)는 플래쉬 메모리, HDD(Hard Disk Drive), SSD(Solid State Drive) 등의 형태로 구현될 수 있다. 예를 들어, 메모리(120)는 리뷰 신뢰도 검증 장치(100)의 동작 수행을 위한 프로그램 및/또는 어플리케이션을 저장하기 위한 ROM, 리뷰 신뢰도 검증 장치(100)의 동작 수행에 따른 데이터를 일시적으로 저장하기 위한 RAM을 구비할 수 있다. 또한, 메모리(120)는 각종 참조 데이터를 저장하기 위한 EEPROM(Electrically Erasable and Programmable ROM) 등을 더 구비할 수 있다.The
프로세서(130)는 리뷰 신뢰도 검증 장치(100)의 상술한 구성들을 제어할 수 있다. 예를 들어, 프로세서(130)는 리뷰 요청을 리뷰 입력 장치(300)로 전송하도록 통신부(110)를 제어할 수 있다. 프로세서(130)는 하나 또는 복수의 하드웨어 칩 형태로 제작되어 컨설팅 제공 장치(100)에 탑재될 수 있다. 예를 들어, 프로세서(130)는 범용 프로세서(예를 들어, CPU 또는 Application Processor)로 제작될 수도 있고, 인공지능을 위한 전용 하드웨어 칩 형태로 제작될 수도 있다.The
프로세서(130)는 통신부(110)를 통해 주문 입력 장치(200)로부터 고객의 주문 정보와 연락처를 수신할 수 있다. 고객의 주문 정보는 메뉴 정보, 수량 정보 등을 포함할 수 있다. 연락처는 일반적으로 전화번호일 수 있으나, 주문 어플리케이션이나 웹페이지, 리뷰 제공 어플리케이션이나 웹페이지의 회원 아이디로써 주문자의 전화번호와 연동될 수 있는 정보인 회원 아이디 등일 수도 있다. 프로세서(130)는 메뉴 정보를 수신하기 때문에 전체 주문이 아닌 메뉴별 리뷰를 요청할 수 있다.The
프로세서(130)는 수신된 주문 정보에 포함된 각각의 메뉴에 대한 리뷰 요청을 수신된 연락처로 전송하도록 통신부(110)를 제어할 수 있다. 도 1을 참조하면, 리뷰 요청은 리뷰 입력 장치(300)로 전송될 수 있다. 이와 같이 실제 주문이 이루어진 경우에만 리뷰를 입력할 수 있도록 하기 때문에, 리뷰 신뢰도 검증 장치(100)는 1차적으로 가짜 리뷰 작성을 방지할 수 있다.The
프로세서(130)는 전송된 리뷰 요청에 대응하여 리뷰가 수신되면, 수신된 리뷰를 메모리(120)에 저장할 수 있다. 앞서 설명한 바와 같이 메모리(120)에는 수신된 리뷰가 주문을 한 업장, 주문 메뉴, 주문 시간, 리뷰 입력 시간 등의 메타 정보가 함께 저장될 수 있다. 프로세서(130)는 저장된 리뷰의 수가 기설정된 수를 초과하면 저장된 리뷰의 신뢰성에 대한 검증을 수행할 수 있다. 저장된 리뷰의 수가 적은 경우에는 가짜 리뷰를 걸러낼 유인이 적고, 가짜 리뷰의 특성 분석을 진행할 충분한 샘플이 부족하기 때문이다.When a review is received in response to the transmitted review request, the
프로세서(130)는 저장된 리뷰 중 신뢰성에 의심이 가는 일부 리뷰를 검증 대상 리뷰로 선정할 수 있다. 모든 리뷰에 대해 신뢰도 검증을 하는 것은 비효율적이기 때문에, 프로세서(130)는 이하에서 설명할 여러 기준에 의해 신뢰도를 검증할 대상 리뷰를 선정한다. 그리고 프로세서(130)는 선정된 검증 대상 리뷰 각각에 대해 신뢰도를 결정할 수 있다.The
예를 들어, 특정 일에 주문량 대비 리뷰 작성 건수가 비정상적으로 다수인 경우, 프로세서(130)는 해당 특정 일에 작성된 리뷰들을 검증 대상 리뷰로 선정할 수 있다. 구체적으로, 프로세서(130)는 일일 리뷰 요청 건수와 입력된 리뷰의 수를 각각 카운팅할 수 있다. 모든 리뷰 요청에 대해 리뷰가 입력되는 것이 아니며, 통계적으로 업장마다 리뷰 요청 대비 입력 리뷰의 비율이 결정된다. 프로세서(130)는 특정 기간 동안의 리뷰 요청 대비 입력 리뷰 비율의 평균 값을 산출할 수 있다. 그리고 특정 일의 리뷰 요청 대비 입력 리뷰 비율이 산출된 평균 값을 상회하는 경우에, 프로세서(130)는 특정 일의 리뷰를 검증 대상 리뷰로 선정할 수 있다.For example, when the number of reviews written on a specific day relative to the order quantity is abnormally large, the
다른 예로, 특정 일에 특정 경로에서 유발된 주문 건수가 비정상적으로 다수인 경우, 프로세서(130)는 해당 특정 일, 특정 경로를 통해 작성된 리뷰들을 검증 대상 리뷰로 선정할 수 있다. 신뢰도가 낮은 리뷰는 악성 고객에 의해 낮은 평점으로 작성된 리뷰만을 포함하지 않는다. 업장에서 자신들의 평점을 높이기 위해 가짜 주문을 발생시키고, 해당 주문에 스스로 높은 평점의 리뷰를 작성함으로써 신뢰도를 떨어뜨리는 경우도 발생한다. 본 실시 예에서는 악성 고객뿐 아니라 업장 스스로 리뷰를 조작하는 경우를 방지할 수 있다.As another example, when the number of orders induced by a specific path on a specific day is abnormally large, the
구체적으로, 프로세서(130)는 주문 정보 및 연락처가 획득된 경로 별로 일일 리뷰 요청 건수를 카운팅할 수 있다. 예를 들어, 프로세서(130)는 키오스크를 통해 주문이 들어온 숫자, 배달 어플리케이션을 통해 주문이 들어온 숫자, 매장에서 POS를 통해 주문을 받은 숫자 등을 카운팅할 수 있다. 그리고 프로세서(130)는 카운팅된 경로 별로 일일 리뷰 요청 건수의 평균 값을 산출할 수 있다. 특정 일의 특정 경로에서 유발된 리뷰 요청 건수가 산출된 평균 값을 상회하면, 프로세서(130)는 특정 일의 특정 경로로 작성된 리뷰를 검증 대상 리뷰로 선정할 수 있다.Specifically, the
또 다른 예로, 프로세서(130)는 신뢰도가 낮은 것으로 결정된 리뷰들을 수집하여 분석함으로써, 신뢰도를 판단하는 기준을 새로이 설정할 수 있다. 구체적으로 프로세서(130)는 신뢰도가 '낮음'으로 결정된 리뷰를 수집하여 메모리(120)에 저장할 수 있다. 신뢰도는 '높음', '낮음'과 같이 표현될 수도 있고, 점수로 표현될 수도 있다. 프로세서(130)는 신뢰도가 낮은 것으로 판단된 리뷰들의 복수의 특성 정보(feature information)을 분석할 수 있으며, 복수의 특성 정보 중 신뢰도가 낮은 것으로 판단된 리뷰들이 공통적으로 가지고 있는 특성 정보가 무엇인지 판단할 수 있다. 즉 프로세서(130)는 저장된 리뷰들의 복수의 특성 정보를 분석하여 유사도를 결정할 수 있고, 결정된 유사도가 기설정된 값 이상인 특성 정보를 검증 대상 리뷰를 선정하는 기준 값으로 설정할 수 있다.As another example, the
검증 대상 리뷰가 선정되면, 프로세서(130)는 각각의 리뷰에 대해 신뢰도를 검증할 수 있다. 예를 들어, 프로세서(130)는 일정 기간 동안 리뷰 작성자가 작성한 리뷰의 수가 과도하게 다수인 경우 신뢰도를 낮음으로 판단할 수 있다. 프로세서(130)가 실제 주문이 있는 경우에만 리뷰를 작성할 수 있도록 1차로 필터링할 수 있기 때문에, 리뷰 작성자가 작성한 리뷰의 수가 과도하게 다수인 경우에는 실제 음식을 먹기 위한 것이 아닌 리뷰 작성을 하기 위한 주문을 발생시켰을 가능성이 높다. 구체적으로 프로세서(130)는 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간을 수집할 수 있다. 그리고 작성자가 기설정된 시간 동안 작성한 리뷰의 수가 기설정된 수를 초과하면, 프로세서(130)는 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.When a review target review is selected, the
다른 예로, 프로세서(130)는 제1주문의 발생 시간과 제2주문의 발생 시간 사이의 시간 동안 제1주문을 한 업장에서 제2주문을 한 업장으로 이동할 수 있는지에 근거하여 신뢰도를 검증할 수 있다. 본 실시 예는 특히 주문이 업장에 위치한 키오스크나 POS를 통해 입력된 경우에 유용하게 사용될 수 있다. 구체적으로, 프로세서(130)는 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간 및 리뷰 대상 업장의 위치를 수집할 수 있다. 작성자의 리뷰 작성 시간 간격을 상기 시간 간격을 비교할 업장들의 위치 간격으로 나눈 값이 기설정된 값 미만이라면, 프로세서(130)는 실제로 고객이 업장 사이를 이동할 수 없었다고 판단할 수 있다. 이에 따라 프로세서(130)는 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.As another example, the
또 다른 예로, 프로세서(130)는 업장의 특정 메뉴에 대한 리뷰 평점이 전체 평균과 동떨어진 경우에 신뢰성이 낮은 리뷰로 판단할 수 있다. 구체적으로 프로세서(130)는 선정된 검증 대상 리뷰를 작성한 작성자의 리뷰 대상 업장에 대한 모든 리뷰의 평점 및 리뷰의 수를 수집할 수 있다. 수집된 리뷰의 수가 충분히 통계적으로 의미를 가질만큼 다수인 경우, 프로세서(130)는 작성자의 리뷰 평점 평균 값과 리뷰 대상 업장의 전체 리뷰 평점 평균 값을 비교할 수 있다. 그리고 비교 결과 두 평균 값의 차이가 기설정된 값 이상이면, 프로세서(130)는 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.As another example, the
도 3은 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 방법을 설명하기 위한 흐름도이다. 도 3을 참조하면 리뷰 신뢰도 검증 장치(100)는 고객의 주문 정보 및 연락처 정보를 수신할 수 있다(S310). 고객의 주문 정보에는 주문을 한 업장의 정보, 주문에 포함된 메뉴 정보, 주문 발생 시간 정보 등이 포함될 수 있다. 연락처 정보에는 전화번호, 아이디 등이 포함될 수 있다.3 is a flowchart illustrating a review reliability verification method according to an embodiment of the present invention. Referring to FIG. 3 , the review
이어서 리뷰 신뢰도 검증 장치(100)는 수신한 연락처로 주문한 메뉴 각각에 대한 리뷰 요청을 전송할 수 있다(S320). 이에 따라 주문 시 고객이 입력한 연락처에 리뷰 요청을 전송함으로써, 실 구매 고객에 한하여 리뷰가 작성되도록 하는 효과가 있다. 즉, 리뷰 신뢰도 검증 장치(100)는 1차적으로 가짜 리뷰가 작성될 수 있는 환경을 제거하여 리뷰 신뢰도를 높일 수 있다. 또한, 리뷰 신뢰도 검증 장치(100)는 주문에 포함된 메뉴별로 리뷰를 요청함으로써, 보다 상세한 고객 피드백을 받을 수 있다는 점에서 유용하다.Subsequently, the review
리뷰 요청에 대응하여 리뷰가 입력되면(S330-Y), 리뷰 신뢰도 검증 장치(100)는 입력된 리뷰를 저장할 수 있다(S340). 그리고 일정 수량 이상의 리뷰가 저장되면(S350-Y), 리뷰 신뢰도 검증 장치(100)는 저장된 리뷰 중 일부를 검증 대상 리뷰로 선정할 수 있다(S360). 이는 모든 리뷰에 대해 신뢰도를 검증하는 것은 비효율적이기 때문에 신뢰도에 의심이 가는 리뷰를 미리 선정하는 절차를 거치는 것이다. 예를 들어, 리뷰 신뢰도 검증 장치(100)는 일일 리뷰 요청 건수 대비 입력된 리뷰의 수가 특정 일에 평균 값을 상회하면, 특정 일에 작성된 리뷰를 검증 대상 리뷰로 선정할 수 있다. 다른 예로, 리뷰 신뢰도 검증 장치(100)는 특정 일에 특정 주문 경로에서 유발된 리뷰 요청 건수가 평균 값을 상회하는 경우, 해당 특정 일에 특정 주문 경로를 통해 작성된 리뷰를 검증 대상 리뷰로 선정할 수 있다.When a review is input in response to a review request (S330-Y), the review
이어서 리뷰 신뢰도 검증 장치(100)는 검증 대상 리뷰로 선정된 각각의 리뷰에 대해 신뢰도를 결정할 수 있다(S370). 예를 들어, 리뷰 신뢰도 검증 장치(100)는 일정한 기간 동안 검증 대상 리뷰를 작성한 작성자가 기설정된 수를 초과하는 리뷰를 작성한 경우, 즉 일정한 기간 동안 과도한 주문을 발생시키고 리뷰를 작성한 경우에 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 판단할 수 있다. 다른 예로, 리뷰 신뢰도 검증 장치(100)는 검증 대상 리뷰 작성자가 연속하여 오프라인으로 주문을 발생시켰을 경우에, 주문이 연속하여 발생된 업장들 사이의 거리를 충분히 이동할 수 있는지 판단하여 검증 대상 리뷰의 신뢰도를 검증할 수도 있다. 또 다른 예로, 리뷰 신뢰도 검증 장치(100)는 검증 대상 리뷰의 작성자가 해당 업장에 대해 전체 평점과 동떨어진 평점의 리뷰를 지속적으로 남기는 경우, 해당 작성자가 작성한 검증 대상 리뷰의 신뢰도를 낮음으로 판단할 수도 있다.Subsequently, the review
추가적으로 리뷰 신뢰도 검증 장치(100)는 신뢰도가 낮음으로 결정된 리뷰를 수집하여 데이터베이스에 저장할 수 있다. 이는 신뢰도가 낮음으로 결정된 리뷰들의 특성을 분석하여, 검증 대상 리뷰를 선정하는 기준으로 활용하기 위함이다. 리뷰들의 특성을 분석하는 것에는 인공지능 모델이 사용될 수도 있다. 이와 같이 리뷰 신뢰도 검증 장치(100)는 리뷰 데이터가 쌓일 수록, 신뢰도가 낮은 리뷰를 걸러낼수록 점점 정교화된 신뢰도 검증 시스템을 구축할 수 있다.Additionally, the review
한편, 본 명세서에서 사용된 용어 “부” 또는 “모듈”은 하드웨어, 소프트웨어 또는 펌웨어로 구성된 유닛을 포함하며, 예를 들어, 로직, 논리블록, 부품 또는 회로 등의 용어와 상호 호환적으로 사용될 수 있다. “부” 또는 “모듈”은 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 모듈은 ASIC(application specific integrated circuit)으로 구성될 수 있다.Meanwhile, as used herein, the term “unit” or “module” includes a unit composed of hardware, software, or firmware, and may be used interchangeably with terms such as, for example, logic, logic block, part or circuit. have. A “part” or “module” may be an integrally formed part or a minimum unit that performs one or more functions or a part thereof. For example, the module may be configured as an application specific integrated circuit (ASIC).
본 발명의 다양한 실시 예들은 기기(machine)(예: 컴퓨터)로 읽을 수 있는 저장 매체(machine-readable storage media)에 저장된 명령어를 포함하는 소프트웨어로 구현될 수 있다. 기기는, 저장 매체로부터 저장된 명령어를 호출하고, 호출된 명령어에 따라 동작이 가능한 장치로서, 개시된 실시 예들에 따른 전자 장치(예: 리뷰 신뢰도 검증 장치(100))를 포함할 수 있다. 상기 명령이 프로세서에 의해 실행될 경우, 프로세서가 직접, 또는 상기 프로세서의 제어 하에 다른 구성요소들을 이용하여 상기 명령에 해당하는 기능을 수행할 수 있다. 명령은 컴파일러 또는 인터프리터에 의해 생성 또는 실행되는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장매체는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장매체가 신호(signal)를 포함하지 않으며 실재(tangible)한다는 것을 의미할 뿐 데이터가 저장매체에 반영구적 또는 임시적으로 저장됨을 구분하지 않는다.Various embodiments of the present invention may be implemented as software including instructions stored in a machine-readable storage media readable by a machine (eg, a computer). The device is a device capable of calling a stored command from a storage medium and operating according to the called command, and may include an electronic device (eg, the review reliability verification apparatus 100 ) according to the disclosed embodiments. When the instruction is executed by the processor, the processor may directly or use other components under the control of the processor to perform a function corresponding to the instruction. Instructions may include code generated or executed by a compiler or interpreter. The device-readable storage medium may be provided in the form of a non-transitory storage medium. Here, 'non-transitory' means that the storage medium does not include a signal and is tangible, and does not distinguish that data is semi-permanently or temporarily stored in the storage medium.
일 실시 예에 따르면, 본 문서에 개시된 다양한 실시 예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 온라인으로 배포될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.According to an embodiment, the method according to various embodiments disclosed in this document may be provided by being included in a computer program product. Computer program products may be traded between sellers and buyers as commodities. The computer program product may be distributed in the form of a machine-readable storage medium (eg, compact disc read only memory (CD-ROM)) or online through an application store (eg, Play Store™). In the case of online distribution, at least a portion of the computer program product may be temporarily stored or temporarily generated in a storage medium such as a memory of a server of a manufacturer, a server of an application store, or a relay server.
다양한 실시 예들에 따른 구성 요소(예: 모듈 또는 프로그램) 각각은 단수 또는 복수의 개체로 구성될 수 있으며, 전술한 해당 서브 구성 요소들 중 일부 서브 구성 요소가 생략되거나, 또는 다른 서브 구성 요소가 다양한 실시 예에 더 포함될 수 있다. 대체적으로 또는 추가적으로, 일부 구성 요소들(예: 모듈 또는 프로그램)은 하나의 개체로 통합되어, 통합되기 이전의 각각의 해당 구성 요소에 의해 수행되는 기능을 동일 또는 유사하게 수행할 수 있다. 다양한 실시 예들에 따른, 모듈, 프로그램 또는 다른 구성 요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱하게 실행되거나, 적어도 일부 동작이 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.Each of the components (eg, a module or a program) according to various embodiments may be composed of a singular or a plurality of entities, and some sub-components of the aforementioned sub-components may be omitted, or other sub-components may be various. It may be further included in the embodiment. Alternatively or additionally, some components (eg, a module or a program) may be integrated into a single entity to perform the same or similar functions performed by each corresponding component prior to integration. According to various embodiments, operations performed by a module, program, or other component may be sequentially, parallel, repetitively or heuristically executed, or at least some operations may be executed in a different order, omitted, or other operations may be added. can
100: 리뷰 신뢰도 검증 장치
110: 통신부
120: 메모리
130: 프로세서
200: 주문 입력 장치100: Review reliability verification device
110: communication department
120: memory
130: processor
200: order input device
Claims (14)
고객 정보, 업장 정보, 리뷰를 저장하는 메모리;
상기 통신부를 통해 주문 입력 장치로부터 고객의 주문 정보와 연락처를 수신하고, 상기 주문 정보에 포함된 각각의 메뉴에 대한 리뷰 요청을 상기 연락처로 전송하도록 통신부를 제어하며, 상기 전송된 리뷰 요청에 대응하여 리뷰가 수신되면 상기 수신된 리뷰를 상기 메모리에 저장하고, 상기 저장된 리뷰의 수가 기설정된 수를 초과하면 상기 저장된 리뷰 중 일부를 검증 대상 리뷰로 선정하며, 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 프로세서;를 포함하는 리뷰 신뢰도 검증 장치.a communication unit communicating with an external device;
memory for storing customer information, business information, and reviews;
Receives customer's order information and contact information from the order input device through the communication unit, controls the communication unit to transmit a review request for each menu included in the order information to the contact information, and responds to the transmitted review request When a review is received, the received review is stored in the memory, and when the number of the stored reviews exceeds a preset number, some of the stored reviews are selected as the verification target review, and the reliability of each of the selected verification target reviews is obtained. A review reliability verification device comprising a; processor for determining.
상기 프로세서는,
일일 리뷰 요청 건수 및 입력된 리뷰의 수를 각각 카운팅하고, 상기 카운팅된 리뷰 요청 건수와 입력된 리뷰의 수를 기초로 리뷰 요청 대비 입력 리뷰 비율의 평균 값을 산출하며, 특정 일의 리뷰 요청 대비 입력 리뷰 비율이 상기 산출된 평균 값을 상회하면 상기 특정 일의 리뷰를 검증 대상 리뷰로 선정하는 리뷰 신뢰도 검증 장치.According to claim 1,
The processor is
The number of daily review requests and the number of input reviews are counted, respectively, and based on the counted number of review requests and the number of input reviews, an average value of the review request to input review ratio is calculated, and the input compared to the review request on a specific day A review reliability verification device for selecting a review on the specific day as a review target review when the review ratio exceeds the calculated average value.
상기 프로세서는,
상기 주문 정보 및 연락처가 획득된 경로 별로 일일 리뷰 요청 건수를 카운팅하고, 상기 카운팅된 경로별 일일 리뷰 요청 건수의 평균 값을 산출하며, 특정 일의 특정 경로에서 유발된 리뷰 요청 건수가 상기 산출된 평균 값을 상회하면 상기 특정 일의 특정 경로로 작성된 리뷰를 검증 대상 리뷰로 선정하는 리뷰 신뢰도 검증 장치.According to claim 1,
The processor is
Counting the number of daily review requests for each route in which the order information and contact information are obtained, calculating an average value of the number of daily review requests for each counted route, and calculating the average number of review requests induced by a specific route on a specific day A review reliability verification device that selects a review written on a specific path of the specific day as a verification target review when the value is exceeded.
상기 프로세서는,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간을 수집하고, 상기 작성자가 기설정된 시간 동안 작성한 리뷰의 수가 기설정된 수를 초과하면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 리뷰 신뢰도 검증 장치.According to claim 1,
The processor is
A review that collects the writing time of all reviews of the author who wrote the selected verification target review, and determines that the reliability of the selected verification target review is low when the number of reviews written by the author during a predetermined time exceeds the predetermined number Reliability Verification Device.
상기 프로세서는,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간 및 리뷰 대상 업장의 위치를 수집하고, 상기 작성자의 리뷰 작성 시간 간격을 상기 시간 간격을 비교할 업장의 위치 간격으로 나눈 값이 기설정된 값 미만이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 리뷰 신뢰도 검증 장치.According to claim 1,
The processor is
The value obtained by collecting the writing time of all reviews of the author who wrote the selected review target review and the location of the review target business, and dividing the review writing time interval of the writer by the location interval of the business to compare the time interval is less than a preset value On the other hand, a review reliability verification device for determining the reliability of the selected verification target review as low.
상기 프로세서는,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 리뷰 대상 업장에 대한 모든 리뷰의 평점 및 리뷰의 수를 수집하고, 상기 수집된 리뷰의 수가 기설정된 값 이상이면 상기 작성자의 리뷰 평점 평균 값과 상기 리뷰 대상 업장의 전체 리뷰 평점 평균 값을 비교하며, 비교 결과 두 평균 값의 차이가 기설정된 값 이상이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 리뷰 신뢰도 검증 장치.According to claim 1,
The processor is
Collects the ratings and the number of reviews of all reviews for the review target business of the author who wrote the selected verification target review, and if the number of collected reviews is greater than or equal to a preset value, the average value of the review rating of the author and the review target business A review reliability verification apparatus that compares the average value of the overall review ratings of , and determines that the reliability of the selected review target review is low when a difference between the two average values is greater than or equal to a preset value as a result of the comparison.
상기 프로세서는,
상기 신뢰도가 낮음으로 결정된 리뷰를 수집하여 메모리에 저장하고, 상기 저장된 리뷰들의 복수의 특성 정보를 분석하여 유사도를 결정하며, 상기 결정된 유사도가 기설정된 값 이상인 특성 정보를 상기 검증 대상 리뷰를 선정하는 기준으로 설정하는 리뷰 신뢰도 검증 장치.According to claim 1,
The processor is
Criteria for collecting reviews determined to have low reliability and storing them in a memory, determining a similarity by analyzing a plurality of characteristic information of the stored reviews, and selecting the verification target review based on characteristic information in which the determined similarity is greater than or equal to a preset value Review reliability verification device set to .
고객의 주문 정보 및 연락처를 획득하는 단계;
상기 주문 정보에 포함된 각각의 메뉴에 대한 리뷰 요청을 상기 연락처로 전송하는 단계;
상기 전송된 리뷰 요청에 대응하여 리뷰가 입력되면, 상기 입력된 리뷰를 저장하는 단계;
상기 저장된 리뷰의 수가 기설정된 수를 초과하면, 상기 저장된 리뷰 중 일부를 검증 대상 리뷰로 선정하는 단계; 및
상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계;를 포함하는 리뷰 신뢰도 검증 방법.In the review reliability verification method,
obtaining the customer's order information and contact information;
transmitting a review request for each menu included in the order information to the contact information;
when a review is input in response to the transmitted review request, storing the input review;
selecting some of the stored reviews as verification target reviews when the number of the stored reviews exceeds a preset number; and
A review reliability verification method comprising a; determining the reliability of each of the selected verification target reviews.
상기 검증 대상 리뷰로 선정하는 단계는,
일일 리뷰 요청 건수 및 입력된 리뷰의 수를 각각 카운팅하는 단계;
상기 카운팅된 리뷰 요청 건수 및 입력된 리뷰의 수를 기초로, 리뷰 요청 대비 입력 리뷰 비율의 평균 값을 산출하는 단계; 및
특정 일의 리뷰 요청 대비 입력 리뷰 비율이 상기 산출된 평균 값을 상회하면, 상기 특정 일의 리뷰를 검증 대상 리뷰로 선정하는 단계;를 포함하는 리뷰 신뢰도 검증 방법.9. The method of claim 8,
The step of selecting the review target for verification is,
counting the number of daily review requests and the number of input reviews, respectively;
calculating an average value of a review request to input review ratio based on the counted number of review requests and the number of input reviews; and
When the input review ratio to the review request on a specific day exceeds the calculated average value, selecting the review on the specific day as a review target review; review reliability verification method comprising a.
상기 검증 대상 리뷰로 선정하는 단계는,
상기 주문 정보 및 연락처가 획득된 경로 별로 일일 리뷰 요청 건수를 카운팅하는 단계;
상기 카운팅된 경로 별 일일 리뷰 요청 건수의 평균 값을 산출하는 단계; 및
특정 일의 특정 경로에서 유발된 리뷰 요청 건수가 상기 산출된 평균 값을 상회하면, 상기 특정 일의 특정 경로로 작성된 리뷰를 검증 대상 리뷰로 선정하는 단계;를 포함하는 리뷰 신뢰도 검증 방법.9. The method of claim 8,
The step of selecting the review target for verification includes:
counting the number of daily review requests for each route in which the order information and contact information are obtained;
calculating an average value of the number of daily review requests for each counted route; and
When the number of review requests induced on a specific path on a specific day exceeds the calculated average value, selecting a review written on the specific path on the specific day as a review target review; review reliability verification method comprising a.
상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계는,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간을 수집하는 단계; 및
상기 작성자가 기설정된 시간 동안 작성한 리뷰의 수가 기설정된 수를 초과하면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 단계;를 포함하는 리뷰 신뢰도 검증 방법.9. The method of claim 8,
The step of determining the reliability of each of the selected verification target reviews,
collecting the writing times of all reviews of authors who have written the selected verification target review; and
When the number of reviews written by the author for a preset time exceeds a preset number, determining the reliability of the selected review target review to be low; review reliability verification method comprising a.
상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계는,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간 및 리뷰 대상 업장의 위치를 수집하는 단계; 및
상기 작성자의 리뷰 작성 시간 간격을 상기 시간 간격을 비교할 업장들의 위치 간격으로 나눈 값이 기설정된 값 미만이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 단계;를 포함하는 리뷰 신뢰도 검증 방법.According to claim 1,
The step of determining the reliability of each of the selected verification target reviews,
collecting the writing times of all reviews of the author who wrote the selected verification target review and the location of the review target business; and
When the value obtained by dividing the review writing time interval of the author by the location interval of the businesses to be compared with the time interval is less than a preset value, determining the reliability of the selected verification target review as low; review reliability verification method comprising a.
상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계는,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 리뷰 대상 업장에 대한 모든 리뷰의 평점 및 리뷰의 수를 수집하는 단계;
상기 수집된 리뷰의 수가 기설정된 값 이상이면, 상기 작성자의 리뷰 평점 평균 값과 상기 리뷰 대상 업장의 전체 리뷰 평점 평균 값을 비교하는 단계;
상기 비교 결과 두 평균 값의 차이가 기설정된 값 이상이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 단계;를 포함하는 리뷰 신뢰도 검증 방법.According to claim 1,
The step of determining the reliability of each of the selected verification target reviews,
collecting the ratings of all reviews and the number of reviews for the review target business of the author who wrote the selected verification target review;
if the number of the collected reviews is greater than or equal to a preset value, comparing the average value of the review rating of the author with the average value of the overall review rating of the review target business;
and determining that the reliability of the selected review target review is low when the difference between the two average values is greater than or equal to a preset value as a result of the comparison.
상기 신뢰도가 낮음으로 결정된 리뷰를 수집하여 데이터베이스에 저장하는 단계;
상기 데이터베이스에 저장된 리뷰들의 복수의 특성 정보를 분석하여 유사도를 결정하는 단계; 및
상기 결정된 유사도가 기설정된 값 이상인 특성 정보를 상기 검증 대상 리뷰를 선정하는 기준 값으로 설정하는 단계;를 더 포함하는 리뷰 신뢰도 검증 방법.According to claim 1,
collecting reviews determined as having low reliability and storing them in a database;
determining similarity by analyzing a plurality of characteristic information of reviews stored in the database; and
and setting the characteristic information having the determined similarity equal to or greater than a preset value as a reference value for selecting the review target review.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020210021320A KR102644685B1 (en) | 2021-02-17 | 2021-02-17 | Review reliability validation device and method of thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020210021320A KR102644685B1 (en) | 2021-02-17 | 2021-02-17 | Review reliability validation device and method of thereof |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20220117676A true KR20220117676A (en) | 2022-08-24 |
KR102644685B1 KR102644685B1 (en) | 2024-03-11 |
Family
ID=83111797
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020210021320A KR102644685B1 (en) | 2021-02-17 | 2021-02-17 | Review reliability validation device and method of thereof |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102644685B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102666172B1 (en) * | 2023-12-29 | 2024-05-14 | 주식회사 티맥스핀테크 | Method for adjusting review scores |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7519562B1 (en) * | 2005-03-31 | 2009-04-14 | Amazon Technologies, Inc. | Automatic identification of unreliable user ratings |
US20110055104A1 (en) * | 2008-05-14 | 2011-03-03 | The Board Of Governors For Higher Education, State Of Rhode Island And Providence Plantations | Systems and methods for detecting unfair manipulations of on-line reputation systems |
KR20110058064A (en) * | 2009-11-25 | 2011-06-01 | 에스케이마케팅앤컴퍼니 주식회사 | User evaluating system using informing message and method thereof |
KR20140101697A (en) * | 2013-02-11 | 2014-08-20 | 구글 인코포레이티드 | Automatic detection of fraudulent ratings/comments related to an application store |
US20160070709A1 (en) * | 2014-09-09 | 2016-03-10 | Stc.Unm | Online review assessment using multiple sources |
KR20190123397A (en) * | 2018-04-24 | 2019-11-01 | 성균관대학교산학협력단 | Classification model selection method for discriminating fake review |
-
2021
- 2021-02-17 KR KR1020210021320A patent/KR102644685B1/en active IP Right Grant
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7519562B1 (en) * | 2005-03-31 | 2009-04-14 | Amazon Technologies, Inc. | Automatic identification of unreliable user ratings |
US20110055104A1 (en) * | 2008-05-14 | 2011-03-03 | The Board Of Governors For Higher Education, State Of Rhode Island And Providence Plantations | Systems and methods for detecting unfair manipulations of on-line reputation systems |
KR20110058064A (en) * | 2009-11-25 | 2011-06-01 | 에스케이마케팅앤컴퍼니 주식회사 | User evaluating system using informing message and method thereof |
KR20140101697A (en) * | 2013-02-11 | 2014-08-20 | 구글 인코포레이티드 | Automatic detection of fraudulent ratings/comments related to an application store |
US20160070709A1 (en) * | 2014-09-09 | 2016-03-10 | Stc.Unm | Online review assessment using multiple sources |
KR20190123397A (en) * | 2018-04-24 | 2019-11-01 | 성균관대학교산학협력단 | Classification model selection method for discriminating fake review |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102666172B1 (en) * | 2023-12-29 | 2024-05-14 | 주식회사 티맥스핀테크 | Method for adjusting review scores |
Also Published As
Publication number | Publication date |
---|---|
KR102644685B1 (en) | 2024-03-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
AU2021200523B2 (en) | Systems and methods for dynamically detecting and preventing consumer fraud | |
TWI776894B (en) | Merchant evaluation method and system | |
CN107563757B (en) | Data risk identification method and device | |
US8560357B2 (en) | Retail model optimization through video data capture and analytics | |
KR102084125B1 (en) | Vending machine and method for providing online to offline based used goods marketplace platform using thereof | |
US20210264448A1 (en) | Privacy preserving ai derived simulated world | |
US20130144888A1 (en) | Dynamic network analytics system | |
JP6744882B2 (en) | Action pattern search system and action pattern search method | |
WO2017053672A1 (en) | Systems and methods for locating merchant terminals based on transaction data | |
US10997596B1 (en) | Systems and methods for use in analyzing declined payment account transactions | |
US11017330B2 (en) | Method and system for analysing data | |
US10275812B2 (en) | Method and apparatus for denying a transaction detected to be initiated outside of a required application on an endpoint device | |
CN109697454B (en) | Cross-device individual identification method and device based on privacy protection | |
US11257017B2 (en) | Distributed logbook for anomaly monitoring | |
KR102334404B1 (en) | Merchandise recommendation server and control method thereof | |
US11928741B1 (en) | Systems and methods for detecting items at a property | |
CN106327230A (en) | Abnormal user detection method and device | |
JPWO2019123714A1 (en) | Information processing equipment, product recommendation methods, and programs | |
JP2016177583A (en) | Traffic line processing system and traffic line processing method | |
KR102644685B1 (en) | Review reliability validation device and method of thereof | |
CN108734366B (en) | User identification method and system, nonvolatile storage medium and computer system | |
US10540682B1 (en) | Systems and methods for determining impact of high-affinity baskets | |
KR20190056075A (en) | Server and method for service evaluation | |
CN108985755A (en) | A kind of account state identification method, device and server | |
CN113297462A (en) | Data processing method, device, equipment and storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E902 | Notification of reason for refusal | ||
E90F | Notification of reason for final refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |