KR102644685B1 - Review reliability validation device and method of thereof - Google Patents
Review reliability validation device and method of thereof Download PDFInfo
- Publication number
- KR102644685B1 KR102644685B1 KR1020210021320A KR20210021320A KR102644685B1 KR 102644685 B1 KR102644685 B1 KR 102644685B1 KR 1020210021320 A KR1020210021320 A KR 1020210021320A KR 20210021320 A KR20210021320 A KR 20210021320A KR 102644685 B1 KR102644685 B1 KR 102644685B1
- Authority
- KR
- South Korea
- Prior art keywords
- review
- reviews
- reliability
- verification
- subject
- Prior art date
Links
- 238000012552 review Methods 0.000 title claims abstract description 397
- 238000000034 method Methods 0.000 title abstract description 15
- 238000010200 validation analysis Methods 0.000 title 1
- 238000012795 verification Methods 0.000 claims abstract description 90
- 238000004891 communication Methods 0.000 claims abstract description 26
- 230000001960 triggered effect Effects 0.000 claims description 5
- 230000004044 response Effects 0.000 abstract description 5
- 230000002354 daily effect Effects 0.000 description 11
- 230000006870 function Effects 0.000 description 8
- 230000014509 gene expression Effects 0.000 description 5
- 238000004590 computer program Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000013473 artificial intelligence Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/12—Hotels or restaurants
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0278—Product appraisal
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02A—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
- Y02A10/00—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE at coastal zones; at river basins
- Y02A10/40—Controlling or monitoring, e.g. of flood or hurricane; Forecasting, e.g. risk assessment or mapping
Landscapes
- Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Engineering & Computer Science (AREA)
- Tourism & Hospitality (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- Accounting & Taxation (AREA)
- Theoretical Computer Science (AREA)
- Economics (AREA)
- Marketing (AREA)
- Development Economics (AREA)
- Finance (AREA)
- General Physics & Mathematics (AREA)
- Entrepreneurship & Innovation (AREA)
- Game Theory and Decision Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Primary Health Care (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
리뷰 신뢰도 검증 장치 및 방법이 개시된다. 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 장치는 외부 장치와 통신하는 통신부, 고객 정보, 업장 정보, 리뷰를 저장하는 메모리, 통신부를 통해 주문 입력 장치로부터 고객의 주문 정보와 연락처를 수신하고, 주문 정보에 포함된 각각의 메뉴에 대한 리뷰 요청을 연락처로 전송하며, 전송된 리뷰 요청에 대응하여 수신된 리뷰를 저장하고, 저장된 리뷰의 수가 기설정된 수를 초과하면 저장된 리뷰 중 일부를 검증 대상 리뷰로 선정하며, 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 프로세서를 포함할 수 있다.An apparatus and method for verifying review reliability are disclosed. The review reliability verification device according to an embodiment of the present invention receives the customer's order information and contact information from the order input device through a communication unit that communicates with an external device, a memory that stores customer information, business information, and reviews, and a communication unit, and orders. A review request for each menu included in the information is sent to the contact information, and the reviews received in response to the sent review request are saved. If the number of saved reviews exceeds the preset number, some of the saved reviews are selected as reviews subject to verification. selection, and may include a processor that determines the reliability of each selected review subject to verification.
Description
본 발명은 리뷰 신뢰도 검증 장치 및 방법에 관한 것으로, 구체적으로 구매 여부 검증이 끝난 고객에 대해서만 리뷰를 수집하고, 수집된 리뷰에 대해서 가짜 리뷰로 의심가는 리뷰를 필터링하며, 필터링된 리뷰의 신뢰도를 검증할 수 있는 리뷰 신뢰도 검증 장치 및 방법에 관한 것이다.The present invention relates to a review reliability verification device and method. Specifically, the present invention relates to a review reliability verification device and method. Specifically, it collects reviews only for customers who have completed purchase verification, filters reviews suspected to be fake reviews for the collected reviews, and verifies the reliability of the filtered reviews. It relates to a review reliability verification device and method that can be performed.
여행을 가는 경우와 같이 새로운 지역에 방문하는 경우 사람들은 맛있는 음식점을 찾아가고자 한다. 이러한 경우 사람들은 대부분 음식점의 리뷰를 찾아보게 된다. 일상 생활에서도 새로운 음식점을 방문하기 이전에 리뷰를 찾아보고 방문 여부나 메뉴를 결정하는 것이 일상화되었다. 이에 따라 리뷰의 중요성이 점점 높아지고 있다.When visiting a new area, such as when traveling, people want to try delicious restaurants. In these cases, people mostly look for reviews of restaurants. In everyday life, it has become common to look up reviews before visiting a new restaurant and then decide whether to visit or what to eat. Accordingly, the importance of reviews is increasing.
역설적으로 리뷰의 중요성이 높아지며 리뷰의 신뢰도는 점점 떨어지고 있다. 본래 리뷰는 경험에 근거하여 객관적인 평가를 적은 콘텐츠이지만, 업체로부터 대가를 받고 작성하는 리뷰, 경쟁 업체에 대한 악의적인 리뷰, 방문하지도 않고 작성하는 허위 리뷰가 홍수를 이루고 있다. 이러한 점에서 리뷰의 신뢰도를 확보할 수 있는 기술 개발에 대한 수요가 증가하고 있다.Paradoxically, as the importance of reviews increases, their reliability is decreasing. Originally, reviews are content written with objective evaluations based on experience, but there is a flood of reviews written after receiving compensation from companies, malicious reviews of competitors, and false reviews written without even visiting the company. In this regard, there is an increasing demand for the development of technology that can ensure the reliability of reviews.
본 발명은 상술한 문제점을 해결하기 위한 것으로, 실제 주문이 이루어진 고객에 대해서만 리뷰 작성 권한을 부여하고, 작성된 리뷰에 대해서도 필터링과 신뢰도 검증의 두 단계를 거치도록 하여 효율적인 신뢰도 검증 기능을 제공할 수 있는 리뷰 신뢰도 검증 장치 및 방법을 제공하는 것을 목적으로 한다.The present invention is intended to solve the above-mentioned problems, and provides an efficient reliability verification function by granting the right to write reviews only to customers who have actually placed an order, and making the written reviews go through two stages of filtering and reliability verification. The purpose is to provide a review reliability verification device and method.
상기 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 장치는, 외부 장치와 통신하는 통신부, 고객 정보, 업장 정보, 리뷰를 저장하는 메모리, 상기 통신부를 통해 주문 입력 장치로부터 고객의 주문 정보와 연락처를 수신하고, 상기 주문 정보에 포함된 각각의 메뉴에 대한 리뷰 요청을 상기 연락처로 전송하도록 통신부를 제어하며, 상기 전송된 리뷰 요청에 대응하여 리뷰가 수신되면 상기 수신된 리뷰를 상기 메모리에 저장하고, 상기 저장된 리뷰의 수가 기설정된 수를 초과하면 상기 저장된 리뷰 중 일부를 검증 대상 리뷰로 선정하며, 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 프로세서를 포함할 수 있다.To achieve the above object, a review reliability verification device according to an embodiment of the present invention includes a communication unit that communicates with an external device, a memory that stores customer information, business information, and reviews, and a customer order from an order input device through the communication unit. Controls the communication unit to receive information and contact information and transmit a review request for each menu included in the order information to the contact information, and when a review is received in response to the transmitted review request, the received review is stored in the memory. , and if the number of the stored reviews exceeds a preset number, select some of the stored reviews as reviews to be verified, and may include a processor that determines the reliability of each of the selected reviews to be verified.
그리고 상기 프로세서는, 일일 리뷰 요청 건수 및 입력된 리뷰의 수를 각각 카운팅하고, 상기 카운팅된 리뷰 요청 건수와 입력된 리뷰의 수를 기초로 리뷰 요청 대비 입력 리뷰 비율의 평균 값을 산출하며, 특정 일의 리뷰 요청 대비 입력 리뷰 비율이 상기 산출된 평균 값을 상회하면 상기 특정 일의 리뷰를 검증 대상 리뷰로 선정할 수 있다.The processor counts the number of daily review requests and the number of input reviews, respectively, calculates the average value of the ratio of input reviews to review requests based on the counted number of review requests and the number of input reviews, and calculates the average value of the ratio of input reviews to review requests on a specific day. If the ratio of input reviews to review requests exceeds the calculated average value, the review on the specific day may be selected as the review subject to verification.
또한, 상기 프로세서는, 상기 주문 정보 및 연락처가 획득된 경로 별로 일일 리뷰 요청 건수를 카운팅하고, 상기 카운팅된 경로별 일일 리뷰 요청 건수의 평균 값을 산출하며, 특정 일의 특정 경로에서 유발된 리뷰 요청 건수가 상기 산출된 평균 값을 상회하면 상기 특정 일의 특정 경로로 작성된 리뷰를 검증 대상 리뷰로 선정할 수 있다.In addition, the processor counts the number of daily review requests for each route through which the order information and contact information were obtained, calculates an average value of the number of daily review requests for each route, and reviews requests triggered in a specific route on a specific day. If the number of cases exceeds the calculated average value, reviews written through a specific path on the specific day may be selected as reviews to be verified.
그리고 상기 프로세서는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간을 수집하고, 상기 작성자가 기설정된 시간 동안 작성한 리뷰의 수가 기설정된 수를 초과하면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.And the processor collects the writing time of all reviews of the author who wrote the selected review subject to verification, and when the number of reviews written by the author during a preset time exceeds the preset number, the reliability of the selected review subject to verification is increased. You can decide on low.
또한, 상기 프로세서는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간 및 리뷰 대상 업장의 위치를 수집하고, 상기 작성자의 리뷰 작성 시간 간격을 상기 시간 간격을 비교할 업장의 위치 간격으로 나눈 값이 기설정된 값 미만이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.In addition, the processor collects the writing time of all reviews of the author who wrote the selected review target review and the location of the review target business, and divides the review writing time interval of the author by the location interval of the business to compare the time interval. If the value is less than the preset value, the reliability of the selected review target review may be determined to be low.
그리고 상기 프로세서는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 리뷰 대상 업장에 대한 모든 리뷰의 평점 및 리뷰의 수를 수집하고, 상기 수집된 리뷰의 수가 기설정된 값 이상이면 상기 작성자의 리뷰 평점 평균 값과 상기 리뷰 대상 업장의 전체 리뷰 평점 평균 값을 비교하며, 비교 결과 두 평균 값의 차이가 기설정된 값 이상이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.And the processor collects the ratings and number of reviews of all reviews for the review target business of the author who wrote the selected review target review, and if the number of collected reviews is greater than a preset value, the average review rating value of the author and the average value of all review ratings of the review target business, and if the difference between the two average values as a result of the comparison is more than a preset value, the reliability of the selected review target review can be determined to be low.
또한, 상기 프로세서는, 상기 신뢰도가 낮음으로 결정된 리뷰를 수집하여 메모리에 저장하고, 상기 저장된 리뷰들의 복수의 특성 정보를 분석하여 유사도를 결정하며, 상기 결정된 유사도가 기설정된 값 이상인 특성 정보를 상기 검증 대상 리뷰를 선정하는 기준으로 설정할 수 있다.In addition, the processor collects and stores reviews determined to have low reliability in a memory, determines similarity by analyzing a plurality of characteristic information of the stored reviews, and verifies characteristic information for which the determined similarity is greater than or equal to a preset value. It can be set as a standard for selecting target reviews.
한편, 상기 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 방법은, 고객의 주문 정보 및 연락처를 획득하는 단계, 상기 주문 정보에 포함된 각각의 메뉴에 대한 리뷰 요청을 상기 연락처로 전송하는 단계, 상기 전송된 리뷰 요청에 대응하여 리뷰가 입력되면 상기 입력된 리뷰를 저장하는 단계, 상기 저장된 리뷰의 수가 기설정된 수를 초과하면 상기 저장된 리뷰 중 일부를 검증 대상 리뷰로 선정하는 단계, 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계를 포함할 수 있다.Meanwhile, the review reliability verification method according to an embodiment of the present invention to achieve the above object includes obtaining the customer's order information and contact information, and sending a review request for each menu included in the order information to the contact information. Transmitting, if a review is input in response to the transmitted review request, storing the input review; If the number of stored reviews exceeds a preset number, selecting some of the stored reviews as reviews to be verified; It may include determining the reliability of each of the selected verification target reviews.
그리고 상기 검증 대상 리뷰로 선정하는 단계는, 일일 리뷰 요청 건수 및 입력된 리뷰의 수를 각각 카운팅하는 단계, 상기 카운팅된 리뷰 요청 건수 및 입력된 리뷰의 수를 기초로 리뷰 요청 대비 입력 리뷰 비율의 평균 값을 산출하는 단계, 특정 일의 리뷰 요청 대비 입력 리뷰 비율이 상기 산출된 평균 값을 상회하면 상기 특정 일의 리뷰를 검증 대상 리뷰로 선정하는 단계를 포함할 수 있다.The step of selecting the review subject to verification includes counting the number of daily review requests and the number of input reviews, and averaging the ratio of input reviews to review requests based on the counted number of review requests and input reviews. It may include calculating a value and, if the ratio of input reviews to review requests for a specific day exceeds the calculated average value, selecting the review of the specific day as a review subject to verification.
또한, 상기 검증 대상 리뷰로 선정하는 단계는, 상기 주문 정보 및 연락처가 획득된 경로 별로 일일 리뷰 요청 건수를 카운팅하는 단계, 상기 카운팅된 경로 별 일일 리뷰 요청 건수의 평균 값을 산출하는 단계, 특정 일의 특정 경로에서 유발된 리뷰 요청 건수가 상기 산출된 평균 값을 상회하면 상기 특정 일의 특정 경로로 작성된 리뷰를 검증 대상 리뷰로 선정하는 단계를 포함할 수 있다.In addition, the step of selecting the review subject to verification includes counting the number of daily review requests for each route through which the order information and contact information were obtained, calculating the average number of daily review requests for each of the counted routes, and calculating the average value of the number of daily review requests for each route on a specific day. If the number of review requests triggered by a specific path exceeds the calculated average value, a step of selecting a review written through a specific path on the specific day as a review subject to verification may be included.
그리고 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간을 수집하는 단계, 상기 작성자가 기설정된 시간 동안 작성한 리뷰의 수가 기설정된 수를 초과하면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 단계를 포함할 수 있다.And the step of determining the reliability of each of the selected verification target reviews includes collecting the writing time of all reviews of the author who wrote the selected verification target review, and determining the number of reviews written by the author during a preset time. If the number is exceeded, the step of determining the reliability of the selected review subject to be verified as low may be included.
또한, 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간 및 리뷰 대상 업장의 위치를 수집하는 단계, 상기 작성자의 리뷰 작성 시간 간격을 상기 시간 간격을 비교할 업장들의 위치 간격으로 나눈 값이 기설정된 값 미만이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 단계를 포함할 수 있다.In addition, the step of determining the reliability of each of the selected reviews to be verified includes collecting the writing time of all reviews and the location of the business to be reviewed by the author who wrote the selected review to be verified, and the review writing time of the author. If the interval divided by the location interval of businesses to compare the time interval is less than a preset value, it may include determining the reliability of the selected review target review as low.
그리고 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 단계는, 상기 선정된 검증 대상 리뷰를 작성한 작성자의 리뷰 대상 업장에 대한 모든 리뷰의 평점 및 리뷰의 수를 수집하는 단계, 상기 수집된 리뷰의 수가 기설정된 값 이상이면 상기 작성자의 리뷰 평점 평균 값과 상기 리뷰 대상 업장의 전체 리뷰 평점 평균 값을 비교하는 단계, 상기 비교 결과 두 평균 값의 차이가 기설정된 값 이상이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는 단계를 포함할 수 있다.And the step of determining the reliability of each of the selected reviews to be verified includes collecting the ratings and number of reviews of all reviews for the business to be reviewed by the author who wrote the selected review to be verified, and the number of reviews of the collected reviews. If the number is more than a preset value, comparing the average review rating of the author and the average value of all review ratings of the review target business, if the difference between the two average values as a result of the comparison is more than a preset value, the selected review target review It may include determining the reliability to be low.
또한, 상기 신뢰도가 낮음으로 결정된 리뷰를 수집하여 데이터베이스에 저장하는 단계, 상기 데이터베이스에 저장된 리뷰들의 복수의 특성 정보를 분석하여 유사도를 결정하는 단계, 상기 결정된 유사도가 기설정된 값 이상인 특성 정보를 상기 검증 대상 리뷰를 선정하는 기준 값으로 설정하는 단계를 더 포함할 수 있다.In addition, collecting and storing reviews determined to have low reliability in a database, determining similarity by analyzing a plurality of characteristic information of reviews stored in the database, and verifying characteristic information where the determined similarity is greater than or equal to a preset value. A step of setting a standard value for selecting a target review may be further included.
이상과 같은 본 발명의 다양한 실시 예에 따르면, 실제 주문이 이루어진 고객에 대해서만 리뷰를 작성할 수 있는 권한을 부여할 수 있고, 2단계에 걸친 신뢰도 검증 프로세서를 진행할 수 있어 리뷰 본연의 역할을 하지 못하는 콘텐츠를 제거할 수 있는 효과가 있다. 또한, 본 발명의 다양한 실시 예에 따르면 악의적인 리뷰를 제거함으로써 소상공인들이 불의의 피해를 입는 것에서도 보호할 수 있게 된다.According to the various embodiments of the present invention as described above, the authority to write a review can be granted only to customers who have actually placed an order, and a two-step reliability verification process can be performed, so content that does not play the role of a review It has the effect of removing . Additionally, according to various embodiments of the present invention, small business owners can be protected from unexpected damage by removing malicious reviews.
도 1은 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 시스템의 구성을 설명하기 위한 도면,
도 2는 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 장치의 구성을 개략적으로 도시한 블록도, 그리고,
도 3은 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 방법을 설명하기 위한 흐름도이다.1 is a diagram illustrating the configuration of a review reliability verification system according to an embodiment of the present invention;
Figure 2 is a block diagram schematically showing the configuration of a review reliability verification device according to an embodiment of the present invention, and
Figure 3 is a flowchart illustrating a review reliability verification method according to an embodiment of the present invention.
이하에서는 본 문서의 다양한 실시 예가 첨부된 도면을 참조하여 기재한다. 그러나 이는 본 문서에 기재된 기술을 특정한 실시 형태로 한정하려는 것이 아니며, 본 문서의 실시 예의 다양한 변형(modifications), 균등물(equivalents), 및/또는 대체물(alternatives)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.Hereinafter, various embodiments of this document are described with reference to the attached drawings. However, this is not intended to limit the technology described in this document to specific embodiments, and should be understood to include various modifications, equivalents, and/or alternatives of the embodiments of this document. Similar reference signs may be used for similar components in connection with the description of the drawings.
본 문서에서, "가진다", "가질 수 있다", "포함한다" 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.In this document, expressions such as “have,” “may have,” “includes,” or “may include” refer to the presence of the corresponding feature (e.g., a component such as a value, function, operation, or part). , does not rule out the existence of additional features.
본 문서에서 "A 또는 B", "A 및/또는 B 중 적어도 하나" 또는 "A 및/또는 B 중 하나 또는 그 이상" 등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들어, "A 또는 B", "A 및 B 중 적어도 하나" 또는 "A 또는 B 중 적어도 하나"는 (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는 (3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다. 본 문서에서 사용된 "제1", "제2", "첫째" 또는 "둘째" 등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다.In this document, expressions such as “A or B,” “at least one of A and/or B,” or “one or more of A and/or B” may include all possible combinations of the items listed together. For example, “A or B”, “at least one of A and B”, or “at least one of A or B” (1) includes at least one A, (2) includes at least one B, or ( 3) It can refer to all cases including both at least one A and at least one B. As used herein, expressions such as “first,” “second,” “first,” or “second” may modify various elements in any order and/or importance, and may refer to one element as another element. It is only used to distinguish from an element and does not limit the corresponding components.
본 문서에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합한(suitable for)", "~하는 능력을 갖는(having the capacity to)", "~하도록 설계된(designed to)", "~하도록 변경된(adapted to)", "~하도록 만들어진(made to)" 또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성된(또는 설정된)"은 하드웨어적으로 "특별히 설계된(specifically designed to)" 것만을 반드시 의미하지 않을 수 있다. 대신, 어떤 상황에서는 "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들어, "A, B 및 C를 수행하도록 구성된(또는 설정된) 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서) 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써 해당 동작들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU 또는 Application Processor)를 의미할 수 있다.The expression "configured to" used in this document may mean "suitable for" or "having the capacity to" depending on the context. It can be used interchangeably with ", "designed to," "adapted to," "made to," or "capable of." The term “configured (or set to)” may not necessarily mean “specifically designed to” in hardware. Instead, in some contexts, the expression “a device configured to” may mean that the device is “capable of” working with other devices or components. For example, a “processor configured (or set) to perform A, B, and C” means performing the operations by executing one or more software programs stored in a dedicated processor (e.g., embedded processor) or memory device to perform the operations. It may refer to a general-purpose processor (e.g., CPU or Application Processor) that can perform certain functions.
도 1은 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 시스템(1000)을 구성하는 요소들을 도시한 블록도이다. 도 1을 참조하면 리뷰 신뢰도 검증 시스템(1000)은 리뷰 신뢰도 검증 장치(100), 주문 입력 장치(200), 리뷰 입력 장치(300), 리뷰 제공 장치(400)를 포함할 수 있다.Figure 1 is a block diagram illustrating elements constituting a review reliability verification system 1000 according to an embodiment of the present invention. Referring to FIG. 1 , the review reliability verification system 1000 may include a review reliability verification device 100, an order input device 200, a review input device 300, and a review provision device 400.
리뷰 신뢰도 검증 장치(100)는 구매 여부 검증이 끝난 고객에 대해서만 리뷰를 수집하고, 수집된 리뷰에 대해서 가짜 리뷰로 의심가는 리뷰를 필터링하며, 필터링된 리뷰의 신뢰도를 검증할 수 있다. 리뷰 신뢰도 검증 장치(100)는 주문 입력 장치(200)로부터 주문 정보와 고객 연락처를 수신할 수 있다. 이를 통해 리뷰 신뢰도 검증 장치(100)는 1차적으로 실제로 주문한 고객에 대해서만 리뷰 요청을 전송할 수 있다. 도 1에서는 리뷰 신뢰도 검증 장치(100)를 클라우드로 표현하였으나, 일반 서버 장치로 구현될 수 있음은 물론이다.The review reliability verification device 100 can collect reviews only for customers whose purchase status has been verified, filter reviews suspected to be fake reviews from the collected reviews, and verify the reliability of the filtered reviews. The review reliability verification device 100 may receive order information and customer contact information from the order input device 200. Through this, the review reliability verification device 100 can initially transmit a review request only to customers who actually placed an order. In Figure 1, the review reliability verification device 100 is expressed as a cloud, but it can of course be implemented as a general server device.
주문 입력 장치(200)는 업장의 키오스크와 같은 무인 주문 장치, 업장에서 사장이나 종업원이 직접 주문 정보를 입력하는 POS와 같은 장치, 배달 어플리케이션이나 웹페이지를 통해 음식을 주문하는 스마트폰과 같은 장치일 수 있다. 주문 입력 장치(200)는 고객으로부터 주문 입력을 받을 수 있으며, 연락처 정보를 입력하도록 할 수 있다.The order input device 200 may be an unmanned ordering device such as a kiosk at a business, a device such as a POS where the owner or employee directly enters order information at the business, or a device such as a smartphone that orders food through a delivery application or web page. You can. The order input device 200 can receive an order input from a customer and allow the customer to input contact information.
리뷰 신뢰도 검증 장치(100)는 실제로 주문을 한 고객에게 리뷰를 요청하게 되는데, 이때 리뷰 요청을 받고 리뷰를 입력할 수 있는 장치가 리뷰 입력 장치(300)이다. 예를 들어, 고객이 스마트폰을 통해 주문을 한 경우라면, 고객의 스마트폰은 주문 입력 장치(200)와 리뷰 입력 장치(300)의 기능을 모두 수행할 수 있다.The review reliability verification device 100 requests a review from a customer who has actually placed an order. At this time, the review input device 300 is a device that can receive a review request and input a review. For example, if a customer places an order through a smartphone, the customer's smartphone can perform the functions of both the order input device 200 and the review input device 300.
리뷰 제공 장치(400)는 리뷰 신뢰도 검증 장치(100)에서 신뢰도가 높은 리뷰로 선정한 리뷰를 일반 대중에게 제공할 수 있는 장치이다. 리뷰를 제공할 웹페이지나 어플리케이션을 실행할 수 있는 전자장치라면 어느 것이든 리뷰 제공 장치(400)로 기능할 수 있다.The review providing device 400 is a device that can provide reviews selected as highly reliable by the review reliability verification device 100 to the general public. Any electronic device that can run a web page or application to provide a review can function as the review providing device 400.
이하에서는 리뷰 신뢰도 검증 장치(100)를 중심으로 리뷰 신뢰도 검증 방법에 대하여 설명하기로 한다. 도 2는 리뷰 신뢰도 검증 장치(100)의 구성을 개략적으로 도시한 블록도이다. 도 2를 참조하면 리뷰 신뢰도 검증 장치(100)는 통신부(110), 메모리(120) 및 프로세서(130)를 포함할 수 있다. 도시된 구성요소 이외에도 입력부(미도시), 출력부(미도시), 디스플레이부(미도시) 등 다양한 구성요소들이 추가적으로 포함될 수 있음은 물론이다.Hereinafter, the review reliability verification method will be described focusing on the review reliability verification device 100. Figure 2 is a block diagram schematically showing the configuration of the review reliability verification device 100. Referring to FIG. 2 , the review reliability verification device 100 may include a communication unit 110, a memory 120, and a processor 130. Of course, in addition to the components shown, various components such as an input unit (not shown), an output unit (not shown), and a display unit (not shown) may be additionally included.
통신부(110)는 유무선 네트워크를 이용하여 주문 입력 장치(200), 리뷰 입력 장치(300), 리뷰 제공 장치(400)와 같은 외부 장치와 통신할 수 있다. 예를 들어, 통신부(110)는 주문 입력 장치(300)로부터 사용자가 입력한 주문 내역(메뉴, 수량 등), 연락처(전화번호, 회원 아이디 등)에 대한 정보를 수신할 수 있다. 통신부(110)는 무선통신 방식으로 블루투스, Zigbee 통신, WiFi, 적외선(InfraRed, IR) 통신, NFC(Near Field Communication) 등 다양한 방식을 이용할 수 있다. 또한, 통신부(110)는 유선통신 방식으로 HDMI(High Definition Multimedia Interface), LVDS(Low Voltage Differential Signaling), LAN(Local Area Network) 등을 이용할 수 있다.The communication unit 110 may communicate with external devices such as the order input device 200, the review input device 300, and the review providing device 400 using a wired or wireless network. For example, the communication unit 110 may receive information about order details (menu, quantity, etc.) and contact information (phone number, member ID, etc.) entered by the user from the order input device 300. The communication unit 110 can use various wireless communication methods such as Bluetooth, Zigbee communication, WiFi, InfraRed (IR) communication, and NFC (Near Field Communication). Additionally, the communication unit 110 may use a wired communication method such as High Definition Multimedia Interface (HDMI), Low Voltage Differential Signaling (LVDS), or Local Area Network (LAN).
메모리(120)는 리뷰 신뢰도 검증 장치(100)를 구동하기 위한 다양한 모듈, 소프트웨어, 데이터를 저장할 수 있다. 예를 들어, 메모리(120)에는 수신한 주문 정보, 연락처 정보, 리뷰, 업장 정보, 메뉴 정보와 같은 데이터, 리뷰 신뢰도를 검증하기 위한 소프트웨어, 외부 장치와의 통신 프로토콜과 같은 제어신호 데이터 등이 저장될 수 있다.The memory 120 may store various modules, software, and data for driving the review reliability verification device 100. For example, the memory 120 stores data such as received order information, contact information, reviews, business information, menu information, software for verifying review reliability, control signal data such as communication protocols with external devices, etc. It can be.
메모리(120)는 플래쉬 메모리, HDD(Hard Disk Drive), SSD(Solid State Drive) 등의 형태로 구현될 수 있다. 예를 들어, 메모리(120)는 리뷰 신뢰도 검증 장치(100)의 동작 수행을 위한 프로그램 및/또는 어플리케이션을 저장하기 위한 ROM, 리뷰 신뢰도 검증 장치(100)의 동작 수행에 따른 데이터를 일시적으로 저장하기 위한 RAM을 구비할 수 있다. 또한, 메모리(120)는 각종 참조 데이터를 저장하기 위한 EEPROM(Electrically Erasable and Programmable ROM) 등을 더 구비할 수 있다.The memory 120 may be implemented in the form of flash memory, hard disk drive (HDD), solid state drive (SSD), etc. For example, the memory 120 is a ROM for storing programs and/or applications for performing operations of the review reliability verification device 100, and temporarily stores data according to the operation of the review reliability verification device 100. RAM can be provided for Additionally, the memory 120 may further include an Electrically Erasable and Programmable ROM (EEPROM) for storing various reference data.
프로세서(130)는 리뷰 신뢰도 검증 장치(100)의 상술한 구성들을 제어할 수 있다. 예를 들어, 프로세서(130)는 리뷰 요청을 리뷰 입력 장치(300)로 전송하도록 통신부(110)를 제어할 수 있다. 프로세서(130)는 하나 또는 복수의 하드웨어 칩 형태로 제작되어 컨설팅 제공 장치(100)에 탑재될 수 있다. 예를 들어, 프로세서(130)는 범용 프로세서(예를 들어, CPU 또는 Application Processor)로 제작될 수도 있고, 인공지능을 위한 전용 하드웨어 칩 형태로 제작될 수도 있다.The processor 130 may control the above-described configurations of the review reliability verification device 100. For example, the processor 130 may control the communication unit 110 to transmit a review request to the review input device 300. The processor 130 may be manufactured in the form of one or more hardware chips and mounted on the consulting providing device 100. For example, the processor 130 may be manufactured as a general-purpose processor (eg, CPU or Application Processor), or may be manufactured as a dedicated hardware chip for artificial intelligence.
프로세서(130)는 통신부(110)를 통해 주문 입력 장치(200)로부터 고객의 주문 정보와 연락처를 수신할 수 있다. 고객의 주문 정보는 메뉴 정보, 수량 정보 등을 포함할 수 있다. 연락처는 일반적으로 전화번호일 수 있으나, 주문 어플리케이션이나 웹페이지, 리뷰 제공 어플리케이션이나 웹페이지의 회원 아이디로써 주문자의 전화번호와 연동될 수 있는 정보인 회원 아이디 등일 수도 있다. 프로세서(130)는 메뉴 정보를 수신하기 때문에 전체 주문이 아닌 메뉴별 리뷰를 요청할 수 있다.The processor 130 may receive the customer's order information and contact information from the order input device 200 through the communication unit 110. The customer's order information may include menu information, quantity information, etc. The contact information may generally be a phone number, but may also be a member ID, which is information that can be linked to the orderer's phone number as a member ID of an ordering application, web page, review provision application, or web page. Since the processor 130 receives menu information, it can request a review of each menu rather than the entire order.
프로세서(130)는 수신된 주문 정보에 포함된 각각의 메뉴에 대한 리뷰 요청을 수신된 연락처로 전송하도록 통신부(110)를 제어할 수 있다. 도 1을 참조하면, 리뷰 요청은 리뷰 입력 장치(300)로 전송될 수 있다. 이와 같이 실제 주문이 이루어진 경우에만 리뷰를 입력할 수 있도록 하기 때문에, 리뷰 신뢰도 검증 장치(100)는 1차적으로 가짜 리뷰 작성을 방지할 수 있다.The processor 130 may control the communication unit 110 to transmit a review request for each menu included in the received order information to the received contact information. Referring to FIG. 1, a review request may be transmitted to the review input device 300. Since reviews can be entered only when an actual order is placed in this way, the review reliability verification device 100 can primarily prevent the writing of fake reviews.
프로세서(130)는 전송된 리뷰 요청에 대응하여 리뷰가 수신되면, 수신된 리뷰를 메모리(120)에 저장할 수 있다. 앞서 설명한 바와 같이 메모리(120)에는 수신된 리뷰가 주문을 한 업장, 주문 메뉴, 주문 시간, 리뷰 입력 시간 등의 메타 정보가 함께 저장될 수 있다. 프로세서(130)는 저장된 리뷰의 수가 기설정된 수를 초과하면 저장된 리뷰의 신뢰성에 대한 검증을 수행할 수 있다. 저장된 리뷰의 수가 적은 경우에는 가짜 리뷰를 걸러낼 유인이 적고, 가짜 리뷰의 특성 분석을 진행할 충분한 샘플이 부족하기 때문이다.When a review is received in response to a transmitted review request, the processor 130 may store the received review in the memory 120. As described above, the memory 120 may store meta information such as the business where the received review was ordered, the order menu, the order time, and the review input time. The processor 130 may perform verification of the reliability of the stored reviews when the number of stored reviews exceeds a preset number. When the number of stored reviews is small, there is little incentive to filter out fake reviews and there is a lack of sufficient samples to analyze the characteristics of fake reviews.
프로세서(130)는 저장된 리뷰 중 신뢰성에 의심이 가는 일부 리뷰를 검증 대상 리뷰로 선정할 수 있다. 모든 리뷰에 대해 신뢰도 검증을 하는 것은 비효율적이기 때문에, 프로세서(130)는 이하에서 설명할 여러 기준에 의해 신뢰도를 검증할 대상 리뷰를 선정한다. 그리고 프로세서(130)는 선정된 검증 대상 리뷰 각각에 대해 신뢰도를 결정할 수 있다.The processor 130 may select some reviews whose reliability is questionable among the stored reviews as reviews to be verified. Because it is inefficient to verify reliability for all reviews, the processor 130 selects reviews for which reliability is to be verified based on various criteria that will be described below. And the processor 130 can determine the reliability of each selected review subject to verification.
예를 들어, 특정 일에 주문량 대비 리뷰 작성 건수가 비정상적으로 다수인 경우, 프로세서(130)는 해당 특정 일에 작성된 리뷰들을 검증 대상 리뷰로 선정할 수 있다. 구체적으로, 프로세서(130)는 일일 리뷰 요청 건수와 입력된 리뷰의 수를 각각 카운팅할 수 있다. 모든 리뷰 요청에 대해 리뷰가 입력되는 것이 아니며, 통계적으로 업장마다 리뷰 요청 대비 입력 리뷰의 비율이 결정된다. 프로세서(130)는 특정 기간 동안의 리뷰 요청 대비 입력 리뷰 비율의 평균 값을 산출할 수 있다. 그리고 특정 일의 리뷰 요청 대비 입력 리뷰 비율이 산출된 평균 값을 상회하는 경우에, 프로세서(130)는 특정 일의 리뷰를 검증 대상 리뷰로 선정할 수 있다.For example, if the number of reviews written on a specific day is abnormally large compared to the number of orders, the processor 130 may select reviews written on that specific day as reviews to be verified. Specifically, the processor 130 may count the number of daily review requests and the number of input reviews, respectively. A review is not entered for every review request, and the ratio of input reviews to review requests is statistically determined for each business. The processor 130 may calculate the average value of the ratio of input reviews to review requests during a specific period. In addition, when the ratio of input reviews to review requests for a specific day exceeds the calculated average value, the processor 130 may select the review for the specific day as the review subject to verification.
다른 예로, 특정 일에 특정 경로에서 유발된 주문 건수가 비정상적으로 다수인 경우, 프로세서(130)는 해당 특정 일, 특정 경로를 통해 작성된 리뷰들을 검증 대상 리뷰로 선정할 수 있다. 신뢰도가 낮은 리뷰는 악성 고객에 의해 낮은 평점으로 작성된 리뷰만을 포함하지 않는다. 업장에서 자신들의 평점을 높이기 위해 가짜 주문을 발생시키고, 해당 주문에 스스로 높은 평점의 리뷰를 작성함으로써 신뢰도를 떨어뜨리는 경우도 발생한다. 본 실시 예에서는 악성 고객뿐 아니라 업장 스스로 리뷰를 조작하는 경우를 방지할 수 있다.As another example, if the number of orders generated through a specific path on a specific day is abnormally large, the processor 130 may select reviews written on that specific day and through a specific route as reviews to be verified. Low-trust reviews do not only include reviews written with low ratings by malicious customers. There are also cases where businesses create fake orders to increase their ratings and write reviews with high ratings for those orders, thereby lowering trust. In this embodiment, it is possible to prevent not only malicious customers but also the business itself from manipulating reviews.
구체적으로, 프로세서(130)는 주문 정보 및 연락처가 획득된 경로 별로 일일 리뷰 요청 건수를 카운팅할 수 있다. 예를 들어, 프로세서(130)는 키오스크를 통해 주문이 들어온 숫자, 배달 어플리케이션을 통해 주문이 들어온 숫자, 매장에서 POS를 통해 주문을 받은 숫자 등을 카운팅할 수 있다. 그리고 프로세서(130)는 카운팅된 경로 별로 일일 리뷰 요청 건수의 평균 값을 산출할 수 있다. 특정 일의 특정 경로에서 유발된 리뷰 요청 건수가 산출된 평균 값을 상회하면, 프로세서(130)는 특정 일의 특정 경로로 작성된 리뷰를 검증 대상 리뷰로 선정할 수 있다.Specifically, the processor 130 may count the number of daily review requests for each path through which order information and contact information were obtained. For example, the processor 130 can count the number of orders placed through a kiosk, the number of orders placed through a delivery application, and the number of orders received through a POS at a store. And the processor 130 can calculate the average value of the number of daily review requests for each counted path. If the number of review requests triggered through a specific path on a specific day exceeds the calculated average value, the processor 130 may select a review written through a specific path on a specific day as a review to be verified.
또 다른 예로, 프로세서(130)는 신뢰도가 낮은 것으로 결정된 리뷰들을 수집하여 분석함으로써, 신뢰도를 판단하는 기준을 새로이 설정할 수 있다. 구체적으로 프로세서(130)는 신뢰도가 '낮음'으로 결정된 리뷰를 수집하여 메모리(120)에 저장할 수 있다. 신뢰도는 '높음', '낮음'과 같이 표현될 수도 있고, 점수로 표현될 수도 있다. 프로세서(130)는 신뢰도가 낮은 것으로 판단된 리뷰들의 복수의 특성 정보(feature information)을 분석할 수 있으며, 복수의 특성 정보 중 신뢰도가 낮은 것으로 판단된 리뷰들이 공통적으로 가지고 있는 특성 정보가 무엇인지 판단할 수 있다. 즉 프로세서(130)는 저장된 리뷰들의 복수의 특성 정보를 분석하여 유사도를 결정할 수 있고, 결정된 유사도가 기설정된 값 이상인 특성 정보를 검증 대상 리뷰를 선정하는 기준 값으로 설정할 수 있다.As another example, the processor 130 may collect and analyze reviews determined to have low reliability, thereby setting a new standard for determining reliability. Specifically, the processor 130 may collect reviews whose reliability is determined to be 'low' and store them in the memory 120. Reliability may be expressed as 'high' or 'low', or may be expressed as a score. The processor 130 may analyze a plurality of feature information of reviews determined to be low in reliability, and determine what feature information the reviews determined to have low reliability have in common among the plurality of feature information. can do. That is, the processor 130 may determine the degree of similarity by analyzing a plurality of characteristic information of the stored reviews, and may set the characteristic information for which the determined similarity is greater than or equal to a preset value as a reference value for selecting a review to be verified.
검증 대상 리뷰가 선정되면, 프로세서(130)는 각각의 리뷰에 대해 신뢰도를 검증할 수 있다. 예를 들어, 프로세서(130)는 일정 기간 동안 리뷰 작성자가 작성한 리뷰의 수가 과도하게 다수인 경우 신뢰도를 낮음으로 판단할 수 있다. 프로세서(130)가 실제 주문이 있는 경우에만 리뷰를 작성할 수 있도록 1차로 필터링할 수 있기 때문에, 리뷰 작성자가 작성한 리뷰의 수가 과도하게 다수인 경우에는 실제 음식을 먹기 위한 것이 아닌 리뷰 작성을 하기 위한 주문을 발생시켰을 가능성이 높다. 구체적으로 프로세서(130)는 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간을 수집할 수 있다. 그리고 작성자가 기설정된 시간 동안 작성한 리뷰의 수가 기설정된 수를 초과하면, 프로세서(130)는 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.Once a review subject to verification is selected, the processor 130 can verify the reliability of each review. For example, the processor 130 may determine reliability as low when the number of reviews written by a reviewer over a certain period of time is excessively large. Because the processor 130 can primarily filter to write a review only when there is an actual order, if the number of reviews written by the reviewer is excessively large, the order is to write a review rather than to eat the actual food. It is highly likely that it occurred. Specifically, the processor 130 may collect the writing time of all reviews of the author who wrote the selected review subject to verification. And, if the number of reviews written by the author during a preset time exceeds the preset number, the processor 130 may determine the reliability of the selected review target to be verified as low.
다른 예로, 프로세서(130)는 제1주문의 발생 시간과 제2주문의 발생 시간 사이의 시간 동안 제1주문을 한 업장에서 제2주문을 한 업장으로 이동할 수 있는지에 근거하여 신뢰도를 검증할 수 있다. 본 실시 예는 특히 주문이 업장에 위치한 키오스크나 POS를 통해 입력된 경우에 유용하게 사용될 수 있다. 구체적으로, 프로세서(130)는 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간 및 리뷰 대상 업장의 위치를 수집할 수 있다. 작성자의 리뷰 작성 시간 간격을 상기 시간 간격을 비교할 업장들의 위치 간격으로 나눈 값이 기설정된 값 미만이라면, 프로세서(130)는 실제로 고객이 업장 사이를 이동할 수 없었다고 판단할 수 있다. 이에 따라 프로세서(130)는 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.As another example, the processor 130 may verify reliability based on whether it is possible to move from the establishment where the first order was placed to the establishment where the second order was placed during the time between the occurrence time of the first order and the occurrence time of the second order. there is. This embodiment can be particularly useful when orders are entered through a kiosk or POS located in a business. Specifically, the processor 130 may collect the writing time of all reviews of the author who wrote the selected review target review and the location of the review target business. If the time interval for writing a review by the author divided by the location interval of businesses to compare the time interval is less than a preset value, the processor 130 may determine that the customer was actually unable to move between businesses. Accordingly, the processor 130 may determine the reliability of the selected review target to be low.
또 다른 예로, 프로세서(130)는 업장의 특정 메뉴에 대한 리뷰 평점이 전체 평균과 동떨어진 경우에 신뢰성이 낮은 리뷰로 판단할 수 있다. 구체적으로 프로세서(130)는 선정된 검증 대상 리뷰를 작성한 작성자의 리뷰 대상 업장에 대한 모든 리뷰의 평점 및 리뷰의 수를 수집할 수 있다. 수집된 리뷰의 수가 충분히 통계적으로 의미를 가질만큼 다수인 경우, 프로세서(130)는 작성자의 리뷰 평점 평균 값과 리뷰 대상 업장의 전체 리뷰 평점 평균 값을 비교할 수 있다. 그리고 비교 결과 두 평균 값의 차이가 기설정된 값 이상이면, 프로세서(130)는 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정할 수 있다.As another example, the processor 130 may determine a review with low reliability when the review rating for a specific menu at a business is far from the overall average. Specifically, the processor 130 may collect the ratings and number of reviews of all reviews for the business to be reviewed by the author who wrote the selected review to be verified. If the number of collected reviews is large enough to be statistically significant, the processor 130 may compare the average review rating of the author with the average value of all review ratings of the business being reviewed. And, as a result of the comparison, if the difference between the two average values is greater than a preset value, the processor 130 may determine the reliability of the selected review target to be verified as low.
도 3은 본 발명의 일 실시 예에 따른 리뷰 신뢰도 검증 방법을 설명하기 위한 흐름도이다. 도 3을 참조하면 리뷰 신뢰도 검증 장치(100)는 고객의 주문 정보 및 연락처 정보를 수신할 수 있다(S310). 고객의 주문 정보에는 주문을 한 업장의 정보, 주문에 포함된 메뉴 정보, 주문 발생 시간 정보 등이 포함될 수 있다. 연락처 정보에는 전화번호, 아이디 등이 포함될 수 있다.Figure 3 is a flowchart illustrating a review reliability verification method according to an embodiment of the present invention. Referring to FIG. 3, the review reliability verification device 100 may receive the customer's order information and contact information (S310). The customer's order information may include information on the business where the order was placed, menu information included in the order, order occurrence time information, etc. Contact information may include phone number, ID, etc.
이어서 리뷰 신뢰도 검증 장치(100)는 수신한 연락처로 주문한 메뉴 각각에 대한 리뷰 요청을 전송할 수 있다(S320). 이에 따라 주문 시 고객이 입력한 연락처에 리뷰 요청을 전송함으로써, 실 구매 고객에 한하여 리뷰가 작성되도록 하는 효과가 있다. 즉, 리뷰 신뢰도 검증 장치(100)는 1차적으로 가짜 리뷰가 작성될 수 있는 환경을 제거하여 리뷰 신뢰도를 높일 수 있다. 또한, 리뷰 신뢰도 검증 장치(100)는 주문에 포함된 메뉴별로 리뷰를 요청함으로써, 보다 상세한 고객 피드백을 받을 수 있다는 점에서 유용하다.Subsequently, the review reliability verification device 100 may transmit a review request for each ordered menu to the received contact information (S320). Accordingly, a review request is sent to the contact information entered by the customer when ordering, which has the effect of allowing reviews to be written only for actual purchasing customers. In other words, the review reliability verification device 100 can increase review reliability by first eliminating an environment in which fake reviews can be written. Additionally, the review reliability verification device 100 is useful in that it can receive more detailed customer feedback by requesting a review for each menu included in the order.
리뷰 요청에 대응하여 리뷰가 입력되면(S330-Y), 리뷰 신뢰도 검증 장치(100)는 입력된 리뷰를 저장할 수 있다(S340). 그리고 일정 수량 이상의 리뷰가 저장되면(S350-Y), 리뷰 신뢰도 검증 장치(100)는 저장된 리뷰 중 일부를 검증 대상 리뷰로 선정할 수 있다(S360). 이는 모든 리뷰에 대해 신뢰도를 검증하는 것은 비효율적이기 때문에 신뢰도에 의심이 가는 리뷰를 미리 선정하는 절차를 거치는 것이다. 예를 들어, 리뷰 신뢰도 검증 장치(100)는 일일 리뷰 요청 건수 대비 입력된 리뷰의 수가 특정 일에 평균 값을 상회하면, 특정 일에 작성된 리뷰를 검증 대상 리뷰로 선정할 수 있다. 다른 예로, 리뷰 신뢰도 검증 장치(100)는 특정 일에 특정 주문 경로에서 유발된 리뷰 요청 건수가 평균 값을 상회하는 경우, 해당 특정 일에 특정 주문 경로를 통해 작성된 리뷰를 검증 대상 리뷰로 선정할 수 있다.When a review is input in response to a review request (S330-Y), the review reliability verification device 100 may store the input review (S340). And when a certain number of reviews or more are stored (S350-Y), the review reliability verification device 100 may select some of the stored reviews as reviews to be verified (S360). This is because it is inefficient to verify the reliability of all reviews, so we go through a process of pre-selecting reviews whose reliability is questionable. For example, if the number of reviews entered compared to the number of daily review requests exceeds the average value on a specific day, the review reliability verification device 100 may select a review written on a specific day as a review subject to verification. As another example, if the number of review requests triggered by a specific order route on a specific day exceeds the average value, the review reliability verification device 100 may select a review written through a specific order route on that specific day as a review subject to verification. there is.
이어서 리뷰 신뢰도 검증 장치(100)는 검증 대상 리뷰로 선정된 각각의 리뷰에 대해 신뢰도를 결정할 수 있다(S370). 예를 들어, 리뷰 신뢰도 검증 장치(100)는 일정한 기간 동안 검증 대상 리뷰를 작성한 작성자가 기설정된 수를 초과하는 리뷰를 작성한 경우, 즉 일정한 기간 동안 과도한 주문을 발생시키고 리뷰를 작성한 경우에 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 판단할 수 있다. 다른 예로, 리뷰 신뢰도 검증 장치(100)는 검증 대상 리뷰 작성자가 연속하여 오프라인으로 주문을 발생시켰을 경우에, 주문이 연속하여 발생된 업장들 사이의 거리를 충분히 이동할 수 있는지 판단하여 검증 대상 리뷰의 신뢰도를 검증할 수도 있다. 또 다른 예로, 리뷰 신뢰도 검증 장치(100)는 검증 대상 리뷰의 작성자가 해당 업장에 대해 전체 평점과 동떨어진 평점의 리뷰를 지속적으로 남기는 경우, 해당 작성자가 작성한 검증 대상 리뷰의 신뢰도를 낮음으로 판단할 수도 있다.Subsequently, the review reliability verification device 100 may determine the reliability of each review selected as a review subject to verification (S370). For example, the review reliability verification device 100 is selected when the author of the review subject to verification writes reviews exceeding a preset number over a certain period of time, that is, when excessive orders are generated and reviews are written over a certain period of time. The reliability of the target review can be judged as low. As another example, the review reliability verification device 100 determines whether the review target review author can continuously create orders offline and whether the order can sufficiently move the distance between the businesses where the order was continuously generated, thereby determining the reliability of the review target review. can also be verified. As another example, the review reliability verification device 100 may determine the reliability of the review subject to verification written by the author as low if the author of the review subject to verification continues to leave reviews with ratings that are different from the overall rating for the business. there is.
추가적으로 리뷰 신뢰도 검증 장치(100)는 신뢰도가 낮음으로 결정된 리뷰를 수집하여 데이터베이스에 저장할 수 있다. 이는 신뢰도가 낮음으로 결정된 리뷰들의 특성을 분석하여, 검증 대상 리뷰를 선정하는 기준으로 활용하기 위함이다. 리뷰들의 특성을 분석하는 것에는 인공지능 모델이 사용될 수도 있다. 이와 같이 리뷰 신뢰도 검증 장치(100)는 리뷰 데이터가 쌓일 수록, 신뢰도가 낮은 리뷰를 걸러낼수록 점점 정교화된 신뢰도 검증 시스템을 구축할 수 있다.Additionally, the review reliability verification device 100 may collect reviews determined to have low reliability and store them in a database. This is to analyze the characteristics of reviews determined to be of low reliability and use them as a standard for selecting reviews subject to verification. Artificial intelligence models can also be used to analyze the characteristics of reviews. In this way, the review reliability verification device 100 can build an increasingly sophisticated reliability verification system as review data accumulates and reviews with low reliability are filtered out.
한편, 본 명세서에서 사용된 용어 “부” 또는 “모듈”은 하드웨어, 소프트웨어 또는 펌웨어로 구성된 유닛을 포함하며, 예를 들어, 로직, 논리블록, 부품 또는 회로 등의 용어와 상호 호환적으로 사용될 수 있다. “부” 또는 “모듈”은 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 모듈은 ASIC(application specific integrated circuit)으로 구성될 수 있다.Meanwhile, the term “unit” or “module” used in this specification includes a unit consisting of hardware, software, or firmware, and can be used interchangeably with terms such as logic, logical block, part, or circuit, for example. there is. “Part” or “module” may be an integrated part, the minimum unit that performs one or more functions, or a part thereof. For example, a module may be comprised of an application specific integrated circuit (ASIC).
본 발명의 다양한 실시 예들은 기기(machine)(예: 컴퓨터)로 읽을 수 있는 저장 매체(machine-readable storage media)에 저장된 명령어를 포함하는 소프트웨어로 구현될 수 있다. 기기는, 저장 매체로부터 저장된 명령어를 호출하고, 호출된 명령어에 따라 동작이 가능한 장치로서, 개시된 실시 예들에 따른 전자 장치(예: 리뷰 신뢰도 검증 장치(100))를 포함할 수 있다. 상기 명령이 프로세서에 의해 실행될 경우, 프로세서가 직접, 또는 상기 프로세서의 제어 하에 다른 구성요소들을 이용하여 상기 명령에 해당하는 기능을 수행할 수 있다. 명령은 컴파일러 또는 인터프리터에 의해 생성 또는 실행되는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장매체는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장매체가 신호(signal)를 포함하지 않으며 실재(tangible)한다는 것을 의미할 뿐 데이터가 저장매체에 반영구적 또는 임시적으로 저장됨을 구분하지 않는다.Various embodiments of the present invention may be implemented as software including instructions stored in a machine-readable storage media (e.g., a computer). The device is a device capable of calling commands stored from a storage medium and operating according to the called commands, and may include an electronic device (eg, the review reliability verification device 100) according to the disclosed embodiments. When the instruction is executed by a processor, the processor may perform the function corresponding to the instruction directly or using other components under the control of the processor. Instructions may contain code generated or executed by a compiler or interpreter. A storage medium that can be read by a device may be provided in the form of a non-transitory storage medium. Here, 'non-transitory' only means that the storage medium does not contain signals and is tangible, and does not distinguish whether the data is stored semi-permanently or temporarily in the storage medium.
일 실시 예에 따르면, 본 문서에 개시된 다양한 실시 예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 온라인으로 배포될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.According to one embodiment, methods according to various embodiments disclosed in this document may be included and provided in a computer program product. Computer program products are commodities and can be traded between sellers and buyers. The computer program product may be distributed on a machine-readable storage medium (e.g. compact disc read only memory (CD-ROM)) or online through an application store (e.g. Play Store™). In the case of online distribution, at least a portion of the computer program product may be at least temporarily stored or created temporarily in a storage medium such as the memory of a manufacturer's server, an application store's server, or a relay server.
다양한 실시 예들에 따른 구성 요소(예: 모듈 또는 프로그램) 각각은 단수 또는 복수의 개체로 구성될 수 있으며, 전술한 해당 서브 구성 요소들 중 일부 서브 구성 요소가 생략되거나, 또는 다른 서브 구성 요소가 다양한 실시 예에 더 포함될 수 있다. 대체적으로 또는 추가적으로, 일부 구성 요소들(예: 모듈 또는 프로그램)은 하나의 개체로 통합되어, 통합되기 이전의 각각의 해당 구성 요소에 의해 수행되는 기능을 동일 또는 유사하게 수행할 수 있다. 다양한 실시 예들에 따른, 모듈, 프로그램 또는 다른 구성 요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱하게 실행되거나, 적어도 일부 동작이 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.Each component (e.g., module or program) according to various embodiments may be composed of a single or plural entity, and some of the above-described sub-components may be omitted, or other sub-components may be variously used. Further examples may be included. Alternatively or additionally, some components (e.g., modules or programs) may be integrated into a single entity and perform the same or similar functions performed by each corresponding component prior to integration. According to various embodiments, operations performed by a module, program, or other component may be executed sequentially, in parallel, iteratively, or heuristically, or at least some operations may be executed in a different order, omitted, or other operations may be added. You can.
100: 리뷰 신뢰도 검증 장치
110: 통신부
120: 메모리
130: 프로세서
200: 주문 입력 장치100: Review reliability verification device
110: Department of Communications
120: memory
130: processor
200: Order input device
Claims (14)
고객 정보, 업장 정보, 리뷰를 저장하는 메모리;
상기 통신부를 통해 주문 입력 장치로부터 고객의 주문 정보와 연락처를 수신하고, 상기 주문 정보에 포함된 각각의 메뉴에 대한 리뷰 요청을 상기 연락처로 전송하도록 통신부를 제어하며, 상기 전송된 리뷰 요청에 대응하여 리뷰가 수신되면 상기 수신된 리뷰를 상기 메모리에 저장하고, 상기 저장된 리뷰의 수가 기설정된 수를 초과하면 상기 저장된 리뷰 중 일부를 검증 대상 리뷰로 선정하며, 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 프로세서;를 포함하고,
상기 프로세서는,
상기 신뢰도가 낮음으로 결정된 리뷰를 수집하여 메모리에 저장하고, 상기 저장된 리뷰들의 복수의 특성 정보를 분석하여 유사도를 결정하며, 상기 결정된 유사도가 기설정된 값 이상인 특성 정보를 상기 검증 대상 리뷰를 선정하는 기준으로 설정하고, 일일 리뷰 요청 건수 및 입력된 리뷰의 수를 각각 카운팅하고, 상기 카운팅된 리뷰 요청 건수와 입력된 리뷰의 수를 기초로 리뷰 요청 대비 입력 리뷰 비율의 평균 값을 산출하며, 특정 일의 리뷰 요청 대비 입력 리뷰 비율이 상기 산출된 평균 값을 상회하면 상기 특정 일의 리뷰를 검증 대상 리뷰로 선정하고,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간을 수집하고, 상기 작성자가 기설정된 시간 동안 작성한 리뷰의 수가 기설정된 수를 초과하면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하고,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간 및 리뷰 대상 업장의 위치를 수집하고, 상기 작성자의 리뷰 작성 시간 간격을 상기 시간 간격을 비교할 업장의 위치 간격으로 나눈 값이 기설정된 값 미만이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하고,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 리뷰 대상 업장에 대한 모든 리뷰의 평점 및 리뷰의 수를 수집하고, 상기 수집된 리뷰의 수가 기설정된 값 이상이면 상기 작성자의 리뷰 평점 평균 값과 상기 리뷰 대상 업장의 전체 리뷰 평점 평균 값을 비교하며, 비교 결과 두 평균 값의 차이가 기설정된 값 이상이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는, 리뷰 신뢰도 검증 장치.A communication unit that communicates with an external device;
Memory to store customer information, business information, and reviews;
Receives the customer's order information and contact information from the order input device through the communication unit, controls the communication unit to transmit a review request for each menu included in the order information to the contact information, and responds to the sent review request. When a review is received, the received review is stored in the memory, and if the number of the stored reviews exceeds a preset number, some of the stored reviews are selected as reviews to be verified, and the reliability of each of the selected reviews to be verified is determined. Includes a processor that determines,
The processor,
The reviews determined to have low reliability are collected and stored in memory, the similarity is determined by analyzing a plurality of characteristic information of the stored reviews, and the characteristic information for which the determined similarity is greater than a preset value is used as a criterion for selecting the review target for verification. Set to , count the number of daily review requests and the number of input reviews, respectively, and calculate the average value of the ratio of input reviews to review requests based on the counted number of review requests and the number of input reviews, and calculate the average value of the ratio of input reviews to review requests on a specific day. If the ratio of input reviews to review requests exceeds the calculated average value, the reviews on the specific day are selected as reviews subject to verification,
Collects the writing time of all reviews of the author who wrote the selected review subject to verification, and determines the reliability of the selected review subject to verification as low if the number of reviews written by the author during a preset time exceeds the preset number,
Collect the writing time of all reviews of the author who wrote the selected verification subject review and the location of the business to be reviewed, and the time interval for writing the review by the author divided by the location interval of the business to compare the time interval is less than the preset value. If so, the reliability of the selected verification target review is determined to be low,
Collect the rating and number of reviews of all reviews for the business subject to review by the author who wrote the selected review subject to verification, and if the number of collected reviews is greater than a preset value, the average value of the review rating of the author and the business subject to review are collected. A review reliability verification device that compares the average value of the overall review ratings, and determines the reliability of the selected review subject to be verified as low if the difference between the two average values as a result of the comparison is greater than a preset value.
고객 정보, 업장 정보, 리뷰를 저장하는 메모리;
상기 통신부를 통해 주문 입력 장치로부터 고객의 주문 정보와 연락처를 수신하고, 상기 주문 정보에 포함된 각각의 메뉴에 대한 리뷰 요청을 상기 연락처로 전송하도록 통신부를 제어하며, 상기 전송된 리뷰 요청에 대응하여 리뷰가 수신되면 상기 수신된 리뷰를 상기 메모리에 저장하고, 상기 저장된 리뷰의 수가 기설정된 수를 초과하면 상기 저장된 리뷰 중 일부를 검증 대상 리뷰로 선정하며, 상기 선정된 검증 대상 리뷰 각각에 대한 신뢰도를 결정하는 프로세서;를 포함하고,
상기 프로세서는,
상기 신뢰도가 낮음으로 결정된 리뷰를 수집하여 메모리에 저장하고, 상기 저장된 리뷰들의 복수의 특성 정보를 분석하여 유사도를 결정하며, 상기 결정된 유사도가 기설정된 값 이상인 특성 정보를 상기 검증 대상 리뷰를 선정하는 기준으로 설정하고, 상기 주문 정보 및 연락처가 획득된 경로 별로 일일 리뷰 요청 건수를 카운팅하고, 상기 카운팅된 경로별 일일 리뷰 요청 건수의 평균 값을 산출하며, 특정 일의 특정 경로에서 유발된 리뷰 요청 건수가 상기 산출된 평균 값을 상회하면 상기 특정 일의 특정 경로로 작성된 리뷰를 검증 대상 리뷰로 선정하고,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간을 수집하고, 상기 작성자가 기설정된 시간 동안 작성한 리뷰의 수가 기설정된 수를 초과하면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하고,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 모든 리뷰의 작성 시간 및 리뷰 대상 업장의 위치를 수집하고, 상기 작성자의 리뷰 작성 시간 간격을 상기 시간 간격을 비교할 업장의 위치 간격으로 나눈 값이 기설정된 값 미만이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하고,
상기 선정된 검증 대상 리뷰를 작성한 작성자의 리뷰 대상 업장에 대한 모든 리뷰의 평점 및 리뷰의 수를 수집하고, 상기 수집된 리뷰의 수가 기설정된 값 이상이면 상기 작성자의 리뷰 평점 평균 값과 상기 리뷰 대상 업장의 전체 리뷰 평점 평균 값을 비교하며, 비교 결과 두 평균 값의 차이가 기설정된 값 이상이면 상기 선정된 검증 대상 리뷰의 신뢰도를 낮음으로 결정하는, 리뷰 신뢰도 검증 장치.A communication unit that communicates with an external device;
Memory to store customer information, business information, and reviews;
Receives the customer's order information and contact information from the order input device through the communication unit, controls the communication unit to transmit a review request for each menu included in the order information to the contact information, and responds to the sent review request. When a review is received, the received review is stored in the memory, and if the number of the stored reviews exceeds a preset number, some of the stored reviews are selected as reviews to be verified, and the reliability of each of the selected reviews to be verified is determined. Includes a processor that determines,
The processor,
The reviews determined to have low reliability are collected and stored in memory, the similarity is determined by analyzing a plurality of characteristic information of the stored reviews, and the characteristic information for which the determined similarity is greater than a preset value is used as a criterion for selecting the review target for verification. Set to , count the number of daily review requests for each route through which the order information and contact information was obtained, calculate the average value of the number of daily review requests for each route counted, and calculate the number of review requests triggered by a specific route on a specific day. If it exceeds the calculated average value, reviews written through a specific path on the specific day are selected as reviews subject to verification,
Collects the writing time of all reviews of the author who wrote the selected review subject to verification, and determines the reliability of the selected review subject to verification as low if the number of reviews written by the author during a preset time exceeds the preset number,
Collect the writing time of all reviews of the author who wrote the selected verification target review and the location of the business to be reviewed, and the time interval for writing the review by the author divided by the location interval of the business to compare the time interval is less than the preset value. If so, the reliability of the selected verification target review is determined to be low,
Collect the rating and number of reviews of all reviews for the business subject to review by the author who wrote the selected review subject to verification, and if the number of collected reviews is greater than a preset value, the average value of the review rating of the author and the business subject to review are collected. A review reliability verification device that compares the average value of the overall review ratings and, if the difference between the two average values as a result of the comparison is greater than a preset value, determines the reliability of the selected review target review as low.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020210021320A KR102644685B1 (en) | 2021-02-17 | 2021-02-17 | Review reliability validation device and method of thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020210021320A KR102644685B1 (en) | 2021-02-17 | 2021-02-17 | Review reliability validation device and method of thereof |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20220117676A KR20220117676A (en) | 2022-08-24 |
KR102644685B1 true KR102644685B1 (en) | 2024-03-11 |
Family
ID=83111797
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020210021320A KR102644685B1 (en) | 2021-02-17 | 2021-02-17 | Review reliability validation device and method of thereof |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102644685B1 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102666172B1 (en) * | 2023-12-29 | 2024-05-14 | 주식회사 티맥스핀테크 | Method for adjusting review scores |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110055104A1 (en) * | 2008-05-14 | 2011-03-03 | The Board Of Governors For Higher Education, State Of Rhode Island And Providence Plantations | Systems and methods for detecting unfair manipulations of on-line reputation systems |
US20160070709A1 (en) * | 2014-09-09 | 2016-03-10 | Stc.Unm | Online review assessment using multiple sources |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7519562B1 (en) * | 2005-03-31 | 2009-04-14 | Amazon Technologies, Inc. | Automatic identification of unreliable user ratings |
KR101142408B1 (en) * | 2009-11-25 | 2012-05-11 | 에스케이마케팅앤컴퍼니 주식회사 | User evaluating system using informing message and method thereof |
US9479516B2 (en) * | 2013-02-11 | 2016-10-25 | Google Inc. | Automatic detection of fraudulent ratings/comments related to an application store |
KR20190123397A (en) * | 2018-04-24 | 2019-11-01 | 성균관대학교산학협력단 | Classification model selection method for discriminating fake review |
-
2021
- 2021-02-17 KR KR1020210021320A patent/KR102644685B1/en active IP Right Grant
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110055104A1 (en) * | 2008-05-14 | 2011-03-03 | The Board Of Governors For Higher Education, State Of Rhode Island And Providence Plantations | Systems and methods for detecting unfair manipulations of on-line reputation systems |
US20160070709A1 (en) * | 2014-09-09 | 2016-03-10 | Stc.Unm | Online review assessment using multiple sources |
Also Published As
Publication number | Publication date |
---|---|
KR20220117676A (en) | 2022-08-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
AU2021200523B2 (en) | Systems and methods for dynamically detecting and preventing consumer fraud | |
TWI673666B (en) | Method and device for data risk control | |
US9892379B1 (en) | Monitoring and notification of delivered packages | |
TW202008237A (en) | Method and device for training prediction model for new scenario | |
US20210264448A1 (en) | Privacy preserving ai derived simulated world | |
US11436617B2 (en) | Behavior pattern search system and behavior pattern search method | |
US11570214B2 (en) | Crowdsourced innovation laboratory and process implementation system | |
US11017330B2 (en) | Method and system for analysing data | |
JP2022525231A (en) | Distributed logbook for anomaly monitoring | |
CN104376452A (en) | System and method for managing payment success rate on basis of international card payment channel | |
KR102644685B1 (en) | Review reliability validation device and method of thereof | |
KR20180096323A (en) | Method for inducing service reuse and arraratus for performing the same | |
CN111311381A (en) | Commodity recommendation method and system | |
KR102388310B1 (en) | Method and apparatus for processing personalized content based on device independent re-grab | |
US11494781B2 (en) | Buyback provision mechanism | |
US10540682B1 (en) | Systems and methods for determining impact of high-affinity baskets | |
KR102038957B1 (en) | Method and apparatus for detecting game abuser | |
CN105183867B (en) | Data processing method and device | |
US9906381B2 (en) | Digital process management system | |
CN108985755A (en) | A kind of account state identification method, device and server | |
US20200013097A1 (en) | Connectivity Hub with Data-Hiding Features | |
KR102527862B1 (en) | Review curation providing device and method of thereof | |
CN112990811B (en) | Block chain-based warehouse receipt processing method and warehouse receipt processing system | |
CN114358479A (en) | E-commerce platform return goods remote verification method and device, electronic equipment and storage medium | |
US20230306529A1 (en) | Systems and methods for providing a social media stock exchange and associated interactions |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E902 | Notification of reason for refusal | ||
E90F | Notification of reason for final refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |