KR101744484B1 - Method and system for rating items - Google Patents

Method and system for rating items Download PDF

Info

Publication number
KR101744484B1
KR101744484B1 KR1020117027362A KR20117027362A KR101744484B1 KR 101744484 B1 KR101744484 B1 KR 101744484B1 KR 1020117027362 A KR1020117027362 A KR 1020117027362A KR 20117027362 A KR20117027362 A KR 20117027362A KR 101744484 B1 KR101744484 B1 KR 101744484B1
Authority
KR
South Korea
Prior art keywords
items
evaluated
item
user
record
Prior art date
Application number
KR1020117027362A
Other languages
Korean (ko)
Other versions
KR20120013993A (en
Inventor
마우로 바르비에리
서베리우스 페. 페. 프론크
Original Assignee
필립스 라이팅 홀딩 비.브이.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 필립스 라이팅 홀딩 비.브이. filed Critical 필립스 라이팅 홀딩 비.브이.
Publication of KR20120013993A publication Critical patent/KR20120013993A/en
Application granted granted Critical
Publication of KR101744484B1 publication Critical patent/KR101744484B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/957Browsing optimisation, e.g. caching or content distillation
    • G06F16/9577Optimising the visualization of content, e.g. distillation of HTML documents
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/958Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0282Rating or review of business operators or products

Abstract

아이템들은 추천자에서 사용하기 위해 평가된다. 복수의 이전에 평가된 아이템들 및 그것들의 연관된 평가들의 기록은 유지되고, 제 1 아이템에 대한 평가를 수신할 시에(201), 제 1 아이템의 평가와 유사한 평가를 갖는 평가된 아이템들 중 적어도 하나가 검색된다(205). 검색된 적어도 하나의 평가된 아이템들이 디스플레이된다(207). 이어서, 사용자는 일관되게 평가들을 적용하기 위해서 검색된 아이템들 또는 제 1 아이템의 평가를 변경할 수 있다(209).The items are evaluated for use in the recommender. A record of a plurality of previously rated items and their associated assessments is maintained, and upon receiving an evaluation for a first item (201), at least one of the evaluated items having an evaluation similar to the evaluation of the first item One is retrieved (205). The retrieved at least one evaluated item is displayed (207). The user can then change the evaluation of the retrieved items or the first item to apply the assessments consistently (209).

Description

아이템들을 평가하기 위한 방법 및 시스템{METHOD AND SYSTEM FOR RATING ITEMS}[0001] METHOD AND SYSTEM FOR RATING ITEMS [0002]

본 발명은 아이템들을 평가하기 위한 방법 및 시스템에 관한 것이다. 특히, 배타적인 것은 아니지만, 그것은 시스템으로 하여금 사용자의 선호도들을 학습(learn)하도록 추천자 시스템들(recommender systems)을 위한 아이템들을 평가하는 것에 관한 것이다.The present invention relates to a method and system for evaluating items. Particularly, but not exclusively, it relates to evaluating items for recommender systems so that the system learns the user's preferences.

추천자들은 오디오/비디오 콘텐트 저장소들, 제품 카탈로그들 등과 같은 막대한 양의 아이템들로부터, 사용자(또는 사용자들의 그룹)가 좋아하는 아이템들만을 검색하기 위한 툴들(tools)로서 인기가 증가하고 있다. 이들 추천자들은 통상적으로, 기존 서비스(예컨대, 아마존, 아이튠즈(iTunes))에 독립형 서비스(stand-alone service)(예컨대, 무비렌즈(Movielens))로서, 또는 에드-온(add-on)으로서 제공된다. 그것들은 TiVo DVR과 같은, 소비자 디바이스들에서 많이 나타낸다.Recommenders are becoming increasingly popular as tools for retrieving only items that the user (or group of users) likes, from a vast amount of items such as audio / video content stores, product catalogs, and the like. These referrers are typically provided as stand-alone services (e.g., Movielens) or as add-on to existing services (e.g., Amazon, iTunes) . They represent many in consumer devices, such as TiVo DVRs.

이들 추천자 시스템들은 그것들의 기호들(tastes)을 학습하도록 사용자들로부터 피드백을 요구한다. 통상적으로, 사용자들은 주어진 개별 스케일, 종종 5, 7, 또는 11 포인트 스케일로 아이템들을 평가하도록 요청받는다.These referrer systems require feedback from users to learn their tastes. Typically, users are asked to rate items at a given individual scale, often a 5, 7, or 11 point scale.

5, 7, 또는 11 포인트 스케일에 대한 명확한 평가 아이템들(rating items)은 많은 사용자들을 위한 도전일 수 있다. 시간에 대해 일관되게 아이템들을 평가하기는 매우 어렵다. 아이템은 하루는 7 포인트 스케일에 대해 5를 수신할 수 있고, 또 다른 날에, 더 이상 이해되지 않은 또 다른 아이템은 6을 수신할 수 있고, 반면에 일관되게, 그것은 5를 수신한다. 제 2 아이템을 평가하는 시간에, 사용자는, 그가 유사한 아이템들을 앞에서 어떻게 평가하였는지를 알아챌 수 없다.Clear rating items for a 5, 7, or 11 point scale may be a challenge for many users. It is very difficult to evaluate items consistently over time. An item may receive 5 for a 7 point scale per day and another item that is no longer understood may receive 6, while on a different day, it receives 5 consistently. At the time of evaluating the second item, the user can not notice how he has evaluated similar items in the past.

모순되는 평가들은 열악한 추전들, 추천자에서의 불신, 및 결국에는 높은 사용자 불만족을 야기할 수 있다.Contradictory evaluations can lead to poor prospects, disbelief in referrers, and eventually high user dissatisfaction.

개별 스케일들의 또 다른 문제점은, 사용자의 기호들 및 평가 기준들이 시간에 따라 진화한다는 점이다. 5 포인트 스케일에 대해 5를 수신한 아이템은 몇 달 후에 4만을 얻을 수 있다. 사용자들로 하여금 지속적으로 아이템들을 재평가하도록 요청하는 것이 가능하지 않다. 사용자의 기호의 자연적인 진화를 지원할 수 있는 시스템을 갖는 것이 바람직하다.
US 7,406,436 B1은 모든 고객들의 아이템들에 대해서 평가들이 제시될 때 평가 봇(rating bot)을 고객들에게 리마인드하는 역할을 하는 툴을 개시한다. 이는 데이터 요청의 수 및 빈도가 증가함에 따른 고객에 대한 부담을 최소화하기 위한 정보(intelligence)를 포함할 수 있다. 이들은 고객 선호도들에 기초하여 스케줄링된 평가 요청들을 리스트, 필터링, 및 우선순위화를 위한 용이성들을 포함한다. 향상들은 또한 이들 및 다른 아이템들에 대한 이전 평가들을 추적하고, 히스토리를 제시하고, 고객에 대한 유사한 평가를 추론 및 제안하여 인수 또는 오버라이딩하고, 데이터 엔트리를 쉽게 하도록 다른 자동 완성 서비스들을 제공할 수 있다. 이러한 히스토리는 고객들이 그들의 평가 행동에서 모순성을 피하는 것을 도울 수 있다. 이는 최근의 이벤트들 또는 새로운 정보에 연관될 수 있는 이전의 평가들의 재평가들을 획득하거나, 특히, 극단적인 평가들, 또는 사용 수명 주기에서 일찌기 있을 수 있는 평가들, 또는 다른 이유들에 대해 추측의 경우, 뒤늦은 생각을 간단하게 허용하도록 설계된 후속(follow-up) 또는 개정된 평가들을 스케줄링할 수 있다.
Another problem with individual scales is that user preferences and evaluation criteria evolve over time. Items that receive 5 for a 5 point scale will get 4 after a few months. It is not possible to ask users to constantly re-evaluate items. It is desirable to have a system that can support the natural evolution of user preferences.
US 7,406,436 B1 discloses a tool that acts to remind a rating bot to its customers when ratings are presented for all customer items. This may include intelligence to minimize the burden on the customer as the number and frequency of data requests increase. These include ease of listing, filtering, and prioritizing scheduling evaluation requests based on customer preferences. Enhancements may also provide other autocomplete services to track previous evaluations of these and other items, present a history, infer or suggest a similar rating to the customer, accept or override, and facilitate data entry have. This history can help customers avoid inconsistencies in their evaluation behavior. This may be achieved by obtaining reassessments of previous assessments that may be associated with recent events or new information, or in particular, by extreme assessments, or estimates that may be early in the life cycle, , And schedule follow-up or revised evaluations designed to allow simple thinking.

본 발명은 사용자 일관성이 개선되는 아이템들을 평가하는 시스템을 제공하는 것을 추구한다.The present invention seeks to provide a system for evaluating items with improved user consistency.

이것은 아이템들을 평가하는 방법에 의한 본 발명의 제 1 양태에 따라 달성되며, 상기 방법은: 사용자의 복수의 평가된 아이템들 및 연관된 평가들의 기록(record)을 유지하는 단계; 제 1 아이템에 대한 평가를 수신하는 단계; 제 1 아이템의 수신된 평가와 유사한 평가를 갖는 기록의 복수의 평가된 아이템들 중 적어도 하나를 선택하는 단계; 및 복수의 평가된 아이템들 중 선택된 적어도 하나를 제공하는 단계를 포함한다.This is accomplished in accordance with a first aspect of the invention by a method of evaluating items, the method comprising the steps of: maintaining a record of a user's plurality of evaluated items and associated assessments; Receiving an evaluation for a first item; Selecting at least one of a plurality of evaluated items of the record having an evaluation similar to the received rating of the first item; And providing at least one selected one of the plurality of evaluated items.

이것은 또한, 아이템들을 평가하기 위한 시스템에 의한 본 발명의 제 2 양태에 따라 달성되며, 상기 시스템은: 사용자의 복수의 평가된 아이템들 및 연관된 평가들의 기록을 유지하기 위한 저장 수단; 제 1 아이템에 대한 평가를 수신하기 위한 인터페이스 디바이스; 및 제 1 아이템의 수신된 평가와 유사한 평가를 갖는 기록의 복수의 평가된 아이템들 중 적어도 하나를 선택하고, 디스플레이 상에 복수의 평가된 아이템들 중 선택된 적어도 하나를 제공하기 위한 프로세서 수단을 포함한다.This is also achieved according to a second aspect of the invention by a system for evaluating items, the system comprising: storage means for maintaining a record of a plurality of evaluated items of a user and associated assessments; An interface device for receiving an evaluation for a first item; And processor means for selecting at least one of a plurality of the evaluated items of the record having an evaluation similar to the received rating of the first item and providing at least one selected one of the plurality of evaluated items on the display .

아이템을 평가할 시에, 사용자에게는 그가 유사한 평가로 평가한 아이템들이 보여진다. 이런 방식으로, 사용자는 일관되게 아이템들을 평가할 수 있어, 추천자로 하여금 양호한 추천들을 제공하도록 허용한다. 부가적으로, 사용자는 앞에서 평가된 아이템들을 잠시 리뷰(review)할 수 있고, 그것들을 그/그녀의 현재 기호와 일치하게 하도록 이것들을 개정한다(revise).When evaluating an item, the user is presented with items that he has rated similar to. In this way, the user can consistently evaluate the items, allowing the recommender to provide good recommendations. Additionally, the user can review the previously rated items for a moment and revise them to match them with his / her current preference.

예를 들어, 5 포인트 스케일을 갖는 마우스 기반의 사용자 인터페이스(예컨대 마이크로소프트 미디어 플레이어가 5스타 평가 시스템(five star rating system)을 가짐)의 특정한 실시예에서, 마우스 포인터가 스코어 5에 있을 때, 인터페이스는 5 스타 스코어를 수신한 최근의 가장 유사한 3-5 아이템들을 보여준다.For example, in a particular embodiment of a mouse-based user interface with a 5-point scale (e.g., the Microsoft media player has a five star rating system), when the mouse pointer is in score 5, Shows the most recent 3-5 items that received a 5-star score.

이런 식으로, 사용자는 일관되게 아이템들을 평가할 수 있어, 추천자로 하여금 양호한 추천을 제공하도록 허용한다. 부가적으로, 사용자는 오랜 아이템들(older items)을 잠시 리뷰할 수 있고, 그것들을 그/그녀의 현재 기호와 일치하게 하도록 오랜 평가들(older ratings)을 개정한다.In this way, the user can consistently evaluate the items, allowing the recommender to provide a good recommendation. Additionally, the user can review the older items for a while and revise the older ratings to make them consistent with his / her current preferences.

실시예에서, 복수의 평가된 아이템들의 제공되고 선택된 적어도 하나의 평가는 예컨대 복수의 평가된 아이템들 중 선택된 적어도 하나에 대한 새로운 평가를 수신하거나, 또는 평가된 아이템들의 기록 히스토리를 업데이트하기 위해 제 1 아이템의 평가에 대한 확인(confirmation)을 수신함으로써 업데이트될 수 있다. 이런 식으로, 앞에서 평가된 아이템들은 사용자의 기호 등의 변경들을 고려하도록 업데이트될 수 있다.In an embodiment, the provided and selected at least one evaluation of the plurality of evaluated items may include, for example, receiving a new evaluation of at least one of the plurality of evaluated items, or updating a record history of the evaluated items May be updated by receiving a confirmation of the evaluation of the item. In this way, the items evaluated above can be updated to take into account changes in the user's preferences and the like.

복수의 평가된 아이템들 중 적어도 하나는 제 1 아이템과 기록의 복수의 평가된 아이템들 각각 사이에서 유사성의 정도를 결정함으로써; 제 1 아이템의 평가 및 기록의 복수의 평가된 아이템들 각각의 유사성 정도를 결정함으로써; 제 1 아이템과 기록의 복수의 평가된 아이템들 각각 사이에서 가장 높은 결정된 유사성의 정도에 기초하여, 및 제 1 아이템의 평가 및 기록의 복수의 평가된 아이템들 각각의 가장 높은 결정된 유사성의 정도에 기초하여, 복수의 평가된 아이템들 중 적어도 하나를 선택함으로써 선택될 수 있다. 제 1 아이템과 기록의 복수의 평가된 아이템들 각각 사이에서 유사성의 정도를 결정하는 것은, 예컨대, 제 1 아이템의 적어도 하나의 속성에 대한 속성 값과 기록의 복수의 평가된 아이템들 각각의 대응하는 속성의 속성 값 간의 거리(distance)를 결정하는 것과; 미리 결정된 임계치 내의 거리를 갖는 기록의 복수의 평가된 아이템들로부터 아이템들을 선택하는 것을 포함한다. 이것은 쉽게 비교하고 가능한 업데이트들을 행하도록 사용자에게 적절한 앞에서 평가된 아이템들을 선택하는 간단하고 또한 효과적인 기술을 제공한다.At least one of the plurality of evaluated items determining the degree of similarity between the first item and each of the plurality of evaluated items of the record; Determining the degree of similarity of each of the plurality of evaluated items of the evaluation and recording of the first item; Based on the degree of the highest determined similarity between the first item and each of the plurality of evaluated items of the record and based on the degree of the highest determined similarity of each of the plurality of evaluated items of the evaluation and recording of the first item , And selecting at least one of the plurality of evaluated items. Determining the degree of similarity between the first item and each of the plurality of evaluated items of the record may include determining the degree of similarity between the first item and each of the plurality of evaluated items of the record, Determining a distance between attribute values of an attribute; And selecting the items from the plurality of evaluated items of the record having a distance within a predetermined threshold. This provides a simple and effective technique for easily comparing and selecting previously rated items appropriate to the user to make possible updates.

본 발명을 보다 완전히 이해하기 위해, 첨부된 도면들과 연계하여 아래의 상세한 설명을 참조한다.For a more complete understanding of the present invention, reference is made to the following detailed description, taken in conjunction with the accompanying drawings, in which: FIG.

본 발명은 사용자 일관성이 개선되는 아이템들을 평가하는 시스템을 제공한다.The present invention provides a system for evaluating items with improved user coherence.

도 1은 본 발명의 실시예에 따른 시스템의 간략한 개략도.
도 2는 본 발명의 실시예에 따라 아이템들을 평가하는 방법의 흐름도.
1 is a simplified schematic diagram of a system according to an embodiment of the present invention;
2 is a flow diagram of a method for evaluating items in accordance with an embodiment of the present invention.

도 1에 도시된 바와 같이, 본 발명의 실시예의 시스템(100)은 저장 수단(103)에 접속된 프로세서 수단(101)을 포함한다. 저장 수단(103)은 프로세서 수단(101), 또는 CD-ROM와 같은 개별 메모리 수단, 또는 서버 상에 유지되고, 예컨대 인터넷을 통해 원격으로 액세스되는 라이브러리와 같은 외부 저장 수단과의 메모리 통합일 수 있다. 프로세서 수단(101)은 또한, 인터페이스 디바이스(105) 및 디스플레이(107)에 접속된다. 인터페이스 디바이스(105)는 디스플레이(107)와 사용자 상호작용을 허용하는 마우스 또는 원격 제어 디바이스일 수 있다. 대안으로, 인터페이스 디바이스는 터치 감지 스크린, 키패드 등을 포함할 수 있다. 디스플레이는 PDA, 이동 전화, MP3 등과 같은 휴대용 디바이스의 스크린 또는 컴퓨터 스크린, 텔레비전 스크린일 수 있다.As shown in FIG. 1, the system 100 of an embodiment of the present invention includes a processor means 101 connected to a storage means 103. The storage means 103 may be memory integration with processor means 101 or an external memory means such as a separate memory means such as a CD-ROM or a library that is maintained on a server and accessed remotely via the Internet . The processor means 101 is also connected to the interface device 105 and the display 107. The interface device 105 may be a mouse or a remote control device that allows user interaction with the display 107. Alternatively, the interface device may include a touch sensitive screen, a keypad, and the like. The display may be a screen of a portable device such as a PDA, a mobile phone, an MP3 or the like, or a computer screen or a television screen.

시스템의 동작은 이제 도 2를 참조하여 상세히 설명된다. 새로운 아이템이 평가를 위해 이용가능할 때(스텝 201), 그것은 디스플레이(107) 상에서 사용자에게 제공된다. 아이템은, 구매하였거나 사용자에 의해 다운로딩된 음악 트랙(music track)과 같은 멀티미디어 아이템이거나, 그것을 나타낼 수 있다. 사용자는 또한, 일반적으로 다수의 스타들, 예컨대 5, 7, 11 스타들의 형태로, 스케일이 제공된다. 사용자는 인터페이스 디바이스(105)를 사용하여, 새로운 아이템의 평가를 선택하기 위해 스타들을 사용한다(스텝 203). 이어서, 프로세서 수단(101)은 저장 수단(103)에서 유지된 기록으로부터 아이템들을 검색한다. 기록은 아이템들의 평가 히스토리, 예컨대 대응하는 평가들과 함께 사용자에 의해 앞에서 평가된 아이템들을 포함하는 테이블을 포함한다. 아이템들은 새로운 아이템들에 주어진 평가와 유사한 평가를 갖는 것이 검색된다. 그러므로, 아이템들은 아이템들 간의 유사성에 무관하게 검색된다. 이것은 사용자로 하여금, 이 평가가 아이템들의 광범위한 범위에 어떻게 적용되었는지를 리뷰하도록 허용한다. 대안으로, 그것은 새로운 아이템과 유사한 아이템을 검색할 수 있고, 또는 최근에 아이템이 어떻게 평가되었는지 또는 위의 임의 조합에 기초하여 아이템을 검색할 수 있다. 대안으로, 예컨대, 무작위로 선택된 아이템들이 검색될 수 있다.The operation of the system will now be described in detail with reference to FIG. When a new item is available for evaluation (step 201), it is presented to the user on display 107. An item may be, or may represent, a multimedia item, such as a music track, purchased or downloaded by a user. The user is also provided with a scale, generally in the form of a number of stars, e.g., 5, 7, 11 stars. The user uses the interface device 105 to use the stars to select an evaluation of the new item (step 203). The processor means 101 then retrieves the items from the record maintained in the storage means 103. The record includes an evaluation history of the items, e.g., a table containing items previously evaluated by the user with corresponding evaluations. Items are retrieved with an evaluation similar to the rating given to the new items. Therefore, the items are searched irrespective of the similarity between the items. This allows the user to review how this rating has been applied to a broad range of items. Alternatively, it may retrieve items similar to the new items, or may retrieve items based on how recently the items were evaluated or any combination of the above. Alternatively, for example, randomly selected items may be retrieved.

각각의 아이템은 메타데이터라고 하는 설명 정보(descriptive information)의 세트를 연관시킨다. 비디오 아이템들에 대한 메타데이터의 예들은: 장르, 타이틀, 감독, 캐스트 등이다. 이들 속성들은 연관된 값을 가지며, 속성 값들 간의 거리 측정치가 결정되고, 미리 결정된 임계치 내에 거리 측정치를 갖는 이들 아이템들이 선택된다. 속성에 대한 거리 측정치들은 속성의 타입에 의존하여 규정될 수 있다. 아이템들은, 그것들이 동일한 평가 또는 새로운 아이템의 평가의 미리 결정된 범위 내에서 평가를 가지면, 선택될 수 있다. 평가들은 또한, 시간 스탬프(time stamp)될 수 있고, 가장 최근에 평가된 아이템들이 검색될 수 있다. 대안의 실시예에서, 가장 최근에 평가된 아이템들을 검색하는 대신에, 평가된 아이템들은 검색되고, 보다 균등하게는 전체 평가 히스토리를 통해 분배된다. 결국, 짧은 기간 일관성이라기보다는 보다 긴 기간 일관성이 실현된다.Each item associates a set of descriptive information called metadata. Examples of metadata for video items are: genre, title, director, cast, and the like. These attributes have associated values, a distance measure between attribute values is determined, and those items with a distance measure within a predetermined threshold are selected. Distance measurements for an attribute may be specified depending on the type of attribute. The items can be selected if they have an evaluation within the predetermined range of evaluation of the same evaluation or new item. The evaluations can also be time stamped and the most recently evaluated items can be retrieved. In an alternative embodiment, instead of retrieving the most recently evaluated items, the evaluated items are retrieved and more evenly distributed through the entire evaluation history. Eventually, longer-term consistency is realized rather than short-term consistency.

저장 수단으로부터 검색되는 선택된 아이템들은 이후 디스플레이(107) 상에서 그것들의 현재 연관된 평가들을 갖는 사용자에게 제공된다(스텝 207). 예를 들어, 평가를 위해 새로운 아이템과 유사한 아이템들의 검색된 리스트로부터, 탑(top) 3(또는 5)이, 사용자로 하여금 그/그녀의 평가를 그/그녀의 이전의 평가들과 비교하도록 허용하기 위해 사용자 인터페이스에서 보여진다. 사용자가 그/그녀의 평가를 변경하도록 결정하면(스텝 209), 새로운 리스트가 검색되고(스텝 205), 새로운 평가와 유사하게 디스플레이된다(스텝 207). 그 프로세스는, 사용자가 새로운 아이템에 대한 그/그녀의 평가를 확인할 때까지 반복된다. 이러한 점에서, 새로운 아이템 및 그의 평가는 평가 히스토리에 부가된다(스텝 211).Selected items retrieved from storage means are then provided to the user with their currently associated assessments on display 107 (step 207). For example, from the retrieved list of items similar to the new item for evaluation, top 3 (or 5) may allow the user to compare his / her rating with his / her previous ratings In the user interface. If the user decides to change his / her rating (step 209), a new list is retrieved (step 205) and displayed similar to the new rating (step 207). The process is repeated until the user confirms his / her rating for the new item. At this point, the new item and its evaluation are added to the evaluation history (step 211).

프로세스 동안, 사용자는 평가 히스토리로부터 검색된 유사한 아이템들 중 하나를 선택할 수 있고, 그것의 평가를 리뷰 및 변경할 수 있다. 이전에 평가된 아이템의 평가를 변경하기 위해, 새로운 아이템들을 평가하는데 사용되는 동일한 과정이 사용될 수 있다.During the process, the user can select one of similar items retrieved from the rating history, and review and change its rating. To change the evaluation of a previously evaluated item, the same procedure used to evaluate new items may be used.

본 발명은, 추천자들이 사용되는, (인터넷-인에이블된) TV 세트들, PVR들, 셋탑 박스들, 오디오 시스템들(휴대용 오디오를 포함함), 및 서비스들(인터넷 비디오 및 음악 서비스들을 포함함)에 적용될 수 있다.The present invention is based on the assumption that referrers are used, including (Internet-enabled) TV sets, PVRs, set-top boxes, audio systems (including portable audio), and services ). ≪ / RTI >

본 발명의 실시예들이 상세한 설명에서 설명되고 첨부된 도면에서 도시되었지만, 본 발명이 개시된 실시예들에 제한되지 않으며, 아래의 청구범위에서 설명되는 바와 같이 본 발명의 범위로부터 벗어남이 없이 다양한 변형예들이 가능함을 이해할 것이다.Although the embodiments of the present invention have been described in the detailed description and shown in the accompanying drawings, it is to be understood that the present invention is not limited to the disclosed embodiments, and that various modifications may be made without departing from the scope of the present invention as set forth in the claims below Will be possible.

기술분야의 당업자들에게 자명한 바와 같이, "수단"은 동작에 있어 재생하는 (개별 또는 통합된 회로들 또는 전자 요소들과 같은)임의의 하드웨어 또는 (프로그램들 또는 프로그램들의 부분들과 같은) 소프트웨어를 포함하도록 의미되며, 또한 특정된 펑션(function)을 재생하도록 설계되고, 단독으로 또는 다른 기능들과 함께 있거나 다른 요소들과 고립되거나 상호동작한다. 본 발명은 여러 가지 개별 요소들을 포함하는 하드웨어에 의해, 및 적절히 프로그래밍된 컴퓨터에 의해 구현될 수 있다. 여러 가지 수단을 열거하는 장치 청구항에서, 여러 가지 이들 수단은 하드웨어 및 하드웨어의 동일한 아이템에 의해 구현될 수 있다. '컴퓨터 프로그램 제품'은 인터넷과 같은 네트워크를 통해 다운로드가능하고, 또는 임의의 다른 방식으로 시장성 있는, 플로피디스크와 같은 컴퓨터 판독가능 매체 상에 저장된 임의의 소프트웨어 제품을 의미하는 것으로 이해된다.As will be appreciated by those skilled in the art, "means" means any hardware (such as individual or integrated circuits or electronic components) or software (such as portions of programs or programs) And is also designed to reproduce a specified function and may be alone or in conjunction with other functions, or may be isolated or interoperable with other elements. The invention may be implemented by means of hardware, including various discrete elements, and by means of a suitably programmed computer. In a device claim enumerating various means, various of these means may be implemented by the same item of hardware and hardware. "Computer program product" is understood to mean any software product stored on a computer readable medium, such as a floppy disk, that is downloadable over a network such as the Internet, or otherwise marketable.

101: 프로세스 수단 103: 저장 수단
105: 인터페이스 디바이스 107: 디스플레이
101: Process means 103: Storage means
105: Interface device 107: Display

Claims (15)

사용자가 아이템들을 평가(rating)하는 것의 일관성을 개선하는 컴퓨터 실행 방법에 있어서,
저장 수단에서 사용자의 복수의 평가된 아이템들 및 연관된 평가들의 기록(record)을 유지하는 단계(211)로서, 상기 연관된 평가들 각각은 상기 사용자에 의해 제공되는, 상기 유지하는 단계;
인터페이스 디바이스로부터 제 1 아이템에 대한 상기 사용자에 의해 제공된 평가를 수신하는 단계(201);
상기 제 1 아이템에 대한 상기 수신된 평가에 기초하여 상기 제 1 아이템의 상기 수신된 평가에 대해 유사한 평가를 갖는 상기 기록의 상기 복수의 평가된 아이템들 중 적어도 하나를 프로세서 수단에 의해 선택하는 단계(205);
상기 사용자가 상기 저장 수단에서 유지된 대로 상기 사용자에 의해 이전에 평가된 아이템과 일관되게 상기 제 1 아이템을 평가하도록 하기 위해 디스플레이에서 상기 복수의 평가된 아이템들 중 상기 선택된 적어도 하나를 제공하는 단계(207);
상기 사용자가 상기 제 1 아이템에 대한 상기 수신된 평가를 변경하거나 확인하는 단계(209); 및
상기 사용자에 의해 상기 제 1 아이템에 대한 상기 수신된 평가가 확인될 때, 상기 제 1 아이템 및 상기 사용자에 의해 상기 복수의 평가된 아이템들의 상기 기록에 대한 그것의 확인된 평가를 부가하는 단계(211)를 포함하고,
상기 복수의 평가된 아이템들 중 적어도 하나를 프로세서 수단에 의해 선택하는 단계(205)는:
상기 제 1 아이템과 상기 기록의 상기 복수의 평가된 아이템들 각각 사이의 유사성의 정도를 결정하는 단계;
상기 제 1 아이템의 평가와 상기 기록의 상기 복수의 평가된 아이템들 각각 사이의 유사성의 정도를 결정하는 단계;
상기 사용자에 의한 아이템들의 평가의 일관성을 추가로 개선하기 위해 상기 제 1 아이템과 상기 기록의 상기 복수의 평가된 아이템들 각각 사이의 가장 높은 결정된 유사성의 정도에 기초하고, 상기 제 1 아이템의 평가와 상기 기록의 상기 복수의 평가된 아이템들 각각의 가장 높은 결정된 유사성의 정도에 기초하여 상기 복수의 평가된 아이템들 중 적어도 하나를 선택하는 단계를 포함하는, 사용자가 아이템들을 평가하는 것의 일관성을 개선하는 컴퓨터 실행 방법.
CLAIMS 1. A computer-implemented method for improving the consistency of a user rating items,
Maintaining (211) a record of a user's plurality of evaluated items and associated assessments in a storage means, each of the associated assessments being provided by the user;
Receiving (202) an evaluation provided by the user for a first item from an interface device;
Selecting at least one of the plurality of evaluated items of the record having a similar evaluation for the received rating of the first item based on the received rating for the first item by the processor means 205);
Providing the selected at least one of the plurality of evaluated items in a display to allow the user to evaluate the first item consistent with items previously evaluated by the user as maintained in the storage means 207);
(209) the user modifies or confirms the received rating for the first item; And
Adding, by the user, the identified item to the record of the plurality of evaluated items by the first item and the user when the received rating for the first item is confirmed ),
Selecting (205) by at least one of the plurality of evaluated items by processor means:
Determining the degree of similarity between the first item and each of the plurality of evaluated items of the record;
Determining an extent of similarity between the evaluation of the first item and each of the plurality of evaluated items of the record;
Based on the degree of the highest determined similarity between the first item and each of the plurality of evaluated items of the record to further improve the consistency of the evaluation of the items by the user, And selecting at least one of the plurality of evaluated items based on the degree of the highest determined similarity of each of the plurality of evaluated items of the record to improve the consistency of the user & How to run your computer.
제 1 항에 있어서,
상기 제 1 아이템과 상기 기록의 상기 복수의 평가된 아이템들 각각 사이의 유사성의 정도를 결정하는 단계는:
상기 제 1 아이템들의 적어도 하나의 속성의 속성 값과 상기 기록의 상기 복수의 평가된 아이템들 각각의 대응하는 속성의 속성 값 사이의 거리를 결정하는 단계; 및
미리 결정된 임계치 내에서 거리를 갖는 상기 기록의 상기 복수의 평가된 아이템들로부터 아이템들을 선택하는 단계를 포함하는, 사용자가 아이템들을 평가하는 것의 일관성을 개선하는 컴퓨터 실행 방법.
The method according to claim 1,
Wherein determining the degree of similarity between the first item and each of the plurality of evaluated items of the record comprises:
Determining a distance between an attribute value of at least one attribute of the first items and an attribute value of a corresponding attribute of each of the plurality of evaluated items of the record; And
And selecting items from the plurality of evaluated items of the record having a distance within a predetermined threshold.
제 1 항 또는 제 2 항에 있어서,
상기 복수의 평가된 아이템들 중 상기 제공된, 선택된 적어도 하나의 평가가 업데이트되도록 허용하는 단계를 추가로 포함하는, 사용자가 아이템들을 평가하는 것의 일관성을 개선하는 컴퓨터 실행 방법.
3. The method according to claim 1 or 2,
Further comprising: allowing the user to update at least one of the plurality of evaluated items provided, the selected one of the plurality of evaluated items being updated.
제 3 항에 있어서,
상기 복수의 평가된 아이템들 중 상기 선택된 적어도 하나의 평가가 업데이트되도록 허용하는 단계는: 상기 복수의 평가된 아이템들 중 상기 선택된 적어도 하나의 적어도 하나에 대한 새로운 평가를 수신하는 단계를 포함하는, 사용자가 아이템들을 평가하는 것의 일관성을 개선하는 컴퓨터 실행 방법.
The method of claim 3,
Wherein allowing the selected at least one evaluation of the plurality of evaluated items to be updated comprises: receiving a new evaluation of the at least one selected one of the plurality of evaluated items, A computer-implemented method for improving the consistency of evaluating items.
제 4 항에 있어서,
상기 수신된 새로운 평가를 갖는 상기 복수의 평가된 아이템들 중 상기 선택된 적어도 하나의 적어도 하나를 업데이트함으로써 상기 복수의 평가된 아이템들의 상기 기록을 업데이트하는 단계를 추가로 포함하는, 사용자가 아이템들을 평가하는 것의 일관성을 개선하는 컴퓨터 실행 방법.
5. The method of claim 4,
Further comprising updating the record of the plurality of evaluated items by updating at least one of the selected at least one of the plurality of evaluated items with the received new rating, How to run a computer to improve the consistency of things.
삭제delete 삭제delete 삭제delete 제 1 항에 있어서,
상기 복수의 평가된 아이템들 중 적어도 하나를 선택하는 단계(209)는:
가장 최근에 평가된 아이템들에 기초하여 상기 복수의 평가된 아이템들 중 적어도 하나를 선택하는 단계를 추가로 포함하는, 사용자가 아이템들을 평가하는 것의 일관성을 개선하는 컴퓨터 실행 방법.
The method according to claim 1,
Selecting (209) at least one of the plurality of evaluated items comprises:
Further comprising selecting at least one of the plurality of evaluated items based on the most recently evaluated items. ≪ Desc / Clms Page number 21 >
프로세서 수단 상에 실행할 때, 제 1 항 또는 제 2 항에 따르는 컴퓨터 실행 방법을 실행하기 위한 복수의 프로그램 코드부들을 포함하는 컴퓨터 프로그램이 기록된 컴퓨터 판독가능 기록 매체.A computer program comprising a plurality of program code portions for executing a computer-implemented method according to any one of claims 1 to 3 when executed on a processor means. 아이템들을 평가하기 위한 시스템(100)에 있어서,
사용자의 복수의 평가된 아이템들 및 연관된 평가들의 기록을 유지하기 위한 저장 수단(103);
제 1 아이템에 대한 평가를 수신하기 위한 인터페이스 디바이스(105);
상기 복수의 평가된 아이템들 중 선택된 적어도 하나를 디스플레이하기 위한 디스플레이(107); 및
제 10 항의 컴퓨터 프로그램을 실행하기 위해 구성된 프로세서 수단(101)을 포함하는, 아이템들을 평가하기 위한 시스템(100).
In a system (100) for evaluating items,
Storage means (103) for maintaining a record of the user's plurality of evaluated items and associated assessments;
An interface device (105) for receiving an evaluation for a first item;
A display (107) for displaying at least one selected one of the plurality of evaluated items; And
A system (100) for evaluating items comprising processor means (101) configured to execute the computer program of claim 10.
삭제delete 삭제delete 삭제delete 삭제delete
KR1020117027362A 2009-04-20 2010-04-13 Method and system for rating items KR101744484B1 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP09158199.1 2009-04-20
EP09158199 2009-04-20
PCT/IB2010/051589 WO2010122448A1 (en) 2009-04-20 2010-04-13 Method and system for rating items

Publications (2)

Publication Number Publication Date
KR20120013993A KR20120013993A (en) 2012-02-15
KR101744484B1 true KR101744484B1 (en) 2017-06-08

Family

ID=42235192

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020117027362A KR101744484B1 (en) 2009-04-20 2010-04-13 Method and system for rating items

Country Status (8)

Country Link
US (1) US20120036084A1 (en)
EP (1) EP2422283A1 (en)
JP (1) JP5788866B2 (en)
KR (1) KR101744484B1 (en)
CN (1) CN102405472B (en)
BR (1) BRPI1006613A2 (en)
RU (1) RU2538914C2 (en)
WO (1) WO2010122448A1 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2541486A1 (en) * 2011-07-01 2013-01-02 Axel Springer Digital TV Guide GmbH Recommender system and method of operating same
EP2549423A1 (en) 2011-07-22 2013-01-23 Axel Springer Digital TV Guide GmbH Automatic determination of the relevance of recommendations in a social network
JP6507960B2 (en) * 2015-09-15 2019-05-08 船井電機株式会社 Recording and playback device
US10586267B2 (en) * 2016-01-29 2020-03-10 Curio Search, Inc. Method and system for product discovery

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6266649B1 (en) * 1998-09-18 2001-07-24 Amazon.Com, Inc. Collaborative recommendations using item-to-item similarity mappings
US20020199194A1 (en) * 1999-12-21 2002-12-26 Kamal Ali Intelligent system and methods of recommending media content items based on user preferences
WO2006079008A3 (en) 2005-01-21 2007-10-25 Amazon Tech Inc Method and system for automated comparison of items

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0962074B1 (en) * 1997-11-25 2012-12-19 Motorola Mobility LLC Audio content player methods, systems, and articles of manufacture
RU2177638C2 (en) * 1999-09-22 2001-12-27 Зоммерс Олег Харисович Method of formation and regular delivery of information publications to users and system for realization of method
JP3708780B2 (en) * 2000-02-21 2005-10-19 日本電信電話株式会社 Preference data management method in digital broadcast, digital broadcast receiver, and recording medium for preference data management program
US6934684B2 (en) * 2000-03-24 2005-08-23 Dialsurf, Inc. Voice-interactive marketplace providing promotion and promotion tracking, loyalty reward and redemption, and other features
US7617127B2 (en) * 2000-04-28 2009-11-10 Netflix, Inc. Approach for estimating user ratings of items
JP3654173B2 (en) * 2000-11-02 2005-06-02 日本電気株式会社 PROGRAM SELECTION SUPPORT DEVICE, PROGRAM SELECTION SUPPORT METHOD, AND RECORDING MEDIUM CONTAINING THE PROGRAM
JP2002366728A (en) * 2001-03-21 2002-12-20 Masaru Fukada Information recommendation system and computer program for it
US7406436B1 (en) * 2001-03-22 2008-07-29 Richard Reisman Method and apparatus for collecting, aggregating and providing post-sale market data for an item
AU2002342082A1 (en) * 2001-10-18 2003-04-28 Transpose, Llc System and method for measuring rating reliability through rater prescience
US6934584B1 (en) * 2002-03-27 2005-08-23 Pacesetter, Inc. Enhanced power efficiency in implantable cardiac stimulation devices
DE60334307D1 (en) * 2002-08-21 2010-11-04 Bookit Oy BOOK PROCEDURE AND SYSTEM
JP2006072807A (en) * 2004-09-03 2006-03-16 Nippon Telegr & Teleph Corp <Ntt> P2p type review system
US7519562B1 (en) * 2005-03-31 2009-04-14 Amazon Technologies, Inc. Automatic identification of unreliable user ratings
US7890513B2 (en) * 2005-06-20 2011-02-15 Microsoft Corporation Providing community-based media item ratings to users
US20100076965A1 (en) * 2006-11-20 2010-03-25 Access Co., Ltd. Information display device, information display program and information display system
US20080147773A1 (en) * 2006-12-14 2008-06-19 Bellsouth Intellectual Property Corp. Ratings systems via mobile communications devices
WO2008073053A1 (en) * 2006-12-14 2008-06-19 Jerry Jie Ji Method and system for online collaborative ranking and reviewing of classified goods or service
US8112720B2 (en) * 2007-04-05 2012-02-07 Napo Enterprises, Llc System and method for automatically and graphically associating programmatically-generated media item recommendations related to a user's socially recommended media items
US7921071B2 (en) * 2007-11-16 2011-04-05 Amazon Technologies, Inc. Processes for improving the utility of personalized recommendations generated by a recommendation engine

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6266649B1 (en) * 1998-09-18 2001-07-24 Amazon.Com, Inc. Collaborative recommendations using item-to-item similarity mappings
US20020199194A1 (en) * 1999-12-21 2002-12-26 Kamal Ali Intelligent system and methods of recommending media content items based on user preferences
WO2006079008A3 (en) 2005-01-21 2007-10-25 Amazon Tech Inc Method and system for automated comparison of items

Also Published As

Publication number Publication date
JP5788866B2 (en) 2015-10-07
EP2422283A1 (en) 2012-02-29
CN102405472A (en) 2012-04-04
BRPI1006613A2 (en) 2016-04-19
KR20120013993A (en) 2012-02-15
RU2538914C2 (en) 2015-01-10
RU2011147050A (en) 2013-05-27
US20120036084A1 (en) 2012-02-09
JP2012524320A (en) 2012-10-11
CN102405472B (en) 2014-11-26
WO2010122448A1 (en) 2010-10-28

Similar Documents

Publication Publication Date Title
US10129596B2 (en) Adaptive row selection
US9946761B2 (en) Recommendation for diverse content
US9424584B2 (en) Systems and methods for generating and displaying user preference tag clouds
US20160292158A1 (en) Global recommendation systems for overlapping media catalogs
US20120167145A1 (en) Method and apparatus for providing or utilizing interactive video with tagged objects
JP5395729B2 (en) Information presentation device
JP2006339794A (en) Information processor, processing method and program
CN102265273A (en) Adaptive implicit learning for recommender systems
KR20050043969A (en) System and method for adapting an interest profile on a media system
JP6784499B2 (en) Decision device, decision method and decision program
KR101744484B1 (en) Method and system for rating items
KR20080031148A (en) Information processing device, feature extraction method, recording medium, and program
US20180189856A1 (en) Systems and methods for recommending an electronic device to a user based on a user&#39;s device profile
US20090024489A1 (en) Reputation based display
JP4253532B2 (en) Information recommendation device, information recommendation program, and recording medium
US8943525B2 (en) Information processing apparatus, information processing method, and program
JP2020194284A (en) Recommendation device, recommendation method, and recommendation program
JP6147904B1 (en) Server apparatus, control method, and program
US10776824B2 (en) Systems and methods for recommending electronic devices based on user purchase habits
US9344767B2 (en) Method and device for presenting video navigating interface, displaying device and computer programming product
JP2018151995A (en) Information providing device, information providing method, and information providing program
JP2013179500A (en) Information terminal, portable terminal, content processing method, and program
JP2002163279A (en) Recommending information providing method, recommending information transmitting system, recommending information transmitter and recording medium
US20190028779A1 (en) Methods and systems for presenting a media asset segment that is associated with a pre-specified quality of acting
US20240064364A1 (en) Intelligent mapping for fast access of any content type

Legal Events

Date Code Title Description
AMND Amendment
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant