WO2016194062A1 - 商品特定装置、商品特定方法及び商品特定プログラム - Google Patents

商品特定装置、商品特定方法及び商品特定プログラム Download PDF

Info

Publication number
WO2016194062A1
WO2016194062A1 PCT/JP2015/065615 JP2015065615W WO2016194062A1 WO 2016194062 A1 WO2016194062 A1 WO 2016194062A1 JP 2015065615 W JP2015065615 W JP 2015065615W WO 2016194062 A1 WO2016194062 A1 WO 2016194062A1
Authority
WO
WIPO (PCT)
Prior art keywords
product
product page
page
tokens
name
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2015/065615
Other languages
English (en)
French (fr)
Inventor
ファム タン タオ グェン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Rakuten Group Inc
Original Assignee
Rakuten Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Rakuten Inc filed Critical Rakuten Inc
Priority to PCT/JP2015/065615 priority Critical patent/WO2016194062A1/ja
Priority to JP2015548519A priority patent/JP5887031B1/ja
Publication of WO2016194062A1 publication Critical patent/WO2016194062A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions

Definitions

  • the present invention relates to a product specifying device, a product specifying method, and a product specifying program.
  • Patent Document 1 describes a technique for determining the identity of two text data by paying attention to a conversion operation for matching one text data with the other text data.
  • the same product may need to be associated with each other. For example, a product page of a product and a product page of the same product are displayed in association with each other, or a thumbnail of a product page indicating the same product as the searched or specified product is included in one page and displayed. .
  • a product page of a product and a product page of the same product are displayed in association with each other, or a thumbnail of a product page indicating the same product as the searched or specified product is included in one page and displayed.
  • it is easy to associate the same products with each other if there is a product code that is common among a plurality of stores.
  • the product page on the electronic commerce site may include various words for so-called SEO (Search Engine Optimization) measures to be displayed at the top in the search results by the search engine.
  • SEO Search Engine Optimization
  • a word for so-called SEO spam word
  • a product page contains many words that are not spam words, it is not possible to sufficiently exclude words that are not necessary for identity determination, and there is a product page that should be judged to be the same as the official product name. In some cases, it was not determined to be the same.
  • an object of the present invention is to more accurately determine the identity of the product name indicated on the product page and the official product name.
  • a product specifying device is a product page acquisition unit that acquires a product page to be processed, and the product page is based on text representing a product related to the product page.
  • a product page acquisition means including a product page title that can be divided into one or more tokens, and a product name acquisition means for acquiring at least one preset product name, wherein the product name is one or more Product name acquisition means including one or more tokens made up of characters, estimation means for estimating the characteristics relating to the number of tokens included in the product page title of the product page, and the characteristics estimated by the estimation means,
  • the first process is executed when it indicates that the number is low
  • the second process is executed when the feature indicates that the number of tokens is equal to or greater than a predetermined level.
  • the execution means calculates a ratio in which one of the token included in the product name and the token included in the product page title is included in the other as a score indicating the identity.
  • a product specifying method is a product specifying method in a product specifying device, and is a product page acquiring step of acquiring a product page to be processed, wherein the product page is a product page related to the product page.
  • the ratio is calculated as a score indicating the identity between the product indicated by the product name and the product related to the product page, and the second processing is performed when one of the token included in the product name and the token included in the product page title is According to the execution step of calculating the ratio included in the other as a score indicating identity, and the score calculated by the first process or the second process, the product name having the same identity as the product page And a specific step of specifying.
  • a product specifying program is a product page acquisition function for acquiring a product page to be processed in a computer, and the product page includes text representing the product related to the product page and at least one product page.
  • a product page acquisition function including a product page title that can be divided into tokens, and a product name acquisition function that acquires at least one preset product name, wherein the product name is a token composed of one or more characters.
  • the estimation function for estimating the feature regarding the number of tokens included in the product page title of the product page, and the feature estimated by the estimation function indicate that the number of tokens is less than a predetermined level If the feature indicates that the number of tokens is equal to or greater than a predetermined level, the second process is executed.
  • the ratio of the other of the token included in the product name and the token included in the product page title is matched between the product indicated by the product name and the product related to the product page. Calculate as a score indicating identity, and the second process calculates, as a score indicating identity, a ratio in which one of the token included in the product name and the token included in the product page title is included in the other.
  • the execution function and a specific function for specifying a product name having the same product as the product page are realized according to the score calculated by the first process or the second process.
  • the characteristic regarding the token number contained in the merchandise page title of a merchandise page is estimated, and the goods and goods which a merchandise name shows by 1st process or 2nd process according to the estimated characteristic.
  • a process of calculating a score indicating the identity with the product related to the page is executed.
  • the first process is a process in which, when the number of tokens included in the product page title is small, a score that appropriately reflects the identity between the product indicated by the product name and the product related to the product page is calculated.
  • the second process is a process in which, when the number of tokens included in the product page title is large, a score that appropriately reflects the identity between the product indicated by the product name and the product related to the product page is calculated. .
  • the first process is performed when the characteristic regarding the estimated number of tokens indicates that the number of tokens is less than a predetermined level
  • the second process is performed when the number of tokens indicates that the number of tokens is equal to or greater than the predetermined level.
  • the product name acquisition unit acquires a product name preset by a person other than the store handling the product related to the processing target product page, and the estimation unit is input by the store According to the feature of one or more product pages, the feature related to the token number of the product page title of the product page to be processed is estimated.
  • the product page used for estimating the characteristics related to the number of tokens of the product page title of the product page to be processed is a product page input by a store handling the product related to the product page, and the product page to be processed is This is a product page that is included and is not limited to the product page to be processed. Since such a product page is suitable for estimating a feature related to the number of tokens of a product page to be processed, a feature related to the number of tokens is estimated with high accuracy.
  • the estimation unit is configured to determine the product page of the product page to be processed based on the amount of data constituting the product page input by the store handling the product related to the product page to be processed. It is good also as estimating the characteristic regarding the token number of a title.
  • the characteristic regarding the token number of the product page title of the product page to be processed is reflected in the amount of data constituting the product page input by the store handling the product related to the product page to be processed. According to the above aspect, since the feature regarding the token number of the product page title of the product page to be processed is estimated based on the data amount, the reliability of the estimated feature is improved.
  • the estimation unit may determine that the number of tokens of the product page title of the product page to be processed is equal to or greater than a predetermined level when the data amount is equal to or greater than the predetermined amount. If the estimated amount of data is less than a predetermined amount, it may be estimated that the number of tokens of the product page title of the product page to be processed is less than a predetermined level.
  • the feature relating to the token number of the product page title of the product page to be processed is appropriately estimated.
  • the estimation unit is configured to determine the product page of the product page to be processed based on the number of words of the text that configures the product page input by the store handling the product related to the product page to be processed. It is good also as estimating the characteristic regarding the token number of a title.
  • the characteristic regarding the token number of the product page title of the product page to be processed is reflected in the number of words of the text constituting the product page input by the store handling the product related to the product page to be processed. According to the above aspect, since the feature related to the token number of the product page title of the product page to be processed is estimated based on the number of words, the reliability of the estimated feature is improved.
  • the estimation unit is configured to process the product page to be processed based on the token number of the product page title included in the product page input by the store that handles the product related to the product page to be processed. It is good also as estimating the characteristic regarding the token number of the product page title.
  • the characteristic regarding the number of tokens of the product page title of the product page to be processed is reflected in the number of tokens included in the product page title of the product page input by the store handling the product related to the product page to be processed. According to the above aspect, since the feature related to the token number of the product page title of the product page to be processed is estimated based on the number of tokens, the reliability of the estimated feature is improved.
  • the estimation unit has a predetermined ratio of the number of tokens of the product page title included in the product page to be processed with respect to the number of tokens included in the product name acquired by the product name acquisition unit. If the percentage is greater than or equal to the percentage, the number of tokens in the product page title of the processing target product page is estimated to be greater than the predetermined level, and if the percentage is less than the predetermined percentage, It may be estimated that the number is less than a predetermined level.
  • the number of tokens of the product page title included in the product page to be processed with respect to the number of tokens included in the product name which directly reflects the characteristics related to the number of tokens of the product page title of the product page to be processed. Since the feature related to the number of tokens is estimated based on the ratio of, the reliability of the estimated feature can be improved.
  • the product name acquisition unit may acquire a product name including at least one product page title token included in the product page to be processed.
  • the number of product names used for processing can be limited by setting the product name including the token of the product page title included in the product page to be processed, thereby reducing the processing load. Is done.
  • FIG. 1 It is a figure which shows the score which shows the identity with each goods name calculated about the goods page title shown in FIG. It is a flowchart which shows the processing content of the goods specific method implemented in a goods specific device. It is a figure which shows the structure of a goods specific program.
  • FIG. 1 is a block diagram showing a functional configuration of the product identification device 1 according to the present embodiment.
  • the product specifying device 1 is a device for specifying a product name having the same product item as the product page.
  • the product page is, for example, a web page that presents a product on an electronic commerce site, and includes a product page title.
  • the product identification device 1 determines the identity between the product page title included in the product page to be processed and the official product name set in advance. Thereby, the official product name determined to have the same identity as the product page title is specified as the product name having the same identity as the product page and the product. That is, the product indicated by the product page is the same as the product indicated by the specified product name.
  • the product page title included in the product page consists of text representing the product related to the product page. Specifically, since the product page title includes text representing the product set by the store that handles the product, the text may include the product name of the product. Therefore, the product page title may include a word indicating an official product name and other words. In addition, the product page title may include various words for SEO countermeasures in addition to the word representing the official product name, for example. In this way, the product page title including various words can be divided into tokens by tokenizing (sharing).
  • This token can be obtained, for example, by dividing the product page title according to a predetermined rule such as setting a blank as a boundary.
  • the token is composed of one or more characters and may be a single word or a collection of characters having no meaning.
  • the product name is an official name set in advance for the product as described above.
  • the product name includes one or more tokens. Accordingly, the product page title of the product page often includes a token included in the official product name of the product indicated by the product page and a token not included in the official product name.
  • the product identification device 1 of the present embodiment can identify the official product name having the same identity as the product name indicated by the product page, for example, in the electronic commerce site, the product page related to the same product is accurately displayed. Can be displayed in association. For example, in association with one product page designated by the user or one product page searched, thumbnails of a plurality of product pages indicating the same product can be included in one page and displayed.
  • the product identification device 1 functionally includes a product page acquisition unit 11 (product page acquisition unit), a product name acquisition unit 12 (product name acquisition unit), an estimation unit 13 (estimation unit), An execution unit 14 (execution means) and a specification unit 15 (specification means) are provided.
  • the product specifying device 1 can access storage means such as a product page storage unit 21 and a product name storage unit 22.
  • the product page storage unit 21 and the product name storage unit 22 may be provided in the product specifying device 1 or may be configured as an external storage unit provided so as to be accessible from the product specifying device 1.
  • FIG. 2 is a hardware configuration diagram of the product identification device 1.
  • the product identification device 1 physically includes a CPU 101, a main storage device 102 composed of a memory such as a RAM and a ROM, an auxiliary storage device 103 composed of a hard disk, a communication control device 104, and the like. It is comprised as a computer system containing.
  • the product identification device 1 may further include an input device 105 such as a keyboard, a touch panel, and a mouse, which are input devices, and an output device 106 such as a display.
  • FIG. 1 operate the communication control device 104 and the like under the control of the CPU 101 by reading predetermined computer software on the hardware such as the CPU 101 and the main storage device 102 shown in FIG. In addition, it is realized by reading and writing data in the main storage device 102 and the auxiliary storage device 103. Data and databases necessary for processing are stored in the main storage device 102 and the auxiliary storage device 103.
  • the product page storage unit 21 is storage means for storing product page data.
  • This product page is a page displayed on an electronic commerce site, and represents a product handled by one or more stores that sell products on the electronic commerce site.
  • FIG. 3 is a diagram illustrating an example of a product page displayed based on the data stored in the product page storage unit 21.
  • the product page M includes a product page title T.
  • the product page M may further include a product image G and a product description H.
  • the product page title T includes text representing the product related to the product page, and includes a word indicating an official product name and a word indicating other than the official product name.
  • the product page title T is attached with a predetermined tag indicating, for example, a title or a heading in the product page data. Therefore, by searching for the tag, the product page title is obtained from the product page data. It is possible to extract T. Further, in the product page data, text having a font size larger than other texts or text expressed in bold may be extracted as the product page title T.
  • the product name storage unit 22 is a storage unit that stores an official product name of a product handled in the electronic commerce site to which the product specifying device 1 belongs.
  • the official product name may be set and registered in advance by an administrator of the electronic commerce site and a store belonging to the electronic commerce site.
  • FIG. 4 is a diagram illustrating an example of product names stored in the product name storage unit 22. As shown in FIG. 4, the product name storage unit 22 stores various product names such as “brandA abc08-bk eco”.
  • the product page acquisition unit 11 is a part that acquires a product page to be processed.
  • An example of the product page acquired by the product page acquisition unit 11 is as shown in FIG.
  • FIG. 5 is a diagram illustrating an example of the product page title extracted from the product page M to be processed. That is, product page title T 1 shown in FIG. 5 is a text obtained by extracting the product page title T included in the product page M shown in FIG.
  • the product page title T 1 can be divided into a plurality of tokens t 11 to t 15 as shown in FIG.
  • the product page acquisition unit 11 may further acquire product pages other than the product page to be processed, which are input by a store that handles products related to the product page to be processed. . Specifically, since the product page to be processed is associated with the identifier of the store that handles the product related to the product page, the product page acquisition unit 11 stores the product page having the identifier of the store in the product page. It can be extracted from the unit 21.
  • the product name acquisition unit 12 is a part that acquires one or more product names. Specifically, the product name acquisition unit 12 acquires the official product name stored in the product name storage unit 22.
  • the product name acquired by the product name acquisition unit 12 is a product name set by a person other than the store, unlike the product name set as the product page title by the store handling the product related to the product page.
  • the product name acquired by the product name acquisition unit 12 includes one or more tokens.
  • the product name acquisition unit 12 may acquire a product name including at least one product page title token included in the product page to be processed. For example, when the product page title T shown in FIG. 5 is extracted from the processing target product page M acquired by the product page acquisition unit 11, the product name acquisition unit 12 selects any of the tokens t 11 to t 15 . The product name including the above is extracted from the product name storage unit 22.
  • FIG. 6 is a diagram showing product names n1 to n4 including any of tokens t 11 to t 15 acquired from the product name storage unit 22 by the product name acquisition unit 12.
  • the trade name n1 includes tokens t 11 “brandA”, t 12 “abc08-bk”, and t 13 “eco”.
  • the product name n2 and the product name n3 include a token t 11 “brandA”.
  • the product name n4 includes tokens t 11 “brandA” and t 13 “eco”.
  • the number of product names used for processing can be limited by setting the product name including the token of the product page title included in the product page to be processed, so the processing load can be reduced. It becomes.
  • the estimation unit 13 is a part that estimates a feature related to the number of tokens included in the product page title of the product page to be processed. Specifically, the estimation unit 13 determines the processing target according to the characteristics of one or more product pages (not limited to the processing target product page) input by a store that handles the products related to the processing target product page. The characteristic regarding the token number of the product page title of the product page is estimated.
  • the product page acquisition unit 11 can acquire a product page (including a product page other than the processing target product page and the processing target product page) input by the store that handles the product related to the processing target product page. Therefore, the estimation unit 13 acquires the product page used for the estimation process via the product page acquisition unit 11.
  • the feature relating to the number of tokens can indicate, for example, that the number of tokens is less than a predetermined level, or that the number of tokens is a predetermined level or more.
  • the estimation unit 13 estimates the characteristics related to the token number of the product page title of the product page to be processed based on the data amount constituting the product page input by the store handling the product related to the product page to be processed. Also good.
  • the characteristic regarding the token number of the product page title of the product page to be processed is reflected in the amount of data constituting the product page input by the store handling the product related to the product page to be processed. That is, as the amount of data constituting a plurality of product pages input by a store increases, the number of tokens of the product page title of the product page of the store tends to increase.
  • the characteristics related to the number of tokens of the product page title of the product page to be processed are estimated based on the data amount constituting the product page input by the store handling the product related to the product page to be processed.
  • the reliability of the feature related to the estimated number of tokens is improved.
  • the estimation unit 13 determines the product page title of the product page to be processed when the data amount of the product page input by the store handling the product related to the product page to be processed is equal to or greater than a predetermined amount.
  • a predetermined amount When the number of tokens is estimated to be greater than or equal to a predetermined level and the amount of data is less than the predetermined amount, it is estimated that the number of tokens of the product page title of the product page to be processed is less than the predetermined level.
  • a statistical value such as an average value or a total value of the data amounts of a plurality of product pages may be used.
  • the estimation unit 13 estimates a feature related to the number of tokens of the product page title of the product page to be processed based on the number of words of the text that configures the product page input by the store that handles the product related to the product page to be processed. It is good to do. That is, in the above estimation process, the data amount constituting the product page input by the store handling the product related to the product page to be processed is used, but the number of text words constituting the product page is used as this data amount. It is good.
  • the estimation unit 13 determines the product on the product page to be processed. If the number of tokens in the page title is estimated to be greater than or equal to a predetermined level and the number of words is less than a predetermined amount, it is estimated that the number of tokens in the product page title of the product page to be processed is less than a predetermined level. In the comparison between the number of words constituting the product page and a predetermined amount, a statistical value such as an average value or a total value of the number of words of a plurality of product pages may be used.
  • the estimation unit 13 relates to the number of tokens of the product page title of the product page to be processed based on the number of tokens of the product page title included in the product page input by the store handling the product related to the product page to be processed.
  • the feature may be estimated. That is, in the estimation process, the data amount or the number of words constituting the product page input by the store handling the product related to the product page to be processed is used, but instead of these, the product page title of the product page included in the product page is used. The number of tokens may be used.
  • the number of product page title tokens included in a plurality of product pages input by a store increases, the number of product page title tokens of the product page to be processed in the store tends to increase.
  • the number of tokens of the product page title of the product page to be processed based on the number of tokens of the product page title included in the product page input by the store handling the product related to the product page to be processed Therefore, the reliability of the estimated feature is improved.
  • the estimation unit 13 performs the product to be processed. If the number of tokens in the product page title of the page is estimated to be greater than or equal to a predetermined level and the number of tokens is less than the predetermined amount, the number of tokens in the product page title of the product page to be processed is less than the predetermined level Estimated. Note that in the comparison between the number of product page title tokens included in the product page and a predetermined amount, a statistical value such as an average value or total value of the number of product page title tokens in a plurality of product pages may be used.
  • the estimation unit 13 If the number of tokens in the product page title of the processing target product page is estimated to be greater than the predetermined level and the ratio is less than the predetermined level, the number of tokens in the product page title of the processing target product page is less than the predetermined level It is good also as estimating.
  • a product name having the maximum number of tokens may be used for estimation among the plurality of product names.
  • the index value such as the ratio of the number of tokens of the product page title included in the processing product page to the number of tokens included in the product name directly reflects the characteristics related to the number of tokens of the product page title of the processing product page. The Since the feature regarding the number of tokens is estimated based on the index value, the reliability of the estimated feature can be improved.
  • the execution unit 14 executes the first process when the feature related to the number of tokens included in the product page title of the product page estimated by the estimation unit 13 indicates that the number of tokens is less than a predetermined level.
  • the second processing is executed.
  • the first process is a process in which, when the number of tokens included in the product page title is small, a score that appropriately reflects the identity between the product indicated by the product name and the product related to the product page is calculated.
  • the second process is a process in which, when the number of tokens included in the product page title is large, a score that appropriately reflects the identity between the product indicated by the product name and the product related to the product page is calculated.
  • the first process is a score indicating the identity between the product indicated by the product name and the product related to the product page, with the ratio of the other of the token included in the product name and the token included in the product page title being matched. Is calculated as follows.
  • the first process may be, for example, a process of calculating a Jaccard coefficient of a set of tokens included in the product name and a set of tokens included in the product page title of the product page to be processed as a score.
  • the Jaccard coefficient is calculated as the first score, but the index value indicating the ratio of the other match to one of the token included in the product name and the token included in the product page title. If so, the first score is not limited to the Jaccard coefficient.
  • the ratio of one of the token included in the product name and the token included in the product page title is included in the other, and the identity between the product indicated by the product name and the product related to the product page is determined. It is a process which calculates as a score to show.
  • the token included in the product name and the token included in the product page title are shared with respect to the smaller number of tokens included in the product name and the token number included in the product page title. It may be a process of calculating the ratio of the number of tokens that have occurred as a score.
  • the product page title T 1 and names n1 specifically described the score calculation by the first and second processing. First, calculation of the score A by the first process will be described.
  • the execution unit 14 divides the product page title T 1 “brandA abc08-bk eco air cleaner” into five tokens.
  • the five tokens divided are the token t 11 “brandA”, the token t 12 “abc08-bk”, the token t 13 “eco”, the token t 14 “air”, and the token t 15 “purifier”.
  • the product name n1 “brandA abc08-bk eco” includes three tokens (“brandA”, “abc08-bk”, “eco”).
  • the score A related to the product name n1 is significantly larger than the score A related to the product names n2 to n4.
  • none of the scores B relating to the product names n1 to n4 show a significantly large value.
  • the score A calculated by the first processing Is preferred.
  • FIG. 8 shows a product page title T 2 containing a number of tokens from the commodity page title T 1 shown in FIG.
  • Product page title T 2 can be divided into 18 tokens.
  • 9, calculates a product page title T 2 of the product page to be processed shown in FIG. 8, with the respective trade names n1 ⁇ n4 shown in FIG. 6, according to the first and second processing of scores indicating the identity Results are shown.
  • the score A is a score calculated by the first process
  • the score B is a score calculated by the second process.
  • the execution unit 14 divides the product page title T 2 “brandA abc08-bk eco air purifier humidification function pollen dust black free shipping cash on delivery impossible card OK energy saving 30 m 2 ” into 18 tokens.
  • the divided 18 tokens are token t 201 “brandA”, token t 202 “abc08-bk”, token t 203 “eco”, token t 204 “air”, token t 205 “cleaner”, token t 206 “ Humidification ”, token t 207 “ function ”, token t 208 “ pollen ”, token t 209 “ dust ”, token t 210 “ black ”, token t 211 “ shipping ”, token t 212 “ free ”, token t 213 “ price ” Pull ”, token t 214 “ impossible ”, token t 215 “ card ”, token t 216 “ OK ”, token t 217 “ energy saving ”, token t 218 “ 30 m 2 ”.
  • the product name n1 “brandA abc08-bk
  • the score B related to the product name n1 is significantly larger than the score B related to the product names n2 to n4. Therefore, in determining the identity between the product page title T 2 and the product names that contain a relatively large number of tokens, the score B calculated by the second process is calculated from the score A calculated by the first process. Is preferred.
  • the token number is relatively small items page title such as Product Page Title T 1 is estimated to have a characteristic number of tokens is smaller, also the token number is relatively large product page titles like products page title T 2 are, are estimated to have a number of features many tokens.
  • token number is estimated, the identity of the commodity page title T 1 and each product name is determined based on the score calculated by the first processing, commodity page title T 2 And the identity of each product name are determined based on the score calculated by the second process.
  • the predetermined value serving as a reference in estimating the characteristics of the number of tokens is, for example, a value set by design.
  • the specifying unit 15 is a part that specifies a product name having the same identity between the product page and the product according to the score calculated by the first process or the second process.
  • the specifying unit 15 when a specific product name identity with the product page containing product page title T 1, since the score by the first process is calculated, the specifying unit 15, according to the score A shown in FIG. 7 The product name n1 is specified as the product name having the identity.
  • the specifying unit 15 the score B shown in FIG. 9 Accordingly, the product name n1 is specified as the product name having the same identity.
  • the specifying unit 15 may store the official product name specified in this manner in the product page storage unit 21 in association with the product page. Further, the specifying unit 15 may generate association data that forms a group of a plurality of product pages having the same product name specified as having the same identity.
  • the product identification device 1 monitors the update status of the product page title of the product page in the product page storage unit 21 by the store, and when the degree of change of the product page title is within a predetermined range, In the process and the second process, the score is calculated by the process used before, and when the degree of change of the product page title exceeds a predetermined range, the estimation unit 13 performs the characteristic estimation process regarding the number of tokens, The score may be calculated by one of the first process and the second process according to the estimated feature.
  • the product identification device 1 has a frequency or rate at which a score is calculated by the second process as compared to the first process for the process of identifying a product name that is identical to the product page input by a certain store. In the case where it is equal to or greater than a predetermined level, it may further include a notification unit that notifies the store of a request for suppression of including words other than the official product name (for example, so-called spam words) in the product page. .
  • FIG. 10 is a flowchart showing the processing content of the product specifying method implemented in the product specifying device 1.
  • the product page acquisition unit 11 acquires a product page to be processed (S1).
  • the product name acquisition unit 12 acquires the official product name stored in the product name storage unit 22 (S2).
  • the estimation unit 13 estimates a feature relating to the number of tokens included in the product page title of the product page to be processed (S3). Subsequently, the execution unit 14 determines whether or not the feature related to the number of tokens included in the product page title of the product page estimated in Step S3 indicates that the number of tokens is less than a predetermined level (S4). If it is determined that the characteristic regarding the number of tokens indicates that the number of tokens is less than a predetermined level, the process proceeds to step S5. On the other hand, if it is not determined that the feature related to the number of tokens indicates that the number of tokens is less than a predetermined level, the process proceeds to step S6.
  • step S5 the execution unit 14 calculates a score indicating the identity between the product indicated by the product name and the product related to the product page by the first process (S5).
  • step S6 the execution unit 14 calculates a score indicating the identity between the product indicated by the product name and the product related to the product page by the second process (S6).
  • the specifying unit 15 specifies a product name having the same identity as the product page according to the score calculated by the first process or the second process (S7).
  • the product specifying program p1 includes a main module m10, a product page acquisition module m11, a product name acquisition module m12, an estimation module m13, an execution module m14, and a specification module m15.
  • the main module m10 is a part that comprehensively controls the product specifying process.
  • the functions realized by executing the product page acquisition module m11, the product name acquisition module m12, the estimation module m13, the execution module m14, and the specific module m15 are each a product page acquisition unit 11 of the product specification device 1 shown in FIG.
  • the functions of the product name acquisition unit 12, the estimation unit 13, the execution unit 14, and the specification unit 15 are the same.
  • the product specifying program p1 is provided by a storage medium d1 such as a CD-ROM, DVD-ROM, or semiconductor memory. Further, the product identification program p1 may be provided via a communication network as a computer data signal superimposed on a carrier wave.
  • the feature regarding the number of tokens included in the product page title of the product page is estimated, and according to the estimated feature,
  • a process of calculating a score indicating the identity between the product indicated by the product name and the product related to the product page is executed.
  • the first process is a process in which, when the number of tokens included in the product page title is small, a score that appropriately reflects the identity between the product indicated by the product name and the product related to the product page is calculated.
  • the second process is a process in which, when the number of tokens included in the product page title is large, a score that appropriately reflects the identity between the product indicated by the product name and the product related to the product page is calculated. .
  • the first process is performed when the characteristic regarding the estimated number of tokens indicates that the number of tokens is less than a predetermined level, and the second process is performed when the number of tokens indicates that the number of tokens is equal to or greater than the predetermined level. Is executed, a score that appropriately reflects the identity is calculated according to the product page to be processed. Since the score appropriately reflecting the identity is used, it is possible to specify the product name having the same identity as the product page with high accuracy.

Landscapes

  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

商品特定装置は、処理対象の商品ページを取得する商品ページ取得手段であって、商品ページは、該商品ページに係る商品を表すテキストからなると共に1以上の文字からなるトークンに分割可能である商品ページタイトルを含む、商品ページ取得手段と、少なくとも一つの予め設定された商品名を取得する取得手段であって、商品名は、トークンを1以上含む商品名取得手段と、商品ページの商品ページタイトルに含まれるトークン数に関する特徴を推定する推定手段と、推定手段により推定された特徴が、トークン数が所定の程度より少ないことを示す場合にはかかる場合に好適な第1の処理を実行し、推定された特徴が、トークン数が所定の程度以上であることを示す場合にはかかる場合に好適な第2の処理を実行する実行手段と、第1の処理または第2の処理により算出されたスコアに応じて、商品ページと商品の同一性を有する商品名を特定する特定手段と、を備える。

Description

商品特定装置、商品特定方法及び商品特定プログラム
 本発明は、商品特定装置、商品特定方法及び商品特定プログラムに関する。
 従来、2つのテキストデータの内容の同一性を判断する技術が知られている。例えば、特許文献1には、一方のテキストデータを他方のテキストデータに一致させるための変換操作に着目して2つのテキストデータの同一性判断する技術が記載されている。
特開2010-134501号公報
 同一の商品を異なる複数の店舗が販売しうる電子商取引サイトでは、同一の商品同士を関連付ける必要が生じることがある。例えば、ある商品の商品ページと同一の商品の商品ページとを関連付けて表示させたり、検索または指定された商品と同一の商品を示す商品ページのサムネイルを一つのページに含ませて表示させたりする。このように、同一の商品同士を関連付けるには、複数の店舗間で共通となる商品コードがあれば容易である。
しかし共通となる商品コードが関連付けられていない商品がある場合には、正式な商品名リストと商品ページで扱う商品名とを照合する必要がある。一方、電子商取引サイトにおける商品ページには、検索エンジンによる検索結果において上位に表示されるようにする、いわゆるSEO(Search Engine Optimization)対策のために、様々な語が含まれている場合がある。電子商取引サイトの商品ページが示す商品名と正式な商品名との同一性を判断するために、SEO対策のための語(いわゆるスパムワード)を、辞書を用いることで同一性判断処理において不要な語を除外することが考えられる。しかしながら、商品ページにスパムワードではない語が多数含まれている場合には、同一性判断に不要な語を十分に除外できず、正式な商品名と同一であると判断されるべき商品ページが、同一であると判断されない場合があった。
 そこで本発明は、商品ページが示す商品名と正式な商品名との同一性をより精度良く判断することを目的とする。
 上記課題を解決するために、本発明の一形態に係る商品特定装置は、処理対象の商品ページを取得する商品ページ取得手段であって、商品ページは、該商品ページに係る商品を表すテキストからなると共に1以上のトークンに分割可能である商品ページタイトルを含む、商品ページ取得手段と、少なくとも一つの予め設定された商品名を取得する商品名取得手段であって、商品名は、1以上の文字からなるトークンを1以上含む商品名取得手段と、商品ページの商品ページタイトルに含まれるトークン数に関する特徴を推定する推定手段と、推定手段により推定された特徴が、トークン数が所定の程度より少ないことを示す場合には第1の処理を実行し、特徴が、トークン数が所定の程度以上であることを示す場合には第2の処理を実行する実行手段であって、第1の処理は、商品名に含まれるトークン及び商品ページタイトルに含まれるトークンのうちの一方に対する他方の一致の割合を、商品名が示す商品と商品ページに係る商品との同一性を示すスコアとして算出し、第2の処理は、商品名に含まれるトークン及び商品ページタイトルに含まれるトークンのうちの一方が他方に含まれる割合を、同一性を示すスコアとして算出する、実行手段と、第1の処理または第2の処理により算出されたスコアに応じて、商品ページと商品の同一性を有する商品名を特定する特定手段と、を備える。
 本発明の一形態に係る商品特定方法は、商品特定装置における商品特定方法であって、処理対象の商品ページを取得する商品ページ取得ステップであって、商品ページは、該商品ページに係る商品を表すテキストからなると共に1以上のトークンに分割可能である商品ページタイトルを含む、商品ページ取得ステップと、少なくとも一つの予め設定された商品名を取得する商品名取得ステップであって、商品名は、1以上の文字からなるトークンを1以上含む、商品名取得ステップと、商品ページの商品ページタイトルに含まれるトークン数に関する特徴を推定する推定ステップと、推定ステップにおいて推定された特徴が、トークン数が所定の程度より少ないことを示す場合には第1の処理を実行し、特徴が、トークン数が所定の程度以上であることを示す場合には第2の処理を実行する実行ステップであって、第1の処理は、商品名に含まれるトークン及び商品ページタイトルに含まれるトークンのうちの一方に対する他方の一致の割合を、商品名が示す商品と商品ページに係る商品との同一性を示すスコアとして算出し、第2の処理は、商品名に含まれるトークン及び商品ページタイトルに含まれるトークンのうちの一方が他方に含まれる割合を、同一性を示すスコアとして算出する、実行ステップと、第1の処理または第2の処理により算出されたスコアに応じて、商品ページと商品の同一性を有する商品名を特定する特定ステップと、を有する。
 本発明の一形態に係る商品特定プログラムは、コンピュータに、処理対象の商品ページを取得する商品ページ取得機能であって、商品ページは、該商品ページに係る商品を表すテキストからなると共に1以上のトークンに分割可能である商品ページタイトルを含む、商品ページ取得機能と、少なくとも一つの予め設定された商品名を取得する商品名取得機能であって、商品名は、1以上の文字からなるトークンを1以上含む商品名取得機能と、商品ページの商品ページタイトルに含まれるトークン数に関する特徴を推定する推定機能と、推定機能により推定された特徴が、トークン数が所定の程度より少ないことを示す場合には第1の処理を実行し、特徴が、トークン数が所定の程度以上であることを示す場合には第2の処理を実行する実行機能であって、第1の処理は、商品名に含まれるトークン及び商品ページタイトルに含まれるトークンのうちの一方に対する他方の一致の割合を、商品名が示す商品と商品ページに係る商品との同一性を示すスコアとして算出し、第2の処理は、商品名に含まれるトークン及び商品ページタイトルに含まれるトークンのうちの一方が他方に含まれる割合を、同一性を示すスコアとして算出する、実行機能と、第1の処理または第2の処理により算出されたスコアに応じて、商品ページと商品の同一性を有する商品名を特定する特定機能と、を実現させる。
 上記の形態によれば、商品ページの商品ページタイトルに含まれるトークン数に関する特徴が推定され、推定された特徴に応じて、第1の処理または第2の処理により、商品名が示す商品と商品ページに係る商品との同一性を示すスコアを算出する処理が実行される。第1の処理は、商品ページタイトルに含まれるトークン数が少ない場合に、商品名が示す商品と商品ページに係る商品との同一性が好適に反映されたスコアが算出される処理である。一方、第2の処理は、商品ページタイトルに含まれるトークン数が多い場合に、商品名が示す商品と商品ページに係る商品との同一性が好適に反映されたスコアが算出される処理である。推定されたトークン数に関する特徴が、トークン数が所定の程度より少ないことを示す場合には第1の処理が実行され、トークン数が所定の程度以上であることを示す場合には第2の処理が実行されるので、処理対象の商品ページに応じて、同一性が適切に反映されたスコアが算出される。そして、同一性が適切に反映されたスコアが用いられるので、精度良く、商品ページと同一性を有する商品名を特定することが可能となる。
 別の形態に係る商品特定装置では、商品名取得手段は、処理対象の商品ページに係る商品を扱う店舗以外の者により予め設定された商品名を取得し、推定手段は、店舗によって入力された1以上の商品ページの特徴に応じて、該処理対象の商品ページの商品ページタイトルのトークン数に関する特徴を推定する。
 上記形態において、店舗以外の者により予め設定された商品名が取得されるので、商品ページとの同一性の判断に好適な商品名が取得される。また、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴の推定に用いられる商品ページは、当該商品ページに係る商品を扱う店舗によって入力された商品ページであって、処理対象の商品ページを含むと共に処理対象の商品ページに限定されない商品ページである。このような商品ページは、処理対象の商品ページのトークン数に関する特徴の推定に好適であるので、トークン数に関する特徴が精度良く推定される。
 さらに別の形態に係る商品特定装置では、推定手段は、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページを構成するデータ量に基づいて、該処理対象の商品ページの商品ページタイトルのトークン数に関する特徴を推定することとしてもよい。
 処理対象の商品ページの商品ページタイトルのトークン数に関する特徴は、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページを構成するデータ量に反映される。上記形態によれば、かかるデータ量に基づいて、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴が推定されるので、推定された特徴の信頼性が向上される。
 さらに別の形態に係る商品特定装置では、上記形態において、推定手段は、データ量が所定量以上である場合に、処理対象の商品ページの商品ページタイトルのトークン数が所定の程度以上であると推定し、データ量が所定量より少ない場合には、処理対象の商品ページの商品ページタイトルのトークン数が所定の程度より少ないと推定することとしてもよい。
 上記形態によれば、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴が適切に推定される。
 さらに別の形態に係る商品特定装置では、推定手段は、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページを構成するテキストの語数に基づいて、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴を推定することとしてもよい。
 処理対象の商品ページの商品ページタイトルのトークン数に関する特徴は、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページを構成するテキストの語数に反映される。上記形態によれば、かかる語数に基づいて、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴が推定されるので、推定された特徴の信頼性が向上される。
 さらに別の形態に係る商品特定装置では、推定手段は、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページに含まれる商品ページタイトルのトークン数に基づいて、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴を推定することとしてもよい。
 処理対象の商品ページの商品ページタイトルのトークン数に関する特徴は、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページの商品ページタイトルに含まれるトークン数に反映される。上記形態によれば、かかるトークン数に基づいて、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴が推定されるので、推定された特徴の信頼性が向上される。
 さらに別の形態に係る商品特定装置では、推定手段は、商品名取得手段により取得された商品名に含まれるトークン数に対する、処理対象の商品ページに含まれる商品ページタイトルのトークン数の割合が所定割合以上である場合に、処理対象の商品ページの商品ページタイトルのトークン数が所定の程度より多いと推定し、割合が所定割合未満である場合に、処理対象の商品ページの商品ページタイトルのトークン数が所定の程度より少ないと推定することとしてもよい。
 上記形態によれば、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴が直接的に反映された、商品名に含まれるトークン数に対する処理対象の商品ページに含まれる商品ページタイトルのトークン数の割合に基づいて、該トークン数に関する特徴が推定されるので、推定された特徴の信頼性を向上させることができる。
 さらに別の形態に係る商品特定装置では、商品名取得手段は、処理対象の商品ページに含まれる商品ページタイトルのトークンを少なくとも一つ含む商品名を取得することとしてもよい。
 上記形態によれば、処理対象の商品ページに含まれる商品ページタイトルのトークンを含む商品名を処理対象とすることにより、処理に用いる商品名の数を限定することができるので、処理負荷が軽減される。
 本発明の一側面によれば、商品ページが示す商品名と正式な商品名との同一性をより精度良く判断することが可能となる。
商品特定装置の機能構成を示すブロック図である。 商品特定装置のハードウェア構成を示す図である。 商品名記憶部に記憶されたデータの例を示す図である。 商品ページの例を示す図である。 商品ページの商品ページタイトルを分割して得られた複数のトークンの例を示す図である。 処理に用いるために取得した商品名の例を示す図である。 図5に示す商品ページタイトルについて算出された、各商品名との同一性を示すスコアを示す図である。 商品ページの商品ページタイトルを分割して得られた複数のトークンの例を示す図である。 図8に示す商品ページタイトルについて算出された、各商品名との同一性を示すスコアを示す図である。 商品特定装置において実施される商品特定方法の処理内容を示すフローチャートである。 商品特定プログラムの構成を示す図である。
 以下、添付図面を参照しながら本発明の実施形態を詳細に説明する。なお、図面の説明において同一又は同等の要素には同一の符号を付し、重複する説明を省略する。
 図1は、本実施形態に係る商品特定装置1の機能的構成を示すブロック図である。商品特定装置1は、商品ページと商品の同一性を有する商品名を特定する装置である。商品ページは、例えば、電子商取引サイトにおいて商品を提示するウェブページであって、商品ページタイトルを含む。
 具体的には、商品特定装置1は、処理対象の商品ページに含まれる商品ページタイトルと、予め設定された正式な商品名との同一性を判断する。これにより、商品ページタイトルと同一性を有すると判断された正式な商品名が、商品ページと商品の同一性を有する商品名として特定される。即ち、当該商品ページが示す商品と、特定された商品名が示す商品とは同一である。
 商品ページに含まれる商品ページタイトルは、当該商品ページに係る商品を表すテキストからなる。具体的には、商品ページタイトルは、商品を扱う店舗により設定された、当該商品を表すテキストを含むので、そのテキストは当該商品の商品名を含む場合がある。従って、商品ページタイトルは、正式な商品名を示す語及びそれ以外の語も含む場合がある。また、商品ページタイトルは、例えば、正式な商品名を表す語以外に、SEO対策のための様々な語を含む場合がある。このように、様々な語を含む商品ページタイトルは、トークナイズ(分かち書き)することにより、トークンに分割可能である。
 このトークンは、例えば、空白を境界とすること等の所定のルールに従って商品ページタイトルを分割することにより得られる。トークンは、1以上の文字からなり、1つの語であってもよいし、意味を有さない文字の集まりであってもよい。
 商品名は、上述のとおり、商品について予め設定された正式な名称である。商品名は、1以上のトークンを含んで構成される。従って、商品ページの商品ページタイトルは、当該商品ページが示す商品の正式な商品名に含まれるトークン、及び、正式な商品名に含まれないトークンを含む場合が多い。
 本実施形態の商品特定装置1により、商品ページが示す商品名と同一性を有する正式な商品名を特定することができるので、例えば、電子商取引サイトでは、同一の商品に係る商品ページを精度良く関連付けて表示することができる。例えば、ユーザにより指定された一の商品ページや検索された一の商品ページに関連付けて、同一商品を示す複数の商品ページのサムネイルを一つのページに含ませて表示することが可能となる。
 図1に示すように、商品特定装置1は、機能的には、商品ページ取得部11(商品ページ取得手段)、商品名取得部12(商品名取得手段)、推定部13(推定手段)、実行部14(実行手段)及び特定部15(特定手段)を備える。
 また商品特定装置1は、商品ページ記憶部21及び商品名記憶部22といった記憶手段にアクセス可能である。商品ページ記憶部21及び商品名記憶部22は、商品特定装置1に備えられることとしてもよいし、商品特定装置1からのアクセスが可能に設けられた外部の記憶手段として構成されてもよい。
 図2は、商品特定装置1のハードウェア構成図である。商品特定装置1は、物理的には、図2に示すように、CPU101、RAM及びROMといったメモリにより構成される主記憶装置102、ハードディスク等で構成される補助記憶装置103、通信制御装置104などを含むコンピュータシステムとして構成されている。商品特定装置1は、入力デバイスであるキーボード、タッチパネル、マウス等の入力装置105及びディスプレイ等の出力装置106をさらに含むこととしてもよい。
 図1に示した各機能は、図2に示すCPU101、主記憶装置102等のハードウェア上に所定のコンピュータソフトウェアを読み込ませることにより、CPU101の制御のもとで通信制御装置104等を動作させるとともに、主記憶装置102や補助記憶装置103におけるデータの読み出し及び書き込みを行うことで実現される。処理に必要なデータやデータベースは主記憶装置102や補助記憶装置103内に格納される。
 再び図2を参照して、商品特定装置1の各機能部の説明に先立って、商品ページ記憶部21及び商品名記憶部22を説明する。商品ページ記憶部21は、商品ページのデータを記憶している記憶手段である。この商品ページは、電子商取引サイトにおいて表示されるページであって、当該電子商取引サイトにおいて商品を販売する一以上の店舗により扱われる商品を表す。
 図3は、商品ページ記憶部21に記憶されているデータに基づき表示される商品ページの例を示す図である。商品ページMは、商品ページタイトルTを含む。商品ページMは、商品画像G及び商品説明Hを更に含んでもよい。商品ページタイトルTは、前述のとおり、当該商品ページに係る商品を表すテキストからなり、正式な商品名を示す語及び正式な商品名以外を示す語も含む。商品ページタイトルTには、商品ページのデータにおいて、例えば、タイトルや見出しであることを示す所定のタグが付されているので、そのタグを検索すること等により、商品ページのデータから商品ページタイトルTを抽出することが可能である。また、商品ページのデータにおいて、フォントサイズが他のテキストより大きいテキストや、太字で表されたテキストを商品ページタイトルTとして抽出することとしてもよい。
 商品名記憶部22は、商品特定装置1が属する電子商取引サイトにおいて扱われている商品の正式な商品名を記憶している記憶手段である。正式な商品名は、当該電子商取引サイト及び電子商取引サイトに属する店舗等の管理者により、予め設定及び登録されることとしてもよい。
 図4は、商品名記憶部22に記憶されている商品名の例を示す図である。図4に示すように、商品名記憶部22には、例えば「brandA abc08-bk eco」等の種々の商品名が記憶されている。
 続いて、商品特定装置1の各機能部を説明する。商品ページ取得部11は、処理対象の商品ページを取得する部分である。商品ページ取得部11により取得される商品ページの例は、図3に示したとおりである。図5は、処理対象の商品ページMから抽出された商品ページタイトルの例を示す図である。即ち、図5に示される商品ページタイトルTは、図3に示される商品ページMに含まれる商品ページタイトルTを抽出して得られたテキストである。商品ページタイトルTは、図5に示すように、複数のトークンt11~t15に分割可能である。
 また、商品ページ取得部11は、処理対象の商品ページに加えて、処理対象の商品ページに係る商品を扱う店舗によって入力された、処理対象の商品ページ以外の商品ページを更に取得できることとしてもよい。具体的には、処理対象の商品ページには、当該商品ページに係る商品を扱う店舗の識別子が関連付けられているので、商品ページ取得部11は、当該店舗の識別子を有する商品ページを商品ページ記憶部21から抽出することができる。
 商品名取得部12は、一以上の商品名を取得する部分である。具体的には、商品名取得部12は、商品名記憶部22に記憶された正式な商品名を取得する。商品名取得部12により取得される商品名は、商品ページに係る商品を扱う店舗によって商品ページタイトルとして設定されるような商品名とは異なり、店舗以外の者により設定された商品名であって、当該電子商取引サイトの管理者等により、商品について予め設定された正式な名称である。また、商品名取得部12により取得される商品名は、1以上のトークンを含んで構成される。
 商品名取得部12は、処理対象の商品ページに含まれる商品ページタイトルのトークンを少なくとも一つ含む商品名を取得することとしてもよい。例えば、商品ページ取得部11により取得された処理対象の商品ページMから、図5に示す商品ページタイトルTが抽出された場合には、商品名取得部12は、トークンt11~t15のいずれかを含む商品名を、商品名記憶部22から抽出する。図6は、商品名取得部12により商品名記憶部22から取得された、トークンt11~t15のいずれかを含む商品名n1~n4を示す図である。
 例えば、商品名n1は、トークンt11「brandA」、t12「abc08-bk」及びt13「eco」を含む。また、商品名n2及び商品名n3は、トークンt11「brandA」を含む。また、商品名n4は、トークンt11「brandA」及びt13「eco」を含む。
 このように、処理対象の商品ページに含まれる商品ページタイトルのトークンを含む商品名を処理対象とすることにより、処理に用いる商品名の数を限定することができるので、処理負荷の軽減が可能となる。
 推定部13は、処理対象の商品ページの商品ページタイトルに含まれるトークン数に関する特徴を推定する部分である。具体的には、推定部13は、処理対象の商品ページに係る商品を扱う店舗によって入力された1以上の商品ページ(処理対象の商品ページには限定されない)の特徴に応じて、当該処理対象の商品ページの商品ページタイトルのトークン数に関する特徴を推定する。
 前述のとおり、商品ページ取得部11は、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページ(処理対象の商品ページ及び処理対象の商品ページ以外の商品ページを含む)を取得できるので、推定部13は、商品ページ取得部11を介して推定処理に用いる商品ページを取得する。
 トークン数に関する特徴は、例えば、トークン数が所定の程度より少ないこと、又は、トークン数が所定の程度以上であることを示すことができる。以下に、推定部13による推定処理を詳細に説明する。
 推定部13は、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページを構成するデータ量に基づいて、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴を推定することとしてもよい。
 処理対象の商品ページの商品ページタイトルのトークン数に関する特徴は、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページを構成するデータ量に反映される。即ち、店舗によって入力された複数の商品ページを構成するデータ量が多いほど、当該店舗の商品ページの商品ページタイトルのトークン数が多くなる傾向が生じる。
 このような傾向に鑑みて、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページを構成するデータ量に基づいて、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴が推定されるので、推定されたトークン数に関する特徴の信頼性が向上される。
 より具体的には、推定部13は、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページのデータ量が所定量以上である場合に、処理対象の商品ページの商品ページタイトルのトークン数が所定の程度以上であると推定し、上記のデータ量が所定量より少ない場合には、処理対象の商品ページの商品ページタイトルのトークン数が所定の程度より少ないと推定する。なお、データ量と所定量の比較において、複数の商品ページのデータ量の平均値や合計値等の統計値を用いることとしてもよい。
 また、推定部13は、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページを構成するテキストの語数に基づいて、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴を推定することとしてもよい。即ち、上記推定処理では、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページを構成するデータ量を用いたが、このデータ量として、商品ページを構成するテキストの語数を用いることとしてもよい。
 店舗によって入力された複数の商品ページを構成するテキストの語数が多いほど、当該店舗の商品ページの商品ページタイトルのトークン数が多くなる傾向が生じる。このような傾向に鑑みて、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページを構成するテキストの語数に基づいて、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴が推定されるので、推定された特徴の信頼性が向上される。
 より具体的には、推定部13は、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページを構成するテキストの語数が所定量以上である場合に、処理対象の商品ページの商品ページタイトルのトークン数が所定の程度以上であると推定し、上記の語数が所定量より少ない場合には、処理対象の商品ページの商品ページタイトルのトークン数が所定の程度より少ないと推定する。なお、商品ページを構成する語数と所定量の比較において、複数の商品ページの語数の平均値や合計値等の統計値を用いることとしてもよい。
 また、推定部13は、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページに含まれる商品ページタイトルのトークン数に基づいて、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴を推定することとしてもよい。即ち、上記推定処理では、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページを構成するデータ量又は語数を用いたが、これらに代えて、商品ページに含まれる商品ページタイトルのトークン数を用いることとしてもよい。
 店舗によって入力された複数の商品ページに含まれる商品ページタイトルのトークン数が多いほど、当該店舗の処理対象の商品ページの商品ページタイトルのトークン数が多くなる傾向が生じる。このような傾向に鑑みて、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページに含まれる商品ページタイトルのトークン数に基づいて、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴が推定されるので、推定された特徴の信頼性が向上される。
 より具体的には、推定部13は、処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページに含まれる商品ページタイトルのトークン数が所定量以上である場合に、処理対象の商品ページの商品ページタイトルのトークン数が所定の程度以上であると推定し、上記のトークン数が所定量より少ない場合には、処理対象の商品ページの商品ページタイトルのトークン数が所定の程度より少ないと推定する。なお、商品ページに含まれる商品ページタイトルのトークン数と所定量の比較において、複数の商品ページにおける商品ページタイトルのトークン数の平均値や合計値等の統計値を用いることとしてもよい。
 また、推定部13は、商品名取得部12により取得された商品名に含まれるトークン数に対する、処理対象の商品ページに含まれる商品ページタイトルのトークン数の割合が所定割合以上である場合に、処理対象の商品ページの商品ページタイトルのトークン数が所定の程度より多いと推定し、割合が所定割合未満である場合に、処理対象の商品ページの商品ページタイトルのトークン数が所定の程度より少ないと推定することとしてもよい。商品名取得部12により取得された商品名が複数である場合には、複数の商品名のうち、例えば、トークン数が最大の商品名を推定に用いることとしてもよい。
 商品名に含まれるトークン数に対する処理対象の商品ページに含まれる商品ページタイトルのトークン数の割合といった指標値には、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴が直接的に反映される。かかる指標値に基づいて、トークン数に関する特徴が推定されるので、推定された特徴の信頼性を向上させることができる。
 実行部14は、推定部13により推定された商品ページの商品ページタイトルに含まれるトークン数に関する特徴が、トークン数が所定の程度より少ないことを示す場合には第1の処理を実行し、当該特徴が、トークン数が所定の程度以上であることを示す場合には第2の処理を実行する部分である。
 第1の処理は、商品ページタイトルに含まれるトークン数が少ない場合に、商品名が示す商品と商品ページに係る商品との同一性が好適に反映されたスコアが算出される処理である。一方、第2の処理は、商品ページタイトルに含まれるトークン数が多い場合に、商品名が示す商品と商品ページに係る商品との同一性が好適に反映されたスコアが算出される処理である。以下に、第1及び第2の処理を詳細に説明する。
 第1の処理は、商品名に含まれるトークン及び商品ページタイトルに含まれるトークンのうちの一方に対する他方の一致の割合を、商品名が示す商品と商品ページに係る商品との同一性を示すスコアとして算出する処理である。
 第1の処理は、例えば、商品名に含まれるトークンの集合及び処理対象の商品ページの商品ページタイトルに含まれるトークンの集合のJaccard係数をスコアとして算出する処理であってもよい。商品名に含まれるトークンの集合をXとして、商品ページタイトルに含まれるトークンの集合をYとすると、集合X及び集合YのJaccard係数J(X,Y)は、以下のように表される。
J(X,Y)=|X∩Y|/|X∪Y|
 なお、本実施形態では、第1のスコアとしてJaccard係数を算出することとしているが、商品名に含まれるトークン及び商品ページタイトルに含まれるトークンのうちの一方に対する他方の一致の割合を示す指標値であれば、第1のスコアはJaccard係数には限定されない。
 一方、第2の処理は、商品名に含まれるトークン及び商品ページタイトルに含まれるトークンのうちの一方が他方に含まれる割合を、商品名が示す商品と商品ページに係る商品との同一性を示すスコアとして算出する処理である。
 第2の処理は、例えば、商品名に含まれるトークン数及び商品ページタイトルに含まれるトークン数のうちの少ない方のトークン数に対する、商品名に含まれるトークン及び商品ページタイトルに含まれるトークンにおいて共起したトークンの数の割合をスコアとして算出する処理であってもよい。
 以下に、実行部14における第1及び第2の処理によるスコア算出の例を説明する。図7は、図5に示す処理対象の商品ページの商品ページタイトルTと、図6に示す商品名n1~n4のそれぞれとの、同一性を示すスコアの第1及び第2の処理による算出結果を示す。図7において、スコアAは、第1の処理により算出されたスコアであり、スコアBは、第2の処理により算出されたスコアである。
 商品ページタイトルTと商品名n1との、第1及び第2の処理によるスコア算出を具体的に説明する。まず、第1の処理によるスコアAの算出を説明する。
 実行部14は、商品ページタイトルT「brandA abc08-bk eco 空気 清浄機」を、5つのトークンに分割する。分割された5つのトークンは、トークンt11「brandA」、トークンt12「abc08-bk」、トークンt13「eco」、トークンt14「空気」、トークンt15「清浄機」である。一方、商品名n1「brandA abc08-bk eco」は、3つのトークン(「brandA」、「abc08-bk」、「eco」)を含む。
 商品ページタイトルTのトークンの集合をXとし、商品名n1のトークンの集合をYとすると、
|X∩Y|=3
|X∪Y|=5
となるので、商品ページタイトルTと商品名n1との同一性を示すスコアAは、
J(X,Y)=0.6(=3/5)
となる。
 続いて、第2の処理によるスコアBの算出を説明する。商品ページタイトルTのトークン及び商品名n1のトークンにおいて、共起するトークンの数は3である。また、商品ページタイトルTのトークン数及び商品名n1のトークン数のうち、少ない方のトークン数は3である。従って、商品ページタイトルTと商品名n1との同一性を示すスコアBは、1(=3/3)となる。商品ページタイトルTと商品名n2~n4のそれぞれとの同一性を示すスコアA及びスコアBについても、図7に示されるように、同様に算出される。
 図7を参照すると、商品名n1に関するスコアAは、商品名n2~n4に関するスコアAに比べて顕著に大きい値を示している。一方、商品名n1~n4に関するスコアBの中には、顕著に大きい値を示すものがない。従って、含まれるトークン数が比較的少ない商品ページタイトルTと各商品名との同一性の判断においては、第2の処理によって算出されたスコアBより、第1の処理によって算出されたスコアAの方が好適である。
 次に、含まれるトークン数が比較的多い商品ページタイトルと商品名との同一性を示すスコアの算出について説明する。図8は、図5に示した商品ページタイトルTより多くのトークンを含む商品ページタイトルTを示す。商品ページタイトルTは、18のトークンに分割可能である。図9は、図8に示す処理対象の商品ページの商品ページタイトルTと、図6に示す商品名n1~n4のそれぞれとの、同一性を示すスコアの第1及び第2の処理による算出結果を示す。図9において、スコアAは、第1の処理により算出されたスコアであり、スコアBは、第2の処理により算出されたスコアである。
 商品ページタイトルTと商品名n1との、第1及び第2の処理によるスコア算出を具体的に説明する。まず、第1の処理によるスコアAの算出を説明する。
 実行部14は、商品ページタイトルT「brandA abc08-bk eco 空気 清浄機 加湿 機能 花粉 ホコリ 黒 送料 無料 代引 不可 カード OK 省エネ 30m」を、18のトークンに分割する。分割された18のトークンは、トークンt201「brandA」、トークンt202「abc08-bk」、トークンt203「eco」、トークンt204「空気」、トークンt205「清浄機」、トークンt206「加湿」、トークンt207「機能」、トークンt208「花粉」、トークンt209「ホコリ」、トークンt210「黒」、トークンt211「送料」、トークンt212「無料」、トークンt213「代引」、トークンt214「不可」、トークンt215「カード」、トークンt216「OK」、トークンt217「省エネ」、トークンt218「30m」である。一方、商品名n1「brandA abc08-bk eco」は、3つのトークン(「brandA」、「abc08-bk」、「eco」)を含む。
 商品ページタイトルTのトークンの集合をXとし、商品名n1のトークンの集合をYとすると、
|X∩Y|=3
|X∪Y|=18
となるので、商品ページタイトルTと商品名n1との同一性を示すスコアAは、
J(X,Y)=0.167(=3/18)
となる。
 続いて、商品ページタイトルTに関する第2の処理によるスコアBの算出を説明する。商品ページタイトルTのトークン及び商品名n1のトークンにおいて、共起するトークンの数は3である。また、商品ページタイトルTのトークン数及び商品名n1のトークン数のうち、少ない方のトークン数は3である。従って、商品ページタイトルTと商品名n1との同一性を示すスコアBは、1(=3/3)となる。商品ページタイトルTと商品名n2~n4のそれぞれとの同一性を示すスコアA及びスコアBについても、図9に示されるように、同様に算出される。
 図9を参照すると、商品名n1~n4に関するスコアAの中には、顕著に大きい値を示すものがない。一方、商品名n1に関するスコアBは、商品名n2~n4に関するスコアBに比べて顕著に大きい値を示している。従って、含まれるトークン数が比較的多い商品ページタイトルTと各商品名との同一性の判断においては、第1の処理によって算出されたスコアAより、第2の処理によって算出されたスコアBの方が好適である。
 商品ページタイトルのトークン数が多いか少ないかの特徴の推定に際して、基準となる所定値を適切な値に設定することにより、例えば商品ページタイトルTのようなトークン数が比較的少ない商品ページタイトルは、トークン数が少ない特徴を有すると推定され、また、商品ページタイトルTのようなトークン数が比較的多い商品ページタイトルは、トークン数が多い特徴を有すると推定される。
 そのようにトークン数も関する特徴が推定されることにより、商品ページタイトルTと各商品名との同一性は、第1の処理により算出されたスコアに基づいて判断され、商品ページタイトルTと各商品名との同一性は、第2の処理により算出されたスコアに基づいて判断されることとなる。なお、トークン数の特徴の推定において基準となる所定値は、例えば、設計的に設定される値である。
 従って、処理対象の商品ページに応じて、同一性が適切に反映されたスコアを算出することが可能となり、同一性が適切に反映されたスコアが用いられることとなるので、精度良く、商品ページと同一性を有する商品名を特定することが可能となる。
 再び図1を参照して、特定部15は、第1の処理または第2の処理により算出されたスコアに応じて、商品ページと商品の同一性を有する商品名を特定する部分である。
 例えば、商品ページタイトルTを含む商品ページと同一性を有する商品名の特定に際しては、第1の処理によりスコアが算出されるので、特定部15は、図7に示したスコアAに応じて、同一性を有する商品名として商品名n1を特定する。
 また、例えば、商品ページタイトルTを含む商品ページと同一性を有する商品名の特定に際しては、第2の処理によりスコアが算出されるので、特定部15は、図9に示したスコアBに応じて、同一性を有する商品名として商品名n1を特定する。
 特定部15は、このように特定された正式な商品名を、商品ページ記憶部21において、当該商品ページに関連付けて記憶させることとしてもよい。また、特定部15は、同一性を有するものとして特定された商品名が同一の複数の商品ページのグループを形成するような関連付けデータを生成することとしてもよい。
 また、商品特定装置1は、商品ページ記憶部21における商品ページの商品ページタイトルの店舗による更新の状況を監視し、商品ページタイトルの変更の程度が所定範囲内である場合には、第1の処理及び第2の処理のうち従前に用いていた処理によりスコアを算出し、商品ページタイトルの変更の程度が所定範囲を超えた場合に、推定部13によるトークン数に関する特徴の推定処理を経て、推定された特徴に応じて第1の処理及び第2の処理のいずれかの処理によりスコアを算出することとしてもよい。
 なお、商品特定装置1は、ある店舗により入力された商品ページと同一性を有する商品名を特定する処理について、第1の処理に比べて第2の処理によりスコアが算出される頻度または割合が所定の程度以上である場合には、正式な商品名以外の語(例えば、いわゆるスパムワード)を商品ページに含ませることの抑制を求める通知を当該店舗に行う通知部を更に有することとしてもよい。
 次に、図10を参照して、本実施形態の商品特定装置1の動作について説明する。図10は、商品特定装置1において実施される商品特定方法の処理内容を示すフローチャートである。
 まず、商品ページ取得部11は、処理対象の商品ページを取得する(S1)。次に、商品名取得部12は、商品名記憶部22に記憶された正式な商品名を取得する(S2)。
 推定部13は、処理対象の商品ページの商品ページタイトルに含まれるトークン数に関する特徴を推定する(S3)。続いて、実行部14は、ステップS3において推定された商品ページの商品ページタイトルに含まれるトークン数に関する特徴が、トークン数が所定の程度より少ないことを示すか否かを判定する(S4)。トークン数に関する特徴が、トークン数が所定の程度より少ないことを示すと判定された場合には、処理はステップS5に進められる。一方、トークン数に関する特徴が、トークン数が所定の程度より少ないことを示すと判定されなかった場合には、処理はステップS6に進められる。
 ステップS5において、実行部14は、第1の処理により、商品名が示す商品と商品ページに係る商品との同一性を示すスコアを算出する(S5)。一方、ステップS6において、実行部14は、第2の処理により、商品名が示す商品と商品ページに係る商品との同一性を示すスコアを算出する(S6)。
 そして、特定部15は、第1の処理または第2の処理により算出されたスコアに応じて、商品ページと商品の同一性を有する商品名を特定する(S7)。
 次に、図11を参照して、コンピュータを商品特定装置1として機能させるための商品特定プログラムを説明する。商品特定プログラムp1は、メインモジュールm10、商品ページ取得モジュールm11、商品名取得モジュールm12、推定モジュールm13、実行モジュールm14及び特定モジュールm15を備える。
 メインモジュールm10は、商品特定処理を統括的に制御する部分である。商品ページ取得モジュールm11、商品名取得モジュールm12、推定モジュールm13、実行モジュールm14及び特定モジュールm15を実行することにより実現される機能はそれぞれ、図1に示される商品特定装置1の商品ページ取得部11、商品名取得部12、推定部13、実行部14及び特定部15の機能と同様である。
 商品特定プログラムp1は、例えば、CD-ROMやDVD-ROMまたは半導体メモリ等の記憶媒体d1によって提供される。また、商品特定プログラムp1は、搬送波に重畳されたコンピュータデータ信号として通信ネットワークを介して提供されてもよい。
 以上説明した本実施形態の商品特定装置1、商品特定方法及び商品特定プログラムp1によれば、商品ページの商品ページタイトルに含まれるトークン数に関する特徴が推定され、推定された特徴に応じて、第1の処理または第2の処理により、商品名が示す商品と商品ページに係る商品との同一性を示すスコアを算出する処理が実行される。第1の処理は、商品ページタイトルに含まれるトークン数が少ない場合に、商品名が示す商品と商品ページに係る商品との同一性が好適に反映されたスコアが算出される処理である。一方、第2の処理は、商品ページタイトルに含まれるトークン数が多い場合に、商品名が示す商品と商品ページに係る商品との同一性が好適に反映されたスコアが算出される処理である。推定されたトークン数に関する特徴が、トークン数が所定の程度より少ないことを示す場合には第1の処理が実行され、トークン数が所定の程度以上であることを示す場合には第2の処理が実行されるので、処理対象の商品ページに応じて、同一性が適切に反映されたスコアが算出される。そして、同一性が適切に反映されたスコアが用いられるので、精度良く、商品ページと同一性を有する商品名を特定することが可能となる。
 以上、本発明をその実施形態に基づいて詳細に説明した。しかし、本発明は上記実施形態に限定されるものではない。本発明は、その要旨を逸脱しない範囲で様々な変形が可能である。
 1…商品特定装置、11…商品ページ取得部、12…商品名取得部、13…推定部、14…実行部、15…特定部、21…商品ページ記憶部、22…商品名記憶部、d1…記憶媒体、m10…メインモジュール、m11…商品ページ取得モジュール、m12…商品名取得モジュール、m13…推定モジュール、m14…実行モジュール、m15…特定モジュール、p1…商品特定プログラム。
 

Claims (10)

  1.  処理対象の商品ページを取得する商品ページ取得手段であって、前記商品ページは、該商品ページに係る商品を表すテキストからなると共に1以上の文字からなるトークンに分割可能である商品ページタイトルを含む、商品ページ取得手段と、
     少なくとも一つの予め設定された商品名を取得する商品名取得手段であって、前記商品名は、1以上の文字からなるトークンを1以上含む商品名取得手段と、
     前記商品ページの商品ページタイトルに含まれるトークン数に関する特徴を推定する推定手段と、
     前記推定手段により推定された特徴が、前記トークン数が所定の程度より少ないことを示す場合には第1の処理を実行し、前記特徴が、前記トークン数が所定の程度以上であることを示す場合には第2の処理を実行する実行手段であって、前記第1の処理は、前記商品名に含まれるトークン及び前記商品ページタイトルに含まれるトークンのうちの一方に対する他方の一致の割合を、前記商品名が示す商品と前記商品ページに係る商品との同一性を示すスコアとして算出し、前記第2の処理は、前記商品名に含まれるトークン及び前記商品ページタイトルに含まれるトークンのうちの一方が他方に含まれる割合を、前記同一性を示すスコアとして算出する、実行手段と、
     前記第1の処理または前記第2の処理により算出されたスコアに応じて、前記商品ページと商品の同一性を有する前記商品名を特定する特定手段と、
     を備える商品特定装置。
  2.  前記商品名取得手段は、前記処理対象の商品ページに係る商品を扱う店舗以外の者により予め設定された商品名を取得し、
     前記推定手段は、前記店舗によって入力された1以上の商品ページの特徴に応じて、該処理対象の商品ページの商品ページタイトルのトークン数に関する特徴を推定する、
     請求項1に記載の商品特定装置。
  3.  前記推定手段は、前記処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページを構成するデータ量に基づいて、該処理対象の商品ページの商品ページタイトルのトークン数に関する特徴を推定する、
     請求項2に記載の商品特定装置。
  4.  前記推定手段は、前記データ量が所定量以上である場合に、処理対象の商品ページの商品ページタイトルのトークン数が所定の程度以上であると推定し、データ量が所定量より少ない場合には、処理対象の商品ページの商品ページタイトルのトークン数が所定の程度より少ないと推定する、
     請求項3に記載の商品特定装置。
  5.  前記推定手段は、前記処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページを構成するテキストの語数に基づいて、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴を推定する、
    請求項3または4に記載の商品特定装置。
  6.  前記推定手段は、前記処理対象の商品ページに係る商品を扱う店舗によって入力された商品ページに含まれる商品ページタイトルのトークン数に基づいて、処理対象の商品ページの商品ページタイトルのトークン数に関する特徴を推定する、
     請求項3または4に記載の商品特定装置。
  7.  前記推定手段は、前記商品名取得手段により取得された商品名に含まれるトークン数に対する、前記処理対象の商品ページに含まれる商品ページタイトルのトークン数の割合が所定割合以上である場合に、処理対象の商品ページの商品ページタイトルのトークン数が所定の程度より多いと推定し、前記割合が所定割合未満である場合に、処理対象の商品ページの商品ページタイトルのトークン数が所定の程度より少ないと推定する、
     請求項2に記載の商品特定装置。
  8.  前記商品名取得手段は、前記処理対象の商品ページに含まれる商品ページタイトルのトークンを少なくとも一つ含む商品名を取得する、
     請求項1~7のいずれか一項に記載の商品特定装置。
  9.  商品特定装置における商品特定方法であって、
     処理対象の商品ページを取得する商品ページ取得ステップであって、前記商品ページは、該商品ページに係る商品を表すテキストからなると共に1以上の文字からなるトークンに分割可能である商品ページタイトルを含む、商品ページ取得ステップと、
     少なくとも一つの予め設定された商品名を取得する商品名取得ステップであって、前記商品名は、1以上の文字からなるトークンを1以上含む、商品名取得ステップと、
     前記商品ページの商品ページタイトルに含まれるトークン数に関する特徴を推定する推定ステップと、
     前記推定ステップにおいて推定された特徴が、前記トークン数が所定の程度より少ないことを示す場合には第1の処理を実行し、前記特徴が、前記トークン数が所定の程度以上であることを示す場合には第2の処理を実行する実行ステップであって、前記第1の処理は、前記商品名に含まれるトークン及び前記商品ページタイトルに含まれるトークンのうちの一方に対する他方の一致の割合を、前記商品名が示す商品と前記商品ページに係る商品との同一性を示すスコアとして算出し、前記第2の処理は、前記商品名に含まれるトークン及び前記商品ページタイトルに含まれるトークンのうちの一方が他方に含まれる割合を、前記同一性を示すスコアとして算出する、実行ステップと、
     前記第1の処理または前記第2の処理により算出されたスコアに応じて、前記商品ページと商品の同一性を有する前記商品名を特定する特定ステップと、
     を有する商品特定方法。
  10.  コンピュータに、
     処理対象の商品ページを取得する商品ページ取得機能であって、前記商品ページは、該商品ページに係る商品を表すテキストからなると共に1以上の文字からなるトークンに分割可能である商品ページタイトルを含む、商品ページ取得機能と、
     少なくとも一つの予め設定された商品名を取得する商品名取得機能であって、前記商品名は、1以上の文字からなるトークンを1以上含む商品名取得機能と、
     前記商品ページの商品ページタイトルに含まれるトークン数に関する特徴を推定する推定機能と、
     前記推定機能により推定された特徴が、前記トークン数が所定の程度より少ないことを示す場合には第1の処理を実行し、前記特徴が、前記トークン数が所定の程度以上であることを示す場合には第2の処理を実行する実行機能であって、前記第1の処理は、前記商品名に含まれるトークン及び前記商品ページタイトルに含まれるトークンのうちの一方に対する他方の一致の割合を、前記商品名が示す商品と前記商品ページに係る商品との同一性を示すスコアとして算出し、前記第2の処理は、前記商品名に含まれるトークン及び前記商品ページタイトルに含まれるトークンのうちの一方が他方に含まれる割合を、前記同一性を示すスコアとして算出する、実行機能と、
     前記第1の処理または前記第2の処理により算出されたスコアに応じて、前記商品ページと商品の同一性を有する前記商品名を特定する特定機能と、
     を実現させる商品特定プログラム。
PCT/JP2015/065615 2015-05-29 2015-05-29 商品特定装置、商品特定方法及び商品特定プログラム Ceased WO2016194062A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/JP2015/065615 WO2016194062A1 (ja) 2015-05-29 2015-05-29 商品特定装置、商品特定方法及び商品特定プログラム
JP2015548519A JP5887031B1 (ja) 2015-05-29 2015-05-29 商品特定装置、商品特定方法及び商品特定プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2015/065615 WO2016194062A1 (ja) 2015-05-29 2015-05-29 商品特定装置、商品特定方法及び商品特定プログラム

Publications (1)

Publication Number Publication Date
WO2016194062A1 true WO2016194062A1 (ja) 2016-12-08

Family

ID=55523992

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/065615 Ceased WO2016194062A1 (ja) 2015-05-29 2015-05-29 商品特定装置、商品特定方法及び商品特定プログラム

Country Status (2)

Country Link
JP (1) JP5887031B1 (ja)
WO (1) WO2016194062A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018128883A (ja) * 2017-02-09 2018-08-16 株式会社 Vasily 情報処理装置、方法およびプログラム

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11580589B2 (en) * 2016-10-11 2023-02-14 Ebay Inc. System, method, and medium to select a product title
JP2023014410A (ja) * 2021-07-16 2023-01-27 Lazuli株式会社 名寄せ商品マスタ生成装置、名寄せ商品マスタの生成方法、及びプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011105606A1 (ja) * 2010-02-26 2011-09-01 楽天株式会社 情報処理装置、情報処理方法、情報処理装置用のプログラム、および、記録媒体
JP2013101415A (ja) * 2010-02-26 2013-05-23 Language Craft Kenkyusho:Kk 商品ウェブページ分析装置、商品ウェブページ分析方法、および、商品ウェブページ分析装置用のプログラム
JP2013200771A (ja) * 2012-03-26 2013-10-03 Rakuten Inc 情報処理装置、情報処理方法、情報処理プログラム及び記録媒体

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011105606A1 (ja) * 2010-02-26 2011-09-01 楽天株式会社 情報処理装置、情報処理方法、情報処理装置用のプログラム、および、記録媒体
JP2013101415A (ja) * 2010-02-26 2013-05-23 Language Craft Kenkyusho:Kk 商品ウェブページ分析装置、商品ウェブページ分析方法、および、商品ウェブページ分析装置用のプログラム
JP2013200771A (ja) * 2012-03-26 2013-10-03 Rakuten Inc 情報処理装置、情報処理方法、情報処理プログラム及び記録媒体

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018128883A (ja) * 2017-02-09 2018-08-16 株式会社 Vasily 情報処理装置、方法およびプログラム

Also Published As

Publication number Publication date
JPWO2016194062A1 (ja) 2017-06-15
JP5887031B1 (ja) 2016-03-16

Similar Documents

Publication Publication Date Title
US20170161375A1 (en) Clustering documents based on textual content
US8073865B2 (en) System and method for content extraction from unstructured sources
US8452763B1 (en) Extracting and scoring class-instance pairs
US6757870B1 (en) Automatic table detection method and system
JP5445787B2 (ja) 属性抽出方法、システム及びプログラム
JP2010009577A (ja) 情報処理装置、全文検索方法、全文検索プログラム、及び記録媒体
JP2017224184A (ja) 機械学習装置
JP6646184B2 (ja) 検索用資料情報記憶装置
JP5887031B1 (ja) 商品特定装置、商品特定方法及び商品特定プログラム
JP6003637B2 (ja) 情報処理装置、ノード抽出プログラムおよびノード抽出方法
JP6696568B2 (ja) アイテム推奨方法、アイテム推奨プログラムおよびアイテム推奨装置
JP5324018B1 (ja) コーパス生成装置、コーパス生成方法及びコーパス生成プログラム
JP5455978B2 (ja) パターン抽出装置及び方法
CN104715374A (zh) 一种电子商务平台重复产品的治理方法和系统
JP2015203961A (ja) 文書抽出システム
JP5559750B2 (ja) 広告処理装置、情報処理システム及び広告処理方法
US9740681B2 (en) Method for classifying pieces of text on basis of evaluation polarity, computer program product, and computer
CN115861712A (zh) 商品检测方法、装置、存储介质及计算机设备
WO2016132558A1 (ja) 情報処理装置及び方法並びにプログラム
CN108182608B (zh) 电子装置、产品推荐方法和计算机可读存储介质
US20180158076A1 (en) Evaluation device, evaluation method, and evaluation program
US9483463B2 (en) Method and system for motif extraction in electronic documents
US20160239548A1 (en) System and method for performing a multiple pass search
JP6913596B2 (ja) 情報処理装置、情報処理方法及び情報処理プログラム
JP7456486B2 (ja) アイテム分類支援システム、方法およびプログラム

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 2015548519

Country of ref document: JP

Kind code of ref document: A

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15894097

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15894097

Country of ref document: EP

Kind code of ref document: A1