JP2012508420A - 品質評価点を用いた報酬配当 - Google Patents

Abstract

開示された主題のうち、報酬配当のためのコンピュータ実施方法は、発行者からの第１コンテンツを品質基準に関して分析する段階と、分析結果に基づいて、前記第１コンテンツに品質評価点を関連付ける段階と、前記第１コンテンツを発行しようとする前記発行者に第２コンテンツを提供する段階と、前記第２コンテンツに対する報酬を前記発行者に配当する段階とを有する。前記報酬は、前記品質評価点の少なくとも一部分に基づいて決定される。

Description

この出願は、通常の特許出願（実用特許出願）であり、２００９年７月２日に出願された米国特許出願第１２／４９７，１２０号と２００８年１１月５日に出願された米国特許仮出願第６１／１１１，５７６号とに対する優先権を主張するものである。これらの出願の全内容が、引用によって本明細書に組み込まれる。

本開示は、コンテンツの提供に関する。

今日のコンピュータシステムは、さまざまなコンテンツ配信手法を提供する。コンテンツ発行者でもあるコンテンツ製作者は、自身のコンテンツを適切な発行媒体（例えば、インターネットページ）中に含めて、オンライン上で閲覧可能とすることができる。また、その代わりとして、コンテンツ製作者は、その他の手段で自身のコンテンツを発行しようとしている。発行者は、ある時には、他者のコンテンツを無料で発行し、また、ある時には、コンテンツ製作者からの支払いと引き換えにコンテンツを発行する。後者の一例がオンライン広告である。

数多くの発行者が、発行のためにインターネットなどのコンピュータネットワークを使用しており、それら個々の発行は、独自の特性及び／又は品質を有することとなる。多くの場合、ある発行者のページは、他の発行者等のページと著しく異なったものとなる。その差異は、発行後の発行者の意向及び展望に由来する設計選択の考えに起因して生じることがある。別の状況では、差異は、コスト的制限、美的創造性の欠如、及び／又は発行媒体に関する技術の理解不足の結果として生じる。

米国特許出願第１２／４９７１２０号 米国特許仮出願第６１／１１１５７６号

本発明は、報酬の配当に関する。

第１態様では、コンピュータによって実行される報酬配当の方法は、発行者からの第１コンテンツを品質基準に関して分析する段階を有する。上記方法は、分析結果に基づいて、上記第１コンテンツに品質評価点を関連付ける段階を有する。上記方法は、上記第１コンテンツを発行しようとする上記発行者に第２コンテンツを提供する段階を有する。上記方法は、上記第２コンテンツに対する報酬を上記発行者に配当する段階を有する。上記報酬は、上記品質評価点の少なくとも一部分に基づいて決定されたものである。

各態様は、以下の複数の特徴のうちの１つ以上を含んでよい。広告主は、上記発行者へ送信する上記第２コンテンツを提供し、上記方法は、上記第２コンテンツを発行するための料金を上記広告主から徴収する段階をさらに有し、報酬を上記発行者に配当する上記段階は、上記品質評価点に基づいて上記料金の一部分を上記発行者と分配する段階を含む。上記方法は、上記広告主から徴収する上記料金を決定する段階をさらに有し、上記料金は、上記品質評価点の少なくとも一部分に基づいて決定されたものである。コンテンツ配信局が、上記発行者への上記第２コンテンツの送信と、上記報酬の配当とを行い、報酬を上記発行者に配当する上記段階では、上記コンテンツ配信局は、上記発行者よりも高い品質評価点が関連付けられた別の発行者によれば、同等の発行と比較してより高い利益を得られる。上記方法は、上記第２コンテンツの発行に対して支払いを行った広告主に、上記より高い利益の少なくとも一部分を分配する段階をさらに有する。上記方法は、上記より高い品質評価点が関連付けられた別の発行者に、上記より高い利益の少なくとも一部分を分配する段階をさらに有する。上記方法は、上記第１コンテンツを上記品質基準に関して再度分析する段階と、上記第１コンテンツの再度の分析結果に基づいて、上記第１コンテンツに新たな品質評価点を関連付ける段階とをさらに有する。上記方法は、上記第１コンテンツを再度分析する上記段階の前に、上記第１コンテンツの品質について上記発行者に通知する段階と、上記新たな品質評価点を上記品質評価点と比較して、品質が向上したか否かを判断する段階とをさらに有する。上記第１コンテンツには、ｎ時間単位毎に上記新たな品質評価点が関連付けられ、上記新たな品質評価点は、Ｎ時間単位経過時の上記第１コンテンツの分析に基づいて決定される。ここで、ｎ及びＮは、正の数である。上記第２コンテンツは、発行のためにリアルタイムで上記発行者に送信され、上記方法は、上記第１コンテンツ、上記第２コンテンツ、及び該第２コンテンツの送信に関連した上記品質評価点についての情報を記録する段階と、記録された上記情報に基づいて、上記報酬を決定する段階とをさらに有する。上記方法は、上記第１コンテンツを用いた上記第２コンテンツの発行に対するオークションを実施する段階をさらに有し、上記報酬は、上記オークションの利益にも基づいて決定される。上記オークションは、複数の発行者が上記第２コンテンツを発行する権利の取得を競い合うように構成される。第１コンテンツを分析する上記段階は、少なくとも上記品質基準に関する分析を実行するように、分類部に学習を行わせる段階と、上記分類部に上記第１コンテンツを識別させて分析を実行する段階とを含む。

第２態様では、コンピュータプログラム製品は、コンピュータ読み取り可能な記録媒体として実体化され、プロセッサによって実行されたとき、報酬配当のための方法を実行する複数の命令からなる。上記方法は、発行者からの第１コンテンツを品質基準に関して分析する段階を有する。上記方法は、分析結果に基づいて、上記第１コンテンツに品質評価点を関連付ける段階を有する。上記方法は、上記第１コンテンツを発行しようとする上記発行者に第２コンテンツを送信する段階を有する。上記方法は、上記第２コンテンツに対する報酬を上記発行者に配当する段階を有する。上記報酬は、上記品質評価点の少なくとも一部分に基づいて決定されたものである。

第３態様では、コンピュータシステムは、複数の発行者に関連する個々の第１コンテンツに対する品質評価点を格納したリポジトリ部を具備する。上記品質評価点は、上記第１コンテンツを品質基準に関して分析することによって決定される。上記システムは、上記個々の第１コンテンツのうちの少なくとも１つを発行しようとする上記複数の発行者のうちの少なくとも第１発行者に第２コンテンツを送信するコンテンツ配信部を具備する。上記システムは、上記第２コンテンツに対する報酬を上記第１発行者に配当する報酬配当部を具備する。上記報酬は、上記第１発行者の上記品質評価点の少なくとも一部分に基づいて決定されたものである。

第４態様では、報酬配当のためのコンピュータ実施方法は、発行者からの第１ページを品質基準に関して分析する段階を有する。上記発行者は、報酬と引き換えに自身のページに少なくとも１つの広告を含ませることに同意している。上記方法は、分析結果に基づいて、上記第１ページに品質評価点を関連付ける段階を有する。上記品質評価点は、上記発行者に少なくとも１つの上記広告を提供する広告配信局によって定められたページ品質を指す。上記方法は、上記広告の発行に対して料金を支払うことに同意した広告主から少なくとも１つの上記広告を取得する段階を有する。上記方法は、上記第１ページを発行しようとする上記発行者に、上記広告配信局によって選択された少なくとも１つの上記広告を送信する段階を有する。上記方法は、上記広告に対する報酬を上記発行者に配当する段階を有する。上記報酬は、上記広告主から徴収した料金の少なくとも一部分と上記品質評価点とに基づいて決定されたものである。上記料金の残余額は、上記広告配信局によって少なくとも一時的に保管される。

各態様は、以下の複数の特徴のうちの１つ以上を含んでよい。上記方法は、上記残余額の少なくとも一部分を上記広告主と分配する段階をさらに有する。上記方法は、上記発行者よりも高い品質評価点を有する少なくとも１つの別の発行者を識別する段階と、上記残余額の少なくとも一部分を上記別の発行者と分配する段階とをさらに有する。

第５態様では、方法は、発行リソースへのコンテンツの表示に対する複数の入札を受信する段階を有する。上記方法は、上記複数の入札のうちの少なくとも１つの入札を選択する段階を有する。上記方法は、上記発行リソースへの上記コンテンツの表示と実質的に同時に、上記発行リソースに対する品質評価点を決定する段階を有する。上記方法は、上記品質評価点に基づいて、選択した上記入札を調整する段階を有する。

第６態様では、方法は、発行リソースへのコンテンツの表示に対する複数の入札を受信する段階を有する。上記方法は、上記複数の入札のうち、入札額に達した少なくとも１つの入札を選択する段階を有する。上記方法は、選択した上記入札に対して上記入札額を徴収する段階を有する。上記方法は、上記発行リソースへの上記コンテンツの表示と実質的に同時に、上記発行リソースに対する品質評価点を決定する段階を有する。上記方法は、上記品質評価点に基づいて、上記入札額の一部分の返金を行う段階を有する。

各態様は、以下の複数の利点のうちの１つ以上を提供する。広告などのコンテンツの配信がより効果的に管理できる。報酬の配当がより柔軟に行える。発行者に報酬を支払うことを考慮して、品質評価点の自動的な決定を行える。報酬配当を自動的に考慮して、発行品質を決定できる。

１つ以上の実施態様の詳細は、添付の図面及び以降の記載によって説明される。その他の特徴及び利点は、以下の説明、図面、及び特許請求の範囲の記載から明らかとなる。

報酬配当機能を有した例示的なシステムの構成図である。 例示的なプロセスのフロー図である。 本明細書に記載されたコンピュータ実施方法で使用可能な演算システムの構成図である。 報酬配当の一例を示す図である。 報酬配当の別の例を示す図である。

各図面中で、類似した符号は、類似した要素を指す。

コンテンツは、配信システムを介して配信される。ある実施形態では、配信システムは、インターネットを介するなどした電子配信システムである。コンテンツアイテムの配信が行われると、コンテンツアイテムの提供者は、自身のコンテンツを配信した発行者に対する埋め合わせ（すなわち、支払い）を行う。例えば、広告主は、自身の個々のコンテンツの配信のために、コンテンツ発行者（例えば、自身のウェブ物件上に広告主のコンテンツ含ませるウェブページ発行者）に報酬を支払う。報酬は、多数の要因に基づいて決定されてよく、例えば、関連するウェブ物件の品質によって定まる。コンテンツの配信、報酬の徴収、及び発行されたコンテンツに対する分析結果の少なくとも一部分に基づいて報酬の配当を行うための方法、システム、装置、及びコンピュータ読み取り可能な記録媒体が提供される。

図１は、報酬配当機能を有した例示的なシステム１００の構成図である。この実施形態では、システム１００は、発行者１０２ａと、発行者１０２ｂと、少なくとも１つの広告主１０４と、広告配信者１０６とからなる。広告配信者１０６は、広告又はその他の形態のコンテンツを配信する。発行者１０２ａ及び発行者１０２ｂは、１人以上の訪問者、例えば、訪問者１０８ａ、訪問者１０８ｂ、及び／又は訪問者１０８ｃなどからのリクエストを処理する。複数の訪問者１０８ａ〜１０８ｃは、ページ又はその他のコンテンツ、例えば、ページ１１０ａ及び／又はページ１１０ｂなどを発行者にリクエストする。ある実施形態では、ページ１１０ａ，１１０ｂは、ウェブページ、電子文書、ニュース配信、オーディオコンテンツ、ビデオコンテンツ、又はその他の形態の電子データである。ページ１１０ａ及びページ１１０ｂには、広告１１２ａ及び広告１１２ｂなどのコンテンツがそれぞれ含まれてよい。広告１１２ａ，１１２ｂは、ほんの数例を挙げると、ウェブページ中のリンク又はバナー、ビデオ又はオーディオストリームに繋ぎ合わせられたコマーシャル、又はその他の形式の広告コンテンツであってよい。

複数の広告１１２ａ，１１２ｂのうちのいずれかが訪問者によって選択されたとき、広告コンテンツ１１４（例えば、広告主１０４のウェブページ）が訪問者１０８ａ〜１０８ｃに提供される。ある実施形態では、発行者１０２ａ，１０２ｂは、収入源として広告１１２ａ，１１２ｂを発行する。例えば、広告主１０４は、訪問者１０８ａ〜１０８ｃによる広告１１２ａ，１１２ｂの（例えば、クリックによる）選択に応じて、発行者１０２ａ，１０２ｂに直接的又は間接的に報酬を支払う。

広告主１０４及び発行者１０２ａ，１０２ｂは、広告１１２ａ，１１２ｂの配信と収入との中継として、広告配信者１０６を使用する。ある実施形態では、広告主１０４又はその他のコンテンツ提供者は、広告配信者１０６に広告及び／又はその他のコンテンツを提供し、広告配信者１０６は、広告１１２ａ，１１２ｂを発行者ページ１１０ａ，１１０ｂに関連付ける。例えば、広告配信者１０６は、広告１１２ａ，１１２ｂが選択された回数を追跡して、例えば、広告１１２ａ，１１２ｂの配信に応じて、広告主１０４にいくら請求できるのかを決定する。また、広告配信者１０６は、ページ１１０ａ，１１０ｂ上への広告１１２ａ，１１２ｂのホスティングに対して発行者１０２ａ，１０２ｂに報酬を支払う。

ある実施形態では、複数の発行者１０２ａ，１０２ｂのうちの１つ以上に与えられる報酬額は、品質評価点に基づいて調整される。例えば、品質評価点は、ページ１１０ａ，１１０ｂを用いて決定される。ある実施例において、ページ１１０ａは、正しいと認められた事実を含み、一方、ページ１１０ｂは、議論の余地がある意見を含むとする。この場合、ページ１１０ａは比較的高い品質評価点を有し、一方、ページ１１０ｂは比較的低い品質評価点を有する。品質の評価にはその他の基準が使用でき、以下でさらなる例を挙げて説明する。広告配信者１０６は、広告１１２ａ〜１１２ｂの発行に対して発行者１０２ａ及び発行者１０２ｂに提供する報酬を決定するための基準として、品質評価点を使用する。

ある実施形態では、広告配信者１０６は、ページ１１０ａ，１１０ｂの品質など、発行者に付随する何らかの特徴に基づいて、広告主１０４に請求する金額を調整する。例えば、ページ１１０ａは、高い品質のコンテンツを含み、一方、ページ１１０ｂは、低い品質のコンテンツしか含まないとする。ある実施形態では、広告配信者１０６は、広告１１２ｂを閲覧する場合よりも、広告１１２ａを（例えば、クリックスルーによって）閲覧する場合に、より高額の請求を広告主１０４に対して行う。ある実施形態では、広告配信者１０６は、ページ１１０ａ，１１０ｂの品質評価点に基づいて、発行者１０２ａ，１０２ｂに支払われる報酬額と、広告主１０４に請求される額とが調整される。ページ品質の評価及び報酬調整の処理例については、図２を参照して以下で説明する。

明細書中では、広告配信者１０６は、リポジトリ１１６を具備する。リポジトリ１１６は、広告主１０４などのコンテンツ提供者から取得した広告１１２ａ，１１２ｂ又はその他の情報などのコンテンツを格納する。ある実施形態では、リポジトリは、データベース、電子ファイル、電子ファイルの集合、リスト、表、及び／又は、電子情報の格納及び取り出しのためのその他の構成要素を含む。

コンテンツ配信モジュール１１８は、リポジトリ１１６から発行者１０２ａ，１０２ｂへなど、コンテンツを配信する。ある実施形態では、コンテンツ配信モジュール１１８は、ページ１１０ａ，１１０ｂに含ませるために広告１１２ａ，１１２ｂが配信された回数、及び／又は、訪問者１０８ａ〜１０８ｃが広告１１２ａ，１１２ｂを（例えば、クリックスルーによって）閲覧した回数を追跡する。ある実施形態では、コンテンツ配信モジュール１１８は、ページ１１０ａ，１１０ｂのコンテンツに応じて、広告１１２ａ，１１２ｂを配信する。例えば、発行者１０２ａは、ページ１１０ａに含ませようとする広告について、広告配信者１０６にリクエストを行う。ページ１１０ａは、旅行情報のページであり、リポジトリ１１６は、カーナビゲーション製品に対する広告（例えば、広告１１２ａ）を格納しているとする。コンテンツ配信モジュール１１８は、トピック「旅行」と「ナビゲーション」とを関連付けて、ページ１１０ａに含ませる広告１１２ａを配信する。ある実施形態では、コンテンツ配信モジュール１１８は、さまざまなページに割り当てられた品質評価点に基づいて広告を配信する。例えば、広告主１０４は、所定の品質レベル（例えば、高品質）であると判断されたページだけに自身の広告を配置するように、広告配信者１０６にリクエストできる。

報酬配当モジュール１２０は、発行者１０２ａ，１０２ｂに支払われる報酬の金額、及び／又は、広告主１０４に請求する金額を管理する。分類モジュール１２２は、ページ１１０ａ，１１０ｂのコンテンツを分析して、それらの品質を決定するとともに、それらに品質評価点を割り当てる。ある実施形態では、分類モジュール１２２は、ページ１１０ａ，１１０ｂについて以下の複数の観点のうちの１つ以上に基づいて品質評価点を決定する。すなわち、いくつか例を挙げると、権威性、検証可能性、エンターテイメント性、文法的正確度、教育的価値、適時性、美的品質、独創性、まとまり感、世評、情報的価値、検索ランク、人気、サーバ応答性、又はその他の品質基準、及び／又は、それらの組み合わせなどである。

報酬配当モジュール１２０は、個々のページに関連付けられた品質評価点を用いて、訪問者が広告１１２ａ，１１２ｂを表示及び／又は（例えば、クリックスルー又はその他の形態の転化によって）対話を行った際に発行者に支払われる報酬の金額を調整する。例えば、分類モジュール１２２は、ページ１１０ａには比較的高い品質評価点を与え、ページ１１０ｂには比較的低い品質評価点を与える。

以下の記載は、例示を目的とした、１ドル５０セントの料金を用いる報酬配当の一例である。訪問者１０８ａが広告１１２ａをクリックスルーしたとき、報酬配当モジュール１２０は、発行者１０２ａに１ドルの報酬を受け取らせる。同様に、訪問者１０８ａが広告１１２ｂをクリックスルーしたとき、発行者１０２ｂには、５０セントの報酬が支払われる。これは、品質評価点に基づいてどのように報酬が支払われるかの一例である。別の例では、広告配信者１０６は、通常は、クリックスルー毎に５０セントを広告主１０４に請求するが、低い品質評価点を有したページ（例えば、ページ１１０ｂ）で行われたクリックスルーに対しては、割り引かれた料金（例えば、２５セント）を提示する。

ある実施形態では、報酬配当モジュール１２０は、あるトランザクションからの報酬を保留し、別のページに支払われる報酬を増大させるためなど、別の目的のために、保留した資金を使用する。例えば、ページ１１０ｂは、低い品質評価点（例えば、０．０〜１．０の範囲における０．１）を有するとの判断がなされ、ページ１１０ａは、高い品質評価点（例えば、０．０〜１．０の範囲における１．０）を有するとする。この場合、広告配信者１０６は、通常は、クリックスルー毎に１ドルを広告主に請求する。訪問者１０８ａが低品質ページ１１０ｂの広告１１２ｂをクリックスルーしたとき、報酬配当モジュール１２０は、決まり通り１ドルの金額を広告主１０４に請求するが、発行者１０２ｂには、より少ない金額（例えば、７５セント）しか報酬が支払われない。残余額（例えば、２５セント）は、例えば、基金１２４に蓄えられる。訪問者１０８ａが広告１１２ａをクリックスルーしたとき、報酬配当モジュール１２０は、決まり通り１ドルを広告主に請求するとともに、広告主１０４が発行者１０２ａに支払う１ドルに、基金１２４から取り出した先の残余額（例えば、２５セント）を加えることによって、より高額の報酬（例えば、１ドル２５セント）を発行者１０２ａに支払う。

図２は、報酬配当を実行するための例示的なプロセス２００のフロー図である。プロセス２００は、ステップ２０２から始まる。プロセス２００は、（例えば、ユーザに開始されることによって）手動で開始されるか、又は、（例えば、スケジュールされたプロセスとして、別のプロセスからのリクエストに応答して）自動的に開始される。ステップ２０４で、図１の分類モジュール１２２などの分類装置が学習を行う。ある実施形態では、分類装置は、１つ以上のページ（例えば、ページ１１０ａ及びページ１１０ｂ）を１つ以上の観点から評価するために学習を行う。いくつか例を挙げると、ページの権威性、検証可能性、エンターテイメント性、文法的正確度、教育的価値、適時性、美的品質、独創性、まとまり感、世評、情報的価値、検索ランク、人気、サーバ応答性、又はその他の品質基準、及び／又は、それらの組み合わせなどである。

ある実施形態では、分類装置は、１つ以上のテンプレートを用いて学習を行う。例えば、ネットワークで（例えば、インターネット上で）利用可能な、最も一般的なページデザインのテンプレートが用意されている。分類装置は、テンプレートを用いて、ページの発行時に、品質面を考慮した共通ページデザインが使用されているか否かを判断する。別の例では、既存の「悪い」ページデザインのテンプレートが使用される。

ある実施形態では、分類装置は、ページ内のテキストを解析するか又はその他の適切な技術によるなどして、ページ上で識別可能なあらゆる概念（コンセプト）を探索するための学習を行う。ある例では、探索のための所定の概念のライブラリが、分類装置に提供される。分類装置は、１つ以上の手法で概念を評価するための学習が行われる。例えば、分類装置は、品質基準として使用可能な概念がページ上に少数存在するか又は多数存在するかを判断する。

任意選択のステップ２０６では、オークションが実施される。ある実施形態では、オークションは、発行者のページ含ませるために、どの広告が１つ以上の発行者に提供されるかを決定するために実施される。品質評価点は、オークション結果を考慮して決定される。例えば、発行者１０２ａは、比較的高い品質のページ（例えば、ページ１１０ａ）を発行するのに適した、発行者１０２ｂよりも高い世評を有する。この場合、広告主１０４などの１つ以上の広告主は、発行者１０２ａのページに自身の広告を配置するために、さまざまな金額の提示によって広告用スペースを競り合う。

ある実施形態では、発行者は、例えば、ステップ２０６で、オークションの広告に対する入札を行うことによって、広告などのコンテンツを発行する権利の取得を競う。例えば、発行者は、広告／コンテンツの発行に要求される利益配分の割合を表した入札を行う。例えば、発行者１０２ａと発行者１０２ｂとが競合する入札を行い、発行者１０２ａは、発行者１０２ｂよりも低い割合の広告利益配分を要求したとする。この場合、発行者１０２ａがより安価な入札によってオークションに勝ち、提示した利益率で発行者１０２ａに広告が提供される。ある実施形態では、品質評価点が、同様にオークション結果を考慮して決定される。例えば、発行者１０２ａが発行者１０２ｂよりも安価な入札を行い、かつ発行者１０２ｂの（例えば、世評に基づく）品質評価点が発行者１０２ａのそれよりも高かったとする。ある実施形態では、より高い品質評価点は、発行者１０２ａの安価な入札を相殺する。

ステップ２０８では、ページ１１０ａなどのコンテンツが、分類モジュールによって識別される。ある実施形態では、コンテンツは、複数のページ又は複数のページアドレスのデータベースなどの既知のコンテンツの集団から選択することによって識別される。分類装置がコンテンツを識別する機能を有するか、又は、別の構成要素によってコンテンツが分類装置に識別される。ある実施形態では、コンテンツは、広告を含んだページのアドレスを検出することによって識別される。例えば、ページ１１０ａは、広告アプレットを含み、ページ１１０ａが発行されたとき、アプレットが実行されて、広告配信者１０６への広告のリクエストが行われる。次いで、広告配信者１０６は、リクエストのアドレスを用いて、ページ１１０ａを分類モジュール１２２に識別させる。ある実施形態では、コンテンツは、検索エンジンを介して識別される。例えば、検索エンジンは、１つ以上のページについて、ページに広告が含まれることを示すデータを含む情報のカタログ化を行う。検索エンジンは、問い合わせを受けて、広告を含んだ１つ以上のページを求めるとともに、それらのページの１つ以上を分類モジュールに識別させる。

ステップ２１０では、ページの品質が、品質基準に基づいて分析される。ある実施形態では、ページの品質は、ステップ２０４で学習を行った分類装置を用いて分析される。ステップ２１２では、ページの品質に品質評価点が付けられる。ある実施形態では、品質評価点は、所定の範囲内の相対点となる。例えば、品質評価点は、０．０点から１．０点の範囲を取り、ページ品質の平均は、０．５点となる。別の例では、品質評価点は、０点から１００点の範囲を取り、比較的高い品質のページには、９５点が与えられる。ある実施形態では、品質評価点は、累算点となる。例えば、分類モジュールは、ページの「良い」面（例えば、生きたリンク、検証可能な事実など）を検出する度に、ページの品質評価点に加点を行い、及び／又は、ページの「悪い」面（例えば、デッドリンク、綴りの誤りなど）を検出する度に減点を行う。その他のタイプの採点が使用されてもよい。

ステップ２１４では、分析されたページの発行者は、ページに関連付けられた品質評価点の通知を受ける。例えば、品質評価点についての発行者への通知は、高い品質のページの生成を促進することとなる。例えば、発行者１０２ａは、品質評価点を使用して、ページ１１０ａの品質を自身の発行した他のページと比較し、それらの品質を向上させるようなページの修正を特定する。別の例では、発行者１０２ａは、ページ１１０ａの修正前に決定された品質評価点と修正後に決定された品質評価点とを比較して、どのような修正がページ１１０ａの品質に影響を及ぼすかを定量的に判断する。

ステップ２１６では、広告などのコンテンツが、ページのコンテンツを発行しようとする発行者に送信される（又は、他の手段で提供される）。ある実施形態では、コンテンツは、実質的に動的な手法で発行者に送信される。例えば、ページが提供される際、広告群のうちの実質的にランダムな一部分が、当該ページで発行され、その結果、ページが提供される及び／又はリフレッシュされる度に、異なる広告サブセットが発行される。ステップ２１８では、ページ、コンテンツ、両者の関係についての情報、及び／又は、その他の情報が記録される。例えば、ページ１１０ａの識別情報、ページ１１０ａの品質評価点、広告１１２ａの識別情報、及びコンテンツが送信された日時などが記録される。

ある実施形態では、ページの品質評価点は、広告コンテンツが送信された後に分析される。例えば、ページ１１０ａのコンテンツが頻繁に変化したり（例えば、ニュースページ、オンラインオークションページ、ブログなど）、ページ１１０ａの品質が頻繁に変化したりすることがある。この場合、ページ１１０ａの品質評価点は、ステップ２１６で発行者１０２ａに広告１１２ａが送信され、ステップ２１８でページ１１０ａの識別情報、広告１１２ａの識別情報、日時、及び／又はその他の情報が記録されたときには知ることができない。記録された情報は、ページ１１０ａを分類モジュール１２２に識別させ、その品質を分析する（例えば、ステップ２０８〜２１０）ために使用され、品質評価点は、ステップ２１８で記録された情報に追加される。

ステップ２２０では、料金が決定される。ある実施形態では、料金は、ページへの広告の配置に対し、広告配信者が広告主に請求可能な金額である。ある実施形態では、料金は、ページに関連付けられた品質評価点の少なくとも一部分に基づいて調整される。例えば、広告配信者１０６は、平均的な品質及び／又は高い品質のページ（例えば、０．０〜１．０の得点範囲において０．５点又はそれ以上の評価点を得たページ）に広告が配置される毎に１ドルを請求し、一方、比較的低い品質（例えば、０．２５点）のページに広告が配置される毎に６０セントだけ請求する。ある実施形態では、請求金額は、広告が配置されたときのページに関連付けられた評価点に少なくとも部分的に比例する。例えば、広告配信者１０６は、評価点１．０／１．０を有したページ１１０ａへの広告１１２ａの配置に対して１ドルを請求し、評価点０．７５／１．０を有したページ１１０ｂへの広告１１２ａの配置に対して０．７５ドルを請求する。ステップ２２２では、広告主１０４から料金が徴収される。

ステップ２２４では、報酬額が決定される。ある実施形態では、報酬額は、広告の発行に対し、広告配信者が発行者に支払う金額である。ある実施形態では、報酬額は、広告を配置したページの品質評価点に基づいて、その少なくとも一部分が決定される。例えば、広告配信者１０６は、比較的高い品質のページに広告が配置される毎に発行者１０２ａに５０セントを支払い、比較的低い品質のページに広告が配置される毎に２５セントを支払う。ステップ２２６では、ステップ２２４で決定された報酬が配当される。

記載の通り、品質評価点が低いとみなされた場合には、発行者は、より低い報酬しか受け取れない。これは、そのような発行者への報酬天引きともみなせる。ある実施形態では、１つ以上の発行者から差し引かれた報酬は、基金、例えば、基金１２４に蓄えられる。ある実施形態では、報酬は、報酬配当モジュール、例えば、報酬配当モジュール１２０によって配当される。

ステップ２２８では、報酬が、例えば広告主に分け与えられる。ある実施形態では、報酬は、発行者への支払いから差し引かれ、差し引いた金額の一部分又は全額が、広告主への請求額を減額するために費やされる。例えば、広告主１０４は、ページ１１０ｂへの広告１１２ｂの配置に対してドルを請求されたが、後で、ページ１１０ｂが比較的低い品質であると判断されたとする。この場合、発行者１０２ｂには、広告１１２ｂの配置に対して減額された報酬額が与えられ、かつ、広告配信者１０６は、広告１１２ｂの配置に対して請求する総額を減額する。

ステップ２３０では、報酬が、ある発行者への支払いから差し引かれ、例えば別の発行者に分け与えられる。例えば、広告配信者１０６は、比較的に平均又は高い品質のページ、例えば、ページ１１０ａに広告１１２ａ，１１２ｂが配置される毎に、発行者１０２ａ，１０２ｂに通常は１ドルを支払うとする。また、広告配信者１０６は、ページ１１０ｂが比較的低い品質であると判断し、広告１１２ｂの配置に対して、発行者１０２ｂに０．７５ドルを支払ったとする。コンテンツ提供者１０６は、発行者１０２ｂへの支払いから差し引いた０．２５ドルを費やして、広告１１２ａの配置に対して発行者１０２ａに支払われる金額を１．２５ドルに増額できる。

ステップ２３２では、ページの品質が再度分析され、ステップ２３４で、ページに新たな品質評価点が付けられる。ある実施形態では、ステップ２３２は、ステップ２１０で十分であるとして省略される。ある実施形態では、ページの品質評価点は、定期的に分析され、関連付けられる。例えば、ページ１１０ａは、日毎、週毎、月毎、又はその他の期間毎に分析を受ける。ある実施形態では、ページの分析間隔は、ページに新たな品質評価点が関連付けられる間隔とは異なっている。例えば、ページ１１０ａは、毎週分析されるが、支払われる及び／又は徴収される金額の決定に使用される品質評価点は、月に一度更新される。

ある実施形態では、報酬の徴収及び／又は配当に使用される品質評価点を決定するために、異なる時期に決定された２つ以上の品質評価点が組み合わされる。例えば、ページのコンテンツ及び品質は、毎日又は毎週変化し、その結果、ページ１１０ａに対して決定される品質評価点は、週間隔の再分析で変動しているとする。広告配信者１０６は、複数の週の評価点を組み合わせて（例えば、過去４週の評価点の平均、過去６週の評価点の加重平均、過去５２週の評価点の統計的中央値などを求めて）、ページ１１０ａに関連付ける品質評価点を決定する。

ステップ２３６では、新たな品質評価点が、古い品質評価点と比較される。ある実施形態では、新旧品質評価点が比較され、ページの品質が増減したか否かが判断される。ある実施形態では、発行者は、比較結果の通知を受ける。例えば、広告発信者１０６は、ページ１１０ａの新たな品質評価点と古い品質評価点とを比較して、ページ１１０ａの品質が比較的に上昇したか又は減少したかについての情報を発行者１０２ａに提供する。プロセス２００は、ステップ２３８で終了する。

ある実施形態では、プロセス２００は、より多くのステップ又はより少ないステップからなる。別の例では、１つ以上のステップが、異なる順番で実行される。

以上の実施形態は、電子データ（例えば、ウェブページ、ストリーミングメディア、ニュース配信）に対する報酬配当のさまざまな実施形態を説明したが、別の実施形態が存在し得る。ある実施形態では、図１のページ１１０ａ，１１０ｂは、新聞、雑誌、又はその他の発行物などの印刷物である。例えば、広告１１２ａ，１１２ｂは、雑誌に掲載される印刷された広告である。雑誌の品質が評価され、品質評価点を与えられると、そのような品質評価点は、雑誌の発行者に支払われる報酬を決定するため、及び／又は、広告の印刷に対して広告主に請求される金額を決定するために使用される。

ある実施形態では、ページ１１０ａ，１１０ｂは、テレビ番組、ラジオ番組、映画、又はその他の形態のメディアである。例えば、広告１１２ａ，１１２ｂは、いくつか例を挙げると、テレビ又はラジオ番組中のコマーシャル、映画上映中に表示される広告などである。メディアの品質が評価され、品質評価点を与えられると、そのような評価点は、広告主に請求される金額を決定するため、及び／又は、メディアを提供する主体（例えば、テレビ網、ラジオ局、映画館）に支払われる報酬額を決定するために使用される。

ある実施形態では、ページ１１０ａ，１１０ｂは、いくつか例を挙げると、スポーツイベント、お祭り、コンサート、又はパレードなどのイベントである。これらの実施形態では、広告１１２ａ，１１２ｂは、横断幕（バナー）、掲示板（ビルボード）、放送（アナウンス）、又はイベント中に使用されるその他の形態の広告である。イベントの品質が評価され、品質評価点が決定される。例えば、「盛り上がった」、上手く運営された、又は大勢が参加したスポーツイベントには、高い品質評価点が与えられ、逆に、雨天中止になった、上手く運営されなかった、又は「盛り上がらなかった」イベントには、低い品質評価点が与えられる。品質評価点は、広告主１０４に請求される料金を決定するため、及び／又は、競技場、参加チーム、及び／又は関係者に支払われる報酬額を決定するために使用される。

図４Ａ及び図４Ｂは、報酬配信の例を示す。図４Ａは、ジャスト−イン−タイム型の報酬配当を実行するシステム４００を示す。システム４００は、いくつかの例をあげると、広告主１０４と、広告配信者１０６と、発行者１４０ａとを含む。ここで、広告配信者１０６は、矢印４０２によって示されるように、複数の入札を受信する。入札は、広告主１０４などから送られ、発行リソース、例えば、発行者１４０ａによって管理されるページ、に広告などのコンテンツを表示するためのものである。広告配信者１０６は、複数の入札のうちの少なくとも１つの入札を選択する。例えば、最も高額の入札が選択される。

広告配信者１０６は、発行リソースにコンテンツが表示されるのと実質的に同時に、発行リソースに対する品質評価点を決定する。発行リソースへのコンテンツの表示は、矢印４０４で示され、品質評価点の決定は、矢印４０６で示される。ある実施形態では、品質評価点は、分類モジュール１２２を用いて決定される。

広告配信者１０６は、品質評価点に基づいて、選択した入札を調整してよい。例えば、選択した入札の金額は、品質評価点に応じて加減調整される。入札の調整は、矢印４０８で示される。

図４Ｂでは、広告配信者１０６は、矢印４０２によって示されるように、複数の入札を受信して、そのうちから少なくとも１つの入札を選択する。広告配信者１０６は、矢印４０６で示されるように、発行リソースに対する品質評価点を決定し、矢印４１０で示されるように、選択した入札に対する入札額を徴収する。さらに、広告配信者１０６は、矢印４１２で示されるように、品質評価点に基づいて、入札額の一部分の払い戻しを行う。例えば、品質評価点に応じて、小額又は多額の払い戻しが行われる。

図３は、汎用コンピュータシステム３００の概略図である。システム３００は、一実施形態に従って、先に記載されたコンピュータ実施方法のうちのいずれかに関連して記載された動作のために使用できる。システム３００は、プロセッサ３１０と、メモリ３２０と、記憶装置３３０と、入力／出力装置３４０とを具備する。複数の構成要素３１０，３２０，３３０，３４０のそれぞれは、システムバス３５０を用いて相互に接続されている。プロセッサ３１０は、システム３００内での実行のために命令を処理する機能を有する。一実施形態では、プロセッサ３１０は、シングルスレッドプロセッサである。別の実施形態では、プロセッサ３１０は、マルチスレッドプロセッサである。プロセッサ３１０は、メモリ３２０内又は記憶装置３３０上に格納された命令を処理して、入力／出力装置３４０上のユーザインタフェースにグラフィカルな情報を表示する機能を有する。

メモリ３２０は、システム３００内の情報を格納する。一実施形態では、メモリ３２０は、コンピュータ読み取り可能な記録媒体である。一実施形態では、メモリ３２０は、揮発性メモリユニットである。別の実施形態では、メモリ３２０は、不揮発性メモリユニットである。

記憶装置３３０は、システム３００に大容量の記憶手段を提供する機能を有する。一実施形態では、記憶装置３３０は、コンピュータ読み取り可能な記録媒体である。さまざまな別個の実施形態では、記憶装置３３０は、フロッピー（登録商標）ディスク装置、ハードディスク装置、光ディスク装置、又はテープ装置である。

入力／出力装置３４０は、システム３００に入力／出力動作を提供する。一実施形態では、入力／出力装置３４０は、キーボード及び／又はポインティングデバイスを含む。別の実施形態では、入力／出力装置３４０は、グラフィカルユーザインタフェースを表示するための表示ユニットを含む。

記載した特徴は、デジタル電子回路によって、又は、コンピュータハードウェア、ファームウェア、ソフトウェアによって、又は、それらの組み合わせによって実現されてよい。装置は、プログラマブルプロセッサによる実行のために、情報担体、例えば、機械読み取り可能な記憶装置として、又は、伝搬信号として実体化されたコンピュータプログラム製品として実現されてもよい。また、方法の各ステップは、命令プログラムを実行するプログラマブルプロセッサによって実行されて、入力データを処理し、出力を生成することによって、記載された実施形態の機能を実行してもよい。好ましくは、記載された特徴は、データ記憶システム、少なくとも１つの入力装置、及び少なくとも１つの出力装置からデータ及び命令を受信し、かつそれらへデータ及び命令を送信するように接続された少なくとも１つのプログラマブルプロセッサを含むプログラマブルシステム上で実行可能な１つ以上のコンピュータプログラムとして実現される。コンピュータプログラムは、コンピュータで直接的又は間接的に使用され、特定の動作を実行するか又は特定の結果を得る命令一式である。コンピュータプログラムは、コンパイラ型又はインタープリタ型の言語含むあらゆるプログラミング言語で記述されてよく、スタンドアロンプログラムとしての形態、又は、モジュール、コンポーネント、サブルーチンとしての形態、又は、演算環境で使用するために適したその他の単位での形態を含む、あらゆる形態で利用されてよい。

命令プログラムの実行に適したプロセッサには、例えば、汎用及び専用の両方のマイクロプロセッサ、並びに、あらゆる種類のコンピュータのソロプロセッサ又は複数のプロセッサのうちの１つのプロセッサが含まれる。一般に、プロセッサは、リードオンリーメモリ若しくはランダムアクセスメモリ又はその両方から命令及びデータを受信する。コンピュータの必須要素は、命令を実行するためのプロセッサと、命令及びデータを格納するための１つ以上のメモリとである。また、一般に、コンピュータは、データファイルを格納するための１つ以上の大容量記憶装置を具備するか、又は、それらと通信を行うように動作可能に接続される。そのような大容量記憶装置には、内蔵ハードディスクやリムーバブルディスクなどの磁気ディスク、光磁気ディスク、及び光ディスクが含まれる。コンピュータプログラム命令及びデータの実体化に適した記憶装置には、例えば、ＥＰＲＯＭ、ＥＥＰＲＯＭ、及びフラッシュメモリ装置などの半導体メモリ装置、リムーバブルディスク、光磁気ディスク、並びに、ＣＤ−ＲＯＭ及びＤＶＤ−ＲＯＭディスクを含む、あらゆる形態の不揮発性メモリが含まれる。プロセッサ及びメモリは、ＡＳＩＣ（特定用途向けＩＣ）によって増補されるか又は一体化されてよい。

ユーザとの対話を提供するために、記載された特徴は、ユーザに対する情報を表示するためのＣＲＴ（陰極線管）又はＬＣＤ（液晶表示）モニタなどの表示装置と、ユーザによるコンピュータへの入力を提供するマウス又はトラックボールなどのポインティングデバイス及びキーボードとを具備したコンピュータ上で実現される。

記載された特徴は、データサーバなどのバック−エンドコンポーネントを含むコンピュータシステム、アプリケーションサーバやインターネットサーバなどのミドルウェアコンポーネントを含むコンピュータシステム、グラフィカルユーザインタフェース又はインターネットブラウザを有したクライアントコンピュータなどのフロント−エンドコンポーネントを含むコンピュータシステム、又は、それらの任意の組み合わせで実現されてよい。システムの各構成要素は、通信ネットワークなどのデジタルデータ通信のあらゆる形態又は媒体によって接続されてよい。通信ネットワークの例としては、例えば、ＬＡＮ、ＷＡＮ、及び、インターネットを形成するコンピュータアンドネットワークなどがある。

コンピュータシステムは、クライアントとサーバを含んでよい。クライアント及びサーバは、通常は、互いに離れて位置するとともに、典型的に、先に記載したもののうちの１つなどのネットワークを介して対話を行う。クライアントとサーバとの関係は、個々のコンピュータで実行される、互いへのクライアント−サーバ関係を有したコンピュータプログラムによって生じる。

以上、いくつかの実施形態が記載されたが、当然ながら、本開示の精神及び範囲から逸脱することなく、さまざまな修正が可能である。したがって、その他の実施形態もまた添付の特許請求の範囲内にある。

１００ 報酬配当機能を有したシステム
１０２ａ，１０２ｂ 発行者
１０４ 広告主
１０６ 広告配信者
１０８ａ，１０８ｂ，１０８ｃ 訪問者
１１０ａ，１１０ｂ ページ
１１２ａ，１１２ｂ 広告
１１４ コンテンツ
１１６ リポジトリ
１１８ コンテンツ配信モジュール
１２０ 報酬配当モジュール
１２２ 分類モジュール
１２４ 基金
１４０ａ 発行者

Claims (20)

1. 報酬配当のためのコンピュータ実施方法であって、
   発行者からの第１コンテンツを品質基準に関して分析する段階と、
   分析結果に基づいて、前記第１コンテンツに品質評価点を関連付ける段階と、
   前記第１コンテンツを発行しようとする前記発行者に第２コンテンツを提供する段階と、
   前記第２コンテンツに対する報酬を前記発行者に配当する段階と
   を有し、
   前記報酬は、前記品質評価点の少なくとも一部分に基づいて決定されたものであることを特徴とするコンピュータ実施方法。
2. 前記発行者へ送信する前記第２コンテンツを提供する広告主から、前記第２コンテンツを発行するための料金を徴収する段階をさらに有し、
   報酬を前記発行者に配当する前記段階が、前記品質評価点に基づいて前記料金の一部分を前記発行者と分配する段階を含むことを特徴とする請求項１に記載のコンピュータ実施方法。
3. 前記広告主から徴収する前記料金を決定する段階をさらに有し、
   前記料金は、前記品質評価点の少なくとも一部分に基づいて決定されたものであることを特徴とする請求項２に記載のコンピュータ実施方法。
4. 前記発行者への前記第２コンテンツの送信と前記報酬の配当とがコンテンツ配信局によって行われ、
   報酬を前記発行者に配当する前記段階では、前記コンテンツ配信局は、前記発行者よりも高い品質評価点が関連付けられた別の発行者によれば、同等の発行と比較してより高い利益を得られることを特徴とする請求項１に記載のコンピュータ実施方法。
5. 前記第２コンテンツの発行に対して支払いを行った広告主に、前記より高い利益の少なくとも一部分を分配する段階をさらに有することを特徴とする請求項４に記載のコンピュータ実施方法。
6. 前記より高い品質評価点が関連付けられた別の発行者に、前記より高い利益の少なくとも一部分を分配する段階をさらに有することを特徴とする請求項４に記載のコンピュータ実施方法。
7. 前記第１コンテンツを前記品質基準に関して再度分析する段階と、
   前記第１コンテンツの再度の分析結果に基づいて、前記第１コンテンツに新たな品質評価点を関連付ける段階と
   をさらに有することを特徴とする請求項１に記載のコンピュータ実施方法。
8. 前記第１コンテンツを再度分析する前記段階の前に、前記第１コンテンツの品質について前記発行者に通知する段階と、
   前記新たな品質評価点を前記品質評価点と比較して、品質が向上したか否かを判断する段階と
   をさらに有することを特徴とする請求項７に記載のコンピュータ実施方法。
9. 前記第１コンテンツには、ｎ時間単位毎に前記新たな品質評価点が関連付けられ、
   前記新たな品質評価点は、Ｎ時間単位経過時の前記第１コンテンツの分析に基づいて決定され、
   ここで、ｎ及びＮは、正の数であることを特徴とする請求項７に記載のコンピュータ実施方法。
10. 前記第１コンテンツ、前記第２コンテンツ、及び該第２コンテンツの送信に関連した前記品質評価点についての情報を記録する段階と、
    記録された前記情報に基づいて、前記報酬を決定する段階と
    をさらに有し、
    前記報酬を決定する段階は、記録の後、実質的に非リアルタイムで実行され、
    前記第２コンテンツは、発行のためにリアルタイムで前記発行者に送信されることを特徴とする請求項１に記載のコンピュータ実施方法。
11. 前記第１コンテンツを用いた前記第２コンテンツの発行に対するオークションを実施する段階をさらに有し、
    前記報酬は、前記オークションの利益にも基づいて決定されることを特徴とする請求項１に記載のコンピュータ実施方法。
12. 前記オークションは、複数の発行者が前記第２コンテンツを発行する権利の取得を競い合うように構成されることを特徴とする請求項１１に記載のコンピュータ実施方法。
13. 第１コンテンツを分析する前記段階が、
    少なくとも前記品質基準に関する分析を実行するように、分類部に学習を行わせる段階と、
    前記分類部に前記第１コンテンツを識別させて、分析を実行する段階と
    を含むことを特徴とする請求項１に記載のコンピュータ実施方法。
14. コンピュータ読み取り可能な記録媒体として実体化された、プロセッサによって実行されたとき、報酬配当のための方法を実行する複数の命令からなるコンピュータプログラム製品であって、
    前記方法は、
    発行者からの第１コンテンツを品質基準に関して分析する段階と、
    分析結果に基づいて、前記第１コンテンツに品質評価点を関連付ける段階と、
    前記第１コンテンツを発行しようとする前記発行者に第２コンテンツを送信する段階と、
    前記第２コンテンツに対する報酬を前記発行者に配当する段階と
    を有し、
    前記報酬は、前記品質評価点の少なくとも一部分に基づいて決定されたものであることを特徴とするコンピュータプログラム製品。
15. 複数の発行者に関連する個々の第１コンテンツに対する品質評価点を格納したリポジトリ部と、
    前記個々の第１コンテンツのうちの少なくとも１つを発行しようとする前記複数の発行者のうちの少なくとも第１発行者に第２コンテンツを送信するコンテンツ配信部と、
    前記第２コンテンツに対する報酬を前記第１発行者に配当する報酬配当部と
    を具備し、
    前記品質評価点は、前記第１コンテンツを品質基準に関して分析することによって決定され、
    前記報酬は、前記第１発行者の前記品質評価点の少なくとも一部分に基づいて決定されたものであることを特徴とするコンピュータシステム。
16. 報酬配当のためのコンピュータ実施方法であって、
    報酬と引き換えに自身のページに少なくとも１つの広告を含ませることに同意した発行者からの第１ページを品質基準に関して分析する段階と、
    分析結果に基づいて、前記第１ページに品質評価点を関連付ける段階と、
    前記広告の発行に対して料金を支払うことに同意した広告主から少なくとも１つの前記広告を取得する段階と
    前記第１ページを発行しようとする前記発行者に、広告配信局によって選択された少なくとも１つの前記広告を送信する段階と、
    前記広告に対する報酬を前記発行者に配当する段階と、
    を有し、
    前記品質評価点は、前記発行者に少なくとも１つの前記広告を提供する前記広告配信局によって定められたページ品質を指し、
    前記報酬は、前記広告主から徴収した料金の少なくとも一部分と前記品質評価点とに基づいて決定されたものであり、
    前記料金の残余額は、前記広告配信局によって少なくとも一時的に保管されることを特徴とするコンピュータ実施方法。
17. 前記残余額の少なくとも一部分を前記広告主と分配する段階をさらに有することを特徴とする請求項１６に記載のコンピュータ実施方法。
18. 前記発行者よりも高い品質評価点を有する少なくとも１つの別の発行者を識別する段階と、
    前記残余額の少なくとも一部分を前記別の発行者と分配する段階と
    をさらに有することを特徴とする請求項１６に記載のコンピュータ実施方法。
19. 発行リソースへのコンテンツの表示に対する複数の入札を受信する段階と、
    前記複数の入札のうちの少なくとも１つの入札を選択する段階と、
    前記発行リソースへの前記コンテンツの表示と実質的に同時に、前記発行リソースに対する品質評価点を決定する段階と、
    前記品質評価点に基づいて、選択した前記入札を調整する段階と
    を有することを特徴とする方法。
20. 発行リソースへのコンテンツの表示に対する複数の入札を受信する段階と、
    前記複数の入札のうち、入札額に達した少なくとも１つの入札を選択する段階と、
    選択した前記入札に対して前記入札額を徴収する段階と、
    前記発行リソースへの前記コンテンツの表示と実質的に同時に、前記発行リソースに対する品質評価点を決定する段階と、
    前記品質評価点に基づいて、前記入札額の一部分の返金を行う段階と
    を有することを特徴とする方法。