前回は大規模な文章からクエリの含まれる文章を抽出し、ランキングを行う方法について述べた。この発表ではランキングした文書の順番が適当かどうかを評価する方法について述べる。評価方法の一つとしては適合率(precision)、再現率(recall)、F値(F-measure)で各文書がクエリに関連するかどうかを評価できる。一つのクエリだけでなく複数のクエリに対しての評価はMAP(mean average precision)という方法がある。ウェブ検索の方法には誘導型と調査型があり、どちらもページの重要度を考える必要がある。ウェブページの重要度の評価方法はクローラーを用いたページランクによって決まる。