ワールドワイドウェブの放浪者

World Wide Web Wanderer は、単にThe Wandererとも呼ばれ、 1993 年 6 月にWorld Wide Webの規模を測定するために初めて導入されたPerlベースのWeb クローラーです。Wanderer は、マサチューセッツ工科大学のMatthew Gray によって開発されました。Gray は、1993 年に史上初の 100 台の Web サーバーのうちの 1 つである www.mit.edu も作成しました。^{[1]このクローラーは、1993 年後半に}Wandexと呼ばれるインデックスを生成するために使用されました。Wandererは、1995 年後半まで Web の成長を記録しました。

ワンダラーはおそらく最初のウェブロボットであり、そのインデックスにより、明らかに汎用のWWW検索エンジンになる可能性を秘めていました。作者のマシュー・グレイは、この主張をしていません。^{[2]他の箇所では、}ワンダラーの目的はウェブ検索エンジンになることではなかったと述べられています。^[3]

• ウェブレポートの成長
• World Wide Web Wanderer の初期の言及