最近来たロボット：
HTTP_FROM= http://www.research.digital.com/SRC/mercator/
最初名前が読めなかったのだが，あの円筒図法の「メルカトル」ですね． 「一様ランダムに」 URL をサンプルする，というのが案外てごわい問題で， それ用に乱歩(日本語では酔歩か)するロボットらしいっす． 詳細はこちらを． 各エンジンの Coverage のグラフなんてのもあるっす．
http://www.st.rim.or.jp/~donogo/2000/12/23.html