Bei mir ähnlich. Trotzdem sind nicht alle meiner Seiten im Index.
Auf die Idee Yahoo deswegen auszusperren bin ich noch nicht gekommen, obwohl die Besucher über Yahoo höchstens 1% betragen.
Wüßte nicht wie ich dem Bot ein Crowllimit geben könnte.