Perhaps it&#39;s someone&#39;s spider they&#39;ve written / downloaded, especially if you say it&#39;s following a normal pattern. They could have been spidering the Indian site and have followed a link to the UK site.<div>
<br></div><div>If your site does have issues when it&#39;s being crawled, although unlikely that it&#39;ll be anywhere near 1000 request per second, then perhaps something needs to be done to improve performance?</div><div>
<br></div><div><div>David, is that apache plugin likely to blacklist google when it tries to index a site? as that would be a clear downside.</div></div><div><br></div><div>Regards,</div><div><br></div><div>Paul.</div>