<div dir="ltr">I meant at the level of the firewall or web server configuration. Abusers are unlikely to obey robots.txt.<br clear="all"><div><div><div dir="ltr" class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div><br></div><div>Christian Zimmermann</div></div></div></div><br></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Sat, May 13, 2023 at 4:20 AM Thomas Krichel <<a href="mailto:krichel@openlib.org">krichel@openlib.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">  Christian Zimmermann writes<br>
> Just deny that IP and be done with it.<br>
<br>
  I will try<br>
<br>
<a href="https://collec.repec.org/robots.txt" rel="noreferrer" target="_blank">https://collec.repec.org/robots.txt</a><br>
<br>
  instead. Service is up again.<br>
<br>
<br>
-- <br>
  Written by Thomas Krichel <a href="http://openlib.org/home/krichel" rel="noreferrer" target="_blank">http://openlib.org/home/krichel</a> on his 21162nd day.<br>
</blockquote></div>