ArcheryTrailBot, le robot d'ArcheryTrail
ArcheryTrailBot lit chaque nuit les calendriers publics des comités régionaux et départementaux de tir à l'arc, pour afficher les concours sur archerytrail.com. Chaque concours renvoie vers sa source officielle.
Identification
User-agent : ArcheryTrailBot/0.1 (+https://www.archerytrail.com/bot). Adresses IP : 179.237.121.234, 2001:1600:18:20c::328 (liste à jour : /archerytrailbot-ips.txt). Leur DNS inverse pointe vers bot.archerytrail.com, qui pointe à son tour vers ces adresses. Toute requête qui se réclame d'ArcheryTrailBot depuis une autre adresse n'est pas la nôtre.
Comment il se comporte
- Une seule visite par nuit, entre 1 h et 7 h (heure de Paris).
- Une requête par seconde au plus par site, avec un délai aléatoire, et plus lentement si robots.txt le demande (Crawl-delay).
- Le fichier robots.txt est lu avant toute page et respecté : une interdiction suffit pour qu'une page ne soit jamais lue.
- Dès qu'un défi anti-robot apparaît, le robot s'arrête sur ce site pour la nuit. Il ne le contourne jamais : pas de navigateur déguisé, pas de proxy, pas d'identité empruntée.
- Il ne lit que les pages de calendrier et les mandats publiés. Les mandats sont archivés pour n'être servis que si le site officiel est indisponible.
Le bloquer ou le limiter
Ajoutez à votre robots.txt : User-agent: ArcheryTrailBot puis Disallow: / (pris en compte dès la nuit suivante), ou écrivez-nous.
User-agent: ArcheryTrailBot Disallow: /
Contact
contact@archerytrail.com