Le robot de veille de FarmAides
FarmAides est un service public gratuit de Farmidable qui aide les exploitations agricoles à trouver les aides auxquelles elles ont droit. Pour garder sa base à jour, il relit quelques pages publiques d'organismes qui financent l'agriculture.
Ce que fait le robot
- Il se présente sous le nom
FarmAides-veille, suivi de l'adresse de cette page. - Il lit une courte liste de pages qui annoncent des aides agricoles, choisies par notre équipe, une fois par jour ou par semaine selon la page.
- Il respecte le fichier
robots.txtde chaque site, relu chaque jour. S'il ne peut pas le lire, il ne lit pas la page. - Il envoie au plus une requête par minute à un même serveur, même si plusieurs sites y sont hébergés, et abandonne une page qui ne répond pas en 15 secondes.
- Il ne garde que le texte utile de la page, pour repérer ce qui change. Chaque changement est relu par un éditeur de FarmAides avant toute publication.
Ne plus être lu
Ajoutez ces lignes au fichier robots.txt de votre site : le robot cessera de lire vos pages dès le lendemain.
User-agent: FarmAides-veille
Disallow: /Une question sur ce robot ? Écrivez à l'équipe de Farmidable depuis farmidable.fr.