VerticaleBot

VerticaleBot lit des sites web pour Verticale, qui crée de nouveaux sites pour les petites entreprises. Quand une entreprise commence son nouveau site, VerticaleBot lit celui qu’elle a aujourd’hui, pour que le nouveau parte de ses propres textes, prix et photos.

Quand il passe

Seulement quand quelqu’un commence ou actualise un site sur Verticale et donne l’adresse de son site actuel. Il ne parcourt pas le web et ne revient pas à intervalles réguliers. Chaque visite lit au plus 32 pages, 8 documents PDF et 32 images, et reste sur ce seul site.

Comment il se comporte

Il respecte votre robots.txt : les règles pour VerticaleBot, sinon celles pour tous les robots. Il attend entre deux requêtes aussi longtemps que votre Crawl-delay le demande. Il ne se connecte jamais, ne remplit aucun formulaire, n’exécute aucun script et ne contourne aucune vérification.

Ce qu’il lit sert uniquement à préparer le nouveau site de cette entreprise. Ce n’est ni vendu, ni utilisé pour la publicité, ni utilisé pour entraîner des modèles d’IA.

Comment le reconnaître

Son agent utilisateur (user agent) est :

VerticaleBot/1.0 (+https://getverticale.com/bot)

Chaque requête est aussi signée avec Web Bot Auth, ce qui permet de distinguer un programme qui prétend seulement être VerticaleBot. Sa clé publique est publiée ici :

Le bloquer ou l’autoriser

Pour tenir VerticaleBot à l’écart de votre site, ajoutez ceci à votre robots.txt :

User-agent: VerticaleBot
Disallow: /

Si votre protection contre les robots le bloque et que vous souhaitez que votre site soit lu, autorisez les requêtes qui portent une signature Web Bot Auth valide de getverticale.com, ou autorisez les robots vérifiés si votre fournisseur les répertorie.