Pourquoi Semji utilise un bot ?

Pour analyser et extraire le contenu de votre site web ainsi que celui des pages qui se positionnent sur vos mots clés, Semji utilise un robot d’exploration, communément appelé bot, crawler, web crawler ou encore web spider.

Ce bot, appelé SemjiBot, développé spécifiquement pour les besoins de Semji, nécessite d’être autorisé à visiter votre site web pour en extraire le contenu, l’analyser et vous le présenter au sein de la plateforme.

Dans le cas contraire, certaines fonctionnalités de Semji seront restreintes.

Quand SemjiBot accède-t-il à mon site ?

  • En tant que client, SemjiBot accède à votre site lorsque vous importez une ou plusieurs pages au sein de la plateforme.
  • SemjiBot se présente à nouveau lorsque vous demandez une synchronisation de votre contenu.
  • Semjibot peut également se présenter dans d'autres cas et à différents moments de la semaine dans un souci permanent d'amélioration des performances de vos contenus.

Comment autoriser SemjiBot à naviguer sur mon site ?

Le bot Semji s’annonce au site qu’il visite en utilisant l’un des deux User-Agents ci-dessous :

  • Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; SemjiBot/1.0; +http://semji.com) Chrome/79.0.3945.88 Safari/537.36

Cette information nécessite d’être traitée par votre équipe technique qui peut, dès lors, autoriser explicitement SemjiBot.

Avez-vous trouvé votre réponse?