Re: [FRnOG] Euthanasie du VoilaBot

2008-10-20 Par sujet Frédéric VANNIÈRE

Un exemple pour montrer les dégâts que fait
le VoilaBot sur certains serveurs.

Pour un gros site de petites annonces, sur
14h d'activité, le serveur a servi 250 k
pages dynamiques PHP.

Sur ces 250k hits on a :
  - VoilaBot : 140k hits  (56 %)
  - Googlebot : 17k hits  (10 %)
  - reste (visiteurs humains) :  87k hits (34 %)

Le pire, c'est que plus personne n'utilise l'index
de Voila et que le VoilaBot parcourt le web en
saturant plein de serveurs pour rien.

--
Frédéric VANNIÈRE
Directeur Technique

PLANET-WORK
231 rue Saint-Honoré
75001 PARIS - FRANCE

Tél : 01 41 79 78 60
Fax : 01 41 79 78 61
Web : http://www.planet-work.fr/

Planet-Work, vecteur de votre image sur Internet


---
Liste de diffusion du FRnOG
http://www.frnog.org/



Re: [FRnOG] Euthanasie du VoilaBot

2008-10-20 Par sujet Frédéric VANNIÈRE

J'ai eu un appel de Voila et visiblement le
moteur est encore actif et utilisé. Ils
m'ont assuré que depuis quelques mois le
bot était moins violent et respectait
le crawl-delay ... à tester.

--
Frédéric VANNIÈRE
Directeur Technique

PLANET-WORK
231 rue Saint-Honoré
75001 PARIS - FRANCE

Tél : 01 41 79 78 60
Fax : 01 41 79 78 61
Web : http://www.planet-work.fr/

Planet-Work, vecteur de votre image sur Internet


---
Liste de diffusion du FRnOG
http://www.frnog.org/