Regardez autour de vous, hommes et femmes de votre site Internet. Les robots d’exploration. Ils sont à peu près partout. La plupart des visiteurs du site Web ne sont pas des êtres humains, mais plutôt des robots ou des programmes créés pour effectuer des tâches automatiques. Ce sont les abeilles employées d’Internet, ainsi que les hommes de main. Certains robots vous aident à renouveler votre flux Facebook ou myspace ou à comprendre comment classer les effets de recherche sur Internet; d’autres robots se font passer pour des humains et effectuent des attaques DDoS écrasantes. Dans l’ensemble, les robots – bons et mauvais – sont responsables de 52 pour cent du trafic du site Web, selon un nouveau rapport de l’organisation de stabilité Imperva, qui remet en question une évaluation annuelle du processus de bot en ligne. La statistique de 52% est considérable car elle représente quelques conseils dans les échelles depuis le rapport de l’année précédente, qui localisait l’homme que les visiteurs avaient connu dépassé les visiteurs de robots au départ, étant donné qu’au moins 2012, lorsque Imperva a commencé à suivre l’action des robots en ligne. Maintenant, l’enquête la plus récente, qui est fondée sur une évaluation de près de 17 milliards de visites de sites Web à partir de plus de 100 000 sites Web, montre que les robots d’exploration sont en arrière au sommet. Non seulement cela, mais les robots nuisibles possèdent le côté au-dessus des robots d’aide, qui étaient respectivement responsables de 29% et 23% de la plupart du trafic en ligne. «La statistique la plus déconcertante avec cette déclaration peut aussi être l’une des tendances les plus prolongées qu’elle observe», écrit Igal Zeifman, directeur de la publicité d’Imperva, dans un article sur la recherche. «Auparavant cinq ans, chaque visiteur du site Internet sur trois était un robot d’invasion.» En d’autres termes: bien plus de 94% des 100 000 noms de domaine Internet contenus dans le document connaissaient au moins une attaque de bot sur la période de 90 jours examinée par Imperva. Les sites Web qui peuvent être beaucoup moins populaires auprès de l’humanité – d’après le trafic du site Web – ont tendance à attirer beaucoup plus de sessions de la part des robots d’exploration. «Simplement placé», a écrit Zeifman, «de bons robots exploreront votre site Internet et des robots terribles essaieront d’y pénétrer, peu importe à quel point il est connu des individus. Ils continueront probablement même à visiter un nom de domaine en pénurie de tout le trafic humain.  » Bien que les robots d’exploration s’intéressent aux sites Internet, que les êtres humains ne le soient pas, l’action des robots a tendance à correspondre à la conduite des hommes sur le Web. Par exemple, le robot d’aide en ligne le plus productif est de loin ce que l’on appelle un «récupérateur de flux», et c’est le niveau de robot qui permet de recharger le flux Facebook d’une personne sur l’application mobile du site. Le récupérateur de fournitures de Facebook, à lui seul, représentait 4,4% de tout le trafic du site, conformément au rapport – ce qui peut être peut-être étonnant, mais pas tout à fait surprenant. Facebook ou myspace est en fait un monstre, et son trafic ciblé par les robots montre la quantité maximale de. Général, les récupérateurs de dons ont représenté plus de 12% du trafic Web cette année. Les robots d’exploration des moteurs de recherche, les araignées qui suppriment les détails de l’entreprise et le suivi des sites Web par les robots d’exploration sont l’un des autres robots d’exploration précieux que vous êtes susceptible de rencontrer sur Internet. (C’est-à-dire que lorsque vous regardez la variété de vos données personnelles pour promouvoir des fonctions bénéfiques.) Les robots d’exploration d’informations font leur travail de manière invisible, tandis que les autres robots d’exploration sont plus simples à identifier. La vérité est que les robots et d’autres personnes frappent généralement l’autre personne. Les spambots apparaissent dans des parties d’opinion et les robots d’exploration de YouTube encombrent les délais des gens avec tout, de la publicité et du marketing, à la campagne politique, à l’activisme sociable, à l’absurdité absolue. Ces types de robots ne sont généralement pas agréables, mais ils ne sont pas totalement dangereux. Pour les vrais méchants, nous considérons les robots imitateurs utilisés pour les épisodes DDoS. Ils ont inclus environ 24% du trafic Web total il y a un an. Les délinquants les mieux notés dans cette classification ont fourni le logiciel malveillant Nitol, un robot appelé Cyclone destiné à imiter le superbe look de Google pour les robots permanents, et le logiciel malveillant Mirai, un virus qui a provoqué des interruptions massives du Web aux États-Unis en octobre. D’autres terribles robots à gérer impliquent des grattoirs de détails non autorisés, des spambots et des récupérateurs à la recherche de vulnérabilités de stabilité à utiliser. Ensemble, ils ont constitué environ 5% du trafic du site Web. Et bien qu’Internet soit définitivement principalement des robots d’exploration, nous commençons tout juste à voir l’ère des robots prendre forme. Conformément à l’activité d’enquête de marché CB Insights, plus d’une douzaine de startups de robots soutenues par des fonds d’entreprise ont augmenté leur soutien initial il y a un an.

— définition SEO