{"id":70927,"date":"2025-05-12T07:00:00","date_gmt":"2025-05-12T14:00:00","guid":{"rendered":"https:\/\/dhblog.dream.press\/blog\/?p=70927"},"modified":"2025-05-26T07:33:16","modified_gmt":"2025-05-26T14:33:16","slug":"comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr","status":"publish","type":"post","link":"https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/","title":{"rendered":"Comment Emp\u00eacher Les Robots D\u2019Indexation Et Les Bots De Ralentir Ton Site Web"},"content":{"rendered":"\n<p>Ton site web, c&#8217;est comme un caf\u00e9. Les gens entrent et consultent le menu. Certains commandent des lattes, s&#8217;assoient, sirotent et partent.<\/p>\n\n\n<p>Mais que se passe-t-il si la moiti\u00e9 de tes &#8220;clients&#8221; occupent juste des tables, font perdre du temps \u00e0 tes baristas et ne consomment jamais de caf\u00e9 ?<\/p>\n\n\n<p>Pendant ce temps, de vrais clients partent \u00e0 cause du manque de tables et du service lent ?<\/p>\n\n\n<p>Et bien, c&#8217;est le monde des robots d&#8217;indexation et des bots.<\/p>\n\n\n<p>Ces programmes automatis\u00e9s consomment votre bande passante, ralentissent votre site et font fuir vos v\u00e9ritables clients.<\/p>\n\n\n<p>Des \u00e9tudes r\u00e9centes montrent que <a target=\"_blank\" href=\"https:\/\/www.imperva.com\/resources\/resource-library\/reports\/2025-bad-bot-report\/\">presque 51% du trafic internet<\/a> provient des bots. C&#8217;est vrai \u2014 <strong>plus de la moiti\u00e9<\/strong> de tes visiteurs num\u00e9riques pourraient juste gaspiller tes ressources serveur.<\/p>\n\n\n<p>Mais ne panique pas !<\/p>\n\n\n<p>Ce guide t&#8217;aidera \u00e0 identifier les probl\u00e8mes et \u00e0 contr\u00f4ler la performance de ton site, le tout sans avoir besoin de coder ou d&#8217;appeler ton cousin technicien.<\/p>\n\n\n<h2 id=\"h-a-quick-refresher-on-bots\" class=\"wp-block-heading\">Un Bref Rappel Sur Les Bots<\/h2>\n\n\n<p>Les bots sont des programmes logiciels automatis\u00e9s qui effectuent des t\u00e2ches sur internet sans intervention humaine. Ils :<\/p>\n\n\n<ul class=\"wp-block-list\">\n<li>Visite des sites web<\/li>\n\n\n\n<li>Interagir avec le contenu num\u00e9rique<\/li>\n\n\n\n<li>Et ex\u00e9cute des fonctions sp\u00e9cifiques selon leur programmation.&nbsp;<\/li>\n\n\n<\/ul>\n\n\n<p>Certains bots analysent et indexent ton site (am\u00e9liorant potentiellement les classements des moteurs de recherche). Certains passent leur temps \u00e0 scraper ton contenu pour des ensembles de donn\u00e9es d&#8217;entra\u00eenement IA \u2014 ou pire \u2014 \u00e0 publier du spam, g\u00e9n\u00e9rer de faux avis, ou rechercher des exploits et des failles de s\u00e9curit\u00e9 dans ton site web.<\/p>\n\n\n<p>Bien s\u00fbr, tous les bots ne sont pas cr\u00e9\u00e9s \u00e9gaux. Certains sont essentiels \u00e0 la sant\u00e9 et \u00e0 la visibilit\u00e9 de ton site web. D&#8217;autres sont plut\u00f4t neutres, et quelques-uns sont carr\u00e9ment toxiques. Conna\u00eetre la diff\u00e9rence \u2014 et d\u00e9cider quels bots bloquer et quels bots autoriser \u2014 est crucial pour prot\u00e9ger ton site et sa r\u00e9putation.<\/p>\n\n\n<h2 id=\"h-good-bot-bad-bot-what-s-what\" class=\"wp-block-heading\">Bon Bot, Mauvais Bot : Quelle Est La Diff\u00e9rence ?<\/h2>\n\n\n<figure class=\"wp-block-image size-full\"><img decoding=\"async\" width=\"1600\" height=\"1334\" data-src=\"https:\/\/www.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/01_bad_bot_vs_good_bot_vs_human_traffic_2024.webp\" alt=\"Diagramme en beignet du trafic web 2023 montrant les Humains \u00e0 49% (-1,4%), les Bad Bot \u00e0 37% (+5%), et les Good Bot \u00e0 14% (-3,6%).\" class=\"wp-image-67301 lazyload\" data-srcset=\"https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/01_bad_bot_vs_good_bot_vs_human_traffic_2024.webp 1600w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/01_bad_bot_vs_good_bot_vs_human_traffic_2024-300x250.webp 300w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/01_bad_bot_vs_good_bot_vs_human_traffic_2024-1024x854.webp 1024w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/01_bad_bot_vs_good_bot_vs_human_traffic_2024-768x640.webp 768w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/01_bad_bot_vs_good_bot_vs_human_traffic_2024-1536x1281.webp 1536w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/01_bad_bot_vs_good_bot_vs_human_traffic_2024-600x500.webp 600w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/01_bad_bot_vs_good_bot_vs_human_traffic_2024-1200x1001.webp 1200w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/01_bad_bot_vs_good_bot_vs_human_traffic_2024-730x609.webp 730w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/01_bad_bot_vs_good_bot_vs_human_traffic_2024-1460x1217.webp 1460w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/01_bad_bot_vs_good_bot_vs_human_traffic_2024-784x654.webp 784w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/01_bad_bot_vs_good_bot_vs_human_traffic_2024-1568x1307.webp 1568w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/01_bad_bot_vs_good_bot_vs_human_traffic_2024-877x731.webp 877w\" data-sizes=\"(max-width: 1600px) 100vw, 1600px\" src=\"data:image\/svg+xml;base64,PHN2ZyB3aWR0aD0iMSIgaGVpZ2h0PSIxIiB4bWxucz0iaHR0cDovL3d3dy53My5vcmcvMjAwMC9zdmciPjwvc3ZnPg==\" style=\"--smush-placeholder-width: 1600px; --smush-placeholder-aspect-ratio: 1600\/1334;\" \/><\/figure>\n\n\n<p>Les bots constituent Internet.<\/p>\n\n\n<p>Par exemple, le bot de Google visite chaque page sur internet et les ajoute \u00e0 leurs bases de donn\u00e9es pour le classement. Ce bot aide \u00e0 fournir un trafic de recherche pr\u00e9cieux, ce qui est important pour la sant\u00e9 de ton site web.<\/p>\n\n\n<p>Mais, tous les bots ne vont pas apporter de valeur et certains sont tout simplement mauvais. Voici ce qu&#8217;il faut garder et ce qu&#8217;il faut bloquer.<\/p>\n\n\n<h3 class=\"wp-block-heading\">Les Bots VIP (Gardez Ceux-Ci)<\/h3>\n\n\n<ul class=\"wp-block-list\">\n<li>Les robots d&#8217;indexation comme <a target=\"_blank\" href=\"https:\/\/www.dreamhost.com\/glossary\/seo\/googlebot\/\">Googlebot<\/a> et Bingbot sont des exemples de ces robots. Ne les bloque pas, sinon tu deviendras invisible en ligne.<\/li>\n\n\n\n<li>Les robots d&#8217;analyse recueillent des donn\u00e9es sur la performance de ton site, comme le robot <a target=\"_blank\" href=\"https:\/\/www.dreamhost.com\/blog\/pagespeed-insights-report\/\">Google Pagespeed Insights<\/a> ou le robot GTmetrix.<\/li>\n\n\n<\/ul>\n\n\n<h3 class=\"wp-block-heading\">Les Fauteurs De Troubles (\u00c0 G\u00e9rer)<\/h3>\n\n\n<ul class=\"wp-block-list\">\n<li>Des aspirateurs de contenu qui volent ton contenu pour l&#8217;utiliser ailleurs<\/li>\n\n\n\n<li>Des bots de Spam qui inondent tes formulaires et commentaires de d\u00e9chets<\/li>\n\n\n\n<li>Mauvais acteurs qui tentent de pirater des comptes ou d&#8217;exploiter des vuln\u00e9rabilit\u00e9s<\/li>\n\n\n<\/ul>\n\n\n<p>L&#8217;\u00e9chelle des mauvais bots pourrait te surprendre. En 2024, les bots avanc\u00e9s repr\u00e9sentaient <a target=\"_blank\" href=\"https:\/\/www.imperva.com\/resources\/resource-library\/reports\/2025-bad-bot-report\/\">55%<\/a> de tout le trafic de mauvais bots avanc\u00e9s, tandis que les bons en comptaient 44%.<\/p>\n\n\n<p>Ces bots avanc\u00e9s sont sournois \u2014 ils peuvent imiter le comportement humain, y compris les mouvements de la souris et les clics, ce qui les rend plus difficiles \u00e0 d\u00e9tecter.<\/p>\n\n\n<div class=\"article-newsletter article-newsletter--gradient\">\n\n\n<h2>Get Content Delivered Straight to Your Inbox<\/h2><p>Subscribe now to receive all the latest updates, delivered directly to your inbox.<\/p><form class=\"nwsl-form\" id=\"newsletter_block_\" novalidate><div class=\"messages\"><\/div><div class=\"form-group\"><label for=\"input_newsletter_block_\"><input type=\"email\"name=\"email\"id=\"input_newsletter_block_\"placeholder=\"Enter your email address\"novalidatedisabled=\"disabled\"\/><\/label><button type=\"submit\"class=\"btn btn--brand\"disabled=\"disabled\"><span>Sign Me Up!<\/span><svg width=\"21\" height=\"14\" viewBox=\"0 0 21 14\" fill=\"none\" xmlns=\"http:\/\/www.w3.org\/2000\/svg\">\n<path d=\"M13.8523 0.42524L12.9323 1.34521C12.7095 1.56801 12.7132 1.9304 12.9404 2.14865L16.7241 5.7823H0.5625C0.251859 5.7823 0 6.03416 0 6.3448V7.6573C0 7.96794 0.251859 8.2198 0.5625 8.2198H16.7241L12.9405 11.8535C12.7132 12.0717 12.7095 12.4341 12.9323 12.6569L13.8523 13.5769C14.072 13.7965 14.4281 13.7965 14.6478 13.5769L20.8259 7.39879C21.0456 7.17913 21.0456 6.82298 20.8259 6.60327L14.6477 0.42524C14.4281 0.205584 14.0719 0.205584 13.8523 0.42524Z\" fill=\"white\"\/>\n<\/svg>\n<\/button><\/div><\/form><\/div>\n\n<h2 id=\"h2_are-bots-bogging-down-your-website-look-for-these-warning-signs\" class=\"wp-block-heading\">Les Bots Ralentissent-ils Ton Site Web ? Recherche Ces Signes D&#8217;avertissement<\/h2>\n\n\n<p>Avant de plonger dans les solutions, v\u00e9rifions que les bots sont r\u00e9ellement ton probl\u00e8me. Regarde les signes ci-dessous.<\/p>\n\n\n<h3 class=\"wp-block-heading\">Signaux D&#8217;alerte Dans Tes Analyses<\/h3>\n\n\n<ul class=\"wp-block-list\">\n<li><strong>Pics de trafic sans explication :<\/strong> Si ton nombre de visiteurs augmente soudainement mais pas les ventes, les bots pourraient en \u00eatre la cause.<\/li>\n\n\n\n<li><strong>Tout ralentit :<\/strong> Les pages prennent plus de temps \u00e0 charger, frustrant les vrais clients qui pourraient partir pour de bon. Aberdeen montre que <a target=\"_blank\" href=\"https:\/\/www.aberdeen.com\/techpro-essentials\/gone-in-three-seconds-your-customers-have-no-patience-for-a-slow-website\/\">40 % des visiteurs<\/a> abandonnent les sites web qui mettent plus de trois secondes \u00e0 charger, ce qui entra\u00eene\u2026<\/li>\n\n\n\n<li><strong>Taux de rebond \u00e9lev\u00e9s :<\/strong> au-dessus de 90 % indiquent souvent une activit\u00e9 de bots.<\/li>\n\n\n\n<li><strong>Mod\u00e8les de sessions \u00e9tranges :<\/strong> Les humains ne visitent g\u00e9n\u00e9ralement pas juste pour quelques millisecondes ou ne restent pas sur une page pendant des heures.<\/li>\n\n\n\n<li><strong>Tu commences \u00e0 recevoir<\/strong><a target=\"_blank\" href=\"https:\/\/www.dreamhost.com\/blog\/driving-traffic-to-your-website\/\"><strong> <\/strong><strong>beaucoup de trafic inhabituel<\/strong><\/a><strong> :<\/strong> Surtout de pays o\u00f9 tu ne fais pas affaire. C&#8217;est suspect.<\/li>\n\n\n\n<li><strong>Soumissions de formulaires avec du texte al\u00e9atoire :<\/strong> Un comportement classique de bots.<\/li>\n\n\n\n<li><strong>Ton serveur est submerg\u00e9 :<\/strong> Imagine voir 100 clients \u00e0 la fois, mais 75 sont juste l\u00e0 pour regarder.<\/li>\n\n\n<\/ul>\n\n\n<h3 class=\"wp-block-heading\">V\u00e9rifie Tes Logs De Serveur<\/h3>\n\n\n<p>Les logs du serveur de ton site web contiennent les enregistrements de chaque visiteur.<\/p>\n\n\n<p><strong>Voici ce qu&#8217;il faut chercher :<\/strong><\/p>\n\n\n<ul class=\"wp-block-list\">\n<li>Trop de requ\u00eates cons\u00e9cutives provenant de la m\u00eame adresse IP<\/li>\n\n\n\n<li>Cha\u00eenes de user-agent \u00e9tranges (l&#8217;identification que les bots fournissent)<\/li>\n\n\n\n<li>Requ\u00eates pour des URLs inhabituelles qui n&#8217;existent pas sur votre site<\/li>\n\n\n<\/ul>\n\n\n\n\n<div class=\"glossary-term\">\n\t<a\n\t\tclass=\"glossary-term__above-title\"\n\t\thref=\"\"\n\t\ttarget=\"_blank\"\n\t\trel=\"noopener noreferrer\"\n\t>\n\t\t<svg xmlns=\"http:\/\/www.w3.org\/2000\/svg\" viewBox=\"0 0 640 512\"><path d=\"M320 32c-8.1 0-16.1 1.4-23.7 4.1L15.8 137.4C6.3 140.9 0 149.9 0 160s6.3 19.1 15.8 22.6l57.9 20.9C57.3 229.3 48 259.8 48 291.9v28.1c0 28.4-10.8 57.7-22.3 80.8c-6.5 13-13.9 25.8-22.5 37.6C0 442.7-.9 448.3 .9 453.4s6 8.9 11.2 10.2l64 16c4.2 1.1 8.7 .3 12.4-2s6.3-6.1 7.1-10.4c8.6-42.8 4.3-81.2-2.1-108.7C90.3 344.3 86 329.8 80 316.5V291.9c0-30.2 10.2-58.7 27.9-81.5c12.9-15.5 29.6-28 49.2-35.7l157-61.7c8.2-3.2 17.5 .8 20.7 9s-.8 17.5-9 20.7l-157 61.7c-12.4 4.9-23.3 12.4-32.2 21.6l159.6 57.6c7.6 2.7 15.6 4.1 23.7 4.1s16.1-1.4 23.7-4.1L624.2 182.6c9.5-3.4 15.8-12.5 15.8-22.6s-6.3-19.1-15.8-22.6L343.7 36.1C336.1 33.4 328.1 32 320 32zM128 408c0 35.3 86 72 192 72s192-36.7 192-72L496.7 262.6 354.5 314c-11.1 4-22.8 6-34.5 6s-23.5-2-34.5-6L143.3 262.6 128 408z\"\/><\/svg>\n\t\t<span><\/span>\n\t\t<svg xmlns=\"http:\/\/www.w3.org\/2000\/svg\" viewBox=\"0 0 384 512\"><path d=\"M342.6 233.4c12.5 12.5 12.5 32.8 0 45.3l-192 192c-12.5 12.5-32.8 12.5-45.3 0s-12.5-32.8 0-45.3L274.7 256 105.4 86.6c-12.5-12.5-12.5-32.8 0-45.3s32.8-12.5 45.3 0l192 192z\"\/><\/svg>\n\t<\/a>\n    <h3>Agent Utilisateur<\/h3>\n    <p>Un agent utilisateur est un type de logiciel qui r\u00e9cup\u00e8re et affiche du contenu web afin que les utilisateurs puissent interagir avec. Les exemples les plus courants sont les navigateurs web et les lecteurs d&#8217;email.<\/p>\n            <a\n            href=\"https:\/\/www.dreamhost.com\/glossary\/seo\/user-agent\/\"\n                        class=\"btn btn--white-outline btn--sm btn--round\"\n                                    target=\"_blank\"\n            rel=\"noopener noreferrer\"\n            >\n                            Lire la suite                    <\/a>\n\n<\/div>\n\n\n<p>Une requ\u00eate l\u00e9gitime de Googlebot pourrait ressembler \u00e0 cela dans vos logs :<\/p>\n\n\n<pre class=\"wp-block-code\"><code>66.249.78.17 - - &#091;13\/Juil\/2015:07:18:58 -0400] \"GET \/robots.txt HTTP\/1.1\" 200 0 \"-\" \"Mozilla\/5.0 (compatible; Googlebot\/2.1; +http:\/\/www.google.com\/bot.html)\"<\/code><\/pre>\n\n\n<p>Si tu observes des mod\u00e8les qui ne correspondent pas \u00e0 un comportement de navigation humain normal, il est temps d&#8217;agir.<\/p>\n\n\n<h3 class=\"wp-block-heading\">Le Probl\u00e8me du GPTBot avec la Mont\u00e9e des Robots d\u2019indexation IA<\/h3>\n\n\n<p>R\u00e9cemment, de nombreux propri\u00e9taires de sites web ont signal\u00e9 des probl\u00e8mes avec des robots d&#8217;indexation IA g\u00e9n\u00e9rant des mod\u00e8les de trafic anormaux.<\/p>\n\n\n<p>Selon les recherches d&#8217;Imperva, le <a target=\"_blank\" href=\"https:\/\/vercel.com\/blog\/the-rise-of-the-ai-crawler\">GPTBot d&#8217;OpenAI a effectu\u00e9 569 millions de requ\u00eates<\/a> en un seul mois tandis que le bot de Claude en a fait 370 millions \u00e0 travers le r\u00e9seau de Vercel.<\/p>\n\n\n<p>Cherche :<\/p>\n\n\n<ul class=\"wp-block-list\">\n<li><strong>Pics d&#8217;erreurs dans tes logs :<\/strong> Si tu vois soudainement des centaines ou des milliers d&#8217;erreurs 404, v\u00e9rifie si elles proviennent de robots d&#8217;indexation IA.<\/li>\n\n\n<\/ul>\n\n\n<ul class=\"wp-block-list\">\n<li><strong>URLs extr\u00eamement longues et d\u00e9nu\u00e9es de sens :<\/strong> Les robots IA pourraient demander des URLs bizarres comme celles-ci :<\/li>\n\n\n<\/ul>\n\n\n<pre class=\"wp-block-code\"><code>\/Odonto-lieyectoresli-541.aspx\/assets\/js\/plugins\/Docs\/Productos\/assets\/js\/Docs\/Productos\/assets\/js\/assets\/js\/assets\/js\/vendor\/images2021\/Docs\/...<\/code><\/pre>\n\n\n<ul class=\"wp-block-list\">\n<li><strong>Param\u00e8tres r\u00e9cursifs<\/strong> : Recherche les param\u00e8tres qui se r\u00e9p\u00e8tent ind\u00e9finiment, par exemple :<\/li>\n\n\n<\/ul>\n\n\n<pre class=\"wp-block-code\"><code>amp;amp;amp;page=6&amp;amp;amp;amp;page=6<\/code><\/pre>\n\n\n<ul class=\"wp-block-list\">\n<li><strong>Pics de bande passante :<\/strong> Readthedocs, une entreprise renomm\u00e9e de documentation technique, a indiqu\u00e9 qu&#8217;un robot d\u2019indexation IA a t\u00e9l\u00e9charg\u00e9 <a target=\"_blank\" href=\"https:\/\/about.readthedocs.com\/blog\/2024\/07\/ai-crawlers-abuse\/\">73TB de fichiers ZIP<\/a>, avec 10TB t\u00e9l\u00e9charg\u00e9s en une seule journ\u00e9e, leur co\u00fbtant plus de 5 000 $ de frais de bande passante.<\/li>\n\n\n<\/ul>\n\n\n<p>Ces mod\u00e8les peuvent indiquer des robots d\u2019indexation IA qui dysfonctionnent ou qui sont manipul\u00e9s pour causer des probl\u00e8mes.<\/p>\n\n\n<h3 class=\"wp-block-heading\">Quand Obtenir de l&#8217;Aide Technique<\/h3>\n\n\n<p>Si tu remarques ces signes mais ne sais pas quoi faire ensuite, il est temps de faire appel \u00e0 de l&#8217;aide professionnelle. Demande \u00e0 ton d\u00e9veloppeur de v\u00e9rifier des agents utilisateurs sp\u00e9cifiques comme celui-ci :<\/p>\n\n\n<p><strong>Mozilla\/5.0 AppleWebKit\/537.36 (KHTML, comme Gecko; compatible; GPTBot\/1.2; +<\/strong><a target=\"_blank\" href=\"https:\/\/openai.com\/gptbot\"><strong>https:\/\/openai.com\/gptbot<\/strong><\/a><strong>)<\/strong><\/p>\n\n\n<p>Il existe de nombreuses <a target=\"_blank\" href=\"https:\/\/developers.netlify.com\/guides\/blocking-ai-bots-and-controlling-crawlers\/\">cha\u00eenes d&#8217;agents utilisateur pour d&#8217;autres robots d&#8217;indexation IA<\/a> que tu peux rechercher sur Google pour bloquer. <strong>Note bien<\/strong> que les cha\u00eenes changent, ce qui signifie que tu pourrais finir par avoir une liste assez longue au fil du temps.<\/p>\n\n\n<p><em>\ud83d\udc49 Tu n&#8217;as pas de d\u00e9veloppeur sous la main ? <\/em><a target=\"_blank\" href=\"https:\/\/www.dreamhost.com\/pro-services\/management\/dreamcare\/\"><em>L&#8217;\u00e9quipe DreamCare de DreamHost<\/em><\/a><em> peut analyser tes logs et mettre en place des mesures de protection. Ils ont d\u00e9j\u00e0 rencontr\u00e9 ces probl\u00e8mes et savent exactement comment les g\u00e9rer.<\/em><\/p>\n\n\n<h2 id=\"h2_your-bot-busting-toolkit-5-simple-steps-to-take-back-control\" class=\"wp-block-heading\">Ton Kit Anti-Bot : 5 \u00c9tapes Simples Pour Reprendre Le Contr\u00f4le<\/h2>\n\n\n<p>Et maintenant, la partie int\u00e9ressante : comment arr\u00eater ces bots de ralentir ton site. Remonte tes manches et mettons-nous au travail.<\/p>\n\n\n<h3 class=\"wp-block-heading\">1. Cr\u00e9e Un Fichier robots.txt Appropri\u00e9<\/h3>\n\n\n<figure class=\"wp-block-image size-full\"><img decoding=\"async\" width=\"1600\" height=\"911\" data-src=\"https:\/\/www.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/02_create_a_proper_robots_txt_file.webp\" alt=\"fichier robots.txt de dreamhost.com montrant les directives pour les robots qui interdisent l'indexation de chemins sp\u00e9cifiques tout en fournissant l'emplacement du plan du site.\" class=\"wp-image-67302 lazyload\" data-srcset=\"https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/02_create_a_proper_robots_txt_file.webp 1600w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/02_create_a_proper_robots_txt_file-300x171.webp 300w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/02_create_a_proper_robots_txt_file-1024x583.webp 1024w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/02_create_a_proper_robots_txt_file-768x437.webp 768w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/02_create_a_proper_robots_txt_file-1536x875.webp 1536w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/02_create_a_proper_robots_txt_file-600x342.webp 600w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/02_create_a_proper_robots_txt_file-1200x683.webp 1200w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/02_create_a_proper_robots_txt_file-730x416.webp 730w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/02_create_a_proper_robots_txt_file-1460x831.webp 1460w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/02_create_a_proper_robots_txt_file-784x446.webp 784w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/02_create_a_proper_robots_txt_file-1568x893.webp 1568w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/02_create_a_proper_robots_txt_file-877x499.webp 877w\" data-sizes=\"(max-width: 1600px) 100vw, 1600px\" src=\"data:image\/svg+xml;base64,PHN2ZyB3aWR0aD0iMSIgaGVpZ2h0PSIxIiB4bWxucz0iaHR0cDovL3d3dy53My5vcmcvMjAwMC9zdmciPjwvc3ZnPg==\" style=\"--smush-placeholder-width: 1600px; --smush-placeholder-aspect-ratio: 1600\/911;\" \/><\/figure>\n\n\n<p>Le fichier texte simple robots.txt se trouve dans ton r\u00e9pertoire racine et indique aux bots bien \u00e9lev\u00e9s les parties de ton site auxquelles ils ne devraient pas acc\u00e9der.<\/p>\n\n\n<p>Tu peux acc\u00e9der au robots.txt de presque n&#8217;importe quel site web en ajoutant \/robots.txt \u00e0 son domaine. Par exemple, si tu veux voir le fichier robots.txt de DreamHost, ajoute robots.txt \u00e0 la fin du domaine comme ceci : <a target=\"_blank\" href=\"https:\/\/dreamhost.com\/robots.txt\">https:\/\/dreamhost.com\/robots.txt<\/a><\/p>\n\n\n<p>Il n&#8217;y a aucune obligation pour aucun des bots d&#8217;accepter les r\u00e8gles.<\/p>\n\n\n<p>Mais les bots polis le respecteront, et les fauteurs de troubles peuvent choisir d&#8217;ignorer les r\u00e8gles. Il est pr\u00e9f\u00e9rable d&#8217;ajouter un robots.txt de toute fa\u00e7on pour que les bons bots ne commencent pas \u00e0 indexer les pages de connexion admin, les pages apr\u00e8s-achat, les pages de remerciement, etc.<\/p>\n\n\n<p><strong>Comment Mettre En \u0152uvre<\/strong><\/p>\n\n\n<p>1. Cr\u00e9e un fichier texte nomm\u00e9 <strong>robots.txt<\/strong><\/p>\n\n\n<p>2. Ajoute tes instructions en utilisant ce format\u00a0:<\/p>\n\n\n<pre class=\"wp-block-code\"><code>User-agent: *          # Cette ligne s'applique \u00e0 tous les robots\nDisallow: \/admin\/      # Ne pas explorer la zone admin\nDisallow: \/private\/    # Restez hors des dossiers priv\u00e9s\nCrawl-delay: 10        # Attendre 10 secondes entre les requ\u00eates\nUser-agent: Googlebot  # R\u00e8gles sp\u00e9ciales uniquement pour Google\nAllow: \/               # Google peut acc\u00e9der \u00e0 tout<\/code><\/pre>\n\n\n<p>3. T\u00e9l\u00e9charge le fichier dans le r\u00e9pertoire racine de ton site web (il sera donc \u00e0<strong> tondomaine.com\/robots.txt<\/strong>)<\/p>\n\n\n<p>La directive &#8220;Crawl-delay&#8221; est ton arme secr\u00e8te ici. Elle oblige les bots \u00e0 attendre entre les requ\u00eates, les emp\u00eachant de saturer ton serveur.<\/p>\n\n\n<p>La plupart des robots d\u2019indexation majeurs respectent cela, bien que Googlebot suive son propre syst\u00e8me (que tu peux contr\u00f4ler via Google Search Console).<\/p>\n\n\n<p><strong>Conseil pro : <\/strong>Teste ton fichier robots.txt avec <a target=\"_blank\" href=\"https:\/\/www.google.com\/webmasters\/tools\/robots-testing-tool\">l&#8217;outil de test robots.txt de Google<\/a> pour t&#8217;assurer que tu n&#8217;as pas accidentellement bloqu\u00e9 du contenu important.<\/p>\n\n\n<h3 class=\"wp-block-heading\">2. Configurer La Limitation De Taux<\/h3>\n\n\n<p>La limitation du taux restreint le nombre de requ\u00eates qu&#8217;un seul visiteur peut faire dans une p\u00e9riode sp\u00e9cifique.<\/p>\n\n\n<p>Il emp\u00eache les bots de submerger ton serveur pour que les humains normaux puissent naviguer sur ton site sans interruption.<\/p>\n\n\n<p><strong>Comment Impl\u00e9menter<\/strong><\/p>\n\n\n<p>Si tu utilises Apache (courant pour les sites WordPress), ajoute ces lignes \u00e0 ton fichier .htaccess :<\/p>\n\n\n<pre class=\"wp-block-code\"><code>&lt;IfModule mod_rewrite.c&gt;\nRewriteEngine On\nRewriteCond %{REQUEST_URI} !(.css|.js|.png|.jpg|.gif|robots.txt)$ &#091;NC]\nRewriteCond %{HTTP_USER_AGENT} !^Googlebot &#091;NC]\nRewriteCond %{HTTP_USER_AGENT} !^Bingbot &#091;NC]\n# Autoriser un maximum de 3 requ\u00eates en 10 secondes par IP\nRewriteCond %{REMOTE_ADDR} ^(&#091;0-9]+.&#091;0-9]+.&#091;0-9]+.&#091;0-9]+)$\nRewriteRule .* - &#091;F,L]\n&lt;\/IfModule&gt;<\/code><\/pre>\n\n\n\n\n<div class=\"glossary-term\">\n\t<a\n\t\tclass=\"glossary-term__above-title\"\n\t\thref=\"\"\n\t\ttarget=\"_blank\"\n\t\trel=\"noopener noreferrer\"\n\t>\n\t\t<svg xmlns=\"http:\/\/www.w3.org\/2000\/svg\" viewBox=\"0 0 640 512\"><path d=\"M320 32c-8.1 0-16.1 1.4-23.7 4.1L15.8 137.4C6.3 140.9 0 149.9 0 160s6.3 19.1 15.8 22.6l57.9 20.9C57.3 229.3 48 259.8 48 291.9v28.1c0 28.4-10.8 57.7-22.3 80.8c-6.5 13-13.9 25.8-22.5 37.6C0 442.7-.9 448.3 .9 453.4s6 8.9 11.2 10.2l64 16c4.2 1.1 8.7 .3 12.4-2s6.3-6.1 7.1-10.4c8.6-42.8 4.3-81.2-2.1-108.7C90.3 344.3 86 329.8 80 316.5V291.9c0-30.2 10.2-58.7 27.9-81.5c12.9-15.5 29.6-28 49.2-35.7l157-61.7c8.2-3.2 17.5 .8 20.7 9s-.8 17.5-9 20.7l-157 61.7c-12.4 4.9-23.3 12.4-32.2 21.6l159.6 57.6c7.6 2.7 15.6 4.1 23.7 4.1s16.1-1.4 23.7-4.1L624.2 182.6c9.5-3.4 15.8-12.5 15.8-22.6s-6.3-19.1-15.8-22.6L343.7 36.1C336.1 33.4 328.1 32 320 32zM128 408c0 35.3 86 72 192 72s192-36.7 192-72L496.7 262.6 354.5 314c-11.1 4-22.8 6-34.5 6s-23.5-2-34.5-6L143.3 262.6 128 408z\"\/><\/svg>\n\t\t<span><\/span>\n\t\t<svg xmlns=\"http:\/\/www.w3.org\/2000\/svg\" viewBox=\"0 0 384 512\"><path d=\"M342.6 233.4c12.5 12.5 12.5 32.8 0 45.3l-192 192c-12.5 12.5-32.8 12.5-45.3 0s-12.5-32.8 0-45.3L274.7 256 105.4 86.6c-12.5-12.5-12.5-32.8 0-45.3s32.8-12.5 45.3 0l192 192z\"\/><\/svg>\n\t<\/a>\n    <h3>.htaccess<\/h3>\n    <p>u201c.htaccessu201d est un fichier de configuration utilis\u00e9 par le logiciel de serveur web Apache. Le fichier .htaccess contient des directives (instructions) qui indiquent \u00e0 Apache comment se comporter pour un site web particulier ou un r\u00e9pertoire.<\/p>\n            <a\n            href=\"https:\/\/www.dreamhost.com\/glossary\/hosting\/htaccess\/\"\n                        class=\"btn btn--white-outline btn--sm btn--round\"\n                                    target=\"_blank\"\n            rel=\"noopener noreferrer\"\n            >\n                            En savoir plus                    <\/a>\n\n<\/div>\n\n\n<p>Si tu es sur Nginx, ajoute ceci \u00e0 ta configuration serveur :<\/p>\n\n\n<pre class=\"wp-block-code\"><code>limit_req_zone $binary_remote_addr zone=one:10m rate=30r\/m;\nserver {\n    ...\n    location \/ {\n        limit_req zone=one burst=5;\n        ...\n    }\n}<\/code><\/pre>\n\n\n<p>De nombreux panneaux de contr\u00f4le d&#8217;h\u00e9bergement, comme cPanel ou Plesk, offrent \u00e9galement des outils de limitation de d\u00e9bit dans leurs sections de s\u00e9curit\u00e9.<\/p>\n\n<div class=\"single__related-article\">\n\t<span>Related Article<\/span>\n\t<div class=\"single__related-article__wrap\">\n\t\t<div class=\"single__related-article__title\">\n\t\t\tNGINX vs. Apache: How to Choose the Best Web Server\n\t\t<\/div>\n\t\t<a href=\"https:\/\/www-dev.dreamhost.com\/blog\/nginx-vs-apache\/\" class=\"btn btn--sm btn--brand\" target=\"_blank\" rel=\"noopener\">\n\t\t\tRead More\n\t\t<\/a>\n\t<\/div>\n<\/div>\n\n<p><strong>Conseil de pro :<\/strong> Commence avec des limites conservatrices (comme 30 requ\u00eates par minute) et surveille ton site. Tu peux toujours renforcer les restrictions si le trafic des bots persiste.<\/p>\n\n\n<h3 class=\"wp-block-heading\">3. Utilise un R\u00e9seau de Distribution de Contenu (CDN)<\/h3>\n\n\n<p><a target=\"_blank\" href=\"https:\/\/www.dreamhost.com\/features\/cdn\/\">CDNs<\/a> font deux bonnes choses pour toi :<\/p>\n\n\n<ol class=\"wp-block-list\">\n<li>Distribue le contenu \u00e0 travers des r\u00e9seaux de serveurs mondiaux pour que ton site web soit livr\u00e9 rapidement dans le monde entier<\/li>\n\n\n\n<li>Filtre le trafic avant qu&#8217;il n&#8217;atteigne le site web pour bloquer tous les bots et les attaques non pertinents<\/li>\n\n\n<\/ol>\n\n\n<p>La partie sur les \u00ab robots non pertinents \u00bb est ce qui nous importe pour l&#8217;instant, mais les autres avantages sont \u00e9galement utiles. La plupart des CDN incluent une gestion int\u00e9gr\u00e9e des robots qui identifie et bloque automatiquement les visiteurs suspects.<\/p>\n\n\n<p><strong>Comment Impl\u00e9menter<\/strong><\/p>\n\n\n<ol class=\"wp-block-list\">\n<li>Inscris-toi \u00e0 un service de CDN tel que <a target=\"_blank\" href=\"https:\/\/www.dreamhost.com\/features\/cdn\/\">DreamHost CDN<\/a>, Cloudflare, Amazon CloudFront, ou Fastly.<\/li>\n\n\n\n<li>Suis les instructions de configuration (peut n\u00e9cessiter le changement de noms d\u2019h\u00f4tes).<\/li>\n\n\n\n<li>Configure les param\u00e8tres de s\u00e9curit\u00e9 pour activer la protection contre les bots.<\/li>\n\n\n<\/ol>\n\n\n<p>Si ton service d&#8217;h\u00e9bergement propose un CDN par d\u00e9faut, tu \u00e9limines toutes les \u00e9tapes puisque ton site web sera automatiquement h\u00e9berg\u00e9 sur CDN.<\/p>\n\n\n<p><strong>Une fois configur\u00e9, ton CDN :<\/strong><\/p>\n\n\n<ul class=\"wp-block-list\">\n<li>Mets en cache le contenu statique pour r\u00e9duire la charge du serveur.<\/li>\n\n\n\n<li>Filtre le trafic suspect avant qu&#8217;il n&#8217;atteigne ton site.<\/li>\n\n\n\n<li>Applique l&#8217;apprentissage machine pour diff\u00e9rencier les requ\u00eates l\u00e9gitimes des requ\u00eates malveillantes.<\/li>\n\n\n\n<li>Bloque automatiquement les acteurs malveillants connus.<\/li>\n\n\n<\/ul>\n\n\n<p><strong>Conseil de pro\u00a0:<\/strong> Le niveau gratuit de Cloudflare comprend <a target=\"_blank\" href=\"https:\/\/www.cloudflare.com\/en-in\/application-services\/products\/bot-management\/\">une protection basique contre les bots<\/a> qui fonctionne bien pour la plupart des sites de petites entreprises. Leurs plans payants offrent des options plus avanc\u00e9es si tu en as besoin.<\/p>\n\n\n<h3 class=\"wp-block-heading\">4. Ajouter un CAPTCHA pour les Actions Sensibles<\/h3>\n\n\n<figure class=\"wp-block-image size-full\"><img decoding=\"async\" width=\"1600\" height=\"1008\" data-src=\"https:\/\/www.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/03_add_a_captcha.webp\" alt=\"V\u00e9rification CAPTCHA lors du processus de paiement avec champ de code postal\/ZIP, d\u00e9fi de texte d\u00e9form\u00e9, et bouton &quot;Ajouter Carte de Cr\u00e9dit&quot; affichant 58,39 $ dus.\" class=\"wp-image-67303 lazyload\" data-srcset=\"https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/03_add_a_captcha.webp 1600w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/03_add_a_captcha-300x189.webp 300w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/03_add_a_captcha-1024x645.webp 1024w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/03_add_a_captcha-768x484.webp 768w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/03_add_a_captcha-1536x968.webp 1536w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/03_add_a_captcha-600x378.webp 600w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/03_add_a_captcha-1200x756.webp 1200w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/03_add_a_captcha-730x460.webp 730w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/03_add_a_captcha-1460x920.webp 1460w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/03_add_a_captcha-784x494.webp 784w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/03_add_a_captcha-1568x988.webp 1568w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/03_add_a_captcha-877x553.webp 877w\" data-sizes=\"(max-width: 1600px) 100vw, 1600px\" src=\"data:image\/svg+xml;base64,PHN2ZyB3aWR0aD0iMSIgaGVpZ2h0PSIxIiB4bWxucz0iaHR0cDovL3d3dy53My5vcmcvMjAwMC9zdmciPjwvc3ZnPg==\" style=\"--smush-placeholder-width: 1600px; --smush-placeholder-aspect-ratio: 1600\/1008;\" \/><\/figure>\n\n\n<p>Les CAPTCHAs sont ces petits casse-t\u00eates qui te demandent d&#8217;identifier des feux de circulation ou des v\u00e9los. Ils sont ennuyeux pour les humains, mais presque impossibles pour la plupart des bots, ce qui les rend parfaits comme gardiens pour les zones importantes de ton site.<\/p>\n\n\n<p><strong>Comment Impl\u00e9menter<\/strong><\/p>\n\n\n<ol class=\"wp-block-list\">\n<li>Inscris-toi pour <a target=\"_blank\" href=\"https:\/\/developers.google.com\/recaptcha\">reCAPTCHA de Google (gratuit)<\/a> ou <a target=\"_blank\" href=\"https:\/\/www.hcaptcha.com\/\">hCaptcha<\/a>.<\/li>\n\n\n\n<li>Ajoute le code CAPTCHA \u00e0 tes formulaires sensibles :\n<ul class=\"wp-block-list\">\n<li>Pages de connexion<\/li>\n\n\n\n<li>Formulaires de contact<\/li>\n\n\n\n<li>Processus de paiement<\/li>\n\n\n\n<li>Sections de commentaires<\/li>\n\n\n<\/ul>\n\n\n<\/li>\n\n\n<\/ol>\n\n\n<p>Pour les utilisateurs de WordPress, des plugins comme<a target=\"_blank\" href=\"https:\/\/automattic.pxf.io\/daXbzW\"> Akismet<\/a> peuvent g\u00e9rer cela automatiquement pour les commentaires et les soumissions de formulaires.<\/p>\n\n\n<p><strong>Conseil pro :<\/strong> Les CAPTCHAs invisibles modernes (comme reCAPTCHA v3) fonctionnent en arri\u00e8re-plan pour la plupart des visiteurs, ne pr\u00e9sentant des d\u00e9fis qu&#8217;aux utilisateurs suspects. Utilise cette m\u00e9thode pour obtenir une protection sans ennuyer les clients l\u00e9gitimes.<\/p>\n\n\n<h3 class=\"wp-block-heading\">5. Prends En Compte La Nouvelle Norme llms.txt<\/h3>\n\n\n<figure class=\"wp-block-image size-full\"><img decoding=\"async\" width=\"1600\" height=\"1150\" data-src=\"https:\/\/www.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/04_consider_the_new_llms_txt_standard.webp\" alt=\"Documentation de l'API Zapier montrant les points de terminaison pour Obtenir les d\u00e9tails de l'action, Obtenir les choix de pr\u00e9remplissage, Rechercher des actions, et Cr\u00e9er une action IA avec leurs m\u00e9thodes HTTP respectives et descriptions.\" class=\"wp-image-67304 lazyload\" data-srcset=\"https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/04_consider_the_new_llms_txt_standard.webp 1600w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/04_consider_the_new_llms_txt_standard-300x216.webp 300w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/04_consider_the_new_llms_txt_standard-1024x736.webp 1024w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/04_consider_the_new_llms_txt_standard-768x552.webp 768w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/04_consider_the_new_llms_txt_standard-1536x1104.webp 1536w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/04_consider_the_new_llms_txt_standard-600x431.webp 600w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/04_consider_the_new_llms_txt_standard-1200x863.webp 1200w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/04_consider_the_new_llms_txt_standard-730x525.webp 730w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/04_consider_the_new_llms_txt_standard-1460x1049.webp 1460w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/04_consider_the_new_llms_txt_standard-784x564.webp 784w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/04_consider_the_new_llms_txt_standard-1568x1127.webp 1568w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/04_consider_the_new_llms_txt_standard-877x630.webp 877w\" data-sizes=\"(max-width: 1600px) 100vw, 1600px\" src=\"data:image\/svg+xml;base64,PHN2ZyB3aWR0aD0iMSIgaGVpZ2h0PSIxIiB4bWxucz0iaHR0cDovL3d3dy53My5vcmcvMjAwMC9zdmciPjwvc3ZnPg==\" style=\"--smush-placeholder-width: 1600px; --smush-placeholder-aspect-ratio: 1600\/1150;\" \/><\/figure>\n\n\n<p>Le <a target=\"_blank\" href=\"https:\/\/llmstxt.org\/\">standard llms.txt est un d\u00e9veloppement r\u00e9cent<\/a> qui contr\u00f4le comment les robots d\u2019indexation IA interagissent avec votre contenu.<\/p>\n\n\n<p>C&#8217;est comme robots.txt mais sp\u00e9cifiquement pour indiquer aux syst\u00e8mes IA quelles informations ils peuvent acc\u00e9der et ce qu&#8217;ils devraient \u00e9viter.<\/p>\n\n\n<p><strong>Comment Impl\u00e9menter<\/strong><\/p>\n\n\n<p>1. <strong>Cr\u00e9e un fichier markdown nomm\u00e9 llms.txt avec cette structure de contenu :<\/strong><\/p>\n\n\n<ol class=\"wp-block-list\"><\/ol>\n\n\n<pre class=\"wp-block-code\"><code># Nom De Ton Site Web\n&gt; Br\u00e8ve description de ton site\n\n## Principales Zones De Contenu\n- &#091;Pages De Produits](https:\/\/yoursite.com\/products): Informations sur les produits\n- &#091;Articles De Blog](https:\/\/yoursite.com\/blog): Contenu \u00e9ducatif\n\n## Restrictions\n- Merci de ne pas utiliser nos informations de tarification dans la formation<\/code><\/pre>\n\n\n<p>2. <strong>T\u00e9l\u00e9charge-le dans ton r\u00e9pertoire racine (sur tondomaine.com\/llms.txt) \u2192<\/strong> Contacte un d\u00e9veloppeur si tu n&#8217;as pas acc\u00e8s directement au serveur.<\/p>\n\n\n<ol class=\"wp-block-list\"><\/ol>\n\n\n<p>llms.txt est-il la norme officielle ? Pas encore.<\/p>\n\n\n<p>C\u2019est une norme <a target=\"_blank\" href=\"https:\/\/llmstxt.org\/#proposal\">propos\u00e9e<\/a> fin 2024 par Jeremy Howard, qui a \u00e9t\u00e9 adopt\u00e9e par Zapier, Stripe, Cloudflare, et de nombreuses autres grandes entreprises. Voici une <a target=\"_blank\" href=\"https:\/\/github.com\/thedaviddias\/llms-txt-hub?tab=readme-ov-file\">liste croissante de sites web adoptant llms.txt<\/a>.<\/p>\n\n\n<p>Alors, si tu veux t&#8217;embarquer, ils ont une <a href=\"https:\/\/github.com\/AnswerDotAI\/llms-txt\" target=\"_blank\">documentation officielle sur GitHub<\/a> avec des directives d&#8217;impl\u00e9mentation.<\/p>\n\n\n<p><strong>Conseil pro :<\/strong> Une fois mis en place, vois si ChatGPT (avec la recherche web activ\u00e9e) peut acc\u00e9der et comprendre le fichier llms.txt.<\/p>\n\n\n<figure class=\"wp-block-image size-full\"><img decoding=\"async\" width=\"1600\" height=\"987\" data-src=\"https:\/\/www.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/05_verify_that_the_llms_txt_is_accessible_with_chatgpt.webp\" alt=\"Capture d'\u00e9cran de l'interface de l'assistant IA expliquant la documentation API de Zapier pour les Actions IA, incluant les points de terminaison pour r\u00e9cup\u00e9rer les d\u00e9tails des actions, rechercher des actions et g\u00e9rer l'authentification.\" class=\"wp-image-67305 lazyload\" data-srcset=\"https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/05_verify_that_the_llms_txt_is_accessible_with_chatgpt.webp 1600w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/05_verify_that_the_llms_txt_is_accessible_with_chatgpt-300x185.webp 300w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/05_verify_that_the_llms_txt_is_accessible_with_chatgpt-1024x632.webp 1024w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/05_verify_that_the_llms_txt_is_accessible_with_chatgpt-768x474.webp 768w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/05_verify_that_the_llms_txt_is_accessible_with_chatgpt-1536x948.webp 1536w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/05_verify_that_the_llms_txt_is_accessible_with_chatgpt-600x370.webp 600w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/05_verify_that_the_llms_txt_is_accessible_with_chatgpt-1200x740.webp 1200w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/05_verify_that_the_llms_txt_is_accessible_with_chatgpt-730x450.webp 730w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/05_verify_that_the_llms_txt_is_accessible_with_chatgpt-1460x901.webp 1460w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/05_verify_that_the_llms_txt_is_accessible_with_chatgpt-784x484.webp 784w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/05_verify_that_the_llms_txt_is_accessible_with_chatgpt-1568x967.webp 1568w, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/05_verify_that_the_llms_txt_is_accessible_with_chatgpt-877x541.webp 877w\" data-sizes=\"(max-width: 1600px) 100vw, 1600px\" src=\"data:image\/svg+xml;base64,PHN2ZyB3aWR0aD0iMSIgaGVpZ2h0PSIxIiB4bWxucz0iaHR0cDovL3d3dy53My5vcmcvMjAwMC9zdmciPjwvc3ZnPg==\" style=\"--smush-placeholder-width: 1600px; --smush-placeholder-aspect-ratio: 1600\/987;\" \/><\/figure>\n\n\n<p>V\u00e9rifie que le fichier llms.txt est accessible \u00e0 ces robots en demandant \u00e0 ChatGPT (ou un autre LLM) de \u00ab V\u00e9rifier si tu peux lire cette page \u00bb ou \u00ab Que dit la page. \u00bb<\/p>\n\n\n<p>Nous ne pouvons pas savoir si les bots respecteront llms.txt prochainement. Cependant, si la recherche IA peut lire et comprendre le fichier llms.txt maintenant, ils pourraient commencer \u00e0 le respecter \u00e0 l&#8217;avenir \u00e9galement.<\/p>\n\n\n<h2 id=\"h2_monitoring-and-maintaining-your-sites-bot-protection\" class=\"wp-block-heading\">Surveillance et Maintien de la Protection contre les Bots de Ton Site<\/h2>\n\n\n<p>Alors, tu as configur\u00e9 tes d\u00e9fenses contre les bots \u2014 excellent travail !<\/p>\n\n\n<p>Garde simplement \u00e0 l&#8217;esprit que la technologie des bots \u00e9volue constamment, ce qui signifie que les bots reviennent avec de nouvelles astuces. Assurons-nous que ton site reste prot\u00e9g\u00e9 sur le long terme.<\/p>\n\n\n<ul class=\"wp-block-list\">\n<li><strong>Planifie des contr\u00f4les de s\u00e9curit\u00e9 r\u00e9guliers :<\/strong> Une fois par mois, examine tes logs de serveur pour d\u00e9tecter toute activit\u00e9 suspecte et assure-toi que tes fichiers robots.txt et llms.txt sont mis \u00e0 jour avec les nouveaux liens de pages que tu souhaites que les bots puissent acc\u00e9der\/ne pas acc\u00e9der.<\/li>\n\n\n\n<li><strong>Garde ta liste de blocage de bots \u00e0 jour :<\/strong> Les bots changent constamment de d\u00e9guisements. Suis les blogs de s\u00e9curit\u00e9 (ou laisse ton fournisseur d&#8217;h\u00e9bergement le faire pour toi) et mets \u00e0 jour tes r\u00e8gles de blocage \u00e0 intervalles r\u00e9guliers.<\/li>\n\n\n\n<li><strong>Surveille ta vitesse :<\/strong> Une protection contre les bots qui ralentit ton site \u00e0 l&#8217;extr\u00eame ne te rend aucun service. Garde un \u0153il sur les temps de chargement de tes pages et ajuste ta protection si les choses commencent \u00e0 ralentir. Souviens-toi, les vrais humains sont des cr\u00e9atures impatientes !<\/li>\n\n\n\n<li><strong>Envisage de passer en pilote automatique :<\/strong> Si tout cela te semble trop compliqu\u00e9 (nous comprenons, tu as une entreprise \u00e0 g\u00e9rer !), renseigne-toi sur les solutions automatis\u00e9es ou l&#8217;<a target=\"_blank\" href=\"https:\/\/www.dreamhost.com\/wordpress\/managed-wp-hosting-2\/\">h\u00e9bergement g\u00e9r\u00e9<\/a> qui s&#8217;occupe de la s\u00e9curit\u00e9 pour toi. Parfois, le meilleur DIY est le DIFM \u2014 Fais-Le Pour Moi !<\/li>\n\n\n<\/ul>\n\n\n<h2 id=\"h2_a-bot-free-website-while-you-sleep-yes-please\" class=\"wp-block-heading\">Un Site Web Sans Bot Pendant Ton Sommeil ? Oui, S&#8217;il Te Pla\u00eet !<\/h2>\n\n\n<p>Tape-toi sur l&#8217;\u00e9paule. Tu as parcouru beaucoup de chemin ici !<\/p>\n\n\n<p>Cependant, m\u00eame avec notre guide \u00e9tape par \u00e9tape, ces choses peuvent devenir assez techniques. <em>(Qu&#8217;est-ce qu&#8217;un fichier .htaccess exactement ?)<\/em><\/p>\n\n\n<p>Et bien que la gestion des bots DIY soit certainement possible, tu trouveras peut-\u00eatre que ton temps est mieux investi \u00e0 g\u00e9rer l&#8217;entreprise.<\/p>\n\n\n<p><a target=\"_blank\" href=\"https:\/\/www.dreamhost.com\/pro-services\/management\/dreamcare\/\">DreamCare<\/a> est le bouton &#8220;nous nous en occupons pour toi&#8221; que tu recherches.<\/p>\n\n\n<p>Notre \u00e9quipe garde ton site prot\u00e9g\u00e9 avec :<\/p>\n\n\n<ul class=\"wp-block-list\">\n<li>Surveillance 24\/7 qui d\u00e9tecte les activit\u00e9s suspectes pendant ton sommeil<\/li>\n\n\n\n<li>R\u00e9visions de s\u00e9curit\u00e9 r\u00e9guli\u00e8res pour devancer les menaces \u00e9mergentes<\/li>\n\n\n\n<li>Mises \u00e0 jour logicielles automatiques qui corrigent les vuln\u00e9rabilit\u00e9s avant que les bots ne puissent les exploiter<\/li>\n\n\n\n<li>Scans de malware complets et suppression si quelque chose passe au travers<\/li>\n\n\n<\/ul>\n\n\n<p>Vois, les robots sont l\u00e0 pour rester. Et compte tenu de leur augmentation ces derni\u00e8res ann\u00e9es, nous pourrions voir plus de robots que d&#8217;humains dans un avenir proche. Personne ne sait.<\/p>\n\n\n<p>Mais, pourquoi en perdre le sommeil ?<\/p>\n\n\n\n<div class=\"article-cta-shared article-cta-small article-cta--product\">\n\t<div class=\"tr-img-wrap-outer jsLoading\"><img decoding=\"async\" class=\"js-img-lazy \" src=\"https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/themes\/blog2018\/assets\/img\/lazy-loading-transparent.webp\" data-srcset=\"https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2024\/03\/product-cta-pro-services-website-management-877x586.webp 1x, https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2024\/03\/product-cta-pro-services-website-management.webp 2x\"  \/><\/div>\n\n\t<a href='https:\/\/www.dreamhost.com\/pro-services\/management\/' class='link-top' target='_blank' rel='noopener noreferrer'>\n\t\t<span>Pro Services &#8211; Website Management<\/span>\n\t\t<svg xmlns=\"http:\/\/www.w3.org\/2000\/svg\" viewBox=\"0 0 384 512\" width=\"15\"><path d=\"M342.6 233.4c12.5 12.5 12.5 32.8 0 45.3l-192 192c-12.5 12.5-32.8 12.5-45.3 0s-12.5-32.8 0-45.3L274.7 256 105.4 86.6c-12.5-12.5-12.5-32.8 0-45.3s32.8-12.5 45.3 0l192 192z\"\/><\/svg>\n\t<\/a>\n\n\t<div class=\"content-btm\">\n\t\t<h2 class=\"h2--md\">\n\t\t\tWe&#8217;ll Handle the Technical Stuff\n\t\t<\/h2>\n\t\t<p class=\"p--md\">\n\t\t\tBring enterprise-grade performance and reliability to your website. Leave the backend to the experts \u2013 you focus on your business.\n\t\t<\/p>\n\n\t\t        <a\n            href=\"https:\/\/www.dreamhost.com\/pro-services\/management\/\"\n                        class=\"btn btn--white-outline btn--sm btn--round\"\n                                    target=\"_blank\"\n            rel=\"noopener noreferrer\"\n            >\n                            See More                    <\/a>\n\n\t<\/div>\n<\/div>\n\n<hr class=\"wp-block-separator has-alpha-channel-opacity\" \/>\n\n\n<p><em>Cette page contient des liens d\u2019affiliation. Cela signifie que nous pouvons gagner une commission si tu ach\u00e8tes des services via notre lien sans aucun co\u00fbt suppl\u00e9mentaire pour toi.<\/em><\/p>\n","protected":false},"excerpt":{"rendered":"<p>D\u00e9couvre comment arr\u00eater les mauvais bots de vider les ressources de ton site web tout en gardant les moteurs de recherche satisfaits. Notre guide pour stopper les robots d\u2019indexation te montre comment faire.<\/p>\n","protected":false},"author":1058,"featured_media":67300,"comment_status":"closed","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"_acf_changed":false,"_yoast_wpseo_metadesc":"D\u00e9couvrez comment emp\u00eacher les mauvais bots de puiser dans les ressources de votre site tout en gardant les moteurs de recherche satisfaits. Notre guide pour arr\u00eater les robots d\u2019indexation vous montre comment faire.","toc_headlines":"[[\"h-a-quick-refresher-on-bots\",\"Un Bref Rappel Sur Les Bots\"],[\"h-good-bot-bad-bot-what-s-what\",\"Bon Bot, Mauvais Bot : Quelle Est La Diff\u00e9rence ?\"],[\"h2_are-bots-bogging-down-your-website-look-for-these-warning-signs\",\"Les Bots Ralentissent-ils Ton Site Web ? Recherche Ces Signes D'avertissement\"],[\"h2_your-bot-busting-toolkit-5-simple-steps-to-take-back-control\",\"Ton Kit Anti-Bot : 5 \u00c9tapes Simples Pour Reprendre Le Contr\u00f4le\"],[\"h2_monitoring-and-maintaining-your-sites-bot-protection\",\"Surveillance et Maintien de la Protection contre les Bots de Ton Site\"],[\"h2_a-bot-free-website-while-you-sleep-yes-please\",\"Un Site Web Sans Bot Pendant Ton Sommeil ? Oui, S'il Te Pla\u00eet !\"]]","hide_toc":false,"footnotes":""},"categories":[15001],"tags":[],"class_list":["post-70927","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-web-hosting-fr"],"acf":[],"yoast_head":"<!-- This site is optimized with the Yoast SEO Premium plugin v26.3 (Yoast SEO v27.4) - https:\/\/yoast.com\/product\/yoast-seo-premium-wordpress\/ -->\n<title>Comment Emp\u00eacher Les Robots D\u2019Indexation Et Les Bots De Ralentir Ton Site Web - DreamHost Blog<\/title>\n<meta name=\"description\" content=\"D\u00e9couvrez comment emp\u00eacher les mauvais bots de puiser dans les ressources de votre site tout en gardant les moteurs de recherche satisfaits. Notre guide pour arr\u00eater les robots d\u2019indexation vous montre comment faire.\" \/>\n<meta name=\"robots\" content=\"index, follow, max-snippet:-1, max-image-preview:large, max-video-preview:-1\" \/>\n<link rel=\"canonical\" href=\"https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/\" \/>\n<meta property=\"og:locale\" content=\"en_US\" \/>\n<meta property=\"og:type\" content=\"article\" \/>\n<meta property=\"og:title\" content=\"Comment Emp\u00eacher Les Robots D\u2019Indexation Et Les Bots De Ralentir Ton Site Web\" \/>\n<meta property=\"og:description\" content=\"D\u00e9couvrez comment emp\u00eacher les mauvais bots de puiser dans les ressources de votre site tout en gardant les moteurs de recherche satisfaits. Notre guide pour arr\u00eater les robots d\u2019indexation vous montre comment faire.\" \/>\n<meta property=\"og:url\" content=\"https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/\" \/>\n<meta property=\"og:site_name\" content=\"DreamHost Blog\" \/>\n<meta property=\"article:publisher\" content=\"https:\/\/www.facebook.com\/DreamHost\/\" \/>\n<meta property=\"article:published_time\" content=\"2025-05-12T14:00:00+00:00\" \/>\n<meta property=\"article:modified_time\" content=\"2025-05-26T14:33:16+00:00\" \/>\n<meta property=\"og:image\" content=\"https:\/\/www.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/1460x1095_blog_hero_how_to_stop_web_crawlers_and_bots_from_slowing_down_your_website.webp\" \/>\n\t<meta property=\"og:image:width\" content=\"1460\" \/>\n\t<meta property=\"og:image:height\" content=\"1095\" \/>\n\t<meta property=\"og:image:type\" content=\"image\/webp\" \/>\n<meta name=\"author\" content=\"Ian Hernandez\" \/>\n<meta name=\"twitter:card\" content=\"summary_large_image\" \/>\n<meta name=\"twitter:creator\" content=\"@dreamhost\" \/>\n<meta name=\"twitter:site\" content=\"@dreamhost\" \/>\n<meta name=\"twitter:label1\" content=\"Written by\" \/>\n\t<meta name=\"twitter:data1\" content=\"Ian Hernandez\" \/>\n\t<meta name=\"twitter:label2\" content=\"Est. reading time\" \/>\n\t<meta name=\"twitter:data2\" content=\"15 minutes\" \/>\n<!-- \/ Yoast SEO Premium plugin. -->","yoast_head_json":{"title":"Comment Emp\u00eacher Les Robots D\u2019Indexation Et Les Bots De Ralentir Ton Site Web - DreamHost Blog","description":"D\u00e9couvrez comment emp\u00eacher les mauvais bots de puiser dans les ressources de votre site tout en gardant les moteurs de recherche satisfaits. Notre guide pour arr\u00eater les robots d\u2019indexation vous montre comment faire.","robots":{"index":"index","follow":"follow","max-snippet":"max-snippet:-1","max-image-preview":"max-image-preview:large","max-video-preview":"max-video-preview:-1"},"canonical":"https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/","og_locale":"en_US","og_type":"article","og_title":"Comment Emp\u00eacher Les Robots D\u2019Indexation Et Les Bots De Ralentir Ton Site Web","og_description":"D\u00e9couvrez comment emp\u00eacher les mauvais bots de puiser dans les ressources de votre site tout en gardant les moteurs de recherche satisfaits. Notre guide pour arr\u00eater les robots d\u2019indexation vous montre comment faire.","og_url":"https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/","og_site_name":"DreamHost Blog","article_publisher":"https:\/\/www.facebook.com\/DreamHost\/","article_published_time":"2025-05-12T14:00:00+00:00","article_modified_time":"2025-05-26T14:33:16+00:00","og_image":[{"width":1460,"height":1095,"url":"https:\/\/www.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/1460x1095_blog_hero_how_to_stop_web_crawlers_and_bots_from_slowing_down_your_website.webp","type":"image\/webp"}],"author":"Ian Hernandez","twitter_card":"summary_large_image","twitter_creator":"@dreamhost","twitter_site":"@dreamhost","twitter_misc":{"Written by":"Ian Hernandez","Est. reading time":"15 minutes"},"schema":{"@context":"https:\/\/schema.org","@graph":[{"@type":"Article","@id":"https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/#article","isPartOf":{"@id":"https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/"},"author":{"name":"Ian Hernandez","@id":"https:\/\/www-dev.dreamhost.com\/blog\/#\/schema\/person\/220faf2464d5ae08e41cf5f3b28fdc96"},"headline":"Comment Emp\u00eacher Les Robots D\u2019Indexation Et Les Bots De Ralentir Ton Site Web","datePublished":"2025-05-12T14:00:00+00:00","dateModified":"2025-05-26T14:33:16+00:00","mainEntityOfPage":{"@id":"https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/"},"wordCount":2809,"publisher":{"@id":"https:\/\/www-dev.dreamhost.com\/blog\/#organization"},"image":{"@id":"https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/#primaryimage"},"thumbnailUrl":"https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/1460x1095_blog_hero_how_to_stop_web_crawlers_and_bots_from_slowing_down_your_website.webp","articleSection":["H\u00e9bergement Web"],"inLanguage":"en-US"},{"@type":"WebPage","@id":"https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/","url":"https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/","name":"Comment Emp\u00eacher Les Robots D\u2019Indexation Et Les Bots De Ralentir Ton Site Web - DreamHost Blog","isPartOf":{"@id":"https:\/\/www-dev.dreamhost.com\/blog\/#website"},"primaryImageOfPage":{"@id":"https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/#primaryimage"},"image":{"@id":"https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/#primaryimage"},"thumbnailUrl":"https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/1460x1095_blog_hero_how_to_stop_web_crawlers_and_bots_from_slowing_down_your_website.webp","datePublished":"2025-05-12T14:00:00+00:00","dateModified":"2025-05-26T14:33:16+00:00","description":"D\u00e9couvrez comment emp\u00eacher les mauvais bots de puiser dans les ressources de votre site tout en gardant les moteurs de recherche satisfaits. Notre guide pour arr\u00eater les robots d\u2019indexation vous montre comment faire.","breadcrumb":{"@id":"https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/#breadcrumb"},"inLanguage":"en-US","potentialAction":[{"@type":"ReadAction","target":["https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/"]}]},{"@type":"ImageObject","inLanguage":"en-US","@id":"https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/#primaryimage","url":"https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/1460x1095_blog_hero_how_to_stop_web_crawlers_and_bots_from_slowing_down_your_website.webp","contentUrl":"https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2025\/05\/1460x1095_blog_hero_how_to_stop_web_crawlers_and_bots_from_slowing_down_your_website.webp","width":1460,"height":1095,"caption":"How To Stop Web Crawlers and Bots From Slowing Down Your Website"},{"@type":"BreadcrumbList","@id":"https:\/\/www-dev.dreamhost.com\/blog\/fr\/comment-empcher-les-robots-dindexation-et-les-bots-de-ralentir-ton-site-web-fr\/#breadcrumb","itemListElement":[{"@type":"ListItem","position":1,"name":"Home","item":"https:\/\/dhblog.dream.press\/blog\/"},{"@type":"ListItem","position":2,"name":"Comment Emp\u00eacher Les Robots D\u2019Indexation Et Les Bots De Ralentir Ton Site Web"}]},{"@type":"WebSite","@id":"https:\/\/www-dev.dreamhost.com\/blog\/#website","url":"https:\/\/www-dev.dreamhost.com\/blog\/","name":"DreamHost Blog","description":"","publisher":{"@id":"https:\/\/www-dev.dreamhost.com\/blog\/#organization"},"potentialAction":[{"@type":"SearchAction","target":{"@type":"EntryPoint","urlTemplate":"https:\/\/www-dev.dreamhost.com\/blog\/?s={search_term_string}"},"query-input":{"@type":"PropertyValueSpecification","valueRequired":true,"valueName":"search_term_string"}}],"inLanguage":"en-US"},{"@type":"Organization","@id":"https:\/\/www-dev.dreamhost.com\/blog\/#organization","name":"DreamHost","url":"https:\/\/www-dev.dreamhost.com\/blog\/","logo":{"@type":"ImageObject","inLanguage":"en-US","@id":"https:\/\/www-dev.dreamhost.com\/blog\/#\/schema\/logo\/image\/","url":"https:\/\/dhblog.dream.press\/blog\/wp-content\/uploads\/2019\/01\/dh_logo-blue-2.png","contentUrl":"https:\/\/dhblog.dream.press\/blog\/wp-content\/uploads\/2019\/01\/dh_logo-blue-2.png","width":1200,"height":168,"caption":"DreamHost"},"image":{"@id":"https:\/\/www-dev.dreamhost.com\/blog\/#\/schema\/logo\/image\/"},"sameAs":["https:\/\/www.facebook.com\/DreamHost\/","https:\/\/x.com\/dreamhost","https:\/\/www.instagram.com\/dreamhost\/","https:\/\/www.linkedin.com\/company\/dreamhost\/","https:\/\/www.youtube.com\/user\/dreamhostusa"]},{"@type":"Person","@id":"https:\/\/www-dev.dreamhost.com\/blog\/#\/schema\/person\/220faf2464d5ae08e41cf5f3b28fdc96","name":"Ian Hernandez","image":{"@type":"ImageObject","inLanguage":"en-US","@id":"https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2022\/04\/ian-hernandez-dreamhost-150x150.png","url":"https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2022\/04\/ian-hernandez-dreamhost-150x150.png","contentUrl":"https:\/\/www-dev.dreamhost.com\/blog\/wp-content\/uploads\/2022\/04\/ian-hernandez-dreamhost-150x150.png","caption":"Ian Hernandez"},"description":"Ian is a Product Designer based in Los Angeles, California. He is responsible for driving brand and product design at DreamHost, developing and maintaining our internal design system, and writing frontend code when he can. In his free time, he enjoys walking his dog, learning history, and discovering new music online and irl. Connect with him on LinkedIn: https:\/\/www.linkedin.com\/in\/ianhernandez23\/","url":"https:\/\/www-dev.dreamhost.com\/blog\/author\/ianh\/"}]}},"lang":"fr","translations":{"fr":70927,"en":67299,"es":67284,"it":68678,"nl":70963,"uk":72301,"pt":72314,"pl":72342,"de":72890,"ru":72898},"pll_sync_post":[],"_links":{"self":[{"href":"https:\/\/www-dev.dreamhost.com\/blog\/wp-json\/wp\/v2\/posts\/70927","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www-dev.dreamhost.com\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www-dev.dreamhost.com\/blog\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www-dev.dreamhost.com\/blog\/wp-json\/wp\/v2\/users\/1058"}],"replies":[{"embeddable":true,"href":"https:\/\/www-dev.dreamhost.com\/blog\/wp-json\/wp\/v2\/comments?post=70927"}],"version-history":[{"count":2,"href":"https:\/\/www-dev.dreamhost.com\/blog\/wp-json\/wp\/v2\/posts\/70927\/revisions"}],"predecessor-version":[{"id":70929,"href":"https:\/\/www-dev.dreamhost.com\/blog\/wp-json\/wp\/v2\/posts\/70927\/revisions\/70929"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/www-dev.dreamhost.com\/blog\/wp-json\/wp\/v2\/media\/67300"}],"wp:attachment":[{"href":"https:\/\/www-dev.dreamhost.com\/blog\/wp-json\/wp\/v2\/media?parent=70927"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www-dev.dreamhost.com\/blog\/wp-json\/wp\/v2\/categories?post=70927"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www-dev.dreamhost.com\/blog\/wp-json\/wp\/v2\/tags?post=70927"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}