{"id":18187,"date":"2019-07-10T20:59:30","date_gmt":"2019-07-10T18:59:30","guid":{"rendered":"https:\/\/gianlucagentile.com\/?p=18187"},"modified":"2019-07-13T09:43:15","modified_gmt":"2019-07-13T07:43:15","slug":"robots-txt-e-meta-tag-noindex-nofollow-qual-e-la-differenza","status":"publish","type":"post","link":"https:\/\/gianlucagentile.com\/blog\/robots-txt-e-meta-tag-noindex-nofollow-qual-e-la-differenza\/","title":{"rendered":"Robots.txt e meta tag Noindex Nofollow: qual \u00e8 la differenza?"},"content":{"rendered":"<p><strong><span style=\"font-size: 12pt;\">Vediamo insieme cosa sono il file <span style=\"text-decoration: underline;\">robots.txt<\/span> e i meta tag <span style=\"text-decoration: underline;\">Noindex Nofollow<\/span><\/span><\/strong><\/p>\n<p>I motori di ricerca usano degli spider per scansionare i siti web. Per sfruttare al meglio le potenzialit\u00e0 offerte dai motori di ricerca \u00e8 fondamentale saper comunicare con gli spider. A volte infatti pu\u00f2 essere necessario impedirgli di indicizzare alcune pagine.<\/p>\n<p>L&#8217;utilizzo del file\u00a0<strong>robots.txt<\/strong>\u00a0e dei meta tags\u00a0<strong>Noindex Nofollow<\/strong>\u00a0ci aiutano a\u00a0questo.<\/p>\n<p>Bisogna tuttavia fare attenzione a come li si utilizza poich\u00e9 sono strumenti molti diversi che hanno scopo differenti.<\/p>\n<p>Il file robots.txt \u00e8 quello che ci consente di gestire le indicazioni da dare agli spider dei motori di ricerca che eseguono la scansione del sito. Attraverso il comando\u00a0<strong>Disallow robots.txt comunichiamo agli spider di bloccare la scansione su\u00a0una\u00a0pagina o sull&#8217;intero sito<\/strong>.<\/p>\n<p>I metatgs\u00a0<strong>Noindex Nofollow<\/strong>\u00a0invece, agiscono sulle singole pagine ed\u00a0<strong>impediscono l&#8217;indicizzazione della pagina scansionata (noindex) e dei link (nofollow)<\/strong>.<\/p>\n<p><span style=\"text-decoration: underline;\">In estrema sintesi dunque possiamo\u00a0dire che il file robots.txt agisce a livello di scansione mentre i meta tags Noindex Nofollow agiscono a livello di indicizzazione.\u00a0<\/span><\/p>\n<h2>Il comando\u00a0Disallow robots.txt agisce sulla scansione<\/h2>\n<p>Il comando Disallow da inserire nel Robots.txt da direttive precise agli spider dei motori di ricerca e va utilizzato con molto criterio anche perch\u00e9 \u00e8 uno dei passaggi pi\u00f9 importanti per l&#8217;indicizzazione SEO di un sito web.<\/p>\n<p>Infatti, <em>il file robots.txt, restringendo l\u2019accesso in determinate aree del sito, alleggerisce il processo di scansione<\/em>. In un sito web con una grande mole di contenuti scansionare tutte le cartelle e sottocartelle ecc. pu\u00f2 essere\u00a0per gli spider un&#8217;operazione molto gravosa che penalizza la performance del portale. Il file robots.txt entra in funzione per evitare questo inconveniente.<\/p>\n<p>Attenzione per\u00f2 alle pagine a cui si applica il comando disallow. L&#8217;operazione dev&#8217;essere molto oculata avendo cura di selezionare solo quelle pagine che non sono importanti ai fini della SEO. In questo modo si riduce il carico sul server e si accelera il processo di indicizzazione.<\/p>\n<p>Il file robots.txt \u00e8 composto da due campi:\u00a0il campo &#8220;User-agent&#8221; ed uno o pi\u00f9 campi &#8220;Disallow&#8221;.<\/p>\n<ul>\n<li>User-agent serve ad indicare a quale spider sono rivolte le direttive<\/li>\n<li>Disallow serve a indicare a quali file e\/o directory lo spider precedentemente indicato\u00a0<strong>non<\/strong>\u00a0pu\u00f2 accedere.<\/li>\n<\/ul>\n<figure id=\"attachment_18189\" aria-describedby=\"caption-attachment-18189\" style=\"width: 826px\" class=\"wp-caption alignnone\"><img decoding=\"async\" class=\"wp-image-18189 size-full\" src=\"https:\/\/gianlucagentile.com\/wp-content\/uploads\/2019\/07\/Disallow-robots-4.png\" alt=\"Parte di codice da utilizzare nel robots.txt per gli User-Agent\" width=\"826\" height=\"164\" srcset=\"https:\/\/gianlucagentile.com\/blog\/wp-content\/uploads\/2019\/07\/Disallow-robots-4.png 826w, https:\/\/gianlucagentile.com\/blog\/wp-content\/uploads\/2019\/07\/Disallow-robots-4-300x60.webp 300w, https:\/\/gianlucagentile.com\/blog\/wp-content\/uploads\/2019\/07\/Disallow-robots-4-768x152.webp 768w, https:\/\/gianlucagentile.com\/blog\/wp-content\/uploads\/2019\/07\/Disallow-robots-4-260x52.png 260w, https:\/\/gianlucagentile.com\/blog\/wp-content\/uploads\/2019\/07\/Disallow-robots-4-50x10.webp 50w, https:\/\/gianlucagentile.com\/blog\/wp-content\/uploads\/2019\/07\/Disallow-robots-4-150x30.png 150w, https:\/\/gianlucagentile.com\/blog\/wp-content\/uploads\/2019\/07\/Disallow-robots-4-600x119.webp 600w\" sizes=\"(max-width: 826px) 100vw, 826px\" \/><figcaption id=\"caption-attachment-18189\" class=\"wp-caption-text\">Parte di codice da utilizzare nel robots.txt per gli User-Agent<\/figcaption><\/figure>\n<h2>I meta tags Noindex Nofollow agiscono sull\u2019indicizzazione<\/h2>\n<p><span style=\"text-decoration: underline;\">Il meta tag Noindex agisce a livello di indicizzazione.<\/span> Quando\u00a0gli spider scansionano la pagina e trovano il meta tag Noindex la rimuovono dal loro indice e la pagina non potr\u00e0 apparir\u00e0 nei risultati di ricerca.<\/p>\n<p>Ma perch\u00e9 potrebbe essere utile deindicizzare alcune pagine del nostro sito internet? Il noindex <a href=\"https:\/\/gianlucagentile.com\/seo\/\" target=\"_blank\" rel=\"noopener noreferrer\">SEO<\/a> in un&#8217;ottica di ottimizzazione \u00e8 da applicare a tutte quelle pagine che potrebbe essere poco interessanti per i motori di ricerca come ad esempio le pagine duplicate, le pagine off topic o anche le pagine dei tag, quelle che illustrano la policy del sito, o le pagine contenenti brevi informazioni di servizio. I motori di ricerca considerano queste pagine come <span style=\"text-decoration: underline;\">spam engine<\/span>\u00a0e se il loro numero \u00e8 alto, l&#8217;intero sito web pu\u00f2 essere penalizzato o declassato.<\/p>\n<p><span style=\"text-decoration: underline;\">Anche il meta tag Nofollow agisce sull&#8217;indicizzazione ma \u00e8 specifico per i link<\/span>. In questo caso gli spider non indicizzano i link marcati con l&#8217;attributo nofollow e, sempre nell&#8221;ottica di un buon posizionamento, il Nofollow si usa per evitare di passare parte del proprio ranking al sito esterno linkato.<\/p>\n<figure id=\"attachment_18190\" aria-describedby=\"caption-attachment-18190\" style=\"width: 784px\" class=\"wp-caption alignnone\"><img decoding=\"async\" class=\"wp-image-18190 size-full\" src=\"https:\/\/gianlucagentile.com\/wp-content\/uploads\/2019\/07\/noindex-nofollow-example.png\" alt=\"Esempio in HTML di noindex nofollow\" width=\"784\" height=\"181\" srcset=\"https:\/\/gianlucagentile.com\/blog\/wp-content\/uploads\/2019\/07\/noindex-nofollow-example.png 784w, https:\/\/gianlucagentile.com\/blog\/wp-content\/uploads\/2019\/07\/noindex-nofollow-example-300x69.webp 300w, https:\/\/gianlucagentile.com\/blog\/wp-content\/uploads\/2019\/07\/noindex-nofollow-example-768x177.webp 768w, https:\/\/gianlucagentile.com\/blog\/wp-content\/uploads\/2019\/07\/noindex-nofollow-example-260x60.webp 260w, https:\/\/gianlucagentile.com\/blog\/wp-content\/uploads\/2019\/07\/noindex-nofollow-example-50x12.webp 50w, https:\/\/gianlucagentile.com\/blog\/wp-content\/uploads\/2019\/07\/noindex-nofollow-example-150x35.png 150w, https:\/\/gianlucagentile.com\/blog\/wp-content\/uploads\/2019\/07\/noindex-nofollow-example-600x139.webp 600w\" sizes=\"(max-width: 784px) 100vw, 784px\" \/><figcaption id=\"caption-attachment-18190\" class=\"wp-caption-text\">Esempio in HTML di noindex nofollow<\/figcaption><\/figure>\n<p>Anche nel caso di link a pagamento \u00e8 sempre preferibile inserire\u00a0un Nofollow, perch\u00e9 i motori di ricerca non gradiscono quando veniamo pagati per linkare un sito.\u00a0Stessa cosa per i banner pubblicitari che rimandano ad altri siti.<\/p>\n<p><em>Attraverso i meta tags Noindex Nofollow pagine e link cessano di esistere soltanto per i motori di ricerca mentre restano a disposizione della consultazione degli utenti.<\/em><\/p>\n<h2>Disallow e noindex: mai usarli insieme<\/h2>\n<p>Il file robots.txt e i meta tag Noindex Nofollow sono strumenti molto utili per\u00a0creare\u00a0un\u00a0sito web efficace. Comprendere a fondo la differenza tra questi comandi pu\u00f2 aiutarci ad evitare errori molto diffusi.<\/p>\n<p>Quando si applica la direttiva Disallow la pagina non viene scansionata. Se alla stessa pagina si aggiunge anche il meta tag Noindex gli spider non potranno leggerlo poich\u00e9 non hanno accesso alla scansione della pagina.\u00a0<span style=\"text-decoration: underline;\">Usarli insieme \u00e8 un grave errore<\/span>.<\/p>\n<p>In casi come questi infatti ci si imbatte nella situazione per cui\u00a0una pagina non scansionata pu\u00f2 comunque essere indicizzata, perch\u00e9 gli spider non hanno accesso alla lettura del comando Noindex.<\/p>\n<p>E&#8217; utile quindi ripetere che quando si vuole bloccare esplicitamente l&#8217;indicizzazione di una pagina si utilizza il meta tag Noindex e si deve consentire la scansione per far s\u00ec che il tag venga riconosciuto ed eseguito.<code>\u00a0<\/code><\/p>\n<p>Pu\u00f2 anche succedere una situazione analoga quando una pagina di cui abbiamo vietato l&#8217;accesso per la scansione viene linkata da altri siti web o condivisa sui social network. Infatti\u00a0se un URL \u00e8 bloccato dal robots.txt ma una pagina contiene un link verso quest&#8217;URL, si pu\u00f2 creare una situazione per cui nella SERP viene fuori un risultato senza titolo e senza snippet, provocando una cattiva esperienza d&#8217;uso per l&#8217;utente.<\/p>\n<p>Usare questi comandi con criterio e avendo ben chiaro l&#8217;obiettivo per cui si stanno applicando consentir\u00e0 di non essere penalizzati e dai motori di ricerca e dai nostri utenti!<\/p>\n<p>Adesso che hai compreso<span style=\"text-decoration: underline;\"> la funzione del robots.txt e del Noindex Nofollow<\/span> programma quanto prima le modifiche al tuo sito web cos\u00ec da poter dare ulteriore slancio alla sua ottimizzazione. Se hai dubbi riguardo a situazioni specifiche che ti trovi ad affrontare sul tuo portale scrivi nei commenti.<\/p>\n<p><!-- Articoli correlati - SEO internal linking --><\/p>\n<div class=\"related-posts-seo\" style=\"margin-top:30px; padding:20px; background:#f5f5f5; border-radius:8px;\">\n<h3 style=\"margin-top:0;\">Potrebbe interessarti anche:<\/h3>\n<ul style=\"margin-bottom:0;\">\n<li><a href=\"https:\/\/gianlucagentile.com\/blog\/il-software-di-seo-completo-facile-da-usare-e-rispettoso-della-privacy-che-ti-fara-scalare-le-classifiche-dei-motori-di-ricerca\/\">Il software di SEO completo, facile da usare e rispettoso della privacy che ti far\u00e0 scalare le classifiche dei motori di ricerca!<\/a><\/li>\n<li><a href=\"https:\/\/gianlucagentile.com\/blog\/link-interni-cosa-sono-e-come-usarli\/\">Link Interni, cosa sono e come usarli<\/a><\/li>\n<li><a href=\"https:\/\/gianlucagentile.com\/blog\/approccio-mobile-first-cose-e-perche-e-fondamentale-per-seo-ed-esperienza-utente\/\">Approccio Mobile-First: Cos\u2019\u00e8 e perch\u00e9 \u00e8 fondamentale per SEO ed esperienza utente<\/a><\/li>\n<\/ul>\n<\/div>\n","protected":false},"excerpt":{"rendered":"<p>Vediamo insieme cosa sono il file robots.txt e i meta tag Noindex Nofollow I motori di ricerca usano degli spider per scansionare i siti web&#8230;.<\/p>\n","protected":false},"author":1,"featured_media":18188,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"_seopress_robots_primary_cat":"","_seopress_titles_title":"Robots.txt e meta tag Noindex Nofollow: qual \u00e8 la...","_seopress_titles_desc":"Vediamo insieme cosa sono il file robots.txt e i meta tag Noindex Nofollow I motori di ricerca usano degli spider per scansionare i siti web. Per sfrutt...","_seopress_robots_index":"","footnotes":""},"categories":[66],"tags":[5626,5628,1382,5474,3992,3608],"class_list":{"0":"post-18187","1":"post","2":"type-post","3":"status-publish","4":"format-standard","5":"has-post-thumbnail","7":"category-seo","8":"tag-ai","9":"tag-app","10":"tag-hosting","11":"tag-mobile","12":"tag-privacy","13":"tag-seo"},"_links":{"self":[{"href":"https:\/\/gianlucagentile.com\/blog\/wp-json\/wp\/v2\/posts\/18187","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/gianlucagentile.com\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/gianlucagentile.com\/blog\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/gianlucagentile.com\/blog\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/gianlucagentile.com\/blog\/wp-json\/wp\/v2\/comments?post=18187"}],"version-history":[{"count":0,"href":"https:\/\/gianlucagentile.com\/blog\/wp-json\/wp\/v2\/posts\/18187\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/gianlucagentile.com\/blog\/wp-json\/wp\/v2\/media\/18188"}],"wp:attachment":[{"href":"https:\/\/gianlucagentile.com\/blog\/wp-json\/wp\/v2\/media?parent=18187"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/gianlucagentile.com\/blog\/wp-json\/wp\/v2\/categories?post=18187"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/gianlucagentile.com\/blog\/wp-json\/wp\/v2\/tags?post=18187"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}