Il file robots è un file in formato txt. posizionato nella root di ogni sito e-commerce. Questo file contiene le regole lette dai motori di ricerca per sapere quali pagine dei siti sono accessibili. Per cui prima di accedere ai siti, il motore di ricerca interroga il file per sapere cosa poter o meno leggere.
Indice degli argomenti:
Informazioni contenute nel file robots
Il file robots.txt contiene tutte le informazioni relative il contenuto dei siti. Al suo interno vanno definite le regole di lettura dei singoli contenuti del sito. Gli spider o robots dei motori di ricerca leggono il file robots capendo cosa leggere o meno del sito.
Ad esempio: se nel sito sono presenti pagine o cartelle che non si desidera indicizzare, nel file andrà definita una regola che inibisce la lettura di queste pagine ai robots.
Modifica autonoma del file robots
La modifica del file robots va effettuata esclusivamente da esperti del settore che abbiano competenze in ambito di SEO. Difatti un'errata compilazione del file può portare a gravi conseguenze per il proprio sito, rischiando di finire fuori dalla SERP (Search Engine Results Page, ossia la pagina dei risultati del motore di ricerca").
Se si ha la necessità di modificare il rile robots del sito e-commerce, bisogna prima attivare il file da:
- Configurazioni di sistema > SEO> "Strumenti Interni".
La funzione risulta di default disattiva.
Cliccando su "Attiva" si apre un nuovo campo denominato Codice file robots.txt accanto ad un box testo. All'interno del box va inserito il contenuto del file robots.