robots.txt per WordPress
Cosa far scansionare ai motori, senza bloccare il necessario.
Gratuito davvero. Nessuna registrazione, nessuna email, nessun limite, nessun cookie. Non salviamo l'URL che analizzi.
Codice
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Disallow: /?s=
Sitemap: https://esempio.it/sitemap.xmlA cosa serve
Il robots.txt guida i crawler: un blocco sbagliato può far sparire il sito da Google, uno troppo permissivo espone pagine inutili. Questa base blocca ciò che va bloccato lasciando passare admin-ajax, che serve al funzionamento del sito.
Domande frequenti
›Perché non bloccare tutta /wp-admin/?
Perché admin-ajax.php vive lì dentro e serve anche al frontend. Bloccare l'intera cartella ma consentire admin-ajax.php è la regola corretta, ed è quella che genera questo strumento.