Robots.txt y noindex: qué usar para excluir páginas de Google
Para excluir una página de Google, utiliza noindex y permite que el buscador la rastree. Robots.txt controla el acceso de los rastreadores, pero no garantiza que una URL desaparezca del buscador. La documentación de Google distingue ambas funciones. Aquí aprenderás a elegir y comprobar la configuración adecuada.