Por defecto, el rastreador solo visitará las URL en las que esté presente el código CMP. Esto puede dar lugar a problemas cuando el rastreador no puede acceder al (mismo) contenido al que accedería un usuario normal (por ejemplo, porque el usuario ha iniciado sesión en un área de acceso, ha añadido productos a su carrito de la compra o ha realizado otras tareas para obtener un resultado diferente de tu sitio web).

Uso de la autenticación básica

La autenticación básica es el método de autenticación más común para servidores web (también conocido como «autenticación .htaccess» o «inicio de sesión .htaccess/.htpasswd»). Para permitir que el rastreador acceda a páginas protegidas con contraseña, puedes configurar la autenticación en CMP > Editar > Ajustes del rastreador > Autenticación HTTP.

Uso de cookies personalizadas

En la configuración de CMP puedes habilitar la autenticación mediante cookies (CMP > Editar > Mostrar configuración del rastreador > Autenticación mediante cookies). Se trata de un mecanismo para indicar al rastreador que envíe cookies al servidor (aunque estas cookies quizá nunca existan en ningún otro lugar). Una vez que el rastreador visita el sitio web, las cookies estarán presentes y el sitio web podrá leerlas. El sitio web podrá entonces reaccionar de forma diferente a como lo haría si las cookies no estuvieran presentes (por ejemplo, permitiendo al rastreador el acceso a un área restringida o mostrándole cierto contenido que, de otro modo, requeriría la realización de otros pasos previos a la visita).

Para configurar la autenticación mediante cookies, introduce un elemento por línea, donde cada elemento consta de dominio:nombre_de_la_cookie:valor_de_la_cookie. Ejemplo:

mywebsite.com:mycookie:123
myotherwebsite.com:othercookie:let_me_in
a-third-website.com:authentication:crawler
a-third-website.com:token:bfe926da3fc1