Entradas correspondientes a la etiqueta 'bloquear bots'

Bloquear acceso a Bots no deseados

Si tienes una página web y alguna vez te da por comprobar las estadísticas de visitas o el log de acceso al servidor web podrás comprobar que hay muchísimos bots que acceden al contenido de la misma, siguiendo todos sus links y recopilando toda la información que quieran. Cuando se trata del Googlebot o Bingbot …

Continuar leyendo »