Google reveló recientemente dos nuevos rastreadores enfocados en imágenes y videos, utilizados para «investigación y desarrollo».
Lanzados en abril de 2023, los GoogleOther Crawlers son una evolución del rastreador original utilizado por equipos internos de Google para investigaciones puntuales.
La descripción oficial del GoogleOther original aclara: «es un rastreador genérico que puede ser utilizado por varios equipos de producto para recopilar contenido públicamente accesible en sitios web. Por ejemplo, puede ser utilizado para investigaciones puntuales de investigación y desarrollo».
Las dos nuevas variaciones del GoogleOther son el GoogleOther-Image y el GoogleOther-Video. Se diferencian por buscar datos binarios, como imágenes y videos, que no pueden ser visualizados en aplicaciones de texto comunes.
La documentación de Google proporciona tokens de agente de usuario para ambos rastreadores, permitiendo que los sitios los bloqueen a través del archivo robots.txt.
La documentación oficial no aclara el impacto en el posicionamiento de los sitios que bloqueen estos rastreadores, pero indica que el material recopilado no se utilizará para entrenar inteligencia artificial, función desempeñada por el rastreador «Google-Extended».