Preguntaron lo mismo hace un tiempo en el foro de pruebas y dudas informáticas http://foro.infojardin.com/threads/que-es-eso-de-miembros-robots.5329/
Sí, parece que aquí está la explicación, demora algo pero sale: https://adbot.me/blog/que-es-googlebot-bingbot-y-los-robots-en-general