Tengo que decir que (aunque ya tiene un tiempo) me ha encantado el símil de @kimapa con los campos de cultivo y los recolectores-robots

Yo antes me liaba con todo esto de las etiquetas meta. Hace tiempo leí un artículo muy sencillo que me dejo claro todo esto de las etiquetas META="Robots", pero también la diferencia entre rastreo e indexación.

Es importante comprender cómo funciona cada paso que te lleva a estar en los resultados de búsqueda.