Robots.txt es un archivo de texto almacenado en el servidor de un sitio web que se comunica con los rastreadores de búsqueda. A los robots de indexación o rastreadores se les “dice” qué archivos y carpetas se pueden ver y qué archivos y carpetas el webmaster no permite ver. Así mismo, Robots.txt puede mantener las páginas indexadas de un webmaster limitadas a las páginas que deseen.
¿Qué es un marcado de esquema o schema markup?
El marcado de esquema se refiere a un código que se agrega al HTML del sitio web para proporcionar a los motores de búsqueda información más relevante sobre una empresa, lugar, persona, producto o cosa. También se conoce como datos estructurados o fragmentos enriquecidos.