La forma correcta de evitar que una web aparezca en los resultados de búsqueda en Google

Aún se continúa utilizando el archivo robots.txt para evitar que los rastreadores indexen las páginas y que no aparezcan en los resultados de búsqueda. El...
Aún se continúa utilizando el archivo robots.txt para evitar que los rastreadores indexen las páginas y que no aparezcan en los resultados de búsqueda. El problema es que puede que continúen apareciendo en los resultados a pesar de que no sean indexadas sobre todo si existen otras web que enlacen con la nuestra y Google encuentre que se trata de una información importante. Una web no necesita ser indexada para aparecer en los resultados de búsqueda, así que hay que diferenciar entre que nuestra página sea indexada y que aparezca en los resultados de búsqueda..... La forma correcta de evitar que...