[Marco]

¿De qué manera le puedo especificar a algun sitio web que aparezca en un motor de búsqueda y en otros no?

[Nieves Nieto]

Eso lo puedes hacer con el archivo robots.txt y meta name no index, coloca lo siguiente en tus archivos:

robots.txt:

User-agent: bot-name Disallow: /
meta name no index:
<meta name="bot-name" content="noindex, nofollow">

[Cristian Moreno]

Puedes darle un vistazo a los crawler que usa Google para los sitios web, esto te puede servir:

Por favor Identificate o Registrate para poder ver este contenido

[Marco]

Gracias, intentare el metodo de robots.txt