Bueno este pequeño script lo ke hace es enviarte un mail cuando un buscador te ha indexado, esto seria por medio de las funciones de PHP $HTTP_USER_AGENT y $QUERY_STRING.
en este ejemplo utilizo san google por obvias razones
<?php
if(eregi("Googlebot",$HTTP_USER_AGENT)){
if ($QUERY_STRING != ""){
$url = "http://".$SERVER_NAME.$PHP_SELF.'?'.$QUERY_STRING;
}else{
$url = "http://".$SERVER_NAME.$PHP_SELF;
}
$today = date("j/m/Y, g:i a");
mail("webmaster@tudominio.com", "Se ha detectado un robot de Google en http://$SERVER_NAME", "$today - Google ha indexado la página $url.\n");
}
?>
este script debe ir en todas las paginas ke keramos, bastaria con usar la funcion include.
si kieren utilizar otro robot, hay un listado por aki:
http://www.robotstxt.org/wc/active/html/index.html