yahoo abandona google

Pues vaya ya es oficial: http://news.com.com/2102-1024_3-5160710.html?tag=st.util.print

Segun decian en un principio iban a usar los resultados de Inktomi, ya que ahora son dueños de Inktomi, pero a última hora ha salido que van a usar su propio spider.

A nivel personal, creo que es el mismo que inktomi pero que lo usarán diferente y tendrán diferente algoritmo, ya que mi problema de Inktomi leer solo mi robots.txt lo ha heredado Yahoo.

Hoy ha entrado el nuevo de Yahoo: Agent: Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)

y ha hecho lo mismo, solo robots.txt

Estoy desesperada....

Vaya, en el articulo pone esto: The crawler is also keeping copies of those pages--what's known as "caching" pages.

lo de robots.txt podría ser por tener no cache en pagina index??? aunque no deberían hacer eso.