Buscando, Buscando por ahi, encontre este magnifico resumen de la historia de los buscadores publicado por OjoBuscador.com y que creo que vale la pena dejarlo archivado aqui en el historial de noticias de «la isla».
Pulsa en LEER MAS >>> para leer mas, logico, no?
Salu2
Angeloso
Historia de los Buscadores
de 1993 a 2006
La web se comenz?idear en 1980 cuando Tim Berners-Lee∞ se plantea lo que m?adelante, 10 a?despu? ser?lo que hoy conocemos como sitios web. A finales de 1990 comenz?aplicar sus ideas creando el primer servidor web en NeXT∞, el primer navegador web llamado WorldWideWeb∞ (que tambi?era editor HTML) y la primera p?na web∞…
Una vez comenz? web a tener contenido, en junio de 1993 y desde el MIT∞ (con Matthew Gray a la cabeza), se desarroll?trong>World Wide Web Wanderer, un robot de b?eda creado en Perl∞ que pretend?medir el tama?e la red. Ese robot se ampli?diendo leer direcciones URL cre?ose as?strong>Wandex, el que se podr?considerar el primer buscador de internet, y que tuvo grandes problemas de infraestructura y velocidad cuando alcanz?s cientos de visitas diarias, ya que su robots consegu?»tirar» los sitios que indexaba.
El siguiente buscador (quiz?ejor lamarlo directorio) fue Aliweb∞ (Archie Like Indexing on the Web), tambi?apareci? octubre de 1993 y todav?est?n marcha. Creado por Martijn Koster∞, lo que hac?era indexar los meta-tags de las p?nas que se le daban a su ?ice, es decir, que no ten?un robot de b?eda que consumiera gran cantidad de ancho de banda como Wandex.
Tras estos primeros procesos de rastreo en la red, Martijn Koster propuso unas sugerencias∞ para lo que ser?el fichero robots.txt∞ que limita la acci?e los robots de b?eda en los sitios web. En ese momento se comenzaba a poder detectar cada uno de los robots mediante su agente, se suger?usar siempre una dns ?a, filtrar determinados lugares del sitio para que no fuera accesible…
Aqu?omenzaron a desarrollarse los primeros robots (ara? como Jumpstation que indexaba el t?lo, URL y cabecera del sitio, al igual que World Wide Web Worm, creado por Oliver Mc.Bryan en 1994 (y comprado en 1998 por Goto.com∞) que funcionaba de la misma manera. Aunque era interesante que indexaran, el problema de estos motores era la forma de mostrar resultados, ya que lo hac? sin aplicar ning?lgoritmo, simplemente mostrando los resultados seg?a fecha de indexaci?M?adelante, en diciembre, tambi?lo hizo as?l RBSE (Repository-Based Software Engineering) comenzando a aplicar un primer ranking en base a la relevancia de la palabra dada.
De forma paralela iban apareciendo algunos directorios como EINet Galaxy, que en enero de 1994 podr?considerarse el primer directorio tal y como los conocemos en la actualidad. Pero, fue en abril de 1994 cuando David Filo∞ y Jerry Yang∞ crearon Yahoo!∞ (anteriormente conocido como Jerry's Guide to the World Wide Web), una colecci?e las p?nas web favoritas. El gran problema de Yahoo! era que comenz?endo un directorio hecho por personas y eso llevaba mucho tiempo, por lo que tuvo que evolucionar incorporando un buscador para ese directorio. Es curiosa la historia de su nombre debido a que muchos le otorgan el nombre de Yet Another Hierachical Officious Oracle, aunque sus fundadores insisten en que se basa en los personajes de unas aventuras de Gulliver.
Hasta aqu?odr?os hablar de la versi?beta» de los buscadores, la versi?ue no era a?i la primera y en la que todo eran experimentos.
As?asta que el 20 de abril de 1994 Brian Pinkerton∞, desde la Universidad de Washington∞, presentase WebCrawler∞. En realidad este buscador era de escritorio y naci? 27 de enero de 1994 pero en 3 meses se convirti? un robot de la red. La gran diferencia y paso diferencial que podr?os llamar la versi? de los buscadores era que indexaba las p?nas de forma completa y que buscaba informaci?n ellas, al contrario de sus antecesores, que s?buscaban en la direcci?eb, t?lo o metas. Esto hizo que la relevancia de los resultados fuera mucho mayor. Adem? ten?la peculiaridad de poder ver las b?edas en tiempo real con su Webcrawler Search Voyeur. Hay que tener en cuenta que al cabo de 7 meses lleg?su mill?e consultas, que en 1995 fue comprado por AOL∞, en 1997 por Excite y que en 2001 pas?ser parte de InfoSpace∞.
InfoSeek∞ tambi?apareci?principios de 1994, y aunque no lleg?tener nada especial, tuvo un gran salto en diciembre de 1995 cuando fue el motor de b?eda por defecto en Netscape∞.
Tras la aparici?e Webcrawler hay que destacar la aparici?e Lycos∞ el 20 de julio de 1994, creado por Michale Mauldin en la Universidad de Carnegie Mellon∞, con un algoritmo interesante que inclu?el concepto de proximidad entre palabras. Eso s?no indexaba de forma completa las p?nas, s?las 20 primeras frases, las 200 primeras de la cabecera y un grupo de las 100 m?relevantes de todo el documento. Aunque si hay que destacar a Lycos es por la cantidad de documentos indexados: se lanz?n 54.000 documentos; en agosto de 1994 ten?394,000 documentos; en enero de 2005, 1,5 millones; y en noviembre de 1996 lleg?los 60 millones, convirti?olo en el motor de b?eda m?destacado. La palabra que ofrec?m?resultados era «surf».
En esta ?ca comenzaron tambi?a aparecer los primeros meta-buscadores. Este sistema lo que hace realmente es unificar los resultados de varios motores de b?eda para ofrecer los resultados mezclados. En 1995 apareci? primero de ellos llamado MetaCrawler∞ creado por Erik Selberg y Oren Etzioni en la Universidad de Washington (como Webcrawler). En este caso devolv?resultados de Lycos, Altavista, Yahoo!, Excite, Webcrawler e Infoseek. El problema era su velocidad. Como curiosidad, en noviembre de 1996 ya ten?una nueva versi?en beta, para probar.
En diciembre de 1995 seis estudiantes de Stanford∞ lanzaron Excite∞ gracias al proyecto Architext (iniciado en 1994) que introdujo uno de los conceptos base de las b?edas. El complicado algoritmo intentaba crear un sistema parecido a los sin?os mediante estad?icas entre las relaciones de palabras, de forma que se pod?realizar una b?eda obteniendo resultados aunque la misma no existiera en la p?na (si ten?alguna relaci?claro). En 1996 compr?gellan y Webcrawler y cre? propio directorio. Fue el buscador de referencia hasta mediados de 1999 y en 2002 perdi? sistema de b?eda pasando a ser un metabuscador.
El siguiente gran lanzamiento fue AltaVista∞. Fue en Diciembre de 1995 cuando hizo su aparici?n escena y es muy importante este lanzamiento por las mejoras que propon? ten?ancho de banda casi ilimitado, permit?consultas en lenguaje natural∞ (las que utilizamos habitualmente para hacer b?edas), consultas avanzadas mediante operadores l?os (AND, OR…), a?r o eliminar direcciones web en 24 horas, comprobar los enlaces entrantes a un sitio web e incluso permit?hacer b?edas en los nombres de im?nes y algunos ficheros multimedia. No s?era grande en resultados sino veloz al entregarlos. Adem? ofrec?una serie de «ayudas / trucos» para mejorar la calidad de las consultas.