ALIWEB

ALIWEB (Archie-Like Indexing for the Web) es el primer motor de búsqueda web.

Anunciado por primera vez en noviembre de 1993 por el desarrollador Martijn Koster mientras trabajaba en Nexor, y presentado en mayo de 1994 en la Primera Conferencia Internacional sobre la World Wide Web en el CERN en Ginebra, ALIWEB precedió a WebCrawler por varios meses.

ALIWEB permite a los usuarios enviar las ubicaciones de los archivos de índice en sus sitios, lo que permite al motor de búsqueda incluir páginas web y agregar descripciones de páginas y palabras clave escritas por el usuario. Esto permite a los webmasters definir los términos que llevarían a los usuarios a sus páginas y también evitó configurar bots (por ejemplo the Wanderer, JumpStation) que consumían ancho de banda.

Martijn Koster, quien también jugó un papel decisivo en la creación del Estándar de exclusión de robots, detalló los antecedentes y objetivos de ALIWEB con una descripción general de sus funciones y marco en el documento que presentó en el CERN. Koster dejó Nexor y en los años siguientes el desarrollo se detuvo hasta que una nueva empresa se hizo cargo del proyecto. Se descubrió que el archivo de la base de datos en realidad había excedido el rango de búsqueda, por lo que cuando ingresaba un término de búsqueda no buscaba en toda la base de datos ni ponderaba los resultados, solo buscaba desde el principio de la base de datos hasta que se agotaba. resultados para mostrar o excedieron el número de resultados solicitados. Los desarrolladores de la nueva empresa solucionaron este problema ponderando los resultados y buscando en toda la base de datos antes de mostrarlos.