Cómo funciona un buscador de páginas web

Cuando comencé a plantearme en serio desarrollar mi propio buscador de libros electrónicos, uno de los primeros artículos que leí fue Why Writing Your Own Search Engine Is Hard (¿Por qué escribir tu propio motor de búsqueda es duro?) de Anna Patterson. Tras una amplia trayectoria en el desarrollo de buscadores, ahora es Presidenta y Cofundadora de Cuil.com.
Es un artículo que guarda un equilibrio perfecto entre el aspecto técnico de la materia y el divulgativo.