搜索引擎發展歷史
現實意義上的搜索是1990年由特利爾大學學生Alan Emtage開發的Archie。雖然當時World Wide Web還未出現，但網絡中文件傳輸已經相當頻繁，而且由于大量的文件散布在各個不同的FTP服務器中，形成了巨量的信息源。Alan的Archie依靠腳本程序搜索網絡上的文件，公分母對其進行索引，供使用者查詢。由于Archie深受用戶歡迎，受其啟發，美國內華達高教系統計算服務中心于1993年開發了另一個類似的搜索工具，不過該搜索工具除了能索引文件外，還能檢索網頁。(北京網站制作)當時，“機器人”一詞十分流行，它是指快速不間斷地執行某項任務的程序。由于專門用于檢索信息的“機器人”程序像蜘蛛一樣在網絡間爬來爬去，因此，搜索引擎“機器人”程序也被稱為“蜘蛛”程序。世界上第一個監測互聯網發展規模的“機器人”程序是Matthew Gray開發的World Wide Web Wanderer。剛開始它只用于統計互聯網上服務器的數量，后來則發展到能夠檢索網站域名。與Wanderer相對應，Martin Koster于1993年10月創建了ALIWEB，它是Archie的HTTP版本。ALIWEB不使用“機器人”程序，而是靠網站主動提交信息來建立自己的鏈接索引，類似雅虎分類目錄。(高端網站建設)
隨著互聯網的快速發展，檢索新出現的網頁變得越來越困難，因此，在Matthew Gray的Wanderer基礎上，將傳統的“蜘蛛”程序作了改進。其設想是，既然所有網頁都可能存在指向其他網站的鏈接，那么從跟蹤一個網站的鏈接開始，就有可能檢索整個互聯網。到1993年底，一些基于此原理的搜索引擎開始紛紛涌現，其中以JumpStation、The World Wide Web Worm（Goto的前身，也就是今天的Overture，已被雅虎收購）和Repository-Based Software Engineering（RBSE）spider最負盛名。然而JumpStation和WWW Worm只是以搜索工具在數據庫中找到匹配信息的先后次序排列搜索結果，因此毫無信息關聯度可言。而RBSE是第一個在搜索結果排列中引入關鍵字串匹配程度概念的搜索引擎。最早現代意義上的搜索引擎出現于1994年7月。當時Micheal Mauldin將John Leavitt的蜘蛛程序接入到其索引程序中，創建了大家現在熟知的Lycos。同年4月，斯坦福大學的兩名博士生，David Filo和美籍華人楊致遠（Jerry Yang）共同創辦了超級目錄索引雅虎，并成功地使搜索引擎的概念深入人心。從此搜索引擎進入了調整發展時期。目前，互聯網上有名有姓的搜索引擎已達數百家，其檢索的信息量也今非昔比。例如，Google號稱數據庫中存放的網頁已達40億。