搜索引擎將從網(wǎng)絡(luò)中抓取回來的所有資料，通過關(guān)鍵字描述等相關(guān)信息進(jìn)行分門別類整理、壓縮后，再編輯到索引里，還有一部分抓取回來經(jīng)過分析發(fā)現(xiàn)無效的信息則會被丟棄。

只有經(jīng)過編輯在索引下的信息，才能夠在搜索結(jié)果中出現(xiàn)。

最后，搜索引擎則經(jīng)過用戶輸入在最終用戶眼前的關(guān)鍵字進(jìn)行分析，為用戶找出最為接近的結(jié)果，再通過關(guān)聯(lián)度由近及遠(yuǎn)地排列下來，呈現(xiàn)搜索引擎工作原理簡單地說就是:搜索引擎蜘蛛發(fā)現(xiàn)連接→根據(jù)蜘蛛的抓取策略抓取網(wǎng)頁→然后交到分析系統(tǒng)的手中→分析網(wǎng)頁→建立索引庫。

什么是搜索引擎蜘蛛，什么是爬蟲程序?搜索引擎蜘蛛程序，其實就是搜索引擎的一個自動應(yīng)用程序，它的作用是什么呢?其實很簡單，就是在互聯(lián)網(wǎng)中瀏覽信息，然后把這些信息都抓取到搜索引擎的服務(wù)器上，建立索引庫，等等，我們可以把搜索引擎蜘蛛當(dāng)作一個用戶，這個用戶來訪問我們的網(wǎng)站，然后再把我們網(wǎng)站的內(nèi)容保存到自己的電腦上。

首先搜索引擎的蜘蛛需要去發(fā)現(xiàn)鏈接，至于怎么發(fā)現(xiàn)，就是通過鏈接。

搜索引擎蜘蛛在發(fā)現(xiàn)了這個鏈接后會把這個網(wǎng)頁下載下來并且存入到臨時的庫中，當(dāng)然同時會提取這個頁面所有的鏈接，然后就是循環(huán)、反復(fù)進(jìn)行搜索。