蜘蛛。這個功能模塊專門(mén)用來(lái)下載頁面，類似浏覽器的功能。它們之間的區别在于，浏覽器展現給用戶的是各種形式的信息，包括文本的信息，圖像的信息，視頻的信息，等等；而對于蜘蛛來(lái)說(shuō)，并沒有一些可(kě)視化的組件(jiàn)，而是直接跟基本的html源代碼打交道。大(dà)家可(kě)能都(dōu)知道，一個标準的web浏覽器都(dōu)是帶有html源文件(jiàn)查看(kàn)的功能的。
　　爬蟲。該功能模塊專門(mén)用戶發現每個頁面中的所有鏈接。它的任務是，通過評估找到的鏈接，或者已定義的地址，來(lái)決定蜘蛛去(qù)哪裡(lǐ)。爬蟲跟蹤這些已經找到的鏈接，并且嘗試去(qù)發現對于搜索引擎來(lái)說(shuō)不知道的一些文檔。
　　索引。此功能組件(jiàn)負責解析每個頁面，然後分析各種頁面的元素，例如(rú)，文本内容，頭部内容，結構化或者自(zì)定義過的特色部分，特殊的html标簽，等等。
　　數據庫。搜索引擎下載和分析的一些數據，都(dōu)要進行存儲。有些時候，它也叫做搜索引擎的索引。

　　結果引擎。結果引擎來(lái)進行頁面的排名工(gōng)作(zuò)。它決定着哪些頁面是較匹配用戶的搜索請(qǐng)求的，并且按照(zhào)何種有效而合理(lǐ)的次序來(lái)顯示這些結果。這是根據搜索引擎的排名算法而決定的。它追尋的是這樣一種理(lǐ)念，頁面排名是有價值的，基于用戶興趣驅動的，所以對于SEO工(gōng)作(zuò)者來(lái)說(shuō)這個是較感興趣的，SEOer們的目标就(jiù)是如(rú)何有效提高所關心的網站的頁面排名。
　　Web服務器。搜索引擎web服務器包含了這樣的一個基本的web頁面，有一個用于用戶輸入感興趣的關鍵詞的文本框，并且當用戶提交搜索動作(zuò)時，将搜索出的結果合理(lǐ)的展示給用戶。