(1)下載系統(tǒng);

(2)分析系統(tǒng);

(3)索引系統(tǒng);

(4)查詢系統(tǒng);

其中下載系統(tǒng)負(fù)責(zé)從萬(wàn)維網(wǎng)上下載各種類(lèi)型的網(wǎng)頁(yè)，并且保持對(duì)萬(wàn)維網(wǎng)變化的同步。

分析系統(tǒng)負(fù)責(zé)抽取下載系統(tǒng)得到的網(wǎng)頁(yè)數(shù)據(jù)，并進(jìn)行PageRank和分詞計(jì)算。

索引系統(tǒng)負(fù)責(zé)將分析系統(tǒng)處理后網(wǎng)頁(yè)對(duì)象索引入庫(kù)。

查詢系統(tǒng)負(fù)責(zé)分析用戶提交的查詢請(qǐng)求，然后從索引庫(kù)中檢索出相關(guān)網(wǎng)頁(yè)并將網(wǎng)頁(yè)排序后，以查詢結(jié)果的形式返回給用戶。

從細(xì)節(jié)上看，網(wǎng)頁(yè)從開(kāi)始到最后都是網(wǎng)頁(yè)。而在搜索引擎的內(nèi)部會(huì)有兩種不同的形式，一種以網(wǎng)頁(yè)庫(kù)的方式存儲(chǔ);一種成為網(wǎng)頁(yè)對(duì)象被存儲(chǔ)在索引庫(kù)中。搜索引擎的主要數(shù)據(jù)來(lái)自網(wǎng)頁(yè)，網(wǎng)頁(yè)處理能力是搜索引擎面對(duì)的主要挑戰(zhàn)，下載系統(tǒng)和索引系統(tǒng)分別會(huì)進(jìn)行一些關(guān)于數(shù)據(jù)存的相關(guān)知識(shí)的介紹。