目錄和真正的搜尋引擎之間的差異是,目錄是人為編輯出來的,而搜尋引擎是由爬行器通過跟蹤連結漫遊 Web 而建立的。白帽 SEO 的主要關注點在於提高網站在使用爬行器編輯的搜尋引擎中的排名。
搜尋引擎工作原理—— 簡化版
為了收集資料,搜尋引擎讓爬行器跟蹤連結漫遊、組織資料並判斷每個頁面上的文本與什麼內容相關。當搜索者進行搜索時,搜尋引擎利用爬行器收集的資訊,通過專用排名演算法建立與這次查詢最相關的網站清單,並顯示在 SERP 中。
目錄工作原理 —— 簡化版
純粹的目錄就像是圖書館中的分類卡,只不過是採用了電子形式。它包含編輯好的已提交到目錄中的網站清單。它知道這個列表中有什麼,而且知道對於搜索欄位中輸入的單詞應該搜索哪些類別。這是因為最初的提交者常常會選擇分類。另外,搜索者可能根據目錄的類別進行流覽,尋找帶有他所請求的單詞的網站。
Google 是真正的搜尋引擎。它提供一些來自 Open Directory 或 DMOZ (開放式分類目錄Open DirectoryProject)的目錄結果(參見 參考資料),但是大多數結果來自爬行器的漫遊和 PageRank 演算法(參見 PageRank)。Yahoo!®; 是一種目錄混合型搜尋引擎,它首先搜索自己的目錄,然後使用 Yahoo Bot Slurp! 進行搜尋引擎搜索。
關於 Google 的更多資訊許多 Web 網站管理員報告說,Google 的搜索索引在他們所有與搜索相關的流量中占主要比例。正因為 Google 如此流行,您很可能希望主要針對 Google 來優化網站(請參見 參考資料 中 Google 自己的統計資料)。
對於 Web 網站管理員來說,幸運的是,Google 之所以成為第一搜尋引擎,並不是由於它採用了什麼行銷手段或者對用戶友好的其他手段,而是因為它是真正的搜尋引擎,它的搜索以內容品質和連結品質為依據。Google 一直堅守著 “對用戶有益的東西就在 SERP 中具有高排名” 這一原則。
Google 和所有其他搜尋引擎
美國大多數搜尋引擎和目錄都與 Google 和 Yahoo! 有關。要想進一步瞭解這些關聯,請參見 參考資料 中 Bruce Clay 的 Search Engine Relationship Chart。
Google 有一個 Add URL 工具,但是網站的排名是由連結分析決定的;如果 Google 沒有被其他要編入索引的網站引到您的網站,那麼就永遠不會給予您較高的排名,無論您是否主動提交了網站。通過 Add URL 進行提交並不意味著頁面會被自動列出,但是它能使搜尋引擎注意到您的頁面。過去,SEO 專家建議使用 Add URL 工具對爬行器不易找到的頁面進行 “深度提交”。但是,現在 Google 引入了 Google Sitemaps(Google 網站地圖),用這種格式進行提交效果會更好。本系列的第 3 部分將詳細介紹 Google Sitemaps。
從長遠角度來看,在 SEO 方面的努力最好投入在優化網站以促進 Google 和其他爬行器的深度漫遊上。