不管是國內的頭條搜索、還是國外的谷歌搜索，搜索引擎的本質是一種應答機制。它們的存在是為了發現、理解和組織互聯網內容，以便為用戶提出的問題提供最相關的結果。因此，理解了搜索引擎的工作原理，就有助于自己網站的SEO優化。

    搜索引擎主要通過三個功能來幫用戶獲取網頁內容：

    爬蟲：在互聯網上爬取內容，查看它們找到的每個URL的代碼、內容。

    索引：存儲和組織在爬取過程中發現的內容。一旦頁面在索引中，它就會在搜索中顯示相關查詢的結果。

    排名：提供最能回答查詢者所查詢的內容，這意味著搜索結果按最相關到最不相關的順序排列。

    爬蟲

    爬蟲是搜索引擎派出的機器人（也叫蜘蛛），用來查找網站的內容和更新的內容。這些內容可以是網頁、圖像、視頻、PDF等——但無論格式如何，內容都是通過爬蟲發現的。

    爬蟲會首先爬取幾個網頁，然后按照網頁上的鏈接查找新網址。通過沿著這條鏈接路徑跳躍，爬蟲能夠找到新內容并將其添加到名為Caffeine的索引中。用戶尋找該URL上的內容時，在索引的幫助下，相關的搜索結果則很容易匹配。

    索引

    索引可以理解為是一個巨大的數據庫，用于儲存和組織爬蟲所找到的信息和內容。以便足以為用戶提供服務。

    排名

    當有用戶輸入關鍵詞搜索時，搜索引擎會在其索引中搜索高度相關的內容，然后對該內容進行排序，以期解決用戶的查詢。這種按相關性對搜索結果進行的排序稱為排名。一般可以認為網站排名越高，搜索引擎認為該網站與查詢的相關性就越高。

    簡單的了解搜索引擎的工作原理以后，相信有不少朋友已經有了關于自己網站的SEO優化的線索。您可以從自己的網站中設置阻止爬蟲來爬取部分或者全部的信息，避免將這些頁面信息存儲在其索引中。而對于外貿網站推廣來說，當然是希望用戶能找到自己的網站，因此要首先確保爬蟲是否能訪問并爬取自己網站的內容以編入索引。否則，自己的網站對于搜索引擎來說，就像是一個隱形的存在，那么搜索引擎的用戶自然無法看到自己的網站，網站的流量也就寥寥無幾了。

    在SEO中，并非所有搜索引擎都是平等的

    大多數人都知道谷歌擁有最大的市場份額，但有必要針對必應、雅虎等進行搜索優化嗎？實際上，盡管全球目前存在30多個主要的在線搜索引擎，但SEO行業確實只關注Google。因為谷歌是絕大多數人在線搜索的地方。如果我們在做推廣時包括了谷歌圖片、谷歌地圖和YouTube，獲取的流量將會是必應和雅虎加起來的20倍以上。