新網(wǎng)站如何讓搜索引擎快速收錄？

　　多數(shù)字營(yíng)銷人員認(rèn)為競(jìng)爭(zhēng)對(duì)手的網(wǎng)站是他們唯一的敵人，但搜索引擎本身可能會(huì)阻礙您獲得更多自然流量?！傲私饽愕臄橙恕辈⒘私馑阉饕娴墓ぷ髟砗苤匾@樣你就可以將搜索引擎優(yōu)化 (SEO) 和內(nèi)容計(jì)劃結(jié)合在一起，從而最大限度地提高結(jié)果。

　　搜索引擎的目標(biāo)是什么？

　　任何搜索引擎的主要目標(biāo)都是產(chǎn)生和留住用戶。從本質(zhì)上講，百度、必應(yīng)和其他公司希望人們喜歡這項(xiàng)服務(wù)并繼續(xù)使用它，這樣他們就可以從廣告中賺錢(qián)。更多的用戶意味著他們可以為每次點(diǎn)擊付費(fèi)(PPC) 活動(dòng)和其他渠道收取更多的費(fèi)用。因此，他們需要為用戶提供最佳體驗(yàn)。這包括良好的用戶體驗(yàn)(UX) 和友好的用戶界面 (UI)，但最重要的是，他們需要提供出色的搜索結(jié)果。因此，他們使用專有算法在互聯(lián)網(wǎng)上搜索并找到有價(jià)值的信息內(nèi)容，使用戶信任搜索引擎并在他們下次尋求答案時(shí)返回。

　　搜索引擎如何工作？

　　搜索引擎的工作方式是通過(guò)網(wǎng)站爬行、跟蹤鏈接以發(fā)現(xiàn)新頁(yè)面并記錄內(nèi)容以創(chuàng)建索引，以便它們可以通過(guò)其算法并為用戶提供服務(wù)。

　　他們通過(guò)3 個(gè)函數(shù)來(lái)做到這一點(diǎn)：

　　1.爬行：使用機(jī)器人爬行整個(gè)互聯(lián)網(wǎng)頁(yè)面的代碼和內(nèi)容。

　　2.索引：將他們找到的頁(yè)面放在一個(gè)索引中，該索引可以作為結(jié)果存儲(chǔ)在搜索引擎結(jié)果頁(yè)面(SERP) 上。

　　3.排名：根據(jù)具體情況確定為用戶提供的最佳結(jié)果，并將它們按從最相關(guān)到最不相關(guān)的順序排列。

　　爬蟲(chóng)查找和索引的內(nèi)容決定了哪些頁(yè)面位于SERP 之上，從而為網(wǎng)站帶來(lái)流量。

　　爬行：搜索引擎如何找到您的頁(yè)面

　　搜索引擎爬蟲(chóng)（通常稱為機(jī)器人或蜘蛛）通過(guò)鏈接在頁(yè)面之間流動(dòng)，查找并記錄頁(yè)面的存在和內(nèi)容。這是搜索引擎尋找提供給用戶的內(nèi)容的第一步。如果機(jī)器人沒(méi)有在您的頁(yè)面上爬行，您將沒(méi)有機(jī)會(huì)獲得排名并從SEO中獲益。

　　搜索爬蟲(chóng)的工作原理

　　搜索引擎爬蟲(chóng)做的第一件事就是下載網(wǎng)站的robots.txt 文件。robots.txt 文件位于您站點(diǎn)的根目錄中（例如 yoursite.com/robots.txt）。它向爬蟲(chóng)和機(jī)器人建議在站點(diǎn)上應(yīng)該和不應(yīng)該爬取哪些頁(yè)面，以及應(yīng)該爬取它們的速度。搜索引擎使用不同的算法和規(guī)則來(lái)確定應(yīng)為網(wǎng)站抓取的頁(yè)面數(shù)量和頻率。例如，每天更新內(nèi)容的舊網(wǎng)站將比每周幾乎不受影響的新網(wǎng)站更頻繁地被抓取。在瀏覽頁(yè)面時(shí)，機(jī)器人會(huì)查看源代碼和內(nèi)容以確定頁(yè)面的全部?jī)?nèi)容。他們下載指向站點(diǎn)上其他頁(yè)面的內(nèi)部鏈接，然后使用這些鏈接繼續(xù)瀏覽和抓取這些頁(yè)面。

　　站點(diǎn)地圖

　　站點(diǎn)地圖允許網(wǎng)站向搜索引擎提供一組統(tǒng)一的資源定位符(URL)。這讓爬蟲(chóng)可以找到可能隱藏在站點(diǎn)深處的頁(yè)面。您可以設(shè)置站點(diǎn)地圖以對(duì)站點(diǎn)上的每種類型的內(nèi)容進(jìn)行分類，例如博客、產(chǎn)品頁(yè)面和常見(jiàn)問(wèn)題。與robots.txt 文件不同，robots.txt 文件只給出應(yīng)該和不應(yīng)該被抓取的指令，站點(diǎn)地圖可以讓您確切地告訴搜索引擎哪些 URL 對(duì)您的站點(diǎn)很重要并且應(yīng)該被索引。

　　如何確保您的頁(yè)面被抓取

　　優(yōu)化您網(wǎng)站的技術(shù)SEO的核心部分將確保您網(wǎng)站上的重要頁(yè)面被搜索引擎抓取。

　　robots.txt

　　您的第一步是進(jìn)入您的robots.txt 文件。確保您的漫游器文件沒(méi)有阻止百度和其他重要的抓取工具訪問(wèn)您的網(wǎng)頁(yè)。但是，禁止他們?cè)赟ERP 上查看您不想要的頁(yè)面是個(gè)好主意。這可能包括站點(diǎn)搜索頁(yè)面和由第三方軟件創(chuàng)建的頁(yè)面等。

　　站點(diǎn)地圖

　　瀏覽您的站點(diǎn)地圖并刪除所有不需要的URL。這包括 4XX 頁(yè)面、5XX 頁(yè)面、302 重定向、導(dǎo)致 301 重定向的 URL 以及您不希望出現(xiàn)在SERP上的任何其他內(nèi)容。

　　網(wǎng)站架構(gòu)

　　使用內(nèi)部鏈接使爬蟲(chóng)更容易找到您的頁(yè)面。確保您網(wǎng)站上的每個(gè)頁(yè)面都有一個(gè)從另一個(gè)頁(yè)面轉(zhuǎn)到它的鏈接，無(wú)論是通過(guò)導(dǎo)航還是相關(guān)頁(yè)面。限制訪問(wèn)您網(wǎng)站上重要頁(yè)面所需的點(diǎn)擊次數(shù)非常重要。

　　索引：搜索引擎如何分類和存儲(chǔ)頁(yè)面

　　抓取頁(yè)面后，搜索引擎會(huì)將其添加到互聯(lián)網(wǎng)上廣泛的頁(yè)面索引中。但是，并不是一定會(huì)添加您的頁(yè)面。了解SEO中索引的內(nèi)容很重要。

　　什么是搜索引擎索引？

　　搜索引擎索引是在網(wǎng)頁(yè)被抓取和分析后存儲(chǔ)和分類網(wǎng)頁(yè)的過(guò)程。根據(jù)爬蟲(chóng)在頁(yè)面內(nèi)容中找到的內(nèi)容，將其呈現(xiàn)并放置在數(shù)據(jù)庫(kù)中，準(zhǔn)備為用戶提供服務(wù)。將頁(yè)面添加到此索引時(shí)，搜索引擎的算法可以輕松讀取該頁(yè)面，以確定該頁(yè)面是否與用戶相關(guān)?？紤]到新鮮度、關(guān)鍵字相關(guān)性等特征。如果沒(méi)有索引，每次用戶輸入搜索查詢時(shí)，搜索引擎都必須抓取頁(yè)面。可以想象，這將成倍增加獲得問(wèn)題答案所需的時(shí)間，吞噬甚至像百度這樣的巨頭也負(fù)擔(dān)不起的計(jì)算能力。

　　如何讓搜索引擎為您的網(wǎng)站編制索引

　　不出所料，許多網(wǎng)站所有者詢問(wèn)如何讓百度將他們的網(wǎng)站編入索引。幸運(yùn)的是，這就像遵循技術(shù)SEO 的基本最佳實(shí)踐一樣簡(jiǎn)單。如果您的網(wǎng)站已經(jīng)建立并且經(jīng)常被抓取，那么搜索引擎很可能不會(huì)很難將您的網(wǎng)頁(yè)編入索引。根據(jù)您的網(wǎng)站，爬蟲(chóng)可以每周數(shù)次到每月數(shù)次為您的網(wǎng)站編制索引，并在發(fā)現(xiàn)新頁(yè)面時(shí)將其編入索引。

　　將新站點(diǎn)編入索引

　　對(duì)于新網(wǎng)站，您可能需要手動(dòng)提交您的站點(diǎn)地圖或單獨(dú)的URL，以讓抓取工具知道您的網(wǎng)站在那里。從那里，他們將根據(jù)其價(jià)值和更新頻率來(lái)確定如何為您的頁(yè)面編制索引并抓取您的網(wǎng)站。您可以在Search Console 的“覆蓋率”報(bào)告中查看百度將您網(wǎng)站上的哪些頁(yè)面編入索引。在那里，您將看到百度索引中的URL 列表，以及存在未將其編入索引的未解決錯(cuò)誤的所有頁(yè)面?！耙雅懦辈糠诛@示新頁(yè)面和其他已被抓取但未放入索引的頁(yè)面。

　　您還可以使用Search Console 中的網(wǎng)址檢查工具來(lái)檢查各個(gè)網(wǎng)址。此工具可讓您查看特定頁(yè)面（可能是您剛剛發(fā)布的對(duì)時(shí)間敏感的頁(yè)面）是否已編入索引。如果沒(méi)有，或者您希望百度將其更新版本編入索引，您可以請(qǐng)求他們重新抓取當(dāng)前版本的URL 并將其編入索引。

　　頁(yè)面未編入索引的原因

　　如果搜索引擎沒(méi)有將您的網(wǎng)頁(yè)編入索引，很可能是因?yàn)樗鼪](méi)有看到它們。搜索引擎在抓取頁(yè)面時(shí)會(huì)對(duì)其進(jìn)行索引，并且許多新站點(diǎn)或未更新的站點(diǎn)通常不會(huì)被頻繁抓取，從而為他們認(rèn)為更重要的站點(diǎn)/頁(yè)面節(jié)省了機(jī)器人的工作量。但是，搜索引擎不索引頁(yè)面還有其他一些原因。

　　·該網(wǎng)站在頁(yè)面代碼的<head> 中有一個(gè)“noindex”標(biāo)簽。</head>

　　·頁(yè)面上（或指向）的內(nèi)部鏈接被標(biāo)記為“nofollow”。

　　·內(nèi)容與另一個(gè)相同，并且沒(méi)有正確規(guī)范化。

　　通過(guò)運(yùn)行站點(diǎn)審核或掌握站點(diǎn)的技術(shù)SEO，您可以確保在抓取時(shí)將最重要的頁(yè)面添加到搜索引擎的索引中沒(méi)有任何障礙。