網站爬行第1天從哪里開始
網站爬行，第1天：你從哪里開始？
技術先進的搜索引擎優化SEO
當你面對成千上萬的技術SEO問題時，知道從哪里著手是至關重要的。深圳網站制作的新網站上爬行的動力，我引導你通過隔離的關鍵問題迅速處理。

當你面對一個大型網站可能存在的成千上萬個潛在問題時，你從哪里開始？這是我們重建站點爬行時要解決的問題。答案幾乎完全取決于你的站點，并且需要對它的歷史和目標有深刻的了解，但是我想概述一個可以幫助你減少噪音并開始的過程。

簡單化可能是危險的。

以前，我們要試圖標簽每個問題為高，中，或低優先級。這種簡單化的方法可能會吸引人，甚至令人欣慰，你可能會想知道我們為什么要離開它。這是一個非常有意識的決定，它歸結為幾個問題。

首先，優先次序很大程度上取決于你的意圖。曲解你的意圖會導致糟糕的建議，從迷惑到徹底的災難性的范圍。讓我們說，例如，我們雇用了一個全新的SEO在莫桑比克他們看見下面的問題數彈出：

幾乎35000 noindex標簽嗎？那孩子們呢？！！

如果新的搜索引擎優化然后匆忙刪除這些標簽，他們會做很多的損害，而不是意識到，絕大多數的指示是故意的。我們可以使我們的系統更聰明，但他們不能理解你的想法，所以我們要小心誤報。

第二，對敲問題的優先級不幫助你理解的性質，這些問題或者如何去改正。我們現在將站點爬行問題分類為五種描述性類型中的一種：

臨界爬行問題

履帶式的警告

重定向問題

元數據問題

內容的問題

按類型分類使你更具戰術性。例如，我們新的“重定向”類別中的問題將有更多的共同點，這意味著它們可能有共同的修復。最終，幫助你發現

1。從關鍵爬蟲問題開始

這并不是說一切都是主觀的。一些問題阻礙爬蟲（不只是我們的，但搜索引擎）到您的網頁在所有。我們已經將這些“關鍵履帶問題”進入我們的第一類，和他們目前包括5xx 4xx錯誤，錯誤，和重定向到4xx。如果你在錯誤的5xx突然上升，你要知道，幾乎沒有人故意重定向到一個404。

您將看到整個站點爬行界面中突出顯示的關鍵爬蟲問題：

尋找紅色警報圖標快速發現關鍵問題。首先解決這些問題。如果一個頁面不能被抓取，那么其他爬蟲類問題都是沒有實際意義的。

2。平衡問題與流行

當涉及到解決您的技術SEO問題，我們也必須平衡嚴重性與數量。知道什么您的網站，我會說404的誤差可能是值得解決之前重復的內容-但如果你有十一404s和17843重復的網頁？你的優先事項突然變得非常不同。

在工地爬回家的底部，查看“MOZ建議修復”：

我們已經為你們做了一些數學運算，以問題的普遍性來衡量緊迫性。這確實需要一些關于優先級的假設，但是如果你的時間有限，我們希望它至少能給你一個快速的切入點來解決幾個關鍵問題。

3.解決多頁面問題

處理高計數問題還有另一個好處。在很多情況下，你可以用一個固定的方法來解決成百上千頁的問題。這是一個更戰術的方法可以節省你很多時間和金錢。

讓我們說，例如，我想挖到我的916頁MOZ.com失蹤的meta描述。我立即注意到，這些頁面中有些是博客帖子類別。所以，我通過URL過濾：

我可以很快看到，這些頁面占了我丟失的描述的392——其中的43%。如果我關心這個問題，那么我很可能用一個相當簡單的CMS頁面來解決它，用幾行代碼來消除幾百個問題。

在不久的將來，我們希望為您做一些分析，但是如果過濾不起作用，您也可以將任何問題列表導出到CSV。然后，旋轉和過濾你的心的內容。

4。用深度和爬行深度潛入頁面

如果你不容易發現清晰的模式，或者如果你已經解決了一些大問題，接下來呢？如果你知道這些URL是重要的，那么一次只解決一個URL上的成千上萬個問題是值得的。

幸運的是，現在可以用Page Authority（PA）排序和站點爬行中的爬行深度排序。PA是我們自己的排序能力的內部度量（主要是由鏈接資產驅動），而爬行深度是頁面與主頁的距離：

在這里，我可以看到，在我們的mozbar網址有一個重定向鏈，這是一個很高的權威頁面。這可能是一個值得修復的問題，即使它不是一個明顯的更大的群體的一部分。

5。注意新問題中的尖峰

最后，隨著時間的推移，你也要對新問題保持警惕，特別是當它們出現時。這可能預示著突然的、潛在的破壞性變化。站點爬行現在可以輕松跟蹤新問題，包括警報圖標、圖表，以及按類別快速總結新問題：

任何抓取都會發現一些新頁面（內容機器從不休息），但是如果你突然看到一個單一類型的數百個新問題，重要的是快速挖掘并確保沒有錯誤。在一個完美的世界里，SEO團隊總是知道其他人和團隊對網站做出了什么改變，但我們都知道這不是一個完美的世界。