灰色地帶

(資訊引用自SEO部落格 http://www.seoland.tw/archives/343 )

一個網站內的連接是否正確，對該網站在搜尋引擎上的排名會有一定的影響。若一個網站內有錯誤的連接，搜尋引擎也會因此降低該網站的排名，也因為錯誤的連接會讓訪客有不好的經驗。原也設計提醒您在管理網站時一定要注意這一點！但是一一個查詢所有連接是否正確的方式是每一頁的每一個連接都去點一次，這對大部分的站長來說，會花費太多時間。在這時候，我們需要一個能夠像搜尋引擎 spider 一樣的工具。該工具將可以爬行過網站內的所有網頁，並且確認每一個網頁內的每一個連接是否有問題。

原也設計建議可使用 Screaming Frog 公司出的 SEO Spider。這個工具有免費的試用版，且用法很簡單，只要打入一個網頁的ＵＲＬ，該工具就會去以該網頁當起點去爬行該網站內的網頁。在試用版上，一次最多可以爬行500頁。若您用的是付費的版本，那您可以自己決定一次爬行多少頁。爬行完畢之後該工具會告訴我們該次爬行過網頁的以下的資訊：

• 網址
• 文件類別　(例如是文字檔或是JPG檔）
• HTTP 狀態碼　（Status Code）　和狀態
• Page Title 和　Page Title　的長度
• Meta Description　和　Meta Description　的長度
• Meta Keywords　和　Meta Keywords　的長度
• H１　和　H１ 的長度
• H２　和　H２ 的長度
• Canonical URL
• 文件大小
• 層次　(第１層就是從輸入的網址內點選一個連接就可以到達，第2層就是要點選兩次才能到達，以此類推）

對於所有的外向連接，這個工具能夠提供以下的資訊：

• 連接出去的網址
• 連接出去的文件類別　(例如是文字檔或是JPG檔）
• 連接出去的 HTTP 狀態碼　（Status Code）　和狀態
• 層次　（第１層就是從輸入的網址內點選一個連接就可以到達，第2層就是要點選兩次才能到達，以此類推）

若您看到連接出去的HTTP狀態碼是400開頭的，那就代表該連接有錯誤，需要改正。除此之外，其他許多的訊息也都是很有用的。舉例來說，如果您覺得每個網頁都需要有一個 canonical URL，那這個工具就可以讓您一目了然地看出來是不是所有的網頁都有設定　canonical URL。

該工具的付費版是每年要付99塊英鎊。付費版可以讓您一次就爬行無限多個網址，並且可以調整工具的性能 (在免費的試用版上完全不能調整工具的性能)。