Screaming Frog (SF)是用作SEO優(yōu)化工具。頁(yè)面優(yōu)化On-page Optimization 的工具一般是要和網(wǎng)站平臺(tái)配合，例如 WordPress SEO上使用的Yoast SEO插件。有些問(wèn)題是要網(wǎng)站整體來(lái)看才發(fā)現(xiàn)，又或者整體看才能有效改善。例如：是否有重復(fù)內(nèi)容？如重復(fù)的標(biāo)題、中繼描述 Meta Description、中繼關(guān)鍵字 Meta Keywords 等等。搜尋引擎優(yōu)化應(yīng)該從審計(jì)當(dāng)前網(wǎng)站狀態(tài)開(kāi)始，需要利用不同的優(yōu)化工具，例如：

利用 Google analytics 查看訪客的互動(dòng)情況和用戶(hù)體驗(yàn)。

利用 Search Console 查看搜尋關(guān)鍵字的排名和曝光。

利用 SF 掃描網(wǎng)站查看跨頁(yè)面的網(wǎng)站結(jié)構(gòu)性和內(nèi)容問(wèn)題。免費(fèi)版本只限掃描 500 頁(yè)，你可以輸入目錄將掃描專(zhuān)注在某分類(lèi)或子目錄的頁(yè)面。下面是一些舉例：

Table of Contents

重定向問(wèn)題

有些錯(cuò)誤是人眼不可能發(fā)現(xiàn)，必需以機(jī)械人身份訪問(wèn)才可發(fā)現(xiàn)。瀏覽器訪問(wèn)送回的狀態(tài)碼 Status Code 提示是否正常，例如本應(yīng)是 301 (永久) 的重定向被錯(cuò)誤設(shè)定為 302 (臨時(shí)) 等等。您需要檢查以下轉(zhuǎn)址是否都轉(zhuǎn)址同一URL。一個(gè)非常常見(jiàn)的SEO錯(cuò)誤是將以下URL視為獨(dú)立的，而不是正確使用 301 重定向到單個(gè)地址。使用SF SEO爬行工具，你可以很容易地發(fā)現(xiàn)這些錯(cuò)誤。

non-WWW

WWW

HTTP://

HTTPS://

又或者 404 (頁(yè)面不存在)錯(cuò)誤問(wèn)題，表示一些內(nèi)部頁(yè)面已被刪除或更改了URL。有時(shí)您會(huì)將舊網(wǎng)址重定向到新網(wǎng)址，以避免 404 錯(cuò)誤，但過(guò)度重定向可能導(dǎo)致重定向鏈。例如：A 重定向到 B，B 重定向到 C，C 再次重定向到 A。你亦可以在directive下?lián)煲曀饕龁?wèn)題。例如：有些單薄的內(nèi)容不希望搜尋引擎索引時(shí)可能設(shè)定為noindex,可能引起競(jìng)食Cannibalization問(wèn)題的內(nèi)容是否已使用 rel=”canonical” 等等。

重復(fù)的內(nèi)容

進(jìn)行頁(yè)面優(yōu)化專(zhuān)注個(gè)別頁(yè)面時(shí)你未必會(huì)發(fā)現(xiàn)標(biāo)題，中繼描述 Meta Description 等原來(lái)已經(jīng)用過(guò)。重復(fù)內(nèi)容Duplicated Content不一定引起問(wèn)題，但是差不多一定影響搜尋引擎對(duì)內(nèi)容質(zhì)量的評(píng)分。利用SF SEO爬行工具做一個(gè)描述，你可以看到當(dāng)前狀況以便進(jìn)行改善。

網(wǎng)頁(yè)標(biāo)題除了不應(yīng)重復(fù)外，太長(zhǎng)或太短亦不好。一般搜尋引擎可以有空間列出六七十個(gè)英文字的標(biāo)題，標(biāo)題太長(zhǎng)的會(huì)被剪裁。標(biāo)題太短的又失卻提供誘因別搜尋者點(diǎn)擊的作用。標(biāo)題長(zhǎng)度無(wú)一定的字?jǐn)?shù)標(biāo)準(zhǔn)，中文和英文長(zhǎng)度算法又不同，其實(shí)是由于搜尋引擎所用的比例字體 Proportional Font, 不同英文字符的闊度所構(gòu)成的差異。同樣的道理可適用于衡量中繼描述 。

用戶(hù)體驗(yàn)

在Internal下可以找到一些關(guān)乎用戶(hù)體驗(yàn)的數(shù)據(jù)，例如：文章長(zhǎng)度、文章字?jǐn)?shù)、文字對(duì)應(yīng) HTML 語(yǔ)法標(biāo)簽比例、爬行深度、出站連接數(shù)量等等。

Screaming Frog 爬行深度 Crawl Depth

例如主頁(yè)要無(wú)需從爬行其他頁(yè)面才發(fā)現(xiàn)，所以爬行深度是零。從主頁(yè)指向的網(wǎng)頁(yè)就是1，如此類(lèi)推。爬行深度太深，表示訪問(wèn)用戶(hù)很難接觸到該頁(yè)面，自然不利曝光和搜尋引擎優(yōu)化。此情況常見(jiàn)于分類(lèi)頁(yè)，分類(lèi)內(nèi)容太多時(shí)只能以 <上一頁(yè)> <下一頁(yè)> 不斷后移。如果分類(lèi)頁(yè)下有 1000怗子，每次只顯示10頁(yè)的摘要。最后的10頁(yè)需要100次點(diǎn)擊才能顯示！改善的方法是加入其他內(nèi)部連接，例如相關(guān)文章。