今天給大家介紹一個(gè)可能大家不太熟悉，功能卻非常強(qiáng)大的，只流傳于SEO大神之間的一個(gè)工具：ScreamingFrogSEOSpider，ScreamingFrogSEOSpider官網(wǎng)&下載地址：

http://www.screamingfrog.co.uk/seo-spider/

ScreamingFrogSEOSpider功能簡(jiǎn)介

 ScreamingFrogSEOSpider搜索引擎蜘蛛爬行工具&報(bào)告如下：

    HTTP錯(cuò)誤代碼——客戶端錯(cuò)誤等失效鏈接&服務(wù)器錯(cuò)誤(5沒(méi)有反應(yīng),4 xx,xx)。

    重定向——永久或臨時(shí)重定向(3 xx響應(yīng))。

    外部鏈接，外部鏈接和他們的狀態(tài)碼。

    協(xié)議- url是否安全(HTTPS)或不安全的(HTTP)。

    URI問(wèn)題——非ASCII字符,下劃線,大寫字符,參數(shù),或長(zhǎng)url。

    重復(fù)的頁(yè)面-散列值/ MD5checksums算法檢查準(zhǔn)確復(fù)制頁(yè)面。

    頁(yè)面標(biāo)題——失蹤的,重復(fù)的,超過(guò)65個(gè)字符,短,像素寬度截?cái)?h1一樣,或多個(gè)。

    元描述——失蹤,重復(fù),超過(guò)156個(gè)字符,短,截?cái)嗷蚨鄠€(gè)像素寬度。

    元關(guān)鍵字——主要是供參考,因?yàn)樗麄儧](méi)有使用谷歌、必應(yīng)(Bing)或者雅虎。

    文件大小——網(wǎng)址和圖片的大小。

    響應(yīng)時(shí)間。

    last – modified頭。

    頁(yè)面深度的水平。

    字?jǐn)?shù)。

    H1 -失蹤、復(fù)制、超過(guò)70個(gè)字符,多個(gè)。

    H2 -失蹤、復(fù)制、超過(guò)70個(gè)字符,多個(gè)。

    noindex元機(jī)器人——指數(shù),效仿,nofollow,noarchive,nosnippet,noodp,noydir等等。

    Meta刷新——包括目標(biāo)頁(yè)面和時(shí)間延遲。

    規(guī)范link元素和規(guī)范的HTTP標(biāo)頭。

    X-Robots-Tag。

    rel = “下一個(gè)”和rel = “上一頁(yè)”。

    AJAX的SEO AJAX爬行蜘蛛遵循谷歌的計(jì)劃。

    Inlinks——所有頁(yè)面鏈接到一個(gè)URI。

    Outlinks——所有頁(yè)面鏈接到URI。

    錨文本,鏈接文本。Alt文本圖像的鏈接。

    遵循& Nofollow——在頁(yè)面和鏈接(真/假)。

    圖像——所有uri與圖像&所有圖像從一個(gè)給定的頁(yè)面的鏈接。圖片大小超過(guò)100 kb,丟失的alt文本,alt文本超過(guò)100個(gè)字符。

    用戶代理切換器——Googlebot爬行,Bingbot,雅虎!發(fā)出聲音,移動(dòng)用戶代理或您自己的自定義UA。

    重定向鏈,發(fā)現(xiàn)重定向鏈和循環(huán)。

    自定義源代碼搜索——搜索引擎蜘蛛可以找到任何你想要在一個(gè)網(wǎng)站的源代碼!無(wú)論是谷歌分析代碼,具體的文本,或代碼等。(請(qǐng)注意,這不是一個(gè)數(shù)據(jù)提取或刮特性。)

    XML網(wǎng)站地圖生成器——你可以創(chuàng)建一個(gè)XML站點(diǎn)地圖和圖像地圖使用SEO蜘蛛。

ScreamingFrogSEOSpider使用方法

ScreamingFrogSEOSpider使用起來(lái)非常方便，只需要輸入你網(wǎng)站首頁(yè)的URL，然后點(diǎn)Start就行了，靜待爬取完成，就可以看各種詳細(xì)的數(shù)據(jù)了。

下圖以提取我博客的整站URL為例子，給大家展示一下效果：

紅框1處這些選項(xiàng)卡，依次給大家翻譯一下吧：內(nèi)部鏈接、外部鏈接、HTTP協(xié)議（HTTP或者HTTPS）、HTTP狀態(tài)碼（200、3XX、4XX、5XX）、URI（注意不是URL，URI是Uniform Resource Identifier，統(tǒng)一資源標(biāo)識(shí)符；URL：Uniform Resource Locator，統(tǒng)一資源定位符；想知道更多自己百度去）、頁(yè)面title標(biāo)簽、頁(yè)面description標(biāo)簽、頁(yè)面keywords標(biāo)簽、頁(yè)面H1標(biāo)簽、頁(yè)面H2標(biāo)簽、站內(nèi)圖像、頁(yè)面鏈接指向、使用了AJAX技術(shù)的鏈接、用戶自定義的過(guò)濾規(guī)則。

紅框2處：點(diǎn)擊之后，會(huì)看到我們首頁(yè)的一些信息，比如紅框4處的，首頁(yè)上的導(dǎo)入鏈接有哪些，紅框3處，是ScreamingFrogSEOSpider提取到的整站的鏈接數(shù)量，結(jié)合site指令，就能知道我們網(wǎng)站的大概整站收錄情況了。

通過(guò)上面的解釋，相信你已經(jīng)了解這個(gè)工具的強(qiáng)大之處了吧！那么接下來(lái)你關(guān)心的可能是這個(gè)工具是收費(fèi)的還是免費(fèi)的呢？

通過(guò)官網(wǎng)的介紹，我們知道了，我們可以自由下載使用該軟件，只不過(guò)免費(fèi)版本只能爬取整站的500個(gè)URL，如果是小企業(yè)站，已經(jīng)是足夠了，如果是大站，可以考慮購(gòu)買一個(gè)，一年收費(fèi)99英鎊起，約合人民幣972元（感謝seolabs留言指正：）），對(duì)于玩大站的朋友來(lái)說(shuō)，簡(jiǎn)直是太便宜了，哈哈！

你以為文章寫到這兒就該結(jié)束了是嗎？如果你這樣想，那就錯(cuò)了！方法博客只為分享有價(jià)值的文章而生，所以，今天就送一個(gè)價(jià)值694元的大禮給有幸看到這篇文章的朋友！那就是：（瞪大眼睛了！）

ScreamingFrogSEOSpider注冊(cè)碼！可以使用一年！

為方便大家COPY，我粘到這兒來(lái)：

Username：gn168

Licence Key:20D8E5C5AF-1467881526-81359030D5

揚(yáng)揚(yáng)編輯，來(lái)自：http://seofangfa.com/seo-tool/screaming-frog-seo-spider.html