大家好，我是跨境男孩Riven。今天給大家推薦一款功能強大、超實用的SEO工具——尖叫青蛙（Screaming Frog SEO Spider）。

在SEO日常工作中，為了提高工作效率，今天我想向各位獨立站賣家及站長朋友們分享這款工具。尖叫青蛙是一個對任何電子商務或博客站都必不可少的強大SEO工具。它不僅能提升工作效率，還能清楚地了解到網(wǎng)站的結(jié)構(gòu)及頁面結(jié)構(gòu)等。如果使用得當，它幾乎可以立即帶來顯著的SEO排名。

一、尖叫青蛙簡介

尖叫青蛙是一款網(wǎng)站爬蟲工具，它會通過你提供的網(wǎng)站主域爬取你的網(wǎng)站，并獲取你網(wǎng)站里所有的網(wǎng)頁以及關(guān)鍵元素，實時提供分析結(jié)果。

二、尖叫青蛙的亮點功能

1. 獲取網(wǎng)站內(nèi)所有的鏈接及導出鏈接：包括html、css、JavaScript、圖片等。

2. 列出所有鏈接的信息：通過鏈接獲取該鏈接的所有信息，包括鏈接數(shù)、狀態(tài)碼、是否被robots屏蔽、網(wǎng)頁標題、標題長度、描述、關(guān)鍵詞、發(fā)布時間等。

3. 快速找出網(wǎng)站中的死鏈（404鏈接）：可以找出網(wǎng)站中存在的死鏈，并顯示含有這個死鏈的頁面。

4. 生成xml地圖：創(chuàng)建XML站點地圖和圖像XML站點地圖，通過URL進行高級配置。

5. 有助審查robots和其他指令：通過indexability欄查看每個鏈接是否被robots屏蔽或nofollow。

6. 分析站點架構(gòu)：使用交互式爬網(wǎng)和目錄強制導向圖和樹形圖分析內(nèi)部鏈接和URL結(jié)構(gòu)。

除此之外，尖叫青蛙還有其他一些功能，比如查看鏈接是否被重定向、網(wǎng)頁大小、鏈接細節(jié)信息、搜索結(jié)果展示頁效果圖等。

三、產(chǎn)品用戶界面

使用Screaming Frog的第一步是了解所有內(nèi)容的模塊區(qū)分。主要包括：菜單欄、抓取區(qū)域、標簽欄、主窗口、詳細窗口、側(cè)邊欄。

1. 菜單欄：包括文件、模式、配置、選擇導出等全局配置功能。

2. 抓取區(qū)域：輸入主域名或URL，點擊「Start」按鈕即可開始抓取。

3. 標簽欄：可以選擇配置常用的標簽菜單，了解這些標簽的用途以及如何使用它們進行SEO分析。

4. 主窗口：根據(jù)選擇的標簽菜單，顯示其下方的URL和相關(guān)字段；也支持對表單字段進行拓展排序。

5. 詳細窗口：查看URL的詳細信息，如TDKU、H1、H2、Indexable等；支持查看Inlinks和Outlinks，了解頁面跳轉(zhuǎn)情況。

6. 側(cè)邊欄：查看網(wǎng)站的統(tǒng)計數(shù)據(jù)、SEO問題分類統(tǒng)計等。

四、安裝版本

1. 如何安裝尖叫青蛙？下載地址：www.screamingfrog.co.uk/seo-spider/

2. 版本套餐：尖叫青蛙有免費版和收費版兩種。免費版功能齊全，但最多只能抓取500個鏈接；收費版無鏈接抓取數(shù)量限制。

五、功能操作說明

5.2 尖叫的青蛙如何抓取網(wǎng)站？

使用Screaming Frog這款工具，你可以輕松抓取網(wǎng)站內(nèi)容。在蜘蛛功能中輸入起始URL即可。此選項位于屏幕頂部。從這一點開始，網(wǎng)站將自動按URL順序抓取。但要注意的是，Screaming Frog是基于內(nèi)部鏈接進行工作的，任何缺少鏈接的頁面都不會出現(xiàn)在抓取結(jié)果中。如果在抓取過程中遇到任何網(wǎng)址問題，可能是因為被機器人屏蔽了，通?？梢栽趓obots.txt設(shè)置中進行檢查。

5.3 尖叫的青蛙如何抓取網(wǎng)址列表？

在特定情況下，如清理索引或檢查鏈接是否存在404鏈接時，你可以使用Scraper工具來抓取網(wǎng)址列表。創(chuàng)建列表后，復制到剪貼板，然后在Screaming Frog菜單中選擇“Mode”更改為列表模式而非蜘蛛模式。這樣你就可以將這些URL直接粘貼到Screaming Frog中。你還可以從文件、站點地圖或手動添加的列表中抓取列表。

5.4 如何調(diào)整尖叫的青蛙抓取設(shè)置？

在抓取網(wǎng)站時如果遇到問題，調(diào)整抓取設(shè)置會非常有幫助。以下是操作指南：

加快尖叫青蛙的爬行速度：

在 Configuration > Speed 中調(diào)整設(shè)置，增加最大線程數(shù)并刪除任何URL限制。但如果過快地抓取網(wǎng)站，可能會被服務器阻止?？梢酝ㄟ^將IP地址列入白名單來更改服務器設(shè)置。

降低尖叫的青蛙爬行速度：

如果你的網(wǎng)站托管在Shopify或SHOPLINE上，或者不能將IP地址列入白名單，那么可能需要慢慢抓取網(wǎng)站。可以在Configuration > Speed中更改此設(shè)置，限制每秒的URI請求數(shù)或降低線程數(shù)。

忽略Robots.txt：

有些網(wǎng)站在robots.txt中設(shè)置了錯誤，阻止所有機器人訪問。在這種情況下，需要修復robots.txt。但如果這是一個開發(fā)網(wǎng)站并且不希望被索引，則需要忽略robots.txt?？梢栽贑onfigurations > Robots.txt > Settings中更改設(shè)置，選擇忽略robots.txt，即使其禁止你這樣做，也可以進行網(wǎng)站抓取。

更改用戶代理：

雖然很少需要這樣做，但有時為了以Googlebot相同的方式查看網(wǎng)站，可能需要更改用戶代理?？梢栽贑onfiguration > User-agent中更改此設(shè)置。選擇下拉菜單中的不同預設(shè)即可。但使用用戶代理時應謹慎，如果經(jīng)常進行服務器日志分析，數(shù)據(jù)可能會受到影響。

5.5 如何保存已抓取的數(shù)據(jù)？

點擊左上角的“Save as”按鈕，將數(shù)據(jù)保存到本地。下次可以直接將seospider文件拖拽至尖叫青蛙內(nèi)即可快速訪問。

5.6 如何創(chuàng)建站點地圖？

Google推薦使用XML Sitemap網(wǎng)站地圖，這有助于他們抓取你的網(wǎng)站并查找所有新內(nèi)容。你需要抓取你的網(wǎng)站并生成一個新的站點地圖文件。為此，請從菜單中選擇“創(chuàng)建XML站點地圖”。這將彈出一個配置窗口，你可以根據(jù)需要進行更改。例如，你可以更改更新的頻率或包含規(guī)范化的URL。如果你的網(wǎng)站每個頁面都有規(guī)范，這將非常有用。否則可能會收到站點地圖為空的通知。

5.7 如何找到死鏈接？

要查找損壞的死鏈接，首先需要選擇“響應代碼”標簽，然后選擇顯示客戶端錯誤（4XX）的過濾器，并選擇“internal”選項卡。主窗口區(qū)域顯示的鏈接就是站內(nèi)404破損鏈接。

5.8 如何檢查重定向？

使用與上述相同的方法，選擇顯示重定向（3XX）的過濾器來查看所有內(nèi)部重定向。雖然重定向并不有害，但應盡量減少這些重定向以提高頁面加載速度并優(yōu)化用戶體驗。這是因為重定向需要服務器處理請求會增加頁面加載時間。因此盡可能替換內(nèi)部鏈接以減少重定向的需要。

5.9 檢查內(nèi)部鏈接

圖片來源：未知的青蛙世界

5.13 排除工具概覽

排除工具是專為從抓取過程中排除你網(wǎng)站的某些部分而設(shè)計的。其功能和robot.txt文件頗為相似。

當你在面對規(guī)模龐大的網(wǎng)站時，此工具的作用顯得尤為突出。例如，如果你希望避免抓取WordPress的標簽頁面，你可以輕松地將其排除，如www./tag/.。這里的星號代表所有變化都會被忽略。如果你要屏蔽某些URL參數(shù)或整個網(wǎng)站板塊，這個工具將會非常實用。

5.14 尖叫青蛙的其他配置

在使用Screaming Frog SEO Spider處理大型網(wǎng)站時，全量爬行可能并非明智之舉。為此，你可以利用菜單選項保存你的爬行進度。就像普通文件一樣，你可以通過雙擊或打開尖叫的青蛙來再次加載此次爬行。之后，只需從相同的下拉菜單中選擇加載爬行即可繼續(xù)。

批量導出工具對于那些需要創(chuàng)建單一類型信息電子表格的用戶來說，無疑是一大福音。我個人最喜歡的批量選項包括導出所有錨文本、所有30x重定向、所有40x錯誤、內(nèi)部鏈接以及圖像等。在我審核網(wǎng)站的過程中，這些功能為我提供了極大的幫助。

六、結(jié)語

至此，我們已經(jīng)對SEO工具Screaming Frog SEO Spider（尖叫青蛙）有了大致的了解。它的功能強大且實用，你是否也有同感呢？如果在使用尖叫青蛙的過程中遇到任何疑問，歡迎留言咨詢。

（來源：跨境男孩分享）本文內(nèi)容及觀點僅代表作者個人，不代表風口星跨境的立場。轉(zhuǎn)載本文需獲得原作者明確的授權(quán)。