锚文本-全部链接文本。从类似链接的图像中替换文本。
图像-具备图像链接的所有的URI和不知从何而来推导页面的所有的图像。图像远远超过100kb,不完全松蜡文字,得用文字最多100个字符。
用户代理切换器-抓取Googlebot,Bingbot,Yahoo!Slurp,移动用户代理或您自己的自定义UA。
选项卡HTTP标头-在请求中提供任何标头值,从Accept-Language到cookie。
下拉菜单源代码搜索-在网站的源代码中能找到您是想的完全没有内容!即便谷歌分析代码,特定文本肯定代码等。
自定义其他提取-可以使用XPath,CSS路径你选择器或正则表达式从URL的HTML中删出一丁点数据。
Google Analytics板载显卡-直接连接到GoogleAnalyticsAPI并在抓取时间过程中真接提纯用户和转化数据。
GoogleSearchConsole独立显卡-连接到到GoogleSearchAnalyticsAPI并针对网址收集展示次数,点击次数和换算下来排名数据。
外部链接度量标准-将Majestic,Ahrefs和MozAPI中的外部链接指标拖进爬动以负责执行内容审核或配置文件链接。
XML站点地图生成-不使用SEO蜘蛛创建角色XML站点地图和图像站点地图。
自定义robots.txt-使用新的自定义robots.txt下载,编辑和测试网站的robots.txt。
渲出的屏幕截图-查看,栏里点和分析已爬网的颜色渲染页面。
存储和查找HTML和完全呈现的HTML-分析DOM的必要条件。
AMP直接抓取和验证-可以使用官方集成显卡的AMPValidator抓取时间AMP网址并对其参与不验证。
XML站点地图分析-另外爬网XML站点地图或爬行时的一部分,以中搜索全部丢失的,绝不可以索引的和孤立排挤的页面。
可视化-在用爬网和目录树满导向图和树图分析网站的内部链接和URL结构。
结构化数据和验证-依据什么Schema.org规范和Google搜索功能提纯和验证结构化数据。
ScreamingFrogSEOSpiderforMac也可以解决您从差别的网页上选择类型不需要抓取的内容,软件具高网页蜘蛛功能,您是可以让蜘蛛在网页上断的的搜索是需要的资源,也可以设置中搜索的一个主要注意网页地址,并系统设置可以自定义分析扩充卡页面的功能。