推荐一个简单易用的模拟百度蜘蛛的工具 避免蜘蛛陷阱

前几天写了一篇关于网站容易犯的五个seo错误以及解决方法的文章提到：有些网站使用JS、Ajax技术等来限制百度蜘蛛的抓取。一些客户询问如何定义搜索引擎可以抓取的页面内容。其实有一个简单的工具可以模拟百度蜘蛛的抓取。链接：http://s.tool.chinaz.com/tools/robot.aspx.

该百度蜘蛛模拟检测工具界面如下：

在顶部输入我们要检测的页面的URL，搜索引擎能抓取的文本内容呈现在底部。

使用百度蜘蛛模拟工具有两个好处：

1.这个工具非常简单易用，省去了各种js和html代码。即使是不懂代码的小白，也能第一时间看到网站被百度蜘蛛抓取的内容，判断网站是否对百度蜘蛛友好，避免网站的美观。呈现给搜索引擎的是一个只有几个字，质量极低的页面。

2.这个工具可以结合关键词密度检测工具来判断页面的关键词密度设置是否合理。关键词密度检测工具的网站如下：http://tool.chinaz.com/tools/density.aspx

3.万年历类的蜘蛛陷阱也能第一时间识别。有可能是网站技术本身没有发现网站给蜘蛛设置了陷阱。