最新文章
网站蜘蛛日志剖析
不清楚我们的网站百度蜘蛛是否来过，不知道我们网站 百度蜘蛛 是否能来，那你可以利用网站日志来分析蜘蛛是否来过，爬行过哪些页面，什么时候来过等问题，那么我们应该如何去...
百度蜘蛛抓取规则
相信大家对 百度蜘蛛 这个词都不陌生吧，记得我在第一次听到百度蜘蛛这个词的时候，是在11年初，那时候百度蜘蛛并没有如今的人性化，那时候的 百度蜘蛛抓取 释放几乎么有任何规...
巧用robots制止蜘蛛黑洞
对于百度搜索引擎来说，蜘蛛黑洞特指网站通过极低的成本制造出大量参数过多，及内容雷同但具体参数不同的动态URL ，就像一个无限循环的黑洞将spider困住，Baiduspider浪费了大量资源...
用代码圆满完成wordpress蜘蛛匍匐纪录生成，阔别插件，酷爱速率！
最近看群里很多人在用wordpress蜘蛛爬行记录生成这个功能，出于对网站优化的研究，清楚的了解蜘蛛爬行规律也是很重要的，我们就可以知道蜘蛛的爬行规律，根据这个规律我们再来写文章，这样符合了蜘蛛的胃口是很利于优化的。。。但是小编一直提倡着远离插件，热爱速度的口号，所以今......