用shell找出网站的空页面和404错误页面 shell学习笔记

用shell找出网站的空页面和404错误页面

很早之前记的一个笔记了,之前只是记录了两句代码,放出来的话也是一个低质量的页面,于是设置为了仅自己可见,今晚抽空补充一下。 记得当的情景应该是提交sitemap时百度老提示有错误的URL,导致sitemap不能正常被抓取,于是在想办法解决这...
阅读全文
方法:专题页面不收录案例及原因 SEO基础入门

方法:专题页面不收录案例及原因

一朋友跟我聊天时告诉我,他们网站在2014年两会初期上线了一个专题页面,可是直到两会快结束了这个专题页面还没有被百度收录,如下图(截图时间20140316): 由于是国家的新闻媒体,我就不贴出完整的URL了。针对这个问题,我也很好奇。在我看...
阅读全文