python笔记Python多线程采集网站title/description/keywords 手中有一个20W的URL列表的TXT文件,想把这20W的页面的title/description/keywords都提取出来,shell只能单线程,而且通过curl方式采集不稳定;火车头采集器倒是可以多线程,但是处理这种比较大的URL列表,... 06月08日 4,009 1 阅读全文
SEO工具【亲测好用!】shell批量采集百度下拉框关键词 一直想写一篇用shell采集百度下拉框关键词的教程,个人感觉用shell来采集的话速度和效率都会更高一点。因为前面写过一篇用火车头采集百度下拉框关键词的教程,操作步骤稍微多了些,很多朋友看完了仍然不知道怎么做,然后QQ问我,教程都写得很清楚... 11月18日 10,101 12 阅读全文
shell学习笔记shell批量采集爱站关键词库 shell批量采集爱站关键词库,心血来潮写着玩的,还不完善,先放出来,后期慢慢更新,功能虽然简单,同类工具也很多现成的,但毕竟是自己写出来的工具,感觉还是很不一样滴! for i in $(seq 1 50);do curl -s http... 07月30日 3,836 6 阅读全文