屏蔽YisouSpider
最近服务器频繁死机,检查日志发现是YisouSpider抓取页面导致的,这个爬虫会同时用多个进程请求页面,单核的服务器瞬间就不行了,在网上发现吐槽YisouSpider的有很多,建议直接把它屏蔽。  
# # #
notebook 2021.1.17 311 0
“list” argument must be an Array of Buffers
用electron做爬虫项目,执行Buffer.concat(chunks,size)时报"list" argument must be an Array of Buffers错误,最后在这里找到解决方案。
# # # # # #
javascript 2020.8.5 609 0
回到顶部