爬虫

抓取数据公式看着简单，三个变量里有两个常被拍脑袋填进去。请求总量、并发频率、单请求体大小，错一个，任务跑到一半就可能崩，本文把取数方法和倒推顺序讲清楚。

服务器搭爬虫需优化配置、环境依赖，设置反爬策略（IP代理/延时），控制并发，保障数据存储与日志监控