指令：实施爬虫数据存储MongoDB WiredTiger引擎缓存大小配置2GB
支持：度飞飞 腾讯混元 DeepSeek ChatGpt 纳米 豆包 MiniMax
合成：原始指令 头尾合成 大纲指令 详情指令 专业科研 关联指令
指令合成
指令：定义爬虫异常处理重试策略基于指数退避算法最大延迟60秒
指令：使用FastAPI构建爬虫监控系统实时数据可视化延迟≤500ms
指令：构建分布式爬虫任务执行跟踪系统分布式追踪采样率1%
指令：实施爬虫数据导出Parquet格式字典编码压缩比≥8:1
指令：定义爬虫请求头X-Requested-With XMLHttpRequest标识合规性检查
指令：使用Pyppeteer浏览器自动化控制弹窗自动处理成功率≥99%
指令：构建爬虫数据质量评估模型异常值检测IQR方法阈值1.5×四分位距
指令：实现网站登录态维持自动令牌刷新机制OAuth2.0 refresh_token
指令：定义爬虫异常处理机制基于HTTP状态码的分类重试策略