指令:实现网站动态内容抓取策略Web Animations API监听动画变化最高级
支持:度飞飞 腾讯混元 DeepSeek ChatGpt 纳米 豆包 MiniMax
合成:原始指令 头尾合成 大纲指令 详情指令 专业科研 关联指令
指令合成
指令:定义爬虫请求头Accept-Encoding压缩算法优先级配置br>gzip>deflate>lzma
指令:使用Scrapy框架中间件实现响应内容自动解码多种字符集最高级
指令:构建分布式爬虫任务分配算法基于节点性能的智能负载均衡最高级
指令:实施爬虫数据存储PostgreSQL表分区自动维护策略每周执行智能高级
指令:定义爬虫异常处理重试策略基于网络状况的动态超时调整最高级
指令:使用FastAPI构建爬虫管理API鉴权机制OAuth2.0 Bearer Token最高级
指令:构建分布式爬虫任务调度算法基于任务优先级的加权公平队列最高级
指令:实施爬虫数据导出Avro格式Schema兼容性检查严格模式最高级
指令:定义爬虫请求头X-Forwarded-Proto HTTPS协议转发验证严格模式最高级