业务网络连线规则
first=首选连线方式 · fallback=失败兜底 · 三层方案:node(奶妈好节点) / ip(直连) / mix(混合,二期)
| 业务 | 首选 (first) | 兜底 (fallback) | 节点排序 (sort) | 超时 ms | 换节点重试 | 并发数 |
|---|
爬虫连接策略(三态自适应)
控制整个爬虫进程 proxy→mix→direct 切换 · 初始态 + 切换阈值 · 任务启动生效
三层网络方案说明
node=经奶妈好节点(vless/稳定源)· ip=本机直连(VPS 快)· mix=按比例混合(mix_ratio 二期)
核验(verify):当前 first=ip(直连优先,VPS 快),失败 fallback=node(奶妈兜底)。
抓取(product_json/page):first=node(奶妈优先,反爬严),失败 fallback=ip。
评论(reviews):first=node,fallback=ip_direct_ua(直连+搜索 UA)。
429 归属:降级/升级由爬虫流程按业务规则处理,不在本配置层。
抓取(product_json/page):first=node(奶妈优先,反爬严),失败 fallback=ip。
评论(reviews):first=node,fallback=ip_direct_ua(直连+搜索 UA)。
429 归属:降级/升级由爬虫流程按业务规则处理,不在本配置层。