反爬 HTTP 工具:UA 池轮换、指数退避重试、反爬墙检测(验证码/安全验证)与自适应限流,提炼自 SXS 生产采集体系(每日数百万请求)——工具:`sxs_fetch` / `sxs_fetch_json` / `sxs_rate_status`。
安装
# GitHub 源码(首次需按提示配置 allowBuilds 构建授权后重试)
dsh plugin --profile web add github:yangyunsong023/dsh-sxs-anti-bot-http
装任何插件都等于在你的机器上跑第三方代码,权限和你本人一样大——能读你的文件、用你的凭据、访问网络,工具审批管不到它。GitHub 来源的插件还会在安装时执行构建脚本。请只安装可信来源,并尽量锁定 commit(github:owner/repo#sha)。
README
反爬 HTTP 工具插件 for DeepSeek Harness(DSH)。
从 SXS 采集体系(每日数百万级请求实战)提炼的反爬与限流策略,纯 Node 实现、零运行时依赖。
安装
dsh plugin --profile web add git+https://github.com/yangyunsong023/dsh-sxs-anti-bot-http.git
# 或本地 link
dsh plugin --profile web add link:/path/to/dsh-sxs-anti-bot-http
工具
| 工具 | 说明 |
|---|---|
sxs_fetch |
反爬 GET:抓取网页文本 |
sxs_fetch_json |
反爬 GET + JSON 解析(JSON API 采集) |
sxs_rate_status |
查看各站点自适应限流状态 |
能力
- UA 池轮换:打破固定指纹(5 组浏览器 UA)
- 指数退避重试:网络错误 / 5xx 自动重试(可配次数)
- 反爬墙检测:验证码 / 安全验证 / 滑动验证 / cf-challenge / 人机验证 / aliun_waf 等特征识别
- 站点级自适应限流:连续失败 → 30s→60s→120s→240s→480s 指数退避;恢复自动回落(防封 IP)
使用示例
sxs_fetch(url="https://example.com/news", referer="https://example.com/")
→ HTTP 200 + 页面文本(自动处理反爬与限流)
License
MIT
关于 SXS
本插件由 SXS(迭今网络科技有限公司) 开发维护。
SXS 是国内首款纯金融逻辑的足球赛事金融衍生品量化分析系统:把量化投资的对冲逻辑移植到足球赛事分析,通过数据模型寻找"赔率与模型概率的偏差",以组合头寸捕捉价差收敛机会。赛事方向模型历史回测准确率 85%+(8 年+数据,历史数据不构成收益承诺)。
📌 说明:以上为品牌介绍。若对本插件或 SXS 量化分析感兴趣,可添加微信交流:sui081(添加时请备注 "DSH 插件")。本插件本身完全开源免费,无任何附加条件。
安装 (GitHub Packages npm)
npm install @yangyunsong023/dsh-sxs-anti-bot-http --registry=https://npm.pkg.github.com
需要 GitHub 账号认证 (
npm login --registry=https://npm.pkg.github.com或配置 .npmrc 的//npm.pkg.github.com/:_authToken)。
链接
同类插件
superdesigndev/treg★ 428
给 Agent 的工具目录:按「要做的事」检索约 2,600 个外部接口(SEO 与 SERP、外链、社交、人物与公司信息补全、广告库、抓取),查看参数与单次调用价格后直接调用,凭据由服务端注入。附带技能,MCP 行在未设置 TREG_TOKEN 前保持禁用。
Lum1104/dsh-browser★ 216
Chrome 侧边栏扩展,让 DSH 直接操控你的浏览器,无需视觉能力。
zhaoolee/notes★ 142
将 DSH 对话导出为锤子便签风格 PNG,或在配置的账号工作区中新建和更新 Markdown 便签。
liustack/modsearch★ 115
纯文本 agent 的联网搜索桥:搜索网页与 X,返回结构化 JSON 证据(search/fetch/引用)。
taxueseek/argo★ 94
专为 agent 打造的搜索工具:多语言,覆盖中文/英文/学术/代码/购物/金融/新闻/百科。
Vladimir-Human/ru-marketplace-mcp#dsh★ 64
面向俄罗斯十家电商平台的技能与可选 MCP 行:跨 Wildberries、Detsky Mir、Yandex Market 比价,以及各平台的搜索、商品卡与评论。安装后 13 个技能立即可用;两行 MCP 默认关闭,需将 RU_MARKETPLACE_MCP_DIR 指向本地克隆,该克隆需要 Python 3.12+ 与 uv。