反爬 HTTP 工具:UA 池轮换、指数退避重试、反爬墙检测(验证码/安全验证)与自适应限流,提炼自 SXS 生产采集体系(每日数百万请求)——工具:`sxs_fetch` / `sxs_fetch_json` / `sxs_rate_status`。
安装
# GitHub 源码(首次需按提示配置 allowBuilds 构建授权后重试)
dsh plugin --profile web add github:yangyunsong023/dsh-sxs-anti-bot-http
装任何插件都等于在你的机器上跑第三方代码,权限和你本人一样大——能读你的文件、用你的凭据、访问网络,工具审批管不到它。GitHub 来源的插件还会在安装时执行构建脚本——pnpm 默认拦截,所以安装可能停在 ERR_PNPM_GIT_DEP_PREPARE_NOT_ALLOWED 或 ERR_PNPM_IGNORED_BUILDS;dsh 会打印出需要添加的确切键名,把它加进该 profile 的 pnpm-workspace.yaml 的 allowBuilds 下,重跑一次即可装上。放行构建本身就是一次信任判断:请只安装可信来源,并尽量锁定 commit(github:owner/repo#sha)。
README
反爬 HTTP 工具插件 for DeepSeek Harness(DSH)。
从 SXS 采集体系(每日数百万级请求实战)提炼的反爬与限流策略,纯 Node 实现、零运行时依赖。
安装
dsh plugin --profile web add git+https://github.com/yangyunsong023/dsh-sxs-anti-bot-http.git
# 或本地 link
dsh plugin --profile web add link:/path/to/dsh-sxs-anti-bot-http
工具
| 工具 | 说明 |
|---|---|
sxs_fetch |
反爬 GET:抓取网页文本 |
sxs_fetch_json |
反爬 GET + JSON 解析(JSON API 采集) |
sxs_rate_status |
查看各站点自适应限流状态 |
能力
- UA 池轮换:打破固定指纹(5 组浏览器 UA)
- 指数退避重试:网络错误 / 5xx 自动重试(可配次数)
- 反爬墙检测:验证码 / 安全验证 / 滑动验证 / cf-challenge / 人机验证 / aliun_waf 等特征识别
- 站点级自适应限流:连续失败 → 30s→60s→120s→240s→480s 指数退避;恢复自动回落(防封 IP)
使用示例
sxs_fetch(url="https://example.com/news", referer="https://example.com/")
→ HTTP 200 + 页面文本(自动处理反爬与限流)
License
MIT
关于 SXS
本插件由 SXS(迭今网络科技有限公司) 开发维护。
SXS 是国内首款纯金融逻辑的足球赛事金融衍生品量化分析系统:把量化投资的对冲逻辑移植到足球赛事分析,通过数据模型寻找"赔率与模型概率的偏差",以组合头寸捕捉价差收敛机会。赛事方向模型历史回测准确率 85%+(8 年+数据,历史数据不构成收益承诺)。
📌 说明:以上为品牌介绍。若对本插件或 SXS 量化分析感兴趣,可添加微信交流:sui081(添加时请备注 "DSH 插件")。本插件本身完全开源免费,无任何附加条件。
安装 (GitHub Packages npm)
npm install @yangyunsong023/dsh-sxs-anti-bot-http --registry=https://npm.pkg.github.com
需要 GitHub 账号认证 (
npm login --registry=https://npm.pkg.github.com或配置 .npmrc 的//npm.pkg.github.com/:_authToken)。
链接
同类插件
Tencent/BrowserSkill#dsh-plugin-browserskill★ 7976
BrowserSkill 的 DeepSeek Harness 浏览器自动化桥接插件,通过原生浏览器工具控制可见的 Chrome 和 Edge Agent Window,支持可访问性与 VOM 页面观察、截图、隔离的多会话控制和 Web UI 实时观察浮层。
omdsh-dev/dsh-browser#packages/browser/bridge-browser★ 751
Chrome 侧边栏扩展,让 DSH 直接操控你的浏览器,无需视觉能力。
liustack/modsearch★ 579
纯文本 agent 的联网搜索桥:搜索网页与 X,返回结构化 JSON 证据(search/fetch/引用)。
DDDMUC/dsh-free-search★ 289
DSH 免费搜索插件:7 个引擎(DuckDuckGo/Bing/SearXNG 免费 + Exa/Perplexity/DeepSeek 付费)、自动回退、设置页 UI(API key 输入 + 官网链接)、web_fetch、引擎测试工具。
Tabbit-Browser/dsh-tabbit★ 101
让 DeepSeek Harness 能够控制 Tabbit 浏览器:安装即自动加载 tabbit-browser skill,检测国际版 Tabbit 与国内版 Tabbit Browser 正式版(>= 1.9.0),检查 tabbit-cli 常驻运行时,按平台诊断调用 CLI 所需的 DSH sandbox 模式,并在没有合格版本时通过后台任务下载与系统地区匹配的正式版安装包。
wqty123/dsh-browser★ 90
共享真实浏览器:用户可观看并随时接管的原生 Electron 窗口,agent 通过 CDP 驱动,内置 20 个 browser_* 工具(打开/快照/执行/填表/截图/下载/登录态);任务级会话隔离、登录态持久化、人机验证识别,纯 `dsh web` 无需桌面外壳即可自托管。
社区评论
评论公开保存在 GitHub Discussions。加载评论会连接 GitHub 和 Giscus;发表内容需要 GitHub 账号。