dsh-toutiao-reader
在终端中运行以下命令:
dsh plugin install RyanShen3/dsh-toutiao-reader
将以下提示词粘贴到 DeepSeek Harness 对话框中:
在 DeepSeek Harness 中执行 dsh plugin install RyanShen3/dsh-toutiao-reader 即可安装该插件,源码地址为 https://github.com/RyanShen3/dsh-toutiao-reader
插件介绍
头条的静态 HTML 页面被 __ac_nonce、__ac_signature、acrawler 三层反爬机制层层拦截,直接 fetch 只会返回一个安全验证页,搜索工具也只能拿到一两句摘要。dsh-toutiao-reader 把无头浏览器驱动的完整抓取流程打包成深壳 Harness 插件:给一个文章 URL,拿回标题加全文纯文本。
核心由两部分组成。webfetch 工具基于常驻的 Edge 或 Chrome 无头浏览器,通过 CDP 协议复用单个标签页完成请求,支持 maxChars 截断、outfile 落盘,失败时返回 error 字段而非抛异常,保证主流程不被打断。配套的 toutiao-reader 技能文档则覆盖了 URL 形态识别、验证页重试节奏、视频与问答与 App 中间页的排查、浏览器常驻进程管理以及底层脚本兜底路径,让模型在调用时有章可循。
它最适合需要在 Agent 工作流中稳定读取今日头条文章、同时偶尔也需抓取博客或新闻站内容的开发者。只读、不写凭据、监听仅限本机,隐私面很小;本地装有 Edge 或 Chrome、Node 20+ 即可跑起来。
截图预览
使用场景
- Agent 工作流中读取今日头条文章全文进行摘要或分析
- 绕过头条反爬验证层获取标题与纯文本正文
- 抓取博客或新闻站文章文本并通过 outfile 落盘归档
适合人员
- 在 DeepSeek Harness 中构建内容分析 Agent 的开发者
- 需要稳定获取头条文章文本的自动化脚本作者
- 处理网页反爬场景的 AI 应用工程师