Article Extract

该 Skill 提供 Python 脚本，以标准浏览器 User-Agent 请求给定 URL，解析 HTML 并过滤脚本、样式、导航、页脚等元素后输出正文纯文本，支持微信公众号、博客和新闻页面；需 Python 3.6+，仅用标准库，需登录或动态加载的页面可能无法完整提取。

caozeal

热度 64.16

最近更新 2026-05-11 17:28:58

分类：效率依赖：代码执行 / 第三方 API应用场景：数据处理

安装技能

复制下面的话术发给你的 Agent，它会通过 secure-skills 检索并安装该技能。

执行命令安装此 skill： npx secure-skills-cli add article-extract

Metadata

name: article-extract
description: 提取微信公众号、博客、新闻等网页的正文内容，绕过反爬机制，纯文本输出。

Article Extract

网页文章内容提取工具。支持微信公众号、博客、新闻网站等，输出干净的纯文本内容。

特点

✅ 绕过微信公众号反爬机制
✅ 自动过滤脚本、样式、导航等无关内容
✅ 纯 Python 实现，无需额外依赖
✅ 支持任意网页 URL

安装

无需安装，直接使用 Python 3 运行。

使用

python3 skills/article-extract/scripts/extract.py <url>

示例

# 提取微信公众号文章
python3 skills/article-extract/scripts/extract.py "https://mp.weixin.qq.com/s/xxxxx"

# 提取博客文章
python3 skills/article-extract/scripts/extract.py "https://example.com/blog/post"

# 保存到文件
python3 skills/article-extract/scripts/extract.py "https://mp.weixin.qq.com/s/xxxxx" > article.txt

输出

工具会输出提取的纯文本内容到 stdout，可以通过重定向保存到文件：

python3 skills/article-extract/scripts/extract.py "https://..." > output.txt

原理

使用标准浏览器 User-Agent 发送 HTTP 请求
解析 HTML，过滤 <script>、<style>、<nav>、<footer> 等无关标签
提取正文文本并清理多余空格

限制

需要目标网页允许标准浏览器访问
对于需要登录或特殊权限的页面可能无法提取
某些动态加载的内容（如无限滚动）可能无法完整提取

依赖

Python 3.6+
无需第三方库（仅使用标准库）

作者

基于 OpenClaw 社区实践封装