OpenClaw · 开源智能抓取框架

OpenClaw Skills 核心能力

从动态渲染到分布式队列，OpenClaw 内置丰富技能。每个技能都可独立插拔，让抓虫变得优雅。

支持 CSS/XPath/正则 + AI 自动提取，处理嵌套与动态内容。基于 OpenClaw skills 的解析引擎自适应网站结构变化。

#核心技能

原生集成 Redis/Kafka，任务分片、去重、断点续爬。技能模块支持动态扩缩容，轻松应对千万级 URL。

#OpenClaw Skills

基于 Playwright 的 JS 渲染技能，自动等待、截图、拦截请求。SPA 站点也能完整抓取。

#动态渲染

数据清洗、去重、自定义管道。支持 JSON/CSV/Parquet 以及直接写入 ClickHouse、MySQL 。

#ETL技能

Prometheus + Grafana 集成，任务速率、失败率、资源占用一目了然。OpenClaw Skills 可自定义告警规则。

#可观测性

使用 Python/Go 编写自定义技能，加载中间件、钩子。社区贡献了大量 skills，如验证码识别、代理轮转。

#扩展技能

OpenClaw GitHub 组织包含核心引擎、技能商店、CLI 工具。过去 30 天 280+ commits，欢迎一起打磨。

3.2k Stars

642 Forks

56 Issues

24 Contributors

Star on GitHub Fork https://github.com/openclaw/core.git

⚡ 想要最新的 OpenClaw Skills 示例？访问 OpenClaw GitHub 查阅 /skills 目录，或直接贡献你的自定义技能。