AI Skill 大全

网页数据采集

把网页提取成结构化数据,用于内容监测、价格追踪与资料整理,可产品化为数据即服务(DaaS)。

功能与用途

用于自动化采集目标网站与社媒平台数据,搭建竞品监测、价格追踪与商机挖掘系统。用户输入目标网址、RSS 源、监控商品链接或核心关键词,系统通过定时轮询、文本比对及反爬策略进行网页数据提取,最终输出网页变更差异报告、时序价格曲线、结构化 JSON/CSV 文件及舆情趋势。使用者需具备基础 Python 编程与网页元素定位常识。

适用场景

  • 竞品动态与合规监控:定时监控竞争对手博客、招聘动态或监管机构页面,通过哈希比对提取新旧差异,在规则变动或有新品发布时即时发送差异预警。
  • 电商商品价格变动追踪:周期性解析电商商品页面抓取实时售价与库存,自动写入时序数据库,在商品触及预设降价阈值时触发通知。
  • 商业线索与目录批量抓取:针对行业名录、产品目录或公开评论,通过定制选择器批量提取结构化字段,生成便于二次加工与分析的 CSV 或 JSON 文件。
  • 品牌舆情与社媒声量监听:基于预设品牌词与行业热词抓取社交平台帖子与评论,统计提及频次并分析受众情绪倾向,输出舆情走势报告。

适用人群

  • 创业者
  • 数据分析
  • 运营

使用步骤

  1. 选定监测场景(内容/价格/线索/社媒)。
  2. 设计触发与输出格式。
  3. 选反封禁与存储。
  4. 定变现方式。

开始使用

将需求和 Skill 名称发送给已连接 SkillPX MCP 的 AI 助手,核对适用工具和安装要求。

查看 MCP 接入说明

技术信息

分类
效率
适用工具
Codex、Claude Code、OpenClaw、Hermes、国内 Agent
使用难度
简单
版本
main
最近更新
2026-09-09
文件数
3
安装包大小
自动生成 ZIP
安全检查
基础检查通过

Use when data extraction hub — content monitoring, price tracking, web

使用前准备

  • 监测目标与数据源
  • (运行)抓取环境

依赖与权限

  • 读取用户主动提供的内容

同类 Skill