婚礼摄影师采集
给出 Junebug Weddings 的摄影师页面链接,抓取头像、作品集与简介,生成中文资料并写入网站数据库。
功能与用途
婚礼摄影师作品站的摄影师条目要一条条手工录入,图片还得逐张下载,费时又容易漏。这个 Skill 用 Puppeteer 直接穿过 Cloudflare 打开 Junebug 页面,把展示照、画廊作品、Vimeo 视频和资料一并抓下来,整理成中文名、风格标签、亮点和起始价,再通过插入脚本写进 crawled_photographers 表并同步图片,无需重新部署前端就能在详情页看到。前提是本地已经有 Node.js + puppeteer 环境和对应的项目仓库与数据库。
适用场景
- 平台要上架一批瑞士、意大利的婚礼摄影师,手动录入资料和下载作:平台要上架一批瑞士、意大利的婚礼摄影师,手动录入资料和下载作品图至少要花一整天
- 之前用 curl 和网页抓取都返回 403,因为目标站点开了:之前用 curl 和网页抓取都返回 403,因为目标站点开了 Cloudflare 防护
- 摄影师页面的作品集要点好几次「加载更多」才能在网页上看到全部:摄影师页面的作品集要点好几次「加载更多」才能在网页上看到全部,手工保存图片根本抓不全
- 新加的摄影师要在网站详情页立刻可见,但不想为此重新构建和部署:新加的摄影师要在网站详情页立刻可见,但不想为此重新构建和部署整个前端
适用人群
- 婚礼摄影师作品站的运营人员
- 负责供应商库维护的全栈开发
- 做婚纱摄影撮合平台的站长
使用步骤
- 拿到 Junebug 的摄影师页面链接,确认本地已装好 Node.js 与 puppeteer、数据库可连。
- 运行通用提取脚本 node scripts/extract-junebug.cjs "{url}",等待图片、作品集和视频抓取完成。
- 核对图片是否全部下载成功(0 失败),把图集提交到图片仓库。
- 读取输出的 JSON,翻译中文名与简介,把风格标签和亮点补到质量要求,再写 insert 脚本写库。
- 跑插入脚本后用接口和 /photography/{slug} 页面确认记录与图片都正常显示。
开始使用
将需求和 Skill 名称发送给已连接 SkillPX MCP 的 AI 助手,核对适用工具和安装要求。
技术信息
- 分类
- 电商
- 适用工具
- Codex、Claude Code、OpenClaw、Hermes、国内 Agent
- 使用难度
- 专业
- 版本
- main
- 最近更新
- 2026-09-13
- 文件数
- 3
- 安装包大小
- 自动生成 ZIP
- 安全检查
- 基础检查通过
使用前准备
- 需要本地 Node.js + puppeteer 环境、MySQL 中已存在的 crawled_photographers 表,以及 Verra-Voile 前后端与图片仓库的本地目录。
依赖与权限
- 读取用户主动提供的内容