Scrappa数据抓取

6小时前更新 2 00
Scrappa数据抓取Scrappa数据抓取
Scrappa数据抓取

技能简介

Scrappa MCP Skill 通过 Model Context Protocol (MCP) 服务器提供80余种工具,覆盖 Google、YouTubeAmazonLinkedIn、Trustpilot、航班、酒店、房产等多个数据源的数据抓取与搜索能力。

业务背景

市场与运营团队无需编写代码,即可快速获取多平台公开数据。无论是竞品价格监控、品牌舆情追踪,还是潜在客户画像采集,均可通过统一接口实现,大幅降低数据获取门槛与时间成本,支撑业务决策从"凭经验"转向"看数据"。

落地案例:某跨境电商运营团队需要监测亚马逊美、德、日三大站点的竞品定价动态。通过配置Scrappa技能,每日自动抓取目标ASIN的价格、评分及库存状态,结合Google Trends分析搜索热度变化,及时调整自身促销策略。同时利用Trustpilot采集同类产品的用户差评关键词,反向优化产品详情页描述,提升转化率。

能做什么

  • Google 搜索、图片、视频、新闻、翻译、职位搜索
  • YouTube 视频搜索、频道信息、评论、播放列表、趋势内容
  • Amazon 22个站点的商品搜索与详情获取
  • LinkedIn 个人资料、公司页面、帖子搜索
  • Trustpilot、Kununu、TrustedShops 企业评价采集
  • Google Maps 地点搜索、商家详情、评论、路线规划
  • Google Flights 单程/往返航班查询、低价日期发现
  • Google Hotels 酒店搜索与预订信息

使用说明

1. 获取 API Key

访问 scrappa.co 注册免费账号,从控制台获取 API Key。

2. 配置 mcporter

mcporter config add scrappa --url "https://scrappa.co/mcp" --headers "X-API-KEY=YOUR_API_KEY"

或手动编辑配置文件 ~/clawd/config/mcporter.json

{
  "mcpServers": {
    "scrappa": {
      "baseUrl": "https://scrappa.co/mcp",
      "headers": {
        "X-API-KEY": "your_api_key_here"
      }
    }
  }
}

3. 重启服务

clawdbot gateway restart

输入与输出

见下方输入与输出表格。

项目内容
输入搜索关键词、目标平台标识、筛选参数、Scrappa API Key
输出结构化搜索结果、详情数据、分页令牌、状态信息
适用人群数据分析师、市场研究人员、电商运营、内容聚合开发者、旅行工具开发者
不包含数据可视化组件、持久化存储、数据清洗流水线、社交媒体发布功能

 

风险提示

  • 需妥善保管 API Key,避免泄露导致额度被盗用
  • 部分平台数据受 robots.txt 或服务条款限制,商用前请确认合规性
  • 频繁请求可能触发速率限制,建议合理控制调用频率
  • LinkedIn 等平台对自动化抓取有检测机制,存在账号风险

来源信息

原始链接:https://github.com/openclaw/skills/tree/main/skills/userlip/scrappa-skill/SKILL.md
来源类型:GitHub 仓库

数据统计

相关导航

暂无评论

none
暂无评论...