🚀 Scraper.is MCP 整合包
Scraper.is MCP 整合包是一个适用于 Model Context Protocol (MCP) 的工具，借助强大的 AI 助手网络抓取工具 Scraper.is，让 AI 助手能够通过 MCP 协议获取最新的网络信息。
🚀 快速开始
此包允许 AI 助手通过 MCP 协议调用 Scraper.is，从而获取最新的网络信息。
✨ 主要特性
- 🌐 网页抓取：可从任何网站提取内容。
- 📸 截图：能够捕捉网页的视觉快照。
- 📄 多种格式：支持以 Markdown、HTML 或 JSON 格式获取内容。
- 🔄 实时进度更新：在抓取操作中可进行实时进度汇报。
- 🔌 MCP 整合：能与支持 MCP 协议的 AI 助手无缝对接。
📦 安装指南
使用 npm 安装
npm install -g scraperis-mcp
使用 yarn 安装
yarn global add scraperis-mcp
先决条件
您需要一个 Scraper.is API 密钥才能使用此包。
获取您的 API 密钥
- 访问 scraper.is 注册或登录。
- 在仪表盘中前往 API Keys 部分：https://www.scraper.is/dashboard/apikeys。
- 创建新的 API 密钥或复制现有密钥。
- 安全地保存此密钥，因为您需要它来使用此包。
💻 使用示例
环境配置
创建一个 .env 文件并添加您的 Scraper.is API 密钥：
SCRAPERIS_API_KEY=your_api_key_here
Claude Desktop 整合
要在 Claude Desktop 中使用此包，可按以下步骤操作：
- 全局安装包：
npm install -g scraperis-mcp
- 将以下配置添加到您的
claude_desktop_config.json文件中：
{
"mcpServers": {
"scraperis_scraper": {
"command": "scraperis-mcp",
"args": [],
"env": {
"SCRAPERIS_API_KEY": "your-api-key-here",
"DEBUG": "*"
}
}
}
}
- 将
your-api-key-here替换为您实际的 Scraper.is API 密钥。 - 重启 Claude Desktop 以应用更改。
使用 MCP Inspector 进行开发和测试
npx @modelcontextprotocol/inspector scraperis-mcp
AI 助手整合
此包设计用于与支持 Model Context Protocol (MCP) 的 AI 助手集成。以下是完整的工具文档。
工具使用
命令: scrape
scrape 是一个强大的网络内容抓取工具，可以通过 MCP 协议调用 Scraper.is 服务。
参数
- prompt：要抓取的内容描述。
- format：返回内容的格式（可选，默认为 Markdown）。
示例
scraper "latest news about AI"
📚 详细文档
开发
克隆仓库
git clone https://github.com/yourusername/scraperis-mcp.git
cd scraperis-mcp
安装依赖项
npm install
构建
npm run build
📄 许可证
项目以 MIT 许可证发布。
致谢
感谢以下项目和技术的支持：