Scrapling Fetch MCP:AI助手抓取受保护网站内容
帮助AI助手从实施反自动化措施的网站获取文本内容,支持HTML/Markdown抓取。
快速入门
安装
- 确保已安装 Python 3.10+ 和 uv 包管理器。
- 运行以下命令安装依赖和工具: uv tool install scrapling scrapling install uv tool install scrapling-fetch-mcp
配置
在 Claude 客户端的 MCP 配置中添加: { "mcpServers": { "Cyber-Chitta": { "command": "uvx", "args": ["scrapling-fetch-mcp"] } } }
使用示例
- 抓取完整页面:调用
s-fetch-page
工具,传入目标 URL。 - 提取特定内容:使用
s-fetch-pattern
,结合正则表达式提取所需内容。
更多选项请参考 README。