Simplescraper：抓取网站并将其转换为 API

什么是 Simplescraper？

Simplescraper 是一款多功能的网络爬虫工具，旨在简化从任何网站提取数据的过程。它既适用于开发者，也适用于非程序员，提供了一个直观的平台，可以将网站转换为结构化数据和 API。

Simplescraper 如何工作？

Simplescraper 通过 Chrome 扩展程序和基于云的仪表板运行，允许用户通过点击运行功能提取数据。它的 AI Enhance 功能可以使用简单的提示将网页转换为结构化数据，无需 CSS 选择器。该平台提供可根据用户需求扩展的自动化数据提取，通过仪表板、API 或自定义计划支持无限的抓取任务。数据以 CSV 或 JSON 格式提供，方便各种应用程序访问。

Simplescraper 的主要特点：

无代码数据提取：通过用户友好的界面简化网络爬取。
AI Enhance：通过简单的提示将网页转换为结构化数据。
可扩展的自动化：通过仪表板、API 或自定义计划运行无限的抓取任务。
多功能数据交付：通过 API 拉取数据或推送到 Google Sheets、Airtable、Zapier 和 Webhooks。
全面的工具包：支持多页、单页应用、无限滚动等。

AI 驱动的提取

Simplescraper 的 AI 驱动提取功能让您可以使用简单的提示将任何网页转换为结构化数据，而无需 CSS 选择器。这对于提取职位数据、房地产数据和电子商务数据尤其有用。

例如，您可以提取包含公司、地点、职位和联系方式的职位列表。例如，抓取招聘页面可能会产生包含以下内容的结构化输出：

公司： OpenAI
地点： San Francisco
职位： Research Scientist
类别： Machine Learning
邮箱： careers@openai.com

将网站转换为 API

您抓取的每个网站都可以立即成为 API，允许您调用最新数据。您可以通过截取屏幕截图、提取 markdown、运行 async 或批量抓取来自定义您的请求。

示例 API 请求：

// scrape any website
const response = await fetch(
`https://api.simplescraper.io/v1/recipes/${recipeId}/run`,
{
method: 'POST',
headers: {
'Authorization': `Bearer ${apiKey}`,
'Content-Type': 'application/json'
},
body: JSON.stringify({
sourceUrl: "https://example.com/jobs",
screenshots: true, // capture page screenshots
})
}
);

const data = await response.json();

示例 API 响应：

{
"url": "https://example.com/jobs",
"status": "completed",
"data": [
{
"job_title": "Senior Software Engineer",
"job_title_link": "https://example.com/jobs/senior-software-engineer",
"company": "Example Corp",
"timestamp": "Sun, 19 Oct 2025 11:40:24 GMT"
}
],
"screenshots": [
{
"url": "https://example.com/jobs",
"screenshot": "https://simplescraper.io/screenshots/example.png"
}
],
}

Simplescraper 适用于哪些人？

Simplescraper 专为广泛的用户而设计：

开发者：用于构建数据驱动的应用程序并将 Web 数据集成到现有系统中。
无代码人员：用于自动化数据提取任务，无需编写代码。
企业：用于监控竞争对手、跟踪市场趋势和收集潜在客户。

如何使用 Simplescraper？

安装 Chrome 扩展程序：免费下载 Simplescraper Chrome 扩展程序。
提取数据：使用该扩展程序只需点击几下即可从任何网站提取数据。
在云端扩展：利用云平台进行更大的抓取任务和 API 工作流程。

真实世界的用例：

房地产：从房地产网站提取房产详细信息、价格和位置。
招聘信息：抓取包含公司名称、位置和联系信息的职位列表。
电子商务：监控电子商务网站上的产品价格、可用性和评论。
金融服务：从各种在线来源收集金融数据和市场趋势。

Simplescraper 定价：

Simplescraper 提供一系列定价计划以满足不同的需求：

免费：在浏览器中免费使用，外加 100 个免费入门积分用于自动化抓取。
Plus： 39 美元/月，6000 积分，包括计划安排、Google Sheet 集成、Airtable 集成、Webhooks、AI Enhance 和 Markdown 提取。
Pro： 70 美元/月，15000 积分，包括所有 Plus 功能以及 SERP 抓取。
Premium： 150 美元/月，40000 积分，包括所有 Pro 功能。
Scale： 249 美元/月，100000 积分，包括所有 Premium 功能、Recipe 设置服务和实时数据馈送。

所有计划都包括专门的一对一支持。