Firecrawl：13 万 Star 的 Agent 网页数据层 API
2026-06-16 18:00:00
Firecrawl 开源项目分析
仓库：github.com/firecrawl/firecrawl · 官网：firecrawl.dev · License: AGPL-3.0 · ⭐ 130k+
项目是什么
Firecrawl 是 Agent 时代的网页上下文 API——Search、Scrape、Crawl、Map、Batch Scrape，输出 干净 Markdown 或结构化 JSON，免写 Playwright 脚本与反爬对抗。
核心 API
| 端点 | 能力 |
|---|---|
| /scrape | 单页 → Markdown/HTML/截图/JSON |
| /crawl | 整站爬取（最多 1 万页） |
| /search | 搜索 + 拉取全文 |
| /agent | 自然语言描述需求，自动搜网采集 |
Agent 集成
- Firecrawl MCP Server
- Firecrawl CLI Skills
- 与 OpenClaw、LangGraph、Mastra 教程广泛出现
与 Browser Use 差异
| 项目 | 模式 |
|---|---|
| Browser Use | 本地/Cloud 浏览器操控 Agent |
| Firecrawl | API 数据层，无需管理 Browser Session |
快速开始
npm install @mendable/firecrawl-js
import Firecrawl from '@mendable/firecrawl-js';
const app = new Firecrawl({ apiKey: 'fc-...' });
const result = await app.scrapeUrl('https://example.com');
黑豹点评
2026 年 Agent Stack 常见组合：Firecrawl（读网）+ OpenCode（写码）+ Mem0（记忆）。Firecrawl 130k Star 说明 「给 Agent 联网」 已是基础设施需求。