Firecrawl MCP 把任意网页洗成干净的 Markdown 或结构化 JSON,专治「把网页丢给模型结果全是导航和广告」。 做资料整理、竞品监控、知识库构建的人都知道:直接抓 HTML 给模型,一半 token 浪费在菜单和页脚上。Firecrawl 本来就是做这件事的 API,它的官方 MCP 服务器把 scrape、search、crawl、extract 这几类能力包成工具,Agent 可以直接调。
标签 Firecrawl 下的文章
搜、爬、点、抽一体化,把任意网页变成 LLM 能直接吃的 Markdown 或 JSON。 给 agent 接网页数据,自己写爬虫会遇到三个问题:JS 重渲染页面拿不到内容、反爬封 IP、拿到的 HTML 太脏。Firecrawl 把这三个问题包成一个 API:一个 scrape 返回干净 Markdown,crawl 把整站拉下来,search 直接搜网并返回全文,map 秒出站点 URL 列表。仓库 TypeScript 写的,主体 AGPL-3.0、SDK 为 MIT,...