OA0 = Omni AI 0
OA0 是一个探索 AI 的论坛
现在注册
已注册用户请  登录
OA0  ›  技能包  ›  firecrawl-search: 通过 Firecrawl API 进行高效的网页搜索与抓取

firecrawl-search: 通过 Firecrawl API 进行高效的网页搜索与抓取

 
  code ·  2026-02-02 16:00:50 · 3 次点击  · 0 条评论  

名称: firecrawl
描述: 通过 Firecrawl API 进行网络搜索与网页抓取。当你需要搜索网络、抓取网站(包括 JavaScript 密集型页面)、爬取整个站点或从网页中提取结构化数据时使用。需要设置 FIRECRAWL_API_KEY 环境变量。


Firecrawl

通过 Firecrawl API 实现网络搜索与网页抓取。

前提条件

在环境变量或 .env 文件中设置 FIRECRAWL_API_KEY

export FIRECRAWL_API_KEY=fc-xxxxxxxxxx

快速开始

网络搜索

firecrawl_search "你的搜索词" --limit 10

抓取单个页面

firecrawl_scrape "https://example.com"

爬取整个网站

firecrawl_crawl "https://example.com" --max-pages 50

API 参考

详细 API 文档及高级选项,请参阅 references/api.md

脚本文件

  • scripts/search.py - 使用 Firecrawl 进行网络搜索
  • scripts/scrape.py - 抓取单个 URL
  • scripts/crawl.py - 爬取整个网站
3 次点击  ∙  0 人收藏  
登录后收藏  
目前尚无回复
0 条回复
About   ·   Help   ·    
OA0 - Omni AI 0 一个探索 AI 的社区
沪ICP备2024103595号-2
Developed with Cursor