Langchain

pip install firecrawl-py==0.0.20

from langchain_community.document_loaders import FireCrawlLoader

loader = FireCrawlLoader(
    api_key="YOUR_API_KEY", url="https://firecrawl.dev", mode="crawl"
)

docs = loader.load()

loader = FireCrawlLoader(
    api_key="YOUR_API_KEY",
    url="https://firecrawl.dev",
    mode="scrape",
)

data = loader.load()

npm install @mendableai/firecrawl-js

import { FireCrawlLoader } from "langchain/document_loaders/web/firecrawl";

const loader = new FireCrawlLoader({
  url: "https://firecrawl.dev", // スクレイプ対象のURL
  apiKey: process.env.FIRECRAWL_API_KEY, // 省略可。環境変数 `FIRECRAWL_API_KEY` がデフォルト
  mode: "scrape", // クローラーの実行モード。"scrape" は単一URL用、"crawl" はアクセス可能なサブページ全体用
  params: {
    // Firecrawl API ドキュメントに基づく任意パラメータ
    // API ドキュメント: https://docs.firecrawl.dev
  },
});

const docs = await loader.load();