ソースを参照

fix: Remove invalid key from firecrawl request payload. (#25190)

Signed-off-by: SUGIYAMA Yoshio <nenegi.01mo@gmail.com>
tags/2.0.0-beta.2^2
Yoshio Sugiyama 1ヶ月前
コミット
4966e4e1fb
コミッターのメールアドレスに関連付けられたアカウントが存在しません
1個のファイルの変更1行の追加3行の削除
  1. 1
    3
      api/core/rag/extractor/firecrawl/firecrawl_app.py

+ 1
- 3
api/core/rag/extractor/firecrawl/firecrawl_app.py ファイルの表示

"formats": ["markdown"], "formats": ["markdown"],
"onlyMainContent": True, "onlyMainContent": True,
"timeout": 30000, "timeout": 30000,
"integration": "dify",
} }
if params: if params:
json_data.update(params) json_data.update(params)
def crawl_url(self, url, params=None) -> str: def crawl_url(self, url, params=None) -> str:
# Documentation: https://docs.firecrawl.dev/api-reference/endpoint/crawl-post # Documentation: https://docs.firecrawl.dev/api-reference/endpoint/crawl-post
headers = self._prepare_headers() headers = self._prepare_headers()
json_data = {"url": url, "integration": "dify"}
json_data = {"url": url}
if params: if params:
json_data.update(params) json_data.update(params)
response = self._post_request(f"{self.base_url}/v1/crawl", json_data, headers) response = self._post_request(f"{self.base_url}/v1/crawl", json_data, headers)
"timeout": 60000, "timeout": 60000,
"ignoreInvalidURLs": False, "ignoreInvalidURLs": False,
"scrapeOptions": {}, "scrapeOptions": {},
"integration": "dify",
} }
if params: if params:
json_data.update(params) json_data.update(params)

読み込み中…
キャンセル
保存