Wesley
пре 6 месеци
1 измењених фајлова са 1 додато и 1 уклоњено
+ 1
- 1
api/core/rag/extractor/watercrawl/provider.py
Прегледај датотеку
| } | } | ||||
| if options.get("crawl_sub_pages", True): | if options.get("crawl_sub_pages", True): | ||||
| spider_options["page_limit"] = options.get("limit", 1) | spider_options["page_limit"] = options.get("limit", 1) | ||||
| spider_options["max_depth"] = options.get("depth", 1) | |||||
| spider_options["max_depth"] = options.get("max_depth", 1) | |||||
| spider_options["include_paths"] = options.get("includes", "").split(",") if options.get("includes") else [] | spider_options["include_paths"] = options.get("includes", "").split(",") if options.get("includes") else [] | ||||
| spider_options["exclude_paths"] = options.get("excludes", "").split(",") if options.get("excludes") else [] | spider_options["exclude_paths"] = options.get("excludes", "").split(",") if options.get("excludes") else [] | ||||
Loading…