You can not select more than 25 topics Topics must start with a letter or number, can include dashes ('-') and can be up to 35 characters long.

пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
пре 1 година
123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206
  1. <div align="center">
  2. <a href="https://demo.ragflow.io/">
  3. <img src="web/src/assets/logo-with-text.png" width="350" alt="ragflow logo">
  4. </a>
  5. </div>
  6. <p align="center">
  7. <a href="./README.md">English</a> |
  8. <a href="./README_zh.md">简体中文</a> |
  9. <a href="./README_ja.md">日本語</a>
  10. </p>
  11. <p align="center">
  12. <a href="https://demo.ragflow.io" target="_blank">
  13. <img alt="Static Badge" src="https://img.shields.io/badge/RAGFLOW-LLM-white?&labelColor=dd0af7"></a>
  14. <a href="https://hub.docker.com/r/infiniflow/ragflow" target="_blank">
  15. <img src="https://img.shields.io/badge/docker_pull-ragflow:v1.0-brightgreen"
  16. alt="docker pull infiniflow/ragflow:v0.2.0"></a>
  17. <a href="https://github.com/infiniflow/ragflow/blob/main/LICENSE">
  18. <img height="21" src="https://img.shields.io/badge/License-Apache--2.0-ffffff?style=flat-square&labelColor=d4eaf7&color=7d09f1" alt="license">
  19. </a>
  20. </p>
  21. ## 💡 RAGFlow 是什么?
  22. [RAGFlow](https://demo.ragflow.io) 是一款基于深度文档理解构建的开源 RAG(Retrieval-Augmented Generation)引擎。RAGFlow 可以为各种规模的企业及个人提供一套精简的 RAG 工作流程,结合大语言模型(LLM)针对用户各类不同的复杂格式数据提供可靠的问答以及有理有据的引用。
  23. ## 🌟 主要功能
  24. ### 🍭 **"Quality in, quality out"**
  25. - 基于[深度文档理解](./deepdoc/README.md),能够从各类复杂格式的非结构化数据中提取真知灼见。
  26. - 真正在无限上下文(token)的场景下快速完成大海捞针测试。
  27. ### 🍱 **基于模板的文本切片**
  28. - 不仅仅是智能,更重要的是可控可解释。
  29. - 多种文本模板可供选择
  30. ### 🌱 **有理有据、最大程度降低幻觉(hallucination)**
  31. - 文本切片过程可视化,支持手动调整。
  32. - 有理有据:答案提供关键引用的快照并支持追根溯源。
  33. ### 🍔 **兼容各类异构数据源**
  34. - 支持丰富的文件类型,包括 Word 文档、PPT、excel 表格、txt 文件、图片、PDF、影印件、复印件、结构化数据, 网页等。
  35. ### 🛀 **全程无忧、自动化的 RAG 工作流**
  36. - 全面优化的 RAG 工作流可以支持从个人应用乃至超大型企业的各类生态系统。
  37. - 大语言模型 LLM 以及向量模型均支持配置。
  38. - 基于多路召回、融合重排序。
  39. - 提供易用的 API,可以轻松集成到各类企业系统。
  40. ## 📌 新增功能
  41. - 2024-04-16 添加嵌入模型 [BCEmbedding](https://github.com/netease-youdao/BCEmbedding) 。
  42. - 2024-04-16 添加 [FastEmbed](https://github.com/qdrant/fastembed) 专为轻型和高速嵌入而设计。
  43. - 2024-04-11 支持用 [Xinference](./docs/xinference.md) 本地化部署大模型。
  44. - 2024-04-10 为‘Laws’版面分析增加了底层模型。
  45. - 2024-04-08 支持用 [Ollama](./docs/ollama.md) 本地化部署大模型。
  46. - 2024-04-07 支持中文界面。
  47. ## 🔎 系统架构
  48. <div align="center" style="margin-top:20px;margin-bottom:20px;">
  49. <img src="https://github.com/infiniflow/ragflow/assets/12318111/d6ac5664-c237-4200-a7c2-a4a00691b485" width="1000"/>
  50. </div>
  51. ## 🎬 快速开始
  52. ### 📝 前提条件
  53. - CPU >= 2 核
  54. - RAM >= 8 GB
  55. - Docker >= 24.0.0 & Docker Compose >= v2.26.1
  56. > 如果你并没有在本机安装 Docker(Windows、Mac,或者 Linux), 可以参考文档 [Install Docker Engine](https://docs.docker.com/engine/install/) 自行安装。
  57. ### 🚀 启动服务器
  58. 1. 确保 `vm.max_map_count` 不小于 262144 【[更多](./docs/max_map_count.md)】:
  59. > 如需确认 `vm.max_map_count` 的大小:
  60. >
  61. > ```bash
  62. > $ sysctl vm.max_map_count
  63. > ```
  64. >
  65. > 如果 `vm.max_map_count` 的值小于 262144,可以进行重置:
  66. >
  67. > ```bash
  68. > # 这里我们设为 262144:
  69. > $ sudo sysctl -w vm.max_map_count=262144
  70. > ```
  71. >
  72. > 你的改动会在下次系统重启时被重置。如果希望做永久改动,还需要在 **/etc/sysctl.conf** 文件里把 `vm.max_map_count` 的值再相应更新一遍:
  73. >
  74. > ```bash
  75. > vm.max_map_count=262144
  76. > ```
  77. 2. 克隆仓库:
  78. ```bash
  79. $ git clone https://github.com/infiniflow/ragflow.git
  80. ```
  81. 3. 进入 **docker** 文件夹,利用提前编译好的 Docker 镜像启动服务器:
  82. ```bash
  83. $ cd ragflow/docker
  84. $ chmod +x ./entrypoint.sh
  85. $ docker compose -f docker-compose-CN.yml up -d
  86. ```
  87. > 核心镜像文件大约 15 GB,可能需要一定时间拉取。请耐心等待。
  88. 4. 服务器启动成功后再次确认服务器状态:
  89. ```bash
  90. $ docker logs -f ragflow-server
  91. ```
  92. _出现以下界面提示说明服务器启动成功:_
  93. ```bash
  94. ____ ______ __
  95. / __ \ ____ _ ____ _ / ____// /____ _ __
  96. / /_/ // __ `// __ `// /_ / // __ \| | /| / /
  97. / _, _// /_/ // /_/ // __/ / // /_/ /| |/ |/ /
  98. /_/ |_| \__,_/ \__, //_/ /_/ \____/ |__/|__/
  99. /____/
  100. * Running on all addresses (0.0.0.0)
  101. * Running on http://127.0.0.1:9380
  102. * Running on http://x.x.x.x:9380
  103. INFO:werkzeug:Press CTRL+C to quit
  104. ```
  105. 5. 在你的浏览器中输入你的服务器对应的 IP 地址并登录 RAGFlow。
  106. > 上面这个例子中,您只需输入 http://IP_OF_YOUR_MACHINE 即可:未改动过配置则无需输入端口(默认的 HTTP 服务端口 80)。
  107. 6. 在 [service_conf.yaml](./docker/service_conf.yaml) 文件的 `user_default_llm` 栏配置 LLM factory,并在 `API_KEY` 栏填写和你选择的大模型相对应的 API key。
  108. > 详见 [./docs/llm_api_key_setup.md](./docs/llm_api_key_setup.md)。
  109. _好戏开始,接着奏乐接着舞!_
  110. ## 🔧 系统配置
  111. 系统配置涉及以下三份文件:
  112. - [.env](./docker/.env):存放一些基本的系统环境变量,比如 `SVR_HTTP_PORT`、`MYSQL_PASSWORD`、`MINIO_PASSWORD` 等。
  113. - [service_conf.yaml](./docker/service_conf.yaml):配置各类后台服务。
  114. - [docker-compose-CN.yml](./docker/docker-compose-CN.yml): 系统依赖该文件完成启动。
  115. 请务必确保 [.env](./docker/.env) 文件中的变量设置与 [service_conf.yaml](./docker/service_conf.yaml) 文件中的配置保持一致!
  116. > [./docker/README](./docker/README.md) 文件提供了环境变量设置和服务配置的详细信息。请**一定要**确保 [./docker/README](./docker/README.md) 文件当中列出来的环境变量的值与 [service_conf.yaml](./docker/service_conf.yaml) 文件当中的系统配置保持一致。
  117. 如需更新默认的 HTTP 服务端口(80), 可以在 [docker-compose-CN.yml](./docker/docker-compose-CN.yml) 文件中将配置 `80:80` 改为 `<YOUR_SERVING_PORT>:80`。
  118. > 所有系统配置都需要通过系统重启生效:
  119. >
  120. > ```bash
  121. > $ docker compose -f docker-compose-CN.yml up -d
  122. > ```
  123. ## 🛠️ 源码编译、安装 Docker 镜像
  124. 如需从源码安装 Docker 镜像:
  125. ```bash
  126. $ git clone https://github.com/infiniflow/ragflow.git
  127. $ cd ragflow/
  128. $ docker build -t infiniflow/ragflow:v0.2.0 .
  129. $ cd ragflow/docker
  130. $ chmod +x ./entrypoint.sh
  131. $ docker compose up -d
  132. ```
  133. ## 📚 技术文档
  134. - [FAQ](./docs/faq.md)
  135. ## 📜 路线图
  136. 详见 [RAGFlow Roadmap 2024](https://github.com/infiniflow/ragflow/issues/162) 。
  137. ## 🏄 开源社区
  138. - [Discord](https://discord.gg/4XxujFgUN7)
  139. - [Twitter](https://twitter.com/infiniflowai)
  140. ## 🙌 贡献指南
  141. RAGFlow 只有通过开源协作才能蓬勃发展。秉持这一精神,我们欢迎来自社区的各种贡献。如果您有意参与其中,请查阅我们的[贡献者指南](https://github.com/infiniflow/ragflow/blob/main/docs/CONTRIBUTING.md) 。
  142. ## 👥 加入社区
  143. 扫二维码添加 RAGFlow 小助手,进 RAGFlow 交流群。
  144. <p align="center">
  145. <img src="https://github.com/infiniflow/ragflow/assets/7248/bccf284f-46f2-4445-9809-8f1030fb7585" width=50% height=50%>
  146. </p>