You can not select more than 25 topics Topics must start with a letter or number, can include dashes ('-') and can be up to 35 characters long.

README_id.md 14KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373
  1. <div align="center">
  2. <a href="https://demo.ragflow.io/">
  3. <img src="web/src/assets/logo-with-text.png" width="520" alt="Logo ragflow">
  4. </a>
  5. </div>
  6. <p align="center">
  7. <a href="./README.md"><img alt="README in English" src="https://img.shields.io/badge/English-DFE0E5"></a>
  8. <a href="./README_zh.md"><img alt="简体中文版自述文件" src="https://img.shields.io/badge/简体中文-DFE0E5"></a>
  9. <a href="./README_tzh.md"><img alt="繁體中文版自述文件" src="https://img.shields.io/badge/繁體中文-DFE0E5"></a>
  10. <a href="./README_ja.md"><img alt="日本語のREADME" src="https://img.shields.io/badge/日本語-DFE0E5"></a>
  11. <a href="./README_ko.md"><img alt="한국어" src="https://img.shields.io/badge/한국어-DFE0E5"></a>
  12. <a href="./README_id.md"><img alt="Bahasa Indonesia" src="https://img.shields.io/badge/Bahasa Indonesia-DBEDFA"></a>
  13. <a href="./README_pt_br.md"><img alt="Português(Brasil)" src="https://img.shields.io/badge/Português(Brasil)-DFE0E5"></a>
  14. </p>
  15. <p align="center">
  16. <a href="https://x.com/intent/follow?screen_name=infiniflowai" target="_blank">
  17. <img src="https://img.shields.io/twitter/follow/infiniflow?logo=X&color=%20%23f5f5f5" alt="Ikuti di X (Twitter)">
  18. </a>
  19. <a href="https://demo.ragflow.io" target="_blank">
  20. <img alt="Lencana Daring" src="https://img.shields.io/badge/Online-Demo-4e6b99">
  21. </a>
  22. <a href="https://hub.docker.com/r/infiniflow/ragflow" target="_blank">
  23. <img src="https://img.shields.io/docker/pulls/infiniflow/ragflow?label=Docker%20Pulls&color=0db7ed&logo=docker&logoColor=white&style=flat-square" alt="docker pull infiniflow/ragflow:v0.20.1">
  24. </a>
  25. <a href="https://github.com/infiniflow/ragflow/releases/latest">
  26. <img src="https://img.shields.io/github/v/release/infiniflow/ragflow?color=blue&label=Rilis%20Terbaru" alt="Rilis Terbaru">
  27. </a>
  28. <a href="https://github.com/infiniflow/ragflow/blob/main/LICENSE">
  29. <img height="21" src="https://img.shields.io/badge/Lisensi-Apache--2.0-ffffff?labelColor=d4eaf7&color=2e6cc4" alt="Lisensi">
  30. </a>
  31. <a href="https://deepwiki.com/infiniflow/ragflow">
  32. <img alt="Ask DeepWiki" src="https://deepwiki.com/badge.svg">
  33. </a>
  34. </p>
  35. <h4 align="center">
  36. <a href="https://ragflow.io/docs/dev/">Dokumentasi</a> |
  37. <a href="https://github.com/infiniflow/ragflow/issues/4214">Peta Jalan</a> |
  38. <a href="https://twitter.com/infiniflowai">Twitter</a> |
  39. <a href="https://discord.gg/NjYzJD3GM3">Discord</a> |
  40. <a href="https://demo.ragflow.io">Demo</a>
  41. </h4>
  42. #
  43. <details open>
  44. <summary><b>📕 Daftar Isi </b> </summary>
  45. - 💡 [Apa Itu RAGFlow?](#-apa-itu-ragflow)
  46. - 🎮 [Demo](#-demo)
  47. - 📌 [Pembaruan Terbaru](#-pembaruan-terbaru)
  48. - 🌟 [Fitur Utama](#-fitur-utama)
  49. - 🔎 [Arsitektur Sistem](#-arsitektur-sistem)
  50. - 🎬 [Mulai](#-mulai)
  51. - 🔧 [Konfigurasi](#-konfigurasi)
  52. - 🔧 [Membangun Image Docker tanpa Model Embedding](#-membangun-image-docker-tanpa-model-embedding)
  53. - 🔧 [Membangun Image Docker dengan Model Embedding](#-membangun-image-docker-dengan-model-embedding)
  54. - 🔨 [Meluncurkan aplikasi dari Sumber untuk Pengembangan](#-meluncurkan-aplikasi-dari-sumber-untuk-pengembangan)
  55. - 📚 [Dokumentasi](#-dokumentasi)
  56. - 📜 [Peta Jalan](#-peta-jalan)
  57. - 🏄 [Komunitas](#-komunitas)
  58. - 🙌 [Kontribusi](#-kontribusi)
  59. </details>
  60. ## 💡 Apa Itu RAGFlow?
  61. [RAGFlow](https://ragflow.io/) adalah mesin RAG (Retrieval-Augmented Generation) open-source berbasis pemahaman dokumen yang mendalam. Platform ini menyediakan alur kerja RAG yang efisien untuk bisnis dengan berbagai skala, menggabungkan LLM (Large Language Models) untuk menyediakan kemampuan tanya-jawab yang benar dan didukung oleh referensi dari data terstruktur kompleks.
  62. ## 🎮 Demo
  63. Coba demo kami di [https://demo.ragflow.io](https://demo.ragflow.io).
  64. <div align="center" style="margin-top:20px;margin-bottom:20px;">
  65. <img src="https://raw.githubusercontent.com/infiniflow/ragflow-docs/refs/heads/image/image/chunking.gif" width="1200"/>
  66. <img src="https://raw.githubusercontent.com/infiniflow/ragflow-docs/refs/heads/image/image/agentic-dark.gif" width="1200"/>
  67. </div>
  68. ## 🔥 Pembaruan Terbaru
  69. - 2025-08-08 Mendukung model seri GPT-5 terbaru dari OpenAI.
  70. - 2025-08-04 Mendukung model baru, termasuk Kimi K2 dan Grok 4.
  71. - 2025-08-01 Mendukung alur kerja agen dan MCP.
  72. - 2025-05-23 Menambahkan komponen pelaksana kode Python/JS ke Agen.
  73. - 2025-05-05 Mendukung kueri lintas bahasa.
  74. - 2025-03-19 Mendukung penggunaan model multi-modal untuk memahami gambar di dalam file PDF atau DOCX.
  75. - 2025-02-28 dikombinasikan dengan pencarian Internet (TAVILY), mendukung penelitian mendalam untuk LLM apa pun.
  76. - 2024-12-18 Meningkatkan model Analisis Tata Letak Dokumen di DeepDoc.
  77. - 2024-08-22 Dukungan untuk teks ke pernyataan SQL melalui RAG.
  78. ## 🎉 Tetap Terkini
  79. ⭐️ Star repositori kami untuk tetap mendapat informasi tentang fitur baru dan peningkatan menarik! 🌟
  80. <div align="center" style="margin-top:20px;margin-bottom:20px;">
  81. <img src="https://github.com/user-attachments/assets/18c9707e-b8aa-4caf-a154-037089c105ba" width="1200"/>
  82. </div>
  83. ## 🌟 Fitur Utama
  84. ### 🍭 **"Kualitas Masuk, Kualitas Keluar"**
  85. - Ekstraksi pengetahuan berbasis pemahaman dokumen mendalam dari data tidak terstruktur dengan format yang rumit.
  86. - Menemukan "jarum di tumpukan data" dengan token yang hampir tidak terbatas.
  87. ### 🍱 **Pemotongan Berbasis Template**
  88. - Cerdas dan dapat dijelaskan.
  89. - Banyak pilihan template yang tersedia.
  90. ### 🌱 **Referensi yang Didasarkan pada Data untuk Mengurangi Hallusinasi**
  91. - Visualisasi pemotongan teks memungkinkan intervensi manusia.
  92. - Tampilan cepat referensi kunci dan referensi yang dapat dilacak untuk mendukung jawaban yang didasarkan pada fakta.
  93. ### 🍔 **Kompatibilitas dengan Sumber Data Heterogen**
  94. - Mendukung Word, slide, excel, txt, gambar, salinan hasil scan, data terstruktur, halaman web, dan banyak lagi.
  95. ### 🛀 **Alur Kerja RAG yang Otomatis dan Mudah**
  96. - Orkestrasi RAG yang ramping untuk bisnis kecil dan besar.
  97. - LLM yang dapat dikonfigurasi serta model embedding.
  98. - Peringkat ulang berpasangan dengan beberapa pengambilan ulang.
  99. - API intuitif untuk integrasi yang mudah dengan bisnis.
  100. ## 🔎 Arsitektur Sistem
  101. <div align="center" style="margin-top:20px;margin-bottom:20px;">
  102. <img src="https://github.com/infiniflow/ragflow/assets/12318111/d6ac5664-c237-4200-a7c2-a4a00691b485" width="1000"/>
  103. </div>
  104. ## 🎬 Mulai
  105. ### 📝 Prasyarat
  106. - CPU >= 4 inti
  107. - RAM >= 16 GB
  108. - Disk >= 50 GB
  109. - Docker >= 24.0.0 & Docker Compose >= v2.26.1
  110. - [gVisor](https://gvisor.dev/docs/user_guide/install/): Hanya diperlukan jika Anda ingin menggunakan fitur eksekutor kode (sandbox) dari RAGFlow.
  111. > [!TIP]
  112. > Jika Anda belum menginstal Docker di komputer lokal Anda (Windows, Mac, atau Linux), lihat [Install Docker Engine](https://docs.docker.com/engine/install/).
  113. ### 🚀 Menjalankan Server
  114. 1. Pastikan `vm.max_map_count` >= 262144:
  115. > Untuk memeriksa nilai `vm.max_map_count`:
  116. >
  117. > ```bash
  118. > $ sysctl vm.max_map_count
  119. > ```
  120. >
  121. > Jika nilainya kurang dari 262144, setel ulang `vm.max_map_count` ke setidaknya 262144:
  122. >
  123. > ```bash
  124. > # Dalam contoh ini, kita atur menjadi 262144:
  125. > $ sudo sysctl -w vm.max_map_count=262144
  126. > ```
  127. >
  128. > Perubahan ini akan hilang setelah sistem direboot. Untuk membuat perubahan ini permanen, tambahkan atau perbarui nilai
  129. > `vm.max_map_count` di **/etc/sysctl.conf**:
  130. >
  131. > ```bash
  132. > vm.max_map_count=262144
  133. > ```
  134. 2. Clone repositori:
  135. ```bash
  136. $ git clone https://github.com/infiniflow/ragflow.git
  137. ```
  138. 3. Bangun image Docker pre-built dan jalankan server:
  139. > [!CAUTION]
  140. > Semua gambar Docker dibangun untuk platform x86. Saat ini, kami tidak menawarkan gambar Docker untuk ARM64.
  141. > Jika Anda menggunakan platform ARM64, [silakan gunakan panduan ini untuk membangun gambar Docker yang kompatibel dengan sistem Anda](https://ragflow.io/docs/dev/build_docker_image).
  142. > Perintah di bawah ini mengunduh edisi v0.20.1-slim dari gambar Docker RAGFlow. Silakan merujuk ke tabel berikut untuk deskripsi berbagai edisi RAGFlow. Untuk mengunduh edisi RAGFlow yang berbeda dari v0.20.1-slim, perbarui variabel RAGFLOW_IMAGE di docker/.env sebelum menggunakan docker compose untuk memulai server. Misalnya, atur RAGFLOW_IMAGE=infiniflow/ragflow:v0.20.1 untuk edisi lengkap v0.20.1.
  143. ```bash
  144. $ cd ragflow/docker
  145. # Use CPU for embedding and DeepDoc tasks:
  146. $ docker compose -f docker-compose.yml up -d
  147. # To use GPU to accelerate embedding and DeepDoc tasks:
  148. # docker compose -f docker-compose-gpu.yml up -d
  149. ```
  150. | RAGFlow image tag | Image size (GB) | Has embedding models? | Stable? |
  151. | ----------------- | --------------- | --------------------- | ------------------------ |
  152. | v0.20.1 | &approx;9 | :heavy_check_mark: | Stable release |
  153. | v0.20.1-slim | &approx;2 | ❌ | Stable release |
  154. | nightly | &approx;9 | :heavy_check_mark: | _Unstable_ nightly build |
  155. | nightly-slim | &approx;2 | ❌ | _Unstable_ nightly build |
  156. 1. Periksa status server setelah server aktif dan berjalan:
  157. ```bash
  158. $ docker logs -f ragflow-server
  159. ```
  160. _Output berikut menandakan bahwa sistem berhasil diluncurkan:_
  161. ```bash
  162. ____ ___ ______ ______ __
  163. / __ \ / | / ____// ____// /____ _ __
  164. / /_/ // /| | / / __ / /_ / // __ \| | /| / /
  165. / _, _// ___ |/ /_/ // __/ / // /_/ /| |/ |/ /
  166. /_/ |_|/_/ |_|\____//_/ /_/ \____/ |__/|__/
  167. * Running on all addresses (0.0.0.0)
  168. ```
  169. > Jika Anda melewatkan langkah ini dan langsung login ke RAGFlow, browser Anda mungkin menampilkan error `network anormal`
  170. > karena RAGFlow mungkin belum sepenuhnya siap.
  171. 2. Buka browser web Anda, masukkan alamat IP server Anda, dan login ke RAGFlow.
  172. > Dengan pengaturan default, Anda hanya perlu memasukkan `http://IP_DEVICE_ANDA` (**tanpa** nomor port) karena
  173. > port HTTP default `80` bisa dihilangkan saat menggunakan konfigurasi default.
  174. 3. Dalam [service_conf.yaml.template](./docker/service_conf.yaml.template), pilih LLM factory yang diinginkan di `user_default_llm` dan perbarui
  175. bidang `API_KEY` dengan kunci API yang sesuai.
  176. > Lihat [llm_api_key_setup](https://ragflow.io/docs/dev/llm_api_key_setup) untuk informasi lebih lanjut.
  177. _Sistem telah siap digunakan!_
  178. ## 🔧 Konfigurasi
  179. Untuk konfigurasi sistem, Anda perlu mengelola file-file berikut:
  180. - [.env](./docker/.env): Menyimpan pengaturan dasar sistem, seperti `SVR_HTTP_PORT`, `MYSQL_PASSWORD`, dan
  181. `MINIO_PASSWORD`.
  182. - [service_conf.yaml.template](./docker/service_conf.yaml.template): Mengonfigurasi aplikasi backend.
  183. - [docker-compose.yml](./docker/docker-compose.yml): Sistem ini bergantung pada [docker-compose.yml](./docker/docker-compose.yml) untuk memulai.
  184. Untuk memperbarui port HTTP default (80), buka [docker-compose.yml](./docker/docker-compose.yml) dan ubah `80:80`
  185. menjadi `<YOUR_SERVING_PORT>:80`.
  186. Pembaruan konfigurasi ini memerlukan reboot semua kontainer agar efektif:
  187. > ```bash
  188. > $ docker compose -f docker-compose.yml up -d
  189. > ```
  190. ## 🔧 Membangun Docker Image tanpa Model Embedding
  191. Image ini berukuran sekitar 2 GB dan bergantung pada aplikasi LLM eksternal dan embedding.
  192. ```bash
  193. git clone https://github.com/infiniflow/ragflow.git
  194. cd ragflow/
  195. docker build --platform linux/amd64 --build-arg LIGHTEN=1 -f Dockerfile -t infiniflow/ragflow:nightly-slim .
  196. ```
  197. ## 🔧 Membangun Docker Image Termasuk Model Embedding
  198. Image ini berukuran sekitar 9 GB. Karena sudah termasuk model embedding, ia hanya bergantung pada aplikasi LLM eksternal.
  199. ```bash
  200. git clone https://github.com/infiniflow/ragflow.git
  201. cd ragflow/
  202. docker build --platform linux/amd64 -f Dockerfile -t infiniflow/ragflow:nightly .
  203. ```
  204. ## 🔨 Menjalankan Aplikasi dari untuk Pengembangan
  205. 1. Instal uv, atau lewati langkah ini jika sudah terinstal:
  206. ```bash
  207. pipx install uv pre-commit
  208. ```
  209. 2. Clone kode sumber dan instal dependensi Python:
  210. ```bash
  211. git clone https://github.com/infiniflow/ragflow.git
  212. cd ragflow/
  213. uv sync --python 3.10 --all-extras # install RAGFlow dependent python modules
  214. uv run download_deps.py
  215. pre-commit install
  216. ```
  217. 3. Jalankan aplikasi yang diperlukan (MinIO, Elasticsearch, Redis, dan MySQL) menggunakan Docker Compose:
  218. ```bash
  219. docker compose -f docker/docker-compose-base.yml up -d
  220. ```
  221. Tambahkan baris berikut ke `/etc/hosts` untuk memetakan semua host yang ditentukan di **conf/service_conf.yaml** ke `127.0.0.1`:
  222. ```
  223. 127.0.0.1 es01 infinity mysql minio redis sandbox-executor-manager
  224. ```
  225. 4. Jika Anda tidak dapat mengakses HuggingFace, atur variabel lingkungan `HF_ENDPOINT` untuk menggunakan situs mirror:
  226. ```bash
  227. export HF_ENDPOINT=https://hf-mirror.com
  228. ```
  229. 5. Jika sistem operasi Anda tidak memiliki jemalloc, instal sebagai berikut:
  230. ```bash
  231. # ubuntu
  232. sudo apt-get install libjemalloc-dev
  233. # centos
  234. sudo yum install jemalloc
  235. ```
  236. 6. Jalankan aplikasi backend:
  237. ```bash
  238. source .venv/bin/activate
  239. export PYTHONPATH=$(pwd)
  240. bash docker/launch_backend_service.sh
  241. ```
  242. 7. Instal dependensi frontend:
  243. ```bash
  244. cd web
  245. npm install
  246. ```
  247. 8. Jalankan aplikasi frontend:
  248. ```bash
  249. npm run dev
  250. ```
  251. _Output berikut menandakan bahwa sistem berhasil diluncurkan:_
  252. ![](https://github.com/user-attachments/assets/0daf462c-a24d-4496-a66f-92533534e187)
  253. 9. Hentikan layanan front-end dan back-end RAGFlow setelah pengembangan selesai:
  254. ```bash
  255. pkill -f "ragflow_server.py|task_executor.py"
  256. ```
  257. ## 📚 Dokumentasi
  258. - [Quickstart](https://ragflow.io/docs/dev/)
  259. - [Configuration](https://ragflow.io/docs/dev/configurations)
  260. - [Release notes](https://ragflow.io/docs/dev/release_notes)
  261. - [User guides](https://ragflow.io/docs/dev/category/guides)
  262. - [Developer guides](https://ragflow.io/docs/dev/category/developers)
  263. - [References](https://ragflow.io/docs/dev/category/references)
  264. - [FAQs](https://ragflow.io/docs/dev/faq)
  265. ## 📜 Roadmap
  266. Lihat [Roadmap RAGFlow 2025](https://github.com/infiniflow/ragflow/issues/4214)
  267. ## 🏄 Komunitas
  268. - [Discord](https://discord.gg/NjYzJD3GM3)
  269. - [Twitter](https://twitter.com/infiniflowai)
  270. - [GitHub Discussions](https://github.com/orgs/infiniflow/discussions)
  271. ## 🙌 Kontribusi
  272. RAGFlow berkembang melalui kolaborasi open-source. Dalam semangat ini, kami menerima kontribusi dari komunitas.
  273. Jika Anda ingin berpartisipasi, tinjau terlebih dahulu [Panduan Kontribusi](https://ragflow.io/docs/dev/contributing).