Переглянути джерело

Fix: limit the depth of DFS (#6101)

### What problem does this PR solve?

#6085

### Type of change

- [x] Bug Fix (non-breaking change which fixes an issue)
tags/v0.18.0
Kevin Hu 7 місяці тому
джерело
коміт
485bc7d7d6
Аккаунт користувача з таким Email не знайдено
1 змінених файлів з 2 додано та 0 видалено
  1. 2
    0
      rag/nlp/rag_tokenizer.py

+ 2
- 0
rag/nlp/rag_tokenizer.py Переглянути файл

@@ -118,6 +118,8 @@ class RagTokenizer:

def dfs_(self, chars, s, preTks, tkslist):
res = s
if len(tkslist) >= 2048:
return res
# if s > MAX_L or s>= len(chars):
if s >= len(chars):
tkslist.append(preTks)

Завантаження…
Відмінити
Зберегти