Update README.md

README.md

@@ -17,3 +17,14 @@ widget:
 
 Модель для генерации русских текстов по вселенной Warhammer40k (от ереси Хоруса до свежих книг)
 
+
+## Для пользователей text-generation-webui
+В инструменте поломана работа с GPT-2, GPTJ, GPT-NEO и аналогичными модлями, неверно загружается токенизер.
+Ошибка такая:<br>
+>eos_token_id = eos_token_id[0]
+>IndexError: list index out of range
+
+Исправляется легко, в файл modules/models.py в функцию load_tokenizer() надо добавить строчку<br>
+<code>tokenizer.eos_token_id = 2</code><br>
+перед<br>
+<code>return tokenizer</code>