update requirements.txt

transformers==4.46.1
tokenizers>=0.19.0 버전 업그레이드
이미 open llm leaderboard는 업그레이드되어 최신 모델 및 토크나이저 반영되고 있는데 open ko llm 은 아직 반영 않되고 있습니다.

requirements.txt

@@ -10,8 +10,8 @@ plotly==5.14.1
 python-dateutil==2.8.2
 sentencepiece
 tqdm==4.65.0
-transformers==4.43.1
-tokenizers>=0.15.0
+transformers==4.46.1
+tokenizers>=0.19.0
 gradio-space-ci @ git+https://huggingface.co/spaces/Wauplin/gradio-space-ci@0.2.3 # CI !!!
 isort
 ruff