Upload tokenizer

README.md

@@ -1,17 +1,26 @@
 ---
-license: bigscience-bloom-rail-1.0
+base_model: bigscience/bloom-1b7
 library_name: transformers
+license: bigscience-bloom-rail-1.0
+pipeline_tag: text-generation
 tags:
 - bloom
 - Text Generation
 - Farsi
-base_model: bigscience/bloom-1b7
-pipeline_tag: text-generation
+widget:
+- text: 'summarize this article: به گزارش خبرنگار مهر، محمدعلی نیکبخت در جلسه علنی
+    امروز (سه‌شنبه) مجلس شورای اسلامی و در جریان ارائه گزارش از نحوه اجرای قانون خرید
+    تضمینی محصولات کشاورزی، اظهار کرد: در تأمین محصولات غذایی و امنیت غذایی کشور نیازمند
+    حمایت مجلس شورای اسلامی هستیم. وی متذکر شد: بنده کمتر از یک سال است که در وزارت
+    جهاد کشاورزی مشغول به کار شدم و به محض شروع به کار، با توجه به ظرفیت‌هایی که بخش
+    کشاورزی داشت، راهبردها و جهت‌گیری‌هایی را در وزارتخانه پیش گرفتیم تا بتوان از
+    تمام ظرفیت‌ها و پتانسیل‌ها به نحو احسن استفاده کرد. وزیر جهاد کشاورزی اظهار کرد:
+    راهبرد اول ما حداکثرسازی تولید با حفظ منابع بود. اگر بخواهیم نیاز غذایی کشور برای
+    جمعیت بزرگ ایران را تأمین کنیم باید از همه ظرفیت‌های تولید در حوزه کشاورزی استفاده
+    کنیم. Summarize: '
 model-index:
 - name: bigscience-bloom-1b7-finetune-Summarization-Persian-News
   results: []
-widget:
-- text: "summarize this article: به گزارش خبرنگار مهر، محمدعلی نیکبخت در جلسه علنی امروز (سه‌شنبه) مجلس شورای اسلامی و در جریان ارائه گزارش از نحوه اجرای قانون خرید تضمینی محصولات کشاورزی، اظهار کرد: در تأمین محصولات غذایی و امنیت غذایی کشور نیازمند حمایت مجلس شورای اسلامی هستیم. وی متذکر شد: بنده کمتر از یک سال است که در وزارت جهاد کشاورزی مشغول به کار شدم و به محض شروع به کار، با توجه به ظرفیت‌هایی که بخش کشاورزی داشت، راهبردها و جهت‌گیری‌هایی را در وزارتخانه پیش گرفتیم تا بتوان از تمام ظرفیت‌ها و پتانسیل‌ها به نحو احسن استفاده کرد. وزیر جهاد کشاورزی اظهار کرد: راهبرد اول ما حداکثرسازی تولید با حفظ منابع بود. اگر بخواهیم نیاز غذایی کشور برای جمعیت بزرگ ایران را تأمین کنیم باید از همه ظرفیت‌های تولید در حوزه کشاورزی استفاده کنیم. Summarize: "
 ---
 
 <!-- This model card has been generated automatically according to the information the Trainer had access to. You

special_tokens_map.json

@@ -1,30 +1,30 @@
-{
-  "bos_token": {
-    "content": "<s>",
-    "lstrip": false,
-    "normalized": false,
-    "rstrip": false,
-    "single_word": false
-  },
-  "eos_token": {
-    "content": "</s>",
-    "lstrip": false,
-    "normalized": false,
-    "rstrip": false,
-    "single_word": false
-  },
-  "pad_token": {
-    "content": "<pad>",
-    "lstrip": false,
-    "normalized": false,
-    "rstrip": false,
-    "single_word": false
-  },
-  "unk_token": {
-    "content": "<unk>",
-    "lstrip": false,
-    "normalized": false,
-    "rstrip": false,
-    "single_word": false
-  }
-}
+{
+  "bos_token": {
+    "content": "<s>",
+    "lstrip": false,
+    "normalized": false,
+    "rstrip": false,
+    "single_word": false
+  },
+  "eos_token": {
+    "content": "</s>",
+    "lstrip": false,
+    "normalized": false,
+    "rstrip": false,
+    "single_word": false
+  },
+  "pad_token": {
+    "content": "<pad>",
+    "lstrip": false,
+    "normalized": false,
+    "rstrip": false,
+    "single_word": false
+  },
+  "unk_token": {
+    "content": "<unk>",
+    "lstrip": false,
+    "normalized": false,
+    "rstrip": false,
+    "single_word": false
+  }
+}

tokenizer.json

@@ -1,3 +1,3 @@
 version https://git-lfs.github.com/spec/v1
-oid sha256:c15972849c91c78dfab27e2ef0eb53b17f95c4fe81be6664f7e85c6a7fffde0e
-size 14500499
+oid sha256:a2f169d3bd0f5e29d224aee6dce067b86cfae2459468c33c3ed212c012a586c0
+size 28025256

tokenizer_config.json

@@ -1,45 +1,45 @@
-{
-  "add_prefix_space": false,
-  "added_tokens_decoder": {
-    "0": {
-      "content": "<unk>",
-      "lstrip": false,
-      "normalized": false,
-      "rstrip": false,
-      "single_word": false,
-      "special": true
-    },
-    "1": {
-      "content": "<s>",
-      "lstrip": false,
-      "normalized": false,
-      "rstrip": false,
-      "single_word": false,
-      "special": true
-    },
-    "2": {
-      "content": "</s>",
-      "lstrip": false,
-      "normalized": false,
-      "rstrip": false,
-      "single_word": false,
-      "special": true
-    },
-    "3": {
-      "content": "<pad>",
-      "lstrip": false,
-      "normalized": false,
-      "rstrip": false,
-      "single_word": false,
-      "special": true
-    }
-  },
-  "bos_token": "<s>",
-  "clean_up_tokenization_spaces": false,
-  "eos_token": "</s>",
-  "model_max_length": 1000000000000000019884624838656,
-  "pad_token": "<pad>",
-  "padding_side": "left",
-  "tokenizer_class": "BloomTokenizer",
-  "unk_token": "<unk>"
-}
+{
+  "add_prefix_space": false,
+  "added_tokens_decoder": {
+    "0": {
+      "content": "<unk>",
+      "lstrip": false,
+      "normalized": false,
+      "rstrip": false,
+      "single_word": false,
+      "special": true
+    },
+    "1": {
+      "content": "<s>",
+      "lstrip": false,
+      "normalized": false,
+      "rstrip": false,
+      "single_word": false,
+      "special": true
+    },
+    "2": {
+      "content": "</s>",
+      "lstrip": false,
+      "normalized": false,
+      "rstrip": false,
+      "single_word": false,
+      "special": true
+    },
+    "3": {
+      "content": "<pad>",
+      "lstrip": false,
+      "normalized": false,
+      "rstrip": false,
+      "single_word": false,
+      "special": true
+    }
+  },
+  "bos_token": "<s>",
+  "clean_up_tokenization_spaces": false,
+  "eos_token": "</s>",
+  "model_max_length": 1000000000000000019884624838656,
+  "pad_token": "<pad>",
+  "padding_side": "left",
+  "tokenizer_class": "BloomTokenizer",
+  "unk_token": "<unk>"
+}