saiful9379
commited on
Commit
•
92ab51d
1
Parent(s):
234d0d0
update readme add git link option
Browse files
README.md
CHANGED
@@ -16,8 +16,9 @@ This Bangla Question Answering model has been using Robert Model architecture, w
|
|
16 |
However, a larger corpus model is in progress. To train this model, the Bangla QA data has been converted into the SQuAD v2 format as well as preprocessed it.
|
17 |
The dataset contains 2504 question-answer pairs.
|
18 |
|
19 |
-
|
20 |
|
|
|
21 |
from transformers import AutoModelForQuestionAnswering, AutoTokenizer
|
22 |
|
23 |
|
@@ -25,7 +26,13 @@ model_path = "saiful9379/Bangla_Robert_QA"
|
|
25 |
model = AutoModelForQuestionAnswering.from_pretrained(model_path)
|
26 |
tokenizer = AutoTokenizer.from_pretrained(model_path)
|
27 |
|
28 |
-
context = "বাংলাদেশ ও ভারতের অনেক বৃহৎ নদী পূর্ব থেকে পশ্চিমে প্রবাহিত হয়ে বঙ্গোপসাগরে পতিত হয়েছে।
|
|
|
|
|
|
|
|
|
|
|
|
|
29 |
question = "ব্রহ্মপুত্র নদের মোট দৈর্ঘ্য কত ?"
|
30 |
|
31 |
QA = pipeline('question-answering', model=model, tokenizer=tokenizer)
|
@@ -39,3 +46,17 @@ print(QA(QA_input))
|
|
39 |
```
|
40 |
{'score': 1.0, 'start': 297, 'end': 313, 'answer': '২,৯৪৮ কিলোমিটারব'}
|
41 |
```
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
16 |
However, a larger corpus model is in progress. To train this model, the Bangla QA data has been converted into the SQuAD v2 format as well as preprocessed it.
|
17 |
The dataset contains 2504 question-answer pairs.
|
18 |
|
19 |
+
Github Link: Not Yet Attached
|
20 |
|
21 |
+
```
|
22 |
from transformers import AutoModelForQuestionAnswering, AutoTokenizer
|
23 |
|
24 |
|
|
|
26 |
model = AutoModelForQuestionAnswering.from_pretrained(model_path)
|
27 |
tokenizer = AutoTokenizer.from_pretrained(model_path)
|
28 |
|
29 |
+
context = "বাংলাদেশ ও ভারতের অনেক বৃহৎ নদী পূর্ব থেকে পশ্চিমে প্রবাহিত হয়ে বঙ্গোপসাগরে পতিত হয়েছে।
|
30 |
+
তন্মধ্যে উত্তরদিক থেকে গঙ্গা, মেঘনা এবং ব্রহ্মপুত্র; দক্ষিণদিক থেকে মহানদী, গোদাবরী, কৃষ্ণা, ইরাবতী এবং কাবেরী নদী উল্লেখযোগ্য।
|
31 |
+
৬৪ কিলোমিটারব্যাপী (৪০ মাইল) কৌম নদী সবচেয়ে ছোট নদী হিসেবে সরু খাল দিয়ে এবং ২,৯৪৮ কিলোমিটারব্যাপী (১,৮৩২ মাইল)
|
32 |
+
বিশ্বের ২৮তম দীর্ঘ নদী হিসেবে ব্রহ্মপুত্র নদ বাংলাদেশ, চীন, নেপাল ও ভারতের মধ্য দিয়ে প্রবাহিত হয়ে বঙ্গোপসাগরে মিলিত হয়েছে।
|
33 |
+
সুন্দরবন ম্যানগ্রোভ বনাঞ্চল গঙ্গা, ব্রহ্মপুত্র ও মেঘনা নদীর ব-দ্বীপকে ঘিরে গঠিত হয়েছে। মায়ানমারের (সাবেক বার্মা) ইরাওয়াদি (সংস্কৃত ইরাবতী)
|
34 |
+
নদীও এ উপসাগরে মিলিত হয়েছে এবং একসময় গভীর ও ঘন ম্যানগ্রোভ বনাঞ্চলের সৃষ্টি করেছিল।"
|
35 |
+
|
36 |
question = "ব্রহ্মপুত্র নদের মোট দৈর্ঘ্য কত ?"
|
37 |
|
38 |
QA = pipeline('question-answering', model=model, tokenizer=tokenizer)
|
|
|
46 |
```
|
47 |
{'score': 1.0, 'start': 297, 'end': 313, 'answer': '২,৯৪৮ কিলোমিটারব'}
|
48 |
```
|
49 |
+
|
50 |
+
Dataset Information: Not Yet attached
|
51 |
+
|
52 |
+
Model Evaluation: Not Yet Attached
|
53 |
+
|
54 |
+
```
|
55 |
+
@misc{Bangla_Robert_QA ,
|
56 |
+
title={Transformer Based Bangla_Robert_QA},
|
57 |
+
author={Md Saiful Islam},
|
58 |
+
howpublished={},
|
59 |
+
year={2023}
|
60 |
+
}
|
61 |
+
```
|
62 |
+
|