Update app.py
Browse files
app.py
CHANGED
@@ -97,13 +97,12 @@ with open('merges.pkl', 'rb') as files:
|
|
97 |
tokenizer.merges = pickle.load(files)
|
98 |
|
99 |
def inference(text):
|
100 |
-
print(len(temp.encode(text)) / len(tokenizer.encode(text)))
|
101 |
return tokenizer.encode(text)
|
102 |
|
103 |
iface = gr.Interface(
|
104 |
-
inference,
|
105 |
-
inputs =
|
106 |
-
outputs
|
107 |
examples=["سفید رنگ ہیں آخر سیاہ مو کرتے لٹاتے دولت دنیا کو میکدے میں ہم طلائی ساغر مے نقرئی سبو کرتے ہمیشہ میں نے گریباں کو چاک چاک کیا",
|
108 |
" دل کہ آتے ہیں جس کو دھیان بہت خود بھی آتا ہے اپنے دھیان میں کیاوہ ملے تو یہ پوچھنا ہے مجھےاب بھی ہوں میں تری امان میں کیا"],
|
109 |
title = title,
|
|
|
97 |
tokenizer.merges = pickle.load(files)
|
98 |
|
99 |
def inference(text):
|
|
|
100 |
return tokenizer.encode(text)
|
101 |
|
102 |
iface = gr.Interface(
|
103 |
+
inference,
|
104 |
+
inputs=gr.inputs.Textbox(lines=4, label="Enter Text"),
|
105 |
+
outputs=[gr.outputs.Textbox(label="Tokens"), gr.outputs.Textbox(label="compression ratio")]
|
106 |
examples=["سفید رنگ ہیں آخر سیاہ مو کرتے لٹاتے دولت دنیا کو میکدے میں ہم طلائی ساغر مے نقرئی سبو کرتے ہمیشہ میں نے گریباں کو چاک چاک کیا",
|
107 |
" دل کہ آتے ہیں جس کو دھیان بہت خود بھی آتا ہے اپنے دھیان میں کیاوہ ملے تو یہ پوچھنا ہے مجھےاب بھی ہوں میں تری امان میں کیا"],
|
108 |
title = title,
|