luccazen commited on
Commit
e124e92
1 Parent(s): df6d15b

Create README.md

Browse files
Files changed (1) hide show
  1. README.md +36 -0
README.md ADDED
@@ -0,0 +1,36 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ Usage
2
+
3
+ ```
4
+ from peft import PeftModel
5
+ from transformers import AutoModelForCausalLM, AutoTokenizer, GenerationConfig
6
+
7
+ model = AutoModelForCausalLM.from_pretrained(
8
+ "tiiuae/falcon-7b",
9
+ load_in_8bit=True,
10
+ trust_remote_code=True,
11
+ )
12
+
13
+ tokenizer = AutoTokenizer.from_pretrained(
14
+ "tiiuae/falcon-7b",
15
+ )
16
+
17
+ model = PeftModel.from_pretrained(model, "/content/drive/MyDrive/ML/falcon/lora-falcao")
18
+
19
+ ```
20
+
21
+
22
+ Data
23
+ From https://huggingface.co/22h/cabrita-lora-v0-1
24
+
25
+
26
+ Example outputs
27
+ Stanford Alpaca:
28
+
29
+ Instruction: Invente uma desculpa criativa pra dizer que não preciso ir à festa.
30
+ Response: Eu preciso se concentrar em trabalho importante para mim, por isso eu não posso ir à festa.
31
+
32
+ Falcon PT:
33
+
34
+ Instrução: Invente uma desculpa criativa pra dizer que não preciso ir à festa.
35
+ Resposta: "Eu preciso ficar em casa para cuidar dos meus animais de estimação."
36
+