Commit
·
0ffc540
1
Parent(s):
e63ca79
Update README.md
Browse files
README.md
CHANGED
@@ -14,19 +14,10 @@ tags:
|
|
14 |
- preference model
|
15 |
- RLHF
|
16 |
widget:
|
17 |
-
- text:
|
18 |
-
Por que a ética da IA é importante? [SEP] Quem se importa com a ética da IA?
|
19 |
-
É apenas um monte de reclamações sobre os humanos que criam e usam IA e
|
20 |
-
reclamam do que as máquinas fazem.
|
21 |
example_title: Resposta Ruim
|
22 |
-
- text:
|
23 |
-
|
24 |
-
aprofunda nas intrincadas considerações éticas que surgem com relação aos
|
25 |
-
sistemas de IA. Isso inclui o papel da humanidade na criação e implantação
|
26 |
-
desses sistemas, bem como a conduta das próprias máquinas. Em termos gerais,
|
27 |
-
a ética da IA pode ser dividida em duas categorias principais: preocupações
|
28 |
-
com a moralidade das ações humanas em relação à criação e ao uso da IA e
|
29 |
-
preocupações com as implicações morais do comportamento da máquina.
|
30 |
example_title: Resposta Boa
|
31 |
---
|
32 |
# RewardModel (Portuguese)
|
@@ -34,9 +25,6 @@ widget:
|
|
34 |
The `RewardModelPT` is a [BERT](https://huggingface.co/neuralmind/bert-base-portuguese-cased) model that can be used to score the quality of a completion for a given prompt.
|
35 |
|
36 |
The model was trained with a dataset composed of `prompt`, `prefered_completions`, and `rejected_completions`.
|
37 |
-
|
38 |
-
These prompt + completions are samples of intruction datasets created via the [Self-Instruct](https://github.com/yizhongw/self-instruct) framework.
|
39 |
-
|
40 |
## Details
|
41 |
|
42 |
- **Size:** 109,038,209 parameters
|
@@ -50,24 +38,7 @@ These prompt + completions are samples of intruction datasets created via the [S
|
|
50 |
- **Emissions:** 0.23 KgCO2 (Singapore)
|
51 |
- **Total Energy Consumption:** 0.48 kWh
|
52 |
|
53 |
-
|
54 |
-
|---|---|---|---|
|
55 |
-
| 200 |0.079500|0.043422|0.986357|
|
56 |
-
| 400 |0.043400|0.035848|0.986955|
|
57 |
-
| 600 |0.037500|0.034161|0.987674|
|
58 |
-
| 800 |0.011200|0.039309|0.988511|
|
59 |
-
| 1000 |0.008900|0.043876|0.987793|
|
60 |
-
| 1200 |0.011700|0.041023|0.989588|
|
61 |
-
| 1400 |0.002800|0.055005|0.989588|
|
62 |
-
| 1600 |0.001400|0.054428|0.988990|
|
63 |
-
| 1800 |0.001100|0.053148|0.989588|
|
64 |
-
| 2000 |0.000200|0.058280|0.989469|
|
65 |
-
| 2200 |0.000200|0.054245|0.989708|
|
66 |
-
| 2400 |0.000200|0.058009|0.989588|
|
67 |
-
| 2600 |0.000200|0.059581|0.989349|
|
68 |
-
| 2800 |0.001100|0.057820|0.989110|
|
69 |
-
|
70 |
-
This repository has the notebook used to train this model.
|
71 |
|
72 |
## Usage
|
73 |
|
@@ -87,9 +58,9 @@ rewardModel.to(device)
|
|
87 |
|
88 |
# Define the question and response
|
89 |
prompt = "Por que a ética da IA é importante?"
|
90 |
-
response_good = "O campo da ética da IA se aprofunda nas intrincadas considerações éticas que surgem com relação aos sistemas de IA. Isso inclui o papel da humanidade na criação e implantação desses sistemas, bem como a conduta das próprias máquinas. Em termos gerais, a ética da IA pode ser dividida em duas categorias principais: preocupações com a moralidade das ações humanas em relação à criação e ao uso da IA e preocupações com as implicações morais do comportamento da máquina."
|
91 |
-
response_bad = "Quem se importa com a ética da IA? É apenas um monte de reclamações sobre os humanos que criam e usam IA e reclamam do que as máquinas fazem."
|
92 |
|
|
|
|
|
93 |
|
94 |
# Tokenize the question and response
|
95 |
tokens_good = tokenizer(prompt, response_good,
|
@@ -122,8 +93,27 @@ This will output the following:
|
|
122 |
```markdown
|
123 |
>>> Question: Por que a ética da IA é importante?
|
124 |
|
125 |
-
>>>Response 1:
|
126 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
127 |
```
|
128 |
|
129 |
## License
|
|
|
14 |
- preference model
|
15 |
- RLHF
|
16 |
widget:
|
17 |
+
- text: "Por que a ética em IA é importante? [SEP] Quem se importa com a ética da IA? É apenas um monte de reclamações sobre o fato de os humanos criarem e usarem IA e reclamarem do que as máquinas fazem."
|
|
|
|
|
|
|
18 |
example_title: Resposta Ruim
|
19 |
+
- text: "A ética da IA é importante por vários motivos convincentes:\n\n1.**Impacto social**: As tecnologias de IA estão se tornando cada vez mais integradas a vários aspectos da sociedade, afetando tudo, desde saúde e educação até finanças e aplicação da lei. Considerações éticas garantem que os sistemas de IA contribuam positivamente para a sociedade e minimizem os possíveis danos.\n\n2. **Vieses e justiça**: Os sistemas de IA podem herdar vieses presentes nos dados em que são treinados, levando a resultados injustos ou discriminatórios. Considerações éticas pressionam pelo desenvolvimento de algoritmos imparciais que tratem todos os indivíduos de forma justa, independentemente de seu histórico.\n\n3. **Transparência e responsabilidade**: Muitos sistemas de IA operam como caixas pretas, dificultando a compreensão de como chegam às suas decisões. As diretrizes éticas enfatizam a importância da transparência, permitindo que os usuários compreendam a lógica por trás dos resultados gerados pela IA e responsabilizando os desenvolvedores por quaisquer consequências negativas.\n\nEm resumo, a ética da IA é vital para garantir que a inteligência artificial beneficie a sociedade, respeitando os direitos humanos fundamentais, a justiça, a transparência, a responsabilidade e o bem-estar da humanidade em longo prazo. Ela ajuda a enfrentar os desafios impostos pelo rápido avanço das tecnologias de IA e orienta seu desenvolvimento de forma a se alinhar com nossos valores compartilhados."
|
20 |
+
|
|
|
|
|
|
|
|
|
|
|
|
|
21 |
example_title: Resposta Boa
|
22 |
---
|
23 |
# RewardModel (Portuguese)
|
|
|
25 |
The `RewardModelPT` is a [BERT](https://huggingface.co/neuralmind/bert-base-portuguese-cased) model that can be used to score the quality of a completion for a given prompt.
|
26 |
|
27 |
The model was trained with a dataset composed of `prompt`, `prefered_completions`, and `rejected_completions`.
|
|
|
|
|
|
|
28 |
## Details
|
29 |
|
30 |
- **Size:** 109,038,209 parameters
|
|
|
38 |
- **Emissions:** 0.23 KgCO2 (Singapore)
|
39 |
- **Total Energy Consumption:** 0.48 kWh
|
40 |
|
41 |
+
This repository has the [notebook](ToxicityModel.ipynb) used to train this model.
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
42 |
|
43 |
## Usage
|
44 |
|
|
|
58 |
|
59 |
# Define the question and response
|
60 |
prompt = "Por que a ética da IA é importante?"
|
|
|
|
|
61 |
|
62 |
+
response_good = "A ética da IA é importante por vários motivos convincentes:\n\n1.**Impacto social**: As tecnologias de IA estão se tornando cada vez mais integradas a vários aspectos da sociedade, afetando tudo, desde saúde e educação até finanças e aplicação da lei. Considerações éticas garantem que os sistemas de IA contribuam positivamente para a sociedade e minimizem os possíveis danos.\n\n2. **Vieses e justiça**: Os sistemas de IA podem herdar vieses presentes nos dados em que são treinados, levando a resultados injustos ou discriminatórios. Considerações éticas pressionam pelo desenvolvimento de algoritmos imparciais que tratem todos os indivíduos de forma justa, independentemente de seu histórico.\n\n3. **Transparência e responsabilidade**: Muitos sistemas de IA operam como caixas pretas, dificultando a compreensão de como chegam às suas decisões. As diretrizes éticas enfatizam a importância da transparência, permitindo que os usuários compreendam a lógica por trás dos resultados gerados pela IA e responsabilizando os desenvolvedores por quaisquer consequências negativas.\n\nEm resumo, a ética da IA é vital para garantir que a inteligência artificial beneficie a sociedade, respeitando os direitos humanos fundamentais, a justiça, a transparência, a responsabilidade e o bem-estar da humanidade em longo prazo. Ela ajuda a enfrentar os desafios impostos pelo rápido avanço das tecnologias de IA e orienta seu desenvolvimento de forma a se alinhar com nossos valores compartilhados."
|
63 |
+
response_bad = "Por que a ética em IA é importante? [SEP] Quem se importa com a ética da IA? É apenas um monte de reclamações sobre o fato de os humanos criarem e usarem IA e reclamarem do que as máquinas fazem."
|
64 |
|
65 |
# Tokenize the question and response
|
66 |
tokens_good = tokenizer(prompt, response_good,
|
|
|
93 |
```markdown
|
94 |
>>> Question: Por que a ética da IA é importante?
|
95 |
|
96 |
+
>>>Response 1: A ética da IA é importante por vários motivos convincentes:
|
97 |
+
|
98 |
+
1.**Impacto social**: As tecnologias de IA estão se tornando cada vez mais integradas a vários aspectos da sociedade, afetando tudo,
|
99 |
+
desde saúde e educação até finanças e aplicação da lei. Considerações éticas garantem que os sistemas de IA contribuam positivamente
|
100 |
+
para a sociedade e minimizem os possíveis danos.
|
101 |
+
|
102 |
+
2. **Vieses e justiça**: Os sistemas de IA podem herdar vieses presentes nos dados em que são treinados, levando a resultados
|
103 |
+
injustos ou discriminatórios. Considerações éticas pressionam pelo desenvolvimento de algoritmos imparciais que tratem todos os
|
104 |
+
indivíduos de forma justa, independentemente de seu histórico.
|
105 |
+
|
106 |
+
3. **Transparência e responsabilidade**: Muitos sistemas de IA operam como caixas pretas, dificultando a compreensão de como
|
107 |
+
chegam às suas decisões. As diretrizes éticas enfatizam a importância da transparência, permitindo que os usuários compreendam
|
108 |
+
a lógica por trás dos resultados gerados pela IA e responsabilizando os desenvolvedores por quaisquer consequências negativas.
|
109 |
+
|
110 |
+
Em resumo, a ética da IA é vital para garantir que a inteligência artificial beneficie a sociedade, respeitando os direitos humanos
|
111 |
+
fundamentais, a justiça, a transparência, a responsabilidade e o bem-estar da humanidade em longo prazo. Ela ajuda a enfrentar os
|
112 |
+
desafios impostos pelo rápido avanço das tecnologias de IA e orienta seu desenvolvimento de forma a se alinhar com nossos valores
|
113 |
+
compartilhados. Score: 10.622
|
114 |
+
|
115 |
+
>>>Response 2: Quem se importa com a ética da IA? É apenas um monte de reclamações sobre os humanos que criam e usam
|
116 |
+
IA e reclamam do que as máquinas fazem. Score: -11.609
|
117 |
```
|
118 |
|
119 |
## License
|