egonrp's picture
ajustes
58c7b0a
|
raw
history blame
9.26 kB
metadata
license: mit
tags:
  - generated_from_trainer
model-index:
  - name: results_v4c_medium_no_eval
    results: []
datasets:
  - squad
  - squad_v1_pt
  - wikipedia
language:
  - pt
library_name: transformers
inference:
  parameters:
    do_sample: false
    max_new_tokens: 120
widget:
  - text: >-
      <|prompter|>A pandemia de COVID-19, também conhecida como pandemia de
      coronavírus, é uma pandemia em curso de COVID-19, uma doença respiratória
      aguda causada pelo coronavírus da síndrome respiratória aguda grave 2
      (SARS-CoV-2). A doença foi identificada pela primeira vez em Wuhan, na
      província de Hubei, República Popular da China, em 1 de dezembro de 2019,
      mas o primeiro caso foi reportado em 31 de dezembro do mesmo ano. Onde foi
      descoberta a Covid-19?<|assistant|>
  - text: >-
      <|prompter|>A pandemia de COVID-19, também conhecida como pandemia de
      coronavírus, é uma pandemia em curso de COVID-19, uma doença respiratória
      aguda causada pelo coronavírus da síndrome respiratória aguda grave 2
      (SARS-CoV-2). A doença foi identificada pela primeira vez em Wuhan, na
      província de Hubei, República Popular da China, em 1 de dezembro de 2019,
      mas o primeiro caso foi reportado em 31 de dezembro do mesmo ano. Onde a
      COVID-19 foi identificada pela primeira vez?<|assistant|>
  - text: >-
      <|prompter|>A pandemia de COVID-19, também conhecida como pandemia de
      coronavírus, é uma pandemia em curso de COVID-19, uma doença respiratória
      aguda causada pelo coronavírus da síndrome respiratória aguda grave 2
      (SARS-CoV-2). A doença foi identificada pela primeira vez em Wuhan, na
      província de Hubei, República Popular da China, em 1 de dezembro de 2019,
      mas o primeiro caso foi reportado em 31 de dezembro do mesmo ano. Quando a
      COVID-19 foi identificada pela primeira vez?<|assistant|>
  - text: >-
      <|prompter|>A pandemia de COVID-19, também conhecida como pandemia de
      coronavírus, é uma pandemia em curso de COVID-19, uma doença respiratória
      aguda causada pelo coronavírus da síndrome respiratória aguda grave 2
      (SARS-CoV-2). A doença foi identificada pela primeira vez em Wuhan, na
      província de Hubei, República Popular da China, em 1 de dezembro de 2019,
      mas o primeiro caso foi reportado em 31 de dezembro do mesmo ano. Quando a
      doença foi reportada pela primeira vez?<|assistant|>
  - text: >-
      <|prompter|>A pandemia de COVID-19, também conhecida como pandemia de
      coronavírus, é uma pandemia em curso de COVID-19, uma doença respiratória
      aguda causada pelo coronavírus da síndrome respiratória aguda grave 2
      (SARS-CoV-2). A doença foi identificada pela primeira vez em Wuhan, na
      província de Hubei, República Popular da China, em 1 de dezembro de 2019,
      mas o primeiro caso foi reportado em 31 de dezembro do mesmo ano. Quando
      foi reportado o primeiro caso de COVID-19?<|assistant|>
  - text: >-
      <|prompter|>A pandemia de COVID-19, também conhecida como pandemia de
      coronavírus, é uma pandemia em curso de COVID-19, uma doença respiratória
      aguda causada pelo coronavírus da síndrome respiratória aguda grave 2
      (SARS-CoV-2). A doença foi identificada pela primeira vez em Wuhan, na
      província de Hubei, República Popular da China, em 1 de dezembro de 2019,
      mas o primeiro caso foi reportado em 31 de dezembro do mesmo ano. Em que
      ano a doença foi identificada pela primeira vez?<|assistant|>
  - text: >-
      <|prompter|>Game of Thrones é uma série de TV produzida pelo canal de
      televisão a cabo HBO. É baseada na série de romances As Crônicas de Gelo e
      Fogo, escrita por George R.R. Martin, que é produtor, consultor criativo e
      roteirista da série de TV. David Benioff e D.B. Weiss criaram a série de
      TV e são produtores executivos, e escritores principais.A série consiste
      em oito temporadas totalmente transmitidas, compreendendo setenta e três
      episódios no total.A produção da série é baseada em Belfast, Irlanda do
      Norte, principalmente no Paint Hall Studios. É a maior e mais cara
      produção de televisão já montada na Irlanda do Norte. As filmagens da
      série também foram realizadas em Malta, Islândia, Croácia, Marrocos,
      Espanha e EUA. Quem foi o autor dos livros Game of Thrones?<|assistant|>
  - text: >-
      <|prompter|>Game of Thrones é uma série de TV produzida pelo canal de
      televisão a cabo HBO. É baseada na série de romances As Crônicas de Gelo e
      Fogo, escrita por George R.R. Martin, que é produtor, consultor criativo e
      roteirista da série de TV. David Benioff e D.B. Weiss criaram a série de
      TV e são produtores executivos, e escritores principais.A série consiste
      em oito temporadas totalmente transmitidas, compreendendo setenta e três
      episódios no total.A produção da série é baseada em Belfast, Irlanda do
      Norte, principalmente no Paint Hall Studios. É a maior e mais cara
      produção de televisão já montada na Irlanda do Norte. As filmagens da
      série também foram realizadas em Malta, Islândia, Croácia, Marrocos,
      Espanha e EUA. Quem foi o escritor dos livros Game of
      Thrones?<|assistant|>
  - text: >-
      <|prompter|>Game of Thrones é uma série de TV produzida pelo canal de
      televisão a cabo HBO. É baseada na série de romances As Crônicas de Gelo e
      Fogo, escrita por George R.R. Martin, que é produtor, consultor criativo e
      roteirista da série de TV. David Benioff e D.B. Weiss criaram a série de
      TV e são produtores executivos, e escritores principais.A série consiste
      em oito temporadas totalmente transmitidas, compreendendo setenta e três
      episódios no total.A produção da série é baseada em Belfast, Irlanda do
      Norte, principalmente no Paint Hall Studios. É a maior e mais cara
      produção de televisão já montada na Irlanda do Norte. As filmagens da
      série também foram realizadas em Malta, Islândia, Croácia, Marrocos,
      Espanha e EUA. Quem são os produtores executivos da série de TV Game of
      Thrones?<|assistant|>
  - text: >-
      <|prompter|>Game of Thrones é uma série de TV produzida pelo canal de
      televisão a cabo HBO. É baseada na série de romances As Crônicas de Gelo e
      Fogo, escrita por George R.R. Martin, que é produtor, consultor criativo e
      roteirista da série de TV. David Benioff e D.B. Weiss criaram a série de
      TV e são produtores executivos, e escritores principais.A série consiste
      em oito temporadas totalmente transmitidas, compreendendo setenta e três
      episódios no total.A produção da série é baseada em Belfast, Irlanda do
      Norte, principalmente no Paint Hall Studios. É a maior e mais cara
      produção de televisão já montada na Irlanda do Norte. As filmagens da
      série também foram realizadas em Malta, Islândia, Croácia, Marrocos,
      Espanha e EUA. Onde foram realizadas as filmagens da série Game of
      Thrones?<|assistant|>
  - text: >-
      <|prompter|>O sistema de bibliotecas da universidade é dividido entre a
      biblioteca principal e cada uma das faculdades e escolas. O edifício
      principal é a Biblioteca Theodore M. Hesburgh, de 14 andares, concluída em
      1963, que é o terceiro edifício a abrigar a principal coleção de livros. A
      frente da biblioteca é decorada com o mural da Palavra da Vida, projetado
      pelo artista Millard Sheets. Este mural é conhecido popularmente como
      "Touchdown Jesus" devido à sua proximidade com o Estádio Notre Dame e os
      braços de Jesus aparecendo para sinalizar um touchdown. Quantos andares
      possui a Biblioteca Theodore M. Hesburgh?<|assistant|>
  - text: >-
      <|prompter|>O sistema de bibliotecas da universidade é dividido entre a
      biblioteca principal e cada uma das faculdades e escolas. O edifício
      principal é a Biblioteca Theodore M. Hesburgh, de 14 andares, concluída em
      1963, que é o terceiro edifício a abrigar a principal coleção de livros. A
      frente da biblioteca é decorada com o mural da Palavra da Vida, projetado
      pelo artista Millard Sheets. Este mural é conhecido popularmente como
      "Touchdown Jesus" devido à sua proximidade com o Estádio Notre Dame e os
      braços de Jesus aparecendo para sinalizar um touchdown. Em que ano a
      Biblioteca Theodore M. Hesburgh em Notre Dame terminou?<|assistant|>
  - text: >-
      O sistema de bibliotecas da universidade é dividido entre a biblioteca
      principal
  - text: Game of Thrones é

gpt2-medium-wikiwriter-squadv11-portuguese

This model is a fine-tuned version of egonrp/gpt2-wikiwriter-medium-portuguese on wiki_pt_br and squad_v1.1_pt_br datasets.

** It's a chatbot experiment. ;)

The model was trained in 12 hours on a RTX 3060 12GB.

Model description

More information needed

Intended uses & limitations

More information needed

Training and evaluation data

More information needed

Training procedure

Training hyperparameters

The following hyperparameters were used during training:

  • learning_rate: 5e-05
  • train_batch_size: 1
  • eval_batch_size: 8
  • seed: 42
  • optimizer: Adam with betas=(0.9,0.999) and epsilon=1e-08
  • lr_scheduler_type: linear
  • num_epochs: 3.0
  • mixed_precision_training: Native AMP

Training results

Framework versions

  • Transformers 4.26.1
  • Pytorch 2.0.0+cu117
  • Datasets 2.10.1
  • Tokenizers 0.13.2