muhammadravi251001's picture
Upload results/evaluation with huggingface_hub
b635f13
--- Bagian tentang question type ---
-- Bagian tentang question type yang terprediksi BENAR --
Banyak pertanyaan APA: 135, sebesar: 15.92 %
Banyak pertanyaan DIMANA: 24, sebesar: 2.83 %
Banyak pertanyaan KAPAN: 112, sebesar: 13.21 %
Banyak pertanyaan SIAPA: 37, sebesar: 4.36 %
Banyak pertanyaan BAGAIMANA: 4, sebesar: 0.47 %
Banyak pertanyaan KENAPA: 3, sebesar: 0.35 %
Banyak pertanyaan BERAPA: 55, sebesar: 6.49 %
Banyak pertanyaan LAINNYA: 82, sebesar: 9.67 %
-- Bagian tentang question type yang terprediksi SALAH --
Banyak pertanyaan APA: 133, sebesar: 15.68 %
Banyak pertanyaan DIMANA: 25, sebesar: 2.95 %
Banyak pertanyaan KAPAN: 61, sebesar: 7.19 %
Banyak pertanyaan SIAPA: 39, sebesar: 4.6 %
Banyak pertanyaan BAGAIMANA: 8, sebesar: 0.94 %
Banyak pertanyaan KENAPA: 5, sebesar: 0.59 %
Banyak pertanyaan BERAPA: 56, sebesar: 6.6 %
Banyak pertanyaan LAINNYA: 69, sebesar: 8.14 %
-- Presentase kebenaran --
Banyak pertanyaan APA yang terpediksi benar sebesar: 50.37 %
Banyak pertanyaan DIMANA yang terpediksi benar sebesar: 48.98 %
Banyak pertanyaan KAPAN yang terpediksi benar sebesar: 64.74 %
Banyak pertanyaan SIAPA yang terpediksi benar sebesar: 48.68 %
Banyak pertanyaan BAGAIMANA yang terpediksi benar sebesar: 33.33 %
Banyak pertanyaan KENAPA yang terpediksi benar sebesar: 37.5 %
Banyak pertanyaan BERAPA yang terpediksi benar sebesar: 49.55 %
Banyak pertanyaan LAINNYA yang terpediksi benar sebesar: 54.3 %
--- Bagian tentang panjang context ---
-- Bagian tentang panjang context yang terprediksi BENAR --
Panjang konteks < 100: 323, sebesar: 38.09 %
Panjang konteks 101 <= x <= 150: 129, sebesar: 15.21 %
Panjang konteks 151 <= x <= 200: 0, sebesar: 0.0 %
Panjang konteks 201 <= x <= 250: 0, sebesar: 0.0 %
Panjang konteks 251 <= x <= 300: 0, sebesar: 0.0 %
Panjang konteks > 300: 0, sebesar: 0.0 %
-- Bagian tentang panjang context yang terprediksi SALAH --
Panjang konteks < 100: 267, sebesar: 31.49 %
Panjang konteks 101 <= x <= 150: 129, sebesar: 15.21 %
Panjang konteks 151 <= x <= 200: 0, sebesar: 0.0 %
Panjang konteks 201 <= x <= 250: 0, sebesar: 0.0 %
Panjang konteks 251 <= x <= 300: 0, sebesar: 0.0 %
Panjang konteks > 300: 0, sebesar: 0.0 %
-- Presentase kebenaran --
Panjang konteks < 100 yang terprediksi benar sebesar: 54.75 %
Panjang konteks 101 <= x <= 150 yang terprediksi benar sebesar: 50.0 %
Panjang konteks 151 <= x <= 200 yang terprediksi benar sebesar: 0 %
Panjang konteks 201 <= x <= 250 yang terprediksi benar sebesar: 0 %
Panjang konteks 251 <= x <= 300 yang terprediksi benar sebesar: 0 %
Panjang konteks > 300 yang terprediksi benar sebesar: 0 %
--- Bagian tentang panjang question ---
-- Bagian tentang panjang question yang terprediksi BENAR --
Panjang question 1 <= x <= 5: 229, sebesar: 27.0 %
Panjang question 6 <= x <= 10: 223, sebesar: 26.3 %
Panjang question 11 <= x <= 15: 0, sebesar: 0.0 %
Panjang question 16 <= x <= 20: 0, sebesar: 0.0 %
Panjang question > 20: 0, sebesar: 0.0 %
-- Bagian tentang panjang question yang terprediksi SALAH --
Panjang question 1 <= x <= 5: 162, sebesar: 19.1 %
Panjang question 6 <= x <= 10: 234, sebesar: 27.59 %
Panjang question 11 <= x <= 15: 0, sebesar: 0.0 %
Panjang question 16 <= x <= 20: 0, sebesar: 0.0 %
Panjang question > 20: 0, sebesar: 0.0 %
-- Presentase kebenaran --
Panjang question 1 <= x <= 5 yang terprediksi benar sebesar: 58.57 %
Panjang question 6 <= x <= 10 yang terprediksi benar sebesar: 48.8 %
Panjang question 11 <= x <= 15 yang terprediksi benar sebesar: 0 %
Panjang question 16 <= x <= 20 yang terprediksi benar sebesar: 0 %
Panjang question > 20 yang terprediksi benar sebesar: 0 %
--- Bagian tentang panjang gold answer ---
-- Bagian tentang panjang gold answer yang terprediksi BENAR --
Panjang question 1 <= x <= 5: 405, sebesar: 47.76 %
Panjang question 6 <= x <= 10: 47, sebesar: 5.54 %
Panjang question 11 <= x <= 15: 0, sebesar: 0.0 %
Panjang question 16 <= x <= 20: 0, sebesar: 0.0 %
Panjang question > 20: 0, sebesar: 0.0 %
-- Bagian tentang panjang gold answer yang terprediksi SALAH --
Panjang question 1 <= x <= 5: 325, sebesar: 38.33 %
Panjang question 6 <= x <= 10: 71, sebesar: 8.37 %
Panjang question 11 <= x <= 15: 0, sebesar: 0.0 %
Panjang question 16 <= x <= 20: 0, sebesar: 0.0 %
Panjang question > 20: 0, sebesar: 0.0 %
-- Presentase kebenaran --
Panjang question 1 <= x <= 5 yang terprediksi benar sebesar: 55.48 %
Panjang question 6 <= x <= 10 yang terprediksi benar sebesar: 39.83 %
Panjang question 11 <= x <= 15 yang terprediksi benar sebesar: 0 %
Panjang question 16 <= x <= 20 yang terprediksi benar sebesar: 0 %
Panjang question > 20 yang terprediksi benar sebesar: 0 %
--- Bagian tentang answer type ---
-- Bagian tentang answer type yang terprediksi BENAR --
Banyak answer type Person sebanyak: 24, sekitar 2.666666666666667 %
Banyak answer type NORP sebanyak: 4, sekitar 0.4444444444444444 %
Banyak answer type Facility sebanyak: 1, sekitar 0.1111111111111111 %
Banyak answer type Organization sebanyak: 1, sekitar 0.1111111111111111 %
Banyak answer type Geo-Political Entity sebanyak: 22, sekitar 2.4444444444444446 %
Banyak answer type Location sebanyak: 10, sekitar 1.1111111111111112 %
Banyak answer type Product sebanyak: 12, sekitar 1.3333333333333335 %
Banyak answer type Event sebanyak: 1, sekitar 0.1111111111111111 %
Banyak answer type Work of Art sebanyak: 3, sekitar 0.33333333333333337 %
Banyak answer type Law sebanyak: 0, sekitar 0.0 %
Banyak answer type Language sebanyak: 0, sekitar 0.0 %
Banyak answer type Date sebanyak: 58, sekitar 6.444444444444445 %
Banyak answer type Time sebanyak: 0, sekitar 0.0 %
Banyak answer type Percent sebanyak: 0, sekitar 0.0 %
Banyak answer type Money sebanyak: 3, sekitar 0.33333333333333337 %
Banyak answer type Quantity sebanyak: 15, sekitar 1.6666666666666667 %
Banyak answer type Ordinal sebanyak: 12, sekitar 1.3333333333333335 %
Banyak answer type Cardinal sebanyak: 10, sekitar 1.1111111111111112 %
Banyak answer type REG sebanyak: 2, sekitar 0.2222222222222222 %
Banyak answer type Null sebanyak: 288, sekitar 32.0 %
-- Bagian tentang answer type yang terprediksi SALAH --
Banyak answer type Person sebanyak: 31, sekitar 3.4444444444444446 %
Banyak answer type NORP sebanyak: 2, sekitar 0.2222222222222222 %
Banyak answer type Facility sebanyak: 1, sekitar 0.1111111111111111 %
Banyak answer type Organization sebanyak: 10, sekitar 1.1111111111111112 %
Banyak answer type Geo-Political Entity sebanyak: 21, sekitar 2.3333333333333335 %
Banyak answer type Location sebanyak: 11, sekitar 1.2222222222222223 %
Banyak answer type Product sebanyak: 20, sekitar 2.2222222222222223 %
Banyak answer type Event sebanyak: 3, sekitar 0.33333333333333337 %
Banyak answer type Work of Art sebanyak: 4, sekitar 0.4444444444444444 %
Banyak answer type Law sebanyak: 0, sekitar 0.0 %
Banyak answer type Language sebanyak: 1, sekitar 0.1111111111111111 %
Banyak answer type Date sebanyak: 26, sekitar 2.888888888888889 %
Banyak answer type Time sebanyak: 1, sekitar 0.1111111111111111 %
Banyak answer type Percent sebanyak: 2, sekitar 0.2222222222222222 %
Banyak answer type Money sebanyak: 3, sekitar 0.33333333333333337 %
Banyak answer type Quantity sebanyak: 11, sekitar 1.2222222222222223 %
Banyak answer type Ordinal sebanyak: 4, sekitar 0.4444444444444444 %
Banyak answer type Cardinal sebanyak: 17, sekitar 1.8888888888888888 %
Banyak answer type REG sebanyak: 8, sekitar 0.8888888888888888 %
Banyak answer type Null sebanyak: 258, sekitar 28.666666666666668 %
-- Presentase kebenaran --
Banyak answer type Person yang terprediksi benar sebesar: 43.64 %
Banyak answer type NORP yang terprediksi benar sebesar: 66.67 %
Banyak answer type Facility yang terprediksi benar sebesar: 50.0 %
Banyak answer type Organization yang terprediksi benar sebesar: 9.09 %
Banyak answer type Geo-Political Entity yang terprediksi benar sebesar: 51.16 %
Banyak answer type Location yang terprediksi benar sebesar: 47.62 %
Banyak answer type Product yang terprediksi benar sebesar: 37.5 %
Banyak answer type Event yang terprediksi benar sebesar: 25.0 %
Banyak answer type Work of Art yang terprediksi benar sebesar: 42.86 %
Banyak answer type Law yang terprediksi benar sebesar: 0 %
Banyak answer type Language yang terprediksi benar sebesar: 0.0 %
Banyak answer type Date yang terprediksi benar sebesar: 69.05 %
Banyak answer type Time yang terprediksi benar sebesar: 0.0 %
Banyak answer type Percent yang terprediksi benar sebesar: 0.0 %
Banyak answer type Money yang terprediksi benar sebesar: 50.0 %
Banyak answer type Quantity yang terprediksi benar sebesar: 57.69 %
Banyak answer type Ordinal yang terprediksi benar sebesar: 75.0 %
Banyak answer type Cardinal yang terprediksi benar sebesar: 37.04 %
Banyak answer type REG yang terprediksi benar sebesar: 20.0 %
Banyak answer type Null yang terprediksi benar sebesar: 52.75 %
--- Bagian tentang reasoning type ---
-- Bagian tentang reasoning type yang terprediksi BENAR --
Banyak reasoning type berjenis WM sebanyak: 7, sebesar: 7.0 %
Banyak reasoning type berjenis PP sebanyak: 4, sebesar: 4.0 %
Banyak reasoning type berjenis SSR sebanyak: 0, sebesar: 0.0 %
Banyak reasoning type berjenis MSR sebanyak: 8, sebesar: 8.0 %
Banyak reasoning type berjenis AoI sebanyak: 36, sebesar: 36.0 %
-- Bagian tentang reasoning type yang terprediksi SALAH --
Banyak reasoning type berjenis WM sebanyak: 3, sebesar: 3.0 %
Banyak reasoning type berjenis PP sebanyak: 5, sebesar: 5.0 %
Banyak reasoning type berjenis SSR sebanyak: 5, sebesar: 5.0 %
Banyak reasoning type berjenis MSR sebanyak: 5, sebesar: 5.0 %
Banyak reasoning type berjenis AoI sebanyak: 27, sebesar: 27.0 %
-- Presentase kebenaran --
Banyak reasoning type berjenis WM yang terprediksi benar sebesar: 70.0 %
Banyak reasoning type berjenis PP yang terprediksi benar sebesar: 44.44 %
Banyak reasoning type berjenis SSR yang terprediksi benar sebesar: 0.0 %
Banyak reasoning type berjenis MSR yang terprediksi benar sebesar: 61.54 %
Banyak reasoning type berjenis AoI yang terprediksi benar sebesar: 57.14 %