|
https://github.com/sionic-ai/intent-classifier-sample |
|
|
|
# Class Dictionary: {'Coding': 0, 'Information Seeking': 1, 'Language': 2, 'Others': 3, 'Writing': 4} |
|
|
|
``` |
|
4 epoch version |
|
|
|
accuracy: 0.95 |
|
precision: 0.95 |
|
recall: 0.95 |
|
F1 score: 0.95 |
|
|
|
confusion_matrix: |
|
[[5681 49 0 3 19] |
|
[ 93 5326 20 97 265] |
|
[ 5 2 5845 39 15] |
|
[ 12 76 167 2162 126] |
|
[ 14 197 3 54 5626]] |
|
|
|
μ±λ₯ μ§ν: |
|
Accuracy (μ νλ): 0.95 - μ 체 μμΈ‘ μ€ 95%κ° μ ννμ΅λλ€. |
|
Precision (μ λ°λ): 0.95 - λͺ¨λΈμ΄ νΉμ ν΄λμ€λΌκ³ μμΈ‘ν κ² μ€ 95%κ° μ€μ λ‘ κ·Έ ν΄λμ€μμ΅λλ€. |
|
Recall (μ¬νμ¨): 0.95 - μ€μ νΉμ ν΄λμ€μΈ κ² μ€ 95%λ₯Ό λͺ¨λΈμ΄ μ¬λ°λ₯΄κ² μλ³νμ΅λλ€. |
|
F1 score: 0.95 - μ λ°λμ μ¬νμ¨μ μ‘°ννκ· μΌλ‘, λͺ¨λΈμ μ λ°μ μΈ μ±λ₯μ΄ μ°μν¨μ λνλ
λλ€. |
|
νΌλ νλ ¬ (Confusion Matrix): μ΄ νλ ¬μ 5x5 ν¬κΈ°λ‘, 5κ°μ ν΄λμ€κ° μμμ μλ―Έν©λλ€. νμ μ€μ ν΄λμ€λ₯Ό, μ΄μ μμΈ‘λ ν΄λμ€λ₯Ό λνλ
λλ€. [[5681 49 0 3 19] [ 93 5326 20 97 265] [ 5 2 5845 39 15] [ 12 76 167 2162 126] [ 14 197 3 54 5626]] |
|
λκ°μ μμλ€(5681, 5326, 5845, 2162, 5626)μ κ° ν΄λμ€μ λν΄ μ ννκ² μμΈ‘λ μνμ μμ
λλ€. |
|
λ€λ₯Έ μμλ€μ μ€λΆλ₯λ κ²½μ°λ₯Ό λνλ
λλ€. |
|
μλ₯Ό λ€μ΄: |
|
첫 λ²μ§Έ ν΄λμ€: 5681κ° μ νν λΆλ₯, 49κ°λ λ λ²μ§Έ ν΄λμ€λ‘ μ€λΆλ₯, 3κ°λ λ€ λ²μ§Έ ν΄λμ€λ‘, 19κ°λ λ€μ― λ²μ§Έ ν΄λμ€λ‘ μ€λΆλ₯λμμ΅λλ€. |
|
λ λ²μ§Έ ν΄λμ€: 5326κ° μ νν λΆλ₯, 93κ°λ 첫 λ²μ§Έ ν΄λμ€λ‘, 20κ°λ μΈ λ²μ§Έ ν΄λμ€λ‘, 97κ°λ λ€ λ²μ§Έ ν΄λμ€λ‘, 265κ°λ λ€μ― λ²μ§Έ ν΄λμ€λ‘ μ€λΆλ₯λμμ΅λλ€. |
|
λΆμ: |
|
λͺ¨λΈμ μ λ°μ μΈ μ±λ₯μ΄ λ§€μ° μ’μ΅λλ€ (95% μ νλ). |
|
μΈ λ²μ§Έ ν΄λμ€μ λΆλ₯ μ±λ₯μ΄ κ°μ₯ μ°μν©λλ€ (5845κ° μ νν λΆλ₯). |
|
λ€ λ²μ§Έ ν΄λμ€μ λΆλ₯κ° μλμ μΌλ‘ μ΄λ €μ 보μ
λλ€ (λ€λ₯Έ ν΄λμ€μ λΉν΄ μ€λΆλ₯κ° λ λ§μ). |
|
λ λ²μ§Έμ λ€μ― λ²μ§Έ ν΄λμ€ μ¬μ΄μ μ½κ°μ νΌλμ΄ μλ κ²μΌλ‘ 보μ
λλ€ (265κ°μ 197κ°μ μνΈ μ€λΆλ₯). |
|
μ΄ κ²°κ³Όλ λͺ¨λΈμ΄ μ λ°μ μΌλ‘ λ§€μ° μ°μν μ±λ₯μ 보μ΄κ³ μμ§λ§, νΉμ ν΄λμ€ κ°μ ꡬλΆμ μμ΄ μ½κ°μ κ°μ μ¬μ§κ° μμμ λνλ
λλ€. |
|
``` |