|
{ |
|
"dataset": "cqadupstack", |
|
"split": "test", |
|
"metric": "dot", |
|
"norm_query": false, |
|
"norm_doc": false, |
|
"scores": { |
|
"ndcg": { |
|
"NDCG@1": 0.21238333333333334, |
|
"NDCG@3": 0.25052250000000004, |
|
"NDCG@5": 0.26944, |
|
"NDCG@10": 0.2928333333333334, |
|
"NDCG@20": 0.31152583333333334, |
|
"NDCG@50": 0.3318433333333333, |
|
"NDCG@100": 0.3445375, |
|
"NDCG@200": 0.35541416666666664, |
|
"NDCG@1000": 0.37370333333333333 |
|
}, |
|
"map": { |
|
"MAP@1": 0.17943833333333337, |
|
"MAP@3": 0.22491000000000003, |
|
"MAP@5": 0.23740666666666665, |
|
"MAP@10": 0.24825000000000005, |
|
"MAP@20": 0.2539983333333333, |
|
"MAP@50": 0.25779500000000005, |
|
"MAP@100": 0.2591683333333334, |
|
"MAP@200": 0.2598941666666667, |
|
"MAP@1000": 0.2604566666666667 |
|
}, |
|
"precision": { |
|
"P@1": 0.21238333333333334, |
|
"P@3": 0.11569750000000001, |
|
"P@5": 0.08366416666666666, |
|
"P@10": 0.05258166666666667, |
|
"P@20": 0.032051666666666666, |
|
"P@50": 0.016111666666666666, |
|
"P@100": 0.009380833333333335, |
|
"P@200": 0.0053683333333333335, |
|
"P@1000": 0.0013716666666666667 |
|
}, |
|
"recall": { |
|
"Recall@1": 0.17943833333333337, |
|
"Recall@3": 0.2751608333333333, |
|
"Recall@5": 0.32309249999999995, |
|
"Recall@10": 0.3925783333333334, |
|
"Recall@20": 0.4612349999999999, |
|
"Recall@50": 0.5543025, |
|
"Recall@100": 0.6243891666666667, |
|
"Recall@200": 0.6937216666666668, |
|
"Recall@1000": 0.8333191666666667 |
|
}, |
|
"mrr": { |
|
"MRR@1": 0.21238333333333334, |
|
"MRR@3": 0.26051166666666664, |
|
"MRR@5": 0.2725008333333333, |
|
"MRR@10": 0.28266749999999996, |
|
"MRR@20": 0.2877675, |
|
"MRR@50": 0.290765, |
|
"MRR@100": 0.29172166666666666, |
|
"MRR@200": 0.2921791666666667, |
|
"MRR@1000": 0.29249583333333334 |
|
}, |
|
"recall_cap": { |
|
"R_cap@1": 0.21238333333333334, |
|
"R_cap@3": 0.28125416666666664, |
|
"R_cap@5": 0.32585833333333336, |
|
"R_cap@10": 0.39377083333333335, |
|
"R_cap@20": 0.4617558333333332, |
|
"R_cap@50": 0.5544891666666666, |
|
"R_cap@100": 0.6244641666666667, |
|
"R_cap@200": 0.6937291666666666, |
|
"R_cap@1000": 0.8333191666666667 |
|
}, |
|
"hole": { |
|
"Hole@1": 0.7077300000000001, |
|
"Hole@3": 0.7993166666666666, |
|
"Hole@5": 0.8298199999999999, |
|
"Hole@10": 0.8623316666666666, |
|
"Hole@20": 0.8835099999999999, |
|
"Hole@50": 0.9013991666666669, |
|
"Hole@100": 0.9103258333333333, |
|
"Hole@200": 0.9166075, |
|
"Hole@1000": 0.925735 |
|
} |
|
} |
|
} |
|
|