| { | |
| "dataset": "cqadupstack", | |
| "split": "test", | |
| "metric": "dot", | |
| "norm_query": false, | |
| "norm_doc": false, | |
| "scores": { | |
| "ndcg": { | |
| "NDCG@1": 0.19588083333333337, | |
| "NDCG@3": 0.23468916666666664, | |
| "NDCG@5": 0.252925, | |
| "NDCG@10": 0.27400583333333334, | |
| "NDCG@20": 0.29131500000000005, | |
| "NDCG@50": 0.31248666666666663, | |
| "NDCG@100": 0.32535083333333337, | |
| "NDCG@200": 0.33661499999999994, | |
| "NDCG@1000": 0.35514249999999997 | |
| }, | |
| "map": { | |
| "MAP@1": 0.16519666666666669, | |
| "MAP@3": 0.20994416666666668, | |
| "MAP@5": 0.22194833333333333, | |
| "MAP@10": 0.2316575, | |
| "MAP@20": 0.23698166666666665, | |
| "MAP@50": 0.24089250000000004, | |
| "MAP@100": 0.24225583333333325, | |
| "MAP@200": 0.243, | |
| "MAP@1000": 0.24357083333333338 | |
| }, | |
| "precision": { | |
| "P@1": 0.19588083333333337, | |
| "P@3": 0.10911749999999999, | |
| "P@5": 0.07942166666666667, | |
| "P@10": 0.049599166666666666, | |
| "P@20": 0.030192499999999997, | |
| "P@50": 0.015421666666666665, | |
| "P@100": 0.009026666666666667, | |
| "P@200": 0.005214166666666666, | |
| "P@1000": 0.00134 | |
| }, | |
| "recall": { | |
| "Recall@1": 0.16519666666666669, | |
| "Recall@3": 0.2599008333333333, | |
| "Recall@5": 0.30588583333333336, | |
| "Recall@10": 0.3683874999999999, | |
| "Recall@20": 0.43202916666666685, | |
| "Recall@50": 0.5295, | |
| "Recall@100": 0.6010533333333333, | |
| "Recall@200": 0.6726200000000001, | |
| "Recall@1000": 0.8146341666666667 | |
| }, | |
| "mrr": { | |
| "MRR@1": 0.19588083333333337, | |
| "MRR@3": 0.24322500000000002, | |
| "MRR@5": 0.2548241666666667, | |
| "MRR@10": 0.26416333333333336, | |
| "MRR@20": 0.26886833333333326, | |
| "MRR@50": 0.27205, | |
| "MRR@100": 0.2730416666666667, | |
| "MRR@200": 0.27352166666666666, | |
| "MRR@1000": 0.2738508333333334 | |
| }, | |
| "recall_cap": { | |
| "R_cap@1": 0.19588083333333337, | |
| "R_cap@3": 0.2656725, | |
| "R_cap@5": 0.3085091666666667, | |
| "R_cap@10": 0.3695791666666666, | |
| "R_cap@20": 0.4325691666666667, | |
| "R_cap@50": 0.5297108333333332, | |
| "R_cap@100": 0.6011341666666666, | |
| "R_cap@200": 0.6726291666666667, | |
| "R_cap@1000": 0.8146341666666667 | |
| }, | |
| "hole": { | |
| "Hole@1": 0.7236174999999999, | |
| "Hole@3": 0.8075649999999999, | |
| "Hole@5": 0.8362941666666668, | |
| "Hole@10": 0.8651483333333333, | |
| "Hole@20": 0.8852116666666666, | |
| "Hole@50": 0.9016124999999998, | |
| "Hole@100": 0.9098649999999999, | |
| "Hole@200": 0.9159975, | |
| "Hole@1000": 0.9253083333333333 | |
| } | |
| } | |
| } | |