| { | |
| "dataset": "cqadupstack", | |
| "split": "test", | |
| "metric": "dot", | |
| "norm_query": false, | |
| "norm_doc": false, | |
| "scores": { | |
| "ndcg": { | |
| "NDCG@1": 0.20244416666666668, | |
| "NDCG@3": 0.23995333333333335, | |
| "NDCG@5": 0.25859583333333336, | |
| "NDCG@10": 0.2803316666666667, | |
| "NDCG@20": 0.2988066666666666, | |
| "NDCG@50": 0.31907, | |
| "NDCG@100": 0.33133583333333333, | |
| "NDCG@200": 0.3424008333333333, | |
| "NDCG@1000": 0.36126166666666665 | |
| }, | |
| "map": { | |
| "MAP@1": 0.17069, | |
| "MAP@3": 0.21522, | |
| "MAP@5": 0.22750083333333335, | |
| "MAP@10": 0.2373575, | |
| "MAP@20": 0.24307416666666667, | |
| "MAP@50": 0.24681416666666667, | |
| "MAP@100": 0.24814583333333337, | |
| "MAP@200": 0.24888, | |
| "MAP@1000": 0.24945166666666663 | |
| }, | |
| "precision": { | |
| "P@1": 0.20244416666666668, | |
| "P@3": 0.1111775, | |
| "P@5": 0.08060833333333334, | |
| "P@10": 0.050455, | |
| "P@20": 0.030930833333333324, | |
| "P@50": 0.015574166666666667, | |
| "P@100": 0.00905, | |
| "P@200": 0.0052200000000000015, | |
| "P@1000": 0.0013491666666666667 | |
| }, | |
| "recall": { | |
| "Recall@1": 0.17069, | |
| "Recall@3": 0.26443249999999996, | |
| "Recall@5": 0.31205999999999995, | |
| "Recall@10": 0.3765525, | |
| "Recall@20": 0.4442291666666666, | |
| "Recall@50": 0.5372158333333333, | |
| "Recall@100": 0.604765, | |
| "Recall@200": 0.6749175, | |
| "Recall@1000": 0.8195983333333334 | |
| }, | |
| "mrr": { | |
| "MRR@1": 0.20244416666666668, | |
| "MRR@3": 0.2489716666666666, | |
| "MRR@5": 0.2607483333333334, | |
| "MRR@10": 0.27058250000000006, | |
| "MRR@20": 0.27553999999999995, | |
| "MRR@50": 0.2785458333333333, | |
| "MRR@100": 0.27949583333333333, | |
| "MRR@200": 0.27997916666666667, | |
| "MRR@1000": 0.28030416666666663 | |
| }, | |
| "recall_cap": { | |
| "R_cap@1": 0.20244416666666668, | |
| "R_cap@3": 0.27020916666666667, | |
| "R_cap@5": 0.31458749999999996, | |
| "R_cap@10": 0.3776725000000001, | |
| "R_cap@20": 0.44470750000000003, | |
| "R_cap@50": 0.5373941666666667, | |
| "R_cap@100": 0.6048366666666666, | |
| "R_cap@200": 0.674925, | |
| "R_cap@1000": 0.8195983333333334 | |
| }, | |
| "hole": { | |
| "Hole@1": 0.7220733333333333, | |
| "Hole@3": 0.8039649999999999, | |
| "Hole@5": 0.8346633333333333, | |
| "Hole@10": 0.86442, | |
| "Hole@20": 0.8839733333333335, | |
| "Hole@50": 0.9019533333333333, | |
| "Hole@100": 0.9109491666666666, | |
| "Hole@200": 0.9171174999999999, | |
| "Hole@1000": 0.9264724999999999 | |
| } | |
| } | |
| } | |