201 num_ret 1000.00000 201 num_unjug_ret@1 0.00000 201 num_unjug_ret@10 1.00000 201 num_unjug_ret@20 2.00000 201 num_unjug_ret@100 56.00000 201 num_unjug_ret@1000 933.00000 201 num_rel 211.00000 201 num_rel_ret 48.00000 201 map 0.11311 201 R-prec 0.20853 201 bpref 0.20913 201 recip_rank 1.00000 201 ndcg 0.23126 201 ndcg5 0.20548 201 ndcg10 0.23416 201 ndcg20 0.30886 201 ERR 0.13529 201 ERR10 0.11080 201 ERR20 0.12672 201 P1 1.00000 201 P5 0.60000 201 P10 0.70000 201 P15 0.66667 201 P20 0.70000 201 P30 0.63333 201 P50 0.54000 201 P100 0.34000 201 P200 0.21500 201 P500 0.09400 201 P1000 0.04800 202 num_ret 1000.00000 202 num_unjug_ret@1 0.00000 202 num_unjug_ret@10 0.00000 202 num_unjug_ret@20 2.00000 202 num_unjug_ret@100 52.00000 202 num_unjug_ret@1000 943.00000 202 num_rel 1.00000 202 num_rel_ret 0.00000 202 map 0.00000 202 R-prec 0.00000 202 bpref 0.00000 202 recip_rank 0.00000 202 ndcg 0.00000 202 ndcg5 0.00000 202 ndcg10 0.00000 202 ndcg20 0.00000 202 ERR 0.00000 202 ERR10 0.00000 202 ERR20 0.00000 202 P1 0.00000 202 P5 0.00000 202 P10 0.00000 202 P15 0.00000 202 P20 0.00000 202 P30 0.00000 202 P50 0.00000 202 P100 0.00000 202 P200 0.00000 202 P500 0.00000 202 P1000 0.00000 203 num_ret 1000.00000 203 num_unjug_ret@1 0.00000 203 num_unjug_ret@10 3.00000 203 num_unjug_ret@20 8.00000 203 num_unjug_ret@100 56.00000 203 num_unjug_ret@1000 933.00000 203 num_rel 135.00000 203 num_rel_ret 22.00000 203 map 0.06399 203 R-prec 0.13333 203 bpref 0.14738 203 recip_rank 1.00000 203 ndcg 0.17573 203 ndcg5 0.43202 203 ndcg10 0.30874 203 ndcg20 0.25843 203 ERR 0.36276 203 ERR10 0.35066 203 ERR20 0.35966 203 P1 1.00000 203 P5 0.60000 203 P10 0.40000 203 P15 0.46667 203 P20 0.40000 203 P30 0.36667 203 P50 0.30000 203 P100 0.17000 203 P200 0.10500 203 P500 0.04400 203 P1000 0.02200 204 num_ret 1000.00000 204 num_unjug_ret@1 0.00000 204 num_unjug_ret@10 2.00000 204 num_unjug_ret@20 6.00000 204 num_unjug_ret@100 77.00000 204 num_unjug_ret@1000 945.00000 204 num_rel 120.00000 204 num_rel_ret 20.00000 204 map 0.03121 204 R-prec 0.07500 204 bpref 0.13958 204 recip_rank 1.00000 204 ndcg 0.12344 204 ndcg5 0.12697 204 ndcg10 0.10890 204 ndcg20 0.08719 204 ERR 0.10838 204 ERR10 0.09729 204 ERR20 0.10158 204 P1 1.00000 204 P5 0.40000 204 P10 0.30000 204 P15 0.26667 204 P20 0.20000 204 P30 0.13333 204 P50 0.08000 204 P100 0.08000 204 P200 0.07000 204 P500 0.04000 204 P1000 0.02000 205 num_ret 1000.00000 205 num_unjug_ret@1 0.00000 205 num_unjug_ret@10 2.00000 205 num_unjug_ret@20 6.00000 205 num_unjug_ret@100 59.00000 205 num_unjug_ret@1000 934.00000 205 num_rel 60.00000 205 num_rel_ret 11.00000 205 map 0.05068 205 R-prec 0.13333 205 bpref 0.14194 205 recip_rank 0.16667 205 ndcg 0.09636 205 ndcg5 0.00000 205 ndcg10 0.05895 205 ndcg20 0.07012 205 ERR 0.04725 205 ERR10 0.03138 205 ERR20 0.04138 205 P1 0.00000 205 P5 0.00000 205 P10 0.40000 205 P15 0.40000 205 P20 0.35000 205 P30 0.26667 205 P50 0.16000 205 P100 0.09000 205 P200 0.04500 205 P500 0.02200 205 P1000 0.01100 206 num_ret 1000.00000 206 num_unjug_ret@1 0.00000 206 num_unjug_ret@10 1.00000 206 num_unjug_ret@20 2.00000 206 num_unjug_ret@100 57.00000 206 num_unjug_ret@1000 919.00000 206 num_rel 160.00000 206 num_rel_ret 29.00000 206 map 0.05388 206 R-prec 0.13125 206 bpref 0.15762 206 recip_rank 1.00000 206 ndcg 0.19753 206 ndcg5 0.15679 206 ndcg10 0.26103 206 ndcg20 0.29059 206 ERR 0.12009 206 ERR10 0.10358 206 ERR20 0.11483 206 P1 1.00000 206 P5 0.40000 206 P10 0.50000 206 P15 0.60000 206 P20 0.45000 206 P30 0.30000 206 P50 0.28000 206 P100 0.18000 206 P200 0.11500 206 P500 0.05200 206 P1000 0.02900 207 num_ret 1000.00000 207 num_unjug_ret@1 0.00000 207 num_unjug_ret@10 3.00000 207 num_unjug_ret@20 6.00000 207 num_unjug_ret@100 68.00000 207 num_unjug_ret@1000 959.00000 207 num_rel 82.00000 207 num_rel_ret 17.00000 207 map 0.04605 207 R-prec 0.14634 207 bpref 0.14857 207 recip_rank 0.50000 207 ndcg 0.13954 207 ndcg5 0.05144 207 ndcg10 0.04176 207 ndcg20 0.09223 207 ERR 0.07987 207 ERR10 0.04590 207 ERR20 0.06997 207 P1 0.00000 207 P5 0.40000 207 P10 0.20000 207 P15 0.26667 207 P20 0.30000 207 P30 0.23333 207 P50 0.20000 207 P100 0.13000 207 P200 0.07000 207 P500 0.03000 207 P1000 0.01700 208 num_ret 1000.00000 208 num_unjug_ret@1 0.00000 208 num_unjug_ret@10 0.00000 208 num_unjug_ret@20 2.00000 208 num_unjug_ret@100 63.00000 208 num_unjug_ret@1000 949.00000 208 num_rel 39.00000 208 num_rel_ret 7.00000 208 map 0.06246 208 R-prec 0.17949 208 bpref 0.14333 208 recip_rank 0.25000 208 ndcg 0.13453 208 ndcg5 0.08407 208 ndcg10 0.11266 208 ndcg20 0.13896 208 ERR 0.08669 208 ERR10 0.06660 208 ERR20 0.08439 208 P1 0.00000 208 P5 0.20000 208 P10 0.40000 208 P15 0.33333 208 P20 0.30000 208 P30 0.20000 208 P50 0.14000 208 P100 0.07000 208 P200 0.03500 208 P500 0.01400 208 P1000 0.00700 209 num_ret 1000.00000 209 num_unjug_ret@1 0.00000 209 num_unjug_ret@10 4.00000 209 num_unjug_ret@20 8.00000 209 num_unjug_ret@100 71.00000 209 num_unjug_ret@1000 962.00000 209 num_rel 13.00000 209 num_rel_ret 1.00000 209 map 0.02564 209 R-prec 0.07692 209 bpref 0.07101 209 recip_rank 0.33333 209 ndcg 0.06969 209 ndcg5 0.09760 209 ndcg10 0.07443 209 ndcg20 0.06969 209 ERR 0.06250 209 ERR10 0.06250 209 ERR20 0.06250 209 P1 0.00000 209 P5 0.20000 209 P10 0.10000 209 P15 0.06667 209 P20 0.05000 209 P30 0.03333 209 P50 0.02000 209 P100 0.01000 209 P200 0.00500 209 P500 0.00200 209 P1000 0.00100 210 num_ret 1000.00000 210 num_unjug_ret@1 0.00000 210 num_unjug_ret@10 4.00000 210 num_unjug_ret@20 8.00000 210 num_unjug_ret@100 60.00000 210 num_unjug_ret@1000 931.00000 210 num_rel 37.00000 210 num_rel_ret 5.00000 210 map 0.00876 210 R-prec 0.05405 210 bpref 0.05040 210 recip_rank 0.16667 210 ndcg 0.07731 210 ndcg5 0.00000 210 ndcg10 0.06755 210 ndcg20 0.05834 210 ERR 0.03441 210 ERR10 0.03125 210 ERR20 0.03125 210 P1 0.00000 210 P5 0.00000 210 P10 0.10000 210 P15 0.06667 210 P20 0.05000 210 P30 0.06667 210 P50 0.04000 210 P100 0.03000 210 P200 0.01500 210 P500 0.01000 210 P1000 0.00500 211 num_ret 1000.00000 211 num_unjug_ret@1 1.00000 211 num_unjug_ret@10 2.00000 211 num_unjug_ret@20 9.00000 211 num_unjug_ret@100 66.00000 211 num_unjug_ret@1000 923.00000 211 num_rel 180.00000 211 num_rel_ret 41.00000 211 map 0.07997 211 R-prec 0.16111 211 bpref 0.21395 211 recip_rank 0.50000 211 ndcg 0.21574 211 ndcg5 0.07358 211 ndcg10 0.31794 211 ndcg20 0.25941 211 ERR 0.13810 211 ERR10 0.12988 211 ERR20 0.13297 211 P1 0.00000 211 P5 0.40000 211 P10 0.70000 211 P15 0.60000 211 P20 0.50000 211 P30 0.43333 211 P50 0.40000 211 P100 0.25000 211 P200 0.15500 211 P500 0.08000 211 P1000 0.04100 212 num_ret 1000.00000 212 num_unjug_ret@1 0.00000 212 num_unjug_ret@10 1.00000 212 num_unjug_ret@20 6.00000 212 num_unjug_ret@100 64.00000 212 num_unjug_ret@1000 931.00000 212 num_rel 18.00000 212 num_rel_ret 2.00000 212 map 0.00086 212 R-prec 0.00000 212 bpref 0.00000 212 recip_rank 0.01220 212 ndcg 0.04031 212 ndcg5 0.00000 212 ndcg10 0.00000 212 ndcg20 0.00000 212 ERR 0.00086 212 ERR10 0.00000 212 ERR20 0.00000 212 P1 0.00000 212 P5 0.00000 212 P10 0.00000 212 P15 0.00000 212 P20 0.00000 212 P30 0.00000 212 P50 0.00000 212 P100 0.01000 212 P200 0.00500 212 P500 0.00200 212 P1000 0.00200 213 num_ret 1000.00000 213 num_unjug_ret@1 1.00000 213 num_unjug_ret@10 6.00000 213 num_unjug_ret@20 11.00000 213 num_unjug_ret@100 73.00000 213 num_unjug_ret@1000 961.00000 213 num_rel 82.00000 213 num_rel_ret 20.00000 213 map 0.04349 213 R-prec 0.14634 213 bpref 0.20702 213 recip_rank 0.12500 213 ndcg 0.17030 213 ndcg5 0.00000 213 ndcg10 0.04435 213 ndcg20 0.12235 213 ERR 0.04629 213 ERR10 0.01367 213 ERR20 0.03790 213 P1 0.00000 213 P5 0.00000 213 P10 0.20000 213 P15 0.26667 213 P20 0.30000 213 P30 0.20000 213 P50 0.20000 213 P100 0.13000 213 P200 0.08500 213 P500 0.04000 213 P1000 0.02000 214 num_ret 1000.00000 214 num_unjug_ret@1 0.00000 214 num_unjug_ret@10 1.00000 214 num_unjug_ret@20 5.00000 214 num_unjug_ret@100 53.00000 214 num_unjug_ret@1000 935.00000 214 num_rel 214.00000 214 num_rel_ret 51.00000 214 map 0.12861 214 R-prec 0.21028 214 bpref 0.22538 214 recip_rank 1.00000 214 ndcg 0.26291 214 ndcg5 0.43226 214 ndcg10 0.42523 214 ndcg20 0.38601 214 ERR 0.23163 214 ERR10 0.20851 214 ERR20 0.22480 214 P1 1.00000 214 P5 0.80000 214 P10 0.80000 214 P15 0.73333 214 P20 0.65000 214 P30 0.70000 214 P50 0.50000 214 P100 0.38000 214 P200 0.22500 214 P500 0.10200 214 P1000 0.05100 215 num_ret 1000.00000 215 num_unjug_ret@1 0.00000 215 num_unjug_ret@10 5.00000 215 num_unjug_ret@20 12.00000 215 num_unjug_ret@100 66.00000 215 num_unjug_ret@1000 939.00000 215 num_rel 119.00000 215 num_rel_ret 32.00000 215 map 0.05840 215 R-prec 0.20168 215 bpref 0.23007 215 recip_rank 0.50000 215 ndcg 0.21581 215 ndcg5 0.07817 215 ndcg10 0.09790 215 ndcg20 0.10002 215 ERR 0.05951 215 ERR10 0.03857 215 ERR20 0.04315 215 P1 0.00000 215 P5 0.20000 215 P10 0.20000 215 P15 0.20000 215 P20 0.15000 215 P30 0.23333 215 P50 0.26000 215 P100 0.20000 215 P200 0.14000 215 P500 0.06000 215 P1000 0.03200 216 num_ret 1000.00000 216 num_unjug_ret@1 1.00000 216 num_unjug_ret@10 10.00000 216 num_unjug_ret@20 20.00000 216 num_unjug_ret@100 93.00000 216 num_unjug_ret@1000 929.00000 216 num_rel 255.00000 216 num_rel_ret 52.00000 216 map 0.01092 216 R-prec 0.04706 216 bpref 0.18737 216 recip_rank 0.02778 216 ndcg 0.09857 216 ndcg5 0.00000 216 ndcg10 0.00000 216 ndcg20 0.00000 216 ERR 0.01202 216 ERR10 0.00000 216 ERR20 0.00000 216 P1 0.00000 216 P5 0.00000 216 P10 0.00000 216 P15 0.00000 216 P20 0.00000 216 P30 0.00000 216 P50 0.04000 216 P100 0.05000 216 P200 0.05000 216 P500 0.05800 216 P1000 0.05200 217 num_ret 1000.00000 217 num_unjug_ret@1 0.00000 217 num_unjug_ret@10 2.00000 217 num_unjug_ret@20 6.00000 217 num_unjug_ret@100 64.00000 217 num_unjug_ret@1000 944.00000 217 num_rel 152.00000 217 num_rel_ret 30.00000 217 map 0.10515 217 R-prec 0.18421 217 bpref 0.19070 217 recip_rank 1.00000 217 ndcg 0.25029 217 ndcg5 0.34637 217 ndcg10 0.45461 217 ndcg20 0.39241 217 ERR 0.33159 217 ERR10 0.32153 217 ERR20 0.32766 217 P1 1.00000 217 P5 0.60000 217 P10 0.70000 217 P15 0.60000 217 P20 0.60000 217 P30 0.50000 217 P50 0.46000 217 P100 0.27000 217 P200 0.14000 217 P500 0.06000 217 P1000 0.03000 218 num_ret 1000.00000 218 num_unjug_ret@1 0.00000 218 num_unjug_ret@10 2.00000 218 num_unjug_ret@20 9.00000 218 num_unjug_ret@100 64.00000 218 num_unjug_ret@1000 931.00000 218 num_rel 137.00000 218 num_rel_ret 22.00000 218 map 0.02444 218 R-prec 0.08759 218 bpref 0.11983 218 recip_rank 0.33333 218 ndcg 0.12148 218 ndcg5 0.14895 218 ndcg10 0.09666 218 ndcg20 0.08694 218 ERR 0.05872 218 ERR10 0.04647 218 ERR20 0.05076 218 P1 0.00000 218 P5 0.60000 218 P10 0.30000 218 P15 0.26667 218 P20 0.20000 218 P30 0.20000 218 P50 0.16000 218 P100 0.09000 218 P200 0.06500 218 P500 0.03200 218 P1000 0.02200 219 num_ret 1000.00000 219 num_unjug_ret@1 0.00000 219 num_unjug_ret@10 5.00000 219 num_unjug_ret@20 12.00000 219 num_unjug_ret@100 68.00000 219 num_unjug_ret@1000 919.00000 219 num_rel 60.00000 219 num_rel_ret 6.00000 219 map 0.00377 219 R-prec 0.03333 219 bpref 0.03833 219 recip_rank 0.06667 219 ndcg 0.04020 219 ndcg5 0.00000 219 ndcg10 0.00000 219 ndcg20 0.03003 219 ERR 0.00811 219 ERR10 0.00000 219 ERR20 0.00742 219 P1 0.00000 219 P5 0.00000 219 P10 0.00000 219 P15 0.06667 219 P20 0.10000 219 P30 0.06667 219 P50 0.04000 219 P100 0.02000 219 P200 0.01500 219 P500 0.00800 219 P1000 0.00600 220 num_ret 1000.00000 220 num_unjug_ret@1 1.00000 220 num_unjug_ret@10 8.00000 220 num_unjug_ret@20 13.00000 220 num_unjug_ret@100 83.00000 220 num_unjug_ret@1000 937.00000 220 num_rel 65.00000 220 num_rel_ret 4.00000 220 map 0.00217 220 R-prec 0.01538 220 bpref 0.03740 220 recip_rank 0.11111 220 ndcg 0.01534 220 ndcg5 0.00000 220 ndcg10 0.01184 220 ndcg20 0.00915 220 ERR 0.00752 220 ERR10 0.00694 220 ERR20 0.00694 220 P1 0.00000 220 P5 0.00000 220 P10 0.10000 220 P15 0.06667 220 P20 0.05000 220 P30 0.03333 220 P50 0.02000 220 P100 0.01000 220 P200 0.00500 220 P500 0.00800 220 P1000 0.00400 221 num_ret 1000.00000 221 num_unjug_ret@1 0.00000 221 num_unjug_ret@10 2.00000 221 num_unjug_ret@20 9.00000 221 num_unjug_ret@100 63.00000 221 num_unjug_ret@1000 930.00000 221 num_rel 217.00000 221 num_rel_ret 49.00000 221 map 0.10579 221 R-prec 0.18894 221 bpref 0.21702 221 recip_rank 1.00000 221 ndcg 0.18203 221 ndcg5 0.25919 221 ndcg10 0.24934 221 ndcg20 0.21364 221 ERR 0.28080 221 ERR10 0.26439 221 ERR20 0.27052 221 P1 1.00000 221 P5 1.00000 221 P10 0.80000 221 P15 0.66667 221 P20 0.55000 221 P30 0.56667 221 P50 0.46000 221 P100 0.30000 221 P200 0.20000 221 P500 0.09400 221 P1000 0.04900 222 num_ret 1000.00000 222 num_unjug_ret@1 0.00000 222 num_unjug_ret@10 3.00000 222 num_unjug_ret@20 8.00000 222 num_unjug_ret@100 76.00000 222 num_unjug_ret@1000 967.00000 222 num_rel 91.00000 222 num_rel_ret 20.00000 222 map 0.11073 222 R-prec 0.18681 222 bpref 0.21049 222 recip_rank 1.00000 222 ndcg 0.21600 222 ndcg5 0.22699 222 ndcg10 0.19175 222 ndcg20 0.24208 222 ERR 0.23923 222 ERR10 0.21477 222 ERR20 0.23586 222 P1 1.00000 222 P5 0.80000 222 P10 0.60000 222 P15 0.53333 222 P20 0.45000 222 P30 0.40000 222 P50 0.30000 222 P100 0.18000 222 P200 0.09500 222 P500 0.04000 222 P1000 0.02000 223 num_ret 1000.00000 223 num_unjug_ret@1 0.00000 223 num_unjug_ret@10 0.00000 223 num_unjug_ret@20 4.00000 223 num_unjug_ret@100 59.00000 223 num_unjug_ret@1000 948.00000 223 num_rel 150.00000 223 num_rel_ret 34.00000 223 map 0.11301 223 R-prec 0.20000 223 bpref 0.21246 223 recip_rank 1.00000 223 ndcg 0.16420 223 ndcg5 0.12928 223 ndcg10 0.13996 223 ndcg20 0.14233 223 ERR 0.29376 223 ERR10 0.28040 223 ERR20 0.28694 223 P1 1.00000 223 P5 0.80000 223 P10 0.70000 223 P15 0.53333 223 P20 0.60000 223 P30 0.50000 223 P50 0.44000 223 P100 0.27000 223 P200 0.15000 223 P500 0.06800 223 P1000 0.03400 224 num_ret 1000.00000 224 num_unjug_ret@1 1.00000 224 num_unjug_ret@10 6.00000 224 num_unjug_ret@20 11.00000 224 num_unjug_ret@100 76.00000 224 num_unjug_ret@1000 941.00000 224 num_rel 41.00000 224 num_rel_ret 7.00000 224 map 0.02238 224 R-prec 0.07317 224 bpref 0.10529 224 recip_rank 0.25000 224 ndcg 0.13127 224 ndcg5 0.14607 224 ndcg10 0.17319 224 ndcg20 0.14521 224 ERR 0.08087 224 ERR10 0.07227 224 ERR20 0.07914 224 P1 0.00000 224 P5 0.20000 224 P10 0.20000 224 P15 0.13333 224 P20 0.15000 224 P30 0.10000 224 P50 0.06000 224 P100 0.05000 224 P200 0.03000 224 P500 0.01200 224 P1000 0.00700 225 num_ret 1000.00000 225 num_unjug_ret@1 0.00000 225 num_unjug_ret@10 2.00000 225 num_unjug_ret@20 8.00000 225 num_unjug_ret@100 68.00000 225 num_unjug_ret@1000 934.00000 225 num_rel 3.00000 225 num_rel_ret 0.00000 225 map 0.00000 225 R-prec 0.00000 225 bpref 0.00000 225 recip_rank 0.00000 225 ndcg 0.00000 225 ndcg5 0.00000 225 ndcg10 0.00000 225 ndcg20 0.00000 225 ERR 0.00000 225 ERR10 0.00000 225 ERR20 0.00000 225 P1 0.00000 225 P5 0.00000 225 P10 0.00000 225 P15 0.00000 225 P20 0.00000 225 P30 0.00000 225 P50 0.00000 225 P100 0.00000 225 P200 0.00000 225 P500 0.00000 225 P1000 0.00000 226 num_ret 1000.00000 226 num_unjug_ret@1 0.00000 226 num_unjug_ret@10 4.00000 226 num_unjug_ret@20 6.00000 226 num_unjug_ret@100 57.00000 226 num_unjug_ret@1000 919.00000 226 num_rel 72.00000 226 num_rel_ret 20.00000 226 map 0.04826 226 R-prec 0.12500 226 bpref 0.16686 226 recip_rank 0.33333 226 ndcg 0.16673 226 ndcg5 0.05653 226 ndcg10 0.05877 226 ndcg20 0.07772 226 ERR 0.04876 226 ERR10 0.02734 226 ERR20 0.04008 226 P1 0.00000 226 P5 0.20000 226 P10 0.20000 226 P15 0.33333 226 P20 0.25000 226 P30 0.23333 226 P50 0.18000 226 P100 0.09000 226 P200 0.08500 226 P500 0.04000 226 P1000 0.02000 227 num_ret 1000.00000 227 num_unjug_ret@1 0.00000 227 num_unjug_ret@10 6.00000 227 num_unjug_ret@20 11.00000 227 num_unjug_ret@100 83.00000 227 num_unjug_ret@1000 969.00000 227 num_rel 50.00000 227 num_rel_ret 13.00000 227 map 0.05118 227 R-prec 0.12000 227 bpref 0.23320 227 recip_rank 0.50000 227 ndcg 0.13443 227 ndcg5 0.13111 227 ndcg10 0.10550 227 ndcg20 0.08814 227 ERR 0.23622 227 ERR10 0.22314 227 ERR20 0.22971 227 P1 0.00000 227 P5 0.20000 227 P10 0.20000 227 P15 0.26667 227 P20 0.25000 227 P30 0.20000 227 P50 0.12000 227 P100 0.10000 227 P200 0.06000 227 P500 0.02600 227 P1000 0.01300 228 num_ret 1000.00000 228 num_unjug_ret@1 0.00000 228 num_unjug_ret@10 4.00000 228 num_unjug_ret@20 11.00000 228 num_unjug_ret@100 81.00000 228 num_unjug_ret@1000 964.00000 228 num_rel 44.00000 228 num_rel_ret 7.00000 228 map 0.06973 228 R-prec 0.13636 228 bpref 0.13843 228 recip_rank 1.00000 228 ndcg 0.13465 228 ndcg5 0.16266 228 ndcg10 0.15552 228 ndcg20 0.14918 228 ERR 0.13686 228 ERR10 0.13285 228 ERR20 0.13547 228 P1 1.00000 228 P5 0.40000 228 P10 0.40000 228 P15 0.26667 228 P20 0.25000 228 P30 0.20000 228 P50 0.12000 228 P100 0.06000 228 P200 0.03000 228 P500 0.01400 228 P1000 0.00700 229 num_ret 1000.00000 229 num_unjug_ret@1 0.00000 229 num_unjug_ret@10 1.00000 229 num_unjug_ret@20 7.00000 229 num_unjug_ret@100 73.00000 229 num_unjug_ret@1000 966.00000 229 num_rel 88.00000 229 num_rel_ret 24.00000 229 map 0.10062 229 R-prec 0.20455 229 bpref 0.19918 229 recip_rank 1.00000 229 ndcg 0.30234 229 ndcg5 0.48523 229 ndcg10 0.59969 229 ndcg20 0.46139 229 ERR 0.28963 229 ERR10 0.27744 229 ERR20 0.28508 229 P1 1.00000 229 P5 0.40000 229 P10 0.60000 229 P15 0.46667 229 P20 0.40000 229 P30 0.33333 229 P50 0.30000 229 P100 0.18000 229 P200 0.11000 229 P500 0.04800 229 P1000 0.02400 230 num_ret 1000.00000 230 num_unjug_ret@1 0.00000 230 num_unjug_ret@10 1.00000 230 num_unjug_ret@20 3.00000 230 num_unjug_ret@100 72.00000 230 num_unjug_ret@1000 963.00000 230 num_rel 49.00000 230 num_rel_ret 9.00000 230 map 0.08699 230 R-prec 0.16327 230 bpref 0.15660 230 recip_rank 1.00000 230 ndcg 0.25219 230 ndcg5 0.40038 230 ndcg10 0.36204 230 ndcg20 0.35061 230 ERR 0.14542 230 ERR10 0.13557 230 ERR20 0.14434 230 P1 1.00000 230 P5 0.60000 230 P10 0.40000 230 P15 0.40000 230 P20 0.35000 230 P30 0.23333 230 P50 0.16000 230 P100 0.08000 230 P200 0.04500 230 P500 0.01800 230 P1000 0.00900 231 num_ret 1000.00000 231 num_unjug_ret@1 0.00000 231 num_unjug_ret@10 1.00000 231 num_unjug_ret@20 5.00000 231 num_unjug_ret@100 78.00000 231 num_unjug_ret@1000 968.00000 231 num_rel 58.00000 231 num_rel_ret 17.00000 231 map 0.11068 231 R-prec 0.20690 231 bpref 0.24168 231 recip_rank 1.00000 231 ndcg 0.35676 231 ndcg5 0.46813 231 ndcg10 0.39080 231 ndcg20 0.38127 231 ERR 0.47983 231 ERR10 0.46950 231 ERR20 0.47500 231 P1 1.00000 231 P5 0.60000 231 P10 0.40000 231 P15 0.33333 231 P20 0.35000 231 P30 0.30000 231 P50 0.22000 231 P100 0.12000 231 P200 0.07000 231 P500 0.03200 231 P1000 0.01700 232 num_ret 1000.00000 232 num_unjug_ret@1 0.00000 232 num_unjug_ret@10 1.00000 232 num_unjug_ret@20 6.00000 232 num_unjug_ret@100 76.00000 232 num_unjug_ret@1000 936.00000 232 num_rel 46.00000 232 num_rel_ret 8.00000 232 map 0.08985 232 R-prec 0.17391 232 bpref 0.16021 232 recip_rank 0.50000 232 ndcg 0.23284 232 ndcg5 0.49126 232 ndcg10 0.46159 232 ndcg20 0.40306 232 ERR 0.07850 232 ERR10 0.07028 232 ERR20 0.07850 232 P1 0.00000 232 P5 0.60000 232 P10 0.50000 232 P15 0.40000 232 P20 0.40000 232 P30 0.26667 232 P50 0.16000 232 P100 0.08000 232 P200 0.04000 232 P500 0.01600 232 P1000 0.00800 233 num_ret 1000.00000 233 num_unjug_ret@1 0.00000 233 num_unjug_ret@10 0.00000 233 num_unjug_ret@20 3.00000 233 num_unjug_ret@100 54.00000 233 num_unjug_ret@1000 930.00000 233 num_rel 75.00000 233 num_rel_ret 10.00000 233 map 0.00754 233 R-prec 0.06667 233 bpref 0.05884 233 recip_rank 0.10000 233 ndcg 0.08128 233 ndcg5 0.00000 233 ndcg10 0.03703 233 ndcg20 0.05016 233 ERR 0.01300 233 ERR10 0.00625 233 ERR20 0.00918 233 P1 0.00000 233 P5 0.00000 233 P10 0.10000 233 P15 0.06667 233 P20 0.10000 233 P30 0.06667 233 P50 0.08000 233 P100 0.05000 233 P200 0.03000 233 P500 0.01800 233 P1000 0.01000 234 num_ret 1000.00000 234 num_unjug_ret@1 0.00000 234 num_unjug_ret@10 2.00000 234 num_unjug_ret@20 4.00000 234 num_unjug_ret@100 51.00000 234 num_unjug_ret@1000 937.00000 234 num_rel 167.00000 234 num_rel_ret 35.00000 234 map 0.08863 234 R-prec 0.17365 234 bpref 0.18673 234 recip_rank 1.00000 234 ndcg 0.25385 234 ndcg5 0.59583 234 ndcg10 0.49880 234 ndcg20 0.46974 234 ERR 0.15705 234 ERR10 0.13830 234 ERR20 0.14835 234 P1 1.00000 234 P5 1.00000 234 P10 0.60000 234 P15 0.46667 234 P20 0.50000 234 P30 0.40000 234 P50 0.32000 234 P100 0.26000 234 P200 0.15000 234 P500 0.07000 234 P1000 0.03500 235 num_ret 1000.00000 235 num_unjug_ret@1 0.00000 235 num_unjug_ret@10 2.00000 235 num_unjug_ret@20 8.00000 235 num_unjug_ret@100 76.00000 235 num_unjug_ret@1000 968.00000 235 num_rel 14.00000 235 num_rel_ret 1.00000 235 map 0.00397 235 R-prec 0.00000 235 bpref 0.01531 235 recip_rank 0.05556 235 ndcg 0.07153 235 ndcg5 0.00000 235 ndcg10 0.00000 235 ndcg20 0.07153 235 ERR 0.01042 235 ERR10 0.00000 235 ERR20 0.01042 235 P1 0.00000 235 P5 0.00000 235 P10 0.00000 235 P15 0.00000 235 P20 0.05000 235 P30 0.03333 235 P50 0.02000 235 P100 0.01000 235 P200 0.00500 235 P500 0.00200 235 P1000 0.00100 236 num_ret 1000.00000 236 num_unjug_ret@1 0.00000 236 num_unjug_ret@10 2.00000 236 num_unjug_ret@20 5.00000 236 num_unjug_ret@100 75.00000 236 num_unjug_ret@1000 969.00000 236 num_rel 121.00000 236 num_rel_ret 23.00000 236 map 0.11774 236 R-prec 0.17355 236 bpref 0.18442 236 recip_rank 1.00000 236 ndcg 0.25000 236 ndcg5 0.47477 236 ndcg10 0.46041 236 ndcg20 0.49002 236 ERR 0.16230 236 ERR10 0.14443 236 ERR20 0.15716 236 P1 1.00000 236 P5 1.00000 236 P10 0.70000 236 P15 0.60000 236 P20 0.65000 236 P30 0.53333 236 P50 0.36000 236 P100 0.21000 236 P200 0.11500 236 P500 0.04600 236 P1000 0.02300 237 num_ret 1000.00000 237 num_unjug_ret@1 0.00000 237 num_unjug_ret@10 1.00000 237 num_unjug_ret@20 7.00000 237 num_unjug_ret@100 76.00000 237 num_unjug_ret@1000 970.00000 237 num_rel 10.00000 237 num_rel_ret 0.00000 237 map 0.00000 237 R-prec 0.00000 237 bpref 0.00000 237 recip_rank 0.00000 237 ndcg 0.00000 237 ndcg5 0.00000 237 ndcg10 0.00000 237 ndcg20 0.00000 237 ERR 0.00000 237 ERR10 0.00000 237 ERR20 0.00000 237 P1 0.00000 237 P5 0.00000 237 P10 0.00000 237 P15 0.00000 237 P20 0.00000 237 P30 0.00000 237 P50 0.00000 237 P100 0.00000 237 P200 0.00000 237 P500 0.00000 237 P1000 0.00000 238 num_ret 1000.00000 238 num_unjug_ret@1 0.00000 238 num_unjug_ret@10 7.00000 238 num_unjug_ret@20 14.00000 238 num_unjug_ret@100 82.00000 238 num_unjug_ret@1000 965.00000 238 num_rel 30.00000 238 num_rel_ret 4.00000 238 map 0.02398 238 R-prec 0.06667 238 bpref 0.09444 238 recip_rank 0.50000 238 ndcg 0.09249 238 ndcg5 0.05227 238 ndcg10 0.04617 238 ndcg20 0.08544 238 ERR 0.04425 238 ERR10 0.03125 238 ERR20 0.04297 238 P1 0.00000 238 P5 0.20000 238 P10 0.10000 238 P15 0.13333 238 P20 0.10000 238 P30 0.06667 238 P50 0.06000 238 P100 0.03000 238 P200 0.01500 238 P500 0.00800 238 P1000 0.00400 239 num_ret 1000.00000 239 num_unjug_ret@1 0.00000 239 num_unjug_ret@10 0.00000 239 num_unjug_ret@20 4.00000 239 num_unjug_ret@100 60.00000 239 num_unjug_ret@1000 942.00000 239 num_rel 75.00000 239 num_rel_ret 14.00000 239 map 0.07112 239 R-prec 0.17333 239 bpref 0.15733 239 recip_rank 1.00000 239 ndcg 0.14223 239 ndcg5 0.09502 239 ndcg10 0.14432 239 ndcg20 0.15102 239 ERR 0.10494 239 ERR10 0.09387 239 ERR20 0.09924 239 P1 1.00000 239 P5 0.40000 239 P10 0.50000 239 P15 0.40000 239 P20 0.35000 239 P30 0.26667 239 P50 0.22000 239 P100 0.13000 239 P200 0.07000 239 P500 0.02800 239 P1000 0.01400 240 num_ret 1000.00000 240 num_unjug_ret@1 0.00000 240 num_unjug_ret@10 7.00000 240 num_unjug_ret@20 14.00000 240 num_unjug_ret@100 81.00000 240 num_unjug_ret@1000 942.00000 240 num_rel 190.00000 240 num_rel_ret 13.00000 240 map 0.01901 240 R-prec 0.06316 240 bpref 0.06651 240 recip_rank 1.00000 240 ndcg 0.14654 240 ndcg5 0.55315 240 ndcg10 0.35895 240 ndcg20 0.23166 240 ERR 0.56650 240 ERR10 0.56055 240 ERR20 0.56055 240 P1 1.00000 240 P5 0.40000 240 P10 0.20000 240 P15 0.13333 240 P20 0.10000 240 P30 0.20000 240 P50 0.16000 240 P100 0.12000 240 P200 0.06000 240 P500 0.02600 240 P1000 0.01300 241 num_ret 1000.00000 241 num_unjug_ret@1 0.00000 241 num_unjug_ret@10 7.00000 241 num_unjug_ret@20 17.00000 241 num_unjug_ret@100 94.00000 241 num_unjug_ret@1000 973.00000 241 num_rel 100.00000 241 num_rel_ret 15.00000 241 map 0.00412 241 R-prec 0.02000 241 bpref 0.14140 241 recip_rank 0.01613 241 ndcg 0.05020 241 ndcg5 0.00000 241 ndcg10 0.00000 241 ndcg20 0.00000 241 ERR 0.00416 241 ERR10 0.00000 241 ERR20 0.00000 241 P1 0.00000 241 P5 0.00000 241 P10 0.00000 241 P15 0.00000 241 P20 0.00000 241 P30 0.00000 241 P50 0.00000 241 P100 0.02000 241 P200 0.02500 241 P500 0.02600 241 P1000 0.01500 242 num_ret 1000.00000 242 num_unjug_ret@1 0.00000 242 num_unjug_ret@10 0.00000 242 num_unjug_ret@20 4.00000 242 num_unjug_ret@100 67.00000 242 num_unjug_ret@1000 961.00000 242 num_rel 25.00000 242 num_rel_ret 3.00000 242 map 0.00403 242 R-prec 0.04000 242 bpref 0.01600 242 recip_rank 0.05000 242 ndcg 0.04624 242 ndcg5 0.00000 242 ndcg10 0.00000 242 ndcg20 0.02210 242 ERR 0.00449 242 ERR10 0.00000 242 ERR20 0.00313 242 P1 0.00000 242 P5 0.00000 242 P10 0.00000 242 P15 0.00000 242 P20 0.05000 242 P30 0.03333 242 P50 0.04000 242 P100 0.02000 242 P200 0.01000 242 P500 0.00600 242 P1000 0.00300 243 num_ret 1000.00000 243 num_unjug_ret@1 1.00000 243 num_unjug_ret@10 3.00000 243 num_unjug_ret@20 11.00000 243 num_unjug_ret@100 85.00000 243 num_unjug_ret@1000 960.00000 243 num_rel 77.00000 243 num_rel_ret 8.00000 243 map 0.01529 243 R-prec 0.03896 243 bpref 0.08889 243 recip_rank 0.50000 243 ndcg 0.06757 243 ndcg5 0.07923 243 ndcg10 0.06717 243 ndcg20 0.05767 243 ERR 0.04652 243 ERR10 0.04297 243 ERR20 0.04297 243 P1 0.00000 243 P5 0.40000 243 P10 0.20000 243 P15 0.13333 243 P20 0.10000 243 P30 0.10000 243 P50 0.06000 243 P100 0.03000 243 P200 0.03500 243 P500 0.01400 243 P1000 0.00800 244 num_ret 1000.00000 244 num_unjug_ret@1 0.00000 244 num_unjug_ret@10 3.00000 244 num_unjug_ret@20 11.00000 244 num_unjug_ret@100 78.00000 244 num_unjug_ret@1000 963.00000 244 num_rel 17.00000 244 num_rel_ret 7.00000 244 map 0.05129 244 R-prec 0.11765 244 bpref 0.11073 244 recip_rank 0.33333 244 ndcg 0.17951 244 ndcg5 0.06935 244 ndcg10 0.09724 244 ndcg20 0.08072 244 ERR 0.03432 244 ERR10 0.03060 244 ERR20 0.03060 244 P1 0.00000 244 P5 0.20000 244 P10 0.20000 244 P15 0.13333 244 P20 0.10000 244 P30 0.06667 244 P50 0.06000 244 P100 0.04000 244 P200 0.03000 244 P500 0.01400 244 P1000 0.00700 245 num_ret 1000.00000 245 num_unjug_ret@1 0.00000 245 num_unjug_ret@10 3.00000 245 num_unjug_ret@20 10.00000 245 num_unjug_ret@100 76.00000 245 num_unjug_ret@1000 972.00000 245 num_rel 9.00000 245 num_rel_ret 1.00000 245 map 0.00042 245 R-prec 0.00000 245 bpref 0.00000 245 recip_rank 0.00376 245 ndcg 0.00991 245 ndcg5 0.00000 245 ndcg10 0.00000 245 ndcg20 0.00000 245 ERR 0.00023 245 ERR10 0.00000 245 ERR20 0.00000 245 P1 0.00000 245 P5 0.00000 245 P10 0.00000 245 P15 0.00000 245 P20 0.00000 245 P30 0.00000 245 P50 0.00000 245 P100 0.00000 245 P200 0.00000 245 P500 0.00200 245 P1000 0.00100 246 num_ret 1000.00000 246 num_unjug_ret@1 1.00000 246 num_unjug_ret@10 7.00000 246 num_unjug_ret@20 13.00000 246 num_unjug_ret@100 81.00000 246 num_unjug_ret@1000 959.00000 246 num_rel 74.00000 246 num_rel_ret 11.00000 246 map 0.00542 246 R-prec 0.04054 246 bpref 0.09277 246 recip_rank 0.04762 246 ndcg 0.05466 246 ndcg5 0.00000 246 ndcg10 0.00000 246 ndcg20 0.00000 246 ERR 0.00955 246 ERR10 0.00000 246 ERR20 0.00000 246 P1 0.00000 246 P5 0.00000 246 P10 0.00000 246 P15 0.00000 246 P20 0.00000 246 P30 0.06667 246 P50 0.06000 246 P100 0.03000 246 P200 0.02500 246 P500 0.01800 246 P1000 0.01100 247 num_ret 1000.00000 247 num_unjug_ret@1 0.00000 247 num_unjug_ret@10 1.00000 247 num_unjug_ret@20 4.00000 247 num_unjug_ret@100 53.00000 247 num_unjug_ret@1000 933.00000 247 num_rel 24.00000 247 num_rel_ret 1.00000 247 map 0.04167 247 R-prec 0.04167 247 bpref 0.04167 247 recip_rank 1.00000 247 ndcg 0.10082 247 ndcg5 0.20208 247 ndcg10 0.15282 247 ndcg20 0.11062 247 ERR 0.06250 247 ERR10 0.06250 247 ERR20 0.06250 247 P1 1.00000 247 P5 0.20000 247 P10 0.10000 247 P15 0.06667 247 P20 0.05000 247 P30 0.03333 247 P50 0.02000 247 P100 0.01000 247 P200 0.00500 247 P500 0.00200 247 P1000 0.00100 248 num_ret 1000.00000 248 num_unjug_ret@1 0.00000 248 num_unjug_ret@10 2.00000 248 num_unjug_ret@20 8.00000 248 num_unjug_ret@100 75.00000 248 num_unjug_ret@1000 965.00000 248 num_rel 29.00000 248 num_rel_ret 3.00000 248 map 0.00140 248 R-prec 0.00000 248 bpref 0.01665 248 recip_rank 0.01667 248 ndcg 0.02501 248 ndcg5 0.00000 248 ndcg10 0.00000 248 ndcg20 0.00000 248 ERR 0.00369 248 ERR10 0.00000 248 ERR20 0.00000 248 P1 0.00000 248 P5 0.00000 248 P10 0.00000 248 P15 0.00000 248 P20 0.00000 248 P30 0.00000 248 P50 0.00000 248 P100 0.01000 248 P200 0.01000 248 P500 0.00400 248 P1000 0.00300 249 num_ret 1000.00000 249 num_unjug_ret@1 0.00000 249 num_unjug_ret@10 3.00000 249 num_unjug_ret@20 10.00000 249 num_unjug_ret@100 74.00000 249 num_unjug_ret@1000 967.00000 249 num_rel 44.00000 249 num_rel_ret 9.00000 249 map 0.00787 249 R-prec 0.02273 249 bpref 0.09607 249 recip_rank 0.02381 249 ndcg 0.10533 249 ndcg5 0.00000 249 ndcg10 0.00000 249 ndcg20 0.00000 249 ERR 0.01064 249 ERR10 0.00000 249 ERR20 0.00000 249 P1 0.00000 249 P5 0.00000 249 P10 0.00000 249 P15 0.00000 249 P20 0.00000 249 P30 0.00000 249 P50 0.02000 249 P100 0.05000 249 P200 0.04000 249 P500 0.01600 249 P1000 0.00900 250 num_ret 1000.00000 250 num_unjug_ret@1 0.00000 250 num_unjug_ret@10 4.00000 250 num_unjug_ret@20 12.00000 250 num_unjug_ret@100 84.00000 250 num_unjug_ret@1000 971.00000 250 num_rel 20.00000 250 num_rel_ret 1.00000 250 map 0.05000 250 R-prec 0.05000 250 bpref 0.05000 250 recip_rank 1.00000 250 ndcg 0.06985 250 ndcg5 0.11305 250 ndcg10 0.08461 250 ndcg20 0.06985 250 ERR 0.06250 250 ERR10 0.06250 250 ERR20 0.06250 250 P1 1.00000 250 P5 0.20000 250 P10 0.10000 250 P15 0.06667 250 P20 0.05000 250 P30 0.03333 250 P50 0.02000 250 P100 0.01000 250 P200 0.00500 250 P500 0.00200 250 P1000 0.00100 all queries 50.00000 all num_ret 50000.00000 all num_unjug_ret@1 7.00000 all num_unjug_ret@10 147.00000 all num_unjug_ret@20 401.00000 all num_unjug_ret@100 3497.00000 all num_unjug_ret@1000 47409.00000 all num_rel 4150.00000 all num_rel_ret 787.00000 all map 0.04673 all R-prec 0.10185 all bpref 0.12236 all recip_rank 0.50646 all ndcg 0.13394 all ndcg5 0.14850 all ndcg10 0.15105 all ndcg20 0.14612 all ERR 0.11077 all ERR10 0.10013 all ERR20 0.10628 all P1 0.38000 all P5 0.30400 all P10 0.27800 all P15 0.24933 all P20 0.23100 all P30 0.19667 all P50 0.15720 all P100 0.10100 all P200 0.06210 all P500 0.02936 all P1000 0.01574