301 num_ret 1000.00000 301 num_unjug_ret@1 0.00000 301 num_unjug_ret@10 0.00000 301 num_unjug_ret@20 0.00000 301 num_unjug_ret@100 11.00000 301 num_unjug_ret@1000 680.00000 301 num_rel 448.00000 301 num_rel_ret 121.00000 301 map 0.10136 301 R-prec 0.25000 301 bpref 0.23191 301 recip_rank 1.00000 301 ndcg 0.29329 301 ndcg5 0.33916 301 ndcg10 0.36211 301 ndcg20 0.37729 301 ERR 0.10820 301 ERR10 0.07776 301 ERR20 0.09095 301 P1 1.00000 301 P5 0.20000 301 P10 0.30000 301 P15 0.33333 301 P20 0.35000 301 P30 0.46667 301 P50 0.46000 301 P100 0.42000 301 P200 0.37000 301 P500 0.24000 301 P1000 0.12100 302 num_ret 1000.00000 302 num_unjug_ret@1 0.00000 302 num_unjug_ret@10 0.00000 302 num_unjug_ret@20 1.00000 302 num_unjug_ret@100 5.00000 302 num_unjug_ret@1000 667.00000 302 num_rel 65.00000 302 num_rel_ret 63.00000 302 map 0.57146 302 R-prec 0.58462 302 bpref 0.58675 302 recip_rank 1.00000 302 ndcg 0.86412 302 ndcg5 1.00000 302 ndcg10 0.78462 302 ndcg20 0.64052 302 ERR 0.16505 302 ERR10 0.14301 302 ERR20 0.15121 302 P1 1.00000 302 P5 1.00000 302 P10 0.70000 302 P15 0.53333 302 P20 0.55000 302 P30 0.63333 302 P50 0.60000 302 P100 0.48000 302 P200 0.31000 302 P500 0.12600 302 P1000 0.06300 303 num_ret 1000.00000 303 num_unjug_ret@1 0.00000 303 num_unjug_ret@10 0.00000 303 num_unjug_ret@20 0.00000 303 num_unjug_ret@100 0.00000 303 num_unjug_ret@1000 689.00000 303 num_rel 10.00000 303 num_rel_ret 10.00000 303 map 0.12308 303 R-prec 0.20000 303 bpref 0.08000 303 recip_rank 0.20000 303 ndcg 0.44921 303 ndcg5 0.13121 303 ndcg10 0.14876 303 ndcg20 0.14876 303 ERR 0.02506 303 ERR10 0.01836 303 ERR20 0.01836 303 P1 0.00000 303 P5 0.20000 303 P10 0.20000 303 P15 0.13333 303 P20 0.10000 303 P30 0.06667 303 P50 0.10000 303 P100 0.10000 303 P200 0.05000 303 P500 0.02000 303 P1000 0.01000 304 num_ret 1000.00000 304 num_unjug_ret@1 0.00000 304 num_unjug_ret@10 1.00000 304 num_unjug_ret@20 1.00000 304 num_unjug_ret@100 16.00000 304 num_unjug_ret@1000 495.00000 304 num_rel 196.00000 304 num_rel_ret 125.00000 304 map 0.14408 304 R-prec 0.22959 304 bpref 0.25239 304 recip_rank 0.25000 304 ndcg 0.49387 304 ndcg5 0.14607 304 ndcg10 0.17319 304 ndcg20 0.14583 304 ERR 0.04254 304 ERR10 0.02539 304 ERR20 0.02862 304 P1 0.00000 304 P5 0.20000 304 P10 0.20000 304 P15 0.13333 304 P20 0.15000 304 P30 0.13333 304 P50 0.20000 304 P100 0.23000 304 P200 0.22500 304 P500 0.22000 304 P1000 0.12500 305 num_ret 1000.00000 305 num_unjug_ret@1 0.00000 305 num_unjug_ret@10 0.00000 305 num_unjug_ret@20 1.00000 305 num_unjug_ret@100 48.00000 305 num_unjug_ret@1000 678.00000 305 num_rel 35.00000 305 num_rel_ret 5.00000 305 map 0.00553 305 R-prec 0.02857 305 bpref 0.02041 305 recip_rank 0.09091 305 ndcg 0.08407 305 ndcg5 0.00000 305 ndcg10 0.00000 305 ndcg20 0.03962 305 ERR 0.00769 305 ERR10 0.00000 305 ERR20 0.00568 305 P1 0.00000 305 P5 0.00000 305 P10 0.00000 305 P15 0.06667 305 P20 0.05000 305 P30 0.03333 305 P50 0.02000 305 P100 0.02000 305 P200 0.01500 305 P500 0.01000 305 P1000 0.00500 306 num_ret 1000.00000 306 num_unjug_ret@1 0.00000 306 num_unjug_ret@10 4.00000 306 num_unjug_ret@20 8.00000 306 num_unjug_ret@100 41.00000 306 num_unjug_ret@1000 655.00000 306 num_rel 332.00000 306 num_rel_ret 146.00000 306 map 0.14952 306 R-prec 0.32530 306 bpref 0.36760 306 recip_rank 1.00000 306 ndcg 0.41853 306 ndcg5 0.33916 306 ndcg10 0.36792 306 ndcg20 0.34130 306 ERR 0.10407 306 ERR10 0.07913 306 ERR20 0.08817 306 P1 1.00000 306 P5 0.20000 306 P10 0.30000 306 P15 0.26667 306 P20 0.30000 306 P30 0.36667 306 P50 0.34000 306 P100 0.36000 306 P200 0.34000 306 P500 0.28800 306 P1000 0.14600 307 num_ret 1000.00000 307 num_unjug_ret@1 0.00000 307 num_unjug_ret@10 0.00000 307 num_unjug_ret@20 0.00000 307 num_unjug_ret@100 4.00000 307 num_unjug_ret@1000 591.00000 307 num_rel 210.00000 307 num_rel_ret 153.00000 307 map 0.25491 307 R-prec 0.41429 307 bpref 0.36737 307 recip_rank 0.33333 307 ndcg 0.59697 307 ndcg5 0.30079 307 ndcg10 0.25881 307 ndcg20 0.23682 307 ERR 0.05805 307 ERR10 0.03805 307 ERR20 0.04441 307 P1 0.00000 307 P5 0.40000 307 P10 0.30000 307 P15 0.26667 307 P20 0.25000 307 P30 0.26667 307 P50 0.24000 307 P100 0.21000 307 P200 0.40000 307 P500 0.29200 307 P1000 0.15300 308 num_ret 1000.00000 308 num_unjug_ret@1 0.00000 308 num_unjug_ret@10 0.00000 308 num_unjug_ret@20 0.00000 308 num_unjug_ret@100 18.00000 308 num_unjug_ret@1000 635.00000 308 num_rel 4.00000 308 num_rel_ret 4.00000 308 map 0.56241 308 R-prec 0.50000 308 bpref 0.50000 308 recip_rank 1.00000 308 ndcg 0.78969 308 ndcg5 0.63668 308 ndcg10 0.63668 308 ndcg20 0.73922 308 ERR 0.09627 308 ERR10 0.09180 308 ERR20 0.09602 308 P1 1.00000 308 P5 0.40000 308 P10 0.20000 308 P15 0.20000 308 P20 0.15000 308 P30 0.10000 308 P50 0.06000 308 P100 0.03000 308 P200 0.01500 308 P500 0.00800 308 P1000 0.00400 309 num_ret 1000.00000 309 num_unjug_ret@1 0.00000 309 num_unjug_ret@10 0.00000 309 num_unjug_ret@20 0.00000 309 num_unjug_ret@100 5.00000 309 num_unjug_ret@1000 558.00000 309 num_rel 3.00000 309 num_rel_ret 1.00000 309 map 0.00188 309 R-prec 0.00000 309 bpref 0.00000 309 recip_rank 0.00565 309 ndcg 0.06277 309 ndcg5 0.00000 309 ndcg10 0.00000 309 ndcg20 0.00000 309 ERR 0.00035 309 ERR10 0.00000 309 ERR20 0.00000 309 P1 0.00000 309 P5 0.00000 309 P10 0.00000 309 P15 0.00000 309 P20 0.00000 309 P30 0.00000 309 P50 0.00000 309 P100 0.00000 309 P200 0.00500 309 P500 0.00200 309 P1000 0.00100 310 num_ret 1000.00000 310 num_unjug_ret@1 0.00000 310 num_unjug_ret@10 0.00000 310 num_unjug_ret@20 0.00000 310 num_unjug_ret@100 11.00000 310 num_unjug_ret@1000 519.00000 310 num_rel 13.00000 310 num_rel_ret 8.00000 310 map 0.20828 310 R-prec 0.23077 310 bpref 0.20118 310 recip_rank 1.00000 310 ndcg 0.50554 310 ndcg5 0.48523 310 ndcg10 0.39328 310 ndcg20 0.33366 310 ERR 0.09273 310 ERR10 0.08630 310 ERR20 0.08630 310 P1 1.00000 310 P5 0.40000 310 P10 0.30000 310 P15 0.20000 310 P20 0.15000 310 P30 0.20000 310 P50 0.12000 310 P100 0.07000 310 P200 0.03500 310 P500 0.01600 310 P1000 0.00800 311 num_ret 1000.00000 311 num_unjug_ret@1 0.00000 311 num_unjug_ret@10 0.00000 311 num_unjug_ret@20 0.00000 311 num_unjug_ret@100 2.00000 311 num_unjug_ret@1000 671.00000 311 num_rel 182.00000 311 num_rel_ret 163.00000 311 map 0.84040 311 R-prec 0.80220 311 bpref 0.87559 311 recip_rank 1.00000 311 ndcg 0.91175 311 ndcg5 1.00000 311 ndcg10 1.00000 311 ndcg20 1.00000 311 ERR 0.18484 311 ERR10 0.15886 311 ERR20 0.17613 311 P1 1.00000 311 P5 1.00000 311 P10 1.00000 311 P15 1.00000 311 P20 1.00000 311 P30 1.00000 311 P50 1.00000 311 P100 0.97000 311 P200 0.74500 311 P500 0.32600 311 P1000 0.16300 312 num_ret 1000.00000 312 num_unjug_ret@1 0.00000 312 num_unjug_ret@10 0.00000 312 num_unjug_ret@20 0.00000 312 num_unjug_ret@100 70.00000 312 num_unjug_ret@1000 953.00000 312 num_rel 11.00000 312 num_rel_ret 11.00000 312 map 0.64936 312 R-prec 0.63636 312 bpref 0.66116 312 recip_rank 1.00000 312 ndcg 0.84895 312 ndcg5 0.63995 312 ndcg10 0.62170 312 ndcg20 0.84895 312 ERR 0.12423 312 ERR10 0.11094 312 ERR20 0.12423 312 P1 1.00000 312 P5 0.60000 312 P10 0.60000 312 P15 0.60000 312 P20 0.55000 312 P30 0.36667 312 P50 0.22000 312 P100 0.11000 312 P200 0.05500 312 P500 0.02200 312 P1000 0.01100 313 num_ret 1000.00000 313 num_unjug_ret@1 0.00000 313 num_unjug_ret@10 0.00000 313 num_unjug_ret@20 0.00000 313 num_unjug_ret@100 0.00000 313 num_unjug_ret@1000 654.00000 313 num_rel 93.00000 313 num_rel_ret 90.00000 313 map 0.90961 313 R-prec 0.86022 313 bpref 0.91248 313 recip_rank 1.00000 313 ndcg 0.96609 313 ndcg5 1.00000 313 ndcg10 1.00000 313 ndcg20 1.00000 313 ERR 0.18473 313 ERR10 0.15886 313 ERR20 0.17613 313 P1 1.00000 313 P5 1.00000 313 P10 1.00000 313 P15 1.00000 313 P20 1.00000 313 P30 1.00000 313 P50 0.94000 313 P100 0.84000 313 P200 0.44500 313 P500 0.18000 313 P1000 0.09000 314 num_ret 1000.00000 314 num_unjug_ret@1 0.00000 314 num_unjug_ret@10 6.00000 314 num_unjug_ret@20 10.00000 314 num_unjug_ret@100 65.00000 314 num_unjug_ret@1000 792.00000 314 num_rel 44.00000 314 num_rel_ret 6.00000 314 map 0.00082 314 R-prec 0.00000 314 bpref 0.00000 314 recip_rank 0.00248 314 ndcg 0.05605 314 ndcg5 0.00000 314 ndcg10 0.00000 314 ndcg20 0.00000 314 ERR 0.00064 314 ERR10 0.00000 314 ERR20 0.00000 314 P1 0.00000 314 P5 0.00000 314 P10 0.00000 314 P15 0.00000 314 P20 0.00000 314 P30 0.00000 314 P50 0.00000 314 P100 0.00000 314 P200 0.00000 314 P500 0.00600 314 P1000 0.00600 315 num_ret 1000.00000 315 num_unjug_ret@1 0.00000 315 num_unjug_ret@10 0.00000 315 num_unjug_ret@20 0.00000 315 num_unjug_ret@100 8.00000 315 num_unjug_ret@1000 552.00000 315 num_rel 67.00000 315 num_rel_ret 32.00000 315 map 0.06870 315 R-prec 0.10448 315 bpref 0.05569 315 recip_rank 1.00000 315 ndcg 0.35265 315 ndcg5 0.33916 315 ndcg10 0.22009 315 ndcg20 0.14204 315 ERR 0.07448 315 ERR10 0.06250 315 ERR20 0.06250 315 P1 1.00000 315 P5 0.20000 315 P10 0.10000 315 P15 0.06667 315 P20 0.05000 315 P30 0.06667 315 P50 0.12000 315 P100 0.11000 315 P200 0.12500 315 P500 0.06400 315 P1000 0.03200 316 num_ret 1000.00000 316 num_unjug_ret@1 0.00000 316 num_unjug_ret@10 0.00000 316 num_unjug_ret@20 0.00000 316 num_unjug_ret@100 51.00000 316 num_unjug_ret@1000 873.00000 316 num_rel 34.00000 316 num_rel_ret 26.00000 316 map 0.68630 316 R-prec 0.70588 316 bpref 0.70156 316 recip_rank 1.00000 316 ndcg 0.81538 316 ndcg5 1.00000 316 ndcg10 0.93638 316 ndcg20 0.95894 316 ERR 0.17741 316 ERR10 0.15536 316 ERR20 0.17378 316 P1 1.00000 316 P5 1.00000 316 P10 0.90000 316 P15 0.93333 316 P20 0.95000 316 P30 0.76667 316 P50 0.50000 316 P100 0.25000 316 P200 0.12500 316 P500 0.05200 316 P1000 0.02600 317 num_ret 1000.00000 317 num_unjug_ret@1 0.00000 317 num_unjug_ret@10 0.00000 317 num_unjug_ret@20 0.00000 317 num_unjug_ret@100 19.00000 317 num_unjug_ret@1000 732.00000 317 num_rel 14.00000 317 num_rel_ret 14.00000 317 map 0.55164 317 R-prec 0.50000 317 bpref 0.48469 317 recip_rank 1.00000 317 ndcg 0.84247 317 ndcg5 0.86879 317 ndcg10 0.70844 317 ndcg20 0.70256 317 ERR 0.14571 317 ERR10 0.13606 317 ERR20 0.14329 317 P1 1.00000 317 P5 0.80000 317 P10 0.60000 317 P15 0.46667 317 P20 0.45000 317 P30 0.33333 317 P50 0.20000 317 P100 0.12000 317 P200 0.06500 317 P500 0.02800 317 P1000 0.01400 318 num_ret 1000.00000 318 num_unjug_ret@1 0.00000 318 num_unjug_ret@10 0.00000 318 num_unjug_ret@20 0.00000 318 num_unjug_ret@100 26.00000 318 num_unjug_ret@1000 724.00000 318 num_rel 113.00000 318 num_rel_ret 16.00000 318 map 0.00937 318 R-prec 0.02655 318 bpref 0.02052 318 recip_rank 0.50000 318 ndcg 0.11348 318 ndcg5 0.21399 318 ndcg10 0.13886 318 ndcg20 0.08962 318 ERR 0.03527 318 ERR10 0.03125 318 ERR20 0.03125 318 P1 0.00000 318 P5 0.20000 318 P10 0.10000 318 P15 0.06667 318 P20 0.05000 318 P30 0.03333 318 P50 0.04000 318 P100 0.03000 318 P200 0.03000 318 P500 0.03000 318 P1000 0.01600 319 num_ret 1000.00000 319 num_unjug_ret@1 0.00000 319 num_unjug_ret@10 1.00000 319 num_unjug_ret@20 2.00000 319 num_unjug_ret@100 16.00000 319 num_unjug_ret@1000 465.00000 319 num_rel 170.00000 319 num_rel_ret 124.00000 319 map 0.17837 319 R-prec 0.23529 319 bpref 0.22775 319 recip_rank 0.10000 319 ndcg 0.54327 319 ndcg5 0.00000 319 ndcg10 0.06362 319 ndcg20 0.07392 319 ERR 0.02544 319 ERR10 0.00625 319 ERR20 0.00933 319 P1 0.00000 319 P5 0.00000 319 P10 0.10000 319 P15 0.06667 319 P20 0.10000 319 P30 0.13333 319 P50 0.16000 319 P100 0.23000 319 P200 0.26000 319 P500 0.24200 319 P1000 0.12400 320 num_ret 1000.00000 320 num_unjug_ret@1 0.00000 320 num_unjug_ret@10 0.00000 320 num_unjug_ret@20 0.00000 320 num_unjug_ret@100 1.00000 320 num_unjug_ret@1000 521.00000 320 num_rel 6.00000 320 num_rel_ret 6.00000 320 map 0.05619 320 R-prec 0.00000 320 bpref 0.00000 320 recip_rank 0.02941 320 ndcg 0.31343 320 ndcg5 0.00000 320 ndcg10 0.00000 320 ndcg20 0.00000 320 ERR 0.00626 320 ERR10 0.00000 320 ERR20 0.00000 320 P1 0.00000 320 P5 0.00000 320 P10 0.00000 320 P15 0.00000 320 P20 0.00000 320 P30 0.00000 320 P50 0.04000 320 P100 0.06000 320 P200 0.03000 320 P500 0.01200 320 P1000 0.00600 321 num_ret 1000.00000 321 num_unjug_ret@1 0.00000 321 num_unjug_ret@10 0.00000 321 num_unjug_ret@20 0.00000 321 num_unjug_ret@100 8.00000 321 num_unjug_ret@1000 596.00000 321 num_rel 203.00000 321 num_rel_ret 126.00000 321 map 0.39048 321 R-prec 0.49261 321 bpref 0.49317 321 recip_rank 1.00000 321 ndcg 0.64321 321 ndcg5 1.00000 321 ndcg10 0.93638 321 ndcg20 0.92608 321 ERR 0.18146 321 ERR10 0.15536 321 ERR20 0.17275 321 P1 1.00000 321 P5 1.00000 321 P10 0.90000 321 P15 0.93333 321 P20 0.90000 321 P30 0.86667 321 P50 0.74000 321 P100 0.62000 321 P200 0.48500 321 P500 0.24800 321 P1000 0.12600 322 num_ret 1000.00000 322 num_unjug_ret@1 0.00000 322 num_unjug_ret@10 0.00000 322 num_unjug_ret@20 1.00000 322 num_unjug_ret@100 6.00000 322 num_unjug_ret@1000 573.00000 322 num_rel 34.00000 322 num_rel_ret 9.00000 322 map 0.00979 322 R-prec 0.00000 322 bpref 0.00000 322 recip_rank 0.02041 322 ndcg 0.13341 322 ndcg5 0.00000 322 ndcg10 0.00000 322 ndcg20 0.00000 322 ERR 0.00476 322 ERR10 0.00000 322 ERR20 0.00000 322 P1 0.00000 322 P5 0.00000 322 P10 0.00000 322 P15 0.00000 322 P20 0.00000 322 P30 0.00000 322 P50 0.02000 322 P100 0.04000 322 P200 0.03000 322 P500 0.01800 322 P1000 0.00900 323 num_ret 1000.00000 323 num_unjug_ret@1 0.00000 323 num_unjug_ret@10 0.00000 323 num_unjug_ret@20 0.00000 323 num_unjug_ret@100 4.00000 323 num_unjug_ret@1000 600.00000 323 num_rel 61.00000 323 num_rel_ret 26.00000 323 map 0.27979 323 R-prec 0.36066 323 bpref 0.33029 323 recip_rank 1.00000 323 ndcg 0.49474 323 ndcg5 0.78601 323 ndcg10 0.72809 323 ndcg20 0.75529 323 ERR 0.14877 323 ERR10 0.12529 323 ERR20 0.14327 323 P1 1.00000 323 P5 0.80000 323 P10 0.70000 323 P15 0.73333 323 P20 0.75000 323 P30 0.63333 323 P50 0.44000 323 P100 0.24000 323 P200 0.12500 323 P500 0.05200 323 P1000 0.02600 324 num_ret 1000.00000 324 num_unjug_ret@1 0.00000 324 num_unjug_ret@10 0.00000 324 num_unjug_ret@20 0.00000 324 num_unjug_ret@100 0.00000 324 num_unjug_ret@1000 577.00000 324 num_rel 161.00000 324 num_rel_ret 155.00000 324 map 0.74275 324 R-prec 0.65217 324 bpref 0.77918 324 recip_rank 1.00000 324 ndcg 0.92835 324 ndcg5 1.00000 324 ndcg10 1.00000 324 ndcg20 0.96594 324 ERR 0.18403 324 ERR10 0.15886 324 ERR20 0.17503 324 P1 1.00000 324 P5 1.00000 324 P10 1.00000 324 P15 1.00000 324 P20 0.95000 324 P30 0.93333 324 P50 0.90000 324 P100 0.79000 324 P200 0.62000 324 P500 0.31000 324 P1000 0.15500 325 num_ret 1000.00000 325 num_unjug_ret@1 0.00000 325 num_unjug_ret@10 0.00000 325 num_unjug_ret@20 0.00000 325 num_unjug_ret@100 0.00000 325 num_unjug_ret@1000 614.00000 325 num_rel 24.00000 325 num_rel_ret 22.00000 325 map 0.14175 325 R-prec 0.12500 325 bpref 0.07292 325 recip_rank 0.33333 325 ndcg 0.50849 325 ndcg5 0.16958 325 ndcg10 0.11005 325 ndcg20 0.10738 325 ERR 0.03856 325 ERR10 0.02083 325 ERR20 0.02502 325 P1 0.00000 325 P5 0.20000 325 P10 0.10000 325 P15 0.13333 325 P20 0.10000 325 P30 0.16667 325 P50 0.18000 325 P100 0.13000 325 P200 0.10000 325 P500 0.04200 325 P1000 0.02200 326 num_ret 1000.00000 326 num_unjug_ret@1 0.00000 326 num_unjug_ret@10 0.00000 326 num_unjug_ret@20 0.00000 326 num_unjug_ret@100 9.00000 326 num_unjug_ret@1000 637.00000 326 num_rel 46.00000 326 num_rel_ret 44.00000 326 map 0.77851 326 R-prec 0.78261 326 bpref 0.75898 326 recip_rank 1.00000 326 ndcg 0.92751 326 ndcg5 1.00000 326 ndcg10 1.00000 326 ndcg20 0.92813 326 ERR 0.18122 326 ERR10 0.15886 326 ERR20 0.17332 326 P1 1.00000 326 P5 1.00000 326 P10 1.00000 326 P15 0.86667 326 P20 0.90000 326 P30 0.83333 326 P50 0.72000 326 P100 0.39000 326 P200 0.21500 326 P500 0.08800 326 P1000 0.04400 327 num_ret 1000.00000 327 num_unjug_ret@1 0.00000 327 num_unjug_ret@10 0.00000 327 num_unjug_ret@20 0.00000 327 num_unjug_ret@100 2.00000 327 num_unjug_ret@1000 738.00000 327 num_rel 11.00000 327 num_rel_ret 11.00000 327 map 0.13656 327 R-prec 0.09091 327 bpref 0.08264 327 recip_rank 0.33333 327 ndcg 0.48193 327 ndcg5 0.16958 327 ndcg10 0.11005 327 ndcg20 0.15972 327 ERR 0.03426 327 ERR10 0.02083 327 ERR20 0.02572 327 P1 0.00000 327 P5 0.20000 327 P10 0.10000 327 P15 0.13333 327 P20 0.10000 327 P30 0.13333 327 P50 0.10000 327 P100 0.09000 327 P200 0.05500 327 P500 0.02200 327 P1000 0.01100 328 num_ret 1000.00000 328 num_unjug_ret@1 0.00000 328 num_unjug_ret@10 0.00000 328 num_unjug_ret@20 0.00000 328 num_unjug_ret@100 0.00000 328 num_unjug_ret@1000 620.00000 328 num_rel 8.00000 328 num_rel_ret 8.00000 328 map 0.43776 328 R-prec 0.50000 328 bpref 0.40625 328 recip_rank 1.00000 328 ndcg 0.74444 328 ndcg5 0.61643 328 ndcg10 0.54405 328 ndcg20 0.61240 328 ERR 0.10231 328 ERR10 0.09549 328 ERR20 0.09951 328 P1 1.00000 328 P5 0.60000 328 P10 0.40000 328 P15 0.33333 328 P20 0.25000 328 P30 0.20000 328 P50 0.12000 328 P100 0.07000 328 P200 0.04000 328 P500 0.01600 328 P1000 0.00800 329 num_ret 1000.00000 329 num_unjug_ret@1 0.00000 329 num_unjug_ret@10 0.00000 329 num_unjug_ret@20 0.00000 329 num_unjug_ret@100 17.00000 329 num_unjug_ret@1000 685.00000 329 num_rel 35.00000 329 num_rel_ret 26.00000 329 map 0.46859 329 R-prec 0.48571 329 bpref 0.47265 329 recip_rank 1.00000 329 ndcg 0.73345 329 ndcg5 1.00000 329 ndcg10 0.85720 329 ndcg20 0.73466 329 ERR 0.16701 329 ERR10 0.14887 329 ERR20 0.16088 329 P1 1.00000 329 P5 1.00000 329 P10 0.80000 329 P15 0.73333 329 P20 0.65000 329 P30 0.56667 329 P50 0.38000 329 P100 0.22000 329 P200 0.12500 329 P500 0.05200 329 P1000 0.02600 330 num_ret 1000.00000 330 num_unjug_ret@1 0.00000 330 num_unjug_ret@10 0.00000 330 num_unjug_ret@20 0.00000 330 num_unjug_ret@100 7.00000 330 num_unjug_ret@1000 475.00000 330 num_rel 60.00000 330 num_rel_ret 54.00000 330 map 0.23682 330 R-prec 0.30000 330 bpref 0.22389 330 recip_rank 1.00000 330 ndcg 0.66561 330 ndcg5 0.48523 330 ndcg10 0.45450 330 ndcg20 0.36638 330 ERR 0.11148 330 ERR10 0.09072 330 ERR20 0.09762 330 P1 1.00000 330 P5 0.40000 330 P10 0.40000 330 P15 0.33333 330 P20 0.30000 330 P30 0.33333 330 P50 0.32000 330 P100 0.23000 330 P200 0.18500 330 P500 0.10800 330 P1000 0.05400 331 num_ret 1000.00000 331 num_unjug_ret@1 0.00000 331 num_unjug_ret@10 0.00000 331 num_unjug_ret@20 0.00000 331 num_unjug_ret@100 13.00000 331 num_unjug_ret@1000 637.00000 331 num_rel 213.00000 331 num_rel_ret 143.00000 331 map 0.43430 331 R-prec 0.54930 331 bpref 0.56292 331 recip_rank 1.00000 331 ndcg 0.68330 331 ndcg5 1.00000 331 ndcg10 1.00000 331 ndcg20 0.85709 331 ERR 0.18011 331 ERR10 0.15886 331 ERR20 0.17015 331 P1 1.00000 331 P5 1.00000 331 P10 1.00000 331 P15 0.86667 331 P20 0.80000 331 P30 0.76667 331 P50 0.70000 331 P100 0.64000 331 P200 0.56000 331 P500 0.28200 331 P1000 0.14300 332 num_ret 1000.00000 332 num_unjug_ret@1 0.00000 332 num_unjug_ret@10 0.00000 332 num_unjug_ret@20 0.00000 332 num_unjug_ret@100 26.00000 332 num_unjug_ret@1000 535.00000 332 num_rel 254.00000 332 num_rel_ret 148.00000 332 map 0.11641 332 R-prec 0.13386 332 bpref 0.25463 332 recip_rank 0.02703 332 ndcg 0.43133 332 ndcg5 0.00000 332 ndcg10 0.00000 332 ndcg20 0.00000 332 ERR 0.00822 332 ERR10 0.00000 332 ERR20 0.00000 332 P1 0.00000 332 P5 0.00000 332 P10 0.00000 332 P15 0.00000 332 P20 0.00000 332 P30 0.00000 332 P50 0.02000 332 P100 0.03000 332 P200 0.09000 332 P500 0.27000 332 P1000 0.14800 333 num_ret 1000.00000 333 num_unjug_ret@1 0.00000 333 num_unjug_ret@10 0.00000 333 num_unjug_ret@20 0.00000 333 num_unjug_ret@100 7.00000 333 num_unjug_ret@1000 593.00000 333 num_rel 65.00000 333 num_rel_ret 62.00000 333 map 0.29782 333 R-prec 0.36923 333 bpref 0.30272 333 recip_rank 0.33333 333 ndcg 0.70436 333 ndcg5 0.44685 333 ndcg10 0.57743 333 ndcg20 0.48149 333 ERR 0.09094 333 ERR10 0.07232 333 ERR20 0.08044 333 P1 0.00000 333 P5 0.60000 333 P10 0.70000 333 P15 0.60000 333 P20 0.50000 333 P30 0.43333 333 P50 0.42000 333 P100 0.27000 333 P200 0.19500 333 P500 0.11200 333 P1000 0.06200 334 num_ret 1000.00000 334 num_unjug_ret@1 0.00000 334 num_unjug_ret@10 0.00000 334 num_unjug_ret@20 2.00000 334 num_unjug_ret@100 14.00000 334 num_unjug_ret@1000 673.00000 334 num_rel 9.00000 334 num_rel_ret 9.00000 334 map 0.31160 334 R-prec 0.22222 334 bpref 0.24691 334 recip_rank 1.00000 334 ndcg 0.67050 334 ndcg5 0.55315 334 ndcg10 0.38334 334 ndcg20 0.51243 334 ERR 0.10246 334 ERR10 0.09180 334 ERR20 0.10108 334 P1 1.00000 334 P5 0.40000 334 P10 0.20000 334 P15 0.26667 334 P20 0.20000 334 P30 0.13333 334 P50 0.08000 334 P100 0.05000 334 P200 0.03500 334 P500 0.01800 334 P1000 0.00900 335 num_ret 1000.00000 335 num_unjug_ret@1 0.00000 335 num_unjug_ret@10 0.00000 335 num_unjug_ret@20 0.00000 335 num_unjug_ret@100 10.00000 335 num_unjug_ret@1000 614.00000 335 num_rel 66.00000 335 num_rel_ret 60.00000 335 map 0.42017 335 R-prec 0.45455 335 bpref 0.41368 335 recip_rank 1.00000 335 ndcg 0.77435 335 ndcg5 0.65481 335 ndcg10 0.71237 335 ndcg20 0.70762 335 ERR 0.14685 335 ERR10 0.12162 335 ERR20 0.13741 335 P1 1.00000 335 P5 0.60000 335 P10 0.70000 335 P15 0.66667 335 P20 0.70000 335 P30 0.66667 335 P50 0.56000 335 P100 0.34000 335 P200 0.22000 335 P500 0.12000 335 P1000 0.06000 336 num_ret 1000.00000 336 num_unjug_ret@1 0.00000 336 num_unjug_ret@10 0.00000 336 num_unjug_ret@20 0.00000 336 num_unjug_ret@100 2.00000 336 num_unjug_ret@1000 667.00000 336 num_rel 12.00000 336 num_rel_ret 11.00000 336 map 0.06183 336 R-prec 0.00000 336 bpref 0.00000 336 recip_rank 0.01754 336 ndcg 0.34217 336 ndcg5 0.00000 336 ndcg10 0.00000 336 ndcg20 0.00000 336 ERR 0.00703 336 ERR10 0.00000 336 ERR20 0.00000 336 P1 0.00000 336 P5 0.00000 336 P10 0.00000 336 P15 0.00000 336 P20 0.00000 336 P30 0.00000 336 P50 0.00000 336 P100 0.09000 336 P200 0.05000 336 P500 0.02200 336 P1000 0.01100 337 num_ret 1000.00000 337 num_unjug_ret@1 0.00000 337 num_unjug_ret@10 0.00000 337 num_unjug_ret@20 0.00000 337 num_unjug_ret@100 2.00000 337 num_unjug_ret@1000 576.00000 337 num_rel 93.00000 337 num_rel_ret 92.00000 337 map 0.40128 337 R-prec 0.35484 337 bpref 0.34039 337 recip_rank 0.50000 337 ndcg 0.77313 337 ndcg5 0.34519 337 ndcg10 0.43228 337 ndcg20 0.42028 337 ERR 0.08644 337 ERR10 0.06267 337 ERR20 0.07374 337 P1 0.00000 337 P5 0.40000 337 P10 0.50000 337 P15 0.40000 337 P20 0.45000 337 P30 0.43333 337 P50 0.40000 337 P100 0.37000 337 P200 0.42500 337 P500 0.18200 337 P1000 0.09200 338 num_ret 1000.00000 338 num_unjug_ret@1 0.00000 338 num_unjug_ret@10 0.00000 338 num_unjug_ret@20 0.00000 338 num_unjug_ret@100 2.00000 338 num_unjug_ret@1000 726.00000 338 num_rel 4.00000 338 num_rel_ret 4.00000 338 map 0.49318 338 R-prec 0.50000 338 bpref 0.43750 338 recip_rank 1.00000 338 ndcg 0.75089 338 ndcg5 0.58557 338 ndcg10 0.58557 338 ndcg20 0.69446 338 ERR 0.08745 338 ERR10 0.08203 338 ERR20 0.08703 338 P1 1.00000 338 P5 0.40000 338 P10 0.20000 338 P15 0.20000 338 P20 0.15000 338 P30 0.10000 338 P50 0.06000 338 P100 0.03000 338 P200 0.02000 338 P500 0.00800 338 P1000 0.00400 339 num_ret 1000.00000 339 num_unjug_ret@1 0.00000 339 num_unjug_ret@10 0.00000 339 num_unjug_ret@20 0.00000 339 num_unjug_ret@100 3.00000 339 num_unjug_ret@1000 548.00000 339 num_rel 10.00000 339 num_rel_ret 10.00000 339 map 0.46493 339 R-prec 0.50000 339 bpref 0.46000 339 recip_rank 0.50000 339 ndcg 0.70447 339 ndcg5 0.49126 339 ndcg10 0.45841 339 ndcg20 0.62580 339 ERR 0.08060 339 ERR10 0.06961 339 ERR20 0.07863 339 P1 0.00000 339 P5 0.60000 339 P10 0.50000 339 P15 0.46667 339 P20 0.40000 339 P30 0.30000 339 P50 0.18000 339 P100 0.09000 339 P200 0.05000 339 P500 0.02000 339 P1000 0.01000 340 num_ret 1000.00000 340 num_unjug_ret@1 0.00000 340 num_unjug_ret@10 0.00000 340 num_unjug_ret@20 1.00000 340 num_unjug_ret@100 26.00000 340 num_unjug_ret@1000 634.00000 340 num_rel 69.00000 340 num_rel_ret 45.00000 340 map 0.34359 340 R-prec 0.37681 340 bpref 0.35959 340 recip_rank 1.00000 340 ndcg 0.64588 340 ndcg5 1.00000 340 ndcg10 0.93638 340 ndcg20 0.78423 340 ERR 0.17362 340 ERR10 0.15536 340 ERR20 0.16636 340 P1 1.00000 340 P5 1.00000 340 P10 0.90000 340 P15 0.80000 340 P20 0.70000 340 P30 0.60000 340 P50 0.40000 340 P100 0.29000 340 P200 0.21000 340 P500 0.09000 340 P1000 0.04500 341 num_ret 1000.00000 341 num_unjug_ret@1 0.00000 341 num_unjug_ret@10 0.00000 341 num_unjug_ret@20 3.00000 341 num_unjug_ret@100 10.00000 341 num_unjug_ret@1000 625.00000 341 num_rel 78.00000 341 num_rel_ret 67.00000 341 map 0.35461 341 R-prec 0.34615 341 bpref 0.33268 341 recip_rank 1.00000 341 ndcg 0.72853 341 ndcg5 0.63995 341 ndcg10 0.70273 341 ndcg20 0.66893 341 ERR 0.14237 341 ERR10 0.11887 341 ERR20 0.13336 341 P1 1.00000 341 P5 0.60000 341 P10 0.70000 341 P15 0.66667 341 P20 0.65000 341 P30 0.60000 341 P50 0.46000 341 P100 0.31000 341 P200 0.27500 341 P500 0.13400 341 P1000 0.06700 342 num_ret 1000.00000 342 num_unjug_ret@1 0.00000 342 num_unjug_ret@10 0.00000 342 num_unjug_ret@20 0.00000 342 num_unjug_ret@100 21.00000 342 num_unjug_ret@1000 813.00000 342 num_rel 20.00000 342 num_rel_ret 13.00000 342 map 0.16650 342 R-prec 0.20000 342 bpref 0.18500 342 recip_rank 0.50000 342 ndcg 0.46282 342 ndcg5 0.49126 342 ndcg10 0.39719 342 ndcg20 0.25633 342 ERR 0.07184 342 ERR10 0.06547 342 ERR20 0.06547 342 P1 0.00000 342 P5 0.60000 342 P10 0.40000 342 P15 0.26667 342 P20 0.20000 342 P30 0.20000 342 P50 0.14000 342 P100 0.07000 342 P200 0.06000 342 P500 0.02600 342 P1000 0.01300 343 num_ret 1000.00000 343 num_unjug_ret@1 0.00000 343 num_unjug_ret@10 2.00000 343 num_unjug_ret@20 4.00000 343 num_unjug_ret@100 32.00000 343 num_unjug_ret@1000 742.00000 343 num_rel 258.00000 343 num_rel_ret 54.00000 343 map 0.04338 343 R-prec 0.14729 343 bpref 0.16743 343 recip_rank 1.00000 343 ndcg 0.21559 343 ndcg5 0.33916 343 ndcg10 0.29346 343 ndcg20 0.25956 343 ERR 0.09263 343 ERR10 0.07087 343 ERR20 0.07781 343 P1 1.00000 343 P5 0.20000 343 P10 0.20000 343 P15 0.20000 343 P20 0.20000 343 P30 0.26667 343 P50 0.28000 343 P100 0.20000 343 P200 0.15500 343 P500 0.10800 343 P1000 0.05400 344 num_ret 1000.00000 344 num_unjug_ret@1 0.00000 344 num_unjug_ret@10 1.00000 344 num_unjug_ret@20 6.00000 344 num_unjug_ret@100 44.00000 344 num_unjug_ret@1000 633.00000 344 num_rel 5.00000 344 num_rel_ret 5.00000 344 map 0.01301 344 R-prec 0.00000 344 bpref 0.00000 344 recip_rank 0.01316 344 ndcg 0.22280 344 ndcg5 0.00000 344 ndcg10 0.00000 344 ndcg20 0.00000 344 ERR 0.00164 344 ERR10 0.00000 344 ERR20 0.00000 344 P1 0.00000 344 P5 0.00000 344 P10 0.00000 344 P15 0.00000 344 P20 0.00000 344 P30 0.00000 344 P50 0.00000 344 P100 0.01000 344 P200 0.00500 344 P500 0.01000 344 P1000 0.00500 345 num_ret 1000.00000 345 num_unjug_ret@1 0.00000 345 num_unjug_ret@10 0.00000 345 num_unjug_ret@20 0.00000 345 num_unjug_ret@100 4.00000 345 num_unjug_ret@1000 533.00000 345 num_rel 38.00000 345 num_rel_ret 36.00000 345 map 0.32196 345 R-prec 0.34211 345 bpref 0.27216 345 recip_rank 0.50000 345 ndcg 0.70045 345 ndcg5 0.66084 345 ndcg10 0.49827 345 ndcg20 0.39339 345 ERR 0.09860 345 ERR10 0.08085 345 ERR20 0.08698 345 P1 0.00000 345 P5 0.80000 345 P10 0.50000 345 P15 0.40000 345 P20 0.35000 345 P30 0.30000 345 P50 0.34000 345 P100 0.27000 345 P200 0.17000 345 P500 0.07200 345 P1000 0.03600 346 num_ret 1000.00000 346 num_unjug_ret@1 0.00000 346 num_unjug_ret@10 3.00000 346 num_unjug_ret@20 6.00000 346 num_unjug_ret@100 28.00000 346 num_unjug_ret@1000 639.00000 346 num_rel 105.00000 346 num_rel_ret 59.00000 346 map 0.05560 346 R-prec 0.07619 346 bpref 0.05433 346 recip_rank 0.01786 346 ndcg 0.34809 346 ndcg5 0.00000 346 ndcg10 0.00000 346 ndcg20 0.00000 346 ERR 0.00845 346 ERR10 0.00000 346 ERR20 0.00000 346 P1 0.00000 346 P5 0.00000 346 P10 0.00000 346 P15 0.00000 346 P20 0.00000 346 P30 0.00000 346 P50 0.00000 346 P100 0.07000 346 P200 0.09500 346 P500 0.11200 346 P1000 0.05900 347 num_ret 1000.00000 347 num_unjug_ret@1 0.00000 347 num_unjug_ret@10 0.00000 347 num_unjug_ret@20 1.00000 347 num_unjug_ret@100 32.00000 347 num_unjug_ret@1000 581.00000 347 num_rel 152.00000 347 num_rel_ret 95.00000 347 map 0.08712 347 R-prec 0.01974 347 bpref 0.09236 347 recip_rank 0.01064 347 ndcg 0.41025 347 ndcg5 0.00000 347 ndcg10 0.00000 347 ndcg20 0.00000 347 ERR 0.00574 347 ERR10 0.00000 347 ERR20 0.00000 347 P1 0.00000 347 P5 0.00000 347 P10 0.00000 347 P15 0.00000 347 P20 0.00000 347 P30 0.00000 347 P50 0.00000 347 P100 0.02000 347 P200 0.07500 347 P500 0.17200 347 P1000 0.09500 348 num_ret 1000.00000 348 num_unjug_ret@1 0.00000 348 num_unjug_ret@10 4.00000 348 num_unjug_ret@20 10.00000 348 num_unjug_ret@100 82.00000 348 num_unjug_ret@1000 968.00000 348 num_rel 5.00000 348 num_rel_ret 5.00000 348 map 0.92667 348 R-prec 0.80000 348 bpref 0.92000 348 recip_rank 1.00000 348 ndcg 0.97474 348 ndcg5 0.85393 348 ndcg10 0.97474 348 ndcg20 0.97474 348 ERR 0.12845 348 ERR10 0.12845 348 ERR20 0.12845 348 P1 1.00000 348 P5 0.80000 348 P10 0.50000 348 P15 0.33333 348 P20 0.25000 348 P30 0.16667 348 P50 0.10000 348 P100 0.05000 348 P200 0.02500 348 P500 0.01000 348 P1000 0.00500 349 num_ret 1000.00000 349 num_unjug_ret@1 0.00000 349 num_unjug_ret@10 0.00000 349 num_unjug_ret@20 0.00000 349 num_unjug_ret@100 15.00000 349 num_unjug_ret@1000 808.00000 349 num_rel 73.00000 349 num_rel_ret 32.00000 349 map 0.10919 349 R-prec 0.23288 349 bpref 0.17414 349 recip_rank 0.50000 349 ndcg 0.37308 349 ndcg5 0.34519 349 ndcg10 0.29737 349 ndcg20 0.29899 349 ERR 0.07192 349 ERR10 0.05082 349 ERR20 0.06082 349 P1 0.00000 349 P5 0.40000 349 P10 0.30000 349 P15 0.33333 349 P20 0.30000 349 P30 0.26667 349 P50 0.26000 349 P100 0.20000 349 P200 0.15000 349 P500 0.06400 349 P1000 0.03200 350 num_ret 1000.00000 350 num_unjug_ret@1 0.00000 350 num_unjug_ret@10 0.00000 350 num_unjug_ret@20 2.00000 350 num_unjug_ret@100 23.00000 350 num_unjug_ret@1000 595.00000 350 num_rel 68.00000 350 num_rel_ret 38.00000 350 map 0.07304 350 R-prec 0.07353 350 bpref 0.06099 350 recip_rank 1.00000 350 ndcg 0.40213 350 ndcg5 0.55315 350 ndcg10 0.35895 350 ndcg20 0.26400 350 ERR 0.10099 350 ERR10 0.09180 350 ERR20 0.09454 350 P1 1.00000 350 P5 0.40000 350 P10 0.20000 350 P15 0.13333 350 P20 0.15000 350 P30 0.10000 350 P50 0.10000 350 P100 0.09000 350 P200 0.06500 350 P500 0.07000 350 P1000 0.03800 351 num_ret 1000.00000 351 num_unjug_ret@1 0.00000 351 num_unjug_ret@10 0.00000 351 num_unjug_ret@20 0.00000 351 num_unjug_ret@100 2.00000 351 num_unjug_ret@1000 502.00000 351 num_rel 48.00000 351 num_rel_ret 46.00000 351 map 0.65393 351 R-prec 0.56250 351 bpref 0.56988 351 recip_rank 1.00000 351 ndcg 0.89426 351 ndcg5 1.00000 351 ndcg10 1.00000 351 ndcg20 0.89116 351 ERR 0.17899 351 ERR10 0.15886 351 ERR20 0.17148 351 P1 1.00000 351 P5 1.00000 351 P10 1.00000 351 P15 0.86667 351 P20 0.85000 351 P30 0.76667 351 P50 0.56000 351 P100 0.37000 351 P200 0.23000 351 P500 0.09200 351 P1000 0.04600 352 num_ret 1000.00000 352 num_unjug_ret@1 0.00000 352 num_unjug_ret@10 0.00000 352 num_unjug_ret@20 0.00000 352 num_unjug_ret@100 4.00000 352 num_unjug_ret@1000 342.00000 352 num_rel 246.00000 352 num_rel_ret 217.00000 352 map 0.51312 352 R-prec 0.57317 352 bpref 0.63208 352 recip_rank 1.00000 352 ndcg 0.81460 352 ndcg5 0.85393 352 ndcg10 0.90521 352 ndcg20 0.72752 352 ERR 0.16835 352 ERR10 0.14837 352 ERR20 0.15732 352 P1 1.00000 352 P5 0.80000 352 P10 0.90000 352 P15 0.73333 352 P20 0.65000 352 P30 0.60000 352 P50 0.62000 352 P100 0.56000 352 P200 0.53000 352 P500 0.43000 352 P1000 0.21700 353 num_ret 1000.00000 353 num_unjug_ret@1 0.00000 353 num_unjug_ret@10 0.00000 353 num_unjug_ret@20 0.00000 353 num_unjug_ret@100 1.00000 353 num_unjug_ret@1000 586.00000 353 num_rel 122.00000 353 num_rel_ret 117.00000 353 map 0.58813 353 R-prec 0.54098 353 bpref 0.62161 353 recip_rank 1.00000 353 ndcg 0.87420 353 ndcg5 1.00000 353 ndcg10 0.80069 353 ndcg20 0.72790 353 ERR 0.17183 353 ERR10 0.14624 353 ERR20 0.15987 353 P1 1.00000 353 P5 1.00000 353 P10 0.70000 353 P15 0.66667 353 P20 0.65000 353 P30 0.70000 353 P50 0.64000 353 P100 0.58000 353 P200 0.53500 353 P500 0.23400 353 P1000 0.11700 354 num_ret 1000.00000 354 num_unjug_ret@1 0.00000 354 num_unjug_ret@10 0.00000 354 num_unjug_ret@20 0.00000 354 num_unjug_ret@100 6.00000 354 num_unjug_ret@1000 455.00000 354 num_rel 361.00000 354 num_rel_ret 123.00000 354 map 0.15042 354 R-prec 0.33518 354 bpref 0.26725 354 recip_rank 1.00000 354 ndcg 0.37156 354 ndcg5 0.85393 354 ndcg10 0.63254 354 ndcg20 0.51595 354 ERR 0.15264 354 ERR10 0.12845 354 ERR20 0.13731 354 P1 1.00000 354 P5 0.80000 354 P10 0.50000 354 P15 0.46667 354 P20 0.40000 354 P30 0.46667 354 P50 0.48000 354 P100 0.42000 354 P200 0.41500 354 P500 0.24200 354 P1000 0.12300 355 num_ret 1000.00000 355 num_unjug_ret@1 0.00000 355 num_unjug_ret@10 0.00000 355 num_unjug_ret@20 0.00000 355 num_unjug_ret@100 1.00000 355 num_unjug_ret@1000 534.00000 355 num_rel 45.00000 355 num_rel_ret 40.00000 355 map 0.19507 355 R-prec 0.20000 355 bpref 0.15852 355 recip_rank 1.00000 355 ndcg 0.63257 355 ndcg5 0.78601 355 ndcg10 0.51007 355 ndcg20 0.39680 355 ERR 0.11994 355 ERR10 0.10606 355 ERR20 0.11146 355 P1 1.00000 355 P5 0.80000 355 P10 0.40000 355 P15 0.26667 355 P20 0.30000 355 P30 0.26667 355 P50 0.18000 355 P100 0.13000 355 P200 0.13000 355 P500 0.08000 355 P1000 0.04000 356 num_ret 1000.00000 356 num_unjug_ret@1 0.00000 356 num_unjug_ret@10 0.00000 356 num_unjug_ret@20 0.00000 356 num_unjug_ret@100 0.00000 356 num_unjug_ret@1000 648.00000 356 num_rel 17.00000 356 num_rel_ret 12.00000 356 map 0.07721 356 R-prec 0.11765 356 bpref 0.04844 356 recip_rank 0.12500 356 ndcg 0.35099 356 ndcg5 0.00000 356 ndcg10 0.06943 356 ndcg20 0.08911 356 ERR 0.01923 356 ERR10 0.00781 356 ERR20 0.01172 356 P1 0.00000 356 P5 0.00000 356 P10 0.10000 356 P15 0.13333 356 P20 0.10000 356 P30 0.06667 356 P50 0.14000 356 P100 0.10000 356 P200 0.05500 356 P500 0.02400 356 P1000 0.01200 357 num_ret 1000.00000 357 num_unjug_ret@1 0.00000 357 num_unjug_ret@10 0.00000 357 num_unjug_ret@20 0.00000 357 num_unjug_ret@100 1.00000 357 num_unjug_ret@1000 528.00000 357 num_rel 270.00000 357 num_rel_ret 194.00000 357 map 0.56099 357 R-prec 0.63333 357 bpref 0.63735 357 recip_rank 1.00000 357 ndcg 0.74405 357 ndcg5 1.00000 357 ndcg10 1.00000 357 ndcg20 0.89324 357 ERR 0.18228 357 ERR10 0.15886 357 ERR20 0.17187 357 P1 1.00000 357 P5 1.00000 357 P10 1.00000 357 P15 0.86667 357 P20 0.85000 357 P30 0.90000 357 P50 0.90000 357 P100 0.84000 357 P200 0.70500 357 P500 0.38400 357 P1000 0.19400 358 num_ret 1000.00000 358 num_unjug_ret@1 0.00000 358 num_unjug_ret@10 0.00000 358 num_unjug_ret@20 0.00000 358 num_unjug_ret@100 0.00000 358 num_unjug_ret@1000 489.00000 358 num_rel 51.00000 358 num_rel_ret 51.00000 358 map 0.20436 358 R-prec 0.21569 358 bpref 0.12687 358 recip_rank 0.12500 358 ndcg 0.61630 358 ndcg5 0.00000 358 ndcg10 0.06943 358 ndcg20 0.15515 358 ERR 0.03310 358 ERR10 0.00781 358 ERR20 0.02029 358 P1 0.00000 358 P5 0.00000 358 P10 0.10000 358 P15 0.20000 358 P20 0.20000 358 P30 0.20000 358 P50 0.22000 358 P100 0.20000 358 P200 0.21500 358 P500 0.10000 358 P1000 0.05100 359 num_ret 1000.00000 359 num_unjug_ret@1 0.00000 359 num_unjug_ret@10 0.00000 359 num_unjug_ret@20 0.00000 359 num_unjug_ret@100 2.00000 359 num_unjug_ret@1000 455.00000 359 num_rel 28.00000 359 num_rel_ret 14.00000 359 map 0.05026 359 R-prec 0.10714 359 bpref 0.04209 359 recip_rank 0.06667 359 ndcg 0.27838 359 ndcg5 0.00000 359 ndcg10 0.00000 359 ndcg20 0.06785 359 ERR 0.01617 359 ERR10 0.00000 359 ERR20 0.00710 359 P1 0.00000 359 P5 0.00000 359 P10 0.00000 359 P15 0.06667 359 P20 0.10000 359 P30 0.10000 359 P50 0.12000 359 P100 0.09000 359 P200 0.07000 359 P500 0.02800 359 P1000 0.01400 360 num_ret 1000.00000 360 num_unjug_ret@1 0.00000 360 num_unjug_ret@10 0.00000 360 num_unjug_ret@20 1.00000 360 num_unjug_ret@100 14.00000 360 num_unjug_ret@1000 495.00000 360 num_rel 151.00000 360 num_rel_ret 125.00000 360 map 0.40817 360 R-prec 0.39073 360 bpref 0.45844 360 recip_rank 1.00000 360 ndcg 0.75844 360 ndcg5 1.00000 360 ndcg10 0.87012 360 ndcg20 0.81513 360 ERR 0.17789 360 ERR10 0.15122 360 ERR20 0.16701 360 P1 1.00000 360 P5 1.00000 360 P10 0.80000 360 P15 0.86667 360 P20 0.75000 360 P30 0.83333 360 P50 0.66000 360 P100 0.52000 360 P200 0.33500 360 P500 0.24200 360 P1000 0.12500 361 num_ret 1000.00000 361 num_unjug_ret@1 0.00000 361 num_unjug_ret@10 0.00000 361 num_unjug_ret@20 0.00000 361 num_unjug_ret@100 8.00000 361 num_unjug_ret@1000 478.00000 361 num_rel 9.00000 361 num_rel_ret 7.00000 361 map 0.48684 361 R-prec 0.55556 361 bpref 0.55556 361 recip_rank 0.50000 361 ndcg 0.65642 361 ndcg5 0.52963 361 ndcg10 0.52912 361 ndcg20 0.65642 361 ERR 0.08737 361 ERR10 0.07999 361 ERR20 0.08737 361 P1 0.00000 361 P5 0.60000 361 P10 0.50000 361 P15 0.46667 361 P20 0.35000 361 P30 0.23333 361 P50 0.14000 361 P100 0.07000 361 P200 0.03500 361 P500 0.01400 361 P1000 0.00700 362 num_ret 1000.00000 362 num_unjug_ret@1 0.00000 362 num_unjug_ret@10 0.00000 362 num_unjug_ret@20 0.00000 362 num_unjug_ret@100 6.00000 362 num_unjug_ret@1000 395.00000 362 num_rel 39.00000 362 num_rel_ret 35.00000 362 map 0.28305 362 R-prec 0.30769 362 bpref 0.25838 362 recip_rank 0.50000 362 ndcg 0.66318 362 ndcg5 0.66084 362 ndcg10 0.50724 362 ndcg20 0.39497 362 ERR 0.09866 362 ERR10 0.08286 362 ERR20 0.08792 362 P1 0.00000 362 P5 0.80000 362 P10 0.50000 362 P15 0.33333 362 P20 0.35000 362 P30 0.30000 362 P50 0.30000 362 P100 0.23000 362 P200 0.15000 362 P500 0.07000 362 P1000 0.03500 363 num_ret 1000.00000 363 num_unjug_ret@1 0.00000 363 num_unjug_ret@10 0.00000 363 num_unjug_ret@20 0.00000 363 num_unjug_ret@100 1.00000 363 num_unjug_ret@1000 392.00000 363 num_rel 16.00000 363 num_rel_ret 15.00000 363 map 0.22048 363 R-prec 0.18750 363 bpref 0.18750 363 recip_rank 1.00000 363 ndcg 0.60707 363 ndcg5 0.72273 363 ndcg10 0.46900 363 ndcg20 0.34899 363 ERR 0.11277 363 ERR10 0.11011 363 ERR20 0.11011 363 P1 1.00000 363 P5 0.60000 363 P10 0.30000 363 P15 0.20000 363 P20 0.15000 363 P30 0.10000 363 P50 0.06000 363 P100 0.04000 363 P200 0.04000 363 P500 0.03000 363 P1000 0.01500 364 num_ret 1000.00000 364 num_unjug_ret@1 0.00000 364 num_unjug_ret@10 0.00000 364 num_unjug_ret@20 0.00000 364 num_unjug_ret@100 4.00000 364 num_unjug_ret@1000 718.00000 364 num_rel 35.00000 364 num_rel_ret 35.00000 364 map 0.47598 364 R-prec 0.45714 364 bpref 0.40000 364 recip_rank 0.50000 364 ndcg 0.77537 364 ndcg5 0.38357 364 ndcg10 0.52158 364 ndcg20 0.51823 364 ERR 0.09799 364 ERR10 0.07496 364 ERR20 0.08848 364 P1 0.00000 364 P5 0.40000 364 P10 0.60000 364 P15 0.66667 364 P20 0.55000 364 P30 0.53333 364 P50 0.40000 364 P100 0.35000 364 P200 0.17500 364 P500 0.07000 364 P1000 0.03500 365 num_ret 1000.00000 365 num_unjug_ret@1 0.00000 365 num_unjug_ret@10 0.00000 365 num_unjug_ret@20 0.00000 365 num_unjug_ret@100 0.00000 365 num_unjug_ret@1000 559.00000 365 num_rel 35.00000 365 num_rel_ret 35.00000 365 map 0.97456 365 R-prec 0.94286 365 bpref 0.97714 365 recip_rank 1.00000 365 ndcg 0.99480 365 ndcg5 1.00000 365 ndcg10 1.00000 365 ndcg20 1.00000 365 ERR 0.18231 365 ERR10 0.15886 365 ERR20 0.17613 365 P1 1.00000 365 P5 1.00000 365 P10 1.00000 365 P15 1.00000 365 P20 1.00000 365 P30 0.93333 365 P50 0.70000 365 P100 0.35000 365 P200 0.17500 365 P500 0.07000 365 P1000 0.03500 366 num_ret 1000.00000 366 num_unjug_ret@1 0.00000 366 num_unjug_ret@10 0.00000 366 num_unjug_ret@20 0.00000 366 num_unjug_ret@100 0.00000 366 num_unjug_ret@1000 706.00000 366 num_rel 99.00000 366 num_rel_ret 96.00000 366 map 0.49991 366 R-prec 0.52525 366 bpref 0.53005 366 recip_rank 1.00000 366 ndcg 0.82693 366 ndcg5 0.68435 366 ndcg10 0.58372 366 ndcg20 0.51374 366 ERR 0.13976 366 ERR10 0.11550 366 ERR20 0.12559 366 P1 1.00000 366 P5 0.60000 366 P10 0.50000 366 P15 0.40000 366 P20 0.45000 366 P30 0.50000 366 P50 0.50000 366 P100 0.52000 366 P200 0.47000 366 P500 0.19000 366 P1000 0.09600 367 num_ret 1000.00000 367 num_unjug_ret@1 0.00000 367 num_unjug_ret@10 0.00000 367 num_unjug_ret@20 0.00000 367 num_unjug_ret@100 2.00000 367 num_unjug_ret@1000 610.00000 367 num_rel 189.00000 367 num_rel_ret 85.00000 367 map 0.08979 367 R-prec 0.18519 367 bpref 0.13390 367 recip_rank 0.03704 367 ndcg 0.34556 367 ndcg5 0.00000 367 ndcg10 0.00000 367 ndcg20 0.00000 367 ERR 0.01399 367 ERR10 0.00000 367 ERR20 0.00000 367 P1 0.00000 367 P5 0.00000 367 P10 0.00000 367 P15 0.00000 367 P20 0.00000 367 P30 0.06667 367 P50 0.10000 367 P100 0.11000 367 P200 0.20500 367 P500 0.16800 367 P1000 0.08500 368 num_ret 1000.00000 368 num_unjug_ret@1 0.00000 368 num_unjug_ret@10 0.00000 368 num_unjug_ret@20 0.00000 368 num_unjug_ret@100 1.00000 368 num_unjug_ret@1000 569.00000 368 num_rel 61.00000 368 num_rel_ret 54.00000 368 map 0.79352 368 R-prec 0.72131 368 bpref 0.77775 368 recip_rank 1.00000 368 ndcg 0.89962 368 ndcg5 1.00000 368 ndcg10 1.00000 368 ndcg20 1.00000 368 ERR 0.18400 368 ERR10 0.15886 368 ERR20 0.17613 368 P1 1.00000 368 P5 1.00000 368 P10 1.00000 368 P15 1.00000 368 P20 1.00000 368 P30 1.00000 368 P50 0.82000 368 P100 0.51000 368 P200 0.26500 368 P500 0.10800 368 P1000 0.05400 369 num_ret 1000.00000 369 num_unjug_ret@1 1.00000 369 num_unjug_ret@10 8.00000 369 num_unjug_ret@20 17.00000 369 num_unjug_ret@100 76.00000 369 num_unjug_ret@1000 721.00000 369 num_rel 13.00000 369 num_rel_ret 13.00000 369 map 0.03437 369 R-prec 0.07692 369 bpref 0.07101 369 recip_rank 0.25000 369 ndcg 0.34276 369 ndcg5 0.14607 369 ndcg10 0.09479 369 ndcg20 0.08042 369 ERR 0.01754 369 ERR10 0.01563 369 ERR20 0.01563 369 P1 0.00000 369 P5 0.20000 369 P10 0.10000 369 P15 0.06667 369 P20 0.05000 369 P30 0.03333 369 P50 0.02000 369 P100 0.01000 369 P200 0.02000 369 P500 0.01200 369 P1000 0.01300 370 num_ret 1000.00000 370 num_unjug_ret@1 0.00000 370 num_unjug_ret@10 0.00000 370 num_unjug_ret@20 0.00000 370 num_unjug_ret@100 3.00000 370 num_unjug_ret@1000 390.00000 370 num_rel 336.00000 370 num_rel_ret 177.00000 370 map 0.19415 370 R-prec 0.42857 370 bpref 0.35061 370 recip_rank 0.16667 370 ndcg 0.46540 370 ndcg5 0.00000 370 ndcg10 0.14465 370 ndcg20 0.12742 370 ERR 0.03503 370 ERR10 0.01693 370 ERR20 0.02016 370 P1 0.00000 370 P5 0.00000 370 P10 0.20000 370 P15 0.13333 370 P20 0.15000 370 P30 0.20000 370 P50 0.18000 370 P100 0.26000 370 P200 0.43000 370 P500 0.35400 370 P1000 0.17700 371 num_ret 1000.00000 371 num_unjug_ret@1 0.00000 371 num_unjug_ret@10 0.00000 371 num_unjug_ret@20 0.00000 371 num_unjug_ret@100 3.00000 371 num_unjug_ret@1000 455.00000 371 num_rel 17.00000 371 num_rel_ret 6.00000 371 map 0.01259 371 R-prec 0.00000 371 bpref 0.00000 371 recip_rank 0.05000 371 ndcg 0.15102 371 ndcg5 0.00000 371 ndcg10 0.00000 371 ndcg20 0.03588 371 ERR 0.00667 371 ERR10 0.00000 371 ERR20 0.00313 371 P1 0.00000 371 P5 0.00000 371 P10 0.00000 371 P15 0.00000 371 P20 0.05000 371 P30 0.06667 371 P50 0.04000 371 P100 0.02000 371 P200 0.01500 371 P500 0.01200 371 P1000 0.00600 372 num_ret 1000.00000 372 num_unjug_ret@1 0.00000 372 num_unjug_ret@10 0.00000 372 num_unjug_ret@20 0.00000 372 num_unjug_ret@100 10.00000 372 num_unjug_ret@1000 600.00000 372 num_rel 49.00000 372 num_rel_ret 44.00000 372 map 0.06005 372 R-prec 0.04082 372 bpref 0.01125 372 recip_rank 0.03846 372 ndcg 0.43205 372 ndcg5 0.00000 372 ndcg10 0.00000 372 ndcg20 0.00000 372 ERR 0.00728 372 ERR10 0.00000 372 ERR20 0.00000 372 P1 0.00000 372 P5 0.00000 372 P10 0.00000 372 P15 0.00000 372 P20 0.00000 372 P30 0.03333 372 P50 0.04000 372 P100 0.02000 372 P200 0.03500 372 P500 0.08600 372 P1000 0.04400 373 num_ret 1000.00000 373 num_unjug_ret@1 0.00000 373 num_unjug_ret@10 0.00000 373 num_unjug_ret@20 0.00000 373 num_unjug_ret@100 1.00000 373 num_unjug_ret@1000 617.00000 373 num_rel 33.00000 373 num_rel_ret 27.00000 373 map 0.39481 373 R-prec 0.39394 373 bpref 0.37557 373 recip_rank 1.00000 373 ndcg 0.71618 373 ndcg5 0.78601 373 ndcg10 0.79488 373 ndcg20 0.62023 373 ERR 0.14340 373 ERR10 0.12986 373 ERR20 0.13716 373 P1 1.00000 373 P5 0.80000 373 P10 0.80000 373 P15 0.60000 373 P20 0.55000 373 P30 0.43333 373 P50 0.32000 373 P100 0.23000 373 P200 0.13000 373 P500 0.05400 373 P1000 0.02700 374 num_ret 1000.00000 374 num_unjug_ret@1 0.00000 374 num_unjug_ret@10 0.00000 374 num_unjug_ret@20 0.00000 374 num_unjug_ret@100 0.00000 374 num_unjug_ret@1000 350.00000 374 num_rel 204.00000 374 num_rel_ret 190.00000 374 map 0.44505 374 R-prec 0.41667 374 bpref 0.43596 374 recip_rank 1.00000 374 ndcg 0.81900 374 ndcg5 1.00000 374 ndcg10 0.71255 374 ndcg20 0.67298 374 ERR 0.16443 374 ERR10 0.13716 374 ERR20 0.15216 374 P1 1.00000 374 P5 1.00000 374 P10 0.60000 374 P15 0.60000 374 P20 0.60000 374 P30 0.60000 374 P50 0.64000 374 P100 0.48000 374 P200 0.42000 374 P500 0.38000 374 P1000 0.19000 375 num_ret 1000.00000 375 num_unjug_ret@1 0.00000 375 num_unjug_ret@10 0.00000 375 num_unjug_ret@20 0.00000 375 num_unjug_ret@100 0.00000 375 num_unjug_ret@1000 504.00000 375 num_rel 80.00000 375 num_rel_ret 48.00000 375 map 0.21365 375 R-prec 0.31250 375 bpref 0.24219 375 recip_rank 0.50000 375 ndcg 0.52679 375 ndcg5 0.66084 375 ndcg10 0.57163 375 ndcg20 0.50162 375 ERR 0.10552 375 ERR10 0.08737 375 ERR20 0.09579 375 P1 0.00000 375 P5 0.80000 375 P10 0.60000 375 P15 0.40000 375 P20 0.50000 375 P30 0.40000 375 P50 0.38000 375 P100 0.27000 375 P200 0.20500 375 P500 0.09600 375 P1000 0.04800 376 num_ret 1000.00000 376 num_unjug_ret@1 0.00000 376 num_unjug_ret@10 0.00000 376 num_unjug_ret@20 0.00000 376 num_unjug_ret@100 1.00000 376 num_unjug_ret@1000 485.00000 376 num_rel 102.00000 376 num_rel_ret 67.00000 376 map 0.44969 376 R-prec 0.63725 376 bpref 0.54633 376 recip_rank 1.00000 376 ndcg 0.66836 376 ndcg5 0.78601 376 ndcg10 0.79752 376 ndcg20 0.71926 376 ERR 0.15222 376 ERR10 0.13030 376 ERR20 0.14180 376 P1 1.00000 376 P5 0.80000 376 P10 0.80000 376 P15 0.66667 376 P20 0.70000 376 P30 0.56667 376 P50 0.66000 376 P100 0.65000 376 P200 0.33000 376 P500 0.13400 376 P1000 0.06700 377 num_ret 1000.00000 377 num_unjug_ret@1 0.00000 377 num_unjug_ret@10 0.00000 377 num_unjug_ret@20 0.00000 377 num_unjug_ret@100 0.00000 377 num_unjug_ret@1000 372.00000 377 num_rel 39.00000 377 num_rel_ret 39.00000 377 map 0.51082 377 R-prec 0.51282 377 bpref 0.45299 377 recip_rank 1.00000 377 ndcg 0.84426 377 ndcg5 0.83042 377 ndcg10 0.74212 377 ndcg20 0.62394 377 ERR 0.15289 377 ERR10 0.13200 377 ERR20 0.14236 377 P1 1.00000 377 P5 0.80000 377 P10 0.70000 377 P15 0.66667 377 P20 0.55000 377 P30 0.50000 377 P50 0.46000 377 P100 0.32000 377 P200 0.19000 377 P500 0.07800 377 P1000 0.03900 378 num_ret 1000.00000 378 num_unjug_ret@1 0.00000 378 num_unjug_ret@10 0.00000 378 num_unjug_ret@20 0.00000 378 num_unjug_ret@100 1.00000 378 num_unjug_ret@1000 437.00000 378 num_rel 98.00000 378 num_rel_ret 26.00000 378 map 0.02364 378 R-prec 0.05102 378 bpref 0.03207 378 recip_rank 0.05000 378 ndcg 0.18482 378 ndcg5 0.00000 378 ndcg10 0.00000 378 ndcg20 0.03234 378 ERR 0.01162 378 ERR10 0.00000 378 ERR20 0.00313 378 P1 0.00000 378 P5 0.00000 378 P10 0.00000 378 P15 0.00000 378 P20 0.05000 378 P30 0.03333 378 P50 0.08000 378 P100 0.05000 378 P200 0.11500 378 P500 0.05200 378 P1000 0.02600 379 num_ret 1000.00000 379 num_unjug_ret@1 0.00000 379 num_unjug_ret@10 0.00000 379 num_unjug_ret@20 0.00000 379 num_unjug_ret@100 7.00000 379 num_unjug_ret@1000 648.00000 379 num_rel 16.00000 379 num_rel_ret 15.00000 379 map 0.05139 379 R-prec 0.06250 379 bpref 0.04688 379 recip_rank 0.20000 379 ndcg 0.37957 379 ndcg5 0.13121 379 ndcg10 0.08514 379 ndcg20 0.06336 379 ERR 0.01856 379 ERR10 0.01250 379 ERR20 0.01250 379 P1 0.00000 379 P5 0.20000 379 P10 0.10000 379 P15 0.06667 379 P20 0.05000 379 P30 0.06667 379 P50 0.06000 379 P100 0.04000 379 P200 0.02500 379 P500 0.03000 379 P1000 0.01500 380 num_ret 1000.00000 380 num_unjug_ret@1 0.00000 380 num_unjug_ret@10 0.00000 380 num_unjug_ret@20 2.00000 380 num_unjug_ret@100 27.00000 380 num_unjug_ret@1000 441.00000 380 num_rel 7.00000 380 num_rel_ret 7.00000 380 map 0.04824 380 R-prec 0.00000 380 bpref 0.00000 380 recip_rank 0.03846 380 ndcg 0.31985 380 ndcg5 0.00000 380 ndcg10 0.00000 380 ndcg20 0.00000 380 ERR 0.00727 380 ERR10 0.00000 380 ERR20 0.00000 380 P1 0.00000 380 P5 0.00000 380 P10 0.00000 380 P15 0.00000 380 P20 0.00000 380 P30 0.06667 380 P50 0.06000 380 P100 0.03000 380 P200 0.03000 380 P500 0.01400 380 P1000 0.00700 381 num_ret 1000.00000 381 num_unjug_ret@1 0.00000 381 num_unjug_ret@10 0.00000 381 num_unjug_ret@20 1.00000 381 num_unjug_ret@100 18.00000 381 num_unjug_ret@1000 461.00000 381 num_rel 28.00000 381 num_rel_ret 14.00000 381 map 0.02453 381 R-prec 0.03571 381 bpref 0.03316 381 recip_rank 0.33333 381 ndcg 0.24548 381 ndcg5 0.16958 381 ndcg10 0.11005 381 ndcg20 0.07102 381 ERR 0.02411 381 ERR10 0.02083 381 ERR20 0.02083 381 P1 0.00000 381 P5 0.20000 381 P10 0.10000 381 P15 0.06667 381 P20 0.05000 381 P30 0.03333 381 P50 0.02000 381 P100 0.03000 381 P200 0.03000 381 P500 0.01800 381 P1000 0.01400 382 num_ret 1000.00000 382 num_unjug_ret@1 0.00000 382 num_unjug_ret@10 0.00000 382 num_unjug_ret@20 0.00000 382 num_unjug_ret@100 8.00000 382 num_unjug_ret@1000 515.00000 382 num_rel 22.00000 382 num_rel_ret 21.00000 382 map 0.16358 382 R-prec 0.22727 382 bpref 0.10950 382 recip_rank 0.33333 382 ndcg 0.53163 382 ndcg5 0.16958 382 ndcg10 0.11005 382 ndcg20 0.20690 382 ERR 0.04149 382 ERR10 0.02083 382 ERR20 0.03337 382 P1 0.00000 382 P5 0.20000 382 P10 0.10000 382 P15 0.13333 382 P20 0.25000 382 P30 0.16667 382 P50 0.20000 382 P100 0.15000 382 P200 0.08000 382 P500 0.04000 382 P1000 0.02100 383 num_ret 1000.00000 383 num_unjug_ret@1 0.00000 383 num_unjug_ret@10 0.00000 383 num_unjug_ret@20 0.00000 383 num_unjug_ret@100 5.00000 383 num_unjug_ret@1000 528.00000 383 num_rel 146.00000 383 num_rel_ret 32.00000 383 map 0.01755 383 R-prec 0.06849 383 bpref 0.04288 383 recip_rank 0.14286 383 ndcg 0.16621 383 ndcg5 0.00000 383 ndcg10 0.07336 383 ndcg20 0.08021 383 ERR 0.01898 383 ERR10 0.00893 383 ERR20 0.01201 383 P1 0.00000 383 P5 0.00000 383 P10 0.10000 383 P15 0.06667 383 P20 0.10000 383 P30 0.06667 383 P50 0.04000 383 P100 0.09000 383 P200 0.08500 383 P500 0.06000 383 P1000 0.03200 384 num_ret 1000.00000 384 num_unjug_ret@1 0.00000 384 num_unjug_ret@10 0.00000 384 num_unjug_ret@20 0.00000 384 num_unjug_ret@100 0.00000 384 num_unjug_ret@1000 526.00000 384 num_rel 51.00000 384 num_rel_ret 51.00000 384 map 0.28742 384 R-prec 0.27451 384 bpref 0.20223 384 recip_rank 1.00000 384 ndcg 0.73109 384 ndcg5 0.65481 384 ndcg10 0.49118 384 ndcg20 0.35430 384 ERR 0.11952 384 ERR10 0.10149 384 ERR20 0.10520 384 P1 1.00000 384 P5 0.60000 384 P10 0.40000 384 P15 0.33333 384 P20 0.25000 384 P30 0.30000 384 P50 0.28000 384 P100 0.25000 384 P200 0.19500 384 P500 0.10200 384 P1000 0.05100 385 num_ret 1000.00000 385 num_unjug_ret@1 0.00000 385 num_unjug_ret@10 0.00000 385 num_unjug_ret@20 0.00000 385 num_unjug_ret@100 8.00000 385 num_unjug_ret@1000 522.00000 385 num_rel 86.00000 385 num_rel_ret 75.00000 385 map 0.38178 385 R-prec 0.43023 385 bpref 0.41103 385 recip_rank 0.50000 385 ndcg 0.72617 385 ndcg5 0.51477 385 ndcg10 0.55207 385 ndcg20 0.50011 385 ERR 0.10700 385 ERR10 0.08228 385 ERR20 0.09321 385 P1 0.00000 385 P5 0.60000 385 P10 0.60000 385 P15 0.60000 385 P20 0.50000 385 P30 0.60000 385 P50 0.54000 385 P100 0.41000 385 P200 0.30500 385 P500 0.15000 385 P1000 0.07500 386 num_ret 1000.00000 386 num_unjug_ret@1 0.00000 386 num_unjug_ret@10 0.00000 386 num_unjug_ret@20 0.00000 386 num_unjug_ret@100 2.00000 386 num_unjug_ret@1000 397.00000 386 num_rel 19.00000 386 num_rel_ret 15.00000 386 map 0.05616 386 R-prec 0.10526 386 bpref 0.06925 386 recip_rank 0.14286 386 ndcg 0.35911 386 ndcg5 0.00000 386 ndcg10 0.13962 386 ndcg20 0.09312 386 ERR 0.01981 386 ERR10 0.01544 386 ERR20 0.01544 386 P1 0.00000 386 P5 0.00000 386 P10 0.20000 386 P15 0.13333 386 P20 0.10000 386 P30 0.06667 386 P50 0.04000 386 P100 0.05000 386 P200 0.05500 386 P500 0.03000 386 P1000 0.01500 387 num_ret 1000.00000 387 num_unjug_ret@1 0.00000 387 num_unjug_ret@10 0.00000 387 num_unjug_ret@20 0.00000 387 num_unjug_ret@100 0.00000 387 num_unjug_ret@1000 411.00000 387 num_rel 85.00000 387 num_rel_ret 70.00000 387 map 0.21736 387 R-prec 0.20000 387 bpref 0.14630 387 recip_rank 1.00000 387 ndcg 0.63828 387 ndcg5 0.55315 387 ndcg10 0.50361 387 ndcg20 0.46476 387 ERR 0.12621 387 ERR10 0.10667 387 ERR20 0.11800 387 P1 1.00000 387 P5 0.40000 387 P10 0.40000 387 P15 0.40000 387 P20 0.40000 387 P30 0.30000 387 P50 0.24000 387 P100 0.21000 387 P200 0.23500 387 P500 0.13800 387 P1000 0.07000 388 num_ret 1000.00000 388 num_unjug_ret@1 0.00000 388 num_unjug_ret@10 0.00000 388 num_unjug_ret@20 0.00000 388 num_unjug_ret@100 13.00000 388 num_unjug_ret@1000 459.00000 388 num_rel 51.00000 388 num_rel_ret 30.00000 388 map 0.05305 388 R-prec 0.05882 388 bpref 0.03614 388 recip_rank 0.06250 388 ndcg 0.33353 388 ndcg5 0.00000 388 ndcg10 0.00000 388 ndcg20 0.03475 388 ERR 0.01406 388 ERR10 0.00000 388 ERR20 0.00391 388 P1 0.00000 388 P5 0.00000 388 P10 0.00000 388 P15 0.00000 388 P20 0.05000 388 P30 0.06667 388 P50 0.06000 388 P100 0.10000 388 P200 0.09500 388 P500 0.05800 388 P1000 0.03000 389 num_ret 1000.00000 389 num_unjug_ret@1 0.00000 389 num_unjug_ret@10 0.00000 389 num_unjug_ret@20 0.00000 389 num_unjug_ret@100 15.00000 389 num_unjug_ret@1000 481.00000 389 num_rel 194.00000 389 num_rel_ret 31.00000 389 map 0.00931 389 R-prec 0.04124 389 bpref 0.03103 389 recip_rank 0.12500 389 ndcg 0.12103 389 ndcg5 0.00000 389 ndcg10 0.06943 389 ndcg20 0.04481 389 ERR 0.01272 389 ERR10 0.00781 389 ERR20 0.00781 389 P1 0.00000 389 P5 0.00000 389 P10 0.10000 389 P15 0.06667 389 P20 0.05000 389 P30 0.03333 389 P50 0.02000 389 P100 0.04000 389 P200 0.04000 389 P500 0.05800 389 P1000 0.03100 390 num_ret 1000.00000 390 num_unjug_ret@1 0.00000 390 num_unjug_ret@10 0.00000 390 num_unjug_ret@20 0.00000 390 num_unjug_ret@100 13.00000 390 num_unjug_ret@1000 363.00000 390 num_rel 134.00000 390 num_rel_ret 104.00000 390 map 0.50626 390 R-prec 0.47015 390 bpref 0.51275 390 recip_rank 1.00000 390 ndcg 0.76545 390 ndcg5 1.00000 390 ndcg10 1.00000 390 ndcg20 1.00000 390 ERR 0.18408 390 ERR10 0.15886 390 ERR20 0.17613 390 P1 1.00000 390 P5 1.00000 390 P10 1.00000 390 P15 1.00000 390 P20 1.00000 390 P30 0.96667 390 P50 0.82000 390 P100 0.58000 390 P200 0.36000 390 P500 0.20000 390 P1000 0.10400 391 num_ret 1000.00000 391 num_unjug_ret@1 0.00000 391 num_unjug_ret@10 1.00000 391 num_unjug_ret@20 4.00000 391 num_unjug_ret@100 39.00000 391 num_unjug_ret@1000 563.00000 391 num_rel 178.00000 391 num_rel_ret 61.00000 391 map 0.04623 391 R-prec 0.13483 391 bpref 0.11290 391 recip_rank 0.01408 391 ndcg 0.25328 391 ndcg5 0.00000 391 ndcg10 0.00000 391 ndcg20 0.00000 391 ERR 0.00807 391 ERR10 0.00000 391 ERR20 0.00000 391 P1 0.00000 391 P5 0.00000 391 P10 0.00000 391 P15 0.00000 391 P20 0.00000 391 P30 0.00000 391 P50 0.00000 391 P100 0.06000 391 P200 0.15000 391 P500 0.12200 391 P1000 0.06100 392 num_ret 1000.00000 392 num_unjug_ret@1 0.00000 392 num_unjug_ret@10 0.00000 392 num_unjug_ret@20 0.00000 392 num_unjug_ret@100 0.00000 392 num_unjug_ret@1000 520.00000 392 num_rel 105.00000 392 num_rel_ret 102.00000 392 map 0.49813 392 R-prec 0.43810 392 bpref 0.43528 392 recip_rank 1.00000 392 ndcg 0.85128 392 ndcg5 1.00000 392 ndcg10 0.78198 392 ndcg20 0.75277 392 ERR 0.16833 392 ERR10 0.14254 392 ERR20 0.15840 392 P1 1.00000 392 P5 1.00000 392 P10 0.70000 392 P15 0.66667 392 P20 0.70000 392 P30 0.60000 392 P50 0.60000 392 P100 0.45000 392 P200 0.41000 392 P500 0.20400 392 P1000 0.10200 393 num_ret 1000.00000 393 num_unjug_ret@1 0.00000 393 num_unjug_ret@10 0.00000 393 num_unjug_ret@20 0.00000 393 num_unjug_ret@100 7.00000 393 num_unjug_ret@1000 538.00000 393 num_rel 71.00000 393 num_rel_ret 15.00000 393 map 0.16163 393 R-prec 0.19718 393 bpref 0.18012 393 recip_rank 1.00000 393 ndcg 0.33216 393 ndcg5 1.00000 393 ndcg10 0.86302 393 ndcg20 0.67132 393 ERR 0.16140 393 ERR10 0.14991 393 ERR20 0.15855 393 P1 1.00000 393 P5 1.00000 393 P10 0.80000 393 P15 0.73333 393 P20 0.55000 393 P30 0.40000 393 P50 0.26000 393 P100 0.15000 393 P200 0.07500 393 P500 0.03000 393 P1000 0.01500 394 num_ret 1000.00000 394 num_unjug_ret@1 0.00000 394 num_unjug_ret@10 0.00000 394 num_unjug_ret@20 0.00000 394 num_unjug_ret@100 1.00000 394 num_unjug_ret@1000 320.00000 394 num_rel 17.00000 394 num_rel_ret 7.00000 394 map 0.13135 394 R-prec 0.17647 394 bpref 0.13149 394 recip_rank 1.00000 394 ndcg 0.36655 394 ndcg5 0.55315 394 ndcg10 0.35895 394 ndcg20 0.29556 394 ERR 0.09565 394 ERR10 0.09180 394 ERR20 0.09523 394 P1 1.00000 394 P5 0.40000 394 P10 0.20000 394 P15 0.13333 394 P20 0.15000 394 P30 0.10000 394 P50 0.06000 394 P100 0.03000 394 P200 0.01500 394 P500 0.01200 394 P1000 0.00700 395 num_ret 1000.00000 395 num_unjug_ret@1 0.00000 395 num_unjug_ret@10 0.00000 395 num_unjug_ret@20 0.00000 395 num_unjug_ret@100 3.00000 395 num_unjug_ret@1000 452.00000 395 num_rel 213.00000 395 num_rel_ret 129.00000 395 map 0.22249 395 R-prec 0.36150 395 bpref 0.30060 395 recip_rank 0.50000 395 ndcg 0.53859 395 ndcg5 0.34519 395 ndcg10 0.42331 395 ndcg20 0.45540 395 ERR 0.08673 395 ERR10 0.06039 395 ERR20 0.07511 395 P1 0.00000 395 P5 0.40000 395 P10 0.50000 395 P15 0.60000 395 P20 0.50000 395 P30 0.50000 395 P50 0.42000 395 P100 0.34000 395 P200 0.35500 395 P500 0.25800 395 P1000 0.12900 396 num_ret 1000.00000 396 num_unjug_ret@1 0.00000 396 num_unjug_ret@10 0.00000 396 num_unjug_ret@20 0.00000 396 num_unjug_ret@100 11.00000 396 num_unjug_ret@1000 592.00000 396 num_rel 59.00000 396 num_rel_ret 26.00000 396 map 0.43523 396 R-prec 0.44068 396 bpref 0.43809 396 recip_rank 1.00000 396 ndcg 0.57595 396 ndcg5 1.00000 396 ndcg10 1.00000 396 ndcg20 1.00000 396 ERR 0.17977 396 ERR10 0.15886 396 ERR20 0.17613 396 P1 1.00000 396 P5 1.00000 396 P10 1.00000 396 P15 1.00000 396 P20 1.00000 396 P30 0.86667 396 P50 0.52000 396 P100 0.26000 396 P200 0.13000 396 P500 0.05200 396 P1000 0.02600 397 num_ret 1000.00000 397 num_unjug_ret@1 0.00000 397 num_unjug_ret@10 1.00000 397 num_unjug_ret@20 1.00000 397 num_unjug_ret@100 14.00000 397 num_unjug_ret@1000 404.00000 397 num_rel 27.00000 397 num_rel_ret 18.00000 397 map 0.08237 397 R-prec 0.07407 397 bpref 0.06859 397 recip_rank 0.33333 397 ndcg 0.39005 397 ndcg5 0.31565 397 ndcg10 0.20483 397 ndcg20 0.13219 397 ERR 0.04315 397 ERR10 0.03548 397 ERR20 0.03548 397 P1 0.00000 397 P5 0.40000 397 P10 0.20000 397 P15 0.13333 397 P20 0.10000 397 P30 0.06667 397 P50 0.10000 397 P100 0.06000 397 P200 0.08500 397 P500 0.03600 397 P1000 0.01800 398 num_ret 1000.00000 398 num_unjug_ret@1 0.00000 398 num_unjug_ret@10 0.00000 398 num_unjug_ret@20 0.00000 398 num_unjug_ret@100 2.00000 398 num_unjug_ret@1000 557.00000 398 num_rel 145.00000 398 num_rel_ret 37.00000 398 map 0.01955 398 R-prec 0.04828 398 bpref 0.02288 398 recip_rank 0.10000 398 ndcg 0.18091 398 ndcg5 0.00000 398 ndcg10 0.06362 398 ndcg20 0.04106 398 ERR 0.01212 398 ERR10 0.00625 398 ERR20 0.00625 398 P1 0.00000 398 P5 0.00000 398 P10 0.10000 398 P15 0.06667 398 P20 0.05000 398 P30 0.03333 398 P50 0.02000 398 P100 0.04000 398 P200 0.07000 398 P500 0.07400 398 P1000 0.03700 399 num_ret 1000.00000 399 num_unjug_ret@1 0.00000 399 num_unjug_ret@10 0.00000 399 num_unjug_ret@20 1.00000 399 num_unjug_ret@100 9.00000 399 num_unjug_ret@1000 381.00000 399 num_rel 102.00000 399 num_rel_ret 62.00000 399 map 0.16357 399 R-prec 0.29412 399 bpref 0.23750 399 recip_rank 0.16667 399 ndcg 0.47132 399 ndcg5 0.00000 399 ndcg10 0.07840 399 ndcg20 0.15779 399 ERR 0.04062 399 ERR10 0.01042 399 ERR20 0.02176 399 P1 0.00000 399 P5 0.00000 399 P10 0.10000 399 P15 0.13333 399 P20 0.20000 399 P30 0.36667 399 P50 0.36000 399 P100 0.30000 399 P200 0.23000 399 P500 0.12400 399 P1000 0.06200 400 num_ret 1000.00000 400 num_unjug_ret@1 0.00000 400 num_unjug_ret@10 0.00000 400 num_unjug_ret@20 0.00000 400 num_unjug_ret@100 2.00000 400 num_unjug_ret@1000 512.00000 400 num_rel 125.00000 400 num_rel_ret 113.00000 400 map 0.60344 400 R-prec 0.60800 400 bpref 0.60288 400 recip_rank 1.00000 400 ndcg 0.85956 400 ndcg5 1.00000 400 ndcg10 1.00000 400 ndcg20 0.89546 400 ERR 0.18178 400 ERR10 0.15886 400 ERR20 0.17227 400 P1 1.00000 400 P5 1.00000 400 P10 1.00000 400 P15 0.93333 400 P20 0.85000 400 P30 0.83333 400 P50 0.72000 400 P100 0.66000 400 P200 0.46500 400 P500 0.22600 400 P1000 0.11300 401 num_ret 1000.00000 401 num_unjug_ret@1 0.00000 401 num_unjug_ret@10 1.00000 401 num_unjug_ret@20 1.00000 401 num_unjug_ret@100 20.00000 401 num_unjug_ret@1000 487.00000 401 num_rel 300.00000 401 num_rel_ret 80.00000 401 map 0.06238 401 R-prec 0.24667 401 bpref 0.19331 401 recip_rank 0.06250 401 ndcg 0.24526 401 ndcg5 0.00000 401 ndcg10 0.00000 401 ndcg20 0.06709 401 ERR 0.02375 401 ERR10 0.00000 401 ERR20 0.00684 401 P1 0.00000 401 P5 0.00000 401 P10 0.00000 401 P15 0.00000 401 P20 0.10000 401 P30 0.16667 401 P50 0.22000 401 P100 0.23000 401 P200 0.24500 401 P500 0.16000 401 P1000 0.08000 402 num_ret 1000.00000 402 num_unjug_ret@1 0.00000 402 num_unjug_ret@10 0.00000 402 num_unjug_ret@20 1.00000 402 num_unjug_ret@100 8.00000 402 num_unjug_ret@1000 464.00000 402 num_rel 80.00000 402 num_rel_ret 62.00000 402 map 0.13697 402 R-prec 0.16250 402 bpref 0.13859 402 recip_rank 1.00000 402 ndcg 0.55729 402 ndcg5 0.50874 402 ndcg10 0.39639 402 ndcg20 0.36205 402 ERR 0.10892 402 ERR10 0.08813 402 ERR20 0.09791 402 P1 1.00000 402 P5 0.40000 402 P10 0.30000 402 P15 0.33333 402 P20 0.30000 402 P30 0.33333 402 P50 0.24000 402 P100 0.16000 402 P200 0.11500 402 P500 0.10200 402 P1000 0.06200 403 num_ret 1000.00000 403 num_unjug_ret@1 0.00000 403 num_unjug_ret@10 0.00000 403 num_unjug_ret@20 0.00000 403 num_unjug_ret@100 1.00000 403 num_unjug_ret@1000 795.00000 403 num_rel 21.00000 403 num_rel_ret 21.00000 403 map 0.87324 403 R-prec 0.76190 403 bpref 0.81633 403 recip_rank 1.00000 403 ndcg 0.96935 403 ndcg5 1.00000 403 ndcg10 1.00000 403 ndcg20 0.86033 403 ERR 0.17377 403 ERR10 0.15886 403 ERR20 0.17069 403 P1 1.00000 403 P5 1.00000 403 P10 1.00000 403 P15 0.86667 403 P20 0.80000 403 P30 0.60000 403 P50 0.42000 403 P100 0.21000 403 P200 0.10500 403 P500 0.04200 403 P1000 0.02100 404 num_ret 1000.00000 404 num_unjug_ret@1 0.00000 404 num_unjug_ret@10 0.00000 404 num_unjug_ret@20 0.00000 404 num_unjug_ret@100 0.00000 404 num_unjug_ret@1000 412.00000 404 num_rel 142.00000 404 num_rel_ret 123.00000 404 map 0.31951 404 R-prec 0.35915 404 bpref 0.31913 404 recip_rank 0.50000 404 ndcg 0.68846 404 ndcg5 0.21399 404 ndcg10 0.20512 404 ndcg20 0.34389 404 ERR 0.06878 404 ERR10 0.03776 404 ERR20 0.05674 404 P1 0.00000 404 P5 0.20000 404 P10 0.20000 404 P15 0.26667 404 P20 0.40000 404 P30 0.36667 404 P50 0.30000 404 P100 0.32000 404 P200 0.40000 404 P500 0.24600 404 P1000 0.12300 405 num_ret 1000.00000 405 num_unjug_ret@1 0.00000 405 num_unjug_ret@10 0.00000 405 num_unjug_ret@20 0.00000 405 num_unjug_ret@100 12.00000 405 num_unjug_ret@1000 717.00000 405 num_rel 38.00000 405 num_rel_ret 18.00000 405 map 0.12483 405 R-prec 0.28947 405 bpref 0.20083 405 recip_rank 0.25000 405 ndcg 0.36301 405 ndcg5 0.14607 405 ndcg10 0.09479 405 ndcg20 0.24194 405 ERR 0.04388 405 ERR10 0.01563 405 ERR20 0.03431 405 P1 0.00000 405 P5 0.20000 405 P10 0.10000 405 P15 0.26667 405 P20 0.30000 405 P30 0.26667 405 P50 0.28000 405 P100 0.17000 405 P200 0.09000 405 P500 0.03600 405 P1000 0.01800 406 num_ret 1000.00000 406 num_unjug_ret@1 0.00000 406 num_unjug_ret@10 0.00000 406 num_unjug_ret@20 0.00000 406 num_unjug_ret@100 0.00000 406 num_unjug_ret@1000 521.00000 406 num_rel 13.00000 406 num_rel_ret 13.00000 406 map 0.50308 406 R-prec 0.46154 406 bpref 0.40828 406 recip_rank 1.00000 406 ndcg 0.81556 406 ndcg5 0.69921 406 ndcg10 0.59654 406 ndcg20 0.60183 406 ERR 0.13105 406 ERR10 0.11892 406 ERR20 0.12523 406 P1 1.00000 406 P5 0.60000 406 P10 0.50000 406 P15 0.46667 406 P20 0.35000 406 P30 0.30000 406 P50 0.24000 406 P100 0.13000 406 P200 0.06500 406 P500 0.02600 406 P1000 0.01300 407 num_ret 1000.00000 407 num_unjug_ret@1 1.00000 407 num_unjug_ret@10 4.00000 407 num_unjug_ret@20 10.00000 407 num_unjug_ret@100 49.00000 407 num_unjug_ret@1000 494.00000 407 num_rel 68.00000 407 num_rel_ret 49.00000 407 map 0.03145 407 R-prec 0.02941 407 bpref 0.04087 407 recip_rank 0.12500 407 ndcg 0.36173 407 ndcg5 0.00000 407 ndcg10 0.06943 407 ndcg20 0.04481 407 ERR 0.01250 407 ERR10 0.00781 407 ERR20 0.00781 407 P1 0.00000 407 P5 0.00000 407 P10 0.10000 407 P15 0.06667 407 P20 0.05000 407 P30 0.03333 407 P50 0.02000 407 P100 0.04000 407 P200 0.03000 407 P500 0.04000 407 P1000 0.04900 408 num_ret 1000.00000 408 num_unjug_ret@1 0.00000 408 num_unjug_ret@10 0.00000 408 num_unjug_ret@20 0.00000 408 num_unjug_ret@100 0.00000 408 num_unjug_ret@1000 613.00000 408 num_rel 118.00000 408 num_rel_ret 74.00000 408 map 0.19825 408 R-prec 0.36441 408 bpref 0.25129 408 recip_rank 0.50000 408 ndcg 0.52793 408 ndcg5 0.51477 408 ndcg10 0.46710 408 ndcg20 0.33620 408 ERR 0.08954 408 ERR10 0.07303 408 ERR20 0.07586 408 P1 0.00000 408 P5 0.60000 408 P10 0.50000 408 P15 0.33333 408 P20 0.30000 408 P30 0.26667 408 P50 0.28000 408 P100 0.36000 408 P200 0.27000 408 P500 0.14800 408 P1000 0.07400 409 num_ret 1000.00000 409 num_unjug_ret@1 0.00000 409 num_unjug_ret@10 0.00000 409 num_unjug_ret@20 0.00000 409 num_unjug_ret@100 0.00000 409 num_unjug_ret@1000 573.00000 409 num_rel 22.00000 409 num_rel_ret 22.00000 409 map 0.17656 409 R-prec 0.13636 409 bpref 0.08884 409 recip_rank 1.00000 409 ndcg 0.60312 409 ndcg5 0.33916 409 ndcg10 0.28635 409 ndcg20 0.21766 409 ERR 0.08201 409 ERR10 0.06901 409 ERR20 0.07190 409 P1 1.00000 409 P5 0.20000 409 P10 0.20000 409 P15 0.13333 409 P20 0.15000 409 P30 0.16667 409 P50 0.16000 409 P100 0.14000 409 P200 0.10000 409 P500 0.04400 409 P1000 0.02200 410 num_ret 1000.00000 410 num_unjug_ret@1 0.00000 410 num_unjug_ret@10 0.00000 410 num_unjug_ret@20 0.00000 410 num_unjug_ret@100 8.00000 410 num_unjug_ret@1000 766.00000 410 num_rel 65.00000 410 num_rel_ret 64.00000 410 map 0.84657 410 R-prec 0.75385 410 bpref 0.84260 410 recip_rank 1.00000 410 ndcg 0.96048 410 ndcg5 1.00000 410 ndcg10 1.00000 410 ndcg20 1.00000 410 ERR 0.18379 410 ERR10 0.15886 410 ERR20 0.17613 410 P1 1.00000 410 P5 1.00000 410 P10 1.00000 410 P15 1.00000 410 P20 1.00000 410 P30 0.90000 410 P50 0.82000 410 P100 0.61000 410 P200 0.31500 410 P500 0.12800 410 P1000 0.06400 411 num_ret 1000.00000 411 num_unjug_ret@1 0.00000 411 num_unjug_ret@10 0.00000 411 num_unjug_ret@20 0.00000 411 num_unjug_ret@100 10.00000 411 num_unjug_ret@1000 554.00000 411 num_rel 27.00000 411 num_rel_ret 17.00000 411 map 0.28888 411 R-prec 0.29630 411 bpref 0.25652 411 recip_rank 1.00000 411 ndcg 0.59768 411 ndcg5 1.00000 411 ndcg10 0.71519 411 ndcg20 0.49631 411 ERR 0.14559 411 ERR10 0.13767 411 ERR20 0.14032 411 P1 1.00000 411 P5 1.00000 411 P10 0.60000 411 P15 0.40000 411 P20 0.35000 411 P30 0.26667 411 P50 0.20000 411 P100 0.14000 411 P200 0.07500 411 P500 0.03400 411 P1000 0.01700 412 num_ret 1000.00000 412 num_unjug_ret@1 0.00000 412 num_unjug_ret@10 0.00000 412 num_unjug_ret@20 0.00000 412 num_unjug_ret@100 4.00000 412 num_unjug_ret@1000 381.00000 412 num_rel 123.00000 412 num_rel_ret 101.00000 412 map 0.34086 412 R-prec 0.35772 412 bpref 0.32025 412 recip_rank 1.00000 412 ndcg 0.71148 412 ndcg5 0.55315 412 ndcg10 0.64640 412 ndcg20 0.62556 412 ERR 0.14393 412 ERR10 0.11937 412 ERR20 0.13337 412 P1 1.00000 412 P5 0.40000 412 P10 0.60000 412 P15 0.53333 412 P20 0.60000 412 P30 0.56667 412 P50 0.46000 412 P100 0.36000 412 P200 0.35000 412 P500 0.20200 412 P1000 0.10100 413 num_ret 1000.00000 413 num_unjug_ret@1 0.00000 413 num_unjug_ret@10 0.00000 413 num_unjug_ret@20 0.00000 413 num_unjug_ret@100 0.00000 413 num_unjug_ret@1000 343.00000 413 num_rel 69.00000 413 num_rel_ret 52.00000 413 map 0.14956 413 R-prec 0.17391 413 bpref 0.12203 413 recip_rank 0.25000 413 ndcg 0.51585 413 ndcg5 0.14607 413 ndcg10 0.16815 413 ndcg20 0.25058 413 ERR 0.04668 413 ERR10 0.02400 413 ERR20 0.03764 413 P1 0.00000 413 P5 0.20000 413 P10 0.20000 413 P15 0.26667 413 P20 0.30000 413 P30 0.20000 413 P50 0.22000 413 P100 0.17000 413 P200 0.19000 413 P500 0.10000 413 P1000 0.05200 414 num_ret 1000.00000 414 num_unjug_ret@1 0.00000 414 num_unjug_ret@10 0.00000 414 num_unjug_ret@20 0.00000 414 num_unjug_ret@100 23.00000 414 num_unjug_ret@1000 584.00000 414 num_rel 39.00000 414 num_rel_ret 38.00000 414 map 0.26998 414 R-prec 0.28205 414 bpref 0.24063 414 recip_rank 0.50000 414 ndcg 0.68367 414 ndcg5 0.66084 414 ndcg10 0.70654 414 ndcg20 0.45598 414 ERR 0.10442 414 ERR10 0.09721 414 ERR20 0.09721 414 P1 0.00000 414 P5 0.80000 414 P10 0.80000 414 P15 0.53333 414 P20 0.40000 414 P30 0.33333 414 P50 0.22000 414 P100 0.14000 414 P200 0.12000 414 P500 0.07600 414 P1000 0.03800 415 num_ret 1000.00000 415 num_unjug_ret@1 0.00000 415 num_unjug_ret@10 0.00000 415 num_unjug_ret@20 0.00000 415 num_unjug_ret@100 0.00000 415 num_unjug_ret@1000 588.00000 415 num_rel 136.00000 415 num_rel_ret 116.00000 415 map 0.49757 415 R-prec 0.44118 415 bpref 0.46994 415 recip_rank 1.00000 415 ndcg 0.80329 415 ndcg5 1.00000 415 ndcg10 1.00000 415 ndcg20 0.93181 415 ERR 0.18212 415 ERR10 0.15886 415 ERR20 0.17384 415 P1 1.00000 415 P5 1.00000 415 P10 1.00000 415 P15 1.00000 415 P20 0.90000 415 P30 0.83333 415 P50 0.70000 415 P100 0.46000 415 P200 0.44000 415 P500 0.23200 415 P1000 0.11600 416 num_ret 1000.00000 416 num_unjug_ret@1 0.00000 416 num_unjug_ret@10 0.00000 416 num_unjug_ret@20 0.00000 416 num_unjug_ret@100 0.00000 416 num_unjug_ret@1000 694.00000 416 num_rel 42.00000 416 num_rel_ret 42.00000 416 map 0.36573 416 R-prec 0.42857 416 bpref 0.34014 416 recip_rank 0.50000 416 ndcg 0.73039 416 ndcg5 0.34519 416 ndcg10 0.43042 416 ndcg20 0.42097 416 ERR 0.08497 416 ERR10 0.06208 416 ERR20 0.07353 416 P1 0.00000 416 P5 0.40000 416 P10 0.50000 416 P15 0.46667 416 P20 0.45000 416 P30 0.43333 416 P50 0.42000 416 P100 0.27000 416 P200 0.20500 416 P500 0.08400 416 P1000 0.04200 417 num_ret 1000.00000 417 num_unjug_ret@1 0.00000 417 num_unjug_ret@10 0.00000 417 num_unjug_ret@20 0.00000 417 num_unjug_ret@100 2.00000 417 num_unjug_ret@1000 507.00000 417 num_rel 75.00000 417 num_rel_ret 64.00000 417 map 0.52566 417 R-prec 0.46667 417 bpref 0.49582 417 recip_rank 1.00000 417 ndcg 0.80779 417 ndcg5 1.00000 417 ndcg10 0.87012 417 ndcg20 0.84749 417 ERR 0.17718 417 ERR10 0.15122 417 ERR20 0.16814 417 P1 1.00000 417 P5 1.00000 417 P10 0.80000 417 P15 0.80000 417 P20 0.80000 417 P30 0.73333 417 P50 0.60000 417 P100 0.46000 417 P200 0.29500 417 P500 0.12800 417 P1000 0.06400 418 num_ret 1000.00000 418 num_unjug_ret@1 0.00000 418 num_unjug_ret@10 0.00000 418 num_unjug_ret@20 0.00000 418 num_unjug_ret@100 0.00000 418 num_unjug_ret@1000 645.00000 418 num_rel 116.00000 418 num_rel_ret 113.00000 418 map 0.28805 418 R-prec 0.27586 418 bpref 0.19018 418 recip_rank 1.00000 418 ndcg 0.75627 418 ndcg5 0.86879 418 ndcg10 0.62741 418 ndcg20 0.52022 418 ERR 0.14758 418 ERR10 0.12781 418 ERR20 0.13852 418 P1 1.00000 418 P5 0.80000 418 P10 0.50000 418 P15 0.53333 418 P20 0.40000 418 P30 0.30000 418 P50 0.22000 418 P100 0.27000 418 P200 0.25000 418 P500 0.22600 418 P1000 0.11300 419 num_ret 1000.00000 419 num_unjug_ret@1 0.00000 419 num_unjug_ret@10 0.00000 419 num_unjug_ret@20 0.00000 419 num_unjug_ret@100 4.00000 419 num_unjug_ret@1000 483.00000 419 num_rel 16.00000 419 num_rel_ret 8.00000 419 map 0.07659 419 R-prec 0.12500 419 bpref 0.10547 419 recip_rank 0.50000 419 ndcg 0.31799 419 ndcg5 0.21399 419 ndcg10 0.21223 419 ndcg20 0.19647 419 ERR 0.04493 419 ERR10 0.03962 419 ERR20 0.04267 419 P1 0.00000 419 P5 0.20000 419 P10 0.20000 419 P15 0.13333 419 P20 0.15000 419 P30 0.10000 419 P50 0.06000 419 P100 0.06000 419 P200 0.04000 419 P500 0.01600 419 P1000 0.00800 420 num_ret 1000.00000 420 num_unjug_ret@1 0.00000 420 num_unjug_ret@10 0.00000 420 num_unjug_ret@20 0.00000 420 num_unjug_ret@100 0.00000 420 num_unjug_ret@1000 458.00000 420 num_rel 33.00000 420 num_rel_ret 30.00000 420 map 0.41369 420 R-prec 0.45455 420 bpref 0.39027 420 recip_rank 1.00000 420 ndcg 0.76625 420 ndcg5 0.83042 420 ndcg10 0.82052 420 ndcg20 0.67189 420 ERR 0.15332 420 ERR10 0.13904 420 ERR20 0.14831 420 P1 1.00000 420 P5 0.80000 420 P10 0.80000 420 P15 0.66667 420 P20 0.60000 420 P30 0.46667 420 P50 0.30000 420 P100 0.18000 420 P200 0.13500 420 P500 0.06000 420 P1000 0.03000 421 num_ret 1000.00000 421 num_unjug_ret@1 0.00000 421 num_unjug_ret@10 0.00000 421 num_unjug_ret@20 0.00000 421 num_unjug_ret@100 2.00000 421 num_unjug_ret@1000 289.00000 421 num_rel 83.00000 421 num_rel_ret 59.00000 421 map 0.08181 421 R-prec 0.09639 421 bpref 0.04064 421 recip_rank 0.03030 421 ndcg 0.42813 421 ndcg5 0.00000 421 ndcg10 0.00000 421 ndcg20 0.00000 421 ERR 0.01237 421 ERR10 0.00000 421 ERR20 0.00000 421 P1 0.00000 421 P5 0.00000 421 P10 0.00000 421 P15 0.00000 421 P20 0.00000 421 P30 0.00000 421 P50 0.08000 421 P100 0.11000 421 P200 0.12500 421 P500 0.11400 421 P1000 0.05900 422 num_ret 1000.00000 422 num_unjug_ret@1 0.00000 422 num_unjug_ret@10 0.00000 422 num_unjug_ret@20 0.00000 422 num_unjug_ret@100 3.00000 422 num_unjug_ret@1000 505.00000 422 num_rel 152.00000 422 num_rel_ret 127.00000 422 map 0.52861 422 R-prec 0.52632 422 bpref 0.56968 422 recip_rank 1.00000 422 ndcg 0.79614 422 ndcg5 0.83042 422 ndcg10 0.82633 422 ndcg20 0.84830 422 ERR 0.16722 422 ERR10 0.14007 422 ERR20 0.15741 422 P1 1.00000 422 P5 0.80000 422 P10 0.80000 422 P15 0.80000 422 P20 0.85000 422 P30 0.86667 422 P50 0.78000 422 P100 0.66000 422 P200 0.46000 422 P500 0.25400 422 P1000 0.12700 423 num_ret 1000.00000 423 num_unjug_ret@1 0.00000 423 num_unjug_ret@10 0.00000 423 num_unjug_ret@20 0.00000 423 num_unjug_ret@100 6.00000 423 num_unjug_ret@1000 512.00000 423 num_rel 21.00000 423 num_rel_ret 21.00000 423 map 0.66909 423 R-prec 0.66667 423 bpref 0.63719 423 recip_rank 1.00000 423 ndcg 0.89965 423 ndcg5 1.00000 423 ndcg10 0.92160 423 ndcg20 0.73916 423 ERR 0.16519 423 ERR10 0.15256 423 ERR20 0.16163 423 P1 1.00000 423 P5 1.00000 423 P10 0.90000 423 P15 0.80000 423 P20 0.65000 423 P30 0.50000 423 P50 0.30000 423 P100 0.17000 423 P200 0.10500 423 P500 0.04200 423 P1000 0.02100 424 num_ret 1000.00000 424 num_unjug_ret@1 0.00000 424 num_unjug_ret@10 0.00000 424 num_unjug_ret@20 0.00000 424 num_unjug_ret@100 3.00000 424 num_unjug_ret@1000 433.00000 424 num_rel 171.00000 424 num_rel_ret 134.00000 424 map 0.25593 424 R-prec 0.29825 424 bpref 0.28231 424 recip_rank 0.50000 424 ndcg 0.63537 424 ndcg5 0.36005 424 ndcg10 0.38541 424 ndcg20 0.34869 424 ERR 0.08242 424 ERR10 0.06241 424 ERR20 0.06993 424 P1 0.00000 424 P5 0.40000 424 P10 0.40000 424 P15 0.26667 424 P20 0.35000 424 P30 0.26667 424 P50 0.34000 424 P100 0.32000 424 P200 0.29500 424 P500 0.26800 424 P1000 0.13400 425 num_ret 1000.00000 425 num_unjug_ret@1 0.00000 425 num_unjug_ret@10 0.00000 425 num_unjug_ret@20 0.00000 425 num_unjug_ret@100 0.00000 425 num_unjug_ret@1000 551.00000 425 num_rel 162.00000 425 num_rel_ret 140.00000 425 map 0.56617 425 R-prec 0.58025 425 bpref 0.61290 425 recip_rank 1.00000 425 ndcg 0.82873 425 ndcg5 1.00000 425 ndcg10 1.00000 425 ndcg20 0.96656 425 ERR 0.18240 425 ERR10 0.15886 425 ERR20 0.17510 425 P1 1.00000 425 P5 1.00000 425 P10 1.00000 425 P15 1.00000 425 P20 0.95000 425 P30 0.76667 425 P50 0.70000 425 P100 0.60000 425 P200 0.59000 425 P500 0.27600 425 P1000 0.14000 426 num_ret 1000.00000 426 num_unjug_ret@1 0.00000 426 num_unjug_ret@10 0.00000 426 num_unjug_ret@20 1.00000 426 num_unjug_ret@100 11.00000 426 num_unjug_ret@1000 417.00000 426 num_rel 202.00000 426 num_rel_ret 90.00000 426 map 0.13484 426 R-prec 0.27723 426 bpref 0.23189 426 recip_rank 0.50000 426 ndcg 0.41021 426 ndcg5 0.38357 426 ndcg10 0.52158 426 ndcg20 0.37005 426 ERR 0.09070 426 ERR10 0.07496 426 ERR20 0.07731 426 P1 0.00000 426 P5 0.40000 426 P10 0.60000 426 P15 0.40000 426 P20 0.35000 426 P30 0.40000 426 P50 0.36000 426 P100 0.27000 426 P200 0.28000 426 P500 0.18000 426 P1000 0.09000 427 num_ret 1000.00000 427 num_unjug_ret@1 0.00000 427 num_unjug_ret@10 0.00000 427 num_unjug_ret@20 0.00000 427 num_unjug_ret@100 1.00000 427 num_unjug_ret@1000 592.00000 427 num_rel 50.00000 427 num_rel_ret 43.00000 427 map 0.16497 427 R-prec 0.22000 427 bpref 0.11840 427 recip_rank 0.33333 427 ndcg 0.55832 427 ndcg5 0.31565 427 ndcg10 0.20483 427 ndcg20 0.16950 427 ERR 0.05380 427 ERR10 0.03548 427 ERR20 0.03971 427 P1 0.00000 427 P5 0.40000 427 P10 0.20000 427 P15 0.20000 427 P20 0.15000 427 P30 0.16667 427 P50 0.22000 427 P100 0.19000 427 P200 0.16500 427 P500 0.08400 427 P1000 0.04300 428 num_ret 1000.00000 428 num_unjug_ret@1 0.00000 428 num_unjug_ret@10 0.00000 428 num_unjug_ret@20 0.00000 428 num_unjug_ret@100 1.00000 428 num_unjug_ret@1000 475.00000 428 num_rel 118.00000 428 num_rel_ret 111.00000 428 map 0.32811 428 R-prec 0.40678 428 bpref 0.33431 428 recip_rank 0.33333 428 ndcg 0.72008 428 ndcg5 0.30079 428 ndcg10 0.19519 428 ndcg20 0.23872 428 ERR 0.06321 428 ERR10 0.03255 428 ERR20 0.04485 428 P1 0.00000 428 P5 0.40000 428 P10 0.20000 428 P15 0.26667 428 P20 0.25000 428 P30 0.40000 428 P50 0.36000 428 P100 0.41000 428 P200 0.35500 428 P500 0.21200 428 P1000 0.11100 429 num_ret 1000.00000 429 num_unjug_ret@1 0.00000 429 num_unjug_ret@10 0.00000 429 num_unjug_ret@20 0.00000 429 num_unjug_ret@100 10.00000 429 num_unjug_ret@1000 520.00000 429 num_rel 11.00000 429 num_rel_ret 11.00000 429 map 0.25962 429 R-prec 0.27273 429 bpref 0.14050 429 recip_rank 0.50000 429 ndcg 0.58653 429 ndcg5 0.21399 429 ndcg10 0.20512 429 ndcg20 0.29991 429 ERR 0.05474 429 ERR10 0.03776 429 ERR20 0.04562 429 P1 0.00000 429 P5 0.20000 429 P10 0.20000 429 P15 0.20000 429 P20 0.20000 429 P30 0.23333 429 P50 0.22000 429 P100 0.11000 429 P200 0.05500 429 P500 0.02200 429 P1000 0.01100 430 num_ret 1000.00000 430 num_unjug_ret@1 0.00000 430 num_unjug_ret@10 0.00000 430 num_unjug_ret@20 0.00000 430 num_unjug_ret@100 2.00000 430 num_unjug_ret@1000 504.00000 430 num_rel 6.00000 430 num_rel_ret 6.00000 430 map 0.60000 430 R-prec 0.50000 430 bpref 0.44444 430 recip_rank 1.00000 430 ndcg 0.83925 430 ndcg5 0.68435 430 ndcg10 0.61059 430 ndcg20 0.83925 430 ERR 0.11281 430 ERR10 0.10278 430 ERR20 0.11281 430 P1 1.00000 430 P5 0.60000 430 P10 0.30000 430 P15 0.33333 430 P20 0.30000 430 P30 0.20000 430 P50 0.12000 430 P100 0.06000 430 P200 0.03000 430 P500 0.01200 430 P1000 0.00600 431 num_ret 1000.00000 431 num_unjug_ret@1 0.00000 431 num_unjug_ret@10 0.00000 431 num_unjug_ret@20 0.00000 431 num_unjug_ret@100 0.00000 431 num_unjug_ret@1000 470.00000 431 num_rel 130.00000 431 num_rel_ret 126.00000 431 map 0.53903 431 R-prec 0.50769 431 bpref 0.47213 431 recip_rank 1.00000 431 ndcg 0.86973 431 ndcg5 1.00000 431 ndcg10 0.85798 431 ndcg20 0.77168 431 ERR 0.17460 431 ERR10 0.14883 431 ERR20 0.16287 431 P1 1.00000 431 P5 1.00000 431 P10 0.80000 431 P15 0.80000 431 P20 0.70000 431 P30 0.73333 431 P50 0.68000 431 P100 0.59000 431 P200 0.41500 431 P500 0.24600 431 P1000 0.12600 432 num_ret 1000.00000 432 num_unjug_ret@1 0.00000 432 num_unjug_ret@10 0.00000 432 num_unjug_ret@20 0.00000 432 num_unjug_ret@100 5.00000 432 num_unjug_ret@1000 487.00000 432 num_rel 28.00000 432 num_rel_ret 3.00000 432 map 0.00492 432 R-prec 0.03571 432 bpref 0.02168 432 recip_rank 0.08333 432 ndcg 0.06601 432 ndcg5 0.00000 432 ndcg10 0.00000 432 ndcg20 0.03838 432 ERR 0.00649 432 ERR10 0.00000 432 ERR20 0.00521 432 P1 0.00000 432 P5 0.00000 432 P10 0.00000 432 P15 0.06667 432 P20 0.05000 432 P30 0.03333 432 P50 0.02000 432 P100 0.02000 432 P200 0.01500 432 P500 0.00600 432 P1000 0.00300 433 num_ret 1000.00000 433 num_unjug_ret@1 0.00000 433 num_unjug_ret@10 1.00000 433 num_unjug_ret@20 4.00000 433 num_unjug_ret@100 28.00000 433 num_unjug_ret@1000 656.00000 433 num_rel 13.00000 433 num_rel_ret 11.00000 433 map 0.18362 433 R-prec 0.15385 433 bpref 0.14201 433 recip_rank 0.50000 433 ndcg 0.51469 433 ndcg5 0.38357 433 ndcg10 0.24891 433 ndcg20 0.21118 433 ERR 0.06064 433 ERR10 0.05078 433 ERR20 0.05078 433 P1 0.00000 433 P5 0.40000 433 P10 0.20000 433 P15 0.13333 433 P20 0.10000 433 P30 0.13333 433 P50 0.14000 433 P100 0.10000 433 P200 0.05500 433 P500 0.02200 433 P1000 0.01100 434 num_ret 1000.00000 434 num_unjug_ret@1 0.00000 434 num_unjug_ret@10 0.00000 434 num_unjug_ret@20 0.00000 434 num_unjug_ret@100 0.00000 434 num_unjug_ret@1000 303.00000 434 num_rel 347.00000 434 num_rel_ret 274.00000 434 map 0.51157 434 R-prec 0.71182 434 bpref 0.65637 434 recip_rank 0.50000 434 ndcg 0.74131 434 ndcg5 0.49126 434 ndcg10 0.53288 434 ndcg20 0.48224 434 ERR 0.09913 434 ERR10 0.07653 434 ERR20 0.08627 434 P1 0.00000 434 P5 0.60000 434 P10 0.60000 434 P15 0.46667 434 P20 0.50000 434 P30 0.43333 434 P50 0.46000 434 P100 0.60000 434 P200 0.68000 434 P500 0.54600 434 P1000 0.27400 435 num_ret 1000.00000 435 num_unjug_ret@1 0.00000 435 num_unjug_ret@10 0.00000 435 num_unjug_ret@20 0.00000 435 num_unjug_ret@100 3.00000 435 num_unjug_ret@1000 530.00000 435 num_rel 117.00000 435 num_rel_ret 83.00000 435 map 0.22798 435 R-prec 0.34188 435 bpref 0.27263 435 recip_rank 0.25000 435 ndcg 0.57257 435 ndcg5 0.14607 435 ndcg10 0.37643 435 ndcg20 0.38626 435 ERR 0.06671 435 ERR10 0.04379 435 ERR20 0.05537 435 P1 0.00000 435 P5 0.20000 435 P10 0.50000 435 P15 0.46667 435 P20 0.45000 435 P30 0.36667 435 P50 0.42000 435 P100 0.34000 435 P200 0.27500 435 P500 0.16600 435 P1000 0.08300 436 num_ret 1000.00000 436 num_unjug_ret@1 0.00000 436 num_unjug_ret@10 0.00000 436 num_unjug_ret@20 0.00000 436 num_unjug_ret@100 7.00000 436 num_unjug_ret@1000 525.00000 436 num_rel 180.00000 436 num_rel_ret 35.00000 436 map 0.06852 436 R-prec 0.15556 436 bpref 0.13426 436 recip_rank 1.00000 436 ndcg 0.24192 436 ndcg5 0.69921 436 ndcg10 0.66202 436 ndcg20 0.49302 436 ERR 0.13780 436 ERR10 0.12400 436 ERR20 0.12835 436 P1 1.00000 436 P5 0.60000 436 P10 0.60000 436 P15 0.40000 436 P20 0.40000 436 P30 0.26667 436 P50 0.34000 436 P100 0.25000 436 P200 0.15500 436 P500 0.07000 436 P1000 0.03500 437 num_ret 1000.00000 437 num_unjug_ret@1 0.00000 437 num_unjug_ret@10 1.00000 437 num_unjug_ret@20 3.00000 437 num_unjug_ret@100 24.00000 437 num_unjug_ret@1000 515.00000 437 num_rel 72.00000 437 num_rel_ret 25.00000 437 map 0.01660 437 R-prec 0.00000 437 bpref 0.00000 437 recip_rank 0.00901 437 ndcg 0.19196 437 ndcg5 0.00000 437 ndcg10 0.00000 437 ndcg20 0.00000 437 ERR 0.00423 437 ERR10 0.00000 437 ERR20 0.00000 437 P1 0.00000 437 P5 0.00000 437 P10 0.00000 437 P15 0.00000 437 P20 0.00000 437 P30 0.00000 437 P50 0.00000 437 P100 0.00000 437 P200 0.03500 437 P500 0.05000 437 P1000 0.02500 438 num_ret 1000.00000 438 num_unjug_ret@1 0.00000 438 num_unjug_ret@10 0.00000 438 num_unjug_ret@20 0.00000 438 num_unjug_ret@100 0.00000 438 num_unjug_ret@1000 418.00000 438 num_rel 173.00000 438 num_rel_ret 144.00000 438 map 0.30606 438 R-prec 0.36416 438 bpref 0.30101 438 recip_rank 0.33333 438 ndcg 0.68583 438 ndcg5 0.44685 438 ndcg10 0.43781 438 ndcg20 0.42609 438 ERR 0.08507 438 ERR10 0.06109 438 ERR20 0.07264 438 P1 0.00000 438 P5 0.60000 438 P10 0.50000 438 P15 0.53333 438 P20 0.45000 438 P30 0.40000 438 P50 0.42000 438 P100 0.41000 438 P200 0.36000 438 P500 0.27000 438 P1000 0.14400 439 num_ret 1000.00000 439 num_unjug_ret@1 0.00000 439 num_unjug_ret@10 0.00000 439 num_unjug_ret@20 0.00000 439 num_unjug_ret@100 5.00000 439 num_unjug_ret@1000 421.00000 439 num_rel 219.00000 439 num_rel_ret 113.00000 439 map 0.13067 439 R-prec 0.30137 439 bpref 0.22700 439 recip_rank 0.50000 439 ndcg 0.42089 439 ndcg5 0.21399 439 ndcg10 0.13886 439 ndcg20 0.08962 439 ERR 0.04360 439 ERR10 0.03125 439 ERR20 0.03125 439 P1 0.00000 439 P5 0.20000 439 P10 0.10000 439 P15 0.06667 439 P20 0.05000 439 P30 0.03333 439 P50 0.08000 439 P100 0.20000 439 P200 0.30000 439 P500 0.22000 439 P1000 0.11300 440 num_ret 1000.00000 440 num_unjug_ret@1 0.00000 440 num_unjug_ret@10 0.00000 440 num_unjug_ret@20 0.00000 440 num_unjug_ret@100 8.00000 440 num_unjug_ret@1000 494.00000 440 num_rel 54.00000 440 num_rel_ret 40.00000 440 map 0.12213 440 R-prec 0.22222 440 bpref 0.13752 440 recip_rank 0.12500 440 ndcg 0.47239 440 ndcg5 0.00000 440 ndcg10 0.06943 440 ndcg20 0.19261 440 ERR 0.03428 440 ERR10 0.00781 440 ERR20 0.02408 440 P1 0.00000 440 P5 0.00000 440 P10 0.10000 440 P15 0.26667 440 P20 0.25000 440 P30 0.20000 440 P50 0.20000 440 P100 0.18000 440 P200 0.12500 440 P500 0.08000 440 P1000 0.04000 441 num_ret 1000.00000 441 num_unjug_ret@1 0.00000 441 num_unjug_ret@10 0.00000 441 num_unjug_ret@20 0.00000 441 num_unjug_ret@100 7.00000 441 num_unjug_ret@1000 433.00000 441 num_rel 17.00000 441 num_rel_ret 17.00000 441 map 0.65943 441 R-prec 0.58824 441 bpref 0.56747 441 recip_rank 1.00000 441 ndcg 0.89467 441 ndcg5 0.86879 441 ndcg10 0.77917 441 ndcg20 0.71528 441 ERR 0.15614 441 ERR10 0.14174 441 ERR20 0.15156 441 P1 1.00000 441 P5 0.80000 441 P10 0.70000 441 P15 0.53333 441 P20 0.55000 441 P30 0.43333 441 P50 0.32000 441 P100 0.16000 441 P200 0.08500 441 P500 0.03400 441 P1000 0.01700 442 num_ret 1000.00000 442 num_unjug_ret@1 0.00000 442 num_unjug_ret@10 0.00000 442 num_unjug_ret@20 2.00000 442 num_unjug_ret@100 21.00000 442 num_unjug_ret@1000 539.00000 442 num_rel 94.00000 442 num_rel_ret 28.00000 442 map 0.01869 442 R-prec 0.00000 442 bpref 0.00102 442 recip_rank 0.00893 442 ndcg 0.18243 442 ndcg5 0.00000 442 ndcg10 0.00000 442 ndcg20 0.00000 442 ERR 0.00484 442 ERR10 0.00000 442 ERR20 0.00000 442 P1 0.00000 442 P5 0.00000 442 P10 0.00000 442 P15 0.00000 442 P20 0.00000 442 P30 0.00000 442 P50 0.00000 442 P100 0.00000 442 P200 0.07000 442 P500 0.05600 442 P1000 0.02800 443 num_ret 1000.00000 443 num_unjug_ret@1 0.00000 443 num_unjug_ret@10 0.00000 443 num_unjug_ret@20 0.00000 443 num_unjug_ret@100 8.00000 443 num_unjug_ret@1000 502.00000 443 num_rel 102.00000 443 num_rel_ret 69.00000 443 map 0.20118 443 R-prec 0.23529 443 bpref 0.21213 443 recip_rank 1.00000 443 ndcg 0.57213 443 ndcg5 0.65481 443 ndcg10 0.56191 443 ndcg20 0.51139 443 ERR 0.13198 443 ERR10 0.10795 443 ERR20 0.12073 443 P1 1.00000 443 P5 0.60000 443 P10 0.50000 443 P15 0.53333 443 P20 0.45000 443 P30 0.40000 443 P50 0.38000 443 P100 0.24000 443 P200 0.22000 443 P500 0.13800 443 P1000 0.06900 444 num_ret 1000.00000 444 num_unjug_ret@1 0.00000 444 num_unjug_ret@10 0.00000 444 num_unjug_ret@20 0.00000 444 num_unjug_ret@100 1.00000 444 num_unjug_ret@1000 514.00000 444 num_rel 17.00000 444 num_rel_ret 17.00000 444 map 0.84694 444 R-prec 0.82353 444 bpref 0.82353 444 recip_rank 1.00000 444 ndcg 0.95542 444 ndcg5 1.00000 444 ndcg10 0.93638 444 ndcg20 0.87247 444 ERR 0.16849 444 ERR10 0.15536 444 ERR20 0.16664 444 P1 1.00000 444 P5 1.00000 444 P10 0.90000 444 P15 0.80000 444 P20 0.70000 444 P30 0.50000 444 P50 0.32000 444 P100 0.16000 444 P200 0.08000 444 P500 0.03400 444 P1000 0.01700 445 num_ret 1000.00000 445 num_unjug_ret@1 0.00000 445 num_unjug_ret@10 0.00000 445 num_unjug_ret@20 0.00000 445 num_unjug_ret@100 0.00000 445 num_unjug_ret@1000 492.00000 445 num_rel 62.00000 445 num_rel_ret 56.00000 445 map 0.37815 445 R-prec 0.30645 445 bpref 0.26977 445 recip_rank 1.00000 445 ndcg 0.76833 445 ndcg5 1.00000 445 ndcg10 0.92160 445 ndcg20 0.69950 445 ERR 0.16601 445 ERR10 0.15256 445 ERR20 0.15886 445 P1 1.00000 445 P5 1.00000 445 P10 0.90000 445 P15 0.73333 445 P20 0.60000 445 P30 0.46667 445 P50 0.32000 445 P100 0.28000 445 P200 0.24000 445 P500 0.11200 445 P1000 0.05600 446 num_ret 1000.00000 446 num_unjug_ret@1 0.00000 446 num_unjug_ret@10 0.00000 446 num_unjug_ret@20 0.00000 446 num_unjug_ret@100 4.00000 446 num_unjug_ret@1000 488.00000 446 num_rel 162.00000 446 num_rel_ret 135.00000 446 map 0.42782 446 R-prec 0.46914 446 bpref 0.42836 446 recip_rank 1.00000 446 ndcg 0.76584 446 ndcg5 0.83042 446 ndcg10 0.88995 446 ndcg20 0.92898 446 ERR 0.16928 446 ERR10 0.14380 446 ERR20 0.16222 446 P1 1.00000 446 P5 0.80000 446 P10 0.90000 446 P15 0.93333 446 P20 0.95000 446 P30 0.80000 446 P50 0.60000 446 P100 0.49000 446 P200 0.41000 446 P500 0.26400 446 P1000 0.13500 447 num_ret 1000.00000 447 num_unjug_ret@1 0.00000 447 num_unjug_ret@10 0.00000 447 num_unjug_ret@20 0.00000 447 num_unjug_ret@100 7.00000 447 num_unjug_ret@1000 423.00000 447 num_rel 16.00000 447 num_rel_ret 16.00000 447 map 0.60219 447 R-prec 0.56250 447 bpref 0.52344 447 recip_rank 1.00000 447 ndcg 0.86727 447 ndcg5 0.86879 447 ndcg10 0.77787 447 ndcg20 0.66403 447 ERR 0.15254 447 ERR10 0.14140 447 ERR20 0.14720 447 P1 1.00000 447 P5 0.80000 447 P10 0.70000 447 P15 0.60000 447 P20 0.45000 447 P30 0.36667 447 P50 0.26000 447 P100 0.14000 447 P200 0.07500 447 P500 0.03000 447 P1000 0.01600 448 num_ret 1000.00000 448 num_unjug_ret@1 0.00000 448 num_unjug_ret@10 0.00000 448 num_unjug_ret@20 1.00000 448 num_unjug_ret@100 21.00000 448 num_unjug_ret@1000 455.00000 448 num_rel 46.00000 448 num_rel_ret 16.00000 448 map 0.02606 448 R-prec 0.02174 448 bpref 0.01985 448 recip_rank 0.20000 448 ndcg 0.21163 448 ndcg5 0.13121 448 ndcg10 0.08514 448 ndcg20 0.05495 448 ERR 0.01858 448 ERR10 0.01250 448 ERR20 0.01250 448 P1 0.00000 448 P5 0.20000 448 P10 0.10000 448 P15 0.06667 448 P20 0.05000 448 P30 0.03333 448 P50 0.02000 448 P100 0.07000 448 P200 0.07000 448 P500 0.03200 448 P1000 0.01600 449 num_ret 1000.00000 449 num_unjug_ret@1 0.00000 449 num_unjug_ret@10 0.00000 449 num_unjug_ret@20 0.00000 449 num_unjug_ret@100 3.00000 449 num_unjug_ret@1000 526.00000 449 num_rel 67.00000 449 num_rel_ret 32.00000 449 map 0.06126 449 R-prec 0.14925 449 bpref 0.08354 449 recip_rank 0.25000 449 ndcg 0.32871 449 ndcg5 0.14607 449 ndcg10 0.17319 449 ndcg20 0.11177 449 ERR 0.03756 449 ERR10 0.02539 449 ERR20 0.02539 449 P1 0.00000 449 P5 0.20000 449 P10 0.20000 449 P15 0.13333 449 P20 0.10000 449 P30 0.10000 449 P50 0.14000 449 P100 0.13000 449 P200 0.10500 449 P500 0.06400 449 P1000 0.03200 450 num_ret 1000.00000 450 num_unjug_ret@1 0.00000 450 num_unjug_ret@10 0.00000 450 num_unjug_ret@20 0.00000 450 num_unjug_ret@100 0.00000 450 num_unjug_ret@1000 407.00000 450 num_rel 293.00000 450 num_rel_ret 272.00000 450 map 0.66937 450 R-prec 0.67577 450 bpref 0.76487 450 recip_rank 0.50000 450 ndcg 0.87584 450 ndcg5 0.66084 450 ndcg10 0.77991 450 ndcg20 0.75410 450 ERR 0.12804 450 ERR10 0.10278 450 ERR20 0.11718 450 P1 0.00000 450 P5 0.80000 450 P10 0.90000 450 P15 0.86667 450 P20 0.80000 450 P30 0.83333 450 P50 0.86000 450 P100 0.72000 450 P200 0.70500 450 P500 0.54400 450 P1000 0.27200 601 num_ret 1000.00000 601 num_unjug_ret@1 0.00000 601 num_unjug_ret@10 0.00000 601 num_unjug_ret@20 0.00000 601 num_unjug_ret@100 4.00000 601 num_unjug_ret@1000 590.00000 601 num_rel 5.00000 601 num_rel_ret 5.00000 601 map 0.25937 601 R-prec 0.20000 601 bpref 0.20000 601 recip_rank 1.00000 601 ndcg 0.39134 601 ndcg5 0.16102 601 ndcg10 0.16102 601 ndcg20 0.20128 601 ERR 0.07374 601 ERR10 0.06250 601 ERR20 0.06641 601 P1 1.00000 601 P5 0.20000 601 P10 0.10000 601 P15 0.13333 601 P20 0.10000 601 P30 0.10000 601 P50 0.06000 601 P100 0.03000 601 P200 0.02000 601 P500 0.01000 601 P1000 0.00500 602 num_ret 1000.00000 602 num_unjug_ret@1 0.00000 602 num_unjug_ret@10 0.00000 602 num_unjug_ret@20 0.00000 602 num_unjug_ret@100 3.00000 602 num_unjug_ret@1000 574.00000 602 num_rel 84.00000 602 num_rel_ret 84.00000 602 map 0.31495 602 R-prec 0.32143 602 bpref 0.22917 602 recip_rank 1.00000 602 ndcg 0.66689 602 ndcg5 0.28396 602 ndcg10 0.30509 602 ndcg20 0.30545 602 ERR 0.13932 602 ERR10 0.11934 602 ERR20 0.12779 602 P1 1.00000 602 P5 0.40000 602 P10 0.40000 602 P15 0.40000 602 P20 0.35000 602 P30 0.26667 602 P50 0.30000 602 P100 0.30000 602 P200 0.28500 602 P500 0.16800 602 P1000 0.08400 603 num_ret 1000.00000 603 num_unjug_ret@1 0.00000 603 num_unjug_ret@10 0.00000 603 num_unjug_ret@20 0.00000 603 num_unjug_ret@100 2.00000 603 num_unjug_ret@1000 551.00000 603 num_rel 16.00000 603 num_rel_ret 16.00000 603 map 0.17978 603 R-prec 0.18750 603 bpref 0.12109 603 recip_rank 1.00000 603 ndcg 0.60372 603 ndcg5 0.33916 603 ndcg10 0.31171 603 ndcg20 0.32861 603 ERR 0.23024 603 ERR10 0.21289 603 ERR20 0.22063 603 P1 1.00000 603 P5 0.20000 603 P10 0.20000 603 P15 0.13333 603 P20 0.15000 603 P30 0.16667 603 P50 0.12000 603 P100 0.09000 603 P200 0.06500 603 P500 0.03200 603 P1000 0.01600 604 num_ret 1000.00000 604 num_unjug_ret@1 0.00000 604 num_unjug_ret@10 0.00000 604 num_unjug_ret@20 0.00000 604 num_unjug_ret@100 8.00000 604 num_unjug_ret@1000 611.00000 604 num_rel 8.00000 604 num_rel_ret 8.00000 604 map 0.79583 604 R-prec 0.62500 604 bpref 0.71875 604 recip_rank 1.00000 604 ndcg 0.97347 604 ndcg5 1.00000 604 ndcg10 0.92853 604 ndcg20 0.95452 604 ERR 0.35084 604 ERR10 0.34888 604 ERR20 0.35036 604 P1 1.00000 604 P5 1.00000 604 P10 0.60000 604 P15 0.46667 604 P20 0.35000 604 P30 0.23333 604 P50 0.16000 604 P100 0.08000 604 P200 0.04000 604 P500 0.01600 604 P1000 0.00800 605 num_ret 1000.00000 605 num_unjug_ret@1 0.00000 605 num_unjug_ret@10 0.00000 605 num_unjug_ret@20 1.00000 605 num_unjug_ret@100 8.00000 605 num_unjug_ret@1000 508.00000 605 num_rel 72.00000 605 num_rel_ret 39.00000 605 map 0.03793 605 R-prec 0.02778 605 bpref 0.01196 605 recip_rank 0.02778 605 ndcg 0.30300 605 ndcg5 0.00000 605 ndcg10 0.00000 605 ndcg20 0.00000 605 ERR 0.00734 605 ERR10 0.00000 605 ERR20 0.00000 605 P1 0.00000 605 P5 0.00000 605 P10 0.00000 605 P15 0.00000 605 P20 0.00000 605 P30 0.00000 605 P50 0.02000 605 P100 0.04000 605 P200 0.06000 605 P500 0.07800 605 P1000 0.03900 606 num_ret 1000.00000 606 num_unjug_ret@1 0.00000 606 num_unjug_ret@10 0.00000 606 num_unjug_ret@20 0.00000 606 num_unjug_ret@100 3.00000 606 num_unjug_ret@1000 588.00000 606 num_rel 14.00000 606 num_rel_ret 13.00000 606 map 0.37398 606 R-prec 0.35714 606 bpref 0.30102 606 recip_rank 1.00000 606 ndcg 0.74721 606 ndcg5 0.66811 606 ndcg10 0.59050 606 ndcg20 0.57815 606 ERR 0.29195 606 ERR10 0.28226 606 ERR20 0.28698 606 P1 1.00000 606 P5 0.60000 606 P10 0.40000 606 P15 0.33333 606 P20 0.30000 606 P30 0.23333 606 P50 0.16000 606 P100 0.11000 606 P200 0.06000 606 P500 0.02600 606 P1000 0.01300 607 num_ret 1000.00000 607 num_unjug_ret@1 0.00000 607 num_unjug_ret@10 0.00000 607 num_unjug_ret@20 0.00000 607 num_unjug_ret@100 1.00000 607 num_unjug_ret@1000 582.00000 607 num_rel 11.00000 607 num_rel_ret 10.00000 607 map 0.46241 607 R-prec 0.45455 607 bpref 0.41322 607 recip_rank 1.00000 607 ndcg 0.74192 607 ndcg5 0.50874 607 ndcg10 0.54552 607 ndcg20 0.71592 607 ERR 0.11389 607 ERR10 0.10337 607 ERR20 0.11375 607 P1 1.00000 607 P5 0.40000 607 P10 0.50000 607 P15 0.40000 607 P20 0.45000 607 P30 0.30000 607 P50 0.18000 607 P100 0.09000 607 P200 0.04500 607 P500 0.02000 607 P1000 0.01000 608 num_ret 1000.00000 608 num_unjug_ret@1 0.00000 608 num_unjug_ret@10 0.00000 608 num_unjug_ret@20 0.00000 608 num_unjug_ret@100 1.00000 608 num_unjug_ret@1000 468.00000 608 num_rel 27.00000 608 num_rel_ret 24.00000 608 map 0.10063 608 R-prec 0.07407 608 bpref 0.02743 608 recip_rank 0.08333 608 ndcg 0.37026 608 ndcg5 0.00000 608 ndcg10 0.00000 608 ndcg20 0.02391 608 ERR 0.01833 608 ERR10 0.00000 608 ERR20 0.00521 608 P1 0.00000 608 P5 0.00000 608 P10 0.00000 608 P15 0.06667 608 P20 0.05000 608 P30 0.06667 608 P50 0.10000 608 P100 0.12000 608 P200 0.11000 608 P500 0.04800 608 P1000 0.02400 609 num_ret 1000.00000 609 num_unjug_ret@1 0.00000 609 num_unjug_ret@10 0.00000 609 num_unjug_ret@20 0.00000 609 num_unjug_ret@100 8.00000 609 num_unjug_ret@1000 607.00000 609 num_rel 30.00000 609 num_rel_ret 30.00000 609 map 0.23517 609 R-prec 0.23333 609 bpref 0.20667 609 recip_rank 1.00000 609 ndcg 0.68375 609 ndcg5 0.60184 609 ndcg10 0.46391 609 ndcg20 0.48229 609 ERR 0.30647 609 ERR10 0.29056 609 ERR20 0.30293 609 P1 1.00000 609 P5 0.60000 609 P10 0.40000 609 P15 0.33333 609 P20 0.35000 609 P30 0.23333 609 P50 0.16000 609 P100 0.13000 609 P200 0.09500 609 P500 0.06000 609 P1000 0.03000 610 num_ret 1000.00000 610 num_unjug_ret@1 0.00000 610 num_unjug_ret@10 0.00000 610 num_unjug_ret@20 0.00000 610 num_unjug_ret@100 6.00000 610 num_unjug_ret@1000 557.00000 610 num_rel 6.00000 610 num_rel_ret 6.00000 610 map 0.10419 610 R-prec 0.16667 610 bpref 0.05556 610 recip_rank 0.16667 610 ndcg 0.39040 610 ndcg5 0.00000 610 ndcg10 0.20866 610 ndcg20 0.20866 610 ERR 0.02084 610 ERR10 0.01879 610 ERR20 0.01879 610 P1 0.00000 610 P5 0.00000 610 P10 0.20000 610 P15 0.13333 610 P20 0.10000 610 P30 0.06667 610 P50 0.04000 610 P100 0.04000 610 P200 0.03000 610 P500 0.01200 610 P1000 0.00600 611 num_ret 1000.00000 611 num_unjug_ret@1 0.00000 611 num_unjug_ret@10 0.00000 611 num_unjug_ret@20 0.00000 611 num_unjug_ret@100 7.00000 611 num_unjug_ret@1000 597.00000 611 num_rel 49.00000 611 num_rel_ret 45.00000 611 map 0.27072 611 R-prec 0.26531 611 bpref 0.20991 611 recip_rank 1.00000 611 ndcg 0.61079 611 ndcg5 0.54531 611 ndcg10 0.40041 611 ndcg20 0.29572 611 ERR 0.23379 611 ERR10 0.21663 611 ERR20 0.22398 611 P1 1.00000 611 P5 0.80000 611 P10 0.60000 611 P15 0.46667 611 P20 0.35000 611 P30 0.30000 611 P50 0.28000 611 P100 0.20000 611 P200 0.13500 611 P500 0.09000 611 P1000 0.04500 612 num_ret 1000.00000 612 num_unjug_ret@1 0.00000 612 num_unjug_ret@10 0.00000 612 num_unjug_ret@20 0.00000 612 num_unjug_ret@100 0.00000 612 num_unjug_ret@1000 615.00000 612 num_rel 17.00000 612 num_rel_ret 17.00000 612 map 0.44454 612 R-prec 0.47059 612 bpref 0.46021 612 recip_rank 0.50000 612 ndcg 0.63801 612 ndcg5 0.40513 612 ndcg10 0.40570 612 ndcg20 0.50317 612 ERR 0.16016 612 ERR10 0.14535 612 ERR20 0.15881 612 P1 0.00000 612 P5 0.80000 612 P10 0.60000 612 P15 0.53333 612 P20 0.50000 612 P30 0.33333 612 P50 0.26000 612 P100 0.13000 612 P200 0.08000 612 P500 0.03400 612 P1000 0.01700 613 num_ret 1000.00000 613 num_unjug_ret@1 0.00000 613 num_unjug_ret@10 0.00000 613 num_unjug_ret@20 0.00000 613 num_unjug_ret@100 2.00000 613 num_unjug_ret@1000 627.00000 613 num_rel 47.00000 613 num_rel_ret 41.00000 613 map 0.20260 613 R-prec 0.21277 613 bpref 0.15754 613 recip_rank 0.50000 613 ndcg 0.59390 613 ndcg5 0.34860 613 ndcg10 0.36901 613 ndcg20 0.30524 613 ERR 0.14499 613 ERR10 0.13212 613 ERR20 0.14002 613 P1 0.00000 613 P5 0.60000 613 P10 0.50000 613 P15 0.33333 613 P20 0.35000 613 P30 0.23333 613 P50 0.22000 613 P100 0.16000 613 P200 0.16000 613 P500 0.08200 613 P1000 0.04100 614 num_ret 1000.00000 614 num_unjug_ret@1 0.00000 614 num_unjug_ret@10 0.00000 614 num_unjug_ret@20 0.00000 614 num_unjug_ret@100 3.00000 614 num_unjug_ret@1000 550.00000 614 num_rel 30.00000 614 num_rel_ret 28.00000 614 map 0.65959 614 R-prec 0.60000 614 bpref 0.63889 614 recip_rank 1.00000 614 ndcg 0.75343 614 ndcg5 0.53167 614 ndcg10 0.60895 614 ndcg20 0.65339 614 ERR 0.21237 614 ERR10 0.19451 614 ERR20 0.20767 614 P1 1.00000 614 P5 0.80000 614 P10 0.90000 614 P15 0.80000 614 P20 0.75000 614 P30 0.60000 614 P50 0.50000 614 P100 0.27000 614 P200 0.13500 614 P500 0.05600 614 P1000 0.02800 615 num_ret 1000.00000 615 num_unjug_ret@1 0.00000 615 num_unjug_ret@10 0.00000 615 num_unjug_ret@20 0.00000 615 num_unjug_ret@100 1.00000 615 num_unjug_ret@1000 617.00000 615 num_rel 12.00000 615 num_rel_ret 12.00000 615 map 0.08467 615 R-prec 0.00000 615 bpref 0.00000 615 recip_rank 0.06667 615 ndcg 0.33939 615 ndcg5 0.00000 615 ndcg10 0.00000 615 ndcg20 0.11446 615 ERR 0.02052 615 ERR10 0.00000 615 ERR20 0.01393 615 P1 0.00000 615 P5 0.00000 615 P10 0.00000 615 P15 0.06667 615 P20 0.10000 615 P30 0.10000 615 P50 0.10000 615 P100 0.05000 615 P200 0.06000 615 P500 0.02400 615 P1000 0.01200 616 num_ret 1000.00000 616 num_unjug_ret@1 0.00000 616 num_unjug_ret@10 0.00000 616 num_unjug_ret@20 0.00000 616 num_unjug_ret@100 2.00000 616 num_unjug_ret@1000 495.00000 616 num_rel 41.00000 616 num_rel_ret 41.00000 616 map 0.63624 616 R-prec 0.63415 616 bpref 0.59250 616 recip_rank 1.00000 616 ndcg 0.76108 616 ndcg5 0.44639 616 ndcg10 0.46694 616 ndcg20 0.63520 616 ERR 0.20957 616 ERR10 0.18505 616 ERR20 0.20499 616 P1 1.00000 616 P5 1.00000 616 P10 0.70000 616 P15 0.73333 616 P20 0.75000 616 P30 0.76667 616 P50 0.52000 616 P100 0.33000 616 P200 0.19500 616 P500 0.08200 616 P1000 0.04100 617 num_ret 1000.00000 617 num_unjug_ret@1 0.00000 617 num_unjug_ret@10 0.00000 617 num_unjug_ret@20 1.00000 617 num_unjug_ret@100 7.00000 617 num_unjug_ret@1000 443.00000 617 num_rel 68.00000 617 num_rel_ret 66.00000 617 map 0.35560 617 R-prec 0.30882 617 bpref 0.29888 617 recip_rank 0.50000 617 ndcg 0.62002 617 ndcg5 0.17654 617 ndcg10 0.27620 617 ndcg20 0.31662 617 ERR 0.12086 617 ERR10 0.10060 617 ERR20 0.11223 617 P1 0.00000 617 P5 0.60000 617 P10 0.60000 617 P15 0.60000 617 P20 0.55000 617 P30 0.50000 617 P50 0.36000 617 P100 0.33000 617 P200 0.26000 617 P500 0.13200 617 P1000 0.06600 618 num_ret 1000.00000 618 num_unjug_ret@1 0.00000 618 num_unjug_ret@10 0.00000 618 num_unjug_ret@20 0.00000 618 num_unjug_ret@100 0.00000 618 num_unjug_ret@1000 699.00000 618 num_rel 27.00000 618 num_rel_ret 27.00000 618 map 0.18942 618 R-prec 0.14815 618 bpref 0.10837 618 recip_rank 0.25000 618 ndcg 0.50014 618 ndcg5 0.16521 618 ndcg10 0.17588 618 ndcg20 0.12730 618 ERR 0.04734 618 ERR10 0.03519 618 ERR20 0.03519 618 P1 0.00000 618 P5 0.40000 618 P10 0.30000 618 P15 0.20000 618 P20 0.15000 618 P30 0.16667 618 P50 0.16000 618 P100 0.17000 618 P200 0.13500 618 P500 0.05400 618 P1000 0.02700 619 num_ret 1000.00000 619 num_unjug_ret@1 0.00000 619 num_unjug_ret@10 0.00000 619 num_unjug_ret@20 0.00000 619 num_unjug_ret@100 0.00000 619 num_unjug_ret@1000 637.00000 619 num_rel 21.00000 619 num_rel_ret 21.00000 619 map 0.47093 619 R-prec 0.52381 619 bpref 0.44898 619 recip_rank 1.00000 619 ndcg 0.74478 619 ndcg5 0.41049 619 ndcg10 0.44711 619 ndcg20 0.58514 619 ERR 0.27119 619 ERR10 0.24830 619 ERR20 0.26758 619 P1 1.00000 619 P5 0.40000 619 P10 0.40000 619 P15 0.40000 619 P20 0.55000 619 P30 0.46667 619 P50 0.32000 619 P100 0.20000 619 P200 0.10500 619 P500 0.04200 619 P1000 0.02100 620 num_ret 1000.00000 620 num_unjug_ret@1 0.00000 620 num_unjug_ret@10 0.00000 620 num_unjug_ret@20 0.00000 620 num_unjug_ret@100 5.00000 620 num_unjug_ret@1000 627.00000 620 num_rel 9.00000 620 num_rel_ret 9.00000 620 map 0.15755 620 R-prec 0.11111 620 bpref 0.11111 620 recip_rank 1.00000 620 ndcg 0.37660 620 ndcg5 0.12389 620 ndcg10 0.10664 620 ndcg20 0.10664 620 ERR 0.07306 620 ERR10 0.06250 620 ERR20 0.06250 620 P1 1.00000 620 P5 0.20000 620 P10 0.10000 620 P15 0.06667 620 P20 0.05000 620 P30 0.03333 620 P50 0.06000 620 P100 0.05000 620 P200 0.04000 620 P500 0.01800 620 P1000 0.00900 621 num_ret 1000.00000 621 num_unjug_ret@1 0.00000 621 num_unjug_ret@10 0.00000 621 num_unjug_ret@20 0.00000 621 num_unjug_ret@100 1.00000 621 num_unjug_ret@1000 633.00000 621 num_rel 51.00000 621 num_rel_ret 51.00000 621 map 0.60248 621 R-prec 0.52941 621 bpref 0.50557 621 recip_rank 1.00000 621 ndcg 0.84081 621 ndcg5 0.85734 621 ndcg10 0.70119 621 ndcg20 0.68016 621 ERR 0.34199 621 ERR10 0.32771 621 ERR20 0.33891 621 P1 1.00000 621 P5 1.00000 621 P10 0.90000 621 P15 0.93333 621 P20 0.80000 621 P30 0.66667 621 P50 0.52000 621 P100 0.39000 621 P200 0.23500 621 P500 0.10000 621 P1000 0.05100 622 num_ret 1000.00000 622 num_unjug_ret@1 0.00000 622 num_unjug_ret@10 0.00000 622 num_unjug_ret@20 0.00000 622 num_unjug_ret@100 2.00000 622 num_unjug_ret@1000 618.00000 622 num_rel 59.00000 622 num_rel_ret 55.00000 622 map 0.37635 622 R-prec 0.37288 622 bpref 0.33726 622 recip_rank 0.25000 622 ndcg 0.58085 622 ndcg5 0.09242 622 ndcg10 0.15610 622 ndcg20 0.22202 622 ERR 0.07405 622 ERR10 0.04574 622 ERR20 0.06069 622 P1 0.00000 622 P5 0.40000 622 P10 0.50000 622 P15 0.60000 622 P20 0.50000 622 P30 0.46667 622 P50 0.42000 622 P100 0.36000 622 P200 0.27000 622 P500 0.11000 622 P1000 0.05500 623 num_ret 1000.00000 623 num_unjug_ret@1 0.00000 623 num_unjug_ret@10 0.00000 623 num_unjug_ret@20 0.00000 623 num_unjug_ret@100 4.00000 623 num_unjug_ret@1000 587.00000 623 num_rel 38.00000 623 num_rel_ret 32.00000 623 map 0.34086 623 R-prec 0.28947 623 bpref 0.26039 623 recip_rank 1.00000 623 ndcg 0.59672 623 ndcg5 0.47200 623 ndcg10 0.46545 623 ndcg20 0.41372 623 ERR 0.18097 623 ERR10 0.16889 623 ERR20 0.17425 623 P1 1.00000 623 P5 1.00000 623 P10 0.70000 623 P15 0.60000 623 P20 0.45000 623 P30 0.33333 623 P50 0.28000 623 P100 0.19000 623 P200 0.13500 623 P500 0.06400 623 P1000 0.03200 624 num_ret 1000.00000 624 num_unjug_ret@1 0.00000 624 num_unjug_ret@10 0.00000 624 num_unjug_ret@20 0.00000 624 num_unjug_ret@100 0.00000 624 num_unjug_ret@1000 686.00000 624 num_rel 18.00000 624 num_rel_ret 18.00000 624 map 0.32944 624 R-prec 0.33333 624 bpref 0.24691 624 recip_rank 1.00000 624 ndcg 0.57369 624 ndcg5 0.18438 624 ndcg10 0.25857 624 ndcg20 0.32240 624 ERR 0.14341 624 ERR10 0.11926 624 ERR20 0.13548 624 P1 1.00000 624 P5 0.40000 624 P10 0.30000 624 P15 0.40000 624 P20 0.30000 624 P30 0.20000 624 P50 0.24000 624 P100 0.15000 624 P200 0.08500 624 P500 0.03600 624 P1000 0.01800 625 num_ret 1000.00000 625 num_unjug_ret@1 0.00000 625 num_unjug_ret@10 0.00000 625 num_unjug_ret@20 0.00000 625 num_unjug_ret@100 19.00000 625 num_unjug_ret@1000 616.00000 625 num_rel 27.00000 625 num_rel_ret 15.00000 625 map 0.12037 625 R-prec 0.18519 625 bpref 0.15089 625 recip_rank 0.25000 625 ndcg 0.35918 625 ndcg5 0.09242 625 ndcg10 0.13334 625 ndcg20 0.16157 625 ERR 0.07412 625 ERR10 0.05089 625 ERR20 0.06418 625 P1 0.00000 625 P5 0.40000 625 P10 0.30000 625 P15 0.26667 625 P20 0.25000 625 P30 0.20000 625 P50 0.16000 625 P100 0.14000 625 P200 0.07000 625 P500 0.03000 625 P1000 0.01500 626 num_ret 1000.00000 626 num_unjug_ret@1 0.00000 626 num_unjug_ret@10 0.00000 626 num_unjug_ret@20 0.00000 626 num_unjug_ret@100 1.00000 626 num_unjug_ret@1000 530.00000 626 num_rel 12.00000 626 num_rel_ret 12.00000 626 map 0.33961 626 R-prec 0.41667 626 bpref 0.28472 626 recip_rank 0.33333 626 ndcg 0.61690 626 ndcg5 0.30079 626 ndcg10 0.34302 626 ndcg20 0.34879 626 ERR 0.13894 626 ERR10 0.12617 626 ERR20 0.12844 626 P1 0.00000 626 P5 0.40000 626 P10 0.40000 626 P15 0.33333 626 P20 0.25000 626 P30 0.30000 626 P50 0.24000 626 P100 0.12000 626 P200 0.06000 626 P500 0.02400 626 P1000 0.01200 627 num_ret 1000.00000 627 num_unjug_ret@1 0.00000 627 num_unjug_ret@10 0.00000 627 num_unjug_ret@20 0.00000 627 num_unjug_ret@100 13.00000 627 num_unjug_ret@1000 550.00000 627 num_rel 28.00000 627 num_rel_ret 21.00000 627 map 0.09965 627 R-prec 0.07143 627 bpref 0.03954 627 recip_rank 0.07692 627 ndcg 0.40507 627 ndcg5 0.00000 627 ndcg10 0.00000 627 ndcg20 0.07282 627 ERR 0.01873 627 ERR10 0.00000 627 ERR20 0.00871 627 P1 0.00000 627 P5 0.00000 627 P10 0.00000 627 P15 0.13333 627 P20 0.10000 627 P30 0.06667 627 P50 0.10000 627 P100 0.16000 627 P200 0.10000 627 P500 0.04200 627 P1000 0.02100 628 num_ret 1000.00000 628 num_unjug_ret@1 0.00000 628 num_unjug_ret@10 0.00000 628 num_unjug_ret@20 0.00000 628 num_unjug_ret@100 0.00000 628 num_unjug_ret@1000 596.00000 628 num_rel 26.00000 628 num_rel_ret 26.00000 628 map 0.21406 628 R-prec 0.15385 628 bpref 0.10799 628 recip_rank 0.25000 628 ndcg 0.54410 628 ndcg5 0.27727 628 ndcg10 0.23491 628 ndcg20 0.26338 628 ERR 0.09494 628 ERR10 0.07734 628 ERR20 0.08649 628 P1 0.00000 628 P5 0.40000 628 P10 0.20000 628 P15 0.13333 628 P20 0.20000 628 P30 0.16667 628 P50 0.22000 628 P100 0.22000 628 P200 0.13000 628 P500 0.05200 628 P1000 0.02600 629 num_ret 1000.00000 629 num_unjug_ret@1 0.00000 629 num_unjug_ret@10 0.00000 629 num_unjug_ret@20 0.00000 629 num_unjug_ret@100 0.00000 629 num_unjug_ret@1000 700.00000 629 num_rel 19.00000 629 num_rel_ret 19.00000 629 map 0.11901 629 R-prec 0.10526 629 bpref 0.06094 629 recip_rank 0.25000 629 ndcg 0.38804 629 ndcg5 0.04869 629 ndcg10 0.03862 629 ndcg20 0.05032 629 ERR 0.03301 629 ERR10 0.01563 629 ERR20 0.01929 629 P1 0.00000 629 P5 0.20000 629 P10 0.10000 629 P15 0.06667 629 P20 0.10000 629 P30 0.10000 629 P50 0.12000 629 P100 0.10000 629 P200 0.09500 629 P500 0.03800 629 P1000 0.01900 630 num_ret 1000.00000 630 num_unjug_ret@1 0.00000 630 num_unjug_ret@10 0.00000 630 num_unjug_ret@20 0.00000 630 num_unjug_ret@100 5.00000 630 num_unjug_ret@1000 407.00000 630 num_rel 4.00000 630 num_rel_ret 4.00000 630 map 0.51149 630 R-prec 0.50000 630 bpref 0.43750 630 recip_rank 1.00000 630 ndcg 0.82478 630 ndcg5 0.73702 630 ndcg10 0.79819 630 ndcg20 0.79819 630 ERR 0.23291 630 ERR10 0.23246 630 ERR20 0.23246 630 P1 1.00000 630 P5 0.40000 630 P10 0.30000 630 P15 0.20000 630 P20 0.15000 630 P30 0.10000 630 P50 0.06000 630 P100 0.04000 630 P200 0.02000 630 P500 0.00800 630 P1000 0.00400 631 num_ret 1000.00000 631 num_unjug_ret@1 0.00000 631 num_unjug_ret@10 0.00000 631 num_unjug_ret@20 0.00000 631 num_unjug_ret@100 3.00000 631 num_unjug_ret@1000 440.00000 631 num_rel 115.00000 631 num_rel_ret 104.00000 631 map 0.19086 631 R-prec 0.15652 631 bpref 0.09694 631 recip_rank 0.11111 631 ndcg 0.52550 631 ndcg5 0.00000 631 ndcg10 0.02208 631 ndcg20 0.05264 631 ERR 0.03319 631 ERR10 0.00694 631 ERR20 0.02159 631 P1 0.00000 631 P5 0.00000 631 P10 0.10000 631 P15 0.13333 631 P20 0.10000 631 P30 0.06667 631 P50 0.12000 631 P100 0.16000 631 P200 0.23000 631 P500 0.20800 631 P1000 0.10400 632 num_ret 1000.00000 632 num_unjug_ret@1 1.00000 632 num_unjug_ret@10 8.00000 632 num_unjug_ret@20 13.00000 632 num_unjug_ret@100 61.00000 632 num_unjug_ret@1000 628.00000 632 num_rel 71.00000 632 num_rel_ret 37.00000 632 map 0.02270 632 R-prec 0.05634 632 bpref 0.06586 632 recip_rank 0.05556 632 ndcg 0.22510 632 ndcg5 0.00000 632 ndcg10 0.00000 632 ndcg20 0.01820 632 ERR 0.01037 632 ERR10 0.00000 632 ERR20 0.00347 632 P1 0.00000 632 P5 0.00000 632 P10 0.00000 632 P15 0.00000 632 P20 0.05000 632 P30 0.06667 632 P50 0.04000 632 P100 0.05000 632 P200 0.04000 632 P500 0.03600 632 P1000 0.03700 633 num_ret 1000.00000 633 num_unjug_ret@1 0.00000 633 num_unjug_ret@10 0.00000 633 num_unjug_ret@20 0.00000 633 num_unjug_ret@100 0.00000 633 num_unjug_ret@1000 588.00000 633 num_rel 47.00000 633 num_rel_ret 47.00000 633 map 0.61094 633 R-prec 0.51064 633 bpref 0.48574 633 recip_rank 1.00000 633 ndcg 0.78131 633 ndcg5 0.47477 633 ndcg10 0.62710 633 ndcg20 0.62184 633 ERR 0.18464 633 ERR10 0.16543 633 ERR20 0.17630 633 P1 1.00000 633 P5 1.00000 633 P10 0.90000 633 P15 0.80000 633 P20 0.75000 633 P30 0.70000 633 P50 0.50000 633 P100 0.39000 633 P200 0.23500 633 P500 0.09400 633 P1000 0.04700 634 num_ret 1000.00000 634 num_unjug_ret@1 0.00000 634 num_unjug_ret@10 0.00000 634 num_unjug_ret@20 0.00000 634 num_unjug_ret@100 32.00000 634 num_unjug_ret@1000 652.00000 634 num_rel 11.00000 634 num_rel_ret 11.00000 634 map 0.71676 634 R-prec 0.63636 634 bpref 0.79339 634 recip_rank 0.50000 634 ndcg 0.82115 634 ndcg5 0.66084 634 ndcg10 0.64292 634 ndcg20 0.82115 634 ERR 0.23353 634 ERR10 0.22350 634 ERR20 0.23353 634 P1 0.00000 634 P5 0.80000 634 P10 0.70000 634 P15 0.73333 634 P20 0.55000 634 P30 0.36667 634 P50 0.22000 634 P100 0.11000 634 P200 0.05500 634 P500 0.02200 634 P1000 0.01100 635 num_ret 1000.00000 635 num_unjug_ret@1 0.00000 635 num_unjug_ret@10 0.00000 635 num_unjug_ret@20 0.00000 635 num_unjug_ret@100 6.00000 635 num_unjug_ret@1000 596.00000 635 num_rel 19.00000 635 num_rel_ret 19.00000 635 map 0.79432 635 R-prec 0.78947 635 bpref 0.80886 635 recip_rank 1.00000 635 ndcg 0.93356 635 ndcg5 0.85393 635 ndcg10 0.90521 635 ndcg20 0.82306 635 ERR 0.16325 635 ERR10 0.14837 635 ERR20 0.16049 635 P1 1.00000 635 P5 0.80000 635 P10 0.90000 635 P15 0.80000 635 P20 0.75000 635 P30 0.56667 635 P50 0.36000 635 P100 0.18000 635 P200 0.09000 635 P500 0.03800 635 P1000 0.01900 636 num_ret 1000.00000 636 num_unjug_ret@1 0.00000 636 num_unjug_ret@10 0.00000 636 num_unjug_ret@20 0.00000 636 num_unjug_ret@100 4.00000 636 num_unjug_ret@1000 477.00000 636 num_rel 14.00000 636 num_rel_ret 14.00000 636 map 0.55124 636 R-prec 0.50000 636 bpref 0.51531 636 recip_rank 1.00000 636 ndcg 0.62552 636 ndcg5 0.35527 636 ndcg10 0.45013 636 ndcg20 0.52436 636 ERR 0.16454 636 ERR10 0.15273 636 ERR20 0.16310 636 P1 1.00000 636 P5 0.80000 636 P10 0.60000 636 P15 0.46667 636 P20 0.45000 636 P30 0.30000 636 P50 0.20000 636 P100 0.10000 636 P200 0.06000 636 P500 0.02800 636 P1000 0.01400 637 num_ret 1000.00000 637 num_unjug_ret@1 0.00000 637 num_unjug_ret@10 0.00000 637 num_unjug_ret@20 0.00000 637 num_unjug_ret@100 9.00000 637 num_unjug_ret@1000 629.00000 637 num_rel 22.00000 637 num_rel_ret 22.00000 637 map 0.46389 637 R-prec 0.40909 637 bpref 0.36777 637 recip_rank 1.00000 637 ndcg 0.62890 637 ndcg5 0.28960 637 ndcg10 0.40325 637 ndcg20 0.36750 637 ERR 0.17257 637 ERR10 0.15889 637 ERR20 0.16355 637 P1 1.00000 637 P5 0.80000 637 P10 0.60000 637 P15 0.46667 637 P20 0.40000 637 P30 0.36667 637 P50 0.24000 637 P100 0.19000 637 P200 0.11000 637 P500 0.04400 637 P1000 0.02200 638 num_ret 1000.00000 638 num_unjug_ret@1 0.00000 638 num_unjug_ret@10 0.00000 638 num_unjug_ret@20 0.00000 638 num_unjug_ret@100 30.00000 638 num_unjug_ret@1000 580.00000 638 num_rel 35.00000 638 num_rel_ret 28.00000 638 map 0.12040 638 R-prec 0.17143 638 bpref 0.10041 638 recip_rank 0.14286 638 ndcg 0.38241 638 ndcg5 0.00000 638 ndcg10 0.08409 638 ndcg20 0.06871 638 ERR 0.03669 638 ERR10 0.02175 638 ERR20 0.02175 638 P1 0.00000 638 P5 0.00000 638 P10 0.30000 638 P15 0.20000 638 P20 0.15000 638 P30 0.13333 638 P50 0.14000 638 P100 0.13000 638 P200 0.12000 638 P500 0.05600 638 P1000 0.02800 639 num_ret 1000.00000 639 num_unjug_ret@1 0.00000 639 num_unjug_ret@10 0.00000 639 num_unjug_ret@20 0.00000 639 num_unjug_ret@100 1.00000 639 num_unjug_ret@1000 495.00000 639 num_rel 32.00000 639 num_rel_ret 31.00000 639 map 0.47092 639 R-prec 0.37500 639 bpref 0.35156 639 recip_rank 1.00000 639 ndcg 0.82207 639 ndcg5 1.00000 639 ndcg10 0.86302 639 ndcg20 0.67048 639 ERR 0.16402 639 ERR10 0.14991 639 ERR20 0.15840 639 P1 1.00000 639 P5 1.00000 639 P10 0.80000 639 P15 0.73333 639 P20 0.55000 639 P30 0.36667 639 P50 0.28000 639 P100 0.25000 639 P200 0.14500 639 P500 0.06200 639 P1000 0.03100 640 num_ret 1000.00000 640 num_unjug_ret@1 0.00000 640 num_unjug_ret@10 0.00000 640 num_unjug_ret@20 0.00000 640 num_unjug_ret@100 0.00000 640 num_unjug_ret@1000 653.00000 640 num_rel 43.00000 640 num_rel_ret 43.00000 640 map 0.40845 640 R-prec 0.39535 640 bpref 0.32504 640 recip_rank 1.00000 640 ndcg 0.74613 640 ndcg5 0.62876 640 ndcg10 0.54501 640 ndcg20 0.42592 640 ERR 0.31237 640 ERR10 0.29455 640 ERR20 0.30450 640 P1 1.00000 640 P5 0.80000 640 P10 0.60000 640 P15 0.53333 640 P20 0.50000 640 P30 0.46667 640 P50 0.34000 640 P100 0.28000 640 P200 0.20000 640 P500 0.08400 640 P1000 0.04300 641 num_ret 1000.00000 641 num_unjug_ret@1 0.00000 641 num_unjug_ret@10 0.00000 641 num_unjug_ret@20 0.00000 641 num_unjug_ret@100 0.00000 641 num_unjug_ret@1000 527.00000 641 num_rel 49.00000 641 num_rel_ret 49.00000 641 map 0.52135 641 R-prec 0.51020 641 bpref 0.46980 641 recip_rank 0.50000 641 ndcg 0.78926 641 ndcg5 0.66084 641 ndcg10 0.63711 641 ndcg20 0.51009 641 ERR 0.23365 641 ERR10 0.22198 641 ERR20 0.22965 641 P1 0.00000 641 P5 0.80000 641 P10 0.70000 641 P15 0.66667 641 P20 0.55000 641 P30 0.53333 641 P50 0.52000 641 P100 0.40000 641 P200 0.24500 641 P500 0.09800 641 P1000 0.04900 642 num_ret 1000.00000 642 num_unjug_ret@1 0.00000 642 num_unjug_ret@10 0.00000 642 num_unjug_ret@20 0.00000 642 num_unjug_ret@100 2.00000 642 num_unjug_ret@1000 615.00000 642 num_rel 39.00000 642 num_rel_ret 37.00000 642 map 0.22086 642 R-prec 0.23077 642 bpref 0.15976 642 recip_rank 1.00000 642 ndcg 0.58574 642 ndcg5 0.11305 642 ndcg10 0.14673 642 ndcg20 0.24089 642 ERR 0.12784 642 ERR10 0.08761 642 ERR20 0.12041 642 P1 1.00000 642 P5 0.20000 642 P10 0.20000 642 P15 0.26667 642 P20 0.30000 642 P30 0.23333 642 P50 0.22000 642 P100 0.19000 642 P200 0.18000 642 P500 0.07400 642 P1000 0.03700 643 num_ret 1000.00000 643 num_unjug_ret@1 0.00000 643 num_unjug_ret@10 0.00000 643 num_unjug_ret@20 0.00000 643 num_unjug_ret@100 3.00000 643 num_unjug_ret@1000 573.00000 643 num_rel 29.00000 643 num_rel_ret 29.00000 643 map 0.14556 643 R-prec 0.17241 643 bpref 0.11653 643 recip_rank 0.50000 643 ndcg 0.42987 643 ndcg5 0.11506 643 ndcg10 0.12320 643 ndcg20 0.10066 643 ERR 0.06212 643 ERR10 0.05212 643 ERR20 0.05212 643 P1 0.00000 643 P5 0.40000 643 P10 0.30000 643 P15 0.20000 643 P20 0.15000 643 P30 0.16667 643 P50 0.14000 643 P100 0.09000 643 P200 0.08500 643 P500 0.05800 643 P1000 0.02900 644 num_ret 1000.00000 644 num_unjug_ret@1 0.00000 644 num_unjug_ret@10 0.00000 644 num_unjug_ret@20 0.00000 644 num_unjug_ret@100 14.00000 644 num_unjug_ret@1000 529.00000 644 num_rel 56.00000 644 num_rel_ret 51.00000 644 map 0.12811 644 R-prec 0.07143 644 bpref 0.06378 644 recip_rank 0.07143 644 ndcg 0.45916 644 ndcg5 0.00000 644 ndcg10 0.00000 644 ndcg20 0.03846 644 ERR 0.02403 644 ERR10 0.00000 644 ERR20 0.01136 644 P1 0.00000 644 P5 0.00000 644 P10 0.00000 644 P15 0.06667 644 P20 0.15000 644 P30 0.10000 644 P50 0.08000 644 P100 0.16000 644 P200 0.17000 644 P500 0.08800 644 P1000 0.05100 645 num_ret 1000.00000 645 num_unjug_ret@1 0.00000 645 num_unjug_ret@10 0.00000 645 num_unjug_ret@20 0.00000 645 num_unjug_ret@100 2.00000 645 num_unjug_ret@1000 476.00000 645 num_rel 29.00000 645 num_rel_ret 29.00000 645 map 0.74596 645 R-prec 0.58621 645 bpref 0.69798 645 recip_rank 1.00000 645 ndcg 0.91487 645 ndcg5 0.91253 645 ndcg10 0.77132 645 ndcg20 0.83015 645 ERR 0.36870 645 ERR10 0.35572 645 ERR20 0.36689 645 P1 1.00000 645 P5 1.00000 645 P10 0.90000 645 P15 0.86667 645 P20 0.80000 645 P30 0.60000 645 P50 0.52000 645 P100 0.28000 645 P200 0.14000 645 P500 0.05800 645 P1000 0.02900 646 num_ret 1000.00000 646 num_unjug_ret@1 0.00000 646 num_unjug_ret@10 0.00000 646 num_unjug_ret@20 0.00000 646 num_unjug_ret@100 2.00000 646 num_unjug_ret@1000 650.00000 646 num_rel 10.00000 646 num_rel_ret 10.00000 646 map 0.12514 646 R-prec 0.20000 646 bpref 0.12000 646 recip_rank 0.20000 646 ndcg 0.39449 646 ndcg5 0.14378 646 ndcg10 0.15691 646 ndcg20 0.15691 646 ERR 0.05354 646 ERR10 0.04596 646 ERR20 0.04596 646 P1 0.00000 646 P5 0.20000 646 P10 0.20000 646 P15 0.13333 646 P20 0.10000 646 P30 0.06667 646 P50 0.08000 646 P100 0.09000 646 P200 0.05000 646 P500 0.02000 646 P1000 0.01000 647 num_ret 1000.00000 647 num_unjug_ret@1 0.00000 647 num_unjug_ret@10 0.00000 647 num_unjug_ret@20 0.00000 647 num_unjug_ret@100 11.00000 647 num_unjug_ret@1000 470.00000 647 num_rel 33.00000 647 num_rel_ret 30.00000 647 map 0.66658 647 R-prec 0.63636 647 bpref 0.62902 647 recip_rank 1.00000 647 ndcg 0.77054 647 ndcg5 0.58904 647 ndcg10 0.47370 647 ndcg20 0.67859 647 ERR 0.25477 647 ERR10 0.22789 647 ERR20 0.25154 647 P1 1.00000 647 P5 1.00000 647 P10 0.80000 647 P15 0.86667 647 P20 0.85000 647 P30 0.66667 647 P50 0.46000 647 P100 0.29000 647 P200 0.15000 647 P500 0.06000 647 P1000 0.03000 648 num_ret 1000.00000 648 num_unjug_ret@1 0.00000 648 num_unjug_ret@10 0.00000 648 num_unjug_ret@20 0.00000 648 num_unjug_ret@100 14.00000 648 num_unjug_ret@1000 558.00000 648 num_rel 57.00000 648 num_rel_ret 54.00000 648 map 0.74032 648 R-prec 0.68421 648 bpref 0.71499 648 recip_rank 1.00000 648 ndcg 0.91468 648 ndcg5 0.85734 648 ndcg10 0.90743 648 ndcg20 0.86741 648 ERR 0.35355 648 ERR10 0.34425 648 ERR20 0.35249 648 P1 1.00000 648 P5 1.00000 648 P10 1.00000 648 P15 1.00000 648 P20 1.00000 648 P30 1.00000 648 P50 0.76000 648 P100 0.44000 648 P200 0.22500 648 P500 0.10200 648 P1000 0.05400 649 num_ret 1000.00000 649 num_unjug_ret@1 0.00000 649 num_unjug_ret@10 0.00000 649 num_unjug_ret@20 0.00000 649 num_unjug_ret@100 1.00000 649 num_unjug_ret@1000 603.00000 649 num_rel 37.00000 649 num_rel_ret 36.00000 649 map 0.67929 649 R-prec 0.59459 649 bpref 0.60628 649 recip_rank 1.00000 649 ndcg 0.90514 649 ndcg5 1.00000 649 ndcg10 1.00000 649 ndcg20 0.85622 649 ERR 0.17647 649 ERR10 0.15886 649 ERR20 0.16992 649 P1 1.00000 649 P5 1.00000 649 P10 1.00000 649 P15 0.86667 649 P20 0.80000 649 P30 0.63333 649 P50 0.50000 649 P100 0.33000 649 P200 0.17500 649 P500 0.07200 649 P1000 0.03600 650 num_ret 1000.00000 650 num_unjug_ret@1 0.00000 650 num_unjug_ret@10 0.00000 650 num_unjug_ret@20 0.00000 650 num_unjug_ret@100 10.00000 650 num_unjug_ret@1000 496.00000 650 num_rel 34.00000 650 num_rel_ret 28.00000 650 map 0.51510 650 R-prec 0.50000 650 bpref 0.48010 650 recip_rank 1.00000 650 ndcg 0.59163 650 ndcg5 0.40892 650 ndcg10 0.44898 650 ndcg20 0.48564 650 ERR 0.17066 650 ERR10 0.15122 650 ERR20 0.16528 650 P1 1.00000 650 P5 1.00000 650 P10 0.80000 650 P15 0.80000 650 P20 0.70000 650 P30 0.53333 650 P50 0.38000 650 P100 0.23000 650 P200 0.13500 650 P500 0.05600 650 P1000 0.02800 651 num_ret 1000.00000 651 num_unjug_ret@1 0.00000 651 num_unjug_ret@10 0.00000 651 num_unjug_ret@20 0.00000 651 num_unjug_ret@100 8.00000 651 num_unjug_ret@1000 517.00000 651 num_rel 38.00000 651 num_rel_ret 27.00000 651 map 0.08401 651 R-prec 0.10526 651 bpref 0.06579 651 recip_rank 1.00000 651 ndcg 0.29374 651 ndcg5 0.11305 651 ndcg10 0.11130 651 ndcg20 0.09189 651 ERR 0.07798 651 ERR10 0.06982 651 ERR20 0.06982 651 P1 1.00000 651 P5 0.20000 651 P10 0.20000 651 P15 0.13333 651 P20 0.10000 651 P30 0.13333 651 P50 0.10000 651 P100 0.06000 651 P200 0.06500 651 P500 0.05400 651 P1000 0.02700 652 num_ret 1000.00000 652 num_unjug_ret@1 0.00000 652 num_unjug_ret@10 0.00000 652 num_unjug_ret@20 0.00000 652 num_unjug_ret@100 11.00000 652 num_unjug_ret@1000 641.00000 652 num_rel 74.00000 652 num_rel_ret 72.00000 652 map 0.69267 652 R-prec 0.58108 652 bpref 0.64226 652 recip_rank 1.00000 652 ndcg 0.89214 652 ndcg5 1.00000 652 ndcg10 0.92160 652 ndcg20 0.84632 652 ERR 0.38130 652 ERR10 0.37108 652 ERR20 0.37989 652 P1 1.00000 652 P5 1.00000 652 P10 0.90000 652 P15 0.93333 652 P20 0.90000 652 P30 0.90000 652 P50 0.82000 652 P100 0.48000 652 P200 0.34500 652 P500 0.14400 652 P1000 0.07200 653 num_ret 1000.00000 653 num_unjug_ret@1 0.00000 653 num_unjug_ret@10 0.00000 653 num_unjug_ret@20 0.00000 653 num_unjug_ret@100 0.00000 653 num_unjug_ret@1000 802.00000 653 num_rel 75.00000 653 num_rel_ret 75.00000 653 map 0.60155 653 R-prec 0.56000 653 bpref 0.62044 653 recip_rank 1.00000 653 ndcg 0.84306 653 ndcg5 0.81515 653 ndcg10 0.75835 653 ndcg20 0.50037 653 ERR 0.35771 653 ERR10 0.34930 653 ERR20 0.35008 653 P1 1.00000 653 P5 1.00000 653 P10 0.90000 653 P15 0.60000 653 P20 0.50000 653 P30 0.50000 653 P50 0.52000 653 P100 0.60000 653 P200 0.37000 653 P500 0.15000 653 P1000 0.07500 654 num_ret 1000.00000 654 num_unjug_ret@1 0.00000 654 num_unjug_ret@10 0.00000 654 num_unjug_ret@20 0.00000 654 num_unjug_ret@100 12.00000 654 num_unjug_ret@1000 620.00000 654 num_rel 57.00000 654 num_rel_ret 57.00000 654 map 0.81419 654 R-prec 0.75439 654 bpref 0.87227 654 recip_rank 1.00000 654 ndcg 0.93791 654 ndcg5 0.78601 654 ndcg10 0.86114 654 ndcg20 0.87200 654 ERR 0.15953 654 ERR10 0.13403 654 ERR20 0.15056 654 P1 1.00000 654 P5 0.80000 654 P10 0.90000 654 P15 0.86667 654 P20 0.90000 654 P30 0.86667 654 P50 0.78000 654 P100 0.55000 654 P200 0.28000 654 P500 0.11400 654 P1000 0.05700 655 num_ret 1000.00000 655 num_unjug_ret@1 0.00000 655 num_unjug_ret@10 0.00000 655 num_unjug_ret@20 1.00000 655 num_unjug_ret@100 16.00000 655 num_unjug_ret@1000 597.00000 655 num_rel 7.00000 655 num_rel_ret 2.00000 655 map 0.00446 655 R-prec 0.00000 655 bpref 0.00000 655 recip_rank 0.01429 655 ndcg 0.10534 655 ndcg5 0.00000 655 ndcg10 0.00000 655 ndcg20 0.00000 655 ERR 0.00397 655 ERR10 0.00000 655 ERR20 0.00000 655 P1 0.00000 655 P5 0.00000 655 P10 0.00000 655 P15 0.00000 655 P20 0.00000 655 P30 0.00000 655 P50 0.00000 655 P100 0.01000 655 P200 0.01000 655 P500 0.00400 655 P1000 0.00200 656 num_ret 1000.00000 656 num_unjug_ret@1 0.00000 656 num_unjug_ret@10 0.00000 656 num_unjug_ret@20 0.00000 656 num_unjug_ret@100 1.00000 656 num_unjug_ret@1000 653.00000 656 num_rel 111.00000 656 num_rel_ret 103.00000 656 map 0.85833 656 R-prec 0.85586 656 bpref 0.88913 656 recip_rank 1.00000 656 ndcg 0.88202 656 ndcg5 0.74295 656 ndcg10 0.74661 656 ndcg20 0.78815 656 ERR 0.35475 656 ERR10 0.33921 656 ERR20 0.35339 656 P1 1.00000 656 P5 0.80000 656 P10 0.90000 656 P15 0.93333 656 P20 0.95000 656 P30 0.96667 656 P50 0.96000 656 P100 0.91000 656 P200 0.51500 656 P500 0.20600 656 P1000 0.10300 657 num_ret 1000.00000 657 num_unjug_ret@1 0.00000 657 num_unjug_ret@10 0.00000 657 num_unjug_ret@20 0.00000 657 num_unjug_ret@100 11.00000 657 num_unjug_ret@1000 544.00000 657 num_rel 16.00000 657 num_rel_ret 16.00000 657 map 0.55927 657 R-prec 0.50000 657 bpref 0.48438 657 recip_rank 1.00000 657 ndcg 0.86855 657 ndcg5 1.00000 657 ndcg10 0.77140 657 ndcg20 0.75705 657 ERR 0.36197 657 ERR10 0.35633 657 ERR20 0.36063 657 P1 1.00000 657 P5 1.00000 657 P10 0.70000 657 P15 0.53333 657 P20 0.45000 657 P30 0.30000 657 P50 0.22000 657 P100 0.13000 657 P200 0.07500 657 P500 0.03200 657 P1000 0.01600 658 num_ret 1000.00000 658 num_unjug_ret@1 0.00000 658 num_unjug_ret@10 0.00000 658 num_unjug_ret@20 0.00000 658 num_unjug_ret@100 12.00000 658 num_unjug_ret@1000 627.00000 658 num_rel 57.00000 658 num_rel_ret 39.00000 658 map 0.31160 658 R-prec 0.40351 658 bpref 0.36627 658 recip_rank 1.00000 658 ndcg 0.47820 658 ndcg5 0.24091 658 ndcg10 0.17842 658 ndcg20 0.17445 658 ERR 0.14843 658 ERR10 0.11583 658 ERR20 0.13073 658 P1 1.00000 658 P5 0.60000 658 P10 0.40000 658 P15 0.40000 658 P20 0.35000 658 P30 0.50000 658 P50 0.44000 658 P100 0.33000 658 P200 0.19500 658 P500 0.07800 658 P1000 0.03900 659 num_ret 1000.00000 659 num_unjug_ret@1 0.00000 659 num_unjug_ret@10 0.00000 659 num_unjug_ret@20 1.00000 659 num_unjug_ret@100 35.00000 659 num_unjug_ret@1000 742.00000 659 num_rel 16.00000 659 num_rel_ret 11.00000 659 map 0.01754 659 R-prec 0.00000 659 bpref 0.00000 659 recip_rank 0.01587 659 ndcg 0.22285 659 ndcg5 0.00000 659 ndcg10 0.00000 659 ndcg20 0.00000 659 ERR 0.00588 659 ERR10 0.00000 659 ERR20 0.00000 659 P1 0.00000 659 P5 0.00000 659 P10 0.00000 659 P15 0.00000 659 P20 0.00000 659 P30 0.00000 659 P50 0.00000 659 P100 0.03000 659 P200 0.01500 659 P500 0.02200 659 P1000 0.01100 660 num_ret 1000.00000 660 num_unjug_ret@1 0.00000 660 num_unjug_ret@10 0.00000 660 num_unjug_ret@20 0.00000 660 num_unjug_ret@100 0.00000 660 num_unjug_ret@1000 666.00000 660 num_rel 28.00000 660 num_rel_ret 28.00000 660 map 0.66784 660 R-prec 0.57143 660 bpref 0.62245 660 recip_rank 1.00000 660 ndcg 0.83079 660 ndcg5 0.65682 660 ndcg10 0.68152 660 ndcg20 0.75290 660 ERR 0.31479 660 ERR10 0.30245 660 ERR20 0.31301 660 P1 1.00000 660 P5 1.00000 660 P10 0.90000 660 P15 0.86667 660 P20 0.80000 660 P30 0.60000 660 P50 0.42000 660 P100 0.22000 660 P200 0.14000 660 P500 0.05600 660 P1000 0.02800 661 num_ret 1000.00000 661 num_unjug_ret@1 0.00000 661 num_unjug_ret@10 0.00000 661 num_unjug_ret@20 0.00000 661 num_unjug_ret@100 7.00000 661 num_unjug_ret@1000 614.00000 661 num_rel 34.00000 661 num_rel_ret 34.00000 661 map 0.65647 661 R-prec 0.73529 661 bpref 0.68858 661 recip_rank 1.00000 661 ndcg 0.81027 661 ndcg5 0.62782 661 ndcg10 0.57914 661 ndcg20 0.66817 661 ERR 0.25993 661 ERR10 0.24173 661 ERR20 0.25507 661 P1 1.00000 661 P5 0.80000 661 P10 0.70000 661 P15 0.73333 661 P20 0.70000 661 P30 0.70000 661 P50 0.56000 661 P100 0.29000 661 P200 0.15000 661 P500 0.06400 661 P1000 0.03400 662 num_ret 1000.00000 662 num_unjug_ret@1 0.00000 662 num_unjug_ret@10 0.00000 662 num_unjug_ret@20 0.00000 662 num_unjug_ret@100 34.00000 662 num_unjug_ret@1000 794.00000 662 num_rel 34.00000 662 num_rel_ret 20.00000 662 map 0.48556 662 R-prec 0.55882 662 bpref 0.52855 662 recip_rank 1.00000 662 ndcg 0.59514 662 ndcg5 0.34919 662 ndcg10 0.61964 662 ndcg20 0.59667 662 ERR 0.18395 662 ERR10 0.17006 662 ERR20 0.17863 662 P1 1.00000 662 P5 0.80000 662 P10 0.90000 662 P15 0.86667 662 P20 0.70000 662 P30 0.63333 662 P50 0.40000 662 P100 0.20000 662 P200 0.10000 662 P500 0.04000 662 P1000 0.02000 663 num_ret 1000.00000 663 num_unjug_ret@1 0.00000 663 num_unjug_ret@10 0.00000 663 num_unjug_ret@20 0.00000 663 num_unjug_ret@100 4.00000 663 num_unjug_ret@1000 547.00000 663 num_rel 22.00000 663 num_rel_ret 22.00000 663 map 0.59901 663 R-prec 0.59091 663 bpref 0.56405 663 recip_rank 1.00000 663 ndcg 0.85549 663 ndcg5 0.75574 663 ndcg10 0.55986 663 ndcg20 0.72665 663 ERR 0.34411 663 ERR10 0.31822 663 ERR20 0.34265 663 P1 1.00000 663 P5 0.80000 663 P10 0.50000 663 P15 0.60000 663 P20 0.65000 663 P30 0.53333 663 P50 0.34000 663 P100 0.21000 663 P200 0.11000 663 P500 0.04400 663 P1000 0.02200 664 num_ret 1000.00000 664 num_unjug_ret@1 0.00000 664 num_unjug_ret@10 0.00000 664 num_unjug_ret@20 0.00000 664 num_unjug_ret@100 32.00000 664 num_unjug_ret@1000 625.00000 664 num_rel 9.00000 664 num_rel_ret 9.00000 664 map 0.71721 664 R-prec 0.77778 664 bpref 0.70370 664 recip_rank 1.00000 664 ndcg 0.90125 664 ndcg5 0.78601 664 ndcg10 0.86446 664 ndcg20 0.88420 664 ERR 0.32033 664 ERR10 0.31919 664 ERR20 0.31992 664 P1 1.00000 664 P5 0.80000 664 P10 0.70000 664 P15 0.46667 664 P20 0.40000 664 P30 0.26667 664 P50 0.18000 664 P100 0.09000 664 P200 0.04500 664 P500 0.01800 664 P1000 0.00900 665 num_ret 1000.00000 665 num_unjug_ret@1 0.00000 665 num_unjug_ret@10 0.00000 665 num_unjug_ret@20 0.00000 665 num_unjug_ret@100 13.00000 665 num_unjug_ret@1000 650.00000 665 num_rel 19.00000 665 num_rel_ret 19.00000 665 map 0.13775 665 R-prec 0.15789 665 bpref 0.14127 665 recip_rank 0.50000 665 ndcg 0.44003 665 ndcg5 0.12750 665 ndcg10 0.20180 665 ndcg20 0.17567 665 ERR 0.05670 665 ERR10 0.04886 665 ERR20 0.05144 665 P1 0.00000 665 P5 0.20000 665 P10 0.30000 665 P15 0.20000 665 P20 0.20000 665 P30 0.13333 665 P50 0.12000 665 P100 0.10000 665 P200 0.05500 665 P500 0.03800 665 P1000 0.01900 666 num_ret 1000.00000 666 num_unjug_ret@1 0.00000 666 num_unjug_ret@10 0.00000 666 num_unjug_ret@20 0.00000 666 num_unjug_ret@100 5.00000 666 num_unjug_ret@1000 631.00000 666 num_rel 3.00000 666 num_rel_ret 2.00000 666 map 0.01551 666 R-prec 0.00000 666 bpref 0.00000 666 recip_rank 0.03226 666 ndcg 0.15959 666 ndcg5 0.00000 666 ndcg10 0.00000 666 ndcg20 0.00000 666 ERR 0.00243 666 ERR10 0.00000 666 ERR20 0.00000 666 P1 0.00000 666 P5 0.00000 666 P10 0.00000 666 P15 0.00000 666 P20 0.00000 666 P30 0.00000 666 P50 0.02000 666 P100 0.01000 666 P200 0.01000 666 P500 0.00400 666 P1000 0.00200 667 num_ret 1000.00000 667 num_unjug_ret@1 0.00000 667 num_unjug_ret@10 0.00000 667 num_unjug_ret@20 0.00000 667 num_unjug_ret@100 0.00000 667 num_unjug_ret@1000 620.00000 667 num_rel 41.00000 667 num_rel_ret 35.00000 667 map 0.46229 667 R-prec 0.56098 667 bpref 0.48245 667 recip_rank 1.00000 667 ndcg 0.75978 667 ndcg5 0.78601 667 ndcg10 0.72152 667 ndcg20 0.71210 667 ERR 0.14657 667 ERR10 0.12401 667 ERR20 0.13955 667 P1 1.00000 667 P5 0.80000 667 P10 0.70000 667 P15 0.66667 667 P20 0.70000 667 P30 0.56667 667 P50 0.48000 667 P100 0.28000 667 P200 0.17000 667 P500 0.07000 667 P1000 0.03500 668 num_ret 1000.00000 668 num_unjug_ret@1 0.00000 668 num_unjug_ret@10 0.00000 668 num_unjug_ret@20 0.00000 668 num_unjug_ret@100 14.00000 668 num_unjug_ret@1000 580.00000 668 num_rel 36.00000 668 num_rel_ret 35.00000 668 map 0.33109 668 R-prec 0.36111 668 bpref 0.29938 668 recip_rank 1.00000 668 ndcg 0.70609 668 ndcg5 0.60116 668 ndcg10 0.55493 668 ndcg20 0.53362 668 ERR 0.29069 668 ERR10 0.27789 668 ERR20 0.28584 668 P1 1.00000 668 P5 0.80000 668 P10 0.70000 668 P15 0.60000 668 P20 0.45000 668 P30 0.40000 668 P50 0.28000 668 P100 0.20000 668 P200 0.13000 668 P500 0.06600 668 P1000 0.03500 669 num_ret 1000.00000 669 num_unjug_ret@1 0.00000 669 num_unjug_ret@10 0.00000 669 num_unjug_ret@20 0.00000 669 num_unjug_ret@100 3.00000 669 num_unjug_ret@1000 582.00000 669 num_rel 23.00000 669 num_rel_ret 23.00000 669 map 0.11828 669 R-prec 0.08696 669 bpref 0.04159 669 recip_rank 0.09091 669 ndcg 0.39941 669 ndcg5 0.00000 669 ndcg10 0.00000 669 ndcg20 0.04633 669 ERR 0.02375 669 ERR10 0.00000 669 ERR20 0.00934 669 P1 0.00000 669 P5 0.00000 669 P10 0.00000 669 P15 0.06667 669 P20 0.10000 669 P30 0.13333 669 P50 0.14000 669 P100 0.13000 669 P200 0.09500 669 P500 0.04600 669 P1000 0.02300 670 num_ret 1000.00000 670 num_unjug_ret@1 0.00000 670 num_unjug_ret@10 0.00000 670 num_unjug_ret@20 0.00000 670 num_unjug_ret@100 9.00000 670 num_unjug_ret@1000 717.00000 670 num_rel 24.00000 670 num_rel_ret 21.00000 670 map 0.18144 670 R-prec 0.29167 670 bpref 0.18229 670 recip_rank 0.25000 670 ndcg 0.49194 670 ndcg5 0.08703 670 ndcg10 0.22913 670 ndcg20 0.21934 670 ERR 0.06207 670 ERR10 0.04492 670 ERR20 0.05055 670 P1 0.00000 670 P5 0.20000 670 P10 0.20000 670 P15 0.20000 670 P20 0.20000 670 P30 0.33333 670 P50 0.20000 670 P100 0.15000 670 P200 0.09000 670 P500 0.04200 670 P1000 0.02100 671 num_ret 1000.00000 671 num_unjug_ret@1 0.00000 671 num_unjug_ret@10 0.00000 671 num_unjug_ret@20 0.00000 671 num_unjug_ret@100 3.00000 671 num_unjug_ret@1000 739.00000 671 num_rel 70.00000 671 num_rel_ret 67.00000 671 map 0.40547 671 R-prec 0.50000 671 bpref 0.43694 671 recip_rank 0.10000 671 ndcg 0.60807 671 ndcg5 0.00000 671 ndcg10 0.02769 671 ndcg20 0.16283 671 ERR 0.04944 671 ERR10 0.00625 671 ERR20 0.03268 671 P1 0.00000 671 P5 0.00000 671 P10 0.10000 671 P15 0.33333 671 P20 0.30000 671 P30 0.36667 671 P50 0.46000 671 P100 0.49000 671 P200 0.33000 671 P500 0.13400 671 P1000 0.06700 673 num_ret 1000.00000 673 num_unjug_ret@1 0.00000 673 num_unjug_ret@10 0.00000 673 num_unjug_ret@20 0.00000 673 num_unjug_ret@100 7.00000 673 num_unjug_ret@1000 698.00000 673 num_rel 23.00000 673 num_rel_ret 23.00000 673 map 0.22344 673 R-prec 0.21739 673 bpref 0.17580 673 recip_rank 1.00000 673 ndcg 0.68634 673 ndcg5 0.44984 673 ndcg10 0.57696 673 ndcg20 0.47755 673 ERR 0.25434 673 ERR10 0.24780 673 ERR20 0.24945 673 P1 1.00000 673 P5 0.40000 673 P10 0.40000 673 P15 0.26667 673 P20 0.25000 673 P30 0.16667 673 P50 0.12000 673 P100 0.09000 673 P200 0.10500 673 P500 0.04600 673 P1000 0.02300 674 num_ret 1000.00000 674 num_unjug_ret@1 0.00000 674 num_unjug_ret@10 0.00000 674 num_unjug_ret@20 0.00000 674 num_unjug_ret@100 2.00000 674 num_unjug_ret@1000 719.00000 674 num_rel 20.00000 674 num_rel_ret 18.00000 674 map 0.16280 674 R-prec 0.25000 674 bpref 0.17250 674 recip_rank 0.50000 674 ndcg 0.53394 674 ndcg5 0.21399 674 ndcg10 0.28088 674 ndcg20 0.25409 674 ERR 0.05906 674 ERR10 0.04651 674 ERR20 0.05369 674 P1 0.00000 674 P5 0.20000 674 P10 0.30000 674 P15 0.33333 674 P20 0.25000 674 P30 0.16667 674 P50 0.16000 674 P100 0.09000 674 P200 0.08500 674 P500 0.03600 674 P1000 0.01800 675 num_ret 1000.00000 675 num_unjug_ret@1 0.00000 675 num_unjug_ret@10 0.00000 675 num_unjug_ret@20 0.00000 675 num_unjug_ret@100 2.00000 675 num_unjug_ret@1000 643.00000 675 num_rel 25.00000 675 num_rel_ret 25.00000 675 map 0.24767 675 R-prec 0.20000 675 bpref 0.13760 675 recip_rank 1.00000 675 ndcg 0.67972 675 ndcg5 0.55315 675 ndcg10 0.35895 675 ndcg20 0.30047 675 ERR 0.10974 675 ERR10 0.09180 675 ERR20 0.09826 675 P1 1.00000 675 P5 0.40000 675 P10 0.20000 675 P15 0.13333 675 P20 0.20000 675 P30 0.23333 675 P50 0.22000 675 P100 0.14000 675 P200 0.12500 675 P500 0.05000 675 P1000 0.02500 676 num_ret 1000.00000 676 num_unjug_ret@1 0.00000 676 num_unjug_ret@10 0.00000 676 num_unjug_ret@20 0.00000 676 num_unjug_ret@100 9.00000 676 num_unjug_ret@1000 735.00000 676 num_rel 49.00000 676 num_rel_ret 49.00000 676 map 0.36629 676 R-prec 0.36735 676 bpref 0.30237 676 recip_rank 1.00000 676 ndcg 0.70623 676 ndcg5 0.38290 676 ndcg10 0.32184 676 ndcg20 0.29093 676 ERR 0.24788 676 ERR10 0.21806 676 ERR20 0.23455 676 P1 1.00000 676 P5 0.40000 676 P10 0.30000 676 P15 0.26667 676 P20 0.30000 676 P30 0.36667 676 P50 0.36000 676 P100 0.36000 676 P200 0.24000 676 P500 0.09800 676 P1000 0.04900 677 num_ret 1000.00000 677 num_unjug_ret@1 0.00000 677 num_unjug_ret@10 0.00000 677 num_unjug_ret@20 0.00000 677 num_unjug_ret@100 1.00000 677 num_unjug_ret@1000 634.00000 677 num_rel 9.00000 677 num_rel_ret 9.00000 677 map 0.81120 677 R-prec 0.66667 677 bpref 0.74074 677 recip_rank 1.00000 677 ndcg 0.95990 677 ndcg5 0.92182 677 ndcg10 0.88063 677 ndcg20 0.95990 677 ERR 0.25929 677 ERR10 0.25493 677 ERR20 0.25929 677 P1 1.00000 677 P5 0.80000 677 P10 0.70000 677 P15 0.53333 677 P20 0.45000 677 P30 0.30000 677 P50 0.18000 677 P100 0.09000 677 P200 0.04500 677 P500 0.01800 677 P1000 0.00900 678 num_ret 1000.00000 678 num_unjug_ret@1 0.00000 678 num_unjug_ret@10 0.00000 678 num_unjug_ret@20 0.00000 678 num_unjug_ret@100 3.00000 678 num_unjug_ret@1000 630.00000 678 num_rel 19.00000 678 num_rel_ret 17.00000 678 map 0.23438 678 R-prec 0.26316 678 bpref 0.22438 678 recip_rank 1.00000 678 ndcg 0.56734 678 ndcg5 0.39569 678 ndcg10 0.33650 678 ndcg20 0.33970 678 ERR 0.23756 678 ERR10 0.21874 678 ERR20 0.22920 678 P1 1.00000 678 P5 0.40000 678 P10 0.40000 678 P15 0.33333 678 P20 0.25000 678 P30 0.23333 678 P50 0.16000 678 P100 0.09000 678 P200 0.06000 678 P500 0.03400 678 P1000 0.01700 679 num_ret 1000.00000 679 num_unjug_ret@1 0.00000 679 num_unjug_ret@10 0.00000 679 num_unjug_ret@20 0.00000 679 num_unjug_ret@100 14.00000 679 num_unjug_ret@1000 666.00000 679 num_rel 6.00000 679 num_rel_ret 6.00000 679 map 0.94841 679 R-prec 0.83333 679 bpref 0.94444 679 recip_rank 1.00000 679 ndcg 0.98380 679 ndcg5 0.86879 679 ndcg10 0.98380 679 ndcg20 0.98380 679 ERR 0.13749 679 ERR10 0.13749 679 ERR20 0.13749 679 P1 1.00000 679 P5 0.80000 679 P10 0.60000 679 P15 0.40000 679 P20 0.30000 679 P30 0.20000 679 P50 0.12000 679 P100 0.06000 679 P200 0.03000 679 P500 0.01200 679 P1000 0.00600 680 num_ret 1000.00000 680 num_unjug_ret@1 0.00000 680 num_unjug_ret@10 0.00000 680 num_unjug_ret@20 0.00000 680 num_unjug_ret@100 4.00000 680 num_unjug_ret@1000 628.00000 680 num_rel 24.00000 680 num_rel_ret 24.00000 680 map 0.34633 680 R-prec 0.41667 680 bpref 0.29514 680 recip_rank 0.16667 680 ndcg 0.56006 680 ndcg5 0.00000 680 ndcg10 0.15359 680 ndcg20 0.27835 680 ERR 0.05373 680 ERR10 0.02565 680 ERR20 0.04423 680 P1 0.00000 680 P5 0.00000 680 P10 0.30000 680 P15 0.40000 680 P20 0.45000 680 P30 0.33333 680 P50 0.36000 680 P100 0.21000 680 P200 0.11500 680 P500 0.04800 680 P1000 0.02400 681 num_ret 1000.00000 681 num_unjug_ret@1 0.00000 681 num_unjug_ret@10 0.00000 681 num_unjug_ret@20 0.00000 681 num_unjug_ret@100 7.00000 681 num_unjug_ret@1000 672.00000 681 num_rel 50.00000 681 num_rel_ret 50.00000 681 map 0.69410 681 R-prec 0.66000 681 bpref 0.66440 681 recip_rank 1.00000 681 ndcg 0.79167 681 ndcg5 0.58904 681 ndcg10 0.54988 681 ndcg20 0.57279 681 ERR 0.25263 681 ERR10 0.23635 681 ERR20 0.24546 681 P1 1.00000 681 P5 1.00000 681 P10 0.80000 681 P15 0.73333 681 P20 0.75000 681 P30 0.73333 681 P50 0.66000 681 P100 0.43000 681 P200 0.25000 681 P500 0.10000 681 P1000 0.05000 682 num_ret 1000.00000 682 num_unjug_ret@1 0.00000 682 num_unjug_ret@10 0.00000 682 num_unjug_ret@20 2.00000 682 num_unjug_ret@100 21.00000 682 num_unjug_ret@1000 571.00000 682 num_rel 41.00000 682 num_rel_ret 41.00000 682 map 0.25568 682 R-prec 0.24390 682 bpref 0.22784 682 recip_rank 1.00000 682 ndcg 0.67871 682 ndcg5 0.58549 682 ndcg10 0.52373 682 ndcg20 0.47938 682 ERR 0.26310 682 ERR10 0.25150 682 ERR20 0.25756 682 P1 1.00000 682 P5 0.80000 682 P10 0.50000 682 P15 0.40000 682 P20 0.40000 682 P30 0.30000 682 P50 0.26000 682 P100 0.16000 682 P200 0.13000 682 P500 0.08200 682 P1000 0.04100 683 num_ret 1000.00000 683 num_unjug_ret@1 0.00000 683 num_unjug_ret@10 0.00000 683 num_unjug_ret@20 0.00000 683 num_unjug_ret@100 0.00000 683 num_unjug_ret@1000 451.00000 683 num_rel 103.00000 683 num_rel_ret 61.00000 683 map 0.28686 683 R-prec 0.39806 683 bpref 0.34216 683 recip_rank 1.00000 683 ndcg 0.56935 683 ndcg5 0.49662 683 ndcg10 0.53372 683 ndcg20 0.52838 683 ERR 0.25753 683 ERR10 0.23678 683 ERR20 0.25341 683 P1 1.00000 683 P5 0.60000 683 P10 0.60000 683 P15 0.66667 683 P20 0.55000 683 P30 0.50000 683 P50 0.48000 683 P100 0.40000 683 P200 0.29500 683 P500 0.12200 683 P1000 0.06100 684 num_ret 1000.00000 684 num_unjug_ret@1 0.00000 684 num_unjug_ret@10 0.00000 684 num_unjug_ret@20 1.00000 684 num_unjug_ret@100 6.00000 684 num_unjug_ret@1000 587.00000 684 num_rel 41.00000 684 num_rel_ret 38.00000 684 map 0.13101 684 R-prec 0.07317 684 bpref 0.02380 684 recip_rank 0.04167 684 ndcg 0.44284 684 ndcg5 0.00000 684 ndcg10 0.00000 684 ndcg20 0.00000 684 ERR 0.01837 684 ERR10 0.00000 684 ERR20 0.00000 684 P1 0.00000 684 P5 0.00000 684 P10 0.00000 684 P15 0.00000 684 P20 0.00000 684 P30 0.03333 684 P50 0.08000 684 P100 0.16000 684 P200 0.15000 684 P500 0.07600 684 P1000 0.03800 685 num_ret 1000.00000 685 num_unjug_ret@1 0.00000 685 num_unjug_ret@10 0.00000 685 num_unjug_ret@20 0.00000 685 num_unjug_ret@100 5.00000 685 num_unjug_ret@1000 674.00000 685 num_rel 13.00000 685 num_rel_ret 13.00000 685 map 0.31003 685 R-prec 0.30769 685 bpref 0.24260 685 recip_rank 0.33333 685 ndcg 0.51543 685 ndcg5 0.11530 685 ndcg10 0.20682 685 ndcg20 0.31440 685 ERR 0.08721 685 ERR10 0.06295 685 ERR20 0.07837 685 P1 0.00000 685 P5 0.40000 685 P10 0.30000 685 P15 0.26667 685 P20 0.30000 685 P30 0.30000 685 P50 0.22000 685 P100 0.11000 685 P200 0.06000 685 P500 0.02600 685 P1000 0.01300 686 num_ret 1000.00000 686 num_unjug_ret@1 0.00000 686 num_unjug_ret@10 0.00000 686 num_unjug_ret@20 1.00000 686 num_unjug_ret@100 23.00000 686 num_unjug_ret@1000 576.00000 686 num_rel 32.00000 686 num_rel_ret 32.00000 686 map 0.25817 686 R-prec 0.31250 686 bpref 0.22559 686 recip_rank 0.16667 686 ndcg 0.49231 686 ndcg5 0.00000 686 ndcg10 0.06604 686 ndcg20 0.11303 686 ERR 0.04650 686 ERR10 0.01879 686 ERR20 0.03017 686 P1 0.00000 686 P5 0.00000 686 P10 0.20000 686 P15 0.26667 686 P20 0.25000 686 P30 0.33333 686 P50 0.30000 686 P100 0.24000 686 P200 0.15000 686 P500 0.06400 686 P1000 0.03200 687 num_ret 1000.00000 687 num_unjug_ret@1 0.00000 687 num_unjug_ret@10 0.00000 687 num_unjug_ret@20 0.00000 687 num_unjug_ret@100 5.00000 687 num_unjug_ret@1000 547.00000 687 num_rel 87.00000 687 num_rel_ret 65.00000 687 map 0.15589 687 R-prec 0.14943 687 bpref 0.12353 687 recip_rank 1.00000 687 ndcg 0.44522 687 ndcg5 0.18438 687 ndcg10 0.14280 687 ndcg20 0.15222 687 ERR 0.12664 687 ERR10 0.09866 687 ERR20 0.11536 687 P1 1.00000 687 P5 0.40000 687 P10 0.30000 687 P15 0.33333 687 P20 0.30000 687 P30 0.30000 687 P50 0.22000 687 P100 0.15000 687 P200 0.15500 687 P500 0.13000 687 P1000 0.06500 688 num_ret 1000.00000 688 num_unjug_ret@1 0.00000 688 num_unjug_ret@10 0.00000 688 num_unjug_ret@20 1.00000 688 num_unjug_ret@100 23.00000 688 num_unjug_ret@1000 642.00000 688 num_rel 161.00000 688 num_rel_ret 70.00000 688 map 0.10967 688 R-prec 0.26087 688 bpref 0.26033 688 recip_rank 0.20000 688 ndcg 0.34544 688 ndcg5 0.13121 688 ndcg10 0.10723 688 ndcg20 0.18229 688 ERR 0.07731 688 ERR10 0.04314 688 ERR20 0.06586 688 P1 0.00000 688 P5 0.20000 688 P10 0.20000 688 P15 0.20000 688 P20 0.30000 688 P30 0.30000 688 P50 0.28000 688 P100 0.26000 688 P200 0.25500 688 P500 0.14000 688 P1000 0.07000 689 num_ret 1000.00000 689 num_unjug_ret@1 0.00000 689 num_unjug_ret@10 0.00000 689 num_unjug_ret@20 0.00000 689 num_unjug_ret@100 12.00000 689 num_unjug_ret@1000 520.00000 689 num_rel 17.00000 689 num_rel_ret 17.00000 689 map 0.06430 689 R-prec 0.05882 689 bpref 0.03460 689 recip_rank 0.12500 689 ndcg 0.39131 689 ndcg5 0.00000 689 ndcg10 0.06943 689 ndcg20 0.05549 689 ERR 0.03470 689 ERR10 0.02344 689 ERR20 0.02344 689 P1 0.00000 689 P5 0.00000 689 P10 0.10000 689 P15 0.06667 689 P20 0.05000 689 P30 0.03333 689 P50 0.04000 689 P100 0.08000 689 P200 0.05000 689 P500 0.03400 689 P1000 0.01700 690 num_ret 1000.00000 690 num_unjug_ret@1 0.00000 690 num_unjug_ret@10 0.00000 690 num_unjug_ret@20 0.00000 690 num_unjug_ret@100 15.00000 690 num_unjug_ret@1000 533.00000 690 num_rel 14.00000 690 num_rel_ret 5.00000 690 map 0.00392 690 R-prec 0.00000 690 bpref 0.00000 690 recip_rank 0.00855 690 ndcg 0.11356 690 ndcg5 0.00000 690 ndcg10 0.00000 690 ndcg20 0.00000 690 ERR 0.00135 690 ERR10 0.00000 690 ERR20 0.00000 690 P1 0.00000 690 P5 0.00000 690 P10 0.00000 690 P15 0.00000 690 P20 0.00000 690 P30 0.00000 690 P50 0.00000 690 P100 0.00000 690 P200 0.01000 690 P500 0.01000 690 P1000 0.00500 691 num_ret 1000.00000 691 num_unjug_ret@1 0.00000 691 num_unjug_ret@10 0.00000 691 num_unjug_ret@20 0.00000 691 num_unjug_ret@100 7.00000 691 num_unjug_ret@1000 605.00000 691 num_rel 21.00000 691 num_rel_ret 20.00000 691 map 0.27085 691 R-prec 0.38095 691 bpref 0.26077 691 recip_rank 1.00000 691 ndcg 0.66913 691 ndcg5 0.48523 691 ndcg10 0.45953 691 ndcg20 0.40149 691 ERR 0.10706 691 ERR10 0.09203 691 ERR20 0.10080 691 P1 1.00000 691 P5 0.40000 691 P10 0.40000 691 P15 0.33333 691 P20 0.35000 691 P30 0.26667 691 P50 0.22000 691 P100 0.14000 691 P200 0.08000 691 P500 0.04000 691 P1000 0.02000 692 num_ret 1000.00000 692 num_unjug_ret@1 0.00000 692 num_unjug_ret@10 0.00000 692 num_unjug_ret@20 0.00000 692 num_unjug_ret@100 6.00000 692 num_unjug_ret@1000 669.00000 692 num_rel 27.00000 692 num_rel_ret 27.00000 692 map 0.39808 692 R-prec 0.48148 692 bpref 0.39369 692 recip_rank 1.00000 692 ndcg 0.75639 692 ndcg5 0.59038 692 ndcg10 0.56798 692 ndcg20 0.61067 692 ERR 0.29064 692 ERR10 0.27499 692 ERR20 0.28706 692 P1 1.00000 692 P5 0.80000 692 P10 0.60000 692 P15 0.53333 692 P20 0.50000 692 P30 0.46667 692 P50 0.28000 692 P100 0.16000 692 P200 0.12000 692 P500 0.05000 692 P1000 0.02700 693 num_ret 1000.00000 693 num_unjug_ret@1 0.00000 693 num_unjug_ret@10 0.00000 693 num_unjug_ret@20 1.00000 693 num_unjug_ret@100 8.00000 693 num_unjug_ret@1000 581.00000 693 num_rel 27.00000 693 num_rel_ret 26.00000 693 map 0.19531 693 R-prec 0.14815 693 bpref 0.12071 693 recip_rank 1.00000 693 ndcg 0.49279 693 ndcg5 0.12389 693 ndcg10 0.17056 693 ndcg20 0.13555 693 ERR 0.09536 693 ERR10 0.07774 693 ERR20 0.07774 693 P1 1.00000 693 P5 0.20000 693 P10 0.30000 693 P15 0.20000 693 P20 0.15000 693 P30 0.20000 693 P50 0.18000 693 P100 0.18000 693 P200 0.10500 693 P500 0.05200 693 P1000 0.02600 694 num_ret 1000.00000 694 num_unjug_ret@1 0.00000 694 num_unjug_ret@10 0.00000 694 num_unjug_ret@20 0.00000 694 num_unjug_ret@100 3.00000 694 num_unjug_ret@1000 692.00000 694 num_rel 88.00000 694 num_rel_ret 88.00000 694 map 0.54825 694 R-prec 0.53409 694 bpref 0.55488 694 recip_rank 1.00000 694 ndcg 0.87714 694 ndcg5 0.83479 694 ndcg10 0.72148 694 ndcg20 0.68940 694 ERR 0.26395 694 ERR10 0.23790 694 ERR20 0.25206 694 P1 1.00000 694 P5 0.60000 694 P10 0.50000 694 P15 0.53333 694 P20 0.55000 694 P30 0.60000 694 P50 0.60000 694 P100 0.51000 694 P200 0.44000 694 P500 0.17600 694 P1000 0.08800 695 num_ret 1000.00000 695 num_unjug_ret@1 0.00000 695 num_unjug_ret@10 0.00000 695 num_unjug_ret@20 0.00000 695 num_unjug_ret@100 1.00000 695 num_unjug_ret@1000 573.00000 695 num_rel 89.00000 695 num_rel_ret 78.00000 695 map 0.37479 695 R-prec 0.34831 695 bpref 0.28708 695 recip_rank 1.00000 695 ndcg 0.68496 695 ndcg5 0.41005 695 ndcg10 0.50740 695 ndcg20 0.60633 695 ERR 0.18612 695 ERR10 0.16616 695 ERR20 0.18198 695 P1 1.00000 695 P5 0.80000 695 P10 0.90000 695 P15 0.80000 695 P20 0.75000 695 P30 0.56667 695 P50 0.42000 695 P100 0.32000 695 P200 0.30000 695 P500 0.15600 695 P1000 0.07800 696 num_ret 1000.00000 696 num_unjug_ret@1 0.00000 696 num_unjug_ret@10 0.00000 696 num_unjug_ret@20 0.00000 696 num_unjug_ret@100 5.00000 696 num_unjug_ret@1000 643.00000 696 num_rel 31.00000 696 num_rel_ret 31.00000 696 map 0.42150 696 R-prec 0.45161 696 bpref 0.40479 696 recip_rank 1.00000 696 ndcg 0.80099 696 ndcg5 0.85393 696 ndcg10 0.76953 696 ndcg20 0.60762 696 ERR 0.15556 696 ERR10 0.13916 696 ERR20 0.14771 696 P1 1.00000 696 P5 0.80000 696 P10 0.70000 696 P15 0.60000 696 P20 0.50000 696 P30 0.46667 696 P50 0.34000 696 P100 0.19000 696 P200 0.10000 696 P500 0.06200 696 P1000 0.03100 697 num_ret 1000.00000 697 num_unjug_ret@1 0.00000 697 num_unjug_ret@10 0.00000 697 num_unjug_ret@20 0.00000 697 num_unjug_ret@100 6.00000 697 num_unjug_ret@1000 535.00000 697 num_rel 50.00000 697 num_rel_ret 49.00000 697 map 0.35737 697 R-prec 0.36000 697 bpref 0.27280 697 recip_rank 1.00000 697 ndcg 0.74500 697 ndcg5 0.62380 697 ndcg10 0.59854 697 ndcg20 0.56364 697 ERR 0.30106 697 ERR10 0.28870 697 ERR20 0.29519 697 P1 1.00000 697 P5 0.80000 697 P10 0.70000 697 P15 0.53333 697 P20 0.45000 697 P30 0.36667 697 P50 0.36000 697 P100 0.24000 697 P200 0.22000 697 P500 0.09800 697 P1000 0.04900 698 num_ret 1000.00000 698 num_unjug_ret@1 0.00000 698 num_unjug_ret@10 0.00000 698 num_unjug_ret@20 0.00000 698 num_unjug_ret@100 4.00000 698 num_unjug_ret@1000 583.00000 698 num_rel 10.00000 698 num_rel_ret 10.00000 698 map 0.45962 698 R-prec 0.50000 698 bpref 0.41000 698 recip_rank 1.00000 698 ndcg 0.73884 698 ndcg5 0.55743 698 ndcg10 0.53203 698 ndcg20 0.59178 698 ERR 0.28103 698 ERR10 0.27108 698 ERR20 0.27599 698 P1 1.00000 698 P5 0.60000 698 P10 0.50000 698 P15 0.33333 698 P20 0.30000 698 P30 0.23333 698 P50 0.16000 698 P100 0.09000 698 P200 0.04500 698 P500 0.02000 698 P1000 0.01000 699 num_ret 1000.00000 699 num_unjug_ret@1 0.00000 699 num_unjug_ret@10 0.00000 699 num_unjug_ret@20 0.00000 699 num_unjug_ret@100 5.00000 699 num_unjug_ret@1000 638.00000 699 num_rel 71.00000 699 num_rel_ret 69.00000 699 map 0.51801 699 R-prec 0.50704 699 bpref 0.51081 699 recip_rank 1.00000 699 ndcg 0.83638 699 ndcg5 0.55315 699 ndcg10 0.63162 699 ndcg20 0.69152 699 ERR 0.14556 699 ERR10 0.11597 699 ERR20 0.13486 699 P1 1.00000 699 P5 0.40000 699 P10 0.60000 699 P15 0.66667 699 P20 0.70000 699 P30 0.73333 699 P50 0.60000 699 P100 0.46000 699 P200 0.31000 699 P500 0.13800 699 P1000 0.06900 700 num_ret 1000.00000 700 num_unjug_ret@1 0.00000 700 num_unjug_ret@10 0.00000 700 num_unjug_ret@20 0.00000 700 num_unjug_ret@100 9.00000 700 num_unjug_ret@1000 581.00000 700 num_rel 120.00000 700 num_rel_ret 117.00000 700 map 0.46524 700 R-prec 0.53333 700 bpref 0.62618 700 recip_rank 0.11111 700 ndcg 0.71164 700 ndcg5 0.00000 700 ndcg10 0.12988 700 ndcg20 0.20980 700 ERR 0.06931 700 ERR10 0.03607 700 ERR20 0.05808 700 P1 0.00000 700 P5 0.00000 700 P10 0.20000 700 P15 0.26667 700 P20 0.35000 700 P30 0.40000 700 P50 0.54000 700 P100 0.56000 700 P200 0.45000 700 P500 0.23400 700 P1000 0.11700 all queries 249.00000 all num_ret 249000.00000 all num_unjug_ret@1 3.00000 all num_unjug_ret@10 47.00000 all num_unjug_ret@20 132.00000 all num_unjug_ret@100 2314.00000 all num_unjug_ret@1000 142252.00000 all num_rel 17412.00000 all num_rel_ret 12226.00000 all map 0.32766 all R-prec 0.33968 all bpref 0.31688 all recip_rank 0.65022 all ndcg 0.59287 all ndcg5 0.45232 all ndcg10 0.43570 all ndcg20 0.42396 all ERR 0.12085 all ERR10 0.10471 all ERR20 0.11301 all P1 0.53815 all P5 0.49317 all P10 0.44056 all P15 0.40455 all P20 0.37992 all P30 0.34351 all P50 0.29446 all P100 0.22896 all P200 0.17430 all P500 0.09644 all P1000 0.04910