301	num_ret	1000.00000
301	num_unjug_ret@1	0.00000
301	num_unjug_ret@10	0.00000
301	num_unjug_ret@20	1.00000
301	num_unjug_ret@100	15.00000
301	num_unjug_ret@1000	731.00000
301	num_rel	448.00000
301	num_rel_ret	99.00000
301	map	0.06723
301	R-prec	0.14955
301	bpref	0.18001
301	recip_rank	0.50000
301	ndcg	0.24313
301	ndcg5	0.66084
301	ndcg10	0.63208
301	ndcg20	0.55271
301	ERR	0.11307
301	ERR10	0.09098
301	ERR20	0.10138
301	P1	0.00000
301	P5	0.80000
301	P10	0.70000
301	P15	0.60000
301	P20	0.55000
301	P30	0.50000
301	P50	0.48000
301	P100	0.38000
301	P200	0.22000
301	P500	0.14800
301	P1000	0.09900
302	num_ret	1000.00000
302	num_unjug_ret@1	0.00000
302	num_unjug_ret@10	0.00000
302	num_unjug_ret@20	0.00000
302	num_unjug_ret@100	1.00000
302	num_unjug_ret@1000	779.00000
302	num_rel	65.00000
302	num_rel_ret	64.00000
302	map	0.66362
302	R-prec	0.67692
302	bpref	0.67763
302	recip_rank	1.00000
302	ndcg	0.89771
302	ndcg5	0.85393
302	ndcg10	0.82681
302	ndcg20	0.74005
302	ERR	0.16519
302	ERR10	0.14165
302	ERR20	0.15346
302	P1	1.00000
302	P5	0.80000
302	P10	0.80000
302	P15	0.66667
302	P20	0.70000
302	P30	0.76667
302	P50	0.70000
302	P100	0.54000
302	P200	0.31500
302	P500	0.12800
302	P1000	0.06400
303	num_ret	1000.00000
303	num_unjug_ret@1	0.00000
303	num_unjug_ret@10	0.00000
303	num_unjug_ret@20	0.00000
303	num_unjug_ret@100	0.00000
303	num_unjug_ret@1000	744.00000
303	num_rel	10.00000
303	num_rel_ret	10.00000
303	map	0.20739
303	R-prec	0.10000
303	bpref	0.10000
303	recip_rank	1.00000
303	ndcg	0.58438
303	ndcg5	0.33916
303	ndcg10	0.22009
303	ndcg20	0.27790
303	ERR	0.07410
303	ERR10	0.06250
303	ERR20	0.06701
303	P1	1.00000
303	P5	0.20000
303	P10	0.10000
303	P15	0.13333
303	P20	0.10000
303	P30	0.06667
303	P50	0.12000
303	P100	0.10000
303	P200	0.05000
303	P500	0.02000
303	P1000	0.01000
304	num_ret	1000.00000
304	num_unjug_ret@1	0.00000
304	num_unjug_ret@10	0.00000
304	num_unjug_ret@20	0.00000
304	num_unjug_ret@100	5.00000
304	num_unjug_ret@1000	504.00000
304	num_rel	196.00000
304	num_rel_ret	90.00000
304	map	0.08703
304	R-prec	0.21939
304	bpref	0.16092
304	recip_rank	0.33333
304	ndcg	0.37352
304	ndcg5	0.16958
304	ndcg10	0.18844
304	ndcg20	0.19126
304	ERR	0.05313
304	ERR10	0.03060
304	ERR20	0.03740
304	P1	0.00000
304	P5	0.20000
304	P10	0.20000
304	P15	0.20000
304	P20	0.20000
304	P30	0.26667
304	P50	0.28000
304	P100	0.26000
304	P200	0.21500
304	P500	0.12600
304	P1000	0.09000
305	num_ret	1000.00000
305	num_unjug_ret@1	0.00000
305	num_unjug_ret@10	3.00000
305	num_unjug_ret@20	8.00000
305	num_unjug_ret@100	42.00000
305	num_unjug_ret@1000	636.00000
305	num_rel	35.00000
305	num_rel_ret	4.00000
305	map	0.00608
305	R-prec	0.02857
305	bpref	0.02531
305	recip_rank	0.20000
305	ndcg	0.06958
305	ndcg5	0.13121
305	ndcg10	0.08514
305	ndcg20	0.05495
305	ERR	0.01275
305	ERR10	0.01250
305	ERR20	0.01250
305	P1	0.00000
305	P5	0.20000
305	P10	0.10000
305	P15	0.06667
305	P20	0.05000
305	P30	0.03333
305	P50	0.02000
305	P100	0.01000
305	P200	0.00500
305	P500	0.00200
305	P1000	0.00400
306	num_ret	1000.00000
306	num_unjug_ret@1	0.00000
306	num_unjug_ret@10	0.00000
306	num_unjug_ret@20	2.00000
306	num_unjug_ret@100	20.00000
306	num_unjug_ret@1000	652.00000
306	num_rel	332.00000
306	num_rel_ret	150.00000
306	map	0.12979
306	R-prec	0.22590
306	bpref	0.30882
306	recip_rank	1.00000
306	ndcg	0.42625
306	ndcg5	0.63995
306	ndcg10	0.63647
306	ndcg20	0.62993
306	ERR	0.13978
306	ERR10	0.11416
306	ERR20	0.13033
306	P1	1.00000
306	P5	0.60000
306	P10	0.60000
306	P15	0.66667
306	P20	0.60000
306	P30	0.53333
306	P50	0.46000
306	P100	0.33000
306	P200	0.25000
306	P500	0.20000
306	P1000	0.15000
307	num_ret	1000.00000
307	num_unjug_ret@1	0.00000
307	num_unjug_ret@10	0.00000
307	num_unjug_ret@20	0.00000
307	num_unjug_ret@100	1.00000
307	num_unjug_ret@1000	573.00000
307	num_rel	210.00000
307	num_rel_ret	145.00000
307	map	0.18016
307	R-prec	0.26667
307	bpref	0.22127
307	recip_rank	0.50000
307	ndcg	0.55259
307	ndcg5	0.21399
307	ndcg10	0.29062
307	ndcg20	0.33514
307	ERR	0.07260
307	ERR10	0.04886
307	ERR20	0.06308
307	P1	0.00000
307	P5	0.20000
307	P10	0.30000
307	P15	0.40000
307	P20	0.35000
307	P30	0.26667
307	P50	0.24000
307	P100	0.20000
307	P200	0.24500
307	P500	0.24000
307	P1000	0.14500
308	num_ret	1000.00000
308	num_unjug_ret@1	0.00000
308	num_unjug_ret@10	0.00000
308	num_unjug_ret@20	0.00000
308	num_unjug_ret@100	12.00000
308	num_unjug_ret@1000	651.00000
308	num_rel	4.00000
308	num_rel_ret	4.00000
308	map	0.57135
308	R-prec	0.50000
308	bpref	0.50000
308	recip_rank	1.00000
308	ndcg	0.79256
308	ndcg5	0.63668
308	ndcg10	0.63668
308	ndcg20	0.74558
308	ERR	0.09695
308	ERR10	0.09180
308	ERR20	0.09679
308	P1	1.00000
308	P5	0.40000
308	P10	0.20000
308	P15	0.20000
308	P20	0.15000
308	P30	0.10000
308	P50	0.06000
308	P100	0.03000
308	P200	0.01500
308	P500	0.00800
308	P1000	0.00400
309	num_ret	1000.00000
309	num_unjug_ret@1	0.00000
309	num_unjug_ret@10	0.00000
309	num_unjug_ret@20	1.00000
309	num_unjug_ret@100	7.00000
309	num_unjug_ret@1000	562.00000
309	num_rel	3.00000
309	num_rel_ret	1.00000
309	map	0.00092
309	R-prec	0.00000
309	bpref	0.00000
309	recip_rank	0.00275
309	ndcg	0.05513
309	ndcg5	0.00000
309	ndcg10	0.00000
309	ndcg20	0.00000
309	ERR	0.00017
309	ERR10	0.00000
309	ERR20	0.00000
309	P1	0.00000
309	P5	0.00000
309	P10	0.00000
309	P15	0.00000
309	P20	0.00000
309	P30	0.00000
309	P50	0.00000
309	P100	0.00000
309	P200	0.00000
309	P500	0.00200
309	P1000	0.00100
310	num_ret	1000.00000
310	num_unjug_ret@1	0.00000
310	num_unjug_ret@10	0.00000
310	num_unjug_ret@20	0.00000
310	num_unjug_ret@100	11.00000
310	num_unjug_ret@1000	580.00000
310	num_rel	13.00000
310	num_rel_ret	8.00000
310	map	0.19179
310	R-prec	0.23077
310	bpref	0.20710
310	recip_rank	1.00000
310	ndcg	0.48757
310	ndcg5	0.50874
310	ndcg10	0.40854
310	ndcg20	0.34661
310	ERR	0.09448
310	ERR10	0.09119
310	ERR20	0.09119
310	P1	1.00000
310	P5	0.40000
310	P10	0.30000
310	P15	0.20000
310	P20	0.15000
310	P30	0.13333
310	P50	0.08000
310	P100	0.05000
310	P200	0.03500
310	P500	0.01400
310	P1000	0.00800
311	num_ret	1000.00000
311	num_unjug_ret@1	0.00000
311	num_unjug_ret@10	0.00000
311	num_unjug_ret@20	0.00000
311	num_unjug_ret@100	0.00000
311	num_unjug_ret@1000	685.00000
311	num_rel	182.00000
311	num_rel_ret	152.00000
311	map	0.73457
311	R-prec	0.71429
311	bpref	0.74278
311	recip_rank	1.00000
311	ndcg	0.85324
311	ndcg5	1.00000
311	ndcg10	1.00000
311	ndcg20	1.00000
311	ERR	0.18479
311	ERR10	0.15886
311	ERR20	0.17613
311	P1	1.00000
311	P5	1.00000
311	P10	1.00000
311	P15	1.00000
311	P20	1.00000
311	P30	1.00000
311	P50	0.98000
311	P100	0.98000
311	P200	0.66000
311	P500	0.28200
311	P1000	0.15200
312	num_ret	1000.00000
312	num_unjug_ret@1	0.00000
312	num_unjug_ret@10	4.00000
312	num_unjug_ret@20	14.00000
312	num_unjug_ret@100	91.00000
312	num_unjug_ret@1000	967.00000
312	num_rel	11.00000
312	num_rel_ret	3.00000
312	map	0.14545
312	R-prec	0.27273
312	bpref	0.23140
312	recip_rank	0.50000
312	ndcg	0.30035
312	ndcg5	0.49126
312	ndcg10	0.31879
312	ndcg20	0.30035
312	ERR	0.05688
312	ERR10	0.05688
312	ERR20	0.05688
312	P1	0.00000
312	P5	0.60000
312	P10	0.30000
312	P15	0.20000
312	P20	0.15000
312	P30	0.10000
312	P50	0.06000
312	P100	0.03000
312	P200	0.01500
312	P500	0.00600
312	P1000	0.00300
313	num_ret	1000.00000
313	num_unjug_ret@1	0.00000
313	num_unjug_ret@10	0.00000
313	num_unjug_ret@20	0.00000
313	num_unjug_ret@100	0.00000
313	num_unjug_ret@1000	687.00000
313	num_rel	93.00000
313	num_rel_ret	87.00000
313	map	0.84153
313	R-prec	0.84946
313	bpref	0.85640
313	recip_rank	1.00000
313	ndcg	0.93382
313	ndcg5	1.00000
313	ndcg10	1.00000
313	ndcg20	1.00000
313	ERR	0.18420
313	ERR10	0.15886
313	ERR20	0.17613
313	P1	1.00000
313	P5	1.00000
313	P10	1.00000
313	P15	1.00000
313	P20	1.00000
313	P30	0.93333
313	P50	0.90000
313	P100	0.81000
313	P200	0.43000
313	P500	0.17200
313	P1000	0.08700
314	num_ret	1000.00000
314	num_unjug_ret@1	0.00000
314	num_unjug_ret@10	1.00000
314	num_unjug_ret@20	5.00000
314	num_unjug_ret@100	58.00000
314	num_unjug_ret@1000	791.00000
314	num_rel	44.00000
314	num_rel_ret	3.00000
314	map	0.00016
314	R-prec	0.00000
314	bpref	0.00000
314	recip_rank	0.00153
314	ndcg	0.02624
314	ndcg5	0.00000
314	ndcg10	0.00000
314	ndcg20	0.00000
314	ERR	0.00022
314	ERR10	0.00000
314	ERR20	0.00000
314	P1	0.00000
314	P5	0.00000
314	P10	0.00000
314	P15	0.00000
314	P20	0.00000
314	P30	0.00000
314	P50	0.00000
314	P100	0.00000
314	P200	0.00000
314	P500	0.00000
314	P1000	0.00300
315	num_ret	1000.00000
315	num_unjug_ret@1	0.00000
315	num_unjug_ret@10	0.00000
315	num_unjug_ret@20	0.00000
315	num_unjug_ret@100	6.00000
315	num_unjug_ret@1000	545.00000
315	num_rel	67.00000
315	num_rel_ret	31.00000
315	map	0.03156
315	R-prec	0.02985
315	bpref	0.02294
315	recip_rank	0.50000
315	ndcg	0.28243
315	ndcg5	0.21399
315	ndcg10	0.13886
315	ndcg20	0.08962
315	ERR	0.03743
315	ERR10	0.03125
315	ERR20	0.03125
315	P1	0.00000
315	P5	0.20000
315	P10	0.10000
315	P15	0.06667
315	P20	0.05000
315	P30	0.03333
315	P50	0.04000
315	P100	0.05000
315	P200	0.05000
315	P500	0.05000
315	P1000	0.03100
316	num_ret	1000.00000
316	num_unjug_ret@1	0.00000
316	num_unjug_ret@10	0.00000
316	num_unjug_ret@20	0.00000
316	num_unjug_ret@100	58.00000
316	num_unjug_ret@1000	928.00000
316	num_rel	34.00000
316	num_rel_ret	24.00000
316	map	0.55788
316	R-prec	0.70588
316	bpref	0.64619
316	recip_rank	1.00000
316	ndcg	0.72025
316	ndcg5	0.65481
316	ndcg10	0.69760
316	ndcg20	0.80484
316	ERR	0.14446
316	ERR10	0.11843
316	ERR20	0.13939
316	P1	1.00000
316	P5	0.60000
316	P10	0.70000
316	P15	0.80000
316	P20	0.85000
316	P30	0.80000
316	P50	0.48000
316	P100	0.24000
316	P200	0.12000
316	P500	0.04800
316	P1000	0.02400
317	num_ret	1000.00000
317	num_unjug_ret@1	0.00000
317	num_unjug_ret@10	1.00000
317	num_unjug_ret@20	1.00000
317	num_unjug_ret@100	22.00000
317	num_unjug_ret@1000	870.00000
317	num_rel	14.00000
317	num_rel_ret	13.00000
317	map	0.27764
317	R-prec	0.28571
317	bpref	0.25000
317	recip_rank	1.00000
317	ndcg	0.64940
317	ndcg5	0.61643
317	ndcg10	0.46945
317	ndcg20	0.38012
317	ERR	0.10182
317	ERR10	0.09457
317	ERR20	0.09457
317	P1	1.00000
317	P5	0.60000
317	P10	0.40000
317	P15	0.26667
317	P20	0.20000
317	P30	0.20000
317	P50	0.18000
317	P100	0.10000
317	P200	0.05000
317	P500	0.02600
317	P1000	0.01300
318	num_ret	1000.00000
318	num_unjug_ret@1	0.00000
318	num_unjug_ret@10	0.00000
318	num_unjug_ret@20	0.00000
318	num_unjug_ret@100	25.00000
318	num_unjug_ret@1000	746.00000
318	num_rel	113.00000
318	num_rel_ret	10.00000
318	map	0.00618
318	R-prec	0.02655
318	bpref	0.02349
318	recip_rank	0.25000
318	ndcg	0.07576
318	ndcg5	0.14607
318	ndcg10	0.16815
318	ndcg20	0.10852
318	ERR	0.02594
318	ERR10	0.02400
318	ERR20	0.02400
318	P1	0.00000
318	P5	0.20000
318	P10	0.20000
318	P15	0.13333
318	P20	0.10000
318	P30	0.06667
318	P50	0.06000
318	P100	0.03000
318	P200	0.02000
318	P500	0.01200
318	P1000	0.01000
319	num_ret	1000.00000
319	num_unjug_ret@1	0.00000
319	num_unjug_ret@10	0.00000
319	num_unjug_ret@20	0.00000
319	num_unjug_ret@100	9.00000
319	num_unjug_ret@1000	496.00000
319	num_rel	170.00000
319	num_rel_ret	99.00000
319	map	0.11539
319	R-prec	0.18235
319	bpref	0.14810
319	recip_rank	1.00000
319	ndcg	0.47688
319	ndcg5	0.63995
319	ndcg10	0.55730
319	ndcg20	0.50190
319	ERR	0.12632
319	ERR10	0.10643
319	ERR20	0.11764
319	P1	1.00000
319	P5	0.60000
319	P10	0.50000
319	P15	0.46667
319	P20	0.45000
319	P30	0.36667
319	P50	0.32000
319	P100	0.20000
319	P200	0.16500
319	P500	0.12200
319	P1000	0.09900
320	num_ret	1000.00000
320	num_unjug_ret@1	0.00000
320	num_unjug_ret@10	0.00000
320	num_unjug_ret@20	0.00000
320	num_unjug_ret@100	1.00000
320	num_unjug_ret@1000	541.00000
320	num_rel	6.00000
320	num_rel_ret	6.00000
320	map	0.02968
320	R-prec	0.00000
320	bpref	0.00000
320	recip_rank	0.02941
320	ndcg	0.27763
320	ndcg5	0.00000
320	ndcg10	0.00000
320	ndcg20	0.00000
320	ERR	0.00464
320	ERR10	0.00000
320	ERR20	0.00000
320	P1	0.00000
320	P5	0.00000
320	P10	0.00000
320	P15	0.00000
320	P20	0.00000
320	P30	0.00000
320	P50	0.04000
320	P100	0.02000
320	P200	0.02000
320	P500	0.01200
320	P1000	0.00600
321	num_ret	1000.00000
321	num_unjug_ret@1	0.00000
321	num_unjug_ret@10	0.00000
321	num_unjug_ret@20	0.00000
321	num_unjug_ret@100	11.00000
321	num_unjug_ret@1000	625.00000
321	num_rel	203.00000
321	num_rel_ret	123.00000
321	map	0.34290
321	R-prec	0.39409
321	bpref	0.41518
321	recip_rank	1.00000
321	ndcg	0.61772
321	ndcg5	1.00000
321	ndcg10	1.00000
321	ndcg20	0.89143
321	ERR	0.18089
321	ERR10	0.15886
321	ERR20	0.17155
321	P1	1.00000
321	P5	1.00000
321	P10	1.00000
321	P15	0.86667
321	P20	0.85000
321	P30	0.80000
321	P50	0.78000
321	P100	0.60000
321	P200	0.40000
321	P500	0.21800
321	P1000	0.12300
322	num_ret	1000.00000
322	num_unjug_ret@1	0.00000
322	num_unjug_ret@10	0.00000
322	num_unjug_ret@20	0.00000
322	num_unjug_ret@100	7.00000
322	num_unjug_ret@1000	552.00000
322	num_rel	34.00000
322	num_rel_ret	12.00000
322	map	0.00640
322	R-prec	0.02941
322	bpref	0.01557
322	recip_rank	0.05882
322	ndcg	0.15123
322	ndcg5	0.00000
322	ndcg10	0.00000
322	ndcg20	0.03406
322	ERR	0.00510
322	ERR10	0.00000
322	ERR20	0.00368
322	P1	0.00000
322	P5	0.00000
322	P10	0.00000
322	P15	0.00000
322	P20	0.05000
322	P30	0.03333
322	P50	0.02000
322	P100	0.01000
322	P200	0.00500
322	P500	0.01200
322	P1000	0.01200
323	num_ret	1000.00000
323	num_unjug_ret@1	0.00000
323	num_unjug_ret@10	0.00000
323	num_unjug_ret@20	0.00000
323	num_unjug_ret@100	13.00000
323	num_unjug_ret@1000	623.00000
323	num_rel	61.00000
323	num_rel_ret	25.00000
323	map	0.22974
323	R-prec	0.32787
323	bpref	0.28057
323	recip_rank	1.00000
323	ndcg	0.46952
323	ndcg5	0.85393
323	ndcg10	0.75345
323	ndcg20	0.69937
323	ERR	0.15530
323	ERR10	0.13571
323	ERR20	0.14977
323	P1	1.00000
323	P5	0.80000
323	P10	0.70000
323	P15	0.66667
323	P20	0.65000
323	P30	0.53333
323	P50	0.36000
323	P100	0.20000
323	P200	0.11000
323	P500	0.04800
323	P1000	0.02500
324	num_ret	1000.00000
324	num_unjug_ret@1	0.00000
324	num_unjug_ret@10	0.00000
324	num_unjug_ret@20	0.00000
324	num_unjug_ret@100	2.00000
324	num_unjug_ret@1000	584.00000
324	num_rel	161.00000
324	num_rel_ret	154.00000
324	map	0.73510
324	R-prec	0.67081
324	bpref	0.72316
324	recip_rank	1.00000
324	ndcg	0.92065
324	ndcg5	1.00000
324	ndcg10	1.00000
324	ndcg20	0.96269
324	ERR	0.18376
324	ERR10	0.15886
324	ERR20	0.17455
324	P1	1.00000
324	P5	1.00000
324	P10	1.00000
324	P15	0.93333
324	P20	0.95000
324	P30	0.96667
324	P50	0.94000
324	P100	0.84000
324	P200	0.57500
324	P500	0.28400
324	P1000	0.15400
325	num_ret	1000.00000
325	num_unjug_ret@1	0.00000
325	num_unjug_ret@10	0.00000
325	num_unjug_ret@20	0.00000
325	num_unjug_ret@100	0.00000
325	num_unjug_ret@1000	622.00000
325	num_rel	24.00000
325	num_rel_ret	20.00000
325	map	0.07948
325	R-prec	0.08333
325	bpref	0.04688
325	recip_rank	0.08333
325	ndcg	0.40881
325	ndcg5	0.00000
325	ndcg10	0.00000
325	ndcg20	0.07474
325	ERR	0.01946
325	ERR10	0.00000
325	ERR20	0.00939
325	P1	0.00000
325	P5	0.00000
325	P10	0.00000
325	P15	0.13333
325	P20	0.10000
325	P30	0.13333
325	P50	0.12000
325	P100	0.10000
325	P200	0.06500
325	P500	0.03800
325	P1000	0.02000
326	num_ret	1000.00000
326	num_unjug_ret@1	0.00000
326	num_unjug_ret@10	0.00000
326	num_unjug_ret@20	0.00000
326	num_unjug_ret@100	3.00000
326	num_unjug_ret@1000	616.00000
326	num_rel	46.00000
326	num_rel_ret	44.00000
326	map	0.68944
326	R-prec	0.65217
326	bpref	0.65123
326	recip_rank	1.00000
326	ndcg	0.90117
326	ndcg5	1.00000
326	ndcg10	1.00000
326	ndcg20	0.89508
326	ERR	0.18000
326	ERR10	0.15886
326	ERR20	0.17218
326	P1	1.00000
326	P5	1.00000
326	P10	1.00000
326	P15	0.93333
326	P20	0.85000
326	P30	0.80000
326	P50	0.62000
326	P100	0.38000
326	P200	0.19500
326	P500	0.08800
326	P1000	0.04400
327	num_ret	1000.00000
327	num_unjug_ret@1	0.00000
327	num_unjug_ret@10	1.00000
327	num_unjug_ret@20	3.00000
327	num_unjug_ret@100	10.00000
327	num_unjug_ret@1000	756.00000
327	num_rel	11.00000
327	num_rel_ret	11.00000
327	map	0.07239
327	R-prec	0.00000
327	bpref	0.00000
327	recip_rank	0.05556
327	ndcg	0.38164
327	ndcg5	0.00000
327	ndcg10	0.00000
327	ndcg20	0.04881
327	ERR	0.01104
327	ERR10	0.00000
327	ERR20	0.00347
327	P1	0.00000
327	P5	0.00000
327	P10	0.00000
327	P15	0.00000
327	P20	0.05000
327	P30	0.03333
327	P50	0.10000
327	P100	0.07000
327	P200	0.04000
327	P500	0.02200
327	P1000	0.01100
328	num_ret	1000.00000
328	num_unjug_ret@1	0.00000
328	num_unjug_ret@10	0.00000
328	num_unjug_ret@20	0.00000
328	num_unjug_ret@100	1.00000
328	num_unjug_ret@1000	623.00000
328	num_rel	8.00000
328	num_rel_ret	8.00000
328	map	0.62924
328	R-prec	0.75000
328	bpref	0.68750
328	recip_rank	1.00000
328	ndcg	0.82049
328	ndcg5	0.61643
328	ndcg10	0.79008
328	ndcg20	0.79008
328	ERR	0.11411
328	ERR10	0.11399
328	ERR20	0.11399
328	P1	1.00000
328	P5	0.60000
328	P10	0.70000
328	P15	0.46667
328	P20	0.35000
328	P30	0.23333
328	P50	0.14000
328	P100	0.07000
328	P200	0.03500
328	P500	0.01600
328	P1000	0.00800
329	num_ret	1000.00000
329	num_unjug_ret@1	0.00000
329	num_unjug_ret@10	0.00000
329	num_unjug_ret@20	0.00000
329	num_unjug_ret@100	18.00000
329	num_unjug_ret@1000	687.00000
329	num_rel	35.00000
329	num_rel_ret	27.00000
329	map	0.26910
329	R-prec	0.31429
329	bpref	0.28571
329	recip_rank	1.00000
329	ndcg	0.63224
329	ndcg5	0.69921
329	ndcg10	0.66016
329	ndcg20	0.53933
329	ERR	0.13930
329	ERR10	0.12345
329	ERR20	0.13303
329	P1	1.00000
329	P5	0.60000
329	P10	0.60000
329	P15	0.60000
329	P20	0.45000
329	P30	0.36667
329	P50	0.26000
329	P100	0.17000
329	P200	0.08500
329	P500	0.04600
329	P1000	0.02700
330	num_ret	1000.00000
330	num_unjug_ret@1	0.00000
330	num_unjug_ret@10	0.00000
330	num_unjug_ret@20	0.00000
330	num_unjug_ret@100	2.00000
330	num_unjug_ret@1000	445.00000
330	num_rel	60.00000
330	num_rel_ret	53.00000
330	map	0.18009
330	R-prec	0.21667
330	bpref	0.18111
330	recip_rank	1.00000
330	ndcg	0.62483
330	ndcg5	0.50874
330	ndcg10	0.46712
330	ndcg20	0.37016
330	ERR	0.11328
330	ERR10	0.09503
330	ERR20	0.10074
330	P1	1.00000
330	P5	0.40000
330	P10	0.40000
330	P15	0.33333
330	P20	0.30000
330	P30	0.36667
330	P50	0.26000
330	P100	0.19000
330	P200	0.13500
330	P500	0.08600
330	P1000	0.05300
331	num_ret	1000.00000
331	num_unjug_ret@1	0.00000
331	num_unjug_ret@10	0.00000
331	num_unjug_ret@20	0.00000
331	num_unjug_ret@100	14.00000
331	num_unjug_ret@1000	602.00000
331	num_rel	213.00000
331	num_rel_ret	137.00000
331	map	0.30582
331	R-prec	0.34272
331	bpref	0.36950
331	recip_rank	1.00000
331	ndcg	0.62484
331	ndcg5	1.00000
331	ndcg10	1.00000
331	ndcg20	1.00000
331	ERR	0.18311
331	ERR10	0.15886
331	ERR20	0.17613
331	P1	1.00000
331	P5	1.00000
331	P10	1.00000
331	P15	1.00000
331	P20	1.00000
331	P30	0.83333
331	P50	0.74000
331	P100	0.52000
331	P200	0.35500
331	P500	0.20400
331	P1000	0.13700
332	num_ret	1000.00000
332	num_unjug_ret@1	0.00000
332	num_unjug_ret@10	0.00000
332	num_unjug_ret@20	0.00000
332	num_unjug_ret@100	12.00000
332	num_unjug_ret@1000	568.00000
332	num_rel	254.00000
332	num_rel_ret	90.00000
332	map	0.04434
332	R-prec	0.15748
332	bpref	0.11904
332	recip_rank	0.03704
332	ndcg	0.27166
332	ndcg5	0.00000
332	ndcg10	0.00000
332	ndcg20	0.00000
332	ERR	0.01300
332	ERR10	0.00000
332	ERR20	0.00000
332	P1	0.00000
332	P5	0.00000
332	P10	0.00000
332	P15	0.00000
332	P20	0.00000
332	P30	0.03333
332	P50	0.06000
332	P100	0.12000
332	P200	0.14500
332	P500	0.12800
332	P1000	0.09000
333	num_ret	1000.00000
333	num_unjug_ret@1	0.00000
333	num_unjug_ret@10	0.00000
333	num_unjug_ret@20	0.00000
333	num_unjug_ret@100	1.00000
333	num_unjug_ret@1000	576.00000
333	num_rel	65.00000
333	num_rel_ret	61.00000
333	map	0.32984
333	R-prec	0.36923
333	bpref	0.31905
333	recip_rank	0.50000
333	ndcg	0.72745
333	ndcg5	0.66084
333	ndcg10	0.77991
333	ndcg20	0.63936
333	ERR	0.11800
333	ERR10	0.10278
333	ERR20	0.11031
333	P1	0.00000
333	P5	0.80000
333	P10	0.90000
333	P15	0.66667
333	P20	0.65000
333	P30	0.50000
333	P50	0.42000
333	P100	0.30000
333	P200	0.17500
333	P500	0.11000
333	P1000	0.06100
334	num_ret	1000.00000
334	num_unjug_ret@1	0.00000
334	num_unjug_ret@10	1.00000
334	num_unjug_ret@20	3.00000
334	num_unjug_ret@100	19.00000
334	num_unjug_ret@1000	658.00000
334	num_rel	9.00000
334	num_rel_ret	6.00000
334	map	0.26633
334	R-prec	0.22222
334	bpref	0.23457
334	recip_rank	1.00000
334	ndcg	0.55033
334	ndcg5	0.55315
334	ndcg10	0.38334
334	ndcg20	0.44686
334	ERR	0.09800
334	ERR10	0.09180
334	ERR20	0.09637
334	P1	1.00000
334	P5	0.40000
334	P10	0.20000
334	P15	0.20000
334	P20	0.15000
334	P30	0.10000
334	P50	0.06000
334	P100	0.05000
334	P200	0.02500
334	P500	0.01000
334	P1000	0.00600
335	num_ret	1000.00000
335	num_unjug_ret@1	0.00000
335	num_unjug_ret@10	0.00000
335	num_unjug_ret@20	0.00000
335	num_unjug_ret@100	4.00000
335	num_unjug_ret@1000	602.00000
335	num_rel	66.00000
335	num_rel_ret	56.00000
335	map	0.40280
335	R-prec	0.46970
335	bpref	0.41391
335	recip_rank	1.00000
335	ndcg	0.74751
335	ndcg5	0.83042
335	ndcg10	0.82370
335	ndcg20	0.74400
335	ERR	0.16146
335	ERR10	0.13962
335	ERR20	0.15259
335	P1	1.00000
335	P5	0.80000
335	P10	0.80000
335	P15	0.73333
335	P20	0.70000
335	P30	0.60000
335	P50	0.56000
335	P100	0.36000
335	P200	0.21000
335	P500	0.09800
335	P1000	0.05600
336	num_ret	1000.00000
336	num_unjug_ret@1	0.00000
336	num_unjug_ret@10	0.00000
336	num_unjug_ret@20	0.00000
336	num_unjug_ret@100	3.00000
336	num_unjug_ret@1000	656.00000
336	num_rel	12.00000
336	num_rel_ret	11.00000
336	map	0.03892
336	R-prec	0.00000
336	bpref	0.00000
336	recip_rank	0.02381
336	ndcg	0.31508
336	ndcg5	0.00000
336	ndcg10	0.00000
336	ndcg20	0.00000
336	ERR	0.00534
336	ERR10	0.00000
336	ERR20	0.00000
336	P1	0.00000
336	P5	0.00000
336	P10	0.00000
336	P15	0.00000
336	P20	0.00000
336	P30	0.00000
336	P50	0.02000
336	P100	0.04000
336	P200	0.04500
336	P500	0.02200
336	P1000	0.01100
337	num_ret	1000.00000
337	num_unjug_ret@1	0.00000
337	num_unjug_ret@10	0.00000
337	num_unjug_ret@20	0.00000
337	num_unjug_ret@100	0.00000
337	num_unjug_ret@1000	618.00000
337	num_rel	93.00000
337	num_rel_ret	91.00000
337	map	0.30999
337	R-prec	0.40860
337	bpref	0.30397
337	recip_rank	0.33333
337	ndcg	0.72685
337	ndcg5	0.31565
337	ndcg10	0.34052
337	ndcg20	0.36564
337	ERR	0.07408
337	ERR10	0.04807
337	ERR20	0.06098
337	P1	0.00000
337	P5	0.40000
337	P10	0.40000
337	P15	0.46667
337	P20	0.40000
337	P30	0.40000
337	P50	0.34000
337	P100	0.40000
337	P200	0.29000
337	P500	0.16200
337	P1000	0.09100
338	num_ret	1000.00000
338	num_unjug_ret@1	0.00000
338	num_unjug_ret@10	0.00000
338	num_unjug_ret@20	0.00000
338	num_unjug_ret@100	1.00000
338	num_unjug_ret@1000	770.00000
338	num_rel	4.00000
338	num_rel_ret	4.00000
338	map	0.53144
338	R-prec	0.50000
338	bpref	0.50000
338	recip_rank	1.00000
338	ndcg	0.76960
338	ndcg5	0.63668
338	ndcg10	0.63668
338	ndcg20	0.63668
338	ERR	0.09394
338	ERR10	0.09180
338	ERR20	0.09180
338	P1	1.00000
338	P5	0.40000
338	P10	0.20000
338	P15	0.13333
338	P20	0.10000
338	P30	0.06667
338	P50	0.06000
338	P100	0.03000
338	P200	0.02000
338	P500	0.00800
338	P1000	0.00400
339	num_ret	1000.00000
339	num_unjug_ret@1	0.00000
339	num_unjug_ret@10	0.00000
339	num_unjug_ret@20	0.00000
339	num_unjug_ret@100	7.00000
339	num_unjug_ret@1000	567.00000
339	num_rel	10.00000
339	num_rel_ret	10.00000
339	map	0.40629
339	R-prec	0.40000
339	bpref	0.34000
339	recip_rank	1.00000
339	ndcg	0.73587
339	ndcg5	0.61643
339	ndcg10	0.46945
339	ndcg20	0.57907
339	ERR	0.10458
339	ERR10	0.09457
339	ERR20	0.10080
339	P1	1.00000
339	P5	0.60000
339	P10	0.40000
339	P15	0.33333
339	P20	0.30000
339	P30	0.23333
339	P50	0.18000
339	P100	0.09000
339	P200	0.04500
339	P500	0.02000
339	P1000	0.01000
340	num_ret	1000.00000
340	num_unjug_ret@1	0.00000
340	num_unjug_ret@10	0.00000
340	num_unjug_ret@20	0.00000
340	num_unjug_ret@100	14.00000
340	num_unjug_ret@1000	686.00000
340	num_rel	69.00000
340	num_rel_ret	42.00000
340	map	0.24279
340	R-prec	0.24638
340	bpref	0.22831
340	recip_rank	1.00000
340	ndcg	0.57270
340	ndcg5	1.00000
340	ndcg10	0.92664
340	ndcg20	0.70464
340	ERR	0.16565
340	ERR10	0.15364
340	ERR20	0.16024
340	P1	1.00000
340	P5	1.00000
340	P10	0.90000
340	P15	0.73333
340	P20	0.60000
340	P30	0.43333
340	P50	0.32000
340	P100	0.22000
340	P200	0.16000
340	P500	0.07600
340	P1000	0.04200
341	num_ret	1000.00000
341	num_unjug_ret@1	0.00000
341	num_unjug_ret@10	0.00000
341	num_unjug_ret@20	2.00000
341	num_unjug_ret@100	29.00000
341	num_unjug_ret@1000	681.00000
341	num_rel	78.00000
341	num_rel_ret	60.00000
341	map	0.31128
341	R-prec	0.37179
341	bpref	0.36160
341	recip_rank	1.00000
341	ndcg	0.67700
341	ndcg5	0.85393
341	ndcg10	0.83185
341	ndcg20	0.79111
341	ERR	0.16437
341	ERR10	0.14280
341	ERR20	0.15870
341	P1	1.00000
341	P5	0.80000
341	P10	0.80000
341	P15	0.86667
341	P20	0.75000
341	P30	0.53333
341	P50	0.44000
341	P100	0.29000
341	P200	0.21500
341	P500	0.10000
341	P1000	0.06000
342	num_ret	1000.00000
342	num_unjug_ret@1	0.00000
342	num_unjug_ret@10	0.00000
342	num_unjug_ret@20	0.00000
342	num_unjug_ret@100	31.00000
342	num_unjug_ret@1000	804.00000
342	num_rel	20.00000
342	num_rel_ret	12.00000
342	map	0.09858
342	R-prec	0.20000
342	bpref	0.15500
342	recip_rank	0.33333
342	ndcg	0.36984
342	ndcg5	0.31565
342	ndcg10	0.26846
342	ndcg20	0.21056
342	ERR	0.04882
342	ERR10	0.04097
342	ERR20	0.04494
342	P1	0.00000
342	P5	0.40000
342	P10	0.30000
342	P15	0.26667
342	P20	0.20000
342	P30	0.16667
342	P50	0.12000
342	P100	0.06000
342	P200	0.03500
342	P500	0.02000
342	P1000	0.01200
343	num_ret	1000.00000
343	num_unjug_ret@1	0.00000
343	num_unjug_ret@10	0.00000
343	num_unjug_ret@20	0.00000
343	num_unjug_ret@100	31.00000
343	num_unjug_ret@1000	738.00000
343	num_rel	258.00000
343	num_rel_ret	53.00000
343	map	0.02286
343	R-prec	0.10078
343	bpref	0.12209
343	recip_rank	0.33333
343	ndcg	0.17852
343	ndcg5	0.16958
343	ndcg10	0.11005
343	ndcg20	0.10508
343	ERR	0.03930
343	ERR10	0.02083
343	ERR20	0.02428
343	P1	0.00000
343	P5	0.20000
343	P10	0.10000
343	P15	0.06667
343	P20	0.10000
343	P30	0.16667
343	P50	0.20000
343	P100	0.14000
343	P200	0.10500
343	P500	0.07000
343	P1000	0.05300
344	num_ret	1000.00000
344	num_unjug_ret@1	0.00000
344	num_unjug_ret@10	1.00000
344	num_unjug_ret@20	7.00000
344	num_unjug_ret@100	46.00000
344	num_unjug_ret@1000	733.00000
344	num_rel	5.00000
344	num_rel_ret	3.00000
344	map	0.00630
344	R-prec	0.00000
344	bpref	0.00000
344	recip_rank	0.01887
344	ndcg	0.13787
344	ndcg5	0.00000
344	ndcg10	0.00000
344	ndcg20	0.00000
344	ERR	0.00148
344	ERR10	0.00000
344	ERR20	0.00000
344	P1	0.00000
344	P5	0.00000
344	P10	0.00000
344	P15	0.00000
344	P20	0.00000
344	P30	0.00000
344	P50	0.00000
344	P100	0.01000
344	P200	0.00500
344	P500	0.00600
344	P1000	0.00300
345	num_ret	1000.00000
345	num_unjug_ret@1	0.00000
345	num_unjug_ret@10	0.00000
345	num_unjug_ret@20	2.00000
345	num_unjug_ret@100	11.00000
345	num_unjug_ret@1000	599.00000
345	num_rel	38.00000
345	num_rel_ret	35.00000
345	map	0.20932
345	R-prec	0.18421
345	bpref	0.15789
345	recip_rank	0.50000
345	ndcg	0.61784
345	ndcg5	0.51477
345	ndcg10	0.40348
345	ndcg20	0.29878
345	ERR	0.08260
345	ERR10	0.06820
345	ERR20	0.07223
345	P1	0.00000
345	P5	0.60000
345	P10	0.40000
345	P15	0.33333
345	P20	0.25000
345	P30	0.20000
345	P50	0.20000
345	P100	0.20000
345	P200	0.14000
345	P500	0.06600
345	P1000	0.03500
346	num_ret	1000.00000
346	num_unjug_ret@1	0.00000
346	num_unjug_ret@10	1.00000
346	num_unjug_ret@20	3.00000
346	num_unjug_ret@100	56.00000
346	num_unjug_ret@1000	757.00000
346	num_rel	105.00000
346	num_rel_ret	28.00000
346	map	0.01160
346	R-prec	0.04762
346	bpref	0.06794
346	recip_rank	0.05556
346	ndcg	0.16724
346	ndcg5	0.00000
346	ndcg10	0.00000
346	ndcg20	0.03344
346	ERR	0.01033
346	ERR10	0.00000
346	ERR20	0.00347
346	P1	0.00000
346	P5	0.00000
346	P10	0.00000
346	P15	0.00000
346	P20	0.05000
346	P30	0.06667
346	P50	0.04000
346	P100	0.05000
346	P200	0.04500
346	P500	0.03600
346	P1000	0.02800
347	num_ret	1000.00000
347	num_unjug_ret@1	0.00000
347	num_unjug_ret@10	0.00000
347	num_unjug_ret@20	0.00000
347	num_unjug_ret@100	14.00000
347	num_unjug_ret@1000	588.00000
347	num_rel	152.00000
347	num_rel_ret	72.00000
347	map	0.03384
347	R-prec	0.11842
347	bpref	0.04887
347	recip_rank	0.01515
347	ndcg	0.29873
347	ndcg5	0.00000
347	ndcg10	0.00000
347	ndcg20	0.00000
347	ERR	0.00721
347	ERR10	0.00000
347	ERR20	0.00000
347	P1	0.00000
347	P5	0.00000
347	P10	0.00000
347	P15	0.00000
347	P20	0.00000
347	P30	0.00000
347	P50	0.00000
347	P100	0.04000
347	P200	0.11000
347	P500	0.06400
347	P1000	0.07200
348	num_ret	1000.00000
348	num_unjug_ret@1	0.00000
348	num_unjug_ret@10	3.00000
348	num_unjug_ret@20	9.00000
348	num_unjug_ret@100	87.00000
348	num_unjug_ret@1000	969.00000
348	num_rel	5.00000
348	num_rel_ret	5.00000
348	map	0.87667
348	R-prec	0.80000
348	bpref	0.88000
348	recip_rank	1.00000
348	ndcg	0.95123
348	ndcg5	0.83042
348	ndcg10	0.95123
348	ndcg20	0.95123
348	ERR	0.12388
348	ERR10	0.12388
348	ERR20	0.12388
348	P1	1.00000
348	P5	0.80000
348	P10	0.50000
348	P15	0.33333
348	P20	0.25000
348	P30	0.16667
348	P50	0.10000
348	P100	0.05000
348	P200	0.02500
348	P500	0.01000
348	P1000	0.00500
349	num_ret	1000.00000
349	num_unjug_ret@1	0.00000
349	num_unjug_ret@10	0.00000
349	num_unjug_ret@20	0.00000
349	num_unjug_ret@100	20.00000
349	num_unjug_ret@1000	842.00000
349	num_rel	73.00000
349	num_rel_ret	25.00000
349	map	0.10358
349	R-prec	0.23288
349	bpref	0.16363
349	recip_rank	1.00000
349	ndcg	0.35132
349	ndcg5	0.68435
349	ndcg10	0.51353
349	ndcg20	0.36375
349	ERR	0.12371
349	ERR10	0.10922
349	ERR20	0.11163
349	P1	1.00000
349	P5	0.60000
349	P10	0.40000
349	P15	0.26667
349	P20	0.25000
349	P30	0.30000
349	P50	0.22000
349	P100	0.18000
349	P200	0.11500
349	P500	0.05000
349	P1000	0.02500
350	num_ret	1000.00000
350	num_unjug_ret@1	0.00000
350	num_unjug_ret@10	0.00000
350	num_unjug_ret@20	0.00000
350	num_unjug_ret@100	13.00000
350	num_unjug_ret@1000	659.00000
350	num_rel	68.00000
350	num_rel_ret	24.00000
350	map	0.04034
350	R-prec	0.10294
350	bpref	0.06574
350	recip_rank	1.00000
350	ndcg	0.27212
350	ndcg5	0.47037
350	ndcg10	0.30523
350	ndcg20	0.19699
350	ERR	0.08259
350	ERR10	0.07422
350	ERR20	0.07422
350	P1	1.00000
350	P5	0.40000
350	P10	0.20000
350	P15	0.13333
350	P20	0.10000
350	P30	0.10000
350	P50	0.12000
350	P100	0.09000
350	P200	0.05000
350	P500	0.03200
350	P1000	0.02400
351	num_ret	1000.00000
351	num_unjug_ret@1	0.00000
351	num_unjug_ret@10	0.00000
351	num_unjug_ret@20	0.00000
351	num_unjug_ret@100	1.00000
351	num_unjug_ret@1000	535.00000
351	num_rel	48.00000
351	num_rel_ret	38.00000
351	map	0.50291
351	R-prec	0.50000
351	bpref	0.49219
351	recip_rank	1.00000
351	ndcg	0.75916
351	ndcg5	1.00000
351	ndcg10	1.00000
351	ndcg20	0.89963
351	ERR	0.17816
351	ERR10	0.15886
351	ERR20	0.17283
351	P1	1.00000
351	P5	1.00000
351	P10	1.00000
351	P15	1.00000
351	P20	0.85000
351	P30	0.73333
351	P50	0.48000
351	P100	0.26000
351	P200	0.14500
351	P500	0.06600
351	P1000	0.03800
352	num_ret	1000.00000
352	num_unjug_ret@1	0.00000
352	num_unjug_ret@10	0.00000
352	num_unjug_ret@20	0.00000
352	num_unjug_ret@100	1.00000
352	num_unjug_ret@1000	397.00000
352	num_rel	246.00000
352	num_rel_ret	169.00000
352	map	0.29457
352	R-prec	0.41870
352	bpref	0.36528
352	recip_rank	1.00000
352	ndcg	0.63359
352	ndcg5	0.72273
352	ndcg10	0.68438
352	ndcg20	0.55375
352	ERR	0.15395
352	ERR10	0.13011
352	ERR20	0.13948
352	P1	1.00000
352	P5	0.60000
352	P10	0.60000
352	P15	0.53333
352	P20	0.45000
352	P30	0.50000
352	P50	0.52000
352	P100	0.51000
352	P200	0.45500
352	P500	0.27800
352	P1000	0.16900
353	num_ret	1000.00000
353	num_unjug_ret@1	0.00000
353	num_unjug_ret@10	0.00000
353	num_unjug_ret@20	0.00000
353	num_unjug_ret@100	0.00000
353	num_unjug_ret@1000	654.00000
353	num_rel	122.00000
353	num_rel_ret	70.00000
353	map	0.34655
353	R-prec	0.51639
353	bpref	0.43738
353	recip_rank	1.00000
353	ndcg	0.59929
353	ndcg5	1.00000
353	ndcg10	0.85720
353	ndcg20	0.68723
353	ERR	0.16843
353	ERR10	0.14887
353	ERR20	0.15652
353	P1	1.00000
353	P5	1.00000
353	P10	0.80000
353	P15	0.53333
353	P20	0.60000
353	P30	0.60000
353	P50	0.54000
353	P100	0.53000
353	P200	0.34500
353	P500	0.14000
353	P1000	0.07000
354	num_ret	1000.00000
354	num_unjug_ret@1	0.00000
354	num_unjug_ret@10	0.00000
354	num_unjug_ret@20	0.00000
354	num_unjug_ret@100	2.00000
354	num_unjug_ret@1000	436.00000
354	num_rel	361.00000
354	num_rel_ret	145.00000
354	map	0.09312
354	R-prec	0.20776
354	bpref	0.16408
354	recip_rank	0.50000
354	ndcg	0.36479
354	ndcg5	0.36005
354	ndcg10	0.52110
354	ndcg20	0.37105
354	ERR	0.08955
354	ERR10	0.07347
354	ERR20	0.07613
354	P1	0.00000
354	P5	0.40000
354	P10	0.60000
354	P15	0.40000
354	P20	0.35000
354	P30	0.40000
354	P50	0.30000
354	P100	0.26000
354	P200	0.24500
354	P500	0.18000
354	P1000	0.14500
355	num_ret	1000.00000
355	num_unjug_ret@1	0.00000
355	num_unjug_ret@10	0.00000
355	num_unjug_ret@20	0.00000
355	num_unjug_ret@100	0.00000
355	num_unjug_ret@1000	480.00000
355	num_rel	45.00000
355	num_rel_ret	38.00000
355	map	0.26557
355	R-prec	0.26667
355	bpref	0.23753
355	recip_rank	1.00000
355	ndcg	0.66902
355	ndcg5	0.83042
355	ndcg10	0.75034
355	ndcg20	0.59497
355	ERR	0.14759
355	ERR10	0.13378
355	ERR20	0.14224
355	P1	1.00000
355	P5	0.80000
355	P10	0.70000
355	P15	0.60000
355	P20	0.50000
355	P30	0.36667
355	P50	0.24000
355	P100	0.18000
355	P200	0.11500
355	P500	0.06600
355	P1000	0.03800
356	num_ret	1000.00000
356	num_unjug_ret@1	0.00000
356	num_unjug_ret@10	0.00000
356	num_unjug_ret@20	0.00000
356	num_unjug_ret@100	4.00000
356	num_unjug_ret@1000	686.00000
356	num_rel	17.00000
356	num_rel_ret	9.00000
356	map	0.03894
356	R-prec	0.05882
356	bpref	0.02768
356	recip_rank	0.10000
356	ndcg	0.25092
356	ndcg5	0.00000
356	ndcg10	0.06362
356	ndcg20	0.04555
356	ERR	0.01266
356	ERR10	0.00625
356	ERR20	0.00625
356	P1	0.00000
356	P5	0.00000
356	P10	0.10000
356	P15	0.06667
356	P20	0.05000
356	P30	0.06667
356	P50	0.06000
356	P100	0.08000
356	P200	0.04000
356	P500	0.01800
356	P1000	0.00900
357	num_ret	1000.00000
357	num_unjug_ret@1	0.00000
357	num_unjug_ret@10	0.00000
357	num_unjug_ret@20	0.00000
357	num_unjug_ret@100	1.00000
357	num_unjug_ret@1000	540.00000
357	num_rel	270.00000
357	num_rel_ret	185.00000
357	map	0.40453
357	R-prec	0.44074
357	bpref	0.46922
357	recip_rank	1.00000
357	ndcg	0.67742
357	ndcg5	0.83042
357	ndcg10	0.82052
357	ndcg20	0.85073
357	ERR	0.16727
357	ERR10	0.13904
357	ERR20	0.15752
357	P1	1.00000
357	P5	0.80000
357	P10	0.80000
357	P15	0.86667
357	P20	0.85000
357	P30	0.80000
357	P50	0.84000
357	P100	0.74000
357	P200	0.53500
357	P500	0.32200
357	P1000	0.18500
358	num_ret	1000.00000
358	num_unjug_ret@1	0.00000
358	num_unjug_ret@10	0.00000
358	num_unjug_ret@20	0.00000
358	num_unjug_ret@100	0.00000
358	num_unjug_ret@1000	447.00000
358	num_rel	51.00000
358	num_rel_ret	49.00000
358	map	0.18356
358	R-prec	0.21569
358	bpref	0.12534
358	recip_rank	0.08333
358	ndcg	0.58417
358	ndcg5	0.00000
358	ndcg10	0.00000
358	ndcg20	0.10720
358	ERR	0.02749
358	ERR10	0.00000
358	ERR20	0.01210
358	P1	0.00000
358	P5	0.00000
358	P10	0.00000
358	P15	0.06667
358	P20	0.15000
358	P30	0.26667
358	P50	0.22000
358	P100	0.18000
358	P200	0.19000
358	P500	0.09800
358	P1000	0.04900
359	num_ret	1000.00000
359	num_unjug_ret@1	0.00000
359	num_unjug_ret@10	0.00000
359	num_unjug_ret@20	0.00000
359	num_unjug_ret@100	0.00000
359	num_unjug_ret@1000	496.00000
359	num_rel	28.00000
359	num_rel_ret	14.00000
359	map	0.03258
359	R-prec	0.07143
359	bpref	0.04974
359	recip_rank	0.16667
359	ndcg	0.25837
359	ndcg5	0.00000
359	ndcg10	0.07840
359	ndcg20	0.08695
359	ERR	0.02008
359	ERR10	0.01042
359	ERR20	0.01460
359	P1	0.00000
359	P5	0.00000
359	P10	0.10000
359	P15	0.13333
359	P20	0.10000
359	P30	0.06667
359	P50	0.10000
359	P100	0.06000
359	P200	0.03500
359	P500	0.02000
359	P1000	0.01400
360	num_ret	1000.00000
360	num_unjug_ret@1	0.00000
360	num_unjug_ret@10	0.00000
360	num_unjug_ret@20	0.00000
360	num_unjug_ret@100	0.00000
360	num_unjug_ret@1000	487.00000
360	num_rel	151.00000
360	num_rel_ret	123.00000
360	map	0.57671
360	R-prec	0.65563
360	bpref	0.62098
360	recip_rank	1.00000
360	ndcg	0.80090
360	ndcg5	1.00000
360	ndcg10	0.85720
360	ndcg20	0.87149
360	ERR	0.17706
360	ERR10	0.14887
360	ERR20	0.16691
360	P1	1.00000
360	P5	1.00000
360	P10	0.80000
360	P15	0.80000
360	P20	0.85000
360	P30	0.90000
360	P50	0.78000
360	P100	0.72000
360	P200	0.55000
360	P500	0.23400
360	P1000	0.12300
361	num_ret	1000.00000
361	num_unjug_ret@1	0.00000
361	num_unjug_ret@10	0.00000
361	num_unjug_ret@20	0.00000
361	num_unjug_ret@100	0.00000
361	num_unjug_ret@1000	521.00000
361	num_rel	9.00000
361	num_rel_ret	7.00000
361	map	0.50946
361	R-prec	0.55556
361	bpref	0.50617
361	recip_rank	1.00000
361	ndcg	0.72659
361	ndcg5	0.63995
361	ndcg10	0.60557
361	ndcg20	0.72659
361	ERR	0.11492
361	ERR10	0.10850
361	ERR20	0.11492
361	P1	1.00000
361	P5	0.60000
361	P10	0.50000
361	P15	0.40000
361	P20	0.35000
361	P30	0.23333
361	P50	0.14000
361	P100	0.07000
361	P200	0.03500
361	P500	0.01400
361	P1000	0.00700
362	num_ret	1000.00000
362	num_unjug_ret@1	0.00000
362	num_unjug_ret@10	0.00000
362	num_unjug_ret@20	0.00000
362	num_unjug_ret@100	0.00000
362	num_unjug_ret@1000	369.00000
362	num_rel	39.00000
362	num_rel_ret	33.00000
362	map	0.26979
362	R-prec	0.30769
362	bpref	0.25049
362	recip_rank	1.00000
362	ndcg	0.67062
362	ndcg5	1.00000
362	ndcg10	0.71836
362	ndcg20	0.56784
362	ERR	0.15158
362	ERR10	0.13830
362	ERR20	0.14586
362	P1	1.00000
362	P5	1.00000
362	P10	0.60000
362	P15	0.46667
362	P20	0.45000
362	P30	0.33333
362	P50	0.24000
362	P100	0.17000
362	P200	0.10000
362	P500	0.05800
362	P1000	0.03300
363	num_ret	1000.00000
363	num_unjug_ret@1	0.00000
363	num_unjug_ret@10	0.00000
363	num_unjug_ret@20	0.00000
363	num_unjug_ret@100	0.00000
363	num_unjug_ret@1000	362.00000
363	num_rel	16.00000
363	num_rel_ret	15.00000
363	map	0.13503
363	R-prec	0.18750
363	bpref	0.13672
363	recip_rank	1.00000
363	ndcg	0.52803
363	ndcg5	0.47037
363	ndcg10	0.30523
363	ndcg20	0.27014
363	ERR	0.08213
363	ERR10	0.07422
363	ERR20	0.07844
363	P1	1.00000
363	P5	0.40000
363	P10	0.20000
363	P15	0.20000
363	P20	0.15000
363	P30	0.13333
363	P50	0.08000
363	P100	0.04000
363	P200	0.04000
363	P500	0.02800
363	P1000	0.01500
364	num_ret	1000.00000
364	num_unjug_ret@1	0.00000
364	num_unjug_ret@10	0.00000
364	num_unjug_ret@20	0.00000
364	num_unjug_ret@100	4.00000
364	num_unjug_ret@1000	756.00000
364	num_rel	35.00000
364	num_rel_ret	33.00000
364	map	0.50831
364	R-prec	0.48571
364	bpref	0.42939
364	recip_rank	1.00000
364	ndcg	0.81236
364	ndcg5	0.68435
364	ndcg10	0.65237
364	ndcg20	0.64054
364	ERR	0.14604
364	ERR10	0.12126
364	ERR20	0.13752
364	P1	1.00000
364	P5	0.60000
364	P10	0.60000
364	P15	0.73333
364	P20	0.60000
364	P30	0.50000
364	P50	0.40000
364	P100	0.33000
364	P200	0.16500
364	P500	0.06600
364	P1000	0.03300
365	num_ret	1000.00000
365	num_unjug_ret@1	0.00000
365	num_unjug_ret@10	0.00000
365	num_unjug_ret@20	0.00000
365	num_unjug_ret@100	0.00000
365	num_unjug_ret@1000	583.00000
365	num_rel	35.00000
365	num_rel_ret	35.00000
365	map	0.96470
365	R-prec	0.91429
365	bpref	0.96735
365	recip_rank	1.00000
365	ndcg	0.99269
365	ndcg5	1.00000
365	ndcg10	1.00000
365	ndcg20	0.96714
365	ERR	0.18214
365	ERR10	0.15886
365	ERR20	0.17516
365	P1	1.00000
365	P5	1.00000
365	P10	1.00000
365	P15	1.00000
365	P20	0.95000
365	P30	0.93333
365	P50	0.70000
365	P100	0.35000
365	P200	0.17500
365	P500	0.07000
365	P1000	0.03500
366	num_ret	1000.00000
366	num_unjug_ret@1	0.00000
366	num_unjug_ret@10	0.00000
366	num_unjug_ret@20	0.00000
366	num_unjug_ret@100	0.00000
366	num_unjug_ret@1000	607.00000
366	num_rel	99.00000
366	num_rel_ret	96.00000
366	map	0.51141
366	R-prec	0.51515
366	bpref	0.47842
366	recip_rank	1.00000
366	ndcg	0.84606
366	ndcg5	0.83042
366	ndcg10	0.81659
366	ndcg20	0.73833
366	ERR	0.15913
366	ERR10	0.13823
366	ERR20	0.15106
366	P1	1.00000
366	P5	0.80000
366	P10	0.80000
366	P15	0.73333
366	P20	0.70000
366	P30	0.53333
366	P50	0.42000
366	P100	0.52000
366	P200	0.44500
366	P500	0.19200
366	P1000	0.09600
367	num_ret	1000.00000
367	num_unjug_ret@1	0.00000
367	num_unjug_ret@10	0.00000
367	num_unjug_ret@20	0.00000
367	num_unjug_ret@100	0.00000
367	num_unjug_ret@1000	681.00000
367	num_rel	189.00000
367	num_rel_ret	71.00000
367	map	0.05128
367	R-prec	0.09524
367	bpref	0.05775
367	recip_rank	0.04762
367	ndcg	0.28310
367	ndcg5	0.00000
367	ndcg10	0.00000
367	ndcg20	0.00000
367	ERR	0.01593
367	ERR10	0.00000
367	ERR20	0.00000
367	P1	0.00000
367	P5	0.00000
367	P10	0.00000
367	P15	0.00000
367	P20	0.00000
367	P30	0.10000
367	P50	0.10000
367	P100	0.12000
367	P200	0.10000
367	P500	0.14200
367	P1000	0.07100
368	num_ret	1000.00000
368	num_unjug_ret@1	0.00000
368	num_unjug_ret@10	0.00000
368	num_unjug_ret@20	0.00000
368	num_unjug_ret@100	7.00000
368	num_unjug_ret@1000	649.00000
368	num_rel	61.00000
368	num_rel_ret	55.00000
368	map	0.62387
368	R-prec	0.63934
368	bpref	0.60575
368	recip_rank	1.00000
368	ndcg	0.84887
368	ndcg5	1.00000
368	ndcg10	1.00000
368	ndcg20	1.00000
368	ERR	0.18288
368	ERR10	0.15886
368	ERR20	0.17613
368	P1	1.00000
368	P5	1.00000
368	P10	1.00000
368	P15	1.00000
368	P20	1.00000
368	P30	0.93333
368	P50	0.72000
368	P100	0.39000
368	P200	0.20000
368	P500	0.08800
368	P1000	0.05500
369	num_ret	1000.00000
369	num_unjug_ret@1	0.00000
369	num_unjug_ret@10	0.00000
369	num_unjug_ret@20	0.00000
369	num_unjug_ret@100	16.00000
369	num_unjug_ret@1000	818.00000
369	num_rel	13.00000
369	num_rel_ret	12.00000
369	map	0.29255
369	R-prec	0.23077
369	bpref	0.21302
369	recip_rank	1.00000
369	ndcg	0.66597
369	ndcg5	0.55315
369	ndcg10	0.43735
369	ndcg20	0.37105
369	ERR	0.10913
369	ERR10	0.10095
369	ERR20	0.10095
369	P1	1.00000
369	P5	0.40000
369	P10	0.30000
369	P15	0.20000
369	P20	0.15000
369	P30	0.13333
369	P50	0.16000
369	P100	0.11000
369	P200	0.05500
369	P500	0.02400
369	P1000	0.01200
370	num_ret	1000.00000
370	num_unjug_ret@1	0.00000
370	num_unjug_ret@10	0.00000
370	num_unjug_ret@20	0.00000
370	num_unjug_ret@100	0.00000
370	num_unjug_ret@1000	346.00000
370	num_rel	336.00000
370	num_rel_ret	192.00000
370	map	0.15287
370	R-prec	0.33036
370	bpref	0.25423
370	recip_rank	0.14286
370	ndcg	0.46759
370	ndcg5	0.00000
370	ndcg10	0.07336
370	ndcg20	0.08697
370	ERR	0.02539
370	ERR10	0.00893
370	ERR20	0.01426
370	P1	0.00000
370	P5	0.00000
370	P10	0.10000
370	P15	0.13333
370	P20	0.10000
370	P30	0.10000
370	P50	0.10000
370	P100	0.09000
370	P200	0.30000
370	P500	0.28600
370	P1000	0.19200
371	num_ret	1000.00000
371	num_unjug_ret@1	0.00000
371	num_unjug_ret@10	0.00000
371	num_unjug_ret@20	0.00000
371	num_unjug_ret@100	0.00000
371	num_unjug_ret@1000	494.00000
371	num_rel	17.00000
371	num_rel_ret	5.00000
371	map	0.00348
371	R-prec	0.00000
371	bpref	0.00000
371	recip_rank	0.00787
371	ndcg	0.10121
371	ndcg5	0.00000
371	ndcg10	0.00000
371	ndcg20	0.00000
371	ERR	0.00148
371	ERR10	0.00000
371	ERR20	0.00000
371	P1	0.00000
371	P5	0.00000
371	P10	0.00000
371	P15	0.00000
371	P20	0.00000
371	P30	0.00000
371	P50	0.00000
371	P100	0.00000
371	P200	0.01500
371	P500	0.00600
371	P1000	0.00500
372	num_ret	1000.00000
372	num_unjug_ret@1	0.00000
372	num_unjug_ret@10	0.00000
372	num_unjug_ret@20	0.00000
372	num_unjug_ret@100	2.00000
372	num_unjug_ret@1000	646.00000
372	num_rel	49.00000
372	num_rel_ret	13.00000
372	map	0.00759
372	R-prec	0.04082
372	bpref	0.02416
372	recip_rank	0.12500
372	ndcg	0.13990
372	ndcg5	0.00000
372	ndcg10	0.06943
372	ndcg20	0.04481
372	ERR	0.01110
372	ERR10	0.00781
372	ERR20	0.00781
372	P1	0.00000
372	P5	0.00000
372	P10	0.10000
372	P15	0.06667
372	P20	0.05000
372	P30	0.03333
372	P50	0.04000
372	P100	0.03000
372	P200	0.02000
372	P500	0.01200
372	P1000	0.01300
373	num_ret	1000.00000
373	num_unjug_ret@1	0.00000
373	num_unjug_ret@10	0.00000
373	num_unjug_ret@20	0.00000
373	num_unjug_ret@100	0.00000
373	num_unjug_ret@1000	542.00000
373	num_rel	33.00000
373	num_rel_ret	28.00000
373	map	0.39165
373	R-prec	0.45455
373	bpref	0.39118
373	recip_rank	1.00000
373	ndcg	0.72970
373	ndcg5	0.83042
373	ndcg10	0.75297
373	ndcg20	0.63437
373	ERR	0.15188
373	ERR10	0.13425
373	ERR20	0.14540
373	P1	1.00000
373	P5	0.80000
373	P10	0.70000
373	P15	0.66667
373	P20	0.55000
373	P30	0.46667
373	P50	0.32000
373	P100	0.19000
373	P200	0.11500
373	P500	0.05200
373	P1000	0.02800
374	num_ret	1000.00000
374	num_unjug_ret@1	0.00000
374	num_unjug_ret@10	0.00000
374	num_unjug_ret@20	0.00000
374	num_unjug_ret@100	0.00000
374	num_unjug_ret@1000	388.00000
374	num_rel	204.00000
374	num_rel_ret	185.00000
374	map	0.28141
374	R-prec	0.28922
374	bpref	0.22950
374	recip_rank	0.50000
374	ndcg	0.72267
374	ndcg5	0.51477
374	ndcg10	0.40742
374	ndcg20	0.44611
374	ERR	0.09838
374	ERR10	0.06912
374	ERR20	0.08500
374	P1	0.00000
374	P5	0.60000
374	P10	0.40000
374	P15	0.46667
374	P20	0.45000
374	P30	0.53333
374	P50	0.40000
374	P100	0.37000
374	P200	0.29000
374	P500	0.27800
374	P1000	0.18500
375	num_ret	1000.00000
375	num_unjug_ret@1	0.00000
375	num_unjug_ret@10	0.00000
375	num_unjug_ret@20	0.00000
375	num_unjug_ret@100	0.00000
375	num_unjug_ret@1000	514.00000
375	num_rel	80.00000
375	num_rel_ret	49.00000
375	map	0.24576
375	R-prec	0.35000
375	bpref	0.27938
375	recip_rank	0.50000
375	ndcg	0.55012
375	ndcg5	0.66084
375	ndcg10	0.64422
375	ndcg20	0.52620
375	ERR	0.11284
375	ERR10	0.09357
375	ERR20	0.10194
375	P1	0.00000
375	P5	0.80000
375	P10	0.70000
375	P15	0.60000
375	P20	0.50000
375	P30	0.46667
375	P50	0.46000
375	P100	0.28000
375	P200	0.21000
375	P500	0.09200
375	P1000	0.04900
376	num_ret	1000.00000
376	num_unjug_ret@1	0.00000
376	num_unjug_ret@10	0.00000
376	num_unjug_ret@20	0.00000
376	num_unjug_ret@100	5.00000
376	num_unjug_ret@1000	502.00000
376	num_rel	102.00000
376	num_rel_ret	34.00000
376	map	0.13447
376	R-prec	0.20588
376	bpref	0.18676
376	recip_rank	1.00000
376	ndcg	0.36398
376	ndcg5	0.65481
376	ndcg10	0.63398
376	ndcg20	0.62499
376	ERR	0.13678
376	ERR10	0.11419
376	ERR20	0.12977
376	P1	1.00000
376	P5	0.60000
376	P10	0.60000
376	P15	0.60000
376	P20	0.60000
376	P30	0.53333
376	P50	0.38000
376	P100	0.21000
376	P200	0.12500
376	P500	0.06000
376	P1000	0.03400
377	num_ret	1000.00000
377	num_unjug_ret@1	0.00000
377	num_unjug_ret@10	0.00000
377	num_unjug_ret@20	0.00000
377	num_unjug_ret@100	0.00000
377	num_unjug_ret@1000	388.00000
377	num_rel	39.00000
377	num_rel_ret	38.00000
377	map	0.32351
377	R-prec	0.30769
377	bpref	0.24523
377	recip_rank	1.00000
377	ndcg	0.74424
377	ndcg5	0.68435
377	ndcg10	0.58689
377	ndcg20	0.52330
377	ERR	0.13561
377	ERR10	0.11618
377	ERR20	0.12800
377	P1	1.00000
377	P5	0.60000
377	P10	0.50000
377	P15	0.46667
377	P20	0.45000
377	P30	0.33333
377	P50	0.28000
377	P100	0.24000
377	P200	0.17500
377	P500	0.07400
377	P1000	0.03800
378	num_ret	1000.00000
378	num_unjug_ret@1	0.00000
378	num_unjug_ret@10	0.00000
378	num_unjug_ret@20	0.00000
378	num_unjug_ret@100	2.00000
378	num_unjug_ret@1000	360.00000
378	num_rel	98.00000
378	num_rel_ret	24.00000
378	map	0.00902
378	R-prec	0.02041
378	bpref	0.00729
378	recip_rank	0.01754
378	ndcg	0.14579
378	ndcg5	0.00000
378	ndcg10	0.00000
378	ndcg20	0.00000
378	ERR	0.00492
378	ERR10	0.00000
378	ERR20	0.00000
378	P1	0.00000
378	P5	0.00000
378	P10	0.00000
378	P15	0.00000
378	P20	0.00000
378	P30	0.00000
378	P50	0.00000
378	P100	0.02000
378	P200	0.04000
378	P500	0.03600
378	P1000	0.02400
379	num_ret	1000.00000
379	num_unjug_ret@1	0.00000
379	num_unjug_ret@10	0.00000
379	num_unjug_ret@20	0.00000
379	num_unjug_ret@100	5.00000
379	num_unjug_ret@1000	701.00000
379	num_rel	16.00000
379	num_rel_ret	5.00000
379	map	0.01803
379	R-prec	0.06250
379	bpref	0.04297
379	recip_rank	0.16667
379	ndcg	0.15467
379	ndcg5	0.00000
379	ndcg10	0.07840
379	ndcg20	0.05834
379	ERR	0.01293
379	ERR10	0.01042
379	ERR20	0.01042
379	P1	0.00000
379	P5	0.00000
379	P10	0.10000
379	P15	0.06667
379	P20	0.05000
379	P30	0.03333
379	P50	0.04000
379	P100	0.03000
379	P200	0.02000
379	P500	0.00800
379	P1000	0.00500
380	num_ret	1000.00000
380	num_unjug_ret@1	0.00000
380	num_unjug_ret@10	0.00000
380	num_unjug_ret@20	0.00000
380	num_unjug_ret@100	1.00000
380	num_unjug_ret@1000	412.00000
380	num_rel	7.00000
380	num_rel_ret	7.00000
380	map	0.08313
380	R-prec	0.00000
380	bpref	0.00000
380	recip_rank	0.11111
380	ndcg	0.37027
380	ndcg5	0.00000
380	ndcg10	0.08275
380	ndcg20	0.08275
380	ERR	0.01431
380	ERR10	0.00694
380	ERR20	0.00694
380	P1	0.00000
380	P5	0.00000
380	P10	0.10000
380	P15	0.06667
380	P20	0.05000
380	P30	0.13333
380	P50	0.08000
380	P100	0.06000
380	P200	0.03000
380	P500	0.01200
380	P1000	0.00700
381	num_ret	1000.00000
381	num_unjug_ret@1	0.00000
381	num_unjug_ret@10	0.00000
381	num_unjug_ret@20	0.00000
381	num_unjug_ret@100	2.00000
381	num_unjug_ret@1000	502.00000
381	num_rel	28.00000
381	num_rel_ret	8.00000
381	map	0.02422
381	R-prec	0.07143
381	bpref	0.05102
381	recip_rank	0.33333
381	ndcg	0.18104
381	ndcg5	0.16958
381	ndcg10	0.11005
381	ndcg20	0.10577
381	ERR	0.02708
381	ERR10	0.02083
381	ERR20	0.02450
381	P1	0.00000
381	P5	0.20000
381	P10	0.10000
381	P15	0.06667
381	P20	0.10000
381	P30	0.06667
381	P50	0.06000
381	P100	0.03000
381	P200	0.03000
381	P500	0.01600
381	P1000	0.00800
382	num_ret	1000.00000
382	num_unjug_ret@1	0.00000
382	num_unjug_ret@10	0.00000
382	num_unjug_ret@20	0.00000
382	num_unjug_ret@100	3.00000
382	num_unjug_ret@1000	596.00000
382	num_rel	22.00000
382	num_rel_ret	20.00000
382	map	0.25816
382	R-prec	0.36364
382	bpref	0.25620
382	recip_rank	0.25000
382	ndcg	0.58154
382	ndcg5	0.14607
382	ndcg10	0.30120
382	ndcg20	0.30538
382	ERR	0.05481
382	ERR10	0.03601
382	ERR20	0.04638
382	P1	0.00000
382	P5	0.20000
382	P10	0.40000
382	P15	0.40000
382	P20	0.35000
382	P30	0.30000
382	P50	0.28000
382	P100	0.16000
382	P200	0.08500
382	P500	0.03800
382	P1000	0.02000
383	num_ret	1000.00000
383	num_unjug_ret@1	0.00000
383	num_unjug_ret@10	0.00000
383	num_unjug_ret@20	0.00000
383	num_unjug_ret@100	2.00000
383	num_unjug_ret@1000	513.00000
383	num_rel	146.00000
383	num_rel_ret	30.00000
383	map	0.01432
383	R-prec	0.06164
383	bpref	0.04302
383	recip_rank	0.14286
383	ndcg	0.15490
383	ndcg5	0.00000
383	ndcg10	0.07336
383	ndcg20	0.08021
383	ERR	0.02115
383	ERR10	0.00893
383	ERR20	0.01201
383	P1	0.00000
383	P5	0.00000
383	P10	0.10000
383	P15	0.06667
383	P20	0.10000
383	P30	0.13333
383	P50	0.12000
383	P100	0.08000
383	P200	0.05000
383	P500	0.04800
383	P1000	0.03000
384	num_ret	1000.00000
384	num_unjug_ret@1	0.00000
384	num_unjug_ret@10	0.00000
384	num_unjug_ret@20	0.00000
384	num_unjug_ret@100	0.00000
384	num_unjug_ret@1000	511.00000
384	num_rel	51.00000
384	num_rel_ret	51.00000
384	map	0.23868
384	R-prec	0.23529
384	bpref	0.16801
384	recip_rank	0.50000
384	ndcg	0.67703
384	ndcg5	0.36005
384	ndcg10	0.37567
384	ndcg20	0.35040
384	ERR	0.07925
384	ERR10	0.06020
384	ERR20	0.06974
384	P1	0.00000
384	P5	0.40000
384	P10	0.40000
384	P15	0.40000
384	P20	0.35000
384	P30	0.26667
384	P50	0.22000
384	P100	0.23000
384	P200	0.19000
384	P500	0.10200
384	P1000	0.05100
385	num_ret	1000.00000
385	num_unjug_ret@1	0.00000
385	num_unjug_ret@10	0.00000
385	num_unjug_ret@20	0.00000
385	num_unjug_ret@100	0.00000
385	num_unjug_ret@1000	471.00000
385	num_rel	86.00000
385	num_rel_ret	73.00000
385	map	0.36739
385	R-prec	0.43023
385	bpref	0.38250
385	recip_rank	0.50000
385	ndcg	0.71501
385	ndcg5	0.66084
385	ndcg10	0.77991
385	ndcg20	0.68301
385	ERR	0.12311
385	ERR10	0.10278
385	ERR20	0.11373
385	P1	0.00000
385	P5	0.80000
385	P10	0.90000
385	P15	0.73333
385	P20	0.70000
385	P30	0.60000
385	P50	0.56000
385	P100	0.41000
385	P200	0.24000
385	P500	0.12600
385	P1000	0.07300
386	num_ret	1000.00000
386	num_unjug_ret@1	0.00000
386	num_unjug_ret@10	0.00000
386	num_unjug_ret@20	0.00000
386	num_unjug_ret@100	0.00000
386	num_unjug_ret@1000	468.00000
386	num_rel	19.00000
386	num_rel_ret	8.00000
386	map	0.02888
386	R-prec	0.10526
386	bpref	0.07479
386	recip_rank	0.20000
386	ndcg	0.21210
386	ndcg5	0.13121
386	ndcg10	0.15140
386	ndcg20	0.10097
386	ERR	0.02049
386	ERR10	0.01901
386	ERR20	0.01901
386	P1	0.00000
386	P5	0.20000
386	P10	0.20000
386	P15	0.13333
386	P20	0.10000
386	P30	0.06667
386	P50	0.04000
386	P100	0.03000
386	P200	0.02000
386	P500	0.01400
386	P1000	0.00800
387	num_ret	1000.00000
387	num_unjug_ret@1	0.00000
387	num_unjug_ret@10	0.00000
387	num_unjug_ret@20	0.00000
387	num_unjug_ret@100	0.00000
387	num_unjug_ret@1000	419.00000
387	num_rel	85.00000
387	num_rel_ret	72.00000
387	map	0.15096
387	R-prec	0.16471
387	bpref	0.11737
387	recip_rank	1.00000
387	ndcg	0.59790
387	ndcg5	0.50874
387	ndcg10	0.39376
387	ndcg20	0.35980
387	ERR	0.10665
387	ERR10	0.08752
387	ERR20	0.09709
387	P1	1.00000
387	P5	0.40000
387	P10	0.30000
387	P15	0.33333
387	P20	0.30000
387	P30	0.26667
387	P50	0.20000
387	P100	0.16000
387	P200	0.16000
387	P500	0.11400
387	P1000	0.07200
388	num_ret	1000.00000
388	num_unjug_ret@1	0.00000
388	num_unjug_ret@10	0.00000
388	num_unjug_ret@20	0.00000
388	num_unjug_ret@100	3.00000
388	num_unjug_ret@1000	501.00000
388	num_rel	51.00000
388	num_rel_ret	27.00000
388	map	0.03519
388	R-prec	0.07843
388	bpref	0.03460
388	recip_rank	0.06250
388	ndcg	0.29139
388	ndcg5	0.00000
388	ndcg10	0.00000
388	ndcg20	0.06819
388	ERR	0.01427
388	ERR10	0.00000
388	ERR20	0.00716
388	P1	0.00000
388	P5	0.00000
388	P10	0.00000
388	P15	0.00000
388	P20	0.10000
388	P30	0.06667
388	P50	0.08000
388	P100	0.09000
388	P200	0.07000
388	P500	0.04000
388	P1000	0.02700
389	num_ret	1000.00000
389	num_unjug_ret@1	0.00000
389	num_unjug_ret@10	0.00000
389	num_unjug_ret@20	0.00000
389	num_unjug_ret@100	8.00000
389	num_unjug_ret@1000	480.00000
389	num_rel	194.00000
389	num_rel_ret	27.00000
389	map	0.00623
389	R-prec	0.04124
389	bpref	0.02737
389	recip_rank	0.04545
389	ndcg	0.10370
389	ndcg5	0.00000
389	ndcg10	0.00000
389	ndcg20	0.00000
389	ERR	0.01035
389	ERR10	0.00000
389	ERR20	0.00000
389	P1	0.00000
389	P5	0.00000
389	P10	0.00000
389	P15	0.00000
389	P20	0.00000
389	P30	0.06667
389	P50	0.10000
389	P100	0.05000
389	P200	0.04000
389	P500	0.03800
389	P1000	0.02700
390	num_ret	1000.00000
390	num_unjug_ret@1	0.00000
390	num_unjug_ret@10	0.00000
390	num_unjug_ret@20	0.00000
390	num_unjug_ret@100	1.00000
390	num_unjug_ret@1000	427.00000
390	num_rel	134.00000
390	num_rel_ret	77.00000
390	map	0.19806
390	R-prec	0.22388
390	bpref	0.18373
390	recip_rank	1.00000
390	ndcg	0.53428
390	ndcg5	1.00000
390	ndcg10	1.00000
390	ndcg20	0.86174
390	ERR	0.17474
390	ERR10	0.15886
390	ERR20	0.17079
390	P1	1.00000
390	P5	1.00000
390	P10	1.00000
390	P15	0.93333
390	P20	0.80000
390	P30	0.53333
390	P50	0.40000
390	P100	0.25000
390	P200	0.18000
390	P500	0.12200
390	P1000	0.07700
391	num_ret	1000.00000
391	num_unjug_ret@1	0.00000
391	num_unjug_ret@10	2.00000
391	num_unjug_ret@20	6.00000
391	num_unjug_ret@100	34.00000
391	num_unjug_ret@1000	461.00000
391	num_rel	178.00000
391	num_rel_ret	53.00000
391	map	0.02410
391	R-prec	0.08989
391	bpref	0.07988
391	recip_rank	0.04348
391	ndcg	0.21205
391	ndcg5	0.00000
391	ndcg10	0.00000
391	ndcg20	0.00000
391	ERR	0.01087
391	ERR10	0.00000
391	ERR20	0.00000
391	P1	0.00000
391	P5	0.00000
391	P10	0.00000
391	P15	0.00000
391	P20	0.00000
391	P30	0.06667
391	P50	0.04000
391	P100	0.05000
391	P200	0.09000
391	P500	0.08000
391	P1000	0.05300
392	num_ret	1000.00000
392	num_unjug_ret@1	0.00000
392	num_unjug_ret@10	0.00000
392	num_unjug_ret@20	0.00000
392	num_unjug_ret@100	0.00000
392	num_unjug_ret@1000	525.00000
392	num_rel	105.00000
392	num_rel_ret	103.00000
392	map	0.48461
392	R-prec	0.45714
392	bpref	0.43510
392	recip_rank	1.00000
392	ndcg	0.85496
392	ndcg5	1.00000
392	ndcg10	0.93638
392	ndcg20	0.77708
392	ERR	0.17506
392	ERR10	0.15536
392	ERR20	0.16502
392	P1	1.00000
392	P5	1.00000
392	P10	0.90000
392	P15	0.73333
392	P20	0.70000
392	P30	0.66667
392	P50	0.56000
392	P100	0.47000
392	P200	0.37000
392	P500	0.19600
392	P1000	0.10300
393	num_ret	1000.00000
393	num_unjug_ret@1	0.00000
393	num_unjug_ret@10	0.00000
393	num_unjug_ret@20	0.00000
393	num_unjug_ret@100	0.00000
393	num_unjug_ret@1000	558.00000
393	num_rel	71.00000
393	num_rel_ret	14.00000
393	map	0.17455
393	R-prec	0.18310
393	bpref	0.18032
393	recip_rank	1.00000
393	ndcg	0.33002
393	ndcg5	1.00000
393	ndcg10	1.00000
393	ndcg20	0.71905
393	ERR	0.16514
393	ERR10	0.15886
393	ERR20	0.16364
393	P1	1.00000
393	P5	1.00000
393	P10	1.00000
393	P15	0.73333
393	P20	0.60000
393	P30	0.43333
393	P50	0.26000
393	P100	0.13000
393	P200	0.07000
393	P500	0.02800
393	P1000	0.01400
394	num_ret	1000.00000
394	num_unjug_ret@1	0.00000
394	num_unjug_ret@10	0.00000
394	num_unjug_ret@20	0.00000
394	num_unjug_ret@100	2.00000
394	num_unjug_ret@1000	488.00000
394	num_rel	17.00000
394	num_rel_ret	7.00000
394	map	0.14987
394	R-prec	0.17647
394	bpref	0.15225
394	recip_rank	1.00000
394	ndcg	0.39662
394	ndcg5	0.55315
394	ndcg10	0.42257
394	ndcg20	0.30256
394	ERR	0.10011
394	ERR10	0.09729
394	ERR20	0.09729
394	P1	1.00000
394	P5	0.40000
394	P10	0.30000
394	P15	0.20000
394	P20	0.15000
394	P30	0.13333
394	P50	0.08000
394	P100	0.05000
394	P200	0.02500
394	P500	0.01200
394	P1000	0.00700
395	num_ret	1000.00000
395	num_unjug_ret@1	0.00000
395	num_unjug_ret@10	0.00000
395	num_unjug_ret@20	0.00000
395	num_unjug_ret@100	1.00000
395	num_unjug_ret@1000	456.00000
395	num_rel	213.00000
395	num_rel_ret	133.00000
395	map	0.15810
395	R-prec	0.27230
395	bpref	0.18980
395	recip_rank	0.33333
395	ndcg	0.50978
395	ndcg5	0.16958
395	ndcg10	0.31646
395	ndcg20	0.41217
395	ERR	0.06564
395	ERR10	0.04122
395	ERR20	0.05686
395	P1	0.00000
395	P5	0.20000
395	P10	0.40000
395	P15	0.40000
395	P20	0.50000
395	P30	0.40000
395	P50	0.28000
395	P100	0.28000
395	P200	0.27000
395	P500	0.20400
395	P1000	0.13300
396	num_ret	1000.00000
396	num_unjug_ret@1	0.00000
396	num_unjug_ret@10	0.00000
396	num_unjug_ret@20	0.00000
396	num_unjug_ret@100	3.00000
396	num_unjug_ret@1000	572.00000
396	num_rel	59.00000
396	num_rel_ret	34.00000
396	map	0.38480
396	R-prec	0.38983
396	bpref	0.38006
396	recip_rank	1.00000
396	ndcg	0.61361
396	ndcg5	1.00000
396	ndcg10	1.00000
396	ndcg20	1.00000
396	ERR	0.17791
396	ERR10	0.15886
396	ERR20	0.17613
396	P1	1.00000
396	P5	1.00000
396	P10	1.00000
396	P15	1.00000
396	P20	1.00000
396	P30	0.70000
396	P50	0.46000
396	P100	0.24000
396	P200	0.12000
396	P500	0.05400
396	P1000	0.03400
397	num_ret	1000.00000
397	num_unjug_ret@1	0.00000
397	num_unjug_ret@10	0.00000
397	num_unjug_ret@20	0.00000
397	num_unjug_ret@100	0.00000
397	num_unjug_ret@1000	346.00000
397	num_rel	27.00000
397	num_rel_ret	16.00000
397	map	0.03427
397	R-prec	0.07407
397	bpref	0.06584
397	recip_rank	0.25000
397	ndcg	0.28314
397	ndcg5	0.27727
397	ndcg10	0.17993
397	ndcg20	0.11612
397	ERR	0.02883
397	ERR10	0.02734
397	ERR20	0.02734
397	P1	0.00000
397	P5	0.40000
397	P10	0.20000
397	P15	0.13333
397	P20	0.10000
397	P30	0.06667
397	P50	0.04000
397	P100	0.02000
397	P200	0.01500
397	P500	0.02000
397	P1000	0.01600
398	num_ret	1000.00000
398	num_unjug_ret@1	0.00000
398	num_unjug_ret@10	0.00000
398	num_unjug_ret@20	0.00000
398	num_unjug_ret@100	1.00000
398	num_unjug_ret@1000	525.00000
398	num_rel	145.00000
398	num_rel_ret	35.00000
398	map	0.01033
398	R-prec	0.04138
398	bpref	0.02378
398	recip_rank	0.08333
398	ndcg	0.15936
398	ndcg5	0.00000
398	ndcg10	0.00000
398	ndcg20	0.07072
398	ERR	0.01232
398	ERR10	0.00000
398	ERR20	0.00814
398	P1	0.00000
398	P5	0.00000
398	P10	0.00000
398	P15	0.06667
398	P20	0.10000
398	P30	0.06667
398	P50	0.06000
398	P100	0.04000
398	P200	0.03500
398	P500	0.03400
398	P1000	0.03500
399	num_ret	1000.00000
399	num_unjug_ret@1	0.00000
399	num_unjug_ret@10	0.00000
399	num_unjug_ret@20	0.00000
399	num_unjug_ret@100	0.00000
399	num_unjug_ret@1000	393.00000
399	num_rel	102.00000
399	num_rel_ret	46.00000
399	map	0.09969
399	R-prec	0.21569
399	bpref	0.17157
399	recip_rank	0.09091
399	ndcg	0.35435
399	ndcg5	0.00000
399	ndcg10	0.00000
399	ndcg20	0.17969
399	ERR	0.03519
399	ERR10	0.00000
399	ERR20	0.01956
399	P1	0.00000
399	P5	0.00000
399	P10	0.00000
399	P15	0.20000
399	P20	0.25000
399	P30	0.33333
399	P50	0.34000
399	P100	0.22000
399	P200	0.15500
399	P500	0.08400
399	P1000	0.04600
400	num_ret	1000.00000
400	num_unjug_ret@1	0.00000
400	num_unjug_ret@10	0.00000
400	num_unjug_ret@20	0.00000
400	num_unjug_ret@100	0.00000
400	num_unjug_ret@1000	522.00000
400	num_rel	125.00000
400	num_rel_ret	108.00000
400	map	0.41441
400	R-prec	0.48800
400	bpref	0.40416
400	recip_rank	1.00000
400	ndcg	0.77629
400	ndcg5	1.00000
400	ndcg10	1.00000
400	ndcg20	0.85872
400	ERR	0.17824
400	ERR10	0.15886
400	ERR20	0.17050
400	P1	1.00000
400	P5	1.00000
400	P10	1.00000
400	P15	0.86667
400	P20	0.80000
400	P30	0.63333
400	P50	0.56000
400	P100	0.47000
400	P200	0.36500
400	P500	0.18600
400	P1000	0.10800
401	num_ret	1000.00000
401	num_unjug_ret@1	0.00000
401	num_unjug_ret@10	1.00000
401	num_unjug_ret@20	1.00000
401	num_unjug_ret@100	5.00000
401	num_unjug_ret@1000	458.00000
401	num_rel	300.00000
401	num_rel_ret	53.00000
401	map	0.01152
401	R-prec	0.06000
401	bpref	0.04398
401	recip_rank	0.10000
401	ndcg	0.14060
401	ndcg5	0.00000
401	ndcg10	0.06362
401	ndcg20	0.07392
401	ERR	0.01669
401	ERR10	0.00625
401	ERR20	0.00933
401	P1	0.00000
401	P5	0.00000
401	P10	0.10000
401	P15	0.06667
401	P20	0.10000
401	P30	0.06667
401	P50	0.04000
401	P100	0.10000
401	P200	0.07500
401	P500	0.05000
401	P1000	0.05300
402	num_ret	1000.00000
402	num_unjug_ret@1	0.00000
402	num_unjug_ret@10	0.00000
402	num_unjug_ret@20	0.00000
402	num_unjug_ret@100	11.00000
402	num_unjug_ret@1000	668.00000
402	num_rel	80.00000
402	num_rel_ret	35.00000
402	map	0.06765
402	R-prec	0.12500
402	bpref	0.08438
402	recip_rank	1.00000
402	ndcg	0.35431
402	ndcg5	0.55315
402	ndcg10	0.43232
402	ndcg20	0.27900
402	ERR	0.10977
402	ERR10	0.09964
402	ERR20	0.09964
402	P1	1.00000
402	P5	0.40000
402	P10	0.30000
402	P15	0.20000
402	P20	0.15000
402	P30	0.20000
402	P50	0.12000
402	P100	0.11000
402	P200	0.08000
402	P500	0.06200
402	P1000	0.03500
403	num_ret	1000.00000
403	num_unjug_ret@1	0.00000
403	num_unjug_ret@10	0.00000
403	num_unjug_ret@20	0.00000
403	num_unjug_ret@100	2.00000
403	num_unjug_ret@1000	804.00000
403	num_rel	21.00000
403	num_rel_ret	21.00000
403	map	0.85882
403	R-prec	0.71429
403	bpref	0.82993
403	recip_rank	1.00000
403	ndcg	0.96483
403	ndcg5	1.00000
403	ndcg10	0.93638
403	ndcg20	0.82332
403	ERR	0.17289
403	ERR10	0.15536
403	ERR20	0.16865
403	P1	1.00000
403	P5	1.00000
403	P10	0.90000
403	P15	0.86667
403	P20	0.75000
403	P30	0.66667
403	P50	0.40000
403	P100	0.21000
403	P200	0.10500
403	P500	0.04200
403	P1000	0.02100
404	num_ret	1000.00000
404	num_unjug_ret@1	0.00000
404	num_unjug_ret@10	0.00000
404	num_unjug_ret@20	0.00000
404	num_unjug_ret@100	0.00000
404	num_unjug_ret@1000	401.00000
404	num_rel	142.00000
404	num_rel_ret	119.00000
404	map	0.18294
404	R-prec	0.23239
404	bpref	0.16465
404	recip_rank	0.33333
404	ndcg	0.61102
404	ndcg5	0.16958
404	ndcg10	0.25284
404	ndcg20	0.26865
404	ERR	0.05819
404	ERR10	0.03607
404	ERR20	0.04564
404	P1	0.00000
404	P5	0.20000
404	P10	0.30000
404	P15	0.26667
404	P20	0.30000
404	P30	0.30000
404	P50	0.32000
404	P100	0.26000
404	P200	0.22000
404	P500	0.18400
404	P1000	0.11900
405	num_ret	1000.00000
405	num_unjug_ret@1	0.00000
405	num_unjug_ret@10	0.00000
405	num_unjug_ret@20	0.00000
405	num_unjug_ret@100	2.00000
405	num_unjug_ret@1000	713.00000
405	num_rel	38.00000
405	num_rel_ret	14.00000
405	map	0.07522
405	R-prec	0.21053
405	bpref	0.14751
405	recip_rank	0.25000
405	ndcg	0.28573
405	ndcg5	0.14607
405	ndcg10	0.30120
405	ndcg20	0.22673
405	ERR	0.04504
405	ERR10	0.03601
405	ERR20	0.03843
405	P1	0.00000
405	P5	0.20000
405	P10	0.40000
405	P15	0.26667
405	P20	0.25000
405	P30	0.26667
405	P50	0.16000
405	P100	0.10000
405	P200	0.06000
405	P500	0.02600
405	P1000	0.01400
406	num_ret	1000.00000
406	num_unjug_ret@1	0.00000
406	num_unjug_ret@10	0.00000
406	num_unjug_ret@20	0.00000
406	num_unjug_ret@100	0.00000
406	num_unjug_ret@1000	560.00000
406	num_rel	13.00000
406	num_rel_ret	13.00000
406	map	0.53089
406	R-prec	0.53846
406	bpref	0.48521
406	recip_rank	0.50000
406	ndcg	0.76467
406	ndcg5	0.66084
406	ndcg10	0.64422
406	ndcg20	0.54656
406	ERR	0.09985
406	ERR10	0.09357
406	ERR20	0.09357
406	P1	0.00000
406	P5	0.80000
406	P10	0.70000
406	P15	0.46667
406	P20	0.35000
406	P30	0.30000
406	P50	0.26000
406	P100	0.13000
406	P200	0.06500
406	P500	0.02600
406	P1000	0.01300
407	num_ret	1000.00000
407	num_unjug_ret@1	0.00000
407	num_unjug_ret@10	0.00000
407	num_unjug_ret@20	0.00000
407	num_unjug_ret@100	0.00000
407	num_unjug_ret@1000	418.00000
407	num_rel	68.00000
407	num_rel_ret	51.00000
407	map	0.34227
407	R-prec	0.39706
407	bpref	0.35489
407	recip_rank	1.00000
407	ndcg	0.68000
407	ndcg5	1.00000
407	ndcg10	0.85798
407	ndcg20	0.76542
407	ERR	0.17007
407	ERR10	0.14883
407	ERR20	0.16177
407	P1	1.00000
407	P5	1.00000
407	P10	0.80000
407	P15	0.73333
407	P20	0.70000
407	P30	0.66667
407	P50	0.54000
407	P100	0.28000
407	P200	0.17000
407	P500	0.08400
407	P1000	0.05100
408	num_ret	1000.00000
408	num_unjug_ret@1	0.00000
408	num_unjug_ret@10	0.00000
408	num_unjug_ret@20	0.00000
408	num_unjug_ret@100	0.00000
408	num_unjug_ret@1000	591.00000
408	num_rel	118.00000
408	num_rel_ret	66.00000
408	map	0.16510
408	R-prec	0.33051
408	bpref	0.24303
408	recip_rank	1.00000
408	ndcg	0.48800
408	ndcg5	0.55315
408	ndcg10	0.42257
408	ndcg20	0.33964
408	ERR	0.12044
408	ERR10	0.09729
408	ERR20	0.10286
408	P1	1.00000
408	P5	0.40000
408	P10	0.30000
408	P15	0.20000
408	P20	0.25000
408	P30	0.33333
408	P50	0.32000
408	P100	0.39000
408	P200	0.21000
408	P500	0.10800
408	P1000	0.06600
409	num_ret	1000.00000
409	num_unjug_ret@1	0.00000
409	num_unjug_ret@10	0.00000
409	num_unjug_ret@20	0.00000
409	num_unjug_ret@100	0.00000
409	num_unjug_ret@1000	626.00000
409	num_rel	22.00000
409	num_rel_ret	18.00000
409	map	0.13805
409	R-prec	0.18182
409	bpref	0.11364
409	recip_rank	1.00000
409	ndcg	0.51576
409	ndcg5	0.33916
409	ndcg10	0.28635
409	ndcg20	0.25110
409	ERR	0.08215
409	ERR10	0.06901
409	ERR20	0.07477
409	P1	1.00000
409	P5	0.20000
409	P10	0.20000
409	P15	0.13333
409	P20	0.20000
409	P30	0.20000
409	P50	0.16000
409	P100	0.10000
409	P200	0.05500
409	P500	0.03400
409	P1000	0.01800
410	num_ret	1000.00000
410	num_unjug_ret@1	0.00000
410	num_unjug_ret@10	0.00000
410	num_unjug_ret@20	0.00000
410	num_unjug_ret@100	3.00000
410	num_unjug_ret@1000	810.00000
410	num_rel	65.00000
410	num_rel_ret	63.00000
410	map	0.80395
410	R-prec	0.80000
410	bpref	0.84521
410	recip_rank	1.00000
410	ndcg	0.93501
410	ndcg5	1.00000
410	ndcg10	0.86038
410	ndcg20	0.84359
410	ERR	0.17758
410	ERR10	0.14946
410	ERR20	0.16677
410	P1	1.00000
410	P5	1.00000
410	P10	0.80000
410	P15	0.86667
410	P20	0.80000
410	P30	0.86667
410	P50	0.84000
410	P100	0.62000
410	P200	0.31000
410	P500	0.12400
410	P1000	0.06300
411	num_ret	1000.00000
411	num_unjug_ret@1	0.00000
411	num_unjug_ret@10	0.00000
411	num_unjug_ret@20	0.00000
411	num_unjug_ret@100	2.00000
411	num_unjug_ret@1000	556.00000
411	num_rel	27.00000
411	num_rel_ret	17.00000
411	map	0.24130
411	R-prec	0.33333
411	bpref	0.27984
411	recip_rank	1.00000
411	ndcg	0.55658
411	ndcg5	0.55315
411	ndcg10	0.56219
411	ndcg20	0.47813
411	ERR	0.12517
411	ERR10	0.11019
411	ERR20	0.12091
411	P1	1.00000
411	P5	0.40000
411	P10	0.50000
411	P15	0.53333
411	P20	0.40000
411	P30	0.30000
411	P50	0.20000
411	P100	0.12000
411	P200	0.08000
411	P500	0.03400
411	P1000	0.01700
412	num_ret	1000.00000
412	num_unjug_ret@1	0.00000
412	num_unjug_ret@10	0.00000
412	num_unjug_ret@20	0.00000
412	num_unjug_ret@100	0.00000
412	num_unjug_ret@1000	375.00000
412	num_rel	123.00000
412	num_rel_ret	87.00000
412	map	0.26556
412	R-prec	0.39024
412	bpref	0.31463
412	recip_rank	0.33333
412	ndcg	0.59825
412	ndcg5	0.30079
412	ndcg10	0.48264
412	ndcg20	0.49866
412	ERR	0.08522
412	ERR10	0.06013
412	ERR20	0.07485
412	P1	0.00000
412	P5	0.40000
412	P10	0.60000
412	P15	0.73333
412	P20	0.55000
412	P30	0.43333
412	P50	0.46000
412	P100	0.43000
412	P200	0.30000
412	P500	0.15400
412	P1000	0.08700
413	num_ret	1000.00000
413	num_unjug_ret@1	0.00000
413	num_unjug_ret@10	0.00000
413	num_unjug_ret@20	0.00000
413	num_unjug_ret@100	3.00000
413	num_unjug_ret@1000	383.00000
413	num_rel	69.00000
413	num_rel_ret	49.00000
413	map	0.07794
413	R-prec	0.13043
413	bpref	0.08276
413	recip_rank	0.16667
413	ndcg	0.43742
413	ndcg5	0.00000
413	ndcg10	0.21408
413	ndcg20	0.21329
413	ERR	0.03785
413	ERR10	0.02384
413	ERR20	0.03174
413	P1	0.00000
413	P5	0.00000
413	P10	0.30000
413	P15	0.33333
413	P20	0.25000
413	P30	0.16667
413	P50	0.12000
413	P100	0.12000
413	P200	0.10000
413	P500	0.07000
413	P1000	0.04900
414	num_ret	1000.00000
414	num_unjug_ret@1	0.00000
414	num_unjug_ret@10	0.00000
414	num_unjug_ret@20	0.00000
414	num_unjug_ret@100	0.00000
414	num_unjug_ret@1000	504.00000
414	num_rel	39.00000
414	num_rel_ret	39.00000
414	map	0.32983
414	R-prec	0.41026
414	bpref	0.32873
414	recip_rank	1.00000
414	ndcg	0.74847
414	ndcg5	0.65481
414	ndcg10	0.56191
414	ndcg20	0.50015
414	ERR	0.12865
414	ERR10	0.10795
414	ERR20	0.11804
414	P1	1.00000
414	P5	0.60000
414	P10	0.50000
414	P15	0.40000
414	P20	0.45000
414	P30	0.43333
414	P50	0.36000
414	P100	0.22000
414	P200	0.15500
414	P500	0.07400
414	P1000	0.03900
415	num_ret	1000.00000
415	num_unjug_ret@1	0.00000
415	num_unjug_ret@10	0.00000
415	num_unjug_ret@20	0.00000
415	num_unjug_ret@100	0.00000
415	num_unjug_ret@1000	632.00000
415	num_rel	136.00000
415	num_rel_ret	71.00000
415	map	0.28635
415	R-prec	0.38235
415	bpref	0.31958
415	recip_rank	1.00000
415	ndcg	0.55204
415	ndcg5	1.00000
415	ndcg10	1.00000
415	ndcg20	0.92199
415	ERR	0.17926
415	ERR10	0.15886
415	ERR20	0.17220
415	P1	1.00000
415	P5	1.00000
415	P10	1.00000
415	P15	0.86667
415	P20	0.90000
415	P30	0.80000
415	P50	0.58000
415	P100	0.47000
415	P200	0.26000
415	P500	0.13400
415	P1000	0.07100
416	num_ret	1000.00000
416	num_unjug_ret@1	0.00000
416	num_unjug_ret@10	0.00000
416	num_unjug_ret@20	0.00000
416	num_unjug_ret@100	0.00000
416	num_unjug_ret@1000	709.00000
416	num_rel	42.00000
416	num_rel_ret	41.00000
416	map	0.37329
416	R-prec	0.38095
416	bpref	0.33447
416	recip_rank	1.00000
416	ndcg	0.75263
416	ndcg5	0.47037
416	ndcg10	0.45306
416	ndcg20	0.53699
416	ERR	0.11717
416	ERR10	0.08981
416	ERR20	0.10818
416	P1	1.00000
416	P5	0.40000
416	P10	0.40000
416	P15	0.46667
416	P20	0.55000
416	P30	0.53333
416	P50	0.36000
416	P100	0.30000
416	P200	0.20500
416	P500	0.08200
416	P1000	0.04100
417	num_ret	1000.00000
417	num_unjug_ret@1	0.00000
417	num_unjug_ret@10	0.00000
417	num_unjug_ret@20	0.00000
417	num_unjug_ret@100	0.00000
417	num_unjug_ret@1000	532.00000
417	num_rel	75.00000
417	num_rel_ret	60.00000
417	map	0.40312
417	R-prec	0.45333
417	bpref	0.40320
417	recip_rank	1.00000
417	ndcg	0.73121
417	ndcg5	0.86879
417	ndcg10	0.76309
417	ndcg20	0.78133
417	ERR	0.16525
417	ERR10	0.13829
417	ERR20	0.15682
417	P1	1.00000
417	P5	0.80000
417	P10	0.70000
417	P15	0.80000
417	P20	0.75000
417	P30	0.63333
417	P50	0.56000
417	P100	0.39000
417	P200	0.23500
417	P500	0.11400
417	P1000	0.06000
418	num_ret	1000.00000
418	num_unjug_ret@1	0.00000
418	num_unjug_ret@10	0.00000
418	num_unjug_ret@20	0.00000
418	num_unjug_ret@100	1.00000
418	num_unjug_ret@1000	706.00000
418	num_rel	116.00000
418	num_rel_ret	50.00000
418	map	0.12862
418	R-prec	0.23276
418	bpref	0.14009
418	recip_rank	1.00000
418	ndcg	0.41571
418	ndcg5	0.86879
418	ndcg10	0.62741
418	ndcg20	0.51203
418	ERR	0.14357
418	ERR10	0.12781
418	ERR20	0.13663
418	P1	1.00000
418	P5	0.80000
418	P10	0.50000
418	P15	0.40000
418	P20	0.40000
418	P30	0.26667
418	P50	0.18000
418	P100	0.20000
418	P200	0.22500
418	P500	0.10000
418	P1000	0.05000
419	num_ret	1000.00000
419	num_unjug_ret@1	0.00000
419	num_unjug_ret@10	0.00000
419	num_unjug_ret@20	0.00000
419	num_unjug_ret@100	1.00000
419	num_unjug_ret@1000	451.00000
419	num_rel	16.00000
419	num_rel_ret	10.00000
419	map	0.09228
419	R-prec	0.18750
419	bpref	0.14063
419	recip_rank	0.50000
419	ndcg	0.36388
419	ndcg5	0.21399
419	ndcg10	0.21223
419	ndcg20	0.24216
419	ERR	0.04896
419	ERR10	0.03962
419	ERR20	0.04748
419	P1	0.00000
419	P5	0.20000
419	P10	0.20000
419	P15	0.20000
419	P20	0.20000
419	P30	0.13333
419	P50	0.08000
419	P100	0.06000
419	P200	0.03000
419	P500	0.01200
419	P1000	0.01000
420	num_ret	1000.00000
420	num_unjug_ret@1	0.00000
420	num_unjug_ret@10	0.00000
420	num_unjug_ret@20	0.00000
420	num_unjug_ret@100	0.00000
420	num_unjug_ret@1000	469.00000
420	num_rel	33.00000
420	num_rel_ret	32.00000
420	map	0.43675
420	R-prec	0.39394
420	bpref	0.38292
420	recip_rank	1.00000
420	ndcg	0.79785
420	ndcg5	1.00000
420	ndcg10	0.86038
420	ndcg20	0.74168
420	ERR	0.16501
420	ERR10	0.14946
420	ERR20	0.16229
420	P1	1.00000
420	P5	1.00000
420	P10	0.80000
420	P15	0.80000
420	P20	0.65000
420	P30	0.43333
420	P50	0.28000
420	P100	0.18000
420	P200	0.11500
420	P500	0.05800
420	P1000	0.03200
421	num_ret	1000.00000
421	num_unjug_ret@1	0.00000
421	num_unjug_ret@10	0.00000
421	num_unjug_ret@20	0.00000
421	num_unjug_ret@100	0.00000
421	num_unjug_ret@1000	301.00000
421	num_rel	83.00000
421	num_rel_ret	50.00000
421	map	0.05321
421	R-prec	0.12048
421	bpref	0.07563
421	recip_rank	0.10000
421	ndcg	0.36867
421	ndcg5	0.00000
421	ndcg10	0.06362
421	ndcg20	0.07837
421	ERR	0.02329
421	ERR10	0.00625
421	ERR20	0.01076
421	P1	0.00000
421	P5	0.00000
421	P10	0.10000
421	P15	0.13333
421	P20	0.10000
421	P30	0.16667
421	P50	0.14000
421	P100	0.11000
421	P200	0.08500
421	P500	0.06600
421	P1000	0.05000
422	num_ret	1000.00000
422	num_unjug_ret@1	0.00000
422	num_unjug_ret@10	0.00000
422	num_unjug_ret@20	0.00000
422	num_unjug_ret@100	0.00000
422	num_unjug_ret@1000	539.00000
422	num_rel	152.00000
422	num_rel_ret	108.00000
422	map	0.32284
422	R-prec	0.44079
422	bpref	0.37799
422	recip_rank	0.50000
422	ndcg	0.63924
422	ndcg5	0.66084
422	ndcg10	0.56582
422	ndcg20	0.57215
422	ERR	0.11261
422	ERR10	0.08624
422	ERR20	0.09975
422	P1	0.00000
422	P5	0.80000
422	P10	0.60000
422	P15	0.53333
422	P20	0.60000
422	P30	0.63333
422	P50	0.60000
422	P100	0.50000
422	P200	0.38500
422	P500	0.18800
422	P1000	0.10800
423	num_ret	1000.00000
423	num_unjug_ret@1	0.00000
423	num_unjug_ret@10	0.00000
423	num_unjug_ret@20	0.00000
423	num_unjug_ret@100	0.00000
423	num_unjug_ret@1000	523.00000
423	num_rel	21.00000
423	num_rel_ret	19.00000
423	map	0.64667
423	R-prec	0.61905
423	bpref	0.62812
423	recip_rank	1.00000
423	ndcg	0.85501
423	ndcg5	0.86879
423	ndcg10	0.91486
423	ndcg20	0.73653
423	ERR	0.16335
423	ERR10	0.15095
423	ERR20	0.16027
423	P1	1.00000
423	P5	0.80000
423	P10	0.90000
423	P15	0.80000
423	P20	0.65000
423	P30	0.50000
423	P50	0.32000
423	P100	0.17000
423	P200	0.08500
423	P500	0.03800
423	P1000	0.01900
424	num_ret	1000.00000
424	num_unjug_ret@1	0.00000
424	num_unjug_ret@10	0.00000
424	num_unjug_ret@20	0.00000
424	num_unjug_ret@100	2.00000
424	num_unjug_ret@1000	445.00000
424	num_rel	171.00000
424	num_rel_ret	125.00000
424	map	0.15891
424	R-prec	0.25146
424	bpref	0.18816
424	recip_rank	0.25000
424	ndcg	0.55111
424	ndcg5	0.14607
424	ndcg10	0.17319
424	ndcg20	0.21832
424	ERR	0.05139
424	ERR10	0.02539
424	ERR20	0.03595
424	P1	0.00000
424	P5	0.20000
424	P10	0.20000
424	P15	0.20000
424	P20	0.25000
424	P30	0.26667
424	P50	0.34000
424	P100	0.31000
424	P200	0.22000
424	P500	0.17200
424	P1000	0.12500
425	num_ret	1000.00000
425	num_unjug_ret@1	0.00000
425	num_unjug_ret@10	0.00000
425	num_unjug_ret@20	0.00000
425	num_unjug_ret@100	0.00000
425	num_unjug_ret@1000	551.00000
425	num_rel	162.00000
425	num_rel_ret	139.00000
425	map	0.55907
425	R-prec	0.53086
425	bpref	0.52740
425	recip_rank	1.00000
425	ndcg	0.82478
425	ndcg5	1.00000
425	ndcg10	1.00000
425	ndcg20	0.96269
425	ERR	0.18319
425	ERR10	0.15886
425	ERR20	0.17455
425	P1	1.00000
425	P5	1.00000
425	P10	1.00000
425	P15	0.93333
425	P20	0.95000
425	P30	0.93333
425	P50	0.80000
425	P100	0.66000
425	P200	0.47000
425	P500	0.26400
425	P1000	0.13900
426	num_ret	1000.00000
426	num_unjug_ret@1	0.00000
426	num_unjug_ret@10	0.00000
426	num_unjug_ret@20	0.00000
426	num_unjug_ret@100	0.00000
426	num_unjug_ret@1000	428.00000
426	num_rel	202.00000
426	num_rel_ret	61.00000
426	map	0.05923
426	R-prec	0.14356
426	bpref	0.10837
426	recip_rank	0.50000
426	ndcg	0.27796
426	ndcg5	0.38357
426	ndcg10	0.24891
426	ndcg20	0.31231
426	ERR	0.08041
426	ERR10	0.05078
426	ERR20	0.06701
426	P1	0.00000
426	P5	0.40000
426	P10	0.20000
426	P15	0.40000
426	P20	0.30000
426	P30	0.36667
426	P50	0.28000
426	P100	0.21000
426	P200	0.14500
426	P500	0.09400
426	P1000	0.06100
427	num_ret	1000.00000
427	num_unjug_ret@1	0.00000
427	num_unjug_ret@10	0.00000
427	num_unjug_ret@20	0.00000
427	num_unjug_ret@100	1.00000
427	num_unjug_ret@1000	719.00000
427	num_rel	50.00000
427	num_rel_ret	27.00000
427	map	0.12350
427	R-prec	0.22000
427	bpref	0.17120
427	recip_rank	1.00000
427	ndcg	0.43848
427	ndcg5	0.48523
427	ndcg10	0.44476
427	ndcg20	0.42778
427	ERR	0.10509
427	ERR10	0.08840
427	ERR20	0.09999
427	P1	1.00000
427	P5	0.40000
427	P10	0.40000
427	P15	0.40000
427	P20	0.40000
427	P30	0.30000
427	P50	0.22000
427	P100	0.12000
427	P200	0.09000
427	P500	0.05000
427	P1000	0.02700
428	num_ret	1000.00000
428	num_unjug_ret@1	0.00000
428	num_unjug_ret@10	0.00000
428	num_unjug_ret@20	0.00000
428	num_unjug_ret@100	0.00000
428	num_unjug_ret@1000	475.00000
428	num_rel	118.00000
428	num_rel_ret	107.00000
428	map	0.32033
428	R-prec	0.41525
428	bpref	0.33697
428	recip_rank	1.00000
428	ndcg	0.73165
428	ndcg5	0.65481
428	ndcg10	0.42493
428	ndcg20	0.47949
428	ERR	0.12465
428	ERR10	0.09576
428	ERR20	0.11181
428	P1	1.00000
428	P5	0.60000
428	P10	0.30000
428	P15	0.33333
428	P20	0.45000
428	P30	0.40000
428	P50	0.48000
428	P100	0.44000
428	P200	0.32000
428	P500	0.19000
428	P1000	0.10700
429	num_ret	1000.00000
429	num_unjug_ret@1	0.00000
429	num_unjug_ret@10	0.00000
429	num_unjug_ret@20	0.00000
429	num_unjug_ret@100	0.00000
429	num_unjug_ret@1000	492.00000
429	num_rel	11.00000
429	num_rel_ret	11.00000
429	map	0.24081
429	R-prec	0.18182
429	bpref	0.10744
429	recip_rank	0.33333
429	ndcg	0.55273
429	ndcg5	0.16958
429	ndcg10	0.17630
429	ndcg20	0.21683
429	ERR	0.04250
429	ERR10	0.02734
429	ERR20	0.03078
429	P1	0.00000
429	P5	0.20000
429	P10	0.20000
429	P15	0.13333
429	P20	0.15000
429	P30	0.23333
429	P50	0.22000
429	P100	0.11000
429	P200	0.05500
429	P500	0.02200
429	P1000	0.01100
430	num_ret	1000.00000
430	num_unjug_ret@1	0.00000
430	num_unjug_ret@10	0.00000
430	num_unjug_ret@20	0.00000
430	num_unjug_ret@100	14.00000
430	num_unjug_ret@1000	512.00000
430	num_rel	6.00000
430	num_rel_ret	6.00000
430	map	0.66771
430	R-prec	0.50000
430	bpref	0.50000
430	recip_rank	1.00000
430	ndcg	0.87407
430	ndcg5	0.72273
430	ndcg10	0.64482
430	ndcg20	0.87407
430	ERR	0.12023
430	ERR10	0.11011
430	ERR20	0.12023
430	P1	1.00000
430	P5	0.60000
430	P10	0.30000
430	P15	0.33333
430	P20	0.30000
430	P30	0.20000
430	P50	0.12000
430	P100	0.06000
430	P200	0.03000
430	P500	0.01200
430	P1000	0.00600
431	num_ret	1000.00000
431	num_unjug_ret@1	0.00000
431	num_unjug_ret@10	0.00000
431	num_unjug_ret@20	0.00000
431	num_unjug_ret@100	0.00000
431	num_unjug_ret@1000	467.00000
431	num_rel	130.00000
431	num_rel_ret	127.00000
431	map	0.45067
431	R-prec	0.43077
431	bpref	0.38243
431	recip_rank	1.00000
431	ndcg	0.84629
431	ndcg5	1.00000
431	ndcg10	0.93057
431	ndcg20	0.88540
431	ERR	0.17773
431	ERR10	0.15439
431	ERR20	0.17013
431	P1	1.00000
431	P5	1.00000
431	P10	0.90000
431	P15	0.86667
431	P20	0.85000
431	P30	0.70000
431	P50	0.58000
431	P100	0.46000
431	P200	0.36500
431	P500	0.22800
431	P1000	0.12700
432	num_ret	1000.00000
432	num_unjug_ret@1	0.00000
432	num_unjug_ret@10	0.00000
432	num_unjug_ret@20	0.00000
432	num_unjug_ret@100	6.00000
432	num_unjug_ret@1000	493.00000
432	num_rel	28.00000
432	num_rel_ret	6.00000
432	map	0.00301
432	R-prec	0.00000
432	bpref	0.00000
432	recip_rank	0.01754
432	ndcg	0.08893
432	ndcg5	0.00000
432	ndcg10	0.00000
432	ndcg20	0.00000
432	ERR	0.00240
432	ERR10	0.00000
432	ERR20	0.00000
432	P1	0.00000
432	P5	0.00000
432	P10	0.00000
432	P15	0.00000
432	P20	0.00000
432	P30	0.00000
432	P50	0.00000
432	P100	0.02000
432	P200	0.01500
432	P500	0.00600
432	P1000	0.00600
433	num_ret	1000.00000
433	num_unjug_ret@1	0.00000
433	num_unjug_ret@10	0.00000
433	num_unjug_ret@20	0.00000
433	num_unjug_ret@100	4.00000
433	num_unjug_ret@1000	489.00000
433	num_rel	13.00000
433	num_rel_ret	6.00000
433	map	0.09257
433	R-prec	0.15385
433	bpref	0.12426
433	recip_rank	0.33333
433	ndcg	0.30902
433	ndcg5	0.30079
433	ndcg10	0.19519
433	ndcg20	0.21128
433	ERR	0.03881
433	ERR10	0.03255
433	ERR20	0.03599
433	P1	0.00000
433	P5	0.40000
433	P10	0.20000
433	P15	0.13333
433	P20	0.15000
433	P30	0.10000
433	P50	0.10000
433	P100	0.06000
433	P200	0.03000
433	P500	0.01200
433	P1000	0.00600
434	num_ret	1000.00000
434	num_unjug_ret@1	0.00000
434	num_unjug_ret@10	0.00000
434	num_unjug_ret@20	0.00000
434	num_unjug_ret@100	0.00000
434	num_unjug_ret@1000	315.00000
434	num_rel	347.00000
434	num_rel_ret	255.00000
434	map	0.38514
434	R-prec	0.40922
434	bpref	0.38953
434	recip_rank	1.00000
434	ndcg	0.70232
434	ndcg5	0.86879
434	ndcg10	0.85124
434	ndcg20	0.83086
434	ERR	0.17433
434	ERR10	0.14722
434	ERR20	0.16340
434	P1	1.00000
434	P5	0.80000
434	P10	0.80000
434	P15	0.80000
434	P20	0.80000
434	P30	0.83333
434	P50	0.84000
434	P100	0.74000
434	P200	0.53500
434	P500	0.34600
434	P1000	0.25500
435	num_ret	1000.00000
435	num_unjug_ret@1	0.00000
435	num_unjug_ret@10	0.00000
435	num_unjug_ret@20	0.00000
435	num_unjug_ret@100	2.00000
435	num_unjug_ret@1000	514.00000
435	num_rel	117.00000
435	num_rel_ret	76.00000
435	map	0.16468
435	R-prec	0.28205
435	bpref	0.21506
435	recip_rank	0.33333
435	ndcg	0.51153
435	ndcg5	0.31565
435	ndcg10	0.33789
435	ndcg20	0.31962
435	ERR	0.06884
435	ERR10	0.04750
435	ERR20	0.05545
435	P1	0.00000
435	P5	0.40000
435	P10	0.40000
435	P15	0.33333
435	P20	0.35000
435	P30	0.36667
435	P50	0.36000
435	P100	0.29000
435	P200	0.22500
435	P500	0.12800
435	P1000	0.07600
436	num_ret	1000.00000
436	num_unjug_ret@1	0.00000
436	num_unjug_ret@10	0.00000
436	num_unjug_ret@20	0.00000
436	num_unjug_ret@100	0.00000
436	num_unjug_ret@1000	526.00000
436	num_rel	180.00000
436	num_rel_ret	37.00000
436	map	0.06798
436	R-prec	0.15556
436	bpref	0.13373
436	recip_rank	0.50000
436	ndcg	0.23049
436	ndcg5	0.38357
436	ndcg10	0.38853
436	ndcg20	0.42825
436	ERR	0.08979
436	ERR10	0.06435
436	ERR20	0.07886
436	P1	0.00000
436	P5	0.40000
436	P10	0.40000
436	P15	0.46667
436	P20	0.45000
436	P30	0.43333
436	P50	0.38000
436	P100	0.27000
436	P200	0.14000
436	P500	0.05800
436	P1000	0.03700
437	num_ret	1000.00000
437	num_unjug_ret@1	0.00000
437	num_unjug_ret@10	1.00000
437	num_unjug_ret@20	3.00000
437	num_unjug_ret@100	37.00000
437	num_unjug_ret@1000	600.00000
437	num_rel	72.00000
437	num_rel_ret	9.00000
437	map	0.00128
437	R-prec	0.00000
437	bpref	0.00000
437	recip_rank	0.00704
437	ndcg	0.06302
437	ndcg5	0.00000
437	ndcg10	0.00000
437	ndcg20	0.00000
437	ERR	0.00139
437	ERR10	0.00000
437	ERR20	0.00000
437	P1	0.00000
437	P5	0.00000
437	P10	0.00000
437	P15	0.00000
437	P20	0.00000
437	P30	0.00000
437	P50	0.00000
437	P100	0.00000
437	P200	0.00500
437	P500	0.01000
437	P1000	0.00900
438	num_ret	1000.00000
438	num_unjug_ret@1	0.00000
438	num_unjug_ret@10	0.00000
438	num_unjug_ret@20	0.00000
438	num_unjug_ret@100	2.00000
438	num_unjug_ret@1000	418.00000
438	num_rel	173.00000
438	num_rel_ret	138.00000
438	map	0.27521
438	R-prec	0.33526
438	bpref	0.26957
438	recip_rank	1.00000
438	ndcg	0.67072
438	ndcg5	0.47037
438	ndcg10	0.51428
438	ndcg20	0.58085
438	ERR	0.12324
438	ERR10	0.09387
438	ERR20	0.11211
438	P1	1.00000
438	P5	0.40000
438	P10	0.50000
438	P15	0.53333
438	P20	0.60000
438	P30	0.60000
438	P50	0.48000
438	P100	0.40000
438	P200	0.31500
438	P500	0.23000
438	P1000	0.13800
439	num_ret	1000.00000
439	num_unjug_ret@1	0.00000
439	num_unjug_ret@10	0.00000
439	num_unjug_ret@20	0.00000
439	num_unjug_ret@100	0.00000
439	num_unjug_ret@1000	393.00000
439	num_rel	219.00000
439	num_rel_ret	112.00000
439	map	0.06996
439	R-prec	0.14155
439	bpref	0.07264
439	recip_rank	0.20000
439	ndcg	0.37222
439	ndcg5	0.13121
439	ndcg10	0.08514
439	ndcg20	0.05495
439	ERR	0.02231
439	ERR10	0.01250
439	ERR20	0.01250
439	P1	0.00000
439	P5	0.20000
439	P10	0.10000
439	P15	0.06667
439	P20	0.05000
439	P30	0.06667
439	P50	0.04000
439	P100	0.08000
439	P200	0.14000
439	P500	0.14400
439	P1000	0.11200
440	num_ret	1000.00000
440	num_unjug_ret@1	0.00000
440	num_unjug_ret@10	0.00000
440	num_unjug_ret@20	0.00000
440	num_unjug_ret@100	1.00000
440	num_unjug_ret@1000	563.00000
440	num_rel	54.00000
440	num_rel_ret	29.00000
440	map	0.12019
440	R-prec	0.25926
440	bpref	0.18073
440	recip_rank	0.16667
440	ndcg	0.39393
440	ndcg5	0.00000
440	ndcg10	0.14783
440	ndcg20	0.26890
440	ERR	0.04230
440	ERR10	0.01774
440	ERR20	0.03313
440	P1	0.00000
440	P5	0.00000
440	P10	0.20000
440	P15	0.20000
440	P20	0.35000
440	P30	0.30000
440	P50	0.28000
440	P100	0.19000
440	P200	0.12500
440	P500	0.05600
440	P1000	0.02900
441	num_ret	1000.00000
441	num_unjug_ret@1	0.00000
441	num_unjug_ret@10	0.00000
441	num_unjug_ret@20	0.00000
441	num_unjug_ret@100	0.00000
441	num_unjug_ret@1000	447.00000
441	num_rel	17.00000
441	num_rel_ret	17.00000
441	map	0.67344
441	R-prec	0.52941
441	bpref	0.56055
441	recip_rank	1.00000
441	ndcg	0.89869
441	ndcg5	0.86879
441	ndcg10	0.71162
441	ndcg20	0.70697
441	ERR	0.15504
441	ERR10	0.13669
441	ERR20	0.14960
441	P1	1.00000
441	P5	0.80000
441	P10	0.60000
441	P15	0.53333
441	P20	0.55000
441	P30	0.46667
441	P50	0.34000
441	P100	0.17000
441	P200	0.08500
441	P500	0.03400
441	P1000	0.01700
442	num_ret	1000.00000
442	num_unjug_ret@1	0.00000
442	num_unjug_ret@10	0.00000
442	num_unjug_ret@20	0.00000
442	num_unjug_ret@100	0.00000
442	num_unjug_ret@1000	558.00000
442	num_rel	94.00000
442	num_rel_ret	24.00000
442	map	0.00768
442	R-prec	0.02128
442	bpref	0.01777
442	recip_rank	0.07692
442	ndcg	0.14905
442	ndcg5	0.00000
442	ndcg10	0.00000
442	ndcg20	0.03731
442	ERR	0.00970
442	ERR10	0.00000
442	ERR20	0.00481
442	P1	0.00000
442	P5	0.00000
442	P10	0.00000
442	P15	0.06667
442	P20	0.05000
442	P30	0.06667
442	P50	0.04000
442	P100	0.02000
442	P200	0.02000
442	P500	0.02600
442	P1000	0.02400
443	num_ret	1000.00000
443	num_unjug_ret@1	0.00000
443	num_unjug_ret@10	0.00000
443	num_unjug_ret@20	1.00000
443	num_unjug_ret@100	3.00000
443	num_unjug_ret@1000	525.00000
443	num_rel	102.00000
443	num_rel_ret	64.00000
443	map	0.24414
443	R-prec	0.33333
443	bpref	0.28518
443	recip_rank	0.33333
443	ndcg	0.54962
443	ndcg5	0.44685
443	ndcg10	0.57161
443	ndcg20	0.58006
443	ERR	0.09441
443	ERR10	0.07122
443	ERR20	0.08484
443	P1	0.00000
443	P5	0.60000
443	P10	0.70000
443	P15	0.66667
443	P20	0.65000
443	P30	0.63333
443	P50	0.48000
443	P100	0.34000
443	P200	0.23500
443	P500	0.11800
443	P1000	0.06400
444	num_ret	1000.00000
444	num_unjug_ret@1	0.00000
444	num_unjug_ret@10	0.00000
444	num_unjug_ret@20	0.00000
444	num_unjug_ret@100	1.00000
444	num_unjug_ret@1000	548.00000
444	num_rel	17.00000
444	num_rel_ret	17.00000
444	map	0.89140
444	R-prec	0.82353
444	bpref	0.87197
444	recip_rank	1.00000
444	ndcg	0.97208
444	ndcg5	1.00000
444	ndcg10	0.93375
444	ndcg20	0.90993
444	ERR	0.16949
444	ERR10	0.15495
444	ERR20	0.16802
444	P1	1.00000
444	P5	1.00000
444	P10	0.90000
444	P15	0.80000
444	P20	0.75000
444	P30	0.53333
444	P50	0.34000
444	P100	0.17000
444	P200	0.08500
444	P500	0.03400
444	P1000	0.01700
445	num_ret	1000.00000
445	num_unjug_ret@1	0.00000
445	num_unjug_ret@10	0.00000
445	num_unjug_ret@20	0.00000
445	num_unjug_ret@100	0.00000
445	num_unjug_ret@1000	564.00000
445	num_rel	62.00000
445	num_rel_ret	44.00000
445	map	0.21423
445	R-prec	0.29032
445	bpref	0.24532
445	recip_rank	0.50000
445	ndcg	0.56122
445	ndcg5	0.66084
445	ndcg10	0.71365
445	ndcg20	0.59918
445	ERR	0.11237
445	ERR10	0.09861
445	ERR20	0.10709
445	P1	0.00000
445	P5	0.80000
445	P10	0.80000
445	P15	0.60000
445	P20	0.60000
445	P30	0.50000
445	P50	0.32000
445	P100	0.19000
445	P200	0.10000
445	P500	0.07200
445	P1000	0.04400
446	num_ret	1000.00000
446	num_unjug_ret@1	0.00000
446	num_unjug_ret@10	0.00000
446	num_unjug_ret@20	0.00000
446	num_unjug_ret@100	1.00000
446	num_unjug_ret@1000	525.00000
446	num_rel	162.00000
446	num_rel_ret	122.00000
446	map	0.26090
446	R-prec	0.29630
446	bpref	0.26326
446	recip_rank	1.00000
446	ndcg	0.65746
446	ndcg5	1.00000
446	ndcg10	0.80069
446	ndcg20	0.73143
446	ERR	0.17091
446	ERR10	0.14624
446	ERR20	0.16052
446	P1	1.00000
446	P5	1.00000
446	P10	0.70000
446	P15	0.66667
446	P20	0.65000
446	P30	0.60000
446	P50	0.52000
446	P100	0.41000
446	P200	0.27500
446	P500	0.15600
446	P1000	0.12200
447	num_ret	1000.00000
447	num_unjug_ret@1	0.00000
447	num_unjug_ret@10	0.00000
447	num_unjug_ret@20	0.00000
447	num_unjug_ret@100	0.00000
447	num_unjug_ret@1000	419.00000
447	num_rel	16.00000
447	num_rel_ret	16.00000
447	map	0.44635
447	R-prec	0.37500
447	bpref	0.33203
447	recip_rank	1.00000
447	ndcg	0.78201
447	ndcg5	0.78601
447	ndcg10	0.51007
447	ndcg20	0.50191
447	ERR	0.12342
447	ERR10	0.10606
447	ERR20	0.11510
447	P1	1.00000
447	P5	0.80000
447	P10	0.40000
447	P15	0.33333
447	P20	0.35000
447	P30	0.33333
447	P50	0.26000
447	P100	0.16000
447	P200	0.08000
447	P500	0.03200
447	P1000	0.01600
448	num_ret	1000.00000
448	num_unjug_ret@1	0.00000
448	num_unjug_ret@10	0.00000
448	num_unjug_ret@20	0.00000
448	num_unjug_ret@100	16.00000
448	num_unjug_ret@1000	464.00000
448	num_rel	46.00000
448	num_rel_ret	16.00000
448	map	0.01423
448	R-prec	0.06522
448	bpref	0.03450
448	recip_rank	0.12500
448	ndcg	0.18755
448	ndcg5	0.00000
448	ndcg10	0.06943
448	ndcg20	0.04481
448	ERR	0.01409
448	ERR10	0.00781
448	ERR20	0.00781
448	P1	0.00000
448	P5	0.00000
448	P10	0.10000
448	P15	0.06667
448	P20	0.05000
448	P30	0.06667
448	P50	0.06000
448	P100	0.05000
448	P200	0.02500
448	P500	0.02400
448	P1000	0.01600
449	num_ret	1000.00000
449	num_unjug_ret@1	0.00000
449	num_unjug_ret@10	0.00000
449	num_unjug_ret@20	0.00000
449	num_unjug_ret@100	0.00000
449	num_unjug_ret@1000	522.00000
449	num_rel	67.00000
449	num_rel_ret	33.00000
449	map	0.06458
449	R-prec	0.16418
449	bpref	0.10314
449	recip_rank	0.20000
449	ndcg	0.33536
449	ndcg5	0.13121
449	ndcg10	0.08514
449	ndcg20	0.15934
449	ERR	0.03349
449	ERR10	0.01250
449	ERR20	0.02302
449	P1	0.00000
449	P5	0.20000
449	P10	0.10000
449	P15	0.13333
449	P20	0.20000
449	P30	0.23333
449	P50	0.18000
449	P100	0.12000
449	P200	0.10000
449	P500	0.06200
449	P1000	0.03300
450	num_ret	1000.00000
450	num_unjug_ret@1	0.00000
450	num_unjug_ret@10	0.00000
450	num_unjug_ret@20	0.00000
450	num_unjug_ret@100	1.00000
450	num_unjug_ret@1000	404.00000
450	num_rel	293.00000
450	num_rel_ret	276.00000
450	map	0.52984
450	R-prec	0.47440
450	bpref	0.55198
450	recip_rank	1.00000
450	ndcg	0.86473
450	ndcg5	1.00000
450	ndcg10	0.93057
450	ndcg20	0.91968
450	ERR	0.18081
450	ERR10	0.15439
450	ERR20	0.17144
450	P1	1.00000
450	P5	1.00000
450	P10	0.90000
450	P15	0.86667
450	P20	0.90000
450	P30	0.90000
450	P50	0.82000
450	P100	0.69000
450	P200	0.53500
450	P500	0.41000
450	P1000	0.27600
601	num_ret	1000.00000
601	num_unjug_ret@1	0.00000
601	num_unjug_ret@10	0.00000
601	num_unjug_ret@20	0.00000
601	num_unjug_ret@100	0.00000
601	num_unjug_ret@1000	586.00000
601	num_rel	5.00000
601	num_rel_ret	5.00000
601	map	0.65258
601	R-prec	0.60000
601	bpref	0.60000
601	recip_rank	1.00000
601	ndcg	0.80207
601	ndcg5	0.66517
601	ndcg10	0.66517
601	ndcg20	0.78335
601	ERR	0.23722
601	ERR10	0.22876
601	ERR20	0.23713
601	P1	1.00000
601	P5	0.60000
601	P10	0.30000
601	P15	0.20000
601	P20	0.20000
601	P30	0.13333
601	P50	0.08000
601	P100	0.04000
601	P200	0.02000
601	P500	0.01000
601	P1000	0.00500
602	num_ret	1000.00000
602	num_unjug_ret@1	0.00000
602	num_unjug_ret@10	0.00000
602	num_unjug_ret@20	0.00000
602	num_unjug_ret@100	4.00000
602	num_unjug_ret@1000	584.00000
602	num_rel	84.00000
602	num_rel_ret	82.00000
602	map	0.27030
602	R-prec	0.33333
602	bpref	0.23186
602	recip_rank	0.33333
602	ndcg	0.59476
602	ndcg5	0.11530
602	ndcg10	0.09628
602	ndcg20	0.11928
602	ERR	0.06188
602	ERR10	0.03548
602	ERR20	0.04349
602	P1	0.00000
602	P5	0.40000
602	P10	0.20000
602	P15	0.26667
602	P20	0.20000
602	P30	0.30000
602	P50	0.30000
602	P100	0.30000
602	P200	0.27500
602	P500	0.15400
602	P1000	0.08200
603	num_ret	1000.00000
603	num_unjug_ret@1	0.00000
603	num_unjug_ret@10	0.00000
603	num_unjug_ret@20	0.00000
603	num_unjug_ret@100	0.00000
603	num_unjug_ret@1000	553.00000
603	num_rel	16.00000
603	num_rel_ret	16.00000
603	map	0.25500
603	R-prec	0.43750
603	bpref	0.28906
603	recip_rank	1.00000
603	ndcg	0.65234
603	ndcg5	0.47037
603	ndcg10	0.31875
603	ndcg20	0.53425
603	ERR	0.25088
603	ERR10	0.21797
603	ERR20	0.25000
603	P1	1.00000
603	P5	0.40000
603	P10	0.20000
603	P15	0.40000
603	P20	0.40000
603	P30	0.26667
603	P50	0.16000
603	P100	0.10000
603	P200	0.05000
603	P500	0.02600
603	P1000	0.01600
604	num_ret	1000.00000
604	num_unjug_ret@1	0.00000
604	num_unjug_ret@10	0.00000
604	num_unjug_ret@20	0.00000
604	num_unjug_ret@100	0.00000
604	num_unjug_ret@1000	610.00000
604	num_rel	8.00000
604	num_rel_ret	8.00000
604	map	0.81548
604	R-prec	0.75000
604	bpref	0.73438
604	recip_rank	1.00000
604	ndcg	0.97614
604	ndcg5	1.00000
604	ndcg10	0.93181
604	ndcg20	0.95719
604	ERR	0.35145
604	ERR10	0.34958
604	ERR20	0.35096
604	P1	1.00000
604	P5	1.00000
604	P10	0.60000
604	P15	0.46667
604	P20	0.35000
604	P30	0.23333
604	P50	0.16000
604	P100	0.08000
604	P200	0.04000
604	P500	0.01600
604	P1000	0.00800
605	num_ret	1000.00000
605	num_unjug_ret@1	0.00000
605	num_unjug_ret@10	0.00000
605	num_unjug_ret@20	0.00000
605	num_unjug_ret@100	4.00000
605	num_unjug_ret@1000	526.00000
605	num_rel	72.00000
605	num_rel_ret	38.00000
605	map	0.02502
605	R-prec	0.04167
605	bpref	0.02334
605	recip_rank	0.10000
605	ndcg	0.28583
605	ndcg5	0.00000
605	ndcg10	0.06362
605	ndcg20	0.04106
605	ERR	0.01191
605	ERR10	0.00625
605	ERR20	0.00625
605	P1	0.00000
605	P5	0.00000
605	P10	0.10000
605	P15	0.06667
605	P20	0.05000
605	P30	0.03333
605	P50	0.04000
605	P100	0.04000
605	P200	0.04000
605	P500	0.04600
605	P1000	0.03800
606	num_ret	1000.00000
606	num_unjug_ret@1	0.00000
606	num_unjug_ret@10	0.00000
606	num_unjug_ret@20	0.00000
606	num_unjug_ret@100	1.00000
606	num_unjug_ret@1000	609.00000
606	num_rel	14.00000
606	num_rel_ret	13.00000
606	map	0.46383
606	R-prec	0.42857
606	bpref	0.40816
606	recip_rank	1.00000
606	ndcg	0.77877
606	ndcg5	0.76940
606	ndcg10	0.67234
606	ndcg20	0.60546
606	ERR	0.30314
606	ERR10	0.29775
606	ERR20	0.29775
606	P1	1.00000
606	P5	1.00000
606	P10	0.60000
606	P15	0.40000
606	P20	0.30000
606	P30	0.20000
606	P50	0.18000
606	P100	0.10000
606	P200	0.06000
606	P500	0.02600
606	P1000	0.01300
607	num_ret	1000.00000
607	num_unjug_ret@1	0.00000
607	num_unjug_ret@10	0.00000
607	num_unjug_ret@20	0.00000
607	num_unjug_ret@100	0.00000
607	num_unjug_ret@1000	592.00000
607	num_rel	11.00000
607	num_rel_ret	10.00000
607	map	0.47015
607	R-prec	0.54545
607	bpref	0.44628
607	recip_rank	1.00000
607	ndcg	0.76037
607	ndcg5	0.69921
607	ndcg10	0.59654
607	ndcg20	0.61987
607	ERR	0.12657
607	ERR10	0.11892
607	ERR20	0.12304
607	P1	1.00000
607	P5	0.60000
607	P10	0.50000
607	P15	0.40000
607	P20	0.30000
607	P30	0.23333
607	P50	0.18000
607	P100	0.09000
607	P200	0.04500
607	P500	0.01800
607	P1000	0.01000
608	num_ret	1000.00000
608	num_unjug_ret@1	0.00000
608	num_unjug_ret@10	0.00000
608	num_unjug_ret@20	0.00000
608	num_unjug_ret@100	3.00000
608	num_unjug_ret@1000	487.00000
608	num_rel	27.00000
608	num_rel_ret	26.00000
608	map	0.09268
608	R-prec	0.11111
608	bpref	0.04390
608	recip_rank	0.12500
608	ndcg	0.38856
608	ndcg5	0.00000
608	ndcg10	0.03583
608	ndcg20	0.02791
608	ERR	0.02400
608	ERR10	0.00781
608	ERR20	0.00781
608	P1	0.00000
608	P5	0.00000
608	P10	0.10000
608	P15	0.06667
608	P20	0.05000
608	P30	0.10000
608	P50	0.14000
608	P100	0.11000
608	P200	0.08500
608	P500	0.04400
608	P1000	0.02600
609	num_ret	1000.00000
609	num_unjug_ret@1	0.00000
609	num_unjug_ret@10	0.00000
609	num_unjug_ret@20	0.00000
609	num_unjug_ret@100	0.00000
609	num_unjug_ret@1000	472.00000
609	num_rel	30.00000
609	num_rel_ret	29.00000
609	map	0.31627
609	R-prec	0.36667
609	bpref	0.30778
609	recip_rank	1.00000
609	ndcg	0.75452
609	ndcg5	0.85393
609	ndcg10	0.65364
609	ndcg20	0.59329
609	ERR	0.34915
609	ERR10	0.34053
609	ERR20	0.34569
609	P1	1.00000
609	P5	0.80000
609	P10	0.60000
609	P15	0.46667
609	P20	0.40000
609	P30	0.36667
609	P50	0.22000
609	P100	0.13000
609	P200	0.09000
609	P500	0.05400
609	P1000	0.02900
610	num_ret	1000.00000
610	num_unjug_ret@1	0.00000
610	num_unjug_ret@10	0.00000
610	num_unjug_ret@20	0.00000
610	num_unjug_ret@100	0.00000
610	num_unjug_ret@1000	570.00000
610	num_rel	6.00000
610	num_rel_ret	6.00000
610	map	0.03645
610	R-prec	0.00000
610	bpref	0.00000
610	recip_rank	0.04348
610	ndcg	0.29279
610	ndcg5	0.00000
610	ndcg10	0.00000
610	ndcg20	0.00000
610	ERR	0.00604
610	ERR10	0.00000
610	ERR20	0.00000
610	P1	0.00000
610	P5	0.00000
610	P10	0.00000
610	P15	0.00000
610	P20	0.00000
610	P30	0.03333
610	P50	0.04000
610	P100	0.03000
610	P200	0.02000
610	P500	0.01200
610	P1000	0.00600
611	num_ret	1000.00000
611	num_unjug_ret@1	0.00000
611	num_unjug_ret@10	0.00000
611	num_unjug_ret@20	0.00000
611	num_unjug_ret@100	5.00000
611	num_unjug_ret@1000	636.00000
611	num_rel	49.00000
611	num_rel_ret	45.00000
611	map	0.33142
611	R-prec	0.28571
611	bpref	0.25989
611	recip_rank	1.00000
611	ndcg	0.63555
611	ndcg5	0.56346
611	ndcg10	0.41325
611	ndcg20	0.37695
611	ERR	0.23388
611	ERR10	0.21136
611	ERR20	0.22798
611	P1	1.00000
611	P5	1.00000
611	P10	0.70000
611	P15	0.66667
611	P20	0.50000
611	P30	0.40000
611	P50	0.28000
611	P100	0.23000
611	P200	0.16500
611	P500	0.08600
611	P1000	0.04500
612	num_ret	1000.00000
612	num_unjug_ret@1	0.00000
612	num_unjug_ret@10	0.00000
612	num_unjug_ret@20	0.00000
612	num_unjug_ret@100	0.00000
612	num_unjug_ret@1000	623.00000
612	num_rel	17.00000
612	num_rel_ret	16.00000
612	map	0.48274
612	R-prec	0.58824
612	bpref	0.49481
612	recip_rank	1.00000
612	ndcg	0.60703
612	ndcg5	0.33132
612	ndcg10	0.40356
612	ndcg20	0.45482
612	ERR	0.18774
612	ERR10	0.17383
612	ERR20	0.18489
612	P1	1.00000
612	P5	0.60000
612	P10	0.70000
612	P15	0.60000
612	P20	0.50000
612	P30	0.33333
612	P50	0.26000
612	P100	0.13000
612	P200	0.06500
612	P500	0.03200
612	P1000	0.01600
613	num_ret	1000.00000
613	num_unjug_ret@1	0.00000
613	num_unjug_ret@10	0.00000
613	num_unjug_ret@20	0.00000
613	num_unjug_ret@100	0.00000
613	num_unjug_ret@1000	625.00000
613	num_rel	47.00000
613	num_rel_ret	40.00000
613	map	0.18285
613	R-prec	0.19149
613	bpref	0.16252
613	recip_rank	0.50000
613	ndcg	0.57841
613	ndcg5	0.34860
613	ndcg10	0.36901
613	ndcg20	0.27290
613	ERR	0.14503
613	ERR10	0.13212
613	ERR20	0.13691
613	P1	0.00000
613	P5	0.60000
613	P10	0.50000
613	P15	0.33333
613	P20	0.30000
613	P30	0.26667
613	P50	0.18000
613	P100	0.19000
613	P200	0.12500
613	P500	0.06800
613	P1000	0.04000
614	num_ret	1000.00000
614	num_unjug_ret@1	0.00000
614	num_unjug_ret@10	0.00000
614	num_unjug_ret@20	0.00000
614	num_unjug_ret@100	0.00000
614	num_unjug_ret@1000	603.00000
614	num_rel	30.00000
614	num_rel_ret	26.00000
614	map	0.53040
614	R-prec	0.56667
614	bpref	0.50889
614	recip_rank	1.00000
614	ndcg	0.71076
614	ndcg5	0.38789
614	ndcg10	0.63156
614	ndcg20	0.66788
614	ERR	0.20792
614	ERR10	0.19393
614	ERR20	0.20520
614	P1	1.00000
614	P5	0.60000
614	P10	0.80000
614	P15	0.80000
614	P20	0.70000
614	P30	0.56667
614	P50	0.38000
614	P100	0.24000
614	P200	0.12500
614	P500	0.05000
614	P1000	0.02600
615	num_ret	1000.00000
615	num_unjug_ret@1	0.00000
615	num_unjug_ret@10	0.00000
615	num_unjug_ret@20	0.00000
615	num_unjug_ret@100	0.00000
615	num_unjug_ret@1000	602.00000
615	num_rel	12.00000
615	num_rel_ret	11.00000
615	map	0.11891
615	R-prec	0.33333
615	bpref	0.14583
615	recip_rank	0.14286
615	ndcg	0.35774
615	ndcg5	0.00000
615	ndcg10	0.19422
615	ndcg20	0.21380
615	ERR	0.03907
615	ERR10	0.03273
615	ERR20	0.03645
615	P1	0.00000
615	P5	0.00000
615	P10	0.30000
615	P15	0.26667
615	P20	0.20000
615	P30	0.16667
615	P50	0.10000
615	P100	0.05000
615	P200	0.04000
615	P500	0.02200
615	P1000	0.01100
616	num_ret	1000.00000
616	num_unjug_ret@1	0.00000
616	num_unjug_ret@10	0.00000
616	num_unjug_ret@20	0.00000
616	num_unjug_ret@100	4.00000
616	num_unjug_ret@1000	512.00000
616	num_rel	41.00000
616	num_rel_ret	41.00000
616	map	0.80417
616	R-prec	0.78049
616	bpref	0.79060
616	recip_rank	1.00000
616	ndcg	0.86327
616	ndcg5	0.51571
616	ndcg10	0.61180
616	ndcg20	0.81842
616	ERR	0.29903
616	ERR10	0.27381
616	ERR20	0.29581
616	P1	1.00000
616	P5	0.80000
616	P10	0.90000
616	P15	0.93333
616	P20	0.90000
616	P30	0.86667
616	P50	0.66000
616	P100	0.39000
616	P200	0.20000
616	P500	0.08200
616	P1000	0.04100
617	num_ret	1000.00000
617	num_unjug_ret@1	0.00000
617	num_unjug_ret@10	0.00000
617	num_unjug_ret@20	0.00000
617	num_unjug_ret@100	0.00000
617	num_unjug_ret@1000	416.00000
617	num_rel	68.00000
617	num_rel_ret	64.00000
617	map	0.37954
617	R-prec	0.41176
617	bpref	0.35662
617	recip_rank	1.00000
617	ndcg	0.62005
617	ndcg5	0.28464
617	ndcg10	0.29683
617	ndcg20	0.33316
617	ERR	0.16353
617	ERR10	0.13963
617	ERR20	0.15201
617	P1	1.00000
617	P5	0.80000
617	P10	0.70000
617	P15	0.60000
617	P20	0.60000
617	P30	0.53333
617	P50	0.48000
617	P100	0.35000
617	P200	0.22000
617	P500	0.11000
617	P1000	0.06400
618	num_ret	1000.00000
618	num_unjug_ret@1	0.00000
618	num_unjug_ret@10	0.00000
618	num_unjug_ret@20	0.00000
618	num_unjug_ret@100	0.00000
618	num_unjug_ret@1000	698.00000
618	num_rel	27.00000
618	num_rel_ret	27.00000
618	map	0.13471
618	R-prec	0.11111
618	bpref	0.05213
618	recip_rank	0.14286
618	ndcg	0.44652
618	ndcg5	0.00000
618	ndcg10	0.05094
618	ndcg20	0.06247
618	ERR	0.02409
618	ERR10	0.00893
618	ERR20	0.01201
618	P1	0.00000
618	P5	0.00000
618	P10	0.10000
618	P15	0.06667
618	P20	0.10000
618	P30	0.10000
618	P50	0.14000
618	P100	0.15000
618	P200	0.11000
618	P500	0.05400
618	P1000	0.02700
619	num_ret	1000.00000
619	num_unjug_ret@1	0.00000
619	num_unjug_ret@10	0.00000
619	num_unjug_ret@20	0.00000
619	num_unjug_ret@100	0.00000
619	num_unjug_ret@1000	640.00000
619	num_rel	21.00000
619	num_rel_ret	21.00000
619	map	0.55235
619	R-prec	0.57143
619	bpref	0.53515
619	recip_rank	1.00000
619	ndcg	0.70611
619	ndcg5	0.47244
619	ndcg10	0.38843
619	ndcg20	0.54064
619	ERR	0.19963
619	ERR10	0.17436
619	ERR20	0.19565
619	P1	1.00000
619	P5	0.80000
619	P10	0.60000
619	P15	0.53333
619	P20	0.55000
619	P30	0.53333
619	P50	0.32000
619	P100	0.21000
619	P200	0.10500
619	P500	0.04200
619	P1000	0.02100
620	num_ret	1000.00000
620	num_unjug_ret@1	0.00000
620	num_unjug_ret@10	0.00000
620	num_unjug_ret@20	0.00000
620	num_unjug_ret@100	0.00000
620	num_unjug_ret@1000	622.00000
620	num_rel	9.00000
620	num_rel_ret	9.00000
620	map	0.08320
620	R-prec	0.11111
620	bpref	0.09877
620	recip_rank	0.50000
620	ndcg	0.30716
620	ndcg5	0.07817
620	ndcg10	0.06728
620	ndcg20	0.06728
620	ERR	0.03942
620	ERR10	0.03125
620	ERR20	0.03125
620	P1	0.00000
620	P5	0.20000
620	P10	0.10000
620	P15	0.06667
620	P20	0.05000
620	P30	0.06667
620	P50	0.04000
620	P100	0.03000
620	P200	0.02000
620	P500	0.01600
620	P1000	0.00900
621	num_ret	1000.00000
621	num_unjug_ret@1	0.00000
621	num_unjug_ret@10	0.00000
621	num_unjug_ret@20	0.00000
621	num_unjug_ret@100	0.00000
621	num_unjug_ret@1000	623.00000
621	num_rel	51.00000
621	num_rel_ret	51.00000
621	map	0.44609
621	R-prec	0.35294
621	bpref	0.33833
621	recip_rank	1.00000
621	ndcg	0.82031
621	ndcg5	0.90262
621	ndcg10	0.75871
621	ndcg20	0.62202
621	ERR	0.36348
621	ERR10	0.35551
621	ERR20	0.35962
621	P1	1.00000
621	P5	1.00000
621	P10	0.80000
621	P15	0.73333
621	P20	0.60000
621	P30	0.40000
621	P50	0.36000
621	P100	0.34000
621	P200	0.22000
621	P500	0.10000
621	P1000	0.05100
622	num_ret	1000.00000
622	num_unjug_ret@1	0.00000
622	num_unjug_ret@10	0.00000
622	num_unjug_ret@20	0.00000
622	num_unjug_ret@100	3.00000
622	num_unjug_ret@1000	666.00000
622	num_rel	59.00000
622	num_rel_ret	54.00000
622	map	0.31855
622	R-prec	0.44068
622	bpref	0.34243
622	recip_rank	0.25000
622	ndcg	0.55392
622	ndcg5	0.04869
622	ndcg10	0.07055
622	ndcg20	0.21811
622	ERR	0.06273
622	ERR10	0.02539
622	ERR20	0.05029
622	P1	0.00000
622	P5	0.20000
622	P10	0.20000
622	P15	0.33333
622	P20	0.45000
622	P30	0.50000
622	P50	0.44000
622	P100	0.31000
622	P200	0.21500
622	P500	0.10600
622	P1000	0.05400
623	num_ret	1000.00000
623	num_unjug_ret@1	0.00000
623	num_unjug_ret@10	0.00000
623	num_unjug_ret@20	0.00000
623	num_unjug_ret@100	0.00000
623	num_unjug_ret@1000	575.00000
623	num_rel	38.00000
623	num_rel_ret	31.00000
623	map	0.32691
623	R-prec	0.39474
623	bpref	0.35942
623	recip_rank	1.00000
623	ndcg	0.63613
623	ndcg5	0.55112
623	ndcg10	0.56415
623	ndcg20	0.53019
623	ERR	0.26556
623	ERR10	0.25089
623	ERR20	0.25928
623	P1	1.00000
623	P5	0.80000
623	P10	0.70000
623	P15	0.60000
623	P20	0.55000
623	P30	0.50000
623	P50	0.34000
623	P100	0.17000
623	P200	0.09500
623	P500	0.04600
623	P1000	0.03100
624	num_ret	1000.00000
624	num_unjug_ret@1	0.00000
624	num_unjug_ret@10	0.00000
624	num_unjug_ret@20	0.00000
624	num_unjug_ret@100	0.00000
624	num_unjug_ret@1000	704.00000
624	num_rel	18.00000
624	num_rel_ret	18.00000
624	map	0.27321
624	R-prec	0.33333
624	bpref	0.24383
624	recip_rank	1.00000
624	ndcg	0.53880
624	ndcg5	0.16958
624	ndcg10	0.24603
624	ndcg20	0.30866
624	ERR	0.12971
624	ERR10	0.10950
624	ERR20	0.12428
624	P1	1.00000
624	P5	0.40000
624	P10	0.30000
624	P15	0.40000
624	P20	0.30000
624	P30	0.20000
624	P50	0.14000
624	P100	0.12000
624	P200	0.08500
624	P500	0.03600
624	P1000	0.01800
625	num_ret	1000.00000
625	num_unjug_ret@1	0.00000
625	num_unjug_ret@10	0.00000
625	num_unjug_ret@20	0.00000
625	num_unjug_ret@100	1.00000
625	num_unjug_ret@1000	568.00000
625	num_rel	27.00000
625	num_rel_ret	18.00000
625	map	0.05314
625	R-prec	0.14815
625	bpref	0.07956
625	recip_rank	0.25000
625	ndcg	0.33468
625	ndcg5	0.14607
625	ndcg10	0.09479
625	ndcg20	0.12779
625	ERR	0.06744
625	ERR10	0.04688
625	ERR20	0.05904
625	P1	0.00000
625	P5	0.20000
625	P10	0.10000
625	P15	0.13333
625	P20	0.15000
625	P30	0.13333
625	P50	0.10000
625	P100	0.06000
625	P200	0.05500
625	P500	0.02400
625	P1000	0.01800
626	num_ret	1000.00000
626	num_unjug_ret@1	0.00000
626	num_unjug_ret@10	0.00000
626	num_unjug_ret@20	0.00000
626	num_unjug_ret@100	0.00000
626	num_unjug_ret@1000	542.00000
626	num_rel	12.00000
626	num_rel_ret	12.00000
626	map	0.30472
626	R-prec	0.33333
626	bpref	0.26389
626	recip_rank	0.50000
626	ndcg	0.62822
626	ndcg5	0.34519
626	ndcg10	0.37577
626	ndcg20	0.41195
626	ERR	0.16990
626	ERR10	0.15922
626	ERR20	0.16402
626	P1	0.00000
626	P5	0.40000
626	P10	0.40000
626	P15	0.26667
626	P20	0.25000
626	P30	0.16667
626	P50	0.20000
626	P100	0.12000
626	P200	0.06000
626	P500	0.02400
626	P1000	0.01200
627	num_ret	1000.00000
627	num_unjug_ret@1	0.00000
627	num_unjug_ret@10	0.00000
627	num_unjug_ret@20	0.00000
627	num_unjug_ret@100	9.00000
627	num_unjug_ret@1000	431.00000
627	num_rel	28.00000
627	num_rel_ret	21.00000
627	map	0.04857
627	R-prec	0.10714
627	bpref	0.03954
627	recip_rank	0.16667
627	ndcg	0.36020
627	ndcg5	0.00000
627	ndcg10	0.07840
627	ndcg20	0.05060
627	ERR	0.01923
627	ERR10	0.01042
627	ERR20	0.01042
627	P1	0.00000
627	P5	0.00000
627	P10	0.10000
627	P15	0.06667
627	P20	0.05000
627	P30	0.10000
627	P50	0.08000
627	P100	0.06000
627	P200	0.05500
627	P500	0.03600
627	P1000	0.02100
628	num_ret	1000.00000
628	num_unjug_ret@1	0.00000
628	num_unjug_ret@10	0.00000
628	num_unjug_ret@20	0.00000
628	num_unjug_ret@100	0.00000
628	num_unjug_ret@1000	578.00000
628	num_rel	26.00000
628	num_rel_ret	26.00000
628	map	0.21777
628	R-prec	0.26923
628	bpref	0.20118
628	recip_rank	0.33333
628	ndcg	0.54698
628	ndcg5	0.21332
628	ndcg10	0.21484
628	ndcg20	0.29897
628	ERR	0.10907
628	ERR10	0.08059
628	ERR20	0.10113
628	P1	0.00000
628	P5	0.40000
628	P10	0.30000
628	P15	0.33333
628	P20	0.25000
628	P30	0.26667
628	P50	0.24000
628	P100	0.16000
628	P200	0.10000
628	P500	0.05200
628	P1000	0.02600
629	num_ret	1000.00000
629	num_unjug_ret@1	0.00000
629	num_unjug_ret@10	0.00000
629	num_unjug_ret@20	0.00000
629	num_unjug_ret@100	0.00000
629	num_unjug_ret@1000	701.00000
629	num_rel	19.00000
629	num_rel_ret	19.00000
629	map	0.18964
629	R-prec	0.21053
629	bpref	0.16898
629	recip_rank	1.00000
629	ndcg	0.47838
629	ndcg5	0.11305
629	ndcg10	0.21537
629	ndcg20	0.19974
629	ERR	0.11030
629	ERR10	0.09860
629	ERR20	0.10266
629	P1	1.00000
629	P5	0.20000
629	P10	0.30000
629	P15	0.26667
629	P20	0.20000
629	P30	0.13333
629	P50	0.12000
629	P100	0.09000
629	P200	0.09000
629	P500	0.03800
629	P1000	0.01900
630	num_ret	1000.00000
630	num_unjug_ret@1	0.00000
630	num_unjug_ret@10	0.00000
630	num_unjug_ret@20	0.00000
630	num_unjug_ret@100	2.00000
630	num_unjug_ret@1000	424.00000
630	num_rel	4.00000
630	num_rel_ret	4.00000
630	map	0.70288
630	R-prec	0.75000
630	bpref	0.68750
630	recip_rank	1.00000
630	ndcg	0.94255
630	ndcg5	0.91414
630	ndcg10	0.91414
630	ndcg20	0.91414
630	ERR	0.27458
630	ERR10	0.27399
630	ERR20	0.27399
630	P1	1.00000
630	P5	0.60000
630	P10	0.30000
630	P15	0.20000
630	P20	0.15000
630	P30	0.10000
630	P50	0.06000
630	P100	0.04000
630	P200	0.02000
630	P500	0.00800
630	P1000	0.00400
631	num_ret	1000.00000
631	num_unjug_ret@1	0.00000
631	num_unjug_ret@10	0.00000
631	num_unjug_ret@20	0.00000
631	num_unjug_ret@100	6.00000
631	num_unjug_ret@1000	427.00000
631	num_rel	115.00000
631	num_rel_ret	103.00000
631	map	0.14308
631	R-prec	0.15652
631	bpref	0.10578
631	recip_rank	0.50000
631	ndcg	0.50643
631	ndcg5	0.07133
631	ndcg10	0.07074
631	ndcg20	0.06993
631	ERR	0.06323
631	ERR10	0.03962
631	ERR20	0.04728
631	P1	0.00000
631	P5	0.20000
631	P10	0.20000
631	P15	0.26667
631	P20	0.20000
631	P30	0.20000
631	P50	0.18000
631	P100	0.15000
631	P200	0.17500
631	P500	0.13800
631	P1000	0.10300
632	num_ret	1000.00000
632	num_unjug_ret@1	0.00000
632	num_unjug_ret@10	0.00000
632	num_unjug_ret@20	0.00000
632	num_unjug_ret@100	0.00000
632	num_unjug_ret@1000	529.00000
632	num_rel	71.00000
632	num_rel_ret	65.00000
632	map	0.47554
632	R-prec	0.43662
632	bpref	0.41500
632	recip_rank	1.00000
632	ndcg	0.70727
632	ndcg5	0.43071
632	ndcg10	0.51769
632	ndcg20	0.55897
632	ERR	0.20010
632	ERR10	0.17982
632	ERR20	0.19309
632	P1	1.00000
632	P5	1.00000
632	P10	1.00000
632	P15	0.86667
632	P20	0.75000
632	P30	0.66667
632	P50	0.58000
632	P100	0.36000
632	P200	0.25000
632	P500	0.12000
632	P1000	0.06500
633	num_ret	1000.00000
633	num_unjug_ret@1	0.00000
633	num_unjug_ret@10	0.00000
633	num_unjug_ret@20	0.00000
633	num_unjug_ret@100	0.00000
633	num_unjug_ret@1000	549.00000
633	num_rel	47.00000
633	num_rel_ret	46.00000
633	map	0.64694
633	R-prec	0.55319
633	bpref	0.54776
633	recip_rank	1.00000
633	ndcg	0.77146
633	ndcg5	0.47477
633	ndcg10	0.65617
633	ndcg20	0.69494
633	ERR	0.18445
633	ERR10	0.16585
633	ERR20	0.17913
633	P1	1.00000
633	P5	1.00000
633	P10	1.00000
633	P15	1.00000
633	P20	0.90000
633	P30	0.70000
633	P50	0.52000
633	P100	0.35000
633	P200	0.21500
633	P500	0.08800
633	P1000	0.04600
634	num_ret	1000.00000
634	num_unjug_ret@1	0.00000
634	num_unjug_ret@10	0.00000
634	num_unjug_ret@20	0.00000
634	num_unjug_ret@100	10.00000
634	num_unjug_ret@1000	692.00000
634	num_rel	11.00000
634	num_rel_ret	11.00000
634	map	0.81105
634	R-prec	0.72727
634	bpref	0.80165
634	recip_rank	1.00000
634	ndcg	0.93228
634	ndcg5	0.83042
634	ndcg10	0.82633
634	ndcg20	0.93228
634	ERR	0.35535
634	ERR10	0.34945
634	ERR20	0.35535
634	P1	1.00000
634	P5	0.80000
634	P10	0.80000
634	P15	0.60000
634	P20	0.55000
634	P30	0.36667
634	P50	0.22000
634	P100	0.11000
634	P200	0.05500
634	P500	0.02200
634	P1000	0.01100
635	num_ret	1000.00000
635	num_unjug_ret@1	0.00000
635	num_unjug_ret@10	0.00000
635	num_unjug_ret@20	0.00000
635	num_unjug_ret@100	1.00000
635	num_unjug_ret@1000	580.00000
635	num_rel	19.00000
635	num_rel_ret	18.00000
635	map	0.73837
635	R-prec	0.73684
635	bpref	0.72853
635	recip_rank	1.00000
635	ndcg	0.90001
635	ndcg5	1.00000
635	ndcg10	0.92160
635	ndcg20	0.80362
635	ERR	0.16585
635	ERR10	0.15256
635	ERR20	0.16396
635	P1	1.00000
635	P5	1.00000
635	P10	0.90000
635	P15	0.86667
635	P20	0.70000
635	P30	0.50000
635	P50	0.32000
635	P100	0.16000
635	P200	0.08500
635	P500	0.03600
635	P1000	0.01800
636	num_ret	1000.00000
636	num_unjug_ret@1	0.00000
636	num_unjug_ret@10	0.00000
636	num_unjug_ret@20	0.00000
636	num_unjug_ret@100	3.00000
636	num_unjug_ret@1000	476.00000
636	num_rel	14.00000
636	num_rel_ret	13.00000
636	map	0.41245
636	R-prec	0.42857
636	bpref	0.42857
636	recip_rank	1.00000
636	ndcg	0.52450
636	ndcg5	0.28592
636	ndcg10	0.41625
636	ndcg20	0.41985
636	ERR	0.14157
636	ERR10	0.13658
636	ERR20	0.14079
636	P1	1.00000
636	P5	0.60000
636	P10	0.60000
636	P15	0.40000
636	P20	0.40000
636	P30	0.26667
636	P50	0.16000
636	P100	0.09000
636	P200	0.04500
636	P500	0.02200
636	P1000	0.01300
637	num_ret	1000.00000
637	num_unjug_ret@1	0.00000
637	num_unjug_ret@10	0.00000
637	num_unjug_ret@20	0.00000
637	num_unjug_ret@100	0.00000
637	num_unjug_ret@1000	635.00000
637	num_rel	22.00000
637	num_rel_ret	22.00000
637	map	0.51363
637	R-prec	0.40909
637	bpref	0.38223
637	recip_rank	1.00000
637	ndcg	0.68111
637	ndcg5	0.51818
637	ndcg10	0.49194
637	ndcg20	0.45596
637	ERR	0.19678
637	ERR10	0.18517
637	ERR20	0.19019
637	P1	1.00000
637	P5	1.00000
637	P10	0.60000
637	P15	0.46667
637	P20	0.45000
637	P30	0.36667
637	P50	0.30000
637	P100	0.21000
637	P200	0.11000
637	P500	0.04400
637	P1000	0.02200
638	num_ret	1000.00000
638	num_unjug_ret@1	0.00000
638	num_unjug_ret@10	0.00000
638	num_unjug_ret@20	0.00000
638	num_unjug_ret@100	23.00000
638	num_unjug_ret@1000	637.00000
638	num_rel	35.00000
638	num_rel_ret	26.00000
638	map	0.04111
638	R-prec	0.08571
638	bpref	0.04735
638	recip_rank	0.20000
638	ndcg	0.30061
638	ndcg5	0.04374
638	ndcg10	0.03469
638	ndcg20	0.04529
638	ERR	0.02494
638	ERR10	0.01250
638	ERR20	0.01558
638	P1	0.00000
638	P5	0.20000
638	P10	0.10000
638	P15	0.06667
638	P20	0.10000
638	P30	0.10000
638	P50	0.06000
638	P100	0.04000
638	P200	0.05000
638	P500	0.04200
638	P1000	0.02600
639	num_ret	1000.00000
639	num_unjug_ret@1	0.00000
639	num_unjug_ret@10	0.00000
639	num_unjug_ret@20	0.00000
639	num_unjug_ret@100	2.00000
639	num_unjug_ret@1000	516.00000
639	num_rel	32.00000
639	num_rel_ret	30.00000
639	map	0.31730
639	R-prec	0.28125
639	bpref	0.26270
639	recip_rank	1.00000
639	ndcg	0.72378
639	ndcg5	1.00000
639	ndcg10	0.78198
639	ndcg20	0.54429
639	ERR	0.15221
639	ERR10	0.14254
639	ERR20	0.14616
639	P1	1.00000
639	P5	1.00000
639	P10	0.70000
639	P15	0.53333
639	P20	0.40000
639	P30	0.30000
639	P50	0.22000
639	P100	0.16000
639	P200	0.09500
639	P500	0.05000
639	P1000	0.03000
640	num_ret	1000.00000
640	num_unjug_ret@1	0.00000
640	num_unjug_ret@10	0.00000
640	num_unjug_ret@20	0.00000
640	num_unjug_ret@100	0.00000
640	num_unjug_ret@1000	640.00000
640	num_rel	43.00000
640	num_rel_ret	43.00000
640	map	0.40640
640	R-prec	0.39535
640	bpref	0.32937
640	recip_rank	1.00000
640	ndcg	0.74973
640	ndcg5	0.62876
640	ndcg10	0.50347
640	ndcg20	0.44329
640	ERR	0.31078
640	ERR10	0.28898
640	ERR20	0.30408
640	P1	1.00000
640	P5	0.80000
640	P10	0.60000
640	P15	0.60000
640	P20	0.50000
640	P30	0.46667
640	P50	0.36000
640	P100	0.28000
640	P200	0.19500
640	P500	0.08600
640	P1000	0.04300
641	num_ret	1000.00000
641	num_unjug_ret@1	0.00000
641	num_unjug_ret@10	0.00000
641	num_unjug_ret@20	0.00000
641	num_unjug_ret@100	0.00000
641	num_unjug_ret@1000	533.00000
641	num_rel	49.00000
641	num_rel_ret	49.00000
641	map	0.39136
641	R-prec	0.38776
641	bpref	0.36235
641	recip_rank	0.50000
641	ndcg	0.70969
641	ndcg5	0.36005
641	ndcg10	0.32429
641	ndcg20	0.40598
641	ERR	0.18226
641	ERR10	0.15066
641	ERR20	0.17701
641	P1	0.00000
641	P5	0.40000
641	P10	0.40000
641	P15	0.53333
641	P20	0.50000
641	P30	0.50000
641	P50	0.38000
641	P100	0.34000
641	P200	0.22500
641	P500	0.09600
641	P1000	0.04900
642	num_ret	1000.00000
642	num_unjug_ret@1	0.00000
642	num_unjug_ret@10	0.00000
642	num_unjug_ret@20	0.00000
642	num_unjug_ret@100	0.00000
642	num_unjug_ret@1000	599.00000
642	num_rel	39.00000
642	num_rel_ret	37.00000
642	map	0.18874
642	R-prec	0.30769
642	bpref	0.21039
642	recip_rank	0.25000
642	ndcg	0.57461
642	ndcg5	0.17989
642	ndcg10	0.25953
642	ndcg20	0.23860
642	ERR	0.10676
642	ERR10	0.08569
642	ERR20	0.09721
642	P1	0.00000
642	P5	0.40000
642	P10	0.40000
642	P15	0.33333
642	P20	0.30000
642	P30	0.30000
642	P50	0.26000
642	P100	0.16000
642	P200	0.12500
642	P500	0.06800
642	P1000	0.03700
643	num_ret	1000.00000
643	num_unjug_ret@1	0.00000
643	num_unjug_ret@10	0.00000
643	num_unjug_ret@20	0.00000
643	num_unjug_ret@100	0.00000
643	num_unjug_ret@1000	540.00000
643	num_rel	29.00000
643	num_rel_ret	29.00000
643	map	0.26842
643	R-prec	0.27586
643	bpref	0.21760
643	recip_rank	0.50000
643	ndcg	0.52358
643	ndcg5	0.16375
643	ndcg10	0.16181
643	ndcg20	0.22367
643	ERR	0.08925
643	ERR10	0.06547
643	ERR20	0.08039
643	P1	0.00000
643	P5	0.60000
643	P10	0.40000
643	P15	0.33333
643	P20	0.35000
643	P30	0.26667
643	P50	0.22000
643	P100	0.19000
643	P200	0.13000
643	P500	0.05800
643	P1000	0.02900
644	num_ret	1000.00000
644	num_unjug_ret@1	0.00000
644	num_unjug_ret@10	0.00000
644	num_unjug_ret@20	0.00000
644	num_unjug_ret@100	0.00000
644	num_unjug_ret@1000	486.00000
644	num_rel	56.00000
644	num_rel_ret	45.00000
644	map	0.12878
644	R-prec	0.17857
644	bpref	0.12755
644	recip_rank	0.33333
644	ndcg	0.46732
644	ndcg5	0.05653
644	ndcg10	0.15053
644	ndcg20	0.14646
644	ERR	0.07352
644	ERR10	0.05324
644	ERR20	0.06220
644	P1	0.00000
644	P5	0.20000
644	P10	0.40000
644	P15	0.33333
644	P20	0.25000
644	P30	0.20000
644	P50	0.18000
644	P100	0.13000
644	P200	0.12500
644	P500	0.08600
644	P1000	0.04500
645	num_ret	1000.00000
645	num_unjug_ret@1	0.00000
645	num_unjug_ret@10	0.00000
645	num_unjug_ret@20	0.00000
645	num_unjug_ret@100	0.00000
645	num_unjug_ret@1000	486.00000
645	num_rel	29.00000
645	num_rel_ret	29.00000
645	map	0.67432
645	R-prec	0.62069
645	bpref	0.62307
645	recip_rank	1.00000
645	ndcg	0.90942
645	ndcg5	0.91253
645	ndcg10	0.82490
645	ndcg20	0.81433
645	ERR	0.37238
645	ERR10	0.36248
645	ERR20	0.37033
645	P1	1.00000
645	P5	1.00000
645	P10	0.90000
645	P15	0.80000
645	P20	0.80000
645	P30	0.60000
645	P50	0.44000
645	P100	0.24000
645	P200	0.13500
645	P500	0.05600
645	P1000	0.02900
646	num_ret	1000.00000
646	num_unjug_ret@1	0.00000
646	num_unjug_ret@10	0.00000
646	num_unjug_ret@20	0.00000
646	num_unjug_ret@100	0.00000
646	num_unjug_ret@1000	632.00000
646	num_rel	10.00000
646	num_rel_ret	10.00000
646	map	0.18189
646	R-prec	0.20000
646	bpref	0.13000
646	recip_rank	0.25000
646	ndcg	0.48145
646	ndcg5	0.16007
646	ndcg10	0.24420
646	ndcg20	0.29211
646	ERR	0.08376
646	ERR10	0.07227
646	ERR20	0.07649
646	P1	0.00000
646	P5	0.20000
646	P10	0.20000
646	P15	0.13333
646	P20	0.20000
646	P30	0.16667
646	P50	0.14000
646	P100	0.09000
646	P200	0.05000
646	P500	0.02000
646	P1000	0.01000
647	num_ret	1000.00000
647	num_unjug_ret@1	0.00000
647	num_unjug_ret@10	0.00000
647	num_unjug_ret@20	0.00000
647	num_unjug_ret@100	0.00000
647	num_unjug_ret@1000	447.00000
647	num_rel	33.00000
647	num_rel_ret	28.00000
647	map	0.39646
647	R-prec	0.36364
647	bpref	0.34343
647	recip_rank	1.00000
647	ndcg	0.69227
647	ndcg5	0.62380
647	ndcg10	0.52280
647	ndcg20	0.52093
647	ERR	0.30053
647	ERR10	0.28644
647	ERR20	0.29557
647	P1	1.00000
647	P5	0.80000
647	P10	0.80000
647	P15	0.73333
647	P20	0.55000
647	P30	0.40000
647	P50	0.30000
647	P100	0.20000
647	P200	0.11000
647	P500	0.05400
647	P1000	0.02800
648	num_ret	1000.00000
648	num_unjug_ret@1	0.00000
648	num_unjug_ret@10	0.00000
648	num_unjug_ret@20	0.00000
648	num_unjug_ret@100	3.00000
648	num_unjug_ret@1000	593.00000
648	num_rel	57.00000
648	num_rel_ret	51.00000
648	map	0.69927
648	R-prec	0.68421
648	bpref	0.67036
648	recip_rank	1.00000
648	ndcg	0.87866
648	ndcg5	0.77389
648	ndcg10	0.81086
648	ndcg20	0.85477
648	ERR	0.29106
648	ERR10	0.27953
648	ERR20	0.29014
648	P1	1.00000
648	P5	1.00000
648	P10	1.00000
648	P15	1.00000
648	P20	1.00000
648	P30	0.96667
648	P50	0.72000
648	P100	0.42000
648	P200	0.22000
648	P500	0.09600
648	P1000	0.05100
649	num_ret	1000.00000
649	num_unjug_ret@1	0.00000
649	num_unjug_ret@10	0.00000
649	num_unjug_ret@20	0.00000
649	num_unjug_ret@100	0.00000
649	num_unjug_ret@1000	564.00000
649	num_rel	37.00000
649	num_rel_ret	36.00000
649	map	0.70795
649	R-prec	0.56757
649	bpref	0.60701
649	recip_rank	1.00000
649	ndcg	0.91570
649	ndcg5	1.00000
649	ndcg10	1.00000
649	ndcg20	0.86344
649	ERR	0.17772
649	ERR10	0.15886
649	ERR20	0.17122
649	P1	1.00000
649	P5	1.00000
649	P10	1.00000
649	P15	0.93333
649	P20	0.80000
649	P30	0.63333
649	P50	0.52000
649	P100	0.35000
649	P200	0.18000
649	P500	0.07200
649	P1000	0.03600
650	num_ret	1000.00000
650	num_unjug_ret@1	0.00000
650	num_unjug_ret@10	0.00000
650	num_unjug_ret@20	0.00000
650	num_unjug_ret@100	0.00000
650	num_unjug_ret@1000	528.00000
650	num_rel	34.00000
650	num_rel_ret	28.00000
650	map	0.19116
650	R-prec	0.26471
650	bpref	0.17820
650	recip_rank	0.50000
650	ndcg	0.44758
650	ndcg5	0.21050
650	ndcg10	0.17237
650	ndcg20	0.20070
650	ERR	0.08245
650	ERR10	0.06177
650	ERR20	0.07149
650	P1	0.00000
650	P5	0.60000
650	P10	0.30000
650	P15	0.33333
650	P20	0.30000
650	P30	0.23333
650	P50	0.24000
650	P100	0.17000
650	P200	0.11000
650	P500	0.05400
650	P1000	0.02800
651	num_ret	1000.00000
651	num_unjug_ret@1	0.00000
651	num_unjug_ret@10	0.00000
651	num_unjug_ret@20	0.00000
651	num_unjug_ret@100	3.00000
651	num_unjug_ret@1000	515.00000
651	num_rel	38.00000
651	num_rel_ret	29.00000
651	map	0.03940
651	R-prec	0.05263
651	bpref	0.03047
651	recip_rank	0.09091
651	ndcg	0.29160
651	ndcg5	0.00000
651	ndcg10	0.00000
651	ndcg20	0.01948
651	ERR	0.01416
651	ERR10	0.00000
651	ERR20	0.00568
651	P1	0.00000
651	P5	0.00000
651	P10	0.00000
651	P15	0.06667
651	P20	0.05000
651	P30	0.06667
651	P50	0.06000
651	P100	0.06000
651	P200	0.05000
651	P500	0.04200
651	P1000	0.02900
652	num_ret	1000.00000
652	num_unjug_ret@1	0.00000
652	num_unjug_ret@10	0.00000
652	num_unjug_ret@20	0.00000
652	num_unjug_ret@100	7.00000
652	num_unjug_ret@1000	669.00000
652	num_rel	74.00000
652	num_rel_ret	44.00000
652	map	0.43651
652	R-prec	0.52703
652	bpref	0.48923
652	recip_rank	1.00000
652	ndcg	0.63663
652	ndcg5	0.83042
652	ndcg10	0.88995
652	ndcg20	0.85872
652	ERR	0.36320
652	ERR10	0.35301
652	ERR20	0.36226
652	P1	1.00000
652	P5	0.80000
652	P10	0.90000
652	P15	0.86667
652	P20	0.85000
652	P30	0.70000
652	P50	0.70000
652	P100	0.42000
652	P200	0.21000
652	P500	0.08800
652	P1000	0.04400
653	num_ret	1000.00000
653	num_unjug_ret@1	0.00000
653	num_unjug_ret@10	0.00000
653	num_unjug_ret@20	0.00000
653	num_unjug_ret@100	0.00000
653	num_unjug_ret@1000	807.00000
653	num_rel	75.00000
653	num_rel_ret	75.00000
653	map	0.53832
653	R-prec	0.57333
653	bpref	0.57671
653	recip_rank	1.00000
653	ndcg	0.75526
653	ndcg5	0.25912
653	ndcg10	0.21469
653	ndcg20	0.27297
653	ERR	0.15657
653	ERR10	0.11821
653	ERR20	0.14489
653	P1	1.00000
653	P5	0.40000
653	P10	0.40000
653	P15	0.46667
653	P20	0.45000
653	P30	0.53333
653	P50	0.54000
653	P100	0.57000
653	P200	0.36500
653	P500	0.15000
653	P1000	0.07500
654	num_ret	1000.00000
654	num_unjug_ret@1	0.00000
654	num_unjug_ret@10	0.00000
654	num_unjug_ret@20	0.00000
654	num_unjug_ret@100	3.00000
654	num_unjug_ret@1000	573.00000
654	num_rel	57.00000
654	num_rel_ret	56.00000
654	map	0.64290
654	R-prec	0.61404
654	bpref	0.58972
654	recip_rank	1.00000
654	ndcg	0.89685
654	ndcg5	1.00000
654	ndcg10	0.85798
654	ndcg20	0.90835
654	ERR	0.17652
654	ERR10	0.14883
654	ERR20	0.16848
654	P1	1.00000
654	P5	1.00000
654	P10	0.80000
654	P15	0.86667
654	P20	0.90000
654	P30	0.93333
654	P50	0.64000
654	P100	0.39000
654	P200	0.24500
654	P500	0.11000
654	P1000	0.05600
655	num_ret	1000.00000
655	num_unjug_ret@1	0.00000
655	num_unjug_ret@10	0.00000
655	num_unjug_ret@20	0.00000
655	num_unjug_ret@100	9.00000
655	num_unjug_ret@1000	578.00000
655	num_rel	7.00000
655	num_rel_ret	2.00000
655	map	0.00208
655	R-prec	0.00000
655	bpref	0.00000
655	recip_rank	0.00685
655	ndcg	0.09024
655	ndcg5	0.00000
655	ndcg10	0.00000
655	ndcg20	0.00000
655	ERR	0.00187
655	ERR10	0.00000
655	ERR20	0.00000
655	P1	0.00000
655	P5	0.00000
655	P10	0.00000
655	P15	0.00000
655	P20	0.00000
655	P30	0.00000
655	P50	0.00000
655	P100	0.00000
655	P200	0.00500
655	P500	0.00400
655	P1000	0.00200
656	num_ret	1000.00000
656	num_unjug_ret@1	0.00000
656	num_unjug_ret@10	0.00000
656	num_unjug_ret@20	0.00000
656	num_unjug_ret@100	0.00000
656	num_unjug_ret@1000	649.00000
656	num_rel	111.00000
656	num_rel_ret	108.00000
656	map	0.72142
656	R-prec	0.67568
656	bpref	0.69280
656	recip_rank	1.00000
656	ndcg	0.88480
656	ndcg5	0.77389
656	ndcg10	0.78965
656	ndcg20	0.81684
656	ERR	0.29055
656	ERR10	0.27841
656	ERR20	0.28935
656	P1	1.00000
656	P5	1.00000
656	P10	0.90000
656	P15	0.93333
656	P20	0.95000
656	P30	0.96667
656	P50	0.88000
656	P100	0.70000
656	P200	0.47500
656	P500	0.21200
656	P1000	0.10800
657	num_ret	1000.00000
657	num_unjug_ret@1	0.00000
657	num_unjug_ret@10	0.00000
657	num_unjug_ret@20	0.00000
657	num_unjug_ret@100	0.00000
657	num_unjug_ret@1000	520.00000
657	num_rel	16.00000
657	num_rel_ret	15.00000
657	map	0.54906
657	R-prec	0.50000
657	bpref	0.46875
657	recip_rank	1.00000
657	ndcg	0.88783
657	ndcg5	1.00000
657	ndcg10	0.83205
657	ndcg20	0.79332
657	ERR	0.36844
657	ERR10	0.36423
657	ERR20	0.36696
657	P1	1.00000
657	P5	1.00000
657	P10	0.70000
657	P15	0.46667
657	P20	0.40000
657	P30	0.30000
657	P50	0.24000
657	P100	0.12000
657	P200	0.06000
657	P500	0.03000
657	P1000	0.01500
658	num_ret	1000.00000
658	num_unjug_ret@1	0.00000
658	num_unjug_ret@10	0.00000
658	num_unjug_ret@20	0.00000
658	num_unjug_ret@100	21.00000
658	num_unjug_ret@1000	611.00000
658	num_rel	57.00000
658	num_rel_ret	48.00000
658	map	0.14928
658	R-prec	0.17544
658	bpref	0.13727
658	recip_rank	1.00000
658	ndcg	0.44438
658	ndcg5	0.28464
658	ndcg10	0.20592
658	ndcg20	0.14473
658	ERR	0.13823
658	ERR10	0.12524
658	ERR20	0.12825
658	P1	1.00000
658	P5	0.80000
658	P10	0.50000
658	P15	0.40000
658	P20	0.30000
658	P30	0.23333
658	P50	0.18000
658	P100	0.12000
658	P200	0.09000
658	P500	0.06600
658	P1000	0.04800
659	num_ret	1000.00000
659	num_unjug_ret@1	0.00000
659	num_unjug_ret@10	0.00000
659	num_unjug_ret@20	0.00000
659	num_unjug_ret@100	12.00000
659	num_unjug_ret@1000	666.00000
659	num_rel	16.00000
659	num_rel_ret	11.00000
659	map	0.16640
659	R-prec	0.25000
659	bpref	0.17188
659	recip_rank	1.00000
659	ndcg	0.60444
659	ndcg5	0.59526
659	ndcg10	0.48743
659	ndcg20	0.46537
659	ERR	0.23620
659	ERR10	0.22559
659	ERR20	0.23200
659	P1	1.00000
659	P5	0.40000
659	P10	0.20000
659	P15	0.26667
659	P20	0.20000
659	P30	0.13333
659	P50	0.12000
659	P100	0.08000
659	P200	0.05500
659	P500	0.02200
659	P1000	0.01100
660	num_ret	1000.00000
660	num_unjug_ret@1	0.00000
660	num_unjug_ret@10	0.00000
660	num_unjug_ret@20	0.00000
660	num_unjug_ret@100	0.00000
660	num_unjug_ret@1000	654.00000
660	num_rel	28.00000
660	num_rel_ret	28.00000
660	map	0.66299
660	R-prec	0.64286
660	bpref	0.62628
660	recip_rank	1.00000
660	ndcg	0.83729
660	ndcg5	0.64691
660	ndcg10	0.66332
660	ndcg20	0.70744
660	ERR	0.31435
660	ERR10	0.30059
660	ERR20	0.31082
660	P1	1.00000
660	P5	1.00000
660	P10	0.80000
660	P15	0.80000
660	P20	0.65000
660	P30	0.60000
660	P50	0.42000
660	P100	0.24000
660	P200	0.13000
660	P500	0.05600
660	P1000	0.02800
661	num_ret	1000.00000
661	num_unjug_ret@1	0.00000
661	num_unjug_ret@10	0.00000
661	num_unjug_ret@20	0.00000
661	num_unjug_ret@100	1.00000
661	num_unjug_ret@1000	584.00000
661	num_rel	34.00000
661	num_rel_ret	33.00000
661	map	0.62096
661	R-prec	0.64706
661	bpref	0.64446
661	recip_rank	1.00000
661	ndcg	0.76148
661	ndcg5	0.51477
661	ndcg10	0.51349
661	ndcg20	0.57864
661	ERR	0.23448
661	ERR10	0.21584
661	ERR20	0.22812
661	P1	1.00000
661	P5	0.80000
661	P10	0.80000
661	P15	0.73333
661	P20	0.65000
661	P30	0.63333
661	P50	0.54000
661	P100	0.29000
661	P200	0.15500
661	P500	0.06200
661	P1000	0.03300
662	num_ret	1000.00000
662	num_unjug_ret@1	0.00000
662	num_unjug_ret@10	0.00000
662	num_unjug_ret@20	0.00000
662	num_unjug_ret@100	31.00000
662	num_unjug_ret@1000	802.00000
662	num_rel	34.00000
662	num_rel_ret	12.00000
662	map	0.29832
662	R-prec	0.29412
662	bpref	0.29498
662	recip_rank	1.00000
662	ndcg	0.53533
662	ndcg5	0.70339
662	ndcg10	0.79459
662	ndcg20	0.64297
662	ERR	0.23349
662	ERR10	0.23084
662	ERR20	0.23274
662	P1	1.00000
662	P5	1.00000
662	P10	0.90000
662	P15	0.66667
662	P20	0.50000
662	P30	0.33333
662	P50	0.22000
662	P100	0.12000
662	P200	0.06000
662	P500	0.02400
662	P1000	0.01200
663	num_ret	1000.00000
663	num_unjug_ret@1	0.00000
663	num_unjug_ret@10	0.00000
663	num_unjug_ret@20	0.00000
663	num_unjug_ret@100	1.00000
663	num_unjug_ret@1000	579.00000
663	num_rel	22.00000
663	num_rel_ret	22.00000
663	map	0.66753
663	R-prec	0.59091
663	bpref	0.61777
663	recip_rank	1.00000
663	ndcg	0.88126
663	ndcg5	0.85734
663	ndcg10	0.70101
663	ndcg20	0.69232
663	ERR	0.34401
663	ERR10	0.32805
663	ERR20	0.34096
663	P1	1.00000
663	P5	1.00000
663	P10	0.70000
663	P15	0.73333
663	P20	0.60000
663	P30	0.53333
663	P50	0.36000
663	P100	0.20000
663	P200	0.10500
663	P500	0.04200
663	P1000	0.02200
664	num_ret	1000.00000
664	num_unjug_ret@1	0.00000
664	num_unjug_ret@10	0.00000
664	num_unjug_ret@20	0.00000
664	num_unjug_ret@100	1.00000
664	num_unjug_ret@1000	596.00000
664	num_rel	9.00000
664	num_rel_ret	9.00000
664	map	0.69404
664	R-prec	0.66667
664	bpref	0.70370
664	recip_rank	1.00000
664	ndcg	0.88641
664	ndcg5	0.78601
664	ndcg10	0.84699
664	ndcg20	0.86977
664	ERR	0.31621
664	ERR10	0.31471
664	ERR20	0.31583
664	P1	1.00000
664	P5	0.80000
664	P10	0.70000
664	P15	0.53333
664	P20	0.40000
664	P30	0.26667
664	P50	0.18000
664	P100	0.09000
664	P200	0.04500
664	P500	0.01800
664	P1000	0.00900
665	num_ret	1000.00000
665	num_unjug_ret@1	0.00000
665	num_unjug_ret@10	0.00000
665	num_unjug_ret@20	0.00000
665	num_unjug_ret@100	3.00000
665	num_unjug_ret@1000	600.00000
665	num_rel	19.00000
665	num_rel_ret	19.00000
665	map	0.24266
665	R-prec	0.31579
665	bpref	0.25208
665	recip_rank	0.50000
665	ndcg	0.50838
665	ndcg5	0.21453
665	ndcg10	0.31362
665	ndcg20	0.26063
665	ERR	0.07646
665	ERR10	0.06778
665	ERR20	0.07060
665	P1	0.00000
665	P5	0.40000
665	P10	0.50000
665	P15	0.33333
665	P20	0.30000
665	P30	0.26667
665	P50	0.20000
665	P100	0.11000
665	P200	0.07000
665	P500	0.03800
665	P1000	0.01900
666	num_ret	1000.00000
666	num_unjug_ret@1	0.00000
666	num_unjug_ret@10	0.00000
666	num_unjug_ret@20	0.00000
666	num_unjug_ret@100	2.00000
666	num_unjug_ret@1000	602.00000
666	num_rel	3.00000
666	num_rel_ret	2.00000
666	map	0.03172
666	R-prec	0.00000
666	bpref	0.00000
666	recip_rank	0.09091
666	ndcg	0.18371
666	ndcg5	0.00000
666	ndcg10	0.00000
666	ndcg20	0.13090
666	ERR	0.00581
666	ERR10	0.00000
666	ERR20	0.00568
666	P1	0.00000
666	P5	0.00000
666	P10	0.00000
666	P15	0.06667
666	P20	0.05000
666	P30	0.03333
666	P50	0.02000
666	P100	0.01000
666	P200	0.00500
666	P500	0.00400
666	P1000	0.00200
667	num_ret	1000.00000
667	num_unjug_ret@1	0.00000
667	num_unjug_ret@10	0.00000
667	num_unjug_ret@20	0.00000
667	num_unjug_ret@100	0.00000
667	num_unjug_ret@1000	562.00000
667	num_rel	41.00000
667	num_rel_ret	35.00000
667	map	0.46050
667	R-prec	0.46341
667	bpref	0.41820
667	recip_rank	1.00000
667	ndcg	0.76964
667	ndcg5	0.83042
667	ndcg10	0.88995
667	ndcg20	0.71990
667	ERR	0.15999
667	ERR10	0.14380
667	ERR20	0.15306
667	P1	1.00000
667	P5	0.80000
667	P10	0.90000
667	P15	0.80000
667	P20	0.65000
667	P30	0.46667
667	P50	0.40000
667	P100	0.29000
667	P200	0.15500
667	P500	0.07000
667	P1000	0.03500
668	num_ret	1000.00000
668	num_unjug_ret@1	0.00000
668	num_unjug_ret@10	0.00000
668	num_unjug_ret@20	0.00000
668	num_unjug_ret@100	1.00000
668	num_unjug_ret@1000	571.00000
668	num_rel	36.00000
668	num_rel_ret	34.00000
668	map	0.40135
668	R-prec	0.38889
668	bpref	0.34414
668	recip_rank	1.00000
668	ndcg	0.73780
668	ndcg5	0.64557
668	ndcg10	0.59291
668	ndcg20	0.58369
668	ERR	0.32109
668	ERR10	0.30579
668	ERR20	0.31570
668	P1	1.00000
668	P5	0.80000
668	P10	0.70000
668	P15	0.60000
668	P20	0.50000
668	P30	0.43333
668	P50	0.32000
668	P100	0.24000
668	P200	0.14500
668	P500	0.06600
668	P1000	0.03400
669	num_ret	1000.00000
669	num_unjug_ret@1	0.00000
669	num_unjug_ret@10	0.00000
669	num_unjug_ret@20	0.00000
669	num_unjug_ret@100	0.00000
669	num_unjug_ret@1000	562.00000
669	num_rel	23.00000
669	num_rel_ret	23.00000
669	map	0.14980
669	R-prec	0.04348
669	bpref	0.04537
669	recip_rank	1.00000
669	ndcg	0.45383
669	ndcg5	0.13869
669	ndcg10	0.11357
669	ndcg20	0.08848
669	ERR	0.07915
669	ERR10	0.06250
669	ERR20	0.06250
669	P1	1.00000
669	P5	0.20000
669	P10	0.10000
669	P15	0.06667
669	P20	0.05000
669	P30	0.10000
669	P50	0.18000
669	P100	0.13000
669	P200	0.08000
669	P500	0.04200
669	P1000	0.02300
670	num_ret	1000.00000
670	num_unjug_ret@1	0.00000
670	num_unjug_ret@10	0.00000
670	num_unjug_ret@20	0.00000
670	num_unjug_ret@100	0.00000
670	num_unjug_ret@1000	656.00000
670	num_rel	24.00000
670	num_rel_ret	18.00000
670	map	0.20801
670	R-prec	0.37500
670	bpref	0.28472
670	recip_rank	0.33333
670	ndcg	0.46934
670	ndcg5	0.18807
670	ndcg10	0.24487
670	ndcg20	0.35567
670	ERR	0.07548
670	ERR10	0.05107
670	ERR20	0.07244
670	P1	0.00000
670	P5	0.40000
670	P10	0.40000
670	P15	0.53333
670	P20	0.40000
670	P30	0.30000
670	P50	0.18000
670	P100	0.11000
670	P200	0.07500
670	P500	0.03400
670	P1000	0.01800
671	num_ret	1000.00000
671	num_unjug_ret@1	0.00000
671	num_unjug_ret@10	0.00000
671	num_unjug_ret@20	0.00000
671	num_unjug_ret@100	1.00000
671	num_unjug_ret@1000	747.00000
671	num_rel	70.00000
671	num_rel_ret	67.00000
671	map	0.31552
671	R-prec	0.41429
671	bpref	0.31224
671	recip_rank	0.12500
671	ndcg	0.58951
671	ndcg5	0.00000
671	ndcg10	0.09065
671	ndcg20	0.15101
671	ERR	0.05419
671	ERR10	0.02344
671	ERR20	0.03634
671	P1	0.00000
671	P5	0.00000
671	P10	0.10000
671	P15	0.20000
671	P20	0.25000
671	P30	0.33333
671	P50	0.42000
671	P100	0.37000
671	P200	0.28000
671	P500	0.13400
671	P1000	0.06700
673	num_ret	1000.00000
673	num_unjug_ret@1	0.00000
673	num_unjug_ret@10	0.00000
673	num_unjug_ret@20	0.00000
673	num_unjug_ret@100	1.00000
673	num_unjug_ret@1000	678.00000
673	num_rel	23.00000
673	num_rel_ret	23.00000
673	map	0.22021
673	R-prec	0.26087
673	bpref	0.22495
673	recip_rank	0.33333
673	ndcg	0.57398
673	ndcg5	0.26994
673	ndcg10	0.42227
673	ndcg20	0.40224
673	ERR	0.11588
673	ERR10	0.10552
673	ERR20	0.11288
673	P1	0.00000
673	P5	0.60000
673	P10	0.50000
673	P15	0.40000
673	P20	0.30000
673	P30	0.20000
673	P50	0.16000
673	P100	0.15000
673	P200	0.09000
673	P500	0.04600
673	P1000	0.02300
674	num_ret	1000.00000
674	num_unjug_ret@1	0.00000
674	num_unjug_ret@10	0.00000
674	num_unjug_ret@20	0.00000
674	num_unjug_ret@100	2.00000
674	num_unjug_ret@1000	705.00000
674	num_rel	20.00000
674	num_rel_ret	18.00000
674	map	0.11441
674	R-prec	0.25000
674	bpref	0.13500
674	recip_rank	0.11111
674	ndcg	0.45677
674	ndcg5	0.00000
674	ndcg10	0.12988
674	ndcg20	0.19299
674	ERR	0.02828
674	ERR10	0.01280
674	ERR20	0.02393
674	P1	0.00000
674	P5	0.00000
674	P10	0.20000
674	P15	0.33333
674	P20	0.25000
674	P30	0.16667
674	P50	0.12000
674	P100	0.09000
674	P200	0.07000
674	P500	0.03600
674	P1000	0.01800
675	num_ret	1000.00000
675	num_unjug_ret@1	0.00000
675	num_unjug_ret@10	0.00000
675	num_unjug_ret@20	0.00000
675	num_unjug_ret@100	0.00000
675	num_unjug_ret@1000	625.00000
675	num_rel	25.00000
675	num_rel_ret	25.00000
675	map	0.27450
675	R-prec	0.36000
675	bpref	0.25920
675	recip_rank	1.00000
675	ndcg	0.68581
675	ndcg5	0.33916
675	ndcg10	0.43418
675	ndcg20	0.41555
675	ERR	0.10225
675	ERR10	0.08485
675	ERR20	0.09508
675	P1	1.00000
675	P5	0.20000
675	P10	0.40000
675	P15	0.33333
675	P20	0.40000
675	P30	0.33333
675	P50	0.24000
675	P100	0.15000
675	P200	0.10000
675	P500	0.05000
675	P1000	0.02500
676	num_ret	1000.00000
676	num_unjug_ret@1	0.00000
676	num_unjug_ret@10	0.00000
676	num_unjug_ret@20	0.00000
676	num_unjug_ret@100	0.00000
676	num_unjug_ret@1000	734.00000
676	num_rel	49.00000
676	num_rel_ret	49.00000
676	map	0.26896
676	R-prec	0.30612
676	bpref	0.20616
676	recip_rank	1.00000
676	ndcg	0.65596
676	ndcg5	0.33916
676	ndcg10	0.29346
676	ndcg20	0.31266
676	ERR	0.23692
676	ERR10	0.20926
676	ERR20	0.22957
676	P1	1.00000
676	P5	0.20000
676	P10	0.20000
676	P15	0.26667
676	P20	0.35000
676	P30	0.30000
676	P50	0.30000
676	P100	0.25000
676	P200	0.20500
676	P500	0.09600
676	P1000	0.04900
677	num_ret	1000.00000
677	num_unjug_ret@1	0.00000
677	num_unjug_ret@10	0.00000
677	num_unjug_ret@20	0.00000
677	num_unjug_ret@100	3.00000
677	num_unjug_ret@1000	662.00000
677	num_rel	9.00000
677	num_rel_ret	9.00000
677	map	0.79481
677	R-prec	0.55556
677	bpref	0.70370
677	recip_rank	1.00000
677	ndcg	0.95633
677	ndcg5	1.00000
677	ndcg10	0.79118
677	ndcg20	0.92098
677	ERR	0.25904
677	ERR10	0.24829
677	ERR20	0.25757
677	P1	1.00000
677	P5	1.00000
677	P10	0.50000
677	P15	0.53333
677	P20	0.40000
677	P30	0.30000
677	P50	0.18000
677	P100	0.09000
677	P200	0.04500
677	P500	0.01800
677	P1000	0.00900
678	num_ret	1000.00000
678	num_unjug_ret@1	0.00000
678	num_unjug_ret@10	0.00000
678	num_unjug_ret@20	0.00000
678	num_unjug_ret@100	1.00000
678	num_unjug_ret@1000	642.00000
678	num_rel	19.00000
678	num_rel_ret	12.00000
678	map	0.31985
678	R-prec	0.31579
678	bpref	0.30748
678	recip_rank	1.00000
678	ndcg	0.54659
678	ndcg5	0.51571
678	ndcg10	0.50857
678	ndcg20	0.43017
678	ERR	0.26968
678	ERR10	0.26406
678	ERR20	0.26406
678	P1	1.00000
678	P5	0.80000
678	P10	0.60000
678	P15	0.40000
678	P20	0.30000
678	P30	0.26667
678	P50	0.16000
678	P100	0.09000
678	P200	0.05500
678	P500	0.02400
678	P1000	0.01200
679	num_ret	1000.00000
679	num_unjug_ret@1	0.00000
679	num_unjug_ret@10	0.00000
679	num_unjug_ret@20	0.00000
679	num_unjug_ret@100	7.00000
679	num_unjug_ret@1000	651.00000
679	num_rel	6.00000
679	num_rel_ret	6.00000
679	map	1.00000
679	R-prec	1.00000
679	bpref	1.00000
679	recip_rank	1.00000
679	ndcg	1.00000
679	ndcg5	1.00000
679	ndcg10	1.00000
679	ndcg20	1.00000
679	ERR	0.14018
679	ERR10	0.14018
679	ERR20	0.14018
679	P1	1.00000
679	P5	1.00000
679	P10	0.60000
679	P15	0.40000
679	P20	0.30000
679	P30	0.20000
679	P50	0.12000
679	P100	0.06000
679	P200	0.03000
679	P500	0.01200
679	P1000	0.00600
680	num_ret	1000.00000
680	num_unjug_ret@1	0.00000
680	num_unjug_ret@10	0.00000
680	num_unjug_ret@20	0.00000
680	num_unjug_ret@100	9.00000
680	num_unjug_ret@1000	644.00000
680	num_rel	24.00000
680	num_rel_ret	24.00000
680	map	0.23857
680	R-prec	0.29167
680	bpref	0.17361
680	recip_rank	0.16667
680	ndcg	0.50158
680	ndcg5	0.00000
680	ndcg10	0.05444
680	ndcg20	0.17511
680	ERR	0.03849
680	ERR10	0.01042
680	ERR20	0.02706
680	P1	0.00000
680	P5	0.00000
680	P10	0.10000
680	P15	0.20000
680	P20	0.30000
680	P30	0.30000
680	P50	0.26000
680	P100	0.20000
680	P200	0.11500
680	P500	0.04800
680	P1000	0.02400
681	num_ret	1000.00000
681	num_unjug_ret@1	0.00000
681	num_unjug_ret@10	0.00000
681	num_unjug_ret@20	0.00000
681	num_unjug_ret@100	3.00000
681	num_unjug_ret@1000	671.00000
681	num_rel	50.00000
681	num_rel_ret	50.00000
681	map	0.62749
681	R-prec	0.64000
681	bpref	0.59800
681	recip_rank	1.00000
681	ndcg	0.79284
681	ndcg5	0.46702
681	ndcg10	0.56412
681	ndcg20	0.58715
681	ERR	0.28931
681	ERR10	0.27254
681	ERR20	0.28232
681	P1	1.00000
681	P5	0.60000
681	P10	0.80000
681	P15	0.73333
681	P20	0.75000
681	P30	0.66667
681	P50	0.64000
681	P100	0.43000
681	P200	0.23500
681	P500	0.10000
681	P1000	0.05000
682	num_ret	1000.00000
682	num_unjug_ret@1	0.00000
682	num_unjug_ret@10	0.00000
682	num_unjug_ret@20	0.00000
682	num_unjug_ret@100	3.00000
682	num_unjug_ret@1000	643.00000
682	num_rel	41.00000
682	num_rel_ret	33.00000
682	map	0.23095
682	R-prec	0.21951
682	bpref	0.19929
682	recip_rank	0.50000
682	ndcg	0.49583
682	ndcg5	0.37211
682	ndcg10	0.41014
682	ndcg20	0.37041
682	ERR	0.14347
682	ERR10	0.13381
682	ERR20	0.13823
682	P1	0.00000
682	P5	0.60000
682	P10	0.60000
682	P15	0.46667
682	P20	0.40000
682	P30	0.30000
682	P50	0.24000
682	P100	0.20000
682	P200	0.14000
682	P500	0.06200
682	P1000	0.03300
683	num_ret	1000.00000
683	num_unjug_ret@1	0.00000
683	num_unjug_ret@10	0.00000
683	num_unjug_ret@20	0.00000
683	num_unjug_ret@100	4.00000
683	num_unjug_ret@1000	475.00000
683	num_rel	103.00000
683	num_rel_ret	58.00000
683	map	0.13134
683	R-prec	0.20388
683	bpref	0.14855
683	recip_rank	1.00000
683	ndcg	0.49670
683	ndcg5	0.69921
683	ndcg10	0.59576
683	ndcg20	0.38449
683	ERR	0.32962
683	ERR10	0.31955
683	ERR20	0.31955
683	P1	1.00000
683	P5	0.60000
683	P10	0.50000
683	P15	0.33333
683	P20	0.25000
683	P30	0.30000
683	P50	0.22000
683	P100	0.21000
683	P200	0.18500
683	P500	0.09800
683	P1000	0.05800
684	num_ret	1000.00000
684	num_unjug_ret@1	0.00000
684	num_unjug_ret@10	0.00000
684	num_unjug_ret@20	0.00000
684	num_unjug_ret@100	2.00000
684	num_unjug_ret@1000	557.00000
684	num_rel	41.00000
684	num_rel_ret	36.00000
684	map	0.10916
684	R-prec	0.12195
684	bpref	0.08804
684	recip_rank	0.16667
684	ndcg	0.43663
684	ndcg5	0.00000
684	ndcg10	0.07840
684	ndcg20	0.12249
684	ERR	0.05463
684	ERR10	0.03125
684	ERR20	0.04608
684	P1	0.00000
684	P5	0.00000
684	P10	0.10000
684	P15	0.13333
684	P20	0.20000
684	P30	0.16667
684	P50	0.14000
684	P100	0.13000
684	P200	0.11500
684	P500	0.07000
684	P1000	0.03600
685	num_ret	1000.00000
685	num_unjug_ret@1	0.00000
685	num_unjug_ret@10	0.00000
685	num_unjug_ret@20	0.00000
685	num_unjug_ret@100	0.00000
685	num_unjug_ret@1000	643.00000
685	num_rel	13.00000
685	num_rel_ret	12.00000
685	map	0.16966
685	R-prec	0.23077
685	bpref	0.14201
685	recip_rank	0.25000
685	ndcg	0.41841
685	ndcg5	0.05336
685	ndcg10	0.08140
685	ndcg20	0.17415
685	ERR	0.05308
685	ERR10	0.02539
685	ERR20	0.04104
685	P1	0.00000
685	P5	0.20000
685	P10	0.20000
685	P15	0.26667
685	P20	0.20000
685	P30	0.20000
685	P50	0.16000
685	P100	0.08000
685	P200	0.06000
685	P500	0.02400
685	P1000	0.01200
686	num_ret	1000.00000
686	num_unjug_ret@1	0.00000
686	num_unjug_ret@10	0.00000
686	num_unjug_ret@20	0.00000
686	num_unjug_ret@100	0.00000
686	num_unjug_ret@1000	547.00000
686	num_rel	32.00000
686	num_rel_ret	32.00000
686	map	0.40456
686	R-prec	0.46875
686	bpref	0.41113
686	recip_rank	0.33333
686	ndcg	0.60446
686	ndcg5	0.14895
686	ndcg10	0.21821
686	ndcg20	0.39646
686	ERR	0.10014
686	ERR10	0.06561
686	ERR20	0.09329
686	P1	0.00000
686	P5	0.60000
686	P10	0.60000
686	P15	0.60000
686	P20	0.55000
686	P30	0.46667
686	P50	0.40000
686	P100	0.25000
686	P200	0.13500
686	P500	0.06000
686	P1000	0.03200
687	num_ret	1000.00000
687	num_unjug_ret@1	0.00000
687	num_unjug_ret@10	0.00000
687	num_unjug_ret@20	0.00000
687	num_unjug_ret@100	3.00000
687	num_unjug_ret@1000	523.00000
687	num_rel	87.00000
687	num_rel_ret	67.00000
687	map	0.18202
687	R-prec	0.20690
687	bpref	0.17281
687	recip_rank	1.00000
687	ndcg	0.47657
687	ndcg5	0.27681
687	ndcg10	0.29628
687	ndcg20	0.26148
687	ERR	0.16177
687	ERR10	0.14456
687	ERR20	0.15659
687	P1	1.00000
687	P5	0.80000
687	P10	0.70000
687	P15	0.53333
687	P20	0.55000
687	P30	0.40000
687	P50	0.30000
687	P100	0.18000
687	P200	0.13500
687	P500	0.09000
687	P1000	0.06700
688	num_ret	1000.00000
688	num_unjug_ret@1	0.00000
688	num_unjug_ret@10	0.00000
688	num_unjug_ret@20	0.00000
688	num_unjug_ret@100	23.00000
688	num_unjug_ret@1000	645.00000
688	num_rel	161.00000
688	num_rel_ret	83.00000
688	map	0.12227
688	R-prec	0.22981
688	bpref	0.24139
688	recip_rank	0.20000
688	ndcg	0.39691
688	ndcg5	0.13121
688	ndcg10	0.17903
688	ndcg20	0.20913
688	ERR	0.09226
688	ERR10	0.06261
688	ERR20	0.07983
688	P1	0.00000
688	P5	0.20000
688	P10	0.30000
688	P15	0.33333
688	P20	0.35000
688	P30	0.36667
688	P50	0.38000
688	P100	0.26000
688	P200	0.22500
688	P500	0.13600
688	P1000	0.08300
689	num_ret	1000.00000
689	num_unjug_ret@1	0.00000
689	num_unjug_ret@10	0.00000
689	num_unjug_ret@20	0.00000
689	num_unjug_ret@100	2.00000
689	num_unjug_ret@1000	542.00000
689	num_rel	17.00000
689	num_rel_ret	12.00000
689	map	0.05352
689	R-prec	0.05882
689	bpref	0.04498
689	recip_rank	0.20000
689	ndcg	0.29629
689	ndcg5	0.13121
689	ndcg10	0.08514
689	ndcg20	0.06804
689	ERR	0.05374
689	ERR10	0.03750
689	ERR20	0.03750
689	P1	0.00000
689	P5	0.20000
689	P10	0.10000
689	P15	0.06667
689	P20	0.05000
689	P30	0.10000
689	P50	0.08000
689	P100	0.06000
689	P200	0.04000
689	P500	0.02200
689	P1000	0.01200
690	num_ret	1000.00000
690	num_unjug_ret@1	0.00000
690	num_unjug_ret@10	0.00000
690	num_unjug_ret@20	0.00000
690	num_unjug_ret@100	7.00000
690	num_unjug_ret@1000	518.00000
690	num_rel	14.00000
690	num_rel_ret	3.00000
690	map	0.00265
690	R-prec	0.00000
690	bpref	0.00000
690	recip_rank	0.02381
690	ndcg	0.07465
690	ndcg5	0.00000
690	ndcg10	0.00000
690	ndcg20	0.00000
690	ERR	0.00180
690	ERR10	0.00000
690	ERR20	0.00000
690	P1	0.00000
690	P5	0.00000
690	P10	0.00000
690	P15	0.00000
690	P20	0.00000
690	P30	0.00000
690	P50	0.02000
690	P100	0.01000
690	P200	0.00500
690	P500	0.00600
690	P1000	0.00300
691	num_ret	1000.00000
691	num_unjug_ret@1	0.00000
691	num_unjug_ret@10	0.00000
691	num_unjug_ret@20	0.00000
691	num_unjug_ret@100	0.00000
691	num_unjug_ret@1000	604.00000
691	num_rel	21.00000
691	num_rel_ret	20.00000
691	map	0.28126
691	R-prec	0.28571
691	bpref	0.24036
691	recip_rank	1.00000
691	ndcg	0.67280
691	ndcg5	0.61643
691	ndcg10	0.40002
691	ndcg20	0.36758
691	ERR	0.10783
691	ERR10	0.08813
691	ERR20	0.09878
691	P1	1.00000
691	P5	0.60000
691	P10	0.30000
691	P15	0.33333
691	P20	0.30000
691	P30	0.30000
691	P50	0.24000
691	P100	0.14000
691	P200	0.08000
691	P500	0.03600
691	P1000	0.02000
692	num_ret	1000.00000
692	num_unjug_ret@1	0.00000
692	num_unjug_ret@10	0.00000
692	num_unjug_ret@20	0.00000
692	num_unjug_ret@100	1.00000
692	num_unjug_ret@1000	666.00000
692	num_rel	27.00000
692	num_rel_ret	26.00000
692	map	0.28807
692	R-prec	0.33333
692	bpref	0.27435
692	recip_rank	0.33333
692	ndcg	0.60444
692	ndcg5	0.33380
692	ndcg10	0.31746
692	ndcg20	0.39764
692	ERR	0.12992
692	ERR10	0.10992
692	ERR20	0.12423
692	P1	0.00000
692	P5	0.60000
692	P10	0.40000
692	P15	0.46667
692	P20	0.40000
692	P30	0.33333
692	P50	0.24000
692	P100	0.19000
692	P200	0.12000
692	P500	0.05000
692	P1000	0.02600
693	num_ret	1000.00000
693	num_unjug_ret@1	0.00000
693	num_unjug_ret@10	0.00000
693	num_unjug_ret@20	0.00000
693	num_unjug_ret@100	0.00000
693	num_unjug_ret@1000	573.00000
693	num_rel	27.00000
693	num_rel_ret	26.00000
693	map	0.26042
693	R-prec	0.29630
693	bpref	0.24417
693	recip_rank	0.50000
693	ndcg	0.51384
693	ndcg5	0.12609
693	ndcg10	0.13519
693	ndcg20	0.20621
693	ERR	0.07632
693	ERR10	0.04846
693	ERR20	0.06259
693	P1	0.00000
693	P5	0.40000
693	P10	0.30000
693	P15	0.26667
693	P20	0.30000
693	P30	0.33333
693	P50	0.32000
693	P100	0.20000
693	P200	0.11000
693	P500	0.05000
693	P1000	0.02600
694	num_ret	1000.00000
694	num_unjug_ret@1	0.00000
694	num_unjug_ret@10	0.00000
694	num_unjug_ret@20	0.00000
694	num_unjug_ret@100	1.00000
694	num_unjug_ret@1000	698.00000
694	num_rel	88.00000
694	num_rel_ret	88.00000
694	map	0.49923
694	R-prec	0.52273
694	bpref	0.47508
694	recip_rank	1.00000
694	ndcg	0.86323
694	ndcg5	0.83479
694	ndcg10	0.72641
694	ndcg20	0.69164
694	ERR	0.26363
694	ERR10	0.23932
694	ERR20	0.25314
694	P1	1.00000
694	P5	0.60000
694	P10	0.50000
694	P15	0.53333
694	P20	0.55000
694	P30	0.50000
694	P50	0.56000
694	P100	0.51000
694	P200	0.38000
694	P500	0.17600
694	P1000	0.08800
695	num_ret	1000.00000
695	num_unjug_ret@1	0.00000
695	num_unjug_ret@10	0.00000
695	num_unjug_ret@20	0.00000
695	num_unjug_ret@100	0.00000
695	num_unjug_ret@1000	557.00000
695	num_rel	89.00000
695	num_rel_ret	72.00000
695	map	0.30974
695	R-prec	0.32584
695	bpref	0.28645
695	recip_rank	1.00000
695	ndcg	0.62957
695	ndcg5	0.28712
695	ndcg10	0.47845
695	ndcg20	0.55207
695	ERR	0.16943
695	ERR10	0.14747
695	ERR20	0.16320
695	P1	1.00000
695	P5	0.80000
695	P10	0.90000
695	P15	0.80000
695	P20	0.65000
695	P30	0.60000
695	P50	0.50000
695	P100	0.30000
695	P200	0.21500
695	P500	0.12600
695	P1000	0.07200
696	num_ret	1000.00000
696	num_unjug_ret@1	0.00000
696	num_unjug_ret@10	0.00000
696	num_unjug_ret@20	0.00000
696	num_unjug_ret@100	0.00000
696	num_unjug_ret@1000	655.00000
696	num_rel	31.00000
696	num_rel_ret	21.00000
696	map	0.29549
696	R-prec	0.38710
696	bpref	0.33403
696	recip_rank	0.50000
696	ndcg	0.57647
696	ndcg5	0.52963
696	ndcg10	0.55515
696	ndcg20	0.50507
696	ERR	0.10081
696	ERR10	0.08366
696	ERR20	0.09510
696	P1	0.00000
696	P5	0.60000
696	P10	0.60000
696	P15	0.60000
696	P20	0.50000
696	P30	0.40000
696	P50	0.30000
696	P100	0.19000
696	P200	0.10000
696	P500	0.04000
696	P1000	0.02100
697	num_ret	1000.00000
697	num_unjug_ret@1	0.00000
697	num_unjug_ret@10	0.00000
697	num_unjug_ret@20	0.00000
697	num_unjug_ret@100	0.00000
697	num_unjug_ret@1000	534.00000
697	num_rel	50.00000
697	num_rel_ret	49.00000
697	map	0.28409
697	R-prec	0.24000
697	bpref	0.20120
697	recip_rank	1.00000
697	ndcg	0.73012
697	ndcg5	0.65836
697	ndcg10	0.61974
697	ndcg20	0.58345
697	ERR	0.31677
697	ERR10	0.30561
697	ERR20	0.31283
697	P1	1.00000
697	P5	0.80000
697	P10	0.70000
697	P15	0.53333
697	P20	0.45000
697	P30	0.30000
697	P50	0.24000
697	P100	0.21000
697	P200	0.15500
697	P500	0.09200
697	P1000	0.04900
698	num_ret	1000.00000
698	num_unjug_ret@1	0.00000
698	num_unjug_ret@10	0.00000
698	num_unjug_ret@20	0.00000
698	num_unjug_ret@100	0.00000
698	num_unjug_ret@1000	566.00000
698	num_rel	10.00000
698	num_rel_ret	10.00000
698	map	0.44085
698	R-prec	0.40000
698	bpref	0.32000
698	recip_rank	1.00000
698	ndcg	0.75914
698	ndcg5	0.65481
698	ndcg10	0.51449
698	ndcg20	0.59651
698	ERR	0.28594
698	ERR10	0.27258
698	ERR20	0.27989
698	P1	1.00000
698	P5	0.60000
698	P10	0.40000
698	P15	0.26667
698	P20	0.30000
698	P30	0.23333
698	P50	0.18000
698	P100	0.10000
698	P200	0.05000
698	P500	0.02000
698	P1000	0.01000
699	num_ret	1000.00000
699	num_unjug_ret@1	0.00000
699	num_unjug_ret@10	0.00000
699	num_unjug_ret@20	0.00000
699	num_unjug_ret@100	3.00000
699	num_unjug_ret@1000	702.00000
699	num_rel	71.00000
699	num_rel_ret	61.00000
699	map	0.46351
699	R-prec	0.50704
699	bpref	0.48879
699	recip_rank	0.50000
699	ndcg	0.73985
699	ndcg5	0.36005
699	ndcg10	0.58472
699	ndcg20	0.62587
699	ERR	0.10424
699	ERR10	0.07772
699	ERR20	0.09370
699	P1	0.00000
699	P5	0.40000
699	P10	0.70000
699	P15	0.73333
699	P20	0.70000
699	P30	0.70000
699	P50	0.60000
699	P100	0.44000
699	P200	0.29000
699	P500	0.11800
699	P1000	0.06100
700	num_ret	1000.00000
700	num_unjug_ret@1	0.00000
700	num_unjug_ret@10	0.00000
700	num_unjug_ret@20	1.00000
700	num_unjug_ret@100	6.00000
700	num_unjug_ret@1000	531.00000
700	num_rel	120.00000
700	num_rel_ret	115.00000
700	map	0.41753
700	R-prec	0.50833
700	bpref	0.48438
700	recip_rank	0.16667
700	ndcg	0.68471
700	ndcg5	0.00000
700	ndcg10	0.09950
700	ndcg20	0.18937
700	ERR	0.07300
700	ERR10	0.03553
700	ERR20	0.06006
700	P1	0.00000
700	P5	0.00000
700	P10	0.20000
700	P15	0.20000
700	P20	0.35000
700	P30	0.46667
700	P50	0.52000
700	P100	0.50000
700	P200	0.42500
700	P500	0.22400
700	P1000	0.11500
all	queries	249.00000
all	num_ret	249000.00000
all	num_unjug_ret@1	0.00000
all	num_unjug_ret@10	20.00000
all	num_unjug_ret@20	73.00000
all	num_unjug_ret@100	1357.00000
all	num_unjug_ret@1000	143871.00000
all	num_rel	17412.00000
all	num_rel_ret	11246.00000
all	map	0.29375
all	R-prec	0.32225
all	bpref	0.28952
all	recip_rank	0.65454
all	ndcg	0.55875
all	ndcg5	0.45862
all	ndcg10	0.44482
all	ndcg20	0.43437
all	ERR	0.12278
all	ERR10	0.10702
all	ERR20	0.11575
all	P1	0.53815
all	P5	0.50442
all	P10	0.45382
all	P15	0.41874
all	P20	0.38815
all	P30	0.34498
all	P50	0.28442
all	P100	0.20936
all	P200	0.14239
all	P500	0.07706
all	P1000	0.04516