C09-1	num_ret	754.00000
C09-1	num_unjug_ret@1	0.00000
C09-1	num_unjug_ret@10	1.00000
C09-1	num_unjug_ret@100	1.00000
C09-1	num_unjug_ret@1000	712.00000
C09-1	num_rel	112.00000
C09-1	num_rel_ret	7.00000
C09-1	map	0.00222
C09-1	R-prec	0.02679
C09-1	bpref	0.05692
C09-1	recip_rank	0.10000
C09-1	ndcg	0.06671
C09-1	ndcg5	0.10522
C09-1	ndcg10	0.13453
C09-1	ndcg20	0.08682
C09-1	ERR	0.05688
C09-1	ERR10	0.05379
C09-1	ERR20	0.05379
C09-1	P1	0.00000
C09-1	P5	0.00000
C09-1	P10	0.10000
C09-1	P15	0.06667
C09-1	P20	0.05000
C09-1	P30	0.03333
C09-1	P50	0.02000
C09-1	P100	0.02000
C09-1	P200	0.02500
C09-1	P500	0.01000
C09-1	P1000	0.00928
C09-2	num_ret	890.00000
C09-2	num_unjug_ret@1	0.00000
C09-2	num_unjug_ret@10	1.00000
C09-2	num_unjug_ret@100	44.00000
C09-2	num_unjug_ret@1000	797.00000
C09-2	num_rel	148.00000
C09-2	num_rel_ret	56.00000
C09-2	map	0.13810
C09-2	R-prec	0.23649
C09-2	bpref	0.35035
C09-2	recip_rank	1.00000
C09-2	ndcg	0.41184
C09-2	ndcg5	0.55944
C09-2	ndcg10	0.57209
C09-2	ndcg20	0.53796
C09-2	ERR	0.30391
C09-2	ERR10	0.28568
C09-2	ERR20	0.30072
C09-2	P1	1.00000
C09-2	P5	0.80000
C09-2	P10	0.50000
C09-2	P15	0.53333
C09-2	P20	0.50000
C09-2	P30	0.56667
C09-2	P50	0.48000
C09-2	P100	0.31000
C09-2	P200	0.17500
C09-2	P500	0.09400
C09-2	P1000	0.06292
C09-3	num_ret	999.00000
C09-3	num_unjug_ret@1	0.00000
C09-3	num_unjug_ret@10	5.00000
C09-3	num_unjug_ret@100	79.00000
C09-3	num_unjug_ret@1000	928.00000
C09-3	num_rel	151.00000
C09-3	num_rel_ret	39.00000
C09-3	map	0.05406
C09-3	R-prec	0.13245
C09-3	bpref	0.23306
C09-3	recip_rank	1.00000
C09-3	ndcg	0.34049
C09-3	ndcg5	0.63995
C09-3	ndcg10	0.47890
C09-3	ndcg20	0.36053
C09-3	ERR	0.28943
C09-3	ERR10	0.27309
C09-3	ERR20	0.28200
C09-3	P1	1.00000
C09-3	P5	0.60000
C09-3	P10	0.40000
C09-3	P15	0.40000
C09-3	P20	0.30000
C09-3	P30	0.23333
C09-3	P50	0.28000
C09-3	P100	0.16000
C09-3	P200	0.11500
C09-3	P500	0.06200
C09-3	P1000	0.03904
C09-4	num_ret	808.00000
C09-4	num_unjug_ret@1	0.00000
C09-4	num_unjug_ret@10	0.00000
C09-4	num_unjug_ret@100	25.00000
C09-4	num_unjug_ret@1000	769.00000
C09-4	num_rel	56.00000
C09-4	num_rel_ret	6.00000
C09-4	map	0.00642
C09-4	R-prec	0.07143
C09-4	bpref	0.09439
C09-4	recip_rank	0.03125
C09-4	ndcg	0.13056
C09-4	ndcg5	0.21399
C09-4	ndcg10	0.28351
C09-4	ndcg20	0.22884
C09-4	ERR	0.14114
C09-4	ERR10	0.13289
C09-4	ERR20	0.14071
C09-4	P1	0.00000
C09-4	P5	0.00000
C09-4	P10	0.00000
C09-4	P15	0.00000
C09-4	P20	0.00000
C09-4	P30	0.00000
C09-4	P50	0.06000
C09-4	P100	0.05000
C09-4	P200	0.03000
C09-4	P500	0.01200
C09-4	P1000	0.00743
C09-5	num_ret	730.00000
C09-5	num_unjug_ret@1	0.00000
C09-5	num_unjug_ret@10	3.00000
C09-5	num_unjug_ret@100	62.00000
C09-5	num_unjug_ret@1000	679.00000
C09-5	num_rel	57.00000
C09-5	num_rel_ret	5.00000
C09-5	map	0.03038
C09-5	R-prec	0.05263
C09-5	bpref	0.07387
C09-5	recip_rank	1.00000
C09-5	ndcg	0.14298
C09-5	ndcg5	0.23037
C09-5	ndcg10	0.18329
C09-5	ndcg20	0.21341
C09-5	ERR	0.08964
C09-5	ERR10	0.07715
C09-5	ERR20	0.08892
C09-5	P1	1.00000
C09-5	P5	0.40000
C09-5	P10	0.20000
C09-5	P15	0.13333
C09-5	P20	0.15000
C09-5	P30	0.10000
C09-5	P50	0.06000
C09-5	P100	0.03000
C09-5	P200	0.02000
C09-5	P500	0.01000
C09-5	P1000	0.00685
C09-6	num_ret	785.00000
C09-6	num_unjug_ret@1	0.00000
C09-6	num_unjug_ret@10	1.00000
C09-6	num_unjug_ret@100	37.00000
C09-6	num_unjug_ret@1000	695.00000
C09-6	num_rel	48.00000
C09-6	num_rel_ret	5.00000
C09-6	map	0.00492
C09-6	R-prec	0.06250
C09-6	bpref	0.04036
C09-6	recip_rank	0.03571
C09-6	ndcg	0.09411
C09-6	ndcg5	0.00000
C09-6	ndcg10	0.00000
C09-6	ndcg20	0.03496
C09-6	ERR	0.01905
C09-6	ERR10	0.00000
C09-6	ERR20	0.01042
C09-6	P1	0.00000
C09-6	P5	0.00000
C09-6	P10	0.00000
C09-6	P15	0.00000
C09-6	P20	0.00000
C09-6	P30	0.03333
C09-6	P50	0.06000
C09-6	P100	0.03000
C09-6	P200	0.02500
C09-6	P500	0.01000
C09-6	P1000	0.00637
C09-7	num_ret	989.00000
C09-7	num_unjug_ret@1	0.00000
C09-7	num_unjug_ret@10	7.00000
C09-7	num_unjug_ret@100	83.00000
C09-7	num_unjug_ret@1000	965.00000
C09-7	num_rel	84.00000
C09-7	num_rel_ret	7.00000
C09-7	map	0.00414
C09-7	R-prec	0.03571
C09-7	bpref	0.06519
C09-7	recip_rank	0.12500
C09-7	ndcg	0.06816
C09-7	ndcg5	0.00000
C09-7	ndcg10	0.06943
C09-7	ndcg20	0.05559
C09-7	ERR	0.03071
C09-7	ERR10	0.02344
C09-7	ERR20	0.02598
C09-7	P1	0.00000
C09-7	P5	0.00000
C09-7	P10	0.10000
C09-7	P15	0.06667
C09-7	P20	0.10000
C09-7	P30	0.06667
C09-7	P50	0.06000
C09-7	P100	0.03000
C09-7	P200	0.01500
C09-7	P500	0.00800
C09-7	P1000	0.00708
C09-8	num_ret	984.00000
C09-8	num_unjug_ret@1	0.00000
C09-8	num_unjug_ret@10	2.00000
C09-8	num_unjug_ret@100	76.00000
C09-8	num_unjug_ret@1000	936.00000
C09-8	num_rel	63.00000
C09-8	num_rel_ret	14.00000
C09-8	map	0.03320
C09-8	R-prec	0.04762
C09-8	bpref	0.18393
C09-8	recip_rank	1.00000
C09-8	ndcg	0.12994
C09-8	ndcg5	0.16174
C09-8	ndcg10	0.10496
C09-8	ndcg20	0.08269
C09-8	ERR	0.08429
C09-8	ERR10	0.07715
C09-8	ERR20	0.08038
C09-8	P1	1.00000
C09-8	P5	0.40000
C09-8	P10	0.20000
C09-8	P15	0.13333
C09-8	P20	0.10000
C09-8	P30	0.10000
C09-8	P50	0.06000
C09-8	P100	0.06000
C09-8	P200	0.04500
C09-8	P500	0.02400
C09-8	P1000	0.01423
C09-9	num_ret	971.00000
C09-9	num_unjug_ret@1	0.00000
C09-9	num_unjug_ret@10	5.00000
C09-9	num_unjug_ret@100	76.00000
C09-9	num_unjug_ret@1000	951.00000
C09-9	num_rel	134.00000
C09-9	num_rel_ret	16.00000
C09-9	map	0.03096
C09-9	R-prec	0.06716
C09-9	bpref	0.11762
C09-9	recip_rank	1.00000
C09-9	ndcg	0.11680
C09-9	ndcg5	0.33045
C09-9	ndcg10	0.23889
C09-9	ndcg20	0.15417
C09-9	ERR	0.14602
C09-9	ERR10	0.13937
C09-9	ERR20	0.13937
C09-9	P1	1.00000
C09-9	P5	0.60000
C09-9	P10	0.40000
C09-9	P15	0.26667
C09-9	P20	0.20000
C09-9	P30	0.16667
C09-9	P50	0.10000
C09-9	P100	0.08000
C09-9	P200	0.04500
C09-9	P500	0.03000
C09-9	P1000	0.01648
C09-10	num_ret	984.00000
C09-10	num_unjug_ret@1	0.00000
C09-10	num_unjug_ret@10	8.00000
C09-10	num_unjug_ret@100	80.00000
C09-10	num_unjug_ret@1000	948.00000
C09-10	num_rel	185.00000
C09-10	num_rel_ret	8.00000
C09-10	map	0.01080
C09-10	R-prec	0.03784
C09-10	bpref	0.04266
C09-10	recip_rank	1.00000
C09-10	ndcg	0.09139
C09-10	ndcg5	0.38785
C09-10	ndcg10	0.25169
C09-10	ndcg20	0.16243
C09-10	ERR	0.20511
C09-10	ERR10	0.20020
C09-10	ERR20	0.20020
C09-10	P1	1.00000
C09-10	P5	0.40000
C09-10	P10	0.20000
C09-10	P15	0.13333
C09-10	P20	0.10000
C09-10	P30	0.10000
C09-10	P50	0.08000
C09-10	P100	0.07000
C09-10	P200	0.04000
C09-10	P500	0.01600
C09-10	P1000	0.00813
C09-11	num_ret	1000.00000
C09-11	num_unjug_ret@1	0.00000
C09-11	num_unjug_ret@10	0.00000
C09-11	num_unjug_ret@100	43.00000
C09-11	num_unjug_ret@1000	877.00000
C09-11	num_rel	134.00000
C09-11	num_rel_ret	47.00000
C09-11	map	0.14292
C09-11	R-prec	0.26119
C09-11	bpref	0.29667
C09-11	recip_rank	0.33333
C09-11	ndcg	0.45262
C09-11	ndcg5	0.30079
C09-11	ndcg10	0.48000
C09-11	ndcg20	0.49672
C09-11	ERR	0.16095
C09-11	ERR10	0.14482
C09-11	ERR20	0.15787
C09-11	P1	0.00000
C09-11	P5	0.40000
C09-11	P10	0.60000
C09-11	P15	0.60000
C09-11	P20	0.60000
C09-11	P30	0.56667
C09-11	P50	0.46000
C09-11	P100	0.29000
C09-11	P200	0.21000
C09-11	P500	0.09200
C09-11	P1000	0.04700
C09-12	num_ret	985.00000
C09-12	num_unjug_ret@1	0.00000
C09-12	num_unjug_ret@10	3.00000
C09-12	num_unjug_ret@100	89.00000
C09-12	num_unjug_ret@1000	938.00000
C09-12	num_rel	273.00000
C09-12	num_rel_ret	33.00000
C09-12	map	0.02760
C09-12	R-prec	0.05861
C09-12	bpref	0.11714
C09-12	recip_rank	1.00000
C09-12	ndcg	0.19617
C09-12	ndcg5	0.72273
C09-12	ndcg10	0.59263
C09-12	ndcg20	0.39526
C09-12	ERR	0.33250
C09-12	ERR10	0.32794
C09-12	ERR20	0.32993
C09-12	P1	1.00000
C09-12	P5	0.60000
C09-12	P10	0.60000
C09-12	P15	0.46667
C09-12	P20	0.35000
C09-12	P30	0.23333
C09-12	P50	0.16000
C09-12	P100	0.09000
C09-12	P200	0.07000
C09-12	P500	0.06600
C09-12	P1000	0.03350
C09-13	num_ret	898.00000
C09-13	num_unjug_ret@1	0.00000
C09-13	num_unjug_ret@10	7.00000
C09-13	num_unjug_ret@100	84.00000
C09-13	num_unjug_ret@1000	873.00000
C09-13	num_rel	11.00000
C09-13	num_rel_ret	1.00000
C09-13	map	0.01515
C09-13	R-prec	0.09091
C09-13	bpref	0.08264
C09-13	recip_rank	0.16667
C09-13	ndcg	0.08395
C09-13	ndcg5	0.00000
C09-13	ndcg10	0.08583
C09-13	ndcg20	0.08395
C09-13	ERR	0.03125
C09-13	ERR10	0.03125
C09-13	ERR20	0.03125
C09-13	P1	0.00000
C09-13	P5	0.00000
C09-13	P10	0.10000
C09-13	P15	0.06667
C09-13	P20	0.05000
C09-13	P30	0.03333
C09-13	P50	0.02000
C09-13	P100	0.01000
C09-13	P200	0.00500
C09-13	P500	0.00200
C09-13	P1000	0.00111
C09-14	num_ret	700.00000
C09-14	num_unjug_ret@1	0.00000
C09-14	num_unjug_ret@10	0.00000
C09-14	num_unjug_ret@100	41.00000
C09-14	num_unjug_ret@1000	615.00000
C09-14	num_rel	155.00000
C09-14	num_rel_ret	23.00000
C09-14	map	0.01216
C09-14	R-prec	0.07742
C09-14	bpref	0.12075
C09-14	recip_rank	0.07692
C09-14	ndcg	0.18300
C09-14	ndcg5	0.52963
C09-14	ndcg10	0.34370
C09-14	ndcg20	0.26020
C09-14	ERR	0.18798
C09-14	ERR10	0.17548
C09-14	ERR20	0.18386
C09-14	P1	0.00000
C09-14	P5	0.00000
C09-14	P10	0.00000
C09-14	P15	0.20000
C09-14	P20	0.15000
C09-14	P30	0.13333
C09-14	P50	0.10000
C09-14	P100	0.07000
C09-14	P200	0.07500
C09-14	P500	0.03600
C09-14	P1000	0.03286
C09-15	num_ret	167.00000
C09-15	num_unjug_ret@1	0.00000
C09-15	num_unjug_ret@10	0.00000
C09-15	num_unjug_ret@100	0.00000
C09-15	num_unjug_ret@1000	142.00000
C09-15	num_rel	253.00000
C09-15	num_rel_ret	21.00000
C09-15	map	0.00317
C09-15	R-prec	0.00000
C09-15	bpref	0.07071
C09-15	recip_rank	0.05000
C09-15	ndcg	0.12933
C09-15	ndcg5	0.37419
C09-15	ndcg10	0.46401
C09-15	ndcg20	0.31130
C09-15	ERR	0.19441
C09-15	ERR10	0.18777
C09-15	ERR20	0.18927
C09-15	P1	0.00000
C09-15	P5	0.00000
C09-15	P10	0.00000
C09-15	P15	0.00000
C09-15	P20	0.05000
C09-15	P30	0.06667
C09-15	P50	0.04000
C09-15	P100	0.06000
C09-15	P200	0.05389
C09-15	P500	0.07186
C09-15	P1000	0.12575
C09-16	num_ret	807.00000
C09-16	num_unjug_ret@1	1.00000
C09-16	num_unjug_ret@10	8.00000
C09-16	num_unjug_ret@100	69.00000
C09-16	num_unjug_ret@1000	719.00000
C09-16	num_rel	183.00000
C09-16	num_rel_ret	39.00000
C09-16	map	0.00944
C09-16	R-prec	0.04372
C09-16	bpref	0.18466
C09-16	recip_rank	0.01724
C09-16	ndcg	0.16333
C09-16	ndcg5	0.00000
C09-16	ndcg10	0.00000
C09-16	ndcg20	0.00000
C09-16	ERR	0.01219
C09-16	ERR10	0.00000
C09-16	ERR20	0.00000
C09-16	P1	0.00000
C09-16	P5	0.00000
C09-16	P10	0.00000
C09-16	P15	0.00000
C09-16	P20	0.00000
C09-16	P30	0.00000
C09-16	P50	0.00000
C09-16	P100	0.03000
C09-16	P200	0.05000
C09-16	P500	0.04600
C09-16	P1000	0.04833
C09-17	num_ret	947.00000
C09-17	num_unjug_ret@1	0.00000
C09-17	num_unjug_ret@10	5.00000
C09-17	num_unjug_ret@100	69.00000
C09-17	num_unjug_ret@1000	877.00000
C09-17	num_rel	171.00000
C09-17	num_rel_ret	35.00000
C09-17	map	0.02850
C09-17	R-prec	0.09942
C09-17	bpref	0.18895
C09-17	recip_rank	0.33333
C09-17	ndcg	0.17357
C09-17	ndcg5	0.10026
C09-17	ndcg10	0.06506
C09-17	ndcg20	0.11459
C09-17	ERR	0.06490
C09-17	ERR10	0.03255
C09-17	ERR20	0.05386
C09-17	P1	0.00000
C09-17	P5	0.40000
C09-17	P10	0.20000
C09-17	P15	0.26667
C09-17	P20	0.30000
C09-17	P30	0.20000
C09-17	P50	0.18000
C09-17	P100	0.13000
C09-17	P200	0.08500
C09-17	P500	0.06000
C09-17	P1000	0.03696
C09-18	num_ret	1000.00000
C09-18	num_unjug_ret@1	0.00000
C09-18	num_unjug_ret@10	3.00000
C09-18	num_unjug_ret@100	69.00000
C09-18	num_unjug_ret@1000	927.00000
C09-18	num_rel	196.00000
C09-18	num_rel_ret	43.00000
C09-18	map	0.05979
C09-18	R-prec	0.12755
C09-18	bpref	0.20536
C09-18	recip_rank	0.33333
C09-18	ndcg	0.22419
C09-18	ndcg5	0.24633
C09-18	ndcg10	0.15985
C09-18	ndcg20	0.30353
C09-18	ERR	0.11541
C09-18	ERR10	0.07430
C09-18	ERR20	0.10936
C09-18	P1	0.00000
C09-18	P5	0.60000
C09-18	P10	0.30000
C09-18	P15	0.40000
C09-18	P20	0.50000
C09-18	P30	0.46667
C09-18	P50	0.36000
C09-18	P100	0.20000
C09-18	P200	0.13000
C09-18	P500	0.08000
C09-18	P1000	0.04300
C09-19	num_ret	684.00000
C09-19	num_unjug_ret@1	0.00000
C09-19	num_unjug_ret@10	6.00000
C09-19	num_unjug_ret@100	52.00000
C09-19	num_unjug_ret@1000	654.00000
C09-19	num_rel	2.00000
C09-19	num_rel_ret	0.00000
C09-19	map	0.00000
C09-19	R-prec	0.00000
C09-19	bpref	0.00000
C09-19	recip_rank	0.00000
C09-19	ndcg	0.00000
C09-19	ndcg5	0.00000
C09-19	ndcg10	0.00000
C09-19	ndcg20	0.00000
C09-19	ERR	0.00000
C09-19	ERR10	0.00000
C09-19	ERR20	0.00000
C09-19	P1	0.00000
C09-19	P5	0.00000
C09-19	P10	0.00000
C09-19	P15	0.00000
C09-19	P20	0.00000
C09-19	P30	0.00000
C09-19	P50	0.00000
C09-19	P100	0.00000
C09-19	P200	0.00000
C09-19	P500	0.00000
C09-19	P1000	0.00000
C09-20	num_ret	729.00000
C09-20	num_unjug_ret@1	0.00000
C09-20	num_unjug_ret@10	1.00000
C09-20	num_unjug_ret@100	37.00000
C09-20	num_unjug_ret@1000	706.00000
C09-20	num_rel	0.00000
C09-20	num_rel_ret	0.00000
C09-20	map	0.00000
C09-20	R-prec	0.00000
C09-20	bpref	0.00000
C09-20	recip_rank	0.00000
C09-20	ndcg	0.00000
C09-20	ndcg5	0.00000
C09-20	ndcg10	0.00000
C09-20	ndcg20	0.00000
C09-20	ERR	0.00000
C09-20	ERR10	0.00000
C09-20	ERR20	0.00000
C09-20	P1	0.00000
C09-20	P5	0.00000
C09-20	P10	0.00000
C09-20	P15	0.00000
C09-20	P20	0.00000
C09-20	P30	0.00000
C09-20	P50	0.00000
C09-20	P100	0.00000
C09-20	P200	0.00000
C09-20	P500	0.00000
C09-20	P1000	0.00000
C09-21	num_ret	726.00000
C09-21	num_unjug_ret@1	1.00000
C09-21	num_unjug_ret@10	3.00000
C09-21	num_unjug_ret@100	48.00000
C09-21	num_unjug_ret@1000	686.00000
C09-21	num_rel	226.00000
C09-21	num_rel_ret	30.00000
C09-21	map	0.00985
C09-21	R-prec	0.07965
C09-21	bpref	0.12575
C09-21	recip_rank	0.02857
C09-21	ndcg	0.09332
C09-21	ndcg5	0.00000
C09-21	ndcg10	0.00000
C09-21	ndcg20	0.06260
C09-21	ERR	0.03230
C09-21	ERR10	0.00000
C09-21	ERR20	0.02308
C09-21	P1	0.00000
C09-21	P5	0.00000
C09-21	P10	0.00000
C09-21	P15	0.00000
C09-21	P20	0.00000
C09-21	P30	0.00000
C09-21	P50	0.06000
C09-21	P100	0.08000
C09-21	P200	0.09000
C09-21	P500	0.05200
C09-21	P1000	0.04132
C09-22	num_ret	974.00000
C09-22	num_unjug_ret@1	0.00000
C09-22	num_unjug_ret@10	0.00000
C09-22	num_unjug_ret@100	58.00000
C09-22	num_unjug_ret@1000	868.00000
C09-22	num_rel	163.00000
C09-22	num_rel_ret	63.00000
C09-22	map	0.19392
C09-22	R-prec	0.26380
C09-22	bpref	0.36369
C09-22	recip_rank	1.00000
C09-22	ndcg	0.47507
C09-22	ndcg5	1.00000
C09-22	ndcg10	1.00000
C09-22	ndcg20	0.87963
C09-22	ERR	0.38475
C09-22	ERR10	0.37752
C09-22	ERR20	0.38393
C09-22	P1	1.00000
C09-22	P5	1.00000
C09-22	P10	1.00000
C09-22	P15	0.93333
C09-22	P20	0.90000
C09-22	P30	0.70000
C09-22	P50	0.52000
C09-22	P100	0.34000
C09-22	P200	0.23000
C09-22	P500	0.11800
C09-22	P1000	0.06468
C09-23	num_ret	837.00000
C09-23	num_unjug_ret@1	0.00000
C09-23	num_unjug_ret@10	0.00000
C09-23	num_unjug_ret@100	29.00000
C09-23	num_unjug_ret@1000	826.00000
C09-23	num_rel	174.00000
C09-23	num_rel_ret	9.00000
C09-23	map	0.00167
C09-23	R-prec	0.03448
C09-23	bpref	0.05166
C09-23	recip_rank	0.01754
C09-23	ndcg	0.04732
C09-23	ndcg5	0.04374
C09-23	ndcg10	0.07766
C09-23	ndcg20	0.07267
C09-23	ERR	0.03391
C09-23	ERR10	0.02913
C09-23	ERR20	0.03184
C09-23	P1	0.00000
C09-23	P5	0.00000
C09-23	P10	0.00000
C09-23	P15	0.00000
C09-23	P20	0.00000
C09-23	P30	0.00000
C09-23	P50	0.00000
C09-23	P100	0.04000
C09-23	P200	0.03000
C09-23	P500	0.01400
C09-23	P1000	0.01075
C09-24	num_ret	950.00000
C09-24	num_unjug_ret@1	0.00000
C09-24	num_unjug_ret@10	1.00000
C09-24	num_unjug_ret@100	67.00000
C09-24	num_unjug_ret@1000	864.00000
C09-24	num_rel	154.00000
C09-24	num_rel_ret	37.00000
C09-24	map	0.05192
C09-24	R-prec	0.13636
C09-24	bpref	0.20994
C09-24	recip_rank	1.00000
C09-24	ndcg	0.22522
C09-24	ndcg5	0.24426
C09-24	ndcg10	0.25501
C09-24	ndcg20	0.22532
C09-24	ERR	0.14372
C09-24	ERR10	0.12289
C09-24	ERR20	0.13491
C09-24	P1	1.00000
C09-24	P5	0.40000
C09-24	P10	0.40000
C09-24	P15	0.46667
C09-24	P20	0.35000
C09-24	P30	0.30000
C09-24	P50	0.22000
C09-24	P100	0.19000
C09-24	P200	0.11000
C09-24	P500	0.05800
C09-24	P1000	0.03895
C09-25	num_ret	616.00000
C09-25	num_unjug_ret@1	0.00000
C09-25	num_unjug_ret@10	0.00000
C09-25	num_unjug_ret@100	21.00000
C09-25	num_unjug_ret@1000	526.00000
C09-25	num_rel	164.00000
C09-25	num_rel_ret	39.00000
C09-25	map	0.06436
C09-25	R-prec	0.13415
C09-25	bpref	0.20691
C09-25	recip_rank	1.00000
C09-25	ndcg	0.19298
C09-25	ndcg5	0.33333
C09-25	ndcg10	0.24077
C09-25	ndcg20	0.16616
C09-25	ERR	0.15805
C09-25	ERR10	0.13910
C09-25	ERR20	0.14123
C09-25	P1	1.00000
C09-25	P5	1.00000
C09-25	P10	0.60000
C09-25	P15	0.40000
C09-25	P20	0.30000
C09-25	P30	0.20000
C09-25	P50	0.24000
C09-25	P100	0.20000
C09-25	P200	0.11000
C09-25	P500	0.06000
C09-25	P1000	0.06331
C09-26	num_ret	808.00000
C09-26	num_unjug_ret@1	0.00000
C09-26	num_unjug_ret@10	1.00000
C09-26	num_unjug_ret@100	65.00000
C09-26	num_unjug_ret@1000	747.00000
C09-26	num_rel	173.00000
C09-26	num_rel_ret	24.00000
C09-26	map	0.01721
C09-26	R-prec	0.09249
C09-26	bpref	0.12921
C09-26	recip_rank	0.04762
C09-26	ndcg	0.12581
C09-26	ndcg5	0.00000
C09-26	ndcg10	0.02314
C09-26	ndcg20	0.10539
C09-26	ERR	0.03956
C09-26	ERR10	0.00781
C09-26	ERR20	0.03029
C09-26	P1	0.00000
C09-26	P5	0.00000
C09-26	P10	0.00000
C09-26	P15	0.00000
C09-26	P20	0.00000
C09-26	P30	0.13333
C09-26	P50	0.20000
C09-26	P100	0.14000
C09-26	P200	0.08000
C09-26	P500	0.04000
C09-26	P1000	0.02970
C09-27	num_ret	772.00000
C09-27	num_unjug_ret@1	0.00000
C09-27	num_unjug_ret@10	0.00000
C09-27	num_unjug_ret@100	49.00000
C09-27	num_unjug_ret@1000	705.00000
C09-27	num_rel	205.00000
C09-27	num_rel_ret	50.00000
C09-27	map	0.02475
C09-27	R-prec	0.11220
C09-27	bpref	0.22527
C09-27	recip_rank	0.25000
C09-27	ndcg	0.20905
C09-27	ndcg5	0.21399
C09-27	ndcg10	0.13886
C09-27	ndcg20	0.16024
C09-27	ERR	0.12343
C09-27	ERR10	0.09375
C09-27	ERR20	0.11182
C09-27	P1	0.00000
C09-27	P5	0.20000
C09-27	P10	0.10000
C09-27	P15	0.06667
C09-27	P20	0.05000
C09-27	P30	0.03333
C09-27	P50	0.12000
C09-27	P100	0.14000
C09-27	P200	0.11500
C09-27	P500	0.07000
C09-27	P1000	0.06477
C09-28	num_ret	575.00000
C09-28	num_unjug_ret@1	0.00000
C09-28	num_unjug_ret@10	0.00000
C09-28	num_unjug_ret@100	0.00000
C09-28	num_unjug_ret@1000	544.00000
C09-28	num_rel	275.00000
C09-28	num_rel_ret	18.00000
C09-28	map	0.00127
C09-28	R-prec	0.00364
C09-28	bpref	0.06422
C09-28	recip_rank	0.00645
C09-28	ndcg	0.06116
C09-28	ndcg5	0.33916
C09-28	ndcg10	0.22009
C09-28	ndcg20	0.14204
C09-28	ERR	0.19759
C09-28	ERR10	0.18750
C09-28	ERR20	0.18750
C09-28	P1	0.00000
C09-28	P5	0.00000
C09-28	P10	0.00000
C09-28	P15	0.00000
C09-28	P20	0.00000
C09-28	P30	0.00000
C09-28	P50	0.00000
C09-28	P100	0.00000
C09-28	P200	0.00500
C09-28	P500	0.02200
C09-28	P1000	0.03130
C09-29	num_ret	764.00000
C09-29	num_unjug_ret@1	1.00000
C09-29	num_unjug_ret@10	3.00000
C09-29	num_unjug_ret@100	39.00000
C09-29	num_unjug_ret@1000	738.00000
C09-29	num_rel	29.00000
C09-29	num_rel_ret	1.00000
C09-29	map	0.00034
C09-29	R-prec	0.00000
C09-29	bpref	0.02616
C09-29	recip_rank	0.00980
C09-29	ndcg	0.01271
C09-29	ndcg5	0.00000
C09-29	ndcg10	0.00000
C09-29	ndcg20	0.00000
C09-29	ERR	0.00133
C09-29	ERR10	0.00000
C09-29	ERR20	0.00000
C09-29	P1	0.00000
C09-29	P5	0.00000
C09-29	P10	0.00000
C09-29	P15	0.00000
C09-29	P20	0.00000
C09-29	P30	0.00000
C09-29	P50	0.00000
C09-29	P100	0.00000
C09-29	P200	0.00500
C09-29	P500	0.00200
C09-29	P1000	0.00131
C09-30	num_ret	963.00000
C09-30	num_unjug_ret@1	0.00000
C09-30	num_unjug_ret@10	1.00000
C09-30	num_unjug_ret@100	60.00000
C09-30	num_unjug_ret@1000	846.00000
C09-30	num_rel	303.00000
C09-30	num_rel_ret	85.00000
C09-30	map	0.07809
C09-30	R-prec	0.18152
C09-30	bpref	0.26430
C09-30	recip_rank	1.00000
C09-30	ndcg	0.30980
C09-30	ndcg5	0.32637
C09-30	ndcg10	0.34484
C09-30	ndcg20	0.34765
C09-30	ERR	0.18385
C09-30	ERR10	0.15823
C09-30	ERR20	0.17713
C09-30	P1	1.00000
C09-30	P5	0.60000
C09-30	P10	0.50000
C09-30	P15	0.53333
C09-30	P20	0.45000
C09-30	P30	0.43333
C09-30	P50	0.40000
C09-30	P100	0.29000
C09-30	P200	0.24000
C09-30	P500	0.13800
C09-30	P1000	0.08827
C09-31	num_ret	513.00000
C09-31	num_unjug_ret@1	0.00000
C09-31	num_unjug_ret@10	0.00000
C09-31	num_unjug_ret@100	19.00000
C09-31	num_unjug_ret@1000	462.00000
C09-31	num_rel	229.00000
C09-31	num_rel_ret	25.00000
C09-31	map	0.02242
C09-31	R-prec	0.07860
C09-31	bpref	0.10627
C09-31	recip_rank	1.00000
C09-31	ndcg	0.20796
C09-31	ndcg5	0.54176
C09-31	ndcg10	0.56061
C09-31	ndcg20	0.46810
C09-31	ERR	0.29029
C09-31	ERR10	0.27701
C09-31	ERR20	0.28727
C09-31	P1	1.00000
C09-31	P5	0.60000
C09-31	P10	0.30000
C09-31	P15	0.20000
C09-31	P20	0.15000
C09-31	P30	0.20000
C09-31	P50	0.12000
C09-31	P100	0.14000
C09-31	P200	0.09000
C09-31	P500	0.04600
C09-31	P1000	0.04873
C09-32	num_ret	1000.00000
C09-32	num_unjug_ret@1	0.00000
C09-32	num_unjug_ret@10	7.00000
C09-32	num_unjug_ret@100	84.00000
C09-32	num_unjug_ret@1000	957.00000
C09-32	num_rel	271.00000
C09-32	num_rel_ret	28.00000
C09-32	map	0.01837
C09-32	R-prec	0.06642
C09-32	bpref	0.10064
C09-32	recip_rank	1.00000
C09-32	ndcg	0.16399
C09-32	ndcg5	0.52896
C09-32	ndcg10	0.34326
C09-32	ndcg20	0.26916
C09-32	ERR	0.25229
C09-32	ERR10	0.23384
C09-32	ERR20	0.24385
C09-32	P1	1.00000
C09-32	P5	0.60000
C09-32	P10	0.30000
C09-32	P15	0.33333
C09-32	P20	0.25000
C09-32	P30	0.20000
C09-32	P50	0.18000
C09-32	P100	0.10000
C09-32	P200	0.08000
C09-32	P500	0.04000
C09-32	P1000	0.02800
C09-33	num_ret	996.00000
C09-33	num_unjug_ret@1	0.00000
C09-33	num_unjug_ret@10	4.00000
C09-33	num_unjug_ret@100	77.00000
C09-33	num_unjug_ret@1000	957.00000
C09-33	num_rel	245.00000
C09-33	num_rel_ret	26.00000
C09-33	map	0.03471
C09-33	R-prec	0.07755
C09-33	bpref	0.10081
C09-33	recip_rank	1.00000
C09-33	ndcg	0.16466
C09-33	ndcg5	0.61308
C09-33	ndcg10	0.41906
C09-33	ndcg20	0.29609
C09-33	ERR	0.28138
C09-33	ERR10	0.26586
C09-33	ERR20	0.27140
C09-33	P1	1.00000
C09-33	P5	0.80000
C09-33	P10	0.40000
C09-33	P15	0.46667
C09-33	P20	0.35000
C09-33	P30	0.30000
C09-33	P50	0.24000
C09-33	P100	0.16000
C09-33	P200	0.09000
C09-33	P500	0.05000
C09-33	P1000	0.02610
C09-34	num_ret	976.00000
C09-34	num_unjug_ret@1	0.00000
C09-34	num_unjug_ret@10	9.00000
C09-34	num_unjug_ret@100	93.00000
C09-34	num_unjug_ret@1000	964.00000
C09-34	num_rel	111.00000
C09-34	num_rel_ret	4.00000
C09-34	map	0.00049
C09-34	R-prec	0.00901
C09-34	bpref	0.03490
C09-34	recip_rank	0.03571
C09-34	ndcg	0.01695
C09-34	ndcg5	0.00000
C09-34	ndcg10	0.00000
C09-34	ndcg20	0.00000
C09-34	ERR	0.00315
C09-34	ERR10	0.00000
C09-34	ERR20	0.00000
C09-34	P1	0.00000
C09-34	P5	0.00000
C09-34	P10	0.00000
C09-34	P15	0.00000
C09-34	P20	0.00000
C09-34	P30	0.03333
C09-34	P50	0.02000
C09-34	P100	0.01000
C09-34	P200	0.00500
C09-34	P500	0.00400
C09-34	P1000	0.00410
C09-35	num_ret	555.00000
C09-35	num_unjug_ret@1	0.00000
C09-35	num_unjug_ret@10	1.00000
C09-35	num_unjug_ret@100	30.00000
C09-35	num_unjug_ret@1000	493.00000
C09-35	num_rel	125.00000
C09-35	num_rel_ret	18.00000
C09-35	map	0.01503
C09-35	R-prec	0.09600
C09-35	bpref	0.13056
C09-35	recip_rank	0.06250
C09-35	ndcg	0.18434
C09-35	ndcg5	0.33380
C09-35	ndcg10	0.28023
C09-35	ndcg20	0.31668
C09-35	ERR	0.12806
C09-35	ERR10	0.10495
C09-35	ERR20	0.12586
C09-35	P1	0.00000
C09-35	P5	0.00000
C09-35	P10	0.00000
C09-35	P15	0.00000
C09-35	P20	0.15000
C09-35	P30	0.13333
C09-35	P50	0.08000
C09-35	P100	0.10000
C09-35	P200	0.08000
C09-35	P500	0.03600
C09-35	P1000	0.03243
C09-36	num_ret	935.00000
C09-36	num_unjug_ret@1	0.00000
C09-36	num_unjug_ret@10	0.00000
C09-36	num_unjug_ret@100	59.00000
C09-36	num_unjug_ret@1000	906.00000
C09-36	num_rel	126.00000
C09-36	num_rel_ret	15.00000
C09-36	map	0.00830
C09-36	R-prec	0.07143
C09-36	bpref	0.11313
C09-36	recip_rank	0.03226
C09-36	ndcg	0.09952
C09-36	ndcg5	0.04374
C09-36	ndcg10	0.14197
C09-36	ndcg20	0.13958
C09-36	ERR	0.05968
C09-36	ERR10	0.04504
C09-36	ERR20	0.05620
C09-36	P1	0.00000
C09-36	P5	0.00000
C09-36	P10	0.00000
C09-36	P15	0.00000
C09-36	P20	0.00000
C09-36	P30	0.00000
C09-36	P50	0.12000
C09-36	P100	0.08000
C09-36	P200	0.05000
C09-36	P500	0.02200
C09-36	P1000	0.01604
C09-37	num_ret	944.00000
C09-37	num_unjug_ret@1	1.00000
C09-37	num_unjug_ret@10	6.00000
C09-37	num_unjug_ret@100	89.00000
C09-37	num_unjug_ret@1000	930.00000
C09-37	num_rel	4.00000
C09-37	num_rel_ret	1.00000
C09-37	map	0.04167
C09-37	R-prec	0.00000
C09-37	bpref	0.18750
C09-37	recip_rank	0.16667
C09-37	ndcg	0.18350
C09-37	ndcg5	0.00000
C09-37	ndcg10	0.18350
C09-37	ndcg20	0.18350
C09-37	ERR	0.03125
C09-37	ERR10	0.03125
C09-37	ERR20	0.03125
C09-37	P1	0.00000
C09-37	P5	0.00000
C09-37	P10	0.10000
C09-37	P15	0.06667
C09-37	P20	0.05000
C09-37	P30	0.03333
C09-37	P50	0.02000
C09-37	P100	0.01000
C09-37	P200	0.00500
C09-37	P500	0.00200
C09-37	P1000	0.00106
C09-38	num_ret	997.00000
C09-38	num_unjug_ret@1	0.00000
C09-38	num_unjug_ret@10	6.00000
C09-38	num_unjug_ret@100	74.00000
C09-38	num_unjug_ret@1000	933.00000
C09-38	num_rel	259.00000
C09-38	num_rel_ret	43.00000
C09-38	map	0.02723
C09-38	R-prec	0.10811
C09-38	bpref	0.14782
C09-38	recip_rank	0.33333
C09-38	ndcg	0.15707
C09-38	ndcg5	0.16958
C09-38	ndcg10	0.15932
C09-38	ndcg20	0.12787
C09-38	ERR	0.09666
C09-38	ERR10	0.07691
C09-38	ERR20	0.08376
C09-38	P1	0.00000
C09-38	P5	0.20000
C09-38	P10	0.30000
C09-38	P15	0.33333
C09-38	P20	0.25000
C09-38	P30	0.26667
C09-38	P50	0.22000
C09-38	P100	0.18000
C09-38	P200	0.11000
C09-38	P500	0.06800
C09-38	P1000	0.04313
C09-39	num_ret	872.00000
C09-39	num_unjug_ret@1	0.00000
C09-39	num_unjug_ret@10	4.00000
C09-39	num_unjug_ret@100	71.00000
C09-39	num_unjug_ret@1000	798.00000
C09-39	num_rel	135.00000
C09-39	num_rel_ret	22.00000
C09-39	map	0.00682
C09-39	R-prec	0.04444
C09-39	bpref	0.12022
C09-39	recip_rank	0.03448
C09-39	ndcg	0.09145
C09-39	ndcg5	0.00000
C09-39	ndcg10	0.00000
C09-39	ndcg20	0.00000
C09-39	ERR	0.01022
C09-39	ERR10	0.00000
C09-39	ERR20	0.00000
C09-39	P1	0.00000
C09-39	P5	0.00000
C09-39	P10	0.00000
C09-39	P15	0.00000
C09-39	P20	0.00000
C09-39	P30	0.03333
C09-39	P50	0.02000
C09-39	P100	0.05000
C09-39	P200	0.05500
C09-39	P500	0.03200
C09-39	P1000	0.02523
C09-40	num_ret	1000.00000
C09-40	num_unjug_ret@1	0.00000
C09-40	num_unjug_ret@10	1.00000
C09-40	num_unjug_ret@100	68.00000
C09-40	num_unjug_ret@1000	952.00000
C09-40	num_rel	94.00000
C09-40	num_rel_ret	29.00000
C09-40	map	0.09441
C09-40	R-prec	0.19149
C09-40	bpref	0.24774
C09-40	recip_rank	0.16667
C09-40	ndcg	0.32551
C09-40	ndcg5	0.00000
C09-40	ndcg10	0.24989
C09-40	ndcg20	0.37517
C09-40	ERR	0.09190
C09-40	ERR10	0.06514
C09-40	ERR20	0.08989
C09-40	P1	0.00000
C09-40	P5	0.00000
C09-40	P10	0.50000
C09-40	P15	0.53333
C09-40	P20	0.60000
C09-40	P30	0.46667
C09-40	P50	0.36000
C09-40	P100	0.18000
C09-40	P200	0.09000
C09-40	P500	0.03600
C09-40	P1000	0.02900
C09-41	num_ret	888.00000
C09-41	num_unjug_ret@1	0.00000
C09-41	num_unjug_ret@10	2.00000
C09-41	num_unjug_ret@100	36.00000
C09-41	num_unjug_ret@1000	799.00000
C09-41	num_rel	137.00000
C09-41	num_rel_ret	41.00000
C09-41	map	0.08501
C09-41	R-prec	0.18248
C09-41	bpref	0.26650
C09-41	recip_rank	1.00000
C09-41	ndcg	0.38645
C09-41	ndcg5	0.62876
C09-41	ndcg10	0.50359
C09-41	ndcg20	0.33635
C09-41	ERR	0.30310
C09-41	ERR10	0.28896
C09-41	ERR20	0.29059
C09-41	P1	1.00000
C09-41	P5	0.80000
C09-41	P10	0.60000
C09-41	P15	0.40000
C09-41	P20	0.35000
C09-41	P30	0.30000
C09-41	P50	0.26000
C09-41	P100	0.20000
C09-41	P200	0.13500
C09-41	P500	0.07400
C09-41	P1000	0.04617
C09-42	num_ret	375.00000
C09-42	num_unjug_ret@1	0.00000
C09-42	num_unjug_ret@10	0.00000
C09-42	num_unjug_ret@100	5.00000
C09-42	num_unjug_ret@1000	354.00000
C09-42	num_rel	34.00000
C09-42	num_rel_ret	4.00000
C09-42	map	0.00084
C09-42	R-prec	0.00000
C09-42	bpref	0.08997
C09-42	recip_rank	0.00699
C09-42	ndcg	0.03752
C09-42	ndcg5	0.00000
C09-42	ndcg10	0.00000
C09-42	ndcg20	0.00000
C09-42	ERR	0.00411
C09-42	ERR10	0.00000
C09-42	ERR20	0.00000
C09-42	P1	0.00000
C09-42	P5	0.00000
C09-42	P10	0.00000
C09-42	P15	0.00000
C09-42	P20	0.00000
C09-42	P30	0.00000
C09-42	P50	0.00000
C09-42	P100	0.00000
C09-42	P200	0.01000
C09-42	P500	0.00533
C09-42	P1000	0.01067
C09-43	num_ret	817.00000
C09-43	num_unjug_ret@1	0.00000
C09-43	num_unjug_ret@10	0.00000
C09-43	num_unjug_ret@100	45.00000
C09-43	num_unjug_ret@1000	775.00000
C09-43	num_rel	47.00000
C09-43	num_rel_ret	2.00000
C09-43	map	0.00257
C09-43	R-prec	0.04255
C09-43	bpref	0.04210
C09-43	recip_rank	0.06667
C09-43	ndcg	0.05096
C09-43	ndcg5	0.11305
C09-43	ndcg10	0.09545
C09-43	ndcg20	0.06440
C09-43	ERR	0.06901
C09-43	ERR10	0.06901
C09-43	ERR20	0.06901
C09-43	P1	0.00000
C09-43	P5	0.00000
C09-43	P10	0.00000
C09-43	P15	0.06667
C09-43	P20	0.05000
C09-43	P30	0.03333
C09-43	P50	0.04000
C09-43	P100	0.02000
C09-43	P200	0.01000
C09-43	P500	0.00400
C09-43	P1000	0.00245
C09-44	num_ret	763.00000
C09-44	num_unjug_ret@1	0.00000
C09-44	num_unjug_ret@10	2.00000
C09-44	num_unjug_ret@100	57.00000
C09-44	num_unjug_ret@1000	726.00000
C09-44	num_rel	99.00000
C09-44	num_rel_ret	8.00000
C09-44	map	0.02095
C09-44	R-prec	0.05051
C09-44	bpref	0.07193
C09-44	recip_rank	1.00000
C09-44	ndcg	0.09179
C09-44	ndcg5	0.15679
C09-44	ndcg10	0.12295
C09-44	ndcg20	0.07935
C09-44	ERR	0.08806
C09-44	ERR10	0.07971
C09-44	ERR20	0.07971
C09-44	P1	1.00000
C09-44	P5	0.40000
C09-44	P10	0.30000
C09-44	P15	0.20000
C09-44	P20	0.15000
C09-44	P30	0.13333
C09-44	P50	0.10000
C09-44	P100	0.05000
C09-44	P200	0.03500
C09-44	P500	0.01600
C09-44	P1000	0.01048
C09-45	num_ret	849.00000
C09-45	num_unjug_ret@1	0.00000
C09-45	num_unjug_ret@10	0.00000
C09-45	num_unjug_ret@100	31.00000
C09-45	num_unjug_ret@1000	784.00000
C09-45	num_rel	212.00000
C09-45	num_rel_ret	40.00000
C09-45	map	0.01240
C09-45	R-prec	0.04717
C09-45	bpref	0.17299
C09-45	recip_rank	0.50000
C09-45	ndcg	0.15961
C09-45	ndcg5	0.21399
C09-45	ndcg10	0.20829
C09-45	ndcg20	0.14626
C09-45	ERR	0.12338
C09-45	ERR10	0.11279
C09-45	ERR20	0.11554
C09-45	P1	0.00000
C09-45	P5	0.20000
C09-45	P10	0.10000
C09-45	P15	0.06667
C09-45	P20	0.05000
C09-45	P30	0.03333
C09-45	P50	0.02000
C09-45	P100	0.04000
C09-45	P200	0.05000
C09-45	P500	0.05400
C09-45	P1000	0.04711
C09-46	num_ret	765.00000
C09-46	num_unjug_ret@1	0.00000
C09-46	num_unjug_ret@10	0.00000
C09-46	num_unjug_ret@100	23.00000
C09-46	num_unjug_ret@1000	690.00000
C09-46	num_rel	121.00000
C09-46	num_rel_ret	41.00000
C09-46	map	0.20262
C09-46	R-prec	0.32231
C09-46	bpref	0.31016
C09-46	recip_rank	1.00000
C09-46	ndcg	0.42856
C09-46	ndcg5	0.61643
C09-46	ndcg10	0.75109
C09-46	ndcg20	0.64387
C09-46	ERR	0.30880
C09-46	ERR10	0.29745
C09-46	ERR20	0.30592
C09-46	P1	1.00000
C09-46	P5	0.60000
C09-46	P10	0.80000
C09-46	P15	0.80000
C09-46	P20	0.65000
C09-46	P30	0.66667
C09-46	P50	0.54000
C09-46	P100	0.38000
C09-46	P200	0.19500
C09-46	P500	0.08200
C09-46	P1000	0.05359
C09-47	num_ret	975.00000
C09-47	num_unjug_ret@1	0.00000
C09-47	num_unjug_ret@10	2.00000
C09-47	num_unjug_ret@100	46.00000
C09-47	num_unjug_ret@1000	901.00000
C09-47	num_rel	156.00000
C09-47	num_rel_ret	26.00000
C09-47	map	0.05551
C09-47	R-prec	0.15385
C09-47	bpref	0.14513
C09-47	recip_rank	1.00000
C09-47	ndcg	0.30920
C09-47	ndcg5	0.85393
C09-47	ndcg10	0.55414
C09-47	ndcg20	0.42288
C09-47	ERR	0.33908
C09-47	ERR10	0.32505
C09-47	ERR20	0.33178
C09-47	P1	1.00000
C09-47	P5	0.80000
C09-47	P10	0.40000
C09-47	P15	0.33333
C09-47	P20	0.30000
C09-47	P30	0.26667
C09-47	P50	0.22000
C09-47	P100	0.17000
C09-47	P200	0.12500
C09-47	P500	0.05200
C09-47	P1000	0.02667
C09-48	num_ret	829.00000
C09-48	num_unjug_ret@1	0.00000
C09-48	num_unjug_ret@10	2.00000
C09-48	num_unjug_ret@100	39.00000
C09-48	num_unjug_ret@1000	781.00000
C09-48	num_rel	54.00000
C09-48	num_rel_ret	8.00000
C09-48	map	0.07929
C09-48	R-prec	0.12963
C09-48	bpref	0.12860
C09-48	recip_rank	1.00000
C09-48	ndcg	0.16360
C09-48	ndcg5	0.31559
C09-48	ndcg10	0.29631
C09-48	ndcg20	0.22598
C09-48	ERR	0.15311
C09-48	ERR10	0.14552
C09-48	ERR20	0.15190
C09-48	P1	1.00000
C09-48	P5	0.60000
C09-48	P10	0.50000
C09-48	P15	0.33333
C09-48	P20	0.30000
C09-48	P30	0.20000
C09-48	P50	0.14000
C09-48	P100	0.07000
C09-48	P200	0.03500
C09-48	P500	0.01600
C09-48	P1000	0.00965
C09-49	num_ret	807.00000
C09-49	num_unjug_ret@1	0.00000
C09-49	num_unjug_ret@10	0.00000
C09-49	num_unjug_ret@100	46.00000
C09-49	num_unjug_ret@1000	741.00000
C09-49	num_rel	47.00000
C09-49	num_rel_ret	27.00000
C09-49	map	0.43540
C09-49	R-prec	0.42553
C09-49	bpref	0.50566
C09-49	recip_rank	1.00000
C09-49	ndcg	0.58685
C09-49	ndcg5	0.70210
C09-49	ndcg10	0.67759
C09-49	ndcg20	0.66570
C09-49	ERR	0.33142
C09-49	ERR10	0.32075
C09-49	ERR20	0.32840
C09-49	P1	1.00000
C09-49	P5	1.00000
C09-49	P10	1.00000
C09-49	P15	0.93333
C09-49	P20	0.80000
C09-49	P30	0.66667
C09-49	P50	0.40000
C09-49	P100	0.26000
C09-49	P200	0.13000
C09-49	P500	0.05200
C09-49	P1000	0.03346
C09-50	num_ret	973.00000
C09-50	num_unjug_ret@1	0.00000
C09-50	num_unjug_ret@10	2.00000
C09-50	num_unjug_ret@100	76.00000
C09-50	num_unjug_ret@1000	934.00000
C09-50	num_rel	70.00000
C09-50	num_rel_ret	9.00000
C09-50	map	0.01381
C09-50	R-prec	0.05714
C09-50	bpref	0.10653
C09-50	recip_rank	0.25000
C09-50	ndcg	0.08173
C09-50	ndcg5	0.04869
C09-50	ndcg10	0.05773
C09-50	ndcg20	0.03726
C09-50	ERR	0.03595
C09-50	ERR10	0.02539
C09-50	ERR20	0.02539
C09-50	P1	0.00000
C09-50	P5	0.20000
C09-50	P10	0.20000
C09-50	P15	0.13333
C09-50	P20	0.10000
C09-50	P30	0.10000
C09-50	P50	0.06000
C09-50	P100	0.05000
C09-50	P200	0.03500
C09-50	P500	0.01800
C09-50	P1000	0.00925
C09-51	num_ret	790.00000
C09-51	num_unjug_ret@1	0.00000
C09-51	num_unjug_ret@10	0.00000
C09-51	num_unjug_ret@100	33.00000
C09-51	num_unjug_ret@1000	715.00000
C09-51	num_rel	147.00000
C09-51	num_rel_ret	28.00000
C09-51	map	0.10956
C09-51	R-prec	0.16327
C09-51	bpref	0.18312
C09-51	recip_rank	1.00000
C09-51	ndcg	0.20530
C09-51	ndcg5	0.24240
C09-51	ndcg10	0.27747
C09-51	ndcg20	0.23987
C09-51	ERR	0.22743
C09-51	ERR10	0.21362
C09-51	ERR20	0.21940
C09-51	P1	1.00000
C09-51	P5	1.00000
C09-51	P10	0.90000
C09-51	P15	0.66667
C09-51	P20	0.55000
C09-51	P30	0.50000
C09-51	P50	0.38000
C09-51	P100	0.23000
C09-51	P200	0.12000
C09-51	P500	0.05600
C09-51	P1000	0.03544
C09-52	num_ret	796.00000
C09-52	num_unjug_ret@1	0.00000
C09-52	num_unjug_ret@10	0.00000
C09-52	num_unjug_ret@100	39.00000
C09-52	num_unjug_ret@1000	669.00000
C09-52	num_rel	47.00000
C09-52	num_rel_ret	27.00000
C09-52	map	0.06065
C09-52	R-prec	0.10638
C09-52	bpref	0.13445
C09-52	recip_rank	0.04348
C09-52	ndcg	0.39026
C09-52	ndcg5	0.00000
C09-52	ndcg10	0.00000
C09-52	ndcg20	0.00000
C09-52	ERR	0.04294
C09-52	ERR10	0.00000
C09-52	ERR20	0.00000
C09-52	P1	0.00000
C09-52	P5	0.00000
C09-52	P10	0.00000
C09-52	P15	0.00000
C09-52	P20	0.00000
C09-52	P30	0.13333
C09-52	P50	0.10000
C09-52	P100	0.14000
C09-52	P200	0.09000
C09-52	P500	0.05000
C09-52	P1000	0.03392
C09-53	num_ret	627.00000
C09-53	num_unjug_ret@1	0.00000
C09-53	num_unjug_ret@10	0.00000
C09-53	num_unjug_ret@100	3.00000
C09-53	num_unjug_ret@1000	565.00000
C09-53	num_rel	110.00000
C09-53	num_rel_ret	12.00000
C09-53	map	0.00246
C09-53	R-prec	0.01818
C09-53	bpref	0.08140
C09-53	recip_rank	0.01075
C09-53	ndcg	0.11752
C09-53	ndcg5	0.01874
C09-53	ndcg10	0.11504
C09-53	ndcg20	0.10461
C09-53	ERR	0.08474
C09-53	ERR10	0.08086
C09-53	ERR20	0.08086
C09-53	P1	0.00000
C09-53	P5	0.00000
C09-53	P10	0.00000
C09-53	P15	0.00000
C09-53	P20	0.00000
C09-53	P30	0.00000
C09-53	P50	0.00000
C09-53	P100	0.02000
C09-53	P200	0.02500
C09-53	P500	0.02000
C09-53	P1000	0.01914
C09-54	num_ret	326.00000
C09-54	num_unjug_ret@1	0.00000
C09-54	num_unjug_ret@10	0.00000
C09-54	num_unjug_ret@100	3.00000
C09-54	num_unjug_ret@1000	253.00000
C09-54	num_rel	183.00000
C09-54	num_rel_ret	47.00000
C09-54	map	0.01662
C09-54	R-prec	0.00546
C09-54	bpref	0.23300
C09-54	recip_rank	0.01042
C09-54	ndcg	0.14481
C09-54	ndcg5	0.00000
C09-54	ndcg10	0.02613
C09-54	ndcg20	0.01687
C09-54	ERR	0.03141
C09-54	ERR10	0.01042
C09-54	ERR20	0.01042
C09-54	P1	0.00000
C09-54	P5	0.00000
C09-54	P10	0.00000
C09-54	P15	0.00000
C09-54	P20	0.00000
C09-54	P30	0.00000
C09-54	P50	0.00000
C09-54	P100	0.01000
C09-54	P200	0.00500
C09-54	P500	0.12270
C09-54	P1000	0.14417
C09-55	num_ret	633.00000
C09-55	num_unjug_ret@1	0.00000
C09-55	num_unjug_ret@10	2.00000
C09-55	num_unjug_ret@100	22.00000
C09-55	num_unjug_ret@1000	556.00000
C09-55	num_rel	97.00000
C09-55	num_rel_ret	23.00000
C09-55	map	0.04810
C09-55	R-prec	0.13402
C09-55	bpref	0.19279
C09-55	recip_rank	1.00000
C09-55	ndcg	0.27421
C09-55	ndcg5	0.61643
C09-55	ndcg10	0.42616
C09-55	ndcg20	0.39034
C09-55	ERR	0.27995
C09-55	ERR10	0.25593
C09-55	ERR20	0.27567
C09-55	P1	1.00000
C09-55	P5	0.60000
C09-55	P10	0.40000
C09-55	P15	0.26667
C09-55	P20	0.20000
C09-55	P30	0.13333
C09-55	P50	0.14000
C09-55	P100	0.13000
C09-55	P200	0.07500
C09-55	P500	0.04000
C09-55	P1000	0.03633
C09-56	num_ret	431.00000
C09-56	num_unjug_ret@1	0.00000
C09-56	num_unjug_ret@10	0.00000
C09-56	num_unjug_ret@100	33.00000
C09-56	num_unjug_ret@1000	372.00000
C09-56	num_rel	47.00000
C09-56	num_rel_ret	4.00000
C09-56	map	0.00293
C09-56	R-prec	0.02128
C09-56	bpref	0.02988
C09-56	recip_rank	0.05882
C09-56	ndcg	0.07136
C09-56	ndcg5	0.00000
C09-56	ndcg10	0.00000
C09-56	ndcg20	0.03962
C09-56	ERR	0.02258
C09-56	ERR10	0.00000
C09-56	ERR20	0.01705
C09-56	P1	0.00000
C09-56	P5	0.00000
C09-56	P10	0.00000
C09-56	P15	0.00000
C09-56	P20	0.05000
C09-56	P30	0.03333
C09-56	P50	0.02000
C09-56	P100	0.02000
C09-56	P200	0.01500
C09-56	P500	0.00928
C09-56	P1000	0.00928
C09-57	num_ret	997.00000
C09-57	num_unjug_ret@1	0.00000
C09-57	num_unjug_ret@10	1.00000
C09-57	num_unjug_ret@100	66.00000
C09-57	num_unjug_ret@1000	925.00000
C09-57	num_rel	314.00000
C09-57	num_rel_ret	64.00000
C09-57	map	0.09109
C09-57	R-prec	0.15605
C09-57	bpref	0.20195
C09-57	recip_rank	1.00000
C09-57	ndcg	0.17459
C09-57	ndcg5	0.14286
C09-57	ndcg10	0.12246
C09-57	ndcg20	0.14825
C09-57	ERR	0.17622
C09-57	ERR10	0.14887
C09-57	ERR20	0.16950
C09-57	P1	1.00000
C09-57	P5	1.00000
C09-57	P10	0.80000
C09-57	P15	0.86667
C09-57	P20	0.85000
C09-57	P30	0.60000
C09-57	P50	0.54000
C09-57	P100	0.33000
C09-57	P200	0.20000
C09-57	P500	0.11000
C09-57	P1000	0.06419
C09-58	num_ret	678.00000
C09-58	num_unjug_ret@1	0.00000
C09-58	num_unjug_ret@10	0.00000
C09-58	num_unjug_ret@100	17.00000
C09-58	num_unjug_ret@1000	581.00000
C09-58	num_rel	95.00000
C09-58	num_rel_ret	29.00000
C09-58	map	0.02710
C09-58	R-prec	0.07368
C09-58	bpref	0.19657
C09-58	recip_rank	1.00000
C09-58	ndcg	0.25543
C09-58	ndcg5	0.29280
C09-58	ndcg10	0.26630
C09-58	ndcg20	0.24783
C09-58	ERR	0.26931
C09-58	ERR10	0.25066
C09-58	ERR20	0.26247
C09-58	P1	1.00000
C09-58	P5	0.20000
C09-58	P10	0.10000
C09-58	P15	0.06667
C09-58	P20	0.05000
C09-58	P30	0.06667
C09-58	P50	0.06000
C09-58	P100	0.07000
C09-58	P200	0.05500
C09-58	P500	0.04400
C09-58	P1000	0.04277
C09-59	num_ret	890.00000
C09-59	num_unjug_ret@1	0.00000
C09-59	num_unjug_ret@10	4.00000
C09-59	num_unjug_ret@100	35.00000
C09-59	num_unjug_ret@1000	839.00000
C09-59	num_rel	61.00000
C09-59	num_rel_ret	6.00000
C09-59	map	0.00910
C09-59	R-prec	0.03279
C09-59	bpref	0.06127
C09-59	recip_rank	0.33333
C09-59	ndcg	0.11134
C09-59	ndcg5	0.16958
C09-59	ndcg10	0.11005
C09-59	ndcg20	0.09888
C09-59	ERR	0.15018
C09-59	ERR10	0.14583
C09-59	ERR20	0.14854
C09-59	P1	0.00000
C09-59	P5	0.20000
C09-59	P10	0.10000
C09-59	P15	0.13333
C09-59	P20	0.10000
C09-59	P30	0.06667
C09-59	P50	0.04000
C09-59	P100	0.02000
C09-59	P200	0.01000
C09-59	P500	0.01200
C09-59	P1000	0.00674
C09-60	num_ret	772.00000
C09-60	num_unjug_ret@1	0.00000
C09-60	num_unjug_ret@10	1.00000
C09-60	num_unjug_ret@100	25.00000
C09-60	num_unjug_ret@1000	674.00000
C09-60	num_rel	184.00000
C09-60	num_rel_ret	54.00000
C09-60	map	0.04783
C09-60	R-prec	0.16304
C09-60	bpref	0.26143
C09-60	recip_rank	0.20000
C09-60	ndcg	0.26081
C09-60	ndcg5	0.10522
C09-60	ndcg10	0.18593
C09-60	ndcg20	0.28680
C09-60	ERR	0.09799
C09-60	ERR10	0.06860
C09-60	ERR20	0.09233
C09-60	P1	0.00000
C09-60	P5	0.20000
C09-60	P10	0.30000
C09-60	P15	0.20000
C09-60	P20	0.20000
C09-60	P30	0.30000
C09-60	P50	0.22000
C09-60	P100	0.20000
C09-60	P200	0.15500
C09-60	P500	0.08600
C09-60	P1000	0.06995
C09-61	num_ret	672.00000
C09-61	num_unjug_ret@1	0.00000
C09-61	num_unjug_ret@10	0.00000
C09-61	num_unjug_ret@100	23.00000
C09-61	num_unjug_ret@1000	605.00000
C09-61	num_rel	123.00000
C09-61	num_rel_ret	24.00000
C09-61	map	0.00844
C09-61	R-prec	0.03252
C09-61	bpref	0.12757
C09-61	recip_rank	0.05556
C09-61	ndcg	0.14390
C09-61	ndcg5	0.00000
C09-61	ndcg10	0.06919
C09-61	ndcg20	0.05808
C09-61	ERR	0.03360
C09-61	ERR10	0.02083
C09-61	ERR20	0.02083
C09-61	P1	0.00000
C09-61	P5	0.00000
C09-61	P10	0.00000
C09-61	P15	0.00000
C09-61	P20	0.05000
C09-61	P30	0.03333
C09-61	P50	0.04000
C09-61	P100	0.04000
C09-61	P200	0.05500
C09-61	P500	0.03400
C09-61	P1000	0.03571
C09-62	num_ret	745.00000
C09-62	num_unjug_ret@1	0.00000
C09-62	num_unjug_ret@10	0.00000
C09-62	num_unjug_ret@100	18.00000
C09-62	num_unjug_ret@1000	699.00000
C09-62	num_rel	106.00000
C09-62	num_rel_ret	16.00000
C09-62	map	0.01073
C09-62	R-prec	0.08491
C09-62	bpref	0.13670
C09-62	recip_rank	0.09091
C09-62	ndcg	0.13325
C09-62	ndcg5	0.17159
C09-62	ndcg10	0.16599
C09-62	ndcg20	0.18617
C09-62	ERR	0.08614
C09-62	ERR10	0.07516
C09-62	ERR20	0.08303
C09-62	P1	0.00000
C09-62	P5	0.00000
C09-62	P10	0.00000
C09-62	P15	0.13333
C09-62	P20	0.10000
C09-62	P30	0.06667
C09-62	P50	0.10000
C09-62	P100	0.09000
C09-62	P200	0.05000
C09-62	P500	0.02600
C09-62	P1000	0.02148
C09-63	num_ret	700.00000
C09-63	num_unjug_ret@1	0.00000
C09-63	num_unjug_ret@10	0.00000
C09-63	num_unjug_ret@100	32.00000
C09-63	num_unjug_ret@1000	630.00000
C09-63	num_rel	107.00000
C09-63	num_rel_ret	19.00000
C09-63	map	0.01003
C09-63	R-prec	0.06542
C09-63	bpref	0.13014
C09-63	recip_rank	0.07143
C09-63	ndcg	0.14626
C09-63	ndcg5	0.06507
C09-63	ndcg10	0.04962
C09-63	ndcg20	0.03617
C09-63	ERR	0.08275
C09-63	ERR10	0.06250
C09-63	ERR20	0.06250
C09-63	P1	0.00000
C09-63	P5	0.00000
C09-63	P10	0.00000
C09-63	P15	0.06667
C09-63	P20	0.05000
C09-63	P30	0.03333
C09-63	P50	0.02000
C09-63	P100	0.07000
C09-63	P200	0.07000
C09-63	P500	0.03600
C09-63	P1000	0.02714
C09-64	num_ret	627.00000
C09-64	num_unjug_ret@1	0.00000
C09-64	num_unjug_ret@10	0.00000
C09-64	num_unjug_ret@100	12.00000
C09-64	num_unjug_ret@1000	518.00000
C09-64	num_rel	142.00000
C09-64	num_rel_ret	32.00000
C09-64	map	0.02523
C09-64	R-prec	0.11972
C09-64	bpref	0.17948
C09-64	recip_rank	0.25000
C09-64	ndcg	0.16063
C09-64	ndcg5	0.12277
C09-64	ndcg10	0.11129
C09-64	ndcg20	0.12693
C09-64	ERR	0.10583
C09-64	ERR10	0.08059
C09-64	ERR20	0.09461
C09-64	P1	0.00000
C09-64	P5	0.20000
C09-64	P10	0.10000
C09-64	P15	0.13333
C09-64	P20	0.10000
C09-64	P30	0.13333
C09-64	P50	0.16000
C09-64	P100	0.13000
C09-64	P200	0.10500
C09-64	P500	0.05600
C09-64	P1000	0.05104
C09-65	num_ret	610.00000
C09-65	num_unjug_ret@1	0.00000
C09-65	num_unjug_ret@10	0.00000
C09-65	num_unjug_ret@100	11.00000
C09-65	num_unjug_ret@1000	500.00000
C09-65	num_rel	128.00000
C09-65	num_rel_ret	30.00000
C09-65	map	0.01082
C09-65	R-prec	0.05469
C09-65	bpref	0.14203
C09-65	recip_rank	0.02778
C09-65	ndcg	0.13431
C09-65	ndcg5	0.07358
C09-65	ndcg10	0.05611
C09-65	ndcg20	0.04915
C09-65	ERR	0.06648
C09-65	ERR10	0.05078
C09-65	ERR20	0.05353
C09-65	P1	0.00000
C09-65	P5	0.00000
C09-65	P10	0.00000
C09-65	P15	0.00000
C09-65	P20	0.00000
C09-65	P30	0.00000
C09-65	P50	0.04000
C09-65	P100	0.05000
C09-65	P200	0.05500
C09-65	P500	0.04000
C09-65	P1000	0.04918
C09-66	num_ret	801.00000
C09-66	num_unjug_ret@1	0.00000
C09-66	num_unjug_ret@10	3.00000
C09-66	num_unjug_ret@100	37.00000
C09-66	num_unjug_ret@1000	755.00000
C09-66	num_rel	26.00000
C09-66	num_rel_ret	5.00000
C09-66	map	0.00124
C09-66	R-prec	0.00000
C09-66	bpref	0.03994
C09-66	recip_rank	0.00392
C09-66	ndcg	0.02867
C09-66	ndcg5	0.00000
C09-66	ndcg10	0.00000
C09-66	ndcg20	0.00000
C09-66	ERR	0.00114
C09-66	ERR10	0.00000
C09-66	ERR20	0.00000
C09-66	P1	0.00000
C09-66	P5	0.00000
C09-66	P10	0.00000
C09-66	P15	0.00000
C09-66	P20	0.00000
C09-66	P30	0.00000
C09-66	P50	0.00000
C09-66	P100	0.00000
C09-66	P200	0.00000
C09-66	P500	0.00600
C09-66	P1000	0.00624
C09-67	num_ret	647.00000
C09-67	num_unjug_ret@1	0.00000
C09-67	num_unjug_ret@10	0.00000
C09-67	num_unjug_ret@100	27.00000
C09-67	num_unjug_ret@1000	595.00000
C09-67	num_rel	127.00000
C09-67	num_rel_ret	24.00000
C09-67	map	0.01363
C09-67	R-prec	0.08661
C09-67	bpref	0.15742
C09-67	recip_rank	0.05882
C09-67	ndcg	0.10401
C09-67	ndcg5	0.00000
C09-67	ndcg10	0.04760
C09-67	ndcg20	0.04150
C09-67	ERR	0.03172
C09-67	ERR10	0.01625
C09-67	ERR20	0.01900
C09-67	P1	0.00000
C09-67	P5	0.00000
C09-67	P10	0.00000
C09-67	P15	0.00000
C09-67	P20	0.05000
C09-67	P30	0.06667
C09-67	P50	0.04000
C09-67	P100	0.09000
C09-67	P200	0.07000
C09-67	P500	0.04600
C09-67	P1000	0.03709
C09-68	num_ret	946.00000
C09-68	num_unjug_ret@1	0.00000
C09-68	num_unjug_ret@10	0.00000
C09-68	num_unjug_ret@100	48.00000
C09-68	num_unjug_ret@1000	839.00000
C09-68	num_rel	45.00000
C09-68	num_rel_ret	15.00000
C09-68	map	0.02619
C09-68	R-prec	0.08889
C09-68	bpref	0.10519
C09-68	recip_rank	0.11111
C09-68	ndcg	0.18810
C09-68	ndcg5	0.14723
C09-68	ndcg10	0.12056
C09-68	ndcg20	0.11861
C09-68	ERR	0.05624
C09-68	ERR10	0.04590
C09-68	ERR20	0.05089
C09-68	P1	0.00000
C09-68	P5	0.00000
C09-68	P10	0.10000
C09-68	P15	0.13333
C09-68	P20	0.15000
C09-68	P30	0.10000
C09-68	P50	0.08000
C09-68	P100	0.06000
C09-68	P200	0.05000
C09-68	P500	0.02800
C09-68	P1000	0.01586
C09-69	num_ret	990.00000
C09-69	num_unjug_ret@1	0.00000
C09-69	num_unjug_ret@10	0.00000
C09-69	num_unjug_ret@100	57.00000
C09-69	num_unjug_ret@1000	922.00000
C09-69	num_rel	36.00000
C09-69	num_rel_ret	11.00000
C09-69	map	0.20109
C09-69	R-prec	0.22222
C09-69	bpref	0.21836
C09-69	recip_rank	1.00000
C09-69	ndcg	0.30102
C09-69	ndcg5	0.26301
C09-69	ndcg10	0.27979
C09-69	ndcg20	0.28115
C09-69	ERR	0.15185
C09-69	ERR10	0.14382
C09-69	ERR20	0.15084
C09-69	P1	1.00000
C09-69	P5	1.00000
C09-69	P10	0.70000
C09-69	P15	0.46667
C09-69	P20	0.40000
C09-69	P30	0.26667
C09-69	P50	0.16000
C09-69	P100	0.09000
C09-69	P200	0.04500
C09-69	P500	0.02000
C09-69	P1000	0.01111
C09-70	num_ret	849.00000
C09-70	num_unjug_ret@1	0.00000
C09-70	num_unjug_ret@10	1.00000
C09-70	num_unjug_ret@100	48.00000
C09-70	num_unjug_ret@1000	778.00000
C09-70	num_rel	11.00000
C09-70	num_rel_ret	0.00000
C09-70	map	0.00000
C09-70	R-prec	0.00000
C09-70	bpref	0.00000
C09-70	recip_rank	0.00000
C09-70	ndcg	0.00000
C09-70	ndcg5	0.00000
C09-70	ndcg10	0.00000
C09-70	ndcg20	0.00000
C09-70	ERR	0.00000
C09-70	ERR10	0.00000
C09-70	ERR20	0.00000
C09-70	P1	0.00000
C09-70	P5	0.00000
C09-70	P10	0.00000
C09-70	P15	0.00000
C09-70	P20	0.00000
C09-70	P30	0.00000
C09-70	P50	0.00000
C09-70	P100	0.00000
C09-70	P200	0.00000
C09-70	P500	0.00000
C09-70	P1000	0.00000
C09-71	num_ret	698.00000
C09-71	num_unjug_ret@1	0.00000
C09-71	num_unjug_ret@10	3.00000
C09-71	num_unjug_ret@100	88.00000
C09-71	num_unjug_ret@1000	663.00000
C09-71	num_rel	91.00000
C09-71	num_rel_ret	9.00000
C09-71	map	0.00174
C09-71	R-prec	0.01099
C09-71	bpref	0.08151
C09-71	recip_rank	0.02941
C09-71	ndcg	0.02944
C09-71	ndcg5	0.00000
C09-71	ndcg10	0.00000
C09-71	ndcg20	0.00000
C09-71	ERR	0.00380
C09-71	ERR10	0.00000
C09-71	ERR20	0.00000
C09-71	P1	0.00000
C09-71	P5	0.00000
C09-71	P10	0.00000
C09-71	P15	0.00000
C09-71	P20	0.00000
C09-71	P30	0.00000
C09-71	P50	0.02000
C09-71	P100	0.01000
C09-71	P200	0.01500
C09-71	P500	0.01400
C09-71	P1000	0.01289
C09-72	num_ret	650.00000
C09-72	num_unjug_ret@1	0.00000
C09-72	num_unjug_ret@10	0.00000
C09-72	num_unjug_ret@100	24.00000
C09-72	num_unjug_ret@1000	595.00000
C09-72	num_rel	78.00000
C09-72	num_rel_ret	4.00000
C09-72	map	0.01362
C09-72	R-prec	0.01282
C09-72	bpref	0.04619
C09-72	recip_rank	1.00000
C09-72	ndcg	0.03682
C09-72	ndcg5	0.11305
C09-72	ndcg10	0.07336
C09-72	ndcg20	0.04735
C09-72	ERR	0.06658
C09-72	ERR10	0.06250
C09-72	ERR20	0.06250
C09-72	P1	1.00000
C09-72	P5	0.20000
C09-72	P10	0.10000
C09-72	P15	0.06667
C09-72	P20	0.05000
C09-72	P30	0.03333
C09-72	P50	0.02000
C09-72	P100	0.02000
C09-72	P200	0.01500
C09-72	P500	0.00800
C09-72	P1000	0.00615
C09-73	num_ret	593.00000
C09-73	num_unjug_ret@1	0.00000
C09-73	num_unjug_ret@10	0.00000
C09-73	num_unjug_ret@100	13.00000
C09-73	num_unjug_ret@1000	554.00000
C09-73	num_rel	276.00000
C09-73	num_rel_ret	28.00000
C09-73	map	0.01558
C09-73	R-prec	0.07246
C09-73	bpref	0.09970
C09-73	recip_rank	0.09091
C09-73	ndcg	0.12825
C09-73	ndcg5	0.24091
C09-73	ndcg10	0.25127
C09-73	ndcg20	0.22301
C09-73	ERR	0.15442
C09-73	ERR10	0.13549
C09-73	ERR20	0.14847
C09-73	P1	0.00000
C09-73	P5	0.00000
C09-73	P10	0.00000
C09-73	P15	0.20000
C09-73	P20	0.20000
C09-73	P30	0.20000
C09-73	P50	0.26000
C09-73	P100	0.14000
C09-73	P200	0.09500
C09-73	P500	0.05000
C09-73	P1000	0.04722
C09-74	num_ret	838.00000
C09-74	num_unjug_ret@1	1.00000
C09-74	num_unjug_ret@10	3.00000
C09-74	num_unjug_ret@100	41.00000
C09-74	num_unjug_ret@1000	747.00000
C09-74	num_rel	42.00000
C09-74	num_rel_ret	9.00000
C09-74	map	0.02735
C09-74	R-prec	0.07143
C09-74	bpref	0.07313
C09-74	recip_rank	0.50000
C09-74	ndcg	0.15195
C09-74	ndcg5	0.07133
C09-74	ndcg10	0.06837
C09-74	ndcg20	0.09685
C09-74	ERR	0.05605
C09-74	ERR10	0.03776
C09-74	ERR20	0.05274
C09-74	P1	0.00000
C09-74	P5	0.20000
C09-74	P10	0.20000
C09-74	P15	0.20000
C09-74	P20	0.15000
C09-74	P30	0.10000
C09-74	P50	0.06000
C09-74	P100	0.03000
C09-74	P200	0.03000
C09-74	P500	0.01600
C09-74	P1000	0.01074
C09-75	num_ret	350.00000
C09-75	num_unjug_ret@1	0.00000
C09-75	num_unjug_ret@10	0.00000
C09-75	num_unjug_ret@100	2.00000
C09-75	num_unjug_ret@1000	291.00000
C09-75	num_rel	174.00000
C09-75	num_rel_ret	34.00000
C09-75	map	0.00928
C09-75	R-prec	0.03448
C09-75	bpref	0.18341
C09-75	recip_rank	0.16667
C09-75	ndcg	0.30433
C09-75	ndcg5	0.48405
C09-75	ndcg10	0.49525
C09-75	ndcg20	0.37012
C09-75	ERR	0.28259
C09-75	ERR10	0.27809
C09-75	ERR20	0.27809
C09-75	P1	0.00000
C09-75	P5	0.00000
C09-75	P10	0.10000
C09-75	P15	0.06667
C09-75	P20	0.05000
C09-75	P30	0.03333
C09-75	P50	0.08000
C09-75	P100	0.05000
C09-75	P200	0.04500
C09-75	P500	0.05429
C09-75	P1000	0.09714
C09-76	num_ret	905.00000
C09-76	num_unjug_ret@1	0.00000
C09-76	num_unjug_ret@10	0.00000
C09-76	num_unjug_ret@100	48.00000
C09-76	num_unjug_ret@1000	828.00000
C09-76	num_rel	178.00000
C09-76	num_rel_ret	47.00000
C09-76	map	0.10893
C09-76	R-prec	0.20787
C09-76	bpref	0.24536
C09-76	recip_rank	1.00000
C09-76	ndcg	0.25977
C09-76	ndcg5	0.14535
C09-76	ndcg10	0.26324
C09-76	ndcg20	0.25727
C09-76	ERR	0.26529
C09-76	ERR10	0.25145
C09-76	ERR20	0.25948
C09-76	P1	1.00000
C09-76	P5	0.20000
C09-76	P10	0.60000
C09-76	P15	0.60000
C09-76	P20	0.50000
C09-76	P30	0.56667
C09-76	P50	0.44000
C09-76	P100	0.31000
C09-76	P200	0.19000
C09-76	P500	0.09400
C09-76	P1000	0.05193
C09-77	num_ret	875.00000
C09-77	num_unjug_ret@1	0.00000
C09-77	num_unjug_ret@10	0.00000
C09-77	num_unjug_ret@100	37.00000
C09-77	num_unjug_ret@1000	782.00000
C09-77	num_rel	68.00000
C09-77	num_rel_ret	21.00000
C09-77	map	0.04417
C09-77	R-prec	0.10294
C09-77	bpref	0.13495
C09-77	recip_rank	0.50000
C09-77	ndcg	0.27007
C09-77	ndcg5	0.33135
C09-77	ndcg10	0.22551
C09-77	ndcg20	0.15117
C09-77	ERR	0.22185
C09-77	ERR10	0.21676
C09-77	ERR20	0.21676
C09-77	P1	0.00000
C09-77	P5	0.60000
C09-77	P10	0.30000
C09-77	P15	0.26667
C09-77	P20	0.20000
C09-77	P30	0.13333
C09-77	P50	0.08000
C09-77	P100	0.09000
C09-77	P200	0.05000
C09-77	P500	0.03000
C09-77	P1000	0.02400
C09-78	num_ret	856.00000
C09-78	num_unjug_ret@1	0.00000
C09-78	num_unjug_ret@10	0.00000
C09-78	num_unjug_ret@100	25.00000
C09-78	num_unjug_ret@1000	778.00000
C09-78	num_rel	67.00000
C09-78	num_rel_ret	8.00000
C09-78	map	0.00286
C09-78	R-prec	0.02985
C09-78	bpref	0.05881
C09-78	recip_rank	0.04545
C09-78	ndcg	0.05607
C09-78	ndcg5	0.00000
C09-78	ndcg10	0.02606
C09-78	ndcg20	0.03612
C09-78	ERR	0.01595
C09-78	ERR10	0.01042
C09-78	ERR20	0.01335
C09-78	P1	0.00000
C09-78	P5	0.00000
C09-78	P10	0.00000
C09-78	P15	0.00000
C09-78	P20	0.00000
C09-78	P30	0.03333
C09-78	P50	0.02000
C09-78	P100	0.02000
C09-78	P200	0.02000
C09-78	P500	0.01200
C09-78	P1000	0.00935
C09-79	num_ret	454.00000
C09-79	num_unjug_ret@1	0.00000
C09-79	num_unjug_ret@10	3.00000
C09-79	num_unjug_ret@100	22.00000
C09-79	num_unjug_ret@1000	399.00000
C09-79	num_rel	89.00000
C09-79	num_rel_ret	32.00000
C09-79	map	0.01163
C09-79	R-prec	0.02247
C09-79	bpref	0.29718
C09-79	recip_rank	0.01613
C09-79	ndcg	0.16865
C09-79	ndcg5	0.00000
C09-79	ndcg10	0.00000
C09-79	ndcg20	0.00000
C09-79	ERR	0.01502
C09-79	ERR10	0.00000
C09-79	ERR20	0.00000
C09-79	P1	0.00000
C09-79	P5	0.00000
C09-79	P10	0.00000
C09-79	P15	0.00000
C09-79	P20	0.00000
C09-79	P30	0.00000
C09-79	P50	0.00000
C09-79	P100	0.02000
C09-79	P200	0.02500
C09-79	P500	0.02643
C09-79	P1000	0.07048
C09-80	num_ret	911.00000
C09-80	num_unjug_ret@1	0.00000
C09-80	num_unjug_ret@10	0.00000
C09-80	num_unjug_ret@100	22.00000
C09-80	num_unjug_ret@1000	830.00000
C09-80	num_rel	280.00000
C09-80	num_rel_ret	61.00000
C09-80	map	0.06232
C09-80	R-prec	0.18571
C09-80	bpref	0.21056
C09-80	recip_rank	1.00000
C09-80	ndcg	0.27844
C09-80	ndcg5	1.00000
C09-80	ndcg10	0.93375
C09-80	ndcg20	0.70849
C09-80	ERR	0.17211
C09-80	ERR10	0.15495
C09-80	ERR20	0.16149
C09-80	P1	1.00000
C09-80	P5	1.00000
C09-80	P10	0.50000
C09-80	P15	0.33333
C09-80	P20	0.25000
C09-80	P30	0.16667
C09-80	P50	0.24000
C09-80	P100	0.28000
C09-80	P200	0.19000
C09-80	P500	0.11800
C09-80	P1000	0.06696
C09-81	num_ret	450.00000
C09-81	num_unjug_ret@1	0.00000
C09-81	num_unjug_ret@10	2.00000
C09-81	num_unjug_ret@100	40.00000
C09-81	num_unjug_ret@1000	382.00000
C09-81	num_rel	49.00000
C09-81	num_rel_ret	7.00000
C09-81	map	0.00334
C09-81	R-prec	0.00000
C09-81	bpref	0.06164
C09-81	recip_rank	0.01408
C09-81	ndcg	0.06051
C09-81	ndcg5	0.00000
C09-81	ndcg10	0.00000
C09-81	ndcg20	0.00000
C09-81	ERR	0.00567
C09-81	ERR10	0.00000
C09-81	ERR20	0.00000
C09-81	P1	0.00000
C09-81	P5	0.00000
C09-81	P10	0.00000
C09-81	P15	0.00000
C09-81	P20	0.00000
C09-81	P30	0.00000
C09-81	P50	0.00000
C09-81	P100	0.01000
C09-81	P200	0.02500
C09-81	P500	0.01333
C09-81	P1000	0.01556
C09-82	num_ret	688.00000
C09-82	num_unjug_ret@1	0.00000
C09-82	num_unjug_ret@10	1.00000
C09-82	num_unjug_ret@100	36.00000
C09-82	num_unjug_ret@1000	608.00000
C09-82	num_rel	93.00000
C09-82	num_rel_ret	13.00000
C09-82	map	0.01630
C09-82	R-prec	0.06452
C09-82	bpref	0.09250
C09-82	recip_rank	1.00000
C09-82	ndcg	0.09802
C09-82	ndcg5	0.06507
C09-82	ndcg10	0.04962
C09-82	ndcg20	0.06172
C09-82	ERR	0.07981
C09-82	ERR10	0.06250
C09-82	ERR20	0.07227
C09-82	P1	1.00000
C09-82	P5	0.20000
C09-82	P10	0.10000
C09-82	P15	0.06667
C09-82	P20	0.05000
C09-82	P30	0.03333
C09-82	P50	0.06000
C09-82	P100	0.06000
C09-82	P200	0.04000
C09-82	P500	0.02200
C09-82	P1000	0.01890
C09-83	num_ret	1000.00000
C09-83	num_unjug_ret@1	1.00000
C09-83	num_unjug_ret@10	10.00000
C09-83	num_unjug_ret@100	93.00000
C09-83	num_unjug_ret@1000	896.00000
C09-83	num_rel	64.00000
C09-83	num_rel_ret	0.00000
C09-83	map	0.00000
C09-83	R-prec	0.00000
C09-83	bpref	0.00000
C09-83	recip_rank	0.00000
C09-83	ndcg	0.00000
C09-83	ndcg5	0.00000
C09-83	ndcg10	0.00000
C09-83	ndcg20	0.00000
C09-83	ERR	0.00000
C09-83	ERR10	0.00000
C09-83	ERR20	0.00000
C09-83	P1	0.00000
C09-83	P5	0.00000
C09-83	P10	0.00000
C09-83	P15	0.00000
C09-83	P20	0.00000
C09-83	P30	0.00000
C09-83	P50	0.00000
C09-83	P100	0.00000
C09-83	P200	0.00000
C09-83	P500	0.00000
C09-83	P1000	0.00000
C09-84	num_ret	587.00000
C09-84	num_unjug_ret@1	0.00000
C09-84	num_unjug_ret@10	0.00000
C09-84	num_unjug_ret@100	20.00000
C09-84	num_unjug_ret@1000	522.00000
C09-84	num_rel	226.00000
C09-84	num_rel_ret	49.00000
C09-84	map	0.04062
C09-84	R-prec	0.15487
C09-84	bpref	0.17534
C09-84	recip_rank	0.03704
C09-84	ndcg	0.27037
C09-84	ndcg5	0.74295
C09-84	ndcg10	0.60618
C09-84	ndcg20	0.56858
C09-84	ERR	0.34248
C09-84	ERR10	0.32308
C09-84	ERR20	0.33926
C09-84	P1	0.00000
C09-84	P5	0.00000
C09-84	P10	0.00000
C09-84	P15	0.00000
C09-84	P20	0.00000
C09-84	P30	0.10000
C09-84	P50	0.22000
C09-84	P100	0.27000
C09-84	P200	0.17500
C09-84	P500	0.08800
C09-84	P1000	0.08348
C09-85	num_ret	692.00000
C09-85	num_unjug_ret@1	0.00000
C09-85	num_unjug_ret@10	3.00000
C09-85	num_unjug_ret@100	60.00000
C09-85	num_unjug_ret@1000	652.00000
C09-85	num_rel	149.00000
C09-85	num_rel_ret	16.00000
C09-85	map	0.02256
C09-85	R-prec	0.06040
C09-85	bpref	0.09279
C09-85	recip_rank	1.00000
C09-85	ndcg	0.07820
C09-85	ndcg5	0.10612
C09-85	ndcg10	0.09526
C09-85	ndcg20	0.07895
C09-85	ERR	0.10749
C09-85	ERR10	0.09729
C09-85	ERR20	0.10125
C09-85	P1	1.00000
C09-85	P5	0.40000
C09-85	P10	0.20000
C09-85	P15	0.26667
C09-85	P20	0.20000
C09-85	P30	0.13333
C09-85	P50	0.14000
C09-85	P100	0.08000
C09-85	P200	0.05500
C09-85	P500	0.02600
C09-85	P1000	0.02312
C09-86	num_ret	788.00000
C09-86	num_unjug_ret@1	0.00000
C09-86	num_unjug_ret@10	0.00000
C09-86	num_unjug_ret@100	38.00000
C09-86	num_unjug_ret@1000	647.00000
C09-86	num_rel	88.00000
C09-86	num_rel_ret	42.00000
C09-86	map	0.06929
C09-86	R-prec	0.10227
C09-86	bpref	0.28138
C09-86	recip_rank	0.05556
C09-86	ndcg	0.37132
C09-86	ndcg5	0.00000
C09-86	ndcg10	0.14874
C09-86	ndcg20	0.19809
C09-86	ERR	0.08978
C09-86	ERR10	0.06602
C09-86	ERR20	0.08533
C09-86	P1	0.00000
C09-86	P5	0.00000
C09-86	P10	0.00000
C09-86	P15	0.00000
C09-86	P20	0.05000
C09-86	P30	0.13333
C09-86	P50	0.10000
C09-86	P100	0.16000
C09-86	P200	0.14500
C09-86	P500	0.08400
C09-86	P1000	0.05330
C09-87	num_ret	522.00000
C09-87	num_unjug_ret@1	0.00000
C09-87	num_unjug_ret@10	0.00000
C09-87	num_unjug_ret@100	18.00000
C09-87	num_unjug_ret@1000	476.00000
C09-87	num_rel	58.00000
C09-87	num_rel_ret	15.00000
C09-87	map	0.01157
C09-87	R-prec	0.05172
C09-87	bpref	0.18787
C09-87	recip_rank	0.07143
C09-87	ndcg	0.18351
C09-87	ndcg5	0.05365
C09-87	ndcg10	0.14242
C09-87	ndcg20	0.15408
C09-87	ERR	0.04076
C09-87	ERR10	0.03008
C09-87	ERR20	0.03583
C09-87	P1	0.00000
C09-87	P5	0.00000
C09-87	P10	0.00000
C09-87	P15	0.06667
C09-87	P20	0.05000
C09-87	P30	0.06667
C09-87	P50	0.06000
C09-87	P100	0.06000
C09-87	P200	0.04000
C09-87	P500	0.02400
C09-87	P1000	0.02874
C09-88	num_ret	844.00000
C09-88	num_unjug_ret@1	0.00000
C09-88	num_unjug_ret@10	2.00000
C09-88	num_unjug_ret@100	44.00000
C09-88	num_unjug_ret@1000	775.00000
C09-88	num_rel	115.00000
C09-88	num_rel_ret	27.00000
C09-88	map	0.07832
C09-88	R-prec	0.20870
C09-88	bpref	0.20938
C09-88	recip_rank	1.00000
C09-88	ndcg	0.24892
C09-88	ndcg5	0.25912
C09-88	ndcg10	0.23758
C09-88	ndcg20	0.22547
C09-88	ERR	0.14821
C09-88	ERR10	0.12352
C09-88	ERR20	0.13760
C09-88	P1	1.00000
C09-88	P5	0.40000
C09-88	P10	0.40000
C09-88	P15	0.33333
C09-88	P20	0.35000
C09-88	P30	0.33333
C09-88	P50	0.34000
C09-88	P100	0.21000
C09-88	P200	0.12000
C09-88	P500	0.05200
C09-88	P1000	0.03199
C09-89	num_ret	889.00000
C09-89	num_unjug_ret@1	0.00000
C09-89	num_unjug_ret@10	0.00000
C09-89	num_unjug_ret@100	35.00000
C09-89	num_unjug_ret@1000	753.00000
C09-89	num_rel	167.00000
C09-89	num_rel_ret	69.00000
C09-89	map	0.07895
C09-89	R-prec	0.21557
C09-89	bpref	0.33583
C09-89	recip_rank	0.05263
C09-89	ndcg	0.18092
C09-89	ndcg5	0.03057
C09-89	ndcg10	0.03104
C09-89	ndcg20	0.04489
C09-89	ERR	0.07465
C09-89	ERR10	0.04102
C09-89	ERR20	0.05651
C09-89	P1	0.00000
C09-89	P5	0.00000
C09-89	P10	0.00000
C09-89	P15	0.00000
C09-89	P20	0.05000
C09-89	P30	0.06667
C09-89	P50	0.24000
C09-89	P100	0.24000
C09-89	P200	0.20500
C09-89	P500	0.11800
C09-89	P1000	0.07762
C09-90	num_ret	690.00000
C09-90	num_unjug_ret@1	0.00000
C09-90	num_unjug_ret@10	0.00000
C09-90	num_unjug_ret@100	45.00000
C09-90	num_unjug_ret@1000	635.00000
C09-90	num_rel	47.00000
C09-90	num_rel_ret	7.00000
C09-90	map	0.01185
C09-90	R-prec	0.06383
C09-90	bpref	0.09461
C09-90	recip_rank	0.09091
C09-90	ndcg	0.26876
C09-90	ndcg5	0.46579
C09-90	ndcg10	0.37244
C09-90	ndcg20	0.28351
C09-90	ERR	0.49397
C09-90	ERR10	0.49023
C09-90	ERR20	0.49023
C09-90	P1	0.00000
C09-90	P5	0.00000
C09-90	P10	0.00000
C09-90	P15	0.13333
C09-90	P20	0.10000
C09-90	P30	0.06667
C09-90	P50	0.06000
C09-90	P100	0.06000
C09-90	P200	0.03000
C09-90	P500	0.01400
C09-90	P1000	0.01014
C09-91	num_ret	539.00000
C09-91	num_unjug_ret@1	0.00000
C09-91	num_unjug_ret@10	1.00000
C09-91	num_unjug_ret@100	30.00000
C09-91	num_unjug_ret@1000	493.00000
C09-91	num_rel	158.00000
C09-91	num_rel_ret	12.00000
C09-91	map	0.00229
C09-91	R-prec	0.02532
C09-91	bpref	0.06766
C09-91	recip_rank	0.01538
C09-91	ndcg	0.04763
C09-91	ndcg5	0.00000
C09-91	ndcg10	0.00000
C09-91	ndcg20	0.00000
C09-91	ERR	0.01008
C09-91	ERR10	0.00000
C09-91	ERR20	0.00000
C09-91	P1	0.00000
C09-91	P5	0.00000
C09-91	P10	0.00000
C09-91	P15	0.00000
C09-91	P20	0.00000
C09-91	P30	0.00000
C09-91	P50	0.00000
C09-91	P100	0.04000
C09-91	P200	0.03500
C09-91	P500	0.02200
C09-91	P1000	0.02226
C09-92	num_ret	646.00000
C09-92	num_unjug_ret@1	0.00000
C09-92	num_unjug_ret@10	2.00000
C09-92	num_unjug_ret@100	8.00000
C09-92	num_unjug_ret@1000	583.00000
C09-92	num_rel	15.00000
C09-92	num_rel_ret	1.00000
C09-92	map	0.02222
C09-92	R-prec	0.06667
C09-92	bpref	0.05778
C09-92	recip_rank	0.33333
C09-92	ndcg	0.13656
C09-92	ndcg5	0.18584
C09-92	ndcg10	0.15517
C09-92	ndcg20	0.13656
C09-92	ERR	0.06250
C09-92	ERR10	0.06250
C09-92	ERR20	0.06250
C09-92	P1	0.00000
C09-92	P5	0.20000
C09-92	P10	0.10000
C09-92	P15	0.06667
C09-92	P20	0.05000
C09-92	P30	0.03333
C09-92	P50	0.02000
C09-92	P100	0.01000
C09-92	P200	0.00500
C09-92	P500	0.00200
C09-92	P1000	0.00155
C09-93	num_ret	836.00000
C09-93	num_unjug_ret@1	0.00000
C09-93	num_unjug_ret@10	0.00000
C09-93	num_unjug_ret@100	40.00000
C09-93	num_unjug_ret@1000	746.00000
C09-93	num_rel	35.00000
C09-93	num_rel_ret	5.00000
C09-93	map	0.00400
C09-93	R-prec	0.02857
C09-93	bpref	0.06531
C09-93	recip_rank	0.05882
C09-93	ndcg	0.06341
C09-93	ndcg5	0.04912
C09-93	ndcg10	0.03579
C09-93	ndcg20	0.02901
C09-93	ERR	0.03569
C09-93	ERR10	0.03125
C09-93	ERR20	0.03125
C09-93	P1	0.00000
C09-93	P5	0.00000
C09-93	P10	0.00000
C09-93	P15	0.00000
C09-93	P20	0.05000
C09-93	P30	0.03333
C09-93	P50	0.02000
C09-93	P100	0.02000
C09-93	P200	0.01500
C09-93	P500	0.01000
C09-93	P1000	0.00598
C09-94	num_ret	443.00000
C09-94	num_unjug_ret@1	0.00000
C09-94	num_unjug_ret@10	0.00000
C09-94	num_unjug_ret@100	26.00000
C09-94	num_unjug_ret@1000	400.00000
C09-94	num_rel	15.00000
C09-94	num_rel_ret	4.00000
C09-94	map	0.00792
C09-94	R-prec	0.00000
C09-94	bpref	0.18222
C09-94	recip_rank	0.02222
C09-94	ndcg	0.17985
C09-94	ndcg5	0.14607
C09-94	ndcg10	0.09479
C09-94	ndcg20	0.10316
C09-94	ERR	0.05768
C09-94	ERR10	0.04688
C09-94	ERR20	0.05026
C09-94	P1	0.00000
C09-94	P5	0.00000
C09-94	P10	0.00000
C09-94	P15	0.00000
C09-94	P20	0.00000
C09-94	P30	0.00000
C09-94	P50	0.02000
C09-94	P100	0.03000
C09-94	P200	0.02000
C09-94	P500	0.00903
C09-94	P1000	0.00903
C09-96	num_ret	626.00000
C09-96	num_unjug_ret@1	0.00000
C09-96	num_unjug_ret@10	0.00000
C09-96	num_unjug_ret@100	19.00000
C09-96	num_unjug_ret@1000	563.00000
C09-96	num_rel	93.00000
C09-96	num_rel_ret	34.00000
C09-96	map	0.02441
C09-96	R-prec	0.07527
C09-96	bpref	0.27286
C09-96	recip_rank	0.04762
C09-96	ndcg	0.29051
C09-96	ndcg5	0.00000
C09-96	ndcg10	0.25041
C09-96	ndcg20	0.26002
C09-96	ERR	0.07787
C09-96	ERR10	0.06834
C09-96	ERR20	0.07413
C09-96	P1	0.00000
C09-96	P5	0.00000
C09-96	P10	0.00000
C09-96	P15	0.00000
C09-96	P20	0.00000
C09-96	P30	0.16667
C09-96	P50	0.12000
C09-96	P100	0.07000
C09-96	P200	0.06000
C09-96	P500	0.05000
C09-96	P1000	0.05431
C09-97	num_ret	624.00000
C09-97	num_unjug_ret@1	0.00000
C09-97	num_unjug_ret@10	0.00000
C09-97	num_unjug_ret@100	6.00000
C09-97	num_unjug_ret@1000	507.00000
C09-97	num_rel	192.00000
C09-97	num_rel_ret	21.00000
C09-97	map	0.00203
C09-97	R-prec	0.01042
C09-97	bpref	0.07137
C09-97	recip_rank	0.02439
C09-97	ndcg	0.06524
C09-97	ndcg5	0.00000
C09-97	ndcg10	0.02445
C09-97	ndcg20	0.01578
C09-97	ERR	0.01737
C09-97	ERR10	0.00893
C09-97	ERR20	0.00893
C09-97	P1	0.00000
C09-97	P5	0.00000
C09-97	P10	0.00000
C09-97	P15	0.00000
C09-97	P20	0.00000
C09-97	P30	0.00000
C09-97	P50	0.02000
C09-97	P100	0.01000
C09-97	P200	0.01000
C09-97	P500	0.01400
C09-97	P1000	0.03365
C09-98	num_ret	910.00000
C09-98	num_unjug_ret@1	0.00000
C09-98	num_unjug_ret@10	0.00000
C09-98	num_unjug_ret@100	40.00000
C09-98	num_unjug_ret@1000	815.00000
C09-98	num_rel	127.00000
C09-98	num_rel_ret	35.00000
C09-98	map	0.04686
C09-98	R-prec	0.14961
C09-98	bpref	0.22363
C09-98	recip_rank	1.00000
C09-98	ndcg	0.17444
C09-98	ndcg5	0.12697
C09-98	ndcg10	0.16658
C09-98	ndcg20	0.13351
C09-98	ERR	0.13139
C09-98	ERR10	0.11937
C09-98	ERR20	0.12161
C09-98	P1	1.00000
C09-98	P5	0.40000
C09-98	P10	0.20000
C09-98	P15	0.13333
C09-98	P20	0.10000
C09-98	P30	0.10000
C09-98	P50	0.16000
C09-98	P100	0.18000
C09-98	P200	0.10000
C09-98	P500	0.05800
C09-98	P1000	0.03846
C09-99	num_ret	556.00000
C09-99	num_unjug_ret@1	0.00000
C09-99	num_unjug_ret@10	0.00000
C09-99	num_unjug_ret@100	18.00000
C09-99	num_unjug_ret@1000	518.00000
C09-99	num_rel	63.00000
C09-99	num_rel_ret	8.00000
C09-99	map	0.00610
C09-99	R-prec	0.01587
C09-99	bpref	0.09927
C09-99	recip_rank	0.25000
C09-99	ndcg	0.09643
C09-99	ndcg5	0.09760
C09-99	ndcg10	0.07443
C09-99	ndcg20	0.08204
C09-99	ERR	0.07587
C09-99	ERR10	0.06250
C09-99	ERR20	0.07338
C09-99	P1	0.00000
C09-99	P5	0.20000
C09-99	P10	0.10000
C09-99	P15	0.06667
C09-99	P20	0.05000
C09-99	P30	0.03333
C09-99	P50	0.02000
C09-99	P100	0.02000
C09-99	P200	0.02000
C09-99	P500	0.01200
C09-99	P1000	0.01439
C09-101	num_ret	973.00000
C09-101	num_unjug_ret@1	0.00000
C09-101	num_unjug_ret@10	0.00000
C09-101	num_unjug_ret@100	55.00000
C09-101	num_unjug_ret@1000	898.00000
C09-101	num_rel	84.00000
C09-101	num_rel_ret	10.00000
C09-101	map	0.02689
C09-101	R-prec	0.05952
C09-101	bpref	0.08163
C09-101	recip_rank	1.00000
C09-101	ndcg	0.11084
C09-101	ndcg5	0.16958
C09-101	ndcg10	0.11005
C09-101	ndcg20	0.08708
C09-101	ERR	0.09070
C09-101	ERR10	0.08203
C09-101	ERR20	0.08203
C09-101	P1	1.00000
C09-101	P5	0.40000
C09-101	P10	0.20000
C09-101	P15	0.13333
C09-101	P20	0.10000
C09-101	P30	0.06667
C09-101	P50	0.08000
C09-101	P100	0.06000
C09-101	P200	0.04500
C09-101	P500	0.02000
C09-101	P1000	0.01028
C09-102	num_ret	867.00000
C09-102	num_unjug_ret@1	0.00000
C09-102	num_unjug_ret@10	1.00000
C09-102	num_unjug_ret@100	43.00000
C09-102	num_unjug_ret@1000	763.00000
C09-102	num_rel	22.00000
C09-102	num_rel_ret	1.00000
C09-102	map	0.00909
C09-102	R-prec	0.04545
C09-102	bpref	0.03719
C09-102	recip_rank	0.20000
C09-102	ndcg	0.03293
C09-102	ndcg5	0.05365
C09-102	ndcg10	0.04393
C09-102	ndcg20	0.03423
C09-102	ERR	0.01250
C09-102	ERR10	0.01250
C09-102	ERR20	0.01250
C09-102	P1	0.00000
C09-102	P5	0.20000
C09-102	P10	0.10000
C09-102	P15	0.06667
C09-102	P20	0.05000
C09-102	P30	0.03333
C09-102	P50	0.02000
C09-102	P100	0.01000
C09-102	P200	0.00500
C09-102	P500	0.00200
C09-102	P1000	0.00115
C09-103	num_ret	676.00000
C09-103	num_unjug_ret@1	0.00000
C09-103	num_unjug_ret@10	0.00000
C09-103	num_unjug_ret@100	37.00000
C09-103	num_unjug_ret@1000	645.00000
C09-103	num_rel	58.00000
C09-103	num_rel_ret	14.00000
C09-103	map	0.06840
C09-103	R-prec	0.22414
C09-103	bpref	0.22354
C09-103	recip_rank	0.50000
C09-103	ndcg	0.29996
C09-103	ndcg5	0.49126
C09-103	ndcg10	0.44154
C09-103	ndcg20	0.36049
C09-103	ERR	0.19431
C09-103	ERR10	0.17931
C09-103	ERR20	0.18965
C09-103	P1	0.00000
C09-103	P5	0.40000
C09-103	P10	0.20000
C09-103	P15	0.13333
C09-103	P20	0.25000
C09-103	P30	0.30000
C09-103	P50	0.24000
C09-103	P100	0.14000
C09-103	P200	0.07000
C09-103	P500	0.02800
C09-103	P1000	0.02071
C09-104	num_ret	962.00000
C09-104	num_unjug_ret@1	0.00000
C09-104	num_unjug_ret@10	1.00000
C09-104	num_unjug_ret@100	54.00000
C09-104	num_unjug_ret@1000	863.00000
C09-104	num_rel	21.00000
C09-104	num_rel_ret	4.00000
C09-104	map	0.14323
C09-104	R-prec	0.14286
C09-104	bpref	0.14286
C09-104	recip_rank	1.00000
C09-104	ndcg	0.34261
C09-104	ndcg5	0.72273
C09-104	ndcg10	0.46900
C09-104	ndcg20	0.34071
C09-104	ERR	0.30500
C09-104	ERR10	0.30493
C09-104	ERR20	0.30493
C09-104	P1	1.00000
C09-104	P5	0.60000
C09-104	P10	0.30000
C09-104	P15	0.20000
C09-104	P20	0.15000
C09-104	P30	0.10000
C09-104	P50	0.06000
C09-104	P100	0.03000
C09-104	P200	0.01500
C09-104	P500	0.00600
C09-104	P1000	0.00416
C09-105	num_ret	753.00000
C09-105	num_unjug_ret@1	0.00000
C09-105	num_unjug_ret@10	0.00000
C09-105	num_unjug_ret@100	30.00000
C09-105	num_unjug_ret@1000	675.00000
C09-105	num_rel	109.00000
C09-105	num_rel_ret	26.00000
C09-105	map	0.03287
C09-105	R-prec	0.08257
C09-105	bpref	0.19089
C09-105	recip_rank	1.00000
C09-105	ndcg	0.22193
C09-105	ndcg5	0.32958
C09-105	ndcg10	0.29342
C09-105	ndcg20	0.30060
C09-105	ERR	0.11417
C09-105	ERR10	0.09729
C09-105	ERR20	0.10892
C09-105	P1	1.00000
C09-105	P5	0.40000
C09-105	P10	0.20000
C09-105	P15	0.13333
C09-105	P20	0.10000
C09-105	P30	0.13333
C09-105	P50	0.12000
C09-105	P100	0.09000
C09-105	P200	0.06500
C09-105	P500	0.03400
C09-105	P1000	0.03453
C09-106	num_ret	870.00000
C09-106	num_unjug_ret@1	0.00000
C09-106	num_unjug_ret@10	0.00000
C09-106	num_unjug_ret@100	66.00000
C09-106	num_unjug_ret@1000	824.00000
C09-106	num_rel	10.00000
C09-106	num_rel_ret	0.00000
C09-106	map	0.00000
C09-106	R-prec	0.00000
C09-106	bpref	0.00000
C09-106	recip_rank	0.00000
C09-106	ndcg	0.00000
C09-106	ndcg5	0.00000
C09-106	ndcg10	0.00000
C09-106	ndcg20	0.00000
C09-106	ERR	0.00000
C09-106	ERR10	0.00000
C09-106	ERR20	0.00000
C09-106	P1	0.00000
C09-106	P5	0.00000
C09-106	P10	0.00000
C09-106	P15	0.00000
C09-106	P20	0.00000
C09-106	P30	0.00000
C09-106	P50	0.00000
C09-106	P100	0.00000
C09-106	P200	0.00000
C09-106	P500	0.00000
C09-106	P1000	0.00000
C09-107	num_ret	237.00000
C09-107	num_unjug_ret@1	0.00000
C09-107	num_unjug_ret@10	0.00000
C09-107	num_unjug_ret@100	21.00000
C09-107	num_unjug_ret@1000	182.00000
C09-107	num_rel	52.00000
C09-107	num_rel_ret	4.00000
C09-107	map	0.00225
C09-107	R-prec	0.01923
C09-107	bpref	0.04919
C09-107	recip_rank	0.06250
C09-107	ndcg	0.05378
C09-107	ndcg5	0.04912
C09-107	ndcg10	0.03579
C09-107	ndcg20	0.04233
C09-107	ERR	0.03659
C09-107	ERR10	0.03125
C09-107	ERR20	0.03491
C09-107	P1	0.00000
C09-107	P5	0.00000
C09-107	P10	0.00000
C09-107	P15	0.00000
C09-107	P20	0.05000
C09-107	P30	0.03333
C09-107	P50	0.02000
C09-107	P100	0.02000
C09-107	P200	0.01000
C09-107	P500	0.01688
C09-107	P1000	0.01688
C09-108	num_ret	394.00000
C09-108	num_unjug_ret@1	0.00000
C09-108	num_unjug_ret@10	0.00000
C09-108	num_unjug_ret@100	0.00000
C09-108	num_unjug_ret@1000	346.00000
C09-108	num_rel	73.00000
C09-108	num_rel_ret	11.00000
C09-108	map	0.00642
C09-108	R-prec	0.02740
C09-108	bpref	0.13511
C09-108	recip_rank	0.03226
C09-108	ndcg	0.13846
C09-108	ndcg5	0.14895
C09-108	ndcg10	0.19820
C09-108	ndcg20	0.16231
C09-108	ERR	0.08443
C09-108	ERR10	0.07745
C09-108	ERR20	0.08047
C09-108	P1	0.00000
C09-108	P5	0.00000
C09-108	P10	0.00000
C09-108	P15	0.00000
C09-108	P20	0.00000
C09-108	P30	0.00000
C09-108	P50	0.02000
C09-108	P100	0.05000
C09-108	P200	0.04500
C09-108	P500	0.02792
C09-108	P1000	0.02792
C09-109	num_ret	960.00000
C09-109	num_unjug_ret@1	0.00000
C09-109	num_unjug_ret@10	0.00000
C09-109	num_unjug_ret@100	41.00000
C09-109	num_unjug_ret@1000	849.00000
C09-109	num_rel	11.00000
C09-109	num_rel_ret	3.00000
C09-109	map	0.00728
C09-109	R-prec	0.00000
C09-109	bpref	0.00000
C09-109	recip_rank	0.05263
C09-109	ndcg	0.10412
C09-109	ndcg5	0.00000
C09-109	ndcg10	0.00000
C09-109	ndcg20	0.04798
C09-109	ERR	0.00401
C09-109	ERR10	0.00000
C09-109	ERR20	0.00329
C09-109	P1	0.00000
C09-109	P5	0.00000
C09-109	P10	0.00000
C09-109	P15	0.00000
C09-109	P20	0.05000
C09-109	P30	0.03333
C09-109	P50	0.02000
C09-109	P100	0.01000
C09-109	P200	0.01000
C09-109	P500	0.00600
C09-109	P1000	0.00313
C09-110	num_ret	984.00000
C09-110	num_unjug_ret@1	0.00000
C09-110	num_unjug_ret@10	7.00000
C09-110	num_unjug_ret@100	93.00000
C09-110	num_unjug_ret@1000	903.00000
C09-110	num_rel	63.00000
C09-110	num_rel_ret	15.00000
C09-110	map	0.00256
C09-110	R-prec	0.00000
C09-110	bpref	0.09045
C09-110	recip_rank	0.00379
C09-110	ndcg	0.10070
C09-110	ndcg5	0.00000
C09-110	ndcg10	0.00000
C09-110	ndcg20	0.00000
C09-110	ERR	0.00152
C09-110	ERR10	0.00000
C09-110	ERR20	0.00000
C09-110	P1	0.00000
C09-110	P5	0.00000
C09-110	P10	0.00000
C09-110	P15	0.00000
C09-110	P20	0.00000
C09-110	P30	0.00000
C09-110	P50	0.00000
C09-110	P100	0.00000
C09-110	P200	0.00000
C09-110	P500	0.00200
C09-110	P1000	0.01524
C09-111	num_ret	822.00000
C09-111	num_unjug_ret@1	0.00000
C09-111	num_unjug_ret@10	0.00000
C09-111	num_unjug_ret@100	30.00000
C09-111	num_unjug_ret@1000	755.00000
C09-111	num_rel	141.00000
C09-111	num_rel_ret	44.00000
C09-111	map	0.12080
C09-111	R-prec	0.26241
C09-111	bpref	0.29352
C09-111	recip_rank	0.11111
C09-111	ndcg	0.24601
C09-111	ndcg5	0.25245
C09-111	ndcg10	0.28894
C09-111	ndcg20	0.27648
C09-111	ERR	0.26916
C09-111	ERR10	0.25539
C09-111	ERR20	0.26725
C09-111	P1	0.00000
C09-111	P5	0.00000
C09-111	P10	0.20000
C09-111	P15	0.46667
C09-111	P20	0.55000
C09-111	P30	0.50000
C09-111	P50	0.48000
C09-111	P100	0.36000
C09-111	P200	0.19000
C09-111	P500	0.08200
C09-111	P1000	0.05353
C09-112	num_ret	932.00000
C09-112	num_unjug_ret@1	0.00000
C09-112	num_unjug_ret@10	0.00000
C09-112	num_unjug_ret@100	37.00000
C09-112	num_unjug_ret@1000	857.00000
C09-112	num_rel	1.00000
C09-112	num_rel_ret	0.00000
C09-112	map	0.00000
C09-112	R-prec	0.00000
C09-112	bpref	0.00000
C09-112	recip_rank	0.00000
C09-112	ndcg	0.00000
C09-112	ndcg5	0.00000
C09-112	ndcg10	0.00000
C09-112	ndcg20	0.00000
C09-112	ERR	0.00000
C09-112	ERR10	0.00000
C09-112	ERR20	0.00000
C09-112	P1	0.00000
C09-112	P5	0.00000
C09-112	P10	0.00000
C09-112	P15	0.00000
C09-112	P20	0.00000
C09-112	P30	0.00000
C09-112	P50	0.00000
C09-112	P100	0.00000
C09-112	P200	0.00000
C09-112	P500	0.00000
C09-112	P1000	0.00000
C09-113	num_ret	888.00000
C09-113	num_unjug_ret@1	0.00000
C09-113	num_unjug_ret@10	5.00000
C09-113	num_unjug_ret@100	68.00000
C09-113	num_unjug_ret@1000	840.00000
C09-113	num_rel	8.00000
C09-113	num_rel_ret	0.00000
C09-113	map	0.00000
C09-113	R-prec	0.00000
C09-113	bpref	0.00000
C09-113	recip_rank	0.00000
C09-113	ndcg	0.00000
C09-113	ndcg5	0.00000
C09-113	ndcg10	0.00000
C09-113	ndcg20	0.00000
C09-113	ERR	0.00000
C09-113	ERR10	0.00000
C09-113	ERR20	0.00000
C09-113	P1	0.00000
C09-113	P5	0.00000
C09-113	P10	0.00000
C09-113	P15	0.00000
C09-113	P20	0.00000
C09-113	P30	0.00000
C09-113	P50	0.00000
C09-113	P100	0.00000
C09-113	P200	0.00000
C09-113	P500	0.00000
C09-113	P1000	0.00000
C09-114	num_ret	715.00000
C09-114	num_unjug_ret@1	0.00000
C09-114	num_unjug_ret@10	2.00000
C09-114	num_unjug_ret@100	42.00000
C09-114	num_unjug_ret@1000	655.00000
C09-114	num_rel	26.00000
C09-114	num_rel_ret	6.00000
C09-114	map	0.00958
C09-114	R-prec	0.03846
C09-114	bpref	0.07101
C09-114	recip_rank	0.10000
C09-114	ndcg	0.10708
C09-114	ndcg5	0.04374
C09-114	ndcg10	0.03705
C09-114	ndcg20	0.02990
C09-114	ERR	0.01885
C09-114	ERR10	0.01250
C09-114	ERR20	0.01250
C09-114	P1	0.00000
C09-114	P5	0.00000
C09-114	P10	0.10000
C09-114	P15	0.06667
C09-114	P20	0.05000
C09-114	P30	0.03333
C09-114	P50	0.04000
C09-114	P100	0.03000
C09-114	P200	0.01500
C09-114	P500	0.01200
C09-114	P1000	0.00839
C09-115	num_ret	917.00000
C09-115	num_unjug_ret@1	0.00000
C09-115	num_unjug_ret@10	1.00000
C09-115	num_unjug_ret@100	53.00000
C09-115	num_unjug_ret@1000	789.00000
C09-115	num_rel	4.00000
C09-115	num_rel_ret	0.00000
C09-115	map	0.00000
C09-115	R-prec	0.00000
C09-115	bpref	0.00000
C09-115	recip_rank	0.00000
C09-115	ndcg	0.00000
C09-115	ndcg5	0.00000
C09-115	ndcg10	0.00000
C09-115	ndcg20	0.00000
C09-115	ERR	0.00000
C09-115	ERR10	0.00000
C09-115	ERR20	0.00000
C09-115	P1	0.00000
C09-115	P5	0.00000
C09-115	P10	0.00000
C09-115	P15	0.00000
C09-115	P20	0.00000
C09-115	P30	0.00000
C09-115	P50	0.00000
C09-115	P100	0.00000
C09-115	P200	0.00000
C09-115	P500	0.00000
C09-115	P1000	0.00000
C09-116	num_ret	953.00000
C09-116	num_unjug_ret@1	0.00000
C09-116	num_unjug_ret@10	1.00000
C09-116	num_unjug_ret@100	68.00000
C09-116	num_unjug_ret@1000	887.00000
C09-116	num_rel	181.00000
C09-116	num_rel_ret	50.00000
C09-116	map	0.07408
C09-116	R-prec	0.14917
C09-116	bpref	0.22160
C09-116	recip_rank	1.00000
C09-116	ndcg	0.19826
C09-116	ndcg5	0.21284
C09-116	ndcg10	0.22104
C09-116	ndcg20	0.17670
C09-116	ERR	0.24937
C09-116	ERR10	0.23527
C09-116	ERR20	0.24346
C09-116	P1	1.00000
C09-116	P5	0.60000
C09-116	P10	0.60000
C09-116	P15	0.46667
C09-116	P20	0.45000
C09-116	P30	0.36667
C09-116	P50	0.34000
C09-116	P100	0.21000
C09-116	P200	0.14000
C09-116	P500	0.08000
C09-116	P1000	0.05247
C09-117	num_ret	946.00000
C09-117	num_unjug_ret@1	0.00000
C09-117	num_unjug_ret@10	0.00000
C09-117	num_unjug_ret@100	35.00000
C09-117	num_unjug_ret@1000	809.00000
C09-117	num_rel	234.00000
C09-117	num_rel_ret	81.00000
C09-117	map	0.08171
C09-117	R-prec	0.23077
C09-117	bpref	0.29900
C09-117	recip_rank	0.06250
C09-117	ndcg	0.24387
C09-117	ndcg5	0.01874
C09-117	ndcg10	0.16730
C09-117	ndcg20	0.15769
C09-117	ERR	0.12354
C09-117	ERR10	0.10960
C09-117	ERR20	0.11915
C09-117	P1	0.00000
C09-117	P5	0.00000
C09-117	P10	0.00000
C09-117	P15	0.00000
C09-117	P20	0.20000
C09-117	P30	0.23333
C09-117	P50	0.28000
C09-117	P100	0.31000
C09-117	P200	0.25500
C09-117	P500	0.14000
C09-117	P1000	0.08562
C09-118	num_ret	870.00000
C09-118	num_unjug_ret@1	0.00000
C09-118	num_unjug_ret@10	3.00000
C09-118	num_unjug_ret@100	54.00000
C09-118	num_unjug_ret@1000	793.00000
C09-118	num_rel	48.00000
C09-118	num_rel_ret	11.00000
C09-118	map	0.08200
C09-118	R-prec	0.22917
C09-118	bpref	0.18793
C09-118	recip_rank	1.00000
C09-118	ndcg	0.33153
C09-118	ndcg5	0.33916
C09-118	ndcg10	0.31959
C09-118	ndcg20	0.30256
C09-118	ERR	0.23860
C09-118	ERR10	0.21637
C09-118	ERR20	0.23287
C09-118	P1	1.00000
C09-118	P5	0.20000
C09-118	P10	0.30000
C09-118	P15	0.33333
C09-118	P20	0.30000
C09-118	P30	0.23333
C09-118	P50	0.22000
C09-118	P100	0.11000
C09-118	P200	0.05500
C09-118	P500	0.02200
C09-118	P1000	0.01264
C09-119	num_ret	992.00000
C09-119	num_unjug_ret@1	0.00000
C09-119	num_unjug_ret@10	1.00000
C09-119	num_unjug_ret@100	58.00000
C09-119	num_unjug_ret@1000	921.00000
C09-119	num_rel	71.00000
C09-119	num_rel_ret	25.00000
C09-119	map	0.07374
C09-119	R-prec	0.19718
C09-119	bpref	0.25074
C09-119	recip_rank	0.16667
C09-119	ndcg	0.18991
C09-119	ndcg5	0.00000
C09-119	ndcg10	0.07373
C09-119	ndcg20	0.09521
C09-119	ERR	0.05086
C09-119	ERR10	0.02565
C09-119	ERR20	0.03899
C09-119	P1	0.00000
C09-119	P5	0.00000
C09-119	P10	0.30000
C09-119	P15	0.33333
C09-119	P20	0.25000
C09-119	P30	0.26667
C09-119	P50	0.28000
C09-119	P100	0.15000
C09-119	P200	0.10500
C09-119	P500	0.04800
C09-119	P1000	0.02520
C09-120	num_ret	863.00000
C09-120	num_unjug_ret@1	1.00000
C09-120	num_unjug_ret@10	4.00000
C09-120	num_unjug_ret@100	57.00000
C09-120	num_unjug_ret@1000	800.00000
C09-120	num_rel	25.00000
C09-120	num_rel_ret	0.00000
C09-120	map	0.00000
C09-120	R-prec	0.00000
C09-120	bpref	0.00000
C09-120	recip_rank	0.00000
C09-120	ndcg	0.00000
C09-120	ndcg5	0.00000
C09-120	ndcg10	0.00000
C09-120	ndcg20	0.00000
C09-120	ERR	0.00000
C09-120	ERR10	0.00000
C09-120	ERR20	0.00000
C09-120	P1	0.00000
C09-120	P5	0.00000
C09-120	P10	0.00000
C09-120	P15	0.00000
C09-120	P20	0.00000
C09-120	P30	0.00000
C09-120	P50	0.00000
C09-120	P100	0.00000
C09-120	P200	0.00000
C09-120	P500	0.00000
C09-120	P1000	0.00000
C09-121	num_ret	904.00000
C09-121	num_unjug_ret@1	0.00000
C09-121	num_unjug_ret@10	2.00000
C09-121	num_unjug_ret@100	53.00000
C09-121	num_unjug_ret@1000	821.00000
C09-121	num_rel	78.00000
C09-121	num_rel_ret	17.00000
C09-121	map	0.07494
C09-121	R-prec	0.15385
C09-121	bpref	0.17012
C09-121	recip_rank	1.00000
C09-121	ndcg	0.15605
C09-121	ndcg5	0.21332
C09-121	ndcg10	0.18409
C09-121	ndcg20	0.14413
C09-121	ERR	0.11960
C09-121	ERR10	0.10520
C09-121	ERR20	0.11235
C09-121	P1	1.00000
C09-121	P5	0.60000
C09-121	P10	0.50000
C09-121	P15	0.46667
C09-121	P20	0.35000
C09-121	P30	0.26667
C09-121	P50	0.22000
C09-121	P100	0.12000
C09-121	P200	0.07000
C09-121	P500	0.03000
C09-121	P1000	0.01881
C09-122	num_ret	259.00000
C09-122	num_unjug_ret@1	0.00000
C09-122	num_unjug_ret@10	0.00000
C09-122	num_unjug_ret@100	17.00000
C09-122	num_unjug_ret@1000	216.00000
C09-122	num_rel	5.00000
C09-122	num_rel_ret	2.00000
C09-122	map	0.01916
C09-122	R-prec	0.00000
C09-122	bpref	0.12000
C09-122	recip_rank	0.07143
C09-122	ndcg	0.14076
C09-122	ndcg5	0.10104
C09-122	ndcg10	0.10104
C09-122	ndcg20	0.10104
C09-122	ERR	0.02261
C09-122	ERR10	0.02083
C09-122	ERR20	0.02083
C09-122	P1	0.00000
C09-122	P5	0.00000
C09-122	P10	0.00000
C09-122	P15	0.06667
C09-122	P20	0.05000
C09-122	P30	0.03333
C09-122	P50	0.02000
C09-122	P100	0.02000
C09-122	P200	0.01000
C09-122	P500	0.00772
C09-122	P1000	0.00772
C09-123	num_ret	628.00000
C09-123	num_unjug_ret@1	0.00000
C09-123	num_unjug_ret@10	0.00000
C09-123	num_unjug_ret@100	22.00000
C09-123	num_unjug_ret@1000	549.00000
C09-123	num_rel	98.00000
C09-123	num_rel_ret	30.00000
C09-123	map	0.09871
C09-123	R-prec	0.26531
C09-123	bpref	0.28072
C09-123	recip_rank	0.50000
C09-123	ndcg	0.31859
C09-123	ndcg5	0.51818
C09-123	ndcg10	0.64316
C09-123	ndcg20	0.53534
C09-123	ERR	0.20025
C09-123	ERR10	0.18981
C09-123	ERR20	0.19733
C09-123	P1	0.00000
C09-123	P5	0.20000
C09-123	P10	0.10000
C09-123	P15	0.26667
C09-123	P20	0.25000
C09-123	P30	0.40000
C09-123	P50	0.34000
C09-123	P100	0.26000
C09-123	P200	0.15000
C09-123	P500	0.06000
C09-123	P1000	0.04777
C09-124	num_ret	996.00000
C09-124	num_unjug_ret@1	0.00000
C09-124	num_unjug_ret@10	0.00000
C09-124	num_unjug_ret@100	46.00000
C09-124	num_unjug_ret@1000	913.00000
C09-124	num_rel	63.00000
C09-124	num_rel_ret	8.00000
C09-124	map	0.01495
C09-124	R-prec	0.11111
C09-124	bpref	0.08541
C09-124	recip_rank	0.07692
C09-124	ndcg	0.14276
C09-124	ndcg5	0.00000
C09-124	ndcg10	0.12988
C09-124	ndcg20	0.08382
C09-124	ERR	0.08382
C09-124	ERR10	0.07322
C09-124	ERR20	0.07322
C09-124	P1	0.00000
C09-124	P5	0.00000
C09-124	P10	0.00000
C09-124	P15	0.13333
C09-124	P20	0.10000
C09-124	P30	0.10000
C09-124	P50	0.12000
C09-124	P100	0.07000
C09-124	P200	0.04000
C09-124	P500	0.01600
C09-124	P1000	0.00803
C09-125	num_ret	926.00000
C09-125	num_unjug_ret@1	1.00000
C09-125	num_unjug_ret@10	2.00000
C09-125	num_unjug_ret@100	72.00000
C09-125	num_unjug_ret@1000	868.00000
C09-125	num_rel	47.00000
C09-125	num_rel_ret	12.00000
C09-125	map	0.01243
C09-125	R-prec	0.04255
C09-125	bpref	0.12268
C09-125	recip_rank	0.25000
C09-125	ndcg	0.09400
C09-125	ndcg5	0.02351
C09-125	ndcg10	0.02163
C09-125	ndcg20	0.03064
C09-125	ERR	0.02288
C09-125	ERR10	0.01563
C09-125	ERR20	0.01981
C09-125	P1	0.00000
C09-125	P5	0.20000
C09-125	P10	0.10000
C09-125	P15	0.06667
C09-125	P20	0.05000
C09-125	P30	0.06667
C09-125	P50	0.04000
C09-125	P100	0.03000
C09-125	P200	0.03000
C09-125	P500	0.01600
C09-125	P1000	0.01296
C09-126	num_ret	799.00000
C09-126	num_unjug_ret@1	0.00000
C09-126	num_unjug_ret@10	1.00000
C09-126	num_unjug_ret@100	21.00000
C09-126	num_unjug_ret@1000	699.00000
C09-126	num_rel	5.00000
C09-126	num_rel_ret	0.00000
C09-126	map	0.00000
C09-126	R-prec	0.00000
C09-126	bpref	0.00000
C09-126	recip_rank	0.00000
C09-126	ndcg	0.00000
C09-126	ndcg5	0.00000
C09-126	ndcg10	0.00000
C09-126	ndcg20	0.00000
C09-126	ERR	0.00000
C09-126	ERR10	0.00000
C09-126	ERR20	0.00000
C09-126	P1	0.00000
C09-126	P5	0.00000
C09-126	P10	0.00000
C09-126	P15	0.00000
C09-126	P20	0.00000
C09-126	P30	0.00000
C09-126	P50	0.00000
C09-126	P100	0.00000
C09-126	P200	0.00000
C09-126	P500	0.00000
C09-126	P1000	0.00000
C09-127	num_ret	509.00000
C09-127	num_unjug_ret@1	0.00000
C09-127	num_unjug_ret@10	0.00000
C09-127	num_unjug_ret@100	17.00000
C09-127	num_unjug_ret@1000	410.00000
C09-127	num_rel	124.00000
C09-127	num_rel_ret	45.00000
C09-127	map	0.19366
C09-127	R-prec	0.23387
C09-127	bpref	0.31588
C09-127	recip_rank	1.00000
C09-127	ndcg	0.40058
C09-127	ndcg5	0.42080
C09-127	ndcg10	0.34082
C09-127	ndcg20	0.37972
C09-127	ERR	0.19257
C09-127	ERR10	0.16509
C09-127	ERR20	0.18590
C09-127	P1	1.00000
C09-127	P5	1.00000
C09-127	P10	0.80000
C09-127	P15	0.66667
C09-127	P20	0.65000
C09-127	P30	0.66667
C09-127	P50	0.50000
C09-127	P100	0.29000
C09-127	P200	0.20500
C09-127	P500	0.08400
C09-127	P1000	0.08841
C09-128	num_ret	661.00000
C09-128	num_unjug_ret@1	0.00000
C09-128	num_unjug_ret@10	1.00000
C09-128	num_unjug_ret@100	24.00000
C09-128	num_unjug_ret@1000	570.00000
C09-128	num_rel	60.00000
C09-128	num_rel_ret	14.00000
C09-128	map	0.06218
C09-128	R-prec	0.20000
C09-128	bpref	0.20944
C09-128	recip_rank	0.50000
C09-128	ndcg	0.29852
C09-128	ndcg5	0.34519
C09-128	ndcg10	0.43228
C09-128	ndcg20	0.46889
C09-128	ERR	0.18300
C09-128	ERR10	0.16419
C09-128	ERR20	0.18124
C09-128	P1	0.00000
C09-128	P5	0.40000
C09-128	P10	0.30000
C09-128	P15	0.20000
C09-128	P20	0.15000
C09-128	P30	0.20000
C09-128	P50	0.24000
C09-128	P100	0.13000
C09-128	P200	0.07000
C09-128	P500	0.02800
C09-128	P1000	0.02118
C09-129	num_ret	975.00000
C09-129	num_unjug_ret@1	0.00000
C09-129	num_unjug_ret@10	1.00000
C09-129	num_unjug_ret@100	59.00000
C09-129	num_unjug_ret@1000	860.00000
C09-129	num_rel	27.00000
C09-129	num_rel_ret	3.00000
C09-129	map	0.00104
C09-129	R-prec	0.00000
C09-129	bpref	0.00686
C09-129	recip_rank	0.01563
C09-129	ndcg	0.02083
C09-129	ndcg5	0.00000
C09-129	ndcg10	0.00000
C09-129	ndcg20	0.00000
C09-129	ERR	0.00195
C09-129	ERR10	0.00000
C09-129	ERR20	0.00000
C09-129	P1	0.00000
C09-129	P5	0.00000
C09-129	P10	0.00000
C09-129	P15	0.00000
C09-129	P20	0.00000
C09-129	P30	0.00000
C09-129	P50	0.00000
C09-129	P100	0.01000
C09-129	P200	0.00500
C09-129	P500	0.00600
C09-129	P1000	0.00308
C09-130	num_ret	591.00000
C09-130	num_unjug_ret@1	0.00000
C09-130	num_unjug_ret@10	5.00000
C09-130	num_unjug_ret@100	17.00000
C09-130	num_unjug_ret@1000	494.00000
C09-130	num_rel	282.00000
C09-130	num_rel_ret	73.00000
C09-130	map	0.03689
C09-130	R-prec	0.11348
C09-130	bpref	0.19439
C09-130	recip_rank	1.00000
C09-130	ndcg	0.21621
C09-130	ndcg5	0.04845
C09-130	ndcg10	0.10984
C09-130	ndcg20	0.18463
C09-130	ERR	0.16693
C09-130	ERR10	0.13086
C09-130	ERR20	0.16357
C09-130	P1	1.00000
C09-130	P5	0.20000
C09-130	P10	0.20000
C09-130	P15	0.26667
C09-130	P20	0.30000
C09-130	P30	0.26667
C09-130	P50	0.26000
C09-130	P100	0.13000
C09-130	P200	0.09000
C09-130	P500	0.09800
C09-130	P1000	0.12352
C09-131	num_ret	988.00000
C09-131	num_unjug_ret@1	0.00000
C09-131	num_unjug_ret@10	4.00000
C09-131	num_unjug_ret@100	75.00000
C09-131	num_unjug_ret@1000	902.00000
C09-131	num_rel	4.00000
C09-131	num_rel_ret	2.00000
C09-131	map	0.02110
C09-131	R-prec	0.00000
C09-131	bpref	0.00000
C09-131	recip_rank	0.07692
C09-131	ndcg	0.06642
C09-131	ndcg5	0.00000
C09-131	ndcg10	0.00000
C09-131	ndcg20	0.04510
C09-131	ERR	0.00503
C09-131	ERR10	0.00000
C09-131	ERR20	0.00481
C09-131	P1	0.00000
C09-131	P5	0.00000
C09-131	P10	0.00000
C09-131	P15	0.06667
C09-131	P20	0.05000
C09-131	P30	0.03333
C09-131	P50	0.02000
C09-131	P100	0.01000
C09-131	P200	0.00500
C09-131	P500	0.00400
C09-131	P1000	0.00202
C09-132	num_ret	419.00000
C09-132	num_unjug_ret@1	0.00000
C09-132	num_unjug_ret@10	2.00000
C09-132	num_unjug_ret@100	39.00000
C09-132	num_unjug_ret@1000	394.00000
C09-132	num_rel	50.00000
C09-132	num_rel_ret	5.00000
C09-132	map	0.00183
C09-132	R-prec	0.02000
C09-132	bpref	0.05960
C09-132	recip_rank	0.07143
C09-132	ndcg	0.05767
C09-132	ndcg5	0.00000
C09-132	ndcg10	0.06625
C09-132	ndcg20	0.04276
C09-132	ERR	0.02252
C09-132	ERR10	0.02083
C09-132	ERR20	0.02083
C09-132	P1	0.00000
C09-132	P5	0.00000
C09-132	P10	0.00000
C09-132	P15	0.06667
C09-132	P20	0.05000
C09-132	P30	0.03333
C09-132	P50	0.02000
C09-132	P100	0.01000
C09-132	P200	0.00500
C09-132	P500	0.00477
C09-132	P1000	0.01193
C09-133	num_ret	816.00000
C09-133	num_unjug_ret@1	0.00000
C09-133	num_unjug_ret@10	2.00000
C09-133	num_unjug_ret@100	53.00000
C09-133	num_unjug_ret@1000	725.00000
C09-133	num_rel	140.00000
C09-133	num_rel_ret	28.00000
C09-133	map	0.01156
C09-133	R-prec	0.05714
C09-133	bpref	0.13000
C09-133	recip_rank	0.11111
C09-133	ndcg	0.15365
C09-133	ndcg5	0.13121
C09-133	ndcg10	0.08514
C09-133	ndcg20	0.09457
C09-133	ERR	0.02659
C09-133	ERR10	0.01250
C09-133	ERR20	0.01783
C09-133	P1	0.00000
C09-133	P5	0.00000
C09-133	P10	0.10000
C09-133	P15	0.13333
C09-133	P20	0.10000
C09-133	P30	0.10000
C09-133	P50	0.10000
C09-133	P100	0.08000
C09-133	P200	0.04000
C09-133	P500	0.03400
C09-133	P1000	0.03431
C09-134	num_ret	841.00000
C09-134	num_unjug_ret@1	0.00000
C09-134	num_unjug_ret@10	1.00000
C09-134	num_unjug_ret@100	31.00000
C09-134	num_unjug_ret@1000	726.00000
C09-134	num_rel	23.00000
C09-134	num_rel_ret	4.00000
C09-134	map	0.00122
C09-134	R-prec	0.00000
C09-134	bpref	0.00000
C09-134	recip_rank	0.00806
C09-134	ndcg	0.06625
C09-134	ndcg5	0.00000
C09-134	ndcg10	0.00000
C09-134	ndcg20	0.00000
C09-134	ERR	0.00136
C09-134	ERR10	0.00000
C09-134	ERR20	0.00000
C09-134	P1	0.00000
C09-134	P5	0.00000
C09-134	P10	0.00000
C09-134	P15	0.00000
C09-134	P20	0.00000
C09-134	P30	0.00000
C09-134	P50	0.00000
C09-134	P100	0.00000
C09-134	P200	0.01000
C09-134	P500	0.00400
C09-134	P1000	0.00476
C09-135	num_ret	710.00000
C09-135	num_unjug_ret@1	0.00000
C09-135	num_unjug_ret@10	6.00000
C09-135	num_unjug_ret@100	54.00000
C09-135	num_unjug_ret@1000	633.00000
C09-135	num_rel	3.00000
C09-135	num_rel_ret	0.00000
C09-135	map	0.00000
C09-135	R-prec	0.00000
C09-135	bpref	0.00000
C09-135	recip_rank	0.00000
C09-135	ndcg	0.00000
C09-135	ndcg5	0.00000
C09-135	ndcg10	0.00000
C09-135	ndcg20	0.00000
C09-135	ERR	0.00000
C09-135	ERR10	0.00000
C09-135	ERR20	0.00000
C09-135	P1	0.00000
C09-135	P5	0.00000
C09-135	P10	0.00000
C09-135	P15	0.00000
C09-135	P20	0.00000
C09-135	P30	0.00000
C09-135	P50	0.00000
C09-135	P100	0.00000
C09-135	P200	0.00000
C09-135	P500	0.00000
C09-135	P1000	0.00000
C09-136	num_ret	473.00000
C09-136	num_unjug_ret@1	0.00000
C09-136	num_unjug_ret@10	0.00000
C09-136	num_unjug_ret@100	19.00000
C09-136	num_unjug_ret@1000	384.00000
C09-136	num_rel	33.00000
C09-136	num_rel_ret	13.00000
C09-136	map	0.01167
C09-136	R-prec	0.00000
C09-136	bpref	0.11938
C09-136	recip_rank	0.02439
C09-136	ndcg	0.21244
C09-136	ndcg5	0.00000
C09-136	ndcg10	0.00000
C09-136	ndcg20	0.07368
C09-136	ERR	0.05845
C09-136	ERR10	0.00000
C09-136	ERR20	0.05425
C09-136	P1	0.00000
C09-136	P5	0.00000
C09-136	P10	0.00000
C09-136	P15	0.00000
C09-136	P20	0.00000
C09-136	P30	0.00000
C09-136	P50	0.04000
C09-136	P100	0.03000
C09-136	P200	0.02500
C09-136	P500	0.02748
C09-136	P1000	0.02748
C09-137	num_ret	916.00000
C09-137	num_unjug_ret@1	0.00000
C09-137	num_unjug_ret@10	0.00000
C09-137	num_unjug_ret@100	34.00000
C09-137	num_unjug_ret@1000	803.00000
C09-137	num_rel	189.00000
C09-137	num_rel_ret	62.00000
C09-137	map	0.17563
C09-137	R-prec	0.26984
C09-137	bpref	0.29582
C09-137	recip_rank	1.00000
C09-137	ndcg	0.37708
C09-137	ndcg5	0.39108
C09-137	ndcg10	0.35602
C09-137	ndcg20	0.39498
C09-137	ERR	0.37789
C09-137	ERR10	0.36382
C09-137	ERR20	0.37730
C09-137	P1	1.00000
C09-137	P5	1.00000
C09-137	P10	0.90000
C09-137	P15	0.86667
C09-137	P20	0.80000
C09-137	P30	0.66667
C09-137	P50	0.54000
C09-137	P100	0.40000
C09-137	P200	0.25500
C09-137	P500	0.11600
C09-137	P1000	0.06769
C09-138	num_ret	930.00000
C09-138	num_unjug_ret@1	0.00000
C09-138	num_unjug_ret@10	0.00000
C09-138	num_unjug_ret@100	54.00000
C09-138	num_unjug_ret@1000	846.00000
C09-138	num_rel	15.00000
C09-138	num_rel_ret	11.00000
C09-138	map	0.42156
C09-138	R-prec	0.40000
C09-138	bpref	0.43556
C09-138	recip_rank	1.00000
C09-138	ndcg	0.69523
C09-138	ndcg5	0.83042
C09-138	ndcg10	0.67457
C09-138	ndcg20	0.52291
C09-138	ERR	0.13328
C09-138	ERR10	0.12689
C09-138	ERR20	0.12689
C09-138	P1	1.00000
C09-138	P5	0.80000
C09-138	P10	0.60000
C09-138	P15	0.40000
C09-138	P20	0.30000
C09-138	P30	0.33333
C09-138	P50	0.22000
C09-138	P100	0.11000
C09-138	P200	0.05500
C09-138	P500	0.02200
C09-138	P1000	0.01183
C09-139	num_ret	797.00000
C09-139	num_unjug_ret@1	0.00000
C09-139	num_unjug_ret@10	1.00000
C09-139	num_unjug_ret@100	44.00000
C09-139	num_unjug_ret@1000	702.00000
C09-139	num_rel	24.00000
C09-139	num_rel_ret	11.00000
C09-139	map	0.01396
C09-139	R-prec	0.00000
C09-139	bpref	0.03299
C09-139	recip_rank	0.01887
C09-139	ndcg	0.21930
C09-139	ndcg5	0.00000
C09-139	ndcg10	0.00000
C09-139	ndcg20	0.00000
C09-139	ERR	0.01346
C09-139	ERR10	0.00000
C09-139	ERR20	0.00000
C09-139	P1	0.00000
C09-139	P5	0.00000
C09-139	P10	0.00000
C09-139	P15	0.00000
C09-139	P20	0.00000
C09-139	P30	0.00000
C09-139	P50	0.00000
C09-139	P100	0.03000
C09-139	P200	0.03000
C09-139	P500	0.02200
C09-139	P1000	0.01380
C09-140	num_ret	348.00000
C09-140	num_unjug_ret@1	0.00000
C09-140	num_unjug_ret@10	0.00000
C09-140	num_unjug_ret@100	7.00000
C09-140	num_unjug_ret@1000	293.00000
C09-140	num_rel	4.00000
C09-140	num_rel_ret	0.00000
C09-140	map	0.00000
C09-140	R-prec	0.00000
C09-140	bpref	0.00000
C09-140	recip_rank	0.00000
C09-140	ndcg	0.00000
C09-140	ndcg5	0.00000
C09-140	ndcg10	0.00000
C09-140	ndcg20	0.00000
C09-140	ERR	0.00000
C09-140	ERR10	0.00000
C09-140	ERR20	0.00000
C09-140	P1	0.00000
C09-140	P5	0.00000
C09-140	P10	0.00000
C09-140	P15	0.00000
C09-140	P20	0.00000
C09-140	P30	0.00000
C09-140	P50	0.00000
C09-140	P100	0.00000
C09-140	P200	0.00000
C09-140	P500	0.00000
C09-140	P1000	0.00000
C09-141	num_ret	986.00000
C09-141	num_unjug_ret@1	0.00000
C09-141	num_unjug_ret@10	0.00000
C09-141	num_unjug_ret@100	51.00000
C09-141	num_unjug_ret@1000	869.00000
C09-141	num_rel	34.00000
C09-141	num_rel_ret	21.00000
C09-141	map	0.09301
C09-141	R-prec	0.17647
C09-141	bpref	0.18512
C09-141	recip_rank	0.11111
C09-141	ndcg	0.28439
C09-141	ndcg5	0.00000
C09-141	ndcg10	0.04329
C09-141	ndcg20	0.06537
C09-141	ERR	0.03309
C09-141	ERR10	0.01280
C09-141	ERR20	0.01995
C09-141	P1	0.00000
C09-141	P5	0.00000
C09-141	P10	0.20000
C09-141	P15	0.20000
C09-141	P20	0.20000
C09-141	P30	0.16667
C09-141	P50	0.20000
C09-141	P100	0.13000
C09-141	P200	0.08500
C09-141	P500	0.03600
C09-141	P1000	0.02130
C09-142	num_ret	595.00000
C09-142	num_unjug_ret@1	0.00000
C09-142	num_unjug_ret@10	0.00000
C09-142	num_unjug_ret@100	30.00000
C09-142	num_unjug_ret@1000	540.00000
C09-142	num_rel	45.00000
C09-142	num_rel_ret	2.00000
C09-142	map	0.00044
C09-142	R-prec	0.00000
C09-142	bpref	0.02765
C09-142	recip_rank	0.00943
C09-142	ndcg	0.02699
C09-142	ndcg5	0.00000
C09-142	ndcg10	0.00000
C09-142	ndcg20	0.00000
C09-142	ERR	0.00180
C09-142	ERR10	0.00000
C09-142	ERR20	0.00000
C09-142	P1	0.00000
C09-142	P5	0.00000
C09-142	P10	0.00000
C09-142	P15	0.00000
C09-142	P20	0.00000
C09-142	P30	0.00000
C09-142	P50	0.00000
C09-142	P100	0.00000
C09-142	P200	0.01000
C09-142	P500	0.00400
C09-142	P1000	0.00336
C09-143	num_ret	840.00000
C09-143	num_unjug_ret@1	0.00000
C09-143	num_unjug_ret@10	0.00000
C09-143	num_unjug_ret@100	37.00000
C09-143	num_unjug_ret@1000	781.00000
C09-143	num_rel	25.00000
C09-143	num_rel_ret	0.00000
C09-143	map	0.00000
C09-143	R-prec	0.00000
C09-143	bpref	0.00000
C09-143	recip_rank	0.00000
C09-143	ndcg	0.00000
C09-143	ndcg5	0.00000
C09-143	ndcg10	0.00000
C09-143	ndcg20	0.00000
C09-143	ERR	0.00000
C09-143	ERR10	0.00000
C09-143	ERR20	0.00000
C09-143	P1	0.00000
C09-143	P5	0.00000
C09-143	P10	0.00000
C09-143	P15	0.00000
C09-143	P20	0.00000
C09-143	P30	0.00000
C09-143	P50	0.00000
C09-143	P100	0.00000
C09-143	P200	0.00000
C09-143	P500	0.00000
C09-143	P1000	0.00000
C09-144	num_ret	759.00000
C09-144	num_unjug_ret@1	0.00000
C09-144	num_unjug_ret@10	0.00000
C09-144	num_unjug_ret@100	28.00000
C09-144	num_unjug_ret@1000	632.00000
C09-144	num_rel	97.00000
C09-144	num_rel_ret	21.00000
C09-144	map	0.02738
C09-144	R-prec	0.11340
C09-144	bpref	0.13019
C09-144	recip_rank	1.00000
C09-144	ndcg	0.19531
C09-144	ndcg5	0.25912
C09-144	ndcg10	0.16815
C09-144	ndcg20	0.13083
C09-144	ERR	0.12273
C09-144	ERR10	0.10645
C09-144	ERR20	0.11159
C09-144	P1	1.00000
C09-144	P5	0.20000
C09-144	P10	0.10000
C09-144	P15	0.13333
C09-144	P20	0.10000
C09-144	P30	0.06667
C09-144	P50	0.10000
C09-144	P100	0.11000
C09-144	P200	0.08000
C09-144	P500	0.03200
C09-144	P1000	0.02767
C09-145	num_ret	887.00000
C09-145	num_unjug_ret@1	0.00000
C09-145	num_unjug_ret@10	2.00000
C09-145	num_unjug_ret@100	44.00000
C09-145	num_unjug_ret@1000	788.00000
C09-145	num_rel	101.00000
C09-145	num_rel_ret	27.00000
C09-145	map	0.06931
C09-145	R-prec	0.16832
C09-145	bpref	0.19567
C09-145	recip_rank	1.00000
C09-145	ndcg	0.22762
C09-145	ndcg5	0.28263
C09-145	ndcg10	0.20954
C09-145	ndcg20	0.18916
C09-145	ERR	0.14585
C09-145	ERR10	0.12903
C09-145	ERR20	0.13495
C09-145	P1	1.00000
C09-145	P5	0.40000
C09-145	P10	0.30000
C09-145	P15	0.26667
C09-145	P20	0.25000
C09-145	P30	0.26667
C09-145	P50	0.28000
C09-145	P100	0.17000
C09-145	P200	0.10500
C09-145	P500	0.04800
C09-145	P1000	0.03044
C09-146	num_ret	823.00000
C09-146	num_unjug_ret@1	0.00000
C09-146	num_unjug_ret@10	1.00000
C09-146	num_unjug_ret@100	44.00000
C09-146	num_unjug_ret@1000	749.00000
C09-146	num_rel	16.00000
C09-146	num_rel_ret	10.00000
C09-146	map	0.30412
C09-146	R-prec	0.43750
C09-146	bpref	0.39063
C09-146	recip_rank	1.00000
C09-146	ndcg	0.51479
C09-146	ndcg5	0.28026
C09-146	ndcg10	0.51159
C09-146	ndcg20	0.47440
C09-146	ERR	0.12031
C09-146	ERR10	0.11460
C09-146	ERR20	0.11939
C09-146	P1	1.00000
C09-146	P5	0.40000
C09-146	P10	0.60000
C09-146	P15	0.46667
C09-146	P20	0.35000
C09-146	P30	0.26667
C09-146	P50	0.16000
C09-146	P100	0.10000
C09-146	P200	0.05000
C09-146	P500	0.02000
C09-146	P1000	0.01215
C09-147	num_ret	912.00000
C09-147	num_unjug_ret@1	0.00000
C09-147	num_unjug_ret@10	1.00000
C09-147	num_unjug_ret@100	26.00000
C09-147	num_unjug_ret@1000	794.00000
C09-147	num_rel	177.00000
C09-147	num_rel_ret	50.00000
C09-147	map	0.10597
C09-147	R-prec	0.20904
C09-147	bpref	0.25347
C09-147	recip_rank	1.00000
C09-147	ndcg	0.30208
C09-147	ndcg5	0.83042
C09-147	ndcg10	0.70475
C09-147	ndcg20	0.48046
C09-147	ERR	0.34737
C09-147	ERR10	0.33752
C09-147	ERR20	0.34027
C09-147	P1	1.00000
C09-147	P5	0.80000
C09-147	P10	0.70000
C09-147	P15	0.60000
C09-147	P20	0.45000
C09-147	P30	0.50000
C09-147	P50	0.34000
C09-147	P100	0.27000
C09-147	P200	0.19500
C09-147	P500	0.09000
C09-147	P1000	0.05482
C09-148	num_ret	766.00000
C09-148	num_unjug_ret@1	0.00000
C09-148	num_unjug_ret@10	0.00000
C09-148	num_unjug_ret@100	36.00000
C09-148	num_unjug_ret@1000	705.00000
C09-148	num_rel	80.00000
C09-148	num_rel_ret	14.00000
C09-148	map	0.04437
C09-148	R-prec	0.15000
C09-148	bpref	0.15500
C09-148	recip_rank	0.33333
C09-148	ndcg	0.23130
C09-148	ndcg5	0.48811
C09-148	ndcg10	0.36497
C09-148	ndcg20	0.32159
C09-148	ERR	0.24681
C09-148	ERR10	0.23659
C09-148	ERR20	0.24315
C09-148	P1	0.00000
C09-148	P5	0.20000
C09-148	P10	0.20000
C09-148	P15	0.33333
C09-148	P20	0.30000
C09-148	P30	0.23333
C09-148	P50	0.24000
C09-148	P100	0.12000
C09-148	P200	0.06500
C09-148	P500	0.02600
C09-148	P1000	0.01828
C09-149	num_ret	770.00000
C09-149	num_unjug_ret@1	0.00000
C09-149	num_unjug_ret@10	0.00000
C09-149	num_unjug_ret@100	20.00000
C09-149	num_unjug_ret@1000	677.00000
C09-149	num_rel	62.00000
C09-149	num_rel_ret	23.00000
C09-149	map	0.04191
C09-149	R-prec	0.19355
C09-149	bpref	0.17274
C09-149	recip_rank	0.04000
C09-149	ndcg	0.26899
C09-149	ndcg5	0.00000
C09-149	ndcg10	0.00000
C09-149	ndcg20	0.07026
C09-149	ERR	0.02359
C09-149	ERR10	0.00000
C09-149	ERR20	0.00783
C09-149	P1	0.00000
C09-149	P5	0.00000
C09-149	P10	0.00000
C09-149	P15	0.00000
C09-149	P20	0.00000
C09-149	P30	0.06667
C09-149	P50	0.20000
C09-149	P100	0.12000
C09-149	P200	0.08500
C09-149	P500	0.04400
C09-149	P1000	0.02987
C09-150	num_ret	663.00000
C09-150	num_unjug_ret@1	0.00000
C09-150	num_unjug_ret@10	3.00000
C09-150	num_unjug_ret@100	19.00000
C09-150	num_unjug_ret@1000	559.00000
C09-150	num_rel	4.00000
C09-150	num_rel_ret	1.00000
C09-150	map	0.00223
C09-150	R-prec	0.00000
C09-150	bpref	0.00000
C09-150	recip_rank	0.00893
C09-150	ndcg	0.06193
C09-150	ndcg5	0.00000
C09-150	ndcg10	0.00000
C09-150	ndcg20	0.00000
C09-150	ERR	0.00240
C09-150	ERR10	0.00000
C09-150	ERR20	0.00000
C09-150	P1	0.00000
C09-150	P5	0.00000
C09-150	P10	0.00000
C09-150	P15	0.00000
C09-150	P20	0.00000
C09-150	P30	0.00000
C09-150	P50	0.00000
C09-150	P100	0.00000
C09-150	P200	0.00500
C09-150	P500	0.00200
C09-150	P1000	0.00151
C09-151	num_ret	974.00000
C09-151	num_unjug_ret@1	0.00000
C09-151	num_unjug_ret@10	0.00000
C09-151	num_unjug_ret@100	59.00000
C09-151	num_unjug_ret@1000	919.00000
C09-151	num_rel	148.00000
C09-151	num_rel_ret	12.00000
C09-151	map	0.02797
C09-151	R-prec	0.07432
C09-151	bpref	0.07346
C09-151	recip_rank	1.00000
C09-151	ndcg	0.06956
C09-151	ndcg5	0.04266
C09-151	ndcg10	0.09712
C09-151	ndcg20	0.07425
C09-151	ERR	0.19016
C09-151	ERR10	0.18958
C09-151	ERR20	0.18978
C09-151	P1	1.00000
C09-151	P5	0.60000
C09-151	P10	0.40000
C09-151	P15	0.26667
C09-151	P20	0.25000
C09-151	P30	0.23333
C09-151	P50	0.16000
C09-151	P100	0.10000
C09-151	P200	0.05500
C09-151	P500	0.02400
C09-151	P1000	0.01232
C09-152	num_ret	138.00000
C09-152	num_unjug_ret@1	0.00000
C09-152	num_unjug_ret@10	0.00000
C09-152	num_unjug_ret@100	3.00000
C09-152	num_unjug_ret@1000	116.00000
C09-152	num_rel	8.00000
C09-152	num_rel_ret	0.00000
C09-152	map	0.00000
C09-152	R-prec	0.00000
C09-152	bpref	0.00000
C09-152	recip_rank	0.00000
C09-152	ndcg	0.00000
C09-152	ndcg5	0.00000
C09-152	ndcg10	0.00000
C09-152	ndcg20	0.00000
C09-152	ERR	0.00000
C09-152	ERR10	0.00000
C09-152	ERR20	0.00000
C09-152	P1	0.00000
C09-152	P5	0.00000
C09-152	P10	0.00000
C09-152	P15	0.00000
C09-152	P20	0.00000
C09-152	P30	0.00000
C09-152	P50	0.00000
C09-152	P100	0.00000
C09-152	P200	0.00000
C09-152	P500	0.00000
C09-152	P1000	0.00000
C09-153	num_ret	877.00000
C09-153	num_unjug_ret@1	0.00000
C09-153	num_unjug_ret@10	0.00000
C09-153	num_unjug_ret@100	38.00000
C09-153	num_unjug_ret@1000	778.00000
C09-153	num_rel	122.00000
C09-153	num_rel_ret	45.00000
C09-153	map	0.18555
C09-153	R-prec	0.26230
C09-153	bpref	0.32001
C09-153	recip_rank	1.00000
C09-153	ndcg	0.16682
C09-153	ndcg5	0.06667
C09-153	ndcg10	0.06062
C09-153	ndcg20	0.07079
C09-153	ERR	0.17133
C09-153	ERR10	0.14991
C09-153	ERR20	0.15962
C09-153	P1	1.00000
C09-153	P5	1.00000
C09-153	P10	0.80000
C09-153	P15	0.73333
C09-153	P20	0.60000
C09-153	P30	0.53333
C09-153	P50	0.46000
C09-153	P100	0.32000
C09-153	P200	0.19000
C09-153	P500	0.08800
C09-153	P1000	0.05131
C09-154	num_ret	908.00000
C09-154	num_unjug_ret@1	0.00000
C09-154	num_unjug_ret@10	0.00000
C09-154	num_unjug_ret@100	45.00000
C09-154	num_unjug_ret@1000	824.00000
C09-154	num_rel	58.00000
C09-154	num_rel_ret	11.00000
C09-154	map	0.00791
C09-154	R-prec	0.05172
C09-154	bpref	0.05529
C09-154	recip_rank	0.06667
C09-154	ndcg	0.10415
C09-154	ndcg5	0.00000
C09-154	ndcg10	0.06943
C09-154	ndcg20	0.04745
C09-154	ERR	0.11874
C09-154	ERR10	0.11719
C09-154	ERR20	0.11754
C09-154	P1	0.00000
C09-154	P5	0.00000
C09-154	P10	0.00000
C09-154	P15	0.06667
C09-154	P20	0.10000
C09-154	P30	0.06667
C09-154	P50	0.06000
C09-154	P100	0.05000
C09-154	P200	0.02500
C09-154	P500	0.01600
C09-154	P1000	0.01211
C09-155	num_ret	591.00000
C09-155	num_unjug_ret@1	0.00000
C09-155	num_unjug_ret@10	1.00000
C09-155	num_unjug_ret@100	20.00000
C09-155	num_unjug_ret@1000	546.00000
C09-155	num_rel	67.00000
C09-155	num_rel_ret	21.00000
C09-155	map	0.00646
C09-155	R-prec	0.02985
C09-155	bpref	0.22678
C09-155	recip_rank	0.02381
C09-155	ndcg	0.20351
C09-155	ndcg5	0.00000
C09-155	ndcg10	0.15176
C09-155	ndcg20	0.09794
C09-155	ERR	0.16464
C09-155	ERR10	0.16462
C09-155	ERR20	0.16462
C09-155	P1	0.00000
C09-155	P5	0.00000
C09-155	P10	0.00000
C09-155	P15	0.00000
C09-155	P20	0.00000
C09-155	P30	0.00000
C09-155	P50	0.04000
C09-155	P100	0.02000
C09-155	P200	0.01000
C09-155	P500	0.01800
C09-155	P1000	0.03553
C09-156	num_ret	902.00000
C09-156	num_unjug_ret@1	0.00000
C09-156	num_unjug_ret@10	2.00000
C09-156	num_unjug_ret@100	62.00000
C09-156	num_unjug_ret@1000	805.00000
C09-156	num_rel	108.00000
C09-156	num_rel_ret	52.00000
C09-156	map	0.03748
C09-156	R-prec	0.01852
C09-156	bpref	0.35940
C09-156	recip_rank	1.00000
C09-156	ndcg	0.14271
C09-156	ndcg5	0.02972
C09-156	ndcg10	0.02838
C09-156	ndcg20	0.02650
C09-156	ERR	0.07016
C09-156	ERR10	0.06250
C09-156	ERR20	0.06250
C09-156	P1	1.00000
C09-156	P5	0.20000
C09-156	P10	0.10000
C09-156	P15	0.06667
C09-156	P20	0.05000
C09-156	P30	0.03333
C09-156	P50	0.04000
C09-156	P100	0.02000
C09-156	P200	0.08500
C09-156	P500	0.05600
C09-156	P1000	0.05765
C09-157	num_ret	253.00000
C09-157	num_unjug_ret@1	1.00000
C09-157	num_unjug_ret@10	2.00000
C09-157	num_unjug_ret@100	3.00000
C09-157	num_unjug_ret@1000	203.00000
C09-157	num_rel	58.00000
C09-157	num_rel_ret	5.00000
C09-157	map	0.00080
C09-157	R-prec	0.00000
C09-157	bpref	0.06124
C09-157	recip_rank	0.00725
C09-157	ndcg	0.01249
C09-157	ndcg5	0.00000
C09-157	ndcg10	0.00000
C09-157	ndcg20	0.00752
C09-157	ERR	0.01106
C09-157	ERR10	0.00000
C09-157	ERR20	0.00755
C09-157	P1	0.00000
C09-157	P5	0.00000
C09-157	P10	0.00000
C09-157	P15	0.00000
C09-157	P20	0.00000
C09-157	P30	0.00000
C09-157	P50	0.00000
C09-157	P100	0.00000
C09-157	P200	0.01000
C09-157	P500	0.01186
C09-157	P1000	0.01976
C09-158	num_ret	966.00000
C09-158	num_unjug_ret@1	0.00000
C09-158	num_unjug_ret@10	0.00000
C09-158	num_unjug_ret@100	46.00000
C09-158	num_unjug_ret@1000	874.00000
C09-158	num_rel	131.00000
C09-158	num_rel_ret	68.00000
C09-158	map	0.34677
C09-158	R-prec	0.38931
C09-158	bpref	0.50797
C09-158	recip_rank	1.00000
C09-158	ndcg	0.30941
C09-158	ndcg5	0.06667
C09-158	ndcg10	0.06667
C09-158	ndcg20	0.11598
C09-158	ERR	0.19025
C09-158	ERR10	0.15886
C09-158	ERR20	0.18920
C09-158	P1	1.00000
C09-158	P5	1.00000
C09-158	P10	1.00000
C09-158	P15	1.00000
C09-158	P20	0.85000
C09-158	P30	0.86667
C09-158	P50	0.72000
C09-158	P100	0.46000
C09-158	P200	0.28000
C09-158	P500	0.13600
C09-158	P1000	0.07039
C09-159	num_ret	494.00000
C09-159	num_unjug_ret@1	0.00000
C09-159	num_unjug_ret@10	1.00000
C09-159	num_unjug_ret@100	32.00000
C09-159	num_unjug_ret@1000	448.00000
C09-159	num_rel	31.00000
C09-159	num_rel_ret	7.00000
C09-159	map	0.02274
C09-159	R-prec	0.09677
C09-159	bpref	0.15713
C09-159	recip_rank	0.12500
C09-159	ndcg	0.14447
C09-159	ndcg5	0.19904
C09-159	ndcg10	0.21198
C09-159	ndcg20	0.13907
C09-159	ERR	0.34782
C09-159	ERR10	0.34780
C09-159	ERR20	0.34781
C09-159	P1	0.00000
C09-159	P5	0.00000
C09-159	P10	0.10000
C09-159	P15	0.20000
C09-159	P20	0.15000
C09-159	P30	0.10000
C09-159	P50	0.08000
C09-159	P100	0.05000
C09-159	P200	0.02500
C09-159	P500	0.01215
C09-159	P1000	0.01417
C09-160	num_ret	940.00000
C09-160	num_unjug_ret@1	0.00000
C09-160	num_unjug_ret@10	0.00000
C09-160	num_unjug_ret@100	46.00000
C09-160	num_unjug_ret@1000	860.00000
C09-160	num_rel	6.00000
C09-160	num_rel_ret	2.00000
C09-160	map	0.00442
C09-160	R-prec	0.00000
C09-160	bpref	0.00000
C09-160	recip_rank	0.02439
C09-160	ndcg	0.01745
C09-160	ndcg5	0.00000
C09-160	ndcg10	0.00000
C09-160	ndcg20	0.00000
C09-160	ERR	0.00208
C09-160	ERR10	0.00000
C09-160	ERR20	0.00000
C09-160	P1	0.00000
C09-160	P5	0.00000
C09-160	P10	0.00000
C09-160	P15	0.00000
C09-160	P20	0.00000
C09-160	P30	0.00000
C09-160	P50	0.02000
C09-160	P100	0.01000
C09-160	P200	0.00500
C09-160	P500	0.00200
C09-160	P1000	0.00213
C09-161	num_ret	996.00000
C09-161	num_unjug_ret@1	0.00000
C09-161	num_unjug_ret@10	1.00000
C09-161	num_unjug_ret@100	77.00000
C09-161	num_unjug_ret@1000	936.00000
C09-161	num_rel	7.00000
C09-161	num_rel_ret	3.00000
C09-161	map	0.03774
C09-161	R-prec	0.14286
C09-161	bpref	0.08163
C09-161	recip_rank	0.25000
C09-161	ndcg	0.04784
C09-161	ndcg5	0.02365
C09-161	ndcg10	0.02279
C09-161	ndcg20	0.02279
C09-161	ERR	0.01627
C09-161	ERR10	0.01563
C09-161	ERR20	0.01563
C09-161	P1	0.00000
C09-161	P5	0.20000
C09-161	P10	0.10000
C09-161	P15	0.06667
C09-161	P20	0.05000
C09-161	P30	0.03333
C09-161	P50	0.02000
C09-161	P100	0.01000
C09-161	P200	0.00500
C09-161	P500	0.00600
C09-161	P1000	0.00301
C09-162	num_ret	892.00000
C09-162	num_unjug_ret@1	0.00000
C09-162	num_unjug_ret@10	6.00000
C09-162	num_unjug_ret@100	33.00000
C09-162	num_unjug_ret@1000	748.00000
C09-162	num_rel	32.00000
C09-162	num_rel_ret	4.00000
C09-162	map	0.05411
C09-162	R-prec	0.09375
C09-162	bpref	0.09668
C09-162	recip_rank	1.00000
C09-162	ndcg	0.24087
C09-162	ndcg5	0.36837
C09-162	ndcg10	0.26677
C09-162	ndcg20	0.24833
C09-162	ERR	0.94117
C09-162	ERR10	0.94043
C09-162	ERR20	0.94102
C09-162	P1	1.00000
C09-162	P5	0.40000
C09-162	P10	0.20000
C09-162	P15	0.13333
C09-162	P20	0.15000
C09-162	P30	0.10000
C09-162	P50	0.06000
C09-162	P100	0.04000
C09-162	P200	0.02000
C09-162	P500	0.00800
C09-162	P1000	0.00448
C09-163	num_ret	585.00000
C09-163	num_unjug_ret@1	0.00000
C09-163	num_unjug_ret@10	0.00000
C09-163	num_unjug_ret@100	28.00000
C09-163	num_unjug_ret@1000	512.00000
C09-163	num_rel	112.00000
C09-163	num_rel_ret	23.00000
C09-163	map	0.01727
C09-163	R-prec	0.08036
C09-163	bpref	0.15537
C09-163	recip_rank	0.16667
C09-163	ndcg	0.08878
C09-163	ndcg5	0.00974
C09-163	ndcg10	0.01536
C09-163	ndcg20	0.01457
C09-163	ERR	0.05856
C09-163	ERR10	0.02905
C09-163	ERR20	0.03541
C09-163	P1	0.00000
C09-163	P5	0.00000
C09-163	P10	0.20000
C09-163	P15	0.20000
C09-163	P20	0.15000
C09-163	P30	0.10000
C09-163	P50	0.10000
C09-163	P100	0.09000
C09-163	P200	0.05500
C09-163	P500	0.03800
C09-163	P1000	0.03932
C09-164	num_ret	924.00000
C09-164	num_unjug_ret@1	0.00000
C09-164	num_unjug_ret@10	6.00000
C09-164	num_unjug_ret@100	74.00000
C09-164	num_unjug_ret@1000	878.00000
C09-164	num_rel	78.00000
C09-164	num_rel_ret	15.00000
C09-164	map	0.01810
C09-164	R-prec	0.07692
C09-164	bpref	0.15483
C09-164	recip_rank	0.16667
C09-164	ndcg	0.14983
C09-164	ndcg5	0.00000
C09-164	ndcg10	0.07840
C09-164	ndcg20	0.12246
C09-164	ERR	0.16068
C09-164	ERR10	0.15625
C09-164	ERR20	0.16068
C09-164	P1	0.00000
C09-164	P5	0.00000
C09-164	P10	0.10000
C09-164	P15	0.20000
C09-164	P20	0.15000
C09-164	P30	0.10000
C09-164	P50	0.08000
C09-164	P100	0.09000
C09-164	P200	0.06000
C09-164	P500	0.02800
C09-164	P1000	0.01623
C09-165	num_ret	720.00000
C09-165	num_unjug_ret@1	0.00000
C09-165	num_unjug_ret@10	0.00000
C09-165	num_unjug_ret@100	25.00000
C09-165	num_unjug_ret@1000	655.00000
C09-165	num_rel	31.00000
C09-165	num_rel_ret	2.00000
C09-165	map	0.00075
C09-165	R-prec	0.00000
C09-165	bpref	0.00728
C09-165	recip_rank	0.01163
C09-165	ndcg	0.04675
C09-165	ndcg5	0.00000
C09-165	ndcg10	0.00000
C09-165	ndcg20	0.00000
C09-165	ERR	0.02160
C09-165	ERR10	0.00000
C09-165	ERR20	0.00000
C09-165	P1	0.00000
C09-165	P5	0.00000
C09-165	P10	0.00000
C09-165	P15	0.00000
C09-165	P20	0.00000
C09-165	P30	0.00000
C09-165	P50	0.00000
C09-165	P100	0.01000
C09-165	P200	0.01000
C09-165	P500	0.00400
C09-165	P1000	0.00278
C09-166	num_ret	685.00000
C09-166	num_unjug_ret@1	0.00000
C09-166	num_unjug_ret@10	1.00000
C09-166	num_unjug_ret@100	15.00000
C09-166	num_unjug_ret@1000	618.00000
C09-166	num_rel	23.00000
C09-166	num_rel_ret	7.00000
C09-166	map	0.00240
C09-166	R-prec	0.00000
C09-166	bpref	0.02079
C09-166	recip_rank	0.00758
C09-166	ndcg	0.09744
C09-166	ndcg5	0.00000
C09-166	ndcg10	0.00000
C09-166	ndcg20	0.00000
C09-166	ERR	0.01107
C09-166	ERR10	0.00000
C09-166	ERR20	0.00000
C09-166	P1	0.00000
C09-166	P5	0.00000
C09-166	P10	0.00000
C09-166	P15	0.00000
C09-166	P20	0.00000
C09-166	P30	0.00000
C09-166	P50	0.00000
C09-166	P100	0.00000
C09-166	P200	0.00500
C09-166	P500	0.00600
C09-166	P1000	0.01022
C09-167	num_ret	872.00000
C09-167	num_unjug_ret@1	0.00000
C09-167	num_unjug_ret@10	2.00000
C09-167	num_unjug_ret@100	45.00000
C09-167	num_unjug_ret@1000	798.00000
C09-167	num_rel	58.00000
C09-167	num_rel_ret	16.00000
C09-167	map	0.00967
C09-167	R-prec	0.03448
C09-167	bpref	0.10196
C09-167	recip_rank	0.03846
C09-167	ndcg	0.11530
C09-167	ndcg5	0.00000
C09-167	ndcg10	0.00000
C09-167	ndcg20	0.00000
C09-167	ERR	0.01676
C09-167	ERR10	0.00000
C09-167	ERR20	0.00000
C09-167	P1	0.00000
C09-167	P5	0.00000
C09-167	P10	0.00000
C09-167	P15	0.00000
C09-167	P20	0.00000
C09-167	P30	0.03333
C09-167	P50	0.02000
C09-167	P100	0.03000
C09-167	P200	0.04500
C09-167	P500	0.02400
C09-167	P1000	0.01835
C09-168	num_ret	516.00000
C09-168	num_unjug_ret@1	0.00000
C09-168	num_unjug_ret@10	0.00000
C09-168	num_unjug_ret@100	47.00000
C09-168	num_unjug_ret@1000	476.00000
C09-168	num_rel	41.00000
C09-168	num_rel_ret	10.00000
C09-168	map	0.06555
C09-168	R-prec	0.24390
C09-168	bpref	0.20464
C09-168	recip_rank	0.08333
C09-168	ndcg	0.05299
C09-168	ndcg5	0.00875
C09-168	ndcg10	0.02908
C09-168	ndcg20	0.05616
C09-168	ERR	0.08091
C09-168	ERR10	0.04644
C09-168	ERR20	0.08080
C09-168	P1	0.00000
C09-168	P5	0.00000
C09-168	P10	0.00000
C09-168	P15	0.26667
C09-168	P20	0.30000
C09-168	P30	0.33333
C09-168	P50	0.20000
C09-168	P100	0.10000
C09-168	P200	0.05000
C09-168	P500	0.02000
C09-168	P1000	0.01938
C09-169	num_ret	359.00000
C09-169	num_unjug_ret@1	0.00000
C09-169	num_unjug_ret@10	0.00000
C09-169	num_unjug_ret@100	12.00000
C09-169	num_unjug_ret@1000	331.00000
C09-169	num_rel	103.00000
C09-169	num_rel_ret	5.00000
C09-169	map	0.00098
C09-169	R-prec	0.01942
C09-169	bpref	0.04694
C09-169	recip_rank	0.01613
C09-169	ndcg	0.05555
C09-169	ndcg5	0.01856
C09-169	ndcg10	0.02899
C09-169	ndcg20	0.02243
C09-169	ERR	0.03671
C09-169	ERR10	0.02227
C09-169	ERR20	0.02227
C09-169	P1	0.00000
C09-169	P5	0.00000
C09-169	P10	0.00000
C09-169	P15	0.00000
C09-169	P20	0.00000
C09-169	P30	0.00000
C09-169	P50	0.00000
C09-169	P100	0.02000
C09-169	P200	0.01500
C09-169	P500	0.01393
C09-169	P1000	0.01393
C09-170	num_ret	900.00000
C09-170	num_unjug_ret@1	0.00000
C09-170	num_unjug_ret@10	0.00000
C09-170	num_unjug_ret@100	53.00000
C09-170	num_unjug_ret@1000	808.00000
C09-170	num_rel	24.00000
C09-170	num_rel_ret	4.00000
C09-170	map	0.00332
C09-170	R-prec	0.00000
C09-170	bpref	0.02083
C09-170	recip_rank	0.03571
C09-170	ndcg	0.06907
C09-170	ndcg5	0.00000
C09-170	ndcg10	0.00000
C09-170	ndcg20	0.00360
C09-170	ERR	0.01780
C09-170	ERR10	0.00000
C09-170	ERR20	0.00368
C09-170	P1	0.00000
C09-170	P5	0.00000
C09-170	P10	0.00000
C09-170	P15	0.00000
C09-170	P20	0.00000
C09-170	P30	0.03333
C09-170	P50	0.02000
C09-170	P100	0.02000
C09-170	P200	0.01000
C09-170	P500	0.00800
C09-170	P1000	0.00444
C09-171	num_ret	588.00000
C09-171	num_unjug_ret@1	0.00000
C09-171	num_unjug_ret@10	0.00000
C09-171	num_unjug_ret@100	22.00000
C09-171	num_unjug_ret@1000	539.00000
C09-171	num_rel	82.00000
C09-171	num_rel_ret	11.00000
C09-171	map	0.01374
C09-171	R-prec	0.07317
C09-171	bpref	0.10396
C09-171	recip_rank	0.33333
C09-171	ndcg	0.07508
C09-171	ndcg5	0.02261
C09-171	ndcg10	0.02034
C09-171	ndcg20	0.06761
C09-171	ERR	0.11367
C09-171	ERR10	0.06982
C09-171	ERR20	0.11319
C09-171	P1	0.00000
C09-171	P5	0.20000
C09-171	P10	0.10000
C09-171	P15	0.13333
C09-171	P20	0.10000
C09-171	P30	0.10000
C09-171	P50	0.08000
C09-171	P100	0.06000
C09-171	P200	0.04500
C09-171	P500	0.02000
C09-171	P1000	0.01871
C09-172	num_ret	992.00000
C09-172	num_unjug_ret@1	0.00000
C09-172	num_unjug_ret@10	4.00000
C09-172	num_unjug_ret@100	40.00000
C09-172	num_unjug_ret@1000	864.00000
C09-172	num_rel	174.00000
C09-172	num_rel_ret	76.00000
C09-172	map	0.12720
C09-172	R-prec	0.28161
C09-172	bpref	0.37848
C09-172	recip_rank	0.20000
C09-172	ndcg	0.30052
C09-172	ndcg5	0.00875
C09-172	ndcg10	0.22687
C09-172	ndcg20	0.18595
C09-172	ERR	0.16727
C09-172	ERR10	0.16726
C09-172	ERR20	0.16727
C09-172	P1	0.00000
C09-172	P5	0.20000
C09-172	P10	0.40000
C09-172	P15	0.33333
C09-172	P20	0.30000
C09-172	P30	0.30000
C09-172	P50	0.34000
C09-172	P100	0.35000
C09-172	P200	0.28000
C09-172	P500	0.14200
C09-172	P1000	0.07661
C09-173	num_ret	820.00000
C09-173	num_unjug_ret@1	0.00000
C09-173	num_unjug_ret@10	0.00000
C09-173	num_unjug_ret@100	38.00000
C09-173	num_unjug_ret@1000	767.00000
C09-173	num_rel	64.00000
C09-173	num_rel_ret	22.00000
C09-173	map	0.07140
C09-173	R-prec	0.18750
C09-173	bpref	0.28345
C09-173	recip_rank	0.08333
C09-173	ndcg	0.30914
C09-173	ndcg5	0.02979
C09-173	ndcg10	0.13727
C09-173	ndcg20	0.28261
C09-173	ERR	0.16188
C09-173	ERR10	0.15884
C09-173	ERR20	0.16188
C09-173	P1	0.00000
C09-173	P5	0.00000
C09-173	P10	0.00000
C09-173	P15	0.26667
C09-173	P20	0.30000
C09-173	P30	0.36667
C09-173	P50	0.24000
C09-173	P100	0.14000
C09-173	P200	0.10000
C09-173	P500	0.04200
C09-173	P1000	0.02683
C09-174	num_ret	728.00000
C09-174	num_unjug_ret@1	0.00000
C09-174	num_unjug_ret@10	1.00000
C09-174	num_unjug_ret@100	34.00000
C09-174	num_unjug_ret@1000	631.00000
C09-174	num_rel	55.00000
C09-174	num_rel_ret	16.00000
C09-174	map	0.03629
C09-174	R-prec	0.07273
C09-174	bpref	0.12397
C09-174	recip_rank	0.50000
C09-174	ndcg	0.21084
C09-174	ndcg5	0.21399
C09-174	ndcg10	0.14898
C09-174	ndcg20	0.13577
C09-174	ERR	0.47466
C09-174	ERR10	0.46992
C09-174	ERR20	0.47461
C09-174	P1	0.00000
C09-174	P5	0.20000
C09-174	P10	0.30000
C09-174	P15	0.20000
C09-174	P20	0.20000
C09-174	P30	0.13333
C09-174	P50	0.08000
C09-174	P100	0.06000
C09-174	P200	0.06000
C09-174	P500	0.02600
C09-174	P1000	0.02198
C09-175	num_ret	693.00000
C09-175	num_unjug_ret@1	0.00000
C09-175	num_unjug_ret@10	0.00000
C09-175	num_unjug_ret@100	6.00000
C09-175	num_unjug_ret@1000	659.00000
C09-175	num_rel	121.00000
C09-175	num_rel_ret	5.00000
C09-175	map	0.02691
C09-175	R-prec	0.03306
C09-175	bpref	0.03299
C09-175	recip_rank	1.00000
C09-175	ndcg	0.08787
C09-175	ndcg5	0.30645
C09-175	ndcg10	0.19887
C09-175	ndcg20	0.12834
C09-175	ERR	0.47157
C09-175	ERR10	0.47152
C09-175	ERR20	0.47152
C09-175	P1	1.00000
C09-175	P5	0.60000
C09-175	P10	0.30000
C09-175	P15	0.20000
C09-175	P20	0.20000
C09-175	P30	0.13333
C09-175	P50	0.08000
C09-175	P100	0.04000
C09-175	P200	0.02000
C09-175	P500	0.00800
C09-175	P1000	0.00722
C09-176	num_ret	980.00000
C09-176	num_unjug_ret@1	0.00000
C09-176	num_unjug_ret@10	1.00000
C09-176	num_unjug_ret@100	63.00000
C09-176	num_unjug_ret@1000	923.00000
C09-176	num_rel	17.00000
C09-176	num_rel_ret	1.00000
C09-176	map	0.00113
C09-176	R-prec	0.00000
C09-176	bpref	0.00000
C09-176	recip_rank	0.01923
C09-176	ndcg	0.00908
C09-176	ndcg5	0.00000
C09-176	ndcg10	0.00000
C09-176	ndcg20	0.00000
C09-176	ERR	0.00383
C09-176	ERR10	0.00000
C09-176	ERR20	0.00000
C09-176	P1	0.00000
C09-176	P5	0.00000
C09-176	P10	0.00000
C09-176	P15	0.00000
C09-176	P20	0.00000
C09-176	P30	0.00000
C09-176	P50	0.00000
C09-176	P100	0.01000
C09-176	P200	0.00500
C09-176	P500	0.00200
C09-176	P1000	0.00102
C09-177	num_ret	994.00000
C09-177	num_unjug_ret@1	0.00000
C09-177	num_unjug_ret@10	4.00000
C09-177	num_unjug_ret@100	63.00000
C09-177	num_unjug_ret@1000	926.00000
C09-177	num_rel	44.00000
C09-177	num_rel_ret	20.00000
C09-177	map	0.03353
C09-177	R-prec	0.09091
C09-177	bpref	0.15754
C09-177	recip_rank	0.04545
C09-177	ndcg	0.25534
C09-177	ndcg5	0.00000
C09-177	ndcg10	0.00000
C09-177	ndcg20	0.00000
C09-177	ERR	0.01286
C09-177	ERR10	0.00000
C09-177	ERR20	0.00000
C09-177	P1	0.00000
C09-177	P5	0.00000
C09-177	P10	0.00000
C09-177	P15	0.00000
C09-177	P20	0.00000
C09-177	P30	0.06667
C09-177	P50	0.08000
C09-177	P100	0.10000
C09-177	P200	0.06000
C09-177	P500	0.03600
C09-177	P1000	0.02012
C09-178	num_ret	957.00000
C09-178	num_unjug_ret@1	1.00000
C09-178	num_unjug_ret@10	1.00000
C09-178	num_unjug_ret@100	53.00000
C09-178	num_unjug_ret@1000	869.00000
C09-178	num_rel	53.00000
C09-178	num_rel_ret	29.00000
C09-178	map	0.05964
C09-178	R-prec	0.11321
C09-178	bpref	0.16162
C09-178	recip_rank	0.16667
C09-178	ndcg	0.33571
C09-178	ndcg5	0.14607
C09-178	ndcg10	0.17319
C09-178	ndcg20	0.21973
C09-178	ERR	0.24446
C09-178	ERR10	0.24414
C09-178	ERR20	0.24446
C09-178	P1	0.00000
C09-178	P5	0.00000
C09-178	P10	0.20000
C09-178	P15	0.20000
C09-178	P20	0.25000
C09-178	P30	0.16667
C09-178	P50	0.12000
C09-178	P100	0.10000
C09-178	P200	0.08500
C09-178	P500	0.04600
C09-178	P1000	0.03030
C09-179	num_ret	761.00000
C09-179	num_unjug_ret@1	0.00000
C09-179	num_unjug_ret@10	4.00000
C09-179	num_unjug_ret@100	44.00000
C09-179	num_unjug_ret@1000	683.00000
C09-179	num_rel	11.00000
C09-179	num_rel_ret	7.00000
C09-179	map	0.01091
C09-179	R-prec	0.00000
C09-179	bpref	0.00000
C09-179	recip_rank	0.03704
C09-179	ndcg	0.07248
C09-179	ndcg5	0.00000
C09-179	ndcg10	0.00000
C09-179	ndcg20	0.00000
C09-179	ERR	0.00549
C09-179	ERR10	0.00000
C09-179	ERR20	0.00000
C09-179	P1	0.00000
C09-179	P5	0.00000
C09-179	P10	0.00000
C09-179	P15	0.00000
C09-179	P20	0.00000
C09-179	P30	0.03333
C09-179	P50	0.02000
C09-179	P100	0.02000
C09-179	P200	0.01000
C09-179	P500	0.01000
C09-179	P1000	0.00920
C09-180	num_ret	959.00000
C09-180	num_unjug_ret@1	0.00000
C09-180	num_unjug_ret@10	0.00000
C09-180	num_unjug_ret@100	66.00000
C09-180	num_unjug_ret@1000	912.00000
C09-180	num_rel	71.00000
C09-180	num_rel_ret	6.00000
C09-180	map	0.02425
C09-180	R-prec	0.05634
C09-180	bpref	0.06348
C09-180	recip_rank	1.00000
C09-180	ndcg	0.02814
C09-180	ndcg5	0.02261
C09-180	ndcg10	0.02705
C09-180	ndcg20	0.02531
C09-180	ERR	0.07738
C09-180	ERR10	0.07593
C09-180	ERR20	0.07593
C09-180	P1	1.00000
C09-180	P5	0.20000
C09-180	P10	0.30000
C09-180	P15	0.20000
C09-180	P20	0.15000
C09-180	P30	0.10000
C09-180	P50	0.06000
C09-180	P100	0.04000
C09-180	P200	0.03000
C09-180	P500	0.01200
C09-180	P1000	0.00626
C09-181	num_ret	677.00000
C09-181	num_unjug_ret@1	0.00000
C09-181	num_unjug_ret@10	2.00000
C09-181	num_unjug_ret@100	45.00000
C09-181	num_unjug_ret@1000	631.00000
C09-181	num_rel	30.00000
C09-181	num_rel_ret	4.00000
C09-181	map	0.03278
C09-181	R-prec	0.13333
C09-181	bpref	0.10556
C09-181	recip_rank	0.20000
C09-181	ndcg	0.03848
C09-181	ndcg5	0.01501
C09-181	ndcg10	0.03665
C09-181	ndcg20	0.04121
C09-181	ERR	0.02850
C09-181	ERR10	0.02593
C09-181	ERR20	0.02850
C09-181	P1	0.00000
C09-181	P5	0.20000
C09-181	P10	0.30000
C09-181	P15	0.20000
C09-181	P20	0.20000
C09-181	P30	0.13333
C09-181	P50	0.08000
C09-181	P100	0.04000
C09-181	P200	0.02000
C09-181	P500	0.00800
C09-181	P1000	0.00591
C09-182	num_ret	984.00000
C09-182	num_unjug_ret@1	0.00000
C09-182	num_unjug_ret@10	2.00000
C09-182	num_unjug_ret@100	54.00000
C09-182	num_unjug_ret@1000	882.00000
C09-182	num_rel	253.00000
C09-182	num_rel_ret	65.00000
C09-182	map	0.08830
C09-182	R-prec	0.18182
C09-182	bpref	0.23827
C09-182	recip_rank	1.00000
C09-182	ndcg	0.26186
C09-182	ndcg5	0.75252
C09-182	ndcg10	0.52070
C09-182	ndcg20	0.34068
C09-182	ERR	0.96765
C09-182	ERR10	0.96764
C09-182	ERR20	0.96764
C09-182	P1	1.00000
C09-182	P5	0.80000
C09-182	P10	0.70000
C09-182	P15	0.53333
C09-182	P20	0.45000
C09-182	P30	0.50000
C09-182	P50	0.42000
C09-182	P100	0.31000
C09-182	P200	0.19000
C09-182	P500	0.11000
C09-182	P1000	0.06606
C09-183	num_ret	837.00000
C09-183	num_unjug_ret@1	0.00000
C09-183	num_unjug_ret@10	0.00000
C09-183	num_unjug_ret@100	32.00000
C09-183	num_unjug_ret@1000	783.00000
C09-183	num_rel	31.00000
C09-183	num_rel_ret	5.00000
C09-183	map	0.00420
C09-183	R-prec	0.03226
C09-183	bpref	0.04995
C09-183	recip_rank	0.03704
C09-183	ndcg	0.04896
C09-183	ndcg5	0.00000
C09-183	ndcg10	0.00000
C09-183	ndcg20	0.00511
C09-183	ERR	0.01554
C09-183	ERR10	0.00000
C09-183	ERR20	0.00568
C09-183	P1	0.00000
C09-183	P5	0.00000
C09-183	P10	0.00000
C09-183	P15	0.00000
C09-183	P20	0.00000
C09-183	P30	0.03333
C09-183	P50	0.04000
C09-183	P100	0.02000
C09-183	P200	0.02000
C09-183	P500	0.00800
C09-183	P1000	0.00597
C09-184	num_ret	370.00000
C09-184	num_unjug_ret@1	0.00000
C09-184	num_unjug_ret@10	1.00000
C09-184	num_unjug_ret@100	29.00000
C09-184	num_unjug_ret@1000	361.00000
C09-184	num_rel	69.00000
C09-184	num_rel_ret	2.00000
C09-184	map	0.00138
C09-184	R-prec	0.02899
C09-184	bpref	0.02878
C09-184	recip_rank	0.06250
C09-184	ndcg	0.04845
C09-184	ndcg5	0.14607
C09-184	ndcg10	0.09479
C09-184	ndcg20	0.09848
C09-184	ERR	0.23888
C09-184	ERR10	0.23438
C09-184	ERR20	0.23888
C09-184	P1	0.00000
C09-184	P5	0.00000
C09-184	P10	0.00000
C09-184	P15	0.00000
C09-184	P20	0.05000
C09-184	P30	0.03333
C09-184	P50	0.02000
C09-184	P100	0.02000
C09-184	P200	0.01000
C09-184	P500	0.00541
C09-184	P1000	0.00541
C09-185	num_ret	968.00000
C09-185	num_unjug_ret@1	0.00000
C09-185	num_unjug_ret@10	1.00000
C09-185	num_unjug_ret@100	75.00000
C09-185	num_unjug_ret@1000	898.00000
C09-185	num_rel	81.00000
C09-185	num_rel_ret	27.00000
C09-185	map	0.04226
C09-185	R-prec	0.09877
C09-185	bpref	0.24478
C09-185	recip_rank	0.16667
C09-185	ndcg	0.28158
C09-185	ndcg5	0.00000
C09-185	ndcg10	0.22473
C09-185	ndcg20	0.19173
C09-185	ERR	0.14636
C09-185	ERR10	0.14635
C09-185	ERR20	0.14636
C09-185	P1	0.00000
C09-185	P5	0.00000
C09-185	P10	0.40000
C09-185	P15	0.33333
C09-185	P20	0.30000
C09-185	P30	0.20000
C09-185	P50	0.14000
C09-185	P100	0.09000
C09-185	P200	0.07000
C09-185	P500	0.04000
C09-185	P1000	0.02789
C09-186	num_ret	880.00000
C09-186	num_unjug_ret@1	0.00000
C09-186	num_unjug_ret@10	2.00000
C09-186	num_unjug_ret@100	44.00000
C09-186	num_unjug_ret@1000	794.00000
C09-186	num_rel	202.00000
C09-186	num_rel_ret	35.00000
C09-186	map	0.02578
C09-186	R-prec	0.08911
C09-186	bpref	0.14094
C09-186	recip_rank	0.50000
C09-186	ndcg	0.03181
C09-186	ndcg5	0.03432
C09-186	ndcg10	0.02227
C09-186	ndcg20	0.01686
C09-186	ERR	0.07782
C09-186	ERR10	0.06177
C09-186	ERR20	0.06573
C09-186	P1	0.00000
C09-186	P5	0.60000
C09-186	P10	0.30000
C09-186	P15	0.26667
C09-186	P20	0.20000
C09-186	P30	0.23333
C09-186	P50	0.20000
C09-186	P100	0.12000
C09-186	P200	0.09000
C09-186	P500	0.04400
C09-186	P1000	0.03977
C09-187	num_ret	748.00000
C09-187	num_unjug_ret@1	0.00000
C09-187	num_unjug_ret@10	6.00000
C09-187	num_unjug_ret@100	84.00000
C09-187	num_unjug_ret@1000	648.00000
C09-187	num_rel	45.00000
C09-187	num_rel_ret	16.00000
C09-187	map	0.00508
C09-187	R-prec	0.00000
C09-187	bpref	0.02272
C09-187	recip_rank	0.00469
C09-187	ndcg	0.14767
C09-187	ndcg5	0.00000
C09-187	ndcg10	0.00000
C09-187	ndcg20	0.00000
C09-187	ERR	0.00508
C09-187	ERR10	0.00000
C09-187	ERR20	0.00000
C09-187	P1	0.00000
C09-187	P5	0.00000
C09-187	P10	0.00000
C09-187	P15	0.00000
C09-187	P20	0.00000
C09-187	P30	0.00000
C09-187	P50	0.00000
C09-187	P100	0.00000
C09-187	P200	0.00000
C09-187	P500	0.01600
C09-187	P1000	0.02139
C09-188	num_ret	893.00000
C09-188	num_unjug_ret@1	0.00000
C09-188	num_unjug_ret@10	3.00000
C09-188	num_unjug_ret@100	78.00000
C09-188	num_unjug_ret@1000	842.00000
C09-188	num_rel	15.00000
C09-188	num_rel_ret	4.00000
C09-188	map	0.01360
C09-188	R-prec	0.06667
C09-188	bpref	0.04444
C09-188	recip_rank	0.16667
C09-188	ndcg	0.02586
C09-188	ndcg5	0.00000
C09-188	ndcg10	0.01301
C09-188	ndcg20	0.01241
C09-188	ERR	0.01127
C09-188	ERR10	0.01042
C09-188	ERR20	0.01042
C09-188	P1	0.00000
C09-188	P5	0.00000
C09-188	P10	0.10000
C09-188	P15	0.06667
C09-188	P20	0.05000
C09-188	P30	0.03333
C09-188	P50	0.02000
C09-188	P100	0.01000
C09-188	P200	0.01000
C09-188	P500	0.00600
C09-188	P1000	0.00448
C09-189	num_ret	914.00000
C09-189	num_unjug_ret@1	0.00000
C09-189	num_unjug_ret@10	0.00000
C09-189	num_unjug_ret@100	55.00000
C09-189	num_unjug_ret@1000	861.00000
C09-189	num_rel	27.00000
C09-189	num_rel_ret	9.00000
C09-189	map	0.01269
C09-189	R-prec	0.07407
C09-189	bpref	0.01920
C09-189	recip_rank	0.04000
C09-189	ndcg	0.11276
C09-189	ndcg5	0.00000
C09-189	ndcg10	0.00000
C09-189	ndcg20	0.00000
C09-189	ERR	0.01422
C09-189	ERR10	0.00000
C09-189	ERR20	0.00000
C09-189	P1	0.00000
C09-189	P5	0.00000
C09-189	P10	0.00000
C09-189	P15	0.00000
C09-189	P20	0.00000
C09-189	P30	0.06667
C09-189	P50	0.04000
C09-189	P100	0.04000
C09-189	P200	0.02000
C09-189	P500	0.01800
C09-189	P1000	0.00985
C09-190	num_ret	821.00000
C09-190	num_unjug_ret@1	0.00000
C09-190	num_unjug_ret@10	4.00000
C09-190	num_unjug_ret@100	42.00000
C09-190	num_unjug_ret@1000	757.00000
C09-190	num_rel	20.00000
C09-190	num_rel_ret	1.00000
C09-190	map	0.02500
C09-190	R-prec	0.05000
C09-190	bpref	0.04750
C09-190	recip_rank	0.50000
C09-190	ndcg	0.01011
C09-190	ndcg5	0.01427
C09-190	ndcg10	0.01053
C09-190	ndcg20	0.01011
C09-190	ERR	0.03125
C09-190	ERR10	0.03125
C09-190	ERR20	0.03125
C09-190	P1	0.00000
C09-190	P5	0.20000
C09-190	P10	0.10000
C09-190	P15	0.06667
C09-190	P20	0.05000
C09-190	P30	0.03333
C09-190	P50	0.02000
C09-190	P100	0.01000
C09-190	P200	0.00500
C09-190	P500	0.00200
C09-190	P1000	0.00122
C09-191	num_ret	742.00000
C09-191	num_unjug_ret@1	0.00000
C09-191	num_unjug_ret@10	1.00000
C09-191	num_unjug_ret@100	48.00000
C09-191	num_unjug_ret@1000	690.00000
C09-191	num_rel	30.00000
C09-191	num_rel_ret	11.00000
C09-191	map	0.01479
C09-191	R-prec	0.00000
C09-191	bpref	0.08556
C09-191	recip_rank	0.02778
C09-191	ndcg	0.09475
C09-191	ndcg5	0.00000
C09-191	ndcg10	0.00000
C09-191	ndcg20	0.00256
C09-191	ERR	0.02124
C09-191	ERR10	0.00000
C09-191	ERR20	0.00313
C09-191	P1	0.00000
C09-191	P5	0.00000
C09-191	P10	0.00000
C09-191	P15	0.00000
C09-191	P20	0.00000
C09-191	P30	0.00000
C09-191	P50	0.02000
C09-191	P100	0.05000
C09-191	P200	0.03500
C09-191	P500	0.02200
C09-191	P1000	0.01482
C09-192	num_ret	993.00000
C09-192	num_unjug_ret@1	1.00000
C09-192	num_unjug_ret@10	10.00000
C09-192	num_unjug_ret@100	87.00000
C09-192	num_unjug_ret@1000	910.00000
C09-192	num_rel	105.00000
C09-192	num_rel_ret	31.00000
C09-192	map	0.01596
C09-192	R-prec	0.04762
C09-192	bpref	0.24454
C09-192	recip_rank	0.01282
C09-192	ndcg	0.18885
C09-192	ndcg5	0.00000
C09-192	ndcg10	0.00000
C09-192	ndcg20	0.00000
C09-192	ERR	0.01215
C09-192	ERR10	0.00000
C09-192	ERR20	0.00000
C09-192	P1	0.00000
C09-192	P5	0.00000
C09-192	P10	0.00000
C09-192	P15	0.00000
C09-192	P20	0.00000
C09-192	P30	0.00000
C09-192	P50	0.00000
C09-192	P100	0.04000
C09-192	P200	0.07000
C09-192	P500	0.04800
C09-192	P1000	0.03122
C09-193	num_ret	989.00000
C09-193	num_unjug_ret@1	0.00000
C09-193	num_unjug_ret@10	0.00000
C09-193	num_unjug_ret@100	62.00000
C09-193	num_unjug_ret@1000	924.00000
C09-193	num_rel	93.00000
C09-193	num_rel_ret	19.00000
C09-193	map	0.06776
C09-193	R-prec	0.12903
C09-193	bpref	0.15401
C09-193	recip_rank	1.00000
C09-193	ndcg	0.14629
C09-193	ndcg5	0.11905
C09-193	ndcg10	0.15939
C09-193	ndcg20	0.15296
C09-193	ERR	0.12835
C09-193	ERR10	0.12070
C09-193	ERR20	0.12397
C09-193	P1	1.00000
C09-193	P5	0.60000
C09-193	P10	0.60000
C09-193	P15	0.46667
C09-193	P20	0.35000
C09-193	P30	0.26667
C09-193	P50	0.16000
C09-193	P100	0.12000
C09-193	P200	0.07000
C09-193	P500	0.03600
C09-193	P1000	0.01921
C09-194	num_ret	644.00000
C09-194	num_unjug_ret@1	0.00000
C09-194	num_unjug_ret@10	0.00000
C09-194	num_unjug_ret@100	8.00000
C09-194	num_unjug_ret@1000	600.00000
C09-194	num_rel	47.00000
C09-194	num_rel_ret	1.00000
C09-194	map	0.00031
C09-194	R-prec	0.00000
C09-194	bpref	0.01901
C09-194	recip_rank	0.01471
C09-194	ndcg	0.00748
C09-194	ndcg5	0.00000
C09-194	ndcg10	0.00918
C09-194	ndcg20	0.00856
C09-194	ERR	0.00781
C09-194	ERR10	0.00781
C09-194	ERR20	0.00781
C09-194	P1	0.00000
C09-194	P5	0.00000
C09-194	P10	0.00000
C09-194	P15	0.00000
C09-194	P20	0.00000
C09-194	P30	0.00000
C09-194	P50	0.00000
C09-194	P100	0.01000
C09-194	P200	0.00500
C09-194	P500	0.00200
C09-194	P1000	0.00155
C09-195	num_ret	985.00000
C09-195	num_unjug_ret@1	0.00000
C09-195	num_unjug_ret@10	6.00000
C09-195	num_unjug_ret@100	60.00000
C09-195	num_unjug_ret@1000	907.00000
C09-195	num_rel	24.00000
C09-195	num_rel_ret	3.00000
C09-195	map	0.00359
C09-195	R-prec	0.04167
C09-195	bpref	0.03125
C09-195	recip_rank	0.07143
C09-195	ndcg	0.06275
C09-195	ndcg5	0.00000
C09-195	ndcg10	0.00000
C09-195	ndcg20	0.03636
C09-195	ERR	0.00484
C09-195	ERR10	0.00000
C09-195	ERR20	0.00446
C09-195	P1	0.00000
C09-195	P5	0.00000
C09-195	P10	0.00000
C09-195	P15	0.06667
C09-195	P20	0.05000
C09-195	P30	0.03333
C09-195	P50	0.02000
C09-195	P100	0.01000
C09-195	P200	0.00500
C09-195	P500	0.00600
C09-195	P1000	0.00305
C09-196	num_ret	916.00000
C09-196	num_unjug_ret@1	0.00000
C09-196	num_unjug_ret@10	0.00000
C09-196	num_unjug_ret@100	48.00000
C09-196	num_unjug_ret@1000	859.00000
C09-196	num_rel	122.00000
C09-196	num_rel_ret	37.00000
C09-196	map	0.21670
C09-196	R-prec	0.27049
C09-196	bpref	0.29393
C09-196	recip_rank	1.00000
C09-196	ndcg	0.12732
C09-196	ndcg5	0.06667
C09-196	ndcg10	0.06667
C09-196	ndcg20	0.11147
C09-196	ERR	0.18909
C09-196	ERR10	0.15886
C09-196	ERR20	0.18865
C09-196	P1	1.00000
C09-196	P5	1.00000
C09-196	P10	1.00000
C09-196	P15	0.93333
C09-196	P20	0.85000
C09-196	P30	0.70000
C09-196	P50	0.50000
C09-196	P100	0.30000
C09-196	P200	0.18500
C09-196	P500	0.07400
C09-196	P1000	0.04039
C09-197	num_ret	447.00000
C09-197	num_unjug_ret@1	0.00000
C09-197	num_unjug_ret@10	0.00000
C09-197	num_unjug_ret@100	39.00000
C09-197	num_unjug_ret@1000	404.00000
C09-197	num_rel	113.00000
C09-197	num_rel_ret	17.00000
C09-197	map	0.02134
C09-197	R-prec	0.13274
C09-197	bpref	0.13838
C09-197	recip_rank	0.04348
C09-197	ndcg	0.19987
C09-197	ndcg5	0.08210
C09-197	ndcg10	0.11690
C09-197	ndcg20	0.26262
C09-197	ERR	0.28861
C09-197	ERR10	0.28430
C09-197	ERR20	0.28861
C09-197	P1	0.00000
C09-197	P5	0.00000
C09-197	P10	0.00000
C09-197	P15	0.00000
C09-197	P20	0.00000
C09-197	P30	0.06667
C09-197	P50	0.20000
C09-197	P100	0.15000
C09-197	P200	0.07500
C09-197	P500	0.03803
C09-197	P1000	0.03803
C09-198	num_ret	744.00000
C09-198	num_unjug_ret@1	0.00000
C09-198	num_unjug_ret@10	0.00000
C09-198	num_unjug_ret@100	32.00000
C09-198	num_unjug_ret@1000	670.00000
C09-198	num_rel	58.00000
C09-198	num_rel_ret	32.00000
C09-198	map	0.05653
C09-198	R-prec	0.13793
C09-198	bpref	0.33026
C09-198	recip_rank	0.03030
C09-198	ndcg	0.16176
C09-198	ndcg5	0.01131
C09-198	ndcg10	0.02306
C09-198	ndcg20	0.03132
C09-198	ERR	0.06150
C09-198	ERR10	0.03747
C09-198	ERR20	0.04417
C09-198	P1	0.00000
C09-198	P5	0.00000
C09-198	P10	0.00000
C09-198	P15	0.00000
C09-198	P20	0.00000
C09-198	P30	0.00000
C09-198	P50	0.08000
C09-198	P100	0.12000
C09-198	P200	0.11000
C09-198	P500	0.05800
C09-198	P1000	0.04301
C09-199	num_ret	998.00000
C09-199	num_unjug_ret@1	0.00000
C09-199	num_unjug_ret@10	0.00000
C09-199	num_unjug_ret@100	45.00000
C09-199	num_unjug_ret@1000	909.00000
C09-199	num_rel	194.00000
C09-199	num_rel_ret	29.00000
C09-199	map	0.04242
C09-199	R-prec	0.11340
C09-199	bpref	0.10418
C09-199	recip_rank	0.50000
C09-199	ndcg	0.11593
C09-199	ndcg5	0.02301
C09-199	ndcg10	0.10246
C09-199	ndcg20	0.12021
C09-199	ERR	0.18398
C09-199	ERR10	0.18111
C09-199	ERR20	0.18394
C09-199	P1	0.00000
C09-199	P5	0.40000
C09-199	P10	0.40000
C09-199	P15	0.46667
C09-199	P20	0.45000
C09-199	P30	0.40000
C09-199	P50	0.30000
C09-199	P100	0.16000
C09-199	P200	0.11500
C09-199	P500	0.05400
C09-199	P1000	0.02906
C09-200	num_ret	370.00000
C09-200	num_unjug_ret@1	0.00000
C09-200	num_unjug_ret@10	0.00000
C09-200	num_unjug_ret@100	7.00000
C09-200	num_unjug_ret@1000	327.00000
C09-200	num_rel	26.00000
C09-200	num_rel_ret	5.00000
C09-200	map	0.00604
C09-200	R-prec	0.00000
C09-200	bpref	0.08728
C09-200	recip_rank	0.02128
C09-200	ndcg	0.11929
C09-200	ndcg5	0.00000
C09-200	ndcg10	0.00000
C09-200	ndcg20	0.11415
C09-200	ERR	0.05882
C09-200	ERR10	0.00000
C09-200	ERR20	0.05866
C09-200	P1	0.00000
C09-200	P5	0.00000
C09-200	P10	0.00000
C09-200	P15	0.00000
C09-200	P20	0.00000
C09-200	P30	0.00000
C09-200	P50	0.04000
C09-200	P100	0.04000
C09-200	P200	0.02000
C09-200	P500	0.01081
C09-200	P1000	0.01351
all	queries	198.00000
all	num_ret	153557.00000
all	num_unjug_ret@1	11.00000
all	num_unjug_ret@10	301.00000
all	num_unjug_ret@100	8348.00000
all	num_unjug_ret@1000	139842.00000
all	num_rel	18771.00000
all	num_rel_ret	3938.00000
all	map	0.04171
all	R-prec	0.08874
all	bpref	0.13580
all	recip_rank	0.36209
all	ndcg	0.15762
all	ndcg5	0.15795
all	ndcg10	0.15642
all	ndcg20	0.14394
all	ERR	0.11713
all	ERR10	0.10536
all	ERR20	0.11162
all	P1	0.28283
all	P5	0.20909
all	P10	0.17879
all	P15	0.16902
all	P20	0.15253
all	P30	0.14057
all	P50	0.12303
all	P100	0.09106
all	P200	0.06186
all	P500	0.03422
all	P1000	0.02649
