NeuMF

The results of NeuMF on the 6 datasets (i.e., ML-1M, LastFM, Book-X, Epinions, Yelp, AMZe) under three views (i.e., origin, 5-filter and 10-filter) w.r.t time-aware split-by-ratio (TSBR) are listed below.

ML-1M

The results on ML-1M dataset across origin, 5- and 10-filter settings are listed below.

origin

Metric@K	1	5	10	20	30	50
Pre	0.4919	0.4467	0.4210	0.3802	0.3523	0.3128
Rec	0.0137	0.0584	0.1023	0.1787	0.2353	0.3272
HR	0.4919	0.7720	0.8515	0.9025	0.9261	0.9451
MAP	0.4919	0.3693	0.3215	0.2706	0.2411	0.2032
MRR	0.4919	1.0542	1.3105	1.5395	1.6577	1.7867
NDCG	0.4919	0.6343	0.6528	0.6594	0.6614	0.6605

5-filter

Metric@K	1	5	10	20	30	50
Pre	0.4910	0.4433	0.4184	0.3752	0.3472	0.3086
Rec	0.0160	0.0599	0.1073	0.1799	0.2417	0.3359
HR	0.4910	0.7786	0.8571	0.9053	0.9339	0.9557
MAP	0.4910	0.3634	0.3157	0.2631	0.2328	0.1958
MRR	0.4910	1.0478	1.3029	1.5273	1.6434	1.7705
NDCG	0.4910	0.6398	0.6568	0.6620	0.6648	0.6641

10-filter

Metric@K	1	5	10	20	30	50
Pre	0.2627	0.2306	0.2123	0.1987	0.1863	0.1719
Rec	0.0084	0.0361	0.0638	0.1119	0.1505	0.2170
HR	0.2627	0.5355	0.6471	0.7593	0.8162	0.8726
MAP	0.2627	0.1711	0.1378	0.1120	0.0981	0.0832
MRR	0.2627	0.5548	0.6803	0.8047	0.8690	0.9454
NDCG	0.2627	0.4031	0.4322	0.4551	0.4664	0.4778

LastFM

The results on LastFM dataset across origin, 5- and 10-filter settings are listed below.

origin

Metric@K	1	5	10	20	30	50
Pre	0.5820	0.4467	0.3561	0.2455	0.1871	0.1260
Rec	0.0634	0.2342	0.3663	0.4990	0.5687	0.6370
HR	0.5820	0.8768	0.9320	0.9586	0.9660	0.9719
MAP	0.5820	0.3631	0.2552	0.1552	0.1098	0.0684
MRR	0.5820	1.1357	1.3112	1.4056	1.4340	1.4519
NDCG	0.5820	0.7297	0.7279	0.7150	0.7054	0.6940

5-filter

Metric@K	1	5	10	20	30	50
Pre	0.4792	0.3195	0.2452	0.1739	0.1381	0.0996
Rec	0.0626	0.2035	0.3074	0.4380	0.5230	0.6274
HR	0.4792	0.7696	0.8540	0.9237	0.9524	0.9703
MAP	0.4792	0.2505	0.1627	0.0970	0.0693	0.0441
MRR	0.4792	0.8614	0.9731	1.0441	1.0709	1.0923
NDCG	0.4792	0.6220	0.6284	0.6242	0.6178	0.6070

10-filter

Metric@K	1	5	10	20	30	50
Pre	0.3208	0.2168	0.1690	0.1248	0.1007	0.0758
Rec	0.0476	0.1537	0.2382	0.3512	0.4232	0.5317
HR	0.3208	0.6208	0.7529	0.8522	0.8914	0.9318
MAP	0.3208	0.1567	0.1001	0.0596	0.0426	0.0275
MRR	0.3208	0.5825	0.6621	0.7173	0.7383	0.7580
NDCG	0.3208	0.4730	0.5044	0.5116	0.5104	0.5068

Book-X

The results on Book-X dataset across origin, 5- and 10-filter settings are listed below.

origin

Metric@K	1	5	10	20	30	50
Pre	0.1274	0.0875	0.0693	0.0519	0.0424	0.0319
Rec	0.0525	0.1460	0.2067	0.2751	0.3180	0.3714
HR	0.1274	0.2838	0.3578	0.4303	0.4722	0.5229
MAP	0.1274	0.0610	0.0421	0.0284	0.0221	0.0158
MRR	0.1274	0.2320	0.2655	0.2891	0.2985	0.3068
NDCG	0.1274	0.2073	0.2289	0.2446	0.2517	0.2588

5-filter

Metric@K	1	5	10	20	30	50
Pre	0.1382	0.1005	0.0839	0.0665	0.0571	0.0455
Rec	0.0325	0.1031	0.1619	0.2368	0.2916	0.3683
HR	0.1382	0.3179	0.4148	0.5097	0.5684	0.6411
MAP	0.1382	0.0686	0.0480	0.0327	0.0258	0.0187
MRR	0.1382	0.2600	0.3041	0.3375	0.3528	0.3672
NDCG	0.1382	0.2292	0.2571	0.2765	0.2861	0.2962

10-filter

metric@K	1	5	10	20	30	50
pre	0.1518	0.1169	0.0985	0.0791	0.0677	0.0542
rec	0.0281	0.0934	0.1490	0.2238	0.2791	0.3578
hr	0.1518	0.3554	0.4582	0.5596	0.6199	0.6877
map	0.1518	0.0792	0.0564	0.0388	0.0306	0.0222
mrr	0.1518	0.2951	0.3476	0.3882	0.4062	0.4236
ndcg	0.1518	0.2552	0.2852	0.3057	0.3153	0.3239

Epinions

The results on Epinions dataset across origin, 5- and 10-filter settings are listed below.

origin

Metric@K	1	5	10	20	30	50
Pre	0.1417	0.1065	0.0882	0.0711	0.0623	0.0519
Rec	0.0129	0.0383	0.0573	0.0823	0.0997	0.1259
HR	0.1417	0.2858	0.3519	0.4237	0.4679	0.5214
MAP	0.1417	0.0795	0.0588	0.0429	0.0357	0.0283
MRR	0.1417	0.2720	0.3176	0.3541	0.3719	0.3905
NDCG	0.1417	0.2148	0.2329	0.2465	0.2535	0.2603

5-filter

metric@K	1	5	10	20	30	50
pre	0.0681	0.0462	0.0382	0.0316	0.0279	0.0236
rec	0.0074	0.0242	0.0383	0.0589	0.0744	0.1017
hr	0.0681	0.1536	0.2095	0.2770	0.3206	0.3878
map	0.0681	0.0316	0.0215	0.0148	0.0119	0.0090
mrr	0.0681	0.1226	0.1423	0.1593	0.1675	0.1762
ndcg	0.0681	0.1110	0.1279	0.1423	0.1501	0.1615

10-filter

Metric@K	1	5	10	20	30	50
Pre	0.0564	0.0383	0.0302	0.0239	0.0210	0.0177
Rec	0.0089	0.0258	0.0375	0.0559	0.0722	0.0985
HR	0.0564	0.1347	0.1772	0.2336	0.2759	0.3354
MAP	0.0564	0.0250	0.0164	0.0105	0.0082	0.0060
MRR	0.0564	0.1015	0.1160	0.1278	0.1338	0.1403
NDCG	0.0564	0.0958	0.1084	0.1210	0.1291	0.1391

Yelp

The results on Yelp dataset across origin, 5- and 10-filter settings are listed below.

origin

Metric@K	1	5	10	20	30	50
Pre	0.0911	0.0634	0.0500	0.0369	0.0299	0.0221
Rec	0.0457	0.1404	0.2092	0.2957	0.3546	0.4341
HR	0.0911	0.2236	0.3048	0.3992	0.4595	0.5370
MAP	0.0911	0.0419	0.0272	0.0167	0.0123	0.0080
MRR	0.0911	0.1676	0.1916	0.2080	0.2144	0.2197
NDCG	0.0911	0.1581	0.1827	0.2048	0.2166	0.2301

5-filter

Metric@K	1	5	10	20	30	50
Pre	0.1735	0.1347	0.1106	0.0841	0.0691	0.0520
Rec	0.0426	0.1523	0.2370	0.3411	0.4092	0.4989
HR	0.1735	0.4090	0.5259	0.6396	0.7014	0.7732
MAP	0.1735	0.0918	0.0636	0.0414	0.0312	0.0212
MRR	0.1735	0.3406	0.3975	0.4371	0.4528	0.4663
NDCG	0.1735	0.2931	0.3264	0.3494	0.3589	0.3682

10-filter

Metric@K	1	5	10	20	30	50
Pre	0.2364	0.1875	0.1562	0.1208	0.1000	0.0756
Rec	0.0405	0.1479	0.2354	0.3466	0.4193	0.5125
HR	0.2364	0.5051	0.6187	0.7202	0.7725	0.8298
MAP	0.2364	0.1340	0.0961	0.0647	0.0497	0.0343
MRR	0.2364	0.4696	0.5515	0.6100	0.6335	0.6535
NDCG	0.2364	0.3731	0.4032	0.4210	0.4274	0.4321

AMZe

The results on AMZe dataset across origin, 5- and 10-filter settings are listed below.

origin

Metric@K	1	5	10	20	30	50
Pre	0.1573	0.0766	0.0518	0.0333	0.0252	0.0174
Rec	0.1140	0.2642	0.3531	0.4499	0.5090	0.5837
HR	0.1573	0.3312	0.4250	0.5216	0.5783	0.6479
MAP	0.1573	0.0516	0.0286	0.0152	0.0104	0.0063
MRR	0.1573	0.2371	0.2550	0.2653	0.2689	0.2719
NDCG	0.1573	0.2462	0.2745	0.2964	0.3069	0.3179

5-filter

Metric@K	1	5	10	20	30	50
Pre	0.1955	0.1082	0.0761	0.0517	0.0406	0.0292
Rec	0.0667	0.1708	0.2354	0.3167	0.3712	0.4421
HR	0.1955	0.3893	0.4789	0.5737	0.6285	0.6909
MAP	0.1955	0.0756	0.0440	0.0244	0.0170	0.0106
MRR	0.1955	0.3162	0.3453	0.3641	0.3714	0.3776
NDCG	0.1955	0.2936	0.3172	0.3338	0.3404	0.3460

10-filter

Metric@K	1	5	10	20	30	50
Pre	0.2033	0.1172	0.0839	0.0572	0.0461	0.0345
Rec	0.0499	0.1323	0.1852	0.2481	0.2960	0.3670
HR	0.2033	0.3987	0.4861	0.5711	0.6238	0.6894
MAP	0.2033	0.0827	0.0493	0.0277	0.0195	0.0124
MRR	0.2033	0.3359	0.3694	0.3902	0.3998	0.4086
NDCG	0.2033	0.3018	0.3244	0.3375	0.3425	0.3467