SparkMLlib实现音乐推荐代码解.pdfVIP

SparkMLlib实现⾳乐推荐代码解 Spark MLlib 实现⾳乐推荐 ⼀、准备数据 1.1 了解数据集 user_artist_data.txt (3 columns:userid,artistid,playcount) ， ⽤户 艺术家 播放记录。 artist_data.txt (2 columns:artistid,artist_ name) 艺术家I ，艺术家名字。 同⼀ 艺术家可能对应不同名字，即有不同的id。 artist_alias.txt 标识每 艺术家的别名。⾥⾯⽤⼀ 唯⼀的id标识所有同⼀ artist id 列表。 1.2 读取数据 val base ir = :/test/ val rawUserArtist ata = sc.textFile(base ir + user_artist_data.txt) val rawArtist ata = sc.textFile(base ir + artist_data.txt) val rawArtistAlias = sc.textFile(base ir + artist