因为歌源不同会有一些丢失 1、复制出网易云音乐歌单链接(其余音乐平台基本相同) 建议电脑方面操作,我的是Windows系统
1.数据仓库建模 1.1 ODS 层 ODS 层:原始数据层,存放原始数据,直接加载原始日志、数据,数据保持原貌不做处理 1.HDFS 用户行为数据(flume-Kafka-flume-HDFS)
4.业务数据采集 4.1 MySQL 安装 详细内容见:linux 安装 MySQL-starryv.top 4.2 Sqoop 安装部署 详细内容见:Sqoop安装部署-starryv.top
1. 安装包准备 将安装包和 JDBC 驱动上传到/opt/software,共计 6 个 01_mysql-community-common-5.7.16-1.el7.x86_64.rpm
02_mysql-community-libs-5.7.16-1.el7.x86_64.rpm
03_