建设者：厦门大学计算机科学系林子雨博士/助理教授
扫一扫手机访问本主页
案例简介
大数据课程实验案例：网站用户行为分析，由厦门大学数据库实验室团队开发，旨在满足全国高校大数据教学对实验案例的迫切需求。本案例涉及数据预处理、存储、查询和可视化分析等数据处理全流程所涉及的各种典型操作，涵盖Linux、MySQL、Hadoop、HBase、Hive、Sqoop、R、Eclipse等系统和软件的安装和使用方法。案例适合高校（高职）大数据教学，可以作为学生学习大数据课程后的综合实践案例。通过本案例，将有助于学生综合运用大数据课程知识以及各种工具软件，实现数据全流程操作。各个高校可以根据自己教学实际需求，对本案例进行补充完善。
案例目的
适用对象
本案例可以作为大数据入门级课程结束后的“大作业”，或者可以作为学生暑期或寒假大数据实习实践基础案例，完成本案例预计耗时7天。
预备知识
硬件要求
本案例可以在单机上完成，也可以在集群环境下完成。
单机上完成本案例实验时，建议计算机硬件配置为：500GB以上硬盘，8GB以上内存。
软件工具
本案例所涉及的系统及软件
图案例所涉及软件总体概览图
数据集
网站用户购物行为数据集2000万条记录。
案例任务
图案例所涉及操作总体概览图
实验步骤
每个实验步骤所需要的知识储备、训练技能和任务清单如下：
步骤零：实验环境准备
步骤一：本地数据集上传到数据仓库Hive
步骤二：Hive数据分析
步骤三：Hive、MySQL、HBase数据互导
步骤四：利用R进行数据可视化分析
开发团队
图（摄影夏小云）大数据案例开发团队2016年11月28日合影
（人员从左到右名单：魏亮、阮榕城、林子雨、薛倩、曾冠华）
THE END