作者微信 bishe2022

代码功能演示视频在页面下方,请先观看;如需定制开发,联系页面右侧客服
基于Hadoop+Spark的豆瓣电影数据分析及推荐系统设计和实现
包含内容: 源码,数据库,全套手把手教学视频(详情见网页下方截图)
作者QQ549710689
详情描述

如遇视频不清晰,请最大化观看演示

官网:http://www.ckplayer.com,版本号:X

以下仅列出部分功能,全部功能请至官网 《手册》查看

单独监听功能:


播放状态:
跳转状态:无
缓冲:100
当前音量:0.8
是否全屏:否
控制栏:显示
还未结束
当前播放时间(秒):0
前置广告状态:
鼠标位置
切换清晰度:
点击监听:
监听截图功能

Custom Tab

系统环境:  Linux(CentOS7)

大数据组件: Hadoop, Spark, Zookeeper, Kafka, Hbase

开发工具:  Idea + XShell + FileZilla + Mysql


数据采集(python+pycharm):  爬虫豆瓣电影网站数据, 保存为csv文件


数据存储(hdfs/csv):  数据存放到hdfs/csv上


数据分析: SparkCore/SparkSql

数据分析维度: 每年上映电影数, 各演员出演次数, 各类型电影分析, 各类型电影平均评分, 各演员出演电影平均评分,

                      每年上映电影平均评分, 各评分电影统计


可视化(Springboot/E-charts): 柱状图, 折线图, 饼图, 时间图


项目整体架构

image.png

爬虫数据截图: 

image.png

Spark数据处理部分截图

image.png

可视化部分代码截图

image.png

数据展示统计图: 

image.png



Home