大数据实现方法

JAVA学习网 2019-03-23 06:00:02

自己大概了解一下大数据开发流程

我的作业部落本文连接:https://www.zybuluo.com/DannySanker/note/1254106

 

环境配置:

1.linux环境的配置以及安装 
2.hadoop的配置 
3.数据库的安装

代码的编写:

1.需要使用Java编辑器 
2.针对所需实现的内容梳理

前端的设计:

1.利用css设计布局界面 
2.调用js实现 
3.与数据库连接,Java程序运行实现数据处理


数据库:MySQL

1.从服务器中获取数据 
2.将需要处理的数据导入数据库中

eclipse:Eclipse

1.对数据的第一次处理:

删除数据中的不必要内容,以此来减少服务器的运算

2.将数据上传到HDFS上执行处理:

通过I/O输入输出流实现

3.设计程序与数据库、HDFS连接、前端网页连接

网页设计:Hbuilder、Echats

阅读(2776) 评论(0)