slogan 专业知识问答平台!
佰学网 >教育 > 大家教育 > 大数据都需要学啥

大数据都需要学啥

原创 2021-09-17 19:23:57
学习大数据要根据自身情况来定,如果是零基础,那就必须先从基础Java开始学起,接下来学习数据结构、Linux系统操作、关系型数据库等,夯实基础之后,再进入大数据的学习。 精选答案
  • 问题相关

Java基础

一方面Java是目前使用最为广泛的编程语言,它具有的众多特性,特别适合作为大数据应用的开发语言;另一方面Hadoop以及其他大数据处理技术很多都是用Java开发,例如Apache的基于Java的HBase和Accumulo以及ElasticSearchas,因此学习Hadoop的一个首要条件,就是掌握Java语言编程。

Linux系统、Hadoop生态体系

大数据的整个框架是搭建在Linux系统上面的,所以要熟悉Linux开发环境。而Hadoop是一个开源的分布式计算+分布式存储平台,是一个大数据的基础架构,它能搭建大型数据仓库,PB级别数据的存储、处理、分析、统计等业务。在这一阶段,你必须要掌握Hadoop的核心组件,包括分布式文件系统HDFS、资源调度管理系统YARN以及分布式计算框架MapReduce。

分布式计算框架Spark&Storm生态体系

随着学习的深入,在具备一定的基础之后,你就需要学习Spark大数据处理技术、Mlib机器学习、GraphX图计算以及Strom技术架构基础和原理等知识。Spark无论是在性能还是在方案的统一性方面,都有着极大的优越性,可以对大数据进行综合处理:实时数据流处理、批处理和交互式查询。

©本文版权归作者所有,任何形式转载请联系我们:xiehuiyue@offercoming.com。

来自佰学网

刘老师

刘老师

中国人大教育学硕士

关注