学大数据需要具备什么基础知识和能力

学习大数据必须要学习大数据中心常识，大数据技术体系很复杂，与物联网、移动互联网、人工智能、云核算等都有着紧密的关系。所以，Haoop生态体系、HDFS技术、HBASE技术、Sqoop运用流程、数据仓库东西HIV、大数据离线剖析Spark、Python言语、数据实时剖析Storm等都是学习大数据需要了解和掌握的。

对于零基础的朋友，一开始入门可能不会太简单，需要掌握一门计算机的编程语言，因为大数据技术学习前需要一定的Java技术作为基础支持。

只需要学习Java的标准版JavaSE就可以了，像Servlet、JSP、Tomcat都是JavaEE方向的技术在大数据技术里用到的并不多，只需要了解就可以了，当然Java怎么连接数据库还是要知道的，像JDBC一定要掌握。

因为大数据相关软件都是在Linux上运行的，所以Linux要学习得扎实一些，学好Linux能够帮助快速掌握大数据相关技术，能更好地理解hadoop、hive、hbase、spark等大数据软件的运行环境和网络环境配置。

从事大数据工作，免不了要分析数据。如果从事数据剖析师，就需要了解一定的数学常识。需要有一定的公式核算能力，了解常用计算模型算法。而如果从事数据发掘工程师，就需要能够熟练运用各类算法，对数学的要求是很高的。