大数据主要是学什么的 就业方向有哪些
大数据分两个方向,一个是大数据开发工程师,还有一个是大数据分析师。学大数据开发就要学各种编程语言,学大数据分析要懂得行业知识、学数据分析等。大数据是一个很大的概念,里面包括很多的分支,就业方向也非常多。
大数据工程师要学什么
第一阶段 Java语言基础
Java开发介绍、熟悉Eclipse开发工具、Java语言基础、Java流程控制、Java字符串、Java数组与类和对象、数字处理类与核心技术、I/O与反射、多线程、Swing程序与集合类
第二阶段 HTML、CSS与JavaScript
PC端网站布局、HTML5+CSS3基础、WebApp页面布局、原生JavaScript交互功能开发、Ajax异步交互、jQuery应用
第三阶段 JavaWeb和数据库
数据库、JavaWeb开发核心、JavaWeb开发内幕
第四阶段 Linux&Hadoopt体系
Linux体系、Hadoop离线计算大纲、分布式数据库Hbase、数据仓库Hive、数据迁移工具Sqoop、Flume分布式日志框架
第五阶段 实战(一线公司真实项目)
数据获取、数据处理、数据分析、数据展现、数据应用
第六阶段 Spark生态体系
Python编程语言、Scala编程语言、Spark大数据处理、Spark—Streaming大数据处理、Spark—Mlib机器学习、Spark—GraphX 图计算
第七阶段 Storm生态体系
storm技术架构体系、Storm原理与基础、消息队列kafka、Redis工具、zookeeper详解、
实战一:日志告警系统项目
实战二:猜你喜欢推荐系统实战
第八阶段 大数据分析 —AI(人工智能)
Data Analyze工作环境准备&数据分析基础、数据可视化、Python机器学习
1、Python机器学习
2、图像识别&神经网络、自然语言处理&社交网络处理、实战项目:户外设备识别分析
大数据分析师要学什么
1.懂业务。从事数据分析工作的前提就会需要懂业务,即熟悉行业知识、公司业务及流程,最好有自己独到的见解,若脱离行业认知和公司业务背景,分析的结果只会是脱了线的风筝,没有太大的使用价值。
2.懂管理。一方面是搭建数据分析框架的要求,比如确定分析思路就需要用到营销、管理等理论知识来指导,如果不熟悉管理理论,就很难搭建数据分析的框架,后续的数据分析也很难进行。另一方面的作用是针对数据分析结论提出有指导意义的分析建议。
3.懂分析。指掌握数据分析基本原理与一些有效的数据分析方法,并能灵活运用到实践工作中,以便有效地开展数据分析。基本的分析方法有:对比分析法、分组分析法、交叉分析法、结构分析法、漏斗图分析法、综合评价分析法、因素分析法、矩阵关联分析法等。高级的分析方法有:相关分析法、回归分析法、聚类分析法、判别分析法、主成分分析法、因子分析法、对应分析法、时间序列等。
4.懂工具。指掌握数据分析相关的常用工具。数据分析方法是理论,而数据分析工具就是实现数据分析方法理论的工具,面对越来越庞大的数据,我们不能依靠计算器进行分析,必须依靠强大的数据分析工具帮我们完成数据分析工作。
5.懂设计。懂设计是指运用图表有效表达数据分析师的分析观点,使分析结果一目了然。图表的设计是门大学问,如图形的选择、版式的设计、颜色的搭配等等,都需要掌握一定的设计原则。
大数据的就业方向
1. Hadoop大数据开发方向
市场需求旺盛,大数据培训的主体,目前IT培训机构的重点。
对应岗位:大数据开发工程师、爬虫工程师、数据分析师等。
2. 数据挖掘、数据分析&机器学习方向
学习起点高、难度大,市面上只有很少的培训机构在做。
对应岗位:数据科学家、数据挖掘工程师、机器学习工程师等。
3. 大数据运维&云计算方向
市场需求中等,更偏向于Linux、云计算学科。
对应岗位:大数据运维工程师。