学大数据必须要学编程吗?
2022-10-28 · 百度认证:云南嘉荟教育信息咨询官方账号,教育领域创作者
一提起编程,不少朋友都会觉得头痛不已,复杂又深奥的各种代码,让人眼前以懵。不少想学大数据的朋友,都很想知道,学大数据可以不学编程吗?笔者收到了不少类似的问题,本文就详细来讲讲,学大数据可以不学编程吗,Java开发使用软件http://www.kmbdqn.cn/,来解答大家心中的疑问吧!
1:首先要肯定的告诉大家,学大数据是一定要学编程的哦!学大数据要涉及一些编程知识,但编程不是重点,重点是数据库。原则上大数据开发需要编程语言的基础,因为大数据的开发基于一些常用的高级语言,比如java和.Net。如果想从事大数据开发,还是需要至少精通一门高级语言,这里面是肯定要涉及编程知识的。
2:学大数据可以不学编程吗,这个问题大家已经知道了答案,我们现在来聊聊,大数据要学什么。要想成为合格的大数据工程师,就需要熟悉hadoop生态系统,熟悉yarn、hdfs、hbase、hive等各种组件的部署、搭建配置及优化;熟悉linux系统,熟练使用shell或python进行常用脚本开发和测试。
3:除此之外,大数据工程师还需要熟悉大数据分析,熟练使用spark、mapreduce分析及算法优化,熟悉Java、Scala中至少一门语言;熟悉大数据采集和存储,熟练使用flume、kafka、sparkstreaming,storm对数据进行采集清洗存储;熟悉大数据全文检索,熟练使用elasticsearch、sorl、lucene等至少一种搜索引擎框架等等。