首页 直播 App
当前位置: 首页 > 大数据工程师 > 大数据工程师文章 > 大数据开发需要学什么基础?掌握什么技能?

大数据开发需要学什么基础?掌握什么技能?

发布时间:2020-09-27 16:45 来源:环球网校 点击量: 452

大数据工程师报名、考试、查分时间 免费短信提醒

地区:

获取验证 立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

【导读】大家都知道,近几年大数据发展的特别的火,很多人报班学习大数据,做起了大数据工程师,那么你知道大数据开发需要学什么基础?掌握什么技能吗?学习大数据要学习那个方向呢?下面我们就来具体的了解一下吧!

大数据开发需要学什么基础?掌握什么技能?.png

只需要学习Java的标准版JavaSE就可以了,像Servlet、JSP、Tomcat、Struts、Spring、Hibernate,Mybatis都是JavaEE方向的技术在大数据技术里用到的并不多,只需要了解就可以了,当然Java怎么连接数据库还是要知道的,像JDBC一定要掌握一下。

有同学说Hibernate或Mybites也能连接数据库啊,为什么不学习一下,我这里不是说学这些不好,而是说学这些可能会用你很多时间,到最后工作中也不常用,我还没看到谁做大数据处理用到这两个东西的,当然你的精力很充足的话,可以学学Hibernate或Mybites的原理,不要只学API,这样可以增加你对Java操作数据库的理解,因为这两个技术的核心就是Java的反射加上JDBC的各种使用。

通用的技能:除了具备基础的Sql能力以外,包括会用传统的Mysql、Oracle这种传统数据库,而且要会用Hive、Hbase这些基于分布式的数据库;当然Java编程能力是不可少的,其他方面的诸如Mapreduce和Spark也会就更好了。

会用集群,集群除了问题有一定解决集群问题的能力。数仓开发:要会数仓建模,维表、事实表、主题表、星型模型、雪花模型等等,要对业务非常熟悉,有全局观,才能建好数据仓库。

数据开发:数据开发有离线开发和实时开发,这种更偏向后端开发,类似java有需求就开发,加上平时对程序维护。

数据分析:这个要求sql功底强,如果能用python对数据分析那会更好了。要会用sqoop和kettle等这些常用的ETL工具,会用报表系统。

以上就是小编今天给大家整理发布的关于“大数据开发需要学什么基础?掌握什么技能??”的相关内容,希望对大家有所帮助。更多关于零基础学大数据的相关内容,关注小编,持续更新。


大数据工程师相关文章推荐

|

大数据工程师最新文章推荐

|

大数据工程师最新经验推荐

  • 知心助教-洋洋

    19:00-19:30 19:00-19:30

    倒计时160天·免单狂欢夜

    一级建造师

出版物经营许可证|京B2-20210770| 京公网安备 11010802033350号|京ICP备16038139号|节目制作经营许可证(京)字20130号|京网文(2021)2566-713号
知春路校区:北京市海淀区知春路7号致真大厦D座4层北区(地铁10号线西土城出A口)|邮编:100191
版权所有 2003-2021 北京环球创智软件有限公司|联系客服|营业执照