发动态

没有新消息

更多内容

培训到底对不对

互联网一零哥

培训找好靠谱的机构,就是对的,但靠谱的机构很少。大数据培训,我身边的朋友是大数据10年的从业者,平时交流得多,对这行也挺了解。现在,大数据工程师的薪水一般是其他IT从业者的两倍,如果技术还可以,基本不会去培训学校当老师,毕竟大数据也是个朝阳行业,机会很多的。大数据不是学学java的几大框架就可以的,那是普通Java程序员干的事。大数据该怎么学,我列一下: 1、初步能够使用架构(Hadoop、spark、storm;Hbase、Mongodb;NoSQL) 1.1 会搭建环境 1.2 能够写处理逻辑代码,这个逻辑代码可以很简单  10亿个ip统计 hadoop mapreduce编程模型 1.3 处理逻辑可以复杂一点 json xml 自定义格式  稍微高级一点的api 特性 2、消息队列 进程间的通讯  电脑与电脑之间的通讯 框架选用:Kafka(消息队列的功能偏弱  缺失很多api)、RabbitMQ(功能非常丰富)、分布式消息队列 掌握上面两点后,处理数据量特别大的业务逻辑 3. Zookeeper  保证不同的电脑间的一个共享的数据的一致性 比如:项目要保证至少有10个工作进程活着,如果其中一个宕机,只剩下9个工作进程,此时我需要再启一个,需要用到监听机制 掌握上述三点后  就可以独立做大数据的开发工作

1 赞+1
0
评论

0 条评论

暂无评论,快来写下您的评论

热门职位推荐
热门公司推荐

@2026 职Q 智联招聘

《职Q社区规范》 《资质公示》

合作商务邮箱:sbyh@zhaopin.com.cn

京ICP备17067871号 合字B2-20210134

京公网安备 11010502030147号

人力资源许可证:1101052003273号

网上有害信息举报专区

违法不良信息举报电话:400-885-9898

关爱未成年举报热线:400-885-9898-3

朝阳区人力资源与社会保障局 监督电话: 57596212,65090445