大数据要变天了!

  开始接触的大数据的时候,还只是开源的hadoop,从一开始的开源版本的搭建大数据平台,到现在有CDH、TDH...商业版的大数据平台。从运维部署到上产上线,逐步趋近于简单化,小编越来越感觉到如果再不学习,恐怕程序员这个行业还会大大缩水。前几年总是听说,大数据火啊火啊,工资高啊高,真正接触几年以后,才发现技术发展的太快了。从一开始的MR,一直到spark,到现在商业版的大数据几乎不需要写多少代码,几条SQL语句,底层不知道做了多少转化,虽然是以后的趋势吧,但是感觉作为一个猿,还是要秉承着终身学习优良传统,头发又算什么,知识才是粮食。
  说了这么多,为什么小编这么有感慨呢,以前搭建hadoop平台都知道,HA过程那是比较复杂的,搞不好不是namenode经常挂,就是经常进入safemode。现在好了docker来了,k8s来了,整体上云,基于容器,有自动容灾,实时创建。小编最近就在研究基于k8s的大数据平台,也是一个入门的小白,深深的感觉到了运维哥们的不容易,公司新来的机器,上午上班就在生产上,一直到晚上才下来。
  其实说了这么多废话,小编我也不知道为什么写这篇博文,但总结的,自己最近懒惰,无所事事,借助写这篇文章勉励一下自己。咱也立一个flag,两周一篇技术博,绝不拖泥带水,全上干活货。最后,要有自己的态度,写自己的博客,让别人看去吧。.....额 这个文采还真是烂,看来要多读读书了。感觉标题挺吸引人的,应该会有闯进来看,然后贡献流量之后,暗骂的博友们吧,emm.... 那我只能说不好意思,今天加这一篇博文,打算写两篇,算了算了,废话少说,我还是构思下一篇博文吧。

猜你喜欢

转载自blog.51cto.com/14048416/2376835