首先,工作本身没有好坏之分,只有门槛高低之别。大数据开发、大数据分析、大数据运维都围绕着大数据展开。如果我们把大数据去掉,就只剩下,开发,分析,运维。当然还有其它的工作,例如运营,产品,讲师,测试等。 加上了大数据,只是我们的工作内容,或者说是工作方式发生了变化。

大数据是传统行业,传统技术逐步发展的产物。但是并没有打破我们在传统行业的工作模式,和我们的一些基础知识的储备。革新的只有处理技术,工作手段。在这里我们更详细的说说大数据开发、大数据分析、大数据运维 的工作内容,已经门槛,不做好坏评价。

非大数据 开发,分析,运维干什么呢?

开发日常工作是干什么了 ? 围绕着产品经理,进行产品开发,升级,迭代。加班熬夜,赶进度。每日的工作就是编码,和产品沟通或者撕X,和测试沟通或者斯X,最终确保产品上线,保证产品正常使用,以及后续迭代升级。

分析日常工作是什么了?数据整理,制作报表,最后就是报告,会议,阐述结论,最后就是说服对方接受观点,的确很多时候,分析出来的结论,对方无法接受。

运维日常工作是什么了?最核心的就是监控,机器是否正常运转,资源是否够用,产品应用是否都正常,开发相关的工具,保证异常能够及时发现。

在介绍大数据相关的工作前我们先了解下大数据的处理流程

处理流程

我们在看看hadoop的大数据生态圈。当然大数据生态圈不是在只有hadoop。

生态圈

大数据开发的主要工作

开发数据收集工具,数据清洗和整理,开发数据应用;当然这些不是一个人去完成,都会落在各个团队中去完成。

完整这些工作需要哪些技能?从这些技能我们也能看出来大数据开发的主要工作,就是这些工具打交道。一门开发语言(java/python/c#/scala 等),大数据下的一些框架:MapReduce,Spark,Hdfs,Storm,Hbase,Zookeeper 等,只会其中的2到三项基本找份工作没有问题,如何进阶在这不详细讨论。我们来看图吧。

必备技能

大数据分析的主要工作

有大表哥,专门做各种报表。取数机器人,提取各种数据。当然也有做数据分类,特征提取等数据挖掘,机器学习等高等玩家。

这里一并概括了,大数据分析的主要工作是:基于现有的数据进行数据分析得出一个结论,最后进行商业决策。当然现实不是这样的。大多数人成了大表哥,取数机器人,高端玩家也不列外,挖出来的东西,在没有找到落地场景前,都是一坨一坨的。这里都只是调侃。

大数据分析需要哪些技能呢?我们不管具体的工作内容,看看我们每天要面对那些工具,工具是我们每天要接触的东西。 Excel,SPSS,SQL,数据库,R,Python 等。当然我们不用都会。

我们还是看图吧,看看数据分析师的能力体系:

分析师能力体系

在看看每个阶段需要的技能,分析师和开发的区别在于,核心在于处理数据和清洗数据,达到自己可用的状态。开发是收集数据和整理数据,让数据变得统一。

阶段能力对应图

大数据运维的工作

对大数据集群进行监控和维护升级,保障集群正常运行,从而保证 数据收集服务能正常运行,保证集群资源够用,监控集群资源消耗情况。

他们是职业背锅侠,也是一群默默无闻的伙伴。无论开发,还是分析,还是其它的岗位,都有在人前显摆的时候,我们的运维永远只能在人后做好保障。

我们来看看运维的能力体系吧:

运维能力体系

以上是我对这个问题的理解,有些调侃,但都想表达和传递一种正能量,每个行业,每个岗位都有其特定的属性和特点,既然选择了,就只顾风雨兼程,管它花开花落,最终中能到达理想的彼岸。

大数据开发、大数据分析、大数据运维主要工作各是什么?哪个好?谢谢?相关推荐

  1. 大数据开发、大数据分析、大数据运维主要工作各是什么?哪个好?

    本文转自https://blog.csdn.net/weixin_34318956/article/details/87302823 首先,工作本身没有好坏之分,只有门槛高低之别.大数据开发.大数据分 ...

  2. 大数据数据收集数据困难_大数据架构、大数据开发与数据分析的区别

    是新朋友吗?记得先点蓝字关注我哦- 今日课程菜单 Java全栈开发 | Web前端+H5 大数据开发 | 数据分析  人工智能+Python | 人工智能+物联网 来源:小职(z_zhizuobiao ...

  3. 大数据开发和数据分析的区别

    大数据行业能细分为大数据开发.大数据分析.大数据架构师等等领域,每个领域都有自己不同的工作目的,今天小千就来给大家介绍一下大数据开发和大数据分析岗位的相同不同点,介绍完之后你再考虑哪一个适合你就去培训 ...

  4. 大数据架构、大数据开发与数据分析的区别

    大数据架构.大数据开发与数据分析的区别 大数据产业 顾名思义大数据是一个以数据为核心的产业.大数据产业生成流程从数据的生命周期的传导和演变上可分为这几个部分:数据收集.数据储存.数据建模.数据分析.数 ...

  5. 大数据开发就业:大数据开发有哪些岗位

    在大数据的发展当中,对相关专业人才的需求是在持续增长的,包括大数据开发.数据分析挖掘等不同的数据处理环节,都形成了相应的岗位体系,大家各自负责不同的环节,共同完成大数据处理任务.今天我们主要来讲讲大数 ...

  6. 大数据开发好还是大数据分析好?哪个薪资高?

    做大数据开发好还是大数据分析比较好一些?哪个薪资高? 零基础学习大数据开发,还是大数据分析?哪方面比较好? 今天我们来从技术角度和薪资角度全面进行分析,方便你的选择. 技术区别 在做选择之前,需要了解 ...

  7. 大数据开发及和大数据相关的技术

    在现如今,随着互联网技术飞速的发展,目前有不少朋友询问关于大数据方面的问题,比如什么是大数据开发啊,和大数据相关的技术是什么呢等问题,我们今天就浅谈一下大数据开发及和大数据相关的技术的问题. 首先,大 ...

  8. 2017年终总结(数据开发,数据分析)-忙乱

    2017年终总结(数据开发,数据分析)-忙乱 每次都会感慨时间过得真快,这一次尤其明显.不时有网友问到这一年都干嘛了,怎么一篇Blog都没有?的确很汗颜,一呢2017年的确忙碌了很多,精力偏少,深入思 ...

  9. linux云自动化运维,Liunx运维一线大神亲授 全新Linux云计算运维基础与Linux Shell自动化运维实战课程...

    Liunx运维一线大神亲授 全新Linux云计算运维基础与Linux Shell自动化运维实战课程 全新Linux云计算运维基础与Linux Shell自动化运维实战课程,由于国内一线大神亲自授课与教 ...

最新文章

  1. TestSuite测试报告生成
  2. 蚂蚁上市后,马云不是最大赢家,竟是她!
  3. this keyword details
  4. 序列化--反序列化:Schema evolution in Avro, Protocol Buffers and Thrift
  5. Xilinx---vivado系列
  6. python虚拟环境 virtualenv工具
  7. 阿里云大数据利器Maxcompute-使用mapjoin优化查询
  8. 情侣签到365天获1000现金?这款App被关停下架了 网友拍手称快!
  9. ISP DSP的不同
  10. 搭建移动端布局框架:整合flex
  11. 消息长度_nsq消息队列源码分析
  12. python调用cmd执行命令_详解python调用cmd命令三种方法
  13. Android应用程序开发习题答案
  14. Pytorch扫盲 - 安装、训练、测试、可视化、网络结构、finetune、loss
  15. 计算机更新后启动不了,win10系统更新显卡之后开不了机如何解决
  16. 计算机无法打开pdf文件格式,pdf格式的文件打不开 [电脑打不开pdf格式文件怎么回事]...
  17. 里奥机器人控制app_Cruzr(机器人控制软件)
  18. 云上数据保护,你以为挡住黑客就够了?
  19. 维克采购管理软件 v2.0 免费
  20. 阿里云高防服务器多少钱?提供CC和WEB漏洞DDOS防护

热门文章

  1. 创业做亚马逊测评到底可以吗?有市场吗?靠谱吗?
  2. 微信小程序图片水印添加
  3. SecureCrt脚本(一)顶级对象之Crt
  4. sql查询之分页查询
  5. Python+tushare+talib+mplfinance制作股票K线条和技术指标
  6. [可视化编程]故宫博物院售票系统
  7. Shader实例:Planar Reflection 平面反射
  8. Python基础:networkx (图论与复杂网络建模工具)
  9. 物联网给人类带来的潜在生命危险,我们必须重视起来
  10. 重庆市中小学校80万家长用上校讯通