数据工程师学成多长时间

大数据的学习看个人的天分与努力程度，想学习大数据就得具备以下能力：数学及统计学相关的背景；计算机编码能力；对特定应用领域或行业的知识。大数据工程师这个角色很重要的一点是，不能脱离市场，因为大数据只有和特定领域的应用结合起来才能产生价值。所以，在某个或多个垂直行业的经历能为应聘者积累对行业的认知，对于之后成为大数据工程师有很大帮助，因此这也是应聘这个岗位时较有说服力的加分项。大数据相关的技能很多，按照数据本身，可以分为数据获取、数据处理、数据分析、数据存储、数据挖掘，共5类。数据获取：日志收集 Scribe、Flume和爬虫等；数据处理：流式计算的storm, spark streaming、Hadoop、消息队列相关的如Kafka等；数据分析：HIVE、SPARK、基本算法、数据结构等；数据存储：HDFS等；数据挖掘：机器学习相关算法，聚类、时间序列、推荐系统、回归分析、文本挖掘、贝叶斯分类、神经网络等。关于如何学习大数据的问题，可以到一家专业的机构看看，例如CDA数据认证中心就不错。CDA行业标准由国际范围数据领域的行业专家、学者及知名企业共同制定并每年修订更新，确保了标准的公立性、权威性、前沿性。通过CDA认证考试者可获得CDA中英文认证证书。

虽然现在大数据人工智能发展的很好，但是自学的话还是很难达到公司要求的，当初我自学了一年的大数据，天天在网上找一些免费的资料和视频看，但是遇到问题了也没人能帮我解决的，所以学的很吃力也很慢，后来勉强懂一些后台、hadoop方面的知识，但是只能说是皮毛，只是了解一些简单的知识，公司照样不要，后来报了个班集训了半年，面了2家就找到工作了，当初涉世不深给7千就干了，后来待没多久就跳槽了，几乎工资翻了一倍。所以说啊，自己自学比较浪费时间还学不好，本人的前车之鉴，希望能帮到你

根据2016年中国大数据产业峰会发布的数据，2015年我国大数据市场规模1692亿元，同比增长，处于快速发展期，预计2020年市场规模将达到13626亿元，“十三五”期间年复合增速将到达。大数据市场稳步增长，一方面促进了大数据与各行业的紧密融合，一方面也推动了大数据培训行业的发展。接受技能培训，当然会关注培训的时间跨度。如果告诉你，大数据培训需要一年的时间，相信很多人都会望而却步，除了在校生，谁还会有一年的时间和精力参加培训？当然，大家也不要过于担心。大数据虽然需要学习有关统计和计算机知识，但只要态度认真，按时按量地完成老师布置的任务，用心消化课堂学到的知识，再多多加以实际运用，大数据分析和挖掘还是很容易上手的。通过培训一般对于基础较好的学员，三个月左右就可以走上工作岗位了。大数据培训主要学什么对于一般的数据分析培训课程而言，所学内容基本可以分为理论知识和专业工具两类。包括：1、需要有应用数学、统计学、数量经济学专业本科或者工学硕士层次水平的数学知识背景。 2、至少熟练SPSS、STATISTIC、Eviews、SAS等数据分析软件中的一门。 3、至少能够用Acess等进行数据库开发； 4、至少掌握一门数学软件：matalab，mathmatics进行新模型的构建。 5、至少掌握一门编程语言。

一般要4个月，以下是部分课表，可看下

零基础开始学习的话，大概需要5个月左右。大数据挖掘工程师的课程内容涉猎很多，包括JavaSE 开发、JavaEE开发、并发编程实战开发、Linux精讲、Hadoop 生态体系、Python 实战开发、Storm 实时开发、Spark 生态体系、ElasticSearc、Docker容器引擎、机器学习、超大集群调优、大数据项目实战等。如果想要全部掌握以上的知识，必须要进行系统的学习，建议报名相关的专业机构进行线上或者线下课程的学习。同时，学成之后大数据工程师的就业前景还是很明朗的，在薪酬待遇也是很有优势的，因为大数据工程师在IT类职业中比较稀缺的，收入待遇可以说达到了同类的顶级。国内IT、通讯、行业招聘中，有10％都是和大数据相关的，且比例还在上升。想要了解更多有关数据挖掘的信息，可以了解一下CDA数据分析师的课程。课程内容兼顾培养解决数据挖掘流程问题的横向能力以及解决数据挖掘算法问题的纵向能力。要求学生具备从数据治理根源出发的思维，通过数字化工作方法来探查业务问题，通过近因分析、宏观根因分析等手段，再选择业务流程优化工具还是算法工具，而非“遇到问题调算法包”

一般零基础小伙伴在大数据培训班学习开发技术知识，培训班事先会通过面试的方式对小伙伴做一个初步的了解，然后通过考试来检测小伙伴到底适不适合学习大数据开发，而且还会给小伙伴推荐比较适合学习的编程技术，增加成功学习编程技术的概率。

零基础小伙伴一般在大数据培训班学习开发技术时，需要学习一些java、Python等编程基础知识包括算法、框架等知识，在后续过程中是需要学习Linux系统操作、学习搭建Hadoop平台和Spark平台等大数据开发相关技术知识。

在大数据培训班学习开发技术知识，除了学习开发技术基础知识之外，还需要练习一些企业级项目实战案例，让小伙伴在学习开发技术知识的同时，积累更多的项目实战经验，锻炼学习在公司项目实战中解决问题的方法。

一般情况下，在尚 gui 谷大数据培训班系统学习开发技术知识的培训周期是5-6个月的时间，培训结束之后，能够达到初级开发工程师的技术水平，不过小伙伴在选择大数据培训班的时候，一定要选择适合自己的，靠谱的大数据培训班来学习。

一般大数据的学习方式有两种：

线下脱产学习，线上视频教学。如果是0基础学员参加线下脱产班学习的话，大多数培训机构都是6个月左右的周期。

大数据的学习有一定难度，对于0基础的小白来说，一定要细心、耐心，认真听课，多多练习。大数据的薪资待遇是比较可观的，目前大数据开发招聘还是以技术为主，大数据需要学习hadoop、spark、storm、超大集群调优、机器学习、并发编程等，加米谷的具体如下：

Java，大数据基础：Linux基础、Maven基础

HDFS分布式文件系统

MapReduce分布式计算模型+Yarn分布式资源管理器+Zookeeper分布式协调服务

Hbase分布式数据 库+Hive分布式数据仓库

FlumeNG分布式数据采集系统+Sqoop大数据迁移系统

Scala大数据黄金语言+kafka分布式总线系统

SparkCore大数据计算基石+SparkSQL数据挖掘利器+SparkStreaming流式计算平台

SparkMllib机器学习平台+SparkGraphx图计算平台

大数据项目实战

大数据培训一般是指大数据开发的学习，主要学习hadoop、spark、storm、超大集群调优、机器学习、并发编程等，零基础学习大数据，需要有一定的编程能力，编程能力是可以练习与提升的。大数据培训有一定难度，0基础一般需要6个月左右的时间。

大数据主要包含三大就业方向：

大数据系统研发类人才、大数据应用开发类人才、大数据分析类人才，各自基础岗位一般为大数据系统研发工程师、大数据应用开发工程师和数据分析师。