<del id="ztp9h"><th id="ztp9h"></th></del>
<span id="ztp9h"></span>
<cite id="ztp9h"><ins id="ztp9h"><listing id="ztp9h"></listing></ins></cite><strike id="ztp9h"><i id="ztp9h"></i></strike>
<strike id="ztp9h"></strike>
<span id="ztp9h"><i id="ztp9h"><del id="ztp9h"></del></i></span><strike id="ztp9h"></strike>
<strike id="ztp9h"><dl id="ztp9h"><cite id="ztp9h"></cite></dl></strike>
<span id="ztp9h"><dl id="ztp9h"></dl></span>
<th id="ztp9h"></th>
<ruby id="ztp9h"><i id="ztp9h"></i></ruby>
<ruby id="ztp9h"><dl id="ztp9h"><del id="ztp9h"></del></dl></ruby><strike id="ztp9h"><dl id="ztp9h"></dl></strike>
<strike id="ztp9h"></strike>
网站首页 网站简介 资讯?#34892;?/a> 政策法规 资格认证 培训信息 远程学习 专家顾问 在线报名 成绩查询
 推荐阅读
¡¤ 恭喜本单位成为全国职业信用评价网信
¡¤ 关于开展2019年5月中级网络工程
¡¤ 2019年最新一期国家职业资格安全
¡¤ 恭喜蓝源国际注册商标正式被国家商标
¡¤ 2019年最新一期国家职业资格安全
¡¤ 2019年关于举办劳动关系协调£¨员
¡¤ 2015年4月14日-4月18?#31449;?/a>
¡¤ 2014年6月高级劳动关系协调师培
¡¤ 2014年12月第六届国家职业资格
 审核查询
本人姓名£º
身份证号£º
 
 学员反馈
¡ï 2014年3月18日-22日来自全国各地的150名生产型制造型企业的中高级管理层...
¡ï  会后普遍学?#21271;?#31034;非常?#34892;?#21271;京蓝源国际企业管理有限公司£¨蓝源国际企业管...
[更多]
 
 >> 管理知识 当前位置£º网站首页 >> 管理知识 >> 如何成为一名大数据工程师....  
如何成为一名大数据工程师
发?#38469;?#38388;£º2018-03-03 | 阅读次数£º665 | 返回列表>>|
 大数据是眼下非常时髦的?#38469;?#21517;词£¬与?#36865;?#26102;自然也催生出了一些与大数据处理相关的职业£¬通过对数据的挖掘分析来影响企业的商业决策¡£
这群人在国外被叫做数据科学家£¨Data Scientist£©£¬这个头衔最早由D.J.Pati和Jeff Hammerbacher于2008年提出£¬他们后来分别成为了领英£¨LinkedIn£©和Facebook数据科学团队的负责人¡£而数据科学家这个职位目前也已经在美国传统的电信¡¢零售¡¢金融¡¢制造¡¢物流¡¢医疗¡¢教育等行业里开始创造价值¡£
不过在国内£¬大数据的应用才刚刚萌芽£¬人才市场还不那么成熟£¬¡°你很难期望有一个全才来完成整个链条?#31995;?#25152;有?#26041;Ú¡?#26356;多公司会根据自己已有的资源和短板£¬招聘能和现有团队互补的人才¡£¡±领英£¨LinkedIn£©中国商务分析及战略总监王昱尧对¡¶第一财经周刊¡·说¡£
数据工程师是做什么的£¿于是每家公司对大数据工作的要求不尽相同£º有的强调数据库编程¡¢有的突出应用数学和统计学知识¡¢有的则要求有咨询公司或投行相关的经验¡¢有些是希望能?#19994;?#25026;得产品和市场的应用型人才¡£正因为如此£¬很多公司会针对自己的业务类型和团队分工£¬给这群与大数据打交道的人一些新的头衔和定义£º数据挖掘工程师¡¢大数据专家¡¢数据研究员¡¢用户分析专?#19994;ȶ际?#32463;常在国内公司里出现的Title£¬我们将其统称为¡°大数据工程师¡±¡£
由于国内的大数据工作还处在一个有待开发的阶段£¬因此能从其中挖掘出多少价值完全取决于工程师的个人能力¡£已经身处这个行业的专家给出了一些人才需求的大体框架£¬包括要有计算机编码能力¡¢数学及统计学相关背景£¬当然如果能对一些特定领域或行业有比较深入的了解£¬对于其快速判断并抓准关键因素则更有帮助¡£
虽然对于一些大公司来说£¬拥有硕博学历的公司人是比较好的选择£¬不过阿里巴巴集团研究员薛贵荣强调£¬学历并不是最主要的因素£¬能有大规模处理数据的经验并且有?#19981;?#22312;数据海洋中寻宝的好奇心会更适合这个工作¡£
除此之外£¬一个?#21028;?#30340;大数据工程师要具备一定的逻辑分析能力£¬并能迅速定位某个商业问题的关键属性和决定因素¡£¡°他得知道什么是相关的£¬哪个是重要的£¬使用什么样的数据是最有价值的£¬如何快速?#19994;?#27599;个业务最核心的需求¡£¡±联合国百度大数据联合实验室数据科学家沈志勇说¡£学习能力能帮助大数据工程师快速适应不同的项目£¬并在短时间内成为这个领域的数据专家?#36824;?#36890;能力则能让他们的工作开展地更顺利£¬因为大数据工程师的工作主要分为两种方式£º由市场部驱动和由数据分析部门驱动£¬前者需要常常向产品经理了解开发需求£¬后者则需要?#20197;?#33829;部了解数据模型实际转化的情况¡£
你可以将以上这些要求看做是成为大数据工程师的努力方向£¬因为根据万宝瑞华管理合伙人颜莉萍£¨Nicole Yan£©的观察£¬这是一个很大的人才缺口¡£目前国内的大数据应用多集中在互联网领域£¬有超过56%的企业在筹备发展大数据研究£¬¡°未来5年£¬94%的公司都会需要数据科学家¡£¡±颜莉萍£¨Nicole Yan£©说¡£因此她也建议一些原本从事与数据工作相关的公司人可以考虑转型¡£
用阿里巴巴集团研究员薛贵荣的话来说£¬大数据工程师就是一群?#24052;?#25968;据¡±的人£¬玩出数据的商业价值£¬让数据变成生产力¡£大数据和传统数据的最大区别在于£¬它是在线的¡¢实时的£¬规模海量且?#38382;?#19981;规整£¬无章法可循£¬因此¡°会玩¡±这些数据的?#21496;?#24456;重要¡£
沈志勇认为如果把大数据想象成一座不停累积的矿山£¬那么大数据工程师的工作就是£¬¡°第一步£¬定位并抽取信息所在的数据集£¬相当于探矿和采矿¡£第二步£¬把它变成直接可以做判?#31995;?#20449;息£¬相当于冶炼¡£最后是应用£¬把数据可视化等¡£¡±
因此分析历史¡¢预测未来¡¢优化选择£¬这是大数据工程师在?#24052;?#25968;据¡±时最重要的三大任务¡£通过这三个工作方向£¬他?#21069;?#21161;企业做出更好的商业决策¡£
1.?#39029;?#36807;去事件的特征
大数据工程师一个很重要的工作£¬就是通过分析数据来?#39029;?#36807;去事件的特征¡£比如£¬腾讯的数据团队正在搭建一个数据仓库£¬把公司所有网络?#25945;?#19978;数量庞大¡¢不规整的数据信息进行梳理£¬总结出可供查询的特征£¬来支持公司各类业务对数据的需求£¬包括广告投放¡¢游戏开发¡¢社交网络等¡£
?#39029;?#36807;去事件的特征£¬最大的作用是可以帮助企业更好地认?#26029;?#36153;者¡£通过分析用户以往的行为轨迹£¬就能够了解这个人£¬并预测他的行为¡£¡°你可以知道他是什么样的人¡¢他的年纪¡¢兴趣爱好£¬是不是互联网付费用户¡¢?#19981;?#29609;什么类型的游戏£¬平常?#19981;?#22312;网上做什?#35789;?#24773;¡£¡±腾讯云计算有限公司北京研发?#34892;?#24635;经理郑立峰对¡¶第一财经周刊¡·说¡£下一步到了业务层面£¬就可以针对各类人?#21644;?#33616;相关服务£¬比如手游£¬或是基于不同特征和需求衍生出新的业务模式£¬比如微信的电影票业务¡£
2.预测未来可能发生的事情
通过引入关键因素£¬大数据工程师可以预测未来的消费趋势¡£在阿里妈妈的营销?#25945;?#19978;£¬工程师正试图通过引入气象数据来帮助?#21592;?#21334;家做生意¡£¡°比如今年夏天不热£¬很可能某些产品就没有去年畅销£¬除了空调¡¢电扇£¬背心¡¢游泳衣等都可能会受其影响¡£那?#27425;?#20204;就会建立气象数据和销售数据之间的关系£¬?#19994;?#19982;之相关的?#38450;à£?#25552;前警示卖家周转库存¡£¡±薛贵荣说¡£
在百度£¬沈志勇支持¡°百度预测¡±部分产品的模型研发£¬试图用大数据为更广泛的人群服务¡£已经上线的包括世界杯预测¡¢高考预测¡¢景点预测等¡£以百度景点预测为例£¬大数据工程师需要收集所有可能影响一?#38382;?#38388;内景点人流量的关键因素进行预测£¬并为全国各个景点未来的?#23548;范´_旨¶¡?#22312;接下来的若?#21830;?#26102;间里£¬它究竟是畅通¡¢?#23548;ÁP?#36824;是一般?#23548;ÁP?BR>3.?#39029;?#26368;优化的结果
根据不同企业的业务性质£¬大数据工程师可以通过数据分析?#21019;?#21040;不同的目的¡£
以腾讯来说£¬郑立峰认为能反映大数据工程师工作的最简单直接的例子就是选项测试£¨AB Test£©£¬即帮助产品经理在A¡¢B两个备选方案中做出选择¡£在过去£¬决策者只能依据经验进?#20449;?#26029;£¬但如今大数据工程师可以通过大范围地实时测试¡ª比如£¬在社交网络产品的例子中£¬让一半用户看到A界面£¬另一半使用B界面£¬观察统计一?#38382;?#38388;内的点击率和转化率£¬?#28304;?#24110;助市场部做出最终选择¡£
作为电商的阿里巴巴£¬则希望通过大数据锁定精准的人群£¬帮助卖家做更好的营销¡£¡°我们更期待的是你能?#19994;?#36825;样一批人£¬比起现有的用户£¬这些人对产品更?#34892;?#36259;¡£¡±薛贵荣说¡£一个?#21592;?#30340;?#36947;?#26159;£¬某人参卖家原来推广的目标人群是产妇£¬但工程师通过挖掘数据之间的关联性后发?#37073;?#38024;对孕妇群体投放的营销转化率更高¡£
需要具备的能力
1.数学及统计学相关的背景
就我们采访过的BAT三?#19968;?#32852;网大公司来说£¬对于大数据工程师的要求?#38469;?#24076;望是统计学和数学背景的硕士或博士学历¡£沈志勇认为£¬缺乏理论背景的数据工作者£¬更容易进入一个技能?#31995;?#21361;险区域£¨Danger Zone£©¡ª一堆数?#37073;?#25353;照不同的数据模型和算法总能?#24847;?#20986;一些结果来£¬但如果你不知道那代表什么£¬就并不是真正有意义的结果£¬并且那样的结果还容易误导你¡£¡°只有具备一定的理论知识£¬才能理解模型¡¢复用模型甚至创新模型£¬来解决实际问题¡£¡±沈志勇说¡£
2.计算机编码能力
实际开发能力和大规模的数据处理能力是作为大数据工程师的一些必备要素¡£¡°因为许多数据的价值来自于挖掘的过程£¬你必须亲自动手才能发现金子的价值¡£¡±郑立峰说¡£
举例来说£¬现在人们在社交网络上所产生的许多记?#32423;际?#38750;结构化的数据£¬如何从这些毫无头绪的文字¡¢语音¡¢图像甚至视频中攫取有意义的信息就需要大数据工程师亲自挖掘¡£即使在某些团队中£¬大数据工程师的职责以商业分析为主£¬但也要熟悉计算机处理大数据的方式¡£
3.对特定应用领域或行业的知识
在颜莉萍£¨Nicole Yan£©看来£¬大数据工程师这个角色很重要的一点是£¬不能脱离市场£¬因为大数据只有和特定领域的应用结合起来才能产生价值¡£所以£¬在某个或多个垂直行业的经历能为应?#21018;?#31215;累对行业的认知£¬对于之后成为大数据工程师有很大帮助£¬因此这也是应聘这个岗位时较有说服力的加分项¡£
¡°他不能只是懂得数据£¬还要有商业头脑£¬不论对零售¡¢医药¡¢游戏还是旅游等行业£¬能?#25512;?#20013;某些领域有一定的理解£¬最好还是与公司的业务方向一致的£¬?#26412;?#27492;薛贵荣还打了个比方£¬¡°过去我们说一些奢侈?#36820;?#21592;?#35780;û£?#30475;人一眼就知道买得起买不起£¬但这群人恰恰是有敏锐度的£¬我们认为他们是这个行业的专家¡£又比如对医疗行业了解的人£¬他在考虑医疗保险业务时£¬不仅会和人们医院看病的记录相关£¬?#19981;?#32771;?#19988;?#39135;数据£¬这些?#38469;?#22522;于对该领域的了解¡£¡±
职业发展1.如何成为大数据工程师
由于目前大数据人才匮乏£¬对于公司来说£¬很难招聘到合适的人才¡ª既要有高学历£¬同时最好还有大规模数据处理经验¡£因此很多企业会通过内部挖掘¡£
2014年8月£¬阿里巴巴举办了一个大数据竞赛£¬把天猫?#25945;¨É系?#25968;据拿出来£¬去除敏感问题后£¬放到云计算?#25945;?#19978;交予7000多支队伍进行比赛£¬比赛分为内部赛和外部赛¡£¡°通过这个方式来激励内部员工£¬同时也发现外部人才£¬让各行业的大数据工程师涌现出来¡£¡±
颜莉萍£¨Nicole Yan£©建议£¬目前长期从事数据库管理¡¢挖掘¡¢编程工作的人£¬包括传统的量化分析师¡¢Hadoop方面的工程师£¬以及任何在工作?#34892;?#35201;通过数据来进?#20449;?#26029;决策的管理者£¬比如某些领域的运营经理等£¬都可以尝试该职位£¬而各个领域的达人只要学会运用数据£¬也可以成为大数据工程师¡£
2.薪酬待遇
作为IT类职业中的¡°大熊猫?#20445;?#22823;数据工程师的收入待遇可以说达到?#36865;?#31867;的顶级¡£根据颜莉萍£¨Nicole Yan£©的观察£¬国内IT¡¢通讯¡¢行业招聘中£¬有10%?#38469;?#21644;大数据相关的£¬且比例还在上升¡£¡°大数据时代的到来很突然£¬在国内发展势头激进£¬而人才却非常有限£¬现在完全是供不应求的状况¡£¡±在美国£¬大数据工程师平均每年薪酬高达17.5万美元£¬而据了解£¬在国内顶尖互联网类公司£¬同一个级别大数据工程师的薪酬可能要比其他职位高20%至30%£¬且颇受企业重?#21360;?BR>3.职业发展路径
由于大数据人才数量较少£¬因此大多数公司的数据部门一般?#38469;?#25153;?#20132;?#30340;层级模式£¬大致分为数据分析师¡¢资深研究员¡¢部门总监3个级别¡£大公司可能按照应用领域的维度来划分不同团队£¬而在小公司则需要身兼数职¡£有些特别强调大数据战略的互联网公司则会另设最高职位¡ª如阿里巴巴的首席数据官¡£¡°这个职位的大部分人会往研究方向发展£¬成为重要数据战略人才¡£¡±另一方面£¬大数据工程师对商业和产品的理解£¬并不亚于业务部门员工£¬因此也可转向产品部或市场部£¬乃至上升为公司的高级管理层¡£
   上一篇£º大数据工程师职业发展如何£¿...
   下一篇£º如何区分职称.职业资格,执业资格.专项职业能力证书.上岗证(操作证)...
联系我们 | 培训合作 | 法律声明 | 网站律师

版权所有:国家职业教育工作网      主办单位£º北京蓝源国际企业管理有限公司£¨固安蓝源企业管理咨询有限公司£© 

 地址£º北京大兴工业开发区金苑路3号金融大厦D20室    总公司办公地址£º北京市国家新?#25945;?#20135;业基地A座£¨星光影视园£© 

电话£º010-83639113 13366366766  工信部备案号£º京ICP备10209633号-3   公安备案号£º11011502002929  

       工业和信息化部教育与?#38469;žÄ行?#22823;数据项目实训基地战略合作单位    工业和信息化部教育与?#38469;žÄ行ÄBIM专业技能项目?#34892;?nbsp; 全国职业信用评价网授权信息采集单位

京公网安备 11011502002929号

²©¹·ÓéÀÖ³Ç
<del id="ztp9h"><th id="ztp9h"></th></del>
<span id="ztp9h"></span>
<cite id="ztp9h"><ins id="ztp9h"><listing id="ztp9h"></listing></ins></cite><strike id="ztp9h"><i id="ztp9h"></i></strike>
<strike id="ztp9h"></strike>
<span id="ztp9h"><i id="ztp9h"><del id="ztp9h"></del></i></span><strike id="ztp9h"></strike>
<strike id="ztp9h"><dl id="ztp9h"><cite id="ztp9h"></cite></dl></strike>
<span id="ztp9h"><dl id="ztp9h"></dl></span>
<th id="ztp9h"></th>
<ruby id="ztp9h"><i id="ztp9h"></i></ruby>
<ruby id="ztp9h"><dl id="ztp9h"><del id="ztp9h"></del></dl></ruby><strike id="ztp9h"><dl id="ztp9h"></dl></strike>
<strike id="ztp9h"></strike>
<del id="ztp9h"><th id="ztp9h"></th></del>
<span id="ztp9h"></span>
<cite id="ztp9h"><ins id="ztp9h"><listing id="ztp9h"></listing></ins></cite><strike id="ztp9h"><i id="ztp9h"></i></strike>
<strike id="ztp9h"></strike>
<span id="ztp9h"><i id="ztp9h"><del id="ztp9h"></del></i></span><strike id="ztp9h"></strike>
<strike id="ztp9h"><dl id="ztp9h"><cite id="ztp9h"></cite></dl></strike>
<span id="ztp9h"><dl id="ztp9h"></dl></span>
<th id="ztp9h"></th>
<ruby id="ztp9h"><i id="ztp9h"></i></ruby>
<ruby id="ztp9h"><dl id="ztp9h"><del id="ztp9h"></del></dl></ruby><strike id="ztp9h"><dl id="ztp9h"></dl></strike>
<strike id="ztp9h"></strike>