1. 大数据的就业岗位有哪些
大数据岗位高薪清单对于求职者来说,大数据只是所从事事业的一个方向,而职业岗位则是决定做什么事?大数据从业者/求职者可以根据自身所学技术及兴趣特征,选择一个适合自己的大数据相关岗位。下面为大家介绍十种与大数据相关的热门岗位。
1 ETL研发企业数据种类与来源的不断增加,对数据进行整合与处理变得越来越困难,企业迫切需要一种有数据整合能力的人才。ETL开发者这是在此需求基础下而诞生的一个职业岗位。ETL人才在大数据时代炙手可热的原因之一是:在企业大数据应用的早期阶段,Hadoop只是穷人的ETL
2 Hadoop开发随着数据规模不断增大,传统BI的数据处理成本过高企业负担加重。而Hadoop廉价的数据处理能力被重新挖掘,企业需求持续增长。并成为大数据人才必须掌握的一种技术。
3 可视化工具开发可视化开发就是在可视化工具提供的图形用户界面上,通过操作界面元素,有可视化开发工具自动生成相关应用软件,轻松跨越多个资源和层次连接所有数据。过去,数据可视化属于商业智能开发者类别,但是随着Hadoop的崛起,数据可视化已经成了一项独立的专业技能和岗位。
4 信息架构开发大数据重新激发了主数据管理的热潮。充分开发利用企业数据并支持决策需要非常专业的技能。信息架构师必须了解如何定义和存档关键元素,确保以最有效的方式进行数据管理和利用。信息架构师的关键技能包括主数据管理、业务知识和数据建模等。
5 数据仓库研究为方便企业决策,出于分析性报告和决策支持的目的而创建的数据仓库研究岗位是一种所有类型数据的战略集合。为企业提供业务智能服务,指导业务流程改进和监视时间、成本、质量和控制。
6 OLAP开发OLAP在线联机分析开发者,负责将数据从关系型或非关系型数据源中抽取出来建立模型,然后创建数据访问的用户界面,提供高性能的预定义查询功能。
7 数据科学研究数据科学家是一个全新的工种,能够将企业的数据和技术转化为企业的商业价值。随着数据学的进展,越来越多的实际工作将会直接针对数据进行,这将使人类认识数据,从而认识自然和行为。8 数据预测分析营销部门经常使用预测分析预测用户行为或锁定目标用户。预测分析开发者有些场景看上有有些类似数据科学家,即在企业历史数据的基础上通过假设来测试阈值并预测未来的表现。
8 数据预测分析营销部门经常使用预测分析预测用户行为或锁定目标用户。预测分析开发者有些场景看上有有些类似数据科学家,即在企业历史数据的基础上通过假设来测试阈值并预测未来的表现。
9 企业数据管理企业要提高数据质量必须考虑进行数据管理,并需要为此设立数据管家职位,这一职位的人员需要能够利用各种技术工具汇集企业周围的大量数据,并将数据清洗和规范化,将数据导入数据仓库中,成为一个可用的版本。
10 数据安全研究数据安全这一职位,主要负责企业内部大型服务器、存储、数据安全管理工作,并对网络、信息安全项目进行规划、设计和实施。
2. 招聘信息数据通过大数据分析平台重点分析以下几点
职位区域分布,职位薪资区间分布,职位相关公司的福利,职位相关技能要求。
具体分析如下:
1、分析大数据职位的区域分布情况。
2、分析大数据职位薪资区间分布情况。
3、分析大数据职位相关公司的福利情况。
分析大数据职位相关技能要求情况。
3. 之前我在百度招聘上搜索过司机的岗位,这两天无缘无故的发来一条百度招聘的短信它是怎么知道我的手机号的
现在都是大数据时代,网上随便一比对,只能手机权限的拉取,相关工作人员职业道德底线太低都会遭成数据外泄。
4. 大数据行业有哪些工作机会,招聘的岗位技能有哪些
想要学习大数据开发,第一件事并不是要找书籍或者是找视频教程,而是要了解一下大数据行业前景,了解一下成为大数据工程师需要具备什么样的能力,掌握哪些技能我当初学习大数据之前也有过这样的问题,作为一个过来人,今天就跟大家聊下大数据人才应该具备的技能。
首先我们要知道对于大数据开发工程师需要具备的技能,下面我们分别来说明:
用人单位对于大数据开发人才的能力要求有
技能要求:
1.精通JAVA开发语言,同时熟悉Python、Scala开发语言者优先;
2.熟悉Spark或Hadoop生态圈技术,具有源码阅读及二次开发工作经验;精通Hadoop生态及高性能缓存相关的各种工具,有源码开发实战经验者优先;
3.熟练使用SQL,熟悉数据库原理,熟悉至少一种主流关系型数据库;熟悉Linux操作系统,熟练使用常用命令,熟练使用shell脚本;熟悉ETL开发,能熟练至少一种ETL(talend、kettle、ogg等)转化开源工具者优先;
4.具有清晰的系统思维逻辑,对解决行业实际问题有浓厚兴趣,具备良好的沟通协调能力及学习能力。
以上就是想要成为大数据人才需要具备的技能
那么如何具备这些能力,怎么学习了,对于大多数人来说,目前只有通过参加大数据的学习,才能够系统的掌握以上的大数据技能,从而胜任大数据工程师的工作。
5. “大数据”时代下的企业招聘
“大数据”时代下的企业招聘
在原有的人才数据库的基础上,导入以社交媒体为代表的“大数据”将使H R (人力资源部门)做聘用决策时更客观。
数据,对于企业的H R 来说并不陌生,从最开始通过招聘搜集员工信息,到能力测评,以及年度、季度的绩效考评,日积月累的数据不可谓不大,但是真正将这些数据整理分析,提供给人才管理者做决策的企业却并不多见。然而,不管你用不用,这些数据还在增大,而且,随着新技术的出现和普及,移动设备和社交媒体也加入到企业招聘的渠道中。如何充分利用这些数据以便更有效地支持人力资源管理工作?目前企业利用人才数据的现状如何?人才“大数据”应用的前景是怎样的?针对这些问题,德勤华永会计师事务所中国区人力资源部招聘总监王文佶和SHL 中国区总经理付权分别从企业实践和调研分析的角度阐述了各自的看法。
从“小数据”说起
世界经理人:SHL发布的《2013 年全球评测趋势报告》显示,企业在利用人才‘大数据’方面还处于起步阶段。这里提到的‘大数据’概念跟以前企业在招聘中运用的人才数据有何不同?
王文佶:其实数据一直存在,HR招聘过程本身就涉及很多数据,从应聘者的简历、笔试到面试都包含很多评分(rating)。但相比较现在所说的大数据,我们把这些称为小数据。所谓小数据就是按照某个业务流程目标,预先设定一些甄选标准,通过抽样的方法来判断整个流程是否符合你的需要,通过数据来研究。
德勤也有人才分析数据,但基本都是基于怎样利用好现有的小数据,就是把原来从不同部门或不同领域采集来的本身结构化的数据,录入数据仓库( Data Warehouse),并进行数据挖掘( Data Mining)。比如,德勤有一个候选人跟进系统—ATS (Applicant Tracking System),只要应聘者投递简历,他的信息就会进入德勤的全球人才库,现在约有30 0 万人的信息。这个数据库可以在德勤的各个跨国公司之间共享。德勤中国可以利用这个数据库寻找美国德勤吸引来的人。这是一个巨大的人才数据库或者候选人数据库,我们可以经常进行数据挖掘。
另外,德勤也在用SH L 专门的工具叫做人才数据与结构分析(Talent Analytics),它从数据的体量上来讲更大。比如,SHL能对所有应聘财务的学生,在全球范围做各种比对和分析,从而分析出一种趋势,我们将这种趋势称之为对标。当一家企业想确定今年招收员工的整体质量时,SHL 的数据可以帮我们横向地跟全世界、亚洲或者其他竞争公司的情况做比较。
但是,我认为真正的大数据是研究非结构化数据,而非通过某一个特定目标、一个已经设定的标准去采集。当大数据来临,产生的最主要的区别在于:大数据可以通过某种机器的手段,更多地采集候选人非结构化的、自然的、在社交媒体和网络上的信息,来辅佐目前已有的结构化数据,并帮助进行判断。如果能做到这些,那么招聘决策就会更加准确。
付权:以前的数据来源于调查研究。假如美联社的薪酬数据来源于针对不同企业的HR所做的调研报告,内容可能包括今年不同岗位的薪酬涨幅如何,然后通过某个公司进行有效的数据处理后,便得出这个行业的薪酬基准( Bench mark)。但现在的数据来源于每个人与整个数据采集机构直接的互动。比如LinkedIn就是这样的数据采集机构,上面的数据是使用者作为个体自发提供的,而LinkedIn 同时也有社交媒体(Social Media) 的概念,所以它的数据是准确可信的。LinkedIn不仅仅是一个社交媒体,也是建立企业人才库(Talent Pool) 的有效工具。
无论是大数据还是过去的小数据,它们的功能是一致的,就是对业绩进行有效预测( Predict Performance)。举例来说,一个应聘者加入新公司,就需要接受测试,因为公司并不了解他。这就需要一个信效度较高的测试来判断该应聘者是否符合这个企业的文化和业绩目标,以及能否跟同事友好相处,互相促进。测试的种类非常多,但所有目的都是为了预测业绩。世界经理人:所谓小数据的分析是怎样运用到招聘和人才决策中去的?
王文佶:从校招和社招两个角度来说。在校招方面,我们不是针对个人,而主要是针对整体进行分析。比如根据现在业务的需要,可能分析得出不一定非要招财务背景的学生做审计。通过小数据分析,我们发现财经类和非财经类的同学在考CPA 的通过率方面没有差别,甚至非财务类的学生第一第二年的通过率更高。这个现象很奇怪,于是我们就找到培训部门一起研究这些数据,并分析出很多可能原因。
这也是小数据的局限,因为通过分析产生一个结论,这种结论不能严密地解答疑问,会产生很多可能性。比如可能非财务类的学生由于不懂,所以同样的课程花了更多精力,上进心和压力感都更强,因此他们的考试通过率更高;还可能是因为财经类的学生进来就能用,所以更多时候被派到项目上去,反而没时间预习功课。业务经理不愿意用非财经类新人,因为他们不能立刻上手,所以他们有更多的时间去复习。经过分析,这些情况都有可能,但无法得出确定的结论,但至少我们知道,招聘时不一定非要招审计和财经类的学生,这就是一个小数据的例子。
在社招方面,德勤目前更多是在人才吸引、渠道分布和广告有效性上做分析。对所有参加社招的人员,我们都会追踪其消息来源,是通过自投简历、猎头邀请,还是朋友推荐过来应聘的。就目前来说,德勤社招最得力的渠道是员工推荐,占整个最终招聘量的45%.于是,四五年前,我们把员工推荐的项目政策重新进行了改革,以提高大家的积极性。比如员工推荐的奖励金额从原来的半年后付一半、一年后付全额,改为了把人介绍过来就付一半、三个月后付全额。这样员工有很大积极性。
世界经理人:目前,企业HR对人才数据管理系统的重视程度偏低,或者说利用得不太好,是什么原因?王文佶:一个主要的原因可能是数据收集所需要的投入超出了数据分析所带来的实际收益,即投入产出不成比。比如德勤用过的人才招聘管理系统Taleo,它的一个功能是可以对所有筛选过的简历贴上各种标签,比如此人这个职位好像不合适,但也许他将来能适合其他职位,于是可以做一个标记,下次找的时候就可以调出来。但是从现实的角度来看,这些工具没有得到充分的利用。首先因为招聘官经常同时要管理十几个空缺职位,而能把这些职位完成是首要任务。如果有剩余时间或者找不到应聘者,他们才可能会花时间利用工具进行数据挖掘;第二个是技巧问题和工具方便性问题。另一方面,企业人力资源部门的职能条块分割,使得各项人才管理数据分别由不同的职能团队来收集和管理。比如薪酬团队的数据和培训团队的数据往往就不被招聘团队所掌握。现实的悖论往往是,大企业的HR有非常完善的HR职能团队和基础架构,可以收集到很多有用的数据,但是庞大的数据量和纵横交错的管理结构使得数据比较难以被有效利用,必须建立起一个项目团队来收集、整理、分析这些数据。
大数据是什么?
世界经理人:与小数据相比,大数据突破了哪些瓶颈?
付权:相对于大数据而言,通过调研得到的小数据可以从特殊到最后形成普遍的结论,却很难逆向推理—从共性中找出特殊。大数据是从特殊到一般来推理出共性,然后还能从一般到特殊,寻找到异类或者优秀人才所具有的特征,再把该特性标准化,从而形成了一个螺旋上升的推理。这是过去的小数据所缺少的。
此外,大数据可以让我们跟踪一个人的发展过程。比如,某位投资经理在十年的时间跨度内,尽管其能力可能变化不大,但个性可能会有所变化,他的动机可能逐渐降低或逐渐增加,技能和经验一定是在增加的。为了了解这个人所经历的变化,我们需要对他不同时段的评测数据进行有效的比对和分析,从而了解他的发展路径。这在以前的小数据时代是不存在的。
大数据应用最重要的是,第一,它改变了预测绩效的手段,以前是用小数据,现在是用大数据;第二,在人力资源领域里面,大数据为人才模型提供更为详尽、准确的数据支撑,更好地为企业管理人员所用,这非常重要。
世界经理人:与以前靠直觉来进行人才判断相比,依靠大数据进行判断是否会让决策过程越来越科学化?
付权:所谓直觉是通过阅人无数所产生的经验的第一反应,叫第一性原则。第一性原则的有效性是存疑的。有些情况下,由于巨大的文化差异,导致面试者的行为表现和表述方式都会非常不同,怎样透过这些表面看到他们的能力、个性、动机、技能和经验,这些都是无法通过直觉简单获取的。
大数据能够让人才选择更加客观、精确、容易。大数据为某位候选者的“画像”(profile)提供一个正确、准确的反射,去映射到人才模型上面,来判断他是否胜任这一职位。比如说通过评测数据,我们可以直观看到一个人的评测结果是66 分,另一个人是67 分,这种微妙的差距是通过肉眼和直觉无法判断的。而通过大数据,这就让人才选择更加容易和客观。
社交媒体展现真实的应聘者
世界经理人:越来越多的企业开始利用社交媒体网络来进行招聘,这对HR意味着什么?
王文佶:如同大数据在精准营销上的应用,现在用户在淘宝上搜过什么,一打开微博也会出现同类商品的推送,如果说在招聘上也是用同样的观念或方法,有一个例子是LinkedIn 会根据用户的社交信息,推送 “Maybe interesting in this job”的条目。这和电商运用的手段一样,根据过去的网络行为推断出你现在的需求。
德勤对社招和校招都做过这个画像,就是找到理想候选人应该具备什么样的能力素质,怎样描述,它包括候选人特征。而在大数据时代,这个画像里可能还要添加其他一些社交媒体的行为指标。在没有大数据和测评工具的情况下,高管的最终决策主要通过一起吃饭或一起去打高尔夫等活动,为了观察他们举手投足自然的表现。但我们不可能把这套方法运用到每个应聘者。如果运用大数据,只要符合一定的法律规范,是不是能获得每一个应聘者工作和社交行为( Work & Social Behavior) 相关信息呢?这时候公司有两种方法,一种是找第三方的背景调查公司,一种是询问其以前所在公司的高管。将来如果一个人在微博、LinkedIn等社交媒体上都很活跃,那么理论上,只要获得他的授权,或是几个简单的基本信息,就能通过某种机制浏览到他所有的网络行为,而这些行为只要整合起来,再与通过标准化方法收集的信息做比对,就有助于提高招聘质量。但实际上要做到这些很难。这是一个理想,但只要我们有这个愿景,我想早晚会实现,甚至大家最终会完全接受这种方法。
世界经理人:德勤是如何利用社交媒体进行招聘的?
王文佶:现在越来越多的大公司鼓励招聘团队自己直接、主动地去找人(Proactive Sourcing),也就是通过数据挖掘,通过自己建关系去找人。目前这种方式只占德勤总招聘量的7%,而我们的目标至少要达到15% 以上。
在这种情况下,以LinkedIn为代表的社交媒体起到了较大的作用。我们购买Linkedln专门的招聘者(recruiter) 帐号,它和个人帐号不同,使用招聘者账号就可以直接做数据挖掘,在Linkedln的350 万中国国内用户中直接搜索,甚至是在全球两亿四的用户中搜索。还有,利用公司员工的Linkedln账户带来更多企业曝光率。当有人点击这个人的LinkedIn账户时,其所在公司的招聘广告就会在旁边跳出来。这是一个最新的解决方案,借助员工的人脉做推广。微博、微信、大街网等则帮助我们进行雇主品牌和招聘信息的传播。
今年我们招聘团队特地开发了一个基于德勤人脉关系的任务众包平台:德勤聚力网(Deloit te Power House)。它的目标受众是德勤现员工、准员工、实习生、前员工以及任何有志加入德勤的潜在候选人。在这个平台上,用户可以发布众包任务去找帮手,找资源,拓人脉。通过朋友间的不断传递, 用户发布的任务项目得到解决的同时也积聚了人脉。 并且, 用户在网站上的每一次贡献都可以获得积分奖励。这个平台不仅可以帮助招聘,还能帮助每一个员工把他们的职业人脉打通,在这个平台上整合和强化他们自己的社交关系。
世界经理人:企业在利用社交媒体进行招聘方面遇到哪些问题?
王文佶:很多公司都喜欢利用社交媒体来扩大直接招聘( Direct Sourcing)。他们碰到的问题有两个:第一,投入和产出比的权衡问题(ROI)。建设和维护社交媒体需要更多的管理投入,包括人员和资金,但社交媒体的效果不能也不应该仅用找到几个人来衡量;第二,使用技巧问题。招聘官的主要职责是筛选简历并对应聘者进行评测。但是要管理社交媒体这一平台,要求的技能是如何做市场营销,如何吸引被动候选人并说服他们加入。
大部分现有的招聘官缺乏这方面的技巧和思维方式,需要很多学习培训。
所以,现在用社交媒体最多的是猎头,他们有这个技能,知道如何找到候选人,激发他们的工作热情,把工作机会销售给他。企业内部HR 在社交媒体的使用方面相对较弱。
此外,当我们利用社交媒体数据进行数据分析时,也会遇到一些技术和法律问题,比如扫描社交媒体数据是一个新兴技术,大数据分析的方法到底是否可靠、能否实现;对使用个人信息的法律限制和壁垒在哪;隐私权应该怎么保护?目前在这些方面还有很多不清晰的地方。
6. 大数据就业岗位有哪些
大数据就业的岗位:ETL研发、Hadoop开发、信息架构开发、数据安全研究。
1、ETL负责将分布的、异构数据源中的数据如关系数据、平面数据文件等抽取到临时中间层后进行清洗、转换、集成,最后加载到数据仓库或数据集市中,成为联机分析处理、数据挖掘的基础。
3、信息架构文件是统筹安排信息的基础,这些统筹安排主要集中在搭建某个特殊产品、一套产品或单个产品的信息架构。除了信息架构和信息规划外还有信息设计,它主要就是为支持信息架构和规划而进行的实际操作活动。
4、数据安全研究:数据安全这一职位,主要负责企业内部大型服务器、存储、数据安全管理工作,并对网络、信息安全项目进行规划、设计和实施。
7. 大数据可视化招聘岗位职责有哪些
大数据可视化招聘岗位职责:负责大数据项目前端展示模式规划构思和创意设计。 负责提供大数据可视化部分合理化的设计解决方案。 持续的优化相关的大数据可视化内容的质量、性能、用户体验。负责输出高质量可视化设计图,与开发团队充分沟通协作,确认可控的误差范围和视觉效果的最终实现,有较强的设计执行力。
岗位要求:
有良好的美术功底和优秀的创意、审美、实现能力,能把设计风格和专题、产品特色进行有效的结合;
具备C/S、B/S界面设计经验;
分析业务需求,并加以分解归纳出产品人机交互界面需求,熟练使用原型制作工具;
研发团队紧密协作,积极地推进视觉设计的产品化;
精通Photoshop/AI等常用设计制作软件,对图片渲染和视觉效果有较好认识;
了解html,div+css等网页编辑语言和规范标准的优先;
有大数据行业经验者优先考虑。
8. 大数据岗位招聘靠谱吗
这就是培训机构拉人的办法之一,我当年也上过当的。
9. 谁能做大数据工程师
大数据是眼下非常时髦的技术名词,与此同时自然也催生出了一些与大数据处理相关的职业,通过对数据的挖掘分析来影响企业的商业决策。
这群人在国外被叫做数据科学家(Data Scientist),这个头衔最早由D.J.Pati和Jeff Hammerbacher于2008年提出,他们后来分别成为了领英(LinkedIn)和Facebook数据科学团队的负责人。而数据科学家这个职位目前也已经在美国传统的电信、零售、金融、制造、物流、医疗、教育等行业里开始创造价值。
不过在国内,大数据的应用才刚刚萌芽,人才市场还不那么成熟,“你很难期望有一个全才来完成整个链条上的所有环节。更多公司会根据自己已有的资源和短板,招聘能和现有团队互补的人才。”领英(LinkedIn)中国商务分析及战略总监王昱尧对《第一财经周刊》说。
于是每家公司对大数据工作的要求不尽相同:有的强调数据库编程、有的突出应用数学和统计学知识、有的则要求有咨询公司或投行相关的经验、有些是希望能找到懂得产品和市场的应用型人才。正因为如此,很多公司会针对自己的业务类型和团队分工,给这群与大数据打交道的人一些新的头衔和定义:数据挖掘工程师、大数据专家、数据研究员、用户分析专家等都是经常在国内公司里出现的Title,我们将其统称为“大数据工程师”。
王昱尧认为,在一个成熟的数据驱动型公司,“大数据工程师”往往是一个团队,它意味着从数据的收集、整理展现、分析和商业洞察、以至于市场转化的全过程。这个团队中可能包括数据工程师、分析师、产品专员、市场专员和商业决策者等角色,共同完成从原始数据到商业价值的转换—概括来讲,这是一个支持企业做出商业决策、发掘商业模式的重要群体。
由于国内的大数据工作还处在一个有待开发的阶段,因此能从其中挖掘出多少价值完全取决于工程师的个人能力。已经身处这个行业的专家给出了一些人才需求的大体框架,包括要有计算机编码能力、数学及统计学相关背景,当然如果能对一些特定领域或行业有比较深入的了解,对于其快速判断并抓准关键因素则更有帮助。
虽然对于一些大公司来说,拥有硕博学历的公司人是比较好的选择,不过阿里巴巴集团研究员薛贵荣强调,学历并不是最主要的因素,能有大规模处理数据的经验并且有喜欢在数据海洋中寻宝的好奇心会更适合这个工作。
除此之外,一个优秀的大数据工程师要具备一定的逻辑分析能力,并能迅速定位某个商业问题的关键属性和决定因素。“他得知道什么是相关的,哪个是重要的,使用什么样的数据是最有价值的,如何快速找到每个业务最核心的需求。”联合国网络大数据联合实验室数据科学家沈志勇说。学习能力能帮助大数据工程师快速适应不同的项目,并在短时间内成为这个领域的数据专家;沟通能力则能让他们的工作开展地更顺利,因为大数据工程师的工作主要分为两种方式:由市场部驱动和由数据分析部门驱动,前者需要常常向产品经理了解开发需求,后者则需要找运营部了解数据模型实际转化的情况。
你可以将以上这些要求看做是成为大数据工程师的努力方向,因为根据万宝瑞华管理合伙人颜莉萍的观察,这是一个很大的人才缺口。目前国内的大数据应用多集中在互联网领域,有超过56%的企业在筹备发展大数据研究,“未来5年,94%的公司都会需要数据科学家。”颜莉萍说。因此她也建议一些原本从事与数据工作相关的公司人可以考虑转型。
本期《第一财经周刊》采访了BAT这3家国内互联网公司,以及相关领域的人力资源专家,他们从职场角度为我们解读如何成为大数据工程师以及这类岗位的职场现状。
A 大数据工程师做什么?
用阿里巴巴集团研究员薛贵荣的话来说,大数据工程师就是一群“玩数据”的人,玩出数据的商业价值,让数据变成生产力。大数据和传统数据的最大区别在于,它是在线的、实时的,规模海量且形式不规整,无章法可循,因此“会玩”这些数据的人就很重要。
沈志勇认为如果把大数据想象成一座不停累积的矿山,那么大数据工程师的工作就是,“第一步,定位并抽取信息所在的数据集,相当于探矿和采矿。第二步,把它变成直接可以做判断的信息,相当于冶炼。最后是应用,把数据可视化等。”
因此分析历史、预测未来、优化选择,这是大数据工程师在“玩数据”时最重要的三大任务。通过这三个工作方向,他们帮助企业做出更好的商业决策。
找出过去事件的特征
大数据工程师一个很重要的工作,就是通过分析数据来找出过去事件的特征。比如,腾讯的数据团队正在搭建一个数据仓库,把公司所有网络平台上数量庞大、不规整的数据信息进行梳理,总结出可供查询的特征,来支持公司各类业务对数据的需求,包括广告投放、游戏开发、社交网络等。
找出过去事件的特征,最大的作用是可以帮助企业更好地认识消费者。通过分析用户以往的行为轨迹,就能够了解这个人,并预测他的行为。“你可以知道他是什么样的人、他的年纪、兴趣爱好,是不是互联网付费用户、喜欢玩什么类型的游戏,平常喜欢在网上做什么事情。”腾讯云计算有限公司北京研发中心总经理郑立峰对《第一财经周刊》说。下一步到了业务层面,就可以针对各类人群推荐相关服务,比如手游,或是基于不同特征和需求衍生出新的业务模式,比如微信的电影票业务。
预测未来可能发生的事情
通过引入关键因素,大数据工程师可以预测未来的消费趋势。在阿里妈妈的营销平台上,工程师正试图通过引入气象数据来帮助淘宝卖家做生意。“比如今年夏天不热,很可能某些产品就没有去年畅销,除了空调、电扇,背心、游泳衣等都可能会受其影响。那么我们就会建立气象数据和销售数据之间的关系,找到与之相关的品类,提前警示卖家周转库存。”薛贵荣说。
在网络,沈志勇支持“网络预测”部分产品的模型研发,试图用大数据为更广泛的人群服务。已经上线的包括世界杯预测、高考预测、景点预测等。以网络景点预测为例,大数据工程师需要收集所有可能影响一段时间内景点人流量的关键因素进行预测,并为全国各个景点未来的拥挤度分级—在接下来的若干天时间里,它究竟是畅通、拥挤,还是一般拥挤?
找出最优化的结果
根据不同企业的业务性质,大数据工程师可以通过数据分析来达到不同的目的。
以腾讯来说,郑立峰认为能反映大数据工程师工作的最简单直接的例子就是选项测试(AB Test),即帮助产品经理在A、B两个备选方案中做出选择。在过去,决策者只能依据经验进行判断,但如今大数据工程师可以通过大范围地实时测试—比如,在社交网络产品的例子中,让一半用户看到A界面,另一半使用B界面,观察统计一段时间内的点击率和转化率,以此帮助市场部做出最终选择。
作为电商的阿里巴巴,则希望通过大数据锁定精准的人群,帮助卖家做更好的营销。“我们更期待的是你能找到这样一批人,比起现有的用户,这些人对产品更感兴趣。”薛贵荣说。一个淘宝的实例是,某人参卖家原来推广的目标人群是产妇,但工程师通过挖掘数据之间的关联性后发现,针对孕妇群体投放的营销转化率更高。
B 需要具备的能力
数学及统计学相关的背景
就我们采访过的BAT三家互联网大公司来说,对于大数据工程师的要求都是希望是统计学和数学背景的硕士或博士学历。沈志勇认为,缺乏理论背景的数据工作者,更容易进入一个技能上的危险区域(Danger Zone)—一堆数字,按照不同的数据模型和算法总能捯饬出一些结果来,但如果你不知道那代表什么,就并不是真正有意义的结果,并且那样的结果还容易误导你。“只有具备一定的理论知识,才能理解模型、复用模型甚至创新模型,来解决实际问题。”沈志勇说。
计算机编码能力
实际开发能力和大规模的数据处理能力是作为大数据工程师的一些必备要素。“因为许多数据的价值来自于挖掘的过程,你必须亲自动手才能发现金子的价值。”郑立峰说。
举例来说,现在人们在社交网络上所产生的许多记录都是非结构化的数据,如何从这些毫无头绪的文字、语音、图像甚至视频中攫取有意义的信息就需要大数据工程师亲自挖掘。即使在某些团队中,大数据工程师的职责以商业分析为主,但也要熟悉计算机处理大数据的方式。
对特定应用领域或行业的知识
在颜莉萍看来,大数据工程师这个角色很重要的一点是,不能脱离市场,因为大数据只有和特定领域的应用结合起来才能产生价值。所以,在某个或多个垂直行业的经历能为应聘者积累对行业的认知,对于之后成为大数据工程师有很大帮助,因此这也是应聘这个岗位时较有说服力的加分项。
“他不能只是懂得数据,还要有商业头脑,不论对零售、医药、游戏还是旅游等行业,能就其中某些领域有一定的理解,最好还是与公司的业务方向一致的,”就此薛贵荣还打了个比方,“过去我们说一些奢侈品店员势利,看人一眼就知道买得起买不起,但这群人恰恰是有敏锐度的,我们认为他们是这个行业的专家。又比如对医疗行业了解的人,他在考虑医疗保险业务时,不仅会和人们医院看病的记录相关,也会考虑饮食数据,这些都是基于对该领域的了解。”
C 大数据工程师的职业发展
如何成为大数据工程师
由于目前大数据人才匮乏,对于公司来说,很难招聘到合适的人才——既要有高学历,同时最好还有大规模数据处理经验。因此很多企业会通过内部挖掘。
今年8月,阿里巴巴举办了一个大数据竞赛,把天猫平台上的数据拿出来,去除敏感问题后,放到云计算平台上交予7000多支队伍进行比赛,比赛分为内部赛和外部赛。“通过这个方式来激励内部员工,同时也发现外部人才,让各行业的大数据工程师涌现出来。”
颜莉萍建议,目前长期从事数据库管理、挖掘、编程工作的人,包括传统的量化分析师、Hadoop方面的工程师,以及任何在工作中需要通过数据来进行判断决策的管理者,比如某些领域的运营经理等,都可以尝试该职位,而各个领域的达人只要学会运用数据,也可以成为大数据工程师。
薪酬待遇
作为IT类职业中的“大熊猫”,大数据工程师的收入待遇可以说达到了同类的顶级。根据颜莉萍的观察,国内IT、通讯、行业招聘中,有10%都是和大数据相关的,且比例还在上升。颜莉萍表示,“大数据时代的到来很突然,在国内发展势头激进,而人才却非常有限,现在完全是供不应求的状况。”在美国,大数据工程师平均每年薪酬高达17.5万美元,而据了解,在国内顶尖互联网类公司,同一个级别大数据工程师的薪酬可能要比其他职位高20%至30%,且颇受企业重视。
职业发展路径
由于大数据人才数量较少,因此大多数公司的数据部门一般都是扁平化的层级模式,大致分为数据分析师、资深研究员、部门总监3个级别。大公司可能按照应用领域的维度来划分不同团队,而在小公司则需要身兼数职。有些特别强调大数据战略的互联网公司则会另设最高职位—如阿里巴巴的首席数据官。“这个职位的大部分人会往研究方向发展,成为重要数据战略人才。”颜莉萍说。另一方面,大数据工程师对商业和产品的理解,并不亚于业务部门员工,因此也可转向产品部或市场部,乃至上升为公司的高级管理层。
10. 招聘网站
建议你还是去 去以下中国最顶尖 的网站注册你的简历就可以了,能找到很多的企业:
www.zhaopin.com 智联招聘,最近打很多广告,确实不错
www.cjol.com 中国人才热线,老牌网站,信息多,大公司多
www.51job.com 他最大的特色就是有传统报纸的求职招聘版块跟他一起配套宣传。很多HR经理不一定是非得上网招人的,基本走了网络加传统的线路。
当然,你可以根据你所在的地区上一些地方求职网站.
如果你是行业比较特殊或者不是大众职位的,你可以上一些分类招聘网站,比如http://www.job36.com/
个人推荐。1.www.51job.com 2.www.cjol.com 3.www.zhaopin.com