大数据时代十大热门IT工作

大数据时代十大热门IT工作

十大热门IT工作大数据时代,新思想催生新技术,从而创造出很多新词汇,比如云计算、大数据、BYOD、社交媒体、3D打印机、物联网...互联网时代,各种新词层出不穷,令人应接不暇。这些新技术、新兴应用和相应的IT发展趋势,使得IT人员有必要了解甚至掌握最新的IT技能。另一方面,推动各行业发展的云计算、大数据等IT基础设施的新一轮部署和运维,将带来更多的IT岗位及相关技能和技术需求。

毫无疑问,这些新趋势的到来将催生一批新的工作岗位,如数据挖掘专家、移动应用开发和测试、算法工程师、商业智能分析师等。同时也将强化原有工作岗位的新活力,如网络工程师、系统架构师、顾问、数据库管理与开发等。以下是反映在十大IT技能中的工作:

一、算法工程师

何万青博士曾经介绍过三种又快又好地做一件事情的方法,其中提到了“提高流水线效率,更好的算法,更短的代码关键路径”可以看出,算法对系统效率起着重要的作用。算法就是让机器按照人类想象的方式解决问题。算法很大程度上取决于问题的类型和工程师对机器编程的理解,其效率与算法密切相关。

在数学和计算机科学中,算法是计算的一个具体步骤,常用于计算、数据处理和自动推理。在大数据时代,算法的功能和作用进一步凸显。比如针对公司搜索业务开发搜索相关算法和排名算法。针对公司海量的用户行为数据和用户意图,设计一个数据挖掘算法。

算法工程师按研究领域分为音频/视频算法处理、图像技术中的二维信息算法处理和通信物理层的一维信息算法处理、雷达信号处理、生物医学信号处理等领域。此外,体现大数据发展方向的数据挖掘和互联网搜索算法近年来越来越流行,算法工程师也逐渐向人工智能方向发展。

第二,商业情报分析师

从算法工程师延伸出来的商业智能,尤其是在大数据领域,已经越来越热。IT职业和咨询服务公司Bluewolf曾发布报告指出,IT岗位需求增长最快的是移动、数据、云服务和面向用户的技术人员,其中具体岗位包括一名商业智能分析师。

商业智能分析师往往需要精通数据库知识和统计分析能力,能够使用商业智能工具识别或监控现有和潜在客户。收集商业情报数据,提供行业报告,分析技术的发展趋势,确定市场未来的产品发展策略或改善现有产品的销售。

商业智能和逻辑分析能力在大数据时代尤为重要。在未来的IT职场中,具备业务知识和强大的数据、数学分析背景的IT人才将更受大企业青睐。然而,这些技能并不是普遍具备的。一些公司目前正在招聘统计人员,并向他们传授技术和商业知识。

第三,数据挖掘工程师

数据挖掘工程师也可以称为“数据挖掘专家”。数据挖掘是通过分析每一个数据,从大量数据中发现其规律的技术。数据挖掘是一个决策支持过程,主要基于人工智能、机器学习、模式识别、统计学、数据库、可视化技术等。它对自动化程度较高的企业数据进行分析,进行归纳推理,从中挖掘潜在模式,帮助决策者调整市场策略,降低风险,做出正确决策。

数据挖掘专家或数据挖掘工程师掌握的技能可以快速为他们创造财富。当时,亚马逊的第一位数据挖掘工程师大卫·塞林格(David Selinger)创立的数据挖掘公司向在线零售商和广告供应商出售了一个类似于亚马逊的产品推荐引擎系统,这个产品推荐引擎系统成为了亚马逊历史上最赚钱的工具。由此可见数据挖掘的价值。

四。顾问(专家)

任何一个业务部门,任何一个行业企业,背后都有IT系统。在云计算和大数据时代,业务面临的挑战和机遇也会给IT系统带来更多的要求。在这种情况下,IT系统的规划、部署、运维需要更精通的专业人员来胜任,满足未来大数据分析和云计算服务应用的需求。

纽约montefioremedical中心副主席JackWolf曾表示,他正在寻找新员工,这些员工不仅要设置和使用该系统,还要给其他员工提供技术支持。他说,“新系统意味着你必须有更多的咨询台来处理更多的咨询。”当然,这里主要体现的是某个系统的技术支持功能,但不难发现,无论是部署初期的物资采购,还是运维过程中的良好建议,都凸显了这类技术顾问的重要性。

动词 (verb的缩写)网络工程师

网络工程师可以说是一个“青葱常青”的职业,网络技术一直是急需的。根据美国人力资源公司Robert Half International第三季度IT招聘指数和技能报告,网络管理在总需求技能中排名第二。对于云计算时代,网络在云资源池(计算、存储、网络)中扮演着更加重要的角色。

另一方面,随着IPv6标准、物联网和移动互联网的快速发展,对网络工程师尤其是新型网络工程师(移动、IPv6和云计算)的人才和技能要求越来越高。所以网络工程师可以细分为几个发展方向,对应的技能要求也各有侧重。比如网络安全、网络存储、架构设计、移动网络等等。

六、移动应用开发工程师

随着移动互联网时代的到来,移动应用开发将变得更加受欢迎。截至2012年底,我国手机用户10亿,移动智能终端用户超4亿,在移动支付、移动购物、移动旅游、移动社交等领域涌现出大量移动互联网游戏、应用和创业公司。

移动平台上的智能系统很多,但真正有影响力的不外乎iOS、Android、WP、黑莓等。手机平台上出现了大量的PC和互联网上的信息应用和互联网应用,一些前所未见的新奇应用也开始出现并与日俱增。

移动应用开发,因为有多个平台系统,不同的平台开发者面临不同的机遇和挑战。一个明显的例子是,由Google和open handset alliance主导开发的基于Linux的Android系统,在开源之后给开发者(商家)带来了巨大的商机,而坚定选择iOS平台的开发工程师也通过苹果生态系统的不断扩张和智能设备的高市场占有率赚了大钱。但由于国内用户习惯、产业环境、版权保护等问题,移动应用开发者并没有获得相应的利益。

七、软件工程设计师

近年来,IT行业逐渐兴起了软件定义网络(SDN)、软件定义数据中心(SDS)、软件定义存储(SDS)和软件定义服务器(MoonShot)的浪潮,有软件定义未来所有IT基础设施的趋势。

PaaS、SaaS、数据挖掘和分析、数据管理和监控、虚拟化、应用程序开发等。都是软件工程老师施展才华的好舞台。相应的,这些技术领域也会对软件工程师有更高的要求,尤其是虚拟化以及BYOD、云计算、大数据等应用的开发和管理,需要更先进的技术支持。

和算法工程师类似,软件工程师也需要注意设计模式的使用。一个优秀的工程师通常能够识别和使用模式,而不是被模式所束缚。工程师不应该使系统适应某种模式,而是需要在系统中找到使用该模式的机会。

八。数据库开发和管理

数据库开发与管理在大数据时代尤为重要,相关的数据库管理、运维与开发技术将成为BI、大型企业和咨询分析机构特别重视的技能体现。它代表了更多类型(尤其是非结构化类型)的海量数据的出现,这就要求我们实时收集、分析和传输这些数据集。在对基础设施提出严峻挑战的同时,它也强调了数据库开发和管理人员的挑战。

例如,用于海量数据管理的分布式数据库系统之一NoSQL是大数据领域非关系数据库的流行平台。高可用性、大吞吐量、低延迟、高数据安全性的应用特性已经成为很多企业所看重的特性,希望有足够优秀的it开发者深入开发NoSQL系统,解决存储扩展、宕机、平滑扩展、自动故障转移等问题。

另外,知名Hadoop分布式数据库HBase的数据管理,需要借助HRegion、HMaster、HClient组成的架构,对数据进行整体管理。这些也需要对Hadoop有深刻的理解,对业务有熟练的掌握。除此之外,大数据存储管理,内存计算,包括基于这些应用的平台开发等。,也会越来越受市场欢迎。

九、系统架构师

去年三星首席系统架构师Jim Mergard跳槽到苹果,这是最近系统架构师比较大的人事变动。这种变化也说明了系统架构师在今天的高度重视和认可。

众所周知,云计算和大数据的出现,使得传统的数据中心基础设施力不从心;另一方面,日益激烈的市场竞争和移动互联网等商机的出现,必然给企业的业务带来深刻的变化。这种变化和IT架构转型都会涉及到IT系统架构的核心问题。相对于之前介绍的IT技能和相应岗位,系统架构师的规划部署能力显得尤为重要,这涉及的是整张脸而不是某个领域某个点的痛点。

X.系统安全处

同样,网络、计算、存储和系统架构也需要注意安全问题,而安全在当前云计算环境下,对企业个人隐私和敏感数据的保护不断加强。

目前,许多企业在缩减IT安全预算后,仍然面临着合规性要求增强等问题。企业在考虑是否要把一些IT运营交给云服务提供商。其实大家的压力都很大,尤其是中小企业,在预算不足的情况下尽力保护数据的安全,这就意味着企业需要将部分IT运营外包给第三方,以减少资金和人力的投入。

即使不采用外包,无论是个人还是企业,都会更加重视安全,因为“安全”本身没有行业限制和划分,尤其是企业在构建云计算环境,提交或收集海量数据进行处理、分析、存储和传输时,会面临新的挑战。这种挑战必然需要越来越多的专业技术人员来帮助解决这些问题。与传统相比,系统安全事业部将更多地与具体业务发展相结合,而根植于系统平台和底层基础设施的系统安全将更多地在运营中。