大数据发展现状与潜力

『壹』 大数据的产生与发展现状研究

摘 要：大数据的产生给未来信息技术带来新的机遇与挑战。大数据对数据处理的有效性、实时性提出了更高要求，需要根据大数据的特点对当前数据处理技术实施变革，从而形成更有益于大数据采集、存储、处理、管理、分析、共享的新兴技术。本文从大数据的产生与发展、特征、主要应用以及大数据所带来的挑战等方面进行阐述与分析。

关键词 ：大数据 物联网 信息处理 海量计算

一、大数据的产生与发展现状

随着物联网、云计算等信息技术的飞速发展，大数据技术(Big Data)也越发进入人们的视线。大数据是用传统方法或工具很难处理或分析的数据信息。目前，人们对大数据的理解还不够全面和深入，关于大数据的含义也没有一个统一的定义。亚马逊大数据科学家John Rauser认为：大数据是超过任何一台计算机处理能力的庞大数据量。Informatica 的中国区首席顾问但彬指出：大数据是海量数据与复杂类型的数据的结合。而维基网络则把大数据定义成诸多大而复杂的、难以用当前数据库处理的数据集合。

大数据研究受到国内外学术界和工业界的广泛关注，已成为当今信息时代全世界讨论的热点。2008年，Nature杂志就推出大数据专刊，计算社区联盟也在同一年发表了报告《Big data computing; Creating revolutionary breakthroughs in commerce， science and society》，报告阐述了解决大数据问题所需的关键技术以及所面临的挑战。美国奥x政府于2012年3月在白宫网站发布了《大数据研究和发展倡议》，提出了通过收集、处理海量、复杂的数据信息，从而提升能力，加快科学和工程领域的创新步伐，转变学习教育模式，强化美国本土的安全”。2011年1月，微软公司同惠普公司合作开发了一系列能够提升生产力，同时提高决策速度的设备。此外，欧盟委员会也提出驾驳大数据浪潮的战略思路，日本发布的《面向 2020 的 ICT综合战略》也提出需要构造大量丰富的数据基础。

近年来，我国也积极开展对大数据的研究。2011年10月，工信部确认京沪深杭等 5 城市为“云计算中心”试点城市。2012年6月，中国计算机学会青年计算机科技论坛也举办了“大数据时代，智谋未来”学术报告研讨会。大数据及其科学研究方法涉及应用领域很广，并将与国计民生密切相关的科学决策、金融工程以及知识经济领域紧紧接合。

二、大数据的特点

目前，企业界和学术界都一致认为，大数据具有4个“V”特征，即：容量(Volume)、种类(Variety)、速度(Velocity)和至关重要的`价值(Value)。

(1) 容量(Volume)巨大。海量的数据集从TB 级别提升到PB 级别。

(2) 种类(Variety)繁多。大数据数据源有多种，数据格式和种类不同于以前所规定的结构化数据范畴。

(3)价值(Value)密度低。如视频的例子，在不间断连续监控的过程中，可能有意义的数据仅有一两秒。

(4)速度(Velocity)快。包含大量实时、在线数据处理分析的需求1秒钟定律。

三、大数据应用的领域

大数据产业的发展将推动全球经济由粗放型向集约型转变，这将对提升企业整体竞争力和政府监管能力具有意义深远的影响。

商业作为大数据的重要应用领域。沃尔玛公司通过对消费者购物行为等一系列非结构化数据的分析，了解不同顾客的购物习惯，公司从所销售的数据进行分析，从而选出适合在一起搭配出售的商品;淘宝也针对买家开设了大数据平台，为客户量身打造了一整套完善的网购体验产品。

大数据在金融业也起到了至关重要的作用。美国Equifax公司利用大数据技术，通过对其的数据库中与财务有关的记录海量信息进行索引处理和交叉分享，从而得到客户的个人信用等级，以推断出客户的支付需求与能力。

随着大数据在医疗与生命科学研究过程中的广泛应用和不断扩展。2010年，中国公布的《十二五规划》指出：要重点建设国家级、省级和地市级三级医疗卫生信息平台，建设电子病历和电子档案两个最为基础的数据库。各级医院也将在医疗信息仓库、数据中心等领域加大投入，医疗数据信息的存储将愈加被关注，医疗信息中心的关注焦点也将由传统的计算领域转为存储领域。

除此之外，大数据在制造业领域也有着广阔的应用。制造业企业积累了广泛的数据信息，在开展对业务数据进行技术管理的同时，企业需要通过大数据处理技术来帮助决策者从数据库储存的海量信息中找到有价值的信息，并且对其进行分析处理，从而增强决策的正确性、规避风险。

四、大数据所面临的挑战

大数据技术使人们能够更好地利用之前不能使用的各个数据类型，找出被忽略的信息，促进企业组织更加高效、智能。但随着对大数据研究的不断深入，人们也更加意识到当大数据技术向人们敞开“方便之门”的同时，也带来了众多的挑战：

(1)大数据需要更为专业化的管理技术人才。

(2) 大数据的合理利用需要解决容量大、类别多和时效性高的数据处理问题。

(3)大数据的利用对信息安全提出了更高要求。

(4)大数据的集成与管理问题。

这些挑战已成为关系到未来大数据发展的重要因素，同时也成为未来引领大数据发展的推动力。

五、结束语

大数据已经逐步渗透到人们工作生活的诸多领域中，对于大数据的研究也在不断的深化。本文针对大数据的产生与发展、特征、主要应用以及大数据所带来的挑战等方面进行阐述与分析。大数据的发展还处于初级阶段，还有更为广阔的空间需要人们不断开拓，如何合理地利用大数据、更加高效地处理大数据来为人们服务仍需要广大研究者不断地研究和探索。

参考文献：

[1]刘智慧，张泉灵.大数据技术研究综述[J].浙江大学学报，2014，46(6)：957- 972.

[2]严霄凤，张德馨.大数据研究[J].计算机技术与发展，2013，23(4)：168-172.

[3]刘俊.基于大数据流的Multi-Agent系统模型研究[J].计算机技术与发展， 2007，17(5)：166-169.

『贰』 大数据未来的发展前景怎么样呢

从我国数据产量和存量来看，广东、北京、浙江、江苏、上海、等地区数据资源较为丰富，东部地区数据产量和存量均高于西部地区。从省际数据流量来看，东部地区月均互联网省际出口总流量占全国比重超过一半。

在以北上广为代表的东部地区数据资源丰富的背景下，其大数据产业发展水平快于其他地区省份。其中，北上广大数据企业数量占全国比重近70%，广东和北京大数据发展水平较高。

东部地区数据产量整体高于西部，省际数据流量远高于其他地区

2019年，我国数据产量总规模为3.9ZB。从数据产量的地区分布看，2019年全国数据产量排名前十位的省份为广东、北京、浙江、江苏、上海、山东、四川、河南、河北和湖南。

从人均数据产量来看，2019年人均数据产量排名前十位的省份分别是北京、上海、浙江、天津、广东、内蒙古、西藏、海南、江苏和辽宁。整体来看，东部地区数据产量和人均数据产量均高于西部地区。

—— 更多数据来请参考前瞻产业研究院《中国大数据产业发展前景与投资战略规划分析报告》

『叁』 大数据未来的发展前景怎么样

大数据技术目前正处在落地应用的初期，从大数据自身发展和行业发展的趋势来看，大数据未来的前景还是不错的，具体原因有以下几点：
第一：大数据自身能够创造出更多的价值。大数据相关技术紧紧围绕数据价值化展开，数据价值化将开辟出广大的市场空间，重点在于数据本身将为整个信息化社会赋能。随着大数据的落地应用，大数据的价值将逐渐得到体现。目前在互联网领域，大数据技术已经得到了较为广泛的应用。

第二：大数据推动科技领域的发展。大数据的发展正在推动科技领域的发展进程，大数据的影响不仅仅体现在互联网领域，也体现在金融、教育、医疗等诸多领域。在人工智能研发领域，大数据也起到了重要的作用，尤其在机器学习、计算机视觉和自然语言处理等方面，大数据正在成为智能化社会的基础。
第三：大数据产业链逐渐形成。经过近些年的发展，大数据已经初步形成了一个较为完整的产业链，包括数据采集、整理、传输、存储、分析、呈现和应用，众多企业开始参与到大数据产业链中，并形成了一定的产业规模，相信随着大数据的不断发展，相关产业规模会进一步扩大。
第四：产业互联网将推动大数据落地。当前互联网正在经历从消费互联网向产业互联网过渡，产业互联网将利用大数据、物联网、人工智能等技术来赋能广大的传统产业，可以说产业互联网的发展空间非常大，而大数据则是产业互联网发展的一个重点，大数据能否落地到传统行业，关乎产业互联网的发展进程，所以在产业互联网阶段，大数据将逐渐落地，也必然落地。

『肆』 大数据未来的前景怎么样

大数据的未来发展前景是值得肯定的，但是现在大数据人才出现了供不应求的情况。大数据行业就业市场较为活跃的地区主要集中在京津冀、长三角、珠三角、成渝等区域，但是从目前招聘数据来看，大数据人才还是不能满足市场的需求，因此现在学大数据未来的发展前景是非常好的。
大数据作为一门基础科学，无论在数据开发及分析还是在物联网和人工智能算法训练领域，都有着强大的需求。随着数据规模不断增大，企业需求持续增长，大数据人才成了刚性需求。
大数据的就业领域是很宽广的，不管是科技领域，还是食品产业，零售业等等，都是需要大数据人才进行大数据的处理，以提供更好的用户体验，因为未来大数据人才就业面很广，就业机会很多，发展前景也是非常好的。

2大数据工程师的薪资待遇
大数据工程师职业发展路径分为5个阶段，每个阶段对应职位对应的薪资待遇是不一样的：

有一年工作经验的实习工程师月工资在6000以上；

有1-2年工作经验的助理工程师，月收入在13000-15000左右；

有3年左右工作经验的大数据工程师，平均每个月能赚到20000左右；

有5年左右工作经验的高级大数据工程师，月收入一般都在30000左右；

有10年以上工作经验的首席工程师，月薪都是大于50000的。

『伍』 大数据行业发展现状与未来前景分析

近年来，全球正大步迈向大数据新时代，数据的高效存储、处理和分析等需求也越来越旺盛。在此背景下，行业大数据得以高速发展，应用于各个领域，根据IDC发布的有关数据预测，2025年市场规模将达到19508亿元的高点。

全球大数据储量呈爆发式增长

随着信息通信技术的发展，各行各业信息系统采集、处理和积累的数据量越来越多，全球大数据储量呈爆炸式增长。根据国际数据公司(IDC)的监测数据显示，2013年全球大数据储量为4.3ZB(相当于47.24亿个1TB容量的移动硬盘)，2014年和2015年全球大数据储量分别为6.6ZB和8.6ZB。近几年全球大数据储量的增速每年都保持在40%，2016年甚至达到了87.21%的增长率。2016年和2017年全球大数据储量分别为16.1ZB和21.6ZB，2018年全球大数据储量达到33.0ZB，2019年全球大数据储量达到41ZB。

—— 以上数据及分析均来自于前瞻产业研究院《中国行业大数据市场发展前景预测与投资战略规划分析报告》。

『陆』 大数据发展前景怎么样

行业主要上市企业：豆神教育(300010)、全通教育(300359)等

本文核心数据：中国K12在线教育市场规模、中国教育大数据在K12教育市场的应用分析等

我国K12教育大数据行业仍存在配置不均问题

2015-2021年，我国小学教育学校数量逐年下滑，2021年为15.43万所;我国初中和高中教育学校数量呈现先下降后上升趋势，初中教育学校数量在2017年下滑至5.19万所后在2018年开始反弹，2021年为5.29万所;高中教学学校数量则波动变化，2021年为2.19万所。

从我国K12教育发展来看，目前仍存在教育资源分配不均、地区差异化明显等问题。与此同时，也伴随着教育大数据行业发展不均、地区差异化的问题。非重点学校及中西部地区教育大数据行业还待发展。

我国K12在线教育的快速发展奠定了教育大数据基础

2013-2019年，中国K12在线教育市场规模呈逐年递增趋势，且增幅均在20%以上，尤其近两年，增幅最高达到51.9%。2020年，我国K12在线教育市场规模约为884.3亿元，同比上升36.3%。经初步统计，2021年我国K12在线教育市场规模已突破1200亿元。K12在线教育的快速发展奠定了大量数据基础，为日后教育大数据在K12教育的发展提供庞大的数据库。

目前教育大数据在K12教育市场的应用多为教学管理

目前，我国教育大数据在K12教育阶段应用最为广泛的市场之一，其应用多为学校教学管理及教师对学生的管理。此外，K12教育阶段的教育大数据主要是将优秀教师的教学能力通过视频、线上教学、课件制作标准化等数字化后，得以复制和推广，同时实现课堂精准教学。

不过，从体制内外应用来看，仍以体制外应用为主，如通过作业、考试等学习过程数据推出自适应学习类产品，如智慧学伴、论答、乂学教育;通过作业大数据、题库大数据推出作业答疑类产品，如作业帮、学霸君、阿凡题等。

我国K12教育大数据行业需求潜力

K12教育作为我国教育体系中最为基础的教育，其发展的好坏直接关系到我国教育事业的进程。目前K12教育存在着资源分配不均衡、城乡差距大等问题，也是目前我国教育改革的重点。而教育大数据能够对K12教育过程中所产生的所有数据进行深度分析和深度学习，国家能够有效利用这些数据对K12教育进行改革。具体需求潜力如下：

以上数据参考前瞻产业研究院《全球教育大数据行业发展前景预测与投资战略规划分析报告》

『柒』 大数据的发展前景是怎么样

2020年应用市场数据规模市场份额将达到40%

随着大数据相关产品及应用的不断普及，未来五年，应用层规模将逐步增长。在技术层、数据源层以及衍生层的共同支撑下，应用市场规模份额将达到40%。其中，交易市场规模虽然占比最少，但是正是由于他的存在，使得数据的交易从法律上实现数据的合法化问题，以及实现了数据价值兑现。

——更多本行业研究分析详见前瞻产业研究院《中国行业大数据市场发展前景预测与投资战略规划分析报告》。

『捌』 大数据未来的发展前景怎么样

数据的资源化
何为资源化，是指大数据成为企业和社会重视的重要战略资源，并已成为我们争相抢夺的新焦点。因此，企业必需要提前制定大数据营销战略计划，抢占市场先机。
与云计算的深度结合
大数据离不开云处理，云处理为大数据提供了弹性可拓宽的根底设备，是产生大数据的渠道之一。自2013年开端，大数据技能已开端和云计算技能紧密结合，估计未来两者联系将更为密切。除此之外，物联网、移动互联网等新兴计算形态，也将一齐助力大数据革新，让大数据营销发挥出更大的影响力。
科学理论的打破
随着大数据的快速发展，就像计算机和互联网一样，大数据很有可能是新一轮的技能革新。随之兴起的数据发掘、机器学习和人工智能等相关技能，可能会改变数据世界里的许多算法和根底理论，实现科学技能上的打破。
数据科学和数据联盟的成立
未来，数据科学将成为一门专门的学科，被越来越多的人所认知。各大高校将设立专门的数据科学类专业，也会催生一批与之相关的新的就业岗位。与此同时，基于数据这个根底渠道，也将建立起跨领域的数据同享渠道，之后，数据同享将扩展到企业层面，而且成为未来产业的中心一环。
数据走漏泛滥
未来几年数据走漏事件的增长率或许会到达100%，除非数据在其源头就可以得到安全保障。可以说，在未来，每个财富500强企业都会面临数据进犯，不管他们是否现已做好安全防范。而一切企业，不管规划大小，都需要从头审视今日的安全界说。

『玖』 大数据未来的发展前景怎么样

随着信息时代的发展，大数据已经成为技术创新的一大趋势。很多人仍然对大数据行业的现状、发展前景和就业方向感到困惑。下面就来说说大数据发展前景和就业方向，千万别错过。

1. 大数据概述

大数据学科是一门跨学科的新兴学科，该学科主体为统计学和计算机科学。

大数据技术可以通过在企业积累数据提供客观的分析结果，为管理者提供决策辅助，或对现有的数据，通过挖掘分析找到数据之间的规律，为公司发现业务问题和战略布局规划起到关键作用。

随着各行各业越来越多的领域开始发挥运营数据的价值，对大数据人才的需求也在不断增加。

2. 大数据发展前景

(1)技术开源免费

主流的大数据技术都是开源的，大数据开发者可以免费获得。免费的技术和活跃的社区使版本迭代更快。例如Hadoop、Spark、Flink、HBase、Kafka大数据核心技术等。

(2)人才短缺

目前，根据人才市场的相关统计，虽然很多大数据岗位的人才需求很大，但大数据行业的从业人数不足5万人。

可以预测未来3-5年，大数据人才缺口将继续扩大至200W以上。因此，大数据就业前景将极为广阔。

(3)行业高薪

大数据的薪酬高于一般的开发工程师。而且，如果学好大数据技术，将有更多的机会进入大厂。例如阿里巴巴、腾讯等一线互联网公司仍然需要大量大数据人才。

3. 大数据就业方向

大数据的就业范围广，可以选择岗位很多。

如：大数据发展工程师，操作工程师、大数据架构师、工程师、BI工程师、数据挖掘工程师、ETL开发工程师、Spark开发工程师等等。

虽然大数据的就业前景很好，但掌握大数据开发技术也是前提。否则，不管这个行业发展得多好，有多少工作机会，都和你没有关系。

『拾』 大数据发展背景及研究现状

2015年左右，大数据相关政策规划密集出台，同期为大数据企业新增数量顶峰时期。近年来，我国大数据产业迎来新的发展机遇期，产业规模日趋成熟。大数据产业主体从“硬”设施向“软”服务转变的态势将更加明显，面向金融、政务、电信、医疗等领域的大数据服务将实现倍增创新。

大数据企业数量持续增长，增速与政策出台密切相关

根据IT桔子统计，大数据企业的快速增长阶段出现在2013-2015年，增长速度在2015年达到最高峰。2015年后，市场日趋成熟，企业新增开始趋于放缓，大数据产业逐渐走向成熟。

—— 以上数据及分析均来自于前瞻产业研究院《中国大数据产业发展前景与投资战略规划分析报告》。