❶ 如何看待我国大数据发展
随着信息技术和人类生产生活交汇融合,全球数据呈现爆发增长、海量集聚的特点。无论是国家、企业还是社会公众,都越来越认识到数据的价值。因此,近年来,各地纷纷成立大数据发展局,企业纷纷推动数据资产治理,大数据辐射的行业也从传统的电信、金融逐渐扩展到工业、医疗、教育等。一时间,仿佛各行各业都在谈大数据,人人都在谈大数据。但也有声音说大数据迎来了“七年之痒”,面对大数据热潮也需要一些“冷思考”。我国大数据究竟发展得如何?未来我国大数据发展还有哪些机遇和挑战?
1、大数据产业进展显著
过去几年,大数据理念已经深入人心,“用数据说话”已经成为所有人的共识,数据也成了堪比石油、黄金、钻石的战略资源。五年来,我国大数据产业政策日渐完善,技术、应用和产业都取得了非常明显的进展。
在政策方面,我国从中央到地方的大数据政策体系已经基本完善,目前已经进入落地实施阶段。自从2014年“大数据”这个词写入政府工作报告以来,我国大数据发展的政策环境掀开了全新的篇章。在顶层设计上,国务院《促进大数据发展行动纲要》对政务数据共享开放、产业发展和安全三方面做了总体部署。《政务信息资源共享管理暂行办法》《大数据产业发展规划(2016-2020)》等文件也都已经出台。十九大报告中提出“推动大数据与实体经济深度融合”,“十三五”规划中提出“实施国家大数据战略”。卫健、农业、环保、检察、税务等部门还出台了领域大数据发展的具体政策。截至2019年初,所有省级行政区都发布了大数据相关的发展规划,十几个省市设立了大数据管理局,8个国家大数据综合试验区、11个国家工程实验室启动建设。可以说,大数据的政策体系已经基本搭建完成,目前已经纷纷进入落地实施甚至评估检查阶段。
在技术方面,我国大数据技术发展属于“全球第一梯队”,但国产核心技术能力严重不足。我国独有的大体量应用场景和多类型实践模式,促进了大数据领域技术创新速度和能力水平,处于国际领先地位。在技术全面性上,我国平台类、管理类、应用类技术均具有大面积落地案例和研究;在应用规模方面,我国已经完成大数据领域的最大集群公开能力测试,达到了万台节点;在效率能力方面,我国大数据产品在国际大数据技术能力竞争平台上也取得了前几名的好成绩;在知识产权方面,2018年我国大数据领域专利公开量约占全球的40%,位居世界第二。但我国大数据技术大部分为基于国外开源产品的二次改造,核心技术能力亟待加强。例如,目前国内主流大数据平台技术中,自研比例不超过10%。
在产业方面,我国大数据产业多年来保持平稳快速增长,但面临提质增效的关键转型。2018年,我国大数据产业延续多年来的增速,继续保持相对高速的增长。根据中国信息通信研究院的测算,2018年我国大数据产业整体规模有望达到5400亿元,同比增长15%。然而,综合国内外环境、新兴技术发展等多种因素,大数据产业的增速出现了下滑。我国的大数据产业也面临着从高速发展向高质量发展的关键转型期。
在应用方面,大数据的行业应用更加广泛,正加速渗透到经济社会的方方面面。随着大数据工具的门槛降低以及企业数据意识的不断提升,越来越多的行业开始尝到大数据带来的“甜头”。无论是从新增企业数量、融资规模还是应用热度来说,与大数据结合紧密的行业正在从传统的电信业、金融业扩展到政务、健康医疗、工业、交通物流、能源行业、教育文化等,行业应用“脱虚向实”趋势明显,与实体经济的融合更加深入。
2、产业的五大困局
虽然我国大数据总体发展形势良好,也面临难得的发展机遇,但仍然存在一些困难和问题。
一是,涉及核心技术的产业发展薄弱,未能有效提升我国核心技术竞争力。核心技术的影响力在大数据产业有着极高的重要性。由于大数据企业在完成产品开发后,可以近乎零成本无限制的复制,因此拥有核心技术的大企业,很容易将技术优势转化为市场优势,即凭借具体的信息产品赢得海量用户获得垄断地位。当前,从大数据技术与产品的供给侧看,我国虽然在局部技术实现了单点突破,但大数据领域系统性、平台级核心技术创新仍不多见。大数据处理工具都是“他山之石”,大部分企业用的都是国外的数据采集、数据处理、数据分析、数据可视化技术,自主核心技术突破还有待时日。尤其是开源产品的技术标准方面,我国的影响力尚亟待提升。
二是,数据孤岛和壁垒降低了大数据产业资源配置效率。大数据产业发展必须实现数据信息的自由流动和共享,如果数据不开放、不共享,数据整合就不能实现,数据价值也会大大降低。无论是政府数据、互联网数据还是其他数据,数据拥有者往往不愿对其进行开放流通。受制于前期信息基础设施建设,目前我国政府数据往往还存在着诸多“数据孤岛”和“数据烟囱”,数据价值难以发挥。
三是,数据安全管理薄弱增加了大数据产业的发展风险。大数据技术为经济社会发展带来创新活力的同时,也使数据安全、个人信息保护乃至大数据平台安全等面临新威胁与新风险。海量多源数据在大数据平台汇聚,来自多个用户的数据可能存储在同一个数据池中,并分别被不同用户使用,极易引发数据泄露风险。利用大数据技术对海量数据(21.90 -5.19%,诊股)进行挖掘分析所得结果可能包含涉及国家经济社会等各方面的敏感信息,需要对分析结果的共享和披露加强安全管理。
四是,产业垄断与恶性竞争现象频发,“劣币驱逐良币”现象明显。由于资源型产业门槛低、利润高,新兴的大数据企业往往首先将目光盯在获取数据资源上面。大量依托数据资源优势的企业诞生,为大数据产业带来了低附加值的垄断经济模式,使得依靠技术壁垒打江山的企业不得不面对残酷的市场竞争,放缓了技术研发的步伐。同时,数据垄断问题也愈发明显。少数互联网巨头企业拥有巨大数据,不但对产业发展不利,甚至存在巨大的数据聚集隐患。
五是,各地发展同质化严重,普遍存在重存储轻应用的现象。由于缺乏统一的大数据产业分类统计体系和产业运行监测手段,各地大数据产业的定位相似,同质化竞争加剧。而盲目的重复建设,更是可能导致大数据产业过剩。同时,由于部分地区信息化发展程度有限,大数据应用场景不够丰富,更是以数据中心等大数据存储设施的建设作为发展大数据产业的关键,且规模巨大,目标动辄以百万台计,后期若无法有效利用,将造成巨大的资源浪费。
❷ 对大数据的理解与思考
对大数据的理解与思考
首先,大数据的到来,对人们的观念将带来深远的影响。
我们以前习惯认为:找到现象背后的原因,比清楚现象是什么更重要。通过“塔吉特怀孕预测”的例子可以看到,通过关联分析、聚类分析等数据挖掘方法,大家很容易找到事物之间的关系。但是,这些大数据分析结果,并不会直接告诉我们,事物之间为什么存在这些关系。在不清楚为什么存在这些关系之前,又的确看到了这些关系带来了价值;所以,在大数据应用领域就需要改变以前的思考方。即:先找到“是什么”再去找“为什么”;清楚是什么,与搞清楚为什么同等重要。
手工统计时代,出于收集全部数据非常困难或代价巨大的原因,很多数据分析都是采用抽样数据;但是,现在不同了,随着信息技术的发展,现在很多领域都能够方便的收集到全量数据。诸如无纸化办公的兴起、信息系统的使用、电子商务的发展等等,都为收集全量数据提供了便捷的条件。那么,这时候数据的“样本”=“全体数据”。这相对以前来说,也是革命性的影响。
在抽样分析时代,个别样本的质量甚至决定结果的质量。在大数据时代,这也变了,可以允许个别数据的不精确,甚至错误。举个简单例子来说明这个道理,比如在温室大棚里放一只温度计,当这只温度计有问题时,整个温度都是不准确的。若在大棚里均匀分布十几只温度计,其中一只有问题,对温室大棚温度的统计结果无碍大事,基本可以忽略其影响。
其次,大数据应用,影响商业变革和社会进步。
大数据应用正改变着企业的业务发展方式。比如:京东、天猫通过对交易数据的“二次利用”,寻找目标客户、定向推荐商品。也正是这些数据的二次利用给他们提供了大量价值,促进了这些企业的发展,推动着他们在营销、供应链与客户服务等领域的管理变革。同时,交易数据并不因为二次利用,而降低其价值;这也是,大数据应用与传统资源使用不同的地方。
数据的“混搭”分析,推动着商业发展和社会的进步。比如历史天气信息与航班误点信息,这两个不同领域的信息一块儿分析,便可以推算未来几天航班的误点率。再比如,通过神经中枢肿瘤患病率和手机使用时间长短之间的大数据关联分析,来研究神经中枢肿瘤患病率是否与手机使用时间长短有关系等等。
大数据的应用,也促生了很多商业机会。随着大数据时代的到来,形成了很多大数据拥有公司,以及大数据技术公司;数据与技术的结合变促生了很多大数据应用,因此带来了很多商业机会。例如,现在很多商业银行对自己大量客户的交易信息分析,规划新的理财产品,与其他商家合作,联合搞定向促销等等。
再次,大数据时代不再有个人隐私,将形成新的信息安全机制。
现在还经常听到诸如某某窥探我的隐私之类的话语,但是,在大数据时代几乎没有个人隐私,这不是骇人听闻。因为,现在微博、搜索引擎、社交网络、电商购物,已经成了我们生活中必不可少的一部分。根据每个人在互联网上留下的痕迹,通过大数据分析,很容易分析出一个人的爱好、习惯、性格、癖好等等。所以,大家都被“第三只眼”实时监控着,在大数据时代,几乎没有个人隐私!
没有个人隐私,是否就代表每个人可以随便传播别人隐私了呢?答案当然是否定的。因为传播别人隐私是不道德的,甚至是违法的。所以,现在新的信息安全规则正在重新定位,其中一个基调是:让数据使用者承担责任,不能滥用别人的隐私;我个人感觉这也比较合理。
总结
大数据只是“新概念”,并不是“新事物”。过去数据就存在,只是我们没有收集这些数据。但是,现在收集了这些数据,这个世界变得不一样了;它更新了人们过去对数据应用的认识,加快了商业和社会发展的新陈代谢,从中也让大家也看到了很多机会。大数据时代,已经到来。极目远眺,也看不到尽头。
❸ 如何看待大数据时代
一、大数据对思维的变革
二、大数据对商业的变革
在数据时代,量化-切是数据化的核心,意味着任何东西都可以转化成数据为人所用。比如:文
字、方位、沟通。这个时代为我们提供了一个从未有过的审视现实的视角, 它是一种可以渗透到所有生活领域的世界观。现在这个时代就是数据竞争的时代,各家公司都在竞争数据。
❹ 如何应对大数据的挑战
合理获取数据,存储应需而变,筛选和分析大数据,理性面对大数据的诱惑,云计算和大数据相辅相成,处理好非结构化数据,与硬件保持距离,提高大数据的可视化,安全防范必不可少。
❺ 你怎么看待大数据时代
其实即可怕,又方便了人们,等一下买什么东西的时候准备给你推送,都是你内想要东西就很方便,容但是可怕的是你失去的隐私,可能偶尔你说一个什么无意之中就在某宝或者某一个平台,你就出现的推荐,你是不是感觉到自己被监听也是挺恐怖的。
❻ 对大数据的认识和看法
原来是利大于弊,现在很难说了
❼ 如何看待大数据时代让我们变得更透明
大数据时代的浪潮已经覆盖我们老百姓所能想象到的领域了,大数据给我们带来了许多便利。云购物,手机付款,喜好推送都依赖于大数据。但是同时,我们的隐私也在我们不知不觉中泄露,大数据时代让我们变得更透明了。
结语:
大数据时代确实让我们变得更加透明,我们甚至不知道我们的隐私什么时候被泄露出去的。这个问题我们无需太过害怕,但更不能被我们忽视,无论是我们个人还是社会。
❽ 谈谈对大数据的理解和认识!
随着大数据的概念提出,越来越多的人,开始关注数据,注重数据带来的巨大的价值。大家谈论的也都是与大数据相关的专业话题了,无论是商业BI,还是阿里云。都是越来越多的行业内部人员乃至关注大数据的看客的讨论热点了。
大数据的鼻祖又是什么呢?
大数据现实体现最初是人口普查,最早是在美国,10年为一个周期做一次人口普查工作,第一次,在1880年用了8年做完,到1890年,人口继续增长,经过科学的预测,如果还是按照老方法去做,需用13年做完,这显然跟不上时代的要求。所以人们开始从记录,采集,整理,分析等多个领域寻求加快数据分析的速度,大数据的概念也慢慢被提出。
大数据在我们现在生活有哪些体现?
现如今,大数据体现最多的可能是社交网络之中了比如:facebook,微信等网络社交平台。其中也不乏实际应用的例子。
微信几乎每个人都有,但微信的朋友圈可以向定向的人群发送指定的广告,还可以选择地区,可以选择性别,年纪分类,教育程度分类,给所有用户进行初步分类之后,再是根据你朋友圈的发文或者交流信息进行提取分析,进一步给每个客户贴上独特的标签,最后把相关信息给到销售部门,进行精准营销。
如今还有绝大多数的公司对于大数据渴望又不知道如何下手,其中大致包括两个方面。
1、想做数据分析,但是之前没有相关的数据意识,基础数据丢失或从未搜集,或者数据孤岛严重,行业数据相对独立而难以共享。
2、数据产生的体量大,维度高,提取难度大。例如某个知名商业银行的信用卡部门,每天收集大量的个人客户的多维度信息,面对大量信心无法价值化,因为涉及个人隐私和安全,数据不可买卖,又不知道如何内部进行分析促进其他相关业务增长。
此外,在整个企业的运作过程还可以分为交易数据和交互数据。
农夫山泉,几年前销量并不如今,当时他们基本上只掌握了大量的交易的数据,通过分析得出,农夫山泉的利润始终上不来,是因为运输成本很高,如何降低运输成本成为问题的关键点,交互数据的需求成为至关重要的一环,所以决定,每个采集人员每天到10至20个销售点,取收集大量的交互数据,其中包括水的位置,排列形状,天气,优惠活动,市场反馈等一系列交互数据,一个月一个人收集的信息量大约3个TB,继而委托sap公司进行分析开发出物流成本控制处理系统,从而进行运输预测,运输安排和中转站的一系列重新部署,最终直接降低运输成本,提高了运输效果,终于坐到饮用水市场第一的位置。
通过今天的介绍,希望给大家一些对于大数据的基本认识,也希望大家一同关注大数据发展,共同分享大数据带来的惊喜。如果您还存在疑惑或是想要了解更多,欢迎关注西线学院。