⑴ 传统数据和大数据的区别
传统数据和大数据的区别
无疑,数据信息的大爆炸不断提醒着我们,未来将会因大数据技术而改变。大数据(Big data)通常用来形容数字化时代下创造出的大量非结构化和半结构化数据。大数据无疑是未来影响各行各业发展的最受瞩目的技术之一。2009年时,全世界关于大数据的研究项目还非常有限,从2011年开始,越来越多的管理者开始意识到,大数据将是未来发展不可规避的问题,而到2012年年底,世界财富500 强企业中90%的企业都开展了大数据的项目。IDC的研究显示,到2015年,大数据市场前景将达到169亿美元的规模。当前所有企业的商业数据每隔1.2年就将递增一倍。
那么,大数据为什么成为所有人关注的焦点?大数据带来了什么样的本质性改变?为此,我们与中国计算机学会大数据学术带头人、中国人民大学信息学院院长杜小勇教授进行了访谈。
杜小勇教授认为,大数据带来了三大根本改变:第一、大数据让人们脱离了对算法和模型的依赖,数据本身即可帮助人们贴近事情的真相;第二、大数据弱化了因果关系。大数据分析可以挖掘出不同要素之间的相关关系。人们不需要知道这些要素为什么相关就可以利用其结果,在信息复杂错综的现代社会,这样的应用将大大提高效率;第三、与之前的数据库相关技术相比,大数据可以处理半结构化或非结构化的数据。这将使计算机能够分析的数据范围迅速扩大。
传统数据和大数据的区别
第一、计算机科学在大数据出现之前,非常依赖模型以及算法。人们如果想要得到精准的结论,需要建立模型来描述问题,同时,需要理顺逻辑,理解因果,设计精妙的算法来得出接近现实的结论。因此,一个问题,能否得到最好的解决,取决于建模是否合理,各种算法的比拼成为决定成败的关键。然而,大数据的出现彻底改变了人们对于建模和算法的依赖。举例来说,假设解决某一问题有算法A和算法B。在小量数据中运行时,算法A的结果明显优于算法B。也就是说,就算法本身而言,算法A能够带来更好的结果;然而,人们发现,当数据量不断增大时,算法B在大量数据中运行的结果优于算法A在小量数据中运行的结果。这一发现给计算机学科及计算机衍生学科都带来了里程碑式的启示:当数据越来越大时,数据本身(而不是研究数据所使用的算法和模型)保证了数据分析结果的有效性。即便缺乏精准的算法,只要拥有足够多的数据,也能得到接近事实的结论。数据因此而被誉为新的生产力。
第二、当数据足够多的时候,不需要了解具体的因果关系就能够得出结论。
例如,Google 在帮助用户翻译时,并不是设定各种语法和翻译规则。而是利用Google数据库中收集的所有用户的用词习惯进行比较推荐。Google检查所有用户的写作习惯,将最常用、出现频率最高的翻译方式推荐给用户。在这一过程中,计算机可以并不了解问题的逻辑,但是当用户行为的记录数据越来越多时,计算机就可以在不了解问题逻辑的情况之下,提供最为可靠的结果。可见,海量数据和处理这些数据的分析工具,为理解世界提供了一条完整的新途径。
第三、由于能够处理多种数据结构,大数据能够在最大程度上利用互联网上记录的人类行为数据进行分析。大数据出现之前,计算机所能够处理的数据都需要前期进行结构化处理,并记录在相应的数据库中。但大数据技术对于数据的结构的要求大大降低,互联网上人们留下的社交信息、地理位置信息、行为习惯信息、偏好信息等各种维度的信息都可以实时处理,立体完整地勾勒出每一个个体的各种特征。
⑵ 教授在线|余根坚:怀初心于科技,展望大国蓝图
教授在线|余根坚:怀初心于科技,展望大国蓝图
他的眼睛很漂亮,漂亮到可以从中展望到日月星辰山川河流,可以展望到北国的风雪和南国的的花开,可以展望到大漠孤烟和小桥流水,可以展望到白驹过隙星移斗转,可以展望到那些“看尽人间繁华,三千浮生若水”过后所尚存的执着与坚守。简而言之那颗炽热的初心跳动着。他,就是余根坚教授。
随时代大流不断前行的初心坚守者
饱经变迁矢志不渝
余根坚教授是地道的福建人,出生于福建省宁德市古田县,本科就读于福建师范大学数学与应用数学专业。1995年到1998年就读于北京师范大学,攻读硕士学位,与此同时开始了科研工作,主要研究方向是信息处理技术。2004年到2007年就读于南京邮电大学,攻读信号与信息处理专业博士学位。
1998年至1999年在深圳华为技术有限公司做研发工作,1999年至2009年在福大从事信息处理与无线网络方面的教学科研工作,在此期间,除了教学工作外,还参与了相关专业的教授们领衔的各级各类科研项目,并主持省部级、厅级和企业横向课题多项,不仅取得了一定的研究成果,也积累了丰富的科研经验。于1999年7月正式进入闽江学院,任教研室主任和专业带头人,继于2014年12月晋升为教授。余根坚教授主要研究方向为下一代移动通信网关键理论与技术,主持省部级科研项目和企业横向课题研发多项,在国内外重要核心期刊上发表40多篇论文,其中SCI/EI收录17篇;受邀担任省市战略性新兴产业评审专家和重要学术刊物审稿人。
“困难是难免的,但科研工作需要一个平静的心态,要能坐冷板凳。”不论是在学涯时期还是在工作或是任教研发时期,还是困难重重、屡屡受挫,余根坚教授始终致力于信息处理和技术方面的研究与开发从未动摇。一方面秉持着一丝不苟的工作精神,一方面怀揣着对大数据时代的热情与憧憬,余根坚教授在科研和树人的道路上不断地向前走。向着科研尖端领域冲刺,做一代代大学生的人生导师。
树人为根实践为本
看到一批批优秀的青年学生走上岗位,其中不乏有登上技术领导岗位的,并在多年以后还与自己保持着联系,这让余根坚教授特别有成功的自豪和“丰收”的喜悦,为人之师皆如此,学生的成长成才就是给他们最好的“礼物”。在与学生相处之时,余根坚教授坚信:“把学生当做朋友,课堂上不拘泥于课本,尽量把自己的视野和拓展内容教授给学生,特别是产业界、学术界和市场需求方面的相关信息,这就要求教师要不断更新知识面。”保持着这份对教学的谦虚与严谨,余教授在平时也以前瞻的远见跟时代相契合,接受新的理念和知识,以便能在课堂上将专业前沿的信息传达给学生,让学生和自己同时代齐进步;正是因为如此的恪尽为师之责,余教授受到了学生的爱戴与尊重,对于学生来说,他是师长,更是朋友。
学以致用——是余根坚教授教学的基本原则,也是他对学生的要求。在平时的教学中,他努力让自己的授课方式多样化,在一定条件允许的情况下,他会尽量进行现场案例教学,通过案例让学生对所讲知识理解更加透彻,理论与实践相结合,带领学生共同发展,以达到共赢的教学目标。考虑到学生校外实践的必要性,余教授的想法是有资历和人脉的教授可以走出校园,走入企业,和企业界交朋友,为学生争取和提供必要的资源。实践与理论缺一不可,树人之路任重而道远。余教授可谓用心良苦。
不忘初心展望蓝图
“当世界开始迈向大数据时代时,社会也经历着着类似的地壳运动。”余教授对未来趋势的看法很是独特。中国互联网的迅猛发展,为大数据时代注入了新的活力,互联网在改变人类基本的生活与思考方式的同时,也为世界带来了一系列的未知与挑战。
中国作为当今互联网大国,不断地在改变着世界互联网的格局,作为有着浓烈爱国情怀的余根坚教授无不为之自豪,他激动地说道:“祖国发展欣欣向荣,君不见如今回国潮汹涌而来,高端人才包括外籍高端人才,必将涌入国门,在未来的二三十年里,我国各项科技事业,包括通讯技术,必将站上世界舞台中央。2030年以后我们国家必将是诺奖的得奖大户,我们可以拭目以待!”
秉持着为国献力的那份初心,余根坚教授鼓励学生们紧跟技术潮流,要不断地去深入了解大数据和人工智能,将所学知识与所见、所接触的相结合。在着眼于现况与未来之际,他更是坚信我们身处这个伟大的时代,若是坚持砥砺前行,精彩人生也将属于我们。这份热情与执着也将鼓励着当代大学生栖身大数据时代,为“中国智造”献出自己的一份力量。
“我们没有几个世纪的时间去适应大数据时代,我们也许只有几年时间。”时代发展飞快,余教授更担忧的是我们自己的步伐是否能跟上当前时代的步伐。他的眼睛里没有太阳,总是黑夜,但并不暗,因为有东西代替了太阳。虽然没有太阳那么明亮,但对于他来说已经足够。凭借这份光,他便能把黑夜当成白天,把一生奉献给国家,把初心留给自己。
⑶ 北邮教授吕廷杰:国内对5G的认识还局限在眼前的应用市场
“国内目前对于5G的认识,主要还是在眼前的应用市场。”5月26日下午,2019中国国际大数据产业博览会举行“5G重构数字 社会 基础生态”高端对话,北京邮电大学教授、中国信息经济学会常务副理事长吕廷杰在演讲中详解5G的实际意义,认为5G的发展一定会带来一个完全不同的 社会 ,在未来5-8年里会渗透到我们生活的方方面面。
吕廷杰认为,已经到来的5G所带来的最大变化,不仅是解决了人与人的通信、人与计算机的通信,还要连接万物,解决物联网、车联网和工业互联网等多方面的应用,是一场非常重大的革命。
但他发现,目前国内对5G的认识还相对不足,“至少我自己接触到的无论是会议、讨论还有一些亲朋好友,所关注的就是下载一个大片是不是可以快很多,我们家的 汽车 是不是将来可以车联网。”吕廷杰说,国内目前对于5G的认识,主要还局限在眼前的应用市场,这也是我们在创新中的一个瓶颈。
吕廷杰说,无可厚非,5G将可能产生运营商销售流量、连接覆盖、网络切片等商业模式,未来市场的应用就是垂直型的应用,一些虚拟运营商将从对个人的应用转向对企业行业的应用,运营商将为开放能力进行赋能。他说,实际上,5G会在平台、技术、网络等很多层面产生一场革命,将拉动国民经济的发展,在全产业链、全生态产生规则的改变。
“5G循序渐进的发展一定会带来一个完全不同的 社会 ,它会使 社会 的效率更高,因此也会涉及到更大的安全问题。”他指出,5G的本质是无限连接,连接产生了高价值的关键数据,未来的大数据会有全新的飞跃,将促进人工智能、区块链等技术的深入发展,生产很多新的架构和生态,必将重构数字经济的生态,“在未来5-8年会渗透到生活的方方面面,也将改变10年以后的整个 社会 的‘ 游戏 规则’”。
⑷ 从北大教授到大数据行业引领者的苏萌是怎么炼成的
十一年前,大洋彼岸美丽的卡尤加湖畔,国际营销模型领域大师 Vithala R. Rao 教授对自己的得意门生苏萌说:“再好好考虑一下,留在美国任教吧,你会成为一名很优秀的学者。”导师的殷切挽留、美国几所知名大学的邀约,以及良好的学术研究环境,这一切似乎都没有让苏萌拒绝的理由。
“当时回国的信念非常坚定。我相信凭我所学,在祖国可以发挥更大的作用,推动中国的数据建模、量化研究领域的发展。”苏萌回忆着曾经的选择。2006年,他毅然放弃了国外优越的条件,成为在营销建模研究领域从美国常青藤院校博士毕业归国第一人。
在北大耕耘多年,获得了斐然的研究成就,课题入选国家自然科学基金重点项目,成为营销模型领域学术带头人的他,再次在众人不解的目光中,辞去教职,投入到艰辛的创业中。
如今,在苏萌带领下创立八年的百分点,已然是大数据和人工智能领域的领袖级企业。
在百分点的办公室,这间曾经到访过许多国内泰斗级的科学家、院士、经济学家以及世界知名企业领袖的朴素房间里,记者见到了身着藏青色运动T恤,带着自如、理性和谦和气质的学院派CEO苏萌。
人生有的转折是偶然触发的。博士毕业前夕,无意间的一次浏览论坛,便是“琅琊榜上募英雄,英才万里识归路”。
当时北大正在全球招聘海归教授,苏萌从两百多位世界知名高校毕业生中脱颖而出。“北大思想自由、包容开放、公正公平的理念深入人心,这次招聘面试的结果由教授匿名投票决定,我很幸运成为那个唯一被聘用的人。”再度谈起当年的归国历程,苏萌这样说。
在北大的前三年,苏萌每天重复往返于办公室、教室、宿舍之间,连续工作十多个小时是常态。“那时候颇有点身在桃园,不知有汉、无论魏晋的味道。那几年我几乎没去过北京的任何一个景点,每天就是教书和做研究。”回忆起往事,苏萌仍然颇为感慨。
耐得住寂寞,看得淡繁华。沉浸于学术研究让苏萌孕育出多篇数据科学领域的论文,相继在国际知名刊物和国际性论坛上发表。他著写的《个性化:商业的未来》中关于个性化超市、个性化媒体等领域的大胆预测,在今天看来仍旧非常具有前瞻性。
2013年夏季达沃斯论坛上,苏萌代表中国学者发表了《大数据商业革命》的主题演讲。北大任教的第五年,他担任北大研究中心主任并成为国家自然科学基金重点项目负责人,这也是领域内第一个国家级的大数据重点项目。“作为一个刚毕业五年的青年学者,这对我来说是莫大的荣誉和责任。”苏萌说。
⑸ 听清华大学教授讲科学研究的第四范式—基于大数据的研究
11月10日,周五,受谢教授和肖教授邀请,一起去了武大听大数据讲座。清华大学的一位80后教授—孟天广讲得很宏观很系统,简录如下。
观点:
1 大数据是种新研究方法,属于第四范式研究,不讲因果,只讲相关关系,通过相关关系来预测未来。
2大数据研究方法终结了传统的定量定性研究分野。
3大数据研究可视化,是优势。
4大数据研究方法也有一些批评:
方法批评、可行性批评、伦理批评。
5大数据研究方法使人文社科研究变得更有价值。出现一个新学科:计算人文社会科学,清华大学建立了一个新研究中心,招收双学位学生:大数据分析专业与其他专业。
⑹ 吴恩达称AI是时候从大数据转向“小数据”了,你认可这个观点吗
我个人很认可吴恩达的这个观点,因为我就是大数据专业的研究生,我最近研究的话题也是这个。因为这个话题有点高端,一句话说不清,下面我仔细讲一下。
扯远了,回归正题,总的来说,我是认可吴恩达教授的观点的,因为他的观点和我的研究方向有异曲同工之妙。
⑺ 朱文武是什么意思
朱文武,清华大学计算机科学与技术系教授,信息科学与技术国家研究中心副主任,大数据算法与分析国家工程实验室副主任,清华大学人工智能研究院大数据智能研究中心主任, 国家973项目首席科学家, 国家基金委重大项目负责人。现担任 IEEE Transactions on Multimedia指导委员会主席,曾任IEEE Transactions on Multimedia主编。AAAS Fellow、IEEE Fellow、SPIE Fellow、欧洲科学院外籍院士。[1]
⑻ 杨青青教授基于大数据的传统戏曲服饰纹样数字化分析与再设计系统研究的研究意义是什么
上海戏剧学院杨青青教授正在进行的研究,是基于大数据的传统戏曲服饰纹样数回字化分答析与再设计系统研究,谈到研究意义,杨教授认为,在迅猛发展的现代文化产业市场,很多中国传统戏曲剧团,面临被淘汰出局进入博物馆的困厄。“创造性转化、创新性发展”。戏曲工作者在内容与形式转向现代的革故鼎新,那是“创新性发展”。未来,无论数据库与算法成果都将是共享的,这将会获得中国设计产业上的巨大效益。
⑼ 于民鹤是谁
于民鹤,女,清华大学博士研究生毕业,现东北大学讲师。她参与了以下科研项目:1、海量文本大数据的相似性搜索技术研究;2、面向互联网+应用的文本大数据相似性搜索技术研究;3、面向智慧教育的大规模异构信息网络相似性搜索技术研究;4、面向综合能力评价的精准学生画像构建技术研究。
⑽ 复旦教授打车800次,手机越贵打车越贵,大数据杀熟是否会成为趋势
大数据杀熟是一种行业不规范经营的现象复旦大学的一个教授打车数百次,发现手机越贵打车越贵,虽然这个现象听起来比较不靠谱,但是它却是切实存在的,现在由于大数据的发达,经营者可以轻而易举地获得有关使用者的的一些信息,包括手机里的一些联系人信息,而且根据一些信息判断出用户的手机好坏,这也就造成了根据手机质量好坏来进行差别收费,这就很让人受不了,这是一种行业的不规范经营,在将来进一步规范后这种现象就会逐渐减少,并不会成为一种大的趋势,社会上是不容许的,消费者也不会甘心让这种现象长期存在并成为一种趋势,这种趋势如果在这个行业蔓延开来,那么其他行业也迟早会受到影响。