天池大数据新手赛课程

A. 天池比赛数怎么算

开发者社区小网络
关注
天池大赛算法教程及获奖选手答辩 原创
2018-09-25 10:15:37

开发者社区小网络

码龄5年

关注
天池大数据竞赛是由阿里巴巴集团主办，面向全球科研工作者的高端算法竞赛。通过开放海量数据和分布式计算资源，大赛让所有参与者有机会运用其设计的算法解决各类社会问题或业务问题。特别优秀的解决方案将有机会直接上线阿里巴巴旗下各电商网站（含淘宝、天猫等）或第三方合作伙伴平台，服务中国乃至世界数以亿计的用户。

2014年3月，阿里巴巴集团董事局主席马云在北京大学发起“天池大数据竞赛”。首届大赛共有来自全球的7276支队伍参赛，海外参赛队伍超过148支。阿里巴巴集团为此开放了5.7亿条经过严格脱敏处理的数据。2014年赛季的数据提供方为贵阳市政府，参赛者根据交通数据模拟控制红绿灯时间，寻找减轻道路拥堵的方法。

课程链接：天池大赛算法教程及获奖选手答辩

本课程主要讲解天池新手入门赛的参赛技巧、常用算法，以及获奖选手答辩视频。

应用意义：

大数据专家、阿里巴巴集团副总裁涂子沛介绍，比赛中胜出的优秀数据模型，不仅可用于参赛者的学术研究成果，还有机会走出实验室，直接应用于淘宝、支付宝等真实的商业场景，影响中国乃至世界数以亿计的用户。在此前的“天猫推荐算法大赛”中，6名90后大学生研发的个性化推荐算法，在“双11”当天的实战效果超过天猫原有算法的16.9%，赢得100万元奖金。
涂子沛说，数据经济的时代正在到来，中国2015年拥有的数据量占全球的14%，到2020年这一比例将上升至21%。但我们的数据利用率不到0.4%，更多的数据仍然沉睡在各个角落。中国需要有效的数据处理方法，更需要大数据人才。阿里云天池大赛将成为一个数据众智众创平台，吸引更多政府、公司开放数据资源，创新数据商业模式，引爆新生代力量和数据经济的能量。

B. 大数据新手入门的课程和书籍有什么推荐

目前大数据的技术体系已经非常庞大了，初学者要根据自己的发展规运备闭划来制定学习规划，入门大数据的方式也要结合自己的知识基础。

对于要进入IT互联网行业从事大数据开发岗位的同学来说，入门大数据可以先从编程语言开始，接着学习大数据平台知识，然后结合大数据平台来完成场景开发实践。在编程语言的选择上，可以重点考虑一下Java语言，相对于其他编程语言来说，目前Java岗位的人才需求量相对大一些。

对于要从事算法岗的同学来说，入门大数据旁裂也可以分成三个阶段，第一个阶段是编程语言的学习，第二个阶段是学习算法基础，这个阶段需要学习一下统计学、机器学习相关知识，为后续奠定一个滚散基础，第三个阶段是结合场景来开展算法实践，这个阶段也需要掌握大数据平台的相关知识。

如果仅仅想通过学习大数据技术来提升自己的数据力，本身并没有从事大数据岗位的想法，那么入门大数据可以从学习Python语言开始，然后进一步学习基于Python语言来完成数据分析，这个过程同样要考虑到应用场景的问题，可以跟自己的专业方向相结合。

从整个大数据的技术体系结构来看，大数据技术涉及到数据采集、整理、存储、分析、呈现、应用和安全等领域，这些领域都可以采用单独学习的方式，比如既可以从数据采集开始学起，也可以从数据分析开始学起，但是不论从哪个领域开始学起，一定要重视与场景相结合，不能脱离场景来学习大数据技术。

最后，如果有学习大数据相关的问题，可以向我发起咨询。

C. 天池大数据竞赛值得参加吗

如果自己来编程能力比较强，自天池大数据竞赛还是非常值得参加的。天池比赛的趣味性与挑战性挺大，涉及到自然语言处理，图像深度学习以及排序优化等搜索技术相关内容，可以通过竞赛学到学到许多专业知识，提升代码能力，逻辑思维能力，如果能进入比赛答辩还有进一步提升机会，赛后交流能了解更多大神思路。比赛成绩好对工作面试极有好处，面试很注重项目和实战经验，天池比赛无疑非常贴近实际业务场景，还有奖金福利。随着天池宣传与普及，天池参赛人员越来越多，含金量会越来越重。

D. 大数据课程都学什么啊

基础阶段：Linux、Docker、KVM、MySQL基础、Oracle基础、MongoDB、redis。
hadoop maprece hdfs yarn：hadoop：Hadoop 概念、版本、历史，HDFS工作原理，YARN介绍及组件介绍。
大数据存储阶段：hbase、hive、sqoop。
大数据架构设计阶段：Flume分布式、Zookeeper、Kafka。
大数据实时计算阶段：Mahout、Spark、storm。
大数据数据采集阶段：Python、Scala。
大数据商业实战阶段：实操企业大数据处理业务场景，分析需求、解决方案实施，综合技术实战应用。
大数据分析的几个方面：
1、可视化分析：可视化分析能够直观的呈现大数据特点，同时能够非常容易被读者所接受，就如同看图说话一样简单明了。
2、数据挖掘算法：大数据分析的理论核心就是数据挖掘算法。
3、预测性分析：从大数据中挖掘出特点，通过科学的建立模型，从而预测未来的数据。
4、语义引擎：需要设计到有足够的人工智能以足以从数据中主动地提取信息。
5、数据质量和数据管理：能够保证分析结果的真实性

E. 数据科学平台有哪些

1. kaggle

一个比较权威的全球性的数据竞赛平台，也是一个很好的技术和数据分享社区。可以找到各个领域的比赛和数据，最重要的是可以找到很多有用的经验贴和一个开源的代码，可以帮助小白前进，小编做个几个比赛，该平台对我的帮助很大，学到很多东西。该平台的比赛工作面试时认可度比较大。链接：https://www.kaggle.com

2.天池

天池是阿里云创建的数据竞赛平台，它和 Kaggle 很像。各个领域的比赛都有，赛制持续时间较长，会有一些直播教程和专业课程，比较利于新手入门。链接：https://tianchi.aliyun.com/competition/gameList/activeList

3.DataCastle

平台上多为企业的或者政府的比赛，包含数据算法各个方向，数据量方面相对天池较少，参赛人数也次之。平台上也有类似kaggle的名人堂和和数据集，平台的社区活跃度不高。链接：https://www.dcjingsai.com/common/cmptIndex.html

4.Datafountain

DataFountain(DF)平台是CCF大数据与计算智能大赛指定的平台。CCF大数据与计算智能大赛(BigData & Computing Intelligence Contest,简称“BDCI”)是由中国计算机学会主办的大数据及人工智能领域算法挑战及应用创新大型赛事。链接：https://www.datafountain.cn

5.科赛-Kesci

科赛(Kesci.com)是聚合数据人才和行业问题的在线社区。平台2019年初开始转型，接的比赛项目奖金较高，一些大型比赛会有一些培训指南。链接：https://www.kesci.com

6.biendata

Biendata.com是一个人工智能竞赛学习平台，用户可通过该平台报名并参加人工智能领域各类赛事，奖金较丰富。链接：https://biendata.com

7.华为云

华为云平台的比赛多是基于华为的业务，有的是直接面向校招，比赛项目较多，包含软件、AI、芯片等，奖金较多，有免费的gpu算力。链接：https://competition.huaweicloud.com/competitions

7.其它平台

网络点石：http://dianshi.bce..com/competition

JDATA：https://jdata.jd.com

京东大赛 : https://jdder.jd.com

腾讯广告算法大赛：https://algo.qq.com

爱奇艺ai竞赛平台(多为视频比赛) : http://challenge.ai.iqiyi.com

图灵联邦: https://www.turingtopia.com/competitionnew

讯飞开放平台：http://challenge.xfyun.cn

Flyai:https://www.flyai.com

蚂蚁金服：https://dc.cloud.alipay.com

TinyMind: https://www.tinymind.cn/competitions/ai

拍拍贷：https://ai.ppdai.com

睡前Futurelab（只针对在校生）：https://ai.futurelab.tv/contest/all

国外医学图像相关：https://grand-challenge.org/challenges

数睿思：http://www.tipdm.org/bdrace/jingsa

数愿：http://www.datadreams.org/#/raceList

F. 大数据有什么技术，大数据技术内容介绍

大数据是众多学科与统计学交叉产生的一门新兴学科。大数据牵扯的数据挖掘专、云计算属一类的，所以是计算机一类的专业。分布比较广，应用行业较多。

零售业：主要集中在客户营销分析上，通过大数据技术可以对客户的消费信息进行分析。获知客户的消费习惯、消费方向等，以便商场做好更合理商品、货架摆放，规划市场营销方案、产品推荐手段等。

金融业：在金融行业里头，数据即是生命，其信息系统中积累了大量客户的交易数据。通过大数据可以对客户的行为进行分析、防堵诈骗、金融风险分析等。

医疗业：通过大数据可以辅助分析疫情信息，对应做出相应的防控措施。对人体健康的趋势分析在电子病历、医学研发和临床试验中，可提高诊断准确性和药物有效性等。

制造业：该行业对大数据的需求主要体现在产品研发与设计、供应链管理、生产、售后服务等。通过数据分析，在产品研发过程中免除掉一些不必要的步骤，并且及时改善产品的制造与组装的流程。

G. 计算机竞赛有哪些

ACM国际大学生程序设计竞赛

适合有一定竞赛基础且对算法感兴趣大学生；作为计算机领域的顶尖程序设计大赛，每年上半年举行。不同于其他竞赛的个人赛，ACM 为「小组战」，由 3 名在校大学生组成小分队参加比赛。在比赛过程中，3 人组成的小组共用一台电脑，编写程序解决 8-10 个问题。由于是世界级的比赛，难度非常高，适合有一定竞赛基础的小伙伴。