阿里云上部署大数据

A. 阿里云有什么功能

阿里云创立于2009年，是全球领先的云计算及人工智能科技公司，为200多个国家和地区的企业、开发者和政府机构提供服务。截至2016年第三季度，阿里云客户超过230万，付费用户达76.5万。阿里云致力于以在线公共服务的方式，提供安全、可靠的计算和数据处理能力，让计算和人工智能成为普惠科技。

阿里云在全球各地部署高效节能的绿色数据中心，利用清洁计算为万物互联的新世界提供源源不断的能源动力，目前开服的区域包括中国（华北、华东、华南、香港）、新加坡、美国（美东、美西）、欧洲、中东、澳大利亚、日本。

目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。

(1)阿里云上部署大数据扩展阅读：

云计算价值

阿里巴巴集团首席战略官曾鸣，曾系统性地概括了云计算对于企业的价值。

1、移动+云计算=实现了IT服务的“在线化“，让技术的门槛大幅降低。

2、云计算是公共服务，是可变成本，可按需使用，不再是固定资产投入，创业公司的成本压力由此大幅下降。

3、云计算将数据变成生产资料和企业资产。

云计算，是用足够的低成本、商业化的模式来解决大计算的问题。以前大家只会想到超级计算机，它的运营成本高，而反应速度还是很慢，当这些大的互联网应用真正发展时，比如淘宝，数亿商家提出的购买需要，实时信息匹配的背后，就是大数据的计算。所以，云计算就是使用分布式的方法，针对海量数据大计算的一种解决方案。如果没有计算能力，我们谈不上大数据的时代，谈不上海量数据的高效应用 。

马云在2016杭州云栖大会上提出了五新：“新零售，新制造，新金融，新技术，新能源”，阿里云正在成为这“五新”的经济基础设施，其自主研发的超大规模通用计算操作系统飞天，可以将遍布全球的百万级服务器连成一台超级计算机，以在线公共服务的方式为社会提供计算能力 。

阿里云总裁胡晓明表示：接下来的3~5年，云计算、大数据不仅将在互联网内发生改变，同样会在工业制造、农业作业、城市交通，以及基因学、医疗影像、教育娱乐等领域产生赋能。“云计算、大数据会对各行各业的基础生态产生改变，阿里巴巴希望把已有的能力进行输出，给予更多的创新者、创业者以及政府机构和国内外的合作者们。”

B. 阿里云的大数据应用ODPS应该怎么使用

阿里云开放数据处理服务（Open Data Processing Service简称ODPS）是构建在飞天系统上的大规模分布式数据梳理服务。处理量大，一般用户用来购买日志和业务数据进行数据挖掘。

C. 阿里云“全球网”落成，中美云计算将同台竞技

在中国的互联网世界里，云计算大概是最具有全球化野心的领域。从2014年开始，阿里云便相继在美国、香港、新加坡等部署数据中心，并频频对标亚马逊、微软等国外云计算厂商。
11月21日，阿里云宣布其位于欧洲、中东、日本和澳大利亚的数据中心将于月内开服，标志着属于中国的云计算“全球网”正式建成。而在此之前，亚马逊、微软乃至谷歌，也次第开始了数据中心的全球化布局。在云计算这场“数人头”式的竞赛中，来自中国的云计算厂商业已成为一股不可小觑的力量。
国内占尽先机，阿里云们为何要筹谋全球化？
今年9月初，亚马逊官方宣布AWS云服务在中国区正式商用，也意味着AWS入华三年之后正式取得了合法身份。不过，相比于AWS在全球范围内市场份额第一的成绩，截至2015年末，IDC的数据显示亚马逊在中国IaaS市场份额仅占4.3%，远低于第一阵营的阿里云。
当然，亚马逊和微软们的“失意”，也从侧面反映了这样一个事实，那些率先占位和后发制人的中国云计算厂商们已经占尽先机。然而，和中国早期互联网公司立足国内的“小农思想”所不同的是，云计算服务自诞生开始似乎就肩负了全球化的使命。可以解释的原因有很多，比如说云计算的兴起和BAT的海外战略在时间点上相契合，再比如说全球化的互联网服务已是大势所趋，如此种种。或许要真正理解阿里云为何要在云服务方面进军全球市场，并积极拥抱云计算的全球通时代，还需要思考下面两个切实的问题。
1、中国云计算厂商全球化的时机是否成熟？
今年4月份，投资机构德意志银行的报告称，阿里云年度净收入超过谷歌云计算平台，与亚马逊AWS、微软Azure形成云服务“3A”竞争局面，正式结束亚马逊、微软、IBM、Google、Salesforce等五强争霸的时代。
而在这份“3A”新格局的全球数据中心分布图中，亚马逊、微软和亚马逊都在主要互联网市场都形成了覆盖。数据中心代表着云计算厂商的服务能力也意味着服务所能覆盖的范围。单从数字上来讲，阿里云在数据中心节点上同美国云计算厂商的差距并未拉大，且阿里手中的现金流及其在云计算领域的投入并不输于亚马逊等竞争对手。
另一方面，此前中国互联网公司出海多半是商业模式的出海，所面临的不只是当地的竞争对手，还有政策、文化和用户习惯上的差异，而云计算的全球化则是技术的出海。事实上，历年双11的表现已经可以看出，以阿里云为代表的中国云计算厂商业已具备了全球化竞争的能力。比如说在今年的天猫双11上，阿里云的“飞天”系统实现了每秒17.5万笔交易峰值、每秒12万笔支付峰值，而在2009年的第一次双11中这一峰值数据仅为每秒400笔交易。
IDC数据显示，2019年全球云计算市场收入规模将达到1410亿美元，比2015年的700亿美元市场规模翻倍。相比于国内市场，对阿里云及其他厂商来讲，全球化意味着更大的市场，也预示着更大的机遇。
在笔者看来，当互联网进入中国的时候，长城内的有志青年们无不热血沸腾，一场围绕互联网的创业浪潮蓬勃兴起。互联网就像是创新的催化剂，为创业者们开拓了更大的世界，甚至可以说是思想上的洗礼。云计算时代的来临则是中国互联网厂商彻底走出模仿走向自主创新的转折点，阿里云和亚马逊之间的较量，或许正是中国互联网摆脱“美国压制”的时代性标志。
由此便不难理解，虽然政策监管、带宽、数据中心等因素为云计算贴上了地域性的标签，但云计算技术的全球化是毋庸置疑的。这一点，亚马逊、微软等美国云计算厂商们早已认识到，而阿里云等中国厂商也开始积极实践。
2、谁在驱动中国云计算厂商的全球化？
作为一家商业公司，追求更大的市场份额和更大的利润似乎是其天职，但在阿里云等云计算厂商的全球化过程中，一个不容忽略的因素就是中国互联网公司的全球化演进。这里面既有知名的大疆创新，也有很多未被大多数人所知的创新者。
就中国云服务的主要用户而言，游戏、电商、金融、O2O、视频类公司占了很大的比重，尤其是游戏和电商领域，近几年在全球化方面正在持续加速。比如说《华尔街日报》曾报道称中国互联网零售商正在美国、全球扩张，并将其视为美国企业的挑战。而游戏领域的需求早已成为国内云计算厂商布局海外数据中心的直接驱动力。
原因不难理解，当一款游戏需要发行海外版本时，在海外数据中心部署业务，可以显著降低网络延迟、提高游戏响应速度，这些因素直接决定了一款游戏的存亡。据《2015年中国游戏产业报告》显示，中国游戏的海外出口规模达到53.1亿元，同比增长72.4%。为此，Ucloud分别在2013年底和2014年底在香港和北美上线了数据中心，阿里云、腾讯云乃至很多云计算创业公司的全球化初衷大抵如此。
事实证明，云计算厂商的这一做法着实瞄准了海外拓展用户的痛点，在支付方式、母语沟通、业务响应、法律法规、成本控制等方面，中国的云服务提供商更受青睐。以此前被媒体捧上头条的游戏《苏丹的复仇》为例，蝉联沙特阿拉伯iOS畅销榜长达半年之久，其研发团队却位于福州，依靠阿里云的海外数据中心，实现了游戏的海外运营。
王坚博士在《在线》一书中，很好的解释了“计算”作为公共服务，成为创新创业能源动力的价值。缺少计算资源的支撑，中国企业的全球化创新势必会受到阻碍，阿里云的全球通实际上也在弥补中国在科技创新方面的短板。
另外，亚马逊、微软、甲骨文等对中国市场的死磕，或许也是阿里云们加速海外布局的另一诱因，如果不能尽早满足中国企业全球化的需求，无疑会将这块蛋糕拱手相送给海外的竞争对手。
与海外巨头同台相竞，中国云计算厂商的危与机
与AWS、Azure进入中国市场类似，中国云计算在向海外扩张时也将面临遵守当地法律的要求，以及对产业深度的理解。以数据中心节点的建设为例，用户、市场、基础设施、政府以及成本等多个维度的因素在影响选址和速度。也就是说，除了资金实力，海外运营能力同样考验着云计算厂商的成败。
归纳来看，可以从三个方面来衡量中国云计算厂商的海外竞争力。
其一，市场选择。
根据BSA国际软件联盟发布的全球云计算指数，北美、欧洲和亚洲市场成为全球云计算产业的主要市场。对于中国云计算厂商来说如何进入这些市场决定着其在全球市场的影响力。就目前来看，阿里云选择了香港、美国、新加坡等作为海外战略的第一步，并在第二阶段深耕欧美市场的同时，选择进入相对空白的中东市场。
一方面，这些市场的语言文化和政策法规，再加上当地云计算人才的密度，选择这一市场的门槛相对更低；另一方面，微软、谷歌、亚马逊等云厂商已经在这些地区扎根，竞争将更加激烈，同时也意味着成熟的基础设施条件。
其二，本土化运营。
在阿里云公布的海外合作名单中，软银、英特尔、电讯盈科、新加坡电信、SK集团C&C等赫然在列，在云服务方面启动本土化运营的思路不言而喻。可以看出，阿里云选择的合作伙伴多是本土的电信运营商，比如在欧洲市场与沃达丰达成战略合作，阿里云主要负责输出云计算大数据技术和产品，沃达丰主要负责在销售、市场、服务等方面。
和亚马逊在中国市场徘徊三年，最终选择“借壳落地”策略不同的是，阿里云的本土化运营更容易积累早期的用户，并不断弥补在品牌知名度方面的短板。缺少“因地制宜” 的亚马逊几乎错失了中国市场。在这一方面，来自中国的阿里云则表现的更加开放。
其三，技术优势。
有关云计算技术同质化的说法不绝于耳，在诸多开源技术的衬托下，似乎IaaS市场最终面临基础设施的比拼。不管怎样，亚马逊和微软、谷歌的竞争本质上仍属于“谁胳膊粗”的状态，即便AWS在市场份额上占据优势，却未能甩开身后的微软、IBM、甲骨文等一众玩家。
完成数据中心的“全球网”之后，阿里云跻身全球互联网第一阵营，和亚马逊、微软同台竞技。且在今年8月份，阿里云针对技术合作伙伴推出了AliLaunch计划，SAP、SUSE、HERE等11家国际软件服务商入驻该计划。假若阿里云能够将其及合作伙伴的技术优势与全球电商生态相融合，或可以带来不同于亚马逊的竞争力。
当然，需要正视的是，当前阿里云全球化所看好的仍是拓展海外业务的中国企业，比较理想的状态是，这些企业不再需要雇佣当地员工来搭建自己的计算资源，而是在国内即开即用，用一张云计算网络支撑全球业务。
写到最后，不可否认阿里们在云计算领域的全球化野心，也不难肯定在经济全球化更加发达的情况下，计算资源也将迎来全球化的竞争。借用网络上一个调侃性的说法，特朗普上台后的硅谷将前途未卜，中国互联网将迎来取代美国成为世界互联网中心的新机遇。虽然这只是一个玩笑，但云计算的全球化竞争已经不可避免。
Alter，互联网观察者，长期致力于对智能硬件、云计算、VR等行业的观察研究。微信公众号：spnews

D. 阿里云主要提供什么服务

阿里云致力于以在线公共服务的方式，提供安全、可靠的计算和数据处理能力，让计算和人工智能成为普惠科技。

阿里云服务着制造、金融、政务、交通、医疗、电信、能源等众多领域的领军企业，包括中国联通、12306、中石化、中石油、飞利浦、华大基因等大型企业客户，以及微博、知乎、锤子科技等明星互联网公司。在天猫双11全球狂欢节、12306春运购票等极富挑战的应用场景中，阿里云保持着良好的运宽李行纪录。

阿里云在全球各地部署高效节能的绿色数据中心，利用清洁计算为万物互联的新世界提供源源不断的能源动力，目前开服的区域包括中国（华北、华东、华南、香港）、新加坡、美国（美东、美西）、欧洲、中东、澳大利亚、日本。

(4)阿里云上部署大数据扩展阅读：

阿里云主要产品：

1、弹性计算：

云服务器ECS：可弹性扩展、安全、稳定、易用的计算服务

块存储：可弹性扩展、高性能、高可靠的块级随机存储

专有网络VPC：帮您轻松构建逻辑隔离的专有网络

负载均衡：对多台云服务器进行流量分发的负载均衡服务

弹性伸缩：自动调整弹性计算资源的管理服务

资源编排：批量创建、管理、配置云计算资源

容器服务：应用全差带生命周期管理的Docker服务

高性能计算HPC：加速深度学习、渲染和科学计算的GPU物理机

批量计算：简单易用的大规模并行批处理计算服务

E-MapRece：基于Hadoop/Spark的大数据处理分析服务

2、数据库：

云数据库RDS：完全兼容MySQL，SQLServer，PostgreSQL

云数据库MongoDB版：三节点副本集保证高可用

云数据库Redis版：兼容开源Redis协议的Key-Value类型

云数据库Memcache版：在线缓存服务，为热点数据的访问提供高速响应

PB级云数据库PetaData：支持PB级海量数据存储的分布式关系型数据库

云数据库HybridDB：基于GreenplumDatabase的MPP数据仓库

云数据库OceanBase：金融级高可靠、高性能、分布式自研数据库

数据传输：比GoldenGate更易用，阿里异地多活基础架构

数据管理：比phpMyadmin更强大，比Navicat更易用

3、存储：

对象存储OSS：海量、安全和高可靠的云存储服务

文件存储：无限扩展、多共享、标准文件协议的文件存储服务

归档存储：海量数据的长期归档、备份服务

块存储：可弹性扩展、高性能、高可靠的块级随机存储

表格存储：高并发、低延时、无限容量的Nosql数据存储服务

4、网络：

CDN：跨运营商、跨地域全网覆盖的网络加速服务

专有网络VPC：帮您轻松构建逻辑隔离的专有网络

高速通道：高速稳定的VPC互联和专线接入服务

NAT网关：支持NAT转发、共享带宽的VPC网关

2018年6月20日，阿里云宣布联合三大运营商全面对外提供IPv6服务。

5、大数据：

MaxCompute：原名ODPS，是一种快速、完全托管的TB/PB级数据仓库解决方案。

QuickBI：高效数据分析与展现平台，通虚巧芦过对数据源的连接，和数据集的创建，对数据进行即席的分析与查询。并通过电子表格或仪表板功能，以拖拽的方式进行数据的可视化呈现。

大数据开发套件：提供可视化开发界面、离线任务调度运维、快速数据集成、多人协同工作等功能，拥有强大的OpenAPI为数据应用开发者提供良好的再创作生态

DataV数据可视化：专精于业务数据与地理信息融合的大数据可视化，通过图形界面轻松搭建专业的可视化应用，满足您日常业务监控、调度、会展演示等多场景使用需求

关系网络分析：基于关系网络的大数据可视化分析平台，针对数据情报侦察场景赋能，如打击虚假交易，审理保险骗赔，案件还原研判等

推荐引擎：推荐服务框架，用于实时预测用户对物品偏好，支持A/BTest效果对比

公众趋势分析：利用语义分析、情感算法和机器学习，分析公众对品牌形象、热点事件和公共政策的认知趋势

企业图谱：提供企业多维度信息查询，方便企业构建基于企业画像及企业关系网络的风险控制、市场监测等企业级服务

数据集成：稳定高效、弹性伸缩的数据同步平台，为阿里云各个云产品提供离线(批量)数据进出通道

分析型数据库：在毫秒级针对千亿级数据进行即时的多维分析透视和业务探索

流计算：流式大数据分析平台，提供给用户在云上进行流式数据实时化分析工具

6、人工智能：

机器学习：基于阿里云分布式计算引擎的一款机器学习算法平台，用户通过拖拉拽的方式可视化的操作组件来进行试验，平台提供了丰富的组件，包括数据预处理、特征工程、算法组件、预测与评估

语音识别与合成：基于语音识别、语音合成、自然语言理解等技术，为企业在多种实际应用场景下，赋予产品“能听、会说、懂你”式的智能人机交互体验

人脸识别：提供图像和视频帧中人脸分析的在线服务，包括人脸检测、人脸特征提取、人脸年龄估计和性别识别、人脸关键点定位等独立服务模块

印刷文字识别：将图片中的文字识别出来，包括身份证文字识别、门店招牌识别、行驶证识别、驾驶证识别、名片识别等证件类文字识别场景

7、云安全：

服务器安全（安骑士）：由轻量级Agent和云端组成，集检测、修复、防御为一体，提供网站后门查杀、通用Web软件0day漏洞修复、安全基线巡检、主机访问控制等功能，保障服务器安全

DDoS高防IP：云盾DDoS高防IP是针对互联网服务器（包括非阿里云主机）在遭受大流量的DDoS攻击后导致服务不可用的情况下，推出的付费增值服务，用户可以通过配置高防IP，将攻击流量引流到高防IP，确保源站的稳定可靠

Web应用防火墙：网站必备的一款安全防护产品。通过分析网站的访问请求、过滤异常攻击，保护网站业务可用及资产数据安全

加密服务：满足云上数据加密，密钥管理、加解密运算需求的数据安全解决方案

CA证书服务：云上签发Symantec、CFCA、GeoTrustSSL数字证书，部署简单，轻松实现全站HTTPS化，防监听、防劫持，呈现给用户可信的网站访问

数据风控：凝聚阿里多年业务风控经验，专业、实时对抗垃圾注册、刷库撞库、活动作弊、论坛灌水等严重威胁互联网业务安全的风险

绿网：智能识别文本、图片、视频等多媒体的内容违规风险，如涉黄，暴恐，涉政等，省去90%人力成本

安全管家：基于阿里云多年安全实践经验为云上用户提供的全方位安全技术和咨询服务，为云上用户建立和持续优化云安全防御体系，保障用户业务安全

云盾混合云：在用户自有IDC、专有云、公共云、混合云等多种业务环境为用户建设涵盖网络安全、应用安全、主机安全、安全态势感知的全方位互联网安全攻防体系

态势感知：安全大数据分析平台，通过机器学习和结合全网威胁情报，发现传统防御软件无法覆盖的网络威胁，溯源攻击手段、并且提供可行动的解决方案

先知：全球顶尖白帽子和安全公司帮你找漏洞，最私密的安全众测平台。全面体检，提早发现业务漏洞及风险，按效果付费

移动安全：为移动APP提供安全漏洞、恶意代码、仿冒应用等检测服务，并可对应用进行安全增强，提高反破解和反逆向能力。

8、互联网中间件：

企业级分布式应用服务EDAS：以应用为中心的中间件PaaS平台、

消息队列MQ：ApacheRocketMQ商业版企业级异步通信中间件

分布式关系型数据库服务DRDS：水平拆分/读写分离的在线分布式数据库服务

云服务总线CSB：企业级互联网能力开放平台

业务实施监控服务ARMS：端到端一体化实时监控解决方案产品

9、分析：

E-MapRece：基于Hadoop/Spark的大数据处理分析服务

云数据库HybirdDB：基于GreenplumDatabase的MPP数据仓库

高性能计算HPC：加速深度学习、渲染和科学计算的GPU物理机

大数据计算服务MaxCompute：TB/PB级数据仓库解决方案

分析型数据库：海量数据实时高并发在线分析

开放搜索：结构化数据搜索托管服务

QuickBI：通过对数据源的连接，对数据进行即席分析和可视化呈现。

E. 阿里云的MaxCompute数加（原ODPS）用的怎样

我觉得他们在开发这个的时候，可能考虑了很多中国的传统元素，所以在设计方面比较的符合中国的国情，不管是用户的体验方式还是怎样，都特别的能够拉好感。

但是从程序员的角度来说，我觉得它们的功能和模型做的也还是一般，虽然说在系统方面兼容性更好，但是缺点也还是蛮多的。

层次

之所以这样说，是因为他整个层次是非常丰富的，他很好的做了分层，也就是说，给不同的软件提供了不同的接入口，最底层是Linux+PC Server，上层软件是飞天，飞天是阿里云09年开始开发的一款分布式系统软件，主要提供分布式存储和分布式计算的调度、编程框架。开发语言是C++, 2013年该系统在生产环境支持调度5000台机器的集群。

• 总结
  

总的来说，他们开发的初衷是好的，但是出来的效果并不尽如人意，后续可能还要再看。