像拥有水电煤一样拥有计算能力—阿里云大数据计算上海峰会圆满举行

6月24日,阿里云大数据计算服务MaxCompute上海峰会圆满举行。本次峰会,由阿里云MaxCompute、阿里云MVP团队联合打造,结合大数据业务场景、聚焦开发实战、以及阿里巴巴计算平台对生态系统的支持与融合,为上海的大数据发烧友及创业者们呈现了一场精彩且干货满满的大数据盛宴。

123

大数据领域最核心的能力当属计算能力。计算力就像水电煤一样成为了一种新的能源,而能源的特点是具备普惠性。计算力要做到普惠,就需要大幅度地提升核心计算力的性能、稳定性以及性价比。那么就不得不关注计算力方面的基础引擎。

MaxCompute作为阿里巴巴计算力的核心引擎,承载着阿里集团99%的数据存储和95%的计算,是阿里集团名副其实的航母级计算引擎。在2017年的双11的技术大考中,MaxCompute双11当天数据处理峰值超过320PB,百万级调度作业,不断刷新极限。

在今天,阿里巴巴MaxCompute要做的是在不断打磨计算能力的同时,把已有的计算能力惠及到阿里以外的更多企业和开发者,让计算驱动数据,让数据驱动业务,成为更多企业大数据业务和人工智能的强劲计算引擎。

上海峰会上,技术专家将技术原理与开发实战相结合,为到场的企业开发者详细介绍了阿里巴巴的核心计算引擎。

MVP

翟永东 阿里云 MVP、驻云科技 培训负责人
《如何使用大数据计算服务 MaxCompute 进行数据分析》

作为计算力的核心引擎,MaxCompute在2018年会持续重点打造其性能。大家能够看到,大数据时代,已经有非常多的相关产品和行业出现,计算力要想升级成为一种新的能源,在平台层面需要兼容更多数据,包括结构化和异构数据。当这些数据全部上来之后,就会对于计算力产生很大的挑战,这也是MaxCompute一直以来关注的内容。在今天,MaxCompute2.0已经可以完美支持多源异构数据的导入。

_

祎休 阿里巴巴 MaxCompute 产品专家
《阿里云大数据计算服务与生态系统的融合》

祎休为大家分享了阿里云大数据计算服务与开源系统融合的一站式大数据解决方案、以及在拥抱开源和生态的时候阿里巴巴的技术团队遇到过哪些问题和挑战。

MaxCompute不仅提供标准的JDBC协议,更支持Java、Python、R、PHP,并可直接处理开源数据格式。同时在公共云,Spark on MaxCompute即将开启!

_

陈振 阿里巴巴 DataWorks 产品专家
《DataWorks V2新版本功能揭秘》


DataWorks是阿里大数据产品家族中提供一站式的大数据云研发的平台,基于这个平台能够大大地降低开发者在做大数据相关工作的门槛。在本次峰会中,DataWorks产品专家陈振为我们解锁了Dataworks有关业务流程编辑、智能监控等全新功能。

_

随着近些年大数据技术的不断发展和成熟,无论在传统行业还是互联网公司,计算能力都将成为最基础的能力。而对于这种基础能力的获取,企业完全可以选择更为专业的云厂商,享受开箱即用免运维的大数据计算基础服务。

那么为什么选择MaxCompute作为大数据计算平台呢?在商业层面来讲,有以下几点优点:

  • MaxCompute是一个开箱即用的系统,大家完全不用考虑系统的规模问题。
  • MaxCompute有很多性能层面的评测和优化,可以实现性能和性价比的最优。
  • MaxCompute基于阿里巴巴内部的非常丰富的安全体系保障多租户情况下的数据安全。
  • MaxCompute可以支持多种分布式计算模型。
  • MaxCompute支持上云工具,包括社区兼容和生态链。

从整体流程来看,如果用户的数据已经在阿里云上了,那么就可以非常容易地通过多种形式迁移到MaxCompute上来。如果数据在线下,可以通过专线或者VPN等形式在已有的数据集上通过各种同步工具迁移到云上。在云上可以通过数据集成和大数据项目的开发工具进行开发。针对普通的数据集成可以使用Dataworks以及专门的插件进行开发。当进入集群中使用平台做数据计算服务的时候,可以非常方便地实现与机器学习平台的联动,也可以和阿里云的推荐引擎、报表分析产品工具等紧密地结合在一起。

456

阿里云MaxCompute在2018年将持续打磨产品,提升性能和性价比,继续释放存储、计算方面的红利,惠及阿里合作伙伴和客户。

猜你喜欢

转载自yq.aliyun.com/articles/603685