2017年Apache Spark两大发展方向:深度学习和提升实时流性能

2017年Apache Spark两大发展方向:深度学习和提升实时流性能

Matei Zaharia 过往记忆大数据
最近在美国旧金山举行的Spark Summit 2017,Apache Spark的发明者Matei Zaharia介绍了2017年Apache Spark的重点开发方向:深度学习以及对流性能的改进。2016年是深度学习之年,而且目前越来越多的人在加入这个,深度学习 + 大数据是目前一个很热门的趋势,所以spark中支持深度学习并且提供一个友好的API势在必行。

另外,Spark Streaming虽然在吞吐量方面占据了很多优势,但是随着流技术的发展,越来越多的应用不仅关注实时流的吞吐量,时延也是一个很重要的考量指标。所以2017年、Apache Spark 2.2.0之后流的时延将达到1ms!最重要的是,这种性能的提升根本不需要用户修改之前写的代码。好了,不多说了,大家看看Matei Zaharia的PPT。(本文PPT下载地址:http://pan.baidu.com/s/1kVDmaN1,点击下面 阅读原文 即可进入下载)
2017年Apache Spark两大发展方向:深度学习和提升实时流性能
2017年Apache Spark两大发展方向:深度学习和提升实时流性能
2017年Apache Spark两大发展方向:深度学习和提升实时流性能

猜你喜欢

转载自blog.51cto.com/15127589/2680630