2017年Apache Spark两大发展方向:深度学习和提升实时流性能
Matei Zaharia 过往记忆大数据
最近在美国旧金山举行的Spark Summit 2017,Apache Spark的发明者Matei Zaharia介绍了2017年Apache Spark的重点开发方向:深度学习以及对流性能的改进。2016年是深度学习之年,而且目前越来越多的人在加入这个,深度学习 + 大数据是目前一个很热门的趋势,所以spark中支持深度学习并且提供一个友好的API势在必行。
另外,Spark Streaming虽然在吞吐量方面占据了很多优势,但是随着流技术的发展,越来越多的应用不仅关注实时流的吞吐量,时延也是一个很重要的考量指标。所以2017年、Apache Spark 2.2.0之后流的时延将达到1ms!最重要的是,这种性能的提升根本不需要用户修改之前写的代码。好了,不多说了,大家看看Matei Zaharia的PPT。(本文PPT下载地址:http://pan.baidu.com/s/1kVDmaN1,点击下面 阅读原文 即可进入下载)
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 [email protected] 举报,一经查实,本站将立刻删除。