sprk学习之二

lines = sc.textFile()    加载RDD
=====================================================================
errors=lines.filter(_.startsWith("ERROR"))
errors.persist()
                                             transaction
=======================================================================

Mysql_error=error.filter(_.contains("MySQL")).count
http_error=error.filter(_.contains("Http")).count       count  action
=======================================================================

猜你喜欢

转载自yhx1014.iteye.com/blog/2164134
今日推荐