スパークでディレクトリの内容を読みます

カビール:

私はちょうど私達が彼らの上にディレクトリと反復の内容を読み取ることができる方法を知りたいと思ったスパークに新しいです。C#対応するコード

Foreach(var path in Directory. EnumerateFiles(directory, *,.. ) {} ;
アミット・クマール:
  JavaSparkContext jsc = new JavaSparkContext(sc);
  JavaPairRDD<String,String> rdd = jsc.wholeTextFiles(path);
          for(Tuple2<String, String> str : rdd.toArray()) {           System.out.println("+++++++++++++++++++++++++++++++++++++++++++");
      System.out.println("File name " + str._1);
      System.out.println("+++++++++++++++++++++++++++++++++++++++++++");
      System.out.println();
      System.out.println("-------------------------------------------");
      System.out.println("content " + str._2);
      System.out.println("-------------------------------------------");
  }

それは私が同じ質問を持っていた、お役に立てば幸いです。

おすすめ

転載: http://43.154.161.224:23101/article/api/json?id=218884&siteId=1