スパークスプリットを使用して、テーブル内のデータ


私は
コーディング#:UTF-8
pyspark.sql輸入SparkSessionのから

インポートOS

の場合__name__ == '__main__':
はos.environ [ 'JAVA_HOME'] = 'C:\プログラムファイル\のJava \ jdk1.8.0_211'
プリント(OS。パス)
火花= SparkSession \
.builder \
.appName( "PythonのスパークSQLの基本的な例")\
.configを( "spark.some.config.option"、 "いくつかの値")\
.getOrCreateます(http:// WWW。 my516.com)
パス= "C:/Users/Administrator/Desktop/vedios.txt"
DF = spark.read.csv(パス、ヘッダ= TRUE)
df.createOrReplaceTempView( "ムービー")
DF = spark.sql( "選択*映画からの側面図は、TYPE1"として(スプリット(カテゴリ、 '#')))爆発
DFを。ショー()
 
---------------------

おすすめ

転載: www.cnblogs.com/ly570/p/11357420.html