其他分享
首页 > 其他分享> > 通过集合构建RDD或者DataFrame

通过集合构建RDD或者DataFrame

作者:互联网

利用字典构建dataframe。

from pyspark.sql import SparkSession,Row

spark = SparkSession.builder.appName("get_app_category").enableHiveSupport().config("spark.driver.host", "localhost").config("spark.debug.maxToStringFields", "100").getOrCreate()

dict=[{'c1':'a','c2':'b'},{'c1':'c','c2':'d'}]
spark.createDataFrame(dict).show()

 

标签:SparkSession,DataFrame,RDD,构建,c2,dict,spark,config,c1
来源: https://www.cnblogs.com/muyue123/p/13213375.html