spark读取csv生成DF（python和scala两版）

python流程图：

python代码：

from pyspark.sql import SparkSession      
spark = SparkSession.builder.getOrCreate()
path = 's3://nyc-tlc/test/fhvhv_tripdata_*.csv'
df_fhvhv=spark.read.format('csv').option('sep',',').option('inferSchema',True).option('header',True).load(path)
df_fhvhv.show(20)

scala流程图：

scala代码：

val spark = SparkSession.builder().appName("testSpark").master("local").getOrCreate()
    val pathcsv = "/Users/without/Desktop/demo1.csv"
    val sc = spark.sparkContext
    prin