https://www.cnblogs.com/rxingyue/p/7113235.html
進(jìn)入 spark-shell 需要能訪問 spark 的 Linux 賬號, 如果沒有獲取到 sc , spark 等變量, 可以先切換賬號:
sudo su - spark
val df = spark.read.parquet("hdfs://10.0.0.125:8000/ald_log_parquet/201711*/*/part-*")
退出 spark-shell:
:quit
