Spark 读取HDFS文件

环境:CentOS 6.3 SPARK 1.0.0

 

1. 读取text文件

scala> val distFile = sc.textFile("hdfs://localhost:54310/data/in/log")

res1: Long = 2

 

你可能感兴趣的:(spark,hdfs,读取hdfs)