spark读取hdfs上面的文件：
var textIn = sc.textFile("hdfs://localhost:9000/user/root/text.in") 保存文件到hdsf上：
textIn.map((_, 2)).saveAsTextFile("hdfs://localhost:9000/user/root/outdir") 本文共 229 字，大约阅读时间需要 1 分钟。
spark读取hdfs上面的文件：
var textIn = sc.textFile("hdfs://localhost:9000/user/root/text.in") 保存文件到hdsf上：
textIn.map((_, 2)).saveAsTextFile("hdfs://localhost:9000/user/root/outdir") 转载于:https://www.cnblogs.com/xuejianbest/p/10285026.html