乐趣区

关于spark:Scala-WorkCount-null-entry-in-command-string-null-ls-F

java.io.IOException: (null) entry in command string: null ls -F+ 一个文件门路:解决办法
运行环境为 idea,本地运行 scala 编写的 WordCount 实例时,呈现了 java.io.IOException: (null) entry in command string: null ls -F+ 文件门路的谬误。

起因是想要一次性加载所有文件,然而在加载所有文件的时候,门路指向的写法不对。

我想要读取的是 datas 上面的所有文件:

本来的代码:
val value = sc.textFile("{datas")
批改为:
val value = sc.textFile("{datas/*}")

运行胜利

退出移动版