Hadoop的FileSystem.copyToLocalFile两个参数 空指针异常
生活随笔
收集整理的這篇文章主要介紹了
Hadoop的FileSystem.copyToLocalFile两个参数 空指针异常
小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.
轉(zhuǎn)載自?Hadoop的FileSystem.copyToLocalFile兩個參數(shù) 空指針異常
在網(wǎng)上一搜,直接改成fileSystem.copyToLocalFile(false,xx,xx,true)即可。
Exception in thread "main" java.lang.NullPointerExceptionat java.lang.ProcessBuilder.start(Unknown Source)at org.apache.hadoop.util.Shell.runCommand(Shell.java:482)at org.apache.hadoop.util.Shell.run(Shell.java:455)at org.apache.hadoop.util.Shell$ShellCommandExecutor.execute(Shell.java:702)at org.apache.hadoop.util.Shell.execCommand(Shell.java:791)at org.apache.hadoop.util.Shell.execCommand(Shell.java:774)at org.apache.hadoop.fs.RawLocalFileSystem.setPermission(RawLocalFileSystem.java:646)at org.apache.hadoop.fs.FilterFileSystem.setPermission(FilterFileSystem.java:472)at org.apache.hadoop.fs.ChecksumFileSystem.create(ChecksumFileSystem.java:460)at org.apache.hadoop.fs.ChecksumFileSystem.create(ChecksumFileSystem.java:426)at org.apache.hadoop.fs.FileSystem.create(FileSystem.java:906)at org.apache.hadoop.fs.FileSystem.create(FileSystem.java:887)at org.apache.hadoop.fs.FileSystem.create(FileSystem.java:784)at org.apache.hadoop.fs.FileUtil.copy(FileUtil.java:365)at org.apache.hadoop.fs.FileUtil.copy(FileUtil.java:338)at org.apache.hadoop.fs.FileUtil.copy(FileUtil.java:289)at org.apache.hadoop.fs.FileSystem.copyToLocalFile(FileSystem.java:1968)at org.apache.hadoop.fs.FileSystem.copyToLocalFile(FileSystem.java:1937)at org.apache.hadoop.fs.FileSystem.copyToLocalFile(FileSystem.java:1913)at com.beifeng.TestCopy.myCopyToLocal(TestCopy.java:44)at com.beifeng.TestCopy.main(TestCopy.java:15) //fs.copyToLocalFile(new Path("/hadoop/put/111.txt"), new Path("e:/txt/copyFormHDFS.txt")); fs.copyToLocalFile(false, new Path("/hadoop/put/111.txt"), new Path("e:/txt/copyFormHDFS.txt"),true);但是基本上就這一句,也不說為啥,還是自己查API吧:
public void copyToLocalFile(boolean delSrc,Path src,Path dst,boolean useRawLocalFileSystem)throws IOExceptionThe src file is under this filesystem, and the dst is on the local disk. Copy it from the remote filesystem to the local dst name. delSrc indicates if the src will be removed or not. useRawLocalFileSystem indicates whether to use RawLocalFileSystem as the local file system or not. RawLocalFileSystem is non checksumming, So, It will not create any crc files at local.Parameters: delSrc - whether to delete the src src - path dst - path useRawLocalFileSystem - whether to use RawLocalFileSystem as local file system or not.Throws: IOException - for any IO errorsrc文件位于此文件系統(tǒng)下,dst位于本地磁盤上。將其從遠(yuǎn)程文件系統(tǒng)復(fù)制到本地dst名稱。delSrc指示src是否會被刪除。useRawLocalFileSystem指示是否使用RawLocalFileSystem作為本地文件系統(tǒng)。RawLocalFileSystem不是校驗和,所以它不會在本地創(chuàng)建任何crc文件。
delSrc : 是否刪除src
useRawLocalFileSystem:是否使用RawLocalFileSystem作為本地文件系統(tǒng)。
?
總結(jié)
以上是生活随笔為你收集整理的Hadoop的FileSystem.copyToLocalFile两个参数 空指针异常的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Hadoop入门(四)HDFS编程
- 下一篇: 泰拉瑞亚绿藻锭怎么合成