修改map分片个数
方式一:
TextInputFormat.setMaxInputSplitsize(job,1024*1024*10);
TextInputFormat.setMinInputSplitsize(job,1024*1024*50);
方式二:
在configration內設置以下參數
mapreduce.input.fileinputformat.split.minsize=1000
mapreduce.input.fileinputformat.split.maxsize=10000
總結
- 上一篇: zookeeper 伪分布式安装
- 下一篇: CentOS Linux解决Device