Hadoop使用常见问题以及解决方法.pdfVIP

1：Shuffle Error: Exceeded MAX_FAILED_UNIQUE_FETCHES; bailing-out Answer： 程序里面需要打开多个文件，进行分析，系统一般默认数量是1024，（用ulimit -a 可以看到）对于正常使用是够了，但是对于程序来讲，就太少了。 修改办法： 修改2 个文件。 /etc/security/limits.conf vi /etc/security/limits.conf 加上： * soft nofile 102400 * hard nofile 409600 $cd /etc/pa