Hadoop: OutOfMemory при запуске hadoop-balancer
При запуске балансера он вылетает через десяток секунд с ошибкой
2015-07-16 11:55:13,271 WARN org.apache.hadoop.hdfs.server.balancer.Dispatcher: Dispatcher thread failed java.lang.OutOfMemoryError: unable to create new native thread |
Проблема не в памяти, а в лимитах на открытые файлы
ulimit -n 1024 |
Нужно поднять хотя бы до 2048
ulimit -n 2048 |