Browsed by
Tag: hdfs

Hadoop: OutOfMemory при запуске hadoop-balancer

Hadoop: OutOfMemory при запуске hadoop-balancer

Comments 0 Comment

При запуске балансера он вылетает через десяток секунд с ошибкой 2015-07-16 11:55:13,271 WARN org.apache.hadoop.hdfs.server.balancer.Dispatcher: Dispatcher thread failed java.lang.OutOfMemoryError: unable to create new native thread2015-07-16 11:55:13,271 WARN org.apache.hadoop.hdfs.server.balancer.Dispatcher: Dispatcher thread failed java.lang.OutOfMemoryError: unable to create new native thread

HDFS: указание количества реплик

HDFS: указание количества реплик

Comments 0 Comment

Для изменения количества реплик файла или каталога можно воспользоваться такой командой hadoop fs -setrep -R 3 /dir/hadoop fs -setrep -R 3 /dir/ где -R – рекурсивно 3 – количество реплик(копий) /dir/ – каталог, можно указать файл