Posts Tagged ‘ hdfs ’

Hadoop: OutOfMemory при запуске hadoop-balancer

При запуске балансера он вылетает через десяток секунд с ошибкой

2015-07-16 11:55:13,271 WARN org.apache.hadoop.hdfs.server.balancer.Dispatcher: Dispatcher thread failed
java.lang.OutOfMemoryError: unable to create new native thread

Read more

2015
07/16
CATEGORY
Без категорії
TAGS

Write comment

HDFS: указание количества реплик

Для изменения количества реплик файла или каталога можно воспользоваться такой командой

hadoop fs -setrep -R 3 /dir/

где
-R – рекурсивно
3 – количество реплик(копий)
/dir/ – каталог, можно указать файл

2015
07/16
CATEGORY
Без категорії
TAGS


Write comment