привет ! вопрос - в конфигурации
centos 6 + hadoop 2.5.2 + jdk 7
ошибка :
16/04/17 14:45:39 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
разумеется я прогуглил и проставил все export как рекомендуют также понакопиросал библиотеки в разные места
/home/hadoop/hadoop-2.5.2/lib and /home/hadoop/hadoop-2.5.2/native
но ошибка не уходит
переменные .bashrc
-------------
export JAVA_HOME=/usr/java/jdk1.7.0_71
export CLASSPATH=/home/hadoop/hbase-1.1.4/lib
export HADOOP_HOME=/home/hadoop/hadoop-2.5.2
export HADOOP_MAPRED_HOME=$HADOOP_HOME
export HADOOP_COMMON_HOME=$HADOOP_HOME
export HADOOP_HDFS_HOME=$HADOOP_HOME
export YARN_HOME=$HADOOP_HOME
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export HADOOP_OPTS="$HADOOP_OPTS -Djava.net.preferIPv4Stack=true"
export HADOOP_OPTS="$HADOOP_OPTS -Djava.library.path=/home/hadoop/hadoop-2.5.2/lib/native"
#export JAVA_LIBRARY_PATH=$HADOOP_HOME/lib/native:$JAVA_LIBRARY_PATH
export JAVA_LIBRARY_PATH=$HADOOP_HOME/lib/native
export PATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin:$JAVA_HOME/bin:$HADOOP_OPTS:
export PATH
export HADOOP_INSTALL=$HADOOP_HOME
переменные hadoop-env.sh
------------------------------
пытался также здесь определять
export HADOOP_OPTS="$HADOOP_OPTS -Djava.net.preferIPv4Stack=true"
export HADOOP_OPTS="$HADOOP_OPTS -Djava.library.path=/home/hadoop/hadoop-2.5.2/lib/native"
------------------------
может кто-то сталкивался ? как лечили ?
пробема с hadoop 2.5.2 при запуске
-
- Администратор
- Posts: 2126
- Joined: 18 Apr 2010 18:09
Re: пробема с hadoop 2.5.2 при запуске
https://stackoverflow.com/questions/199 ... rm-warning" onclick="window.open(this.href);return false;
исчерпывающе.
исчерпывающе.
-
- Новичок
- Posts: 49
- Joined: 07 Apr 2016 03:53
Re: пробема с hadoop 2.5.2 при запуске
пробовал все эти варианты - не помогло на centos 6. пробовал на работе на red hat enterprise 7.1 работает. пока не пойму в чем дело.
-
- Администратор
- Posts: 2126
- Joined: 18 Apr 2010 18:09
Re: пробема с hadoop 2.5.2 при запуске
какие "варианты"? там все четко объяснили - используете библиотеку 32 бита на 64 битной системе.