пробема с hadoop 2.5.2 при запуске

vm16
Новичок
Posts: 49
Joined: 07 Apr 2016 03:53

пробема с hadoop 2.5.2 при запуске

Post by vm16 »

привет ! вопрос - в конфигурации
centos 6 + hadoop 2.5.2 + jdk 7

ошибка :
16/04/17 14:45:39 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

разумеется я прогуглил и проставил все export как рекомендуют также понакопиросал библиотеки в разные места
/home/hadoop/hadoop-2.5.2/lib and /home/hadoop/hadoop-2.5.2/native
но ошибка не уходит


переменные .bashrc
-------------
export JAVA_HOME=/usr/java/jdk1.7.0_71

export CLASSPATH=/home/hadoop/hbase-1.1.4/lib

export HADOOP_HOME=/home/hadoop/hadoop-2.5.2
export HADOOP_MAPRED_HOME=$HADOOP_HOME
export HADOOP_COMMON_HOME=$HADOOP_HOME
export HADOOP_HDFS_HOME=$HADOOP_HOME
export YARN_HOME=$HADOOP_HOME
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native


export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native

export HADOOP_OPTS="$HADOOP_OPTS -Djava.net.preferIPv4Stack=true"
export HADOOP_OPTS="$HADOOP_OPTS -Djava.library.path=/home/hadoop/hadoop-2.5.2/lib/native"

#export JAVA_LIBRARY_PATH=$HADOOP_HOME/lib/native:$JAVA_LIBRARY_PATH
export JAVA_LIBRARY_PATH=$HADOOP_HOME/lib/native



export PATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin:$JAVA_HOME/bin:$HADOOP_OPTS:
export PATH
export HADOOP_INSTALL=$HADOOP_HOME




переменные hadoop-env.sh
------------------------------
пытался также здесь определять
export HADOOP_OPTS="$HADOOP_OPTS -Djava.net.preferIPv4Stack=true"
export HADOOP_OPTS="$HADOOP_OPTS -Djava.library.path=/home/hadoop/hadoop-2.5.2/lib/native"

------------------------


может кто-то сталкивался ? как лечили ?
mitnlag
Администратор
Posts: 2126
Joined: 18 Apr 2010 18:09

Re: пробема с hadoop 2.5.2 при запуске

Post by mitnlag »

https://stackoverflow.com/questions/199 ... rm-warning" onclick="window.open(this.href);return false;

исчерпывающе.
vm16
Новичок
Posts: 49
Joined: 07 Apr 2016 03:53

Re: пробема с hadoop 2.5.2 при запуске

Post by vm16 »

пробовал все эти варианты - не помогло на centos 6. пробовал на работе на red hat enterprise 7.1 работает. пока не пойму в чем дело.
mitnlag
Администратор
Posts: 2126
Joined: 18 Apr 2010 18:09

Re: пробема с hadoop 2.5.2 при запуске

Post by mitnlag »

какие "варианты"? там все четко объяснили - используете библиотеку 32 бита на 64 битной системе.

Return to “Вопросы и новости IT”