Я успешно скомпилировал Apache Libhdfs на основе JNI (C ++) на моей песочнице Hadoop /Centos - без ошибок компиляции или предупреждений: < /p>
g++ test.cpp -o test -I/usr/lib/jvm/java-1.7.0-openjdk-1.7.0.151.x86_64/include/
-I/usr/hdp/2.6.3.0-235/usr/include/ -I/usr/hdp/2.6.3.0-235/hadoop/bin
-I/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.151-1.b12.el6_9.x86_64/include/
-I/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.151-1.b12.el6_9.x86_64/jre/lib/amd64/
-L/usr/hdp/2.6.3.0-235/hadoop/lib/ -L/usr/hdp/2.6.3.0-235/hadoop/lib/native
-L/usr/hdp/2.6.3.0-235/hadoop/lib/ -L/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.151-1.b12.el6_9.x86_64/jre/lib/amd64/
-L/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.151-1.b12.el6_9.x86_64/jre/lib/amd64/server/
-lhdfs -pthread -ljvm
< /code>
Как только я пытаюсь запустить код, я получаю следующие ошибки: < /p>
[root@sandbox-hdp ~]# ./test
Environment variable CLASSPATH not set!
getJNIEnv: getGlobalJNIEnv failed
Environment variable CLASSPATH not set!
getJNIEnv: getGlobalJNIEnv failed
< /code>
Если я запускаю Hadoop classpath < /code> в терминале, я получаю следующий вывод: < /p>
[root@sandbox-hdp ~]# hadoop classpath
/usr/hdp/2.6.3.0-235/hadoop/conf:/usr/hdp/2.6.3.0-
235/hadoop/lib/:/usr/hdp/2.6.3.0-235/hadoop/.//:/usr/hdp/2.6.3.0-235/hadoop-
hdfs/./:/usr/hdp/2.6.3.0-235/hadoop-hdfs/lib/:/usr/hdp/2.6.3.0-235/hadoop-
hdfs/.//:/usr/hdp/2.6.3.0-235/hadoop-yarn/lib/:/usr/hdp/2.6.3.0-235/hadoop-
yarn/.//:/usr/hdp/2.6.3.0-235/hadoop-mapreduce/lib/:/usr/hdp/2.6.3.0-
235/hadoop-mapreduce/.//::jdbc-mysql.jar:mysql-connector-java-
5.1.17.jar:mysql-connector-java-5.1.37.jar:mysql-connector-
java.jar:/usr/hdp/2.6.3.0-235/tez/:/usr/hdp/2.6.3.0-
235/tez/lib/:/usr/hdp/2.6.3.0-235/tez/conf
< /code>
На странице Apache libhdfs она написана: < /p>
Наиболее распространенной проблемой является то, что Classpath не устанавливается правильно, когда
вызывает программу, которая использует LIBHDF. Убедитесь, что вы установили его на все банки
Hadoop, необходимые для запуска самого Hadoop, а также в правильный каталог конфигурации
, содержащий hdfs-site.xml. Это недопустимо для
использовать синтаксис подстановочного знака для определения нескольких банок. Это может быть полезно для
hadoop classpath -glob или hadoop classpath --джар для создания правильной группы Class -Class
для вашего развертывания. См. Hadoop Commands reference
для получения дополнительной информации об этой команде. < /P>
< /blockquote>
Я не понимаю, как продолжить после многих попыток проб и ошибок, я бы поэтому оценил любую помощь, которая может помочь мне решить эту проблему.hadoop classpath< /code> ./test
..., который дал мне следующую ошибку: libjvm.so: невозможно открыть файл общего объекта: нет такого файла или каталога < /p>
Я попробовал следующее: Экспорт Ld_library_path =/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.151-1.b12.el6_9.x86_64/jre/lib/amd64/server
imp>. И теперь ошибка:
.[root@sandbox-hdp ~]# CLASSPATH=$CLASSPATH:`hadoop classpath` ./test
loadFileSystems error:
(unable to get stack trace for java.lang.NoClassDefFoundError exception: ExceptionUtils::getStackTrace error.)
hdfsBuilderConnect(forceNewInstance=0, nn=default, port=0, kerbTicketCachePath=(NULL), userName=(NULL)) error:
(unable to get stack trace for java.lang.NoClassDefFoundError exception: ExceptionUtils::getStackTrace error.)
hdfsOpenFile(/tmp/testfile.txt): constructNewObjectOfPath error:
(unable to get stack trace for java.lang.NoClassDefFoundError exception: ExceptionUtils::getStackTrace error.)
Подробнее здесь: https://stackoverflow.com/questions/480 ... env-failed
