hadoop-2.7.3 中缺少 Hadoop 原生 libhdfs.dylib

大佬教程收集整理的这篇文章主要介绍了hadoop-2.7.3 中缺少 Hadoop 原生 libhdfs.dylib，大佬教程大佬觉得挺不错的，现在分享给大家，也给大家做个参考。

如何解决hadoop-2.7.3 中缺少 Hadoop 原生 libhdfs.dylib？

开发过程中遇到hadoop-2.7.3 中缺少 Hadoop 原生 libhdfs.dylib的问题如何解决？下面主要结合日常开发的经验，给出你关于hadoop-2.7.3 中缺少 Hadoop 原生 libhdfs.dylib的解决方法建议，希望对你解决hadoop-2.7.3 中缺少 Hadoop 原生 libhdfs.dylib有所启发或帮助；

我正在使用 apache 箭头项目（https://arrow.apache.org/docs/python/filesystems.html#hadoop-file-system-hdfs）来读取位于 HDFS 中的镶木地板文件。 Apache arrow 使用 hadoop 本机库文件从 HDFS 读取。 它使用的文件之一是 libhdfs.dylib

OSError: Unable to load libhdfs: dlopen(/Users/sharad.mishra/library/hadoop/hadoop-2.7.3/lib/native/libhdfs.dylib,6): image not found

我下载了 hadoop 源文件 (https://github.com/apache/hadoop.git) 并构建了它，包括本机。 我使用的 Hadoop 版本是 -> rel/release-2.7.3 我用来构建的命令是

@H_777_5@mvn package -Pdist,native -DskipTests -Dtar -Dmaven.javadoc.skip=true

成功构建后，我注意到 libhdfs.dylib 仍然丢失。

→  cd $HADOOP_HOME/lib/native
→ native
→  ls
libhadoop.a        libhadoop.so       libhadoop.so.1.0.0 libhadooppipes.a   libhadooputils.a   libhdfs.a          libhdfs.so         libhdfs.so.0.0.0

这是我用来构建 hadoop 发行版的 dockerfile：

https://github.com/imsharadmishra/hadoop-build/blob/main/centos/Dockerfile

解决方法

暂无找到可以解决该程序问题的有效方法，小编努力寻找整理中！

如果你已经找到好的解决方法，欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@）

大佬总结

以上是大佬教程为你收集整理的hadoop-2.7.3 中缺少 Hadoop 原生 libhdfs.dylib全部内容，希望文章能够帮你解决hadoop-2.7.3 中缺少 Hadoop 原生 libhdfs.dylib所遇到的程序开发问题。

如果觉得大佬教程网站内容还不错，欢迎将大佬教程推荐给程序员好友。

本图文内容来源于网友网络收集整理提供，作为学习参考使用，版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ：384754419，请注明来意。