|
部署安装了最新稳定版hadoop2.2.0，然后在网上找来fuse-dfs编译教程，但是最后失败了，至今原因未知～～，错误描述为：Transport endpoint is not connected。后将安装部署hadoop1.2.1版本，最后测试成功，记录如下：使用root完成一下操作：1、安装依赖包apt-get install autoconf automake libtool make gawk g++ ant2、卸载已有的fuse，安装fuseapt-get purge fuseapt-get purge libfuse2tar -zxf fuse-2.9.3.tar.gzcd fuse-2.9.3./configure --prefix=/usr/fusemakemake install3、设置环境变量ln -s /usr/fuse/bin/fusermount /usr/bin/ vi /etc/profileexport FUSE_HOME=/usr/fuseexport OS_ARCH=amd64export OS_BIT=64export LD_LIBRARY_PATH=$JAVA_HOME/jre/lib/$OS_ARCH/server:${HADOOP_HOME}/build/c++/Linux-$OS_ARCH-$OS_BIT/lib:/usr/local/lib:/usr/lib:$FUSE_HOME/libsource /etc/profile4、编译libhdfs，fuse-dfs与hdfs的接口cd $HADOOP_HOME/ant compile-c++-libhdfs -Dlibhdfs=1 -Dcompile.c++=1ln -s c++/Linux-$OS_ARCH-$OS_BIT/lib build/libhdfs5、编译fuse-dfsln -s /usr/fuse/include/* /usr/include/ln -s /usr/fuse/lib/libfuse.so /usr/lib/ant compile-contrib -Dlibhdfs=1 -Dfusedfs=16、挂在hdfs到本地编辑fuse_dfs_wrapper.sh，vi $HADOOP_HOME/build/contrib/fuse-dfs/fuse_dfs_wrapper.sh加上环境参数，尾行修改如下：export JAVA_HOME=<你的javahome>export HADOOP_HOME=<你的hadoophome>export FUSE_HOME=/usr/fuseexport PATH=$PATH:$HADOOP_HOME/contrib/fuse_dfsfor f in ls $HADOOP_HOME/lib/*.jar $HADOOP_HOME/*.jardoexport CLASSPATH=$CLASSPATH:$fdoneexport OS_ARCH=amd64export OS_BIT=64export LD_LIBRARY_PATH=$JAVA_HOME/jre/lib/$OS_ARCH/server:${HADOOP_HOME}/build/c++/Linux-$OS_ARCH-$OS_BIT/lib:/usr/local/lib:/usr/lib:$FUSE_HOME/lib末尾修改：fuse_dfs $@修改fuse_dfs_wrapper.sh权限chmod 755 ${HADOOP_HOME}/build/contrib/fuse-dfs/fuse_dfs_wrapper.sh建立链接ln -s ${HADOOP_HOME}/build/contrib/fuse-dfs/fuse_dfs_wrapper.sh /usr/local/binln -s ${HADOOP_HOME}/build/contrib/fuse-dfs/fuse_dfs /usr/local/bin/ 挂载hdfs到本地mkdir -p /mnt/dfsfuse_dfs_wrapper.sh dfs://localhost:9005 /mnt/dfs注：localhost:9005为hadoop的core-site.xml配置文件中fs.default.name的值，前面加上“dfs”卸载hdfsumount /mnt/dfs附录：1、执行步骤5的时候，出现undefined reference to fuse_get_context等一些列的错误。复制执行错误的命令，将-L和-l参数放到组后，运行可能会出现undefined reference to symbol 'floor@@GLIBC_2.2.5'的错误，那么最后添加-lm参数，问题解决。然后重新执行编译2、commons-logging#commons-logging;1.0.4: not found错误。修改ivy/libraries.properties文件的commons-logging.version=1.1.1即可。3、执行挂载的时候一定要将地址输正确，包括主机名和端口号。否则会出现读写错误的问题。
(以上内容不代表本站观点。) --------------------------------- |
本網站是"非商業"(non-commercial)。
