lzo
./configure --enable-shared
make && sudo make install
hadoop-lzo
mvn clean test 失败,虽然/usr/local/lib 已经有了,还是报错,最后经过大神指导
把 usr/local/lib/liblzo2.*复制到/usr/lib下就可以 了
sudo cp liblzo2.* /usr/lib
Running com.hadoop.compression.lzo.TestLzopInputStream
2016-05-16 06:30:26,192 INFO lzo.GPLNativeCodeLoader (GPLNativeCodeLoader.java:<clinit>(52)) - Loaded native gpl library from the embedded binaries
2016-05-16 06:30:26,226 WARN lzo.LzoCompressor (LzoCompressor.java:<clinit>(175)) - java.lang.UnsatisfiedLinkError: Cannot load liblzo2.so.2 (liblzo2.so.2: cannot open shared object file: No such file or directory)!
2016-05-16 06:30:26,227 ERROR lzo.LzoCodec (LzoCodec.java:<clinit>(78)) - Failed to load/initialize native-lzo library
2016-05-16 06:30:26,229 INFO lzo.TestLzopInputStream (TestLzopInputStream.java:runTest(119)) - Comparing file
分享到:
相关推荐
如制作UBIFS文件找不到liblzo.so*文件,可以装下.deb包,失败可以更新下sources.list,再失败就配置编译安装.tg包,成功后将库加入ld.so.config文件,同时ldconfig更新。
hadoop 的lzo压缩源码包tar.gz,其中包括lzo-2.06.tar.gz和lzo-2.10.tar.gz两个版本,可供选择
拷贝: /usr/lib/i386-linux-gnu/...ln -s /usr/lib/i386-linux-gnu/liblzo2.so.2.0.0 /usr/lib/i386-linux-gnu/liblzo2.so.2 ln -s /usr/lib/i386-linux-gnu/liblzo2.so.2.0.0 /usr/lib/i386-linux-gnu/liblzo2.so
编译后的hadoop-lzo源码,将hadoop-lzo-0.4.21-SNAPSHOT.jar放到hadoop的classpath下 如${HADOOP_HOME}/share/hadoop/common。hadoop才能正确支持lzo,免去编译的烦恼
hadoop-lzo-0.4.21-SNAPSHOT.jar是hadoop数据压缩lzo工具包
lzo-2.09.tar.gz
移植lzo
制作ubifs根文件系统必备工具之三:lzo-2.05.tar.gz
编译hadoop-loz-master项目 --------------------------------------------... $>出现lzo共享库找不到,将liblzo2.so.xxx文件复制/lib目录下。 $>rsync /usr/local/lib/*lzo* root@s201:/lib $>重新mvn clean package
hadoop-lzo-0.4.15.tar.gz
安装hadoop-lzo所需要的rpm包
<value>org.apache.hadoop.io.compress.GzipCodec,org.apache.hadoop.io.compress.DefaultCodec,com.hadoop.compression.lzo.LzoCodec,org.apache.hadoop.io.compress.BZip2Codec <name>io.compression.codec....
lzo-2.06-0.x86_64.rpm
hadoop编译好的lzo包可以直接下载使用java.lang.IllegalArgumentException: Compression codec com.hadoop.compression.lzo.LzoCodec not found.
hadoop lzo 压缩jar包,本人已经编译好,提供大家下载。