`
guiyu0856
  • 浏览: 38506 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

lzo悲催的安装

阅读更多

java.lang.UnsatisfiedLinkError: no gplcompression in java.library.path

at java.lang.ClassLoader.loadLibrary(ClassLoader.java:1738)

at java.lang.Runtime.loadLibrary0(Runtime.java:823)

at java.lang.System.loadLibrary(System.java:1028)

at com.hadoop.compression.lzo.GPLNativeCodeLoader.<clinit>(GPLNativeCodeLoader.java:32)

at com.hadoop.compression.lzo.LzoCodec.<clinit>(LzoCodec.java:71)

at java.lang.Class.forName0(Native Method)

at java.lang.Class.forName(Class.java:247)

at org.apache.hadoop.conf.Configuration.getClassByNameOrNull(Configuration.java:1526)

at org.apache.hadoop.conf.Configuration.getClassByName(Configuration.java:1491)

at org.apache.hadoop.io.compress.CompressionCodecFactory.getCodecClasses(CompressionCodecFactory.java:127)

at org.apache.hadoop.io.compress.CompressionCodecFactory.<init>(CompressionCodecFactory.java:174)

at org.apache.hadoop.fs.shell.Display$Text.getInputStream(Display.java:129)

at org.apache.hadoop.fs.shell.Display$Cat.processPath(Display.java:81)

at org.apache.hadoop.fs.shell.Command.processPaths(Command.java:306)

at org.apache.hadoop.fs.shell.Command.processPathArgument(Command.java:278)

at org.apache.hadoop.fs.shell.Command.processArgument(Command.java:260)

at org.apache.hadoop.fs.shell.Command.processArguments(Command.java:244)

at org.apache.hadoop.fs.shell.Command.processRawArguments(Command.java:190)

at org.apache.hadoop.fs.shell.Command.run(Command.java:154)

at org.apache.hadoop.fs.FsShell.run(FsShell.java:254)

at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:70)

at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:84)

at org.apache.hadoop.fs.FsShell.main(FsShell.java:304)

13/08/30 19:12:23 ERROR lzo.LzoCodec: Cannot load native-lzo without native-hadoop

-text: Fatal internal error

java.lang.RuntimeException: native-lzo library not available

at com.hadoop.compression.lzo.LzopCodec.createDecompressor(LzopCodec.java:104)

at com.hadoop.compression.lzo.LzopCodec.createInputStream(LzopCodec.java:89)

at org.apache.hadoop.fs.shell.Display$Text.getInputStream(Display.java:133)

at org.apache.hadoop.fs.shell.Display$Cat.processPath(Display.java:81)

at org.apache.hadoop.fs.shell.Command.processPaths(Command.java:306)

at org.apache.hadoop.fs.shell.Command.processPathArgument(Command.java:278)

at org.apache.hadoop.fs.shell.Command.processArgument(Command.java:260)

at org.apache.hadoop.fs.shell.Command.processArguments(Command.java:244)

at org.apache.hadoop.fs.shell.Command.processRawArguments(Command.java:190)

at org.apache.hadoop.fs.shell.Command.run(Command.java:154)

at org.apache.hadoop.fs.FsShell.run(FsShell.java:254)

at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:70)

at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:84)

at org.apache.hadoop.fs.FsShell.main(FsShell.java:304)

分享到:
评论

相关推荐

    hadoop集群内lzo的安装与配置

    hadoop集群内lzo的安装与配置 搞hadoop的朋友好好看看

    hbase安装lzo压缩包的编译文件master

    hbase安装lzo压缩包的编译文件master

    hadoop-lzo-0.4.20.jar

    hadoop2 lzo 文件 ,编译好的64位 hadoop-lzo-0.4.20.jar 文件 ,在mac 系统下编译的,用法:解压后把hadoop-lzo-0.4.20.jar 放到你的hadoop 安装路径下的lib 下,把里面lib/Mac_OS_X-x86_64-64 下的所有文件 拷到 ...

    配置hadoop支持LZO和snappy压缩.pdf

    配置hadoop支持LZO和snappy压缩

    Lzo压缩算法.例子(vs2005)

    Lzo 压缩算法 Lzo压缩 vs2005 例子Lzo 压缩算法 Lzo压缩 vs2005 例子Lzo 压缩算法 Lzo压缩 vs2005 例子Lzo 压缩算法 Lzo压缩 vs2005 例子

    lzo-2.06.tar.gz/lzo-2.10.tar.gz

    hadoop 的lzo压缩源码包tar.gz,其中包括lzo-2.06.tar.gz和lzo-2.10.tar.gz两个版本,可供选择

    hadoop-lzo-master

    2.安装 lzo apt-get install gcc apt-get install lzop 3.在本地测试 可以 执行 压缩及解压缩命令 下载 https://github.com/kevinweil/hadoop-lzo/zipball/master 解压包 export CFLAGS=-m64 export CXXFLAGS=-...

    hadoop lzo debug jar

    hadoop用于解析lzo的包,这个问题在使用presto的时候需要将此包添加到presto的工具包中,以支持lzo格式文件的查询。

    hadoop集群内lzo的安装与配置.doc

    hadoop集群内lzo的安装与配置.doc

    2.Hadoop-lzo.7z lzo源码+包

    hdfs默认不支持lzo压缩,需要通过将lzo源码融入hadoop源码,重新编译hadoop源码;或者编译lzo源码生成jar,作为插件使用

    LZO数据压缩算法库

    LZO是致力于解压速度的一种数据压缩算法,LZO是Lempel-Ziv-Oberhumer的缩写。这个算法是无损算法,参考实现程序是线程安全的。 LZO库实现了许多有下述特点的算法: • 解压简单,速度非常快。 • 解压不需要内存。 ...

    lzo-2.06&hadoop;-lzo

    LZO:实时数据压缩库 hadoop-LZO:hadoop中可切割数据的LZO压缩 资源包含:lzo-2.06.tar.gz, hadoop-lzo-master.zip

    lzo-2.03.0

    lzo-2.03 免编译,直接解压使用,主要是数据的压缩,无损压缩,很不错的,我们项目做数据库的,就是使用lzo做无损压缩的.

    hadoop-lzo-0.4.21-SNAPSHOT.jar

    hadoop-lzo-0.4.21-SNAPSHOT.jar是hadoop数据压缩lzo工具包

    lzo压缩算法 例子

    lzo压缩算法 例子 可运行 可查看 很方便 文件是网上下的

    lzo 2.0.6、hadoop-lzo-master、apache-maven

    apache-maven-3.3.9-bin.tar.gz、hadoop-lzo-master.zip、lzo-2.06.tar.gz

    hadoop-lzo-0.4.15.jar

    hadoop2 lzo 文件 ,编译好的64位 hadoop-lzo-0.4.15.jar 文件 ,在mac 系统下编译的,用法:解压后把hadoop-lzo-0.4.15.jar 放到你的hadoop 安装路径下的lib 下,把里面lib/Mac_OS_X-x86_64-64 下的所有文件 拷到 ...

    lzo-2.10.zip

    lzo,版本2.10

    LZO 库源代码 以及所有资源

    lzo-2.04 31-Oct-2010 590K LZO-full source code 开源数据压缩库

Global site tag (gtag.js) - Google Analytics