General
We developed FTP server which works on a top of HDFS. It allows to connect to HDFS using any FTP client.
FTP server is configurable by hdfs-over-ftp.conf and users.conf. Also it allows to use secure connection over SSL and supports all HDFS permissions.
We used Apache FtpServer to develop it.
http://mina.apache.org/ftpserver
We provide source code under Apache License 2.0
下载地址:
https://sites.google.com/a/iponweb.net/hadoop/Home/hdfs-over-ftp/ftp.tar.bz2?attredirects=0
1. 当FTP客户端遇到网络异常时,那么此时将导致正在上传的Block回滚,甚至整个文件会丢失。解决方案是在异常时,记录stream,然后关闭。
2. 支持续传。
分享到:
相关推荐
hadoop 2.7.1 hdfs-over-ftp http://yunpan.cn/cHaQvV4UdLxX3 访问密码 f09f
hdfs-over-ftp安装包及说明
官网是hadoop的0.20版本的,改写为hadoop的2.4.1版本的hdfs-over-ftp,改动详情如我的博客地址http://blog.csdn.net/zhulin40/article/details/38444875
在hadoop分布式文件系统上实现ftp 服务
官网的hdfs-over-ftp已经好久没有更新,还只是停留在hadoop 0.20.x,下载之后不兼容无法使用,所以对hdfs-over-ftp进行了重构,此软件支持hadoop2.0.0,其他版本还需要重新编译打jar包,zip包中附带了一个使用说明 ...
基于HDFS的FTP项目,可上传下载文件,开源
hadoop hdfs ftp
大数据 hdfs-over-ftp jar包。 基于maven工程打包的可执行jar包,支持hadoop版本cdh5.12.1,以及kerberos认证,配置kerberos信息的核心配置文件core.properties,下载集群相关认证信息配置即可,其他配置文件信息是...
基于原生组件二次开发,maven工程,pom.xml文件中可引入对应集群的版本的jar,即可支持多种,本工程是基于hadoop cdh5.12.1版本。配置文件只增加了core.properties,关于kerberos信息配置,以及集群核心的配置文件...
Hadoop2.7.2LIUNX集群(5)集群hdfs-over-ftp重构2.7.2,直接使用Hadoop2.7.2LIUNX集群(5)集群hdfs-over-ftp重构2.7.2,直接使用
大数据 培训 课程 入门 HDFS hadoop
ftp源码hdfs-over-ftp 工作在 HDFS 之上的 FTP 服务器源代码是在 MIT 许可下提供的 FTP 服务器可通过 hdfs-over-ftp.properties 和 users.properties 进行配置。 它允许通过 SSL 使用安全连接并支持所有 HDFS 权限。...
官网的hdfs-over-ftp已经好久没有更新,还只是停留在hadoop 0.20.x,下载之后不兼容无法使用,所以对hdfs-over-ftp进行了重构,此软件支持hadoop2.0.0,其他版本还需要重新编译打jar包,zip包中附带了一个使用说明
源码hdfs hbase hadoop 连接jmeter
Java管理hdfs文件和文件夹的工具类,最近版本hadoop2.4。
大数据 Hadoop HDFS 详解
《HDFS——Hadoop分布式文件系统深度实践》
《HDFS—Hadoop分布式文件系统深度实践》 。带书签,非扫描高清文字完整版。
《高可用性的HDFS——Hadoop分布式文件系统深度实践》专注于Hadoop分布式文件系统(hdfs)的主流ha解决方案,内容包括:hdfs元数据解析、hadoop元数据备份方案、hadoop backup node方案、avatarnode解决方案以及最新...