andilyliao
- 浏览: 147395 次
- 性别:
- 来自: 天津
-
最新评论
-
rashly：
请问一下address=8000的8000是随便写的吗
hadoop源码调试跟踪方法 -
andilyliao：
haha_liu 写道李导你好，我是达内的学员，春节后在广州报 ...
hadoop生态圈 -
haha_liu：
李导你好，我是达内的学员，春节后在广州报读了达内大数据课程，因 ...
hadoop生态圈 -
renzhengzhi：
非常感谢
java提取并分析sqlserver的日志 -
A_rong110：
似乎不能解码啊？
zxing二维码的生成与解码(java)
文章列表
分布式文件系统：
HDFS（可计算资源仓库）、mooseFS、fastDFS+nginx（115网盘）、riak、GlusterFS（intel hbase发行版）
分布式爬虫：
Nutch、httpclient
计算框架：
MapReduce：
hadoop的mapreduce（依托于hadoop、适合于100T以上计算）
mongodb
DAG：
hadoop2的Tez框架（hive on hadoop2支持tez框架，TB以上）
spark：（依托于rdd，GB以上，窄依赖最佳）
Graph图计算：
Giraph、graphX（spark）
neo4j（不支持分布式）
MPI：
...
b树建立的例子b树建立的例子b树建立的例子b树建立的例子b树建立的例子b树建立的例子b树建立的例子b树建立的例子b树建立的例子b树建立的例子b树建立的例子b树建立的例子b树建立的例子
最近经常有问我hadoop源码怎么看的问题，做以下讲解希望有用（hdfs调试为例）
1.在eclipse中建立java工程，然后把hadoop的src包中的内容拷贝到src资源下（仅org的即可）
2.导入hadoop中lib目录下的jar直到代码不再报错
3.搭建一个hadoop的 ...
mapreduce详细流程 mapreduce详细流程
centos6安装chrome，这个脚本里面地址我已经改好了，直接下载就可以用。
thrift例子 thrift例子 thrift例子 thrift例子 thrift例子
整理了一个kettle4 job插件模板供大家使用。
面试中遇到的“黑嘴”现象
这两天看了一个项目破坏者和反制项目破坏者的文章，忽然想起还有个情况也很让人觉得闹心，我很多朋友包括我自己就经常被人“黑嘴”，本文意在调侃，如有不挡不要太当回事，成天弄技术搞管理，快放假了轻松下，哈哈。
所谓黑嘴人员我大致总结有以下几种情况：
1.自己是刚被提升的管理人或者面试官，熟知自己的经历艰辛觉得自己能力是天底下最出类拔萃的，于是问一些很detail的问题，导致面试者全然无措，例如：
谁知道回字有3种写法？哈哈 开个玩笑
2.自己刚刚关注了某个问题不久，以探讨的心态面试，所以问出来的问题完全含糊不清，面试者一头雾水，例如：
你怎么看某某问题，你是怎么理解某某问题的？ ...
由于网上好多配置无密码登录都很不好用，我干脆自己写一个放上来共大家参考了，我这边准备了3台测试机，需求是这三台机器都可以不使用密码互相访问。
步骤如下：
192.168.100.67 master
192.168.100.68 slave1
192.168.100.69 slave2
进入master （hadoop用户）
执行：
ssh-keygen -t rsa
进入~/.ssh目录
生成的id_rsa id_rsa.pub
cp id_rsa.pub authorized_keys
然后确认authorized_keys的权限是600如果不是就chmod 60 ...
完整的jta例子 mysql测试
portlet的核心实现方式就是jsp:include 映射java code就是request.getrequestdispatcher.include
但是自己写这些太麻烦了，包括要写布局（皮肤），用户管理等，还是用专业的portal中间件比较好，下面推荐一本不错的portlet中文电子书
zxing二维码的生成与解码(java)
import java.awt.image.BufferedImage;
import java.io.File;
import java.io.IOException;
import java.util.Hashtable;
import javax.imageio.ImageIO;
import com.google.zxing.BarcodeFormat;
import com.google.zxing.BinaryBitmap;
import com.google.zxing.DecodeHintType;
impo ...