Hadoop2.3.0源码编译过程记录
要在hadoop上作一个mr程序，做一些统计工作。但是发现官网下载的2.3的库只有32位的，而我的机器系统都是64位的。用g++直接指定编译32位的程序又发现头文件依赖有问题，没法编译通过。所以就只能编译hadoop，编译后在服务上启动64位程序，再编译mr程序进行工作。下面是编译的过程和其中遇到的一些问题。
March 28, 2014
thrift之php客户端使用
一方面是测试使用，另一方面还想把server的一些状态和运维信息能够以web的方式展示出来，组内的web框架全是ci，我想使用django，但是组内python的人少，所以还是随大家要使用ci，用php做开发，那么就需要php也能支持使用thrift的rpc方式去访问。
February 13, 2014
thrift之python客户端使用
写好了cpp的服务器后，测试是个问题，写cpp程序来测试好像不是很灵活，所以想用python脚本来写测试程序，记录一下过程。 首先是thrift的python程序库的安装，有些基础库需要安装后才能运行，在thrift的目录库目录中，选择py目录，使用root账户就可以直接安装了。 cd thrift-0.9.0/lib/py python setup.py install 即可完成安装。当然安装完成之后也要记得测试一下，安装是否成功。
February 13, 2014
Thrift的required和optional源码分析
thrift的数据类型定义的时候和protobuf（后面简称pb）一样也有requried和optional标签，意义是类似的，required标示改消息在序列化之前必须设置该字段值，如果不设置则无法序列化，当然也就更无法反序列化，该标签标示的字段是必填字段；而optional字段则标示该字段可赋值也可以不赋值，当然不赋值的结果是在序列化之后的数据中该字段被标示为无值字段，就是说直接访问获取该值是不行的，必须先判断是否设置了该字段的值，再去读值；这样作的好处是在协议扩充和变更时可以较为灵活的设计程序，而且在传输上也就减少了不必要的字段传输。
January 11, 2014
shell字符串的截取
shell字符串的截取的问题： 一、Linux shell 截取字符变量的前8位，有方法如下： 1.expr substr “$a” 1 8 2.echo $a|awk ‘{print substr(,1,8)}’ 3.echo $a|cut -c1-8 4.echo $ 5.expr $a : ‘\(.\\).*’ 6.echo $a|dd bs=1 count=8 2>/dev/null
January 11, 2014
Thrift学习笔记—IDL基本类型
thrift 采用IDL（Interface Definition Language）来定义通用的服务接口，并通过生成不同的语言代理实现来达到跨语言、平台的功能。在thrift的IDL中可以定义以下一些类型：基本数据类型，结构体，容器，异常、服务
January 5, 2014
Thrift http嵌入sever设计实现
背景介绍 在服务器模块程序种嵌入一个简单的httpserver，再通过网页或是后台再访问这个httpserver，得到一些服务模块的实时运行数据或是运行环境数据，或者在浏览器端调整服务器的实时运行参数，从而达到对后台服务模块的实时监控。 本文所写的是在thrift框架之下如何嵌入一个httpserver模块，并且如何在thrift框架之下使用js和httpserver交互，发送数据到服务器，并且获取展示服务模块的运算结果。
November 4, 2013
Nginx设置为代理服务器上网
公司的网络部门抽风，突然之间不让办公机连接idc上的非80端口了，而内部写的大部分的后台模块都是会起一个非80的http端口，让开发去实时查看模块信息，甚至动态调整模块内的一些flags参数，兄弟们着实痛苦了好几天，本来想简单点直接在任意idc机器上使用w3m来去登录这些页面，但是这些页面偏偏使用了ajax获取数据才进行展示，所以没办法，只好开代理了，上nginx吧，反正想在那台内网机器上安装nginx好久了。
July 30, 2013
Program received signal SIGPIPE, Broken pipe
在gdb调试程序的时候发现一个错误信息， Program received signal SIGPIPE, Broken pipe，原来是客户端程序在给服务器进行写入操作的时候，如果服务器执行了close操作，这时候根据tcp协议规定服务器要给客户端返回一个RST响应，如果client再用之前的fd往这个服务器写数据的时候，系统救护发一个SIGPIPE信号给进程，告诉进程链接已经断开。但是SIGPIPE信号的默认执行动作是terminate，所以客户端会退出，如果要想客户端不响应这个信号，则直接将其屏蔽忽略即可。
May 21, 2013