Hive的安装

Hive的安装

Hive支持原始数据类型和复杂类型，原始类型包括数值型，Boolean，字符串，时间戳。复杂类型包括array，map，struct，union。2，关于文本类型，STRING存储变长的文本，对长度没有限制。理论上将STRING可以存储的大小为2GB，但是

hive 中‘不等于’不管是用！或者<>符号实现，都会将空值即null过滤掉，此时要用。='3' or white_level is null ) 来保留null 的情况。由于在通常得SQL写法中不等于也可以这样写 !但在hiv

hive 0.7版本以后新增了两个函数，比原来的函数更能提高运行效率。json_tuple - like get_json_object, but it takes multiple names and return a tuple. All the in

另外，在 /etc/profile/ 加入 export $HIVE_HOME=/work/hive

幸好有mapreduce的存在，我们可以写一个数据清洗程序，不仅可以完成转码功能，还可以格式化为hive可用的数据，比如行分隔符，列分隔符的替换，记录字段个数的检查等。文件小的话也可以使用命令：iconv -f GBK -t UTF8 cui.dat &g

Hadoop CommonHadoop体系最底层的一个模块，为Hadoop各子项目提供各种工具，如：配置文件和日志操作等。AvroAvro是doug cutting主持的RPC项目，有点类似Google的protobuf和Facebook的thrift。a

将$HADOOP_HOME/build重命名即可，注意，如果有多个节点，除了namenode的build目录要重名外，如果操作在其中之一的datanode节点机器上，则也需要将build目录重命名。