row_number () over (ORDER BY class_sort_number) AS rnum,rnum > 1 AND rnum < 10;

cat tables.txt |while read eachline do hive -e "show create table $eachline" >>tablesDDL.txt done

用这个账号和密码登录mysql能够登录，但是当用schematool对mysql进行初始化的时候却出错。原因就在于mysql的安装。。。。利用hive初始化数据库的时候是随机找的，可能找到的是没有密码，和hive-site.xml文件中的配置不匹配，导致出

评：。1.原始的sql:. sum(online_time)num. 输出:. 小R2.6014523E7. 中R3881104. 大R356963. 2.转换后的sql:. cast(sum(online_time)asbigint)num. 输出:.

Hive的后端存储是HDFS，它对大文件的处理是非常高效的，如果合理配置文件系统的块大小，NameNode可以支持很大的数据量。但是在数据仓库中，越是上层的表其汇总程度就越高，数据量也就越小。而且这些表通常会按日期进行分区，随着时间的推移，HDFS的文件数

final String sql = "select count(*) from " + tableName;

但是Hive的权限控制并不是完全安全的。基本的授权方案的目的是防止用户不小心做了不合适的事情。Hive中的角色和平常我们认知的角色是有区别的。Hive中的角色可以理解为一部分有一些相同“属性”的用户或组或角色的集合。G_db1、G_db2、G_ bothd

a、单分区建表语句：create table day_table partitioned by ;单分区表，按天分区，在表结构中存在id，content，dt三列。添加分区表语法：ALTER TABLE table_name ADD. 分区的元数据和数据

LOAD DATA INPATH ‘....’ INTO TABLE t1 . 以上内容中，方括号中的表示可选部分。如果不使用OVERWRITE，但是已经导入过这批数据，那么新的导入依然能够成功,即产生两份，而不是覆盖掉原来的那一份PARTITION指

hive> INSERT OVERWRITE DIRECTORY '/tmp/hdfs_out' SELECT a.* FROM invites a;

hive中创建分区表没有什么复杂的分区类型。意思是说在表的数据文件中实际上并不保存分区列的信息与数据。下面的语句创建了一个简单的分区表：create table partition_testpartitioned by ROW FORMAT DELIMIT

String tweetTableSql = "DROP TABLE IF EXISTS hive_crm_tweet2222";

是自己进入公司以来参与过或者接触过的数据型项目的情况。基本包含了业务数据分析的整个流程。这篇文章纯文字描述，没有任何图呵呵。所以看我需要耐心。这个时候顺应时代的东西产生了，数据离线数据工具hadoop出来了。

hive --service hiveserver -p10001来启动hive thrift服务

hive查询转换为一个 有向无环图 的阶段序列；这些阶段可能是 Map/Reduce阶段 或者是执行元数据与文件操作； explain 输出包括三部分：。阶段描述信息以操作符和与其相关元数据来显示 操作序列；操作符元数据有以下东西组成，像FilterOpe

hive的类SQL预发给数据挖掘工作者带来了很多便利，海量数据通过简单的sql就可以完成分析，有时候hive提供的函数功能满足不了业务需要，就需要我们自己来写UDF函数来辅助完成，下面用一个简单的例子说明过程，以及注意事项。首先引入jar包，我在写的时候引

* 只运行Admin用户执行创建数据库，赋权等操作。+ " can't use ADMIN options, except " + admin + ".");打包放到$HIVE_HOME/lib目录下；hive>

grant all on hive.* to hive@'%' identified by 'hive';Do not report an error if DROP TABLE/VIEW specifies a non-existent table/vi

http://www.blogjava.net/sxyx2008/archive/2010/07/14/326028.html http://www.cnblogs.com/ITEagle/archive/2010/04/23/1718365.h

* A very simple extractor. Will assume that any string that matches a. "How deep to look into files for URI strings, in byt