删除大量文件工具.rar

基于java的多线程大量文件工具删除速度rmdir命令的10倍左右，GIS服务器误操作创建了上亿个文件夹，几千亿的地图切片，为删除这些切片编写了此工具，使用了一天的时间成功删除掉。服务器性能不怎么好所以只开了10个线程。如果服务器性能好的可以开更多的线程删除速度也会更快些。目前只支持windows ，linux环境有了时间在去支持。这只是我自己使用的小工具，有什么不足之处请不要喷，只是想有人遇到此类问题时能用的上。

人脸动态比对服务器

人脸动态比对服务器人脸动态比对服务器人脸动态比对服务器

andorid UHF

andorid UHF 超高频 读取frieid

hfs2 hfs2文件服务

hfs2 hfs2 文件服务 远程装机必备

cmpp3 模拟器

cmpp3 模拟器 gateway cmpp3 调试必备工具

Hadoop权威指南_第二版_中文版

Hadoop权威指南_第二版_中文版

oozie 入门

oozie 入门 oozie概述：oozie能干什么 oozie格式：怎么用oozie oozie执行：怎么运行oozie

oozie 4.0.1 hadoop2.3.0 安装

oozie 4.0.1 hadoop2.3.0 安装

Hive用户指南

Hive用户指南 目录 1. HIVE结构 6 1.1 HIVE架构 6 1.2 Hive 和 Hadoop 关系 7 1.3 Hive 和普通关系数据库的异同 8 1.4 HIVE元数据库 9 1.4.1 DERBY 9 1.4.2 Mysql 10 1.5 HIVE的数据存储 11 1.6 其它HIVE操作 11 2. HIVE 基本操作 12 2.1 create table 12 2.1.1 总述 12 2.1.2 语法 12 2.1.3 基本例子 14 2.1.4 创建分区 15 2.1.5 其它例子 16 2.2 Alter Table 17 2.2.1 Add Partitions 17 2.2.2 Drop Partitions 17 2.2.3 Rename Table 17 2.2.4 Change Column 18 2.2.5 Add/Replace Columns 18 2.3 Create View 18 2.4 Show 19 2.5 Load 19 2.6 Insert 21 2.6.1 Inserting data into Hive Tables from queries 21 2.6.2 Writing data into filesystem from queries 21 2.7 Cli 22 2.7.1 Hive Command line Options 22 2.7.2 Hive interactive Shell Command 24 2.7.3 Hive Resources 24 2.7.4 调用python、shell等语言 25 2.8 DROP 26 2.9 其它 27 2.9.1 Limit 27 2.9.2 Top k 27 2.9.3 REGEX Column Specification 27 3. Hive Select 27 3.1 Group By 28 3.2 Order /Sort By 28 4. Hive Join 29 5. HIVE参数设置 31 6. HIVE UDF 33 6.1 基本函数 33 6.1.1 关系操作符 33 6.1.2 代数操作符 34 6.1.3 逻辑操作符 35 6.1.4 复杂类型操作符 35 6.1.5 内建函数 36 6.1.6 数学函数 36 6.1.7 集合函数 36 6.1.8 类型转换 36 6.1.9 日期函数 36 6.1.10 条件函数 37 6.1.11 字符串函数 37 6.2 UDTF 39 6.2.1 Explode 39 7. HIVE 的MAP/REDUCE 41 7.1 JOIN 41 7.2 GROUP BY 42 7.3 DISTINCT 42 8. 使用HIVE注意点 43 8.1 字符集 43 8.2 压缩 43 8.3 count(distinct) 43 8.4 JOIN 43 8.5 DML操作 44 8.6 HAVING 44 8.7 子查询 44 8.8 Join中处理null值的语义区别 44 9. 优化与技巧 47 9.1 全排序 47 9.1.1 例1 48 9.1.2 例2 51 9.2 怎样做笛卡尔积 54 9.3 怎样写exist/in子句 54 9.4 怎样决定reducer个数 55 9.5 合并MapReduce操作 55 9.6 Bucket 与 sampling 56 9.7 Partition 57 9.8 JOIN 58 9.8.1 JOIN原则 58 9.8.2 Map Join 58 9.8.3 大表Join的数据偏斜 60 9.9 合并小文件 62 9.10 Group By 62 10. HIVE FAQ： 62

Hive高级编程

Hive高级编程 • Hive Components • MapReduce • Hive QL • Hive 优化 • SQL优化