【免费】TranswarpDataHubV4.2使用手册1资源-CSDN文库

需积分: 0 51 浏览量更新于2022-08-03 收藏 11.26MB PDF 举报

《Transwarp Data Hub V4.2使用手册1》提供了关于Transwarp Data Hub v4.2 Inceptor的详细指导，这是一款由星环信息科技（上海）有限公司开发的数据处理和分析平台。手册的目的是帮助用户快速理解和掌握Inceptor的使用，以便在大数据环境中进行高效的数据管理和分析。 1. **介绍**： - Inceptor是Transwarp Data Hub的一部分，它专注于提供高性能的数据处理和分析能力，尤其适用于大规模数据的处理场景。 - 手册的发布日期为2015年11月30日，版本号为T00142-03-011，表明这是Inceptor的一个早期版本。 - 免责声明指出，手册内容可能随产品更新而变动，且星环信息科技不对可能存在的错误或遗漏承担责任。 2. **快速入门**： - 快速入门部分旨在帮助新用户迅速了解如何启动和使用Inceptor，包括设置环境、创建数据表等基础操作。 3. **Inceptor的配置**： - 详细介绍了Inceptor的两种主要服务组件：HiveServer1和HiveServer2。 - **HiveServer1**：是Inceptor的基础服务，用于处理客户端的Hive查询请求。 - **HiveServer2**：提供了更高级的安全性和性能优化，支持LDAP和Kerberos两种认证模式。 - LDAP认证模式：适合于有中央身份验证服务器的企业环境，提供集中式的用户管理和权限控制。 - Kerberos认证模式：是安全的网络认证协议，用于实现多级授权和防止中间人攻击。 4. **Inceptor交互方法**： - 提供了多种与Inceptor交互的方式，包括命令行工具、JDBC和ODBC。 - **命令行交互**：通过HiveServer1和HiveServer2，用户可以直接在终端上执行HQL（Hive Query Language）命令进行数据操作。 - **应用程序中的JDBC交互**：允许开发人员在Java应用中集成Inceptor，通过JDBC驱动进行数据查询和操作。 - **ODBC交互准备**：适用于非Java环境，手册详细说明了安装ODBC驱动、配置系统变量和创建数据源名称（DSN）的过程。 5. **空间配额管理操作**： - 虽然这部分没有详细内容，但可以推断，Inceptor提供了空间配额管理功能，用于控制用户或团队的数据存储和资源使用，以确保系统的公平性和稳定性。 6. **其他注意事项**： - 文档的修订历史记录显示了不同版本的发布时间和变更内容，方便用户跟踪更新。 - 手册强调了版权和使用条款，禁止未经授权的复制、修改或商业使用。《Transwarp Data Hub V4.2使用手册1》是Inceptor用户的宝贵资源，涵盖了从基本配置到高级交互的全方位指南，旨在帮助用户充分利用这一大数据处理平台。对于需要处理大规模数据的组织来说，理解并熟练运用手册中的内容至关重要。

Transwarp Data Hub v4.2
Inceptor使用手册 iv
目录
 介绍  ........................................................................   1
 快速入门  ....................................................................   2
 Inceptor的配置  ..............................................................   4
1.  HiveServer1  ..........................................................   4
2.  配置HiveServer2  ......................................................   6
2.1.  LDAP认证模式  ..................................................   6
2.2.  Kerberos认证模式  ..............................................   7
 Inceptor交互方法  ............................................................   9
1.  命令行交互  ..........................................................   10
1.1.  HiveServer1  ..................................................   10
1.2.  HiveServer2  ..................................................   10
2.  应用程序中的JDBC交互  ................................................   11
3.  ODBC交互准备  ........................................................   15
3.1.  安装ODBC驱动  .................................................   15
3.2.  修改配置文件和系统变量  .......................................   16
3.3.  创建合适的DSN  ................................................   19
4.  应用程序中的ODBC交互  ................................................   35
 使用工具连接Inceptor  .......................................................   39
1.  通过JDBC连接Inceptor的工具  ..........................................   39
1.1.  连接前的准备  .................................................   39
1.2.  Squirrel  SQL连接Inceptor  .....................................   39
2.  通过ODBC连接Inceptor的工具  ..........................................   56
2.1.  Tableau连接Inceptor  ..........................................   56
 Inceptor管理操作  ...........................................................   61
1.  Inceptor管理员身份的获取  ............................................   61
2.  Inceptor角色管理  ....................................................   62
2.1.  CREATE  ROLE：创建角色  ........................................   62
2.2.  DROP  ROLE：删除角色  ..........................................   63
2.3. SHOW CURRENT ROLES：查看用户当前所有的角色 ...................  63
2.4.  SET  ROLE：设置角色  ...........................................   63
2.5. SHOW ROLES：查看所有Inceptor中的角色 .........................  64
2.6.  GRANT  ROLE：授予角色  .........................................   64
2.7.  REVOKE  ROLE：收回角色  ........................................   65
2.8. SHOW ROLE GRANT：查看用户/角色拥有的角色 .....................  66
2.9. SHOW PRINCIPALS：查看拥有某个角色的用户和角色 ................  67
3.  Inceptor权限管理  ....................................................   68
3.1.  GRANT：权限的授予  ............................................   69
3.2.  REVOKE：权限的收回  ...........................................   74
3.3.  SHOW：权限的查看  .............................................   80
4.  Inceptor操作所需权限总结  ............................................   82
 空间配额管理操作  ...........................................................   84
1.  语法总结  ............................................................   84
1.1.  设置配额  .....................................................   84
2.  示例操作  ............................................................   85

Transwarp Data Hub v4.2
Inceptor使用手册 v
2.1.  数据库数据空间配额管理  .......................................   85
2.2.  用户空间配额管理  .............................................   86
2.3.  临时空间配额管理  .............................................   86
 Inceptor  CPU和内存资源分配  .................................................  89
1.  运行Application的Queue  ..............................................   91
2.  Application  Master内存  ..............................................   91
3.  Executor资源  ........................................................   91
3.1.  Fixed  Executor资源  ...........................................   91
3.2.  Ratio  Executor资源  ...........................................   91
4.  Executor分布  ........................................................   92
5.  Worker分布  ..........................................................   92
6.  保存设置并配置服务  ..................................................   93
7.  注意事项  ............................................................   94
 数据类型  ...................................................................   95
1.  原生数据类别  ........................................................   95
2.  复杂数据类别  ........................................................   97
2.1.  ARRAY示例  ....................................................   98
2.2.  MAP示例  ......................................................   98
2.3.  STRUCT示例  ...................................................   99
3.  数据类型对应表  .....................................................   100
3.1. Inceptor与Oracle的数据类型对应表 ............................  100
3.2. Inceptor与JDBC的数据类型对应表 ..............................  102
 图表对象：数据库，表和视图  ...............................................   103
1.  数据库（DATABASE）  ................................................   103
2.  表(Table)  .........................................................   103
3.  视图(VIEW)  ........................................................   105
 Inceptor存储格式  .........................................................   107
1.  文件格式：文本文件  ................................................   109
I.  Inceptor  SQL手册  ..........................................................  111
 Inceptor  SQL手册中的表  ..............................................   112
 数据定义语言（DDL）  .................................................   114
1. 创建/删除/修改数据库：CREATE/DROP/ALTER DATABASE .............  114
1.1. 创建数据库：CREATE DATABASE  ...........................  114
1.2. 删除数据库：DROP  DATABASE .............................  115
1.3. 修改数据库：ALTER DATABASE ............................  115
1.4. 设置当前数据库：USE DATABASE ..........................  116
2.  基础建表语句：CREATE TABLE ...................................   116
2.1. 简单的CREATE TABLE语句 ................................   117
3. 表的分区：PARTITIONED  BY 子句 ................................   122
4.  表的分桶：CLUSTERED BY子句 ...................................   126
4.1.  分桶表的数据写入  .......................................  127
5. 修改表/分区/列：ALTER TABLE/PARTITION/COLUMN .................  128
5.1.  修改分区  ...............................................  129
5.2.  修改列  ................................................   131
5.3.  TRUNCATE  TABLE语句  ....................................   132
6.  DROP  TABLE语句  ...............................................   133