数据中心建设方案简版.pdf

数据中心建设方案简版 本资源提供了一个数据中心建设方案的简版，涵盖了数据中心的总体建设思路图、功能框架图和技术架构图三个方面的内容。 数据中心的总体建设思路图主要包括了 IT 基础设施、企业级 ETL 平台、数据存储中心、数据共享服务、应用层、统一门户和数据管控平台七个方面的内容。 功能框架图则将数据中心的功能分为企业级 ETL 平台、存储与计算中心、服务层、应用层、统一门户和统一平台管控六个方面。 技术架构图则将数据中心的技术架构分为数据采集、计算存储服务、数据共享服务和平台管控四个方面。 本资源提供了一个holistic的数据中心建设方案，从总体建设思路图到功能框架图再到技术架构图，涵盖了数据中心建设的所有方面，提供了一个完整的数据中心建设解决方案。 数据中心建设思路图： 数据中心是一个完整的数据处理和存储系统，包括 IT 基础设施、企业级 ETL 平台、数据存储中心、数据共享服务、应用层、统一门户和数据管控平台七个方面的内容。企业级 ETL 平台负责企业数据中心数据的采集、加工、汇总和分发，实现数据标准化、集中化和关系化。存储与计算中心提供统一的数据存储和计算，包括关系数据库、分布式非关系数据库、分布式文件和分布式计算。数据共享服务提供数据服务标准化开放访问，帮助企业 IT 建设中应用和数据分离，引入更多的应用开发商。应用层包括经分应用、流量运营、ESOP 应用、VGOP 应用、指标库、流量运营战略地图、掌上分析、自助业务分析、区域洞察、渠道运营、自助分析和客户标签库等。统一门户提供统一域名分配、负载均衡、鉴权管理、统一管控平台接入、应用注册、应用发布和应用访问数据信息等功能。数据管控平台提供数据资产管控、开发管理、监控管理、调度管理、系统管理和安全管理等功能。 功能框架图： 数据中心的功能框架图将数据中心的功能分为企业级 ETL 平台、存储与计算中心、服务层、应用层、统一门户和统一平台管控六个方面。企业级 ETL 平台负责企业数据中心数据的采集、加工、汇总和分发，实现数据标准化、集中化和关系化。存储与计算中心提供统一的数据存储和计算，包括关系数据库、分布式非关系数据库、分布式文件和分布式计算。服务层包括数据共享服务和应用层，提供数据服务标准化开放访问，帮助企业 IT 建设中应用和数据分离，引入更多的应用开发商。应用层包括经分应用、流量运营、ESOP 应用、VGOP 应用、指标库、流量运营战略地图、掌上分析、自助业务分析、区域洞察、渠道运营、自助分析和客户标签库等。统一门户提供统一域名分配、负载均衡、鉴权管理、统一管控平台接入、应用注册、应用发布和应用访问数据信息等功能。统一平台管控提供数据资产管控、开发管理、监控管理、调度管理、系统管理和安全管理等功能。 技术架构图： 数据中心的技术架构图将数据中心的技术架构分为数据采集、计算存储服务、数据共享服务和平台管控四个方面。数据采集采用 FlumeII 框架，实现文件和消息采集与解析，使用流式爬虫、中文分词、图片识别技术，实现互联网网页信息实时采集。计算存储服务采用 Hadoop 中的 HDFS 文件系统提供统一的大数据数据存储，满足全量数据留存，基于 Yarn 提供跨平台的资源管理，满足资源的统一调度与管理。数据共享服务提供数据服务标准化开放访问，帮助企业 IT 建设中应用和数据分离，引入更多的应用开发商。平台管控采用 JavaEE 技术，通过 MVC 模式将业务逻辑、数据、界面显示分离的方法组织代码，将业务逻辑聚集到一个部件里面，在改进和个性化定制界面及用户交互的同时，不需要重新编写业务逻辑。 本资源提供了一个holistic的数据中心建设方案，涵盖了数据中心建设的所有方面，提供了一个完整的数据中心建设解决方案。