没有合适的资源?快使用搜索试试~ 我知道了~
有线信息网络股份有限公司分布式数据分析平台建设项目固定资产投资项目立项申报表.doc
1 下载量 77 浏览量
2023-07-06
00:03:17
上传
评论
收藏 1.62MB DOC 举报
温馨提示
试读
32页
有线信息网络股份有限公司分布式数据分析平台建设项目固定资产投资项目立项申报表.doc
资源推荐
资源详情
资源评论
省广电有线信息网络股份有限公司
固定资产投资项目立项申报表
项目名称
分布式数据分析平台建设
申报日期
2016 年 1 月
项目编号
项目类别
运营支撑系统
需求单位
运营支撑中心
建设单位
运营支撑中心
项目
内容
自 2012 年建设以来,经营分析系统与 BOSS、终端、互动、网格、财务等 12 个业务系统完成对接,
面向全省 13 个分公司 62 家区县单位提供超过 2000 种数据报表服务,有力的支撑了公司各项经营决
策和市场开发工作。目前系统存储各类数据 120TB,数据日增长速度 200GB。现有的数据集中存储模
式难以支撑业务数据的快速增长,数据计算性能瓶颈已经无法满足各单位查询数据的实效性。另一方
面,随着全省经营工作的深化以及 BOSS 系统全省割接工作的推进,各地涌现出大量个性化报表需求
以支撑当地经营工作的开展。基于以上原因有线 2016 年主要是将现有集中的数据仓库,按地市拆分
为统一调度、独立运行的分布式式数据分析平台,并且在执行全省统一指标口径的前提下满足各单位
在日常经营工作中的个性化统计需求。主要内容包括:
1、搭建分布式数据分析平台,提升分子公司查询统计效力:针对数据集中存储的性能和安全瓶
颈问题,利用现有硬件建设分布式大数据存储和计算平台,将数据按 13 个分公司维度进行分布式存
储和计算,并提供各分公司独立使用,提高数据安全性并满足各单位数据应用的需求,支撑全省数据
高效应用。
2、实施硬件改造,实现系统性能提升:通过利旧现有 PC 服务器、购置适当磁盘、扩容存储阵列
等硬件改造手段实现系统性能的提升;并且调整无锡和南京独立经分系统的硬件架构,整合进入分布
式数据分析平台。
3、建立支撑省市县三级管理的核心经营指标库,保障全省经营 KPI 数据统一性和准确性:梳理
全省 BOSS 割接后的业务差异,设计统一的数据统计口径标签,从而建立全省统一的权责发生制收入、
好视乐产品订购数、好视乐产品渗透率、流失率、互动率等核心经营指标库,提升全省数据决策能力。
4、个性化报表开发,满足各地经营工作开展:全省 13 个分公司及 62 个区县单位个性化报表开
发约 500 个。
季
度
月份
投资金额
(万元)
项目各阶段目标(可按调研、采购、签订合
同、初验、终验划分阶段)
备注
一月
二月
项目立项
一
季
度
三月
项目采购
四月
五月
510
合同审批
二
季
度
六月
需求调研
七月
八月
软件开发
三
季
度
九月
设备上线调试
十月
十一月
系统投入试运营
项目
计划
目标
进度
四
季
度
十二月
项目初验
投资预算总额:510 万元 (后续预计继续投资_____万元)
预算构成表
设备、软硬件及工程等
用途
数量
单位
单价
(万元)
合计
(万元)
分布式大数据存储平台搭
建
分布式大数据存储平台的数据同步、
平台部署
1
套
50
50
全省统一数据口径标签开
发、数据 ETL 过程开发
全省统一数据口径标签开发、数据
ETL 过程开发
1
套
50
50
核心经营指标库开发
核心经营指标库开发
1
套
30
30
个性化报表开发
个性化报表开发
1
套
50
50
PC 服务器扩容
扩容老旧 PC 服务器的内存和硬盘,
用来部署分布式数据库
1
套
50
50
磁盘阵列
用于存储全省 2500 万用户重要的
业务、消费、行为数据
1
套
105
105
SSD 阵列
用于大数据平台实时数据查询
1
套
90
90
8 路 PC 服务器
用于大数据平台的主数据库
2
台
42.5
85
项目
预算
及其
构成
总计:
510 万元
项目建设单位意见
省公司技术研发部意见
省公司投资计划部意见
省公司财务资产部意见
分管领导意见
总经理意见
附:项目可行性研究报告。
附:
有线固定资产投资
分布式数据分析平台建设
项目可行性报告
申报单位/部门:运营支撑中心
项目编制人:
项目复核人:
省 广 电 有 线 信 息 网 络 股 份 有 限 公 司
二 O 一 六 年 一 月
现有业务能力及业务发展历史数据
本期工程拟达到的能力数据,预计满
足的业务发展期限
自 2012 年建设以来,经营分析系统与
BOSS、终端、互动、网格、财务等 12 个业
务系统完成对接,面向全省 13 个分公司 62
家区县单位提供超过 2000 种数据报表服务,
有力的支撑了公司各项经营决策和市场开
发工作。目前系统存储各类数据 120TB,数
据日增长速度 200GB。根据全省各分子公
司的迫切需求,目标要解决的突出矛盾在于:
1、系统功能应用增加、数据量翻番、
单台主机存在的性能瓶颈等原因造成的系
统性能缓慢,已经远不能满足各单位对数据
的需求;
2、数据同步不及时造成的数据运行的
时效性和准确性不够。这主要是由于 BOSS
和经分性能不匹配、缺乏集中的控制器,以
及对数据不同步时缺乏有效报警机制造成
的;
3、数据口径不统一,影响全省统一经
营指标的分析。这是由于 BOSS2 业务模式
和 BOSS1 差异很大,对 BOSS1 的统计口径
在 BOSS2 里完全不适用,急需梳理 BOSS2
中各单位的业务规则,建议统一口径下的经
营指标库;
4、网格系统和财务系统数据需求激增,
这主要体现在财务系统数据要求每月 3 号
前要同步及时和准确的账务数据,而网格系
统要求每天早上 6 点-8 点前要同步所有业
务数据,目前的经分系统性能已难以满足。
1、搭建分布式数据分析平台,提升
分子公司查询统计效力:针对数据集
中存储的性能和安全瓶颈问题,利用
现有硬件建设分布式大数据存储和计
算平台,将数据按 13 个分公司维度进
行分布式存储和计算,并提供各分公
司独立使用,提高数据安全性并满足
各单位数据应用的需求,支撑全省数
据高效应用。
2、实施硬件改造,实现系统性能提
升:通过利旧现有 PC 服务器、购置适
当磁盘、扩容存储阵列等硬件改造手
段实现系统性能的提升;并且调整无
锡和南京独立经分系统的硬件架构,
整合进入分布式数据分析平台。
3、建立支撑省市县三级管理的核心
经营指标库,保障全省经营 KPI 数据
统一性和准确性:梳理全省 BOSS 割
接后的业务差异,设计统一的数据统
计口径标签,从而建立全省统一的权
责发生制收入、好视乐产品订购数、
好视乐产品渗透率、流失率、互动率
等核心经营指标库,提升全省数据决
策能力。
4、个性化报表开发,满足各地经营
工作开展:全省 13 个分公司及 62 个
区县单位个性化报表开发约 500 个。
一、总论部分
1 项目简介
1.1 项目背景
“有线经营分析系统”作为省级数据中心,基本实现了全省各类数
据的集中统一。目前,系统支撑了全省 13 个分公司的数据需求,支撑的
需求范围包括:全省经营分析数据、全省结算、全省报表、全省财务数
据、精确营销推荐、以及向 BOSS 系统、智能推荐系统、积分系统、南京
数据仓库、省财务系统等推送数据等。通过前四期项目建设,经营分析
系统目前存储了全省 13 家分公司和数十家合作单位的用户信息和业务
发展数据,数据容量大约 120TB;支撑了全省机顶盒、增值业务的上下
游结算工作;实现了数字电视、互动高清、宽带业务发展等公司经营指
标的统计和展现。但是随着全省 BOSS 系统的割接,经分系统承载的压力
愈来愈大,也无法响应各单位在市场转型过程中爆发的数据应用需求,
这主要体现在以下几个方面:
(1)系统性能缓慢。首先由于现在报表、手机经分、省经营分析平
台等全省应用都部署在经分系统的主数据库上,并且随着全省数据需求
的激增,开发的报表等应用开发越来越多,应用负载也越来越大,对系
统性能影响较大。其次是随着全省 BOSS 割接,数据量成倍增加,对系统
计算性能压力是非线性地急剧增长,是造成系统性能缓慢的重要原因。
另外由于现在的经营分析系统是集中式部署,所有性能和负载压力都集
中在一台服务器上,造成单台主机性能瓶颈明显。
(2)数据同步不及时。现在数据应用中出现的查询不出结果、数据
不准确的问题,主要都是由于数据同步不及时造成的。现在经分系统和
剩余31页未读,继续阅读
资源评论
Mmnnnbb123
- 粉丝: 709
- 资源: 8万+
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功