没有合适的资源?快使用搜索试试~ 我知道了~
(最新)云计算研究之数据中心.doc
1.该资源内容由用户上传,如若侵权请联系客服进行举报
2.虚拟产品一经售出概不退款(资源遇到问题,请及时私信上传者)
2.虚拟产品一经售出概不退款(资源遇到问题,请及时私信上传者)
版权申诉
0 下载量 123 浏览量
2022-06-18
22:47:19
上传
评论
收藏 524KB DOC 举报
温馨提示
试读
33页
(最新)云计算研究之数据中心.doc
资源推荐
资源详情
资源评论
云计算专题研究之数 据 中 心
数据 中 心
从整体来 看, 的云 计算 包括 了如 下的 技术 层次 。
网络 系统 包括 外部 网络 , 这个 外部 网络 并不
是指 运营 商自 己的 骨干 网, 也是 指在 云计 算服 务器 中心 以外 ,
由 自己 搭建 的由 于不 同地 区 国 家, 不同 应用 之间 的负 载平 衡的
数据 交换 网络 。内 部网 络 ,连 接各 个 自建
的数 据中 心之 间的 网络 系统 。
硬件 系统 从层 次上 来看 ,包 括单 个服 务器 、整 合了 多服 务器 机架 和存
放、 连接 各个 服务 器机 架的 数据 中心 。
软件 系统 包括 每个 服务 器上 面的 安装 的单 机的 操作 系统 经过 修改 过的
。 云计 算底 层软 件系 统 文 件系 统 ! " 、 并 行
计算 处理 算法 # $ % 、并 行数 据库 & ' ,并 行锁 服务
' ' ( % ,云 计算 消息 队列 ) *
+ 内部 使用 的软 件开 发工 具 , ( 、- . 、 / / 等
0 自己 开发 的应 用软 件 " % 、 1
、
将 + 2 台 服务 器编 为一 个集 群, 而在 全球 范围 , 拥 有
3 个 数 据 中 心 。 每 个 数 据 中 心 有 0 2 个 服 务 器 集 群 。
数 据 访 问
外 部访 问
当一 个互 联网 用户 输入 % 1 的 时候 ,这 个 4 请求 就
会发 到 " 解 析服 务器 当中 去, 那么 的 " 服 务
器就 会根 据用 户自 身的
, 地址 来判 断, 这个 用户 请求 是来 自那 个国 家、 那个 地区 。根 据不 同用
户的 , 地 址信 息, 解析 到不 同的 的 数据 中心 。
进入 第一 道防 火墙 ,这 次防 火墙 主要 是根 据不 同端 口来 判断 应用 ,过 滤相
应的 流量 。如 果仅 仅接 受浏 览器 应用 的访 问, 一般 只会 开放 5 2 端口
$ , 和 ++ 端口 $ 6 通 过 " " 加密 。将 其他 的来 自互 联网 上的
非 $ . + 7 3 非 52 + + 端口 的请 求都 放弃 ,避 免遭 受互 联网 上大 量的
8 " 攻 击 。
据说 使 用了 思杰 科技 " (6 1 6 的 6 % 应 用交
换机 来做 ' 应用 的优 化。 " % 可 将 ) ' 应 用性 能加 速高 达
0 倍 。使 用高 级优 化技 术如 动态 缓存 时, 或者 当网 络延 迟或 数据 包丢 失增
大时 ,性 能增 益会 更高 。这 里提 到的 $ 1 $ 技术 是可 以
是进 行 $ 的每 个 6 66 分 解开 。从 不同 的后 端服 务器 缓存 来 获
取内 容, 这样 可以 大大 提升 ' $ 性能 ,同 时有 效降 低后 端 '
应用 服务 器的 处理 和联 接压 力。
在大 量的 ' 应用 服务 器群 ) ' " . ! 1 前 , 使 用反
向代 理 . 6 , ( 的技 术。 反向 代理 . 6 , ( 方 式 是
指以 代理 服务 器来 接受 上的 连接 请求 ,然 后将 请求 转发 给内 部
网络 上的 服务 器, 并将 从服 务器 上得 到的 结果 返回 给 上请 求连
接的 客户 端, 此时 代理 服务 器对 外就 表现 为一 个服 务器 。
使用 的是 "9 % 的 软件 方式 来实 现反 向代 理应 用的,
" 9 % 一个 流行 的自 由软 件 4 通 用公 共许 可证 的 代理 服务
器和 ) ' 缓存 服务 器。 " 9 有 广泛 的用 途, 从作 为网 页 服务 器的 前
置 % % 服 务器 缓存 相关 请 求 来 提 高 ) ' 服 务器 的速 度 。
在 ' 应 用服 务器 需要 调用 内 部存 储的 信息 和资 源的
时候 ,再 通 过 一 个 防 火 墙 进 入 内 部 的 网 络 , 来 访 问 其 他 的 基 于自 身 ! "
系统 的应 用服 务和 数据 库。
内 部访 问
自己 已 经建 设了 跨国 的光 纤网 络, 连接 跨地 区 、 跨 国家 的高 速
光纤 网络 。内 部网 络 已经 都是 $. 3 的 协议 在运 行。 网络 中的 路由 交换 设
备主 要还 是 来 自 - $ : 6 % : ! ( : ;, 这 四家 公司 。内 部网 关
协议 , 是基 于 8" ,! 开 放 式 最 短路 径优 先 进行 修改 的。 在每 个服 务
器机 架内 部连 接每 台服 务器 之间 网
络是 22 # 以 太网 ,在 服务 器机 架之 间连 接的 网络 是 22 2 # 以 太网 。
在每 个服 务器 机架 内, 通过 , 虚 拟服 务器 , 7 " . 的 方式
实现 传输 层负 载 内 核 内的 平衡 ,这 个就 是所 谓四 层 < 交 换。
, 7" 使 一 个 服 务 器 机 架 中 的 众多 服务 成为 基 于 内核 虚拟 服务 器。
这就 像在 一 堆服 务器 前安 装一 个负 载均 衡的 服务 器一 样。 当 = , 4 ,
的请 求过 来后 ,使 一群 服务 器可 以使 用一 个单 一的 , 地址 来对 外提 供相
关的 服务 支撑 。
关 键技 术
分布 式文 件系 统 ! " ! "
! " 是 文 件 系 统 中 最基 础的 模块 。任 何文 件和 数据 都可 以 利用
这种 底层 模块 。 ! " 通过 基于 分布 存储 的方 式, 对于 服务 器来 说,
分成 了主 服务 器 # 6 " . 6 和 块存 储 服务 器
" . 6 , ! " 上的 块存 储 服务 器上 的存 储空 间以 3 +# & 为 单位 ,分
成很 多的 存 储块 ,由 主服 务器 来进 行存 储内 容的 调 度和 分配 。每 一份 数据
都是 一式 三份 的 方式 ,将 同样 的数 据分 布存 储在 不 同 的 服 务 器 集 群 中 , 以
保证 数据 的安 全性 和 吞吐 的效 率提 高。 当需 要对 于文 件、 数据 进行 存 储的
时候 ,应 用 程序 之间 将需 求发 给主 服务 器, 主服 务器 根据 所 管理 的块 存储
服务 器的 情况 , 将需 要存 储的 内容 进行 分配 ,并 将可 以存 储 的消 息 使用
那些 块存 储 服务 器, 那些 地址 空间 , 有应 用 程序 下面 的 ! " 接口 在对
文件 和数 据 直接 存储 到相 应的 块存 储服 务器 当中 。 块存 储服 务器 要定 时通
过心 跳信 号 的方 式告 知主 服务 器, 目前 自己 的 状 况 ,一 旦心 跳信 号出 了问
题, 主服 务器 会自 动将 有问 题的 块 存储 服务 器的 相 关内 容进 行复 制。 以保
证数 据的 安全 性。
数据 被存 储 时是 经过 压缩 的。 采用 的 &# > 和 ? $ $( 算法 。& # >
使用 最长 公 共 子 序列 进行 压缩 : 压 缩 2 2 # & 6 : 解 压 缩约 2 2 2 # & 6
类似 的有 & # ; 6 " @ < ( 1 $ 6 6 ? $ $ (
是 ? ) 的 改进 版本 : 压 缩比 不如 ?) : 但是 速 度 更 快。
并 行计 算构 架– # $ %
有了 强大 的分 布 式文 件系 统, 遇到 的问 题就 是 怎么 才能 让公 司
所有 的程 序员 都 学会 些分 布式 计算 的程 序呢 : 于 是 , 那 些 工程 师
们从 6 $ 和 其他 函数 式编 程 语言 中的 映射 和化 简操 作中 得到 灵 感 , 搞出
了 # $ % 这一 套 并行 计算 的框 架。 # $ % 被
拿来 重新 了 " % 的整 个索 引系 统。 而
同 样用 - . 将 这 一 套实 现和 ; ! " 合在 一 起 成 为 ; $
的 。 # $ % 是 提 出的 一个 软件 架构 ,用 于大 规 模
数据 集 大 于 =& 的并 行运 算。 概念 “# $ 映射 A 和“ % 化简 A ,
和他 们
的主 要思 想 ,都 是从 函数 式编 程语 言借 来的 , 还 有 从矢 量编 程语 言借 来的
特性 。
映射 和化 简
简单 说来 ,一 个 映射 函数 就是 对一 些独 立元 素组 成 的概 念上 的列 表 例如,
一个 测试 成绩 的 列表 的 每一 个元 素进 行指 定 的操 作 比如 前面 的例 子里 ,
有人 发现 所 有学 生的 成绩 都被 高估 了一 分, 他可 以 定义 一个 “减 一” 的映 射
函数 ,用 来修 正 这个 错误 。 。事 实上 ,每 个 元素 都是 被独 立操 作的 ,而
原始 列表 没 有被 更改 ,因 为这 里创 建了 一个 新的 列 表 来 保存 新的 答案 。这
就是 说, # $ 操 作是 可以 高 度并 行的 ,这 对高 性能 要求 的应 用以 及 并行
计算 领域 的 需求 非常 有用 。
而化 简操 作指 的是 对一 个列 表的 元 素进 行适 当的 合并 继续 看前 面的 例子,
如果 有人 想知 道 班级 的平 均分 该怎 么做 : 他 可以 定 义 一 个化 简函 数, 通过
让列 表中 的 元素 跟自 己的 相邻 的元 素相 加的 方式 把 列表 减半 ,如 此递 归运
算直 到列 表只 剩 下一 个元 素, 然后 用这 个元 素除 以 人数 ,就 得到 了平 均
剩余32页未读,继续阅读
资源评论
产品经理自我修养
- 粉丝: 231
- 资源: 7678
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功