java自学网VIP

Java自学网

 找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 2737|回复: 0

《大规模分布式存储系统》第12章 云存储【12.4】

[复制链接]
  • TA的每日心情
    开心
    2021-5-25 00:00
  • 签到天数: 1917 天

    [LV.Master]出神入化

    2096

    主题

    3754

    帖子

    6万

    积分

    管理员

    Rank: 9Rank: 9Rank: 9

    积分
    66788

    宣传达人突出贡献优秀版主荣誉管理论坛元老

    发表于 2017-3-16 16:09:04 | 显示全部楼层 |阅读模式
    12.4 云存储的核心优势
    3 f: n7 s4 Y& F$ D4 N8 u( w6 Y作为云计算的存储部分,云存储的核心优势与云计算相同。主要包括两个方
    / v6 R/ ~& q! i9 I/ K7 I面:最大程度地节省成本以及加快创新速度。
    : ~$ A6 o: ?- k" U8 Z) n全球企业IT开销,分为三个部分:硬件开销、能耗以及管理成本。其中硬件开
    5 k; C/ n, l5 o  Q销包括存储、计算服务器以及网络带宽成本。由于摩尔定律的作用,硬件成本越来
    ! C6 W4 f& {% N+ m' V越低,而能耗以及管理成本所占比例相应地变得越来越高了。
    ( S8 ^% n/ D9 d+ _0 i根据James Hamilton的数据,一个拥有5万个服务器的特大型数据中心与拥有1000# y5 t1 v0 X" K% E) `. R
    个服务器的中型数据中心相比,特大型数据中心的网络和存储成本只相当于中型数2 l& N8 J" b  L
    据中心的1/5或者1/7,而每个管理员能够管理的服务器数量则扩大到7倍之多。因
    - A2 ]0 Z$ J/ Y& `0 X* k' M- r而,对于规模达到几十万至上百万计算机的云存储平台而言,其网络、存储和管理
      U' Y; t9 ]6 i1 `0 d/ l/ N成本较之中型数据中心至少可以降低5~7倍,如表12-1所示。% y, d2 n' d. `
    电力和制冷成本也会有明显的差别。例如,美国爱达荷州的电力资源丰富,电
    : g9 R2 O' L2 x) k: s) v5 r价很便宜。而夏威夷是岛屿,本地没有电力资源,电力价格就比较贵,二者相差57 S2 Q% y; f7 i* q9 b4 M
    倍,如表12-2所示。5 a3 M8 P5 j  J) _9 J
    PUE(Power Usage Effectiveness,能源使用效率)用来衡量数据中心的能源效
    , o  E/ ?2 q* C+ x& [7 m* W1 z率,等于数据中心所有设备能耗(包括IT电源,冷却等设备)/IT设备能耗。PUE是( @, m" ], F5 ], _& \: v/ g
    一个比率,基准是2,越接近1表明能效水平越好。国内很多中型数据中心的PUE值大
    3 u0 Q0 ]1 [/ y于2,也就是说,一半以上的能源被白白浪费掉,而特大型数据中心,比如Facebook
    * t& H; r1 Y9 c9 O' c某太阳能供电数据中心的PUE值为1.07,几乎没有额外的能源损耗。
    ' T, D; x: |2 ]8 @9 K云存储的规模效应能够大大地降低IT成本。当然,我们国家的情况有些特殊,# H2 `1 u; T5 U& A8 s7 _
    比如电价全国统一,人力成本相对较低,运营商垄断导致网络带宽成本偏高,自建
    + W- y5 G$ e" F& M( E6 H# b  x* t数据中心也有各种政策因素,云存储带来的成本优势虽比不上美国但仍然是巨大2 F& @3 o1 c) Q8 b9 q
    的。
    7 H# l7 `) {& r3 o5 ^3 ~. m2 s2 z再者,云存储与传统存储相比,资源的利用率也有很大的不同。传统存储对资' l* R* m' x+ q! X
    源的利用率非常低,对存储资源的分配通常是静态的,即参考用户的估计值对存储
    : b/ `! ]7 r( S* l5 o+ D3 g- Z设备划分成分区或卷,以分区或卷为单位将存储资源分配给用户,相应的网络和
    ' X9 w* m, x7 @1 v( a% b$ [( ACPU资源也是固定的。然而,绝大多数网站的访问流量都不是均衡的,例如,有的. f( W6 a" l4 ]( ]# B3 D
    网站时间性很强,白天访问的人少,到了晚上8点到10点就会流量暴涨,典型的例子! L, X% ~. K1 U$ H$ X7 }) J' z
    是电子商务网站;有的网站季节性很强,平时访问人不多,但是到国庆节,春节的% M1 h( B1 s8 Q. g+ x2 q; ?" \
    访问量就很大,典型的例子是铁道部火车票预订网站;有的网站突发性很强,典型
    . u' m6 p, i- F. i8 M3 P的例子是微博开放平台上的外部应用。网站拥有者为了应对这些突发流量,需要按. e5 t# y8 e* M  q# A' d% O, ]1 R
    照峰值要求来购买服务器和网络带宽,造成资源的平均利用率很低。例如,淘宝网
    6 K+ Q) @+ f7 X" i4 R% ^6 t在2011年11月11日“双11”促销活动时CDN流量最高达到820G,是平常的很多倍。云
    ( h: H% ~9 W* `- k7 [. F; i3 y/ {0 x存储通过共享的方式提供弹性的服务,它根据每个租用者的需要在一个超大的资源
    4 g" u. z. ?8 S池中动态分配和释放资源,而不需要为每个租用者预留峰值资源。由于云存储的规
    ! U% o8 U4 B0 W& {) j模极大,其租用者数量非常多,支撑的应用种类也是五花八门,通过这种错峰效/ l: A/ y4 @2 @% y# e) }, T7 X
    应,资源利用率可以达到80%左右,是传统模式的5~7倍。/ M2 D" ^. n' x8 K
    综上所述,由于云存储更低的硬件成本和网络成本,更低管理成本和电力成
    ) \8 s' T+ l  @. x! S) C本,以及更高的资源利用率,Google,Amazon,Microsoft等互联网巨头能够通过从数据
    ( L8 E$ T" X6 I- C9 y中心开始构建整套公有云存储解决方案达到节省30倍以上成本的目的。
    , T* T5 f, |- d' j; n! T% b( C* x在我国,由于政府政策及技术实力等问题,大多数企业不可能从头开始构建完$ u  J; n% F5 \/ c
    整的云存储方案,然而,当企业发展到一定的规模后,仍然可以通过云存储技术降
    & {! ^3 l" G  j( C2 Q; ^低成本,原因如下:# S% O. B5 v0 K5 O8 C/ J
    ●由于云存储技术的容错能力很强,使得我们可以使用低端硬件替代高端硬件,
    0 S( n5 p; e1 G1 K" l3 W; L如采用普通PC服务器替代EMC高端存储以及IBM小型机。另外,可以通过对云存储4 U, K2 F; T& ?4 p7 b! a
    系统不断的优化来降低硬件成本和能耗。
    9 q9 a( e* o+ r9 {8 N8 R●在保证服务质量的前提下,通过云存储调度技术将用户的请求调度到网络带宽
    - m: H7 D5 X3 E0 W2 b费用较低的数据中心,从而降低整体网络带宽成本。1 M6 e" U% U3 f
    ●云存储技术的管理时高度自动化的,极少需要人工干预,可以大大降低管理成
    " n4 J5 H6 h) b( n本。# f% x* }; w5 G0 F
    ●云存储技术的核心理念是多租户共享,多个业务共享相同的资源池,每个业务
    6 z5 P3 t% z% v# z$ K6 w6 _动态分配和释放资源,提高资源利用率。
    ) K. r7 \+ L* T; c# [$ m) \云存储的另外一个核心优势就是加快创新速度。云存储通过提供海量的数据存
    ! l. e3 w* i; R$ V' x$ a储和处理能力,使得用户不必关心底层基础设施的可扩展性,突发流量处理等复杂
    ! p7 q/ v- K6 B% k3 q的系统架构问题,将有限的精力集中在最核心的创新业务上,使得创新想法很快得4 A' q% E& U' f, i( H, H
    到实现,大大地提高了创新速度。由于云平台的存在,加上移动互联网的重大机
    + z* \  f1 `; N' F遇,大量创业公司得以迅速兴起,许多美国当前热门公司,例如Pinterest、
    " A- v4 X5 J8 O5 j) TDropbox、Instagram、Reddit、Zynga,都构架在Amazon的云平台(Amazon Web  K  Y+ Z( j& _: g
    Service,AWS)之上。比如,2012年4月以10亿美元(因为大部分是股票,实际价值
    ! S) ?/ d8 @7 t2 K可能更高)被Facebook收购的Instgram,其技术方案大量采用AWS(主机选择Amazon, h* z% d2 j! g  C
    EC2,图片数据库采用Amazon S3,CDN选用Amazon CloudFront等)。所以虽然
    0 I7 U; L$ [$ sInstgram只有13名员工(工程团队仅3人),却构建了最强大的移动端图片分享平
    3 M8 A5 t' Z, U- h% R  c1 [台,甚至让Facebook感到了威胁。- T: g. t4 u/ u% m0 U9 U
    今天,一个普通的技术人员可以短时间内借助云存储平台,拥有和巨人对手们
    2 N; b: m' M4 A  C- \4 q# p6 d# o相同的计算资源,实现梦想,这才是云存储平台的真正价值所在。我们需要共同为
    ! _9 Q' i/ U% O2 Y, v0 c+ V8 `之努力。
    . q1 R1 _$ U3 d5 c) ~% F! ?4 G& V/ A7 i/ I4 H  i

    4 a3 }' S; o; R& z
    回复

    使用道具 举报

    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    QQ|Archiver|手机版|小黑屋|Java自学网

    GMT+8, 2025-4-1 14:27 , Processed in 0.405479 second(s), 28 queries .

    Powered by Javazx

    Copyright © 2012-2022, Javazx Cloud.

    快速回复 返回顶部 返回列表