java自学网VIP

Java自学网

 找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 2649|回复: 0

《大规模分布式存储系统》第12章 云存储【12.4】

[复制链接]
  • TA的每日心情
    开心
    2021-5-25 00:00
  • 签到天数: 1917 天

    [LV.Master]出神入化

    2040

    主题

    3698

    帖子

    6万

    积分

    管理员

    Rank: 9Rank: 9Rank: 9

    积分
    66476

    宣传达人突出贡献优秀版主荣誉管理论坛元老

    发表于 2017-3-16 16:09:04 | 显示全部楼层 |阅读模式
    12.4 云存储的核心优势
    , ?9 B8 J" K$ Y2 B. z) _作为云计算的存储部分,云存储的核心优势与云计算相同。主要包括两个方
    6 u$ |! o6 Z$ b, G# n面:最大程度地节省成本以及加快创新速度。7 g( Y- o+ X! S/ r, L
    全球企业IT开销,分为三个部分:硬件开销、能耗以及管理成本。其中硬件开
    2 ]; j5 A7 R$ _* T. O销包括存储、计算服务器以及网络带宽成本。由于摩尔定律的作用,硬件成本越来( W( }& x: l  k# U5 O7 n
    越低,而能耗以及管理成本所占比例相应地变得越来越高了。0 O2 O$ l- K6 i3 O
    根据James Hamilton的数据,一个拥有5万个服务器的特大型数据中心与拥有1000
    # r$ a' O8 |2 Z个服务器的中型数据中心相比,特大型数据中心的网络和存储成本只相当于中型数, d7 g% V3 F" _9 l( ]
    据中心的1/5或者1/7,而每个管理员能够管理的服务器数量则扩大到7倍之多。因
    / w7 v9 u1 @  k, d( g! d而,对于规模达到几十万至上百万计算机的云存储平台而言,其网络、存储和管理" Q3 z% g# P0 y& r
    成本较之中型数据中心至少可以降低5~7倍,如表12-1所示。' X( x9 Z* F3 K/ D) m' }1 F& e
    电力和制冷成本也会有明显的差别。例如,美国爱达荷州的电力资源丰富,电
    2 M$ W  k4 ?. n$ J; m4 u价很便宜。而夏威夷是岛屿,本地没有电力资源,电力价格就比较贵,二者相差5
    ' o, j' i+ S2 B' B1 o) u1 j6 L7 m倍,如表12-2所示。0 o$ S. m: p0 t5 ?
    PUE(Power Usage Effectiveness,能源使用效率)用来衡量数据中心的能源效
    3 j( g- ~6 G7 G8 ?, z9 k5 C7 ]率,等于数据中心所有设备能耗(包括IT电源,冷却等设备)/IT设备能耗。PUE是+ v5 |$ M- Y( _# E* }8 t6 v
    一个比率,基准是2,越接近1表明能效水平越好。国内很多中型数据中心的PUE值大
    * ^- O+ ?2 E& ?% B于2,也就是说,一半以上的能源被白白浪费掉,而特大型数据中心,比如Facebook+ }- I1 c3 F* g4 B* X' O3 n5 r
    某太阳能供电数据中心的PUE值为1.07,几乎没有额外的能源损耗。
    0 {2 p4 z$ f* f. b云存储的规模效应能够大大地降低IT成本。当然,我们国家的情况有些特殊,$ {. ~2 e3 j9 _4 R% o1 _
    比如电价全国统一,人力成本相对较低,运营商垄断导致网络带宽成本偏高,自建) x# O& U: v* ~% b, g2 H2 A
    数据中心也有各种政策因素,云存储带来的成本优势虽比不上美国但仍然是巨大6 r. w3 u3 [3 i5 Q
    的。
    1 n7 B. D+ R* B再者,云存储与传统存储相比,资源的利用率也有很大的不同。传统存储对资
    * w: J1 M) V& Q3 }源的利用率非常低,对存储资源的分配通常是静态的,即参考用户的估计值对存储
    - K/ w4 l" y  C1 q, h4 }- A设备划分成分区或卷,以分区或卷为单位将存储资源分配给用户,相应的网络和3 g! {$ G: z$ G) \7 [+ ^4 l
    CPU资源也是固定的。然而,绝大多数网站的访问流量都不是均衡的,例如,有的
    * Q) y" a! f4 H# U网站时间性很强,白天访问的人少,到了晚上8点到10点就会流量暴涨,典型的例子
    2 N, \0 e3 D+ [; r; k是电子商务网站;有的网站季节性很强,平时访问人不多,但是到国庆节,春节的( D3 p5 u6 D/ i$ u& U5 ]
    访问量就很大,典型的例子是铁道部火车票预订网站;有的网站突发性很强,典型
    " C( S7 [1 J1 _: a" k. w" {的例子是微博开放平台上的外部应用。网站拥有者为了应对这些突发流量,需要按" B: n! i- Z; o, k; y1 j7 H
    照峰值要求来购买服务器和网络带宽,造成资源的平均利用率很低。例如,淘宝网
    1 N4 O7 M; V/ A* R0 s在2011年11月11日“双11”促销活动时CDN流量最高达到820G,是平常的很多倍。云
    + F- W1 i9 I) b" n4 m5 X* m存储通过共享的方式提供弹性的服务,它根据每个租用者的需要在一个超大的资源
    7 c) M3 [. t3 A- ^( s* E; O池中动态分配和释放资源,而不需要为每个租用者预留峰值资源。由于云存储的规; x/ m( d' X+ n2 r0 H
    模极大,其租用者数量非常多,支撑的应用种类也是五花八门,通过这种错峰效3 V9 t8 I& d$ t" v8 q: G0 D, @# E; Q
    应,资源利用率可以达到80%左右,是传统模式的5~7倍。
    - n" _7 a: m; P4 z综上所述,由于云存储更低的硬件成本和网络成本,更低管理成本和电力成8 Y! @9 K% P: K0 t8 o- C+ Z9 }" S
    本,以及更高的资源利用率,Google,Amazon,Microsoft等互联网巨头能够通过从数据& v, z; n) U( F2 E; G) I- y. R9 j) C
    中心开始构建整套公有云存储解决方案达到节省30倍以上成本的目的。/ A( [0 c: Q; M+ w+ l" k. G9 H
    在我国,由于政府政策及技术实力等问题,大多数企业不可能从头开始构建完
    7 U3 u; Q  k- }整的云存储方案,然而,当企业发展到一定的规模后,仍然可以通过云存储技术降
    7 M* R% \! E3 l3 ]) S低成本,原因如下:
    4 s4 V% I+ \/ n+ v: u* p●由于云存储技术的容错能力很强,使得我们可以使用低端硬件替代高端硬件,6 q6 k; p" M7 X% d( V& L4 H
    如采用普通PC服务器替代EMC高端存储以及IBM小型机。另外,可以通过对云存储
    / M" B" s1 H3 E0 v/ \" W4 y: d系统不断的优化来降低硬件成本和能耗。' C% j, i: `9 `! b
    ●在保证服务质量的前提下,通过云存储调度技术将用户的请求调度到网络带宽: `! {9 s, m, j) y5 z
    费用较低的数据中心,从而降低整体网络带宽成本。
    % u5 V9 T! ^4 _4 ~8 Q" {& M3 M●云存储技术的管理时高度自动化的,极少需要人工干预,可以大大降低管理成
    - g% O4 J. ]0 `3 @$ U2 ?本。4 p3 V# @' i/ v
    ●云存储技术的核心理念是多租户共享,多个业务共享相同的资源池,每个业务
    ' D; T/ L  l, B: O动态分配和释放资源,提高资源利用率。/ D* B8 H1 g. B
    云存储的另外一个核心优势就是加快创新速度。云存储通过提供海量的数据存$ k) y9 S: ~: C: W8 K
    储和处理能力,使得用户不必关心底层基础设施的可扩展性,突发流量处理等复杂
    7 O; u, J6 ~/ M6 t的系统架构问题,将有限的精力集中在最核心的创新业务上,使得创新想法很快得
    7 F1 j8 N5 u) S到实现,大大地提高了创新速度。由于云平台的存在,加上移动互联网的重大机
    5 }) C1 x' m9 L8 {# N遇,大量创业公司得以迅速兴起,许多美国当前热门公司,例如Pinterest、
    5 s- R% e$ h0 L4 t# }$ ZDropbox、Instagram、Reddit、Zynga,都构架在Amazon的云平台(Amazon Web
    : y- n6 ^9 @* ]9 QService,AWS)之上。比如,2012年4月以10亿美元(因为大部分是股票,实际价值
    ' y9 t3 b0 l( ~8 B8 t: `( m可能更高)被Facebook收购的Instgram,其技术方案大量采用AWS(主机选择Amazon0 N6 H: Q% R: Z. W: g( U# ~% U; w
    EC2,图片数据库采用Amazon S3,CDN选用Amazon CloudFront等)。所以虽然% P5 L* [0 ]: Y- G/ x* S
    Instgram只有13名员工(工程团队仅3人),却构建了最强大的移动端图片分享平. r+ R7 i+ r' N
    台,甚至让Facebook感到了威胁。% F# N5 K8 d# X  L. l
    今天,一个普通的技术人员可以短时间内借助云存储平台,拥有和巨人对手们  M, p8 `2 \5 B# G/ f* V8 {) K, `
    相同的计算资源,实现梦想,这才是云存储平台的真正价值所在。我们需要共同为
      h1 M' j( h: N$ ?+ G之努力。
    7 |% J3 N" h4 u* @' A  L& S" [3 }0 C  N
    ( ]5 x) s! F) S- W# A( l! n+ G
    回复

    使用道具 举报

    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    QQ|Archiver|手机版|小黑屋|Java自学网

    GMT+8, 2025-1-22 14:40 , Processed in 0.602584 second(s), 33 queries .

    Powered by Javazx

    Copyright © 2012-2022, Javazx Cloud.

    快速回复 返回顶部 返回列表