java自学网VIP

Java自学网

 找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 2686|回复: 0

《大规模分布式存储系统》第12章 云存储【12.4】

[复制链接]
  • TA的每日心情
    开心
    2021-5-25 00:00
  • 签到天数: 1917 天

    [LV.Master]出神入化

    2062

    主题

    3720

    帖子

    6万

    积分

    管理员

    Rank: 9Rank: 9Rank: 9

    积分
    66592

    宣传达人突出贡献优秀版主荣誉管理论坛元老

    发表于 2017-3-16 16:09:04 | 显示全部楼层 |阅读模式
    12.4 云存储的核心优势0 K4 r! y4 |4 q! o" y) ]4 q
    作为云计算的存储部分,云存储的核心优势与云计算相同。主要包括两个方
    . V/ ^0 X) R  J% ?面:最大程度地节省成本以及加快创新速度。* b$ A7 v1 B, U. I; I9 u5 Z
    全球企业IT开销,分为三个部分:硬件开销、能耗以及管理成本。其中硬件开" F6 w  ~7 j& A/ p1 |  _
    销包括存储、计算服务器以及网络带宽成本。由于摩尔定律的作用,硬件成本越来
    ( T: C, Q( v/ K  F' K0 o越低,而能耗以及管理成本所占比例相应地变得越来越高了。
    & a/ Y# u8 r/ C4 n1 f根据James Hamilton的数据,一个拥有5万个服务器的特大型数据中心与拥有1000
    6 \0 H5 h: P9 x- p3 D个服务器的中型数据中心相比,特大型数据中心的网络和存储成本只相当于中型数
    ' s, w- a2 O2 _% O$ C据中心的1/5或者1/7,而每个管理员能够管理的服务器数量则扩大到7倍之多。因
    & A) m; z& W# p' r# r而,对于规模达到几十万至上百万计算机的云存储平台而言,其网络、存储和管理- c+ V2 E( {3 E7 R, c% c
    成本较之中型数据中心至少可以降低5~7倍,如表12-1所示。
    / T/ D1 R8 N; G/ l9 h电力和制冷成本也会有明显的差别。例如,美国爱达荷州的电力资源丰富,电, `, m+ ^9 I+ R$ g) j9 x
    价很便宜。而夏威夷是岛屿,本地没有电力资源,电力价格就比较贵,二者相差5
    1 i1 V  m( ^; t$ u5 V倍,如表12-2所示。
      j0 q" V, S# Q9 o; f# {& O5 wPUE(Power Usage Effectiveness,能源使用效率)用来衡量数据中心的能源效
    8 }; _  z5 Y1 x6 ]: \# ~率,等于数据中心所有设备能耗(包括IT电源,冷却等设备)/IT设备能耗。PUE是9 ~0 W1 G; v& v$ P% I6 h$ z
    一个比率,基准是2,越接近1表明能效水平越好。国内很多中型数据中心的PUE值大
    ; \2 [7 P2 @) N! ]5 M4 h. u3 [7 ?于2,也就是说,一半以上的能源被白白浪费掉,而特大型数据中心,比如Facebook
    ; p4 y) F# t6 o某太阳能供电数据中心的PUE值为1.07,几乎没有额外的能源损耗。+ v$ @+ R' b8 W/ g% e6 a
    云存储的规模效应能够大大地降低IT成本。当然,我们国家的情况有些特殊,
    ' v* o; O) C; @/ u" T比如电价全国统一,人力成本相对较低,运营商垄断导致网络带宽成本偏高,自建
    - c7 [0 U  M* w: H# H% u8 V( _数据中心也有各种政策因素,云存储带来的成本优势虽比不上美国但仍然是巨大
    / `9 ^5 ~$ b: q8 F5 M的。2 P1 K  y2 s, S3 T
    再者,云存储与传统存储相比,资源的利用率也有很大的不同。传统存储对资! A1 C* ^& r3 l* L- z+ o! l
    源的利用率非常低,对存储资源的分配通常是静态的,即参考用户的估计值对存储
    $ s: Y/ j0 _8 W设备划分成分区或卷,以分区或卷为单位将存储资源分配给用户,相应的网络和$ |. V0 q8 d. Z$ t* D$ w
    CPU资源也是固定的。然而,绝大多数网站的访问流量都不是均衡的,例如,有的
    , @  ^1 N6 K1 ]网站时间性很强,白天访问的人少,到了晚上8点到10点就会流量暴涨,典型的例子8 v  M, k  w% T: I$ H
    是电子商务网站;有的网站季节性很强,平时访问人不多,但是到国庆节,春节的% G( k, b1 y" j) T# V
    访问量就很大,典型的例子是铁道部火车票预订网站;有的网站突发性很强,典型* ^; y& b) V1 e* a( I6 e7 p
    的例子是微博开放平台上的外部应用。网站拥有者为了应对这些突发流量,需要按/ ?$ U  `2 j* t: ]
    照峰值要求来购买服务器和网络带宽,造成资源的平均利用率很低。例如,淘宝网8 ?/ Y+ b7 d; Y" |2 V
    在2011年11月11日“双11”促销活动时CDN流量最高达到820G,是平常的很多倍。云
    ; A* a# @! ]3 G2 |存储通过共享的方式提供弹性的服务,它根据每个租用者的需要在一个超大的资源
    " p6 c5 v9 _3 h! q池中动态分配和释放资源,而不需要为每个租用者预留峰值资源。由于云存储的规
    $ |& i; N- y" t$ `模极大,其租用者数量非常多,支撑的应用种类也是五花八门,通过这种错峰效# g* n/ i1 ~: E, w9 E5 A: O
    应,资源利用率可以达到80%左右,是传统模式的5~7倍。8 Y. i( y" k4 j1 E. m- W
    综上所述,由于云存储更低的硬件成本和网络成本,更低管理成本和电力成7 x) L* s7 j; N- a+ V; v
    本,以及更高的资源利用率,Google,Amazon,Microsoft等互联网巨头能够通过从数据3 H1 |: p  ?4 b- N
    中心开始构建整套公有云存储解决方案达到节省30倍以上成本的目的。# _6 g) z# R: g  t0 E' d8 B7 e- K* }3 S# U6 d
    在我国,由于政府政策及技术实力等问题,大多数企业不可能从头开始构建完
    / V+ o( H6 [5 ]% |( c& C整的云存储方案,然而,当企业发展到一定的规模后,仍然可以通过云存储技术降; {' N  B7 f% s+ n' d* h
    低成本,原因如下:5 V+ C$ ]9 F0 l* `+ ]
    ●由于云存储技术的容错能力很强,使得我们可以使用低端硬件替代高端硬件,! Z. ~- t* F( D4 y: N
    如采用普通PC服务器替代EMC高端存储以及IBM小型机。另外,可以通过对云存储3 b: T1 S/ V- V: o# `
    系统不断的优化来降低硬件成本和能耗。
    9 h, V+ ]4 Z; Y0 r! s3 V0 |# [●在保证服务质量的前提下,通过云存储调度技术将用户的请求调度到网络带宽7 u( u1 O7 w2 y* u' U0 Q  D% X
    费用较低的数据中心,从而降低整体网络带宽成本。  d6 Z0 P7 C1 q; ?) ?9 z
    ●云存储技术的管理时高度自动化的,极少需要人工干预,可以大大降低管理成
    ; [7 y/ }. ^& v# f* |/ r本。  F7 |/ z( o: {7 Z
    ●云存储技术的核心理念是多租户共享,多个业务共享相同的资源池,每个业务9 F/ T( E* w6 p& j: ]1 j
    动态分配和释放资源,提高资源利用率。
    ! Y- @; t. ]& u云存储的另外一个核心优势就是加快创新速度。云存储通过提供海量的数据存4 N, ]4 d9 G) W/ _" \/ l& b7 T7 C
    储和处理能力,使得用户不必关心底层基础设施的可扩展性,突发流量处理等复杂! g% R) w' X0 T2 X9 O: T' Z9 a( b
    的系统架构问题,将有限的精力集中在最核心的创新业务上,使得创新想法很快得
    , _. r# q1 ]/ T3 i1 X6 V7 l到实现,大大地提高了创新速度。由于云平台的存在,加上移动互联网的重大机4 E5 n0 t  d1 q% e% P( _  b
    遇,大量创业公司得以迅速兴起,许多美国当前热门公司,例如Pinterest、
    % S, O, h) v. f6 k3 S( m% I& oDropbox、Instagram、Reddit、Zynga,都构架在Amazon的云平台(Amazon Web
    . _3 \: K4 ^$ ~Service,AWS)之上。比如,2012年4月以10亿美元(因为大部分是股票,实际价值
    1 \: [1 _2 G% z$ O! _可能更高)被Facebook收购的Instgram,其技术方案大量采用AWS(主机选择Amazon1 P' Q) T5 S7 N, y1 T  ^$ u& _4 S
    EC2,图片数据库采用Amazon S3,CDN选用Amazon CloudFront等)。所以虽然2 r$ a; i) ^6 M. a' Q
    Instgram只有13名员工(工程团队仅3人),却构建了最强大的移动端图片分享平
    & b. J& u& }6 e6 C# E7 Q" v, T台,甚至让Facebook感到了威胁。- d0 k- C8 k0 e. i$ G
    今天,一个普通的技术人员可以短时间内借助云存储平台,拥有和巨人对手们+ c2 n: k. Y9 Y# V
    相同的计算资源,实现梦想,这才是云存储平台的真正价值所在。我们需要共同为
    . @# q7 |# P) b* t- i* l之努力。
    - D; C+ p0 z' P- G) a# k3 ]! T' G( |. m

    - s0 n* G, s$ b* o% z
    回复

    使用道具 举报

    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    QQ|Archiver|手机版|小黑屋|Java自学网

    GMT+8, 2025-2-23 12:47 , Processed in 0.129162 second(s), 33 queries .

    Powered by Javazx

    Copyright © 2012-2022, Javazx Cloud.

    快速回复 返回顶部 返回列表