openstack私有云企业级实战-上部基础篇之swift

1、OpenStack 一、Swift 架构、原简OpenStackObjectStorage（Swift）OpenStack Swift 使用普通的服务器来构建冗余的、可扩展的分布式对象量可达 PB 级。容功Swift提供的服务与AWS S3 的OpenStack 一、Swift 架构、原简OpenStackObjectStorage（Swift）OpenStack Swift 使用普通的服务器来构建冗余的、可扩展的分布式对象量可达 PB 级。容功Swift提供的服务与AWS S3 的需要长期保存的数据，例如的SwiftRESTfulAPI1.4.6版本所提供的功能账户）的GET、对象）的GET

2、、PUT、HEAD、DELETE、并上传 manifest 文件、（对象，不需要使用表单提交（HTML表单上传文件到）WEB 站点（Swift 作为静态站点的WEB 服务器架Swift的架构之前，先介绍一下OpenStack的设计原理1. Scalabilityandelasticityareourmaingoals （可扩展性和伸缩性是Anyfeaturetlimitsourmaingoalsmustbeoptional （任何影响到可扩展 If see #2 （所有的环节必须是异步的，如果不能异步实现，参考第二条设All required components must be horizo

3、ntally scalable （所有的基础组件必Always use shared nothing architecture (SN) or sharding，If you cant Share nothing/shard, see #2 （始终使用无共享的架构，如果不能实现，参见第Distribute lly logic. Move logic to where see #2 （所有的环节必须是异步的，如果不能异步实现，参考第二条设All required components must be horizontally scalable （所有的基础组件必Always use shared

4、 nothing architecture (SN) or sharding，If you cant Share nothing/shard, see #2 （始终使用无共享的架构，如果不能实现，参见第Distribute lly logic. Move logic to where e Accepteventual consistencyanduseitwhereitis appropriate. （接受最终一Testeverything （充足的测试的构架一般如下：可扩展性和伸缩性是的主要目依赖组件 同步工具，用于storagenodeWeb 服务网关接口，通过paste.deploy 工

5、具包管理swift 库主要组件Ring 文件 在基ring 它却 储名字到位置的。 ring 文件分为三类，分别是： container.ring，object.ring。 对于 account 的请求就能通过 查询account.ring得到/account_name: itionaccount_name 和 库主要组件Ring 文件 在基ring 它却 储名字到位置的。 ring 文件分为三类，分别是： container.ring，object.ring。 对于 account 的请求就能通过 查询account.ring得到/account_name: itionaccount_nam

6、e 和 container_name 查询container.ring ition /account_name/container_name : object account_name，container_name，object_name object.ring 文件， 得到/account_name/container_name/object_name :itionRing /etc/swift 目录下，被用于各节点之间的位置查询，使得swift Ring 的详 集群的 endpo，向用户提供 RESTful API。 对于用户的请求，proxy-server storage node ac

7、count-server。container-server object-swift proxy-server， proxy-server 不会对数据进行缓存。auth-server token 和验证每个请求的token及 token的权限。swift proxy-server使用，是可选的，可以自己开发，也可以使用OpenStack Keystone。Keystone 是Keystone 可以无缝的与其它OpenStack 项目整account-serveraccount-server是storagenode中负责处理对account的GETUT、DELETE、RELICATION 请求的

8、服务进程，account-server 使用的数据库文件保存account 的相关信息。container-server container-server storage node 的数据库文件保存container object-server object-serverstorage node 中负责处理对object GETUT、PSOT、DELETE、RELICATION 请求的服务进程，object-直接操作 object，并利用 XFS 文件系统的xattr object 的元数据。 account-auditor、container-auditor、object-auditor 这

9、三个进程运行在 有其它副本的storage nodeaccount-replicator、container-replicator、object-replicator 这三个进程运行storagenode中，分别负责account db文件，containerdb文件， objectobjectswift集群中通常被存account-replicator、container-replicator、object-replicator 这三个进程运行storagenode中，分别负责account db文件，containerdb文件， objectobjectswift集群中通常被存 3，pro

10、xy-入失败的节点在一段时间后将会得到写入成功的节点 object-replicator进container-updater、account-updater 这两个进程运行在storage node 中，在请求来量大时，container-serveraccount-server不能实时处理对数据库更新的请求，这些请求将被本地化到队列中，由updater 进程进行异步原理 事 /yuxc/的文章对ring 实现原理进行特性网络是P2P HYPERLINK http:/blog/442177 /?p=95 总 9 需要看运营这个服务的公司的运维能力。如果要达到像AWS S3 这种规模的服务，还需

11、要对Swift 的部份组件进行优化。二、OpenStack 策OpenStack RackspaceCloudFiles 2010 年最早的两个项目之一。Swift 通过 RESTful API 提供对容器（Container）和对象的 CRUD 操作。OpenStackSwift 对象SwiftOpenStack RackspaceCloudFiles 2010 年最早的两个项目之一。Swift 通过 RESTful API 提供对容器（Container）和对象的 CRUD 操作。OpenStackSwift 对象Swift 2.0 2014 策略简介 PolicyContainer 策略

12、充分体现了 Swift“ Swift2.0 ObjectRing策略的配置与使用配置 策略以storage-policy:NN 1. 任何策略，Swift 2. 3. 默认策略，Swift 0 4. 的为 swift.conf #randomunique tcanneverchange(DONOTswift_hash_path_prefix=swift_hash_path_suffix=default=name=deprecated=完成 swift.conf 文件的编辑，下一步是为每个ObjectRing 类似，只是要在ObjectRing， object 后面加上-NN是0 和 1 nam

13、e=deprecated=完成 swift.conf 文件的编辑，下一步是为每个ObjectRing 类似，只是要在ObjectRing， object 后面加上-NN是0 和 1 Object swift-ring-builderobject-0.buildercreate103swift-ring-builderobject-1.buildercreate102使策container 以 SAIO curl-v-XPUT-HX-Auth-Token: -H X-Storage-Policy: orange curl-XPUT-v-Tfile1.txt-HX-Auth-Token: curl

14、-XGETvStoragePolicy 策略的应用模式1. 1.Container 2. HDD SSD 保存。也可以应用于其他存2.Container 2. HDD SSD 保存。也可以应用于其他存2.Container 3. 3.Container 4. 应用纠删码（Erasure对于性能要求不高的场合，应用纠删码。纠删码，又称为删除码，将对象分割为m 个分片（fragments4. 应用纠删码（Erasure对于性能要求不高的场合，应用纠删码。纠删码，又称为删除码，将对象分割为m 个分片（fragments，并通过编码生成k 个校验分片，最后将这n=+k 个分片放到 Swift 系统的不同位置（swift 的不同 zone 中n EC(mn)将m 图5在某中的应用案例Swift数据分为三类：1）源片；2）文件；3）文1. 块，并生成 3 块校验块4)2. 效率约为3. 清晰度较低在某中的应用案例Swift数据分为三类：1）源片；2）文件；3）文1. 块，并生成 3 块校验块4)2. 效率约为3. 清晰度较低50%99.9992%和 99.96%。策