云平台技术选型之七：分布式对象存储

分布式对象存储是当前云计算领域中一项重要的存储技术，它将数据分散存储在多个地理位置的存储节点上，通过网络互联，形成统一管理的存储系统。这种存储方式突破了传统集中式存储在空间、散热、承重以及带宽等方面的限制，同时降低了对存储设备性能的高要求和维护成本。 分布式对象存储具备如下特点： 1. 可扩展性：分布式对象存储可轻松扩展，支持低端存储设备的大规模分布式部署。 2. 灵活性：数据可以基于策略就近存储，节省带宽资源。 3. 高性价比：相比集中式存储，分布式存储能使用成本较低的小容量设备，且对机房环境要求不高。 4. 系统透明性：用户通过文件系统的访问接口进行操作，与本地文件系统操作类似。 5. 无限制：解决本地文件系统在文件大小和数量上的限制，存储空间几乎无限。 分布式对象存储方案可以根据不同应用场景分为三大类：对象存储、块存储和文件系统存储。它们的主要区别在于存储接口和应用场景： 1. 块存储：类似传统硬盘的存储接口，适用于需要块设备接口的应用场景，如AWS的EBS。 2. 文件存储：支持POSIX接口，用于需要文件系统接口的应用，例如HDFS。 3. 对象存储：采用键值对的简单接口，适用于大规模对象存储，如亚马逊的S3。 在分布式对象存储方案的选择上，市面上有多种商用服务和开源方案可供选择： 商用服务包括： - 亚马逊S3 - 阿里云OSS - 腾讯云COS - 微软Azure - 谷歌CloudStorage - 国内其他服务如青云QingStor和七牛云存储 开源方案包括： - Ambry：LinkedIn开源的对象存储系统，擅长存储不可变对象。 - Minio：轻量级的对象存储服务器，API兼容亚马逊S3。 - Ceph：支持块存储、对象存储的开源分布式文件系统。 - Swift：OpenStack的核心组件，提供对象存储服务。 建议中提及，Ambry和Minio由于用户基数较少，知名度不高，因此在考虑时优先选择市场认可度更高的Ceph和Swift。Ceph起始于2006年，是用C语言编写的，能够确保数据的强一致性，并支持块存储和对象存储。而Swift则起始于2008年，使用Python语言开发，保证了数据的最终一致性，主要支持对象存储。 Ceph除了支持对象存储之外，还能提供块存储服务，这使得Ceph成为了部署OpenStack时的块存储系统的一个热门选择。Ceph之所以能够实现块存储，是因为它能保证数据强一致性，确保在向客户端返回响应之前完成写入操作。 而Swift则主要作为一种对象存储系统，是OpenStack项目中的核心组件，它专注于提供高可用、分布式、持久化的对象存储服务，尤其适合于大文件的存储，并且能够利用相对便宜的硬件存储设备，提供安全可靠的存储解决方案。 随着云计算技术的不断发展和成熟，分布式对象存储已经成为云平台技术选型中的关键组件，企业可以根据自身需求和特点，选择合适的商用服务或者开源方案，以实现数据存储的高效率和高可靠性。