列式存储.docx

列式存储是一种特殊的数据库存储方式，相比于传统的行式存储（NSM），它将所有记录中相同字段的数据聚合存储，主要用于在线分析、数据挖掘等查询密集型应用。 1. 定义：列式存储（DSM）是一种数据库存储方式，它将所有记录中相同字段的数据聚合存储，相比于传统的行式存储（NSM），它可以大大减少读取的数据量，提高查询性能。 2. 优点：列式存储有两个主要优点：一是每个字段的数据聚集存储，减少读取的数据量；二是更容易设计压缩/解压算法。 3. 场合：列式存储主要用于在线分析、数据挖掘等查询密集型应用，例如OLAP、数据仓库等。 4. Sybase IQ 列存储：Sybase IQ 是一种基于列式存储的数据库系统，它可以自动索引化整个数据库，提高查询性能，并且可以压缩数据，减少存储空间。 5. 列存储与传统行存储的区别：列存储的数据在表中是按列存储的，而传统行存储的数据在表中是按行存储的。这种方式可以减少读取的数据量，提高查询性能。 6. 列存储的优点：列存储可以自动索引化整个数据库，提高查询性能，并且可以压缩数据，减少存储空间。此外，列存储还可以减少读取的数据量，提高查询性能。 7. 列存储的应用场景：列存储主要用于在线分析、数据挖掘等查询密集型应用，例如OLAP、数据仓库等。 8. 列存储的压缩方式：列存储可以使用压缩算法来减少存储空间，Sybase IQ 使用的压缩方式可以达到 5 倍之好。 9. 列存储的索引方式：列存储可以自动索引化整个数据库，提高查询性能。 10. 列存储的分区方式：Sybase IQ 使用垂直分区，即按照列而不是按照行进行分区。这种方式可以减少管理分区的维护需求，同时消除了数据库的重新组织。 11. 列存储的OLAP支持：Sybase IQ 支持 OLAP 功能属性，如排列、百分比、平均等。 12. 列存储的数据压缩：传统的数据库引擎不能以一种通用的方式进行数据压缩，主要是由于存在以下三个问题：按行存储的数据存储方式不利于压缩，对于许多 2K 和 4K 的二进制数据页来说，为压缩和解压缩而增加的开销太大，在 OLTP 环境中，大量读取和更新混杂在一起。