Sybase:列式存储更适合大数据

来源:用户上传      作者: 邹大斌

　　“大数据时代为列式存储提供了一个非常好的机会。IDC预测，5年之内大多数的数据仓库将采用列式存储技术。这一点可从我们列式数据仓库Sybase IQ市场的快速增长中得到佐证。”SAP旗下的Sybase公司分析产品管理部总监Joydeep Das在接受采访时表示。
　　Sybase IQ是Sybase公司的商业智能产品，因列式存储而在数据仓库引擎中独树一帜。据Joydeep Das介绍，在进行分析查询时，传统的行式存储数据库需要读取整个表的每一行，这种读取方式通常会阻塞I/O通道、内存和磁盘，而列式存储的Sybase IQ仅需读取查询所需的列，其垂直分区策略不仅能够支持大量的并发用户、大规模数据，还可以提交对商业信息的高速访问，其速度可达到传统行式存储的百倍。
　　列式存储正在得到当今业界越来越多厂商的认可。SAP最新推出的商务分析平台HANA和Oracle的数据库服务器Exadata采用的都是列式存储。另外，市场也出现了一些采用列式存储的数据库厂商，如Vertica和Infobright等。
　　“作为最早采用列式存储的商务智能厂商，Sybase IQ在技术上的成熟度是我们的优势。另外，我们也在不断地引入新的技术并且不断地提升Sybase IQ的性能及可扩展性。”Joydeep Das说，这些技术包括Sybase IQ 15.3首次引入的、大规模并行处理（MPP）架构的PlexQ 分布式查询平台（DQP）。该平台扩展后可支持实时访问数千个用户、多个混合工作负载和大规模数据集，极大地改善了性能和灵活性；同时，通过Sybase IQ智能化的垂直分区列存储、大页面、Bitmap索引技术，保持其在IO吞吐方面的高性能；通过在多层存储环境中增加更多的磁盘来实现存储能力的扩展。另外，Sybase IQ 15.3还通过增加工具支持、基于节点间的通讯管理以及支持Web服务，进一步加强了其在高级分析上的优势。
　　“商务智能应用不仅涉及统计分析、数据挖掘，更需要一个能够存储大量数据、执行高并行量查询的数据仓库引擎，而Sybase IQ正是这样的一种工具。”Sybase中国公司技术总监卢东明表示。
　　

转载注明来源:https://www.xzbu.com/8/view-1075034.htm