膜技术:通过基于DRAM的PIM过滤和模式反规范化加速数据库分析
《ACM Transactions on Architecture and Code Optimization》:Membrane: Accelerating Database Analytics with DRAM-Based PIM Filtering and Schema Denormalization
【字体:
大
中
小
】
时间:2025年12月31日
来源:ACM Transactions on Architecture and Code Optimization
编辑推荐:
内存数据库查询处理通过预连接规范化将JOIN操作转换为筛选任务,结合PIM架构的DRAM设计优化扫描效率,同时利用CPU处理聚合操作。研究提出协作框架,在保持系统架构稳定的前提下,TPCH/SSB基准测试显示性能提升5.92-6.5倍,相比传统模式与部分规范化模式分别获得显著优势,并分析查询选择性、内存开销与软件优化对PIM过滤的影响。
摘要 摘要要查看此由人工智能生成的摘要,您必须具有高级访问权限。
摘要 摘要 内存数据库查询处理通常涉及CPU和内存之间的大量数据传输,由于冯·诺伊曼瓶颈的存在,这会导致效率低下。内存处理(PIM)架构提供了一种可行的解决方案来缓解这一瓶颈。在我们的研究中,我们采用了一种常用的软件方法,通过预连接反规范化将JOIN操作简化为更简单的选择或过滤任务,从而使查询处理工作负载更适合PIM加速。本研究探讨了DRAM设计领域,评估了这些过滤任务在DRAM层次结构中高效执行的效果及其对整体应用加速的影响。我们还发现,像聚合这样的操作在CPU上执行效果更好。因此,我们提出了一个协作式查询处理框架,该框架充分利用了CPU和PIM的优势:(i) 基于DRAM的PIM模块凭借其强大的并行性支持扫描操作;(ii) CPU凭借其灵活的架构支持其余的查询执行。这样我们可以在适当的情况下同时利用PIM和CPU,避免对整体系统架构进行重大修改。
通过对系统架构进行这些小的修改,并定制DuckDB数据库以将卸载的扫描操作集成到CPU端处理中,我们的方法使用TPC-H和Star Schema Benchmark(SSB)等现有的分析基准测试,实现了准确的端到端性能评估。我们的研究结果表明,这种新的映射方法提高了性能,与传统架构相比,速度提升了5.92倍至6.5倍(TPCH/SSB);与反规范化架构相比,速度提升了3.03至4.05倍,内存开销为\(9-17\%\) ,具体取决于部分反规范化的程度。此外,我们还提供了关于查询选择性、内存开销以及基于PIM的过滤中的软件优化的见解,这些见解更好地解释了这些系统在各种基准测试中的行为和性能。
摘要 要查看此由人工智能生成的通俗语言摘要,您必须具有高级访问权限。
生物通微信公众号
生物通新浪微博
今日动态 |
人才市场 |
新技术专栏 |
中国科学人 |
云展台 |
BioHot |
云讲堂直播 |
会展中心 |
特价专栏 |
技术快讯 |
免费试用
版权所有 生物通
Copyright© eBiotrade.com, All Rights Reserved
联系信箱:
粤ICP备09063491号