膜技术:通过基于DRAM的PIM过滤和模式反规范化加速数据库分析

《ACM Transactions on Architecture and Code Optimization》:Membrane: Accelerating Database Analytics with DRAM-Based PIM Filtering and Schema Denormalization

【字体: 大 中 小 】 时间:2026年01月29日 来源:ACM Transactions on Architecture and Code Optimization

编辑推荐:

  内存数据库查询处理中,预规范化将JOIN操作转换为筛选任务,结合PIM架构的DRAM并行处理能力与CPU灵活执行聚合操作,形成协同框架。研究通过修改系统架构和定制DuckDB数据库,利用TPC-H和SSB基准测试,验证该框架在提升查询性能5.92-6.5倍的同时,内存开销较传统模式降低3.03-4.05倍,并揭示了PIM过滤任务在DRAM层次中的执行效率。

  
要查看此由 AI 生成的摘要,您必须具有高级访问权限。

摘要

摘要

内存数据库查询处理通常涉及 CPU 与内存之间的大量数据传输,由于冯·诺依曼瓶颈的存在,这会导致效率低下。内存处理(PIM)架构提供了一种可行的解决方案来缓解这一瓶颈。在我们的研究中,我们采用了一种常用的软件方法,通过预连接反规范化将 JOIN 操作简化为更简单的选择或过滤任务,从而使查询处理工作负载更适合 PIM 加速。本研究探讨了 DRAM 设计领域,以评估这些过滤任务在 DRAM 层次结构中的执行效率及其对整体应用程序加速的影响。我们还发现,诸如聚合操作在 CPU 上的执行效果优于在 PIM 上的执行效果。因此,我们提出了一个协同查询处理框架,该框架充分利用了 CPU 和 PIM 的优势:(i) 基于 DRAM 的 PIM 块凭借其强大的并行性支持扫描操作;(ii) CPU 则凭借其灵活的架构支持其余的查询执行。这样我们可以在适当的情况下同时利用 PIM 和 CPU,避免对整体系统架构进行重大修改。
通过对系统架构进行这些小的修改,并对 DuckDB 数据库进行定制,将卸载的扫描操作集成到 CPU 侧处理中,我们的方法能够使用 TPC-H 和 Star Schema Benchmark (SSB) 等成熟的分析基准测试来准确地进行端到端的性能评估。我们的研究结果表明,这种新的映射方法提高了性能,与传统架构相比,TPCH/SSB 的加速比达到了 5.92 倍至 6.5 倍;与使用反规范化架构相比,加速比达到了 3.03 倍至 4.05 倍(具体取决于部分反规范化的程度)。此外,我们还提供了关于查询选择性、内存开销以及基于 PIM 的过滤中的软件优化的见解,这些见解更好地解释了这些系统在各种基准测试中的行为和性能表现。

AI 摘要

要查看此由 AI 生成的纯文本摘要,您必须具有高级访问权限。

相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号