膜技术:通过基于DRAM的PIM过滤和模式非规范化加速数据库分析

《ACM Transactions on Architecture and Code Optimization》:Membrane: Accelerating Database Analytics with DRAM-Based PIM Filtering and Schema Denormalization

【字体: 大 中 小 】 时间:2026年01月19日 来源:ACM Transactions on Architecture and Code Optimization

编辑推荐:

  内存数据库查询处理通过预联结规范化简化JOIN操作,利用PIM架构加速扫描任务,同时依赖CPU处理聚合等复杂操作,形成软硬件协同优化框架。在TPCH/SSB基准测试中,较传统架构提升5.92-6.5倍性能,较部分规范化方案降低3.03-4.05%内存开销。

  
要查看此由 AI 生成的摘要,您必须具有高级访问权限。

摘要

摘要

内存数据库查询处理通常涉及 CPU 与内存之间的大量数据传输,由于冯·诺依曼瓶颈的存在,这会导致效率低下。内存处理(PIM)架构提供了一种可行的解决方案来缓解这一瓶颈。在我们的研究中,我们采用了一种常用的软件方法,通过预连接去规范化将 JOIN 操作简化为更简单的选择或过滤任务,从而使查询处理工作负载更适合 PIM 加速。本研究探讨了 DRAM 设计领域,评估了这些过滤任务在 DRAM 层次结构中高效执行的效果及其对整体应用程序加速的影响。我们还发现,像聚合操作这样的任务在 CPU 上执行比在 PIM 上执行更好。因此,我们提出了一个协作式查询处理框架,该框架充分利用了 CPU 和 PIM 的优势:(i) 基于 DRAM 的 PIM 块凭借其巨大的并行性支持扫描操作;(ii) CPU 则凭借其灵活的架构支持其余的查询执行。这使我们能够在适当的情况下同时利用 PIM 和 CPU,从而避免对整体系统架构进行重大修改。
通过对系统架构进行这些小的修改,并定制 DuckDB 数据库以将卸载的扫描操作集成到 CPU 端的处理中,我们的方法使用 TPC-H 和 Star Schema Benchmark (SSB) 等成熟的分析基准测试,实现了准确的端到端性能评估。我们的研究结果表明,这种新颖的映射方法提高了性能,与传统的架构相比,速度提升了 5.92 倍至 6.5 倍(TPCH/SSB);与去规范化的架构相比,速度提升了 3.03 倍至 4.05 倍(具体提升幅度取决于部分去规范化的程度)。此外,我们还提供了关于查询选择性、内存开销以及基于 PIM 的过滤中的软件优化的见解,这些见解更好地解释了这些系统在各种基准测试中的行为和性能。

摘要

要查看此由 AI 生成的通俗语言摘要,您必须具有高级访问权限。

相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号