漫话开发者 - UWL.ME 精选全球AI前沿科技和开源产品
2026-09-08 talkingdev

Vortex 实现从 S3 到 GPU 的单次拷贝,演示扫描性能较 Parquet 快约 30 倍

在 QCon London 2026 上,SpiralDB 团队展示了 Vortex 如何将压缩列式数据从 S3 直接流式传输到 GPU 内存,全程仅需一次拷贝。相比传统方案先将数据落盘或依赖 CPU 解压,Vortex 的列式布局能够在传输前对数据进行裁...

Read More
2024-10-15 talkingdev

Vortex:高性能列式文件格式引发关注

Vortex是一种新兴的高性能列式文件格式,旨在提升数据存储和访问效率。其设计理念是通过优化数据结构来加速查询性能,尤其适用于大数据分析和机器学习应用。与传统的行式存储格式相比,列式存储能够更有效地利用内存...

Read More