Repolode

#arrow

Melhores motores de DataFrame e consulta colunares de código aberto (2026)

Estas ferramentas executam consultas e transformações sobre dados tabulares em memória colunar, o que costuma ser bem mais rápido que código linha a linha em conjuntos grandes. Ao escolher, defina se você precisa de um substituto direto para uma pilha existente, como pandas ou Spark, ou de um motor novo que você chama diretamente, e se tem GPUs NVIDIA. polars é um motor rápido em Rust com bindings para Python, Node.js, R e SQL. cudf executa código no estilo pandas em GPUs, muitas vezes sem mudar o código. sail executa código PySpark existente pelo Spark Connect.

6 repositórios

Um acelerador para Spark que executa operadores de Spark SQL e DataFrame sobre dados colunares do Apache Arrow com um mecanismo Rust baseado em DataFusion, sem alterações no código.

Dados e análise#spark#arrow#datafusion
1,3 mil+7 esta semana414ScalaApache-2.0Atualizado há 4 horas