技术工具雷达: Data

工具排名

按实测增长排序，并在不同来源间归一化。 原始值保留各自的数据窗口；计算变化需要 7 天内至少两次测量。

1. 1

   hflow

   库

   活跃最近提交：今天 · 2026-09-01

   SDK for robotics teams to verify the quality of their data used for AI model training.

   Python许可证: Apache-2.0

   • airflow
   • data-engineering
   • data-pipeline
   • data-quality
   • dataset-curation

   github13 天前创建最新实测增长打开来源 ↗

   217GitHub 星标+71 (+48.6 %)
2. 2

   arrow

   库

   未知最近提交：暂无数据

   Rust implementation of Apache Arrow

   • arrow

   crates8 年前创建实测增长打开来源 ↗

   安装 cargo add arrow

   17 280 524crates.io 90 天下载量+256 866 (+1.5 %)
3. 3

   datafusion

   库

   未知最近提交：暂无数据

   DataFusion is an in-memory query engine that uses Apache Arrow as the memory model

   • sql
   • query
   • arrow

   crates8 年前创建实测增长打开来源 ↗

   安装 cargo add datafusion

   4 754 796crates.io 90 天下载量+64 216 (+1.4 %)
4. 4

   Sparkle

   库

   活跃最近提交：3 天前 · 2026-08-29

   A software update framework for macOS

   Objective-C

   • framework
   • macos
   • software-update
   • update

   github17 年前创建实测增长打开来源 ↗

   9 613GitHub 星标+52 (+0.54 %)
5. 5

   prefect

   库

   活跃最近提交：今天 · 2026-08-31

   Prefect is a workflow orchestration framework for building resilient data pipelines in Python.

   Python许可证: Apache-2.0

   • automation
   • data
   • data-engineering
   • data-ops
   • data-science

   github8 年前创建实测增长打开来源 ↗

   23 741GitHub 星标+55 (+0.23 %)
6. 6

   apache-airflow

   库

   未知最近提交：暂无数据

   Programmatically author, schedule and monitor data pipelines

   • airflow
   • automation
   • dag
   • data
   • orchestration

   pypi实测增长打开来源 ↗

   安装 pip install apache-airflow

   1 843 2677 天下载量-2 040 184 (-52.5 %)
7. 7

   pathway

   库

   活跃最近提交：1 天前 · 2026-08-31

   Python ETL framework for stream processing, real-time analytics, LLM pipelines, and RAG.

   Python

   • batch-processing
   • data-analytics
   • data-pipelines
   • data-processing
   • dataflow

   github3 年前创建实测增长打开来源 ↗

   62 357GitHub 星标-30 (-0.05 %)
8. 8

   dbt-core

   库

   未知最近提交：暂无数据

   With dbt, data analysts and engineers can build analytics the way engineers build applications.

   pypi实测增长打开来源 ↗

   安装 pip install dbt-core

   5 107 1267 天下载量-12 397 593 (-70.8 %)
9. 9

   dagster

   库

   未知最近提交：暂无数据

   Dagster is an orchestration platform for the development, production, and observation of data assets.

   pypi实测增长打开来源 ↗

   安装 pip install dagster

   1 743 8887 天下载量-691 335 (-28.4 %)
10. 10

    duckdb

    库

    未知最近提交：暂无数据

    DuckDB in-process database

    许可证: MIT

    • DuckDB
    • Database
    • SQL
    • OLAP

    pypi实测增长打开来源 ↗

    安装 pip install duckdb

    11 088 6847 天下载量-6 800 618 (-38.0 %)
11. 11

    polars

    库

    未知最近提交：暂无数据

    Blazingly fast DataFrame library

    许可证: MIT

    • dataframe
    • arrow
    • out-of-core

    pypi实测增长打开来源 ↗

    安装 pip install polars

    12 080 7257 天下载量-3 133 827 (-20.6 %)
12. 12

    polars

    库

    未知最近提交：暂无数据

    DataFrame library based on Apache Arrow

    • arrow
    • dataframe
    • query-engine

    crates6 年前创建实测增长打开来源 ↗

    安装 cargo add polars

    2 686 629crates.io 90 天下载量-3 892 (-0.14 %)
13. 13

    LakeSoul

    库

    活跃最近提交：1 天前 · 2026-08-31

    LakeSoul is an end-to-end, realtime cloud-native Lakehouse framework for fast data ingestion, concurrent updates, incremental analytics, multimodal data processing and vector search — powering next-generation BI and AI workloads.

    Java许可证: Apache-2.0

    • arrow
    • daft
    • datafusion
    • flink
    • gluten

    github4 年前创建实测增长打开来源 ↗

    3 247GitHub 星标稳定