数据管道 / ETL

vector

vectordotdev·Rust

高性能可观测性数据管道，用 Rust 编写，统一采集、转换并转发日志、指标和事件，替代多套采集代理。

rocketride-server

rocketride-org·Python

高性能 AI 流水线引擎，C++ 内核搭配 50+ 可扩展 Python 节点，支持多模型提供商、向量数据库和 Agent 编排，可在 IDE 中构建调试 LLM 工作流。

用 Python 编排数据管道和资产，把开发、生产到可观测性串起来，适合数据工程和 MLOps 场景。

面向数据库的可视化管理平台，支持 ER 图、数据目录与血缘追踪，并通过 MCP 协议让 AI Agent 直接查询和操作多种数据源。

Netflix 开源的工作流编排器，用 DAG 定义和调度批处理、ETL/ELT 数据管道，让大规模数据作业按依赖关系自动执行。

sie

superlinked·Python

开源的推理服务器与生产集群，统一部署 Agent 所需的各类模型，涵盖嵌入、检索与 LLM 推理，省去自建服务与运维的麻烦。

proton

timeplus-io·C++

单二进制 C++ 流式 SQL 引擎，毫秒级延迟、百 GB/s 吞吐，可从日志、指标、事件和 CDC 流中持续计算有状态上下文。

提供各行业专用的 Pydantic schema 集合，让视觉语言模型按统一结构输出 JSON，省去手写解析和字段对齐的麻烦。

VLM Run API 的示例与指南合集，用 Jupyter Notebook 演示如何调用视觉语言模型完成 OCR、文档解析和 ETL 等任务，方便快速上手多模态推理。

A Clojure machine learning library