数据清洗与处理
去重、过滤、质量打分的流水线。
openai-cookbook
openai·Jupyter Notebook
OpenAI API 的官方示例与实战指南合集,用 Jupyter Notebook 演示对话、嵌入、微调等常见用法,帮你快速上手并解决实际调用中的问题。
OpenAI API+4数据清洗与处理
77022+3413k2026-11-09 15:44 UTC
rocketride-server
rocketride-org·Python
高性能 AI 流水线引擎,C++ 内核搭配 50+ 可扩展 Python 节点,支持多模型提供商、向量数据库和 Agent 编排,可在 IDE 中构建调试 LLM 工作流。
流水线引擎+4数据管道 / ETL
20061+168.7kvscode-v1.6.0-prerelease2026-11-10 05:04 UTC
arrow
apache·C++
跨语言的列式内存格式与工具箱,让不同系统之间零拷贝交换数据,并加速内存分析。
列式格式+4数据清洗与处理
17279+14.4kapache-arrow-26.0.12026-11-10 02:04 UTC
fiftyone
voxel51·TypeScript
面向视觉 AI 的数据集管理与模型分析工具,能可视化浏览数据、清洗标注、发现质量问题,并支持主动学习来迭代提升模型。
数据集管理+4数据清洗与处理
11285+3844v1.22.12026-11-09 15:33 UTC
Bash-Oneliner
onceupon
收录大量实用的 Bash 单行命令和终端技巧,覆盖数据处理与 Linux 系统维护,遇到文本处理或运维任务时可直接查用。
Bash单行命令+4数据清洗与处理
10800+26492026-09-22 06:20 UTC
data-juicer
datajuicer·Python
面向大模型训练的数据处理流水线,把原始多模态数据清洗、过滤、去重并加工成高质量指令微调语料。
数据处理+4数据清洗与处理
7232+3449v1.6.22026-11-09 08:44 UTC
DALI
NVIDIA·C++
GPU 加速的数据预处理库,提供高度优化的图像、音频处理算子和执行引擎,解决深度学习训练中数据管道拖慢 GPU 的瓶颈。
GPU加速+4数据清洗与处理
5794+2689v2.4.02026-11-09 15:50 UTC
pandera
unionai-oss·Python
轻量灵活的数据校验库,用声明式 schema 给 pandas 等 DataFrame 做类型、范围和统计假设检查,在数据清洗和管道里提前拦住脏数据。
数据校验+4数据质量
4522+2511v0.35.02026-11-10 03:37 UTC