OSS Radar
首页
AI 分类
推理与服务5
大模型推理服务 · 向量化 / 重排服务 · 网关与路由
训练与微调6
训练框架 · 参数高效微调 · 后训练 / RLHF
数据工程4
数据集托管 · 数据清洗与处理 · 合成数据
检索与 RAG9
向量数据库 · RAG 框架 · 检索增强引擎
Agent 与编排6
Agent 框架 · 编码 Agent · 电脑 / 浏览器 Agent
评估 · 实验 · MLOps8
模型评测 · Agent 评测 · 实验管理
多模态生成5
图像生成 · 视频生成 · 视觉语言模型
视觉与 3D5
检测 / 分割 · 3D 重建 · 3D 生成
模型工具链8
量化 · 剪枝与蒸馏 · 格式转换
科研与论文实现3
论文复现 · 时序预测 · 科学计算 / 生物医药
开发工具
开发与框架5构建与交付4底层与逆向3
系统工具
系统与文件7图像与影音工具5实用小工具4
效率工具
记录与整理3输入与阅读4
媒体与内容
播放与媒体库4内容处理3
网络工具
访问与代理3连接与传输4
游戏相关
开发与运行2游玩相关2
安全与隐私
攻防与审计3加密与隐私1
硬件与机器人
嵌入式与物联网5机器人与具身智能3
数据与金融
数据库与存储4金融与量化1
探索排行榜开发语言标签
/
周报
本周新增、涨得最快、发了什么版本
对比项目
两个项目并排看 star、维护状态与硬件
数据体检
收录量、完整度缺口、沉睡项目
提交仓库
推荐项目,附上你的使用经验
反馈与纠错
分类错了、介绍不准、链接失效
关于本站
数据来源与分类原则
登录
OSS Radar

按算法工程工作流分类的开源工具库。数据来自 GitHub 公开 API,收录 6,740 个仓库、129 个细分分类。 带 ✦ 的条目有人工撰写的专家点评。

数据最近同步于 2026/11/11 14:07:13 · 本项目仅做聚合与索引,软件版权归原作者所有

浏览

  • 全部仓库
  • AI 分类
  • 排行榜
  • 开发语言
  • 标签与关键词
  • 搜索

关于

  • 关于本站
  • 数据体检
  • 提交仓库
  • 反馈与纠错
  • 偏好设置
  • 我的收藏
  • 我的点评
© 2026 OSS Radar数据每小时级同步 · 内容由算法与人工共同维护
⌘K
「数据预处理」找到 9 个结果 · 6ms命中词:数据预处理只看有点评
D
DALI
NVIDIA·C++

GPU 加速的数据预处理库,提供高度优化的图像、音频处理算子和执行引擎,解决深度学习训练中数据管道拖慢 GPU 的瓶颈。

GPU加速+4
57940—
NVIDIA/DALI · 11.3
T
tqdm
tqdm·Python

给 Python 脚本和命令行程序加进度条的库,循环、pandas、Keras、多进程都能用,速度快、可扩展,还能在终端和 Jupyter 里显示。

进度条+4
313810—
tqdm/tqdm · 10.96
O
Open-Sora
hpcaitech·Python

开源视频生成模型,用高效架构和训练方案降低高质量视频制作门槛,让普通开发者也能训练和部署文生视频模型。

视频生成+4
299230—
hpcaitech/Open-Sora · 10.64
T
train-llm-from-scratch
FareedKhan-dev·Python

从下载数据到生成文本,手把手教你从零训练自己的大语言模型,适合想搞懂 LLM 训练全流程的开发者动手实践。

大模型训练+4
131970—
FareedKhan-dev/train-llm-from-scratch · 10.34
P
pdfminer.six
pdfminer·Python

纯 Python 实现的 PDF 解析库,能从 PDF 中提取文本、布局和元数据,适合做文档解析、内容抽取和 RAG 数据预处理。

PDF解析+4
70490—
pdfminer/pdfminer.six · 10.24
P
Pillow
python-pillow·Python

Python 生态最常用的图像处理库,支持打开、转换、裁剪、滤镜等常见操作,是 PIL 的活跃维护分支。

图像处理+3
139770—
python-pillow/Pillow · 10.17
M
megaparse
The-Vibe-Company·Python

把 PDF、Word、PPT 解析成适合喂给大模型的格式,尽量不丢内容,省去自己清洗文档的麻烦。

文档解析+4
74190—
The-Vibe-Company/megaparse · 10.1
T
techniques
satellite-image-deep-learning

汇集卫星与航拍影像深度学习的技术清单,涵盖数据集、模型与工具,帮遥感从业者快速找到可用的方法和资源。

遥感影像+4
103040—
satellite-image-deep-learning/techniques · 10.05
D
Daft
Eventual-Inc·Rust

面向 AI 与多模态负载的高性能数据引擎,用 Rust 编写,能大规模处理图像、音频、视频和结构化数据,适合搭建 ETL 与数据管道。

多模态数据处理+4
58440—
Eventual-Inc/Daft · 9.66

发布说明里提到「数据预处理」

来自 2 个版本
  • PaddlePaddle/PaddleDetectionv2.9.02026-03-19

    …ub.com/PaddlePaddle/PaddleDetection/pull/9330)) - 数据预处理 :修复 RandomSizeCrop 对零尺寸标注框的数据类型处理错误([ 9353](https://github.com/PaddlePaddle/PaddleDetection/pull/9353)) - Mosaic 增

  • PaddlePaddle/FastDeployv2.3.02025-11-11

    …个生成结果 4273 - 离线推理chat接口新增 tool 参数支持工具调用 4415 - 多模态数据预处理增加对url数据的下载增加重试 3838 性能优化 - 优化per token quant fp8算子性能,提升50% 4238 - MTP支持Chunked Prefill与V1 KVCache调度 3659 4366 - V1