Dataverse：用于大型语言模型的开源 ETL（提取、转换、加载）管道

Dataverse 是一个开源的、统一的大规模语言模型（LLM）的数据处理管道，具有用户友好的设计。它允许轻松添加自定义处理器，以块状界面来高效地构建自己的 ETL 管道。希望 Dataverse 能成为 LLM 开发的重要工具，并开放整个库以欢迎社区贡献。此外，我们提供了一个简洁的两分钟视频演示我们系统的功能和实现。

Dataverse是一个开源的、统一的大规模语言模型（LLM）的数据处理管道，具有用户友好的设计。它允许轻松添加自定义处理器，以块状界面来高效地构建自己的ETL管道。希望Dataverse能成为LLM开发的重要工具，并开放整个库以欢迎社区贡献。

Dataverse ETL管道 etl 大规模语言模型 开源 数据处理管道 语言模型