data-preparation

DataFlow是一个开源工具，提供可视化、低代码的管道，用于从原始数据生成、清洗和准备高质量的LLM训练数据集。它包含一篇arXiv上的技术报告。

DataFlow是一个LLM驱动的框架，用于自动化数据准备和工作流工程，具备近200个可复用算子和六个领域通用流程，可在数学、代码和Text-to-SQL等任务上提升LLM性能。