这个项目能做什么

LightlyStudio 是一个面向多模态机器学习的统一数据平台,设计为在您的计算机本地运行并在浏览器中打开。它使用户能够高效地整理、标注和管理数据集,支持图像、视频、嵌入向量、标注和模型评估。该平台旨在流畅处理大型数据集,声称可在单台 MacBook(M1,16GB 内存)上处理 200 万张以上图像。 主要功能包括: - **本地优先**:您的图像和数据集永远不会离开您的机器。 - **快速开始**:通过 `pip install lightly-studio` 安装,并运行 `lightly-studio quickstart` 下载包含图像、标注和评估结果的示例数据集。 - **图像和视频数据集**:索引文件夹、COCO、YOLO 数据和视频;处理帧。 - **标注**:支持目标检测和分割掩码,并提供自动标注插件(例如 SAM)。 - **整理**:使用嵌入向量和采样来选择典型且多样的样本,降低标注成本。 - **模型评估**:将预测结果与真实标签进行比较,使用混淆矩阵和嵌入向量发现失败模式。 - **查询和筛选**:使用 Python 或 GUI 中的 Lightly Query Language 构建可复用的子集。 - **云存储**:从 S3、GCS 或 Azure 读取。 - **导出**:将查询结果以 COCO 或 YOLO 格式写出。 - **Python 接口**:从索引到查询和导出,一切皆可脚本化。 - **插件**:通过自动标注和其他模型扩展功能。 - **Notebook**:在 Jupyter 或 Colab 中运行 GUI。 支持 Python 3.9 至 3.14,可在 Windows、Linux 和 macOS 上运行。该项目基于 Apache 2.0 开源,欢迎贡献。