lightly-studio

LightlyStudioは、マルチモーダル機械学習のための統合データプラットフォームであり、お使いのコンピュータ上でローカルに動作し、ブラウザで開くように設計されています。ユーザーはデータセットを効率的にキュレーション、アノテーション、管理でき、画像、動画、埋め込み、アノテーション、モデル評価をサポートします。このプラットフォームは大規模なデータセットをスムーズに処理できるように構築されており、単一のMacBook（M1、16GB RAM）で200万枚以上の画像を扱えると謳っています。 主な機能は以下の通りです： - **ローカルファースト**：画像やデータセットがお使いのマシンから外に出ることはありません。 - **クイックスタート**：`pip install lightly-studio`でインストールし、`lightly-studio quickstart`を実行すると、画像、アノテーション、評価結果を含むサンプルデータセットをダウンロードできます。 - **画像および動画データセット**：フォルダ、COCO、YOLOデータ、動画をインデックス化し、フレームを扱えます。 - **アノテーション**：オブジェクト検出とセグメンテーションマスクをサポートし、自動ラベリング（例：SAM）用のプラグインがあります。 - **キュレーション**：埋め込みとサンプリングを使用して典型的で多様なサンプルを選択し、ラベリングコストを削減します。 - **モデル評価**：予測をグラウンドトゥルースと比較し、混同行列と埋め込みを使用して失敗パターンを見つけます。 - **クエリとフィルタ**：PythonまたはGUIのLightly Query Languageを使用して再利用可能なサブセットを構築します。 - **クラウドストレージ**：S3、GCS、またはAzureから読み取ります。 - **エクスポート**：クエリをCOCOまたはYOLO形式で書き出します。 - **Pythonインターフェース**：インデックス作成からクエリ、エクスポートまで、すべてをスクリプト化できます。 - **プラグイン**：自動ラベリングやその他のモデルで機能を拡張します。 - **ノートブック**：JupyterまたはColab内でGUIを実行します。 Windows、Linux、macOS上のPython 3.9から3.14でサポートされています。このプロジェクトはApache 2.0の下でオープンソースであり、コントリビューションを歓迎します。