lightly-ai/lightly-studio

해결하는 문제

LightlyStudio는 AI 훈련을 위한 대규모 이미지 및 비디오 데이터셋 준비의 복잡성을 처리하도록 설계된 데이터 큐레이션 및 관리 도구입니다. 수백만 개의 파일을 수동으로 정리하여 관련 샘플을 찾고, 중복을 제거하고, 주석을 효율적으로 관리하는 문제를 클라우드 서비스에 데이터를 업로드할 필요 없이 해결합니다.

작동 방식

이 도구는 로컬 서버로 실행되며 웹 브라우저에서 열립니다. 사용자는 로컬 이미지나 비디오(S3, GCS, Azure와 같은 클라우드 스토리지에 있는 것 포함)를 로컬 데이터베이스에 인덱싱합니다. 임베딩을 사용하여 이미지 간의 관계를 시각화하고, 사용자는 유사한 이미지 클러스터를 올가미 선택하여 그리드를 필터링할 수 있습니다. 또한 스크립트 가능한 인덱싱, 쿼리, COCO 및 YOLO와 같은 형식으로 데이터 내보내기를 위한 Python API를 제공합니다.

대상 사용자

주로 컴퓨터 비전 엔지니어와 데이터 과학자를 대상으로 하며, 이미지 및 비디오 데이터셋에 대해 큐레이션, 라벨링, 모델 예측과 실제 정답(Ground Truth) 평가를 수행해야 합니다.

주요 특징

• 로컬 우선 처리: 데이터와 이미지가 머신을 떠나지 않아 개인정보 보호와 보안을 보장합니다.
• 고성능: 단일 MacBook M1에서 200만 개 이상의 이미지와 임베딩을 처리할 수 있습니다.
• 지능형 큐레이션: 임베딩 플롯과 샘플링 기술을 사용하여 다양하고 대표적인 샘플을 선택하여 라벨링 비용을 절감합니다.
• 확장 가능: SAM(Segment Anything Model) 플러그인과 같은 자동 라벨링 플러그인을 지원합니다.
• 포괄적인 워크플로우: 원시 데이터 인덱싱부터 모델 평가 및 훈련용 내보내기까지 전체 파이프라인을 다룹니다.