OpenCSGs/csghub-server

csghub-server is the backend server for CSGHub which helps user to manage datasets, modes, and also run Model Inference, Finetune and Application Spaces.

What it solves

CSGHub Server는 대형 모델 자산을 위한 중앙 집중식 관리 플랫폼을 제공하여 사용자가 모델과 데이터셋을 조직하고 검색하며 배포할 수 있게 합니다. 서로 다른 스토리지 시스템과 Git 서버 간에 대규모 AI 자산을 관리하는 복잡성을 해결합니다.

How it works

서버는 REST API 기반 백엔드로 동작하며 Git 서버(Gitea 또는 GitLab 등)와 LFS 스토리지 시스템(로컬 또는 S3 호환 클라우드 스토리지)을 통합합니다. 사용자와 조직 권한을 관리하고 텍스트와 이미지의 콘텐츠 모더레이션을 처리하며 다운로드 및 좋아요와 같은 활동 데이터를 추적합니다.

Who it’s for

LLM 모델 및 데이터셋에 대한 신뢰할 수 있는 자체 호스팅 자산 관리 시스템이 필요한 개발자와 조직, 특히 Git LFS와 S3 스토리지를 통합해야 하는 경우에 적합합니다.

Highlights

  • 모델, 데이터셋, 사용자를 관리하는 REST API 제공
  • 대용량 파일 및 온라인 다운로드를 처리하는 Git LFS 지원
  • .parquet 파일을 포함한 데이터셋 파일 온라인 미리보기
  • 모델 및 데이터셋 라벨 자동 태깅
  • 다양한 Git 서버와 S3 호환 스토리지를 지원하는 확장 가능한 아키텍처
  • OpenCSG llm‑inference와 통합되어 원클릭 모델 배포 가능