mosaicml/streaming

관련

• 프로젝트
  NVIDIA/aistore

  AI 워크로드에 특화된 고성능 분산 스토리지 스택으로, 다중 클라우드 환경에서 ML 파이프라인의 선형 확장성과 최적화된 데이터 검색을 제공합니다.

• 프로젝트
  meta-pytorch/torchrec

  다수의 GPU에 분산된 거대한 임베딩 테이블을 갖춘 대규모 추천 시스템의 학습 및 배포를 위한 스파스성과 병렬 처리 기반의 PyTorch 도메인 라이브러리입니다.

• 프로젝트
  lhotse-speech/lhotse

  기계학습 트레이닝을 위한 음성, 오디오, 비디오, 이미지 데이터의 로딩과 조작을 최적화하는 유연한 다중 모달 데이터 준비용 파이썬 라이브러리입니다.

• 프로젝트
  meta-pytorch/data

  에포크 중간 체크포인트를 위한 상태 기반 로딩과 데이터 전처리를 위한 조합 가능한 반복자를 제공하는 확장 가능한 PyTorch 데이터 로딩 라이브러리입니다.

• 프로젝트
  mosaicml/composer

  PyTorch 기반 딥러닝 라이브러리로, 대규모 분산 학습을 단순화하고 메모리 최적화 및 알고리즘 가속 도구를 제공하여 학습 시간과 비용을 줄입니다.