katanaml/sparrow
Structured data extraction, instruction calling and agentic workflows with ML, LLM and Vision LLM
What it solves
Sparrow는 기업용 문서 인텔리전스를 위해 설계된 API-first 플랫폼입니다. 송장, 영수증, 은행 명세서, 재무 테이블과 같은 비구조화된 문서를 깨끗하고 검증된 구조화된 JSON 데이터로 변환하는 문제를 해결합니다. 또한 지시 호출(instruction calling)과 에이전트 워크플로우를 통해 텍스트 처리 및 의사결정 작업을 처리합니다.
How it works
Sparrow는 작업에 따라 다양한 처리 파이프라인을을믹스 앤 매치할 수 있는 플러그형(pluggable) 아키텍처를 사용합니다:
- Sparrow Parse: Vision LLMs를 사용하여 이미지와 다중 페이지 PDF에서 구조화된 JSON을 추출합니다.
- Sparrow Instructor: Text LLMs를 사용하여 지시 처리, 검증 및 의사결정을 수행합니다.
- Sparrow Agents: Prefect를 통해 커스텀 에이전트와 시각적 모니터링을 포함한 다단계 워크플로우를 오케스트레이션합니다.
이 플랫폼은 다양한 하드웨어에서 실행될 수 있도록 여러 백엔드를 지원합니다. Apple Silicon을 위한 MLX, NVIDIA GPU를 위한 vLLM, Ollama, 그리고 클라우드 기반 추출을 위한 Mistral OCR이 포함됩니다. 모든 프로세싱은 외부 API 의존성을 피하기 위해 사용자의 자체 인프라에서 실행할 수 있습니다.
Who it’s for
복잡한 문서에서 데이터 추출을 자동화하고, 클라우드 기반 AI 서비스를 사용하지 않고 데이터를 백엔드 파이프라인 또는 데이터 워크플로우에 통합해야 하는 기업과 개발자들을 위해 구축되었습니다.
Highlights
- Universal Document Processing: PNG, JPG, 및 다중 페이지 PDF를 포함한 광범위한 형식을 지원합니다.
- Schema Validation: JSON schema 기반 추출을 사용하여 출력 데이터가 유정효한 유효한 구조화된 JSON 데이터입니다.
ightarrow ext{undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercuttinging undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercuttinging undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercutting undercut... (truncated) }