Puchaczov/Musoq

해결하는 문제

Musoq는 데이터 인제스트나 중간 저장 없이 로그 파일, git 이력, 바이너리 덤프, 시스템 프로세스와 같은 비데이터베이스 데이터 소스에 대해 즉시 SQL 쿼리를 실행할 수 있는 방법을 제공합니다. 취약한 Bash 명령 체인이나 맞춤형 스크립트를 대체하여, 빠른 데이터 조사 및 디버깅을 위한 선언형 SQL 쿼리를 사용할 수 있습니다.

작동 방식

Musoq는 데이터 소스에서 직접 스트리밍하고 변환하는 모듈식 SQL 엔진입니다. 표준 SQL을 확장하여 비구조화된 데이터를 처리하기 위한 특수한 기능을 제공합니다:

• 인라인 바이너리 디코딩: 사용자는 쿼리 내에서 구조체(structs)를 직접 선언하여 파일에서 원시 바이트를 파싱할 수 있습니다.
• 선언형 텍스트 파싱: 사용자는 텍스트 파일에서 구조화된 필드를 추출하기 위해 로그 형식을 인라인으로 설명할 수 있습니다.
• 강력한 타이핑: couple 문을 통해 LLM 추출과 같은 타입이 없는 데이터를 엄격한 SQL 테이블에 바인딩할 수 있습니다.
• 데이터 소스: OS 파일 시스템, Git 리포지토리, Docker, Kubernetes, LLM API(OpenAI/Ollama) 등 다양한 소스에 접속하기 위한 플러그인 아키텍처를 사용합니다.

대상 사용자

데이터베이스 설정이나 일회용 스크립트 작성의 부담 없이 로컬 파일이나 시스템 상태에 대해 복잡한 조사를 수행해야 하는 개발자 및 시스템 관리자.

주요 기능

• 제로 인제스트: 데이터베이스로 가져오지 않고 데이터가 있는 위치에서 직접 쿼리합니다.
• 고급 SQL 지원: 재귀적 CTE와 관련 서브쿼리를 포함합니다.
• uma stdin 파이프링: SQL을 사용하여 스트리밍된 stdin 데이터를 네이티브로 쿼리할 수 있습니다.
• AI 에이전트 통합: Claude나 Cursor와 같은 AI 어시스턴트를 위한 도구로 저장된 쿼리를 노출하는 내장된 Model Context Protocol (MCP) 서버를 제공합니다.
• 유연한 파싱: SQL 스크립트 내에서 바이너리 및 텍스트 스키마를 인라인으로 정의할 수 있습니다.