뜨고 있는 AI 프로젝트

RhinoAI는 CAD 환경을 대규모 언어 모델 어시스턴트(Claude, Copilot, OpenAI, Gemini 또는 로컬 모델)에 연결하는 공식 Rhino 3D 플러그인입니다. 사용자가 자연어 프롬프트를 발행하여 지오메트리를 생성하거나 편집할 수 있으며, 원클릭 설치 프로그램, VS Code 디버깅 지원, 최종 사용자와 개발자 모두를 위한 광범위한 문서를 제공합니다.

PointWorld는 부분적인 RGB-D 캡처와 로봇 동작에서 전체 장면의 3D 포인트 흐름을 예측하는 대규모 사전 훈련된 3D 월드 모델로, 실제 환경에서의 로봇 조작을 향상시킵니다.

ASR, LLM, TTS 엔진을 통합한 고성능 Go 기반 AI 백엔드로, ESP32 장치에서 저지연, 완전 스트리밍 음성 상호작용을 가능하게 합니다.

herdrm은 **herdr** 런타임용 그래픽 콘솔을 제공하는 네이티브 macOS 앱으로, AI 코딩 에이전트(Claude, Codex, Gemini 등)를 호스팅합니다. 로컬 및 SSH 연결 디바이스를 단일 사이드바에 모아주고, spaces/agents/terminals의 실시간 상태를 표시하며, 실제 PTY 터미널(Ghostty 엔진 사용)을 통해 모든 에이전트에 연결할 수 있습니다. 기능으로는 파일 드래그 앤 드롭, 두 창 원격 파일 관리자, 시스템 알림, 검색 가능한 Claude 대화 기록, 유니버설 바이너리 배포가 포함됩니다. Homebrew 또는 서명된 zip으로 설치 가능; macOS 14+, 로컬/원격 **herdr** 데몬, SSH 접근이 필요합니다. 이 프로젝트는 초기 단계이며, 비상업적 PolyForm 라이선스 하에 오픈소스로 제공되고 기여를 환영합니다.

Python을 위한 고성능 CPU, GPU 및 메모리 프로파일러로, 라인 단위 분석과 AI 기반 최적화 제안을 제공합니다.

TensorRT 또는 DirectML을 사용하여 실시간으로 애니메이션 비디오를 4K로 업스케일링할 수 있는 커스텀 mpv 비디오 플레이어 빌드와 Real-ESRGAN 모델 세트.

JetBrains IDE 플러그인으로, 로컬 Model Context Protocol (MCP) 서버를 실행하여 IDE의 인덱싱, 리팩토링, 진단 및 빌드 기능을 JSON‑RPC 도구로 AI 코딩 어시스턴트(Claude, Codex, Cursor 등)에 노출합니다. 다중 언어, 헤드리스 작동, 선택적 프로젝트 수명 주기 관리를 지원합니다.

인텔리전트 에이전트 기반 문서 검색 플랫폼으로, 사용자가 채팅 인터페이스를 통해 문서를 업로드, 처리하고 RAG를 사용해 질의할 수 있습니다.

단어 수준의 정밀한 타이밍을 갖춘 고정밀 음성-텍스트 시스템으로, 원문 전사(중간 말투 포함)와 의도된 내용(클린 텍스트)을 선택할 수 있습니다.

SALMONN은 비전, 음성, 텍스트 및 행동을 동시에 처리하는 오픈소스 멀티모달 대규모 언어 모델 제품군입니다. 저장소는 모델 체크포인트, 추론 코드, 훈련 스크립트 및 대규모 주석 데이터 세트(비디오 캡셔닝 및 음성 품질 데이터 포함)를 제공합니다. video-SALMONN-2, ELLSA, F-16과 같은 변형은 스트리밍, 전이중 인식 및 생성을 가능하게 하여 대화형 에이전트, 비디오 QA, 캡셔닝 및 음성 품질 평가에 적합합니다.

ComfyUI를 위한 범용 멀티 엔진 TTS 및 오디오 제품군으로, 수십 개의 AI 모델을 통합하여 음성 합성, 음성 변환 및 SRT 자막 동기화 기능을 제공합니다.

SLayer는 AI 에이전트가 데이터 웨어하우스에 쿼리할 수 있는 관리되고 유연한 인터페이스를 제공하는 임베디드 시맨틱 레이어로, SQL 변환과 복잡한 변환을 자동으로 처리합니다.

GitHub Action으로 Claude Code를 CI/CD 워크플로우에 통합하여 PR 리뷰 및 종속성 업데이트와 같은 자동화된 에이전트 작업을 가능하게 합니다.

Agent Client Protocol을 통해 AI 에이전트를 통합하는 Obsidian 플러그인으로, 에이전트가 복사하여 붙여넣기 없이 볼트의 노트를 읽고 편집할 수 있습니다.

AI 에이전트를 위한 전문적인 데이터 분석 기술로, 원시 셀 검사와 체크섬 재정리로 Excel에서 발생하는 침묵적 계산 오류를 방지하는 엄격한 8단계 감사 및 재정리 워크플로우를 구현합니다.

x-reader는 URL 뒤의 실제 소스(트윗, 비디오, 기사 등)를 가져오고 전체 콘텐츠가 읽혔는지, 부분적으로 읽혔는지, 실패했는지 보고하는 Python CLI 및 Agent Skill로, AI 에이전트를 위한 기계가 읽을 수 있는 증거를 제공합니다.

AI 에이전트에게 무료 키리스 웹 검색 및 bot 방지 가져오기 기능을 제공하는 MCP 서버로, 이를 통해 bot 벽을 우회하고 로컬에서 웹을 크롤링할 수 있게 합니다.

Observer AI는 화면, 카메라, 오디오를 모니터링하여 시각적 또는 텍스트 기반 이벤트에 따라 자동화된 작업과 알림을 트리거하는 로컬 우선 에이전트 프레임워크입니다.

CUTLASS 3.x에서 사용되는 CuTe의 레이아웃 및 텐서 대수의 순수한 Python 구현체로, GPU 없이도 레이아웃 프로토타이핑과 테스트가 가능합니다.

다양한 AI 모델을 사용하여 음악 트랙에서 보컬과 악기를 분리할 수 있는 웹 기반 인터페이스로, Music-Source-Separation-Training을 위한 도구입니다.

보일러플레이트, 전송 및 인증을 처리하는 독단적인 고수준 API를 제공하여 Model Context Protocol (MCP) 서버 구축을 간소화하는 TypeScript 프레임워크입니다.

Video Recap Skills는 AI 에이전트용 플러그인 스위트로, 모든 비디오를 짧은 중국어 내레이션 요약으로 자동 변환합니다. 음성 인식, 시각 언어 분석, 텍스트 음성 변환에 Xiaomi MiMo를 사용하며, 로컬에서는 ffmpeg만 필요합니다. 에이전트는 스토리 계획을 만들고, 클립을 선택하고, 내레이션을 작성하고, TTS를 생성하고, 모든 것을 믹스하여 MP4와 자막을 출력합니다. 또한 수동 편집을 위해 멀티트랙 Jianying/CapCut 드래프트를 내보낼 수 있습니다. 설치는 몇 가지 brew/apt 명령, MiMo API 키 설정, Claude Code, Codex CLI, OpenCode 또는 OpenClaw에 플러그인 추가로 완료됩니다. 저장소는 MIT 라이선스이며 ZenStory AI 오픈소스 생태계의 일부입니다.

Mission Planner는 ArduPilot 기반 무인 이동체를 위한 지상 관제 스테이션 소프트웨어로, 임무 계획, 기체 설정 및 펌웨어 관리 도구를 제공합니다.

dsh-pentest는 DeepSeek Harness에 구조화된 모의 해킹 모드를 추가하는 플러그인입니다. 에이전트가 목표, 의도, 사실, 발견 사항 및 자산을 기록할 수 있는 도구를 제공하며, 데이터를 SQLite DB에 저장하고 전용 웹 UI(그래프, 취약점 목록, 자산 뷰, 마크다운 보고서)를 통해 표시합니다. 승인된 보안 업무를 위해 설계되었으며, DSH ≥ 0.1.6 및 Node ≥ 22.5가 필요합니다.

MiniMax H3용 로컬 배포 기술로, Windows에서 저VRAM NVIDIA GPU를 사용해 AI 에이전트를 통해 네이티브 오디오가 포함된 동영상을 생성할 수 있습니다.

X 북마크를 로컬 지식 기반으로 동기화하는 명령줄 도구로, LLM 기반 분류를 가능하게 하며 AI 에이전트에게 근거 있는 로컬 컨텍스트를 제공합니다.

CLIP, DINOv2, SAM과 같은 여러 대형 모델을 단일 백본으로 증류하여 시각적 도메인 전반에 걸쳐 효율성과 범용성을 향상시키는 통합 비전 파운데이션 모델입니다.

SentrySearch는 비디오 영상을 로컬 벡터 데이터베이스에 인덱싱하는 명령줄 도구로, 자연어 텍스트나 참조 이미지로 검색하고 가장 잘 일치하는 순간을 트리밍된 클립으로 저장할 수 있습니다.

현실 세계의 조직 구조와 방향성 있는 통신 흐름을 사용하여 에이전트 협업을 체계화하는 다중 에이전트 AI 애플리케이션용 프레임워크입니다.

ChatGPT 계정을 OpenAI 호환 API로 사용할 수 있게 해주는 도구 및 SDK로, 사용자가 자신의 AI 계정을 직접 연결하는 애플리케이션을 개발할 수 있도록 지원합니다.

ProjectAtlas는 Rust 기반의 CLI 및 MCP 서버로, 코드베이스의 로컬 지능형 맵을 생성하여 AI 코딩 에이전트가 대규모 저장소를 효율적으로 탐색하고 토큰 비용을 절감할 수 있도록 돕습니다.

Relax는 멀티모달 대규모 언어 모델을 위한 오픈소스 Ray Serve 기반 강화학습 엔진입니다. 단일 학습 루프에서 텍스트, 비전, 비디오, 오디오를 지원하며, 독립적인 GPU 클러스터 전반에 걸쳐 완전 비동기 또는 하이브리드 실행을 제공하고, 다양한 RL 알고리즘(PPO, GRPO, M2PO, RLOO, REINFORCE++…)을 포함하며, 탄력적 롤아웃 스케일링, 상태 확인, 중앙 집중식 메트릭과 같은 프로덕션급 기능을 제공합니다. 이 프레임워크는 Megatron-LM 학습과 SGLang 추론 백엔드를 갖춘 Docker 이미지로 제공되며, 텍스트, 비전-언어, 옴니모달 작업을 위한 즉시 실행 가능한 스크립트가 포함되어 있습니다.

macOS, Windows, Linux용 오픈소스 디자인 캔버스로, AI 기반 이미지 및 자산 생성을 전통적인 그래픽 디자인 도구와 통합합니다.

Aixora Audio는 Windows 중심의 올인원 데스크톱 UI로, 컴파일된 C++ 추론 백엔드(audio.cpp)를 통해 오픈소스 음성 합성, 전사, 번역, 더빙, 실시간 음성 채팅 및 기타 오디오 도구를 로컬에서 실행합니다. CUDA, Vulkan 또는 CPU를 지원하며, 방대한 모델 카탈로그를 제공하고, 휴대용 패키지와 소스 빌드 지침을 제공합니다.

StatsPAI는 Stata 및 R의 계량경제 명령어(회귀, IV, DiD, RD, 합성 대조군, 매칭 등)를 Stata 스타일 API로 재현하는 오픈소스 Python 라이브러리로, 에이전트 지원 메타데이터, 내장 데이터셋, 테이블 내보내기 및 대화형 플로팅 유틸리티를 제공합니다.

Ceres Solver는 대규모의 복잡한 비선형 최소제곱법 및 일반적인 무제약 최적화 문제를 모델링하고 해결하기 위한 C++ 라이브러리입니다.

양자화 및 사용자 지정 런타임을 사용하여 CPU와 GPU에서 실행을 가속화하고 메모리 사용량을 줄이는 효율적인 Transformer 모델 추론을 위한 C++ 및 Python 라이브러리입니다.

Darts는 시계열 예측과 이상 감지를 간소화하는 Python 라이브러리입니다. 고전 모델(ARIMA, 지수 평활)과 딥러닝 모델(N-BEATS, TCN, Transformer)을 위한 통합된 `fit`/`predict` API를 제공하며, 다변량 시계열, 공변량, 확률적 예측, 백테스팅을 지원하고 PyTorch Lightning 및 MLflow와 통합됩니다.

AI 음성 레코더용 오픈소스이며 자체 호스팅 가능한 보조 앱으로, 녹음 파일을 동기화하고 사용자가 선택한 AI 제공자로 전사합니다.

OpenLLM은 오픈소스 LLM(예: Llama 3, Qwen 2.5, Mistral)을 로컬에서 실행하고 OpenAI 호환 REST API로 노출할 수 있는 Python 도구입니다. 단일 명령으로 GPU 가속 서버를 시작하고, 내장 웹 채팅 UI를 사용하며, Docker 또는 Kubernetes를 통해 서비스를 배포할 수 있습니다. 모델 카탈로그, 사용자 정의 모델 리포지토리를 지원하며 고성능 vLLM 백엔드와 통합됩니다.

AITuberKit는 채팅, 음성, 라이브 스트리밍이 가능한 AI 기반 가상 캐릭터(VTuber)를 구축할 수 있는 오픈소스 툴킷입니다. 다양한 LLM, TTS 엔진, 아바타 형식을 통합하며, YouTube 채팅, 키오스크 데모, 게임 해설 모드를 지원합니다. 로컬, Docker, Vercel/Cloudflare에 실행하거나 배포할 수 있습니다. 상용 사용 시 별도 라이선스가 필요합니다.

CRDT를 사용하여 기기 간 오프라인 우선, 무충돌 데이터 동기화를 지원하는 SQLite 확장 프로그램으로, 협업 앱 및 분산형 AI 에이전트 메모리를 위해 설계되었습니다.

MIRA는 플레이어의 행동에 기반하여 2v2 매치를 시뮬레이션하는 50억 파라미터 잠재 확산 모델을 사용하여 Rocket League의 실시간 세계 모델을 구현합니다.

Google AI Edge LiteRT Samples는 LiteRT(TensorFlow Lite의 후속 제품) 및 LiteRT-LM을 위한 온디바이스 머신러닝 데모, 모델 변환 레시피, 자동화 도구를 모은 진정한 오픈소스 컬렉션입니다. 음성, 비전, 텍스트-이미지, 멀티모달 앱을 다루는 Android, iOS, Web/WASM 예제와 Hugging Face 체크포인트를 LiteRT 호환 번들로 변환하는 스크립트를 제공합니다. 이 저장소는 고성능 엣지 AI 애플리케이션을 구축하는 개발자를 대상으로 합니다.

Zero-WAM은 인간 시연 비디오나 언어를 컨텍스트 내 사양으로 사용하여 로봇이 보지 못한 작업을 제로샷으로 수행할 수 있게 하는 인과적 비디오-액션 정책입니다.

RepoPrompt CE는 LLM 기반 코딩 에이전트가 필요로 하는 코드베이스의 정확한 부분(파일, diff, CodeMaps)을 수집하고 검토하여 내장 MCP 서버를 통해 에이전트에 전달하는 오픈소스 macOS 앱입니다. 또한 UI에서 CLI 코딩 에이전트를 시작하고 조정할 수 있으며, 다중 저장소 워크스페이스와 토큰 예산을 고려한 프롬프트 구축을 지원합니다.

MyContext는 사용자의 업무 데이터(채팅, 문서, 회의 등)를 개인용 로컬 저장 지식 그래프로 지속적으로 수집하는 데스크톱 앱입니다. 이 그래프는 LLM, 로컬 에이전트 또는 권한이 있는 AI 앱에서 쿼리할 수 있어, 더욱 정보에 입각한 응답을 위한 개인화된 컨텍스트 레이어를 제공합니다. 주요 기능으로는 디지털 셀(digital-self) 어시스턴트, 소스 인용이 포함된 자연어 검색, 엄격한 휴먼 인 더 루프(human-in-the-loop) 제어가 있습니다. 이 프로젝트는 활발히 개발 중이며 Elastic License 2.0에 따라 배포됩니다.

dstack은 클라우드 제공업체, Kubernetes, 온프레미스 클러스터 전반에서 GPU 리소스를 오케스트레이션하여 AI 개발, 학습 및 추론을 간소화하는 통합 제어 평면입니다.