zjx0101/ObjectClear

[CVPR'26] ObjectClear: Precise Object and Effect Removal with Adaptive Target-Aware Attention

何を解決するか

ObjectClearは、画像からオブジェクトを除去する際、その関連する効果（影や反射など）も同時に除去し、背景の一貫性を維持する課題に対処します。

動作方法

SDXL-Inpaintingを基盤とし、CLIP画像エンコーダでターゲットオブジェクトを識別するモデルは、適応型ターゲット意識注意（Adaptive Target-Aware Attention）を用いて、オブジェクトとその効果を同時に除去します。OBER（OBject-Effect Removal）データセット、つまりカメラ撮影とシミュレーションデータのハイブリッドデータセットで訓練されています。ユーザーは除去したいオブジェクトのセグメンテーションマスクと画像を提供し、モデルはクリーンな背景を生成します。

対象ユーザー

このツールは、画像編集、コンピュータビジョン、生成AI分野で作業する研究者や開発者向けです。特にオブジェクト除去とインペイントに焦点を当てた開発者に適しています。

特徴

  • 同時除去: ターゲットオブジェクトと関連する視覚的効果を同時に除去します。
  • 適応型ターゲット意識注意: 除去の精度を向上させる専用の注意メカニズムです。
  • OBERデータセット: オブジェクト-効果除去研究に特化した新しくリリースされたハイブリッドデータセットを含みます。
  • ReMOVE+メトリクス: 除去領域と周囲の背景との一貫性をより正確に評価するための改良された評価メトリクスを導入しています。

関連

  • Dispatch
    Hugging Face オブジェクト検出 リーダーボード

    Hugging Face は、COCO スタイルのメトリクスを使用してオープンソース モデルをランク付けする Object Detection Leaderboard をリリースし、Average Precision と Average Recall の計算方法および結果に影響を与える要因を説明するブログを公開しました。

  • プロジェクト
    RizwanMunawar/yolov7-object-tracking

    さまざまなソースからのビデオストリーム全体で、リアルタイムの物体検出とトラッキングを行うために YOLOv7 と YOLOv8 を統合したコンピュータビジョンプロジェクト。

  • プロジェクト
    melandlabs/openloomi

    OpenLoomi は、オープンソースでクロスプラットフォームのデスクトップ「注目力エージェント」です。常にあなたの作業ツール（メール、チャット、イシュー管理ツール、ドキュメントなど）からコンテキストを収集し、検索可能で暗号化された記憶にします。リマインダーを表示し、メッセージアプリ内でLLMに直接助けを求めることが可能です。ランタイムはエージェント非依存で、Claude Code、Codex、OpenCode、Hermes、OpenClawなどと統合可能なスキルとプラグインを提供します。シンプルなバイナリでインストールでき、ローカル優先のプライバシーを重視し、即時動作します。

  • プロジェクト
    roboflow/sports

    スポーツ分析のためのコンピュータビジョンツールとデータセットのコレクション。ボールの追跡、選手の再識別、ユニフォーム番号の OCR に焦点を当てています。

  • プロジェクト
    koide3/direct_visual_lidar_calibration

    環境の構造とテクスチャを活用して、正確なセンサー整合を実現するターゲット不要で自動的なLiDARカメラ外挿校正ツールボックス。