espressif/esp-who

Face detection and recognition framework

解決する課題

ESP-WHOは、Espressifチップ向けに設計された画像処理開発プラットフォームです。開発者が組み込みデバイス上でコンピュータビジョンタスクを実装するのを支援する一連のプリセット例を提供し、低電力ハードウェアへのAI駆動型画像解析のデプロイの複雑さを軽減します。

仕組み

ESP-DLディープラーニングライブラリをベースに構築されたこのプラットフォームは、カメラドライバとディープラーニングモデルを統合してリアルタイムの画像解析を実行します。最近のアップデートでは、フレームレート（FPS）を向上させるためにカメラとディープラーニングモデルの非同期実行を導入し、ユーザーインターフェース作成のためのLVGLグラフィックスライブラリのサポートを追加しました。

対象者

Espressif SoC（ESP32-P4やESP32-S3など）を使用して、ハードウェアプロジェクトにビジョンベースのAI機能を統合したい組み込み開発者およびエンジニア。

ハイライト

  • ビジョン例: 人間の顔検知、顔認識、歩行者検知、QRコード認識のすぐに使える例が含まれています。
  • ハードウェアサポート: ESP32-P4 Function EV Board、ESP32-S3-EYE、ESP32-S3-Korvo-2を含む様々な開発ボードに対応しています。
  • パフォーマンス: カメラフィードとAIモデルの非同期処理により、より高いFPSを実現します。
  • UI統合: グラフィカルなアプリケーションを開発するためのLVGLをサポートしています。

関連

  • プロジェクト
    espressif/esp-tflite-micro

    ESP-IDF プラットフォーム用のコンポーネントで、Espressif チップセットにハードウェア最適化カーネルを用いて TensorFlow Lite Micro を高速推論可能にします。

  • プロジェクト
    espressif/esp-sr

    ESP‑SR is Espressif’s on‑device speech‑recognition framework for ESP32 MCUs. It bundles a tiny audio front‑end, wake‑word detection (WakeNet), voice‑activity detection (VADNet), offline command spotting (MultiNet), and speech synthesis, all optimized for low‑memory, low‑power chips. The library is modular, supports multiple languages, and lets developers add voice control to IoT devices without needing cloud services.

  • プロジェクト
    espressif/esp-dl

    ESPシリーズチップに特化して最適化された軽量ニューラルネットワーク推論フレームワークで、デバイス内での効率的なAIアプリケーションを実現します。

  • プロジェクト
    xinnan-tech/xiaozhi-esp32-server

    xiaozhi-esp32 プロジェクトのためのバックエンドサーバーで、ESP32 デバイスを音声、ビジョン、スマートホーム制御機能を備えた AI アシスタントに変えることができます。

  • プロジェクト
    espressif/esp-drone

    ESP32シリーズチップに基づいた、Wi-Fi経由でモバイルアプリやゲームパッドを使用して制御可能（Wi-Fi制御）なオープンソース・ドローン・ソリューションです。STEAM教育向けに設計されています。