ygelfand/echolocal

Turn an Echo Dot (2nd gen) into a fully local Home Assistant voice satellite, multi-room media player, lux sensor, Bluetooth proxy, and more. No Amazon, no cloud.

解決する課題

EchoLocalは、第2世代のAmazon Echo Dot (biscuit, RS03QR) を、プライバシーを重視したローカルなHome Assistant音声サテライトに変身させます。Amazonのクラウドサービスの代わりにGoベースのローカル実装を使用することで、外部サーバーに依存せずにデバイスを動作させることが可能です。

仕組み

このプロジェクトは、Echo Dotのハードウェア上で直接実行されるデーモン (echod) で構成されています。このデーモンはハードウェアの管理、ウェイクワード検出の処理、およびESPHomeネイティブAPIサーバーの実装を行います。これにより、Home AssistantはネイティブのESPHomeデバイスであるかのようにデバイスを検出し、対話することができます。インストールとプロビジョニングには、付属のCLIツール (echoctl) を使用します。

対象ユーザー

第2世代Echo Dotを所有しており、プライバシーを維持しつつAmazonのクラウド依存を排除して、ローカルなHome Assistant環境に音声制御を統合したいユーザー。

ハイライト

ローカルウェイクワード: openWakeWordおよびmicroWakeWordモデルを使用した100%デバイス内検出（「停止」検出を含む）。
Home Assistant統合: ネイティブの media_player および音声サテライトとして機能し、ダッキングやホワイトノイズ生成を伴うメディア再生をサポート。
Bluetoothプロキシ: BLEアドバタイズメントをHome Assistantに転送し、デバイス測位システムのiBeaconとして機能。
ハードウェア活用: オンボードのLEDリング（カスタムアニメーション対応）および、これまで使用されていなかった環境光 (Lux) センサーの利用を可能にします。

関連

プロジェクト
kesai-labs/py123d
py123d は、Argoverse 2、nuScenes、Waymo、nuPlan など多くの自動運転データセットを、高速でゼロコピーの Apache Arrow 形式に変換し、カメラ、LiDAR、地図、ラベルのための単一 API を提供する Python ライブラリです。CLI ツールによるデータのダウンロードと変換、Hydra ベースのパイプライン、インタラクティブな 3‑D ビューアを備えています。`pip install py123d`（各データセット用のオプション付き）でインストールし、提供されたコマンドでデータを取得、変換、可視化できます。
プロジェクト
Qpu523/VPSCI-Dataset
VPSCIは、CARLAシミュレータ内での3段階の強化学習パイプラインを通じて生成された、車両と歩行者のニアミス（衝突回避）インタラクションの大規模かつ高解像度なデータセットです。8つの交差点シナリオにわたる約198kのエピソードが格納されており、20Hzで記録されたCSVファイルと対応するビデオが含まれています。人間による研究では、生成されたインタラクションは実世界の映像と区別がつかないことが示されており、そのデータセットは自動運転の安全研究において非常に価値が高いものとなります。
プロジェクト
NeLy-EPFL/flygym
FlyGym は、大人の果実蝇の高速で物理ベースのデジタルツインを提供する Python ライブラリです。詳細なバイオメカニクス、複眼視覚、嗅覚、脚の接着性をシミュレートし、階層的な脳-脊髄制御インターフェースを提供することで、研究者が体現されたセンサモータ制御器を開発・検証できる環境を実現します。
プロジェクト
lucidrains/q-transformer
Q‑Transformerは、ビデオ観測と言語指示を組み合わせたロボットタスク向けにスケーラブルなオフライン強化学習を実現するPyTorchライブラリです。ビジョン・トランスフォーマーモデル、データ収集エージェント、リプレイメモリデータセット、Q学習トレーナーを備え、`pip install q-transformer` で簡単にインストール可能です。