Tells: スマートフォンセンサーを使用した生体認証による嘘発見器

生体認証センサーとブラウザベースのアプリケーションの交差点は、モバイルウェブ体験に期待できることの境界を押し広げています。「Tells」と呼ばれる最近のプロジェクトは、デバイスのカメラとマイクを使用して生理学的反応をリアルタイムで追跡することにより、スマートフォンを初歩的な嘘発見器に変えることでこれを実証しています。

Tellsの仕組み: 生体認証アプローチ

その核心において、Tellsは真実と嘘のゲームとして設計されています。「Work Edition」や「3am」といった「パック」のシステムを利用して、ユーザーに質問を提示します。技術的な実装は、主に2つの入力に依存しています。

1. 光電容積脈波記録法 (PPG)

アプリケーションは、電話のカメラを通じて脈拍を読み取ります。これは光電容積脈波記録法（photoplethysmography）として知られる技術であり、カメラが顔の血流によって引き起こされる皮膚の色と光の吸収の微細な変化を検出することで機能します。キャリブレーション（校正）フェーズ中にベースラインの心拍数（BPM）を確立することで、アプリは嘘をつくストレスに伴う典型的な心拍数の急上昇を監視できます。

2. 音声および視覚分析

脈拍に加えて、アプリはマイクを利用して、ユーザーが「はい」または「いいえ」と声に出して言う瞬間をキャプチャします。この複合的なアプローチ（心拍数、表情、および音声の監視）は、伝統的なポリグラフ（嘘発見器）を模倣していますが、簡略化されたゲームのような形式で行われます。

プライバシーとローカル推論

このプロジェクトの最も重要な側面の一つは、プライバシーへの取り組みです。アプリケーションは非常に機密性の高い生体認証データ（カメラとマイク）へのアクセスを必要とするため、開発者はローカル推論を実装しています。

プロジェクトの説明にあるように、「すべての推論は、このデバイス上で実行されます」であり、「何もこのデバイスから離れません」。このアーキテクチャの選択は、ユーザーの生体認証シグネチャがクライアントサイドでローカルに処理されることを保証し、機密性の高い健康データやアイデンティティデータをリモートサーバーに送信することに関連するリスクを軽減します。

文脈と業界の類似性

While Tellsはゲームですが、顔の表情の動き（facial animation）と生理学的反応を通じて「tells（癖・兆候）」を見抜くという概念は、ゲーミングと法医学の両方で繰り返し現れるテーマです。Hacker Newsのコミュニティメンバーは、真実か欺瞞かを識別するために顔の表情の動きに重点を置いていたLA Noireのようなタイトルとの類似性を指摘しています。

この傾向は、ブラウザ経由での電話センサーの使用に対する関心の高まりをハイライトしており、ネイティブアプリのインストールを必要とせずに達成できることの可能性を広げています。ユーザーがこれらの機能を探索するにつれ、このプロジェクトは、ブラウザベースのセンサーアクセスがいかにして物理的な生理学的反応とデジタルインタラクションの間の架け橋となるかを示すケーススタディとして機能します。