VISION LAB / 01

RGB Camera viewer

EXPERIMENTAL · 仮実装

スマホの検出と、カメラ方向の推定視線。顔と虹彩を使う近似で、不明な状態は不明のまま表示します。

スマホ検知—台 / cell phone
カメラ方向の推定視線—人 / 校正したレンズ方向らしい
停止中RGB INPUT
+

スマホと、レンズへの向きを見る。

「カメラ開始」で映像を表示します。
まずは合成プレビューでも操作できます。

映像 — FPS顔更新 — Hzスマホ更新 — Hzスマホ処理 — ms解析対象の顔 — 人外れている — 人判定不能 — 人

開始するまでカメラにはアクセスしません。

推定の読み方

正面らしい 外れている 判定不能

顔の向き=視線ではありません。正確な視線座標、注意力、集中、感情は判定しません。顔が小さい・閉眼・未校正・目の画像情報不足なら不明になります。顔解析は最大4人。顔が検出されない人の視線は判定できません。

映像は端末内で処理

録画・画像の送信機能はありません。モデルと実行ファイルは同じ配信元から読み込みます。SDKのプライバシー通知と通信検証の範囲は 実装ノート を参照してください。

SSD MobileNet V2 + MediaPipe Face Landmarker · 実機の検出精度・速度は未検証