Open2

視線もしくは顔の向きで入力・意思表示をするなにか

かがんかがん

事例

視線入力訓練ソフト EyeMoT 2D
https://www.poran.net/ito/eyemot/eyemot-2d

https://www.youtube.com/watch?v=b5PcPLv8QdQ

Communication Board
右向きと左向きで2分探索するように、意思表示を選択する。
右か左だけなので精度もあまり必要なく、すごくいい
片目をしばらくつぶるとリセット処理
https://sam-eatlab.blog.jp/archives/27878913.html
https://communicationboard.io/

macOSのヘッドポインタ
頭を動かすことでマウスポインタを操作できる
表情にアクションを設定することができる

iOSのアイトラッキング
2024年後半に登場するらしい
https://www.apple.com/jp/newsroom/2024/05/apple-announces-new-accessibility-features-including-eye-tracking/

Apple Vision Pro 視線入力
https://ameblo.jp/masatanemuto-withals/entry-12859666562.html

かがんかがん

実装

Webでの実装

WebGazer.js

https://webgazer.cs.brown.edu/
https://zenn.dev/motokazu/articles/ba65d6be70370c

試してみたが、精度がいまいち。
ブレるくらいならいいが、視線を動かしても全然追従しなかった。
(キャリブレーションの方法もよくわからず)

Tensorflow facemesh

https://qiita.com/mbotsu/items/d6fd55cf0a10b88ed07f
https://qiita.com/zabu/items/f0971e0c54bfb98a477e
https://qiita.com/toffy/items/b8062b9f89f72c6865ed

視線ではなく首の動き(顔の向き)のアプローチ。
精度もいいし、安定している。