今週の進捗(水戸)

テーマ  
顔によるカーソル操作法の提案
Proposal of cursor operation method by face

進捗
・カメラのどの位置にいても顔向きを推定できるようにプログラムを改良した。
・1秒間目を閉じると音とともに左クリックするプログラムを実装した。
・1秒間口を開けるとスクロールモードを追加するプログラムを実装した。
・1秒間目や口の開閉の判別条件を決定するためにデータを取ってプロットし、判別条件を付け加えた。

条件:(Eye_Aspect_Ratio)<0.20 が20フレーム連続して満足
→左クリック
条件:(Mouth_Aspect_Ratio)>0.60 が20フレーム連続して満足
→スクロール機能の追加

予定
・入力フォームにて左クリックしたら文字を入力できるようにTkinkerを用いて仮想キーボードを表示、使用する機能の追加
・クリック音は現状ビープ音「ソ」なのでクリックしたような音になるように改良する
・12月から実験開始できるように、Pythonの勉強も兼ねて評価シートを作成、解析するプログラムの作成

目の開き具合(Eye_Aspect_Ratio)をプロットした。
2回まばたき、1回しばらく目を閉じた。

口の開き具合(Mouse_Aspect_Ratio)をプロットした。
3回パクパク、2回しばらく口を開けた。