近藤徹多 のすべての投稿

近藤の週報(1/20 ~ 1/26)

左の図から右の図のようにトリミングしました。

ResNet3D単体の性能を測るために、0°のギャラリーデータに対して、0°、30°、60°、90°のプルーブデータでテストしても47%、15%、6%、5%ほどしかまだ出ていません

テーマ発表ゼミでは、テーマを「シルエットと骨格情報を用いた歩容認証の提案」として発表しました。

新規性がわかるようなテーマが良いというアドバイスを受けましたが、うまく思いつきません。

近藤の週報(1/13 ~ 1/19)

OU-MVLPのデータセットダウンロードできました。

同意書を書いていただきありがとうございました。

データセットはシルエットは画像の集合で先にまとめたほうが使いやすいと思い、現在まとめていますがとても時間がかかっています(推測8時間)

それが終われば、いったんコードを書いたので学習して結果を確認できると思います。

また、卒論タイトルの候補です(大幅に変えてます)

歩容認証におけるシルエットと骨格を用いたbimodal networkの提案

(「シルエットと骨格」と「bimodal network」がかぶってる気もします )

自分が大事だと思うキーワードです

  • 歩容認証
  • シルエットと骨格
  • bimodal network
  • 3DCNNとSTGCN

近藤の週報(12/23 ~ 1/12)

独自のデータセットでSTGCNとResNet3Dを用いて動画と骨格情報から得た特徴を結合して学習した。

K近傍法で100%分類できた。(最終的にはコサイン類似度で推論する予定)

TSNEで二次元に圧縮した結果

casia-bにRGB動画をダウンロードさせてもらうために連絡しましたが、新しい規則が出たらしくRGB動画はダウンロードできないそうです。白黒画像の白黒を逆にしてみると、白黒画像から骨格を取れました。(背景:、人物: 白 ー> 背景:白、人物: 黒)

論文をみてcasia-bのテスト方法を調べた

来週のゼミまでに

学習データをcasia-bにして精度を出す

近藤の週報(12/9 ~ 12/15)

骨格とシルエットを入力としたモデルを作成するために、まず、骨格情報をもとに歩行者の推定を行いたい

そこで骨格を図のようなグラフとして入力できるGraph Convolution Networkを使用しようと考えました。

実際は動画なので、骨格の連続データで、https://github.com/yysijie/st-gcnを試そうと思いましたが、データ形式が分かっておらず苦戦しています。

大ゼミまでに進捗を出せるように何とか頑張ります

グラフ以外での骨格情報の処理方法の案をお聞きしたいです