梶研 [Unity で複数人の動作を可視化(完) & mocopi と action ]

2024年01月16日

Unity で複数人の動作を可視化(完) & mocopi と action slam2(始)

出席率

• 3年セミナー：??%

スケジュール

短期的な予定

• [x] mocopi でセンシング(~12月)
  • [x] mocopi x Unity
  • [x] 色んな動作をとる
  • [x] 誤差を計測(簡易)
  • [x] 動作をグラフ化
  • [x] bvhをパースするパッケージを作る
  • [x] csv に書き出せるアプリを作る
  • [x] 複数人の絡みを取ってみる
  • [x] ブラウザで動作を確認できるようにする(gLTF形式の理解)
  • [x] Unity で複数人の動作を可視化する
  • [x] 一連のやり方を esa にまとめる
• [ ] mocopi と action slam2
  • [ ] シーンとランドマークを決める(~2月上旬)
  • [ ] ?
  • [ ] 論文書く
  • [ ] 発表

長期的な予定

• ~?月 シーン検知?をする
• ~?月 論文を書く
• ~?月 論文発表したい

進捗報告

Unity で複数人の動作を可視化(完)

<iframe width="1180" height="664" src="https://www.youtube.com/embed/oDHtHVAAIPc" title="Unity ツイスターゲーム第1回戦(調整)" frameborder="0" allow="accelerometer; autoplay; clipboard-write; encrypted-media; gyroscope; picture-in-picture; web-share" allowfullscreen></iframe>

手順を esa & Qiita にまとめました。

• mocopiの動きをUnityで可視化する
• mocopiのBVHファイルからFBX形式に楽に変換する(Mac)
• mocopiの動作をUnityで再生時にテレポートさせない方法

mocopi と action slam2(始)

タイトルを決めたい。

action slam2 で合っているか分からない

目的

mocopi の長時間使用時の位置情報の誤差をなくす

目標

一連の動作(シーン)から特定の動作(ランドマーク)を抽出し、シーン内の位置情報を推定する

• 第一段階(今年): ランドマーク抽出
• 第二段階: ランドマークから位置推定

シーン と ランドマーク を決める

シーンの条件

• 動きがあること
  • 全身の動作である
• ランドマークと同様の動作がない

シーン候補

• お料理
  • 具材がたくさんある料理をつくる
  • 学会発表の費用を出せるかもしれない
  • 切る, フランパン振るなどは腕の動きだけで十分そう？(mocopi である必要性)
  • 料理ができない
• お買い物
  • 棚から商品を取る
    • 同様の動作を繰り返していそう
  • 買い物何回も行きたくない
• 城, 水族館
  • 同じところ何度も通らないから良くないかもしれない？
• 大学
  • 梶研
    • 本を取る
    • お湯を注ぐ
  • 図書館
    • 棚から本をとる
      • 同様の動作を繰り返していそう
    • 本の貸し借り
• スポーツする
  • 卓球
    • 動く範囲が狭い
  • サッカー, 野球
    • やりたくない
  • テニス
    • 動作の位置の関係性が薄そう
      • サーブ, レシーブの位置の制限が広い
  • 水泳
    • 水没する

余談

cloudflare で幸せになりました

さくら+moomooドメイン は色々と管理が面倒だったので cloudflare を始めた

今まで

• webサイト→ さくらサーバー
• api → Render or 梶研/シス研サーバー
• DB → 迷子(お金こわい)

全てcloudflare でできる！

• satooru.me を置き換えた
• satooru.dev を取得した
• satooru.nagoya を持て余している

webプロの課題も兼ねて cloudflare D1 で大量に読み取りするwebアプリを制作してます

年越した蕎麦をたべた