梶研 [お料理センシング & 主成分分析 & BookWorm]

2024年03月19日

お料理センシング & 主成分分析 & BookWorm

出席率

3年セミナー：??%

スケジュール

短期的な予定

[ ] mocopi とお料理センシング
- [x] シーンとランドマークを決める(~2月上旬)
- [x] SVM で動作判別する
- [ ] 機械学習を深める
  - [x] 機械学習の手法を知る
  - [x] 使う手法を決める
  - [x] データセットを探す
  - [ ] LSTM
    - [x] 機械学習(LSTM)する
    - [ ] 精度を上げる
    - [ ] ?
  - [ ] 主成分分析
    - [x] 主成分分析する
    - [ ] 精度を上げる
    - [ ] ?
  - [ ] ?
- [ ] お料理センシング
  - [x] お料理でどんな動作があるかを知る
  - [ ] データをとる?
  - [ ] ?
- [ ] 論文書く
- [ ] 発表
[ ] BLEビーコンのuuidを書き換えたい
- [x] 通信内容を読み解く
- [ ] shellコマンドで通信してみる
- [ ] 実装してみる
[ ] BookWorm
- [x] Pasori とデスクトップアプリを接続する(技術検証)
- [x] nfc読み込み機能 & 画面を作る
- [ ] API と連携させる
- [ ] 管理者画面を作る

長期的な予定

~?月シーン検知?をする
~?月論文を書く
~?月論文発表したい

進捗報告

お料理でどんな動作があるかを知る

fumaさんと軽く話した

条件

そんなに難しくないもの
- 初心者です
工程が多いもの
- 位置推定をするため移動がたくさんほしい
飽きないもの
- これから何度もやるため
材料費が高すぎないもの
- 材料費は研究費に含まれないとか

→ 太巻き

いろんな材料が必要
- 簡単な工程がいっぱい

主成分分析

素のデータ

各主成分を表示

第一主成分と第二主成分

2d155fbc-1e45-4980-bc95-a99ef3e52c21.png (133.4 kB)

第二主成分と第三主成分

34e94903-96a9-4eeb-994d-dbb00eed5f41.png (134.7 kB)

第一主成分と第三主成分

ba99815f-83f6-46e1-a8f5-7c85ba5c4fdf.png (146.2 kB)

主成分たち

1e8cc501-d96a-46a2-bb5c-5f7cde3124ab.png (251.6 kB)

あんまり別れきってない

一連の動作ではなく1フレームずつの加速度でやっているため、

0, 0 あたりに集まるのは当然

→ ウィンドウに分けて標準偏差などの特徴量でやる

一旦ペンギンのデータでやってみる

https://archive.ics.uci.edu/dataset/690/palmer+penguins-3

素のデータ

主成分同士の比較

コード

ライブラリに任せっきりのため、何しているか理解する必要がある

# 主成分分析の実行
pca = PCA()
pca.fit(dfs)
# データを主成分空間に写像
feature = pca.transform(dfs)

# 主成分得点
pd.DataFrame(
    feature, columns=["PC{}".format(x + 1) for x in range(len(dfs.columns))]
).head()

累積寄与率

第何主成分まででどのくらいの情報を説明できるかという指標

↓ 第二主成分までで十分そう

これから

センシングを始めようかと思ってます
- 必要な時にまとめて取るのは大変なので週１程度でやりたい
機械学習を深める
- LSTM
- 主成分分析

BookWorm

管理者画面を作った

API はまだなので仮

バイトで学んだことを活かして綺麗に書けた

import { atom } from 'jotai';

export interface Item {
  id: number;
  title: string;
  idm: string;
  type: string;
}

const fetchItem = async (id: Item['id']): Promise<Item> => {
  // 仮
  await new Promise((resolve) => setTimeout(resolve, 1000));

  return {
    id,
    idm: `idm-${id}`,
    type: `type-${id}`,
    title: `title-${id}`,
  };
};

const itemAtom = atom<Item | undefined>(undefined);

export const selectItemAtom = atom(
  (get) => get(itemAtom),
  async (_get, set, id: Item['id']) => {
    set(itemAtom, undefined);
    const item = await fetchItem(id);
    set(itemAtom, item);
  }
);

import { itemAtomLoadable } from '@/store/items';
import { useAtomValue } from 'jotai';

const useItems = () => {
  return useAtomValue(itemAtomLoadable);
};

export default useItems;

const AdminBody = () => {
  const items = useItems();

  return (
    <PageLayout title="管理画面">
      <AdminDialog />

      {items.state === 'hasData' && <AdminTable items={items.data} />}
      {items.state === 'loading' && <Loading dark />}
    </PageLayout>
  );
};

BookWorm ラズパイをセットアップした