TMCNetworking Night Vol.01 with THE TERMINAL LT資料 オムロンHVCで取得した表情データを元に家電を制御

1. HVCのある暮らし
石田陽太
iOSエンジニア

2. 簡単な自己紹介
• 石田陽太
• ネクストという会社でHOME’Sのアプリ開発
• おうちハック大好き
• センサ大好き

3. HVCゲットした！
• オムロン ヒューマンビジョンコンポ
• 簡単に人の状態のセンシングが可能に
• ①顔検出 ②人体検出 ③性別推定 ④年齢推定 ⑤視線推定 ⑥顔向き推定 ⑦顔認証
⑧表情推定（満足、不満足。5つの表情：喜び、驚き、怒り、悲しみ、無表情） ⑨手検出
⑩目つむり推定
• LTのネタにしよう！

4. やろうと思ったこと
感情日記
幸せ
普通
驚き
怒り
悲しい
AM10 PM7PM0 PM2 PM5
バグが未知すぎる・・
直った！

5. HVCを会社のデスクに設置！

6. 1日
0
1
2
3
4
5
2015/03/03 9:362015/03/03 10:482015/03/03 12:002015/03/03 13:122015/03/03 14:242015/03/03 15:362015/03/03 16:482015/03/03 18:002015/03/03 19:122015/03/03 20:24
普通
幸せ
驚き
怒り
悲しい
時刻

7. 1時間
0
1
2
3
4
5
6
2015/03/03 10:262015/03/03 10:332015/03/03 10:402015/03/03 10:482015/03/03 10:552015/03/03 11:022015/03/03 11:092015/03/03 11:162015/03/03 11:242015/03/03 11:312015/03/03 11:38
普通
幸せ
驚き
怒り
悲しい
時刻

8. 10分
0
1
2
3
4
5
6
2015/03/03 10:292015/03/03 10:302015/03/03 10:322015/03/03 10:332015/03/03 10:352015/03/03 10:362015/03/03 10:372015/03/03 10:392015/03/03 10:40
普通
幸せ
驚き
怒り
悲しい
時刻

9. 10分
0
1
2
3
4
5
6
2015/03/03 10:292015/03/03 10:302015/03/03 10:322015/03/03 10:332015/03/03 10:352015/03/03 10:362015/03/03 10:372015/03/03 10:392015/03/03 10:40
普通
幸せ
驚き
怒り
悲しい
時刻

10. 測定結果考察
• 生データの誤差が大きい
• もしくは僕が情緒不安定すぎる
• 加工すれば、有益な情報になるかも。
• だけど時間がかかりそう。LTに間に合わない！

11. どうしよう？
• 一日でもっとも多かった表情を、その日の感情にす
る
• うちのスマートホームと連携させる

12. 自宅のシステム図

13. やりたいこと
• 家に帰ったら、その日の気分に合わせてやりたいこ
とができる状態になっているようにする！

14. 感情と命令の対応表
感情 部屋のアクション 照明色
普通 ニュース 暖色
幸せ コード書く 白
驚き バラエティ番組 鮮やかに
怒り ゲーム 青っぽく
悲しい ももクロ ライブっぽく

15. 構成
会社
業務時間中15sに1回
表情認識情報を取得
自宅
iBeacon範囲