CAグループ合同勉強会発表資料

1. アメブロFaceの
顔認識システム
サイバーエージェント
アメーバ事業本部
寺本 隆彦

2. ⾃己紹介
【名前】
寺本隆彦
【経歴】
2005年〜2010年：SIer
2011年〜 ：サイバーエージェント
【Twitter】
siamtakashade

3. アメブロFace
⾃社開発の顔認識システムで
お気に入り芸能人ブロガーの
顔写真だけをピックアップ
http://www.cyberagent.co.jp/news/press/2012/0222_1.html

4. アメブロFace
1万人を超える芸能人から好きな芸能人をフォロー
http://face.ameba.jp/sp/bloggers/g/85?order=total

5. アメブロFace
ブログ投稿画像から顔写真を抽出してタイムライン表示
http://face.ameba.jp

6. OpenCVによる顔認識
・分類器を使って顔を検出
・分類器の実体はXMLファイル
・ インストール時に19分類器が入っている(Ver2.2)
分類器 検出部位
haarcascade_eye 目
haarcascade_eye_tree_eyeglasses 眼鏡を掛けた目
haarcascade_frontalface_alt 正面顔
haarcascade_frontalface_alt_tree 正面顔
haarcascade_frontalface_alt2 正面顔
haarcascade_frontalface_default 正面顔
haarcascade_fullbody 全身
haarcascade_lefteye_2splits 左目
haarcascade_lowerbody 下半身
haarcascade_mcs_eyepair_big 目
haarcascade_mcs_eyepair_small 目
haarcascade_mcs_lefteye 左目
haarcascade_mcs_mouth 口
haarcascade_mcs_nose 鼻
haarcascade_mcs_righteye 右目
haarcascade_mcs_upperbody 上半身
haarcascade_profileface 横顔
haarcascade_righteye_2splits 右目
haarcascade_upperbody 上半身

7. OpenCVによる顔認識
・正面顔の検出
分類器 検出部位
haarcascade_eye 目
haarcascade_eye_tree_eyeglasses 眼鏡を掛けた目
haarcascade_frontalface_alt 正面顔
haarcascade_frontalface_alt_tree 正面顔
haarcascade_frontalface_alt2 正面顔
haarcascade_frontalface_default 正面顔
haarcascade_fullbody 全身
haarcascade_lefteye_2splits 左目
haarcascade_lowerbody 下半身
haarcascade_mcs_eyepair_big 目
haarcascade_mcs_eyepair_small 目
haarcascade_mcs_lefteye 左目
haarcascade_mcs_mouth 口
haarcascade_mcs_nose 鼻
haarcascade_mcs_righteye 右目
haarcascade_mcs_upperbody 上半身
haarcascade_profileface 横顔
haarcascade_righteye_2splits 右目
haarcascade_upperbody 上半身
ローラさんのタイムラインより
http://face.ameba.jp/sp/b/rolarola/img#!e=11069374772&i=11592202327&s=1

8. OpenCVによる顔認識
・目の検出
分類器 検出部位
haarcascade_eye 目
haarcascade_eye_tree_eyeglasses 眼鏡を掛けた目
haarcascade_frontalface_alt 正面顔
haarcascade_frontalface_alt_tree 正面顔
haarcascade_frontalface_alt2 正面顔
haarcascade_frontalface_default 正面顔
haarcascade_fullbody 全身
haarcascade_lefteye_2splits 左目
haarcascade_lowerbody 下半身
haarcascade_mcs_eyepair_big 目
haarcascade_mcs_eyepair_small 目
haarcascade_mcs_lefteye 左目
haarcascade_mcs_mouth 口
haarcascade_mcs_nose 鼻
haarcascade_mcs_righteye 右目
haarcascade_mcs_upperbody 上半身
haarcascade_profileface 横顔
haarcascade_righteye_2splits 右目
haarcascade_upperbody 上半身
http://face.ameba.jp/sp/b/rolarola/img#!e=11069374772&i=11592202327&s=1

9. OpenCVによる顔認識
・左目の検出
分類器 検出部位
haarcascade_eye 目
haarcascade_eye_tree_eyeglasses 眼鏡を掛けた目
haarcascade_frontalface_alt 正面顔
haarcascade_frontalface_alt_tree 正面顔
haarcascade_frontalface_alt2 正面顔
haarcascade_frontalface_default 正面顔
haarcascade_fullbody 全身
haarcascade_lefteye_2splits 左目
haarcascade_lowerbody 下半身
haarcascade_mcs_eyepair_big 目
haarcascade_mcs_eyepair_small 目
haarcascade_mcs_lefteye 左目
haarcascade_mcs_mouth 口
haarcascade_mcs_nose 鼻
haarcascade_mcs_righteye 右目
haarcascade_mcs_upperbody 上半身
haarcascade_profileface 横顔
haarcascade_righteye_2splits 右目
haarcascade_upperbody 上半身
http://face.ameba.jp/sp/b/rolarola/img#!e=11069374772&i=11592202327&s=1

10. OpenCVによる顔認識
・上半身の検出
分類器 検出部位
haarcascade_eye 目
haarcascade_eye_tree_eyeglasses 眼鏡を掛けた目
haarcascade_frontalface_alt 正面顔
haarcascade_frontalface_alt_tree 正面顔
haarcascade_frontalface_alt2 正面顔
haarcascade_frontalface_default 正面顔
haarcascade_fullbody 全身
haarcascade_lefteye_2splits 左目
haarcascade_lowerbody 下半身
haarcascade_mcs_eyepair_big 目
haarcascade_mcs_eyepair_small 目
haarcascade_mcs_lefteye 左目
haarcascade_mcs_mouth 口
haarcascade_mcs_nose 鼻
haarcascade_mcs_righteye 右目
haarcascade_mcs_upperbody 上半身
haarcascade_profileface 横顔
haarcascade_righteye_2splits 右目
haarcascade_upperbody 上半身
http://face.ameba.jp/sp/b/rolarola/img#!e=11069374772&i=11592202327&s=1

11. アメブロFaceの顔認識
・顔認識×18を実施
・閾値11以上で顔画像と判定
分類器 検出部位
haarcascade_eye 目
haarcascade_eye_tree_eyeglasses 眼鏡を掛けた目
haarcascade_frontalface_alt 正面顔
haarcascade_frontalface_alt_tree 正面顔
haarcascade_frontalface_alt2 正面顔
haarcascade_frontalface_default 正面顔
haarcascade_fullbody 全身
haarcascade_lefteye_2splits 左目
haarcascade_lowerbody 下半身
haarcascade_mcs_eyepair_big 目
haarcascade_mcs_eyepair_small 目
haarcascade_mcs_lefteye 左目
haarcascade_mcs_mouth 口
haarcascade_mcs_nose 鼻
haarcascade_mcs_righteye 右目
haarcascade_mcs_upperbody 上半身
haarcascade_profileface 横顔
haarcascade_righteye_2splits 右目
haarcascade_upperbody 上半身
http://face.ameba.jp/sp/b/rolarola/img#!e=11069374772&i=11592202327&s=1

12. 顔認識結果
・ローラさんのタイムラインより：http://face.ameba.jp/sp/b/rolarola

13. アメブロFaceの顔認識
・芸能人ブログ画像数 1400万枚
・顔認識に約1ヶ月
- 16コアCPUのマシン×6台

14. http://face.ameba.jp
http://face.ameba.jp/sp/b/rolarola