HoloLensで言霊を発射する話です。

1. HoloLensで作る
言霊発射装置
リクルートアドバンスドテクノロジーラボ行ってきた
Tokyo HoloLens ミートアップ vol.4 2017/07/15
えむにわ @m2wasabi

2. 自己紹介
• 山本 允葵
(Masaki Yamamoto)
えむにわ
@m2wasabi新しいものに何でも食いつく
雑食系野良エンジニア
Milkcocoa WebGL(jThree) KinectV2で
本を書いたこともある(共著)
時が経つのは早いものでもはや黒歴史です

3. 過去に作ったもの
MilkcocoaのUnityプラグイン
http://m2wasabi.hatenablog.com/entry/2016/03/25/071932
RPGツクールMVのMilkcocoaプラグイン
http://qiita.com/m2wasabi/items/267b57d2b6c90ce93ad2
VisualStudioCode用のGrimoire.jsプラグイン
http://qiita.com/m2wasabi/items/bc18a7d0710ea31d43d5
プラグインばっかり

4. はじめに
言葉には力が宿ると言います。
これを昔の人は言霊と呼びました。
例えば、コミックの中の世界は言葉がビジュアルを
伴って存在し、時として物質となって物理的影響力を
持ちます。
出典：ジョジョの奇妙な冒険

5. 言霊発射装置とは
HoloLensを使って
言葉の見える化を行い、
人類をより漫画の世界に近づけます。

6. 目次
• Chapter1 HoloLensで日本語音声を使うには
• Chapter2 Demo
• Chapter3 リクルートアドバンスド
テクノロジーラボに行ってきた
• Chapter4 今後の野望

7. Chapter1
HoloLensで日本語音声を使うには

8. OS標準では英語のみ理解
• 音声認識機能は標準搭載されている
• 言語を英語しか選択できない
• だからエージェントは
コルタナではなくてCortana
• 日本語の発音・文字は
理解できないようだ
それでもHoloLensのUIは
音声コマンドが良いと思う。ハンズフリー！
Hey, Cortana
Not コルタナさん
空耳ならなんとか

9. Google Cloud Speech API
• 「OK Google」はGoogle Assistant API
 APIは英語のみ(お前もか)
• APIで各国対応してるのは、
音声テキスト変換に特化した
「Google Cloud Speech API」
• 事例としては
Meetup Vol2でXin9leさん – Project Sonata
Meetup Vol3で森さん井出さん
– Project 嫁
でそれぞれ発表している

10. 安全牌なAsset ($20)
Google Cloud Speech Recognition
• 利用は簡単
 買ったその日にデモ作れる
 簡単故に、使ってみただけだと、
もはやn番煎じ。アイデアで戦おう
• gRPCではない
 双方向ストリームに対応してないので
gRPC版作ろう(茨の道)
• 最近バージョンアップ(V3.0)で互換性壊してきた
 Unity2017でないと使えない
 V2.3のプロジェクトにそのままインポートしてもダメ

11. Chapter2
Demo

12. Demo
• 編集に戻る言霊発射装置 Demo1 エアタップ
 https://youtu.be/CfBzbpxRcrA
• 言霊発射装置 Demo2 論理寿司と論理ビールで宴会準備
 https://youtu.be/vLObhEGs1mM
• 言霊発射装置 Demo3 撃てよ大砲
 https://youtu.be/swRlu-uzqgc

13. Chapter3
リクルートアドバンスドテクノロジーラボに行ってきた

14. リクルートアドバンスド
テクノロジーラボ is 何
• オープンイノベーションを旗印として
開発者にVR機器などを無料で使わせてくれる施設
 https://atl-hiroo.recruit-tech.co.jp/
• 各種HMD(勿論HoloLensも)やモーションキャプチャ、4Kカ
メラのクロマキー施設もある
• 今回の発表内容、記事として寄稿させていただいてます
 https://atl-hiroo.recruit-tech.co.jp/showcase/archives/474

16. Chapter4
今後の野望

17. gRPCぐぬぬ
• gRPC x Unityは今キテルので開拓しよう(したい)
 MagicOnionとか事例あるけど
Unityクライアントがソース読むしかなく難しい…
 それってUWPで動くの?(動かない)
• 求)HoloLensでgRPC使う方法
 無ければ作るしかない
 相談できる人がいない(C#,UWP)
技術に関して相談できる人がいないので
技術話せる友達欲しいです…

18. おわり