みなさんこんにちは、ホロアイズの谷口と申します。
ホロアイズはVirtual RealityやMixed Realityを使った医療向けのコミュニケーションサービスを提供します。
Holoeyes Inc. provides VR and MR based communication service for doctors and hospitals .
これは、医療の現場で多く使われるCTスキャンの画像をムービーにしたものです。
CTスキャンはX線で我々の体を連続的に撮影をします。
医師はこの様な画像を見て、頭の中で三次元を構築しています。
何故なら、実際の外科手術は3次元で行われるからです。
2次元の画像のシーケンスから3次元のイメージを作る、これはなかなか大変なことです。
This is CT scan data image sequence . CT scan is continuous X Ray image through our body .
As you know , CT scan is used in almost surgery .
Doctors have to image 3D structure from this image sequence .
Because our body is 3D, and surgical procedure is 3D .
そこでVirtual Realityの出番です。
我々は患者のCTデータから個別にVRアプリを作り、臓器や血管、腫瘍の位置関係が立体的に把握できるサービスを提供します。
ホロアイズのVRアプリは単に立体に見るだけではなく、視線、コントローラーの3次元の動きを記録します。これにより手の動き、どこから見るかという目線など今まで記録から抜け落ちていた情報を記録することができ、さらにそれを自由に別の角度から見ることができます。
For getting picture of 3D structure and 3D movement of surgical procedure , VR is very useful .
Holoeyes provides VR application from each patients CT scan or MRI data .
Holoeyes provides not only presenting 3D structure but also recording 3D movement of gaze and hand , we capture non-verbal informations of surgical procedure .
現在、複数の病院で実証実験をしております。
例えばこちらは肝臓のガンの術前のカンファレンス、手術前の打ち合わせです。
黄色いのが腫瘍、今回は白い部分を切除します。ガンの手術ではガンの部分を含めた正常な部分を含めて切除する必要があります。がん細胞を外に出さないようにしなければならないからです。
枝のように見えるのは血管です。赤が動脈、青が静脈、そして水色が門脈と言って消化管から通じている血管です。このように肝臓の中の血管は非常に複雑な3次元構造をしています。そして血管を切ってしまわないように医師は細心の注意を払う必要があります。
切るべき血管は処置が必要で、残すべき血管は残します。
もし間違って血管を切ってしまうと大量出血という事態になります。
手術の前にベテランの医師が当日執刀をする若手に手技を伝えています。
We are doing demonstration experiment at several hospitals in Tokyo .
For example this movie is planning surgical interruption of tumor in Liver .
Yellow part is tumor . In surgical interruption , doctors have to cut Liver with margin about 10
millimeter , because not to spread cancer cells in patients body .
Blue and cyan part is veins . veins in Liver has very complexed 3D structure like trees .
doctors have to be very careful not to cut veins . By keeping veins , functionality of liver remains .
もう一つ実証実験をしているNTT東日本関東病院の志賀医師のコメントです。
志賀医師はダビンチによるロボット手術を480例以上の経験を持つベテランです。
He is Dr. Shiga .
He has a 500 more experience of Da Vinch surgery .
He says using our VR and MR application , He can tell his 3D images to others .
And he saying our VR application is good for education .
By using our VR application , he reduced bleeding and had shorten the time of surgery .
こちらは、OECD Health staticsからの数字で人口100万人あたりのCTスキャンの機材の台数のグラフです。見ての通り日本がダントツです。さらに日本の国民皆保険制度のおかげもあり、ほとんどの人が必要であればCTスキャンの撮影に応じます。日本はCTスキャンデータが大量にあるのです。今までそのデータは治療が終わった後あまり使われることがありませんでした。我々はそれを活用します。
Our service are based on cloud .
We support smartphone , PC, Microsoft HoloLens, and HTC Vive .
Right device for right place .
It’s a tech demo for connecting web and mixed reality by Microsoft HoloLens .
Listing informations, showing text and 2D image, selecting from list and input text are comfortable to use smart phone .
For example in this demo , team doctor send URL of case by slack .
Clicking the link , a QR code for URL is shown .
Then scanning the QR code by Microsoft HoloLens ,
Doctors can access 3D data of case .
And they can bling HoloLens to operation room .