VRを使ったビジュアライゼーションの可能性について @Unite 2015 Tokyo

101
VR を使った データビジュアライゼーション の可能性 谷口 直嗣

Transcript of VRを使ったビジュアライゼーションの可能性について @Unite 2015 Tokyo

VR を使った データビジュアライゼーション の可能性

•谷口 直嗣

Introduction

谷口直嗣

フリーランスで企画、開発をやっています。 !

いろいろやっているので軽く最近やった仕事を紹介

Ricoh Theta

2014 CES & NY

Leap MotionでTheta画像を グリグリする

https://www.youtube.com/watch?v=ELVNLbUNzb0

Unity5からパノラマ画像を Skyboxに使える

Thetaは環境マップにも使えそう

CG スタジオでのR&D !

Unityをベースとしたリアルタイムレンダラーの開発 !

顔のキャプチャーをしてCGキャラの顔を動かす技術の導入 !

Pipeline 管理ツール Shotgunと社内ツールとのインテグレーション

リアルタイムレンダラー

Toonに特化した表現ShadeとShadowを別々のライトで テクスチャーにレンダリング

頂点カラーでアウトラインの太さをコントロールシェーダーにカラーパレットで指定した色でレンダリングCompute Shaderで影のスムージングを行い、合成

リアルタイムレンダラー

Mayaでレンダリング用のデータを30fpsで再生できた

ファイルに画像を落とすと5fpsぐらい

書き出しにはwasabi renderというアセットを使用

リアルタイムレンダラー

どこかで実用化したい!

Facewareの導入検討

声優の表情をCGアニメに使えないか?

撮影技法の検討

キーとなる表情の検討ワークフローの検討

VRデモアプリ開発

OcuTone

https://www.youtube.com/watch?v=d7Q_Le7yRZg

秋葉原のG-tuneの ショップで展示中

Pepper Workshop

本日のお話

ゲームのテクノロジーを使うと結構いろんなことができる!

ビジュアライゼーション

3Dで見るということ

外科手術用ロボット da Vinciの操作体験

奥行き感があるので 初めて触っても結構操作が

できてしまう。

奥行き感の大切さを実感!

VRでデータを3Dで見る

CTスキャン

DICOM画像のシーケンス

Oculusを装着して頭蓋骨の 中に入ってみる。

ゲームパッドで移動 頭を動かして視線を変える

頭蓋骨の中を探検!

ビューワーから、 体内探検という体験へ

マルチレイヤー化

Animationhttps://www.youtube.com/watch?v=dMhi4yyYEoY

https://www.youtube.com/watch?v=pGdeWdO5Efc

創薬

タンパク質のくぼみに はまる薬を探すこと

タンパク質も3次元構造

インフルエンザウィルスの持つ ノイラミダーゼというタンパク質の

活性部位にハマる

※ 交叉法3D

インフルエンザウイルスが体内にばらまかれる時に働く酵素、ノイラミニダーゼ

※ 交叉法3D

インフルエンザウイルスが体内にばらまかれる時に働く酵素、ノイラミニダーゼ 表面表示

※ 交叉法3D

タミフル in ノイラミニダーゼ

※ 交叉法3D

結合

タミフル in ノイラミニダーゼ

Oculus で見る

https://www.youtube.com/watch?v=aX-S5JMczro

107958

Computer aided drug design

VR aided drug design

Internet of Tanpakushitsu

IOT

まとめ

ゲームCG以外にも 3Dデータはたくさんある

しかも無料で コンバート可能

DICOM3D Model

Polygon reduction

VR Application

3D Model

VR Application

デジタル化されれば UnityやOculus Riftの

ようなゲームのテクノロジー は様々な領域で使える!

ゲーム以外のデータを ゲームに持ち込むことも可能