これからのエンジニアは ボランティアでスキルアッ …これからのエンジニアは ボランティアでスキルアップ! ~プロボノによるエンジニア
2014/06/13...
-
Upload
keisuke-osone -
Category
Data & Analytics
-
view
819 -
download
1
Transcript of 2014/06/13...
![Page 1: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/1.jpg)
博士課程の新卒エンジニアがデータ分析環境を作った話
株式会社サイバード
データアナリスト大曽根 圭輔
![Page 2: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/2.jpg)
交流会ということで自己紹介
![Page 3: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/3.jpg)
ABOUT:ME
•大曽根圭輔博士(工学) 茨城県出身
•現在データ分析チーム
•趣味 たくさん- 観る: 野球観戦、ライブ- やる: 6/21にビッグバンドのライブやります- Youtubeで7万再生突破 (黒歴史
![Page 4: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/4.jpg)
絶賛CM放映中!!
![Page 5: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/5.jpg)
具体的な業務 - モニタリングツール構築- ユーザの行動分析- 広告効果測定- ユーザテスト- アンケートなど
![Page 6: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/6.jpg)
本日の話題
![Page 7: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/7.jpg)
(ほぼ)ゼロからデータ分析環境を作るまで
![Page 8: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/8.jpg)
サービス
Webサーバ
DB
各種API
![Page 9: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/9.jpg)
この環境ができるまで
![Page 10: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/10.jpg)
2013年某日
![Page 11: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/11.jpg)
当時の業務アプリ制作
(WEB、ネイティブ)博士課程在籍時
計算知能、HAIなどの研究統計学も少し
![Page 12: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/12.jpg)
偉い人
会社のゲームも軌道に乗ってきたので、データ分析に力を入れたい。君の経験を買ってデータアナリストになって欲しい
私
![Page 13: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/13.jpg)
偉い人
会社のゲームも軌道に乗ってきたので、データ分析に力を入れたい。君の経験を買ってデータアナリストになって欲しい
私まかせて下さい!
![Page 14: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/14.jpg)
分析開始
![Page 15: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/15.jpg)
エンジニア
このデータを調べれば離脱要因がわかる。このSQLをたたいていいですか?
スロークエリ投げられたら困るので。。
私。。。
![Page 16: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/16.jpg)
エンジニア
成長度も含めてクラスタリングをしたいから、ユーザレベルの変遷を知りたい
レベルはアップデートされるから残ってません。。
私。。。
![Page 17: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/17.jpg)
他にもモニタリングツールが未整備-> 可視化はEXCELで-> 数字だけ見てもわかりづらい
レポーティングに手間がかかる
![Page 18: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/18.jpg)
手元にある(スモール)データである程度分析できる!- コホート分析- 施策の効果測定(時系列)- KPIシミュレーションなど
![Page 19: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/19.jpg)
しかし、やはり機械学習などの知識を使いたい!
効率化も行いたい!
![Page 20: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/20.jpg)
•機械学習 (NN、SVM、SOMなど)
•多変量解析 (重回帰分析、主成分分析など)
•統計学
•可視化
自分が持っているデータ分析に役立つ(はずの)スキル
![Page 21: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/21.jpg)
というわけで直訴
![Page 22: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/22.jpg)
上司
アップデートしなくて自由に触れるデータをためる場所作りたいです!
たしかにメリットも多いのでやってみる価値はある
私
![Page 23: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/23.jpg)
上司
かくかくしかじかで。。。
今後のために必要だな
偉い人
![Page 24: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/24.jpg)
上司
定常作業効率化のためにモニタリングツール作りたいんです
たしかにメリットも多いのでやってみる価値はある
私
![Page 25: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/25.jpg)
上司
かくかくしかじかで。。。
今後のために必要だな
偉い人
![Page 26: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/26.jpg)
![Page 27: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/27.jpg)
結果
![Page 28: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/28.jpg)
サービス
Webサーバ
DB
各種API
![Page 29: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/29.jpg)
•機械学習 (NN、SVM、SOMなど)
•多変量解析 (重回帰分析、主成分分析など)
•統計学 (検定など)
•可視化
自分が持っているデータ分析に役立つ(はずの)スキル
![Page 30: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/30.jpg)
•機械学習 (NN、SVM、SOMなど)
•多変量解析 (重回帰分析、主成分分析など)
•統計学 (検定など)
•可視化
自分が持っているデータ分析に役立つスキル
![Page 31: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/31.jpg)
•機械学習 (NN、SVM、SOM、決定木など)-> イベント参加予測、継続要因特定
•多変量解析 (重回帰分析、主成分分析など)
-> ユーザの分類
•統計学
-> キャンペーンの効果測定
•微分積分レベル毎のDAUの予測
![Page 32: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/32.jpg)
大事な事周りを巻き込んでやりたいことを創る!
![Page 33: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/33.jpg)
モニタリング指標の自動生成特徴点の自動抽出
可視化レポーティング自動化
今後の展望
![Page 34: 2014/06/13 若手Webエンジニア交流会発表資料「博士課程の新卒エンジニアがデータ分析環境を作った話」](https://reader034.fdocument.pub/reader034/viewer/2022042716/55a2c4f11a28ab77158b4691/html5/thumbnails/34.jpg)
ご清聴ありがとうございました!