・振り返り指標の標準化、そして見える化 ・JIRA ダッシュボードでやりづらい部分をタブローで見える化した話

1. JiraとAWS 、Tableauを利用し
データドリブンにプロダクトや運営改善
につなげる
リクルートライフスタイル
ネットビジネス本部/デザインＵ/リーン開発Ｇ
大岩 傑

2. Index
1. 自己紹介
2. チームについての紹介
3. 今回のテーマ
4. 何故このテーマに至ったのか？
5. 課題に対しての仮説
6. システム構成
7. 取り組んだこと、得られたこと
8. 今後やっていきたいこと
2

3. 自己紹介
3
名前： 大岩 傑（おおいわ すぐる）
経歴：
2015年1月、リクルートライフスタイルに入社後、リーンスタ
イルでのUX改善のA/Bテストの企画やBIgdata、リアルタイム
データ基盤の企画およびその活用を現在担当。Google アナリ
ティクス認定資格（GAIQ）保持。
前職は大手Web企業にて、海外向けサービスプラットフォーム
の受注・配送管理システムのリーダーや、シンガポール展開に
おけるテクニカルリードを担当。その他公営競技システムの設
計、開発、ディレクション業務などを担当。
趣味： 料理、投資、旅行、
サイト作り RoRとかPHPとか
特記事項： 最近は中国語の勉強しています。初次见面！

4. 4
A/Bテストを軸として、大規模サイトの改善を、
課題発見→仮説立案→検証(ABテスト)→評価までを担当しています
事例につい詳しくはテックブログを参照ください
http://engineer.recruit-lifestyle.co.jp/techblog/
リーン開発チームとは？ 仕事の中身編

5. 5
案件種別
サービスAの案件数
リファクタ
本番リリース
リファクタ等
A/Bテスト
サービス規模に応じて、小規模な改善チームを作り、
年間合計で500件以上のサイト改善を行っています
リーン開発チームとは？ サービス規模編

6. リーン開発チームの基本的なワークフロー
• １
6
各画面ごとにA/Bテスト案件を週次でリリース
A/Bテストの結果をもとに更なる打ち手を検討しPDCAサイクルを廻す
企画
分析
バックログの優
先順位付け A/Bテスト実施
結果の振り返り
次の打ちて検討
PDCA

7. JiraやConfluenceベースの業務について
Jira/Confluenceの対応 詳細
タスク管理 ◯
チケットの見える化 △ 用意されているダッシュ
ボードのアドオンの限界
チケットの詳細分析 ☓ 分析用ツールは用意され
ていない。Jiraのfilterなど
複数画面同時テストのス
ケジューリング
△ 画面ごとの案件管理が難
しい。バーンダウンの限
界
(C) Recruit □□□□□□□□ Co.,Ltd. All rights reserved.
7
A/Bテストチーム用に最適化されていないのは前提だが、
タスク管理を超えて、案件の分析や見える化については不足感あり
今回はAtlassian関係者もいらっしゃるということで、
この部分についての課題感の共有と、現行の対策について話します
※将来的にjiraサービスもしくは、公式無料アドオンに組み込まれることを希望

8. 今回のテーマ
8
Jiraのデータを可視化して、
プロダクトやチーム改善につなげる事例の紹介
※今回はたまたま、NW的に社内で扱いやすくなっている
プロダクトを使ったのみで それぞれは
フリーソフトでもある程度できると思います。

9. Jira運用における課題感まとめ
① 案件運用に対する課題
② 案件の見える化についての課題
③ 振り返りについての課題
(C) Recruit □□□□□□□□ Co.,Ltd. All rights reserved.
9

10. 何故このテーマに至ったか？①案件運用についての課題
10
週次リリースを複数サービス、複数画面で行うと
スケジュール管理や運用がかなり大変
・JiraのWBSガントチャートはデータ件数に制約あり
・ダッシュボード運用は、案件ごとの依存表が
見えづらい
⇒コンフルのテーブルでスケジュール管理している
ところもある。

11. 何故このテーマに至ったか？②案件の見える化についての課題
11
セグメントごと集計でJQLフィルタがどんどん増えていく。。
⇒ダッシュボードの限界
⇒期間集計など、ガジェットの限界。
基本プリセットのガジェット以上のことはできない。
⇒JQLのお気に入りフィルタが
どんどん増えていってしまう

12. 何故このテーマに至ったか？③振り返りについての課題
12
Jiraのデータの振り返り用にCSVをエクスポートは可能。
但しピボットや気合のif文地獄。 APIもあるが実装が必要。
・ダッシュボードの限界。二次元フィルタが限界なので、CSVと戦う必要あり
・エクスポートしたエクセルが実はHTMLで保存されていて、凝った関数
を作った挙句、開いたら関数がすべて吹っ飛んでしまった。。
・サービスごとに、fixversionの定義が微妙に違ったりしていて、横並びの
比較がかなりしんどい。。

13. これまでの課題に対して行ったこと
13
エクスポートしたCSVのエクセル集計という負に対して
集計や見える化に強いTableauを試してみた
⇒実際エクセル集計で
数時間かかったことが、5分くらいで済ませることできた。
・実際やったことや、CSVの出力、tableauに読み込ませて集計。

14. 補足) Tableauとは？
14
データ分析と視覚化を高速にできるBIソリューション
http://www.tableau.com/ja-jp/products/desktop

15. 出てきた課題 常に変化していくJiraのデータの更新を取り込めない
15
毎回CSVエクスポートするというのは手間がかかる
⇒自動化できないか？
⇒Analytics チームに相談したら、ライトにできますよとのこと。
・tableauで繋げられるデータストア先に特定のJQLで更新していく
Analytics T 岡田氏
自動化したいです
カラム教えてください
対象カラムです
できました。
この間、1-2週間くらい

16. システム構成について
16
１．必要なJQLをプロジェクトごとに定義。
２、Jiraの更新時間を見て、定期的にredshiftにupsert
マスターデータ
CSV
バッチサーバ
JQL発行
RedShiftに
upsert
ストアしたデータを
タブローから参照。
必要なマスターは別途作って結合

17. 取り組んだこと、得られたこと (目標と実績の進捗について)
17
期ごとの目標を月や週に割って進捗を見える化することで、
予実をわかりやすくし、案件の方向性などの分析に活用
サービス毎に、今どういう状況かを見える化することで、
期末のバタバタ感が減り、予実に対しての方針検討がしやすくなる。

18. 取り組んだこと、得られたこと 勝った案件の横展開
18
成功事例と貢献度合い、合計時間数の対応表など
サービス横断で見ることができるようになった。
A/Bテストで勝った案件のうち、規模が小さくて効果が高いものを
視覚化。横展開可能に

19. 取り組んだこと、得られたこと 画面毎の案件管理をスムーズに
19
画面ごとのテスト期間とリリース日をいれることで、
テスト画面、スケジュールの見える化が可能
デバイス、画面ごとにテスト期間とリリース時期をいれることで、
テストの画面被りなどを視覚化して把握する。

20. ここで実演
20

21. Jiraの集計や見える化が高速で、かつ自動で行えるようになった
Jira/Confluenceの対応 詳細
タスク管理 ◯
チケットの見える化
△⇒◯ 用意されているダッシュ
ボードのアドオンの限界
チケットの詳細分析
☓⇒◯ 分析用ツールは用意され
ていない。Jiraのfilterなど
複数画面同時テストのス
ケジューリング
△⇒◯ 画面ごとの案件管理が難
しい。バーンダウンの限
界
(C) Recruit □□□□□□□□ Co.,Ltd. All rights reserved.
21
元々の課題は解消はされたが、
Jira側で今回の機能が提供されることを切に希望します。

22. 伝えたいこと
• 定量的なデータはJiraに残していこう
そうすることで
• Jiraのデータは「宝の山」になっていく
タスク管理チケットが未来の糧に！
深い分析や、予測、異常検知にも応用できる
データ・ドリブンなチームに！
(C) Recruit Life Style Co.,Ltd. All rights reserved.
22

23. 今後行いたいこと
23
① 案件結果の分析、見える化を行い施策展開のネタにする
• 過去データをもとにROIが高い案件は何か？
• どのサービスのどの案件が投資効率がよかったか？
• 施策展開もデータドリブンに
• チームを超えて、ノウハウや進捗の横展開
② 必要なデータは適宜レポート、ダッシュボード化
• 誰もがすぐに見えるように
• 全員がライセンス持っているわけではないため
⇒実はTableau reader(無料)配布はフィジビリ中
③ 分析データとコンフルの連携の簡易化
• Hipchat/hubot連携など 目標と実績の乖離など

24. 応用編: 溜まったデータをサービス開発に活かしていく
24
① Jiraで管理しているQAの打ち上げバグの集計、分析
⇒どの画面でどのタイプのバグが出ているか？
どのくらいの対応時間がかかっているか？
② 各サブタスクの見積もりと実績の予実を可視化
⇒Jiraにデータを保持していくことで見えなかったデータを
見える化し見える化、分析、そして改善につなげられる

25. 今回のテーマのおさらい
25
JiraをAWSとBI(Tableau)で可視化して、
プロダクトやチーム改善につなげる
⇒Jiraのデータを有効活用しデータドリブンな体制に！

26. 26
ご清聴ありがとうございました