Tableau Desktop データ準備の新機能: ユニオン、ピボット、データインタープリタ、など

1. データ準備の新機能: ユニオン、ピボット、データインタープリタ、など～データソースページの便利機能を使い倒せ!! ～芦谷隆介 Sales Consultant | Tableau Japan K.K. # N e w I n D a t a P r e p

2. 「データ準備」とは？

4. https://twitter.com/bigdataborat/status/306596352991830016 「80%」という数字は、DJ Patil 博士によるものです。 DJ Patil 博士は、米国のホワイトハウス科学技術政策局の主任データサイエンティストです。 http://radar.oreilly.com/2012/07/data-jujitsu.html https://www.linkedin.com/in/dpatil

5. Tableau ソリューションの活用により、「作業から分析へ、高付加価値へシフト、さらには働き方の改革へ」 • 時間コストの削減 • スピードの向上 • 正確性と分析品質の向上 • キーワードは「自動化」 • 残業の削減 • 働く時間と場所を柔軟に

6. 1. 「データ準備」とは？ 2. Tableau データ準備機能の進化 3. デモ: 実例によるデータ準備機能の紹介 • PDFコネクタによる、データディスカバリ • データインタープリタによる、データクリーニング • ユニオンによる、データ取得 • ピボット・分割による、データ整形 • 番外編: マージ、自動DATEPARSE 4. まとめ自習のためのリンク集バックアップスライド: Tableau データ準備機能の進化 - 主要機能の補足

8. 9.2 (2015/12) 9.3 (2016/03) 視覚的なデータウィンドウメタデータグリッドデータグリッド編集データグリッドでの抽出とWDC データインタープリタ (Excel スプレッドシート) データインタープリタ (サブテーブル検出) データインタープリタ (Google スプレッドシート) データインタープリタ (PDF) データインタープリタ (CSV, TXT) 視覚的な結合ピボットした列の結合クロスデータベース結合計算による結合ユニオンワイルドカードユニオンデータベースユニオン連合ユニオンピボット複数ピボット分割マージ自動 DATEPARSE

9. • Join は列を追加 • Unionは行を追加

10. PDFコネクタによる、データディスカバリ

11. 本セッションでは、ベータテスト中の新機能を交えたご紹介をしておりますが、 • 当該新機能のリリースは、確約できかねます • また、リリース時期についても、確約できかねます • お問い合わせは https://www.tableau.com/getbeta

12. 目標: • 米国のエネルギー生産量を、年別・資源別・州別に可視化し、理解を深めるデータソース: • State Energy Production Estimates - 1960 Through 2014 https://www.eia.gov/state/seds/sep_prod/SEDS_Production_Report.pdf • 2013 Renewable Energy Data Book http://www.nrel.gov/docs/fy15osti/62580.pdf ツール: • Tableau Desktop 10.3 beta1

13. PDFコネクタのねらい: • PDF内の表を検出、複数の表にも対応 • 最小限の作業で表データを取り込む • データの再入力、または外部ツールの使用を避ける以下は非サポート: • 表以外のデータを取得する • 正確なヘッダーを取得する • 完全に自動化する

14. データインタープリタによる、データクリーニング

15. 典型的な雑然さを解消し、データをクリナップ • 複数の表を識別（サブテーブルの検出） • ノート・タイトル・コメントを削除 • 階層化されたヘッダ類をマージ • 空の行や列（セル結合）への対処、など対応するデータ形式 • Excel • Google • PDF (v10.3予定) 以下には未対応 • 合計 • 階層 • バッチ処理

17. カスタマイズも可能サブテーブルを検出元データ

18. ユニオンによる、データ取得

19. (1) 列を - 最初に一致する列 - 一致しない列(null) - ヘルパー列 (2) 型の違いを解決

20. パターン適合のオプション: - 既定ディレクトリのファイル - 簡単なパターンに適合するシート名 (Excel向け) - 簡単なパターンに適合するファイル名 (xxx*) - サブフォルダを含める - 親フォルダを含める

21. ファイルベースユニオンのデータフロー • ユニオンはバッチ処理のため高コスト • ユニオン後のデータは、TDE内の１つの結果テーブルとして保持

22. ユニオンの再構築を要するケースに注意: • ユニオンプロパティ (テキストファイルプロパティ) の変更 • 列のデータ型の変更 • 既存ユニオンからファイルの削除

23. • 一致しない列の問題を解決 • データヘッダの相違 (特にユニオンにおいて発生) • データ解釈の不具合 • 元の列をそのまま残さない • 元に戻す(undo)も可能

24. ピボット・分割による、データ整形

25. • クロス集計表を、縦型( )データに変換 • メジャーデータの集約による、分析作業の利便性向上 • アンケート調査や時系列データに対してよく用いられる

26. • 分割 • [分割]は、自動的に分割 • 期待した結果通りかどうか、確認が必要 • カスタム分割 • [カスタム分割]は、ユーザーの指示により分割 • 区切り文字を指定 • 区分する数を指定

27. 認識 • 元データの書式設定を自動解釈 (日付形式は250通り以上を解釈) • データ型を自動変換（例: [文字列] → [日付] or [日付と時刻]） • CSV、Excel、TDE、MySQL、Postgres、Oracle をサポート書式の異なる行が混在しても、解釈OK

29. Tableauに「PDFコネクタ」がなかったら… データの再入力に、膨大な手間が必要となるでしょう

30. Tableauに「データインタープリタ」がなかったら… データ整形のために、膨大な手間が必要となるでしょう

32. まとめ • データ準備は難しく、また大きな手間がかかる • Tableauは、新バージョンのリリースごとに、その手間を簡単にしてきた • 今後のデータ準備に関する新機能や新ツールにも、是非ご期待下さい！

33. https://www.tableau.com/project-maestro

35. https://www.tableau.com/coming-soon/10.3#tab-data-1 https://onlinehelp.tableau.com/v10.3/pro/desktop/en-us/help.html#examples_pdf.html https://www.tableau.com/ja-jp/new-features/9.0#tab-data-preparation-2 https://onlinehelp.tableau.com/v10.3/pro/desktop/en-us/help.html#data_interpreter.html http://onlinehelp.tableau.com/v10.3/pro/desktop/en-us/help.html#union.html https://www.tableau.com/ja-jp/new-features/10.2#tab-data-2 https://onlinehelp.tableau.com/current/pro/desktop/ja-jp/help.html#pivot.html https://onlinehelp.tableau.com/current/pro/desktop/ja-jp/help.html#split.html https://www.tableau.com/ja-jp/about/blog/2015/1/tableau-90-auto-data-prep-stay-flow-35980 https://www.tableau.com/project-maestro https://www.tableau.com/about/blog/2016/11/tc16-vision-keynote-62104

36. セッションサーベイにご協力下さい

37. Tableau データ準備機能の進化主要機能の補足おことわり: v10.0最新版リリース時における資料となります ◆ バックアップスライド

38. 9.2 (12/15) 9.3 (3/16) 視覚的なデータウィンドウメタデータグリッドデータグリッド編集データグリッドでの抽出 & WDC Excel 向けのデータインタープリタサブテーブルの検出 Google スプレッドシート (データインタープリタ使用可) CSV、TXT、PDF 向けのデータインタープリタ視覚的な結合ピボットした列の結合クロス DB 結合計算の結合ユニオンワイルドカードユニオン DB ユニオン連合ユニオンピボット複数ピボット分割マージ自動 DATEPARSE

Tableau Desktop データ準備の新機能: ユニオン、ピボット、データインタープリタ、など

Recommended

Recommended

More Related Content

What's hot

What's hot (20)

Similar to Tableau Desktop データ準備の新機能: ユニオン、ピボット、データインタープリタ、など

Similar to Tableau Desktop データ準備の新機能: ユニオン、ピボット、データインタープリタ、など (20)

More from Ryusuke Ashiya

More from Ryusuke Ashiya (9)

Tableau Desktop データ準備の新機能: ユニオン、ピボット、データインタープリタ、など