Soumettre la recherche
Mettre en ligne
Storm×couchbase serverで作るリアルタイム解析基盤
•
4 j'aime
•
4,554 vues
NTT Communications Technology Development
Suivre
Couchbase MeetUP Tokyo - #14での発表資料です。
Lire moins
Lire la suite
Technologie
Signaler
Partager
Signaler
Partager
1 sur 45
Télécharger maintenant
Télécharger pour lire hors ligne
Recommandé
DBTS2015 Tokyo DBAが知っておくべき最新テクノロジー
DBTS2015 Tokyo DBAが知っておくべき最新テクノロジー
Masaya Ishikawa
[db tech showcase Tokyo 2015] B15:最新PostgreSQLはパフォーマンスが飛躍的に向上する!? - PostgreSQ...
[db tech showcase Tokyo 2015] B15:最新PostgreSQLはパフォーマンスが飛躍的に向上する!? - PostgreSQ...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] D16:マイケルストーンブレーカー発の超高速データベースで実現する分析基盤の簡単構築・運用ステ...
[db tech showcase Tokyo 2015] D16:マイケルストーンブレーカー発の超高速データベースで実現する分析基盤の簡単構築・運用ステ...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] B24:最高峰の可用性 ~NonStop SQLが止まらない理由~ by 日本ヒューレット・パ...
[db tech showcase Tokyo 2015] B24:最高峰の可用性 ~NonStop SQLが止まらない理由~ by 日本ヒューレット・パ...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] B34:データの仮想化を具体化するIBMのロジカルデータウェアハウス by 日本アイ・ビー・エ...
[db tech showcase Tokyo 2015] B34:データの仮想化を具体化するIBMのロジカルデータウェアハウス by 日本アイ・ビー・エ...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] D32:HPの全方位インメモリDB化に向けた取り組みとSAP HANAインメモリDB の効果を...
[db tech showcase Tokyo 2015] D32:HPの全方位インメモリDB化に向けた取り組みとSAP HANAインメモリDB の効果を...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] C17:MySQL Cluster ユーザー事例紹介~JR東日本情報システム様における導入事例...
[db tech showcase Tokyo 2015] C17:MySQL Cluster ユーザー事例紹介~JR東日本情報システム様における導入事例...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] D13:PCIeフラッシュで、高可用性高性能データベースシステム?! by 株式会社HGSTジ...
[db tech showcase Tokyo 2015] D13:PCIeフラッシュで、高可用性高性能データベースシステム?! by 株式会社HGSTジ...
Insight Technology, Inc.
Recommandé
DBTS2015 Tokyo DBAが知っておくべき最新テクノロジー
DBTS2015 Tokyo DBAが知っておくべき最新テクノロジー
Masaya Ishikawa
[db tech showcase Tokyo 2015] B15:最新PostgreSQLはパフォーマンスが飛躍的に向上する!? - PostgreSQ...
[db tech showcase Tokyo 2015] B15:最新PostgreSQLはパフォーマンスが飛躍的に向上する!? - PostgreSQ...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] D16:マイケルストーンブレーカー発の超高速データベースで実現する分析基盤の簡単構築・運用ステ...
[db tech showcase Tokyo 2015] D16:マイケルストーンブレーカー発の超高速データベースで実現する分析基盤の簡単構築・運用ステ...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] B24:最高峰の可用性 ~NonStop SQLが止まらない理由~ by 日本ヒューレット・パ...
[db tech showcase Tokyo 2015] B24:最高峰の可用性 ~NonStop SQLが止まらない理由~ by 日本ヒューレット・パ...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] B34:データの仮想化を具体化するIBMのロジカルデータウェアハウス by 日本アイ・ビー・エ...
[db tech showcase Tokyo 2015] B34:データの仮想化を具体化するIBMのロジカルデータウェアハウス by 日本アイ・ビー・エ...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] D32:HPの全方位インメモリDB化に向けた取り組みとSAP HANAインメモリDB の効果を...
[db tech showcase Tokyo 2015] D32:HPの全方位インメモリDB化に向けた取り組みとSAP HANAインメモリDB の効果を...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] C17:MySQL Cluster ユーザー事例紹介~JR東日本情報システム様における導入事例...
[db tech showcase Tokyo 2015] C17:MySQL Cluster ユーザー事例紹介~JR東日本情報システム様における導入事例...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] D13:PCIeフラッシュで、高可用性高性能データベースシステム?! by 株式会社HGSTジ...
[db tech showcase Tokyo 2015] D13:PCIeフラッシュで、高可用性高性能データベースシステム?! by 株式会社HGSTジ...
Insight Technology, Inc.
Dbts 分散olt pv2
Dbts 分散olt pv2
Takashi Kambayashi
[db tech showcase Tokyo 2015] C32:「データ一貫性にこだわる日立のインメモリ分散KVS~こだわりの理由と実現方法とは~」 ...
[db tech showcase Tokyo 2015] C32:「データ一貫性にこだわる日立のインメモリ分散KVS~こだわりの理由と実現方法とは~」 ...
Insight Technology, Inc.
[db tech showcase Sapporo 2015] A12:DBAが知っておくべき最新テクノロジー: フラッシュ, ストレージ, クラウド b...
[db tech showcase Sapporo 2015] A12:DBAが知っておくべき最新テクノロジー: フラッシュ, ストレージ, クラウド b...
Insight Technology, Inc.
[db tech showcase Tokyo 2016] B22: 超高速NoSQLデータベースと超高速SSDの融合 by Aerospike Inc....
[db tech showcase Tokyo 2016] B22: 超高速NoSQLデータベースと超高速SSDの融合 by Aerospike Inc....
Insight Technology, Inc.
[db tech showcase Tokyo 2015] D33:Superdome X 上の SQL Server 2014 OLTP 検証結果と S...
[db tech showcase Tokyo 2015] D33:Superdome X 上の SQL Server 2014 OLTP 検証結果と S...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] E27: Neo4jグラフデータベース by クリエーションライン株式会社 李昌桓
[db tech showcase Tokyo 2015] E27: Neo4jグラフデータベース by クリエーションライン株式会社 李昌桓
Insight Technology, Inc.
[db tech showcase Tokyo 2015] B36:Hitachi Advanced Data Binder 実践SQLチューニング方法 ...
[db tech showcase Tokyo 2015] B36:Hitachi Advanced Data Binder 実践SQLチューニング方法 ...
Insight Technology, Inc.
[db tech showcase Tokyo 2016] E33: こんな方法あり!? 何でもありです! インフラストラクチャレベルインメモリコンピュー...
[db tech showcase Tokyo 2016] E33: こんな方法あり!? 何でもありです! インフラストラクチャレベルインメモリコンピュー...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] D35:高トランザクションを実現するスケーラブルRDBMS技術 by 日本電気株式会社 並木悠太
[db tech showcase Tokyo 2015] D35:高トランザクションを実現するスケーラブルRDBMS技術 by 日本電気株式会社 並木悠太
Insight Technology, Inc.
Dbts2015 tokyo vector_in_hadoop_vortex
Dbts2015 tokyo vector_in_hadoop_vortex
Koji Shinkubo
DBTS2016 DBAのための最新テクノロジー
DBTS2016 DBAのための最新テクノロジー
Masaya Ishikawa
[db tech showcase Tokyo 2014] C25: Facebookが採用した世界最大級の分析基盤とは? by 日本ヒューレット・パッ...
[db tech showcase Tokyo 2014] C25: Facebookが採用した世界最大級の分析基盤とは? by 日本ヒューレット・パッ...
Insight Technology, Inc.
[db tech showcase Tokyo 2014] L34: そのデータベース 5年後大丈夫ですか by 日本ヒューレット・パッカード株式会社 後藤宏
[db tech showcase Tokyo 2014] L34: そのデータベース 5年後大丈夫ですか by 日本ヒューレット・パッカード株式会社 後藤宏
Insight Technology, Inc.
[db tech showcase Tokyo 2015] B17:PostgreSQLで動的にスケールアウト可能な負荷分散DBクラスタを作ろう! by ...
[db tech showcase Tokyo 2015] B17:PostgreSQLで動的にスケールアウト可能な負荷分散DBクラスタを作ろう! by ...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] B12:カラムストアデータベースの技術と活用法 by 日本電気株式会社 田村稔
[db tech showcase Tokyo 2015] B12:カラムストアデータベースの技術と活用法 by 日本電気株式会社 田村稔
Insight Technology, Inc.
[db tech showcase Tokyo 2016] D32: SPARCサーバ + Pure Storage DB仮想化のすべらない話 〜 Exa...
[db tech showcase Tokyo 2016] D32: SPARCサーバ + Pure Storage DB仮想化のすべらない話 〜 Exa...
Insight Technology, Inc.
[db tech showcase Tokyo 2016] D13: NVMeフラッシュストレージを用いた高性能高拡張高可用なデータベースシステムの実現方...
[db tech showcase Tokyo 2016] D13: NVMeフラッシュストレージを用いた高性能高拡張高可用なデータベースシステムの実現方...
Insight Technology, Inc.
[db tech showcase Tokyo 2014] D21: Postgres Plus Advanced Serverはここが使える&9.4新機...
[db tech showcase Tokyo 2014] D21: Postgres Plus Advanced Serverはここが使える&9.4新機...
Insight Technology, Inc.
[db tech showcase Sapporo 2015] B14:データベース環境における検証結果から理解する失敗しないフラッシュ活用法 第二章 b...
[db tech showcase Sapporo 2015] B14:データベース環境における検証結果から理解する失敗しないフラッシュ活用法 第二章 b...
Insight Technology, Inc.
[db tech showcase Tokyo 2016] A12: フラッシュストレージのその先へ ~不揮発性メモリNVDIMMが拓くデータベースの世界...
[db tech showcase Tokyo 2016] A12: フラッシュストレージのその先へ ~不揮発性メモリNVDIMMが拓くデータベースの世界...
Insight Technology, Inc.
Apache Hiveの今とこれから
Apache Hiveの今とこれから
Yifeng Jiang
[db tech showcase Tokyo 2015] C33:ビッグデータ・IoT時代のキーテクノロジー、CEPの「今」を掴む! by 株式会社日立...
[db tech showcase Tokyo 2015] C33:ビッグデータ・IoT時代のキーテクノロジー、CEPの「今」を掴む! by 株式会社日立...
Insight Technology, Inc.
Contenu connexe
Tendances
Dbts 分散olt pv2
Dbts 分散olt pv2
Takashi Kambayashi
[db tech showcase Tokyo 2015] C32:「データ一貫性にこだわる日立のインメモリ分散KVS~こだわりの理由と実現方法とは~」 ...
[db tech showcase Tokyo 2015] C32:「データ一貫性にこだわる日立のインメモリ分散KVS~こだわりの理由と実現方法とは~」 ...
Insight Technology, Inc.
[db tech showcase Sapporo 2015] A12:DBAが知っておくべき最新テクノロジー: フラッシュ, ストレージ, クラウド b...
[db tech showcase Sapporo 2015] A12:DBAが知っておくべき最新テクノロジー: フラッシュ, ストレージ, クラウド b...
Insight Technology, Inc.
[db tech showcase Tokyo 2016] B22: 超高速NoSQLデータベースと超高速SSDの融合 by Aerospike Inc....
[db tech showcase Tokyo 2016] B22: 超高速NoSQLデータベースと超高速SSDの融合 by Aerospike Inc....
Insight Technology, Inc.
[db tech showcase Tokyo 2015] D33:Superdome X 上の SQL Server 2014 OLTP 検証結果と S...
[db tech showcase Tokyo 2015] D33:Superdome X 上の SQL Server 2014 OLTP 検証結果と S...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] E27: Neo4jグラフデータベース by クリエーションライン株式会社 李昌桓
[db tech showcase Tokyo 2015] E27: Neo4jグラフデータベース by クリエーションライン株式会社 李昌桓
Insight Technology, Inc.
[db tech showcase Tokyo 2015] B36:Hitachi Advanced Data Binder 実践SQLチューニング方法 ...
[db tech showcase Tokyo 2015] B36:Hitachi Advanced Data Binder 実践SQLチューニング方法 ...
Insight Technology, Inc.
[db tech showcase Tokyo 2016] E33: こんな方法あり!? 何でもありです! インフラストラクチャレベルインメモリコンピュー...
[db tech showcase Tokyo 2016] E33: こんな方法あり!? 何でもありです! インフラストラクチャレベルインメモリコンピュー...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] D35:高トランザクションを実現するスケーラブルRDBMS技術 by 日本電気株式会社 並木悠太
[db tech showcase Tokyo 2015] D35:高トランザクションを実現するスケーラブルRDBMS技術 by 日本電気株式会社 並木悠太
Insight Technology, Inc.
Dbts2015 tokyo vector_in_hadoop_vortex
Dbts2015 tokyo vector_in_hadoop_vortex
Koji Shinkubo
DBTS2016 DBAのための最新テクノロジー
DBTS2016 DBAのための最新テクノロジー
Masaya Ishikawa
[db tech showcase Tokyo 2014] C25: Facebookが採用した世界最大級の分析基盤とは? by 日本ヒューレット・パッ...
[db tech showcase Tokyo 2014] C25: Facebookが採用した世界最大級の分析基盤とは? by 日本ヒューレット・パッ...
Insight Technology, Inc.
[db tech showcase Tokyo 2014] L34: そのデータベース 5年後大丈夫ですか by 日本ヒューレット・パッカード株式会社 後藤宏
[db tech showcase Tokyo 2014] L34: そのデータベース 5年後大丈夫ですか by 日本ヒューレット・パッカード株式会社 後藤宏
Insight Technology, Inc.
[db tech showcase Tokyo 2015] B17:PostgreSQLで動的にスケールアウト可能な負荷分散DBクラスタを作ろう! by ...
[db tech showcase Tokyo 2015] B17:PostgreSQLで動的にスケールアウト可能な負荷分散DBクラスタを作ろう! by ...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] B12:カラムストアデータベースの技術と活用法 by 日本電気株式会社 田村稔
[db tech showcase Tokyo 2015] B12:カラムストアデータベースの技術と活用法 by 日本電気株式会社 田村稔
Insight Technology, Inc.
[db tech showcase Tokyo 2016] D32: SPARCサーバ + Pure Storage DB仮想化のすべらない話 〜 Exa...
[db tech showcase Tokyo 2016] D32: SPARCサーバ + Pure Storage DB仮想化のすべらない話 〜 Exa...
Insight Technology, Inc.
[db tech showcase Tokyo 2016] D13: NVMeフラッシュストレージを用いた高性能高拡張高可用なデータベースシステムの実現方...
[db tech showcase Tokyo 2016] D13: NVMeフラッシュストレージを用いた高性能高拡張高可用なデータベースシステムの実現方...
Insight Technology, Inc.
[db tech showcase Tokyo 2014] D21: Postgres Plus Advanced Serverはここが使える&9.4新機...
[db tech showcase Tokyo 2014] D21: Postgres Plus Advanced Serverはここが使える&9.4新機...
Insight Technology, Inc.
[db tech showcase Sapporo 2015] B14:データベース環境における検証結果から理解する失敗しないフラッシュ活用法 第二章 b...
[db tech showcase Sapporo 2015] B14:データベース環境における検証結果から理解する失敗しないフラッシュ活用法 第二章 b...
Insight Technology, Inc.
[db tech showcase Tokyo 2016] A12: フラッシュストレージのその先へ ~不揮発性メモリNVDIMMが拓くデータベースの世界...
[db tech showcase Tokyo 2016] A12: フラッシュストレージのその先へ ~不揮発性メモリNVDIMMが拓くデータベースの世界...
Insight Technology, Inc.
Tendances
(20)
Dbts 分散olt pv2
Dbts 分散olt pv2
[db tech showcase Tokyo 2015] C32:「データ一貫性にこだわる日立のインメモリ分散KVS~こだわりの理由と実現方法とは~」 ...
[db tech showcase Tokyo 2015] C32:「データ一貫性にこだわる日立のインメモリ分散KVS~こだわりの理由と実現方法とは~」 ...
[db tech showcase Sapporo 2015] A12:DBAが知っておくべき最新テクノロジー: フラッシュ, ストレージ, クラウド b...
[db tech showcase Sapporo 2015] A12:DBAが知っておくべき最新テクノロジー: フラッシュ, ストレージ, クラウド b...
[db tech showcase Tokyo 2016] B22: 超高速NoSQLデータベースと超高速SSDの融合 by Aerospike Inc....
[db tech showcase Tokyo 2016] B22: 超高速NoSQLデータベースと超高速SSDの融合 by Aerospike Inc....
[db tech showcase Tokyo 2015] D33:Superdome X 上の SQL Server 2014 OLTP 検証結果と S...
[db tech showcase Tokyo 2015] D33:Superdome X 上の SQL Server 2014 OLTP 検証結果と S...
[db tech showcase Tokyo 2015] E27: Neo4jグラフデータベース by クリエーションライン株式会社 李昌桓
[db tech showcase Tokyo 2015] E27: Neo4jグラフデータベース by クリエーションライン株式会社 李昌桓
[db tech showcase Tokyo 2015] B36:Hitachi Advanced Data Binder 実践SQLチューニング方法 ...
[db tech showcase Tokyo 2015] B36:Hitachi Advanced Data Binder 実践SQLチューニング方法 ...
[db tech showcase Tokyo 2016] E33: こんな方法あり!? 何でもありです! インフラストラクチャレベルインメモリコンピュー...
[db tech showcase Tokyo 2016] E33: こんな方法あり!? 何でもありです! インフラストラクチャレベルインメモリコンピュー...
[db tech showcase Tokyo 2015] D35:高トランザクションを実現するスケーラブルRDBMS技術 by 日本電気株式会社 並木悠太
[db tech showcase Tokyo 2015] D35:高トランザクションを実現するスケーラブルRDBMS技術 by 日本電気株式会社 並木悠太
Dbts2015 tokyo vector_in_hadoop_vortex
Dbts2015 tokyo vector_in_hadoop_vortex
DBTS2016 DBAのための最新テクノロジー
DBTS2016 DBAのための最新テクノロジー
[db tech showcase Tokyo 2014] C25: Facebookが採用した世界最大級の分析基盤とは? by 日本ヒューレット・パッ...
[db tech showcase Tokyo 2014] C25: Facebookが採用した世界最大級の分析基盤とは? by 日本ヒューレット・パッ...
[db tech showcase Tokyo 2014] L34: そのデータベース 5年後大丈夫ですか by 日本ヒューレット・パッカード株式会社 後藤宏
[db tech showcase Tokyo 2014] L34: そのデータベース 5年後大丈夫ですか by 日本ヒューレット・パッカード株式会社 後藤宏
[db tech showcase Tokyo 2015] B17:PostgreSQLで動的にスケールアウト可能な負荷分散DBクラスタを作ろう! by ...
[db tech showcase Tokyo 2015] B17:PostgreSQLで動的にスケールアウト可能な負荷分散DBクラスタを作ろう! by ...
[db tech showcase Tokyo 2015] B12:カラムストアデータベースの技術と活用法 by 日本電気株式会社 田村稔
[db tech showcase Tokyo 2015] B12:カラムストアデータベースの技術と活用法 by 日本電気株式会社 田村稔
[db tech showcase Tokyo 2016] D32: SPARCサーバ + Pure Storage DB仮想化のすべらない話 〜 Exa...
[db tech showcase Tokyo 2016] D32: SPARCサーバ + Pure Storage DB仮想化のすべらない話 〜 Exa...
[db tech showcase Tokyo 2016] D13: NVMeフラッシュストレージを用いた高性能高拡張高可用なデータベースシステムの実現方...
[db tech showcase Tokyo 2016] D13: NVMeフラッシュストレージを用いた高性能高拡張高可用なデータベースシステムの実現方...
[db tech showcase Tokyo 2014] D21: Postgres Plus Advanced Serverはここが使える&9.4新機...
[db tech showcase Tokyo 2014] D21: Postgres Plus Advanced Serverはここが使える&9.4新機...
[db tech showcase Sapporo 2015] B14:データベース環境における検証結果から理解する失敗しないフラッシュ活用法 第二章 b...
[db tech showcase Sapporo 2015] B14:データベース環境における検証結果から理解する失敗しないフラッシュ活用法 第二章 b...
[db tech showcase Tokyo 2016] A12: フラッシュストレージのその先へ ~不揮発性メモリNVDIMMが拓くデータベースの世界...
[db tech showcase Tokyo 2016] A12: フラッシュストレージのその先へ ~不揮発性メモリNVDIMMが拓くデータベースの世界...
En vedette
Apache Hiveの今とこれから
Apache Hiveの今とこれから
Yifeng Jiang
[db tech showcase Tokyo 2015] C33:ビッグデータ・IoT時代のキーテクノロジー、CEPの「今」を掴む! by 株式会社日立...
[db tech showcase Tokyo 2015] C33:ビッグデータ・IoT時代のキーテクノロジー、CEPの「今」を掴む! by 株式会社日立...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] B27:インメモリーDBとスケールアップマシンによりBig Dataの課題を解決する by S...
[db tech showcase Tokyo 2015] B27:インメモリーDBとスケールアップマシンによりBig Dataの課題を解決する by S...
Insight Technology, Inc.
Presto in Treasure Data
Presto in Treasure Data
Mitsunori Komatsu
[db tech showcase Tokyo 2015] C16:Oracle Disaster Recovery at New Zealand sto...
[db tech showcase Tokyo 2015] C16:Oracle Disaster Recovery at New Zealand sto...
Insight Technology, Inc.
Db tech show - hivemall
Db tech show - hivemall
Makoto Yui
[db tech showcase Tokyo 2015] E35: Web, IoT, モバイル時代のデータベース、Apache Cassandraを学ぼう
[db tech showcase Tokyo 2015] E35: Web, IoT, モバイル時代のデータベース、Apache Cassandraを学ぼう
datastaxjp
[db tech showcase Tokyo 2015] C14:30万のユーザ部門を抱える日立、情シスの「理想と現実」 by 株式会社日立製作所 情報...
[db tech showcase Tokyo 2015] C14:30万のユーザ部門を抱える日立、情シスの「理想と現実」 by 株式会社日立製作所 情報...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] D25:The difference between logical and physical...
[db tech showcase Tokyo 2015] D25:The difference between logical and physical...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] C15:DevOps MySQL in カカクコム~ OSSによる可用性担保とリアルタイムパフ...
[db tech showcase Tokyo 2015] C15:DevOps MySQL in カカクコム~ OSSによる可用性担保とリアルタイムパフ...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] A27: RDBエンジニアの為のNOSQL, 今どうしてNOSQLなのか?
[db tech showcase Tokyo 2015] A27: RDBエンジニアの為のNOSQL, 今どうしてNOSQLなのか?
datastaxjp
[db tech showcase Tokyo 2015] B16:最新版PostgreSQLのパフォーマンスを引き出すためのポイント by Postgr...
[db tech showcase Tokyo 2015] B16:最新版PostgreSQLのパフォーマンスを引き出すためのポイント by Postgr...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] E26 Couchbaseの最新情報/JBoss Data Virtualizationで仮想...
[db tech showcase Tokyo 2015] E26 Couchbaseの最新情報/JBoss Data Virtualizationで仮想...
Masahiro Tomisugi
Apache Drill で JSON 形式の オープンデータを分析してみる - db tech showcase Tokyo 2015 2015/06/11
Apache Drill で JSON 形式の オープンデータを分析してみる - db tech showcase Tokyo 2015 2015/06/11
MapR Technologies Japan
[db tech showcase Tokyo 2015] D22:インメモリープラットホームSAP HANAのご紹介と最新情報 by SAPジャパン株式...
[db tech showcase Tokyo 2015] D22:インメモリープラットホームSAP HANAのご紹介と最新情報 by SAPジャパン株式...
Insight Technology, Inc.
Couchbase introduction-20150611
Couchbase introduction-20150611
Couchbase Japan KK
[db tech showcase Tokyo 2015] A26:内部犯行による漏えいを防ぐPostgreSQLの透過的暗号化機能に関する実装と利用方法...
[db tech showcase Tokyo 2015] A26:内部犯行による漏えいを防ぐPostgreSQLの透過的暗号化機能に関する実装と利用方法...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] A32:Amazon Redshift Deep Dive by アマゾン データ サービス ...
[db tech showcase Tokyo 2015] A32:Amazon Redshift Deep Dive by アマゾン データ サービス ...
Insight Technology, Inc.
[db tech showcase Tokyo 2015] A33:Amazon DynamoDB Deep Dive by アマゾン データ サービス ...
[db tech showcase Tokyo 2015] A33:Amazon DynamoDB Deep Dive by アマゾン データ サービス ...
Insight Technology, Inc.
Db tech showcase2015
Db tech showcase2015
emin_press
En vedette
(20)
Apache Hiveの今とこれから
Apache Hiveの今とこれから
[db tech showcase Tokyo 2015] C33:ビッグデータ・IoT時代のキーテクノロジー、CEPの「今」を掴む! by 株式会社日立...
[db tech showcase Tokyo 2015] C33:ビッグデータ・IoT時代のキーテクノロジー、CEPの「今」を掴む! by 株式会社日立...
[db tech showcase Tokyo 2015] B27:インメモリーDBとスケールアップマシンによりBig Dataの課題を解決する by S...
[db tech showcase Tokyo 2015] B27:インメモリーDBとスケールアップマシンによりBig Dataの課題を解決する by S...
Presto in Treasure Data
Presto in Treasure Data
[db tech showcase Tokyo 2015] C16:Oracle Disaster Recovery at New Zealand sto...
[db tech showcase Tokyo 2015] C16:Oracle Disaster Recovery at New Zealand sto...
Db tech show - hivemall
Db tech show - hivemall
[db tech showcase Tokyo 2015] E35: Web, IoT, モバイル時代のデータベース、Apache Cassandraを学ぼう
[db tech showcase Tokyo 2015] E35: Web, IoT, モバイル時代のデータベース、Apache Cassandraを学ぼう
[db tech showcase Tokyo 2015] C14:30万のユーザ部門を抱える日立、情シスの「理想と現実」 by 株式会社日立製作所 情報...
[db tech showcase Tokyo 2015] C14:30万のユーザ部門を抱える日立、情シスの「理想と現実」 by 株式会社日立製作所 情報...
[db tech showcase Tokyo 2015] D25:The difference between logical and physical...
[db tech showcase Tokyo 2015] D25:The difference between logical and physical...
[db tech showcase Tokyo 2015] C15:DevOps MySQL in カカクコム~ OSSによる可用性担保とリアルタイムパフ...
[db tech showcase Tokyo 2015] C15:DevOps MySQL in カカクコム~ OSSによる可用性担保とリアルタイムパフ...
[db tech showcase Tokyo 2015] A27: RDBエンジニアの為のNOSQL, 今どうしてNOSQLなのか?
[db tech showcase Tokyo 2015] A27: RDBエンジニアの為のNOSQL, 今どうしてNOSQLなのか?
[db tech showcase Tokyo 2015] B16:最新版PostgreSQLのパフォーマンスを引き出すためのポイント by Postgr...
[db tech showcase Tokyo 2015] B16:最新版PostgreSQLのパフォーマンスを引き出すためのポイント by Postgr...
[db tech showcase Tokyo 2015] E26 Couchbaseの最新情報/JBoss Data Virtualizationで仮想...
[db tech showcase Tokyo 2015] E26 Couchbaseの最新情報/JBoss Data Virtualizationで仮想...
Apache Drill で JSON 形式の オープンデータを分析してみる - db tech showcase Tokyo 2015 2015/06/11
Apache Drill で JSON 形式の オープンデータを分析してみる - db tech showcase Tokyo 2015 2015/06/11
[db tech showcase Tokyo 2015] D22:インメモリープラットホームSAP HANAのご紹介と最新情報 by SAPジャパン株式...
[db tech showcase Tokyo 2015] D22:インメモリープラットホームSAP HANAのご紹介と最新情報 by SAPジャパン株式...
Couchbase introduction-20150611
Couchbase introduction-20150611
[db tech showcase Tokyo 2015] A26:内部犯行による漏えいを防ぐPostgreSQLの透過的暗号化機能に関する実装と利用方法...
[db tech showcase Tokyo 2015] A26:内部犯行による漏えいを防ぐPostgreSQLの透過的暗号化機能に関する実装と利用方法...
[db tech showcase Tokyo 2015] A32:Amazon Redshift Deep Dive by アマゾン データ サービス ...
[db tech showcase Tokyo 2015] A32:Amazon Redshift Deep Dive by アマゾン データ サービス ...
[db tech showcase Tokyo 2015] A33:Amazon DynamoDB Deep Dive by アマゾン データ サービス ...
[db tech showcase Tokyo 2015] A33:Amazon DynamoDB Deep Dive by アマゾン データ サービス ...
Db tech showcase2015
Db tech showcase2015
Similaire à Storm×couchbase serverで作るリアルタイム解析基盤
【たぶん日本初導入!】Azure Stack Hub with GPUの性能と機能紹介
【たぶん日本初導入!】Azure Stack Hub with GPUの性能と機能紹介
NTT Communications Technology Development
GPU Container as a Service を実現するための最新OSS徹底比較
GPU Container as a Service を実現するための最新OSS徹底比較
NTT Communications Technology Development
【HinemosWorld2015】A1-3_コンテナ技術Dockerの導入事例と完全運用自動化
【HinemosWorld2015】A1-3_コンテナ技術Dockerの導入事例と完全運用自動化
Hinemos
【Hinemos World 2013】B-2:クラウドと共に発展する、Hinemosクラウド管理オプションの最新情報(株式会社NTTデータ)
【Hinemos World 2013】B-2:クラウドと共に発展する、Hinemosクラウド管理オプションの最新情報(株式会社NTTデータ)
Hinemos
20130714 July Tech Festa 日本CloudStackユーザー会
20130714 July Tech Festa 日本CloudStackユーザー会
samemoon
「hbstudy#23 OpenStack祭!!」資料 ~OpenStackプロジェクトの全体像~
「hbstudy#23 OpenStack祭!!」資料 ~OpenStackプロジェクトの全体像~
Masanori Itoh
【HinemosWorld2014】A1-3_01_NTT Comのグローバルクラウド戦略とHinemosとの連携について
【HinemosWorld2014】A1-3_01_NTT Comのグローバルクラウド戦略とHinemosとの連携について
Hinemos
国内初Cloud stack採用のオープンクラウドサービス
国内初Cloud stack採用のオープンクラウドサービス
KajiBook
OSSコミッタの生活とその必要性
OSSコミッタの生活とその必要性
Hirofumi Ichihara
Yahoo!Japan北米DCでOCPのツボをみせてもらってきました - OpenStack最新情報セミナー 2016年5月
Yahoo!Japan北米DCでOCPのツボをみせてもらってきました - OpenStack最新情報セミナー 2016年5月
VirtualTech Japan Inc.
次世代の高速メモリストレージ利用に向けたソフトウェアのモダナイゼーション
次世代の高速メモリストレージ利用に向けたソフトウェアのモダナイゼーション
NTT Software Innovation Center
Cassandra Summit Tokyo 2015 - intra-mart
Cassandra Summit Tokyo 2015 - intra-mart
Akihiro Sei
WebRTCで動かす“テレイグジスタンス”ロボット
WebRTCで動かす“テレイグジスタンス”ロボット
NTT Communications Technology Development
AWS Summit Tokyo 2015_NTTデータセッション(前半:クラウドを活用したオムニチャネル基盤構築)
AWS Summit Tokyo 2015_NTTデータセッション(前半:クラウドを活用したオムニチャネル基盤構築)
Hinemos
110421講演資料「クラウド時代の事業継続に必要なインフラとは」(福岡ruby・コンテンツ産業振興センター)
110421講演資料「クラウド時代の事業継続に必要なインフラとは」(福岡ruby・コンテンツ産業振興センター)
niftycloud
GPU Container as a Serviceを実現するための最新OSS徹底比較 - OpenStack最新情報セミナー 2017年7月
GPU Container as a Serviceを実現するための最新OSS徹底比較 - OpenStack最新情報セミナー 2017年7月
VirtualTech Japan Inc.
実践!DBベンチマークツールの使い方
実践!DBベンチマークツールの使い方
Fujishiro Takuya
SIプロジェクトでのインフラ自動化の事例 (第1回 Puppetユーザ会 発表資料)
SIプロジェクトでのインフラ自動化の事例 (第1回 Puppetユーザ会 発表資料)
NTT DATA OSS Professional Services
Share pointを支えるsql server2014最新情報 tokyo_公開用
Share pointを支えるsql server2014最新情報 tokyo_公開用
Yukio Kumazawa
OpenStackプロジェクトの全体像~詳細編~
OpenStackプロジェクトの全体像~詳細編~
Masanori Itoh
Similaire à Storm×couchbase serverで作るリアルタイム解析基盤
(20)
【たぶん日本初導入!】Azure Stack Hub with GPUの性能と機能紹介
【たぶん日本初導入!】Azure Stack Hub with GPUの性能と機能紹介
GPU Container as a Service を実現するための最新OSS徹底比較
GPU Container as a Service を実現するための最新OSS徹底比較
【HinemosWorld2015】A1-3_コンテナ技術Dockerの導入事例と完全運用自動化
【HinemosWorld2015】A1-3_コンテナ技術Dockerの導入事例と完全運用自動化
【Hinemos World 2013】B-2:クラウドと共に発展する、Hinemosクラウド管理オプションの最新情報(株式会社NTTデータ)
【Hinemos World 2013】B-2:クラウドと共に発展する、Hinemosクラウド管理オプションの最新情報(株式会社NTTデータ)
20130714 July Tech Festa 日本CloudStackユーザー会
20130714 July Tech Festa 日本CloudStackユーザー会
「hbstudy#23 OpenStack祭!!」資料 ~OpenStackプロジェクトの全体像~
「hbstudy#23 OpenStack祭!!」資料 ~OpenStackプロジェクトの全体像~
【HinemosWorld2014】A1-3_01_NTT Comのグローバルクラウド戦略とHinemosとの連携について
【HinemosWorld2014】A1-3_01_NTT Comのグローバルクラウド戦略とHinemosとの連携について
国内初Cloud stack採用のオープンクラウドサービス
国内初Cloud stack採用のオープンクラウドサービス
OSSコミッタの生活とその必要性
OSSコミッタの生活とその必要性
Yahoo!Japan北米DCでOCPのツボをみせてもらってきました - OpenStack最新情報セミナー 2016年5月
Yahoo!Japan北米DCでOCPのツボをみせてもらってきました - OpenStack最新情報セミナー 2016年5月
次世代の高速メモリストレージ利用に向けたソフトウェアのモダナイゼーション
次世代の高速メモリストレージ利用に向けたソフトウェアのモダナイゼーション
Cassandra Summit Tokyo 2015 - intra-mart
Cassandra Summit Tokyo 2015 - intra-mart
WebRTCで動かす“テレイグジスタンス”ロボット
WebRTCで動かす“テレイグジスタンス”ロボット
AWS Summit Tokyo 2015_NTTデータセッション(前半:クラウドを活用したオムニチャネル基盤構築)
AWS Summit Tokyo 2015_NTTデータセッション(前半:クラウドを活用したオムニチャネル基盤構築)
110421講演資料「クラウド時代の事業継続に必要なインフラとは」(福岡ruby・コンテンツ産業振興センター)
110421講演資料「クラウド時代の事業継続に必要なインフラとは」(福岡ruby・コンテンツ産業振興センター)
GPU Container as a Serviceを実現するための最新OSS徹底比較 - OpenStack最新情報セミナー 2017年7月
GPU Container as a Serviceを実現するための最新OSS徹底比較 - OpenStack最新情報セミナー 2017年7月
実践!DBベンチマークツールの使い方
実践!DBベンチマークツールの使い方
SIプロジェクトでのインフラ自動化の事例 (第1回 Puppetユーザ会 発表資料)
SIプロジェクトでのインフラ自動化の事例 (第1回 Puppetユーザ会 発表資料)
Share pointを支えるsql server2014最新情報 tokyo_公開用
Share pointを支えるsql server2014最新情報 tokyo_公開用
OpenStackプロジェクトの全体像~詳細編~
OpenStackプロジェクトの全体像~詳細編~
Plus de NTT Communications Technology Development
クラウドを最大限活用するinfrastructure as codeを考えよう
クラウドを最大限活用するinfrastructure as codeを考えよう
NTT Communications Technology Development
macOSの仮想化技術について ~Virtualization-rs Rust bindings for virtualization.framework ~
macOSの仮想化技術について ~Virtualization-rs Rust bindings for virtualization.framework ~
NTT Communications Technology Development
マルチクラウドでContinuous Deliveryを実現するSpinnakerについて
マルチクラウドでContinuous Deliveryを実現するSpinnakerについて
NTT Communications Technology Development
Argo CDについて
Argo CDについて
NTT Communications Technology Development
SpinnakerとKayentaで 高速・安全なデプロイ!
SpinnakerとKayentaで 高速・安全なデプロイ!
NTT Communications Technology Development
100Gbps OpenStack For Providing High-Performance NFV
100Gbps OpenStack For Providing High-Performance NFV
NTT Communications Technology Development
Can we boost more HPC performance? Integrate IBM POWER servers with GPUs to O...
Can we boost more HPC performance? Integrate IBM POWER servers with GPUs to O...
NTT Communications Technology Development
AWS re:Invent2017で見た AWSの強さとは
AWS re:Invent2017で見た AWSの強さとは
NTT Communications Technology Development
分散トレーシング技術について(Open tracingやjaeger)
分散トレーシング技術について(Open tracingやjaeger)
NTT Communications Technology Development
Mexico ops meetup発表資料 20170905
Mexico ops meetup発表資料 20170905
NTT Communications Technology Development
NTT Tech Conference #2 - closing -
NTT Tech Conference #2 - closing -
NTT Communications Technology Development
イケてない開発チームがイケてる開発を始めようとする軌跡
イケてない開発チームがイケてる開発を始めようとする軌跡
NTT Communications Technology Development
SpinnakerとOpenStackの構築
SpinnakerとOpenStackの構築
NTT Communications Technology Development
Troveコミュニティ動向
Troveコミュニティ動向
NTT Communications Technology Development
Web rtc for iot, edge computing use cases
Web rtc for iot, edge computing use cases
NTT Communications Technology Development
OpenStack Ops Mid-Cycle Meetup & Project Team Gathering出張報告
OpenStack Ops Mid-Cycle Meetup & Project Team Gathering出張報告
NTT Communications Technology Development
NTT Tech Conference #1 Opening Keynote
NTT Tech Conference #1 Opening Keynote
NTT Communications Technology Development
NTT Tech Conference #1 Closing Keynote
NTT Tech Conference #1 Closing Keynote
NTT Communications Technology Development
OpsからみたOpenStack Summit
OpsからみたOpenStack Summit
NTT Communications Technology Development
RabbitMQ can scale out!!(jp ops-workshop-3)
RabbitMQ can scale out!!(jp ops-workshop-3)
NTT Communications Technology Development
Plus de NTT Communications Technology Development
(20)
クラウドを最大限活用するinfrastructure as codeを考えよう
クラウドを最大限活用するinfrastructure as codeを考えよう
macOSの仮想化技術について ~Virtualization-rs Rust bindings for virtualization.framework ~
macOSの仮想化技術について ~Virtualization-rs Rust bindings for virtualization.framework ~
マルチクラウドでContinuous Deliveryを実現するSpinnakerについて
マルチクラウドでContinuous Deliveryを実現するSpinnakerについて
Argo CDについて
Argo CDについて
SpinnakerとKayentaで 高速・安全なデプロイ!
SpinnakerとKayentaで 高速・安全なデプロイ!
100Gbps OpenStack For Providing High-Performance NFV
100Gbps OpenStack For Providing High-Performance NFV
Can we boost more HPC performance? Integrate IBM POWER servers with GPUs to O...
Can we boost more HPC performance? Integrate IBM POWER servers with GPUs to O...
AWS re:Invent2017で見た AWSの強さとは
AWS re:Invent2017で見た AWSの強さとは
分散トレーシング技術について(Open tracingやjaeger)
分散トレーシング技術について(Open tracingやjaeger)
Mexico ops meetup発表資料 20170905
Mexico ops meetup発表資料 20170905
NTT Tech Conference #2 - closing -
NTT Tech Conference #2 - closing -
イケてない開発チームがイケてる開発を始めようとする軌跡
イケてない開発チームがイケてる開発を始めようとする軌跡
SpinnakerとOpenStackの構築
SpinnakerとOpenStackの構築
Troveコミュニティ動向
Troveコミュニティ動向
Web rtc for iot, edge computing use cases
Web rtc for iot, edge computing use cases
OpenStack Ops Mid-Cycle Meetup & Project Team Gathering出張報告
OpenStack Ops Mid-Cycle Meetup & Project Team Gathering出張報告
NTT Tech Conference #1 Opening Keynote
NTT Tech Conference #1 Opening Keynote
NTT Tech Conference #1 Closing Keynote
NTT Tech Conference #1 Closing Keynote
OpsからみたOpenStack Summit
OpsからみたOpenStack Summit
RabbitMQ can scale out!!(jp ops-workshop-3)
RabbitMQ can scale out!!(jp ops-workshop-3)
Dernier
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
CRI Japan, Inc.
新人研修 後半 2024/04/26の勉強会で発表されたものです。
新人研修 後半 2024/04/26の勉強会で発表されたものです。
iPride Co., Ltd.
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
iPride Co., Ltd.
業務で生成AIを活用したい人のための生成AI入門講座(社外公開版:キンドリルジャパン社内勉強会:2024年4月発表)
業務で生成AIを活用したい人のための生成AI入門講座(社外公開版:キンドリルジャパン社内勉強会:2024年4月発表)
Hiroshi Tomioka
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
NTT DATA Technology & Innovation
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
iPride Co., Ltd.
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
Hiroshi Tomioka
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
Toru Tamaki
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
Toru Tamaki
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
atsushi061452
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
CRI Japan, Inc.
Dernier
(11)
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
新人研修 後半 2024/04/26の勉強会で発表されたものです。
新人研修 後半 2024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
業務で生成AIを活用したい人のための生成AI入門講座(社外公開版:キンドリルジャパン社内勉強会:2024年4月発表)
業務で生成AIを活用したい人のための生成AI入門講座(社外公開版:キンドリルジャパン社内勉強会:2024年4月発表)
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
Storm×couchbase serverで作るリアルタイム解析基盤
1.
Copyright © NTT
Communications Corporation. All rights reserved. Storm × Couchbase Serverで作る リアルタイム解析基盤 NTTコミュニケーションズ株式会社 技術開発部 松⽥田徹也 2015年年6⽉月11⽇日
2.
Copyright © NTT
Communications Corporation. All rights reserved. 今⽇日話すこと 2 n Couchbase Server概要(Couchbase Japan 河村さん) n リアルタイム解析について n Couchbase ServerとStormを使ってクラウド上で実装した事例例 • アーキテクチャ • 苦労したこと、⼯工夫したこと n Couchbase Serverの気に⼊入ってる所、イマイチだと思った所
3.
Copyright © NTT
Communications Corporation. All rights reserved. ⾃自⼰己紹介 3 { 名前:松⽥田徹也(tetsuyam), 所属: {会社:NTTコミュニケーションズ, 部署:技術開発部, チーム:クラウドコア テクニカルユニット}, twitter:@tetsuyam_̲twt, 興味:[クラウドデザイン, ⾃自動化, ストリーム処理理] }
4.
Copyright © NTT
Communications Corporation. All rights reserved. データ解析 バッチ処理による解析 ストリーム処理による解析 ① ログ解析によるサイトやサービスに対 するアクセス分析 ② 過去ログをベースに、レコメンドエン ジンを利利⽤用したサービス性向上 バッチ処理理で実現する領領域。 バッチ処理理を早く終わらせて、結 果を出すことが重要。 利利⽤用されるプロダクト例例: Hadoop, Spark, BigQuery, Redshift ① 不不正利利⽤用、不不正アクセス検知 ② ⼤大量量のセンサーデータを利利⽤用した 交通状況や⾃自然状況の分析 ③ ユーザ動向のリアルタイム分析 即時性、リアルタイム性が 求められる領領域。 今起こっていることが分かることが 重要。 利利⽤用されるプロダクト例例: Storm, Norikra, Dataflow
5.
Copyright © NTT
Communications Corporation. All rights reserved. • Nathan Marz⽒氏が提唱したアーキテクチャ • 3つのレイヤーから構成 – Batch Layer:データの管理理、バッチ処理理。 – Speed Layer:ストリーム処理理、処理理結果の提供。 – Serving Layer:バッチレイヤーの集計結果の提供。 Lambda Architecture Raw Data Raw Data Raw Data Batch Layer Speed Layer Serving Layer Lambda Architecture
6.
Copyright © NTT
Communications Corporation. All rights reserved. • Nathan Marz⽒氏が提唱したアーキテクチャ • 3つのレイヤーから構成 – Batch Layer:データの管理理、バッチ処理理。 – Speed Layer:ストリーム処理理、処理理結果の提供。 – Serving Layer:バッチレイヤーの集計結果の提供。 Lambda Architecture Raw Data Raw Data Raw Data Batch Layer Speed Layer Serving Layer Lambda Architecture
7.
Copyright © NTT
Communications Corporation. All rights reserved. PUSH配信基盤 7 n NTTコミュニケーションズが提供するPUSH配信技術 n 10秒以内に10万ユーザーへのPUSH配信を実現 n TBS社のTBSぶぶたすのバックエンドとして利利⽤用 ・・・・・・ 10万ユーザー TBSぶぶたす ・100万DL突破 ・デジタルコンテンツオブジイヤー受賞 ・テレビ番組と連動し、 情報が⾃自動的に通知表⽰示される ・PUSH通知される情報の ブックマークや懸賞参加ができる ぶぶたす管理理者 配信コマンド 配信 ここでのユーザー操作を リアルタイム集計・解析するのが 今回のテーマ
8.
Copyright © NTT
Communications Corporation. All rights reserved. リアルタイム解析基盤 8 実現したかったこと n ⾼高トラフィック • 最⼤大10万ユーザーが同時利利⽤用 n ⾼高可⽤用性 • 番組中にリアルタイムに解析・可視化し続ける • クラウド上で動作させ続ける n スケーラビリティ • 解析量量が増えた場合の対応 • 今後のマルチテナント化を視野
9.
Copyright © NTT
Communications Corporation. All rights reserved. リアルタイム処理理基盤 on Cloud • TBSぶぶたすの⾏行行動履履歴をリアルタイムで解析・可視化 • Storm, CouchbaseServerを中⼼心としたストリーム処理理基盤 • NTTコミュニケーションズのパブリッククラウドcloud 上に基盤を構築 RabbitMQ Storm PUSH配信基盤 ・ ・ ・ 配信コマンド ログ n
10.
Copyright © NTT
Communications Corporation. All rights reserved. データフロー ログを送信 ログを取得 処理理結果を保存 キューイング 処理理 パース、 ユーザー属性付加、 コンテンツ情報付加 userID actionID timestamp contentsID XXXX1 3 1397239563377 YYYY1 XXXX2 5 1397240192325 YYYY2 1433151060:cid|gender|state 1433151060:cid|gender 1433151060:cidTimestamp:集計パターンに整形 処理理系 表⽰示系 キャッシュ PUSH配信基盤
11.
Copyright © NTT
Communications Corporation. All rights reserved. Apache Storm 11 n 分散ストリーム処理理フレームワーク n ⽶米BackType社が開発し、Twitter社に買収された後にOSS化された n SpoutとBoltと呼ばれるコンポーネントに分割され、データを処理理し続け る n データを保存する機構が無いため、データストアは別途必要となる https://storm.apache.org/ Spout Tupleを⽣生成 bolt Tupleを処理理 Tuple データ
12.
Copyright © NTT
Communications Corporation. All rights reserved. Apache Storm 12 n SPOFが存在しないアーキテクチャであり、可⽤用性は⾮非常に⾼高い n スケールアウト型となっており、クラウドとの相性が良良い Nimbus ZooKeeper Supervisor Master Node Cluster Coordinator Worker processes ZooKeeper ZooKeeper Supervisor Supervisor Worker Process Worker Process Worker Process *Nimbusダウン時も処理理は継続される (プロセス再配置のみストップ)
13.
Copyright © NTT
Communications Corporation. All rights reserved. 全体構成 13 Push配信基盤 ZK ZK ZK Nim SV SV SV SV ZoneA ZoneB
14.
Copyright © NTT
Communications Corporation. All rights reserved. 運⽤用中に起こった事件 14 n ノード故障時に更更新が停⽌止 n IO Waitでサーバーがダウン
15.
Copyright © NTT
Communications Corporation. All rights reserved. ノード故障時に更更新が停⽌止!? 15 データのレプリカ設定・オートフェイルオーバー機能 ノード故障時も動き続けることを想定。
16.
Copyright © NTT
Communications Corporation. All rights reserved. ノード故障時に更更新が停⽌止!? 16 _人人人人人人人人_ > 書込出来ない <  ̄Y^Y^Y^Y^Y^Y^Y ̄ データのレプリカ設定・オートフェイルオーバー機能 ノード故障時も動き続けることを想定。
17.
Copyright © NTT
Communications Corporation. All rights reserved. ノード故障時に更更新が停⽌止!? 17 NODE1 NODE2 NODE3 1 2 3 1 23 Client Library Cluster Map APP
18.
Copyright © NTT
Communications Corporation. All rights reserved. ノード故障時に更更新が停⽌止!? 18 NODE1 NODE2 NODE3 1 2 3 1 23 Client Library Cluster Map APP
19.
Copyright © NTT
Communications Corporation. All rights reserved. ノード故障時に更更新が停⽌止!? 19 NODE1 NODE2 NODE3 1 2 3 1 23 Client Library Cluster Map APP 4 Write Error
20.
Copyright © NTT
Communications Corporation. All rights reserved. ノード故障時に更更新が停⽌止!? 20 NODE1 NODE2 NODE3 1 2 3 1 23 Client Library Cluster Map APP 4 Write Error クライアント側で、ノード決め打ちで保存しようとするため、 フェイルオーバーが起きない限り保存できない。
21.
Copyright © NTT
Communications Corporation. All rights reserved. ノード故障時に更更新が停⽌止!? 21 NODE1 NODE2 NODE3 1 2 3 1 23 Client Library Cluster Map APP 4 Write Error クライアント側で、ノード決め打ちで保存しようとするため、 フェイルオーバーが起きない限り保存できない。 オートフェイルオーバーは、ノード故障検出後、 30秒以上で設定可能
22.
Copyright © NTT
Communications Corporation. All rights reserved. ノード故障時に更更新が停⽌止!? 22 NODE1 NODE2 NODE3 1 2 3 1 23 Client Library Cluster Map APP 4 Write Error クライアント側で、ノード決め打ちで保存しようとするので、 フェイルオーバーが起きない限り保存できない。 オートフェイルオーバーは、ノード故障検出後、 30秒以上で設定可能 クライアント側で、ノード決め打ちで保存しようとするため、 フェイルオーバーが起きない限り保存できない。 フェイルオーバーは、 ノード故障検知後30秒以上で任意設定可能 30秒間の書き込み不不可な時間は避けられない
23.
Copyright © NTT
Communications Corporation. All rights reserved. ノード故障時に更更新が停⽌止!? 23 NODE1 NODE2 NODE3 1 2 3 1 23 Client Library Cluster Map APP 4 Write Error クライアント側で、ノード決め打ちで保存しようとするので、 フェイルオーバーが起きない限り保存できない。 オートフェイルオーバーは、ノード故障検出後、 30秒以上で設定可能 XDCRでクラスタごと切切り替えで解決
24.
Copyright © NTT
Communications Corporation. All rights reserved. ノード故障時に更更新が停⽌止!? 24 Client Library Cluster Map APP ClusterA ClusterB XDCR NODE1 NODE2 NODE3 NODE1 NODE2 NODE3
25.
Copyright © NTT
Communications Corporation. All rights reserved. ノード故障時に更更新が停⽌止!? 25 Client Library Cluster Map APP ClusterA ClusterB XDCR NODE1 NODE2 NODE3 NODE1 NODE2 NODE3
26.
Copyright © NTT
Communications Corporation. All rights reserved. ノード故障時に更更新が停⽌止!? 26 Client Library Cluster Map APP ClusterA ClusterB XDCR NODE1 NODE2 NODE3 NODE1 NODE2 NODE3 Write Error
27.
Copyright © NTT
Communications Corporation. All rights reserved. ノード故障時に更更新が停⽌止!? 27 Client Library Cluster Map APP ClusterA ClusterB XDCR NODE1 NODE2 NODE3 NODE1 NODE2 NODE3
28.
Copyright © NTT
Communications Corporation. All rights reserved. ノード故障時に更更新が停⽌止!? 教訓 28 n ノード故障時は、フェイルオーバー発⽣生まで書込できない (読込はレプリカリードオプション有) n オートフェイルオーバーは、故障検知後30秒より⼤大きな値しか設定でき ない n 故障時も書込を続けるための⼯工夫が必要 • 故障検知→⼿手動フェイルオーバーを⾃自前実装 • XDCRで同期された別クラスタに切切り替え
29.
Copyright © NTT
Communications Corporation. All rights reserved. IO Waitでサーバーダウン!? 29 全データセットがRAMに乗り切切るように設計。 ディスク性能に依存せず、⾼高速なアクセスができる事を想定。
30.
Copyright © NTT
Communications Corporation. All rights reserved. IO Waitでサーバーダウン!? 30 全データセットがRAMに乗り切切るように設計。 ディスク性能に依存せず、⾼高速なアクセスができる事を想定。
31.
Copyright © NTT
Communications Corporation. All rights reserved. IO Waitでサーバーダウン!? 31 全データセットがRAMに乗り切切るように設計。 ディスク性能に依存せず、⾼高速なアクセスができる事を想定。
32.
Copyright © NTT
Communications Corporation. All rights reserved. IO Waitでサーバーダウン!? 32 全データセットがRAMに乗り切切るように設計。 ディスク性能に依存せず、⾼高速なアクセスができる事を想定。 Disk write queueが増え続ける IO WaitでCPU使⽤用率率率が埋め尽くされる
33.
Copyright © NTT
Communications Corporation. All rights reserved. IO Waitでサーバーダウン!? 33 全データセットがRAMに乗り切切るように設計。 ディスク性能に依存せず、⾼高速なアクセスができる事を想定。 Disk write queueが増え続ける IO WaitでCPU使⽤用率率率が埋め尽くされる _人人人人人人_ > SVダウン<  ̄Y^Y^Y^Y^Y ̄
34.
Copyright © NTT
Communications Corporation. All rights reserved. IO Waitでサーバーダウン!? 34 データはメモリ上に載ってるから⾼高速なのが売りと聞いた! じゃぁディスク性能が少々遅くても⼤大丈夫なはず。 Disk write queueが増え続ける IO WaitでCPU使⽤用率率率が埋め尽くされる _人人人人人人_ > SVダウン<  ̄Y^Y^Y^Y^Y ̄ Couchbase Serverは全てのデータを⾮非同期で永続化し、RAMよりも⼤大量量の データを保存することが可能です。Couchbaseは⾃自動的にRAMからディスクに データを移⾏行行し、オブジェクトレベルのキャッシュをワーキングセットで維持 します。 (Couchbaseの特徴より抜粋 http://www.couchbase.com/jp/couchbase-‐‑‒server/features)
35.
Copyright © NTT
Communications Corporation. All rights reserved. IO Waitでサーバーダウン!? 35 全データセットがRAMに乗り切切るように設計。 ディスク性能に依存せず、⾼高速なアクセスができる事を想定。 ディスクへの永続化プロセスが⾛走るので ⾼高頻度度の更更新があればディスクアクセスは増える
36.
Copyright © NTT
Communications Corporation. All rights reserved. IO Waitでサーバーダウン!? 36 全データセットがRAMに乗り切切るように設計。 ディスク性能に依存せず、⾼高速なアクセスができる事を想定。 ディスクへの永続化プロセスが⾛走るので ⾼高頻度度の更更新があればディスクアクセスは増える データ領領域のみtmpfsにして対応
37.
Copyright © NTT
Communications Corporation. All rights reserved. IO Waitでサーバーダウン!? 37 tmpfsはUnix系OSにおける⼀一時ファイルのための仕組みの共通名。tmpfsは ファイルシステムにマウントされることを意図しており、これによりHDDをは じめとする永続性をもつ記憶装置の代わりに揮発性メモリに保存されるように できる (wikipediaより抜粋)
38.
Copyright © NTT
Communications Corporation. All rights reserved. IO Waitでサーバーダウン!? 38 tmpfsはUnix系OSにおける⼀一時ファイルのための仕組みの共通名。tmpfsは ファイルシステムにマウントされることを意図しており、これによりHDDをは じめとする永続性をもつ記憶装置の代わりに揮発性メモリに保存されるように できる (wikipediaより抜粋) 揮発性メモリ
39.
Copyright © NTT
Communications Corporation. All rights reserved. IO Waitでサーバーダウン!? 39 tmpfsはUnix系OSにおける⼀一時ファイルのための仕組みの共通名。tmpfsは ファイルシステムにマウントされることを意図しており、これによりHDDをは じめとする永続性をもつ記憶装置の代わりに揮発性メモリに保存されるように できる (wikipediaより抜粋) 揮発性メモリ ノードがダウンした時、ノード内データが⽋欠損する
40.
Copyright © NTT
Communications Corporation. All rights reserved. IO Waitでサーバーダウン!? 40 Couchbase Serverのレプリカ機能でカバー 別ノードのメモリ上にレプリカが保存されているため、 ディスクへの永続化に頼らない割り切切り Couchbase クラスタ内の全てのサーバは同じ機能を 持っており、クラスタ管理理とデータ管理理の2つの役割を 担っています。 データマネージャはデータのストレージとアクセスの 役割を担っています。各ノードにはデータマネージャ が配置されており、各ドキュメントは最⼤大で3つまでレ プリカをクラスタ上に作成することが可能です。 (Couchbase Serverのアーキテクチャより抜粋 http://www.couchbase.com/jp/couchbase-‐‑‒ server/architecture)
41.
Copyright © NTT
Communications Corporation. All rights reserved. IO Waitでサーバーダウン!? 教訓 41 n Couchbase Serverは、データアクセス⾼高速化のため、メモリを有効活⽤用 するアーキテクチャではあるが、完全インメモリDBではない n 全ドキュメントがメモリに載っている場合でも、データの永続化をする ためにディスクアクセスは発⽣生する n ⾼高頻度度な書き込みがあるようなデータセットを扱う場合、ディスクへの 書き込み負荷が⼤大きくなる n tmpfs, SSDディスクを利利⽤用して実装することがオススメ
42.
Copyright © NTT
Communications Corporation. All rights reserved. まとめ 42 n 個々のコンポーネントでは故障が起こっても、システム故障にならない ようなアーキテクチャ • スピードレイヤはリアルタイムじゃないと意味が無い • クラウドの特性を活かして運⽤用でカバー n Couchbase Serverは、⼀一貫性 >可⽤用性 モデル • アクティブなドキュメントはクラスタ内で1ノードのみ存在 • バタつきを防ぐため、フェイルオーバーは慎重に発動 • レプリカリード機能を使えば、読込負荷分散は可能 n Couchbase Serverは、完全インメモリDBではない • パフォーマンス向上のためにキャッシュを有効活⽤用 • ⼤大量量データの保存を実現するため、全てのデータは⾮非同期でディスクに永続化 • ⾼高頻度度な書込⽤用途で利利⽤用する場合、ディスク性能も考慮する必要
43.
Copyright © NTT
Communications Corporation. All rights reserved. Couchbase Serverのここが好き♡ 43 n インストールが簡単 • パッケージをDLして、インストールするだけ • ノードを増やすときもラク n クラスタ増減が簡単 • 仲間に⼊入れたいSVを指定するだけ • カジュアルなローリングアップデート n モニタリングが充実 • 標準機能で、充実したモニタリング n ビューが使える • 単なるKVSではない • JSONで⼊入れている意味を発揮
44.
Copyright © NTT
Communications Corporation. All rights reserved. Couchbase ServerのここがイマイチL 44 n ディスク永続化が必須であること • Redisのようにが永続化を無効にできるといいのに。。。。 • TTLの利利⽤用・ハイメモリインスタンス利利⽤用などで、ディスク永続化せず にインメモリ運⽤用のユースケースへの対応に期待! n バケットタイプでmemcachedにすると機能が⼤大きく制限されること • 完全インメモリで使おうとすると、Couchbase Serverの素敵な機能が 使えなくなってしまう • Memcachedバケットへの対応にも期待!
45.
Copyright © NTT
Communications Corporation. All rights reserved. 45 御清聴有難うございました
Télécharger maintenant