Sotaro Kimura
69
Abonné
Personal Information
Entreprise/Lieu de travail
Tokyo, Japan Japan
Profession
Software Engineer - dotData Japan
Secteur d’activité
Technology / Software / Internet
Site Web
medium.com/@kimutansk
À propos
I'm a software engineer specialized in Data Infrastructure and Data Processing Technology.
- Constructing realtime data processing system(Based on Spark, Flink, Kafka etc)
- Operating data analytics platform
-- Hadoop, Fluentd, or something related data processing middleware
-- Monitoring by Prometheus, Zabbix, Elastic stack etc
- Constructing ETL pipeline
-- Workflow management by Digdag, Azkaban, Jenkins etc
- Constructing CI Pipeline(Jenkins)
- Coding skill in Java, Scala, Go, JavaScript, Python and Ruby
- Constructing system on AWS(Kinesis Family, Lambda, S3, EC2, ECS etc)
- Data management of various purpose analytics data
Mots-clés
streamprocessing
spark
big data
kafka
streaming
flink
aws kinesis
bigdata
architecture
engineering
nifi
etl
jjug_ccc
kafka stream
scala gearpump streamprocessing
stream
gearpump
scala
Tout plus
- Présentations
- Documents
- Infographies
DXとかDevOpsとかのなんかいい感じのやつ 富士通TechLive
Tokoroten Nakayama
•
il y a 4 ans
大規模データ活用向けストレージレイヤソフトのこれまでとこれから(NTTデータ テクノロジーカンファレンス 2019 講演資料、2019/09/05)
NTT DATA Technology & Innovation
•
il y a 4 ans
Deep Dive into Spark SQL with Advanced Performance Tuning with Xiao Li & Wenchen Fan
Databricks
•
il y a 5 ans
20170329_BigData基盤研究会#7
Kohei KaiGai
•
il y a 7 ans
A Practical Guide to Selecting a Stream Processing Technology
confluent
•
il y a 7 ans
技術的負債だらけのチームで技術マネージメントしてみた Kichijoji.pm7[talk2]
YASUKAZU NAGATOMI
•
il y a 8 ans
Taking Spark Streaming to the Next Level with Datasets and DataFrames
Databricks
•
il y a 8 ans
Strata San Jose 2016: Scalable Ensemble Learning with H2O
Sri Ambati
•
il y a 8 ans
Hadoop application architectures - Fraud detection tutorial
hadooparchbook
•
il y a 8 ans
Real-Time Spark: From Interactive Queries to Streaming
Databricks
•
il y a 8 ans
2016年版 フロントエンド開発フォーマット
Kenya Kodaira
•
il y a 8 ans
失敗から学ぶデータ分析グループのチームマネジメント変遷 (デブサミ2016) #devsumi
Tokoroten Nakayama
•
il y a 8 ans
データ分析チームの振り返り
Satoshi Noto
•
il y a 8 ans
ネットワークカメラを使った玄関前モニタリングの苦労話
Takeshi HASEGAWA
•
il y a 8 ans
リアクティブ・アーキテクチャ ~大規模サービスにおける必要性と課題〜 #devsumi
Yuta Okamoto
•
il y a 8 ans
MillWheel Fault-Tolerant Stream Processing at Internet Scaleの意訳
x1 ichi
•
il y a 8 ans
Docker技術情報アップデート v1.9 ネットワークとオーケストレーション
Masahito Zembutsu
•
il y a 8 ans
障害対応・運用におけるトリアージ的対応とZabbixの活用
Masahito Zembutsu
•
il y a 8 ans
EthernetやCPUなどの話
Takanori Sejima
•
il y a 8 ans