Sotaro Kimura
69
Seguidores
Personal Information
Organización/Lugar de trabajo
Tokyo, Japan Japan
Ocupación
Software Engineer - dotData Japan
Sector
Technology / Software / Internet
Sitio web
medium.com/@kimutansk
Acerca de
I'm a software engineer specialized in Data Infrastructure and Data Processing Technology.
- Constructing realtime data processing system(Based on Spark, Flink, Kafka etc)
- Operating data analytics platform
-- Hadoop, Fluentd, or something related data processing middleware
-- Monitoring by Prometheus, Zabbix, Elastic stack etc
- Constructing ETL pipeline
-- Workflow management by Digdag, Azkaban, Jenkins etc
- Constructing CI Pipeline(Jenkins)
- Coding skill in Java, Scala, Go, JavaScript, Python and Ruby
- Constructing system on AWS(Kinesis Family, Lambda, S3, EC2, ECS etc)
- Data management of various purpose analytics data
Etiquetas
streamprocessing
spark
big data
kafka
streaming
flink
aws kinesis
bigdata
architecture
engineering
nifi
etl
jjug_ccc
kafka stream
scala gearpump streamprocessing
stream
gearpump
scala
Ver más
- Presentaciones
- Documentos
- Infografías
DXとかDevOpsとかのなんかいい感じのやつ 富士通TechLive
Tokoroten Nakayama
•
Hace 4 años
大規模データ活用向けストレージレイヤソフトのこれまでとこれから(NTTデータ テクノロジーカンファレンス 2019 講演資料、2019/09/05)
NTT DATA Technology & Innovation
•
Hace 4 años
Deep Dive into Spark SQL with Advanced Performance Tuning with Xiao Li & Wenchen Fan
Databricks
•
Hace 5 años
20170329_BigData基盤研究会#7
Kohei KaiGai
•
Hace 7 años
A Practical Guide to Selecting a Stream Processing Technology
confluent
•
Hace 7 años
技術的負債だらけのチームで技術マネージメントしてみた Kichijoji.pm7[talk2]
YASUKAZU NAGATOMI
•
Hace 7 años
Taking Spark Streaming to the Next Level with Datasets and DataFrames
Databricks
•
Hace 8 años
Strata San Jose 2016: Scalable Ensemble Learning with H2O
Sri Ambati
•
Hace 8 años
Hadoop application architectures - Fraud detection tutorial
hadooparchbook
•
Hace 8 años
Real-Time Spark: From Interactive Queries to Streaming
Databricks
•
Hace 8 años
2016年版 フロントエンド開発フォーマット
Kenya Kodaira
•
Hace 8 años
失敗から学ぶデータ分析グループのチームマネジメント変遷 (デブサミ2016) #devsumi
Tokoroten Nakayama
•
Hace 8 años
データ分析チームの振り返り
Satoshi Noto
•
Hace 8 años
ネットワークカメラを使った玄関前モニタリングの苦労話
Takeshi HASEGAWA
•
Hace 8 años
リアクティブ・アーキテクチャ ~大規模サービスにおける必要性と課題〜 #devsumi
Yuta Okamoto
•
Hace 8 años
MillWheel Fault-Tolerant Stream Processing at Internet Scaleの意訳
x1 ichi
•
Hace 8 años
Docker技術情報アップデート v1.9 ネットワークとオーケストレーション
Masahito Zembutsu
•
Hace 8 años
障害対応・運用におけるトリアージ的対応とZabbixの活用
Masahito Zembutsu
•
Hace 8 años
EthernetやCPUなどの話
Takanori Sejima
•
Hace 8 años