Gunosyデータ分析ブログ

Gunosyで働くデータエンジニアが知見を共有するブログです。

2021-04-28から1日間の記事一覧

Spark on k8s を EKS 上で動かす

はじめに DRE Team の hyamamoto です. 皆さん,Spark は利用されていますか? Gunosy では Digdag + Athena によるデータ整形が増えてきており,徐々に Spark の利用は減ってきています. 思い返すと,昨年入社後の OJT も Spark から Digdag + Athena へ…