datatech casual · 2022.11.01
Airflow2 にupgradeした事例紹介
Airflow 1.10.15 / Cloud Composer 1 から Airflow 2.2.1 / Cloud Composer 2 へ、daily job を止めずにupgradeした事例。SubDagOperator → TaskGroup 移行と並走デプロイ
Currently writing Rethinking solutions
Rethinking solutions
for the AI era.
Reiji Kainuma (@reizist) — software engineer in Tokyo.
データを使ったプロダクト・事業スケールに興味があります。
- Google Cloud
- BigQuery
- AWS
- Data Engineering
- Product Development
- LLM
- Ruby
- Go
Featured / 01
// the most recent long-form piece
Recent / 02
// notes on data, reliability, and the in-between
エスプレッソマシン事始め
エスプレッソマシンについて初心者が調べまとめました。
· #life ↗
GCP上でIAMキー無しでAWSコマンドを叩く方法
AWS Security Token Service(STS)を使って、GCPのservice accountから一時的なAWS認証情報を生成し 実質service accountがAWS IAMのように振る舞うような状態にする。
· #engineering ↗
一級/特殊船舶免許をとった
リクルートという会社は、[在籍3年ごとに最大28日連続で取得できるSTEP休暇なる制度がある](https://recruit-saiyo.jp/benefits/)。
· #life ↗
HerokuのFree planにprod dumpを使おうとしてハマったのでメモ
二行で:
· #engineering ↗
Slides / 03
// selected talks and decks
