
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
ここにツイート内容が記載されますhttps://b.hatena.ne.jp/URLはspanで囲んでください
Twitterで共有ONにすると、次回以降このダイアログを飛ばしてTwitterに遷移します
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

はじめにApacheAirflowはワークフロー管理サービスで、スケジュールされた時間に一連の処理を行ってく...はじめにApacheAirflowはワークフロー管理サービスで、スケジュールされた時間に一連の処理を行ってくれる便利なサービスです。ただ、運用には結構コストがかかるサービスです。 そのため、Google CloudではCloud Composer、AWSではAmazon ManagedWorkflows for ApacheAirflow (Amazon MWAA)といった運用を楽にするためのマネージドなサービスが展開されています。 とは言え、マネージドなAirflowでさえも運用は難しく、色々な問題が起こりがちです。Cloud Composer自体、v1から始まり既にv3へと進化1を遂げていることから、提供するGoogle側でも試行錯誤と努力の過程が見え透けてきます。 そこで本記事では、Cloud Composerを運用するプロジェクトにインフラ担当として2年ほど関わっきた中で経験
