enechainのデータプラットフォームデスクが開発運用するETLデータパイプラインをArgo Workflowsに移行した過程を解説。Datadogで行うArgo Workflowsのモニタリングについて詳細を紹介します。

enechainでは複数のGCPプロジェクトに跨るアプリケーションのログの統合管理を目的とし、ログルーター機能を用いたログ共通基盤を作成しています。この機能の利用方法を、簡単な実装サンプルとともに紹介します。

enechainのデータパイプラインにデータ品質監視ツールを導入する過程で得た知見を共有し、データ品質向上を目指す皆さんに役立つ情報が提供できれば幸いです。