Work Detail

ECデータ取得PJ

"売上の可視化のためにデータを一元的に管理したい"という声がありデータの流し込みパイプラインを作成しました。 (正確にはこちらと社内データの管理ためのプロダクトを作成しました。)

このようなインフラ構成にしました。蛇足ですが、S3内でOTFの構築やRDSとのより良い連携等がうまく作れていればもっと良かったなと、、、それだけ後悔です。

プロジェクト概要

実施背景や成果物などの詳細です。

楽天やYahoo!、AmazonにおいてのSKU単位の売り上げを確認したいのですが、今まではそれぞれの受注データ + ID突合用のマスターデータを管理していて突合作業にとても時間がかかっていたそう。まずは自動で受注データを集計できるように各モールからのデータ取得パイプラインをlambda + eventbridgeで作成(aws secret managerでaccess tokenのリフレッシュも行っていた) ID管理用の社内アプリをFargate + RDSで作成しました。