ToDo #745
【データ基盤】売上速報 前年同曜の数値が異常値
開始日:
2024/10/16
期日:
2024/10/31
進捗率:
0%
予定工数:
説明
2024/10の日別タブ表示の情報について、異常値となっている。
→前年売上データに欠損があるか？
CU部内で再度整合調査を実施
ファイル
武田 遼河 さんが約1ヶ月前に更新
- ファイル flash_sales_reports前年売上データチェック_20241018.xlsx flash_sales_reports前年売上データチェック_20241018.xlsx を追加
- 期日 を 2024/10/25 から 2024/10/31 に変更
- ステータス を 新規 から 進行中 に変更
- 担当者 を 武田 遼河 から 村上 達也 に変更
村上さん
本件について、サンプル調査として2024/10/1~2024/10/18のDMデータについて調査を実施いたしました。
詳細については添付資料をご参照ください。
結論としては、前年データがDM上に存在しているが今期レコードの前年同日、前年同曜用のカラムにデータが入っていないケースが300件ほど存在するようです。
原因と影響範囲について調査の上、ご報告いただけますでしょうか？
村上 達也 さんが約1ヶ月前に更新
ログを見る限りではエラー等は発生していないかったので、推測ですが
- リカバリー処理と通常処理のフローに差がある
ことに起因した参照テーブル（とそれぞれの参照テーブルのレコードが作成されたタイミング）の差が悪さしている気がします。
目先の対応として、- データ非表示の日を特定させた上でリカバリー処理を実施
することでレポート表示を正常化させ、
恒久対応として、- 通常処理とリカバリー処理とで別れている処理フローを合わせる（通常処理に使うGluejobの改修）
- 現状はテーブルに処理日のカラムがないため更新履歴を追えないので、処理日カラムを追加する（関連テーブルの改修）
の２点を行ったほうが良いかと思います（恒久対応については別チケット発行をお願いします）。
ご確認のほど宜しくお願い致します。