マスタ管理システム課題管理

2024年4月1日～6月13日の期間にて
売上未取得による予算未反映　219件
売上・予算データがおかしい　2件（322　6/6，6/7　別課題で管理）
売上実績はあるが、予算未反映　⇒　S3にbudgetデータあり（000203　2024/04/01　￥177,000）

島貫さんご指摘の、

2024年4月1日～6月13日の期間にて
売上未取得による予算未反映　219件
売上・予算データがおかしい　2件（322　6/6，6/7　別課題で管理）
売上実績はあるが、予算未反映　⇒　S3にbudgetデータあり（000203　2024/04/01　￥177,000）

部分のリカバリーは完了。原因（閏年対応スクリプトへの変更処理未完了）も対応済にて、以降は正常稼働を確認。

予算データを軸にしたデータマート（Flash Sales Report）作成は、仕様変更のため7/1より月次工数を使って開発を開始。
2週間程度で開発を行い、その後テストを実施し、問題なければリリースする予定。（7月下旬までに完了見込み）

【今後の進め方】
１．PowerBI pro 検証領域に予算軸対応verのレポート公開（村上さん）
２．過去データ対応範囲 方針決定（丸崎さん）
３．DM 過去データ修正（村上さん）
４．予算軸データチェック（武田）、レポート動作確認（島貫さん）
５．本番環境リリース

上記の３まで完了しました。
ワークスペース「1_C-United【削除予定】」の中のレポート「1_売上速報 - New」をご確認頂いてもよろしいでしょうか？

問題ないようであれば、５（既存の売上速報停止、新規売上速報と入替）を進めますのでご指示ください。

村上

【今後の進め方】
１．PowerBI pro 検証領域に予算軸対応verのレポート公開（村上さん）
２．過去データ対応範囲 方針決定（丸崎さん）
３．DM 過去データ修正（村上さん）
４．予算軸データチェック（武田）、レポート動作確認（島貫さん）
５．本番環境リリース

１～３完了
４．UI　→　OK
　　データチェック　→　予算・・・チェック完了（欠損なし、差分あり）

島貫さん
data-platform-prd-dwh/forecast_tbl/
・202404-07VE.csv
・202404-07KK.csv

上記と予算データチェックの結果一部差分がございました。
念のため正規データがどれになるかご判断いただけますでしょうか？
https://chatnoirveri.sharepoint.com/:f:/s/msteams_2080ed/EpbaWkuyvXBCt_mS5-VbSvkBF2EH8CCuQXY2p4RcbTl7vA?e=rtbK03
・【データ基盤】売上速報予算軸.xlsx

４．のデータチェックについて項目を見直し再チェックを実施いたしました。
一部元データにあり、DMにないデータがありましたので以下資料を更新しています。
https://chatnoirveri.sharepoint.com/:f:/s/msteams_2080ed/EpbaWkuyvXBCt_mS5-VbSvkBF2EH8CCuQXY2p4RcbTl7vA?e=rtbK03
・【データ基盤】売上速報予算軸.xlsx

本来の挙動について、確認したく

①　DWH「forecast_tbl」に店舗予算がない場合
　⇒　売上実績が連携されても　DM「Flash＿Sales＿Reports」にレコードが作られない？
　※　VE242、362の２店舗について2024年4月分を　Redshift　に上げておりませんでした。

②　DWH「forecast_tbl」に店舗予算はあるが、売上実績がない場合
　⇒　DM「Flash＿Sales＿Reports」にレコードが作られないケースがある
　※　VE345　の改装期間　5/13～28　（その他、店舗・日付でもレコードなしが存在）

https://chatnoirveri.sharepoint.com/:f:/s/msteams_2080ed/EpbaWkuyvXBCt_mS5-VbSvkBF2EH8CCuQXY2p4RcbTl7vA?e=rtbK03
・【データ基盤】売上速報予算軸.xlsx
　⇒　D・E列が　Redshift　に上がっている予算データ　／　G・H列が　DM　に反映されているデータ

2024/8/19 Mtg
・村上さん側で実施した予算軸対応データ修正後、予算元データのアップデートがあり差分、欠損がある状態
・取込コストが許す範疇にて、最新版予算データを再取込　→　データ再チェック　で進めたい。

【TODO】
・予算軸データ取込作業にかかったコスト算出（丸崎さん）
・予算データ最新化＆チェック（島貫さん）
・データ再取込テスト　範囲策定（武田）
・データ再取込（村上さん）
・データ再取込後整合チェック（武田）

S3　へアップされている予算データのチェックが完了致しました。
データマートへの再取り込みをお願い出来ますでしょうか。

日別・店別で見た際にレコードがない（ブランク）状態が散見されるので、
原因を確認の上、再取り込み処理をお願いします。

※予算「0」実績「0」でも前年データがある場合もあるのでレコードが必要

予算軸対応版データの再取込の結果についてチェック完了いたしました。
範囲：2024/4/1~2024/7/31

チェック詳細については以下資料にまとめております。
https://chatnoirveri.sharepoint.com/:x:/s/msteams_2080ed/EZKyZ1mjsqxOrNs80P3q4KABxbXUIJsrvgN76Nswk8NydA?e=LVHbxe

▼概要
・売上客数差分_FOODIT軸シート
　・VE売上客数　→　①rawdata上で修正されない売上修正、②元データ未アップロード、③売上レコード未生成　がありました。
　　①②　→　備考欄　黄色塗りつぶしレコードは来週前半までにDWHデータを武田のほうで修正します。
　　③　→　生成状況とロジックのご確認お願いいたします。

　・KK客数売上　→　①重複取込による値2倍、②客数差分　がありました。
　　①　→　備考欄　黄色塗りつぶしレコードは来週前半までにDWHデータを武田のほうで修正します。
　　②　→　rawdata客数データについて、取込項目を改修いただく必要がありそうです。（サンプルをチェック資料同フォルダに格納しています）
　　　　　　詳細についてNEC側へ確認中です。

・売上差分_DM軸シート
　・DMにレコードがあり、FOODITデータにないものについてはFOODITデータのほうが不正のようですので対応不要です。
　　その他は売上客数差分_FOODIT軸シート　の差分と同様のようです。

・予算差分_raw軸シート
　・①DMレコードがあるが予算元データと差分あり、②DMレコード無し　がありました。
　　①　→　予算元データのヘッダー有り無し問題の影響にみえます。　島貫さん→修正の上村上さんと再取込作業の調整をお願いしたいです。
　　②　→　生成状況とロジックのご確認お願いいたします。

レコードの再取込結果について整合チェックを実施いたしましたのでご報告いたします。
詳細については以下ファイルをご参照ください。
https://chatnoirveri.sharepoint.com/:x:/s/msteams_2080ed/EQewA1qpNFxKib03nnnnfoUB4VCKLnhoBAh3u3BL5oOtcw?e=pvTpos

【結果概要】
・日割り予算とのレコード差分　→　確認OK

・KK客数差分　→　確認NG
　→以前確認した際と同値でずれているので　No40のセパレート前客数　の取込仕様となっていない？
　　上記資料「備考」項目　→　客数参照カラム違い　と記載があるものが差分対象

2024/9/30
・2024/4/1~7/31についても修正済み
　→CU確認中

9月分まで確認し、客数エラー、レコード欠損が解消されていることを確認いたしました。
ただし、TEC売上のリカバリGlueジョブが利用不可のままとなっておりますのでご対応お願いします。

チケット#736にて回答した方法で処理いただけると思います。
ご確認のほど宜しくお願い致します。

ご回答ありがとうございます。
以降の実タスクについては#736 で管理いたします。