ToDo #577
【データ基盤】売上実績がない場合、予算データがあっても反映されない
0%
説明
BI側では現状、店休によるトランザクションなしなのか。通信障害が原因か。の判断が出来ない
⇒ トランザクションがある場合のみレコードが作成され、予算も反映される仕様な為、トランザクションがない限り予算も反映されない
◆ 店休日でも日割り予算のデータがある場合は、BI側【売上速報】でも表示させたい。・・・5月度の予算で9,000千円の乖離あり（VE池袋西口で4,770千円）
⇒ 別テーブルで店休フラグを持つか。予算テーブルに店休フラグを追加して
該当店舗・日に「１」がある場合、トランザクションなしでもレコードを作成される様に回収をしたい。
※店休フラグ「１」でもトランザクションがある場合も想定
※あと追いで店休フラグを設定した際の処理方法も想定が必要
ファイル
| 予算突合チェック202404-.xlsx (3.45 MB) 予算突合チェック202404-.xlsx | 島貫 圭太, 2024/06/15 15:59 | ||
| clipboard-202406151603-hlnuw.png (35.1 KB) clipboard-202406151603-hlnuw.png | 島貫 圭太, 2024/06/15 16:03 | ||
| clipboard-202408191317-sch03.png (103 KB) clipboard-202408191317-sch03.png | 島貫 圭太, 2024/08/19 13:17 | ||
| data202408.xlsx (4.03 MB) data202408.xlsx | 島貫 圭太, 2024/09/03 12:20 | ||
| clipboard-202409031227-4ncdt.png (87.6 KB) clipboard-202409031227-4ncdt.png | 島貫 圭太, 2024/09/03 12:27 |
島貫 圭太 さんが6ヶ月前に更新
- ファイル 予算突合チェック202404-.xlsx 予算突合チェック202404-.xlsx を追加
- ファイル clipboard-202406151603-hlnuw.png clipboard-202406151603-hlnuw.png を追加
2024年4月1日～6月13日の期間にて
売上未取得による予算未反映 219件
売上・予算データがおかしい 2件（322 6/6，6/7 別課題で管理）
売上実績はあるが、予算未反映 ⇒ S3にbudgetデータあり（000203 2024/04/01 ￥177,000）
村上 達也 さんが5ヶ月前に更新
- 期日 を 2024/06/28 から 2024/07/31 に変更
- ステータス を 新規 から 進行中 に変更
島貫さんご指摘の、
2024年4月1日～6月13日の期間にて
売上未取得による予算未反映 219件
売上・予算データがおかしい 2件（322 6/6，6/7 別課題で管理）
売上実績はあるが、予算未反映 ⇒ S3にbudgetデータあり（000203 2024/04/01 ￥177,000）
部分のリカバリーは完了。原因（閏年対応スクリプトへの変更処理未完了）も対応済にて、以降は正常稼働を確認。
予算データを軸にしたデータマート（Flash Sales Report）作成は、仕様変更のため7/1より月次工数を使って開発を開始。
2週間程度で開発を行い、その後テストを実施し、問題なければリリースする予定。（7月下旬までに完了見込み）
武田 遼河 さんが4ヶ月前に更新
2024/7/22 Mtg
・予算軸売上速報DM → 検証環境で実装完了
→ 7/12~自動連携機能の動作検証→問題なさそう
・過去データを予算軸仕様に修正するか？
→作業工数的には軽微だが、Glueジョブ稼働時間がそこそこかかるためコストがかかる（MAX 数万円。多分数千円）
→前年比で今後参照される可能性が高いため、2024/4分までは対応したい
【今後の進め方】
１．PowerBI pro 検証領域に予算軸対応verのレポート公開（村上さん）
２．過去データ対応範囲 方針決定（丸崎さん）
３．DM 過去データ修正（村上さん）
４．予算軸データチェック（武田）、レポート動作確認（島貫さん）
５．本番環境リリース
村上 達也 さんが4ヶ月前に更新
- 担当者 を 村上 達也 から 武田 遼河 に変更
【今後の進め方】
１．PowerBI pro 検証領域に予算軸対応verのレポート公開（村上さん）
２．過去データ対応範囲 方針決定（丸崎さん）
３．DM 過去データ修正（村上さん）
４．予算軸データチェック（武田）、レポート動作確認（島貫さん）
５．本番環境リリース
上記の３まで完了しました。
ワークスペース「1_C-United【削除予定】」の中のレポート「1_売上速報 - New」をご確認頂いてもよろしいでしょうか？
問題ないようであれば、５（既存の売上速報停止、新規売上速報と入替）を進めますのでご指示ください。
村上
武田 遼河 さんが3ヶ月前に更新
- 期日 を 2024/07/31 から 2024/09/01 に変更
【今後の進め方】
１．PowerBI pro 検証領域に予算軸対応verのレポート公開（村上さん）
２．過去データ対応範囲 方針決定（丸崎さん）
３．DM 過去データ修正（村上さん）
４．予算軸データチェック（武田）、レポート動作確認（島貫さん）
５．本番環境リリース
１～３完了
４．UI → OK
データチェック → 予算・・・チェック完了（欠損なし、差分あり）
島貫さん
data-platform-prd-dwh/forecast_tbl/
・202404-07VE.csv
・202404-07KK.csv
上記と予算データチェックの結果一部差分がございました。
念のため正規データがどれになるかご判断いただけますでしょうか？
https://chatnoirveri.sharepoint.com/:f:/s/msteams_2080ed/EpbaWkuyvXBCt_mS5-VbSvkBF2EH8CCuQXY2p4RcbTl7vA?e=rtbK03
・【データ基盤】売上速報予算軸.xlsx
武田 遼河 さんが3ヶ月前に更新
- 担当者 を 武田 遼河 から 島貫 圭太 に変更
４．のデータチェックについて項目を見直し再チェックを実施いたしました。
一部元データにあり、DMにないデータがありましたので以下資料を更新しています。
https://chatnoirveri.sharepoint.com/:f:/s/msteams_2080ed/EpbaWkuyvXBCt_mS5-VbSvkBF2EH8CCuQXY2p4RcbTl7vA?e=rtbK03
・【データ基盤】売上速報予算軸.xlsx
島貫 圭太 さんが3ヶ月前に更新
- ファイル clipboard-202408191317-sch03.png clipboard-202408191317-sch03.png を追加
- 担当者 を 島貫 圭太 から 村上 達也 に変更
本来の挙動について、確認したく
① DWH「forecast_tbl」に店舗予算がない場合
⇒ 売上実績が連携されても DM「Flash＿Sales＿Reports」にレコードが作られない？
※ VE242、362の２店舗について2024年4月分を Redshift に上げておりませんでした。
② DWH「forecast_tbl」に店舗予算はあるが、売上実績がない場合
⇒ DM「Flash＿Sales＿Reports」にレコードが作られないケースがある
※ VE345 の改装期間 5/13～28 （その他、店舗・日付でもレコードなしが存在）
https://chatnoirveri.sharepoint.com/:f:/s/msteams_2080ed/EpbaWkuyvXBCt_mS5-VbSvkBF2EH8CCuQXY2p4RcbTl7vA?e=rtbK03
・【データ基盤】売上速報予算軸.xlsx
⇒ D・E列が Redshift に上がっている予算データ ／ G・H列が DM に反映されているデータ
武田 遼河 さんが3ヶ月前に更新
▽予算軸データ取込作業にかかったコスト算出（丸﨑さん）
・7月分のAWS利用労金の請求に大きな増加なし（６月分より減少しているくらい）
→売上速報の予算軸対応済みデータのインポート作業の費用はCU想定の範囲内に収まっている認識
▽データ再取込テスト 範囲策定（武田）
・予算軸対応データの再取込対応期間は以下で実施可能でしょうか？
期間：2024/4/1 ～ 2024/7/31
【TODO】・予算軸データ取込作業にかかったコスト算出（丸崎さん）
・予算データ最新化＆チェック（島貫さん）・データ再取込テスト 範囲策定（武田）
・データ再取込（村上さん）
・データ再取込後整合チェック（武田）
島貫 圭太 さんが3ヶ月前に更新
- ファイル data202408.xlsx data202408.xlsx を追加
- ファイル clipboard-202409031227-4ncdt.png clipboard-202409031227-4ncdt.png を追加
日別・店別で見た際にレコードがない（ブランク）状態が散見されるので、
原因を確認の上、再取り込み処理をお願いします。
※予算「0」実績「0」でも前年データがある場合もあるのでレコードが必要
武田 遼河 さんが3ヶ月前に更新
- 期日 を 2024/09/01 から 2024/09/20 に変更
- 優先度 を 高め から 今すぐ に変更
予算軸対応版データの再取込の結果についてチェック完了いたしました。
範囲：2024/4/1~2024/7/31
チェック詳細については以下資料にまとめております。
https://chatnoirveri.sharepoint.com/:x:/s/msteams_2080ed/EZKyZ1mjsqxOrNs80P3q4KABxbXUIJsrvgN76Nswk8NydA?e=LVHbxe
▼概要
・売上客数差分_FOODIT軸シート
・VE売上客数 → ①rawdata上で修正されない売上修正、②元データ未アップロード、③売上レコード未生成 がありました。
①② → 備考欄 黄色塗りつぶしレコードは来週前半までにDWHデータを武田のほうで修正します。
③ → 生成状況とロジックのご確認お願いいたします。
・KK客数売上 → ①重複取込による値2倍、②客数差分 がありました。
① → 備考欄 黄色塗りつぶしレコードは来週前半までにDWHデータを武田のほうで修正します。
② → rawdata客数データについて、取込項目を改修いただく必要がありそうです。（サンプルをチェック資料同フォルダに格納しています）
詳細についてNEC側へ確認中です。
・売上差分_DM軸シート
・DMにレコードがあり、FOODITデータにないものについてはFOODITデータのほうが不正のようですので対応不要です。
その他は売上客数差分_FOODIT軸シート の差分と同様のようです。
・予算差分_raw軸シート
・①DMレコードがあるが予算元データと差分あり、②DMレコード無し がありました。
① → 予算元データのヘッダー有り無し問題の影響にみえます。 島貫さん→修正の上村上さんと再取込作業の調整をお願いしたいです。
② → 生成状況とロジックのご確認お願いいたします。
武田 遼河 さんが2ヶ月前に更新
- 期日 を 2024/09/20 から 2024/09/30 に変更
レコードの再取込結果について整合チェックを実施いたしましたのでご報告いたします。
詳細については以下ファイルをご参照ください。
https://chatnoirveri.sharepoint.com/:x:/s/msteams_2080ed/EQewA1qpNFxKib03nnnnfoUB4VCKLnhoBAh3u3BL5oOtcw?e=pvTpos
【結果概要】
・日割り予算とのレコード差分 → 確認OK
・KK客数差分 → 確認NG
→以前確認した際と同値でずれているので No40のセパレート前客数 の取込仕様となっていない？
上記資料「備考」項目 → 客数参照カラム違い と記載があるものが差分対象