データ基盤プロジェクト

2023/12/15

17:48 POS #196: TEC　生データ整形環境検討・構築

TODO単位で進捗を記載します。
※12/15期限としていた整形スクリプトの作成まで完了
【TODO】
整形スクリプト作成　→　済
整形ファイルAWSアップロード処理作成　→　50%
45サーバー機能移管　→　0%
整... 武田 遼河

17:46 POS #197: NEC　生データ整形環境検討・構築

TODO単位で進捗を記載します。
※12/15期限としていた整形スクリプトの作成まで完了
【TODO】
整形スクリプト作成　→　済
整形ファイルAWSアップロード処理作成　→　50%
45サーバー機能移管　→　0%
整... 武田 遼河

17:42 POS #226 (完了): PowerBIレポート ドラフト版動作確認

※要望系は展開後に金曜の定例時に改めて確認のため割愛
済【全体】。
・表示データ　→　「NaN」「無限大」の表示はPowerBI仕様の為対応不可
済【売上速報】
済【PL表】
・データ更新　→　データ修正版を再受... 武田 遼河

17:35 POS #227: PowerBI運用手順書作成

島貫さんのほうで経戦メンバーへ展開していただいております。
残：PowerBIオンライン版導入手順作成 武田 遼河

2023/12/14

17:14 POS #227: PowerBI運用手順書作成

ファイル最新版
\\192.168.200.77\情報システム部\11.社内システム関連\データ基盤\PowerBI
★作成中_【データ基盤PJ】新レポート動作環境導入手順(PJメンバー)_ver2.1.pptx 武田 遼河

17:13 POS #227: PowerBI運用手順書作成

島貫さんのほうで手順の確認と修正を実施いただきました。
問題なければ経戦の帳票作成メンバーへは先んじて展開予定です。
残：己斐さん確認 武田 遼河

09:44 POS #227: PowerBI運用手順書作成

導入までの手順を島貫さんにご確認いただいております。
また、最新版の手順書を更新いたします。 武田 遼河

2023/12/12

15:11 POS #225: 要改善店抽出データソース調査

経戦梅原さんより現行とデータ基盤とで値割引の値の出方の違いを知りたいとの要望をいただいています。
以下で対応いたします。
・2023/10データ送付
・新/旧　抽出条件のご説明
整形環境実装後に作業します。 武田 遼河

2023/12/11

11:05 その他 #156: データ基盤　勤怠データ・PL整形環境運用方法の整備

未着手です。
取り急ぎ社内受領データフローと過去資料の蓄積のみ進めます。 武田 遼河

10:55 POS #225: 要改善店抽出データソース調査

臼木さんのほうで現行の値割引データソースの検証を実施いただきました（添付参照）
上記で経戦と合意ができればクローズとします。 武田 遼河

2023/12/08

16:27 POS #227: PowerBI運用手順書作成

導入手順内で解消しないエラーについて、村上さんにご確認いただき武田環境にて構築・動作確認を完了いたしました。
導入手順作成については情シスメンバーどなたかに再現性を確認いただいたのちクローズとします。 武田 遼河

2023/12/06

17:39 POS #225: 要改善店抽出データソース調査

以下、調査結果でした。
「割引額」カラム算出方法
【VE】
・ttotal.csv「割引券支払合計(内税抜き) 金額」合計　＋　「端数値引金額」合計
【KHK】
・部門別予実表（YY.M月度）の「410040 売上値引」... 武田 遼河

2023/12/02

16:53 POS #227: PowerBI運用手順書作成

データソース設定手順を追記いたしました。
一部正常に適用できない項目があったので村上さん確認後修正いたします。 武田 遼河

14:33 POS #227 (進行中): PowerBI運用手順書作成

PowerBIデスクトップ版導入手順を作成いたしました。
（Microsoft Storeからインストールすると各人のバージョンを自動で更新してくれるそうなのでこちらを採用しています。）
PowerBIレポート、モバイル版の導... 武田 遼河

16:50 POS #226 (進行中): PowerBIレポート ドラフト版動作確認

無償版にて動作確認を実施いたしました。
以下確認事項をご報告いたします。
【全体】
・発行　→　無償版の為利用不可でした。有償版契約後改めて確認します。
・年月　→　動作OKです。　※複数月が選択できないようです。運用上問... 武田 遼河

16:16 POS #225 (進行中): 要改善店抽出データソース調査

売上トランザクション（ttotalのカラムから算出）から割引額を抽出しているところまで判明しましたが、具体的なカラムの判別にはデータ検証作業が必要となります。
また、KHK業態についてはPL表の割引額から参照しているようです。 武田 遼河

10:58 POS #67: NEC POS 2回清算 運用について

【TODO】
・NEC売上データ仕様ドキュメント化
・データ基盤周りのデータフロー図作成
・過去発生したデータ異常のケースを書き出し、要件化と対応リスト作成
売り上げデータについてはCU環境で整形処理後AWSにアップロード... 武田 遼河

2023/11/28

16:31 POS #227 (完了): PowerBI運用手順書作成

以下情報を手順化し利用者に展開する。
・導入手順（デスクトップ版、ブラウザ版）
・チュートリアル
※取り急ぎ、デスクトップ版の導入手順をPJメンバー向けに展開、を目標とする。 武田 遼河

16:28 POS #226 (完了): PowerBIレポート ドラフト版動作確認

以下動作を確認
・PowerBIデスクトップ版をインストールしたPC挙動確認
・体裁確認
・データソース同期確認
・ブラウザ版用発行機能確認 武田 遼河

16:25 POS #225 (完了): 要改善店抽出データソース調査

現行のよう改善店抽出帳票について、値引き額カラムのデータソースを確認する。
【想定】
１．基幹DBが取り込んだ売上トランから抽出
２．FOODITから提供 武田 遼河

16:05 POS #220 (完了): 11/21営業日分 NECPOS rawdata取得エラー

11/28取得データに11/21営業日分の全店データが含まれていることを確認いたしました。
再送いただいたデータは「20231122」フォルダに移動させております。
クローズします。 武田 遼河

2023/11/27

19:08 POS #197: NEC　生データ整形環境検討・構築

添付のフォーマットと以下仕様で合意しております。
■ファイル名称
[ファイル名]_[yyyymmddhhMM].csv
※日付はs3アップロード日時
※コンマ区切りcsv
■ファイル内容
「店舗コード」「営業日付」を各... 武田 遼河

09:51 POS #197: NEC　生データ整形環境検討・構築

期日再設定 武田 遼河

09:45 POS #197 (進行中): NEC　生データ整形環境検討・構築

<<<期日の設定消える現象テスト>>> 武田 遼河

19:04 POS #196: TEC　生データ整形環境検討・構築

添付のフォーマットと以下仕様で合意しております。
■ファイル名称
[ファイル名]_[yyyymmddhhMM].csv
※日付はs3アップロード日時
※コンマ区切りcsv
■ファイル内容
「店舗コード」「営業日付」を各... 武田 遼河

09:55 POS #220 (進行中): 11/21営業日分 NECPOS rawdata取得エラー

FTPダウンロード処理中にエラーを感知した際はアップロード、FTPサーバー側ファイル削除処理を実施しないように修正。
また、エラー時はTeamsに通知する処理を実装。
設計書
\\192.168.200.77\情報システム部... 武田 遼河

09:10 POS #195 (完了): NEC 生データ要取込ファイル仕分け

島貫 圭太

2023/11/24

18:37 POS #220 (完了): 11/21営業日分 NECPOS rawdata取得エラー

以下のエラーにより11/21営業日分のNECPOS rawdataの取得が不完全でした。
また、バッチに不備があり、FTPに上がっていた該当日付のデータを削除してしまっております。
【TODO】
・11/21 NECデータ受... 武田 遼河

16:59 POS #196: TEC　生データ整形環境検討・構築

今後の運用では以下のケースが想定されるため、整形後フォーマットに「店舗コード」「営業日」カラムを追加＆データ基盤側で取込可能な仕組みにできないか検討します。
・11/1～11/11までNW障害で売上とれず。
・11/20に上記期間... 武田 遼河

2023/11/22

17:58 POS #196: TEC　生データ整形環境検討・構築

以下、CU側で取込ファイルの精査を実施し村上さんへ通知済みです
掲題の件につきまして、今回のスコープでは以下のファイルを取込む方針でお願いいたします。
【取込希望ファイル】
・ztotal.csv
・titem.csv
... 武田 遼河

13:32 POS #196 (進行中): TEC　生データ整形環境検討・構築

【方針】
・整形環境についてはひとまずオンプレ（ファイル共有サーバー）で構築
【進め方】
１．CU：取込が必要なファイルを選定して村上さん側に通知
２．村上さん：整形後フォーマットを指定してCU通知
３．CU：実装
４... 武田 遼河

13:34 POS #197: NEC　生データ整形環境検討・構築

【方針】
・整形環境についてはひとまずオンプレ（ファイル共有サーバー）で構築
【進め方】
１．CU：取込が必要なファイルを選定して村上さん側に通知　済
２．村上さん：整形後フォーマットを指定してCU通知
３．CU：実装
... 武田 遼河

2023/11/21

17:21 POS #98 (完了): TEC 2022売上サマリデータ整形

調査の結果、ファイルの欠損ではなく店休店舗のブレによるものと判明いたしました。
経戦受領データをもとに営業店舗数をまとめて村上さんにご連絡済みです。
また、2022/1~3月のデータにも欠損があるとのことでしたが、こちらは取込... 武田 遼河