架空の職務経歴書例です。氏名・職歴・成果は書き方を説明するために作成したもので、実在する社員の経歴ではありません。
森 由衣
依存関係とバックフィルを管理するバッチオーケストレーションと定常的な事業質問向けの認定データセットと責任者を担当したデータエンジニア。主な実務分野：SQL · データパイプライン · 入力・出力照合 · パーティション再処理。
職務経歴
Tapestry (Coach, Kate Spade)
東京 · 日本
データエンジニア
2022年3月 - 現在
- 業務抽出データを整備済みテーブルへ送るAzureデータパイプラインを構築。SQLの結合キーと遅延到着ルールを明記し、再処理で重複しないか検証した。
- データパイプラインにSQL照合と隔離チェックを追加し、拒否行に理由を保存。上流のスキーマ変更をレポート層へ届く前に追跡した。
- データパイプラインへ入力・出力件数照合と遅着処理を追加し、完了レコードを重複させずに中断パーティションを再処理。
- 分割SQLフィクスチャを活用したAirflow ETL復旧を主導し、重複取込を解消して下流キーを変えず再実行を完了。
- Spark行照合を活用したPythonパイプライン検査を構築し、遅延調査を45分から18分へ短縮してAzure再実行手順を公開。
NTTデータ
東京 · 日本
データエンジニア
2019年1月 - 2022年2月
- 定常的な事業質問向けの認定データセットと責任者。合意した運用時間内に処理を完了できる状態を維持した。
- 公開指標と原記録の差異から母集団を変えた処理を追跡し、再現可能なクエリで計算を修正。
- 直前の正常更新と失敗実行を比べ、入力欠損と変換エラーを分離。対象期間のみ再処理し、元クエリと修正結果を保存。
主要プロジェクト
データエンジニアの自主ケーススタディ
プロジェクト担当者
2024年2月 - 2024年6月
- 大規模変換の増分モデルとパーティション削減
- 重複・遅着・訂正値を含む合成原記録を作り、行数・キー一意性の検査と指標への期待影響を記録。
- 分析結果と手計算基準表を照合して差異を変換工程まで追跡。修正クエリにデータ辞書・再実行手順を添付。
- 手計算基準を活用した合成データ検証の責任を担い、重複集計を解消して訂正合計再現ノートを完成。
学歴
電気通信大学
東京都調布市 · 日本
学士（工学）
2013年4月 - 2017年3月
関連科目：アルゴリズム、OS、データベース、ネットワーク
スキル
職種別スキル
SQL · データパイプライン · 入力・出力照合 · パーティション再処理
