データエンジニアの職務経歴書例（新卒・若手）

• 先輩のレビューを受けながら、業務抽出データを整備済みテーブルへ送るAzureデータパイプラインを構築。SQLの結合キーと遅延到着ルールを明記し、再処理で重複しないか検証した。
• 担当を割り当てられた範囲で、データパイプラインにSQL照合と隔離チェックを追加し、拒否行に理由を保存。上流のスキーマ変更をレポート層へ届く前に追跡した。
• 担当範囲で、データパイプラインへ入力・出力件数照合と遅着処理を追加し、完了レコードを重複させずに中断パーティションを再処理。
• 担当範囲で、分割SQLフィクスチャを活用したAirflow ETL復旧を主導し、重複取込を解消して下流キーを変えず再実行を完了。
• 担当範囲で、Spark行照合を活用したPythonパイプライン検査を構築し、遅延調査を45分から18分へ短縮してAzure再実行手順を公開。

• 担当範囲で定常的な事業質問向けの認定データセットと責任者。先輩のレビューを受けて資料の確認と修正を実施。チーム全体では合意した運用時間内に処理を完了できる状態を維持した。自分の担当作業とチームの成果を分け、先輩社員と貢献範囲を確認した。
• 担当範囲で、公開指標と原記録の差異から母集団を変えた処理を追跡し、再現可能なクエリで計算を修正。
• 担当範囲で、直前の正常更新と失敗実行を比べ、入力欠損と変換エラーを分離。対象期間のみ再処理し、元クエリと修正結果を保存。

• 担当範囲で、担当範囲で大規模変換の増分モデルとパーティション削減。先輩のレビューを受けて資料の確認と修正を実施
• 重複・遅着・訂正値を含む合成原記録を作り、行数・キー一意性の検査と指標への期待影響を記録。
• 分析結果と手計算基準表を照合して差異を変換工程まで追跡。修正クエリにデータ辞書・再実行手順を添付。
• 手計算基準を活用した合成データ検証の責任を担い、重複集計を解消して訂正合計再現ノートを完成。

関連科目：アルゴリズム、OS、データベース、ネットワーク

SQL · データパイプライン · 入力・出力照合 · パーティション再処理

• 再現クエリを活用した自主手法ノートを公開し、粒度・除外記録・分母変更への感度を解説。