top of page
募集職種 詳細
ETL開発エンジニア
職務概要
◆AWS上に構築されるデータ分析／DWH環境において、ETL処理の設計・開発・運用を担当していただきます。
◆各種データソースからのデータ収集・前処理・変換処理の設計と実装
◆AWS Glue／Step Functions／Lambda 等を用いたETLパイプラインの構築
◆Amazon S3、Redshift、Athena 等によるデータストア管理
◆データ更新・バッチ処理のスケジューリングとモニタリング整備
◆データ品質の担保、エラー検知・リカバリ処理の設計
◆BIツールやデータサイエンス基盤向けのデータ提供支援
◆データセキュリティ、権限管理、監査対応
人材要件 (Must Have)
・AWS環境でのETL設計・開発経験（3年以上）
・AWS Glue／Lambda／Step Functions などを使った開発経験
・データモデリング／データ正規化の基礎知識
・S3／Redshift／Athenaなどのデータ関連サービスの使用経験
・PythonまたはPySparkによるETLロジック実装経験（2年以上）
・SQLチューニングやクエリ最適化の知識
・日本語がN1以上
人材要件 (Nice to Have)
・データレイクやDWHアーキテクチャの設計経験
・AirflowやDagsterなどのオーケストレーションツール使用経験
・CI/CDによるデータパイプラインの自動化運用経験
・機密データの取り扱い経験（PII／個人情報保護）
・AWS認定資格（データアナリティクス、ソリューションアーキテクトなど）
仕事内容
bottom of page