【データ基盤構築】Python×AWS ETLエンジニア募集(基本リモート)
基本情報
- 案件名
- データ分析基盤(DWH/ETL)構築支援プロジェクト
- 業界
- IT/データ分析/DX推進
- 職種
- データエンジニア
- 使用言語
- Python/SQL/YAML
- 報酬(単価)
- ~73万円(精算140~180h)
- 雇用形態
- 業務委託(フリーランス)
- 勤務地
- 基本リモート ※月数回 大阪府大阪市への出張あり(旅費別途精算)
- 開発環境
- AWS(Glue/Athena/S3) / Python / SQL / CloudFormation / GitHub Actions
- 精算
- 140~180h
- 契約期間
- 長期(想定)
- 勤務時間
- 10:00~19:00
- その他
- データ基盤構築の中核ポジション
案件概要
複数システムからデータを収集・加工し、分析基盤(DWH)へ蓄積するETL仕組みをAWS環境上に構築する案件です。
データ取得方式の設計から実装・検証までを担い、分析活用を支える重要なポジションです。
案件内容
本案件では、AWS上にデータ分析基盤を構築するため、ETL処理を中心としたデータエンジニアリング業務をご担当いただきます。
標準化された仕組みをベースにしつつ、データソースごとの特性に応じた設計・実装が求められます。
【主な業務内容】
・外部データソース取り込みに関するワークフロー設計
- データ取得タイミング、周期の検討
- 洗い替え/積み上げ/差分取込などの方式設計
・AWS Glueを用いたETLワークフロー定義・開発
- CloudFormation(YAML)によるIaC構築
- Python/SQLによるデータ取得・加工処理
- GitHub Actionsを用いたS3へのデプロイ
- 動作検証・改善
・Athenaを利用したDWH参照用Viewの作成
- BIツール(内製システム)向けデータ提供
基本リモートで働きやすく、AWS×データ基盤構築の実務経験を深められる案件です。
必須スキル
【必須スキル】
・Pythonでの開発経験3年以上
・SQLを用いたデータ抽出、調査クエリ作成スキル
・GitHub Actionsの利用経験
【歓迎スキル】
・AWS Glue/Athenaの利用経験
・CloudFormationによるインフラ構築経験
・DWH/ETL開発経験
・BIツール向けデータ設計経験
【求める人物像】
・データ特性を理解し、最適なETL設計ができる方
・標準化された仕組みを理解した上で応用できる方
・リモート環境でも主体的に業務を進められる方