データエンジニア募集|企業向けデータ分析基盤におけるデータ変換処理の設計・開発
基本情報
- 案件名
- 企業向けデータ分析基盤におけるデータ変換処理の設計・開発
- 業界
- IT/データソリューション
- 職種
- データエンジニア
- 使用言語
- Python、SQL
- 報酬(単価)
- 60万円~70万円
- 雇用形態
- 業務委託(フリーランス)
- 勤務地
- フルリモート
- 開発環境
- Python、SQL、Docker、AWS、Git、Jira、DWH(Redshift/BigQueryなど)
- 精算
- 140h - 180h
- 契約期間
- 長期
- 勤務時間
- 9:00~18:00
- その他
- ・フルリモートで柔軟な働き方が可能
・データドリブンな組織でスキルアップできる環境
案件概要
受領データの変換処理における設計からリリースまで一貫して担当いただくデータエンジニア案件です。PythonとSQLを用いて、データ分析基盤の構築・運用に貢献いただきます。
案件内容
本案件では、企業が保有する多様なデータを効率的に活用するためのデータ変換処理の設計から開発、テスト、リリースまでの一連の工程を担当いただきます。具体的には、様々な形式で受領する生データを、分析や活用に適した形に加工・整形し、データウェアハウスやデータレイクへ格納するデータパイプラインの構築が主なミッションとなります。Python(pandas)とSQLを駆使し、データの品質と整合性を保ちながら、安定稼働するデータ基盤の構築に貢献していただきます。ビジネス部門やデータサイエンティストと連携し、要件定義から関わる機会もあり、技術力だけでなくコミュニケーション能力も活かせる環境です。データドリブンな意思決定を支える重要な役割を担っていただきます。
・受領データの要件定義、および変換処理の設計
・Python(pandas)を用いたデータ変換処理の実装
・SQLによるデータ集計、データ連携処理の開発
・開発した変換処理の単体テスト、結合テスト、およびリリース作業
・Dockerを用いた開発環境の構築と運用
・データパイプラインの監視、運用、改善提案
必須スキル
【必須スキル】
・Python(pandas)を用いた開発経験
・SQLを用いたデータ集計とデータ連携の経験
・Docker を使用した開発経験
【歓迎スキル】
・AWS環境での開発経験(他クラウドでの類似サービスも可)
・マネジメント経験
・ETLツールやDWH(データウェアハウス)の構築・運用経験
・データパイプラインの設計・構築経験
【求める人物像】
・データ活用に強い関心を持ち、主体的に課題解決に取り組める方
・新しい技術やツールに対して積極的に学習する意欲のある方
・チーム内外と円滑なコミュニケーションが取れる方