Trinoデータエンジニア募集｜データクリーンサービスETL開発・運用支援｜55〜65万円
基本情報
- 案件名
- データクリーンサービスETL 業務開発・運用支援案件
- 業界
- データ分析サービス提供企業
- 職種
- データエンジニア、アナリティクスエンジニア
- 使用言語
- Python, SQL
- 報酬（単価）
- 55万円～65万円
- 雇用形態
- 業務委託（フリーランス）
- 勤務地
- 東京都千代田区
- 開発環境
- Trino, Python, Digdag, Embulk, Hadoop, SQL, Git, Linux, クラウド環境 (AWS/GCP/Azure)
- 精算
- 160h
- 契約期間
- 長期
- 勤務時間
- 10:00～19:00
- その他
- ・リモートワークをメインとした柔軟な働き方が可能です。
・データ分析サービス提供企業での大規模データ処理に携わる貴重な経験を積めます。
・チーム体制は4名募集しており、リーダーやベテランの方も歓迎します。
・ビジネスカジュアルでの勤務が可能で、自由な雰囲気で業務に取り組めます。
案件概要
データ分析サービス提供企業における、データクリーンサービスETL業務の運用移管と改修を支援する案件です。外部委託中のETL業務を内製化し、データ品質向上と効率的なデータ活用を目的としています。TrinoやPythonを用いた開発・運用を通じて、データ基盤の安定稼働と機能強化に貢献いただきます。
案件内容
データ分析サービス提供企業において、データクリーンサービスに関するETL業務の運用移管と機能改修を支援するプロジェクトです。現在外部委託されているETL業務を内製化するにあたり、既存システムの運用引き継ぎから、機能改善、新規開発まで幅広くご担当いただきます。データ品質の向上と効率的なデータ活用を目的とし、TrinoやPythonなどの技術を用いて、データ基盤の安定稼働と機能強化に貢献していただく重要なポジションです。大規模データの処理経験やデータエンジニアリングの知見を活かし、チームの一員としてプロジェクトを推進していただきます。
具体的な業務内容は以下の通りです。
・外部委託中のETL業務に関する詳細な運用状況のヒアリングとドキュメント作成
・既存ETL処理のコードレビュー、改善提案、および改修作業
・Trinoを用いたデータ処理パイプラインの設計、開発、テスト
・Pythonなどを用いたETLスクリプトの開発およびメンテナンス
・データ品質監視、エラーハンドリング、パフォーマンスチューニング
・データクリーンサービスにおける新たな要件定義への参画と機能実装
・データ基盤の安定稼働に向けた運用保守業務全般
・チームメンバーとの連携、技術的な知見の共有、課題解決への貢献
・DigdagやEmbulk、Hadoopなどの技術を活用した大規模データ処理の検討と導入支援
必須スキル
【必須】
・Trinoに関する知識または実務経験
・Pythonまたはその他言語での開発経験
・データエンジニアまたはアナリティクスエンジニアとしての業務経験
・データパイプラインの設計、開発、運用経験
【歓迎】
・DigdagおよびEmbulkの利用経験
・Hadoopなどの大規模データの分散処理技術を用いた業務経験
・クラウド環境（AWS, GCP, Azureなど）でのデータ基盤構築・運用経験
・データ品質管理やデータガバナンスに関する知見
【求める人物像】
・自律的に課題を発見し、解決に向けて行動できる方
・新しい技術やツールに対して積極的に学習し、業務に取り入れられる方
・チーム内外と円滑なコミュニケーションを図り、協力して業務を進められる方
・データドリブンな意思決定を支援することに情熱を持てる方