NEW
【Azure Databricks/Azure/】石油会社向けDatabricks運用保守案件
雇用形態
業務委託(フリーランス)
業務内容
【募集背景】
石油業界向けデータ分析基盤の安定稼働および機能拡張に向けて、データ基盤運用体制を強化するための募集となります。
【作業内容】
Azure Databricks上のDWHおよびETL処理の運用保守をご担当いただきます。具体的には、障害発生時の調査・復旧対応、利用部門からの問い合わせ対応、既存PGの改修や小規模な追加開発などを行っていただきます。また、Bronze/Silver/Gold構造で加工されたデータのDWH格納に関するジョブ監視や調整、Systemwalkerを用いたジョブ管理業務にも携わっていただきます。Domoで可視化されるデータの品質維持に向けた運用改善やチューニングもご対応いただきます。
【求める人物像】
データ基盤運用に責任感を持ち、障害発生時にも落ち着いて状況整理と関係者への説明ができる方を求めております。新しいクラウドサービスやデータ関連技術に対して前向きにキャッチアップし、自ら改善提案ができる方にマッチするポジションです。
【ポジションの魅力】
Azure Databricksを中心としたモダンなデータ基盤運用に携わることで、クラウドDWHやETL、ジョブ管理の実務経験を一貫して積むことができます。大規模なデータ処理基盤の運用ノウハウを獲得できるほか、今後需要が高まるクラウドデータエンジニアリング領域のスキル向上にもつながる環境です。
【開発環境】
Azure Databricksを中心としたクラウドDWH・ETL基盤上で、Bronze/Silver/Gold構造によるデータ加工を行っております。ジョブ管理にはSystemwalkerを利用しており、可視化基盤としてはDomoを採用しています。
求めるスキル
- ■必須スキル:
- ・Databricksを用いた運用保守経験 ・Azure環境における運用保守経験 ・DWHおよびETLの運用経験 ・Systemwalkerなどジョブ管理ツールの運用経験
- ■歓迎スキル:
- ・Azure Data Factory / Data Lake / Unity Catalogの利用経験 ・PySparkでの開発・運用経験 ・SQLを用いたデータ操作・集計経験 ・GitHubを用いたソースコード管理経験
特徴