石油会社向けAzure Databricks運用保守支援

Azure Databricks DWHおよび周辺ETLシステムの障害調査、問い合わせ対応、PG改修、小規模開発等の支援。DWHシステム概要:基幹システムや製油所から受信したファイルをDatabricksのメダリオンアーキテクチャで加工しDWHへ格納。Domo Cloud Amplifier経由で取り込み、Domo ETLで加工しユーザーへ提供。

・Databricksの運用、保守経験
・クラウド(Azure)の運用、保守経験
・DWH、ETLシステムの運用、保守経験
・ジョブ管理ツール(System Walker Operation Manager)の運用、保守経験

・Databricksの設計、構築経験
・Azureの設計、構築経験
・DWH、ETLシステムの設計、構築経験
・Azure Data Factoryの設計、開発、運用、保守経験
・Storage Account(Data Lake)の運用、保守経験
・OS(Windows)運用、保守、構築、設計経験
・Unity Catalogの運用、保守経験
・PySpark、SQL設計、開発経験
・SQL Database運用、保守経験
・SQL Databaseストアドプロシージャ設計、開発経験
・GitHub運用、保守経験

Azure Databricks, Azure Data Factory, Storage Account(Data Lake), Unity Catalog, PySpark, SQL Database, GitHub, System Walker Operation Manager, Windows

週5日

東京都中央区

常駐

140h-180h

1回