Databricksを活用したデータ基盤構築・ETL処理開発案件

450000 ~ 600000 円/月

※消費税を除いた金額です。

事業内容

Databricks上でのデータ処理開発。Python/PySpark/SQLを用いたETL・ELT処理の設計・開発。Delta Lakeを利用したデータ管理・加工。データパイプライン、ワークフロー、ジョブの設計・実装。既存データ処理の改修・性能改善。データ連携処理の設計・開発。単体テスト、結合テスト、データ検証。エラー調査、ログ確認、運用改善。各種ドキュメント作成。

必須スキル

・Databricksを利用した開発経験
・PythonまたはPySparkを用いた開発経験
・SQLを用いたデータ抽出・加工経験
・ETL/ELT処理、データパイプライン開発経験
・クラウド環境でのデータ基盤開発経験
・基本設計、詳細設計、テスト設計の経験
・日本語での業務コミュニケーション能力

歓迎スキル

・Azure DatabricksまたはAWS Databricksの経験
・Delta Lake、Unity Catalogの知識・経験
・Snowflake、BigQuery、RedshiftなどDWHの経験

開発環境

Databricks, Python, PySpark, SQL, Delta Lake

稼働日数

週5日

勤務地

神奈川県川崎市

稼働形態

一部リモート

人気案件は申し込みが集中するため、お早めにご相談ください。