役職:データエンジニア(Pyspark&Databricks)
位置: オハイオ州コロンバス – オンサイト – 1日目
職種: 契約W2 / 1099
経験レベル: [Mid-Level/Senior]
地元のプロファイルのみが必要です!!!!
ヨブの概要:
私たちは非常に熟練したやる気を求めています データエンジニア に強い経験を積んでいます 納屋 そして Databricks データエンジニアリングチームに参加します。この役割では、スケーラブルなデータパイプラインの構築、ビッグデータワークフローの最適化、および組織全体のデータアクセシビリティを可能にする責任があります。高品質のデータソリューションを提供するために、データサイエンティスト、アナリスト、およびビジネス利害関係者と緊密に連携します。
主な責任:
-
スケーラブルな設計、構築、維持 ETL/ELTパイプライン 使用 納屋 そして Databricks クラウドプラットフォーム(Azure、AWS、またはGoogle Cloudプラットフォーム)。
-
大規模なデータ処理ソリューションを開発および最適化します アパッチスパーク。
-
構造化されたデータソースと非構造化データソースからのデータ摂取プロセスを実装します。
-
官能的なチームと協力して、データ要件を収集し、クリーンで信頼できるデータセットを提供します。
-
データの品質、ガバナンス、およびセキュリティを確保してください。データライフサイクル全体で。
-
データパイプライン、ジョブ、パフォーマンスの問題を監視およびトラブルシューティングします。
-
分析とレポートをサポートするために、データ変換と濃縮ロジックを実装します。
-
現代のデータレイクとデータウェアハウスアーキテクチャを使用して動作します(例: デルタ湖、 レイクハウス、 スノーフレーク、など)。
必要な資格:
-
学士号 コンピューターサイエンス、エンジニアリング、または関連分野。
-
3年以上の経験 ビッグデータエンジニアリング、できればクラウド環境で。
-
強力な実践的な体験 納屋 そして アパッチスパーク。
-
一緒に働くのに熟練しています Databricks ノート、ワークフロー、デルタ湖。
-
1つ以上のクラウドプラットフォームの経験(azure、 aws、 または Googleクラウドプラットフォーム)およびAzure Data Factory、AWS接着剤などのサービス。
-
のしっかりした理解 データモデリング、 データウェアハウジング、 そして 分散コンピューティング。
-
SQLとクエリのパフォーマンスチューニングに熟練しています。
-
バージョン制御ツールの経験(例: git)およびCI/CDプラクティス。
よろしく、
Radiantze Inc
雇用主は、ジョブの説明を生成および強化するのに役立つ人工知能言語ツール(「AI」)にアクセスでき、AIはこの説明を作成するために使用されている可能性があります。ポジションの説明は正確さのためにレビューされており、サイコロは仕事の機会を正しく反映すると考えています。
#データエンジニア #オハイオ州コロンバス #地元の人々のみ #放射