データエンジニア

NCS Group

相談可能
リモートワーク1年以上3年未満の経験専門学校正社員
共有

リモートワークの詳細

募集している国フィリピン

必要言語英語

This remote job is open to candidates in specific countries. Please confirm if you want to continue despite potential location restrictions

職務内容

原文を表示

説明

価値を生み出す影響力のある仕事をお探しですか?

あなたの専門知識で違いを作りたいと思っていますか?

NCSでそれが実現できます。


NCSは、アジア太平洋地域の20以上の都市で事業を展開する大手技術サービスファームであり、コンサルティング、デジタルサービス、技術、およびその他のサービスとソリューションを提供しています。

私たちは、人々、コミュニティ、パートナーに長期的な影響と価値を生み出すために、技術の力を利用して、非凡なことを実現することを信じています。私たちの多様な13,000人を超える労働力は、シンガポールおよびAPAC地域の政府と企業に対して、大規模でミッションクリティカル、マルチプラットフォームのプロジェクトを豊富に提供してきました。


私たちの使命:

技術を活用する情熱を推進します。

人と技術を結びつけます。

コミュニティを進化させ、産業を変革します。


私たちはNCSの多様な才能のチームの一員としてデータエンジニアを探しています。


共に達成を目指すこと:


• ETLジョブを開発する

• ETLジョブに適用されるクラスタリソースの使用効率を保証する

• フレームワークレベルで費用効果の高いビッグデータソリューションを設計・実装する

• 企業独自のエンタープライズデータシステムとフレームワークで遭遇したビッグデータの問題に対するサポートを提供する

• 最善の方法とスパーク設定のバランスを適用してETLジョブを強化する

• プロジェクトおよびプログラムの論理要件のレビューに参加する

• フレームワークとシステムの大規模な変更をチームに伝達し、他の影響を受けるチームと協力する

• あるプラットフォームから別のビッグデータプラットフォームへのジョブの変換と移行

• インゲストされたソースからジョブを統合し、さまざまなターゲットに変換する

• ソースコアリポジトリの維持または管理

• 技術的なデリバリーモジュールを文書化する

• ビッグデータETLに関連するテクノロジートレンドをできる限り把握する

• 複数のETLジョブをjava-spark、airflowで実装し、さまざまなデータウェアハウスで異なるレポート(金融レポート、リードレポート、ネットワーク加入者レポートなど)にロードする

• pysparkでのETLデータマッピングのトラブルシューティング、テスト、事前実装

• Datamartの複数のETLジョブに取り組み、データは主にGlobeのブロードバンド、ポストペイドおよびプリペイドに焦点を当てており、機械学習エンジニアが利用できる顧客体験を再構築します。

• オンプレからすべてクラウドベースに移行し、クラウドベースのクラスターおよびビッグデータツールを使用してETLジョブをマクロ変換する

• デジタル成長と変革のユースケースのためにETLジョブを開発し、業務の視点を構築し、顧客の支払いトランザクション、報酬、購読、および地域リードに関するマクロビジョンを追跡するためのデータを活用します。

• Databricksを使用して他のジョブの移行を行い、計算リソースの管理をコントロールします。

• スパークの読み取りと書き込みのソースとターゲットに技術を適用してランタイムを短縮する

• データ品質とデータアーキテクトのエンジニアと共に費用効果の高いETLジョブ実装のソリューションに取り組む。


必須条件:

  • Java 11以上(取り込み用)
  • SQL
  • Python
  • Dbt
  • Databricks
  • Kafka
  • Airflow
  • NiFi
  • Linux管理
  • Bitbucket

要件

職務説明書を参照してください。

データモデリングETLプロセスSQLPythonデータウェアハウジングビッグデータ技術クラウドコンピューティングデータパイプライン自動化NoSQLデータ品質保証
Preview

Boss

HR ManagerNCS Group

掲載日 09 May 2025

NCS Group

>1000 従業人数

その他

採用中の件の求人を表示

報告する

Bossjobの安全に関する注意事項

海外勤務をお考えの際は下記の事項に注意して下さい。まずパスポートなどの身分証明証は不必要に提示しない。

そして下記に該当する企業を見つけた際は、 直ちに報告をお願いいたします。

  • 保証や担保を要求する会社には注意
  • 投資や資金調達を勧誘する
  • 不当な利益を得ていると思われる企業
  • 違法と思われる状況
  • その他不審に感じた場合