Apache Flink エンジニア

PeoplePlus Tech

₱70-130K[月給]
リモートワーク５年以上１０年未満の経験大卒正社員
共有

リモートワークの詳細

募集している国：フィリピン

必要言語：英語

This remote job is open to candidates in specific countries. Please confirm if you want to continue despite potential location restrictions

職務内容

原文を表示

説明

  • Kafka 統合 - 特定のKafkaトピックにシームレスに接続するFlinkジョブの設定、コンシューマグループの定義、およびデータのシリアル化／デシリアル化の管理。
  • ストリーム処理ロジック - Kafkaから受信したデータストリームをフィルタリング、集計、ウィンドウ処理、および操作するためのFlinkデータ処理ロジックをDataStream APIを用いて記述いたします。
  • ステート管理 - データストリーム内のイベント間でコンテキストを維持するため、Flinkジョブ内で状態を持つ操作を実装し、累計値やセッション情報の追跡を行います。
  • Flinkジョブの最適化 - 高ボリュームのデータストリームを効率的に処理するため、パフォーマンス、並列性、およびフォールトトレランスの観点からFlinkジョブのパラメーターを調整いたします。
  • 監視およびアラート - Flinkジョブの状態を監視し、潜在的な問題を特定するとともに、運用上の懸念に対するアラートを発するための監視システムを整備いたします。
  • Flinkアプリケーションの開発 - データ取り込み、変換、および出力操作を含むデータパイプラインを定義するコードを、FlinkのDataStream APIを用いて記述いたします。
  • ストリーム処理設計 - 状態管理、ウィンドウ処理、およびフォールトトレランスなどのFlinkの機能を活用し、リアルタイムデータ処理ソリューションの設計を行います。
  • パフォーマンス最適化 - 効率的なデータ処理と高いスループットを確保するため、Flinkジョブの監視およびチューニングを実施いたします。
  • 他システムとの統合 - Kafka、データベース、その他のデータ処理システムなどのデータソースにFlinkアプリケーションを接続いたします。
  • クラスター管理 - Kubernetesなどの分散コンピューティングクラスター上でFlinkジョブを展開し、管理いたします。

要件

  • Kafkaアーキテクチャ、プロデューサー、コンシューマー、パーティション、ブローカー、トピック管理に関する十分な理解を有していること。
  • Kafkaアーキテクチャ、プロデューサー、コンシューマー、トピック管理およびKafka Streams APIに関する知識を有していること。
  • Flinkアプリケーションの作成およびJavaライブラリを用いたKafkaとの連携に必要なJava開発の経験を有していること。
  • ストリーム処理の原則、イベントタイム処理、ウィンドウ技法およびExactly-Onceセマンティクスに関する理解を有していること。
  • DataStream API、オペレーター、状態管理、ウィンドウ処理、フォールトトレランス機構など、Flinkの概念に関する深い理解を有していること。
  • 分散コンピューティングの原則およびフォールトトレランス、負荷分散、データパーティショニングといった概念に精通していること。
  • Kafka、Spark、またはHadoopなど、他のデータ処理ツールの経験があると望ましいこと。
  • FlinkのSQL APIを活用するために、SQLの理解があると有用であること。
  • センサーやアプリケーションからのライブデータを処理し、ほぼ即時の洞察を生成することができること。
  • 金融取引をリアルタイムで分析し、不審な活動を識別することができること。
  • ライブログの集約および分析を実施し、システムの問題を検出することができること。
  • リアルタイムで在庫レベルを追跡し、在庫管理の最適化を図ることができること。
アパッチフリンク
Preview

Andre Zabala

HR ManagerPeoplePlus Tech

掲載日 10 March 2025

類似の求人

さらに表示する

PeoplePlus Tech

未出資

51-100 従業人数

情報技術

採用中の件の求人を表示

報告する

Bossjobの安全に関する注意事項

海外勤務をお考えの際は下記の事項に注意して下さい。まずパスポートなどの身分証明証は不必要に提示しない。

そして下記に該当する企業を見つけた際は、 直ちに報告をお願いいたします。

  • 保証や担保を要求する会社には注意
  • 投資や資金調達を勧誘する
  • 不当な利益を得ていると思われる企業
  • 違法と思われる状況
  • その他不審に感じた場合