職務概要:

弊社では、堅実な技術力と豊富な実務経験を有する大規模データ開発エンジニアを募集しております。弊社の中核データプラットフォームチームにご参加いただき、次世代データプラットフォームの設計および構築に深く携わっていただきます。データの収集、クレンジング、保管からリアルタイム処理およびサービス化に至る一連の高性能かつスケーラブルなデータ処理アーキテクチャの構築と最適化を担当していただき、弊社のデータ駆動戦略を直接支援し、事業が市場の変化に迅速に対応できるようにするとともに、アルゴリズム、分析、製品チームに強力なデータ支援を提供いたします。

ここでは、膨大なデータ、同時大量のストリーム処理、Flink、ClickHouse、Kafka など多様な技術コンポーネントに触れる機会があり、重要なシステムをゼロから構築するプロセスに参加していただけます。データエンジニアリングに情熱をお持ちで、国際的かつ多チームでの協働環境において技術の限界に挑戦されたい方のご応募を心よりお待ちしております！

 

職務内容:

• 会社の大規模データプラットフォームの設計、開発および最適化に参画し、事業の持続的成長とデータ駆動の意思決定を支援いたします。

• ClickHouse クラスターの構築、性能調整、モニタリングおよび日常の運用保守を担当し、システムの高可用性と高性能を確保いたします。

• Flink ストリーム処理タスクの開発、デプロイおよび運用保守に参画し、リアルタイムデータ処理チェーンの安定した運用を保証いたします。

• 事業部からのデータサービス要件をサポートし、Java Spring Boot を用いたデータ API サービスの開発を行います。

• データサイエンスチームによるデータパイプラインの構築を支援し、アルゴリズムモデルのトレーニングおよびオンラインサービスをサポートいたします。

• データ処理プロセスおよびシステムアーキテクチャの継続的な最適化を図り、システムの安定性と拡張性を向上させます。

• プロジェクトにおいて積極的に責任を担い、問題解決を推進し、オーナーシップをもって高圧下でも優れた実行力とコミュニケーション力を発揮していただきます。

応募資格:

• 学士以上の学歴を有し、コンピュータ、ソフトウェア工学、情報技術等の関連分野の専攻者を優遇いたします。

• 5年以上の大規模データ関連の実務経験。

• MySQL、PostgreSQL 等のリレーショナルデータベースおよびカラム指向データベースに関する堅実な基礎知識を有すること。

• ClickHouse、Doris 等に代表されるデータベースの原理について、基盤ストレージやクエリ最適化などの重要なメカニズムを理解していること。

• Javaに習熟し、Spring Boot フレームワークを用いた REST API サービスの開発経験があること。

• 優れたコミュニケーションおよび協働能力を有し、データ分析、製品、事業部門と密接に連携できること。

• 強い責任感を持ち、優れたストレス耐性と問題解決能力を発揮し、自発的に業務を推進できること。

• 半年後より勤務地が日本となり、転居および出社が必要となります。（会社がビザサポートおよび関連転居支援を提供いたします）

以下の経験がある方は尚可:

1. Kafka、Zookeeper、HDFS、Hive、Airflow 等のコンポーネントの実務経験。

2. レコメンデーションシステム、ユーザープロファイル、パーソナライズドランキング等の関連プロジェクト経験。

3. 時系列予測、ユーザー行動予測など、予測系アルゴリズムに関する経験。

4. ChatGPT、LLama 等の大規模言語モデル（LLM）をデータ拡張、自動要約、インテリジェントQA等のビジネスやシステムへの応用において使用した実績。

5. リアルタイムデータウェアハウスや指標体系構築プロジェクトへの参画経験。

6. 大規模データプラットフォームをゼロから構築した経験がある方を優遇いたします。

ClickHouse

• ClickHouseにおけるデータモデリング、クエリ最適化、リソース管理に精通していること。

• クラスター運用、障害解析、性能監視の実務経験。

• ClickHouseとデータミドルウェア／ストリーム処理／ジョブスケジューリングシステムとの統合に精通していること。

Flink

• Flinkの基盤メカニズム（checkpoint、state backend、ウィンドウ機構等）に精通していること。

• 複雑なFlinkリアルタイム処理タスクを単独で作成し、運用中の性能問題を解決できること。

• Flinkクラスターのデプロイおよび安定性維持の経験があること。