データプラットフォームエンジニア / Data Platform

ポジション概要

LINEヤフーでは、数百PB規模のデータを扱う大規模データプラットフォームを、自社データセンター上に構築・運用しています。数千台規模のサーバーからなる分散システム基盤を通じて、複数事業・数千ユーザーのデータ利活用を支えています。

本ポジションでは、Hadoop/Spark/Trino等を用いたデータプラットフォームを「利用する側」ではなく「提供する側」として、基盤の設計・構築・運用および性能・信頼性・コストの最適化を担っていただきます。

※本ポジションは、データ分析やデータパイプライン開発を主業務とするポジションではありません

データプラットフォームでは、以下のような技術スタックを活用しています。

  • 分散処理フレームワーク:Apache Hadoop
  • 分散メッセージングシステム:Apache Kafka
  • 分散ストリーム処理システム:Flink
  • 分散SQLエンジン:Trino
  • 分散データストア:Druid

これらを組み合わせ、ビッグデータを安全かつ効率的に活用するための基盤を提供するとともに、データサイエンティストやプロダクトチームが迅速に価値創出できる環境の実現に貢献します。

主な業務内容

具体的には以下の業務を想定しています。

  • Hadoop/Spark/Trino等を用いたデータプラットフォーム基盤の設計・構築・運用
  • 数千台規模クラスタにおけるパフォーマンスチューニング、ボトルネック分析
  • 分散システムにおける障害対応およびトラブルシュート
  • リソース管理・スケジューリングの最適化(YARN/Kubernetes等)
  • マルチテナント環境における安定運用設計と改善
  • 利用状況に基づくキャパシティプランニングおよびコスト最適化
  • 運用課題の特定と継続的な改善(信頼性・可用性・運用効率の向上)

※変更の範囲:会社の定める全ての業務への配置転換の可能性あり

組織や人を知る

求める人物像

  • データプラットフォームをサービスとして提供する視点を持てる方
  • システム全体を俯瞰し、性能・信頼性・コストのトレードオフを設計できる方
  • 問題の表層対応ではなく、根本原因の特定と再発防止までやり切れる方
  • 定量的な指標(リソース使用率、性能、コスト等)に基づいた改善ができる方

必要な経験/スキル

  • Hadoop/Spark/Trino等の分散処理基盤の運用・チューニング経験 ※利用経験のみは対象外
  • 分散システムにおける障害対応・トラブルシュート経験
  • Linux環境でのシステム運用経験
  • IaaS環境(オンプレミスまたはクラウド)上でのインフラ構築・運用経験

あると望ましい経験/スキル

  • 数百〜数千ノード規模の分散システム運用経験
  • マルチテナント環境でのリソース管理・運用設計経験
  • YARN / Kubernetes / 分散ストレージの運用経験
  • Spark/Trinoなどのクエリエンジンのパフォーマンスチューニング経験
  • キャパシティプランニング、コスト最適化の経験
  • SLI/SLO設計や可観測性向上などのSREプラクティス

報酬

想定年収:800万円~1,800万円
賃金形態:月給制(固定残業代含む)
基準給与:534,000円~1,200,000円
(基準給与の内訳)
 ―基礎給与   :414,000円~934,000円
 ―固定時間外手当:119,000円~267,000円
 ※時間外労働の有無に関わらず、35時間分の固定時間外手当を支給
 ※固定時間の超過分は、超過勤務手当を別途支給
 ※月給の各項目名はグレードにより異なります
 賞与:年2回を上限に、会社や所属部署の業績を踏まえて支給

諸手当

時間外手当、通勤手当 ※1、LINEヤフー Working Style手当 ※2、など

※1所属オフィスに出社した日数に応じて実費を支給。月額上限150,000円。
※2リモートワークにおいて働く環境を整備するための手当。月額11,000円。

雇用形態・雇用期間

正社員(雇用期間の定めなし、3ヶ月の試用期間あり)

※試用期間中の労働条件変更なし

勤務地

紀尾井町オフィス(東京都千代田区紀尾井町1-3 東京ガーデンテラス紀尾井町 紀尾井タワー)

※出社する際のオフィスは雇入れ直後は配属拠点となります。その後は会社の定めるすべての事業所に配置転換の可能性があります。
※車いすの方でも勤務が可能なオフィスです。
※受動喫煙対策の状況:屋内禁煙

就業時間

  • フレックスタイム制:標準労働時間7時間45分(コアタイムなし)
    • 始業および終業の時刻は個人に委ねます。 但し、標準時間として始業時刻は9:30、終業時刻は18:15となります。
  • 育児・介護による時短勤務制度あり。

※部署により通常勤務(9:30~18:15)、シフト勤務あり。

休日・休暇

  • 休日:完全週休2日制(土日 ※1)、国民の祝日、年末年始(12月29日から1月4日まで)
  • 休暇:有給休暇、特別有給休暇(慶弔、マタニティ、子の看護、介護、法定伝染病など)、ハッピーフライデー ※2、サバティカル休暇制度

※1 部署により異なります。
※2 祝日が土曜日にあたった場合、前労働日を振り替え特別休日としています。

福利厚生

各種社会保険完備(健康保険、介護保険、厚生年金保険、雇用保険、労災保険)、選択型確定拠出年金制度、総合福祉団体定期保険、長期所得補償制度、財形貯蓄制度、株式累積投資制度、定期健康診断・人間ドック二次検査の費用補助、社内マッサージ室、サークル、懇親会費補助など

※制度の適用には条件があります。詳細は、福利厚生 をご確認ください。

人材育成・支援制度

社員向け研修制度、語学研修、マネジメント研修、LINEヤフー Job Challenge、サバティカル休暇、社会人ドクター進学支援など

※制度の適用には条件があります。詳細は、評価制度・成長支援 をご確認ください。

選考プロセス

  • Step1

    書類選考

  • Step2

    課題選考/適性検査

  • Step3

    面接(複数回)/コンプライアンスチェック・リファレンスチェック

  • Step4

    内定

※ただし、ポジションにより選考内容が変更となる可能性があります。

応募

応募フォームに必要事項をご入力のうえご応募ください。採用の適否を判断するために必要な個人情報を入力していただきます。これらは採用以外の目的には一切使用しません。なお、ご提出いただいた履歴書などは返却いたしません。あらかじめご了承ください。

書類選考

選考結果は合否にかかわらず2週間以内に、応募フォームに入力されたメールアドレスにご連絡いたします。ゴールデンウィークや年末年始等を挟む場合は、さらに1週間程度を要する場合があります。

面接、適性検査、技術試験、コンプライアンスチェック・リファレンスチェック

書類選考に合格された方には、ポジションにより実施内容が異なりますが、複数回の面接と適性検査/技術試験、コンプライアンスチェック・リファレンスチェックを実施いたします。

選考結果は合否にかかわらず2週間以内に、応募フォームに入力されたメールアドレスにご連絡いたします。

面接などのスケジュールによって変わりますが、順調に進んだ場合、応募から1カ月~1カ月半程度で内定となります。なお、選考の内容や基準、結果の理由に関してのお問い合わせには、合否にかかわらず回答いたしかねます

応募する

関連ポジション

インタビュー

採用情報公式SNSアカウント

各SNSでも採用に関する情報を発信しています。

  • X
  • LinkedIn
  • Facebook
  • note
Page top