データプラットフォームエンジニア/データグループ
ポジション概要
LINEヤフーのサービス開発のための、大規模データ向け分散システム（Hadoop、Apache Kafka、Apache Flink、Trino、Druidなど）として提供するデータプラットフォームの開発を担当
業務詳細
LINEヤフーでは、日々大量のデータが発生し、大量のデータがデータプラットフォームに蓄積されています。トータルでは数百PB以上のデータを蓄積・処理し、データ利活用に役立てています。この膨大なデータを安定して収集・蓄積・処理するために、専用のデータセンターを活用し、数千台のサーバーを用いて分散システム基盤を構築・運用しています。
私たちのデータプラットフォームは、代表的なものとして以下のような技術スタックを活用しています：
- 分散処理フレームワーク: Apache Hadoop
- 分散メッセージングシステム: Apache Kafka
- 分散ストリーム処理システム: Flink
- 分散SQLエンジン: Trino
- 分散データストア: Druid
これらの技術を駆使して、ビッグデータを安全かつ効率的に活用するためのインフラを提供しています。また、データサイエンティストが簡単にAI活用できることを目指して、機械学習プラットフォーム（AIプラットフォーム）も独自で構築し提供しています。
主な業務内容
- データ収集と統合: 異なるデータソースからのデータを効率的に収集し、統合するためのETLパイプラインの設計・実装。
- リアルタイムデータ処理: Apache KafkaやFlinkを用いたリアルタイムデータ処理の最適化と運用。
- スケーラビリティとパフォーマンス: ネットワークの設計やハードウェアの選定など専門チームと協業しながらスケーラブルなインフラの設計・実装、パフォーマンスの最適化。
- データ品質とガバナンス: データの一貫性、正確性、完全性を確保するためのツールやプロセスの導入。
- データセキュリティとプライバシー: データの暗号化、アクセス制御、コンプライアンス対応。
- AI/MLの統合と運用: 機械学習プラットフォームの構築・運用、MLOpsの導入。
参考情報
プロダクトを知る
LINEヤフー開発組織紹介として、データグループを取り上げた資料です。
求める人物像
- 正解のない問題解決を楽しみ、スピード感を持って品質高く解決に導ける方
- 複数のステークホルダーの要求のなかで課題の優先順位をつけながら解決できる方
- 結果にこだわり最後までやり抜く力がある方
必要な経験/スキル
- 分散システムを利用したデータ基盤の構築、運用の経験(1年以上)
- Python・Java・Goいずれかのプログラミング業務経験(1年以上)
- Kubernetes、Dockerを使ったミドルウェアやサービスの開発と運用の経験
あると望ましい経験/スキル
- 100台規模以上の分散システムにおけるソフトウェア エンジニアリングまたはシステム エンジニアリングの経験
- Apache Hadoop、Apache Kafka、Apache Flink、Apache Druidなどを利用したアプリケーションの開発・運用の経験
- Apache Hadoop、Apache Kafka、Apache Flink、Apache Druidなどエコシステムの運用保守設計、及び運用改善経験
- KubernetesのClusterやエコシステムの設計、構築、運用経験
- Web Applicationの開発・運用の経験
- CI/CDなどによるシステム自動化の経験
- 機械学習のシステム開発やプログラムの実装経験
- Google Cloud Platform、Amazon Web ServicesでのAI開発経験
- オープンソースへの貢献
報酬
想定年収：800万円～1,800万円
賃金形態：月給制（固定残業代含む）
基準給与：534,000円～1,200,000円
（基準給与の内訳）
―基礎給与 ：414,000円～934,000円
―固定時間外手当：119,000円～267,000円
※時間外労働の有無に関わらず、35時間分の固定時間外手当を支給
※固定時間の超過分は、超過勤務手当を別途支給
※月給の各項目名はグレードにより異なります
賞与：年2回を上限に、会社や所属部署の業績を踏まえて支給
雇用形態・雇用期間
正社員（雇用期間の定めなし、3ヶ月の試用期間あり）
※試用期間中の労働条件変更なし
選考プロセス
-
Step1
書類選考
-
Step2
課題選考/適性検査
-
Step3
面接（複数回）/コンプライアンスチェック・リファレンスチェック
-
Step4
内定
※ただし、ポジションにより選考内容が変更となる可能性があります。
応募
応募フォームに必要事項をご入力のうえご応募ください。
書類選考
選考結果は合否にかかわらず2週間以内に、応募フォームに入力されたメールアドレスにご連絡いたします。ゴールデンウィークや年末年始等を挟む場合は、さらに1週間程度を要する場合があります。
面接、適性検査、技術試験、コンプライアンスチェック・リファレンスチェック
書類選考に合格された方には、ポジションにより実施内容が異なりますが、複数回の面接と適性検査/技術試験、コンプライアンスチェック・リファレンスチェックを実施いたします。
選考結果は合否にかかわらず2週間以内に、応募フォームに入力されたメールアドレスにご連絡いたします。
面接などのスケジュールによって変わりますが、順調に進んだ場合、応募から1カ月～1カ月半程度で内定となります。なお、選考の内容や基準、結果の理由に関してのお問い合わせには、合否にかかわらず回答いたしかねます
その他
応募フォームに、採用の適否を判断するために必要な個人情報を入力していただきます。これらは採用以外の目的には一切使用しません。なお、ご提出いただいた履歴書などは返却いたしません。あらかじめご了承ください。
諸手当
時間外手当、通勤手当 ※1、LINEヤフー Working Style手当 ※2、など
※1所属オフィスに出社した日数に応じて実費を支給。月額上限150,000円。
※2リモートワークにおいて働く環境を整備するための手当。月額11,000円。
勤務地
紀尾井町オフィス（東京都千代田区紀尾井町1-3 東京ガーデンテラス紀尾井町 紀尾井タワー）
※業務上の指示により所属オフィスへの出社が必要になることがあります。出社する際のオフィスは雇入れ直後は配属拠点となります。その後は会社の定めるすべての事業所に配置転換の可能性があります。
※車いすの方でも勤務が可能なオフィスです。
※受動喫煙対策の状況：屋内禁煙
就業時間
フレックスタイム制：標準労働時間7時間45分（コアタイムなし）
始業および終業の時刻は個人に委ねます。 但し、標準時間として始業時刻は9:30、終業時刻は18:15となります。
※部署により通常勤務（9:30～18:15）、シフト勤務あり。
休日・休暇
休日
完全週休2日制（土日 ※1）、国民の祝日、年末年始（12月29日から1月4日まで）
休暇
有給休暇、特別有給休暇（慶弔、マタニティ、子の看護、介護、法定伝染病など）、ハッピーフライデー ※2、サバティカル休暇制度
その他
育児勤務、介護勤務
※1 部署により異なります。
※2 祝日が土曜日にあたった場合、前労働日を振り替え特別休日としています。
福利厚生
各種社会保険完備（健康保険、介護保険、厚生年金保険、雇用保険、労災保険）、選択型確定拠出年金制度、総合福祉団体定期保険、長期所得補償制度、財形貯蓄制度、株式累積投資制度、定期健康診断・人間ドック二次検査の費用補助、社内マッサージ室、サークル、懇親会費補助など
人材育成・支援制度
社員向け研修制度、語学研修、マネジメント研修、LINEヤフー Job Challenge、サバティカル休暇、社会人ドクター進学支援など
備考
勤務地備考
【雇い入れ直後】
求人票の「勤務地」に記載
※業務上の指示により所属オフィスへの出社が必要になることがあります。
【変更の範囲】
会社の定める営業所
業務内容備考
【雇入れ直後】
求人票の「業務詳細」に記載
【変更の範囲】
会社の定める業務
関連ポジション
インタビュー
-
河村 勇人Yuto Kawamura「やりたいこと」と「必要とされていること」の交差点を見つけて、 その領域に注力する。
-
加藤 亙貴Koki KatoLINEヤフーには、技術的に難易度の高い仕事が山ほどある。 だからこそおもしろい。
採用情報
公式SNSアカウント
各SNSでも採用に関する情報を発信しています。
