NEW LINEヤフー株式会社 広告配信のAI/機械学習モデルの精度向上を支えるデータプラットフォームエンジニア

ブックマーク一覧

勤務地	東京都千代田区紀尾井町1-3 東京ガーデンテラス紀尾井町 紀尾井タワー
想定年収	600万円～1800万円
推奨年齢	20代
仕事内容	【ポジション概要】 LINEヤフーのサービス開発におけるデータエンジニアリングを担当 LINEヤフーのサービス開発のための、大規模データ向け分散システム(Hadoop、Kafka、Flink、Trino、Druidなど)として提供するData Platform の開発を担当 【業務詳細】 LINEヤフーの持つ国内最大級のデータエンジニアリングを行い、事業のさらなる成長に貢献いただきます。LINEヤフーでは、日々大量のデータが発生し、大量のデータがData Platformに蓄積されています。トータルでは数百PB以上のデータを蓄積・処理し、データ利活用に役立てています。この膨大なデータを安定して収集・蓄積・処理するために、専用のデータセンターを活用し、数千台のサーバーを用いて分散システム基盤を構築・運用しています。 私たちのData Platformは、代表的なものとして以下のような技術スタックを活用しています： 分散処理フレームワーク: Hadoop 分散メッセージングシステム: Kafka 分散ストリーム処理システム: Flink 分散SQLエンジン: Trino 分散データストア: Druid これらの技術を駆使して、ビッグデータを安全かつ効率的に活用するためのインフラを提供しています。また、データサイエンティストが簡単にAI活用できることを目指して、機械学習プラットフォーム(AIプラットフォーム)も独自で構築し提供しています。 【主な業務内容】 データ収集と統合: 異なるデータソースからのデータを効率的に収集し、統合するためのETLパイプラインの設計・実装。 リアルタイムデータ処理: KafkaやFlinkを用いたリアルタイムデータ処理の最適化と運用。 スケーラビリティとパフォーマンス: ネットワークの設計やハードウェアの選定など専門チームと協業しながらスケーラブルなインフラの設計・実装、パフォーマンスの最適化。 データ品質とガバナンス: データの一貫性、正確性、完全性を確保するためのツールやプロセスの導入。データセキュリティとプライバシー: データの暗号化、アクセス制御、コンプライアンス対応。AI/MLの統合と運用: 機械学習プラットフォームの構築・運用、MLOpsの導入。
経験・資格	※求人情報の応募要件全てに該当しなくても、企業様に対して内々に打診したり相談することが可能な場合もございます。一つでも当てはまる方は前向きにご検討下さい。 【求める人物像】 ・正解のない問題解決を楽しみ、スピード感を持って品質高く解決に導ける方 ・複数のステークホルダーの要求のなかで課題の優先順位をつけながら解決できる方 ・結果にこだわり最後までやり抜く力がある方 ・結果にこだわり最後までやり抜く力がある方 【必要な経験/スキル】 ・分散システムを利用したデータ基盤の構築、運用の経験 ・Python、Javaのプログラミング業務経験 ・Kubernetes、Dockerを使ったミドルウェアやサービスの開発と運用の経験 【あると望ましい経験/スキル】 ・100台規模以上の分散システムにおけるソフトウェア エンジニアリングまたはシステム エンジニアリングの経験 ・大規模データベースを扱った経験94Apache Hadoop、Apache Kafka、Apache Flink、Apache Druidなどを利用したアプリケーションの開発・運用の経験 ・MLOpsの構築経験95Apache Hadoop、Apache Kafka、Apache Flink、Apache Druidなどエコシステムの運用保守設計、及び運用改善経験 ・KubernetesのClusterやエコシステムの設計、構築、運用経験 ・Web Applicationの開発・運用の経験 ・CI/CDなどによるシステム自動化の経験 ・機械学習のシステム開発やプログラムの実装経験 ・Google Cloud Platform、Amazon Web ServicesでのAI開発経験 ・オープンソースへの貢献 ※更なる詳細事項は、カウンセリング（面談）時にお伝えします。
企業データ	会社名 LINEヤフー株式会社 設立 1996年1月31日 資本金 248,144（百万円） 従業員数 連結：約28,000人、単独：10,000人以上 株式 ◆東証プライム上場 事業内容 インターネット広告事業、イーコマース事業及び会員サービス事業などの展開並びにグループ会社の経営管理業務など
Recruiting No.	01006497000498
ひとことコメント	1996 年にソフトバンクとアメリカの Yahoo! との合弁事業として設立されたインターネット企業。 Zホールディングス（株）、LINE（株）、ヤフー（株）、Z Entertainment（株）、Zデータ（株）が再編されて、2023年10月に現在の「LINEヤフー株式会社」が誕生した。 アクセス数国内No.1の検索エンジン 「Yahoo! JAPAN」、月間アクティブユーザー数国内No.1の「LINE」、決算サービス「PayPay」「LINE Pay」など国内サービス提供数200超・国内総利用者3億人超を強みに、さらなる事業拡大とサービス価値の向上を図る。 社員一人ひとりが仕事とプライベートを両立しながら、さまざまなライフイベントを経ても安心して働き続けられるような制度の整備が進んでいる。 リモートワークは国内の住居地不問で、出社の際の通勤交通費は上限15万円/月で新幹線・飛行機の利用も可能。コアタイムなしのフルフレックス制も導入しており、ワークライフバランスを維持しながら働くことが出来る。アクセス数国内No.1の検索エンジン 「Yahoo! JAPAN」、月間アクティブユーザー数国内No.1の「LINE」、決算サービス「PayPay」「LINE Pay」など国内サービス提供数200超・国内総利用者3億人超を強みに、さらなる事業拡大とサービス価値の向上を図る。 社員一人ひとりが仕事とプライベートを両立しながら、さまざまなライフイベントを経ても安心して働き続けられるような制度の整備が進んでいる。 リモートワークは国内の住居地不問で、出社の際の通勤交通費は上限15万円/月で新幹線・飛行機の利用も可能。コアタイムなしのフルフレックス制も導入しており、ワークライフバランスを維持しながら働くことが出来る。