Data Engineer

2ヶ月前


Tokyo Rakuten
Job Description

Business Overview

Rakuten Group is a global leader in internet services, empowering individuals and businesses around the world. With a diverse portfolio that includes e-commerce, fintech, digital content, and communications, Rakuten is dedicated to innovation and excellence. Our mission is to contribute to society by creating value through innovation and entrepreneurship. We are committed to leveraging cutting-edge technology to drive innovation and deliver exceptional value to our customers.

We are looking for a talented Data Engineer to join our dynamic team and help us build and maintain robust data infrastructure.

Department Overview

The Search Department focuses on enhancing the Search, Discovery, and Navigation experiences for Rakuten users. We design, develop, and deploy high-performance, fault-tolerant distributed systems that are utilized daily by millions of Rakuten customers worldwide. Our commitment is to deliver innovative solutions that benefit both people and societies globally.

Within this department, the Search Platform Engineering Group is responsible for delivering a robust search platform that serves a variety of services used by millions.

This group plays a crucial role in ensuring that our search systems are not only efficient but also scalable to meet the growing demands of our diverse customer base.

Position

Position Details

As a Data Engineer at Rakuten Group, you will be an integral part of our Search Data Platform team.

Your primary responsibility will be to design, develop, and maintain scalable data pipelines and systems that support our search functionality.

You will work closely with data scientists, analysts, and other stakeholders to ensure data is accessible, reliable, and optimized for improving search quality, relevance, and overall user experience.

Your expertise in modern data technologies will be crucial in driving our data strategy forward and enhancing the performance of our search platform.

Key Responsibilities

Design, develop, and maintain scalable and efficient data pipelines using modern data technologies
Collaborate with data scientists, analysts, and other stakeholders to understand data requirements and deliver solutions that meet their needs
Implement and manage ETL (Extract, Transform, Load) processes to ensure data is accurately and efficiently processed
Optimize and maintain data storage solutions, including data lakes, data warehouses, and databases
Ensure data quality, integrity, and security across all data systems
Monitor and troubleshoot data pipeline performance and reliability issues
Stay up-to-date with the latest trends and best practices in data engineering and modern data technologies
Document data processes, systems, and workflows to ensure knowledge sharing and continuity
Contribute to the continuous improvement of search quality and relevance by providing reliable and well-structured data

Mandatory Qualifications

Bachelor's or Master's degree in Computer Science, Engineering, or a related field
Proven experience as a Data Engineer or in a similar role
Strong proficiency in SQL
Experience with modern data technologies such as Apache Spark, Apache Kafka, Apache Flink, Hadoop, and cloud-based data platforms (e.g., AWS, GCP, Azure)
Proficiency in programming languages such as Python, Java, or Scala
Experience with ETL tools and frameworks (e.g., Apache NiFi, Talend, Airflow)
Familiarity with data warehousing solutions (e.g., Snowflake, Redshift, BigQuery)
Knowledge of data modeling, data architecture, and data governance principles
Strong problem-solving skills and attention to detail
Excellent communication and collaboration skills

Desired Qualifications

Experience with containerization and orchestration tools (e.g., Docker, Kubernetes)
Knowledge of machine learning and data science workflows
Familiarity with data visualization tools (e.g., Tableau, Power BI)

#engineer #applicationsengineer #aianddatadiv
Show more Show less
  • Data Engineer

    2ヶ月前


    Tokyo Denodo

    データエンジニアを募集しています。グローバルオフィスチームの一員として、Denodoの学習と採用を次のレベルへと引き上げる意欲のある、技術的で情熱的、実践的なデータアドボケイトを募集しています。 · データ管理ソリューションを成功させるために必要な資料を利用できるようにすることがあなたのミッションです。 · 顧客やパートナー企業からの技術的な問い合わせや問題(トラブルなど)を、DenodoサポートサイトやEメールなどを通じて、解決策を提案します。 · お客様のビジネス要件に対応したDenodo製品のインプリメンテーション、最適化、カスタマイズに関して、設 ...

  • Data Engineer

    3週間前


    Tokyo IBM ¥900,000 - ¥1,200,000 per year

    データ活用基盤実装をリードしながら、技術の専門家としてIBM Salesやサービス部門と連携して、IBMストレージ技術を利用したソリューション開発やIBMデータ活用基盤に関する技術支援を行います。 · IBMデータ活用製品を利用したソリューション開発および、研修開発 · IBMデータマネジメントソフトウェア:DB2の技術Q&A支援と製品技術情報の発信 · お客様ビジネスの課題を理解/整理し、AIやデータを活用した課題解決を実現するデータ活用基盤のアプローチ策定 · IBM製品を中心としたスキルを生かし、データ活用基盤構築の提案支援/構想策定/デザイン/デ ...


  • Chiyoda Microsoft Full time¥4,000,000 - ¥12,000,000 per year

    データベースや分析の世界に強い好奇心と深い情熱を持ち、ダイナミックな環境で複雑な課題に挑戦する準備はできていますか? · Microsoftの商用顧客向けCloud & AI Innovative Data Platform Solution Engineerとして、私たちのチームに加わりませんか。 · 顧客に対してセキュアでスケーラブルなソリューション設計をガイドし、技術的な意思決定に影響を与え、データベースや分析のモダナイゼーションを推進します。 · 顧客をセキュアでスケーラブルなソリューション設計へ導き、技術的な意思決定を支援し、データベースや分析 ...


  • Tokyo BLOOMTECH, Inc ¥8,000,000 - ¥15,000,000 per year

    Data Engineer/Fintechのデータエンジニアが主役の組織風土とグローバルな環境で、 · 東大発のFintech/ビッグデータスタートアップです。 · ...


  • Tokyo TIER IV ¥483,000 - ¥1,166,000

    自動運転で発生するデータの収集・検索・分析を支えるデータ基盤の開発・運用を担当していただきます。 · ...


  • Tokyo DXC Technology ¥900,000 - ¥1,200,000 per year

    ソフトウェア開発エンジニアのニーズが非常に高まっています。自動車の設計開発業務に関する知識、プロジェクトマネージメントスキル、構成のあるべき姿の提案・提言スキル、海外メンバーと共同でシステム開発を進めるスキルが必要です。3〜5年程度のシステム開発経験、英語力、組み込み開発の実務経験があること、自動運転領域のソフトウェア開発に従事した経験が求められます。 ...


  • Tokyo DXC Technology ¥2,500,000 - ¥6,000,000 per year

    主に製造現場を支えるMES(製造実⾏システム)を取り扱う仕事になります。生産性と品質の向上に寄与できます。 ...


  • Tokyo DXC Technology ¥4,320,000 - ¥6,480,000 per year

    ⾃動⾞制御装置・コックピットの制御を⽀えるソフトウェア開発を⾏う 仕事です。エンジニアとしてご⾃身が開発に直接的に関わるだけでなく、ヨーロッ パにいるメンバー(海外のDXCや傘下のLuxoftのメンバー)とやり取りをしながらお客様の要望を実現するような ポジションです。 · ・3〜5年程度のシステム開発経験 · ・英語⼒(お客様の要望をヨーロッパのメンバーと共有して開発に取り組むことが多いため、業務上英語が必須となります。) · ・組み込み開発の実務経験がある(できれば⾃動⾞関連) · ・⾃動運転領域のソフトウェア開発に従事した経験 · ・⾃動⾞のソフト ...


  • Tokyo Michael Page ¥4,000,000 - ¥10,000,000 per year

    データを活用したビジネス課題解決の経験2年以上を持つデータエンジニアを求めています。 · データモデリング、マイニング、レイヤリング等の実務経験 · Python、Scalaなどのプログラミングスキル、SQL最適化スキル · リレーショナル/非リレーショナルDBの使用経験、AWS経験尚可 · 統計的手法を用いたデータ分析・レポート作成 · 他部門やシステムとの連携によるデータ分析・報告システムの開発・実装 · 既存レポートシステムの改善・最適化 · データ分析 · データモデリング · プログラミングスキル · 経験に応じて年収最大1,000万円も可能 ...


  • Tokyo Michael Page ¥1,000,000 - ¥2,000,000 per year

    クラウドベースのデータ基盤構築をリード · AI・機械学習を活用した顧客データ活用を推進 · グループ全体のデータアーキテクチャ・データモデル・パイプラインの設計・最適化 · AWSやSnowflake、Sparkなどを活用したクラウドベースのデータ基盤の構築 · 分析・アプリケーション・ビジネスチームとの連携によるスケーラブルなソリューションの提供 · データ統合、クレンジング、ガバナンスの推進 · コスト効率・技術トレンドを考慮したデータワークフローの評価・改善 · ベンダーエンジニアのマネジメントと品質管理 · 顧客データ管理におけるAI/MLツー ...


  • Shinagawa-ku, Tokyo Equinix ¥6,000,000 - ¥8,000,000 per year

    エクイニクスはグローバルなデジタルインフラストラクチャー企業です。デジタル世界のリーダー企業は、当社の信頼性の高いプラットフォーム上に集まり、ビジネス成功のための基礎となるインフラストラクチャを相互接続しています。エクイニクスは、お客様がビジネス優位を加速するために必要となるすべての適切な場所、パートナーそして可能性にアクセスできるようにします。エクイニクスにより、お客様は俊敏性を拡大し、デジタルサービスの立ち上げを加速し、世界クラスの顧客体験を提供し、その価値をさらに高めることができます。 · ...


  • Tokyo TIER IV ¥330,000 - ¥1,667,000 per year

    データエンジニアを募集いたします。Expert Data Engineerのポジションは、機械学習モデル学習に必要なデータセットの構築・改善の方針を決定することに責任を持ちます。Data Centric AIの思想に基づき、収集したデータの特性分析や分析コード実装を行い、機械学習モデルの性能改善に貢献することが求められます。 · ...


  • Tokyo JERA Co., Inc. ¥15,000,000 - ¥25,000,000 per year

    データマネジメントの推進を担当し、全社的に情報公開を推進する責任者です。データウェアハウスの構築やBIソリューションの活用、エンタープライズデータプラットフォームの検討など、データに関する各種支援を行います。 · データマネジメントの推進と全社的な情報公開 · データウェアハウスの構築とBIソリューションの活用 · エンタープライズデータプラットフォームの検討とデータに関する各種支援 · コンサルティングファームまたは事業会社でITに関連するプロジェクトに参画した経験 · システム開発の全工程に関する経験とシステム開発プロジェクト全般の理解 · ネイティ ...

  • Data Engineer

    1ヶ月前


    Tokyo TEKsystems ¥5,000,000 - ¥10,000,000 per year

    Join a dynamic team responsible for developing and operating applications that support business operations for a major e-commerce platform. · Build large-scale batch data pipelines using Spark, Hive, Kafka, Hadoop, and Google Cloud Platform. · Manage and maintain data pipelines f ...

  • Data Engineer

    1ヶ月前


    Tokyo TEKsystems ¥1,200,000 - ¥1,500,000 per year

    Join a leading global insurance company as a Data Engineer, where you'll help shape the future of data infrastructure and analytics. · This is a high-impact role for engineers who thrive on building scalable, cloud-native data systems and transforming raw data into actionable ins ...

  • Data Engineer

    2ヶ月前


    Tokyo Rakuten Full time

    We are looking for a talented Data Engineer to join our dynamic team and help us build and maintain robust data infrastructure. · Design, develop, and maintain scalable data pipelines using modern data technologies · Collaborate with data scientists, analysts, and other stakehold ...

  • Data Engineer

    2ヶ月前


    Tokyo Rakuten

    We are looking for a talented Data Engineer to join our dynamic team and help us build and maintain robust data infrastructure. · Design, develop, and maintain scalable data pipelines using modern data technologies · Collaborate with data scientists, analysts, and other stakehold ...

  • Data Engineer

    1ヶ月前


    Tokyo Rakuten ¥4,000,000 - ¥8,000,000 per year

    We are seeking a data engineer who can contribute to business growth by strengthening Rakuten Analytics' data analysis pipeline and enhancing data processing through the utilization of new technologies, including AI. · Build and maintain high-throughput data pipelines that proces ...

  • Data Engineer

    2ヶ月前


    Tokyo TEKsystems ¥900,000 - ¥1,200,000 per year

    leading automotive companies highly skilled and motivated Data Analytics Engineer a robust data platform in a cloud environment · Support user requirement gathering activities to understand impact to data modelling and data model delivery for IT hardware and software showbacks · ...

  • Data Engineer

    1ヶ月前


    Tokyo Amazon Web Services (AWS) ¥600,000 - ¥1,800,000 per year

    AWS Global Services includes experts from across AWS who help our customers design, build, operate, and secure their cloud environments. You'll join a diverse team of technical experts in dozens of countries who help customers achieve more with the AWS cloud. · Deliver on-site te ...

  • Data engineer

    2ヶ月前


    Tokyo United World Inc

    You will be responsible for the collection, construction and operation of the analysis platform for accounting and management data submitted by customers (mainly SMEs and start-ups). · Specifically, you will be responsible for the design and development of data pipelines using Sn ...