Job Description
Business Overview
Rakuten Group, Inc., a global technology leader based in Japan, provides innovative solutions that enrich the lives of millions worldwide. Our Technology division is pioneering in leveraging cutting-edge technologies to deliver exceptional experiences across our services.
Department Overview
The importance of catalog data as a master data is increasing as it serves as a hub and data platform that connects products and corporate data handled within Rakuten services. By managing abundant and accurate catalog data and deploying it as master data across Rakuten services, it plays the role of core data that accelerates new service development.
The Data Knowledge Department (DKD) is committed to building data creation processes, collecting and expanding catalog data, and improving quality in order to continue providing services that meet and exceed the expectations of Rakuten's customers.
Under the mission of creating the best catalog data and improving user experience, we provide the power of Rakuten's design, technology, and operations to provide high-quality catalog data that is at the core of our business strategy. This contributes to Rakuten's vision of "Empowering people and society through innovation".
Position
Position Details
The main development task is to build Catalog Data Solution platform that enable DKD Data asset to be more usable and helping Rakuten business to unlock business opportunity using Catalog Data Asset. In addition to building platform to unlocking Catalog Data asset we also need to support our client to provide data that meets our clients needs.
One of the important challenges is to continuously add feature and also maintaining Platform and Data Quality of Enrichment Solution to our data client.
We also practice long-term product development as we handle the entire development process from design, development, to release and operation. We also play a role in considering a more scalable system design while preventing or paying technical debt.
Responsibilities
- Design, develop, and maintain efficient and scalable data pipelines using Apache Spark (primarily with Java) or Apache Beam or Kubeflow to ingest, process, and transform large datasets from various sources.
- Design and implement optimized data models for analytical and operational use cases, considering performance, scalability, and data integrity.
- Build and maintain web tools and applications in Python and Java.
- Develop end-to-end applications integrating with data infrastructure.
- Maintain infrastructure aligned with product and security requirements.
- Contribute to product development and architecture design.
- Ensure high performance and data quality.
Mandatory Qualifications
- Fluent in both Japanese and English, with exceptional communication skills across diverse, multinational environment.
- Minimum 3 years of proven experience in Data Engineering fields.
- Demonstrated experience building production-grade data pipelines.
- Track record of developing full-stack applications.
- Strong background in API design and development.
- Solid experience with Google Cloud Platform (GCP) services, including BigQuery, Dataflow, Dataproc, Cloud Storage, and Pub/Sub.
- Expertise in data pipeline development and ETL processes.
Desired Qualifications
- Understanding of AI/GenAI concepts and their data requirements is a plus.
- Experience building data pipelines to support AI/ML models is a plus.
- Data assets, data governance, storage, and sharing.
- Background in performance optimization.
- Experience as a mentor, tech lead or leading an engineering team.
- Have a strong ownership and able to own project end-to-end from designing to deployment.
- Experience in building and driving adoption of new products.
- Strong adaptability and commitment to continuous learning, keeping up with the latest advancements in technology.
engineer #DataEngineer #applicationsengineer #aianddatadiv
Languages
English (Overall - 3 - Advanced), Japanese (Overall - 3 - Advanced)
-
Data Engineer
1ヶ月前
Tokyo IBM ¥900,000 - ¥1,200,000 per yearデータ活用基盤実装をリードしながら、技術の専門家としてIBM Salesやサービス部門と連携して、IBMストレージ技術を利用したソリューション開発やIBMデータ活用基盤に関する技術支援を行います。 · IBMデータ活用製品を利用したソリューション開発および、研修開発 · IBMデータマネジメントソフトウェア:DB2の技術Q&A支援と製品技術情報の発信 · お客様ビジネスの課題を理解/整理し、AIやデータを活用した課題解決を実現するデータ活用基盤のアプローチ策定 · IBM製品を中心としたスキルを生かし、データ活用基盤構築の提案支援/構想策定/デザイン/デ ...
-
東京都 区, 株式会社バイオス ¥3,500,000 - ¥4,000,000 per yearデータセンターやヘルプデスクなどのサポート業務に興味のある方、ITインフラに関する基礎知識をお持ちの方はご応募ください。 · ...
-
Tokyo DXC Technology ¥4,320,000 - ¥6,480,000 per year⾃動⾞制御装置・コックピットの制御を⽀えるソフトウェア開発を⾏う 仕事です。エンジニアとしてご⾃身が開発に直接的に関わるだけでなく、ヨーロッ パにいるメンバー(海外のDXCや傘下のLuxoftのメンバー)とやり取りをしながらお客様の要望を実現するような ポジションです。 · ・3〜5年程度のシステム開発経験 · ・英語⼒(お客様の要望をヨーロッパのメンバーと共有して開発に取り組むことが多いため、業務上英語が必須となります。) · ・組み込み開発の実務経験がある(できれば⾃動⾞関連) · ・⾃動運転領域のソフトウェア開発に従事した経験 · ・⾃動⾞のソフト ...
-
Tokyo BLOOMTECH, Inc ¥8,000,000 - ¥15,000,000 per yearData Engineer/Fintechのデータエンジニアが主役の組織風土とグローバルな環境で、 · 東大発のFintech/ビッグデータスタートアップです。 · ...
-
Tokyo Rakuten ¥4,585,000 - ¥5,822,220 per yearThe main development task is to build Catalog Data Solution platform that enable DKD Data asset to be more usable and helping Rakuten business to unlock business opportunity using Catalog Data Asset.One of the important challenges is to continuously add feature and also maintaini ...
-
Tokyo TIER IV自動運転で発生するデータの収集・検索・分析を支えるデータ基盤の開発・運用を担当していただきます。 · 車両からの走行データを収集・加工するデータパイプラインの開発・運用 · 走行履歴や統計情報を提供するAPIの開発・運用 · ...
-
Tokyo TIER IV ¥330,000 - ¥1,667,000 per yearデータエンジニアを募集いたします。Expert Data Engineerのポジションは、機械学習モデル学習に必要なデータセットの構築・改善の方針を決定することに責任を持ちます。Data Centric AIの思想に基づき、収集したデータの特性分析や分析コード実装を行い、機械学習モデルの性能改善に貢献することが求められます。 · ...
-
Tokyo TIER IV ¥483,000 - ¥1,166,000自動運転で発生するデータの収集・検索・分析を支えるデータ基盤の開発・運用を担当していただきます。 · ...
-
Tokyo DXC Technology ¥900,000 - ¥1,200,000 per yearソフトウェア開発エンジニアのニーズが非常に高まっています。自動車の設計開発業務に関する知識、プロジェクトマネージメントスキル、構成のあるべき姿の提案・提言スキル、海外メンバーと共同でシステム開発を進めるスキルが必要です。3〜5年程度のシステム開発経験、英語力、組み込み開発の実務経験があること、自動運転領域のソフトウェア開発に従事した経験が求められます。 ...
-
東京都 港区 六本木, グリーグループ メタバース事業 ¥2,000,000 - ¥2,800,000 per yearREALITYアプリ/データエンジニア/Data Engineerの職種です。 · 現在の課題に対処するためのプロジェクトを立ち上げましたが、人数やスキルで進められていない状況があります。このポジションでは、「データ分析基盤の改善」を推進するために必要な技術者を募集しています。 · ...
-
Tokyo Rakuten ¥4,000,000 - ¥12,000,000 per yearThe Data Engineer will design, develop, and maintain efficient and scalable data pipelines using Apache Spark or Apache Beam or Kubeflow to ingest, process, and transform large datasets from various sources. · Design, develop, and maintain efficient and scalable data pipelines us ...
-
Tokyo DXC Technology ¥2,500,000 - ¥6,000,000 per year主に製造現場を支えるMES(製造実⾏システム)を取り扱う仕事になります。生産性と品質の向上に寄与できます。 ...
-
Tokyo (株)Finatextホールディングス ¥6,000,000 - ¥12,000,000ビッグデータや生成AIを活用した事業を展開する東大発のスタートアップで大手企業を中心にデータ利活用やDXを支援する企業です。 · ...
-
Tokyo (株)Finatextホールディングス ¥12,000,000 - ¥18,000,000· ビッグデータや生成AIを活用した事業を展開する東大発のスタートアップで大手企業を中心にデータ利活用やDXを支援する企業です。 · クレジットカードデータやPOSデータ、位置情報データといった様々なオルタナティブデータを活用した企業の意思決定をサポートする事業やデータ基盤構築支援や生成AI開発を通じ、世の中の意思決定を円滑にする事業を行っています。 ...
-
神奈川県 藤沢市, DXC Technology ¥2,000,000 - ¥2,800,000 per year自動車業界のお客様に対して製品開発業務をサポートすることがミッションです。技術革新の進歩は目覚ましく、ものづくりとしての自動車の立ち位置は大きく変化しました。製品開発における複雑さがより増しています。このような環境下で最善の製品開発をシステムでサポートするためのプロフェッショナルを求めています。 · ...
-
Tokyo MicrosoftWe are looking for a Data Solution Engineer to join our team as a Cloud & AI Innovative Data Platform Solution Engineer. · This role involves driving technical sales with decision makers using demos and PoCs to influence solution design and enable production deployments.Maintain ...
-
Fujisawa, Kanagawa DXC Technology ¥450,000 - ¥900,000 per year+私電/DXC た세요 · ) PLM(衩이소) · ) Solution Engineeer( · AUTO/TEAMCENTRE) · 覆 PLM/CAD · MBD/MBSE · ...
-
Tokyo Michael Page ¥4,000,000 - ¥10,000,000 per yearData Engineerの職務内容は大規模なデータセットの管理と分析をサポートすることです。大学卒以上でPython、Java、Rなどのデータ処理経験がある人が必要です。Hadoop、Sparkなどの分散処理技術の経験 · NLPやAIモデルの基礎知識 · ...
-
Shinagawa-ku, Tokyo Equinix ¥6,000,000 - ¥8,000,000 per yearエクイニクスはグローバルなデジタルインフラストラクチャー企業です。デジタル世界のリーダー企業は、当社の信頼性の高いプラットフォーム上に集まり、ビジネス成功のための基礎となるインフラストラクチャを相互接続しています。エクイニクスは、お客様がビジネス優位を加速するために必要となるすべての適切な場所、パートナーそして可能性にアクセスできるようにします。エクイニクスにより、お客様は俊敏性を拡大し、デジタルサービスの立ち上げを加速し、世界クラスの顧客体験を提供し、その価値をさらに高めることができます。 · ...
-
Tokyo Michael Pageデータ活用をリードするData Engineer募集|グローバル環境でキャリアを築く · ユーザーやプロジェクトチームとの要件定義 · ビジネス要件に基づくデータソリューション設計 · Scala/Spark/Javaを用いた大規模データパイプラインの設計・実装 · ...
-
Tokyo Michael Page ¥4,000,000 - ¥10,000,000 per yearデータを活用したビジネス課題解決の経験2年以上を持つデータエンジニアを求めています。 · データモデリング、マイニング、レイヤリング等の実務経験 · Python、Scalaなどのプログラミングスキル、SQL最適化スキル · リレーショナル/非リレーショナルDBの使用経験、AWS経験尚可 · 統計的手法を用いたデータ分析・レポート作成 · 他部門やシステムとの連携によるデータ分析・報告システムの開発・実装 · 既存レポートシステムの改善・最適化 · データ分析 · データモデリング · プログラミングスキル · 経験に応じて年収最大1,000万円も可能 ...