Job Description
Business Overview
Rakuten Group, Inc., a global technology leader based in Japan, provides innovative solutions that enrich the lives of millions worldwide. Our Technology division is pioneering in leveraging cutting-edge technologies to deliver exceptional experiences across our services.
Department Overview
The importance of catalog data as a master data is increasing as it serves as a hub and data platform that connects products and corporate data handled within Rakuten services. By managing abundant and accurate catalog data and deploying it as master data across Rakuten services, it plays the role of core data that accelerates new service development.
The Data Knowledge Department (DKD) is committed to building data creation processes, collecting and expanding catalog data, and improving quality in order to continue providing services that meet and exceed the expectations of Rakuten's customers.
Under the mission of creating the best catalog data and improving user experience, we provide the power of Rakuten's design, technology, and operations to provide high-quality catalog data that is at the core of our business strategy. This contributes to Rakuten's vision of "Empowering people and society through innovation".
Position
Position Details
The main development task is to build Catalog Data Solution platform that enable DKD Data asset to be more usable and helping Rakuten business to unlock business opportunity using Catalog Data Asset. In addition to building platform to unlocking Catalog Data asset we also need to support our client to provide data that meets our clients needs.
One of the important challenges is to continuously add feature and also maintaining Platform and Data Quality of Enrichment Solution to our data client.
We also practice long-term product development as we handle the entire development process from design, development, to release and operation. We also play a role in considering a more scalable system design while preventing or paying technical debt.
Responsibilities
- Design, develop, and maintain efficient and scalable data pipelines using Apache Spark (primarily with Java) or Apache Beam or Kubeflow to ingest, process, and transform large datasets from various sources.
- Design and implement optimized data models for analytical and operational use cases, considering performance, scalability, and data integrity.
- Build and maintain web tools and applications in Python and Java.
- Develop end-to-end applications integrating with data infrastructure.
- Maintain infrastructure aligned with product and security requirements.
- Contribute to product development and architecture design.
- Ensure high performance and data quality.
Mandatory Qualifications
- Fluent in both Japanese and English, with exceptional communication skills across diverse, multinational environment.
- Minimum 3 years of proven experience in Data Engineering fields.
- Demonstrated experience building production-grade data pipelines.
- Track record of developing full-stack applications.
- Strong background in API design and development.
- Solid experience with Google Cloud Platform (GCP) services, including BigQuery, Dataflow, Dataproc, Cloud Storage, and Pub/Sub.
- Expertise in data pipeline development and ETL processes.
Desired Qualifications
- Understanding of AI/GenAI concepts and their data requirements is a plus.
- Experience building data pipelines to support AI/ML models is a plus.
- Data assets, data governance, storage, and sharing.
- Background in performance optimization.
- Experience as a mentor, tech lead or leading an engineering team.
- Have a strong ownership and able to own project end-to-end from designing to deployment.
- Experience in building and driving adoption of new products.
- Strong adaptability and commitment to continuous learning, keeping up with the latest advancements in technology.
engineer #DataEngineer #applicationsengineer #aianddatadiv
Languages
English (Overall - 3 - Advanced), Japanese (Overall - 3 - Advanced)
-
Data Engineer
2ヶ月前
Tokyo Denodo ¥8,000,000 - ¥15,000,000 per yearカスタマーサクセス組織の一員として、グローバルオフィスチームの一員としてDenodoの学習と採用を次のレベルへと引き上げる意欲のある、技術的で情熱的、実践的なデータアドボケイトを募集しています。 · ...
-
Tokyo, Tokyo PERSOL CAREER BRS (Bilingual Recruitment Solutions)自動車業界においても技術革新の進歩は目覚ましく、ものづくりとしての自動車の立ち位置は大きく変化しました。製品開発における複雑さがより増しています。そのような環境下で最善の製品開発をシステムでサポートするためのプロフェッショナルを求めています。自動車業界のお客様に対してPLM(製品ライフサイクル管理)の観点から製品開発業務をサポートすることがミッションです。 · ...
-
Data Engineer
2週間前
Tokyo Michael PageAzure Databricksを活用した最新データ基盤構築 · グローバル環境でキャリアを伸ばせる · ...
-
Tokyo BLOOMTECH, Inc Remote job国内有数のスタートアップで、外国籍多数活躍中のフルリモート/フルフレックスでのデータエンジニアを探しています。年収範囲は5,000万円から14,000万円です。 · ...
-
Data Engineer
2週間前
Tokyo Denodo ¥9,000,000 - ¥12,000,000 per yearDenodoでは、カスタマーサクセス組織の一員として、グローバルオフィスチームの一員として · 高齢者を介護することを目的とした介護サービス提供の会社です。 · ...
-
Tokyo BLOOMTECH, Inc Remote job当社は個人がベストのパフォーマンスを発揮できる働き方を推奨しています。コアタイムなしのマンスリーフレックス制度を導入しており、プライベートな予定や家庭の事情に合わせて勤務時間を調整したりリモートワークを活用したり、様々なフィールドのメンバーがそれぞれのスタイルで力を発揮しています。 · ...
-
Data Engineer
2ヶ月前
Tokyo IBM ¥900,000 - ¥1,200,000 per yearデータ活用基盤実装をリードしながら、技術の専門家としてIBM Salesやサービス部門と連携して、IBMストレージ技術を利用したソリューション開発やIBMデータ活用基盤に関する技術支援を行います。 · IBMデータ活用製品を利用したソリューション開発および、研修開発 · IBMデータマネジメントソフトウェア:DB2の技術Q&A支援と製品技術情報の発信 · お客様ビジネスの課題を理解/整理し、AIやデータを活用した課題解決を実現するデータ活用基盤のアプローチ策定 · IBM製品を中心としたスキルを生かし、データ活用基盤構築の提案支援/構想策定/デザイン/デ ...
-
Data Engineer
2週間前
Tokyo Michael PageAzure・Databricks グローバル環境でキャリアを伸ばせる · )Job summary · Azure・Databricks )Data Engineer ) · ...
-
Data Engineer
2週間前
Tokyo Tenth Revolution Group不動産×テクノロジー業界大手企業で、データエンジニアを募集しています。グループ全体のデータマネジメントを担うポジションです。 · データ基盤の設計・開発・運用 · データパイプライン(ETL / BI / Reverse ETL)の整備 · データガバナンス・セキュリティ対応 · ...
-
Minato SB Intuitions ¥6,500,000 - ¥18,000,000+SB Intuitionsについて+ · かつての自動車や飛行機、電話やインターネットがそうであったように、生成AIは、今、人類の営みを大きく変えようとしています。... ...
-
Tokyo BLOOMTECH, Inc ¥8,000,000 - ¥15,000,000 per yearData Engineer/Fintechのデータエンジニアが主役の組織風土とグローバルな環境で、 · 東大発のFintech/ビッグデータスタートアップです。 · ...
-
東京都 区, 株式会社バイオス ¥3,500,000 - ¥4,000,000 per yearデータセンターやヘルプデスクなどのサポート業務に興味のある方、ITインフラに関する基礎知識をお持ちの方はご応募ください。 · ...
-
Tokyo TIER IV自動運転で発生するデータの収集・検索・分析を支えるデータ基盤の開発・運用を担当していただきます。 · 車両からの走行データを収集・加工するデータパイプラインの開発・運用 · 走行履歴や統計情報を提供するAPIの開発・運用 · ...
-
Senior Data Engineer
2時間前
Minato AXA Japan/ アクサ・ジャパン職務内容 · AWS、Databricks、および現代のデータスタックアーキテクチャパターンを使用して、スケーラブルでプロダクショングレードのデータプラットフォームインフラストラクチャコンポーネントを設計および実装する。 · ...
-
Tokyo BLOOMTECH, Inc ¥6,000,000 - ¥15,000,000 per year業績好調の上場企業×充実の福利厚生あり · ・フレックス×リモート勤務(フルリモートも相談可能) · ・外国籍エンジニアが多数活躍中 · ...
-
Tokyo BLOOMTECH, Inc箓厥こJPめTokyo · ・国内有数のスタートアップ · ・外国籍多数活躍中 · ・フルリモート/フルフレックス · ...
-
Tokyo Rakuten ¥4,585,000 - ¥5,822,220 per yearThe main development task is to build Catalog Data Solution platform that enable DKD Data asset to be more usable and helping Rakuten business to unlock business opportunity using Catalog Data Asset.One of the important challenges is to continuously add feature and also maintaini ...
-
Tokyo TIER IV ¥330,000 - ¥1,667,000 per yearデータエンジニアを募集いたします。Expert Data Engineerのポジションは、機械学習モデル学習に必要なデータセットの構築・改善の方針を決定することに責任を持ちます。Data Centric AIの思想に基づき、収集したデータの特性分析や分析コード実装を行い、機械学習モデルの性能改善に貢献することが求められます。 · ...
-
Tokyo JERA Co., Inc. ¥15,000,000 - ¥25,000,000 per year+データマネジメントを横断的に推進+全社情報公開推進+部門からのデータ利活用要望に対応+新規開発や追加開発するシステムに対し、デフォルトの利用を推進 · ■巨大なビジネス規模とスタートアップの精神 · ■グローバル本社での活躍 · ■中長期的視野とスピード感の両立 ...
-
東京都 港区 六本木, グリーグループ メタバース事業 ¥2,000,000 - ¥2,800,000 per yearREALITYアプリ/データエンジニア/Data Engineerの職種です。 · 現在の課題に対処するためのプロジェクトを立ち上げましたが、人数やスキルで進められていない状況があります。このポジションでは、「データ分析基盤の改善」を推進するために必要な技術者を募集しています。 · ...
-
Tokyo TIER IV ¥483,000 - ¥1,166,000自動運転で発生するデータの収集・検索・分析を支えるデータ基盤の開発・運用を担当していただきます。 · ...