Job Description
Business Overview
Rakuten Group, Inc., a global technology leader based in Japan, provides innovative solutions that enrich the lives of millions worldwide. Our Technology division is pioneering in leveraging cutting-edge technologies to deliver exceptional experiences across our services.
Department Overview
The importance of catalog data as a master data is increasing as it serves as a hub and data platform that connects products and corporate data handled within Rakuten services. By managing abundant and accurate catalog data and deploying it as master data across Rakuten services, it plays the role of core data that accelerates new service development.
The Data Knowledge Department (DKD) is committed to building data creation processes, collecting and expanding catalog data, and improving quality in order to continue providing services that meet and exceed the expectations of Rakuten's customers.
Under the mission of creating the best catalog data and improving user experience, we provide the power of Rakuten's design, technology, and operations to provide high-quality catalog data that is at the core of our business strategy. This contributes to Rakuten's vision of "Empowering people and society through innovation".
Position
Position Details
The main development task is to build Catalog Data Solution platform that enable DKD Data asset to be more usable and helping Rakuten business to unlock business opportunity using Catalog Data Asset. In addition to building platform to unlocking Catalog Data asset we also need to support our client to provide data that meets our clients needs.
One of the important challenges is to continuously add feature and also maintaining Platform and Data Quality of Enrichment Solution to our data client.
We also practice long-term product development as we handle the entire development process from design, development, to release and operation. We also play a role in considering a more scalable system design while preventing or paying technical debt.
Responsibilities
- Design, develop, and maintain efficient and scalable data pipelines using Apache Spark (primarily with Java) or Apache Beam or Kubeflow to ingest, process, and transform large datasets from various sources.
- Design and implement optimized data models for analytical and operational use cases, considering performance, scalability, and data integrity.
- Build and maintain web tools and applications in Python and Java.
- Develop end-to-end applications integrating with data infrastructure.
- Maintain infrastructure aligned with product and security requirements.
- Contribute to product development and architecture design.
- Ensure high performance and data quality.
Mandatory Qualifications
- Fluent in both Japanese and English, with exceptional communication skills across diverse, multinational environment.
- Minimum 3 years of proven experience in Data Engineering fields.
- Demonstrated experience building production-grade data pipelines.
- Track record of developing full-stack applications.
- Strong background in API design and development.
- Solid experience with Google Cloud Platform (GCP) services, including BigQuery, Dataflow, Dataproc, Cloud Storage, and Pub/Sub.
- Expertise in data pipeline development and ETL processes.
Desired Qualifications
- Understanding of AI/GenAI concepts and their data requirements is a plus.
- Experience building data pipelines to support AI/ML models is a plus.
- Data assets, data governance, storage, and sharing.
- Background in performance optimization.
- Experience as a mentor, tech lead or leading an engineering team.
- Have a strong ownership and able to own project end-to-end from designing to deployment.
- Experience in building and driving adoption of new products.
- Strong adaptability and commitment to continuous learning, keeping up with the latest advancements in technology.
engineer #DataEngineer #applicationsengineer #aianddatadiv
Languages
English (Overall - 3 - Advanced), Japanese (Overall - 3 - Advanced)
-
Tokyo griddable当部門はSolutions部門において特定のソリューション、技術領域に深い専門知識を持ち、お客様へのソリューション提案、デモンストレーションを行います。また、AgentforceやData 360の専門家として国内外の開発部門や製品マーケティング部門と連携し、日本における製品品質の向上、および市場における認知度向上のための活動も行います。 · ...
-
Tokyo griddable当部門はSolutions部門において特定のソリューション、技術領域に深い専門知識を持ち、Account Executive(営業)、業界/企業担当のSolution Engineerとともに製品、および技術的な観点からお客様へのソリューション提案、デモンストレーション、技術的な質問への対応を担います。 · ...
-
Data Engineer
1ヶ月前
Tokyo Michael PageAzure Databricksを活用した最新データ基盤構築 · グローバル環境でキャリアを伸ばせる · ...
-
Tokyo, Tokyo PERSOL CAREER BRS (Bilingual Recruitment Solutions)自動車業界においても技術革新の進歩は目覚ましく、ものづくりとしての自動車の立ち位置は大きく変化しました。製品開発における複雑さがより増しています。そのような環境下で最善の製品開発をシステムでサポートするためのプロフェッショナルを求めています。自動車業界のお客様に対してPLM(製品ライフサイクル管理)の観点から製品開発業務をサポートすることがミッションです。 · ...
-
Data Engineer
3週間前
Tokyo BLOOMTECH, Inc私たちは「モノづくり産業のポテンシャルを解放する」をミッションに、製造業におけるデータプラットフォームプロダクトを展開しています。 · 2022 年にローンチしたプロダクトは、製造業の中でも最重要といわれる図面データを機械学習など様々な技術により構造化し多様な情報と結び付けることで、情報資産としての活用を可能にしました。既に国内の大手製造業から加工会社のお客様にまで活用いただいており、急成長中です。2023 年からは海外(アメリカ・タイ・ベトナム)での販売も開始し、グローバル展開も加速させています。 · ...
-
Data Engineer
2週間前
東京都 渋谷区 桜丘町, 株式会社LegalOn Technologies ¥77,000,000 - ¥107,000,000 per year私たちは、AI分野における高度な技術力と法律・契約の専門知識を兼ね備えたグローバルリーガルAIカンパニーです。2017年の設立以来、AIを活用したリーガルAIサービスの開発に注力し、累計ラウンド総額約286億円を達成。 · データエンジニアリングに関連する技術選定、設計や構築に関わる開発物のレビューを主体的に実施する · ...
-
Data Engineer
1ヶ月前
Tokyo Tenth Revolution Group不動産×テクノロジー業界大手企業で、データエンジニアを募集しています。グループ全体のデータマネジメントを担うポジションです。 · データ基盤の設計・開発・運用 · データパイプライン(ETL / BI / Reverse ETL)の整備 · データガバナンス・セキュリティ対応 · ...
-
Data Engineer
1ヶ月前
Tokyo Michael PageAzure・Databricks グローバル環境でキャリアを伸ばせる · )Job summary · Azure・Databricks )Data Engineer ) · ...
-
Data Engineer
1ヶ月前
Tokyo Denodo ¥9,000,000 - ¥12,000,000 per yearDenodoでは、カスタマーサクセス組織の一員として、グローバルオフィスチームの一員として · 高齢者を介護することを目的とした介護サービス提供の会社です。 · ...
-
Tokyo BLOOMTECH, Inc Remote job国内有数のスタートアップで、外国籍多数活躍中のフルリモート/フルフレックスでのデータエンジニアを探しています。年収範囲は5,000万円から14,000万円です。 · ...
-
Tokyo BLOOMTECH, Inc Remote job当社は個人がベストのパフォーマンスを発揮できる働き方を推奨しています。コアタイムなしのマンスリーフレックス制度を導入しており、プライベートな予定や家庭の事情に合わせて勤務時間を調整したりリモートワークを活用したり、様々なフィールドのメンバーがそれぞれのスタイルで力を発揮しています。 · ...
-
Minato SB Intuitions ¥6,500,000 - ¥18,000,000+SB Intuitionsについて+ · かつての自動車や飛行機、電話やインターネットがそうであったように、生成AIは、今、人類の営みを大きく変えようとしています。... ...
-
東京都 渋谷区 渋谷, コカ・コーラボトラーズジャパン株式会社 Remote jobSCMSeniorSolutionDesigner–Data&WebApps · 、昇給年一回(4月)前年度の評価に応じて昇給率が変動 · 、賞与年三回(3月、6月、12月) · 、(※ 前職の経験・年収を十分考慮の上、決定 · 、(※ 1年以上在籍後、会社規定および会社業績をもとに決算賞与の支給有(3月) · ...
-
Tokyo BLOOMTECH, Inc業績好調の上場企業×充実の福利厚生あり · ・フレックス×リモート勤務(フルリモートも相談可能) · ・外国籍エンジニアが多数活躍中 · ...
-
Tokyo TIER IV ¥628,000 - ¥1,232,667· ティアフォーでは、「自動運転の民主化」の実現に向けて、自動運転システムの開発効率化と品質向上を支える大規模なデータ基盤を構築しています。現在、車両からのデータ収集や検索システムのベース構築は進んでいますが、今後増大するデータ量への対応、リアルタイム性の高いストリーム処理、そして社内全体のデータ活用文化の醸成が急務となっています。このため、中長期的な視点で全社的なデータ戦略をリードし、Data Lakeやストリーミング処理の設計・運用、中にはデータドリブンな意思決定を行う組織文化の大きなエンジニア/アーキテクトです。 · Rftware Engine ...
-
東京都 千代田区 岩本町, AptoAptoでは、aimodel開発に不可欠なデータ生成・アノテーション基盤をプロダクトとして提供しています。 · 現在、PoCフェーズを越え 本番利用・データ量の急増・ユースケース拡張が同時に進んでおり、既存の設計ではスケールに限界が見え始めている · ...
-
Greater Tokyo Area BLOOMTECH, Inc Remote job日々膨大な量のオンラインおよびオフラインのデータが生み出されており、蓄積されたデータの価値を適切に判断し、どのように事業を創造・変革・成長出来るかが重要テーマの一つになっています。 · 会員登録数約934万人(2024年12月末時点)となる国内最大級の転職サービスです。 · 今回は、転職サービスにおいて、データエンジニアとして担っていただき下記の業務をお任せします。 · ...
-
Senior Data Engineer
4週間前
Minato AXA Japan/ アクサ・ジャパン職務内容 · AWS、Databricks、および現代のデータスタックアーキテクチャパターンを使用して、スケーラブルでプロダクショングレードのデータプラットフォームインフラストラクチャコンポーネントを設計および実装する。 · ...
-
東京都 品川区 北品川, 株式会社ティアフォーティアフォーでは、「自動運転の民主化」の実現に向けて、自動運転システムの開発効率化と品質向上を支える大規模なデータ基盤を構築しています。現在、車両からのデータ収集や検索システムのベース構築は進んでいますが、今後増加するデータ量への対応、リアルタイム性の高いストリーム処理、および社内全体のデータ活用文化醸成が急務となっています。 · ...
-
Tokyo BLOOMTECH, Inc ¥6,000,000 - ¥15,000,000 per year業績好調の上場企業×充実の福利厚生あり · ・フレックス×リモート勤務(フルリモートも相談可能) · ・外国籍エンジニアが多数活躍中 · ...
-
Tokyo BLOOMTECH, Inc箓厥こJPめTokyo · ・国内有数のスタートアップ · ・外国籍多数活躍中 · ・フルリモート/フルフレックス · ...