Lead large-scale data engineering initiatives building cloud-based, distributed data platforms using Spark, Scala, and modern CI/CD practices.
Key Responsibilities
- Lead design and development of scalable data pipelines using Spark, Scala, Java, or Python
- Translate business and functional requirements into robust, production-ready data architectures
- Build reusable ETL and data processing frameworks for ingestion, validation, and transformation
- Implement CI/CD pipelines, automated testing, and data quality checks across platforms
- Provide technical leadership, performance optimization, and production incident support
Required Skills
- 3–8+ years of experience as a Data Engineer or Software Engineer in data-intensive systems
- Strong programming skills in Python, Java, or Scala with software engineering best practices
- Hands-on experience with Spark, Hadoop, or distributed data processing frameworks
- Strong SQL skills and experience with relational databases in production environments
- Experience building and operating data platforms in public cloud environments
- Fluency in Japanese and business-level English are required.
Preferred Skills
- Experience with streaming data, real-time processing, or change data capture (CDC)
- Familiarity with microservices architectures, REST APIs, and NoSQL databases
- Exposure to BI tools, analytics platforms, or downstream reporting use cases
About the Client
The client is a global, technology-driven organization operating large-scale data platforms supporting critical business systems. They work with high data volumes, complex integrations, and enterprise-grade architectures. Engineering teams focus on long-term platform stability, scalability, and continuous improvement.
Why You'll Enjoy Working Here
- Own end-to-end data solutions with real architectural influence
- Work in a collaborative engineering culture that values quality, automation, and learning
- Grow your leadership skills while tackling complex, high-scale data challenges
-
Senior Data Engineer
16時間前
Minato AXA Japan/ アクサ・ジャパン職務内容 · AWS、Databricks、および現代のデータスタックアーキテクチャパターンを使用して、スケーラブルでプロダクショングレードのデータプラットフォームインフラストラクチャコンポーネントを設計および実装する。 · ...
-
Data Engineer
2ヶ月前
Tokyo Denodo ￥8,000,000 - ￥15,000,000 per yearカスタマーサクセス組織の一員として、グローバルオフィスチームの一員としてDenodoの学習と採用を次のレベルへと引き上げる意欲のある、技術的で情熱的、実践的なデータアドボケイトを募集しています。 · ...
-
Senior Data Analyst
1ヶ月前
Minato City, Tokyo, Japan Mercari, Inc. ￥6,000,000 - ￥12,000,000 per yearSenior Data Analystの仕事は、メルカリグループのデータ分析業務を担い、メルカリをお使いいただいているお客さまにさらなる価値をお届けしていく楽しみがあります。 · ...
-
Data Engineer
2週間前
Tokyo Michael PageAzure Databricksを活用した最新データ基盤構築 · グローバル環境でキャリアを伸ばせる · ...
-
Tokyo BLOOMTECH, Inc Remote job国内有数のスタートアップで、外国籍多数活躍中のフルリモート/フルフレックスでのデータエンジニアを探しています。年収範囲は5,000万円から14,000万円です。 · ...
-
Tokyo Okta, Japanの求人応募Oktaは、世界中でアイデンティティ管理のソリューションを提供している、リーディング企業です。すべての人が、どこでも、どのようなデバイス、アプリ、テクノロジーであっても安全に利用できるようにします。Okta PlatformおよびAuth0 Platformは、安全かつ柔軟なアクセス、認証、および自動化を可能にし、アプリケーションのセキュリティと成長の中核に据えることができます。 ...
-
Tokyo BLOOMTECH, Inc Remote job当社は個人がベストのパフォーマンスを発揮できる働き方を推奨しています。コアタイムなしのマンスリーフレックス制度を導入しており、プライベートな予定や家庭の事情に合わせて勤務時間を調整したりリモートワークを活用したり、様々なフィールドのメンバーがそれぞれのスタイルで力を発揮しています。 · ...
-
Tokyo Synspective Inc.衛星開発システム第1部は、当社が手掛ける小型SAR衛星「StriX」シリーズの設計・運用を担当する部門です。その中で電気システムチームは、衛星の電気システム設計全般を担う専門ユニットとして、電源、通信、デジタル信号処理、アナログ回路設計等の幅広い領域をカバーしています。 メンバーには宇宙業界以外の出身者も多く、そのようなメンバーと共に先端技術の現場でチャレンジできる環境です。 · ■必須要件 · 電源システムの設計・開発経験(3年以上) · バッテリ、太陽電池アレイ、電源制御・分配システムに関する知見 · 電力収支・寿命解析等のシミュレーション/解析スキ ...
-
Tokyo Money Forward, Inc.+マネーフォワードグループのMission、Visionに強く共感・共鳴いただける方で、エンジニア募集ポジション一覧をご確認いただき、本募集からご応募ください。+業務内容は異なりますが、以下のような業務を想定しております。+toB SaaSプロダクト開発(バックオフィスの業務効率化やSaaSマーケティングの価値提供をしています)+toC プロダクト開発(家計簿アプリを代表としたプロダクトや新規プロダクトなど)+社内インフラ/セキュリティ本部でのエンジニアリング+CTO室(CTO直下のチーム)でのエンジニアリング+各プロダクトのエンジニアリーダー、エンジニ ...
-
Data Engineer
2週間前
Tokyo Denodo ￥9,000,000 - ￥12,000,000 per yearDenodoでは、カスタマーサクセス組織の一員として、グローバルオフィスチームの一員として · 高齢者を介護することを目的とした介護サービス提供の会社です。 · ...
-
Tokyo Box ￥6,000,000 - ￥12,000,000 per yearJob summary · Boxは、インテリジェントコンテンツ管理(ICM)市場におけるリーディングカンパニーです。私たちのミッションは「人と組織の働き方の変革」です。 · ...
-
Senior Data Analyst
2ヶ月前
Minato Mercari, Inc. ￥4,800,000 - ￥12,000,000 per yearThis job requires Japanese language ability. Senior Data Analyst - Merpay · JD is available in Japanese only. · Senior Data Analyst will be responsible for data analysis and business improvement of Mercari Group. · ...
-
Data Engineer
2週間前
Tokyo Michael PageAzure・Databricks グローバル環境でキャリアを伸ばせる · ）Job summary · Azure・Databricks ）Data Engineer ） · ...
-
Data Engineer
2週間前
Tokyo Tenth Revolution Group不動産×テクノロジー業界大手企業で、データエンジニアを募集しています。グループ全体のデータマネジメントを担うポジションです。 · データ基盤の設計・開発・運用 · データパイプライン(ETL / BI / Reverse ETL)の整備 · データガバナンス・セキュリティ対応 · ...
-
Tokyo Autify· テクニカルサポートエンジニア(TSE)チームは、一次対応のカスタマーサポートチームでは解決できないお客様からの技術的な問題を調査・解決するために設立されました。 · これまでクラウド環境で提供してきた製品を、オンプレミス環境でも利用可能にする取り組みを進めています。そのため、オンプレミス版製品の導入・運用を支援し、技術的な課題解決をリードできるシニア テクニカルサポートエンジニアを募集します。 · このポジションは、お客様環境におけるAutifyオンプレミス製品のインプリメンテーション支援、トラブルシューティング、パフォーマンス調査、運用最適化の技 ...
-
Tokyo griddable ￥6,000,000 - ￥12,000,000 per yearMuleSoftのミッションは、世界中のシステム、アプリケーション、データ、デバイスを簡単に接続できるようにすることで、組織がより速く変革し、イノベーションを起こすことを支援することです。MuleSoftを採用した多くの企業が、MuleSoftが提唱するコンポーザブル・アーキテクチャーによって、アジャイルかつ迅速なシステム・デリバリーを実現し、IT投資を最大限に有効活用することができています。私たちは、より素晴らしい会社を一緒に作りたいと思う優れた人材を採用することが、最優先事項であり、誰もがサポートされ、最高の仕事ができる機会均等な職場を提供することを ...
-
東京都 区, 株式会社バイオス ￥3,500,000 - ￥4,000,000 per yearデータセンターやヘルプデスクなどのサポート業務に興味のある方、ITインフラに関する基礎知識をお持ちの方はご応募ください。 · ...
-
Shibuya W3Global本ポジションは、取引管理サービス「Contract One」の開発を担当します。契約書データ化を可能にしています。また、生成AIと契約データの融合による新機能開発や、高速・高精度な全文検索の改善も進めています。 · AI・検索エンジニアとして、Contract Oneの根幹機能である検索機能のアップデートを担当します。UIやデータベース設計を含め、多様な検索ニーズに応える改善を行います。 · ...
-
Tokyo TIER IV自動運転で発生するデータの収集・検索・分析を支えるデータ基盤の開発・運用を担当していただきます。 · 車両からの走行データを収集・加工するデータパイプラインの開発・運用 · 走行履歴や統計情報を提供するAPIの開発・運用 · ...
-
Greater Tokyo Area Randstad Japan自社メモリ及びストレージ製品をロジックアナライザー、オシロスコープ、プロトコルアナライザを使用してシステムに関連する問題解決をお任せ致します。 · ...
-
Minato SB Intuitions ￥6,500,000 - ￥18,000,000+SB Intuitionsについて+ · かつての自動車や飛行機、電話やインターネットがそうであったように、生成AIは、今、人類の営みを大きく変えようとしています。... ...
