Hadoop Data Engineer

2日前

Tokyo Trigyn Technologies
The Role:

As a Hadoop Data Engineer, you will be responsible for designing, developing, and maintaining scalable data processing systems. You will work closely with data scientists and analysts to ensure data availability and quality.

  • Design and implement data pipelines using Hadoop ecosystem tools.
  • Optimize data processing workflows for performance and scalability.
  • Collaborate with cross-functional teams to gather requirements and deliver solutions.
  • Monitor and troubleshoot data processing jobs.
  • Ensure data security and compliance with best practices.

Team Structure: You will be part of a dynamic team of data engineers and analysts, working in an agile environment.

Ideal Profile:

The ideal candidate will have a strong technical background and a passion for data engineering.

  • Experience with Hadoop, Spark, and related technologies.
  • Proficiency in SQL and data modeling.
  • Familiarity with data warehousing concepts.
  • Understanding of ETL processes.
  • Experience with cloud platforms (AWS, Azure).

Soft Skills:

  • Communication
  • Problem Solving

Education: Bachelor's degree in Computer Science, Engineering, or a related field.

What's on Offer:

This contract position offers competitive compensation and the opportunity to work on cutting-edge data projects.

  • Growth opportunities within the company.
  • Collaborative and innovative work culture.
  • Flexible remote work options.
  • Access to learning and development resources.

  • Hadoop Data Engineer

    2日前

    Tokyo Trigyn Technologies

    The Role: · As a Hadoop Data Engineer you will be responsible for designing developing and maintaining scalable data processing systems. · ...

  • Data Engineer

    4日前

    東京都 渋谷区 桜丘町, 株式会社LegalOn Technologies ￥77,000,000 - ￥107,000,000 per year

    私たちは、AI分野における高度な技術力と法律・契約の専門知識を兼ね備えたグローバルリーガルAIカンパニーです。2017年の設立以来、AIを活用したリーガルAIサービスの開発に注力し、累計ラウンド総額約286億円を達成。 · データエンジニアリングに関連する技術選定、設計や構築に関わる開発物のレビューを主体的に実施する · ...

  • Data Engineer

    4週間前

    Tokyo Michael Page

    Azure  Databricksを活用した最新データ基盤構築 · グローバル環境でキャリアを伸ばせる · ...

  • Data Engineer

    2週間前

    Tokyo BLOOMTECH, Inc

    私たちは「モノづくり産業のポテンシャルを解放する」をミッションに、製造業におけるデータプラットフォームプロダクトを展開しています。 · 2022 年にローンチしたプロダクトは、製造業の中でも最重要といわれる図面データを機械学習など様々な技術により構造化し多様な情報と結び付けることで、情報資産としての活用を可能にしました。既に国内の大手製造業から加工会社のお客様にまで活用いただいており、急成長中です。2023 年からは海外(アメリカ・タイ・ベトナム)での販売も開始し、グローバル展開も加速させています。 · ...

  • Data Engineer

    4週間前

    Tokyo Tenth Revolution Group

    不動産×テクノロジー業界大手企業で、データエンジニアを募集しています。グループ全体のデータマネジメントを担うポジションです。 · データ基盤の設計・開発・運用 · データパイプライン(ETL / BI / Reverse ETL)の整備 · データガバナンス・セキュリティ対応 · ...

  • Data Engineer

    4週間前

    Tokyo Michael Page

    Azure・Databricks グローバル環境でキャリアを伸ばせる · ）Job summary · Azure・Databricks ）Data Engineer ） · ...

  • Data Engineer_FullyRemote

    4週間前

    Tokyo BLOOMTECH, Inc Remote job

    国内有数のスタートアップで、外国籍多数活躍中のフルリモート/フルフレックスでのデータエンジニアを探しています。年収範囲は5,000万円から14,000万円です。 · ...

  • Data Engineer

    4週間前

    Tokyo Denodo ￥9,000,000 - ￥12,000,000 per year

    Denodoでは、カスタマーサクセス組織の一員として、グローバルオフィスチームの一員として · 高齢者を介護することを目的とした介護サービス提供の会社です。 · ...

  • Software Engineer(data

    4週間前

    Tokyo BLOOMTECH, Inc Remote job

    当社は個人がベストのパフォーマンスを発揮できる働き方を推奨しています。コアタイムなしのマンスリーフレックス制度を導入しており、プライベートな予定や家庭の事情に合わせて勤務時間を調整したりリモートワークを活用したり、様々なフィールドのメンバーがそれぞれのスタイルで力を発揮しています。 · ...

  • Data Platform Engineer

    4週間前

    Minato SB Intuitions ￥6,500,000 - ￥18,000,000

    +SB Intuitionsについて+ · かつての自動車や飛行機、電話やインターネットがそうであったように、生成AIは、今、人類の営みを大きく変えようとしています。... ...

  • Data Engineer_fully remote

    2週間前

    Greater Tokyo Area BLOOMTECH, Inc Remote job

    日々膨大な量のオンラインおよびオフラインのデータが生み出されており、蓄積されたデータの価値を適切に判断し、どのように事業を創造・変革・成長出来るかが重要テーマの一つになっています。 · 会員登録数約934万人(2024年12月末時点)となる国内最大級の転職サービスです。 · 今回は、転職サービスにおいて、データエンジニアとして担っていただき下記の業務をお任せします。 · ...

  • Senior Data Engineer

    2週間前

    Minato AXA Japan/ アクサ・ジャパン

    職務内容 · AWS、Databricks、および現代のデータスタックアーキテクチャパターンを使用して、スケーラブルでプロダクショングレードのデータプラットフォームインフラストラクチャコンポーネントを設計および実装する。 · ...

  • Software Engineer(data

    4週間前

    Tokyo BLOOMTECH, Inc ￥6,000,000 - ￥15,000,000 per year

    業績好調の上場企業×充実の福利厚生あり · ・フレックス×リモート勤務(フルリモートも相談可能) · ・外国籍エンジニアが多数活躍中 · ...

  • Data Engineer_FullyRemote

    4週間前

    Tokyo BLOOMTECH, Inc

    箓厥こJPめTokyo · ・国内有数のスタートアップ · ・外国籍多数活躍中 · ・フルリモート/フルフレックス · ...

  • Data Engineer/Fintech

    2ヶ月前

    Tokyo BLOOMTECH, Inc ￥8,000,000 - ￥15,000,000 per year

    Data Engineer/Fintechのデータエンジニアが主役の組織風土とグローバルな環境で、 · 東大発のFintech/ビッグデータスタートアップです。 · ...

  • CoDC Junior Data Center Engineer

    2ヶ月前

    東京都 区, 株式会社バイオス ￥3,500,000 - ￥4,000,000 per year

    データセンターやヘルプデスクなどのサポート業務に興味のある方、ITインフラに関する基礎知識をお持ちの方はご応募ください。 · ...

  • Data & AI】Manufacture MES Engineer

    6日前

    Tokyo, Tokyo DXC Technology

    主に製造現場を支えるMES(製造実⾏システム)を取り扱う仕事になります。生産性と品質の向上に寄与できます。 · ...

  • Data & AI】Auto Bridge Engineer

    6日前

    Tokyo, Tokyo DXC Technology

    ソフトウェア開発エンジニアとしての業務をご担当いただく中で、技術力を高めていく、または上流のポジションを目指すなど、複数のキャリアパスが用意されています。 · ...

  • 1195_Senior Data Engineer / Data Platform Architect

    1週間前

    Tokyo TIER IV ￥628,000 - ￥1,232,667

    · ティアフォーでは、「自動運転の民主化」の実現に向けて、自動運転システムの開発効率化と品質向上を支える大規模なデータ基盤を構築しています。現在、車両からのデータ収集や検索システムのベース構築は進んでいますが、今後増大するデータ量への対応、リアルタイム性の高いストリーム処理、そして社内全体のデータ活用文化の醸成が急務となっています。このため、中長期的な視点で全社的なデータ戦略をリードし、Data Lakeやストリーミング処理の設計・運用、中にはデータドリブンな意思決定を行う組織文化の大きなエンジニア/アーキテクトです。 · Rftware Engine ...

  • AI Data Platform Engineer

    2週間前

    東京都 千代田区 岩本町, Apto

    Aptoでは、aimodel開発に不可欠なデータ生成・アノテーション基盤をプロダクトとして提供しています。 · 現在、PoCフェーズを越え 本番利用・データ量の急増・ユースケース拡張が同時に進んでおり、既存の設計ではスケールに限界が見え始めている · ...

  • 1107_Backend Engineer - Data Platform

    1ヶ月前

    Tokyo TIER IV

    自動運転で発生するデータの収集・検索・分析を支えるデータ基盤の開発・運用を担当していただきます。 · 車両からの走行データを収集・加工するデータパイプラインの開発・運用 · 走行履歴や統計情報を提供するAPIの開発・運用 · ...