ETL / Data QA Engineer (Data Pipelines & Data Quality)
Atify is assisting a major Japan-based enterprise specializing in data-driven marketing, retail analytics, and consumer insights in expanding its data and engineering teams.
Employment type
3-month renewable contract (with the possibility of extension or full-time conversion based on performance).
Language: English (business level) + Japanese (a plus)
Role Summary
As a QA Engineer focused on data, you will work closely with data engineers, analytics teams and stakeholders to ensure the accuracy, reliability, and integrity of our data pipelines, transformation workflows and downstream data products. Your mission: validate that data moving through ingestion, cleansing, transformation, and loading meets business rules and quality standards.
- Responsibilities
Design, develop and execute test plans, test cases and automated validation scripts for ETL/ELT/data-pipeline workflows (batch &/or streaming). - Validate data ingestion from source systems (structured/unstructured), ensure correct transformation logic, and that data lands in target systems (data lake, data warehouse, analytics platform) as expected.
- Develop and maintain data quality checks, data profiling, data cleansing/validation frameworks.
- Monitor data pipelines for issues such as data drift, schema changes, missing values, duplicates, out-of-range values, inconsistencies.
- Work with data engineers/architects to define and embed data quality rules and metrics (completeness, accuracy, consistency, timeliness).
- Automate data verification tests (for example, as part of CI/CD or data-ops pipelines) to catch defects early in the data lifecycle.
- Document data issues, track defects, and collaborate with engineering teams to root-cause, resolve and prevent data quality problems.
- Review data transformations, business logic, data flows and help design test strategy for downstream reporting/analytics/data-science use cases.
- Provide visibility into data quality via dashboards, metrics, alerts and stakeholder reporting.
Advocate for data-quality best practices across the organisation (data quality-by-design, observability, proactive monitoring).
Key Skills & Qualifications
Strong SQL skills (writing complex queries for verifying data, profiling, checking integrity).- Experience with one or more programming languages (e.g., Python, Scala) for automation of data-validation scripts.
- Understanding of data pipeline architectures (Ingestion → Transformation → Loading) and associated tools (ETL/ELT, streaming, batch).
- Familiarity with data warehouse / data lake / Big Data technologies, cloud environments (AWS, Azure, GCP) is a plus.
- Experience designing test cases for data pipelines (e.g., verifying schema, row counts, aggregations, joins, deduplication, null handling).
- Ability to identify and monitor data-quality metrics (accuracy, completeness, consistency, timeliness), implement monitoring/alerting.
- Excellent analytical skills: able to break down complex data flows, detect anomalies, drill into root causes.
- Good communication skills: to liaise with business stakeholders, data engineers, analysts and clearly document issues and findings.
- Prior experience in QA/testing (software or data) and familiarity with test-automation frameworks is helpful.
Preferably a degree in Computer Science, Data Science, or related field (or equivalent experience).
Preferred / Nice-to-Have
Experience with streaming data technologies (Kafka, Kinesis) or real-time pipelines.- Knowledge of modern data-observability tools (monitoring data quality, schema drift, data-drift detection).
- Experience in data-governance, metadata management, or data-cataloging.
- Familiarity with DevOps/CI-CD pipelines (embedding data-tests into production builds).
Domain experience (finance, healthcare, ecommerce) where data correctness and regulatory compliance matter.
What We Offer
Opportunity to impact the foundation of how the organisation uses data and decision-making.- Work in a cross-functional, data-driven culture with engineers, analysts & business partners.
- Exposure to modern data platforms and technologies.
- International Global Environment.
-
Tokyo, Tokyo Atify - Positive Impact with AI ¥3,500,000 - ¥6,000,000 per yearAs a QA Engineer focused on data, you will work closely with data engineers, analytics teams and stakeholders to ensure the accuracy, reliability, and integrity of our data pipelines, transformation workflows and downstream data products. · Design, develop and execute test plans, ...
-
Tokyo, Tokyo Atify - Positive Impact with AI ¥2,500,000 - ¥5,000,000 per yearAs a QA Engineer focused on data, you will work closely with data engineers, analytics teams and stakeholders to ensure the accuracy, reliability, and integrity of our data pipelines, transformation workflows and downstream data products. · Design, develop and execute test plans, ...
-
Lead, Quality Engineer
22時間前
Tokyo Autify ¥5,000,000 - ¥8,000,000 per yearLead, QEは、案件受注後にQAチームのリーダーとして、顧客のテスト設計やプロセス整備、品質分析をリードし、特にドキュメント不備や属人化した業務フローといった自動化推進の障壁を解消するためのリーダーシップを担うポジションです。複数の大手企業案件を同時に進める現状において不可欠な存在であり、顧客の信頼を得ながらプロジェクトを推進していただきます。 · ...
-
Data Engineer
2ヶ月前
Tokyo Denodoデータエンジニアを募集しています。グローバルオフィスチームの一員として、Denodoの学習と採用を次のレベルへと引き上げる意欲のある、技術的で情熱的、実践的なデータアドボケイトを募集しています。 · データ管理ソリューションを成功させるために必要な資料を利用できるようにすることがあなたのミッションです。 · 顧客やパートナー企業からの技術的な問い合わせや問題(トラブルなど)を、DenodoサポートサイトやEメールなどを通じて、解決策を提案します。 · お客様のビジネス要件に対応したDenodo製品のインプリメンテーション、最適化、カスタマイズに関して、設 ...
-
Data Engineer
3週間前
Tokyo IBM ¥900,000 - ¥1,200,000 per yearデータ活用基盤実装をリードしながら、技術の専門家としてIBM Salesやサービス部門と連携して、IBMストレージ技術を利用したソリューション開発やIBMデータ活用基盤に関する技術支援を行います。 · IBMデータ活用製品を利用したソリューション開発および、研修開発 · IBMデータマネジメントソフトウェア:DB2の技術Q&A支援と製品技術情報の発信 · お客様ビジネスの課題を理解/整理し、AIやデータを活用した課題解決を実現するデータ活用基盤のアプローチ策定 · IBM製品を中心としたスキルを生かし、データ活用基盤構築の提案支援/構想策定/デザイン/デ ...
-
Tokyo DXC Technology ¥4,320,000 - ¥6,480,000 per year⾃動⾞制御装置・コックピットの制御を⽀えるソフトウェア開発を⾏う 仕事です。エンジニアとしてご⾃身が開発に直接的に関わるだけでなく、ヨーロッ パにいるメンバー(海外のDXCや傘下のLuxoftのメンバー)とやり取りをしながらお客様の要望を実現するような ポジションです。 · ・3〜5年程度のシステム開発経験 · ・英語⼒(お客様の要望をヨーロッパのメンバーと共有して開発に取り組むことが多いため、業務上英語が必須となります。) · ・組み込み開発の実務経験がある(できれば⾃動⾞関連) · ・⾃動運転領域のソフトウェア開発に従事した経験 · ・⾃動⾞のソフト ...
-
Chiyoda Microsoft Full time¥4,000,000 - ¥12,000,000 per yearデータベースや分析の世界に強い好奇心と深い情熱を持ち、ダイナミックな環境で複雑な課題に挑戦する準備はできていますか? · Microsoftの商用顧客向けCloud & AI Innovative Data Platform Solution Engineerとして、私たちのチームに加わりませんか。 · 顧客に対してセキュアでスケーラブルなソリューション設計をガイドし、技術的な意思決定に影響を与え、データベースや分析のモダナイゼーションを推進します。 · 顧客をセキュアでスケーラブルなソリューション設計へ導き、技術的な意思決定を支援し、データベースや分析 ...
-
Tokyo, Tokyo Atify - Positive Impact with AI ¥3,000,000 - ¥5,000,000 per yearWe are seeking a QA Engineer focused on ETL/Data Quality. · ...
-
Tokyo BLOOMTECH, Inc ¥8,000,000 - ¥15,000,000 per yearData Engineer/Fintechのデータエンジニアが主役の組織風土とグローバルな環境で、 · 東大発のFintech/ビッグデータスタートアップです。 · ...
-
Tokyo TIER IV ¥330,000 - ¥1,667,000 per yearデータエンジニアを募集いたします。Expert Data Engineerのポジションは、機械学習モデル学習に必要なデータセットの構築・改善の方針を決定することに責任を持ちます。Data Centric AIの思想に基づき、収集したデータの特性分析や分析コード実装を行い、機械学習モデルの性能改善に貢献することが求められます。 · ...
-
Tokyo TIER IV ¥483,000 - ¥1,166,000自動運転で発生するデータの収集・検索・分析を支えるデータ基盤の開発・運用を担当していただきます。 · ...
-
Tokyo DXC Technology ¥900,000 - ¥1,200,000 per yearソフトウェア開発エンジニアのニーズが非常に高まっています。自動車の設計開発業務に関する知識、プロジェクトマネージメントスキル、構成のあるべき姿の提案・提言スキル、海外メンバーと共同でシステム開発を進めるスキルが必要です。3〜5年程度のシステム開発経験、英語力、組み込み開発の実務経験があること、自動運転領域のソフトウェア開発に従事した経験が求められます。 ...
-
Tokyo DXC Technology ¥2,500,000 - ¥6,000,000 per year主に製造現場を支えるMES(製造実⾏システム)を取り扱う仕事になります。生産性と品質の向上に寄与できます。 ...
-
Tokyo Michael Page ¥4,000,000 - ¥10,000,000 per yearData Engineerの職務内容は大規模なデータセットの管理と分析をサポートすることです。大学卒以上でPython、Java、Rなどのデータ処理経験がある人が必要です。Hadoop、Sparkなどの分散処理技術の経験 · NLPやAIモデルの基礎知識 · ...
-
Data Engineer – Quality
12時間前
Tokyo スキルハウス・スタッフィング・ソリューションズ株式会社 ¥4,200,000 - ¥8,400,000 per yearA global and one of the world's largest Insurance Service provider is looking for a Bilingual Data Quality Management Engineer. · Your deep expertise in data governance will directly shape and elevate the company's enterprise Data Platform. ...
-
Tokyo オリンパス株式会社 ¥9,000,000 - ¥12,000,000 per year品質エンジニアとして医療機器の開発、調達、製造、サービスプロセスにおいて品質代表として参画し、グローバル規制に適合した品質保証活動をリードします。 · 新製品開発、調達、製造、サービスにおける品質エンジニアリングのリード · 割り当てられた品質エンジニアリングタスクの遂行(スケジュール遵守) · 品質および規制要求に関する社内啓発の推進 · 工程・手順の開発および改訂の主導 · SPC(統計的プロセス管理)を適用したプロセス評価 · 問題解決に向けた新たなアプローチの開発 · FDA、ISO13485 等、グローバル規格の遵守および維持 · バリデーショ ...
-
Data Engineer
2週間前
Greater Tokyo Area Randstad Japan ¥7,000,000 - ¥10,000,000 per yearData engineer with strong background in data engineering with scala and spark or java python or other back end languages wanted. · ...
-
Data Engineer
2週間前
Tokyo, Japan AheadGroup ¥120,000 - ¥180,000 per yearAhead Group is looking for a skilled and motivated Mid-Level Data Engineer to join a globally recognized tech platform team. · Design, develop, and maintain scalable data pipelines and cloud-based data warehouse solutions. · Lead architecture discussions and implement robust data ...
-
Data Engineer
5日前
Tokyo Globallogic Japan ¥800,000 - ¥2,000,000 per yearWe are seeking a Data Engineer to join our team in Tokyo, Japan. The successful candidate will have 3+ years of experience in Data Engineering, strong SQL and Python skills, and experience with Airflow, Spark, AWS/GCP. · ...
-
Data Engineer
4週間前
Tokyo LongWave ¥12,000,000 per yearWe're hiring a Data Engineer to join a fast-growing Japanese SaaS company building next-generation management and cloud-based data platforms. · Design and scale the core data infrastructure that powers analytics, business decision-making, and future AI-agent systems. · Work end-t ...
-
Data Engineer
6日前
Tokyo Talisman Corporation ¥500,000 - ¥1,500,000 per yearData Engineer for Fastest Growing SaaS Company. · We are working to make the data collection system available. · ...