Ahead Staffing is seeking a Data Infrastructure Engineer that will be responsible for ensuring the reliability, availability, and performance of the data platform infrastructure, systems, and storage. This includes monitoring data processes, responding to incidents, collaborating with teams, optimizing systems, and driving automation for efficiency.
Key Responsibilities:
- Data Processing Monitoring & Alerting: Ensure successful execution of data processing batches through monitoring solutions for data quality, system performance, and pipeline health. Maintain proactive alerting systems.
- Incident Response: Participate in incident responses and post-mortem reviews to identify root causes and implement preventive measures.
- Troubleshooting: Diagnose and resolve data-related issues with minimal downtime, collaborating closely with technical leaders and stakeholders.
- Collaboration: Work with external source system teams and cross-functional teams to provide reliable data solutions.
- Scaling & Optimization: Optimize data systems and implement auto-scaling/resource allocation strategies to achieve performance and cost goals.
- Platform Maintenance: Perform infrastructure/system upgrades and migrations to ensure compliance with company policies.
- Automation: Automate routine tasks, deployments, and scaling processes for improved efficiency.
- Documentation: Maintain detailed documentation for platform architecture, configurations, processes, and data systems.
Required Skills:
- 5+ years of experience in Data Engineering, including SQL and Linux systems.
- 3+ years of experience with Python and Shell scripting.
- Proficiency in containerization and orchestration tools (e.g., Docker, Kubernetes).
- Experience with batch-processing data pipelines (e.g., Airflow, Digdag, Informatica, etc.).
- Hands-on experience with "Big Data" systems (e.g., Hadoop, Hive, Spark).
- Knowledge of backend systems (e.g., Apache, MySQL/PostgreSQL).
- Familiarity with Git and deployment pipelines (e.g., Jenkins, Ansible).
Desired Skills:
- Experience with data/statistical analytics.
- Knowledge of streaming data pipelines (e.g., Apache NiFi, Kafka, Spark Streaming).
- Managing systems with high service-level objectives (SLOs/SLAs).
- Effective communication and problem-solving abilities.
- Attention to detail and customer-centric mindset.
- Proficiency in project management, teamwork, and leadership.
- Adaptability and a commitment to continuous learning.
- Experience with public cloud platforms (e.g., GCP, AWS, Azure).
-
Minato Mercari, Inc.IT Infrastructure Engineerのポジションは、ゼロトラストに代表されるようなセキュリティアーキテクチャなども取り入れ、より高度でメルカリにとって最適なInfrastructureのモデルを作成していく役割を担います。 · Endpoint(端末 / モバイル)の設計・構築・運用 · Okta、Google Workspace など SaaS の設計・構築・運用 · Google Cloud や Microsoft Azure など IaaS や仮想基盤(VDI)の設計・構築・運用 · オフィスネットワーク、セキュリティシステムの設計 ...
-
Tokyo Michael Page ￥7,000,000 - ￥12,000,000 per year最新技術を活用し、ハイブリッド勤務でグローバル規模のIT基盤を構築 · 多様なプロジェクトでキャリアを広げる環境 · エンドポイント(PC・モバイル)の設計・構築・運用 · Okta、Google WorkspaceなどSaaSの設計・運用 · Azure、GCPなどクラウド基盤の設計・構築 · オフィスネットワーク・セキュリティシステムの設計・運用 · ゼロトラストを含むセキュリティアーキテクチャの導入 · MDMソリューション(Intune、Jamf Pro等)を用いた端末管理経験(3年以上) · Azure/AWS/GCPなどクラウド利用経験(3年 ...
-
Data Engineer
3週間前
Tokyo IBM ￥900,000 - ￥1,200,000 per yearデータ活用基盤実装をリードしながら、技術の専門家としてIBM Salesやサービス部門と連携して、IBMストレージ技術を利用したソリューション開発やIBMデータ活用基盤に関する技術支援を行います。 · IBMデータ活用製品を利用したソリューション開発および、研修開発 · IBMデータマネジメントソフトウェア:DB2の技術Q&A支援と製品技術情報の発信 · お客様ビジネスの課題を理解/整理し、AIやデータを活用した課題解決を実現するデータ活用基盤のアプローチ策定 · IBM製品を中心としたスキルを生かし、データ活用基盤構築の提案支援/構想策定/デザイン/デ ...
-
Minato Mercari, Inc.IT Infrastructure Engineer · Endpoint(端末 / モバイル)の設計・構築・運用 · Okta、Google Workspace など SaaS の設計・構築・運用 · Google Cloud や Microsoft Azure など IaaS や仮想基盤(VDI)の設計・構築・運用 · オフィスネットワーク、セキュリティシステムの設計・構築・運用 · ...
-
Data Engineer
2ヶ月前
Tokyo Denodoデータエンジニアを募集しています。グローバルオフィスチームの一員として、Denodoの学習と採用を次のレベルへと引き上げる意欲のある、技術的で情熱的、実践的なデータアドボケイトを募集しています。 · データ管理ソリューションを成功させるために必要な資料を利用できるようにすることがあなたのミッションです。 · 顧客やパートナー企業からの技術的な問い合わせや問題(トラブルなど)を、DenodoサポートサイトやEメールなどを通じて、解決策を提案します。 · お客様のビジネス要件に対応したDenodo製品のインプリメンテーション、最適化、カスタマイズに関して、設 ...
-
Minato SB Intuitions ￥6,500,000 - ￥18,000,000SB Intuitionsは、日本語で生成AIを創る意味を考え続けてきました。それは、単に「日本人にとって使いやすいサービス」を提供するということに留まりません。 · 【ミッション】 · ・SB IntuitionsのAIサービスを支えるシステムインフラをオンプレミスおよびクラウド環境(AWS等)で安定稼働させ、セキュアかつ高可用性な基盤を提供します。 · ・サービス開発および研究チームと密に連携し、ネットワークやセキュリティを含むインフラ全体の設計,構築,運用を担い、開発生産性やサービス品質を向上させます。 · 【具体的な業務】 · ・オンプレミスおよ ...
-
Chiyoda Microsoft Full time￥4,000,000 - ￥12,000,000 per yearデータベースや分析の世界に強い好奇心と深い情熱を持ち、ダイナミックな環境で複雑な課題に挑戦する準備はできていますか? · Microsoftの商用顧客向けCloud & AI Innovative Data Platform Solution Engineerとして、私たちのチームに加わりませんか。 · 顧客に対してセキュアでスケーラブルなソリューション設計をガイドし、技術的な意思決定に影響を与え、データベースや分析のモダナイゼーションを推進します。 · 顧客をセキュアでスケーラブルなソリューション設計へ導き、技術的な意思決定を支援し、データベースや分析 ...
-
Tokyo DXC Technology ￥4,320,000 - ￥6,480,000 per year⾃動⾞制御装置・コックピットの制御を⽀えるソフトウェア開発を⾏う 仕事です。エンジニアとしてご⾃身が開発に直接的に関わるだけでなく、ヨーロッ パにいるメンバー(海外のDXCや傘下のLuxoftのメンバー)とやり取りをしながらお客様の要望を実現するような ポジションです。 · ・3〜5年程度のシステム開発経験 · ・英語⼒(お客様の要望をヨーロッパのメンバーと共有して開発に取り組むことが多いため、業務上英語が必須となります。) · ・組み込み開発の実務経験がある(できれば⾃動⾞関連) · ・⾃動運転領域のソフトウェア開発に従事した経験 · ・⾃動⾞のソフト ...
-
Tokyo, Japan AheadGroup ￥120,000 - ￥180,000 per yearAhead Staffing is seeking a Data Infrastructure Engineer that will be responsible for ensuring the reliability, availability, and performance of the data platform infrastructure, systems, and storage. · ...
-
Tokyo BLOOMTECH, Inc ￥8,000,000 - ￥15,000,000 per yearData Engineer/Fintechのデータエンジニアが主役の組織風土とグローバルな環境で、 · 東大発のFintech/ビッグデータスタートアップです。 · ...
-
Tokyo Speechify ￥1,200,000 - ￥2,400,000 per yearWe are looking to hire a skilled Software Engineer to join our team at Speechify. · BS/MS/PhD in Computer Science or a related field. · 5+ years of industry experience in software development. · ...
-
Tokyo TIER IV ￥330,000 - ￥1,667,000 per yearデータエンジニアを募集いたします。Expert Data Engineerのポジションは、機械学習モデル学習に必要なデータセットの構築・改善の方針を決定することに責任を持ちます。Data Centric AIの思想に基づき、収集したデータの特性分析や分析コード実装を行い、機械学習モデルの性能改善に貢献することが求められます。 · ...
-
Tokyo DXC Technology ￥900,000 - ￥1,200,000 per yearソフトウェア開発エンジニアのニーズが非常に高まっています。自動車の設計開発業務に関する知識、プロジェクトマネージメントスキル、構成のあるべき姿の提案・提言スキル、海外メンバーと共同でシステム開発を進めるスキルが必要です。3〜5年程度のシステム開発経験、英語力、組み込み開発の実務経験があること、自動運転領域のソフトウェア開発に従事した経験が求められます。 ...
-
Tokyo Synchro ￥4,950,000 - ￥5,500,000 per yearHighly experienced and technical Infrastructure Engineer with a passion for delivering complex, high-impact projects, ideally with strong exposure to M&A integration projects. · Strong technical background as an Infrastructure Engineer, ideally with solid Integration skills. · So ...
-
Tokyo TIER IV ￥483,000 - ￥1,166,000自動運転で発生するデータの収集・検索・分析を支えるデータ基盤の開発・運用を担当していただきます。 · ...
-
Tokyo, Japan HoneStyle Co. ￥3,300,000 per yearIT Infrastructure Engineer at ISF NET Inc. in Tokyo, Japan. Design, install, and maintain information and communication systems to meet client specifications. Provide operational support for computer systems, including on-site maintenance and troubleshooting. · ...
-
Greater Tokyo Area Guha Edge Professional Consulting Services ￥4,500,000 - ￥9,000,000 per yearWe are looking for a highly skilled and hands-on Infrastructure Engineer / Full-Stack Developer to support our B2B MNO systems. · Develop software solutions across the full lifecycle: requirements, design, coding, testing, release, and maintenance. · Collaborate with engineers, p ...
-
Tokyo Synchro ￥1,200,000 - ￥1,440,000 per yearInfrastructure Engineer - Contract - Tokyo, Hybrid · Highly experienced and technical Infrastructure Engineer with a passion for delivering complex, high-impact projects, ideally with prior exposure to M&A integration projects. · Strong technical background as an Infrastructure E ...
-
Tokyo PeopleX Inc. Active Connector Group ￥7,000,000 - ￥13,000,000 per yearYou will lead the design, construction, and operation of customized infrastructure environments optimized for enterprise clients. Specifically, we expect you to drive the containerization and portability of existing environments and spearhead the migration to cloud-native archite ...
-
Tokyo Rakuten ￥900,000 - ￥1,200,000 per yearWe are actively looking for talented individuals to make our organization and platforms stronger with teams spanning Japan, India, China, and Singapore. As a hands-on full-stack developer for B2B MNO, you will use your development skills to build applications, by working on requi ...
-
Tokyo, Japan AheadGroup ￥900,000 - ￥1,200,000 per yearWe are seeking an experienced Infrastructure Engineer with expertise in Mesos, Marathon, Nginx, Linux, and Kubernetes to handle Node Provisioning, Alert/Incident Handling, OS/Middleware Updates, Security Requirement Implementation, Midnight Releases and Monitoring,Operation Manua ...
