急速に拡大を続けるビジネスの変化に対応するため、全面的に国内ECシステム基盤の刷新を進めています。このECシステム基盤は、検索システム, API基盤やデータ基盤などのシステムを含み、また基幹システム, 商品情報管理システム, マーケティングシステムなど様々なシステムとの連携が必要となるなど、システム全体として非常に規模が大きく、チャレンジングなものとなっています。
本ポジションでは、データエンジニアとして、これらのシステムに対し大量のデータを高速に連携するためのリアルタイムデータパイプラインの構築、運用を担当いただきます。
例えば、バリエーションに富むデータソースからデータ連携するシステムの構築、大量のデータをリアルタイムに処理するためストリーム処理基盤の構築、データの完全生や一貫性を保つための仕組みの構築など技術的に高度な課題が多くあります。リアルタイムデータパイプラインは今後、当社のシステム全体のデータロジスティクスの中心となるシステムで、ECシステム基盤の中心となる重要な要素です。
経験・スキル
- 主な役割
・GCPを用いたデータパイプラインの開発運用
・GCPを用いたストリーム処理の開発運用
・各種データソースとデータパイプラインの連携のためのシステムの開発運用
・ETL処理基盤の開発運用
・データ提供のためのAPIの開発
**学歴**:
大学卒業以上
**職種**:
システム開発(組み込み・ファームウェア・制御系)
**給与**:
年収 600 〜 1,000万円
**賞与**:
**雇用形態**:
正社員
**勤務時間・曜日**:
09:00~18:00
**休日休暇**:
土曜日 日曜日 祝日
保険
健康保険 厚生年金保険 雇用保険,労災保険
受動喫煙防止措置
敷地内禁煙(喫煙場所あり)
**特長**:
**服装自由, 転勤**: なし, 上場企業, フレックスタイム制, 月平均残業.間20時間以内, 年間休日120日以上, 完全週休2日制, 土日祝休み
**業種**:
インターネット関連
-
データエンジニア
1日前
Osaka jinjer株式会社業務内容 マーケティング部所属のデータエンジニアとして全社のデータ分析基盤の運用に携わっていただきます。 · SQLを用いたデータマートの作成 ETLツールTroccoを利用したデータ統合パイプラインの保守、設計、構築 データマネジメントの推進 · dbtの活用 モダンなデータ分析基盤へのリファクタリング · チームでのソフトウェア開発の経験(経験年数不問) DWH製品、RDB問わずSQLの経験(経験年数不問) ...
-
データエンジニア
4日前
Osaka トライアロー株式会社業務概要 通信キャリアの契約者データの可視化業務をお任せします。 新しくプロジェクトが始まるため、2名募集中です。 現在6人のチームに参画していただきます。 業務内容 SQL、Tableauを使ったデータ可視化業務です。 興味がある方は気軽に話を聞きにきてください。 いつでも大歓迎です。 応募条件 SQLでの業務経験がある方 SQLを使った開発経験がある 即日勤務可/ブランクOK/経験者求む/土日祝休み/20代活躍中/30代活躍中/ミドル応援 ...
-
データエンジニア
1日前
Osaka アルサーガパートナーズ株式会社概要 リーダー候補として、クライアントのビッグデータを処理する基盤のアーキテクチャの策定から、 DWHやデータ加工処理の開発、機械学習モデルのML&Opsへの組み込み等、 開発案件を技術的にリードし、後進の育成もお任せいたします。 当社の根幹事業である受託開発サービスの更なる成長に向けた施策の企画実行や、 新規プライム案件のリードにチャレンジいただけるポジションです。 プレイングマネージャーとしてのロールを期待しています。 当社の開発体制として、案件ごとにチームを組んで開発を推進する体制をとっています。 そのため、同じ所属のデータエンジニアだけでなく、コ ...
-
データエンジニア
1日前
Osaka キャディ株式会社Data Engineerは、社内のデータを整備し事業に活用できる体制、基盤を構築し、保守、運用を行います。 また、キャディの持つデータを活用すべく、データ収集のためのパイプライン構築だけに留まらず、 データ活用の促進をリードする働きを期待します。 以下に業務例を示します。実際の業務はこれに限定されるものではありません。 入社後の業務内容は、技術や専門知識、経験等を考慮のうえ決定します。 · 実際の業務はこれに限定されるものではありません。 入社後の業務内容は、技術や専門知識、経験等を考慮のうえ決定します。 アルゴリズム設計者と連携したデータ処理パイプラ ...
-
データエンジニア
1日前
Higashiosaka 株式会社aiQパートナーデータベンダーからのデータロード(snowflakeなど)をスピーディに行うAPIの開発 市場、財務などの伝統的データ オルタナティブデータ データ評価のための計算ロジックの製品化 当社のデータサイエンティストの考案した計算/シミュレーションロジックをパッケージに実装していく ライブラリの全体像と開発実務の把握が進んできた段階で、チームマネジメントに軸足を移して行っていただく想定です。 計算リソース、データベースサーバー、クラウド環境の各種サービスを制御する仕組みなど インフラ/システム部分との連携についてはインフラチームと協議して進めます。 ...
-
大阪府 大阪市, ホワイトヘルスケア株式会社「フルフレックス・フルリモート」医療データを活用し社会課題の解決に貢献アナリティクスエンジニア/データアナリスト/データエンジニア/データサイエンティスト募集 仕事内容: 「具体的な仕事内容」 健康保険組合・自治体が保有しているレセプトデータ等の分析業務に従事していただきます。 ご経験に応じて、下記業務に携わっていただくことを想定しています。 SQL/Python/Rを用いた医療ビッグデータの分析 分析の要件定義〜データの加工/集計/分析〜レポート化の一連の業務 GoogleCloud「BigQuery」上でのデータ処理/分析パイプラインの構築 データ処 ...
-
データプラットフォームエンジニア
1日前
Osaka 株式会社ジールデータプラットフォーム導入・構築の引き合い増加に対応するための増員となります。 · クライアントの業務システムなどの膨大な量のデータを蓄積・加工・分析し、経営層の意思決定に活用する BI(Business Intelligence)を含むデータプラットフォームの導入から実行支援までを行っています。 · クライアントの要望に沿ったデータプラットフォームの企画、設計、実装まで、プロジェクトに一気通貫で関わって頂きます。 主に要件定義からテストまでお任せします。 開発だけでなく、DB、インフラ、プロジェクト管理、エンドユーザーとのコミュニケーション能力など、 ...
-
データマイニングエンジニア
3日前
大阪市, 株式会社MIXIモンストをはじめとした、モンストブランド全体のデータを扱うデータ分析基盤の設計、開発、運用までをご担当頂きます。 データパイプラインの信頼性を高めることで迅速にサービスのデータ分析を行えるようにすることが主なミッションとなります。 アプリケーションが生成するデータベースのテーブルデータやログデータをストレージサービスやデータウェアハウスに格納し、 データを必要としている人が必要となったときに素早くアクセスできるデータ分析基盤を構築します。 担当範囲はモンスト本家ゲームだけに限らず、新規ゲームやIP・メディアミックス領域まで多岐にわたります。 具体的な業務 ...
-
Osaka 株式会社エスタイルリーダー候補のデータエンジニアを募集中生成AI・データ領域のリードカンパニー 仕事内容: 業務例 データ活用を前提に、クライアントと密に連携をとりながら、データを収集・整理・管理したりするデータ活用基盤の設計・構築・運用・定着化させていきます。 具体的には 分析を前提としたデータベースの要件定義 パブリッククラウド基盤「AWS/GCP」へのシステム構築 DWHシステム開発 技術動向の調査/検証 データ分析基盤システム運用 BIツールやダッシュボードの開発、運用 データサイエンティスト・データアナリストへの技術的サポート など 扱う製品例 Google C ...
-
Osaka 株式会社アイディオット「データエンジニア」物流ビッグデータを最適化するデータエンジニアを募集 仕事内容: ▍募集職種について コンサルティングによる課題抽出で社会課題を見える化し、データとAIを用いて社会実装していきます。 その際に最適化「事業KPI」に強くコミットしていきます。 データガバナンス、データマネジメントなどの上流工程から、基盤構築、分析業務といったデータ全体および内部・外部のメンバーを牽引してプロジェクトを成功に導きます。 管理ツール AI・データ開発環境 ・データ加工:Python、 Exploratory ・データ解析:Python、 Dataiku ソフト ...
-
Osaka INSIGHT LAB株式会社言語不問・toB/データエンジニア・ビッグデータ分析・可視化・活用支援|テレワーク推進・副業OK 仕事内容: データを保有しながら、活用の仕方がわからないというクライアントに向けて、本質的な課題を見つけ、その後は開発や教育、オペレーションサポートまで広く携わります。 あなたには、スキルやご経験などに応じて、以下「1」~「3」のいずれかの業務をお任せします。当社では、上流から下流まで全てのプロセスを網羅しているので、将来的にはあらゆるフェーズでのスキルを磨いていくことが可能です。ー具体的には 「1」データウエアハウスの構築 クライアントが使いたいデータをま ...
-
大阪府 大阪市, 株式会社TimeTree「ユーザー数6,000万人超」カレンダーシェアアプリ「TimeTree」をグローバルサービスへデータエンジニアを募集しています 仕事内容: 「業務内容」 Data Divisionのメンバーとしてデータ基盤の開発・運用を行っていただきます。 業務内容にはアナリティクス・エンジニアの役割もスコープに含まれます。 データ基盤の構築・運用 データパイプラインの設計・開発・運用フローの構築 サービスRDBやログデータなどのBigQuery同期 API経由でのレポーティングデータ等の収集 クラウド環境の構築・運用 データエンジニアが運用するGoogle Cloud ...
-
データ分析エンジニア
1日前
Osaka 株式会社アウトソーシングテクノロジー来年度の請負化が決定している当案件にて、 まずは業務のキャッチアップと土台作りとして経験を積み、 ゆくゆくはリーダーやプレイングマネージャーとしてご活躍いただくことを想定しております。 (配属時は派遣でのご参画となります) · 約1週間の研修(東京)を経て案件へ配属 最大約2カ月間、業務理解のためにつくば市内の顧客先に常駐し、 実際の自動運転車両におけるMATLAB,Pythonでのデータ分析・検証業務。 その後はリモートベースでのご参画が可能となります。 必要に応じて数か月単位の出張対応をいただく可能性もございます。 · OJTや社内研修等、サポート体 ...
-
Osaka ICI株式会社データエンジニア「医療データ加工「業界未経験可」」 東証プライム上場企業グループ/フルフレックス/所定労働時間7H 副業可 仕事内容: 「ミッション」 次世代医療基盤法に基づき、国内3事業者のみである認定事業者として、収集する医療ビッグデータの社内基盤への取り込み、利活用できるデータへ整形する業務を担当して頂きます。 今後もデータ規模の拡大が見込まれ、継続的な改良のほか、クラウド化「一部は既にクラウド化が完了」のプロジェクトも進行しています。 「具体的な業務内容」 医療機関ごとに異なるデータ仕様の差分調査/データ取込/エラーデータ調査 データ加工処理「除 ...
-
大阪府 大阪市, 株式会社ヘルスベイシスSQLエンジニア データ拡張開発 応募前に下記ご確認お願いいたします。ー 業務委託/フリーランス案件でございます。 1人月案件でございます。(副業・請負案件でございません。) 正社員/契約社員の求人ではございません。 ITプロジェクト経験:2年以上の方が対象となります。 複数回ご応募いただい際は、1回のご面談でまとめさせていただきます。 過去ご応募いただいた方は、選考基準に大きな変更はないため、応募はお控えください。 弊社担当者と1度ご面談いただいた方は、担当者に直接ご連絡いただけると幸いです。 →お気軽にご相談/ご質問ください。ー データ拡張開発支援 ...
-
大阪府 大阪市, 株式会社Branding Engineer概要 XRに関するサービス開発業務支援をお任せいたします。 具体的な作業内容 XRサービス開発のPMOを行っていただきます。 XRに関するサービス開発のベンダコントロール。 顧客部署間の調整、仕様検討。 XR、特にVRに関連した開発の支援。 商流制限で某社社員様まで 作業環境:Windows 作業工程:要件定義 ・円滑なコミュニケーションが取れる方 ユーザーデータ分析の経験2年以上(SQLを用いてデータ集計、統計学の基礎理解) ひとつの案件に対して半年以上の運用経験があり、分析結果に伴った改善提案まで行った経験 1人月フルコミット可能な方 ・ECや女性 ...
-
大阪府 大阪市, 株式会社Red Frasco「データエンジニア/GCP」不動産×テクノロジーで施策の起点となるデータ分析基盤・レコメンド機能の開発 設立以来、黒字成長 フレックス 年間休日120日以上 リモートワーク相談可 残業月15h程度 副業可 仕事内容: 全ての施策の起点となるデータ分析基盤、およびレコメンド機能の開発を担います。 ただ運用保守をおまかせするのではなく、拡張余地のある基盤であり、制約の少ない状態で構築可能なため、スキルを最大限発揮し、データエンジニアとして十分な実績を積むことができます。 現状はGoogle Cloudを使用していますが、目的に応じて他クラウドも使用していきま ...
-
Osaka 株式会社ティラドコネクト「データマイニングエンジニア」"製造業×IT"の独自開発/最先端技術を実践/DXデータ分析/これからチャレンジしたい方も歓迎/プライム上場子会社で安定基盤 仕事内容: データマイニングエンジニアのリーダーもしくはマネージャーポジションの募集です「ご経験やスキルに応じてお任せいたします」。 「プロジェクトについて」 当社は、熱交換器を製造する専門メーカーとして世界的な評価を得ている、株式会社ティラドのグループ会社です。このため、クライアントはティラドグループ各社をはじめ製造業が中心。「生産性の向上」「技能の継承」「ITを活用した働き方改革の推進」など、製造 ...
-
大阪府 大阪市, 株式会社Rossoデータエンジニア「案件選択制/平均年収UP多数」・プライム上場グループ・残業10H・データ基盤×クラウド技術チームの中核としてご活躍頂ける方、成長企業にてリードしていきたい方、大歓迎です 仕事内容: 「当社の魅力」 代表はエンジニア出身で、役員、リーダー層もアプリケーション開発やインフラの経験が豊富なベテランですので、一緒に仕事をすることによって、高い技術力を吸収することが可能です。エンジニアの悩みなども自らの経験より理解しているので、的確なアドバイスを受けることができます。 また、少数精鋭の環境ですので、会社及びご自身の成長を感じていただけます。 「仕 ...
-
大阪府 大阪市, 株式会社Rossoデータエンジニア「案件選択制/平均年収62万円UP」・プライム上場グループ・残業10H・データの未来を創るエンジニアに成長できる環境を提供します 仕事内容: 「当社の魅力」 代表はエンジニア出身で、役員、リーダー層もアプリケーション開発やインフラの経験が豊富なベテランですので、一緒に仕事をすることによって、高い技術力を吸収することが可能です。エンジニアの悩みなども自らの経験より理解しているので、的確なアドバイスを受けることができます。 少数精鋭の環境ですので、会社及びご自身の成長を感じていただけます。 「仕事内容」 データの前処理を行うETL処理やDWH ...
-
大阪府 大阪市, ARアドバンストテクノロジ株式会社「リモート可・在宅勤務可」ビッグデータ基盤構築|データエンジニア PM「プロジェクトマネージャー」 仕事内容: 「業務内容」 ビッグデータ クラウド 多様なデータを活かす仕組みを"整え、回す"エンジニアリングPMへ。 当社では、データの収集・加工・統合から、分析基盤の構築・運用、さらにはデータ活用人材の育成までを一貫して支援しています。 クラウドベースのDWH・ETL・BIツールなどを活用し、データが活きる環境づくりを技術とマネジメントの両面からリードするポジションです。 「主な業務内容」 データ分析基盤「インフラ」の設計・構築・運用 データ処理アプリケ ...