TSR株式会社 - 情報システムの企画・コンサルから設計・構築、アプリ開発、運用保守まで総合的に支援。また、労働者派遣事業も展開中です。
情報システムの企画・コンサルから設計・構築、アプリ開発、運用保守まで総合的に支援。また、労働者派遣事業(派13-306574)も展開しています。
旧来のオンプレミス/レガシー環境から、Databricks (Delta Lake) および Snowflake を中核とする最新のデータ分析基盤への移行設計、およびデータパイプライン開発をお任せします。 【具体的な業務内容】 ●データアーキテクチャ設計:ブロンズ・シルバー・ゴールドの各層にデータを構造化する「メダリオンアーキテクチャ」の設計と、Databricksを用いたデータレイクハウス環境の構築。 ●ELTパイプラインの開発:dbt (data build tool) を活用した、Snowflake上での効率的なデータ変換処理(ELT)の設計、SQLを用いたデータモデリングとテストコードの実装。 ●分散処理基盤の実装:PythonおよびPySparkを用いた、Databricks上での大規模なデータクレンジング・加工処理ロジックの実装とパフォーマンスチューニング。 ●マイグレーション計画の策定:既存のOracleデータベースやレガシーSparkジョブの依存関係を解析し、ダウンタイムを最小限に抑えたデータ移行・並行稼働計画の策定と実行。 ●インフラ連携:AWS S3をストレージとし、AWS Glueなどを連携させたセキュアで高可用性を持つデータパイプライン全体のオーケストレーション。 【開発環境・技術スタック】 ●データ基盤:Databricks (Delta Lake), Snowflake, dbt ●言語:Python, SQL ●インフラ:AWS (S3, Glue)
募集背景
グローバル展開する企業において、データ量の爆発的増加により旧来のSpark/Oracle環境では分析遅延や運用コスト増が限界に達していました。そこで、世界中でシェアを伸ばすDatabricksとSnowflakeを組み合わせた最先端のクラウドデータ基盤への全面移行PJが発足しました。この超モダン環境で、設計からパイプライン実装まで担う次世代のデータエンジニアを募集します。
配属部署
●システム開発部(またはエンジニアリング事業部 など) ※上記は自社内での所属部門となります。 実際の配属プロジェクトは、ご本人のこれまでのご経験や今後のキャリアプラン(挑戦したい技術領域、フルリモートなどの働き方の希望)を面接でじっくりお伺いした上で、最適な案件をアサインさせていただきます。
概要
グローバル企業が抱える巨大な旧来のデータ環境(Spark/Oracle)を、現在世界中で爆発的なシェアを誇る「Databricks」および「Snowflake」へと移行する、超モダンなデータ基盤構築プロジェクトです。 AWSをベースに、dbtを用いたデータ変換(ELTパイプライン)やメダリオンアーキテクチャの設計など、最先端のデータエンジニアリング手法(モダン・データ・スタック)を実践します。今後のデータ領域において最も強力な武器となる「次世代クラウドデータプラットフォーム」の設計・構築経験を積める絶好の機会です。
この仕事で得られるもの
旧来のSpark/Oracle環境から、現在世界中で爆発的にシェアを伸ばしている「Databricks」および「Snowflake」へと移行する、超モダンなデータ基盤構築案件です。メダリオンアーキテクチャの設計や、dbtを用いたデータ変換(ELTパイプライン)など、データエンジニアとして喉から手が出るほど欲しい最先端の経験が積めます。
勤務地
【勤務地詳細】 リモートベース 【アクセス】 基本リモート、必要に応じて出社(東京都内)
勤務時間
10:00〜19:00
待遇・福利厚生
■各種社会保険完備(関東ITS健保加入) ■資格試験代補助 ■取得時のお祝い金支給(最大15万円) ■E-ラーニング無料受講可能 ■書籍購入支援制度 ■リファラルインセンティブ(20万円~) ■交通費全額支給 ■お部屋探しサポート制度(仲介手数料最大90%off) ■副業制度 ※競合する事業は除く ■社内懇親会/各種勉強会 ■上京支援制度
休日・休暇
・完全週休2日制(土・日) ・祝日 ・年末年始休暇 ・慶弔休暇 ・産前・産後休暇 ※実績あり ・育児休暇 ※実績あり 【有給休暇】 ⼊社⽇に応じて3月1日または9⽉1⽇に10⽇間付与
転職サイトGreenでは、TSR株式会社のインフラエンジニアに関する正社員求人、中途採用に関する情報を今後も幅広く紹介していく予定です。会員登録いただくと、インフラエンジニアに関する新着求人をはじめ、最新の転職マーケット情報、転職に役立つ情報などあなたにあった転職、求人情報をいち早くお届けします。
今すぐの人も、これからの人も。まずは転職サイトGreenで会員登録をオススメします。