契約期間

要相談

作業時間

要相談

作業内容

在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、 データストアに投入する機構の構築に携わっていただきます。

必須スキル

・Webシステム設計～開発経験3年以上ある方 ・Python開発経験1年以上ある方 ・Sparkなどの分散処理システムの経験がある方 ・SQLの実装経験 （基本的なDDL、DMLに加え、結合、集計、集合、case文、Window関数などを理解している方） ・データ基盤の構築経験ある方 ・AWSを用いた開発経験ある方 ・Dockerなどのコンテナ技術を利用した開発経験がある方

歓迎スキル

・大規模なバッチシステムの開発経験 ・SQLのチューニング経験

環境

・開発言語Python、SQL ・DBAurora(PostgreSQL互換)、Redshift ・ライブラリ・フレームワークPandas、Numpy、Dask ・インフラAWS ・AWS製品ECS、S3、StepFunctions、Lambda、CloudWatch ・環境、ツールDocker、GitHub、Jira、Slack、CircleCI、Sentry

精算幅

要相談

こだわり条件： システムエンジニア(SE)