【】株式会社ZOZOの求人/転職/採用情報(ITエンジニア) #14404

主な業務は、『ZOZOTOWN』のデータ基盤の開発運用です。

＜具体的な業務内容＞
・データパイプラインの設計、構築、実装、運用
・Infrastructure as CodeおよびCI／CDによる構築、デプロイ自動化
・サービス監視設計／運用
・パフォーマンスチューニングを含むSite Reliability向上のための実装

同社のデータ基盤の構築と運用を担う重要なポジションです。
全社員がデータから価値のある情報を引き出すことができる環境を整えるために、分散システム、データマネジメント、セキュリティなどの知識が特に求められます。さらに、システムの改善や提案などエンジニアドリブンで主体的に取り組むことも期待されます。

【仕事の特色】
＜配属先チーム＞
データ基盤チームでは、『ZOZOTOWN』のデータ基盤の開発運用を行っています。
国内有数のファッションECサイトが生み出す膨大なデータを、高速かつ確実にデータ基盤に届けるためのデータパイプラインの開発運用がミッションです。

■現状の課題と実現したいこと
既存のデータ基盤はデータサイロ化が進んでおり、データ活用をする際に必要なデータがそのデータ基盤上に存在しないことが大きな課題です。そのため、サイロ化されているデータを、統一されたデータ基盤に集約する必要があります。
『ZOZOTOWN』が日々生み出す膨大なデータを遅延なく正確にデータ基盤に届けるためには、データベースやログコレクタなどの多くのミドルウェアの知識が必要です。そこで、大量のデータを効率よく扱い、ZOZOグループのデータ活用の下支えできるエンジニアが求められます。

＜開発環境＞
■開発言語
・Python
・Ruby
・Bash

■クラウド
・AWS
・GCP

■コンテナ技術
・Docker
・ECS

■Data Warehouse
・BigQuery

■ETL
・Embulk
・Cloud Dataflow

■ログコレクタ
・Fluentd

■Database
・SQL Server
・MySQL
・PostgreSQL

■構成管理
・CloudFormation
・Terraform

■CI／CD
・GitHub Actions
・CircleCI

■監視
・Cloud Monitoring

■ワークフロー
・Digdag
・Airflow

＜参考記事＞
・『ZOZOTOWN』を支えるリアルタイムデータ連携基盤
https://techblog.zozo.com/entry/real-time-data-linkage-infrastructure

・OSSにコントリビュートしてログ収集基盤におけるCloud Pub／Subのリージョン間通信費用を削減した話
https://techblog.zozo.com/entry/fluentd-pubsub-oss

・Aurora MySQLからCloud SQLへのレプリケーション構築における注意すべき2つのポイント
https://techblog.zozo.com/entry/replicate-from-aurora-mysql-to-cloud-sql

・BigQueryの監査ログをリアルタイムに監視して使いすぎを防止してみるBigQuery
https://techblog.zozo.com/entry/bigquery-overuse-alerting-system

・『ZOZOTOWN』の事業を支えるBigQueryの話
https://speakerdeck.com/shiozaki/bigquery-behind-zozotown

＜就業時間備考＞
・フレキシブルタイム：8時00分～19時00分（実働8時間）
※フレキシブルタイムとは会社が推奨している就労時間帯です