仕事内容
「スタンバイ」のデータエンジニアとして、ビッグデータ解析/分散処理基盤開発をお任せします。
2019年にヤフー株式会社（以下、ヤフー）を傘下に持つZホールディングス株式会社（以下、Zホールディングス）と株式会社ビズリーチ（現、ビジョナル株式会社）との合弁会社として新たなスタートを切り、ヤフーをはじめとしたZホールディングスが持つ様々なグループアセットと連携することも可能になりました。今後様々な連携を行っていく上でのデータ基盤開発を強化していく方針であり、その推進をお願いできればと考えております。
【具体的には】
・AWSを利用したビッグデータ解析用分散処理基盤のアーキテクチャ選定から設計・実装、運用フロー自動化の提案、実装
・ビジネスサイドの要望をヒアリング、最適なアーキテクチャの選定
・各所ニーズ(マーケター、サイエンティスト、機械学習エンジニアなど）に応じたデータセットの作成
・機械学習エンジニアと協業し、機械学習モデルのAPI環境の実装や、git、CI/CDの仕組み作りと維持
2019年にヤフー株式会社（以下、ヤフー）を傘下に持つZホールディングス株式会社（以下、Zホールディングス）と株式会社ビズリーチ（現、ビジョナル株式会社）との合弁会社として新たなスタートを切り、ヤフーをはじめとしたZホールディングスが持つ様々なグループアセットと連携することも可能になりました。今後様々な連携を行っていく上でのデータ基盤開発を強化していく方針であり、その推進をお願いできればと考えております。
【具体的には】
・AWSを利用したビッグデータ解析用分散処理基盤のアーキテクチャ選定から設計・実装、運用フロー自動化の提案、実装
・ビジネスサイドの要望をヒアリング、最適なアーキテクチャの選定
・各所ニーズ(マーケター、サイエンティスト、機械学習エンジニアなど）に応じたデータセットの作成
・機械学習エンジニアと協業し、機械学習モデルのAPI環境の実装や、git、CI/CDの仕組み作りと維持
応募資格
・データ基盤をプロダクト開発チームに展開・適用した経験
・データ処理基盤の設計/構築、または運用経験
・AWSを利用したサービスの構築経験
【歓迎】
・データ基盤チームの立ち上げ、チームリードの経験
・AWSのEMR、 KinesisStream、 SQSなどを利用した開発経験
・Spark、 Flink、 Beam、 akkaなどを利用した開発経験
・BigQuery、 Hive、 RedShiftなど利用・運用経験
・Docker、 k8s、 GKE、 ECSなどの運用経験
・GCPのDataFlow、PubSubなどを利用した開発経験
・アジャイル（スクラムベース）での開発経験(CSM、 CSPO、 CSD保有者歓迎)
・データ処理基盤の設計/構築、または運用経験
・AWSを利用したサービスの構築経験
【歓迎】
・データ基盤チームの立ち上げ、チームリードの経験
・AWSのEMR、 KinesisStream、 SQSなどを利用した開発経験
・Spark、 Flink、 Beam、 akkaなどを利用した開発経験
・BigQuery、 Hive、 RedShiftなど利用・運用経験
・Docker、 k8s、 GKE、 ECSなどの運用経験
・GCPのDataFlow、PubSubなどを利用した開発経験
・アジャイル（スクラムベース）での開発経験(CSM、 CSPO、 CSD保有者歓迎)
