【部署紹介】
データプロダクトユニットは、各事業部／サービスで蓄積された大量のデータを分析や機械学習などを通じて効率的に活用できるようにするためのシステム基盤の開発・運用を行っています。
またデータ加工処理などで利用されるワークフローエンジンや、モデル管理システムといった機械学習で利用される各種システム基盤の開発・運用を行うとともに、機械学習に関わる業務フローの最適化の検討なども行っています。
【業務内容】
サイバーエージェントの各事業部のデータ活用を促進するための各種システム基盤の開発・運用を、チームメンバーや他の部署と連携して行っていただきます。
【主な業務内容】
▼各種システム基盤の運用と開発・機能追加
・社内向け検索基盤やバッチ実行基盤などのシステム基盤の運用を行い、必要な機能の追加や改善を行います。
・モデル管理やフィルタ処理基盤など機械学習に関わる各種システム基盤やワークフローエンジンなどの運用、開発に携わります。
▼生成AI活用の推進
・社内業務効率化のための生成AIを使ったツールの開発を行い、会社全体の業務効率化を支援します。
・ベクトル検索データベースの構築や機能開発を行い、全体最適化にむけての推進を行います。
▼次世代分析基盤にむけての移行と開発
・Hadoop、Hive、HBase、Sparkなどの現データ分析基盤から次世代の分析基盤に向けての計画と移行、システム開発を担当します。
・また、Kafka、Flume、Flinkなどのストリーム処理システムにおいても、必要な機能の追加や改善を行います。
上記以外にも様々なシステム開発などもあり幅広く携わっていただく事もあります
【主な利用技術】
Go／Java／Bash／Python／Apache Iceberg／Apache HBase／Apache Kafka／Apache Solr／Apache Flume／MySQL／Redis／Kubernetes／Istio／Docker／Helm／gRPC／gRPC Web／Prometheus／Grafana／Loki／TiDB
【開発環境・ツール】
GitHub／GitHub Actions／GitHub Copilot／Slack／Intellij IDEA／Ansible／Terraform／Mackerel／vim／Visual Studio Code／gradle／maven／Notion／Jenkins／AWS／Google Cloud
【必須スキル・経験】
・プログラミング言語を用いたシステム開発・運用に関する実務経験（3年以上）
・Kubernetesを利用した開発経験
・Linuxサーバ上での基本的なオペレーション知識
【歓迎スキル・経験】
・英語読解力
・Java、Go、Rust、C／C++、TypeScriptでの開発経験
・データ基盤（Hive、Snowflake、BigQuery等）を用いたシステム開発経験
・パブリッククラウド（AWS／GCP／Azure）に関するシステム開発経験
・Solr、Elasticsearchなど検索エンジンを用いたシステムの開発・運用経験
・Kafkaなどのデータ転送システムを用いた開発・運用に関する経験
・Protocol BuffersやgRPCを用いた開発経験
・Terraform、Ansible、Helm等の経験
・RDBMS、NoSQLデータベースを用いたシステム開発・運用に関する実務経験
【求められるマインド】
・素直、協調性、コミュニケーション能力がある方
・論理的に物事を考えることが好きな方
・様々なドメインを同時に挑戦する事に興味がある方
