【ミッション】
SB Intuitions社内の大規模データの管理・活用を支えるデータプラットフォームの設計・構築・運用を通じて、データドリブンでイノベーションを推進します。また、データ品質の向上、セキュリティ維持、パフォーマンス最適化により、データ活用しやすい環境を提供します。
【具体的な業務】
・数十ペタバイト規模のデータを扱うオンプレミスおよびクラウド環境でのデータプラットフォームの設計、構築、運用
・オブジェクトストレージ(S3)を利用した分散型データ管理システムの開発・運用
・IAMアクセス制御やデータカタログによる、データガバナンス強化や管理及び、データ利用推進
・マルチデータセンター間でのストレージの統合レイヤーの開発と運用
・LLMモデル、コーパスデータ、RAG用基礎データの保存・管理
【仕事の魅力】
・日本語性能で国内No.1の大規模言語モデル(LLM)を目指し、当社の所有する国内最大規模の計算基盤を使って国産の大規模言語モデルの研究開発に貢献できます。
・大規模データ環境の管理を通じて、最先端のLLM技術に触れ、LLMOpsに関わる経験ができます。
【応募資格(必須)】
・大規模データプラットフォームの設計・構築・運用経験
・データベースやデータレイクに関する知識
・クラウド環境(AWS/GCP/Azure)でのシステム開発・運用経験 (3年以上)
・Python・Java・Go いずれかのプログラミング業務経験 (3年以上)
・Kubernetes、Dockerを使ったミドルウェアやサービスの開発と運用の経験
【応募資格(歓迎)】
・LLMOps、MLOpsの開発、運用経験
・DMBOKに基づいたデータガバナンス/品質管理の経験
・オブジェクトストレージ(S3)や分散型ファイルシステムに関する知識と運用経験
・IAM制御・管理の経験
・データカタログツールの導入・運用経験
・分散コンピューティング(Hadoop/Sparkなど)の知識と実務経験
・データ処理基盤のパフォーマンス最適化経験
・法令遵守、セキュリティ管理・対策に関する知識と経験
【求める人物像】
当社の事業内容、ミッションに共感し、新たな事業への挑戦姿勢・意欲を持った方