Exigerが2週間でSnowflakeコストを40%削減した方法

SELECTはExigerチームに即座のコスト分析と、ワンクリックで使えるAutomated Savingsを提供し、コストを瞬時に40%削減することを可能にしました。セットアップは1時間以内で完了。初期削減後も、ExigerはSELECTのモニタリングと可視化によって無駄をすぐに発見し、将来のコスト超過を防ぎ続けています。

5年前、Exigerは多数の異なるデータベースに分散したデータ基盤を運用していました。同社はSnowflakeを導入し、ペタバイト規模のリスク管理データを扱うプロダクトチーム、アナリスト、データサイエンティストに統合されたデータアクセスを提供しました。現在、ExigerのSnowflakeは組み込みBIツールを通じて15,000人の外部ユーザーに利用される一方、200名の社内アナリストが日々データセットを試行錯誤しています。しかし、急速な民主化は問題も生みました。ユーザーはとにかく早く結果を得ようと4XLウェアハウスを立ち上げ、最適化されていない非効率なSQLを書き、コストへの影響を考えずに処理をスケジューリングしていたのです。

Snowflakeの利用拡大に伴い、コストはわずか1年で200%急増し、社内に疑問の声が上がり始めました。この成長スピードは持続可能ではなく、経営陣からは「なぜSnowflakeコストが売上の伸びを大きく上回っているのか」という問いが相次ぎました。SELECT導入前のExigerはSnowflake標準のモニタリングに頼っていましたが、実行可能な示唆も、変革を進めるために必要な可視性も得られませんでした。

Exigerにとって、コスト急増の原因を素早く突き止めることが急務でした。SELECTは即座に粒度の細かい分析を提供し、すぐに削減効果を生み出しました。セットアップは最初のSnowflakeインスタンスで20分、2つ目以降は各5分しかかかりません。SELECTのAutomated Savings機能と詳細なコスト可視化により、Exigerはコストを直ちに40%削減できました。さらにSELECTは、200名のアナリスト全体に散らばる放置プロジェクト、たとえば誰も使わなくなった古いデータに対してcronジョブで動き続ける、過剰サイズのウェアハウス上の処理などの特定にも貢献しました。

初期の無駄を取り除いた後、ExigerはSELECTの自動コスト異常アラートによる継続的なモニタリングへと戦略を切り替えました。事後対応ではなく、将来の無駄を未然に防ぐ先回り型のアプローチです。Snowflakeでは予算超過の警告は届くものの、その理由までは分かりません。一方SELECTでは、どのサービスが、どのworkloadから、いつ、なぜ急増したのかが、調査に必要なテレメトリと合わせて通知されます。

SELECTは導入以降、Exigerのエンジニアリングワークフローに自然に組み込まれています。新しいworkloadを開発したりウェアハウス構成を試したりする際にも、開発者はコストとパフォーマンスを手軽にモニタリングし、自信を持ってデータドリブンな意思決定を下せます。SELECTはExigerにとって、支出に対する文化を変えるためのきわめてシンプルな手段となり、同時に経営幹部には、チームに任せているツールを全体として掌握できているという安心感をもたらしました。文化を変え、200人規模の組織の考え方を変えることは容易ではありませんが、SELECTというエアバッグとセーフティネットを得たことで、それを実現できる土台が整ったのです。