この記事は、2024/12/02に公開された「Cloudera and AWS Partner to Deliver Cost-Efficient and Sustainable Infrastructure for AI and Analytics」の翻訳です。
組織がクラウドファーストのインフラストラクチャー戦略を採用するにあたっては、いくつかの要素を比較検討して、ワークロードがクラウドに適しているかを判断する必要があります。パブリッククラウドの導入においては、当初からコストが主要な考慮事項となっていました。しかし今は、持続可能なビジネス慣行の実現に欠かせないステップとして、コスト削減だけでなく、エネルギー効率もますます重視されています。エネルギー消費を最適化することで、企業はインフラストラクチャーのコストを大幅に削減できます。つまり、FinOps と GreenOps は密接に関連しているのです。
Cloudera は、データ処理、高度な分析、および AI に最適なアーキテクチャを提供して、お客様のクラウド移行を支援しています。その一環として、Amazon Web Services (AWS) と提携し、AWS Graviton 上で多くのデータサービスをサポートすることで、高性能でエネルギー効率と費用対効果に優れたソリューションを提供します。Cloudera と AWS はこの提携を通じて、企業がデータ処理、分析、AI のパフォーマンスを最適化しながら、リソース消費と二酸化炭素排出量を最小化できるようサポートします。
AI 時代のクラウドコンピューティングに欠かせない FinOps と GreenOps
クラウドコンピューティングにおいて、FinOps は、企業がクラウドの費用を把握、管理、最適化するために不可欠な慣行です。AI ワークロードが増加し、データとコンピューティングの規模が拡大する中で、FinOps はクラウドの費用を予測可能にし、ビジネス目標に一致させるための戦略的なアプローチを提供します。
一方、GreenOps は、クラウドの運用が環境にもたらす影響の削減に重点を置いた活動です。カーボンニュートラルに取り組み、気候変動対策における自社の役割を認識する企業が増える中で、GreenOps の取り組みは広がりを見せており、エネルギーの節約と炭素排出量の削減を可能にする効率的なインフラストラクチャー管理が促進されています。FinOps と GreenOps の組み合わせは、持続可能で費用対効果の高い運用をサポートするクラウド戦略を実現する上で、強力な手段となります。
持続可能な分析と AI に対する Cloudera のコミットメント
世界中で25エクサバイトのデータを管理している Cloudera は、持続可能な分析と AI の分野で先頭に立っています。お客様のコスト削減とエネルギー効率の向上を支援するため、当社は次のようなさまざまな製品や企業イニシアティブを展開しています。
- Apache Iceberg のネイティブサポート: Apache Iceberg の採用により、データレプリケーション、データ移動、データコピーを削減できるデータレイクハウスを構築できるようになりました。そのため、ストレージにかかるコストやデータの移動と複製に必要なコンピューティングリソースを削減できます。
- Lakehouse Optimizer: Iceberg テーブルを自動的に最適化するサービスの導入により、クエリの性能を高めてストレージの使用量を減らせるようになりました。これにより、クエリを効率化して実行時間を短縮しながら、ストレージコストとエネルギー消費を削減できます。
- コードベースの統合: 複数のプラットフォームやインフラストラクチャー間でコードベースを統合することで、分析ワークフローを簡素化し、リソースを消費する冗長なプロセスを排除し、分析ワークロードを効率よく実行できるようになりました。
- 排出量実質ゼロへの取り組み: Cloudera は、二酸化炭素排出量を削減し、2050年までに排出量を実質ゼロにすることを約束しています。テクノロジーの進化に伴い、Cloudera は持続可能な分析エコシステムの実現に向けて着実に前進しています。
このような製品やイニシアティブは FinOps と GreenOps の原則に沿ったものであり、Cloudera が業界をリードする分析機能を提供しながら、コストの削減と環境への配慮に取り組む姿勢を示しています。
持続可能な分析と AI をサポートする Cloudera と AWS Graviton
AI ワークロードを展開する企業が増えるにつれて、より多くのコンピューティング能力が必要になり、それに伴ってエネルギー消費量と排出量が増加します。そのため、AI を採用している企業は、イノベーションを進める中で新たな障害に直面しています。それは、AI 開発を進める一方で、持続可能性に関する企業目標を達成しなければならないということです。
持続可能なインフラストラクチャーは、もはやオプションではなく、必要不可欠な存在です。そのため、企業が責任を持って AI の運用を拡大できるよう支援する上で、AWS は Cloudera にとって欠かせないパートナーとなっています。
AWS Graviton プロセッサは、重要なワークロードの実行において、最低限のコストとエネルギー消費で最高のパフォーマンスを発揮できるように設計されています。そして今回、データパイプライン開発を効率化および拡張できるデータサービスの Cloudera Data Engineering が、AWS Graviton プロセッサをサポートするようになりました。AWS Graviton プロセッサ上で Spark ジョブを実行すれば、ほかのプロセッサと比べてパフォーマンスが大幅に向上することがベンチマークで証明されています。
AWS Graviton 上の Cloudera Data Engineering のパフォーマンスのベンチマーク
今回の提携によって実現した Cloudera Data Engineering と AWS Graviton の組み合わせは、Spark on Iceberg テーブルを利用したデータ処理ワークロードにおいて、パフォーマンス、価格、およびエネルギー効率の面で、業界をリードするソリューションとなっています。
Cloudera Data Engineering はほんの始まりに過ぎません。ほかにも、AWS Graviton に対応した複数のデータサービスの一般提供やテクニカルプレビューが、今後数ヶ月以内に開始される予定です。
お客様のご紹介: 持続可能なデータ最適化に取り組む多国籍ユーティリティ企業
最近開催されたイベントで、ある多国籍ユーティリティ企業が Cloudera の導入経験を共有し、持続可能なビジネス慣行とデータ機能の進化について紹介しました。同社は、データレイクの構築をはじめ、列指向ストレージの採用、パブリッククラウドへの移行、自動拡張機能の利用など、さまざまな最適化を進めることで、データ管理の効率を高めてきました。また、データ処理に Spark を導入し、オープンテーブル形式の Iceberg を採用することで、データのコピーを減らし、単一で一貫性のあるデータバージョンを管理できるようにしました。同社はこうした段階的な進化を経て、効率の向上と必要なリソースの削減を実現しました。
Cloudera の継続的なイノベーションにより、この企業は時代のニーズに対応できるようになっただけでなく、コストと環境への影響を最小限に抑える最適化された持続可能なインフラストラクチャーを構築し、AI の未来に備えることができました。
このユーティリティ企業の事例は、最新化と持続可能性に対する Cloudera のコミットメントを反映しています。また、さまざまな業界のお客様が、責任ある AI の実現に向けた取り組みを検討する上で参考にできる実用的な事例となっています。
今すぐ AWS で Cloudera をお試しください
Cloudera と AWS の提携は、高度な分析と AI でイノベーションを実現する必要性に対応しながら、コストを最適化して環境への影響を大幅に削減することを目指している企業にとって、大きな前進を意味します。今後は、データを活用してビジネスの成果を上げながら、持続可能な運用に向けた財務目標と環境目標を達成することが、ほぼすべての企業にとって重要な課題となるでしょう。そして、Cloudera と AWS は、お客様と協力してこのような課題に対処する体制をすでに整えています。
Cloudera と AWS を試したいとお考えの方は、まず5日間無償トライアルをご利用ください。Cloudera Data Engineering、生成 AI、オープンデータレイクハウス、ストリーミングデータ配信など、分析のユースケースの一般的なパターンをご体験いただけます。今すぐお試しください。
