Cloudera、セキュアでガバナンスが効いた高性能なデータを実現する統合プラットフォームでAIと分析プロジェクトを加速
RESTカタログでIcebergのイノベーションをリードし、ゼロコピーのデータ共有と統合メタデータインテリジェンスを実現
Cloudera Lakehouse Optimizer、ClouderaのオープンデータレイクハウスにおけるApache Icebergテーブル向けに自動最適化とテーブル管理を提供
あらゆる場所のデータにAIを提供する唯一の企業 Cloudera株式会社（所在地：東京都中央区、社長執行役員 山賀裕二）は、当社プラットフォームの最新アップデートとして「Cloudera Iceberg REST Catalog」と「Cloudera Lakehouse Optimizer」を発表しました。これにより、Icebergを基盤とした最高のオープンデータレイクハウスを提供するという取り組みをさらに強化します。今回のアップデートにより、Iceberg REST Catalogはシームレスなデータ共有に必要なオープンな相互運用性を実現し、Lakehouse Optimizerは、あらゆるエンジンからアクセスされるデータを常に最適化し、コスト効率を確保します。これらはすべて、Clouderaの統合されたガバナンスとセキュリティのもとで提供されます。Clouderaは、これらの強化機能を、当社が主催するAIとデータの主要イベント「EVOLVE25 NYC」で公開しました。
企業はAIと分析の力を引き出そうと競い合う中で、複雑なデータアーキテクチャ、サイロ化されたプラットフォーム、一貫性のないガバナンスといった大きな障壁に直面しています。分析やAIトレーニングのためにデータをシステム間で移動させると、コスト増大、セキュリティリスク、インサイト獲得の遅延を招きます。現代の企業には、データを複製したり特定のベンダーに依存することなく、「あらゆる場所のデータで、あらゆる場面にAIを提供」や「複数エンジンによる分析」を支えるオープンで安全かつ相互運用可能なデータアーキテクチャが求められています。
Cloudera Iceberg REST Catalog — 総所有コストの低下と迅速な価値創出を実現
Clouderaは、データとAIのライフサイクル全体にわたって Iceberg REST Catalogを統合した初めて、かつ唯一のプロバイダーであり、あらゆるクラウドやデータセンターにおける安全なゼロコピーのデータ共有と統合ガバナンスを可能にします。Clouderaの新しい提供機能は、Iceberg REST Catalogをプラットフォームに統合することで、こうした課題を解決します。これにより、サードパーティのエンジンはデータをコピーや移動することなく Clouderaが管理するデータに直接アクセスでき、パブリッククラウド、データセンター、エッジ環境において一貫したポリシー適用とメタデータインテリジェンスを保証します。Clouderaは、リアルタイムのデータ取り込みや大規模処理から AI・BI 利用に至るまで、データライフサイクル全体にわたり統合されたセキュリティ、ガバナンス、相互運用性を提供できる唯一のベンダーです。RESTベースのアクセスによって Apache Icebergの力を拡張することで、企業が制御性、可視性、コンプライアンスを維持しつつ、データ戦略の将来性を確保できるよう支援します。
今回のアップデートにより、Iceberg を利用するすべての Clouderaの 顧客は、エコシステム全体にわたりシームレスなゼロコピーの相互運用性を享受でき、Snowflake、Databricks、AWS Athena、AWS EMR、Salesforceなどの主要な分析・AI エンジンと接続可能になります。これにより、完全な ACIDコンプライアンスと統合されたアクセス方針が適用されます。さらに、Clouderaの Shared Data Experience（SDX）を通じて、細粒度のアクセス制御、データリネージュ、監査機能をサードパーティツールにも拡張し、エンタープライズレベルのガバナンスを実現します。これにより、大規模でも安全なデータの民主化とコンプライアンスを実現します。加えて、顧客はオープンなメタデータアクセスを得られるため、独自仕様のカタログに依存することなくデータ資産を即座に検索できるようになります。これにより、信頼できる唯一の情報源に基づいた AI 開発やビジネスインテリジェンスが加速します。最後に、これらの機能強化は総所有コストの削減と迅速な価値創出を実現します。顧客からは、事業部門全体の可視性を向上させながらデータ保存コストを最大 79% 削減したとの報告があります。例えば、ある大手グローバル衛星企業は、AIデータパイプラインを強化しながら、こうしたコスト削減効果を実現しました。
Cloudera Lakehouse Optimizer -クエリ性能の向上とストレージコストの削減
Cloudera Lakehouse Optimizerは新しいインテリジェントサービスであり、Clouderaのレイクハウス環境において Apache Icebergの自動最適化とテーブルメンテナンスを提供します。このサービスは、基本的なテーブルメンテナンスを超え、マニフェストファイルやポジションデリートファイルの書き換えといった高度でインテリジェントな最適化を独自に提供します。テーブルをインテリジェントに最適化することで、手作業のデータ管理や運用コストを不要にし、企業がデータからインサイトを引き出すことに専念できるようにします。
このソリューションはオープン設計で、あらゆるパブリッククラウド上の Iceberg互換エンジンで利用可能です。また、独自のユーザーインターフェースを通じて詳細なポリシー定義や修正が可能で、エンタープライズ向けの可観測性と制御を提供します。ポリシーは特定のテーブルだけでなくカタログ全体に適用できます。さらに、このソリューションは今後のリリースで、オンプレミス環境でも利用できる唯一のサービスとなる予定です。社内ベンチマークでは、このサービスがクエリ性能を最大 13 倍向上させ、ストレージコストを 36% 削減することが確認されています。
Clouderaの最高製品責任者 (CPO)、レオ・ブルニック（Leo Brunnick） は次のように述べています。 「Clouderaはビッグデータ業界のパイオニアであり、Apache Icebergのオープンテーブルフォーマットをエンタープライズ対応させるために継続的な投資を行うリーディングプラットフォームプロバイダーです。本日の発表で示したように、私たちは必要な時に必要な場所で、柔軟性、スケーラビリティ、そして妥協のないインサイトを提供し続けます。こうした取り組みこそが、世界最大規模の組織がClouderaを信頼し、あらゆる場所に存在するデータに AI を適用するために活用している理由です」
Iceberg REST Catalogを活用したCloudera Data SharingおよびCloudera Lakehouse Optimizerは、いずれもご利用可能です。詳細は cloudera.comをご覧ください。
Cloudera について
Clouderaは、あらゆる場所に存在するデータにAIを提供する唯一のデータ＆AIプラットフォーム企業として、大手企業から高い信頼を得ています。実績あるオープンソース基盤を活用し、パブリッククラウド、データセンター、エッジを統合する一貫したクラウド体験を提供します。ビッグデータのパイオニアとして、Clouderaは企業があらゆる形態のデータを100%活用し、AIを適用するとともに制御できるよう支援します。これにより、統合されたセキュリティとガバナンス、そしてリアルタイムの予測的インサイトを提供します。世界中のあらゆる業界の大手組織が、意思決定の高度化、収益性の向上、脅威への対策、そして人命の保護のために、Clouderaを活用しています。
詳細については、 ホームページをご参照、 Facebook および X をフォローください。Clouderaおよび関連するマークは、Cloudera Inc.の商標または登録商標です。その他の企業名および製品名は、それぞれの所有者の商標である可能性があります。