概要
Streams Messaging とは?
Cloudera DataFlow (CDF) および Cloudera Data Platform (CDP) 内で提供される Streams Messaging の機能により、大量データ採取のバッファリングおよび拡張を行い、リアルタイムデータへのアクセスを必要とする他のエンタープライズアプリケーションやクラウドアプリケーションのデータニーズを満たすことができます。
Streams Messaging では主に Apache Kafka を使用しており、ストリーミングニーズを支援するツールの完全なエコシステムが提供されます。
ユースケース
生産の最適化
市場モニタリング
顧客体験の管理
低レイテンシかつ高スループットで毎秒数百万件のメッセージに対応します。ダウンタイムなしの弾力的かつ透過的な拡張も可能です。ストリーミングデータのイニシアティブに幅広く対応できるため、企業は顧客の要求に応え、より良いサービスを提供し、リスクをプロアクティブに管理することができます。
Streams Messaging Manager は、Kafka クラスタ間 (プロデューサー、ブローカー、トピック、コンシューマー間) でのデータの移動をエンドツーエンドで単一画面上に可視化します。エッジからクラウドまでのデータリネージとガバナンスを追跡できます。また、インテリジェントなフィルタリングとソートにより、Kafka 環境のトラブルシューティングが容易になります。
Mirrormaker 2をベースとする Streams Replication Manager は、クラスタ間で耐障害性、拡張性、堅牢性に優れた Kafka トピックレプリケーションを行う他、クラスタおよびトピックレベルでのレプリケーション監視とメトリクスを提供します。高可用性、ディザスタリカバリ、クラウド移行、地理的近接性など、多くのことを実現できます。
スキーマレジストリを使用すると、共有スキーマリポジトリ内のすべてのプロデューサースキーマとカスタマースキーマの変化を管理、共有、サポートできます。これにより、Kafka 環境全体でアプリケーション同士が柔軟に連携できます。スキーマの不一致による中断を安全に軽減します。
クルーズコントロールを使用すると、大規模な Kafka 環境の管理と負荷分散を行い、異常を自動的に検出して修復できます。ハードウェアや仮想マシンの頻繁な障害、クラスタの拡張や縮小、ブローカー間の負荷の偏りといった難題に対処します。
Cloudera SDX は、すべてのコンポーネントに対し、一元化されたセキュリティ、統制ポリシー、ガバナンス、データリネージを提供します。1度設定するだけで自動的に適用され、特定ベンダーにも依存しないため、マルチクラウド戦略やハイブリッドクラウド戦略を安心して導入できます。ID、アクセス、データ保護、可視性というセキュリティの4本柱をサポートします。
始める
最高の Kafka エコシステム
Cloudera が業界最高の Apache Kafka エコシステムを提供している理由が分かります。
Cloudera コミュニティの Kafka トピック
Apache Flink について同業者たちと交流し、質問やトラブルシューティングを行い、知識を得ることができます。
ストリームメッセージングのリソース
Streams Messaging がストリーミングデータの管理方法を変革します。詳細について、主要なリソースをすべてご覧頂けます。