Kafka基盤のコストと運用を、
クラウドに適した形へ。
Kafkaの利用拡大に伴い、ストレージ費用、ピーク時の余剰リソース、拡張時のデータ再配置、ディスク管理などが負担になっていませんか。クラウド環境に適したアーキテクチャへの見直しにより、Kafkaの互換性を活かしながら改善できます。
Kafka基盤の改善を相談する従来型Kafkaで起こりやすい課題
KafkaのBrokerがローカルディスクにデータを保持する構成では、ComputeとStorageが強く結び付き、コスト・拡張・運用の負担が増えやすくなります。
ストレージと通信コスト
高性能なブロックストレージ、複数レプリカ、AZ間のレプリケーションにより、クラウド利用料が膨らみやすくなります。
拡張時のデータ移動
Brokerの追加や負荷調整に伴うPartition再配置は、時間とネットワーク帯域を消費し、迅速なスケールを難しくします。
容量計画と運用負荷
ピークを見越した事前確保、ディスク容量の監視、Broker障害やデータバランスへの対応が継続的に必要です。
Kafka互換性を保ち、ストレージ層をクラウド向けに再設計
AutoMQはApache Kafkaのプロトコルと主要機能に互換性を持つストリーミング基盤です。データをオブジェクトストレージへ保存し、Brokerをステートレス化するShared Storage Architectureを採用しています。
Producer / Consumer
ステートレスBroker
S3互換ストレージ
既存のKafka APIとエコシステムを活用しながら、Kafkaの状態をBrokerのローカルディスクから共有ストレージへ移します。
AutoMQが改善する4つのポイント
AutoMQの特長は、Kafkaとしての使い方を大きく変えずに、クラウド上のストレージ・拡張・運用を効率化できることです。
Kafka互換
標準Kafka Client、API、既存エコシステムとの互換性を維持し、アプリケーション変更を抑えた移行を可能にします。
低コストな保存
S3互換オブジェクトストレージを主要なデータ保存先として活用し、ブロックストレージ中心の構成より保存費用を抑えます。
秒単位の弾力性
ステートレスBrokerはデータ再配置を伴わずに増減でき、負荷変動に合わせてComputeを迅速に調整できます。
運用の簡素化
ディスク容量計画、Broker間のデータ再配置、ローカルディスク障害への対応を削減します。
既存Kafkaから、段階的にAutoMQへ
Kafka互換性を活かし、既存のProducer・Consumer・Kafka Connectなどへの変更を抑えながら、AutoMQへの移行を検証できます。
互換性・性能検証
既存Kafka Client、主要ワークロード、スループット、レイテンシ、保持期間をPoCで確認します。
データ同期
AutoMQ Linkingを利用し、既存KafkaからAutoMQへTopicデータを継続的に複製します。
段階的な切り替え
検証結果を確認しながらClient接続先を切り替え、停止時間と移行リスクを抑えます。
AutoMQが選ばれた理由を、導入結果で確認
AutoMQは、Kafka互換性を維持しながらコスト、拡張性、運用負荷を改善する基盤として採用されています。各社がAutoMQへ移行した背景と、公式に公開されている導入成果をご紹介します。
Fresha
Amazon MSKで稼働していたDWH向けCDCパイプラインをAutoMQへ移行。約150のKafka Connectorを移行し、Kafka互換性を維持した公開事例です。
公式事例を見るBambu Lab
グローバルに展開する3Dプリンター企業が、AWSとGoogle Cloud上のKafka運用を統一。Kubernetes環境で秒単位の拡張を実現した公開事例です。
公式事例を見るGeely
Alibaba Cloudを含むハイブリッド環境で、コネクテッド車両のイベント基盤を統一。長期保存と急激なトラフィック変動に対応した公開事例です。
公式事例を見るBitkub
ConfluentからAutoMQへ、アプリケーションを書き換えずに移行。AWS上で2025年以降100％の稼働率を維持している公開事例です。
公式事例を見るHonda
ストレージ分離型アーキテクチャにより、拡張時間を時間単位から秒単位へ短縮し、Kafka Linkingで無停止移行を実施した公開事例です。
公式事例を見る本セクションの数値・成果は、AutoMQ公式サイトで公開されている各社事例に基づきます。お客様の環境における効果を保証するものではなく、実際の効果はデータ量、構成、利用クラウド、可用性要件、運用方法等によって異なります。各社名・製品名は各社の商標または登録商標です。
AutoMQの評価から本番導入まで支援
K・D・Cloudは、既存Kafka環境の確認、AutoMQの構成設計、PoC、移行、本番運用の立ち上げを支援します。
現行Kafkaの確認
スループット、保持期間、可用性、利用料、運用課題を整理します。
AutoMQ構成設計
必要なBroker、オブジェクトストレージ、ネットワーク、導入形態を設計します。
PoC
Kafka互換性、性能、拡張、障害時動作、想定コストを確認します。
移行・運用開始
AutoMQ Linkingを含む移行方式を選定し、本番切り替えを支援します。
AutoMQでKafka基盤を
どこまで改善できるか確認しませんか
既存Kafka、Amazon MSK、Confluentなどからの移行可否、想定コスト、互換性、導入構成を、お客様のワークロードに合わせて確認します。
AutoMQの評価・PoCを相談するApache®、Apache Kafka®、Kafka®は、Apache Software Foundationの米国およびその他の国における登録商標または商標です。