Apache Kafka for BigQuery
お客様のデータ分析プラットフォーム向けに構築された Managed Apache Kafka
マネージド サービスとなった Apache Kafka を使用すれば、バージョンのアップグレードやリバランシングなどの運用上の問題を心配する必要がなくなります。 Apache Kafka for BigQuery はプレビュー版です。
Apache Kafka® は Apache Software Foundation が所有する商標です。
機能
互換性とポータビリティ
Apache Kafka for BigQuery は、Google Cloud と Google Distributed Cloud の両方で、既存の Kafka アプリケーションと連携します。既存の Kafka クラスタと簡単に統合して、1 つのサービスでハイブリッドのデプロイや移行を行うことができます。
運用が簡単
Apache Kafka for BigQuery は簡単に運用できます。自動ブローカーのサイズ設定とリバランシングでクラスタ作成を処理し、時間の節約と費用の抑制を実現します。バージョンの自動アップグレード機能により、最新バージョンの Apache Kafka に対応します。また、すぐに使える Cloud Monitoring、Cloud Logging、Identity and Access Management（IAM）が付属しており、高可用性を実現するすべてのデプロイメントをデフォルトで作成します。
安全
Apache Kafka for BigQuery は最初から安全な設計になっています。Google Cloud IAM、顧客管理の暗号鍵（CMEK）、Virtual Private Cloud（VPC）と統合され、これらをサポートしています。
仕組み
Apache Kafka for BigQuery は、高可用性の Apache Kafka クラスタを運用するマネージド サービスです。Apache Kafka のオープンソース バージョンと互換性があり、ファーストパーティの Google Cloud IAM、モニタリング、ロギング、鍵管理、組織のポリシー、ネットワーキングなどが含まれています。
Apache Kafka for BigQuery は、高可用性の Apache Kafka クラスタを運用するマネージド サービスです。Apache Kafka のオープンソース バージョンと互換性があり、ファーストパーティの Google Cloud IAM、モニタリング、ロギング、鍵管理、組織のポリシー、ネットワーキングなどが含まれています。
一般的な使用例
ストリーム分析
BigQuery にストリーミングするための分析データの収集
BigQuery にストリーミングするための分析データの収集
Apache Kafka は、データと AI プラットフォームの基盤によく見られるテクノロジーです。多くの場合、データ エンジニアは Apache Kafka を利用して、BigQuery やその他の分析システムにデータをストリーミングするパイプラインを構築しています。Apache Kafka for BigQuery は、オペレーションのモニタリング、不正行為の検出、決済処理、商品のレコメンデーションなど、リアルタイムまたはバッチのユースケースに使用できます。
チュートリアル、クイックスタート、ラボ
BigQuery にストリーミングするための分析データの収集
BigQuery にストリーミングするための分析データの収集
Apache Kafka は、データと AI プラットフォームの基盤によく見られるテクノロジーです。多くの場合、データ エンジニアは Apache Kafka を利用して、BigQuery やその他の分析システムにデータをストリーミングするパイプラインを構築しています。Apache Kafka for BigQuery は、オペレーションのモニタリング、不正行為の検出、決済処理、商品のレコメンデーションなど、リアルタイムまたはバッチのユースケースに使用できます。
イベント ドリブン マイクロサービスの構築
イベント ドリブン マイクロサービスの構築
イベント ドリブン マイクロサービスの構築
次のようなイベント ドリブン マイクロサービスを構築:
- e コマースの注文処理: 「注文完了」イベントにより、在庫確認、決済処理、発送通知がトリガーされる
- リアルタイム通知: イベントにより、プッシュ通知、ソーシャル フィードの更新、その他の即時アクションがトリガーされる
- IoT システム: 大量のセンサーデータをイベントとして扱い、特定の条件に対応する
チュートリアル、クイックスタート、ラボ
イベント ドリブン マイクロサービスの構築
イベント ドリブン マイクロサービスの構築
次のようなイベント ドリブン マイクロサービスを構築:
- e コマースの注文処理: 「注文完了」イベントにより、在庫確認、決済処理、発送通知がトリガーされる
- リアルタイム通知: イベントにより、プッシュ通知、ソーシャル フィードの更新、その他の即時アクションがトリガーされる
- IoT システム: 大量のセンサーデータをイベントとして扱い、特定の条件に対応する
料金
| Apache Kafka for BigQuery の料金 | Apache Kafka の料金は、コンピューティング、ストレージ、ネットワーキングの従量課金制料金に基づいています。 | |
|---|---|---|
| サービスと用途 | 説明 | 価格（米ドル） |
コンピューティング | コンピューティング料金には VCPU と RAM が含まれます | Starting at $0.06 CPU 時間あたり |
ストレージ | ローカル ストレージ ブローカー SSD | Starting at $0.17 1 GiB あたりの月額 |
永続ストレージ 階層型の長期ストレージ | Starting at $0.10 1 GiB あたりの月額 | |
データ移転 | ゾーンまたはリージョン間のトラフィック | Starting at $0.01 /GiB |
料金の詳細については、Apache Kafka for BigQuery の料金ページをご覧ください。
Apache Kafka for BigQuery の料金
Apache Kafka の料金は、コンピューティング、ストレージ、ネットワーキングの従量課金制料金に基づいています。
コンピューティング料金には VCPU と RAM が含まれます
Starting at
$0.06
CPU 時間あたり
ストレージ
ローカル ストレージ
ブローカー SSD
Starting at
$0.17
1 GiB あたりの月額
永続ストレージ
階層型の長期ストレージ
Starting at
$0.10
1 GiB あたりの月額
データ移転
ゾーンまたはリージョン間のトラフィック
Starting at
$0.01
/GiB
料金の詳細については、Apache Kafka for BigQuery の料金ページをご覧ください。
