Posted inデータベース
DebeziumとApache KafkaによるChange Data Capture：PostgreSQLの変更をリアルタイムにストリーミング
二重書き込みや定期的なポーリングは、データの不整合やディスクI/Oスパイクの原因になります。Debeziumを使用してPostgreSQLからKafkaへ信頼性の高いリアルタイムなChange Data Capture（CDC）を実装する方法を解説します。
Posted inプログラミング
Apache Kafkaによるリアルタイムデータ処理：本番運用6ヶ月レビュー
Apache Kafkaを本番環境で6ヶ月運用したレビュー。実際のセットアップ、パーティション戦略、PythonのプロデューサーとコンシューマーAPIのコード、そして大規模リアルタイムパイプラインを安定稼働させるために苦労して身につけた運用のコツを紹介する。