Kubesharkチュートリアル:リアルタイムのKubernetes APIトラフィック分析とマイクロサービスのデバッグ

DevOps tutorial - IT technology blog
DevOps tutorial - IT technology blog

マイクロサービス・ネットワーキングにおける可視性の欠如

ダッシュボードが真っ赤に染まり、フロントエンドが「500 Internal Server Error」を吐いているのに、ログには Error: Upstream service failed という曖昧な記述しかない。そんな状況を想像してみてください。バックエンドを確認しても「すべて正常」と表示されます。これらサービス間のネットワークのどこかで、リクエストが壊れているか、ヘッダーが欠落しているか、あるいは15ミリ秒のタイムアウトが連鎖的な崩壊を引き起こしているのです。

こうした場面では、標準的なデバッグツールは役に立たないことが多いものです。モノリシックなアプリならブレークポイントを張れば済みますが、KubernetesではトラフィックがService IP、Ingressコントローラー、CNIプラグインといった複雑な網の目を縫うように流れます。多くの開発者は、コードに console.logprintf ステートメントを散りばめることで解決しようとします。しかし、イメージをビルドし直し、レジストリにプッシュして再デプロイするというサイクルは、1回あたり10分から15分もかかり、その場限りのネットワークレベルの問題を捉えられることは滅多にありません。

なぜ従来のツールでは不十分なのか

この不満の根源は、プロトコルを深く理解した可視性が欠如していることにあります。kubectl logs はアプリケーションの出力を表示しますが、回線上を流れる実際のバイトデータは見せてくれません。tcpdump を試すこともできますが、現代のコンテナの多くはセキュリティ上の理由から「distroless」であり、基本的なデバッグユーティリティすら含まれていません。たとえトラフィックをキャプチャできたとしても、残るのは2GBの .pcap ファイルです。それをHTTP/2やgRPCのような上位プロトコルとして分析するのは、骨の折れる手作業になります。

IstioやLinkerdのようなサービスメッシュはオブザーバビリティを提供しますが、代償も大きいです。サイドカーや複雑な設定が必要になります。まだメッシュを導入していないのであれば、たった一つのバグを直すためだけにメッシュをインストールすべきではありません。インフラに変更を加えることなく、一時的に利用できて強力なソリューションが必要なのです。

Kubeshark:KubernetesのためのWireshark

かつて「Mizu」として知られていたKubesharkは、トラフィックを検査するためのスマートな方法を提供します。エージェントやYAMLの変更は不要です。代わりに、一時的なワーカーPodをノードにデプロイします。これらのワーカーはeBPF(Extended Berkeley Packet Filter)を使用して、ネットワークインターフェースから直接トラフィックをスニッフィングします。ツールを停止すれば自動的にクリーンアップされ、痕跡を残しません。

本番環境において、これは極めて重要なスキルです。コードのロジックが「こうなっているはずだ」と主張する内容ではなく、回線上で実際に起きている「真実」を確認できるからです。

主な機能:

  • 幅広いプロトコルサポート: HTTP/1.1、HTTP/2、gRPC、Redis、RabbitMQ、Kafkaを標準でデコードします。
  • リアルタイムUI: WebダッシュボードはChromeのデベロッパーツールのように直感的で、クラスター全体に対して動作します。
  • ゼロ・インジェクション: サイドカーの挿入やアプリケーションの再起動なしで機能します。
  • KFL (Kubeshark Filtering Language): ヘッダー、ステータスコード、ペイロードの内容によって特定のトラフィックをピンポイントで特定できます。

実践:Kubesharkのインストールと実行

まずはKubeshark CLIが必要です。このツールがローカルマシンとクラスター内の一時的なインフラとの接続を管理します。

1. インストール

macOSまたはLinuxの場合、Homebrewを使用するのが最も速い方法です。

# Homebrewを使用する場合
brew install kubeshark

# Linuxで手動ダウンロードする場合
curl -Lo kubeshark https://github.com/kubeshark/kubeshark/releases/latest/download/kubeshark_$(uname -s | tr '[:upper:]' '[:lower:]')_amd64 && chmod +x kubeshark && sudo mv kubeshark /usr/local/bin/

2. トラフィックのキャプチャ(タップ)

tap コマンドはKubesharkの核となる機能です。監視したいPodを定義します。特定の名前空間内のすべてのトラフィックを監視するには、次のように実行します。

kubeshark tap -n production-namespace

特定のサービス間のやり取りを絞り込みたい場合は、ラベルセレクターを使用します。

kubeshark tap "(app == 'order-service' || app == 'payment-service')"

実行すると、Kubesharkは「Hub」Podと複数の「Worker」Podをデプロイします。その後、自動的にブラウザが開き、localhost:8899 でライブストリームが表示されます。

マイクロサービス間の通信を分析する

ダッシュボードには、すべてのリクエストがリアルタイムで表示されます。メソッド、パス、ステータスコードを一目で確認できます。エントリをクリックすると、リクエストとレスポンスの完全なヘッダーおよびボディが表示されます。

シナリオ:隠れた404エラーの特定

最近、設定の読み込みに失敗してサービスが停止しているチームを支援しました。ログには「Config failed to load(設定の読み込みに失敗しました)」としか出ていませんでした。Kubesharkを使用したところ、メタデータサービスへの GET リクエストが404を返しているのを即座に発見しました。原因は環境変数のURLに含まれていた単純なタイポでした。開発者が2時間を費やしていた問題の根本原因を、わずか30秒で見つけ出すことができたのです。

フィルタリング言語(KFL)の活用

トラフィックの多いクラスターでは、データストリームが膨大になります。KFLを使えばノイズを除去できます。検索バーに以下を入力して絞り込みを行ってください。

  • エラーを検索: response.status >= 400
  • レイテンシを特定: item.duration > 500ms
  • 特定のユーザーを追跡: request.headers["X-Correlation-Id"] == "abc-123"
  • JSONペイロードを検査: request.body.user.id == 99
# ログイン失敗の試行を検索
http and request.method == "POST" and request.path == "/v1/login" and response.status != 200

高度なデバッグ:gRPCと暗号化トラフィック

gRPCはバイナリのProtobufエンコーディングを使用するため、デバッグが難しいことで有名です。標準的なツールでは判読不能な文字化けが表示されますが、Kubesharkはこれらのバイナリペイロードを読み取り可能なJSONに自動的にデコードします。この機能は、RESTから移行を進めているチームにとって大幅な時間の節約になります。

暗号化についてはどうでしょうか?mTLSを使用している場合、通常トラフィックのスニッフィングは不可能です。しかし、KubesharkはeBPFを利用してプロセスメモリにフックします。データが暗号化される直前、または復号された直後のデータをキャプチャできることが多いため、セキュアな環境でも可視性を確保できます。

クリーンアップとベストプラクティス

Kubesharkは一時的な利用を前提に設計されています。作業が終わったら、ターミナルで Ctrl+C を押してください。すべてのリソースが削除されたことを確認するには、以下を実行します。

kubeshark clean

セキュリティ上の考慮事項

KubesharkはAPIキーや個人情報(PII)を含むすべてを可視化するため、責任を持って使用する必要があります。

  1. RBAC: Kubesharkへのアクセスを許可されたエンジニアに制限してください。Podの作成やSecretのリスト表示などの権限が必要になります。
  2. パフォーマンス: 高負荷の本番環境では控えめに使用してください。eBPFは効率的ですが、毎秒10,000リクエストをキャプチャすれば、最終的にはノードのCPUに影響を与えます。
  3. データの秘匿化: Kubesharkの設定を使用して、Authorization ヘッダーやクレジットカード番号などの機密フィールドをマスキングしてください。

まとめ

Kubernetesのネットワーキングは、不透明なシステムであるべきではありません。サービスの失敗理由を推測する代わりに、Kubesharkを使ってAPIトラフィックを即座に視覚化しましょう。tap コマンドと基本的なKFLをマスターすれば、平均復旧時間(MTTR)を数時間から数分へと大幅に短縮できます。これは、すべてのDevOpsエンジニアの武器庫に備えておくべき、軽量でエージェントレスなツールです。

Share: