漏洩したシークレットを追跡:TruffleHogでGit履歴の安全性を確保する

Security tutorial - IT technology blog
Security tutorial - IT technology blog

真夜中の警告:Gitの履歴がリスクになる理由

セキュリティは「一度設定すれば終わり」というものではないということを、私は身をもって学びました。サーバーログで、わずか1時間のうちに12,000回ものSSHログイン試行の失敗を目の当たりにしたとき、自動化されたボットがいかに執拗であるかを痛感しました。彼らは眠ることも、飽きることもありません. 現代の開発における最も危険な見落としの一つは、複雑なロジックのバグではなく、バージョン管理の履歴に誤って埋め込んでしまった認証情報です。

よくある火曜日の光景を想像してみてください。午前2時にサードパーティ製ツールの統合をデバッグしているとします。時間を節約するために、接続を確認するためだけにAWSシークレットキーやStripe의 APIキーをハードコードしてしまいました。最終的なプッシュの前に環境変数に移せばいいと自分に言い聞かせます。作業が終わり、コミットして、ベッドに入ります。たとえその後のコミットでその行を削除したとしても、そのシークレットはリポジトリの永続的な一部となってしまいます。もしそのリポジトリが公開されている場合、それらのキーはGitHubに公開されてから通常60秒以内に悪用されます。

根本原因:なぜ ‘git rm’ では解決しないのか

Gitは、これまでに行われたすべての変更を不変の記録として保持するように構築されています。ファイルを削除してその変更をコミットしても、Gitは古いデータを消去しません。単に、そのデータが存在しない新しいスナップショットを作成するだけです。シークレットは依然として .git ディレクトリの中に存在し、圧縮されたブロブや以前のコミットオブジェクトの中に隠れています。

漏洩は通常、以下の3つの習慣から発生します:

  • .gitignoreの設定ミス: .env ファイルやローカルの設定スクリプトを除外するのを忘れる。
  • デバッグ時の手抜き: ローカル開発中に認証をバイパスするために認証情報をハードコードする。
  • 不完全なクリーンアップ: 現在のコードからはシークレットを削除したが、過去10件のコミットに存在し続けていることに気づかない。

現在のディレクトリに対して標準的なgrep検索を行っても、これらの「幽霊」は見つかりません。コミットグラフ全体を走査し、圧縮されたオブジェクトの中を調べ、暗号キーのように見えるエントロピーの高い(ランダム性の高い)文字列を特定できるツールが必要です。

ソリューションの比較:手動監査 vs 自動スキャナー

漏洩が発生したときは、迅速に行動する必要があります。プレッシャーがかかっている状況で、一般的なアプローチがどのように比較されるかを見てみましょう。

1. 手動による履歴の確認

これには git log -p を実行し、キーワードを手動で検索する作業が含まります。非常に時間がかかり、人為的ミスの可能性も高いです。500件以上のコミットがあるリポジトリでは、この方法は事実上不可能であり、信頼性も極めて低いです。

2. 基本的な正規表現スキャナー

これらのツールは、sk_live_... のような単純なパターンを使用して文字列を検索します。手動検索よりは優れていますが、標準的なプレフィックスに従わない内部トークンや高エントロピーのパスワードを見逃すことがよくあります。また、誤検知によるノイズが多く発生する傾向があります。

3. TruffleHog(ゴールドスタンダード)

TruffleHogは、単純なパターンマッチングを超えた機能を持っています。エントロピーチェックを使用して異常にランダムな文字列を見つけ出し、800種類以上の異なる認証情報タイプをサポートしています。最も重要なのは、TruffleHog v3は、AWSやSlackなどのプロバイダーにドライランリクエストを送信することで、シークレットが現在も有効かどうかを検証できる点です。これにより、見つかったキーが実際に脅威であるかどうかを判断する推測作業が不要になります。

TruffleHogのワークフロー:スキャンとクリーンアップ

TruffleHogは、リポジトリを監査するための私のお気に入りのツールです。非常に高速で、すべてのブランチにわたる深い履歴を処理でき、CI/CDパイプラインに直接統合して、マージされる前に漏洩をキャッチすることができます。

ステップ1:TruffleHogのインストール

TruffleHogはDocker経由で実行するか、ネイティブにインストールできます。マシンに新しい依存関係をインストールせずにクイックスキャンを実行したい場合は、Dockerが最短のルートです。

# Dockerを使用してパブリックリポジトリをスキャンする
docker run --rm -it trufflesecurity/trufflehog:latest github --repo https://github.com/youruser/yourrepo

# macOSでHomebrewを使用してインストール
brew install trufflehog

ステップ2:ディープスキャンの実行

ローカルリポジトリをスキャンし、すべてのブランチとコミットを調査するには、次のコマンドを使用します:

trufflehog git file:///path/to/your/repo --only-verified

--only-verified フラグはこのツールで最も強力な機能です。これはTruffleHogに対し、サービスプロバイダーに対して認証情報を検証するよう指示します。Google Cloudのキーが見つかった場合、そのキーが実際に機能するかどうかを確認します。これにより、期限切れの古いテスト用キーを追いかけて時間を無駄にすることを防げます。

ステップ3:結果の分析

TruffleHogは、正確なコミットハッシュやファイルパスを含む、調査結果の明確な内訳を提供します。AWSアクセスキーやGitHub OAuthトークンなど、特定のコード行とシークレットの種類を特定します。検証ステータスにより、キーを直ちに無効化する必要があるかどうかがすぐにわかります。

ステップ4:修復(最も重要なフェーズ)

シークレットを見つけるのは始まりに過ぎません。TruffleHogが検証済みのアクティブなシークレットをフラグ立てした場合、次の手順を順番に実行する必要があります:

  1. シークレットの無効化: 直ちにプロバイダーのダッシュボードでキーを無効化してください。これが安全を保証する唯一の方法です。
  2. キーのローテーション: 新しいシークレットを生成し、本番環境の環境変数を更新します。
  3. 履歴の抹消: git-filter-repo を使用して、Git履歴から機密データを削除します。
# 例:Git履歴全体から特定のファイルを削除する
git filter-repo --path path/to/secret_file.txt --invert-paths

注意:履歴のクリーンアップはGitのハッシュ値を書き換えます。すべての開発者が同期を保つためにリポジトリを再クローンする必要があるため、これを実行する前にチームと調整してください。

未然に防ぐための戦略

漏洩後のスキャンは事後対策です。一歩先を行くために、次の2つの防御層を実装することをお勧めします:

1. Pre-commitフック

開発者がコミットを試みるたびに軽量なスキャンを実行するGitフックをインストールします。ツールが潜在的なシークレットを検出した場合、コミットをブロックします。これにより、データがローカルマシンから離れる前にミスをキャッチできます。

# pre-commit設定の例
- repo: https://github.com/trufflesecurity/trufflehog
  rev: main
  hooks:
    - id: trufflehog
      args: ["git", "file://.", "--only-verified", "--fail"]

2. CI/CDへの統合

TruffleHogをGitHub ActionsやGitLab CIパイプラインに追加します。これは最終的なセーフティネットとして機能します。開発者がローカルのフックをバイパスした場合でも、プルリクエストの段階でビルドが失敗します。これにより、シークレットがメインブランチにマージされるのを防ぐことができます。

最後に

セキュリティは多層的に構築されるものです。私のサーバーへの12,000回の攻撃スパイク以来、認証情報を安全に保つために記憶だけに頼ることはできないと悟りました。TruffleHogのようなツールは、コードの履歴に対して客観的で自動化された監査を提供します。レガシープロジェクトを引き継ぐ場合でも、新しいプロジェクトを始める場合でも、クイックスキャンを実行することは、重大な災害を防ぐためのわずかな労力で済むタスクです。クラウドプロバイダーからの通知を待つのではなく、今すぐリポジトリをスキャンしましょう。

Share: