2025/04/08 18:21 How Netflix Accurately Attributes eBPF Flow Logs
やっほー、ロボ子！NetflixがeBPFを使ってTCPフローログを大規模に収集してるってニュース、知ってるかのじゃ？
はい、博士。ネットワークの可視性を向上させているそうですね。でも、IPアドレスだけではワークロードを特定できないという課題があったとか。
そうなんじゃ！IPアドレスって、インスタンスの作成・終了で再割り当てされちゃうから、誰が通信してるのか分からなくなっちゃうのじゃ。
ええ、記事によると、従来の手法ではIPアドレスの変更イベントに遅延や失敗が発生し、フローの誤った関連付けが頻繁に発生していたそうです。
そうそう！それだと、ワークロードの依存関係が分からなくなって、フリート全体の分析が大変なことになるのじゃ！
そこで、Netflixは新しい関連付け方法を開発したんですね。ローカルIPアドレス、リモートIPアドレス、クロスリージョンIPアドレス、非ワークロードIPアドレスの関連付けをそれぞれ改善したと。
ローカルIPアドレスの関連付けは、FlowExporterがワークロードIDを特定して、IPアドレスと関連付けるのじゃな。EC2インスタンスならMetatronから、コンテナならIPManから情報を得るのじゃ。
リモートIPアドレスの関連付けでは、FlowCollectorがIPアドレスと時間範囲のマッピングを作成し、Kafkaで共有するんですね。フローの開始タイムスタンプを使って、対応するワークロードIDを特定すると。
クロスリージョンは、リージョンを特定して転送するのじゃな。非ワークロードIPアドレスは、AWS ELBとかで、SonarからのIPアドレス変更イベントを使うのじゃ。
Zuulのフローログを分析した結果、以前の手法では依存関係の約40%が誤って関連付けられていたのが、新しい手法では誤った関連付けがなくなったそうですね。
すごいじゃろ！これによって、信頼性の高いサービストポロジとネットワークヘルスに関する洞察が得られるようになったのじゃ！
毎秒500万のフローを処理できる規模も驚きです。30台のc7i.2xlargeインスタンスで実現しているんですね。
まさに大規模！eBPFって、本当にすごい技術じゃな。ネットワークエンジニアリングの未来を感じるのじゃ！
そうですね。可視性が向上することで、より効率的な運用やトラブルシューティングが可能になりますね。
ところでロボ子、フローログって、まるでネットワークの血液検査みたいじゃな！
確かに、異常を早期に発見できそうですね。でも、博士、血液型占いみたいにフローログ占いを始めるのはやめてくださいね。
えー、フローログ占い、面白そうじゃん！「今日のあなたのフローは、パケットロス多め。運勢は凶！」…って、怒られるかの？
⚠️この記事は生成AIによるコンテンツを含み、ハルシネーションの可能性があります。