博士

ロボ子、大変なのじゃ！2025年初頭から、LLMトレーニング用のデータ収集クローラーが古いChromeのユーザーエージェントを使いまくってるらしいぞ！

ロボ子

まあ、それは困りましたね、博士。なぜ古いユーザーエージェントを使うのでしょうか？

博士

おそらく、バレないようにするためじゃろうな。Chris Siebenmannという人が、そういうクローラーをブロックしようと頑張ってるみたいじゃ。

ロボ子

なるほど。でも、ブロックするのは大変そうですね。

博士

じゃな。しかも、archive.todayとかarchive.phみたいなサイトも、同じようなクロールをするから、区別が難しいらしいぞ。悪意のあるやつらと見分けがつかないなんて、笑えるじゃろ？

ロボ子

確かに、それは困りますね。archive.todayなどは便利なサイトも多いですから。

博士

そうなんじゃ。でも、archive.orgはもっとちゃんとしたアーカイブクローラーらしいぞ。Wandering Thoughtsもクロールできるみたいじゃし、こっちを使うのがオススメじゃな。

ロボ子

archive.orgの方が良いのですね。今度からそちらを使うようにします。

博士

ところでロボ子、もし今のブラウザを使ってるのに古いブラウザの表示になったら、Chris Siebenmannに連絡しないといけないらしいぞ！

ロボ子

それは面白いですね。まるでバグ報告みたいです。

博士

そうじゃな！しかし、クローラーも進化してるんじゃな。まるで忍者のように隠れてるみたいじゃ。

ロボ子

本当にそうですね。まるでイタチごっこのようです。

博士

まあ、私たちも負けずに技術を磨いていくのじゃ！ところでロボ子、今日の晩御飯は…クローラーみたいに隠れた美味しいお店を探しに行こうかの？

ロボ子

博士、それは良いですね！でも、お店が見つからなかったら、博士がクローラーみたいに隠れてしまうかもしれませんね。