ユーザー・エージェントを取得する

CCBot/2.0 (https://commoncrawl.org/faq/)

なんでしょうね？