サイトがOpenAI (GPTBot)の標的にされてアクセス４倍増〜ブロック処理です

今週に入ってサイトアクセスが４倍増、何がバズった？とGoogle Amaを覗いてみるとアクセス記事が４倍増してて平均時間がゼロ病ばかり、ああぁ...とCerber Securityをチェックすると案の定「Rest APIへのリクエスト」攻撃？ 

ユーザーエージェントがOpenAI (GPTBot)とあるので、たぶんAIモデルのトレーニングデータ収集目的にウェブクローラーに掛けられていたようです。IP:74.7.242.35の業者ですが他にもしつこいのが増えていたのでクローリングをブロックすることにしました。

User-agent: GPTBot
Disallow: /

上記をrobots.txtに記述して設置するだけで済みます。