MJ12bot2022/10/10 20:46:00 彼らのサイト： https://mj12bot.com/ MJ12bot is 何Majesticという被リンク検索システム（SEOツール？）に使用するデータを集めるクローラ。 2秒に1回の頻度でアクセスしてきていた。 robot.txtでMJ12botをブロックする方法User-agent: MJ12bot Disallow: /
