<div class="dln" itemprop="articleBody"><div class="shdw top"> </div><p><a class="URI" href="https://ja.majestic.com/" target="_blank" rel="noopener nofollow ugc">https://ja.majestic.com/</a>
</p><p>ウェブサイトの<a class="oln" data-kno="K#/0DB5" href="/0DB5" rel="nofollow">被リンク</a>を検索できる<a class="oln" data-kno="K#/AA48" href="/AA48" rel="nofollow">SEOツール</a>
</p><div class="shdw btm"> </div><button type="button" class="mxmz icn_ btn_mxmz"></button></div>

Majestic

<div class="dln" itemprop="articleBody"><div class="shdw top"> </div><p>彼らのサイト： <a class="URI" href="https://mj12bot.com/" target="_blank" rel="noopener nofollow ugc">https://mj12bot.com/</a>
</p><h3>MJ12bot is 何</h3><p class="no_idt"><a class="oln" data-kno="K#/48A9" href="/48A9" rel="nofollow">Majestic</a>という<a class="oln" data-kno="K#/0DB5" href="/0DB5" rel="nofollow">被リンク</a>検索システム（<a class="oln" data-kno="K#/AA48" href="/AA48" rel="nofollow">SEOツール</a>？）に使用するデータを集める<a class="oln" data-kno="K#/5092" href="/5092" rel="nofollow">クローラ</a>。
<br>2秒に1回の頻度でアクセスしてきていた。
</p><h3><a class="oln" data-kno="K#/E441" href="/E441" rel="nofollow">robot.txt</a>でMJ12botをブロックする方法</h3><pre class="cd"><code class="language-">User-agent: MJ12bot
Disallow: / 
</code></pre><div class="shdw btm"> </div><button type="button" class="mxmz icn_ btn_mxmz"></button></div>

t_wの輪郭

Majestic

MJ12bot

MJ12bot is 何

robot.txtでMJ12botをブロックする方法