<div class="dln" itemprop="articleBody"><div class="shdw top"> </div><p>彼らのサイト： <a class="URI" href="https://moz.com/help/moz-procedures/crawlers/dotbot" target="_blank" rel="noopener nofollow ugc">https://moz.com/help/moz-procedures/crawlers/dotbot</a>
</p><h3>DotBot is 何</h3><p class="no_idt"><a class="oln" data-kno="K#/333B" href="/333B" rel="nofollow">Moz</a>という所の<a class="oln" data-kno="K#/5092" href="/5092" rel="nofollow">クローラ</a>。
<br>サイトを見る感じでは、<a class="oln" data-kno="K#/AA48" href="/AA48" rel="nofollow">SEOツール</a>を売っている。<a class="oln" data-kno="K#/047E" href="/047E" rel="nofollow">クロール</a>して<a class="oln" data-kno="K#/238E" href="/238E" rel="nofollow">SEO</a>に必要な情報を集めているのだろう。
<br>秒間1回の頻度でアクセスしてきていた。
</p><h3><a class="oln" data-kno="K#/E441" href="/E441" rel="nofollow">robot.txt</a>でDotBotをブロックする方法</h3><pre class="cd"><code class="language-">User-agent: dotbot
Disallow: /
</code></pre><div class="shdw btm"> </div><button type="button" class="mxmz icn_ btn_mxmz"></button></div>

t_wの輪郭

Moz

DotBot

DotBot is 何

robot.txtでDotBotをブロックする方法