robots.txtを誤って認識する不具合(サイト管理者様向け情報)
サイトごとに巡回許可/拒否を設定した robots.txt を誤って認識する不具合が発生しており、こちらを修正しました。
今回間違って巡回拒否と認識されたサイトについては、今後巡回が行われた時点でrobots.txtは正しく認識されますが、即時反映を希望される場合は、手動更新チェックを行っていただければと思います。
アイデアやお問い合わせページよりご指摘いただきありがとうございました。
サイトごとに巡回許可/拒否を設定した robots.txt を誤って認識する不具合が発生しており、こちらを修正しました。
今回間違って巡回拒否と認識されたサイトについては、今後巡回が行われた時点でrobots.txtは正しく認識されますが、即時反映を希望される場合は、手動更新チェックを行っていただければと思います。
アイデアやお問い合わせページよりご指摘いただきありがとうございました。