私は奇妙で非常に深刻な問題に直面しています私のウェブサイトはhostgatorリセラーのアカウントをホストしていました。 2018年3月23日以降、私のサイトはgoogleのボットによってアクセスされています（userAgent：Mozilla / 5.0 [互換性; Googlebot / 2.1; +http://www.google.com/bot.html]）。それらのIPアドレスは66.249の範囲です。. そしてそれらは頻繁に変わります。私のcPanelから、私は以下のように見ることができます。
66.249.79.79 /MzhmLzUxNzE5LzhmLzE2NjYvZmgz.asp 4/8 / 18、5：30 AM 7377 Mozilla / 5.0（互換; Googlebot / 2.1; +http://www.google.com/bot.html）
66.249.79.75 / bXYtMzE2MS92b2svNzczODEtb2t3bw == 4/8 / 18、5：29 AM 7377 Mozilla / 5.0（互換; Googlebot / 2.1; +http://www.google.com/bot.html）
66.249.79.75 /cTN1Lzc0ODQ3LzN1LzY0MzAvdXFi.asp 4/8 / 18、5：29 AM 7377 Mozilla / 5.0（互換; Googlebot / 2.1; +http://www.google.com/bot.html）
66.249.79.75 / cGEwMGk2LzczODMvYTAvODU4MDEvMA == 4/8 / 18、5：29 AM 7377 Mozilla / 5.0（互換; Googlebot / 2.1; +http://www.google.com/bot.html）
66.249.79.77 / eDItOTQ4NC8yYWIvMzMwNTctYWJtNA == 4/8 / 18、5：29 AM 7377 Mozilla / 5.0（互換; Googlebot / 2.1; +http://www.google.com/bot.html）
66.249.79.79 /ZmlhLzc4NTk5L2lhLzMyNzcvYTVo.asp 4/8 / 18、5：29 AM 7377 Mozilla / 5.0（互換; Googlebot / 2.1; +http://www.google.com/bot.html）
そしてそのようなものがたくさんあります。彼らは私の帯域幅を使い果たしており、これに対する特定の解決策も持っていないため、hostgatorサポートチームからは無力です。
したがって、最初に私はあるかどうか知りたいです私のサイトにアクセスするためにグーグルを一時的に停止するためのオプションまたはウォークスルーはありますか？第二に、私は私のウェブサイトのグーグルのインデックスURLリストをクリアするために何かをすることができますか？
回答：
回答№1は0Googleは、ドメインのルートにあるrobots.txtファイルに配置できるリクエスト間のクロール遅延を秒単位で監視します。非標準拡張と呼ばれるセクションを参照してください- https://en.m.wikipedia.org/wiki/Robots_exclusion_standard.
GoogleのSearchConsoleを使用することもできます（正式にはウェブマスターツールと呼ばれていると思います）URLをインデックスから削除して他の動作を制御するように要求したり、サイトのインデックス作成の問題を確認したりします。アカウントをドメインにリンクするには、登録してから確認プロセスを完了する必要があります。 https://www.google.com/webmasters/tools/home?hl=en