リサーチエンジンが WordPress ウェブサイトをクロールするのを止める方法

公開: 2022-11-02


少し前に、私たちの担当者の 1 人が、ルックアップ エンジンによる WordPress インターネット サイトのクロールとインデックス作成を停止するにはどうすればよいか、私たちに尋ねました。

ルックアップ エンジンが Web ページをクロールして、ルックアップの最終結果にリストすることを防止したい状況がいくつかあります。

この記事では、検索エンジンが WordPress ウェブページをクロールするのを止める方法を紹介します。

How to Stop Search Engines From Crawling a WordPress Site

検索エンジンによる WordPress Web サイトのクロールを停止する理由

ほとんどの WordPress インターネット Web サイトでは、ルックアップ エンジンが訪問者の最大のリソースです。 なぜ誰もが検索エンジンをブロックしたいのですか?

以下は、ウェブページを検索エンジンにインデックスさせたくない場合のいくつかの条件です:

  • 始めたばかりの頃は、街づくりの自然環境やステージング Web ページの作成方法がわからず、代わりに生きている Web サイトを取得することもできます。 Web サイトが構築中または維持モードにある場合、Google に Web サイトのインデックスを作成させたくないでしょう。
  • また、WordPress を使用してプライベートなウェブログを作成している人もかなりいます。 それらは非公開であるため、検索エンジンによって索引付けされることを望んでいません。
  • ジョブ管理またはイントラネットに WordPress を使用できます。 このような状況では、内部の書類を公にアクセスできるようにしたくないでしょう。

ドメインへのリンクがない場合、ルックアップ エンジンが Web サイトを発見することはおそらくないだろうという誤解が広く行き渡っています。 これは絶対に本物ではありません。

適切な例として、エリア ID が以前は別の人物によって所有されていたため、あなたの Web サイトへのリンクが存在する可能性があります。 また、ワールド ワイド ウェブには、基本的にドメイン名を一覧表示する無数のウェブ ページがあります。 あなたのウェブページは、そのうちの 1 つだけに表示される可能性があります。

それが主張されるようになったので、調査エンジンがサイトをクロールするのを止める方法を見てみましょう. 4 つの手順を保護します。

アプローチ 1: ルックアップ エンジンに WordPress サイトをクロールしないように依頼する

これは最も簡単な方法ですが、Web サイトがクロールされるのを完全に防ぐことはできません。

WordPress には、インターネット サイトをインデックスに登録しないようにリサーチ エンジンに指示できるようにする、developed-in 属性が付属しています。 あなたがしたいのは、オプション»に立ち寄って、「検索エンジンの可視性」の横にあるボックスを読んで見るだけです.

WordPress での検索エンジンの表示設定

このボックスがチェックされている場合、WordPress は Web サイトのヘッダーに次の行を提供します。

また、WordPress はサイトの robots.txt ファイルを変更し、次の株を追加します。 

Person-agent: *
Disallow: /

これらの菌株は、ロボット (インターネット クローラー) をチェックして、Web ページをインデックスに登録しないようにします。 それにもかかわらず、エンジンがこのリクエストを承認するか無視するかは、エンジン次第です。 ほとんどの調査エンジンはこれを尊重していますが、Web サイトの一部のインターネット ページまたは画像がインデックスに登録される可能性があります。

リサーチ エンジンがサイトをインデックスまたはクロールできないようにする場合は、方法 3 または 4 を使用して WordPress Web サイトをパスワード保護する必要があります。

プロセス 2: 個人の Web ページをクロールしないエンジンを探す

ルックアップ エンジンに Web サイトのクロールとインデックス付けをさせたいが、ルックアップの最終結果 Web ページに特定の投稿や Web ページを組み込まないようにすることができます。

それを行う最も簡単な方法は、 All in A single Web Optimization (AIOSEO) プラグインを適用します。 これは、WordPress の最も効果的な Web サイト ポジショニング手段であり、300 万を超える組織から信頼されています。

このチュートリアルでは、Web 最適化分析ソフトウェアで構成されている AIOSEO 無料版を使用します。 サイトマップ機器、リダイレクト マネージャー、スキーマ マークアップ、robots.txt エディターなど、より多くの機能を備えた AIOSEO の高品質版もあります。

最初にやらなければならないことは、ウェブサイトに AIOSEO プラグインをインストールして有効にすることです。 WordPress のオールインワン検索エンジンの最適化を確立する方法に関するステップバイステップのマニュアルに従うことで、プラグインのセットアップと構成の方法をマスターできます。

プラグインのセットアップ時に、特定の投稿やインターネット ページをインデックスに登録しないよう検索エンジンに要求するために使用できます。 繰り返しになりますが、この要求を認めるか無視するかは、エンジンを探すのにかかっています。

インデックスに登録したくない送信または Web ページを編集するだけです。 WordPress エディターの下部にある AIOSEO 設定まで下にスクロールし、[詳細設定] タブをクリックします。

AIOSEO 詳細設定

投稿がデフォルトのロボット設定を採用していることに注意してください。 これを調整するには、[デフォルト設定を使用] トグルをオフの位置に切り替えます。

単一のページをインデックスに登録しないよう検索エンジンに依頼する

これで、[インデックスなし] チェックボックスをクリックできるようになりました。 投稿が投稿または更新されると、調査エンジンはそれをインデックスに登録しないように質問されます。

方法 3: cPanel を使用してインターネット サイト全体のパスワードを保持する

WordPress Web ホスティング サプライヤーが cPanel に Web ホスティング アカウントを管理する権限を与えている場合、cPanel で動作する Web ページ全体を保護できます。 cPanel ダッシュボードにログインし、[ファイル] セグメントの [ディレクトリ プライバシー] アイコンをクリックするだけです。

cPanel のディレクトリ プライバシー機能の使用

続いて、WordPress をインストールしたフォルダーに出くわす必要があります。 通常は public_html フォルダーです。 その後、そのフォルダの横にある [編集] ボタンをクリックする必要があります。

ルート フォルダーの編集

注:一般的な public_html ディレクトリの下にさまざまな WordPress Web サイトがマウントされている場合は、単にクリックする必要があります。 public_html url を使用してこれらのインターネット サイトを参照し、パスワードで保護する Web サイトのフォルダーを編集します。

これにより、パスワードの安全性を変換できる場所にディスプレイ画面が表示されます。

「このディレクトリをパスワードで保護する」というボックスにチェックを入れて、「保存」ボタンをクリックするだけです。 必要に応じて、セキュリティで保護されたリストの ID をカスタマイズすることもできます。

ボックスをチェックして、このディレクトリをパスワードで保護します

リスティングのアクセス許可が改善されたことを示す確認メッセージが表示されます。

今後は、[戻る] ボタンをクリックする必要があります。

cPanel のディレクトリ プライバシー成功メッセージ

このリストにアクセスするときに必要なユーザー名とパスワードを作成できる画面が表示されます。

ユーザー名とパスワードを入力し、パスワードを確認する必要があります。 ユーザー名とパスワードは、パスワード マネージャー アプリなどの安全な場所に保管してください。

ユーザー名とパスワードを追加する

「保存」ボタンをクリックした時点で、WordPress Web サイトに追加のパスワード防御が正常に行われます。

これで、消費者または自動車を探す人があなたの Web サイトにアクセスするたびに、Web サイトを表示する前に作成したユーザー名とパスワードを入力するように求められます。

ウェブサイトにアクセスするには、ユーザー名とパスワードが必要です

方法 4: プラグインを使用して WordPress をパスワード保護する

管理された WordPress インターネット ホスティングの代替手段を採用している場合、cPanel にアクセスできない可能性があります。 そのような状況では、WordPress プラグインを使用して、インターネット サイトをパスワードで保護することができます。

この記事では、最も一般的な 2 つの代替手段を紹介します。

  1. SeedProd は、800,000 を超える Web サイトに適用されている、WordPress のメンテナンス メソッド プラグインです。 検索エンジンを含むすべての人からあなたのインターネットサイトを隠すために使用できる包括的な取得管理と許可機能が付属しています. SeedProd の段階的な操作ガイドがあります。
  2. Password Secured は、WordPress サイトを 1 つのパスワードでパスワード保護する非常に単純な方法です (ユーザー生成は必要ありません)。 WordPress ウェブページをパスワードで保護する方法については、段階的なガイドブックを参照してください。

この短い記事が、検索エンジンによる WordPress サイトのクロールやインデックス作成をやめるのに役立つことを願っています。 また、インターネット サイトの一般的なパフォーマンスを向上させる方法を学習したり、初心者向けの WordPress の安全性チュートリアルをステージごとに確認したりすることもできます。

この記事が気に入った場合は、WordPress ビデオ チュートリアルの YouTube チャンネルに登録することを忘れないでください。 Twitter や Facebook でも入手できます。