So hindern Sie Forschungsmaschinen daran, eine WordPress-Website zu crawlen

Vor nicht allzu langer Zeit fragte uns einer unserer Mitarbeiter, wie sie Suchmaschinen davon abhalten könnten, ihre WordPress-Internetseite zu crawlen und zu indizieren.

Es gibt eine Reihe von Situationen, in denen Sie verhindern möchten, dass Suchmaschinen Ihre Webseite crawlen und in den Endergebnissen der Suche auflisten.

In diesem Artikel zeigen wir Ihnen, wie Sie Suchmaschinen daran hindern können, eine WordPress-Webseite zu crawlen.

Warum Suchmaschinen daran hindern, eine WordPress-Website zu crawlen?

Für die meisten WordPress-Websites sind Suchmaschinen die größte Besucherquelle. Sie könnten darüber sprechen, warum jeder Suchmaschinen blockieren möchte?

Nachfolgend finden Sie einige Bedingungen, unter denen Sie nicht möchten, dass Suchmaschinen Ihre Webseite indexieren:

• Zu Beginn wissen Sie möglicherweise nicht, wie Sie eine Umgebung zur Verbesserung der Umgebung oder eine Inszenierungswebsite erstellen und stattdessen Ihre Website erwerben, obwohl sie aktiv ist. Sie möchten nicht, dass Google Ihre Website indiziert, wenn sie sich im Aufbau oder im Wartungsmodus befindet.

• Es gibt auch einige Leute, die WordPress verwenden, um private Weblogs zu erstellen. Sie wollen nicht, dass sie von Suchmaschinen indexiert werden, da sie privat sind.

• Sie können WordPress für die Auftragsverwaltung oder ein Intranet verwenden. Unter diesen Umständen möchten Sie nicht, dass Ihre inneren Unterlagen öffentlich zugänglich sind.

Ein weit verbreiteter Irrglaube ist, dass Suchmaschinen Ihre Website möglicherweise niemals entdecken werden, wenn Sie niemals Links haben, die auf Ihre Domain verweisen. Das ist nicht absolut echt.

In diesem Fall kann es möglicherweise Links geben, die auf Ihre Website verweisen, weil der Ortsname früher einer anderen Person gehörte. Außerdem gibt es unzählige Webseiten im World Wide Web, die im Wesentlichen Domainnamen auflisten. Ihre Webseite kann möglicherweise nur auf einem davon angezeigt werden.

Lassen Sie uns einen Blick darauf werfen, wie Sie Suchmaschinen davon abhalten können, Ihre Website zu crawlen. Wir schützen 4 Verfahren:

Ansatz 1: Bitten Sie Lookup Engines, Ihre WordPress-Site nicht zu crawlen

Dies ist die einfachste Strategie, schützt Ihre Website jedoch nicht vollständig davor, gecrawlt zu werden.

WordPress wird mit einem integrierten Attribut geliefert, mit dem Sie Suchmaschinen anweisen können, Ihre Website nicht zu indizieren. Alles, was Sie tun möchten, ist, bei Optionen » Lesen vorbeizuschauen und sich das Kästchen neben „Suchmaschinensichtbarkeit“ anzusehen.

Wenn dieses Kontrollkästchen aktiviert ist, fügt WordPress diese Zeile in den Header Ihrer Website ein:

WordPress modifiziert auch die robots.txt-Datei Ihrer Website und fügt ihr diese Stämme hinzu:

Person-agent: *
Disallow: /

Diese Stämme überprüfen mit Robotern (Internet-Crawlern), dass sie Ihre Webseiten nicht indizieren. Trotzdem liegt es in der Hand, nach Engines zu suchen, die diese Anfrage bestätigen oder ignorieren. Auch wenn die meisten Suchmaschinen dies respektieren, besteht die Möglichkeit, dass einige Internetseiten oder Bilder Ihrer Website indexiert werden.

Wenn Sie es Forschungsmaschinen unmöglich machen möchten, Ihre Website zu indizieren oder zu crawlen, müssen Sie Ihre WordPress-Website mit den Methoden 3 oder 4 mit einem Passwort schützen.

Prozess 2: Abfrage Suchen Sie nach Engines, die keine persönlichen Webseiten durchsuchen

Sie möchten vielleicht, dass Suchmaschinen Ihre Website crawlen und indizieren, aber bestimmte Posts oder Webseiten nicht in Webseiten mit endgültigen Suchergebnissen integrieren.

Der am wenigsten schwierige Weg, das zu tun, ist Anwendung des All-in-One-Web-Optimierungs-Plugins (AIOSEO). Es ist das effektivste Instrument zur Website-Positionierung für WordPress und wird von über 3 Millionen Organisationen als vertrauenswürdig eingestuft.

Für dieses Tutorial arbeiten wir mit der kostenlosen Version von AIOSEO, da sie aus der Analysesoftware zur Weboptimierung besteht. Es gibt auch eine hochwertige Ausgabe von AIOSEO, die viel mehr Funktionen wie Sitemap-Ausstattung, Umleitungsmanager, Schema-Markup, robots.txt-Editor und mehr bietet.

Zunächst müssen Sie das AIOSEO-Plugin auf Ihrer Website installieren und aktivieren. Sie können die Einrichtung und Konfiguration des Plugins beherrschen, indem Sie unserer Schritt-für-Schritt-Anleitung zur Einrichtung der All-in-1-Suchmaschinenoptimierung für WordPress folgen.

Bei der Einrichtung des Plugins können Sie damit Suchmaschinen auffordern, bestimmte Beiträge und Internetseiten nicht zu indexieren. Noch einmal, es liegt ganz bei Ihnen, nach Engines zu suchen, die diese Anfrage bestätigen oder ignorieren.

Bearbeiten Sie einfach die Einreichung oder Webseite, die Sie nicht indizieren möchten. Sie möchten unten im WordPress-Editor zu den AIOSEO-Einstellungen scrollen und dann auf die Registerkarte „Erweitert“ klicken.

Beachten Sie, dass der Beitrag die Standard-Robotereinstellungen verwendet. Um dies anzupassen, möchten Sie den Schalter „Standardeinstellungen verwenden“ auf die Position „Aus“ stellen.

Jetzt können Sie das Kontrollkästchen „Kein Index“ anklicken. Wenn der Beitrag gepostet oder aktualisiert wird, werden Suchmaschinen befragt, ihn nicht zu indexieren.

Methode 3: Kennworterhaltung einer gesamten Internetseite unter Verwendung von cPanel

Wenn Ihr WordPress-Webhosting-Anbieter cPanel die Verwaltung Ihres Webhosting-Kontos erteilt, können Sie Ihre gesamte Webseite schützen, die mit cPanel arbeitet. Sie müssen sich lediglich bei Ihrem cPanel-Dashboard anmelden und dann im Abschnitt „Dateien“ auf das Symbol „Verzeichnisdatenschutz“ klicken.

Als nächstes müssen Sie auf den Ordner stoßen, in dem Sie WordPress installiert haben. Normalerweise ist dies der Ordner public_html. Danach müssen Sie neben diesem Ordner auf die Schaltfläche „Bearbeiten“ klicken.

Dadurch erhalten Sie einen Bildschirm, auf dem Sie auf Passwortsicherheit umstellen können.

Aktivieren Sie einfach das Kontrollkästchen „Passwortschutz für dieses Verzeichnis“ und klicken Sie einfach auf die Schaltfläche „Speichern“. Wenn Sie möchten, können Sie auch die Identität für den gesicherten Eintrag anpassen.

Sie sehen eine Bestätigungsmeldung, die besagt, dass die Zugriffsberechtigungen für den Eintrag verbessert wurden.

Als nächstes müssen Sie auf die Schaltfläche „Zurück“ klicken.

Sie werden zu einem Bildschirm weitergeleitet, auf dem Sie einen Benutzernamen und ein Passwort erstellen können, die beim Zugriff auf diese Auflistung verwendet werden müssen.

Sie müssen einen Benutzernamen und ein Passwort eingeben und dann das Passwort bestätigen. Stellen Sie sicher, dass Sie Ihren Benutzernamen und Ihr Passwort an einem sicheren Ort aufbewahren, z. B. in einer Passwort-Manager-App.

Wenn Sie auf die Schaltfläche „Speichern“ klicken, haben Sie erfolgreich einen zusätzlichen Passwortschutz für Ihre WordPress-Website.

Wann immer ein Verbraucher oder Autofahrer Ihre Website besucht, wird er nun aufgefordert, den Benutzernamen und das Passwort einzugeben, die Sie zuvor festgelegt haben, um die Website anzuzeigen.

Methode 4: Passwortschutz für WordPress mit einem Plugin

Wenn Sie eine verwaltete WordPress-Internet-Hosting-Alternative verwenden, haben Sie möglicherweise keinen Zugriff auf cPanel. In diesem Fall können Sie ein WordPress-Plugin verwenden, um Ihre Website mit einem Passwort zu schützen.

In diesem Artikel sind die zwei beliebtesten Alternativen:

1. SeedProd ist das schnell verfügbare und wartungsorientierte Plugin Nr. 1 für WordPress, das auf über 800.000 Websites angewendet wird. Es wird mit umfassenden Zugriffsverwaltungs- und Berechtigungsfunktionen geliefert, mit denen Sie Ihre Website vor jedem, einschließlich Suchmaschinen, verbergen können. Wir haben eine Schritt-für-Schritt-Anleitung für SeedProd.
2. Password Secured ist eine wirklich unkomplizierte Möglichkeit, Ihre WordPress-Seite mit einem einzigen Passwort zu schützen (keine Benutzergenerierung erwünscht). Sehen Sie sich unsere Schritt-für-Schritt-Anleitung an, wie Sie eine WordPress-Webseite mit einem Passwort sichern.

Wir hoffen, dass dieser kurze Artikel Ihnen dabei geholfen hat, die Suche nach Suchmaschinen vom Crawlen oder Indizieren Ihrer WordPress-Seite abzuhalten. Vielleicht möchten Sie auch lernen, wie Sie die allgemeine Leistung Ihrer Website beschleunigen können, oder unser bestes Schritt für Schritt WordPress-Sicherheitstutorial für Neueinsteiger ansehen.

Wenn Sie diesen Artikel bevorzugen, denken Sie daran, unseren YouTube-Kanal für WordPress-Video-Tutorials zu abonnieren. Sie erreichen uns auch auf Twitter und Facebook.