So umgehen Sie eine Paywall (Artikel, Blogs usw.)

Eines der nervigsten Dinge im „modernen“ Web sind Paywalls. Immer mehr Verlage entscheiden sich dafür, ihre Inhalte hinter Premium-Abonnements oder E-Mail-Anmeldeformularen zu sperren. Und in diesem Artikel werde ich erklären, warum es Paywalls gibt und wie man sie umgeht.

Ich möchte absolut klarstellen, dass ich es nicht dulde, die Zahlung für Premium-Inhalte zu vermeiden. Verleger sollten für ihre Arbeit belohnt werden, und das respektiere ich. Aber nicht nur große Verlage wie die New York Times machen Probleme.

Viele Blogs auf Medium wenden grenzwertig zwielichtige Taktiken an, um Leute dazu zu zwingen, ihre E-Mail-Adressen zu teilen. Und ich werde mein Bestes tun, um zu erklären, wie. Ein weiteres Problem ist, wenn Websites aufgrund von DSGVO-Vorschriften den Zugriff aus der gesamten EU-Region blockieren. Mehr dazu bald.

Wenn Sie den technischen Teil überspringen möchten, klicken Sie hier, um direkt zum Werkzeugbereich zu springen.

Was ist eine Paywall?

Im Grunde wird eine Paywall verwendet, um Website-Inhalte zu schützen, für die bezahlt werden soll. Die Kosten können entweder monetär sein – ein Abonnement – ​​oder eine E-Mail-Adresse, um das Wachstum eines Newsletters zu unterstützen.

Der Grund für die Verwendung einer Paywall ist ganz einfach: Werbeblocker behindern die Einnahmequellen der Publisher. Und das schon seit mehr als einem Jahrzehnt.

Google berichtete 2017, dass „[…] mehr als 600 Millionen Geräte Werbeblocker verwenden“ . Es ist nur fair anzunehmen, dass diese Zahl seitdem exponentiell gewachsen ist.

Wenn Sie ein großer Publisher sind und auf Werbeeinnahmen angewiesen sind , ist es sinnvoll, auf ein Abonnementmodell umzusteigen. Mein Blickwinkel zu diesem Thema bezieht sich jedoch auf Suchmaschinen.

Insbesondere, wie Publisher Suchmaschinen wie Google ihre Inhalte crawlen und indizieren lassen, aber den Suchenden nicht lesen lassen.

Wie greifen Suchmaschinen auf Paywall-Inhalte zu?

Lassen Sie mich also veranschaulichen, was passiert ist und warum ich diesen Artikel überhaupt geschrieben habe. Als ich für meinen Open-Source-Analytics-Artikel recherchierte, wollte ich wissen, welche Auswirkungen Werbeblocker auf Analytics-Berichte haben.

Insbesondere, wie Werbeblocker die Berichterstellung von Tools wie Google Analytics beeinflussen.

Meine Suchanfrage dazu lautete: „ad blockers analytics tracking“ .

Und hier das Suchergebnis von Google:

Das erste Ergebnis stammt von Towards Data Science und ist ein Featured Snippet . Mit diesen Snippets gibt Google Ihnen schnell eine Antwort auf eine bestimmte Frage. Und sie werden an den Anfang der Suchergebnisseite geklebt, um Autorität zu implizieren.

Trotzdem ist die Antwort ganz einfach, aber ich wollte mehr wissen. Also klickte ich auf den Link des Artikels. Und das ist die Seite, mit der ich begrüßt wurde:

Mein erster Gedanke? Das nervt höllisch. Mein zweiter Gedanke? Wie hat Google diesen Artikel gesehen und in den Suchergebnissen beworben?

 Natürlich versuche ich nicht, unwissend zu sein. Ich weiß, dass Medium begrenzt, wie viele Artikel Sie pro Monat lesen können. Es ist jedoch nicht möglich, den Überblick darüber zu behalten, wie viele Sie gelesen haben. Vor allem, wenn man bedenkt, dass Sie benutzerdefinierte Domainnamen für Ihre Medium-Blogs verwenden können.

In diesem Fall veröffentlicht Towards Data Science seine Inhalte auf Medium. Und Medium bietet Erstellern eine Möglichkeit, mit ihrer Plattform Geld für die Veröffentlichung zu verdienen. Es ist mehr eine Geschäftsbeziehung als eine persönliche Vertrauensfrage. Aber hier ist mein Ärger damit.

Damit dieser Inhalt gedeiht, hängt er stark vom Suchmaschinenverkehr ab.

Der Google Crawler erhält also eine Freikarte, um sowohl den gesamten Inhalt der Seite zu sehen als auch ihn in den Suchergebnissen zu indizieren. Und wie wir oben gesehen haben, können diese Suchergebnisse in den maßgeblichen Status befördert werden. Was ehrlich gesagt keinen Sinn macht.

Googles Haltung zu Paywall-Inhalten

Google hat eine offizielle Richtlinie zur Strukturierung von Paywall-Inhalten mithilfe von Schema-Markup erstellt. Sie können die offiziellen Dokumente hier einsehen.

Zusammenfassend:

• Google erlaubt kein Cloaking von Inhalten.
• Paywall-Inhalte müssen genau bis zu dem Abschnitt gekennzeichnet werden, der sich hinter einer Paywall verbirgt.

Wie aktiv Google diese Regeln durchsetzt, ist unbekannt.

Ich habe meine Due Diligence bei Towards Data Science durchgeführt, und hier ist der Code, den sie auf dieser speziellen Seite verwenden:

 mainEntityOfPage: https://towardsdatascience.com/how-much-data-is-missing-from-your-google-analytics-dashboard-20506b26e6d isAccessibleForFree: False cssSelector: .meteredContent

Wie wir hier sehen können, ist isAccessibleForFree auf False und der CSS-Selektor auf .meteredContent gesetzt. Es sagt uns, dass Medium die Google-Richtlinien zur Strukturierung von Paywall-Inhalten befolgt.

Was ist der „.meteredContent“-Selektor?

Dieser Selektor wird verwendet, um Suchmaschinen wie Google mitzuteilen, dass die Anzahl der kostenlosen Artikel, die ein Benutzer lesen kann, begrenzt ist. Bei Medium sind es 3 kostenlose Artikel pro Monat .

Zugegeben, während ich auf der Suche nach echtem Fehlverhalten von Medium war, kam ich mit leeren Händen zurück. Ich denke, logischerweise macht es keinen Sinn, dass Google alle Artikel sehen kann, aber echte Leser dürfen nur 3 Artikel lesen, bevor sie sich anmelden müssen. Google scheint diese Art von Verhalten mehr als gerne zuzulassen, und mehr kann ich nicht sagen.

 Google hat offen erklärt, dass es mehr an der Qualität von Inhalten interessiert ist, als sich um seine Zugänglichkeit zu kümmern. Das Unternehmen veröffentlichte zunächst Richtlinien, um Verlagen zu sagen, dass sie mindestens 3 kostenlose Artikel für Erstbesucher zulassen sollten. Dies gilt für das, was wir bei Medium gesehen haben. Aber in den letzten Jahren hat Google auf strukturiertes Markup umgestellt. Lesen Sie mehr dazu im Artikel "So funktionieren Suchalgorithmen" von Google selbst.

In der EU wegen DSGVO gesperrt

In einigen Fällen stoßen Sie möglicherweise auf Websites, die den Zugriff vollständig blockieren . Dies ist vor allem für in den USA ansässige Verlage relevant, die den Zugang für EU-Leser sperren. Und der einfache Grund dafür ist die DSGVO – Datenschutzbestimmungen aus Europa.

Während das obige Bild impliziert, dass sich die vorliegende Website um EU-Besucher „kümmert“, ist dies in der Praxis eindeutig nicht der Fall. Der Grund, warum Publisher dies tun, liegt in komplizierten Werbetechniken, die Daten über Benutzer sammeln. Und anstatt einzuschränken, welche Daten für eine bestimmte Region verfolgt werden, entscheiden sich einige dafür, den Zugriff vollständig zu sperren.

So umgehen Sie Paywalls

Okay, lassen Sie uns über all das Drama und die Argumentation hinter Paywalls hinwegsehen. Lassen Sie uns stattdessen einige der Tools untersuchen, mit denen Sie eine Paywall schnell umgehen können.

12 Fuß Leiter

Der schnellste Weg, um an einer Paywall vorbeizukommen, ist die Nutzung der 12-Fuß-Leiter-Website. Sie müssen lediglich die URL eingeben, die auf eine Paywall verweist, und 12ft erledigt den Rest.

 https://12ft.io/[link to the paywalled website]

Wie es funktioniert, ist ganz einfach. Nachrichtenseiten, Verlage und andere Inhaltsanbieter verwenden Paywalls, erlauben Google Crawler jedoch, ihre Seiten zu sehen. In diesem Zusammenhang verwendet 12ft einfach die Google Cache-Funktion, um Ihnen die ganze Seite anzuzeigen.

Meines Wissens unterstützt 12ft nicht die Umgehung der New York Times.

Paywalls umgehen

Die Browsererweiterung Bypass Paywalls ist ein Open-Source-Projekt, das auf GitHub gehostet wird. Um diese spezielle Erweiterung zu verwenden, müssen Sie sie selbst installieren. Da es weder auf dem Google Chrome-Marktplatz noch auf Mozillas zum Download verfügbar ist.

Die Erweiterung selbst ist für die Browser Chrome, Firefox und Edge verfügbar. Nicht zuletzt hat das Projekt über 20.000 Sterne auf GitHub. Es ist also sowohl bewährt als auch zuverlässig. Die vollständige Liste der Websites, die Sie mit dieser Erweiterung umgehen können, finden Sie auf der Projektseite selbst.

Archiv

Das Archive Today-Projekt funktioniert ähnlich wie viele andere Tools zur Umgehung der Paywall. Es archiviert die Seiten so, als ob die Seite von einer Suchmaschine durchsucht worden wäre, und gibt Ihnen eine lesbare Version der Seite zurück, die Sie anzuzeigen versuchen.

Diese Methode wird oft auf Websites wie Hacker News verwendet, wo Leute Geschichten hinter Paywall-Inhalten einreichen. Soweit ich das beurteilen kann, funktioniert es gut mit Websites wie NY Times, Financial Times, The Wall Street Journal und zahlreichen anderen.

Inkognito-Modus

In einigen Fällen speichert eine Website Cookie-Daten, um zu überwachen, wie viele kostenlose Artikel Sie gelesen haben. Sobald Sie das Limit erreicht haben, werden Sie einer Paywall unterzogen. Und eine der einfacheren Möglichkeiten, dies zu umgehen, ist der Inkognito-Modus. Auch als privater Modus bekannt.

Sie können in jedem modernen Browser auf Inkognito zugreifen, indem Sie zu Einstellungen gehen und ein neues privates Fenster auswählen. Dadurch erhalten Sie einfach eine „leere Tafel“ ohne Cookie-Verlauf, was bedeutet, dass Sie weitermachen und auf Inhalte zugreifen können, die hinter einer Cookie-Paywall verborgen sind.

Inkogo

Die Leute hinter Incoggo planen den Einstieg in den Werbeblocker-Markt. Aber vorerst bieten sie kostenlose Mac-basierte Software an, um Paywalls zu überspringen. Auch diese Software ist nur für OSX-Benutzer verfügbar, obwohl eine Windows-Version bald auftauchen sollte.

Wenn man sich ihre neuesten Blog-News ansieht, scheint es, dass sich das Projekt in aktiver Entwicklung befindet. Das ist eine gute Nachricht, denn es bedeutet, dass die Software funktioniert, wenn sie benötigt wird. Welche Veröffentlichungen und Websites Incoggo überspringen kann, erfahren Sie auf der offiziellen Website.

Ist es ethisch vertretbar, Paywalls zu umgehen?

Ich denke, wir alle arbeiten auf unterschiedlichen Ebenen des moralischen Kompasses. Es gibt viele Argumente auf beiden Seiten. Und wie ich am Anfang des Artikels erwähnt habe, denke ich, dass Verlage in der Lage sein sollten, Abonnementgebühren für Premium-Inhalte zu erheben.

Mein einziges Problem ist, wenn dieser Prozess zur Erpressung wird. Mit anderen Worten, warum sollten Sie Suchmaschinen wie Google Privilegien geben und dann alle anderen Benutzer aussperren?

Es ist nicht ungewöhnlich, einen echten kostenlosen Artikel zu lesen, der Links zu Verlagen enthält, die Paywalls zu ihren Inhalten hinzugefügt haben.

Lohnt es sich wirklich, 50 US-Dollar pro Jahr zu zahlen, um nur einen Artikel zu lesen? Gleiches gilt für Artikel, die einst kostenlos waren, aber trotz Paywall immer noch verlinkt werden.

Was auch immer der Fall ist, ich hoffe, dieser Leitfaden hat Ihnen zumindest einige nützliche Tipps gegeben.