Comment contourner un Paywall (articles, blogs, etc.)

L'une des choses les plus ennuyeuses sur le Web "moderne" sont les paywalls. De plus en plus d'éditeurs choisissent de verrouiller leur contenu derrière des abonnements premium ou des formulaires d'inscription par e-mail. Et dans cet article, je vais vous expliquer pourquoi les paywalls existent, et comment les contourner.

Je tiens à ce qu'il soit absolument clair que je ne tolère pas le fait d'éviter de payer pour du contenu premium. Les éditeurs devraient être récompensés pour leur travail, et je respecte cela. Mais ce ne sont pas seulement les grands éditeurs comme le New York Times qui causent des problèmes.

De nombreux blogs sur Medium utilisent des tactiques louches pour forcer les gens à partager leurs adresses e-mail. Et je ferai de mon mieux pour expliquer comment. Un autre problème est lorsque les sites bloquent l'accès de toute la région de l'UE en raison de la réglementation GDPR. Plus à ce sujet bientôt.

Si vous souhaitez ignorer la partie technique, cliquez ici pour accéder directement à la section des outils.

Qu'est-ce qu'un Paywall ?

Dans les termes les plus élémentaires, un paywall est utilisé pour protéger le contenu du site Web destiné à être payé. Le coût peut être monétaire – abonnement – ​​ou une adresse e-mail pour aider à développer une newsletter.

Le raisonnement derrière l'utilisation d'un paywall est assez simple : les bloqueurs de publicités entravent les sources de revenus des éditeurs. Et cela se produit depuis plus d'une décennie maintenant.

Google a rapporté en 2017 que «[…] plus de 600 millions d'appareils utilisent des bloqueurs de publicités» . Il est juste de supposer que ce nombre a augmenté de façon exponentielle depuis lors.

Si vous êtes un grand éditeur et que vous dépendez des revenus publicitaires, il est logique de passer à un modèle d'abonnement. Cependant, mon angle sur ce sujet est lié aux moteurs de recherche.

Plus précisément, comment les éditeurs laissent les moteurs de recherche comme Google explorer et indexer leur contenu mais ne laissent pas le chercheur le lire.

Comment les moteurs de recherche accèdent-ils au contenu payant ?

Alors, permettez-moi d'illustrer ce qui s'est passé et pourquoi j'ai écrit cet article en premier lieu. Lors de mes recherches pour mon article d'analyse open source, je voulais connaître l'impact des bloqueurs de publicités sur les rapports d'analyse.

En particulier, comment les bloqueurs de publicités affectent les rapports d'outils tels que Google Analytics.

Ma requête de recherche pour cela était : "suivi analytique des bloqueurs de publicités" .

Et voici le résultat de la recherche de Google :

Le premier résultat provient de Towards Data Science et il s'agit d'un extrait en vedette . Ces extraits sont la façon dont Google vous donne une réponse rapide à une question spécifique. Et, ils sont collés en haut de la page de résultats de recherche pour impliquer l'autorité.

Néanmoins, la réponse est assez simple, mais je voulais en savoir plus. J'ai donc cliqué sur le lien de l'article. Et voici la page avec laquelle j'ai été accueilli:

Ma première pensée ? C'est ennuyeux comme l'enfer. Ma seconde pensée ? Comment Google a-t-il vu cet article et en a-t-il fait la promotion dans les résultats de recherche ?

 Bien sûr, je n'essaie pas d'être ignorant. Je sais que Medium limite le nombre d'articles que vous pouvez lire par mois. Cependant, garder une trace du nombre de lectures que vous avez lu n'est pas possible. Surtout, étant donné que vous pouvez utiliser des noms de domaine personnalisés pour vos blogs Medium.

Dans ce cas, Towards Data Science publie son contenu sur Medium. Et Medium offre aux créateurs un moyen de gagner de l'argent pour publier avec leur plateforme. C'est une relation d'affaires plus qu'une question personnelle de confiance. Mais voici mon reproche.

Pour que ce contenu prospére, il dépend fortement du trafic des moteurs de recherche.

Ainsi, le Google Crawler reçoit un laissez-passer gratuit pour à la fois voir le contenu de la page entière, mais aussi pour l'indexer dans les résultats de recherche. Et comme nous l'avons vu ci-dessus, ces résultats de recherche peuvent être promus au statut d'autorité. Ce qui, honnêtement, n'a aucun sens.

La position de Google sur le contenu payant

Google a créé une directive officielle sur la manière de structurer le contenu payant à l'aide du balisage de schéma. Vous pouvez voir les documents officiels ici.

En résumé:

• Google n'autorise pas la dissimulation de contenu.
• Le contenu payant doit être balisé jusqu'à la section exacte qui est cachée derrière un paywall.

La mesure dans laquelle Google applique ces règles est inconnue.

J'ai fait ma diligence raisonnable sur Towards Data Science, et voici le code qu'ils utilisent sur cette page spécifique :

 mainEntityOfPage: https://towardsdatascience.com/how-much-data-is-missing-from-your-google-analytics-dashboard-20506b26e6d isAccessibleForFree: False cssSelector: .meteredContent

Comme nous pouvons le voir ici, isAccessibleForFree est défini sur False et le sélecteur CSS est défini sur .meteredContent. Il nous indique que Medium suit les directives de Google sur la façon de structurer le contenu payant.

Qu'est-ce que le sélecteur ".meteredContent" ?

Ce sélecteur est utilisé pour indiquer aux moteurs de recherche comme Google qu'il y a une limite au nombre d'articles gratuits qu'un utilisateur peut lire. Dans le cas de Medium, il s'agit de 3 articles gratuits par mois .

Certes, alors que je cherchais à trouver de véritables actes répréhensibles de la part de Medium, je suis revenu les mains vides. Je pense que, logiquement, cela n'a pas de sens que Google puisse voir tous les articles, mais les vrais lecteurs ne peuvent lire que 3 articles avant d'être obligés de s'inscrire. Google semble être plus qu'heureux d'autoriser ce genre de comportement, et je ne peux pas dire grand-chose d'autre.

 Google a ouvertement déclaré qu'il est plus intéressé par la qualité du contenu que par son accessibilité. La société a initialement publié des directives indiquant aux éditeurs d'autoriser au moins 3 articles gratuits pour les nouveaux visiteurs. C'est vrai pour ce que nous avons vu avec Medium. Mais, ces dernières années, Google est passé au balisage structuré. En savoir plus à ce sujet dans l'article "Comment fonctionnent les algorithmes de recherche" de Google lui-même.

Bloqué dans l'UE en raison du RGPD

Dans certains cas, vous pouvez rencontrer des sites Web qui bloquent entièrement l'accès . Ceci est largement pertinent pour les éditeurs basés aux États-Unis qui bloquent l'accès aux lecteurs de l'UE. Et la simple raison en est le RGPD – réglementation européenne sur la confidentialité.

Bien que l'image ci-dessus implique que le site Web en question "se soucie" des visiteurs de l'UE, ce n'est clairement pas le cas en termes pratiques. La raison pour laquelle les éditeurs agissent ainsi est due à des techniques publicitaires complexes qui collectent des données sur les utilisateurs. Et, plutôt que de limiter les données suivies pour une région spécifique, certains choisissent de bloquer complètement l'accès.

Comment contourner les paywalls

Très bien, regardons au-delà de tout le drame et du raisonnement derrière les paywalls. Au lieu de cela, explorons certains des outils que vous pouvez utiliser pour contourner rapidement un paywall.

Échelle de 12 pieds

Le moyen le plus rapide de contourner un paywall est d'utiliser le site Web 12ft Ladder. Tout ce que vous avez à faire est d'entrer l'URL qui renvoie à un paywall, et 12ft fera le reste.

 https://12ft.io/[link to the paywalled website]

Quant à son fonctionnement, c'est assez simple. Les sites d'actualités, les éditeurs et d'autres fournisseurs de contenu utilisent des paywalls mais autorisent Google Crawler à voir leurs pages. Dans ce contexte, 12ft utilise simplement la fonctionnalité Google Cache pour vous montrer la page complète.

À ma connaissance, 12 pieds ne prend pas en charge le contournement du New York Times.

Contourner les murs de paiement

L'extension de navigateur Bypass Paywalls est un projet open source hébergé sur GitHub. Pour utiliser cette extension spécifique, vous devez l'installer vous-même. Comme il n'est pas disponible en téléchargement sur le marché Google Chrome ou sur Mozilla.

L'extension elle-même est disponible pour les navigateurs Chrome, Firefox et Edge. Enfin, le projet compte plus de 20 000 étoiles sur GitHub. Ainsi, il est à la fois éprouvé et fiable. La liste complète des sites que vous pouvez contourner avec cette extension se trouve sur la page du projet elle-même.

Archive

Le projet Archive Today fonctionne de la même manière que de nombreux autres outils de contournement de paywall. Il archive les pages comme si la page était parcourue par un moteur de recherche et vous restitue une version lisible de la page que vous essayez de visualiser.

Cette méthode est souvent utilisée sur des sites comme Hacker News où les gens soumettent des histoires derrière du contenu payant. D'après ce que je peux dire, cela fonctionne bien avec des sites comme le NY Times, le Financial Times, le Wall Street Journal et bien d'autres.

Mode navigation privée

Dans certains cas, un site Web stockera des données de cookies pour surveiller le nombre d'articles gratuits que vous avez lus. Une fois que vous atteignez la limite, vous serez payant. Et l'un des moyens les plus simples de contourner ce problème consiste à utiliser le mode navigation privée. Également connu sous le nom de mode privé.

Vous pouvez accéder à Incognito sur n'importe quel navigateur moderne en allant dans Paramètres et en sélectionnant une nouvelle fenêtre privée . Cela vous donnera simplement une "ardoise vierge" sans historique de cookies, ce qui signifie que vous pouvez aller de l'avant et accéder au contenu caché derrière un paywall de cookies.

Incoggo

Les gens derrière Incoggo prévoient d'entrer sur le marché des bloqueurs de publicités. Mais, pour le moment, ils fournissent un logiciel gratuit basé sur Mac pour éviter les paywalls. Encore une fois, ce logiciel n'est disponible que pour les utilisateurs d'OSX, même si une version Windows devrait bientôt faire surface.

En regardant les dernières nouvelles de leur blog, il semble que le projet soit en développement actif. C'est une bonne nouvelle car cela signifie que le logiciel fonctionne en cas de besoin. Quant aux publications et aux sites qu'Incoggo peut ignorer, consultez leur site Web officiel.

Est-il éthique de contourner les paywalls ?

Je pense que nous fonctionnons tous à différents niveaux de boussole morale. Il y a beaucoup d'arguments à avoir des deux côtés. Et, comme je l'ai mentionné au début de l'article, je pense que les éditeurs devraient pouvoir facturer des frais d'abonnement pour le contenu premium.

Mon seul problème, c'est quand ce processus devient de l'extorsion. En d'autres termes, pourquoi accorder des privilèges aux moteurs de recherche comme Google et bloquer ensuite tous les autres utilisateurs ?

Il n'est pas rare de lire un véritable article gratuit, qui renvoie à des éditeurs qui ont ajouté des paywalls à leur contenu.

Vaut-il vraiment la peine de payer 50 $ par an pour lire un seul article ? Il en va de même pour les articles qui étaient autrefois gratuits, mais qui sont toujours liés malgré le paywall.

Quoi qu'il en soit, j'espère que ce guide vous a donné au moins quelques plats à emporter utiles.