Kann Google KI-Inhalte erkennen und straft es sie ab?

Erhalten Sie Einblicke in Googles Maßnahmen gegen KI-generierte Inhalte und in Schritte, mit denen Sie sicherstellen können, dass Ihre Website unbeeinträchtigt bleibt. Erfahren Sie, wie Googles neuestes Update KI-Inhalte abgestraft hat, was zur Deindexierung von 1446 Websites geführt hat.

Can Google Detect and Does it Penalize AI Content

Bei Originality.ai glauben wir an die ethische Entwicklung (Studie darüber, wie man KI-Bots blockiert) und die ethische Nutzung generativer KI mithilfe unseres KI-Detektors, der erkennen kann, ob Text von ChatGPT oder einem anderen KI-Schreibtool erstellt wurde.

Wir berichten darüber, wie KI die Online-Welt beeinflusst, verfolgen, wie viel KI in den Suchergebnissen von Google steckt, und die folgende Studie untersucht das Update vom 5. März 2024 eingehend.

Am 5. März kündigte Google ein umfangreiches Update an, das darauf abzielen würde, nicht hilfreiche Inhalte um 40% zu reduzieren. Dieses Update begann mit einer bedeutenden Runde manueller Maßnahmen, die auf Websites angewendet wurden und dazu führten, dass diese vollständig deindexiert wurden. Diese manuellen Maßnahmen erfolgten im Zusammenhang mit diesem Update, sind jedoch getrennt vom Algorithmus-Update, das über 2 bis 4 Wochen ausgerollt werden soll.

Wir haben in den letzten 24 Stunden 2 bedeutende Studien abgeschlossen, um Menschen dabei zu helfen, diese Updates zu verstehen, und beide sind hier enthalten. 

  • Studie 1 - Liste von Websites, gegen die im März 2024 eine manuelle Maßnahme ergriffen wurde
    • Gegen 1,446 Websites wurde von 79k im März 2024 überprüften Websites eine manuelle Maßnahme ergriffen.
  • Studie 2 - War KI-Content-Spam für die manuelle Maßnahme verantwortlich?
    • 100% der Websites hatten einige Beiträge, die KI-generiert waren
    • 50% der Websites hatten 90%-100% ihrer Beiträge als KI-generiert
    • Wir nutzten unseren KI-Text-Checker, um zu verstehen, welche Menge an KI-Schreiben aus einem Tool wie ChatGPT auf den betroffenen Websites veröffentlicht wurde.

In diesem Beitrag werden wir Folgendes behandeln…

  1. Überblick über das Google-Update
  2. Was eine manuelle Maßnahme und Website-Deindexierung ist
  3. Die vollständigste Liste der betroffenen Websites
  4. Was wir über die betroffenen Websites gelernt haben

Die Methodik finden Sie in den jeweiligen Abschnitten unten. 

Wenn Sie Fragen haben, Zugriff auf die Daten wünschen oder diese Forschung erweitern möchten, wenden Sie sich an jon@originality.ai 

Überblick über das Update zu manuellen Maßnahmen gegen KI-Inhalte im März 2024

Dieses Update von Google wurde am 5. März angekündigt und zielt darauf ab, Folgendes zu bestrafen…

  • „Missbrauch skalierter Inhalte“
    • Zielt darauf ab, massenhaft veröffentlichen Content-Spam zu stoppen (wer macht 2024 und darüber hinaus Content-Spam und nutzt keine KI?). 
  • „Missbrauch abgelaufener Domains“
    • Zielt darauf ab, Menschen daran zu hindern, abgelaufene Domains für SEO-Vorteile umzuwidmen 
  • „Missbrauch der Website-Reputation“
    • Zielt darauf ab, seriöse Websites daran zu hindern, die Suchmaschinen zu manipulieren, indem ein Teil ihrer Website Parasite-SEO-Artikel veröffentlicht. Ein Beispiel dafür ist das Beispiel Sports Illustrated Parasite SEO

Es gab in den ersten Tagen mehr Kommunikation von Google zu diesem Update als bei den meisten anderen ähnlichen Updates.

Berichterstattung über das Update vom März 2024:

Google-Blogbeiträge:

Es ist wichtig, erneut festzuhalten, dass manuelle Maßnahmen nicht dasselbe sind wie die Algorithmus-Updates, die ebenfalls stattfinden werden. 

Was ist eine manuelle Maßnahme und Website-Deindexierung

Wenn Google eine Website identifiziert hat, die seinen Richtlinien nicht entspricht, kann es eine „manuelle Maßnahme“ anwenden und sie vollständig aus seinen Suchergebnissen entfernen (auch bekannt als Deindexierung der Website). 

Websites erhielten ab dem 5. März in ihrem Google Search Console Manual Action-Dashboard zunehmend solche Benachrichtigungen…

Google Shows a single issue detected in Google Search Console's Manual Action Tab

Die Folge dieser manuellen Maßnahmen scheint eine vollständige Entfernung aus den Suchergebnissen von Google zu sein. 

Indexation checking using site operator

Was wissen wir nun über die betroffenen Websites…

Studie 1 - Liste von Websites, gegen die im März 2024 eine manuelle Maßnahme ergriffen wurde

Um das Ausmaß dieser Bemühungen um manuelle Maßnahmen besser zu verstehen, haben wir eine Studie abgeschlossen, um Content-Websites zu identifizieren, die von Google deindexiert wurden und bis vor Kurzem Google Organic-Traffic hatten.

Diese Studie konzentriert sich auf Content-first-Websites, nicht auf ECommerce oder andere Arten von Websites.

Ergebnisse:

  • Manuelle Maßnahme auf über 1,446 Websites angewendet, die bei MediaVine, Raptive oder Ezoic waren
  • Von den ca. 79k überprüften Websites wurde bei 1.9% eine manuelle Maßnahme angewendet 
  • Kumulativer Traffic-Verlust auf über 20 Millionen Besucher/Monat geschätzt
  • 3 Websites mit über 1 Million organischen Besuchern pro Monat auf null 

Manual Action Applied to 2% of websites from 1446 deindexed sites.

DR von Websites mit manueller Maßnahme:

Histogram of Ahrefs DR for sites with manual action

3 Websites mit über 1 Million organischen Besuchern pro Monat auf null

  • zacjohnson.com
  • beingselfish.in
  • equityatlas.org

Checking a websites traffic overview in Ahrefs Dashboard.
Ahrefs overview for beingselfish.in after taking manual action by google.
Another Ahrefs overview of traffic decreasing.

Methodik:

So haben wir diese Studie durchgeführt.

Zusammenfassung: Wir identifizierten eine Liste von 79k Websites, die eine überdurchschnittlich gute Abbildung des Internets darstellen, prüften, ob sie derzeit indexiert sind, und wenn sie nicht indexiert waren, prüften wir 2 Quellen (AHrefs und SImilarWeb), um zu verifizieren, ob sie kürzlich organischen Traffic hatten. 

Wenn eine Website kürzlich organischen Traffic hatte (Februar), aber jetzt nicht in Google indexiert ist, gehen wir davon aus, dass eine manuelle Maßnahme des Updates vom 5. März angewendet wurde.

  1. Wir erstellten eine Liste aller URLs, die Anzeigen von beliebten Werbeanbietern anzeigen, unter Verwendung von BuiltWith-Listen. Diese Plattformen wurden ausgewählt, weil sie einen Mindeststandard anwenden, um Websites die Aufnahme in ihre Plattform zu ermöglichen; AdSense-Websites wurden aufgrund der Menge minderwertiger Websites nicht analysiert. Diese Liste sollte (wohl) eine überdurchschnittlich gute Darstellung aller Websites online sein und den Prozentsatz der Websites, die eine manuelle Maßnahme erhielten, potenziell unterschätzen. Hier sind die Anzahl der überprüften Websites basierend auf dem Unternehmen, das die Werbung bereitstellt:
    1. MediaVine: 21,808
    2. Raptive: 6,428
    3. Ezoic: 51,293
  2. 18 Duplikate wurden entfernt
  3. Jede URL wurde überprüft, um festzustellen, ob sie deindexiert wurde, indem in Google nach „Site:URL“ gesucht wurde
  4. Für jede Website, die deindexiert wurde, überprüften wir die organischen Traffic-Zahlen für Februar mit AHrefs und SimilarWeb. 
  5. Wir bestätigten, dass unsere Methode einige der öffentlich geteilten Websites erfasste, die mit dieser Methode erfasst werden (was der Fall war)

Datensatz:

Wenn Sie Zugriff auf den Datensatz der deindexierten Websites einschließlich ahrefs- und similar web-Daten wünschen, wenden Sie sich bitte an Jon@originality.ai

Studie 2 - War KI-Content-Spam für die manuelle Maßnahme verantwortlich?

Viele Medien waren schnell dabei, zu dem Schluss zu kommen, dass dieses Update darauf abzielt, KI-Spam in den Suchergebnissen von Google zu zerschlagen… 

Wired.com publish a post on google is finally trying to kill ai clickbait

Viele SEOs auf X stimmen zu…

Brendan Oconnel agree with google manual action to remove ai clickbait

Aber mithilfe unseres KI-Checkers wollten wir eine strengere Analyse durchführen. 

Wir betrachteten 100 aktuelle Artikel für jede der deindexierten Websites, die bereits öffentlich geteilt wurden, um die Verbreitung von KI-Inhalten auf den Websites zu sehen, die eine manuelle Strafe erhielten. 

Ergebnisse:

  • 100% der Websites, gegen die eine manuelle Maßnahme ergriffen wurde, zeigten Anzeichen der Nutzung von KI
  • 7 der 14 von uns analysierten Websites hatten über 90% ihrer Beispielartikel 

Parentages of websites has published ai content
7 out of 14 websites had 90%+ ai generated content
Presence Of Ai Content in Websites that had a manual action
Websites list that had used a percentage ai generated content

Methodik:

  1. Identifizierte Websites, die deindexiert wurden und deren URL bereits auf X offengelegt wurde
    1. fresherslive.com
    2. qmunicatemagazine.com
    3. hnbgu.net
    4. zacjohnson.com
    5. newsunzip.com
    6. Bognor.news
    7. popularbio.com
    8. popularnetworth.com
    9. bioofy.com
    10. istaunch.com
    11. healthyceleb.com
    12. GoDownSize.com
    13. networthpost.org
    14. tvguidetime.com
    15. thesocialtalks.com
    16. juliangoldie.com
    17. chipperbird.com
    18. EquityAtlas.org
    19. filmifeed.com
  2. 100 der neuesten Beiträge gescrapt, die über 100 Wörter lang sind
  3. Mehrere Websites wurden ausgeschlossen:
    1. juliangoldie.com - nicht mehr vollständig deindexiert - 10 Seiten sind im Index (räumt aber öffentlich ein, KI zu nutzen)
    2. chipperbird.com - Inhalte konnten nicht abgerufen werden (aber der Website-Betreiber räumt öffentlich ein, KI zu nutzen)
    3. equityatlas.org - Inhalte konnten nicht abgerufen werden
    4. filmifeed.com - Inhalte konnten nicht abgerufen werden
    5. thesocialtalks.com - Inhalte konnten nicht abgerufen werden
  4. Jeden Artikel durch unseren KI-Detektor laufen lassen (Detektor-Wirksamkeit) unter Verwendung des Modells 2.0 Standard am 7. März. Dieser Test wurde mit unserem vorherigen Modell durchgeführt. Einzelheiten zum neuesten Modell finden Sie beim Originality AI checker.
  5. Eine Analyse für jede Website abgeschlossen, um den durchschnittlichen KI-Score und den Prozentsatz der Artikel zu identifizieren, die als KI-generiert vermutet werden. 

War KI-Inhalt daran schuld, dass Websites von Google deindexiert wurden?

Die kurze Antwort lautet: ja… nach der Analyse von 200 Websites und über 40k URLs mit unserem KI-Checker ist klar, dass die überwiegende Mehrheit der Websites, die eine manuelle Maßnahme erhielten, wahrscheinlich KI-Inhalte verwendete. 

Mit dem Update vom 5. März deindexierte Google fast 2% aller Websites auf beliebten Werbeplattformen wie MediaVine, Ezoic und Raptive. Einige dieser Plattformen wie MediaVine haben unmittelbar nach diesen manuellen Maßnahmen proaktiv eine No-AI-Content-Haltung eingenommen (Quelle).

Mediavine Policy on ai generated content

https://www.mediavine.com/ai-and-our-commitment-to-a-creator-first-future/

Zum Zeitpunkt des Updates analysierten wir die 14 öffentlich bekannt gewordenen Websites und stellten fest, dass alle von ihnen eine gewisse Menge an KI-Inhalten aufwiesen. Das löste viele Diskussionen aus…

Lot's of discussion on Twitter's happening after google manual action on ai-content
https://twitter.com/nichepursuits/
status/1765893589991874984

Aber… wir wollten eine gründlichere Analyse durchführen und VIEL tiefer gehen als nur die 14 Websites, die zu diesem Zeitpunkt bereits bekannt waren.

Methodik:

  1. Identifizierung von 200 Websites mit dem meisten Traffic, die deindexiert wurden
  2. Identifizierung von rund 200 aktuellen Artikeln pro Website 
  3. Überprüfung auf KI-Inhalte bei über 40k URLs mithilfe des Originality.ai KI-Detektors mit der URL API
    1. Fehler entfernt 
    2. Websites mit weniger als 25 überprüften Artikeln entfernt
  4. Anschließend konnten wir die Inhalte von 30,614 URLs über 175 Websites hinweg analysieren

Wichtigste Ergebnisse:

151 der 175 Websites hatten wahrscheinlich KI-Inhalte veröffentlicht

Die überwiegende Mehrheit der deindexierten Websites scheint einige KI-Inhalte veröffentlicht zu haben. Unter Verwendung des KI-Schwellenwerts als konservative 5% (die Falsch-Positiv-Rate liegt bei < 3% in fast allen getesteten Datensätzen).

Percentage Of Suspected Ai Articles on Deindexed Sites

51 der 175 waren reine (95%+ KI) KI-generierte Content-Websites

Einige Websites scheinen einen gemischten Ansatz sowohl mit KI- als auch mit von Menschen geschriebenen Inhalten verfolgt zu haben, während einige der Websites eindeutig nichts außer KI-generierten Inhalten zeigten. 

51 der Websites oder ~30% der Websites waren reine KI-generierte Inhalte.

51 out of 175 sites had over 95% ai generated content

Weitere Gemeinsamkeiten deindexierter Websites:

  • Aggressive Anzeigen
  • Nur-Content-Websites

Aber diese Ergebnisse könnten wahrscheinlich auf eine Stichprobenverzerrung zurückzuführen sein, da die Liste der Websites von MediaVine, Raptive und EZoic stammt (alles Werbenetzwerke, die bei Web-Publishern beliebt sind). 

Ist diese Menge an KI-Inhalten normal?

Diese Ergebnisse würden uns NICHT dazu veranlassen, KI-Inhalte für die Deindexierung der Websites verantwortlich zu machen, WENN diese Menge an KI-Inhalten im übrigen Google-SERPs konsistent wäre. 

Wir haben eine laufende Studie, die den Inhalt einer Webseite in den Top-20-Suchergebnissen für 500 verschiedene Keywords untersucht, die 60+ Monate zurückreicht. 

Fazit

Das Risiko, dass KI-generierter Spam die Suchergebnisse von Google überwältigt, ist eine existenzielle Bedrohung für Google. Dies scheint ein klarer Versuch von Google zu sein, KI-generierten Spam nicht nur zu bestrafen, sondern auch ein Statement über seine Sichtweise dazu abzugeben.