{"id":86688,"date":"2020-11-04T15:21:02","date_gmt":"2020-11-04T09:51:02","guid":{"rendered":"https:\/\/vwo.com\/blog\/ab-testing-gpt-3-5-turbo-ai\/"},"modified":"2025-04-28T13:47:49","modified_gmt":"2025-04-28T08:17:49","slug":"ab-testing-ai-texte","status":"publish","type":"post","link":"https:\/\/vwo.com\/blog\/de\/ab-testing-ai-texte\/","title":{"rendered":"A\/B-Tests von Texten f\u00fcr Websites mit GPT-3.5 Turbo er\u00f6ffnen neue M\u00f6glichkeiten f\u00fcr Experimente mit AI"},"content":{"rendered":"\n

Von der anf\u00e4nglichen Unterst\u00fctzung des Menschen bei \u00fcberfl\u00fcssigen und manuellen Aufgaben bis hin zur Bew\u00e4ltigung kreativer Aufgaben wie dem Erstellen von Kunstwerken oder dem Komponieren von Musik hat sich die KI in nie dagewesener Weise entwickelt und ver\u00e4ndert. Eine dieser kreativen Aufgaben, die Bots erstaunlich gut beherrschen, ist das Schreiben von Texten! Ja, GPT-3.5 Turbo (Generative Pre-trained Transformer 3) ist eine KI, die mit Hilfe eines neuronalen Netzes nahezu fehlerfreien Text produzieren kann, der dem jeweiligen Kontext entspricht. GPT-3.5 Turbo wurde von OpenAI<\/a>, einem in San Francisco ans\u00e4ssigen Forschungslabor, entwickelt und ist ein leistungsstarker Sprachgenerator der dritten Generation, der mithilfe von maschinellem Lernen Text vorhersagen und produzieren kann, fast <\/em>wie ein Mensch.<\/p>\n\n\n\n

Kostenlos herunterladen: A\/B-Testing Leitfaden<\/em><\/strong><\/a><\/h2>\n\n\n\n

Wenn Sie mehr \u00fcber GPT-3.5 Turbo erfahren m\u00f6chten, finden Sie im Folgenden weitere Informationen dazu:<\/p>\n\n\n\n

Generativ<\/strong>:<\/strong> Das Modell soll Text generieren, indem es ein Wort nach dem anderen in einem bestimmten Satz prognostiziert.<\/p>\n\n\n\n

Pre-trained:<\/strong><\/strong> Zeigt an, dass eine gro\u00dfe Menge an Daten in das System eingespeist wurde, um es zu trainieren.<\/p>\n\n\n\n

Transformer:<\/strong> Bezeichnet den vom KI-Modell verwendeten Algorithmus, der auf die Verarbeitung nat\u00fcrlicher Sprache spezialisiert ist, d. h. darauf, wie W\u00f6rter in einer Sprache verwendet werden und was sie bedeuten.<\/p>\n\n\n

\n
\"AB<\/figure>\n<\/div>\n\n\n

Sobald GPT-3.5 Turbo mit einer Eingabeaufforderung gef\u00fcttert wird, erzeugt es Textstr\u00f6me, indem es die M\u00f6glichkeit vorhersagt, dass ein Satz in dieser Welt existiert. Derzeit befindet sich die Funktion in der Betaphase und wird nur einer ausgew\u00e4hlten Gruppe (einschlie\u00dflich VWO<\/a>) \u00fcber eine \u00fcber die Cloud zug\u00e4ngliche API angeboten. <\/p>\n\n\n\n

Seien wir ehrlich – das Verfassen von Texten ist keine leichte Aufgabe. Das robuste und flexible Sprachmodell von GPT-3.5 Turbo kann einen kurzen Text in gro\u00dfem Umfang erstellen. Wenn Sie dazu noch die M\u00f6glichkeit haben, Textversionen zu testen, k\u00f6nnen Sie das Beste aus beiden Welten bekommen. Au\u00dferdem drehen sich einige der am h\u00e4ufigsten durchgef\u00fchrten Tests um das Kopieren von Webseiten. Daher war die Integration der GPT-3.5 Turbo API von Open AI mit VWO Testing<\/a> f\u00fcr uns die nat\u00fcrlichste und logischste Sache, die wir tun konnten.<\/p>\n\n\n\n

Mit unserer neuen Funktion k\u00f6nnen Sie mithilfe von KI generierte Texte f\u00fcr Ihre Website erstellen und diese ohne Hilfe der IT-Abteilung einsetzen. Sie k\u00f6nnen die KI-generierten Texte auch mit den von Menschen geschriebenen Originaltexten auf Ihrer Website vergleichen. Im n\u00e4chsten Abschnitt erfahren Sie, wie bekannte Marken die praktischen Auswirkungen unserer neuen Funktion durch einen freundschaftlichen Wettbewerb zwischen von Menschen geschriebenen und KI-generierten Texten entdeckt haben. <\/p>\n\n\n

VWOs Wettbewerb Mensch vs. KI<\/strong><\/h2>\n\n\n

Im August diesen Jahres veranstaltete VWO einen freundschaftlichen Wettbewerb<\/a> zwischen Texten, die von menschlichen Textern geschrieben wurden, und solchen, die von unserer neuen Funktion auf der Grundlage der GPT-3.5 Turbo API von OpenAI erstellt wurden. Wir luden Teilnehmer aus der ganzen Welt ein und testeten KI-generierte Texte gegen von Menschen geschriebene Texte f\u00fcr ihre Webseiten mit ausreichendem Traffic \u00fcber VWO oder andere Testplattformen<\/a>, die sie verwendeten. <\/p>\n\n\n\n

Mehr als 450 Marken erhielten im Rahmen dieses Wettbewerbs Zugang zu der KI-Funktion f\u00fcr die Erstellung von Texten. Unter den 18 Teilnehmern, die in die engere Wahl kamen, waren Booking.com, Clark Germany GmbH und Schneiders, um nur einige zu nennen. Die KI-Funktion war in der Lage, Texte in verschiedenen Sprachen wie Spanisch, Deutsch, Portugiesisch usw. zu erstellen. Die Teilnehmer waren mit der Genauigkeit der Ausgabe in diesen Sprachen sehr zufrieden.<\/p>\n\n\n\n

Alle Teilnehmer mussten ihre Tests so anlegen, dass die urspr\u00fcngliche Website-Kopie als Kontrolle und die von der KI generierte(n) Kopie(n) als Variation diente(n). <\/p>\n\n\n

Ergebnisse des Wettbewerbs<\/strong><\/h3>\n\n\n

Unter den 18 Tests, die von den best\u00e4tigten Teilnehmern durchgef\u00fchrt wurden, gewann bei 1 Test eine bestehende (oder neue) von Menschen geschriebene Kopie, bei 3 Tests gewann eine KI-Kopie, bei 3 Tests gab es ein Unentschieden, bei 2 Tests stehen die Ergebnisse noch aus und 9 Tests waren nicht eindeutig. <\/p>\n\n\n\n

Werfen wir einen Blick auf einige der Tests, bei denen die KI-generierte Kopie gewonnen hat:<\/strong><\/p>\n\n\n\n

Schneiders [Ein E-Commerce-Shop f\u00fcr Pferdebekleidung & Reitausr\u00fcstung]<\/strong><\/h4>\n\n\n\n

Das Team testete den Text des obersten Banners, indem es mit dem KI-gest\u00fctzten Sprachgenerator eine Variation der Originalseite erstellte. Hier sehen Sie einen Blick auf die Kontrolle und die Variation aus dem Test:<\/p>\n\n\n\n

\"Human
Kontrolle [von Menschen geschriebene Kopie]<\/em><\/figcaption><\/figure>\n\n\n\n
\"Gpt
Variation [KI-generierte Kopie<\/em>]
<\/figcaption><\/figure>\n\n\n\n

Nachdem statistisch signifikante Ergebnisse erzielt worden waren, wurde die Variante des A\/B-Tests zum Sieger erkl\u00e4rt, da sie zu einem Anstieg der Bannerklicks um 7,06 % f\u00fchrte.<\/p>\n\n\n\n

Clark Germany GmbH [Eine Versicherungsagentur mit Sitz in Frankfurt]<\/strong><\/h4>\n\n\n\n

Es wurden 3 Variationen der Seiten\u00fcberschrift unter Verwendung der KI-Kopie erstellt und mit der Kontrollseite verglichen. Der Test wurde 48 Tage lang durchgef\u00fchrt. Im Folgenden sind die Kontrolle und die Variationen des Tests dargestellt: <\/p>\n\n\n\n

\"Human
Kontrolle [Von Menschen geschriebene Kopie]<\/em>
<\/em>
English translation: Manage Your Insurance Digitally<\/em>
<\/figcaption><\/figure>\n\n\n\n
\"Gpt
Variante 1 [AI-Kopie]<\/em>
<\/em>
English Translation: Manage Your Insurance Digitally<\/em>
<\/figcaption><\/figure>\n\n\n\n
\"Variation
Variante 2 [AI-Kopie]<\/em>
<\/em>
English Translation: Keep Track Of Your Insurances<\/em>
<\/figcaption><\/figure>\n\n\n\n
\"Variation
Variante 3 [AI-Kopie]<\/em><\/em>
English Translation: Clark Is Your Digital Insurance Manager<\/em>
<\/figcaption><\/figure>\n\n\n\n

Sobald der Test abgeschlossen war (statistische Signifikanz > 90%), schnitten alle 3 Varianten besser ab als die Kontrollgruppe. Variante 2 f\u00fchrte zu einem maximalen Anstieg der CTA-Klicks (15,77%), w\u00e4hrend Variante 1 und 3 einen Anstieg von 9,13% bzw. 7,13% erzielten.<\/p>\n\n\n\n

Hier ist der Test, der die menschliche Kopie zum Sieger <\/strong>erkl\u00e4rte:<\/p>\n\n\n\n

Booking.com [Ein globales Reiseunternehmen]<\/strong><\/h4>\n\n\n\n

Das Team von Booking.com testete<\/a> den CTA auf ihren Hotelbuchungsseiten. 2 von Menschen geschriebene Kopien wurden mit einer von einer KI generierten verglichen. Nachfolgend sind die erstellten Varianten aufgef\u00fchrt:<\/p>\n\n\n\n

\"Human
Variante 1 [von Menschen geschriebenes Exemplar Nr. 1<\/em>]<\/figcaption><\/figure>\n\n\n\n
\"Gpt
Variante 2 [von Menschen geschriebenes Exemplar Nr. 2]<\/em><\/figcaption><\/figure>\n\n\n\n
\"Variation
Variante 3 [KI-generiertes Exemplar]<\/em>
<\/figcaption><\/figure>\n\n\n\n

Der menschliche Text Nr. 1 gewann den Test, da er die CTA-Conversion Rate um 1,7% steigerte.Hier ist ein Test, der zu einem Gleichstand zwischen Mensch und KI <\/strong>f\u00fchrte:<\/p>\n\n\n\n

Springworks [Ein SaaS-Unternehmen mit Sitz in Indien]<\/strong><\/h4>\n\n\n\n

Das Team von Springworks testete die \u00dcberschrift ihrer Landing Page<\/a>, indem es eine Variation mit dem von der KI generierten Text erstellte und diese mit dem Original (Kontrolle) verglich. Ziel war es, die Klicks auf die CTA „Add Trivia“ zu erh\u00f6hen. Der Test wurde 8 Tage lang durchgef\u00fchrt. Hier ein Blick auf die Kontrolle und die Variation:<\/p>\n\n\n

\n
\"Human
Kontrolle [Von Menschen geschriebene Kopie]<\/em>
<\/em>
<\/figcaption><\/figure>\n<\/div>\n\n
\n
\"Gpt
Variation [AI-Kopie]<\/em>
<\/figcaption><\/figure>\n<\/div>\n\n\n

Da der Unterschied in der Erh\u00f6hung der CTA-Klicks zwischen der Kontrolle und der Variation weniger als 5% betrug und die Testergebnisse statistisch nicht signifikant waren, wurde der Test als unentschieden gewertet.<\/p>\n\n\n\n

Kostenlos herunterladen: A\/B-Testing Leitfaden<\/em><\/strong><\/a><\/h2>\n\n\n\n

Lassen Sie uns nun in die Einzelheiten der Zusammenarbeit zwischen VWO Testing<\/a> und GPT-3.5 Turbo eintauchen.<\/p>\n\n\n

VWO Testing und GPT-3.5 Turbo<\/strong><\/h2>\n\n\n

Wir haben die GPT-3.5 Turbo API von Open AI in unseren Visual Editor<\/a> integriert, so dass Sie jedes Mal, wenn Sie sich f\u00fcr einen Test oder eine \u00c4nderung entscheiden, Kopiervorschl\u00e4ge generieren k\u00f6nnen, aus denen Sie Variationen erstellen k\u00f6nnen. Das bedeutet, dass Sie weniger Zeit f\u00fcr das Brainstorming \u00fcber Varianten und Alternativen aufwenden m\u00fcssen, da Ihnen eine Bibliothek mit KI-generierten Ideen zur Verf\u00fcgung steht. <\/p>\n\n\n\n

Unabh\u00e4ngig davon, ob Sie \u00dcberschriften, CTA-Texte, Produktbeschreibungen oder andere Texte auf Ihrer Website optimieren m\u00f6chten, Sie k\u00f6nnen schnell Alternativen generieren und diese entweder direkt einsetzen oder im Vergleich zu Ihrem Originaltext testen, beides ohne die Hilfe von Entwicklern. So oder so, durch die Automatisierung dieses Aspekts des Experimentierens<\/a> k\u00f6nnen Sie Ihr CRO-Programm<\/a> effizienter und flexibler gestalten. <\/p>\n\n\n\n

Wenn Sie den Visual Editor<\/a> von VWO \u00f6ffnen und auf einen beliebigen Textabschnitt klicken, finden Sie im Dropdown-Men\u00fc die Option „Varianten vorschlagen“. Wenn Sie darauf klicken, wird eine Reihe von KI-gesteuerten Textvorschl\u00e4gen (basierend auf dem vorhandenen Text) angezeigt, aus denen Sie w\u00e4hlen k\u00f6nnen.<\/p>\n\n\n\n

\n