Neue programmierungsexperimente entwerfen.

Wenn sie mit einem A/ b-test für die PC beginnen möchten, installieren sie bitte einen abs-code für baido.

Wenn sie eine A/ b-prüfung des twitter-moduls durchführen möchten, installieren sie zuerst die grundeinstellung sd.2 und weisen die hasabtest-einstellung in der datei config auf true an, wie diese abbildung zeigt.

Es wird empfohlen, dass sie vor einem neuen experiment eine art testdesign entwerfen und die konkreten spezifikationen können aus dem dokument über das design herangezogen werden

1. Zusammenfassung

Programmierte experimente bedeuten, dass nach der statistischen eingabe Von 100 das experiment

Die anwendung dieser experimente ermöglicht die prüfung Von seitenelementen, -layouts, -prozessen Oder -funktionen.

2. Einstellen eines experiments

Klicken sie auf das portal neue experimente, um eine neue laborseite zu erreichen

Der neue A/ b-experiment besteht in vier hauptschritte: das ausfüllen grundlegender informationen, die setzung Von hobbiitätsindikatoren, das ausfüllen Von informationen in gruppen Von experimenten und die bestimmung des Oder der zielgruppe.

2,1 die grundlegenden informationen

• Art der experimente: wählen sie den experimenttyp aus. Es gibt jetzt nur noch "programmierte experimente", "visualisierungen" und "mehrdimensionale experimente". Programmierte experimente erfordern eine geringe entwickler, "mehrnetz-experimente" und "visualisierungstests" erfordern keine entwickler, um die einstellungen für das A/ b-experiment zu erfüllen.

  • Programmexperiment: nach der analyse der cloud - testflächen wird eine api-schnittstelle für ein A/ b-experiment bereitgestellt. Die suche nach programmparametern für das experiment wird gemeinsam vorgenommen Dazu ist es möglich, die farbe der knöpfe zu ändern, das seitenlayout Oder den ganzen prozess zu testen
  • Multilink-test: mehrere test am fall wurden wie beispielsweise die zwei komponenten der tallintalseiten einer offsetseite mit den komponenten a.foxtest test. Die nutzer werden mit den lokal - und regionalkomponenten der offsetkomponenten zum beispiel die hälfte der offsetseite Von a.com.com und die andere seite umgekehrt.
  • Visualisierungstests: man prüft die farbe, die größe und so weiter, sodass sich die farbe, die größe und etc. Einfach ändern lässt, wie es im visualisationsverfahren der fall ist.
• Name des experiments: name des ausgefüllten experiments
• Anmerkung: die informationen über experimente können ergänzt werden.

Er hat eine anzahl Von speed

• Ereigungsindikatoren: wählen sie ereignisse als fokus für experimente A/B, und dann werden die ausgewählten statistischen ergebnisse in dem experimentebericht herangezogen Bei der wahl Von kritisierungsindikatoren können indikatoren, die für das unternehmen Von interesse sind, indikatoren, die für die erfahrungen der nutzer Von belang sind, und indikatoren, die bewirkt haben, daß experimente zu negativem wachstum führen, auszuwählen sein

Klicken sie auf den knopf umschalten, um den wert zu berechnen

Klicken sie mit sternzeichen, um das ereignis als kernindikator einzustellen

• Kernindikator: es können indikatoren gesetzt werden, die das größte operative interesse haben. Die analyse der cloud wird verwendet, um die ergebnisse des experiments zu errechnen, indem sie konkret definiert, welche messgröße statistisch verwendet wird und daraus schließen lässt, ob das experiment beendet werden kann Oder nicht.

Es wird darauf geachtet, dass die referenzgrößen, die ein wissenschaftliches maß für experimentelle ergebnisse ermöglichen, nur die werte pro einwohner, pro pro-kopf-werte und pro mittelwert stützen. In der auswahl der berechtigungsmaßstäbe wird empfohlen, dass sie ein ereignis A/ eines ereignisses mit der art B wählen, und es sieht so aus, dass für die werte A und B kein maß für die pro-kopf-zahl, pro kopf Oder pro-kopf-werte zur verfügung steht

2.3 füllt die gruppendaten aus

Die kontrollgruppe entwickelte eine neue strategie, die Von der kontrollgruppe normalerweise beschrieben wurde.

• Verteilung der traffic: wählen sie den durchsatz der testgruppe und der kontrollgruppe für die verteilung Von wasser im durchschnitt Oder manuell Bei der auswahl der manuellen freigabe muss das entsprechende durchflussverhältnis im gleichen durchflussfeld angezeigt werden

• Angaben der spalte (extraverzeichnis) : änderungen der versuchsgruppe Oder der kontrollgruppe könnten ausgefüllt werden, um die Lage im team verständlich zu machen
• Testausrüstung (ankreuzfeld) : während der erprobung kann eine gruppe Von geräten für die einrichtung hinzugefügt werden, die dann an die entsprechende gruppe angeschlossen ist, um herauszufinden, ob die gruppe eine gewünschte seitendarstellung hat In der liste der geräte

• Parameter für das experiment: es muss der parameter festgelegt werden, um das experiment zu kennzeichnen Es wurden ebenfalls testwerte für die probanden und die kontrollgruppe in dieser studie ermittelt. Bitte beachten sie die semantik. Beispielsweise kann bei einem test, bei dem ein knopf die farbe ändern kann, der als buttoncolor und die labor - BZW. Kontrollgruppe mit den gelben bedingungen und den roten bedingungen bedruckt werden.

Möglichst große räder Oder räder

• Ebene: geben sie dem experiment ein eigenes niveau und erlauben sie es, die stromexduktionen zu rechtfertigen. Geben sie wechselnde daten ein, um sicherzustellen, dass die ergebnisse realistisch sind. Eine genaue beschreibung finden sie in der liste der versuchsstufen.
• Verhältnis zwischen den klassen: der durchfluss der studie im allgemeinen wird so festgelegt, dass der noch verbleibende durchfluss im labor nicht überschritten werden darf.
• Experimentelles publikum: wählt die zielpersonen für experiment A/B aus. Sie können "zufällige durchflüsse" Oder "die popup-orientierung" wählen.

A. Zufällige durchflüsse: durchführung Von a/b-versuchen an potentiellen stationen

B. Gruppenorientierung: führe ein A/ b-experiment nur an benutzer einer untergruppe durch. Diese art der gemeinschaftsproduktion lässt sich in "gemischte gruppen" und "reguläres publikum" unterteilen. Wird ein identifizierungsfoto für eine einmalige person ausgewählt, wird eine person nach dem erstellen des experiments in einen finder geschoben und nicht aktualisiert. Wenn du eine "routineperson" auswählst, werden die ID für das experiment A/B des tages aktualisiert. Gilt es zu beachten, dass gruppen, die sich bereits in der gruppe befinden, weiter in der gruppe bleiben, auch wenn die kennung nicht innerhalb der gruppe erneuert wurde, bis das experiment abgeschlossen ist

2,5 bis code.

Nach der fertigstellung der einstellungen erhalten wir einen benutzercode, der bei forschung und entwicklung verwendet wird, um die änderungen der versuchsgruppe und der kontrollgruppe unter den entsprechenden parameter festzulegen.

3. Testkontrolle

Nachdem die weiterentwicklung und veröffentlichung abgeschlossen ist, kann mit hilfe eines geräts für die pinliste ein A/ b-experiment verfeinert werden, um festzustellen, ob die labor - und kontrollgruppe mit den erwartungen übereinstimmt

Ist ein gerät der endstufe zugewiesen, wird nach der aufnahme eines passenden geräts in die raummaterial auf eine gemischte liste gesetzt; die gruppe kann unauffindbar gemacht werden.

4. Öffnen sie das experiment

Nach der untersuchung ist der klick auf die "metro-linie" A/B eingeklemmt.

5. Siehe laborberichte

Sobald das experiment online ist, klicken sie auf den knopf anzeigen, um den bericht anzusehen

Der experimentalbericht besteht aus zwei hauptteilen, basisinformationen und ereignissequenzen.

• Grundlegende informationen: die basis einer kontrollgruppe und der versuchsgruppe.

1. Gruppe eintreten: anzahl der personen, die die gruppe betreten.
2. Anteil der personen, die in die gruppe eintreten, an der gesamtzahl der personen, die die studie betreten.
3. Kernindikator: der wert des kernindikator
4. Higgs-grad: die higgs-skala misst die geschwindigkeit der variablen, mit denen der schwerpunkt der testgruppe in unterschiedlichen gradienten gemessen wird, mit einer bestimmten wahrscheinlichkeit. In fällen der annahme einer bindung Von 95 prozent liegt die faktengrenze zwischen 10 und 20 prozent und kann so interpretiert werden, dass die kernindikatoren der studie in einer 95% -wahrscheinlichkeit gradienten zwischen 10 und 20 prozent. Die analyse der wolke misst anhand der verteilung der skala, ob die testgruppen positiv Oder negativ sind.
5. P: der statistische indikator stellt die wahrscheinlichkeit dar, dass die labor - Oder kontrollgruppe realistisch war, wenn die zugrunde liegenden annahmen nicht Anders Waren als diejenigen, mit denen die kontrollgruppe verglichen wurde, ergebnisse erzielt wurden, die extremer Waren als die in der stichprobe erhobenen ergebnisse. Je kleiner der wert der P ist, desto geringer ist die wahrscheinlichkeit, dass die primärwahrscheinlichkeit eintreten wird. Diese annahme wird in anbetracht der ergebnisse dieser geringer wahrscheinlichkeit Von grund auf verworfen, was einen starken unterschied zwischen der labor - und kontrollgruppe rechtfertigt. Wenn der p-wert nicht niedrig genug ist, muss der test fortgesetzt werden, um zu zeigen, ob die ursprüngliche hypothese stimmt. Die analyse der wolke bewertet, ob das experiment basierend auf den p-wert fortgesetzt werden soll.
6. Statistische prüfung: empfehlungen für ein experiment anhand der messskala und der werte P zu ihrer information.

• Ereigungsindikatoren: es werden zielwerte festgelegt, die während der formulierung des experiments verwendet werden und die änderungen dieser indikatoren darstellen

6. Test im untergang

Beachten sie: in jedem zweiten versuch löschen sie den quellcode, der während des A/ b-tests auf der website eingesetzt wurde, bevor sie auf cw klicken können