Mir ist zwar nicht klar, was der Unterschied einer Kontrollgruppe zu einer Vergleichsgruppe ist, aber gut. DAs ist nicht das Thema. Du willst, dass die Teilnehmer auf 3 verschiedene Gruppen aufgeteilt werden.

Wie da Quoten helfen sollen ist mir nicht klar. Das würde ich also auch gleich mal verwerfen.

Mein Ansatz wäre auf jeden Fall eine versteckte gleichung mit Zufallszahl. Damit werden die Teilnehmer erstmal auf die verschiedenen Gruppen zufällig verteil.

Eine Verteilung 70/20/10 ist theoretisch möglich, aber dann doch eher sehr unwahrscheinlich. Aber n=100 (oder sind 70/20/10 als % zu verstehen?) ist jetzt natürlich keine riesige Stichprobe. Ich habe da sowieso meine Zweifel ob du da signifikante Unterschiede messen kannst, denn selbst wenn die Teilnehmer gleichmässig auf die 3 Gruppen verteilt würden hättest du da dann ja n=33 oder n=34 pro Gruppe. Das finde ich schon sehr grenzwertig um Untergruppen zu vergleichen. Würde da wohl eher n=100 oder mehr pro Gruppe anstreben.

Sobald du aber auf grossen Fallzahlen kommst sollte die Gefahr einer 70/20/10 Verteilung eher unwahrscheinlich sein.

Und wenn du nicht alle sofort am Anfang einlädst und nicht alle sofort teilnehmen, dann könnte man die Zufallsverteilung ja noch etwas manuel anpassen.

Wenn du z.B. eine Gruppe voll hast, passt du einfach die Relevanz gleichung für diese Gruppe an und leitest diese Zufallszahl einfach auf die Gruppe mit den wenigsten Teilnehmern weiter.

Beispiel: Du erzeugst Zufallszahlen von 1-3.

In die Kontrollgruppe werden all die geleitet, die eine 1 ziehen, in die Experimentgruppe kommen die mit 2 und in die Vergleichgruppe die mit 3.

Relevanzgleichungen (das ist jetzt einfach so hingeschrieben, muss natürlich angepasst werden, einfach zum verstehen).

Kontrollgruppe: {zufall=1}
Experimentgruppe: {zufall=2}
Vergleichsgruppe: (zufall=3}

Nehmen wir an, nach ein paar Tagen sieht es so aus:
Kontrollgruppe: n=95
Experimentgruppe: n=70
Vergleichsgruppe: n=83

Dann passt du einfach die Relevanzgleichungen so an:

Kontrollgruppe: {zufall=0}
Experimentgruppe: {zufall=1 OR zufall=2}
Vergleichsgruppe: (zufall=3}

D.h. in die Kontrollgruppe kommt erstmal keiner mehr, denn die Zufallszahl ist ja niemals 0, sondern immer entweder 1, 2 oder 3.

Da die Experimentgruppe entwas nachhängt, gibst du der einen Booster in dem eben 2 Zufallszahlen darauf leiten. Die Vergleichsgruppe arbeitet normal weiter.

Da muss man dann halt immer mal schauen, wie es aussieht mit den Fallzahlen, ideal ist sowieso immer ein paar mehr Teilnehmer zu haben, als man eigentlich braucht (Überrekrutierung), dann kann man später auch die Qualität der Antworten noch heranziehen und "schlechte Teilnehmer" (z.b. Speeder, solche mit Mustern, komische Antworten in den offenen Fragen, etc) rauschmeissen, ohne dass man in die Bretulie kommt. so 5-10% mehr ist immer ganz gut.

Wenn du natürlich erwartest, dass innerhalb von wenigen Minuten alles voll ist, dann wird es schwierig.

Joffm hat auch mal ein "least filled bucket" System gezeigt, da muss man aber schon etwas mehr machen und das läuft vermutlich auf LS3 nicht ohne ein Plugin und das kannste auf der Uni-Installation vergessen.

Joffms Tutorial 4 über Gleichungen und Zufall ist sicher eine gute Quelle der Inspiration.

forums.limesurvey.org/forum/german-forum...-gleichungen,-zufall

Da beschreibt er auch meinen Ansatz mit der manuellen Anpassung der Zufallszahl je nach dem wie voll eine Gruppe ist.

Und ja, da muss man öfter mal reinschauen, es ist kein absoluter Selbstläufer.

Aber, zum einen wirst du vermutlich aus Neugier sowieso öfter mal schauen wie es denn läuft, zum anderen ist vermutlich nicht zu erwarten, dass dich die Teilnehmer überrennen. Dann ist das sowieso ein Luxusproblem und du kannst einfach ein paar mehr reinlassen. Grössere Fallzahl ist immer gut, es sei denn man muss sie teuer bezahlen. Aber das Sampling ist bei manchen Uni-Umfragen sowieso manchmal etwas "fragwürdig", je nachdem wie man die Leute rekrutiert und was man so an Budget hat.

Und wenn man viele Leute einlädt, dann halt nicht alle auf einmal einladen, sondern in Wellen. Ist sowieso immer gut erstmal einen Softlaunch zu machen und zu schauen, was so passiert. Wenn die Daten gut aussehen, dann weiter einladen. Und da kann man dann solche neuen Einladungswellen auch immer ganz gut nutzen, um die Gleichung anzupassen und damit die Zuteilung zu den Gruppen zu steuern.

Hallo,
wie @holch schon erwähnte, findest Du dies alles in meinem Tutorial.
Von Deiner Idee der "zyklischen" Zuweisung über ein "least filled" Verfahren  bis zur einfachen Anpassung der Zufallszahl-Gleichung (ohne .
Darin wird auch die Schwäche jedes Verfahrens angesprochen.

Wie ist es überhaupt?
Werden die Versuchspersonen irgendwie bezahlt?
Wenn nicht, lass die Umfrage einfach mit einfachem Zufallsverfahren laufen, bis alle Gruppen gefüllt sind.
@holch hat die "Overquota" ja schon angesprochen.
Es gibt ja immer ein paar Hanseln, die - ich sage es vorsichtig - die Umfrage nicht ganz ernsthaft beantworten (Speeder, Justifier, Happy Clicker, usw.)
Die müssen ja bei der Qualitätskontrolle entfernt werden.
Und sollten es weitere übererfüllte Gruppen geben, schmeiß diese per Zufall raus.

Joffm

Hallo Holch,
hallo Joffm,

danke für eure wirklich ausführlichen (und wahnsinnig schnellen) Antworten! 
Insbesondere die Idee der Overqutoa für große Gruppen ist interessante Möglichkeit für die Sicherstellung relativ gleichmäßiger Gruppen bei größeren Zahlen. Danke dafür! 

Ja, die Beschränkungen seitens der Uni sind leider bei fast allen Anwendungen so ein Thema - well, you need to work with what you got.

Danke auch für den Hinweis auf das Untertutorial zu Zufall

Beste Grüße,
Ben

Naja, Beschränkungen seitens der Uni sind ja hier kein Thema.

Alles, was beschrieben wurde, ist ja per ExpressionScript zu realisieren.

Joffm 

Erst einmal herzlichen Dank für den Verweis auf das richtige Tutorial zum Thema Zufall. Das hat mich wirklich weiter gebracht.

@Joffm das bezog sich tatsächlich nur auf die erwähnten Plugins

Nun bin ich allerdings auf eine Hürde gestoßen, die ich durch ausprobieren (und Chat-GPT ) lösen konnte. Ich poste meine Lösung hier einfach mal, falls es andere auch interessiert.

Initiales Problem:
Die genutzte Relevanzgleichung führte leider nicht zur Anzeige der nachfolgenden Fragegruppe in der Umfragevorschau.

Meine Frage mit dem Code eqZufall kommt zu Beginn der Umfrage (Fragetyp Textanzeige; nicht versteckt)

• Fragefeld: {if(is_empty(eqZufall),1,eqZufall)}
  • Ich habe hier "1" als Testwert gesetzt. Entweder kann später das rand(x,y)-Verfahren, oder das im Tutorial beschriebene Verfahren mittels  {SAVEDID-x*floor((SAVEDID-1)/x)} nutzen.
  • Das Fragefeld gibt mir in der Umfrage brav eine "1" aus.

Die nächste Fragegruppe wurde die Relevanzgleichung "eqZufall==1", dennoch wurde sie nicht angezeigt. 

Lösung
Der Fragetyp für {if(is_empty(eqZufall),1,eqZufall)} musste auf "Gleichung" gestellt werden. Im Nachhinein beim erneuten Lesen des Tutorials völlig trivial.. Schließlich handelt 1.3. sogar von "Die Frage vom Typ „Gleichung“" 

 

Hallo ihr Lieben,

ich bin ein ganzes Stück weitergekommen, jetzt hänge ich jedoch wieder und bin mit meinem Latein am Ende.

Ich versuche die von joffm dargestellte Methode via SAVEDID zu nutzen.

Nach etlichen Problemen zu Beginn bin ich schließlich darauf gestoßen, dass ich SAVEDID als Integer behandeln muss, i.e. intval einbinden muss, um die Funktion zum laufen zu bekommen. Vorher erhielt ich nur einen NaN-Fehler.

Funktionierende Teilgleichung:
{if(is_empty(eqZufall),intval(SAVEDID)-3,eqZufall)}

Sobald ich aber nun "weiterrechnen" möchte, bricht die Gleichung.

"Workflow" fehlerhafter Gleichung 
Bspw.
{if(is_empty(eqZufall),intval(SAVEDID)-3/3,eqZufall)} --> Order of operations Fehler
{if(is_empty(eqZufall),(intval(SAVEDID)-3)/3,eqZufall)} --> Brachte keine Lösung
{if(is_empty(eqZufall),floor(intval(SAVEDID-3)/3),eqZufall)} --> gibt immer 0 aus
{if(is_empty(eqZufall),intval(SAVEDID)-3*floor((intval(SAVEDID)-1)/3), eqZufall)} --> gibt immer 3 aus.


Ich werde mir morgen Abend den Kopf weiter zerbrechen, ggf. hat ja bis dahin bereits jemand eine clevere Lösung, die ich übersehen habe.

Beste Grüße
 

Hallo,
hier hast Du etwas gründlich missverstanden.
Du willst die SAVEDID in das Konstrukt zur Erzeugung einer Zufallszahl einbauen.

Aber warum?
Wir benutzen dieses Konstrukt "if(is_empty(..." ja nur, um sicherzustellen, dass sich eine einmal erstellte Zufallszahl nicht mehr ändert.

• Denn sie würde sich ändern, wenn
• der Teilnehmer wieder in der Umfrage über diese Erzeugung hinaus zurückgeht
• die Erzeugung am Anfang einer Gruppe mit mehreren Fragen geschieht.

Unerwünschtes Ergebnis könnte sein, dass die Logik der Umfrage auf einem anderen Wert der Zufallszahl beruht als dann im Datensatz gespeichert ist.
Gut, das ist meistens kein Beinbruch, da man ja in den Daten sieht, welche Fragen beantwortet wurden - und dann im Analyse-Tool die Trennvariable schnell neu erstellen kann.
Es kann aber auch zu total unbrauchbaren Daten führen, wenn man nämlich mittels tayloring in derselben Frage verschiedene Texte aufgrund der Zufallszahl anzeigt; dann hat man später keine Handhabe mehr.

Die SAVEDID ist aber ein konstanter Wert. Da ändert sich nichts und Du kannst sie nehmen, wie sie ist.
Und wie im Tutorial steht

Heißt also: Statt der Erzeugung der Zufallszahl mittels rand(x,y) wird diese Formel eingesetzt; ansonsten ist alles analog.

Allerdings kann es sein, dass Du durch die Nicht-Assoziativität der deutschen Schrift (bei Sprache hat man noch die Betonung) den Satz falsch verstanden hast.

Kleine Nebenbemerkung.
Gerne genommenes Beispiel meines Mathe-Profs dazu:
(1 + 3) + 4 ist gleich 1 + (3 + 4) (Assoziartivitätsgesetz der Addition)
Aber:
Eine Mädchenhandelsschule ist etwas anderes als eine Mädchenhandelsschule

So auch hier:
Ich will sagen: Wir erzeugen gar keine Zufallszahl, sondern wir nehmen einfach diese Formel.

Das heißt also: In der Frage vom Typ "Gleichung" steht nichts anders als  {SAVEDID-3*floor((SAVEDID-1)/3)}

Was steht bei dir?
Bei den ersten beiden Gleichungen kann durch die Division durch 3 eine Dezimalzahl enstehen
Bei den ersten drei Gleichungen subtrahierst Du "3".
Aber es heißt

Die Subtraktion von 1 dient nur dazu , den Zyklus bis "3" laufen zu lassen (1,2,3,1,2,... statt 1,2,0,1,2,…). Ist nicht relevant für die Arbeit, aber etwas „schöner“

Dann erhältst Du eben dieses.
 
Beispiel stammt aus einer laufenden Umfrage; da war die aktuelle SAVEDID eben 101.

Jetzt aber die Frage aller Fragen:
Hast Du die Umfrage überhaupt vor dem Test aktiviert?
Ansonsten gibt es ja gar keine SAVEDID.
Dies ist ja die laufende Nummer in der Antworttabelle.

Joffm