Source record
METR: Grenzen der Produktivitäts-Folgestudie
- Joel Becker, Nate Rush, Tom Cunningham, David Rein und Khalid Mahamud, METR, We are Changing our Developer Productivity Experiment Design, 24. Februar 2026; abgerufen am 20. November 2026. Abschnitte „Wider adoption“ und „Details“: zweite Untersuchung ab August 2025, 57 Entwickelnde, 143 Repositories und über 800 Aufgaben; zufällige Zuweisung nach Aufgabenauswahl. METR beschreibt selektive Teilnahme und Aufgabenauswahl, niedrigere Vergütung und erschwerte Zeitmessung bei paralleler Agentennutzung. Das Team sieht seine Messung deshalb nicht als zuverlässigen Indikator des tatsächlichen Effekts; es plant eine Änderung des Studiendesigns.