Britisches Ministerium für Wirtschaft und Handel (Department for Business and Trade)
Test von Microsoft 365 Copilot mit 1.000 Beschäftigten
Copilot-Test im britischen Handelsministerium sparte Beschäftigten teilweise Zeit, lieferte aber keinen Beleg für höhere Produktivität
Ausgangslage
Vor einer breiten Beschaffung wollte das Ministerium belegen, ob ein universell einsetzbarer KI-Assistent Staatsbedienstete beim täglichen Schreiben, Zusammenfassen und bei Besprechungsaufgaben unterstützen würde.
Vorgehen
Das Ministerium stellte 1.000 Beschäftigten von Oktober bis Dezember 2024 Lizenzen für Microsoft 365 Copilot zur Verfügung. Etwa 70 % nahmen freiwillig teil, 30 % wurden zufällig ausgewählt. Die Evaluation nutzte Nutzungsdaten, Tagebuchstudien, Befragungen und Interviews sowie eine Kontrollgruppe zum Vergleich.
Kennzahlen
Erkenntnis
Die meisten Nutzer berichteten von einer gewissen Zeitersparnis, vor allem beim Schreiben. Das Ministerium konnte jedoch nicht nachweisen, dass dadurch mehr Arbeit erledigt wurde. Produktivität war kein Hauptziel des Tests gewesen, weshalb dazu nur wenige Daten erhoben wurden.
Kategorien
- Größe
- Großunternehmen
- Branche
- Öffentlicher Sektor
- Unternehmensfunktion
- Interne Abläufe und Wissensmanagement
- Innovationsart
- Prozessinnovation
- KI-Technologie
- Generative KI
- Einführung
- Standardwerkzeug oder Plattform
- Nachweis
- Angabe des Unternehmens
Quellen
Quellenzusammenfassungen
Civil Service World berichtete über die Evaluation des Ministeriums zu 1.000 Copilot-Lizenzen, die über drei Monate genutzt wurden. Die meisten Nutzer sparten etwas Zeit, überwiegend bei schriftlichen Aufgaben; Terminplanung und Bilderzeugung dauerten dagegen länger. Die Evaluation fand keinen Beleg dafür, dass die Zeitersparnis die Produktivität erhöhte; Nutzer berichteten zudem von Halluzinationen.
The Register berichtete für denselben Test über eine Zufriedenheitsquote von 72 % und durchschnittlich 1,14 Copilot-Aktionen pro Tag. E-Mail-Zusammenfassungen gingen schneller, Excel-Analysen waren dagegen langsamer und ungenauer. Die Bewertung ergab keine eindeutigen Belege für Produktivitätssteigerungen; Produktivität war kein zentrales Ziel gewesen.
Ausführliche Angaben finden Sie in den Originalquellen.