Kurz oder ausführlich: Bringt ein langer Prompt mehr?
Lohnt sich der lange Prompt, oder reicht im Büro eine Zeile?
Getestet: Microsoft 365 Copilot Chat, Claude
2:02 Min. ·
Das Ergebnis
In unserem Test liegt der ausführliche Prompt in beiden Tools klar vorn: im Schnitt 2,1 zu 8,1 Punkte in Copilot Chat und 2,4 zu 8,5 in Claude.
In Copilot Chat ist der ausführliche Prompt in allen 10 Aufgaben besser, in Claude in 9, eine ist gleichauf.
Fehlen die Fakten, sind beide Tools schwach, nur auf verschiedene Weise. In beiden Fällen musst du nacharbeiten.
Punkte je Aufgabe: kurzer und ausführlicher Prompt
- kurzer Prompt
- ausführlicher Prompt
| Aufgabe | kurzer Prompt | ausführlicher Prompt |
|---|---|---|
| 01 Copilot Chat: Angebot verschiebt sich | 2 | 8 |
| 02 Copilot Chat: Teams-Nachricht Raumänderung | 2 | 9 |
| 03 Copilot Chat: Zusammenfassung für die Chefin | 3 | 9 |
| 04 Copilot Chat: Stellenanzeige Azubi | 2 | 8 |
| 05 Copilot Chat: Agenda Kick-off | 2 | 7 |
| 06 Copilot Chat: Antwort auf Kundenbeschwerde | 1 | 8 |
| 07 Copilot Chat: Erklärung für Kollegen | 3 | 8 |
| 08 Copilot Chat: Social-Media-Post Messe | 1 | 8 |
| 09 Copilot Chat: Protokollnotiz kürzen | 3 | 8 |
| 10 Copilot Chat: Dankeschön ans Team | 2 | 8 |
| 11 Claude: Angebot verschiebt sich | 3 | 9 |
| 12 Claude: Teams-Nachricht Raumänderung | 2 | 9 |
| 13 Claude: Zusammenfassung für die Chefin | 3 | 10 |
| 14 Claude: Stellenanzeige Azubi | 2 | 8 |
| 15 Claude: Agenda Kick-off | 1 | 8 |
| 16 Claude: Antwort auf Kundenbeschwerde | 1 | 9 |
| 17 Claude: Erklärung für Kollegen | 3 | 8 |
| 18 Claude: Social-Media-Post Messe | 1 | 8 |
| 19 Claude: Protokollnotiz kürzen | 6 | 7 |
| 20 Claude: Dankeschön ans Team | 2 | 9 |
Je Antwort 0 bis 10 Punkte, jedes Paar blind bewertet. Ein Unterschied von 1 Punkt oder weniger gilt als gleichauf. Ein Lauf pro Prompt. Die Punkte vergleichen die Prompts, nicht die Tools.
Was wir getestet haben
Du tippst eine Zeile und hoffst, die KI weiß den Rest. Reicht das im Büro? Das wollten wir wissen.
Wir haben zehn Aufgaben aus dem Büroalltag gebaut, für die erfundene Firma Hollmeier Präzisionsventile. Jede gab es zweimal: einmal kurz, zum Beispiel „Schreib einen LinkedIn-Post über unsere Messe.“, und einmal ausführlich, mit Rolle, Ziel, Format und allen Fakten.
Den Test haben wir in zwei Tools gemacht, in Microsoft 365 Copilot Chat im Browser und in Claude. Es geht nicht darum, welches Tool besser ist, sondern um den Prompt.
Wo der Unterschied lag
In beiden Tools liegt der ausführliche Prompt in unserem Test klar vorn. Mit dem kurzen Prompt kommen die Antworten im Schnitt auf gut zwei Punkte, mit dem ausführlichen auf über acht. In Copilot Chat ist der lange Prompt in allen zehn Aufgaben besser, in Claude in neun. Eine Aufgabe ist gleichauf: die Protokollnotiz zum Kürzen, bei der der Text schon vorlag.
Fehlen die Fakten, sind beide Tools schwach, nur auf verschiedene Weise. Claude setzt meist Lücken in eckigen Klammern. Copilot Chat fragt zweimal nach und füllt sonst meist mit allgemeinem Text.
Das Beispiel: der Messe-Post
Die Messe ist erst im Frühjahr 2027, Datum und Standnummer stehen noch nicht fest. Zum kurzen Prompt schreibt Copilot Chat einen Rückblick: „Eine erfolgreiche Messe liegt hinter uns!“ Claude lässt Datum und Stand als Lücke offen: „Vom [Datum] bis [Datum] findet ihr uns in Halle [X], Stand [Nr.].“ Beide Antworten bekommen einen Punkt, mit dem ausführlichen Prompt kommen beide auf acht. In beiden Fällen musst du nacharbeiten.
Was du daraus mitnimmst
In beiden Tools gilt dasselbe: Schreib dazu, wer du bist, was du brauchst und welche Fakten gelten. Und prüf, ob in der Antwort nur deine Fakten stehen.
So haben wir getestet
Jeder Prompt lief in einem neuen Chat. Danach hat ein KI-Modell jedes Paar bewertet, ohne zu wissen, welche Antwort vom kurzen Prompt kam. Null bis zehn Punkte, gemessen am echten Bedarf und den echten Fakten. Ein Unterschied von einem Punkt oder weniger gilt als gleichauf.
Testdaten
Hier stehen alle zehn Aufgaben mit beiden Prompts, dem kurzen und dem ausführlichen, dazu alle 40 Antworten aus Copilot Chat und Claude so, wie der Prüfer sie ohne Namen gesehen hat, und jede Bewertung (Begründungen im Original auf Englisch). Die Firma Hollmeier und alle Personen und Fakten sind erfunden.
- Beide Prompts für alle zehn Aufgaben, Wort für WortAufgaben.zip
- Die 20 Antworten von Copilot Chat, kurz und ausführlichAntworten_Copilot_Chat.zip
- Die 20 Antworten von Claude, kurz und ausführlichAntworten_Claude.zip
- Bewertungsregeln, Prüfpunkte, die 20 blinden Bewertungen und das ErgebnisBewertung.zip
Die Grenzen
- Jeder Prompt lief nur ein Mal.
- Die Firma und alle Fakten sind erfunden.
- Bewertet hat ein Modell von Anthropic, dem Hersteller von Claude.
- Der Test vergleicht kurze und ausführliche Prompts, kein Ranking der Tools.