WISSNOX_
Benchmarks

KI-Modell verweigert Dokument-Analyse - Test bei 3 Anbietern

wissnox@ai:~$ cat news_1

› Wir haben einen Kontexttest für KI-Modelle vorbereitet: ein Dokument mit versteckten Informationen, Fragen dazu und die Prüfung, wie viele das Modell findet.

wissnox@ai:~$ cat news_2

› Das Ergebnis war null, also nahmen wir zunächst an, das Modell habe ein schwaches Gedächtnis.

wissnox@ai:~$ cat news_3

› Nach einem Blick in die rohe API-Antwort stellte sich heraus, dass das Modell kein einziges Wort gelesen hatte - die Eingabe wurde von der Moderation abgelehnt und kam mit content_filter sowie native_finish_reason: refusal zurück.

wissnox@ai:~$ cat news_4

› Fazit in einem Absatz Null Treffer in einem Gedächtnistest sind nicht immer ein Beweis für kurzen Kontext.

wissnox@ai:~$ open --full
Vollständig lesen

KI-Modell verweigert Dokument-Analyse - Test bei 3 Anbietern

Artikel auf wissnox.de öffnen