ChatGPT befolgt nicht die Anweisungen

[Azghul0815]

Da ist es etwas besser, aber es werden trotzdem , wenn auch weniger falsche Zuordnungen getroffen

Wenn dennoch 50 bis 80% der Gruppierung korrekt sind, dann ists doch schon was...

100% zu erreichen wird nicht möglich sein.
Also was ist schneller?
1000 Anfragen und dann von Hand überprüfen oder gleich 1000 anfragen richtig einordnen?

 

[valovalo]

Ich arbeite in einem kleinen Verkehrsunternehmen und nutze ChatGPT für Unternehmen.

Ich habe ca.1000 Anfrage weitergeleitet bekommen, welche ich mit Hilfe der KI kategorisieren soll.
Es gibt 8 Kategorien, wo die ca.1000 Anfragen (2-3 Sätze/Anfrage) eingeordnet werden sollen.

Ja, KI ist nicht gleich KI, es gibt "bessere" und "schlechtere" Modelle Deine gleiche Anfrage in einem anderen LLM, funktioniert tadellos. In meinem Fall hab ich den Promt in Gemini probiert. Und das hat dann das verllorene Vertrauen in "sonstiges" einsortiert.

Leider hab ich das nicht als PDF exportieren können, daher der Link zum Chat.

https://gemini.google.com/share/db76069c8a30

Grüße
Olav

 

[Wo bin ich hier]

daher der Link zum Chat.

Und dein Problem, dass du dich verlaufen hast soll dort mit auftauchen (mit vermutlich privaten Adressangaben)?

Ich hab mich verlaufen, wie komme ich nun nach Hause.

 

[Muki003]

Ja, KI ist nicht gleich KI, es gibt "bessere" und "schlechtere" Modelle Deine gleiche Anfrage in einem anderen LLM, funktioniert tadellos. In meinem Fall hab ich den Promt in Gemini probiert. Und das hat dann das verllorene Vertrauen in "sonstiges" einsortiert.

Leider hab ich das nicht als PDF exportieren können, daher der Link zum Chat.

https://gemini.google.com/share/db76069c8a30

Grüße
Olav

wenn ich es einzeln reinschreibe funktioniert es. Nur bei größeren Mengen scheint es nach Key-Wörtern zu suchen

 

[valovalo]

Und dein Problem, dass du dich verlaufen hast soll dort mit auftauchen (mit vermutlich privaten Adressangaben)?

Viel Spaß mit dem Besuch an einer Adresse wo ich mal vor 50 Jahren als Kind lebte :-) Aber Berlin ist immer eine Reise Wert :-)

 

[braindamage10k]

Das Modell tut, was du von ihm verlangst, und versteht es halt trotzdem falsch.
In deinem Beispiel versteht das Modell halt nicht, dass das "Vertrauen" kein Gegenstand ist, den man in Bahn und Bus "verliert".

Als langjähriger Pendler muss ich da vehement widersprechen!

Man kann sehr wohl das Vertrauen in die Bahn in der Bahn verlieren.

 

[Schwachkopp]

Da ist es etwas besser, aber es werden trotzdem , wenn auch weniger falsche Zuordnungen getroffen

Wenn Du von den Anfragen ein paar nimmst, die eigentlich eine eindeutige Zuordnung zuließen, beobachtest Du das Problem weiterhin? Klingt für mich nach einer Form von "Laziness" und sowas habe ich bei vergleichbaren Aufgabentypen bereits beobachtet. Das scheint immer noch eine der Schwachstellen von LLMs zu sein. Ich glaube nicht, dass man hier allein durch besseres Prompting weiterkommt, sondern nur mit organisatorische Maßnahmen (wie Aufsplitten der Aufgabe).

 

[stefan92x]

Man kann sehr wohl das Vertrauen in die Bahn in der Bahn verlieren.

Trotzdem ist es kein Gegenstand, den man im Fundbüro zurück bekommen kann

 

[Azdak]

Willst du die Nachricht in Kategorien einsortieren, oder das Anliegen des Kunden? Das sind ja zwei verschiedene Dinge. Darüber hinaus möglichst jede Nachricht in einem eigenen Request an das LLM schicken. Je mehr Nachrichten du versuchst, in einem Request zu bearbeiten, um so höher wird die Wahrscheinlichkeit, das Käse raus kommt.