Latest / KI Espresso / Kann man Berufserfahrung als KI-Skill weitergeben?

Transcript

Kann man Berufserfahrung als KI-Skill weitergeben? · KI Espresso

• 0:00
  SPEAKER_00: Enthropic hat am 22.
• 0:01
  SPEAKER_00: Oktober angekündigt, den bestehenden Standard Agent Skills an die Agentic AI Foundation zu übergeben.
• 0:07
  SPEAKER_00: Solche Skills bündeln Arbeitsanweisungen für KI.
• 0:11
  SPEAKER_00: Mich interessiert daran eine praktische Frage.
• 0:14
  SPEAKER_00: Wenn ich meinen Beruf gut kenne, welchen Teil dieser Erfahrung kann ich einer KI mitgeben, damit sie eine wiederkehrende Aufgabe nach meinen Vorgaben bearbeitet?
• 0:23
  SPEAKER_01: Zum Beispiel, worauf du zuerst achtest und wann ein Ergebnis brauchbar ist.
• 0:27
  SPEAKER_01: Das lässt sich oft genauer beschreiben, als mit der Bitte, eine Aufgabe einfach gut zu erledigen.
• 0:32
  SPEAKER_01: Aber wie wird daraus eine wiederverwendbare Anleitung?
• 0:35
  SPEAKER_01: Und was von deiner Erfahrung bleibt dabei bei dir?
• 0:38
  SPEAKER_00: Nehmen wir einen erfundenen Fall aus dem Kundendienst.
• 0:42
  SPEAKER_00: Eine Nachricht lautet: Das Gerät startet nicht, wir haben schon alles geprüft.
• 0:46
  SPEAKER_00: Eine erfahrene Kollegin soll die Anfrage für den zuständigen Fachmann vorbereiten.
• 0:50
  SPEAKER_00: Die kurze Bitte an die KI wäre, bearbeitet diese Anfrage.
• 0:54
  SPEAKER_00: Damit fehlt aber gerade das, was die Kollegin bei ihrer Arbeit berücksichtigt.
• 0:58
  SPEAKER_01: Sie könnte festhalten, welche Angaben die Übergabe braucht und welche Rückfragen wirklich nötig sind.
• 1:03
  SPEAKER_01: Welches Gerät ist gemeint?
• 1:05
  SPEAKER_01: Was genau passiert beim Staat?
• 1:06
  SPEAKER_01: Und welche Prüfungen wurden tatsächlich genannt?
• 1:09
  SPEAKER_01: Den Satz, man habe alles geprüft, würde sie als Aussage des Kunden erhalten.
• 1:13
  SPEAKER_01: Die einzelnen Prüfungen sind damit noch unbekannt.
• 1:16
  SPEAKER_00: Damit hat sie schon eine fachliche Entscheidung geschrieben.
• 1:19
  SPEAKER_00: Eine allgemeine Zusicherung reicht für diese Übergabe nicht aus.
• 1:22
  SPEAKER_00: Dazu könnte sie eine gute Beispielzusammenfassung legen und zeigen, warum darin eine Lücke offen bleibt.
• 1:28
  SPEAKER_00: So kann jemand später beurteilen, ob die KI nach der gewünschten Arbeitsweise vorgeht.
• 1:32
  SPEAKER_00: Es gibt einen Maßstab über einen ordentlich formulierten Text hinaus.
• 1:35
  SPEAKER_01: Und sie muss sich festlegen, wie weit der Auftrag reicht.
• 1:39
  SPEAKER_01: Hier bereiten wir eine Anfrage vor.
• 1:42
  SPEAKER_01: Eine Diagnose wäre zusätzliche Arbeit, für die die Angaben nicht reichen.
• 1:47
  SPEAKER_01: Unser Fall ist ausgedacht.
• 1:48
  SPEAKER_01: Wir haben keine KI damit getestet.
• 1:50
  SPEAKER_01: Er zeigt, welche Entscheidungen die Fachfrau überhaupt erst in Worte fassen muss, bevor andere sie als Anleitung verwenden können.
• 1:57
  SPEAKER_00: Wenn ich dieselben Regeln in einen ausführlichen Prompt schreibe, habe ich dann schon das Wesentliche.
• 2:03
  SPEAKER_00: Ein Agent-Skill besteht laut Spezifikation aus einer Anleitung in einem Ordner, bei Bedarf mit weiteren Materialien.
• 2:09
  SPEAKER_00: Die Dateiform macht die Regel noch nicht automatisch besser.
• 2:12
  SPEAKER_01: Ein guter Prompt kann dieselben Anweisungen enthalten.
• 2:16
  SPEAKER_01: Ein Skill verpackt sie zu wiederholten Nutzungen.
• 2:18
  SPEAKER_01: Name und Beschreibung helfen einem unterstützenden Agenten, die passende Anleitung auszuwählen.
• 2:24
  SPEAKER_01: Danach liest er die Schritte und kann weitere Materialien bei Bedarf hinzunehmen.
• 2:28
  SPEAKER_01: Der Unterschied liegt darin, wie die Anleitung bereitgestellt und geladen wird.
• 2:32
  SPEAKER_01: Ob der Agent sie richtig auswählt und umsetzt, muss man prüfen.
• 2:36
  SPEAKER_00: Dann beginnt die Arbeit sogar vor den eigentlichen Schritten.
• 2:39
  SPEAKER_00: Ich müsste sagen, für welche Aufgabe meine Anleitung gedacht ist.
• 2:42
  SPEAKER_00: Die Vorbereitung einer Serviceanfrage ist etwas anderes als eine Beschwerde über eine Rechnung.
• 2:47
  SPEAKER_00: Ein vager Name wie Kunden helfen würde diese Grenze kaum erklären.
• 2:51
  SPEAKER_01: Genau diese Abgrenzung gehört zum fachlichen Beitrag.
• 2:54
  SPEAKER_01: Wer eine Aufgabe beherrscht, kann passende und unpassende Fälle beschreiben und Beispiele für ein brauchbares Ergebnis beilegen.
• 3:01
  SPEAKER_01: Für eine einzelne Aufgabe kann der ausführliche Prompt genügen.
• 3:05
  SPEAKER_01: Interessant wird das Paket, wenn dieselbe Arbeitsweise erneut gebraucht oder an andere weitergegeben werden soll.
• 3:11
  SPEAKER_01: Dann lohnt sich eine Anleitung, deren Inhalt man gemeinsam prüfen und überarbeiten kann.
• 3:15
  SPEAKER_00: Wie würde ich prüfen, ob mein sorgfältig aufgeschriebener Ablauf auch hilft?
• 3:20
  SPEAKER_00: Anthropic empfiehlt, Skills an typischen Aufgaben zu bewerten und ihre Anwendung zu beobachten.
• 3:26
  SPEAKER_00: Ich würde dieselbe Aufgabe mit einem guten, ausführlichen Prompt vergleichen.
• 3:31
  SPEAKER_00: Beide Wege müssten dieselben fachlichen Regeln erhalten, sonst gewinnt das Paket nur gegen eine absichtlich schlechtere Anweisung.
• 3:37
  SPEAKER_01: Und das gewünschte Ergebnis solltest du vor dem Vergleich festlegen.
• 3:41
  SPEAKER_01: Bei unserer erfundenen Anfrage wäre wichtig, dass die Kundenbehauptung erhalten bleibt und die fehlenden konkreten Angaben sichtbar sind.
• 3:48
  SPEAKER_01: Ein Text kann freundlich und vollständig klingen, obwohl die KI eine Prüfung hinzuerfunden hat.
• 3:54
  SPEAKER_01: An dieser Stelle entscheidet die Fachfrau, was als Fehler zählt.
• 3:58
  SPEAKER_00: Ich würde zusätzlich einen passenden, ausreichend beschriebenen Fall nehmen, sonst lernt unsere Prüfung nur, ob die KI Rückfragen stellt.
• 4:05
  SPEAKER_00: Bei genügend Angaben sollte sie eine brauchbare Übergabe vorbereiten.
• 4:09
  SPEAKER_00: Und bei widersprüchlichen Angaben müsste der Widerspruch sichtbar bleiben.
• 4:13
  SPEAKER_00: Wir beschreiben hier einen möglichen Vergleich, kein gemessenes Ergebnis.
• 4:17
  SPEAKER_01: Findest du dabei eine missverständliche Regel, überarbeitest du die Anleitung oder ihr Beispiel.
• 4:23
  SPEAKER_01: So kann ein beobachteter Fehler in die nächste Fassung eingehen.
• 4:27
  SPEAKER_01: Dafür muss jemand die Änderung tatsächlich speichern.
• 4:29
  SPEAKER_01: Die Datei übernimmt nicht von selbst jede Erfahrung aus vergangenen Gesprächen.
• 4:33
  SPEAKER_01: Diese Pflege ist ein Teil der Arbeit, die beim Menschen bleibt.
• 4:37
  SPEAKER_00: Angenommen, eine Kollegin möchte das Paket in einem anderen KI-Werkzeug nutzen.
• 4:41
  SPEAKER_00: Die Anleitung und ihre beigefügten Beispiele kann sie mitnehmen.
• 4:44
  SPEAKER_00: Wovon hängt dann ab, ob der Ablauf dort funktioniert?
• 4:47
  SPEAKER_01: Zuerst davon, ob das Werkzeug Skills unterstützt und dieses Paket dort verfügbar ist.
• 4:52
  SPEAKER_01: Die Spezifikation kann Anforderungen an die Umgebung benennen.
• 4:56
  SPEAKER_01: Dadurch werden aber weder benötigte Programme installiert noch Zugänge eingerichtet.
• 5:00
  SPEAKER_01: Auch die Auswahl und Ausführung der Anleitungen hängen vom jeweiligen Werkzeug und Modell ab.
• 5:04
  SPEAKER_01: Derselbe Text garantiert also kein gleiches Ergebnis.
• 5:08
  SPEAKER_00: Für unseren Kundendienst hieße das: Ohne Zugriff auf die Kundendaten arbeitet die KI nur mit den Angaben, die man ihr bereitstellt.
• 5:15
  SPEAKER_00: Eine Anweisung, den Vorgang nachzuschlagen, verschafft diesen Zugriff nicht.
• 5:18
  SPEAKER_00: Die Kollegin müsste den Auftrag entsprechend begrenzen oder den nötigen Zugang gesondert einrichten lassen.
• 5:24
  SPEAKER_00: Die fachliche Arbeitsweise reiß weiter, ihre Voraussetzungen muss sie am neuen Ort prüfen.
• 5:29
  SPEAKER_01: Darum ist die angekündigte Übergabe des Standards interessant.
• 5:33
  SPEAKER_01: Sie betrifft die gemeinsame Form, in der solche Anleitungen weitergegeben werden.
• 5:37
  SPEAKER_01: Enthropic nennt unter anderem die GitHub-Organisation und die Domain des Standards.
• 5:42
  SPEAKER_01: Das ist noch kein Nachweis für die Qualität einzelner Skills.
• 5:45
  SPEAKER_01: GitHub weist ausdrücklich darauf hin, dass ein dort öffentlich verfügbares Paket nicht automatisch von GitHub geprüft wurde.
• 5:51
  SPEAKER_01: Wer fremde Anleitungen übernimmt, muss ihren Inhalt selbst beurteilen.
• 5:55
  SPEAKER_00: Wenn ich meinen eigenen Skill vorbereiten wollte, würde ich also eine wiederkehrende Aufgabe auswählen, deren Ergebnis ich selbst beurteilen kann.
• 6:04
  SPEAKER_00: Dann würde ich beim nächsten Durchgang festhalten, welche Entscheidung ich treffe und woran ich sie festmache.
• 6:10
  SPEAKER_00: Gerade die Rückfrage, die mir selbstverständlich erscheint, könnte für die Anleitung wichtig sein.
• 6:15
  SPEAKER_01: Daraus kannst du einen ersten Entwurf mit einem passenden Beispiel und einem klaren Ergebnismaßstab machen.
• 6:20
  SPEAKER_01: Lass anschließend prüfen, ob ein anderer Mensch versteht, wann er diese Anleitung anwenden soll.
• 6:26
  SPEAKER_01: Danach kannst du mit einer KI beobachten, wo sie noch zu ungenau ist.
• 6:30
  SPEAKER_01: Weitergeben lässt sich der beschriebene Teil deiner Arbeitsweise.
• 6:33
  SPEAKER_01: Welche Aufgabe sinnvoll ist, wann eine Ausnahme zählt und ob das Ergebnis fachlich reicht, musst du weiterhin verantworten.
• 6:40
  SPEAKER_01: Welche wiederkehrende Arbeit würdest du auf diese Weise zuerst erklären?