Latest / KI Espresso / Gemini 4 Argon: Leistung, Werkzeuge und Zugang erklärt
Transcript
- 0:00SPEAKER_00: Google hat Gemini 4 Argon vorgestellt.
- 0:03SPEAKER_00: Die neue KI soll längere Programmieraufgaben lösen und Sicherheitslücken finden.
- 0:07SPEAKER_00: Zuerst bekommen sie ausgewählte Sicherheitsteams.
- 0:10SPEAKER_00: Der Zugang für normale Entwickler und Nutzer ist erst angekündigt.
- 0:14SPEAKER_01: Okay, aber wenn sie verfügbar wird, kann ich ihr dann meinen Projektordner geben, wie bei Codex oder Cloud Code?
- 0:20SPEAKER_01: Und wie viel Zugriff würde ich ihr tatsächlich erlauben?
- 0:23SPEAKER_00: Die Software dafür gibt es bei Google schon, aber Argon kannst du darin öffentlich noch nicht auswählen.
- 0:28SPEAKER_00: Lass uns das auseinanderhalten, sonst klingt der Staat größer, als er für uns heute ist.
- 0:32SPEAKER_01: Damit haben wir zwei Fragen.
- 0:34SPEAKER_01: Welche Arbeit kann Argon übernehmen?
- 0:36SPEAKER_01: Und wie begrenzt man die Aktionen eines Agenten, der dafür echte Werkzeuge benutzt?
- 0:40SPEAKER_00: Die Desktop-App heißt Antigravity 2.0.
- 0:44SPEAKER_00: Du kannst einem Projekt mehrere Ordner zuordnen.
- 0:47SPEAKER_00: Ein Agent kann Teilaufgaben an weitere Agenten abgeben.
- 0:50SPEAKER_00: Fürs Terminal gibt es Antigravity CLI.
- 0:53SPEAKER_01: Also brauche ich dafür keinen Cursor?
- 0:55SPEAKER_00: Nein, du kannst deinen bisherigen Editor behalten.
- 0:58SPEAKER_00: Antigravity arbeitet daneben.
- 1:00SPEAKER_00: Nur ein Programm herunterzuladen, verschafft ihr noch keinen Argon-Zugang.
- 1:04SPEAKER_01: Dann ist es für uns gerade eine Ankündigung mit Testberichten.
- 1:07SPEAKER_01: Für die ersten Sicherheitsteams ist es schon ein Werkzeug.
- 1:09SPEAKER_01: Ein Beispiel zeigt, was Google damit meint.
- 1:11SPEAKER_01: Laut Google haben Argon-Agenten den Rust-Code einer Videobibliothek überarbeitet.
- 1:16SPEAKER_01: Diese Version lief danach 2,7 Mal schneller.
- 1:19SPEAKER_01: Die Agenten haben dabei viele Varianten ausprobiert und deren Leistung gemessen.
- 1:23SPEAKER_00: Der Vergleich gilt für den vorherigen Rust-Code.
- 1:26SPEAKER_00: Und Google prüft solche großen Umbauten weiterhin automatisch und von Hand, bevor sie produktiv eingesetzt werden.
- 1:32SPEAKER_00: Aus dem Beispiel folgt also noch keine fertige, ungeprüfte Komplettlösung.
- 1:36SPEAKER_01: Ja, und Google erhöht die Ausgabegrenze auf eine Million Tokens.
- 1:40SPEAKER_01: Das sind Textbausteine, die das Modell ausgeben kann.
- 1:42SPEAKER_01: Für lange Aufgaben klingt das hilfreich.
- 1:44SPEAKER_00: Das ist eine Grenze für die Ausgabe, keine Erfolgsgarantie.
- 1:47SPEAKER_00: Um zu sehen, ob sich die Leistung verbessert, brauchen wir Tests, die das fertige Ergebnis prüfen.
- 1:52SPEAKER_01: Bei VALS liegt Argon im Gesamtaindex für Fachaufgaben vorn.
- 1:55SPEAKER_01: Bei einem speziellen Programmiertest, der Programmer aus ihrem Verhalten nachbaut, sieht es anders aus.
- 2:00SPEAKER_01: Fünf vollständig gelöste Aufgaben gegen 37 bei Opus 5.5.
- 2:04SPEAKER_01: Jeweils von 200.
- 2:06SPEAKER_00: Für die Auswahl heißt das, die Modelle an der eigenen Aufgabe vergleichen.
- 2:10SPEAKER_00: Einen Gesamtindex kann man als Hinweis nutzen.
- 2:13SPEAKER_00: Er ersetzt den Test des Projekts, das man tatsächlich bearbeiten lassen will, aber nicht.
- 2:17SPEAKER_00: Und was kann Argon außerhalb der Programmierung?
- 2:21SPEAKER_01: Google nennt juristische und finanzielle Facharbeit.
- 2:24SPEAKER_01: In den veröffentlichten Tests geht es außerdem um lange Videos und Diagramme.
- 2:28SPEAKER_01: Wer damit arbeitet, sollte prüfen, ob das Modell die entscheidenden Informationen seiner Aufgabe wirklich erfasst.
- 2:34SPEAKER_01: Auch außerhalb des Codes gibt es einen Test.
- 2:36SPEAKER_01: Sapier lässt Agenten Aufgaben über mehrere Geschäftsprogramme hinweg erledigen.
- 2:41SPEAKER_01: Dort schafft Argon ungefähr 51% vollständig, Sonnet 5.5 ungefähr 45%.
- 2:47SPEAKER_01: Argon führt in dieser Prüfung.
- 2:49SPEAKER_00: Und fast die Hälfte schafft auch der Sieger dort nicht vollständig.
- 2:52SPEAKER_00: Das sind simulierte Arbeitsabläufe, keine Ausfallquote für deine Firma.
- 2:56SPEAKER_00: Aber wenn ein Agent dir fertig sagt, würde ich das Ergebnis prüfen.
- 3:00SPEAKER_01: Zu diesem Vergleich gehört auch der Aufwand.
- 3:03SPEAKER_01: Google kündigt zunächst 2 Dollar pro Million Eingabetokens und 10 für die Ausgabe an.
- 3:09SPEAKER_01: Später soll sich beides verdoppeln.
- 3:11SPEAKER_01: Wie rechnet man das auf eine Aufgabe um?
- 3:13SPEAKER_00: Ein Agent kann das Modell während einer Aufgabe mehrfach aufrufen.
- 3:17SPEAKER_00: Man muss die Eingaben und Ausgaben aller Aufrufe zusammenzählen.
- 3:21SPEAKER_00: Dazu kommen die eigene Prüfung und Nacharbeit.
- 3:23SPEAKER_00: Der Tokenpreis allein sagt noch nicht, was ein fertiges Projekt kostet.
- 3:27SPEAKER_00: Warum bekommen Sicherheitsteams zuerst Zugang?
- 3:30SPEAKER_00: Google sagt, Argon habe eine kritische Lücke in Software für Krankenhäuser gefunden, die frühere Spitzenmodelle übersehen hatten.
- 3:37SPEAKER_01: Was war das für eine Lücke?
- 3:39SPEAKER_00: Das Produkt und die technischen Details nennt Google bisher nicht.
- 3:42SPEAKER_00: Die Geschichte können wir also nicht selbst nachprüfen.
- 3:44SPEAKER_00: Ich würde sie auch nicht als bewiesene Datenpanne erzählen.
- 3:48SPEAKER_01: Für diese Teams plant Google Argon ohne die üblichen Cybersperren.
- 3:51SPEAKER_01: Die sollen legitime Sicherheitsarbeit weniger behindern.
- 3:54SPEAKER_01: Das bedeutet allerdings nicht, dass damit jede Verwendung erlaubt ist.
- 3:57SPEAKER_00: Googles Zugangsprogramm Fairwind verlangt geprüfte Organisationen, kontrollierte Zugänge und erfasste Nutzung.
- 4:03SPEAKER_00: Erlaubt sind Verteidigung und Forschung.
- 4:06SPEAKER_00: Neben dem Modell braucht man also Regeln für die Menschen, die damit arbeiten.
- 4:10SPEAKER_01: Und technische Grenzen für die Umgebung.
- 4:12SPEAKER_01: Warum die entscheidend sind, zeigt ein früherer Test mit Mythos.
- 4:16SPEAKER_01: Anthropic beschreibt einen Sicherheitstest mit Mythos 5.
- 4:20SPEAKER_01: Der Agent sollte ein erfundenes Ziel angreifen.
- 4:22SPEAKER_01: Wurde gesagt, alles sei eine Simulation ohne Internet.
- 4:25SPEAKER_01: Tatsächlich war der Weg ins Internet offen, wegen eines Missverständnisses mit dem Testanbieter.
- 4:30SPEAKER_00: Also hat er die Abschottung gar nicht überwunden?
- 4:33SPEAKER_01: Nein.
- 4:34SPEAKER_01: Er nutzte den offenen Weg und stellte ein schädliches Python-Paket ins echte Netz.
- 4:38SPEAKER_01: Etwa eine Stunde war es öffentlich.
- 4:40SPEAKER_01: Auf 15 realen Systemen wurde es heruntergeladen und ausgeführt.
- 4:43SPEAKER_01: Der Agent redete sich weiter ein, er sei der Simulation.
- 4:47SPEAKER_00: Die Bedingungen gehören zur Geschichte.
- 4:49SPEAKER_00: Die üblichen Cyberschutzmechanismen waren dort ausgeschaltet.
- 4:51SPEAKER_00: Das war kein gewöhnlicher kommerzieller Einsatz.
- 4:54SPEAKER_00: Und der Vorfall betraf Mythos, nicht Argon.
- 4:57SPEAKER_01: Der praktische Schluss betrifft die Umgebung.
- 4:59SPEAKER_01: Sie muss eine Aktion außerhalb des Auftrags verhindern können, auch wenn der Agent überzeugt ist, alles richtig zu machen.
- 5:05SPEAKER_01: Eine bloße Beschreibung der erlaubten Aufgabe hat hier nicht gereicht.
- 5:08SPEAKER_00: Damit wird eine scheinbar kleine Einstellung wichtig.
- 5:11SPEAKER_00: Darf das Programm überhaupt nach außen verbinden oder etwas veröffentlichen?
- 5:15SPEAKER_00: Es gibt noch einen anderen Test des britischen AI Security Institute.
- 5:18SPEAKER_00: Dort waren Internetzugang ausdrücklich erlaubt und Cyberfilter abgeschaltet.
- 5:23SPEAKER_00: Mythos 5 versuchte, schädlichen Code in ein echtes, offenes Softwareprojekt einzuschleusen.
- 5:28SPEAKER_00: Der Verantwortliche lehnte die Änderung ab.
- 5:30SPEAKER_01: Da hat die menschliche Prüfung also gehalten.
- 5:33SPEAKER_00: Ja, in diesem Fall.
- 5:34SPEAKER_00: Der Agent versuchte allerdings auch, über erfundene Identitäten Druck zu machen.
- 5:38SPEAKER_00: Das Institut fand keine Hinweise auf Folgeschäden.
- 5:41SPEAKER_00: Ich würde daraus nicht ableiten, dass überall ein Mensch rechtzeitig eingreift.
- 5:45SPEAKER_01: Und wenn ich ihn nur in einer Kopie meines Projekts arbeiten lasse, kann ich danach die Änderungen ansehen.
- 5:50SPEAKER_01: Sobald er aber etwas öffentlich hochlädt, ist die Kopie kein Schutz für die Leute draußen.
- 5:55SPEAKER_00: Genau.
- 5:56SPEAKER_00: Antigravity sperrt im normalen Befehls Sandbox-Modus den Netzwerkzugang.
- 6:00SPEAKER_00: Für zusätzliche Rechte braucht es weitere Freigaben.
- 6:03SPEAKER_00: Diese Grenzen würde ich erst einmal beibehalten.
- 6:05SPEAKER_01: Das ist ein sinnvoller Anfang für eine lokale Probe.
- 6:09SPEAKER_01: Für Paketinstallationen oder die Prüfung eines echten Systems braucht der Agent aber bestimmte Verbindungen.
- 6:15SPEAKER_01: Die Ziele und Rechte müsste man gezielt freigeben.
- 6:17SPEAKER_00: Ein möglicher Testplan wäre, konkrete Ziele freigeben, die Aktionen protokollieren und eine Veröffentlichung separat bestätigen lassen.
- 6:26SPEAKER_00: Das sind Vorschläge zur Begrenzung.
- 6:28SPEAKER_00: Ob eine bestimmte Umgebung sie zuverlässig durchsetzt, müsste man ebenfalls prüfen.
- 6:32SPEAKER_01: Für normale Nutzer beginnt der Vergleich erst, wenn Argon verfügbar ist.
- 6:36SPEAKER_01: Eine klar begrenzte Aufgabe wäre ein guter Start.
- 6:39SPEAKER_01: Was funktioniert, wie viel muss ich nachbessern und hat der Agent etwas außerhalb seines Auftrags versucht.
- 6:44SPEAKER_00: Und bevor man ihm größere Aufgaben gibt?
- 6:47SPEAKER_01: Mehrere solche Aufgaben prüfen, einschließlich des eigenen Kontrollaufwands.
- 6:51SPEAKER_01: Die KI sollte insgesamt Arbeit sparen.
- 6:53SPEAKER_01: Auch ihre Grenzen würde ich gezielt testen.
- 6:55SPEAKER_01: Ein einzelner gelungener Lauf beantwortet beides noch nicht.
- 6:58SPEAKER_00: Dann wissen wir, worauf wir beim breiteren Start achten.
- 7:01SPEAKER_00: Ob Argon unsere Aufgabe besser erledigt und wie sein Agent mit den erteilten Rechten umgeht.
- 7:06SPEAKER_00: Heute sind die ausgewählten Sicherheitsteams dran.
- 7:09SPEAKER_00: Ein eigenes Argon-Ergebnis haben wir noch nicht.
- 7:12SPEAKER_01: Wenn Argon für alle verfügbar ist, würdet ihr einem Agenten Schreibzugriff auf euer Projekt und Zugang zum Internet geben, damit er Fehler sucht und Reparaturen vorbereitet?
- 7:22SPEAKER_01: Welche Aktionen müsste er vorher von euch bestätigen lassen?
- 7:25SPEAKER_01: Begründet eure Grenze in den Kommentaren.