Latest / DEEPTECH DEEPTALK / Wenn KI die Welt 🌍 wirklich versteht: Die Ära der Weltmodelle
Transcript
- 0:12Ja, da sind wir wieder. Endlich wieder muss man ganz,
- 0:15ganz ehrlich sagen, mit dem Deep Tag Deep Talk in altgewohnter
- 0:19Besetzung alles um meine Wenigkeit alles noch ein
- 0:22bisschen angeschlagen, es gibt ja auch Gründe, warum wir jetzt
- 0:27euch so lange verschont haben mit uns, weil alles einfach lang
- 0:31lang lag. Aber sie hat halt ja Farbe im
- 0:34Gesicht. Ja, so langsam wieder.
- 0:37Also entschuldigt, dass wenn er mal ans Mikrofon hustet.
- 0:39Er hat gesagt, er dreht den Kopf vom Mikro weg, damit ich das
- 0:42nicht schneiden muss, das ist ja lieb, danke sag mal, was hat
- 0:47sich denn getan, also über diese lange Zeit unser Abstinenz?
- 0:52Ja, es ist ja relativ ne, die Abstinenz war jetzt nicht nicht
- 0:57ein halbes Jahr oder sowas, aber.
- 0:58Dennoch sind einige super spannende Entwicklung passiert.
- 1:02Ihr habt natürlich alle mitbekommen, Releases von den
- 1:06typischen Modellen wie Googles Modelle geminy beispielsweise,
- 1:10aber auch die Updates von Mistral, die wir auch schon
- 1:14quasi in der Community lang ersehnt hatten, das waren aber
- 1:18eher so die, ich sag mal fast no brainer, dass sich da was
- 1:21weiterentwickelt, was schon spannend war, muss man sagen,
- 1:24dass Google mit Geminy. Auch was Benchmarks angeht.
- 1:28Derart alle Staubfressen ist. Genau also also, dass die nicht
- 1:32nur zurückgekommen sind, sondern dass die sich da inzwischen da
- 1:36wirklich sehr breit machen, ist interessant.
- 1:39Was ich aber heute gerne mal erörtern würde, weil das auch
- 1:42schon ein sehr guter Abzweig in Richtung 2026 ein guter Forecast
- 1:46ist, ist das Thema Weltmodelle. Ja, was meinst du damit?
- 1:52Definiere? Ja.
- 1:54Also wir, wir alle kennen ja inzwischen Large Language
- 1:58Modelle, was ja am Ende sprachmodelle sind, die auf
- 2:02Myriaden von sprach Tokens trainiert worden sind.
- 2:06Ne, man könnte heute fast schon sagen, alles das was man
- 2:09irgendwie im Internet lesen konnte auf die Quellen, auf die
- 2:12man Zugriff hatte, das wurde zum Trainieren verwendet.
- 2:15Und die Ergebnisse sehen wir jetzt inzwischen seit JPT
- 2:18Release 3 Jahre ist es wirklich als Commodity inzwischen jedem
- 2:22bekannt, sind die Sprachmodelle ja die, die insbesondere so wie
- 2:26sie auch schon heißen, im Bereich Sprache gut sind.
- 2:28Und was man ja noch kennt, sind Relearge Visual Models.
- 2:31Absolut absolut. Da hast du recht, das ist schon
- 2:33die die zweite Klasse, ne das was man sozusagen im Bereich
- 2:37oder oder nicht zweite Klasse, sondern das ist n anderer Modus,
- 2:40ne was man im Bereich. Grafikerzeugung ne früh gesehen
- 2:44hat mit mit Journey und solchen Tools gibt es ja inzwischen auch
- 2:48was das Thema Video angeht, ne auch da haben die letzten 2
- 2:51Monate unglaubliche Sprünge wieder gezeigt, also was die
- 2:54Qualität und auch die Vielfalt von Tools angeht, die dich heute
- 2:59quasi in eine HD Szene in ein Video reinbringen.
- 3:04Wo man kaum noch irgendwelche Qualitätsunterschiede und vor
- 3:06allem nicht diese anfangen, diese diese anfänglichen Fehler
- 3:10wie zu viele Finger oder die Luft, ja die nicht gut gemacht
- 3:14worden sind, Spiegelung ja oder auch überhaupt, dass eine Szene
- 3:17wirklich konsistent bleibt, ne, dass zum Beispiel, wenn man sich
- 3:21n Spiegelbild anguckt oder sonst was, dass es bleibt so, das ist
- 3:24inzwischen, ich würde sagen, ganz gut durchgespielt, und da
- 3:27hat man diesen Modus entsprechend der visuellen
- 3:30Modelle gesehen und jetzt? Gibt es seit ungefähr 2 Jahren,
- 3:34aber sehr stark aus der wissenschaftlichen und
- 3:37naturwissenschaftlichen Community kommt ein Ansatz, der
- 3:40nennt sich Weltmodelle und das Spannende dabei ist, wir kennen
- 3:45das sozusagen, die Informatiker kennen das eigentlich aus den
- 3:48Uhrzeiten schon der Robotik, ja, wo es darum ging, wie kann ich
- 3:52eigentlich n Roboter beibringen, ja damals wirklich sehr viel,
- 3:56auch in Richtung humanoiden Robotern, wie kann ich den
- 3:59eigentlich beibringen? Die Welt so zu verstehen, dass
- 4:02sie sich darin zurechtfinden, dass sie also nicht die ganze
- 4:05Zeit stolpern, ja, dass sie zum Beispiel auf vereisten Flächen
- 4:09nicht die ganze Zeit hinfallen, sondern dass sie eigentlich ne
- 4:13ähnliche Wahrnehmung entwickeln wie wir des Raumes, ja der
- 4:17Physik, auch der Gesetzmäßigkeiten, ja sowas wie
- 4:20Gravitation und damit halt lernen zu navigieren, und das
- 4:25ist das große Robotikthema, also wie steuer ich dann
- 4:28entsprechend. Solche Art inzwischen aber auch,
- 4:31drohen Tauchroboter, bis hinzu Humanoide Roboter.
- 4:36Und da war immer das wichtige der am Ende einer Begrenzung,
- 4:42wenn man, wenn man so will, ein Large Language Model ist, ein
- 4:46Large Language Model ist in der Dimensionalität nicht begrenzt,
- 4:49sondern deswegen gibt es ja auch diese Probleme der
- 4:51Halluzination. Ich habe auf Myarden von von
- 4:54Texten gelernt und ich kann mir alles Mögliche.
- 4:57Ja, was dann? Statistisch sozusagen kommt ne,
- 5:00die die nächsten Wörter, nächsten Sätze und so weiter ich
- 5:02kann alles generieren, wenn ich jetzt n weltmodell habe, dann
- 5:05hat das Begrenzung und zwar genau die, die in der aktuellen
- 5:09in unserer physisch wahrgenommenen Welt da sind.
- 5:12Das heißt, du hast so etwas wie physikalische Grundgesetze?
- 5:15Ja, wenn ich etwas vom von der Tischkante hier stoße, das Glas,
- 5:19dann fällt es runter, wenn ich Pech hab, ja und der Boden nicht
- 5:22aus Holz ist, sondern aus aus ne und das ist n Glas, dann
- 5:25zerschellt es und bricht. Nicht ne, wir kennen das auch
- 5:28aus Game Engines, die immer realistischer geworden sind, wo
- 5:32es ja am Anfang noch so war. Ne, die Physik war da nicht
- 5:34richtig repräsentiert, ja sondern das waren alles so
- 5:37schöne Simulationen, aber am Ende war es nicht wirklich, hat
- 5:39sich nicht echt angefühlt und da hat man viel dran gearbeitet,
- 5:43das heißt das Waren eigentlich schon so Vorläufer von
- 5:45Weltmodellen. Und gesagt hat, so, wenn sich
- 5:47jetzt da in irgendeinem, in irgendeinem was weiß ich,
- 5:50Autorennen oder so was, ja wenn ich damit fahre, dann möchte
- 5:54ich, dass da die physikalischen Gesetze, die ja auch normal auf
- 5:58der Straße gelten, in dem Spiel genauso gelten.
- 6:01Das heißt, die Autos können nicht einfach nur hin und her
- 6:03fliegen, sondern ne, es gibt da Fliehkräfte, es gibt da wie
- 6:07gesagt Gravitationskräfte. Und damit wird das alles
- 6:10realistisch. So, und deswegen ist ja auch ne
- 6:13völlig klar, warum das in der ganzen Robotik auch ne Rolle
- 6:16gespielt hat, weil ne Simulation bringt wenig, wenn dann der
- 6:20Roboter, der das dann alles erlernt hat ne in in in einer
- 6:23echten Halle zum Einsatz kommt und alles über n Haufen fährt.
- 6:27Ne OK, aber heißt ja am Ende des Tages, das ist im Grunde wie ich
- 6:31es jetzt verstehe so ne Art lehrmodell ich ich hab jetzt die
- 6:33Newtonsche Physik. Die kann ich da natürlich rein
- 6:36trainieren. Ich habe jetzt die Biologie, die
- 6:39kann ich rein trainieren, ja, ich habe irgendwie erkennen
- 6:41Blumen, welche Pflanzen ich kann, ich habe verschiedene
- 6:45Informationslehrer, ob das jetzt Wetter ist.
- 6:47Ja, also zumindest die Prädiktion ist ja auch besser
- 6:50geworden, noch nicht perfekt, aber besser geworden durch KI
- 6:53Ansätze. Ich habe vielleicht historische
- 6:55Informationen, Verkehr ja, wie hat sich das letztes Jahr
- 6:59entwickelt, wie habe ich das dieses Jahr entwickelt, dann
- 7:00habe ich vielleicht noch ein Paar.
- 7:02Paar Stichpunkte, in denen halt irgendwo Kameras hängen oder
- 7:04irgendwelche Sensoren, die mir Informationen geben.
- 7:06Und diese Layer versuche ich dann vielleicht in so globales
- 7:09Weltmodell Reinfließen zu lassen, wo ich dann wiederum
- 7:12diese Information irgendwann mit Robotern teil, damit die sind in
- 7:16dieser Welt klar kommen oder ganz kurz.
- 7:20Also ich verstehe, verstehe so ein bisschen als Nadel und
- 7:22Heuhaufen, wenn ich jetzt der Roboter bin, nämlich der
- 7:24Nadelkopf und muss ich mich im Heuhaufen zurechtfinden, ja.
- 7:28So die Frage ist halt wie gut kenne ich den Neuhaufen so, umso
- 7:31besser ich den kenne, umso schneller finde ich mich da
- 7:33zurecht sonst. Inwiefern spielt da vielleicht
- 7:36auch Re Enforcement Learning aus der roboterperspektive Sinn ne
- 7:39Rolle um sich dann in dieser Welt zurechtzufinden?
- 7:42Also re Enforcement Learning ist sicherlich ein ein Thema, was ja
- 7:46auch in der Robotersteuerung ne Popularität gewonnen hat.
- 7:49Weil es ja quasi ein direktes Feedback zum Beispiel beim
- 7:52Treppensteigen eines Roboters erzeugt.
- 7:54Ne, und dann kommt es natürlich viel auf die Sensorik an, die ja
- 7:57inzwischen auch nicht mehr nur zentral gesteuert ist, sondern
- 8:00so wie bei uns am Körper auch dezentral, wo du dann einfach n
- 8:03Feedback bekommst. Oh ne, dein dein Anlauf die
- 8:05Stufe zu nehmen, der war zu flach.
- 8:07Ja ich stolper dagegen, ich brauch längere Zeit deswegen das
- 8:10reinforcement Versuch jetzt lieber Roboter mit weniger
- 8:13stolpern ja und mit kürzerer Zeit die Treppe sozusagen sauber
- 8:16hochzugehen, ne? Was spannend ist, du hattest das
- 8:19ja in in Richtung leer genannt. Du könntest auch sagen, ganz
- 8:22viele physikalische Grundgesetze regeln ja ontologien,
- 8:27begriffsverständlichkeiten alles das sind ja am Ende keine
- 8:31statistisch heuristischen Annahmen, die wir haben, sondern
- 8:35das ist ja quasi so der Fundus, ja der, den wir als als
- 8:39Zivilisation irgendwann erreicht haben in den unterschiedlichen,
- 8:42teilweise natürlich auch naturwissenschaftlichen
- 8:44Bereichen. Das heißt, wenn ich jetzt zum
- 8:46Beispiel insbesondere mich mit Robotik und und humanuinen
- 8:50Robotern befasse, ist natürlich die Physik ja die Grundgesetze
- 8:53der Physik, über die wir schon gesprochen haben, relevant.
- 8:55Wenn ich jetzt aber zum Beispiel in die Biologie schaue und mit
- 8:58einem biologischen Weltmodell neue Arzneimittel ja oder oder
- 9:03überhaupt Kandidaten dafür ermitteln will, ne.
- 9:06Wir hatten ja auch schon über solche Thema wie wie Alpha Fold
- 9:08gesprochen, dann würde man das ja nicht in ein hoch
- 9:12halluzinierendes Modell, sozusagen in ein Sprachmodell
- 9:15einbetten, sondern es ist völlig klar, dass da zwar ähnliche
- 9:19Mechanismen genutzt worden sind, dass da aber natürlich auch die,
- 9:22die die Gesetze dann entsprechend der Biologie.
- 9:25Ja, und auch der Dynamik, die in der Biologie herrscht, der
- 9:27Chemie abgebildet sind und nicht nur durch durch tiefe neuronale
- 9:32Netze gefunden werden, sondern du modellierst dann quasi so n
- 9:36ganzes Wissenschafts ne n ganzen Wissenschaftsbereich da rein und
- 9:40ne nehmen wir mal noch n. Drittes Beispiel
- 9:42Materialforschung, wenn du n neues Material entwickeln willst
- 9:45und du würdest dir das jetzt halluzinieren lassen.
- 9:47Ja, durch n Sprachmodell. Dann hättest du, weil irgendwo
- 9:51sind auch Materiale in der Sprache sozusagen beschrieben.
- 9:54Hättest du irgendwelche Konstellationen, die vielleicht
- 9:56aber den Materialeigenschaften ja, das heißt auch wieder
- 10:00physikalischen chemischen Eigenschaften und so weiter gar
- 10:03nicht adäquat werden, das heißt, das, was dann erzeugt wird aus
- 10:06so einem Modell, ist nicht gegrounded ja, und ist zwar eine
- 10:10schöne Idee, ist vielleicht kreativ, aber hat nichts mit
- 10:14unserer, sozusagen mit unseren Regeln zu tun.
- 10:17Ein Weltmodell hingegen, dass du für Materialwissenschaften
- 10:20trainiert hast, würde dir entsprechend ein Valides, ein
- 10:24ein Ergebnis geben, was du dann anhand dieser Regeln validieren
- 10:28kannst. Damit hast du eine Ground Cruise
- 10:31in der Realität deswegen weltmodell heißt nicht, dass es
- 10:34so alles die ganze Welt beinhaltet, sondern.
- 10:38Dass es wirklich am Ende in einem Wissenszweig, wo es
- 10:41gesichertes Wissen auch Kausalitäten gibt, die schon
- 10:45bewiesen sind, dass es denen standhält.
- 10:48Inwiefern können Weltmodelle mit miteinander interagieren?
- 10:52Also kann man das so ein bisschen als so eine Art Bricks
- 10:54oder puzzlesteile Teile denken, wenn man jetzt sagt, OK, die
- 10:57große ganze Welt am Ende des Tages ist ein Modell immer eine
- 10:59Vereinfachung der Realität, das heißt, man versucht sich
- 11:02sukzessive der Realität anzunähern, indem man immer mehr
- 11:05Parameter, immer mehr Informationen und so ein Modell
- 11:07aufnimmt und. Um möglichst gute spiegelbilder
- 11:09Realität zu erstellen. Also du hast, du hast n ganz
- 11:12wichtiges Thema angesprochen, wenn es höchstwahrscheinlich
- 11:15nicht das Weltmodell geben wird, ne was alle Gesetzmäßigkeiten in
- 11:19all unserer naturwissenschaftlichen
- 11:20Erkenntnissen in all unseren auch kulturellen und so weiter
- 11:23Erkenntnissen abbildet. Liegt es nahe, dass es so
- 11:26Spezialisten? Ja, man könnte jetzt sagen, das
- 11:29kennen wir ja auch, Mixed of Experts, ne, damit sind heute
- 11:31auch viele Large Language Models, ja oder Visual Models am
- 11:35Ende ne im im im Backend sozusagen gebaut, das heißt du
- 11:39hast viele unterschiedliche Modelle die auf bestimmte, auf
- 11:43bestimmte Domänen feingetuned und auch teilweise wirklich
- 11:46komplett gebaut sind, ne auch anders gebaut sind als immer nur
- 11:50über Transformer und. Und trotzdem hast du, hast du
- 11:54Kommunikationswege, so dass zum Beispiel bei einer
- 11:57entsprechenden Anfrage das richtige Modell angesteuert
- 12:01wird, dass du nicht alles über ein Modell löst, sondern dass du
- 12:05zum Beispiel, wenn du einen humanoiden Roboter hast und du
- 12:08willst dich mit dem als Mensch unterhalten, macht es trotzdem
- 12:11Sinn, ein Sprachmodell bei ihm zu verbauen, nur über das
- 12:15Sprachmodell wird er sicherlich nicht navigieren.
- 12:18Ja, weil da braucht er ein physisches Modell, ein
- 12:21physisches Weltmodell, was ihm quasi mit mit zusammen mit
- 12:25seiner Perzeption aus den Sensoren und Lernmechanismen die
- 12:29Navigation ermöglicht. Was mir jetzt vorstellen, wenn
- 12:31ich jetzt verschiedene Module habe, also verschiedene Agenten
- 12:34oder bricks oder wie auch immer man das nennen möchte, dieses
- 12:36Weltmodell, was mir jetzt als erstes in den Sinn kommt, dass
- 12:40ich irgendwann ja auch, sagen wir, so ein so ein ja, so eine
- 12:43Art. Beratendes Modell habe das heißt
- 12:46ich möchte möchte diese verschiedenen Weltmodelle
- 12:50konsultieren und dieses beratende oder orchestrierende
- 12:54Modell filtert erst mal vor, wieviel Anteil und welchen
- 12:58Anteil aus welchem Modell brauche ich für diese Antwort.
- 13:01Absolut. Also da sprichst du was an.
- 13:04Heute wird ja auch häufig über Metamodellierung schon
- 13:07gesprochen, das heißt, man könnte sich vorstellen, man hat
- 13:10so eine Schnittstelle. Ja, das ist dein Einstieg und.
- 13:13Und mit diesem Einstieg, da könntest du sagen, hm, ich würde
- 13:17gerne jetzt irgendwelche physikalischen Gleichungen oder
- 13:19was weiß ich was bearbeiten. Ne, weil ich arbeite in einem
- 13:22Unternehmen, was im Bereich Raumfahrt ist.
- 13:24Und ich bin gerade dabei irgendetwas zu enginieren und da
- 13:27interessiert mich nicht irgendwie ne halluzinierte ne
- 13:30kreativer Mist, sondern ich möchte, dass wir wirklich sehr
- 13:34uns an an diesen sozusagen requirements entlanghangeln.
- 13:38Und das Modell würde jetzt automatisch erkennen, was willst
- 13:41du eigentlich als Output haben und würde dann über solche
- 13:45Themen wie MCP ein Model Kontextprotokoll ja, das heißt
- 13:48über eine Art eine Art Kommunikationsschnittstelle
- 13:54würde die richtigen Module, die richtigen Expertensysteme, die
- 13:58richtigen Weltmodelle. Entsprechend antriggern können
- 14:01und würde dann wiederum von denen die Ergebnisse bekommen
- 14:04und die dann aber in beispielsweise natürlicher
- 14:07Sprache oder Erklärung oder ne dem, was wir ja auch jetzt aus
- 14:11aus Sprachmodellen, wo wir auch total begeistert sind, ja, weil
- 14:14wir uns quasi auch erklären lassen können und auch immer
- 14:16wieder ne einfacher erklären lassen können und was aber im
- 14:20Hintergrund passiert ist, wäre genau diese Ansprache des
- 14:23Metamodells an die unterschiedlichen anderen.
- 14:26Und das über eine Art Bussystem, ne über eine Art zentrales
- 14:30Nervensystem. In dem Falle ein Protokoll
- 14:32namens MCP beispielsweise ja oder oder, weiterentwickelte
- 14:34Protokolle, die wir sicherlich auch in 2026 sehen werden.
- 14:39Lass uns doch mal so 222 ein oder 2 Beispiele durchspielen.
- 14:43Wenn jetzt wir sind hier in Hamburg, wir haben, wir wollen
- 14:46ein Weltmodell für Hamburg bauen.
- 14:48Ja so jetzt sehe ich da verschiedene leer, da haben wir
- 14:51einmal. Ist offensichtlich so.
- 14:53Das machen eine Stadt Hause, du hast Immobilien, du hast
- 14:56Verkehr, du hast, du hast die Menschen, du hast eine Kultur,
- 15:00vielleicht gibt es auch ein kulturelles Modell, ja oder
- 15:02religiöses Modell, meinetwegen sogar das wie wie kann ich das
- 15:07verstehen? Also es gibt ja denn meinetwegen
- 15:09das Wetter in Hamburg, es gibt die geografische Lage, es gibt
- 15:11ja die die Bewaldung, Mehmet, ja, wie wie, wie geht man an so
- 15:18was ran. Also erstmal müsste man
- 15:20natürlich definieren, was für n Zweck hat das ja, also nehmen
- 15:22wir mal an wir wir wir hätten irgendwelche Stadtplanerischen
- 15:25ja Aufgaben in Hamburg und müssten jetzt sagen zum Beispiel
- 15:30es gibt viele Staus ne und wir wollen mit den Staus besser
- 15:33umgehen, weil wir haben gemerkt gerade ne das Einflusswetter ja
- 15:37und und und Vegetation oder was auch immer.
- 15:40Auch auch teilweise Zyklen aufstellen, aufstellen,
- 15:44Pendelbewegungen haben was damit zu tun.
- 15:47Dann könnte man natürlich hingehen und erstmal das
- 15:49modellieren, was ja Fakt ist. Ja also wo stehen die Ampeln,
- 15:52ne, was haben wir heute auch für Verteilung von Verkehrsströmen
- 15:57ne das wäre eher so ein dynamischer Wert, aber natürlich
- 15:59auch Sachen wo stehen überhaupt Immobilien sagtest du gerade ne
- 16:02wo stehen Gebäude ne wie ist der Zustand dieser ganzen Geschichte
- 16:06und könnte jetzt natürlich. Mehrere unterschiedliche Modelle
- 16:11bauen die dann entsprechend. Genau diese Art von von
- 16:14Faktenlage repräsentieren. Und dann könnte man natürlich da
- 16:18rein gehen und sagen, es gibt auch eine dynamische Komponente,
- 16:21da würde auch dieses Thema, was wir jetzt in 2020 25 viel
- 16:25besprochen hat, eine agentische KI eine Rolle spielen und du
- 16:28könntest eine Art auch Simulationsumgebung schaffen,
- 16:31ja, die natürlich dann auch wieder über echte Sensoren dann
- 16:35auch. Auch in die reale Welt
- 16:36abstrahlt. Und da könnte man dann quasi
- 16:39Simulationen machen, die man dann beispielsweise validiert,
- 16:42indem man sagt, so und bei der nächsten Baustellenauswahl ja,
- 16:46nehme ich genau diese Erkenntnisse, die ich jetzt über
- 16:49diese komplexe Stadt habe, ne an den unterschiedlichen
- 16:53Informationslayern. Und setze die dann nicht mehr
- 16:56unbedacht irgendwie ja als als Ausweihbaustelle ja neben
- 17:00vielleicht ein anderes Loch, was gerade gegraben worden ist,
- 17:04sondern ich lasse mir den optimalen Platz mal
- 17:08durchspielen. Im Grunde ist es so.
- 17:10Ich bin jetzt Stadtplaner, ich interagiere mit dem Modell so,
- 17:13dann habe ich das Modell als Gesamtochestat, was wie gesagt
- 17:16ein Modell ist, was sukzessive mit der Zeit immer besser wird
- 17:20und mit zunehmender Sensorik und zunehmender Datenlage.
- 17:23Aber ich habe ein Status quo als Orchestat und ich möchte mich
- 17:26interessiert jetzt aber nur ein einziges Instrument in dem
- 17:29Orchester. Also ich will jetzt genau
- 17:30wissen, was passiert, wenn ich an der und der Stelle was
- 17:34ändere, welche Tageszeit ist da, welche Jahreszeit ist vielleicht
- 17:37wichtig, welches Wetter haben wir, welche Leute kommen da
- 17:39vorbei und so weiter das ist ja ein relativ komplexes System am
- 17:42Ende des Tages, was da antwortet absolut und mir, der möglichst
- 17:46on Point eine Empfehlung ausgibt und sagt, ja, vielleicht macht
- 17:49das Sinn, 300 Meter weiter zu gehen an den an der an der
- 17:52Stelle. Genau deswegen wäre es wichtig,
- 17:54dass man das nicht statisch macht.
- 17:55Ne, es gibt ja schon viele Stadtmodelle, die statisch sind,
- 17:58ja wo du dir sozusagen durch die unterschiedlichen, wo du dich
- 18:01durch die unterschiedlichen Informationsschichten klicken
- 18:04kannst. Ja und sagen kannst, jetzt zeig
- 18:05mir mal alle Bäume an oder sowas ne oder zeig mir mal alle Ampeln
- 18:08an, zeig mir mal alle Kreuzungen an, das ist sehr statisch und
- 18:12wenn man das dann versucht auch mit mit alten
- 18:15Simulationswerkzeugen ne irgendwie zusammenzubauen, ja da
- 18:19gibt es so so so viele bekannte Methoden die.
- 18:22Dann stößt man ziemlich schnell an Komplexitätsgrenzen mit
- 18:26Weltmodellen. Die haben viele von denen
- 18:29inzwischen ne dynamische Komponente, das heißt, du kannst
- 18:32sagen, Status quo heute sieht so aus, ja, und sage mir bitte, wie
- 18:36es jetzt aussehen würde, wenn ich dieses Baustellenschild
- 18:39wirklich an diese Ecke stelle. Trotzdem ist es noch eine
- 18:43simulierte Annahme. Ja, aber schon mit den richtigen
- 18:46sozusagen Requirements mit der richtigen Physik dahinter und
- 18:49deswegen wäre jetzt das interessante dann diese versuche
- 18:54dann wirklich in der echten Welt zu validieren, das heißt, ich
- 18:57würde mir das erstmal simulieren lassen mit diesen Weltmodellen,
- 18:59die hochkomplex ne aus unterschiedlichen
- 19:01Modellbausteinen bestehen. Ja und und trotzdem Dynamik
- 19:05abbilden können. Würde dann dieses Schild da
- 19:07wirklich mal einmal so aufstellen und einmal 10 Meter
- 19:09weiter und würde mir angucken, wie reagiert denn die echte Welt
- 19:13darauf und könnte dann natürlich Deltas feststellen und sagen,
- 19:17Guck mal, das Modell hat das schon ziemlich genau
- 19:19vorhergesagt. Ja und und sozusagen
- 19:22durchgespielt oder nein, das Delta ist groß, ich muss das
- 19:25wiederum als Feedback in das Modell reingeben, weil ich zum
- 19:29Beispiel bestimmte Parameter doch nicht modelliert hatte, ja
- 19:32oder einfach? Bestimmte Parameter da drin
- 19:35sind, die sich heute nicht nach festen Regeln oder auch
- 19:38dynamischen Regeln einfach modellieren lassen.
- 19:41Mal ganz provokant gefragt, ist das nicht das, was man
- 19:44ursprünglich mal mit einem digitalen Zwilling erreichen
- 19:46wollte? Also es geht in die gleiche
- 19:49Richtung, wobei digitale Zwillinge wirklich ziemlich
- 19:52datenseitig genannt, gedacht worden sind und sehr statisch
- 19:56waren. Ne, ein digitaler Zwilling einer
- 19:58Brücke hatte den das Ausmaß der Brücke im dreidimensionalen Raum
- 20:02ne alles OK hatte irgendwie Materialien hatte dahinter ne
- 20:08unterschiedliche Bilder auch von Rissen oder so, das war aber
- 20:11nicht wirklich ein physikalisches Modell der
- 20:13Brücke. Ja, wo ich fast bis auf auf
- 20:17einer atomaren Ebene das ganze Gebilde Brücke, ja das aus
- 20:22unterschiedlichen Materialien besteht und sonst was wirklich
- 20:25per se modelliert habe. Wenn ich das aber habe, dann
- 20:29kann ich nicht nur ne immer wieder von Drohnen ja Bilder
- 20:33machen von den Rissen und die dem digitalen Zwilling dann
- 20:35hinzufügen. Ja, dass du dann da so eine
- 20:37ganze Abfolge hast, sondern ich kann diese Art von von auch, das
- 20:42sind ja am Ende physikalische Ermüdungszustände, die zu Rissen
- 20:45führen, die kann ich eigentlich vorher sehen.
- 20:50Genau das ist dann im Grunde so ein Predictive ins Thema, also
- 20:54im Grunde andersrum gesagt, ist das, was dieses Weltmodell
- 20:58bietet, eigentlich das, was ein digitaler Zwilling haben will.
- 21:02So also ich fand im Grunde eine quasi perfekte, zumindest
- 21:06aufgrund meiner Datenlage und meiner Information eine quasi
- 21:10perfekte Aussage machen. Umso besser man also perfekt ist
- 21:13natürlich schwierig, aber du versuchst ja von diesen
- 21:18Laborbedingungen da irgendwie wegzukommen, indem du halt
- 21:20Umwelteinflüsse und alles Mögliche mit Einkalkulierst und
- 21:23das dann punktuell simulierst. In Zukunft wird es dann
- 21:26irgendwie sein, dass ein Oberbaudirektor sagt, dass dann
- 21:28und dann und da. Ich möchte die Verkehrsecke
- 21:30simuliert haben. Mit dem und dem Gebäude hier hab
- 21:32ich die CAD Daten, macht mal und wie wird das denn wahrscheinlich
- 21:36aussehen unter der unter dem Know how was ich heute hab?
- 21:39Ja, also du, du könntest also ich bin mir ziemlich sicher,
- 21:42dass gerade solche Weltmodelle für auch digitale Zwillinge
- 21:45extrem interessant sind, weil du könntest dann, wenn du
- 21:48eigentlich nur immer retrospektiv gemerkt hast, oh
- 21:51und die Rissausbreitung war so und so und ließ sich nicht so
- 21:54wirklich erklären, ne anhand des digitalen Zwillings.
- 21:57Könntest du jetzt mit dem Weltmodell anfangen, wirklich
- 21:59tiefe Ursachensuche zu machen und zu sagen okay, dann gib mir
- 22:03doch mal ein Baumuster, wo diese Art von Riss nicht mehr entsteht
- 22:08und könntest dann die nächste Brücke, die du baust, genau nach
- 22:11diesem Muster bauen und hast dann hoffentlich entsprechend
- 22:14diese Art von von von Failia nicht mehr.
- 22:18Ja, aber vielleicht noch mal einen weiter gedacht.
- 22:19Wenn du sagst okay, ich habe jetzt meinetwegen eine Bewaldung
- 22:22oder so, die ansteht und ich simuliere jetzt mal.
- 22:26Verschiedene Bewaldungstypen und dann sehe ich auf einmal auch
- 22:29welche dann dann schieb ich auf eine Zeitachse, sehe ich dann
- 22:32auch schon welche, welche Viecher sich da, also welche
- 22:34Tiere sich ansiedeln und was auch immer ne und welche
- 22:36Konsequenzen das wiederum hat, also dass man wesentlich weiter
- 22:39das ganze Thema denken kann und wenn du das jetzt mal wie gesagt
- 22:43hat, sich digitale Zwilling würde ja gerne im Bereich Supply
- 22:45Chain, insbesondere bei Beratung diesem Thema.
- 22:48Ist mal sehr sehr punktuell und das heißt, das würde sich da in
- 22:51so ein so ein Weltmodell ja doch vergleichsweise einfach, wenn
- 22:54ich jetzt praktisch die Datenströme hab, das was man in
- 22:56der Vergangenheit recht, beratungs und zeitintensiv
- 22:59gemacht hat, mehr oder weniger ja auflösen, als wenn ich einmal
- 23:03praktisch die die Parameter und die Daten hab, dann kann ich das
- 23:06ja quasi durchsimulieren. Also das ist das Versprechen,
- 23:09ne. Natürlich haben wir heute in dem
- 23:11Maße keine, keine ne, also wenn man sich anschaut auch wie viele
- 23:17Weltmodelle man bräuchte dafür ne in den unterschiedlichen
- 23:20Disziplinen in den unterschiedlichen Ausprägungen,
- 23:22wenn man das hat, dann ist es genau was du sagst das das wäre
- 23:25ein ein ein sehr wichtiges Werkzeug auch für die ganzen
- 23:28Challenges, die wir ja zum Beispiel auch hier am Standort
- 23:30haben, ne wir haben viel Altbestand, wir haben viel
- 23:33Legacy, auch Technologie. Ja, die dem Hafen ja auch
- 23:36unfassbar gut gedient hat, die aber nicht von heute auf morgen
- 23:39einfach mal so zurückgebaut oder erneuert werden kann.
- 23:42Und das sind teilweise Ausmaße, wo ein ein Simulator ja FEM
- 23:47Simulation kennt man noch ne so mit Biegebalken und solchen
- 23:50Sachen wo das einfach nicht da reinpasst.
- 23:53Und da ist man dringend auf der Suche.
- 23:56Nach nach entweder du baust die Stadt noch mal nach ja und da
- 23:59kannst du daran simulieren, was natürlich unrealistisch ist.
- 24:01Oder du gehst natürlich viel stärker in solche Modelle rein,
- 24:04ne nur stand heute ist es entwickelt sich viel so aus
- 24:08wissenschaftlichen Domain heraus ne so gerade Material und
- 24:11Biotech ne und Life Science gibt es wirklich erste total
- 24:16spannende Ansätze dafür, es ist aber noch nicht so, dass man
- 24:19sagen kann, so man hat jetzt ne so so ne Art Baukasten.
- 24:24Und kann sich genau das, was man jetzt zum Beispiel bräuchte, mal
- 24:26eben so Zusammenklicken. Noch nicht also.
- 24:29Ich sehe da gerade noch so ein 2 Ebenen, die vielleicht ganz
- 24:32spannend sein könnte. Einmal so was ich natürlich
- 24:34schwierig simulieren lässt, ist zum Beispiel eine politische
- 24:37Ebene. Ja.
- 24:38Ne, wie sind das eigentlich bei Regierungswechseln kann ich ja
- 24:41nur Annahmen treffen, aber das lässt sich ja wahrscheinlich
- 24:44schwierig in so einem Weltmodell simulieren.
- 24:46Sicherlich lässt sich das simulieren, wenn man denn
- 24:48Annahmen trifft, aber dass diese Annahmen entsprechend
- 24:50eintreffen, ist ja immer noch mal.
- 24:52Ne hohe Unwahrscheinlichkeit drin.
- 24:54Also da gibt es dann von Biss. Absolut.
- 24:55Also je rationaler das ist ne desto mehr würde man auch von
- 24:59Weltmodell sprechen, ne weil Weltmodelle unterscheiden sich
- 25:03wie gesagt ne als Beispiel auch von Sprachmodellen in Sprache,
- 25:06Sprache ist super subjektiv, das ist nur ne Projektion, das heißt
- 25:10wenn ich zum Beispiel, ich sag mal kulturelle Aspekte oder so
- 25:13etwas simulieren würde, würde ich fast eher zu einem
- 25:15Sprachmodell greifen, ja weil das hat eigentlich aus allen
- 25:19möglichen Kulturen die Daten gesehen gesammelt.
- 25:22Als in ein Weltmodell, weil Weltmodelle sind eigentlich sehr
- 25:26gut parametrisierbar und sehr gut auch von der Kausalität her,
- 25:30die ja immer ansonsten super schwierig sind.
- 25:32Ja ne Kausalität auch von politischen Entscheidungen oder
- 25:35sonst was. Du triffst irgendwann so viele
- 25:37Annahmen, dass das höchst subjektiv ist und du 1000
- 25:40Meinungen hast. Ja, ob eine ein Glas, ja wenn
- 25:43das Runtergeworfen wird, runterfällt.
- 25:45Da gibt es einen kausalen Zusammenhang mit physikalischen
- 25:47Grundgesetzen, da braucht man nicht drüber streiten.
- 25:49Also es ist eher faktenbasiert. Alles was, was praktisch
- 25:52determinierbar ist, was belegbar ist, was praktisch.
- 25:55Genau. Und die zweite Ebene, die ich da
- 25:56sehe, die da vielleicht noch ganz spannend ist, wo wir ja,
- 25:59sagen wir, sukzessive mehr Daten gewinnen, sind jetzt zum
- 26:02Beispiel auf Quantenebene. Ja, das ist jetzt ein Thema, was
- 26:05uns noch eine Grundlagenforschung hängt oder
- 26:07auf der anderen Seite astronomische Themen, Größe des
- 26:09Universum, Expansion und so weiter und sofort, also einmal
- 26:12einer ganz kleinen, ganz großen Ebene, wo wir selber noch große
- 26:15Informationslücken haben, lässt sich das ja wahrscheinlich nur
- 26:19in dem Rahmen simulieren, der praktisch durch unser Wissen
- 26:22abgebildet ist. Absolut.
- 26:24Und da, das ist eigentlich n schönes Beispiel, weil da wissen
- 26:28wir ne, das ist ja auch ein Teilbereich der oder oder oder
- 26:32eine Erkenntnis der Forschung ist ja, dass man immer mehr
- 26:34weiß, was man nicht weiß, auch ne nicht nur was man weiß,
- 26:36sondern gerade was man nicht weiß, wo es also noch weiße
- 26:38Flecken gibt. Und natürlich gibt es, wenn man
- 26:41in diese Richtung geht, gerade im Bereich Quantencomputing,
- 26:44Quantenkommunikation, Quantenmaterialien.
- 26:47Materialien noch unfassbar viel. Unfassbar viel
- 26:49Forschungsleistung zu tun. Auf der anderen Seite ist das
- 26:53ein Ansatzpunkt, auch mal über diese moderne Art der
- 26:57Modellierung nachzudenken, also genau, was du ja im Kopf hattest
- 27:00in Richtung Weltmodelle, dass man nicht versucht, die Probleme
- 27:04zu klein zu schneiden. Sondern dass man wirklich
- 27:08versucht, die Erkenntnisse da natürlich am besten weltweit,
- 27:12die es dann in einem Bereich gibt, in solche Modelle
- 27:14reinzugeben ne um sie operabler zu machen und nicht zu
- 27:19Domainspezifisch zu klein darzustellen, wo man dann am
- 27:22Ende dann doch viele andere Instrumente, beispielsweise aus
- 27:25der Statistik oder aus der Mathematik, Physik und so weiter
- 27:27dann ne sich sozusagen behilft, um dann um dann sehr, sehr spitz
- 27:32und scharf in einem Bereich unterwegs zu sein und.
- 27:35Deswegen kommen diese Weltmodelle auch, muss man
- 27:37sagen, weltweit viel aus der naturwissenschaftlichen
- 27:41Forschung by the Way, auch aus dem Klimaforschungsbereich ja,
- 27:44wo wir auch viele Unbekannten haben, ne viele dynamische
- 27:47Prozesse, die heute einfach nicht berechenbar sind und
- 27:49trotzdem, wo man darüber nachdenkt, könnte man nicht
- 27:52sozusagen die alten Paradigmen, wo es ne für jedes noch so
- 27:55kleine Unterproblem, ja n riesen Zoo von Werkzeugen gab, kann man
- 28:00das nicht mal versuchen in in in Richtung dieser Weltmodelle zu
- 28:04entwickeln. Das heißt, auf der einen Seite
- 28:05könnte man, sieht man, ein gewisses Innovationspotenzial,
- 28:08wenn man jetzt verschiedene Domains punktuell vielleicht mal
- 28:10zusammenbringt, wo wo aktuell einfach Forschungsbedarf
- 28:14besteht, aber trotzdem eine gute Datenlage in der jeweiligen
- 28:17Domain ist. Aber an der Schnittfläche nicht
- 28:18unbedingt so viel, wo es dann ein bisschen kritischer wird,
- 28:21wahrscheinlich die ganzen Edge Cases, wo man jetzt in der Tiefe
- 28:24noch nicht ganz genau weiß warum wie was ist.
- 28:27Ja, also. Generell gibt es, glaube ich
- 28:31viele Möglichkeiten, wo man domainübergreifendes lernen
- 28:34ermöglicht. Ne, es gibt dafür ja auch in der
- 28:36KI durchaus Ansätze wie Transfer Learning und so weiter nicht
- 28:40zuletzt hat man ja auch die Transformer Architektur, ne die
- 28:43die ja in Chat GPD unter anderem steckt.
- 28:46Inzwischen in viele andere Problembereiche auch reingegeben
- 28:49ne, sei es proteinfaltung, da nicht genau mit der gleichen
- 28:53Architektur, aber schon mit Bausteinen dann gearbeitet und
- 28:56ich glaube je mehr weltmodelle wir haben werden, ne die die
- 28:59natürlich nicht am Anfang alles umfassen werden.
- 29:02Desto mehr wird man auch lernen, wie man solche Art von
- 29:04Weltmodelle A erstmal grundsätzlich initiiert und wie
- 29:08man das hattest. Du auch als Thema ganz am Anfang
- 29:10unter anderem Re Enforcement Learning, aber auch andere Lern
- 29:14feedbackschleifen nutzt um die dann sozusagen auch
- 29:17automatisiert besser machen zu lassen.
- 29:20Weil wenn ich einmal diese Modellierung Modellierung habe,
- 29:23ja, und dann diesen in Anführungsstrichen auch
- 29:25geschützten Simulationsraum, dann kann man natürlich die
- 29:28Parameter, die man vorher quasi da reingegeben hat, auch mit
- 29:31Hilfe von von, von, von Automatismen dazu bringen, dass
- 29:35das Modell sich selbstständig auch erweitern kann.
- 29:38Das heißt, wenn ich nachher alle möglichen mir zugänglichen Daten
- 29:42habe und praktisch, ich könnte ein komplexes Weltmodell
- 29:46unserer. Unserer kognitiv wahrgenommenen
- 29:49Welt erstellen ja, und das Weltwissen im Grunde in diesem
- 29:53Weltmodell speichern, hinterlegen und im Grunde
- 29:56punktuell dann abrufbar Simulierbar vorhersehbar, dann
- 30:01dann dann bereitstellen, ne. Das bringt ja vielleicht die
- 30:05ganze metaverse Diskussion noch mal ein bisschen darauf nach
- 30:08vorne. Ne, also gerade.
- 30:09Absolut ne, weil weil die metaverse Diskussion ist ja
- 30:13sowieso durch Gaming ne und durch viel auch
- 30:16Simulationsumgebung im im im sozusagen virtuellen Raum ist ja
- 30:20auch am Leben gehalten worden und je besser ich genau diese
- 30:25Phänomene modellieren kann, ne. Desto mehr und und solche Art
- 30:30von Modellen zur Verfügung habe, desto mehr macht ja auch ein
- 30:33metaverse Sinn, weil das dann ein Raum ist, um auch weiter
- 30:37diese diese diese Modelle zum Beispiel zu validieren, nicht
- 30:40nur zu nutzen, sondern selber validieren zu lassen.
- 30:44Also diese Test druns machen zu lassen und ich glaube das ist,
- 30:49deswegen werden ja auch diese Modelle, es gibt einen großen
- 30:53Streit ja von KI LAN zu dem Thema.
- 30:57Kommen oder vielleicht nicht n großen Streit, aber es gibt da
- 30:59so n Diskurs. Es gibt so so Enthusiasten die
- 31:03Sagen mit LLMS erreicht man AGI ne nicht ASI aber AGI Art of the
- 31:08General Intelligence und viele Verfechter sind eigentlich dabei
- 31:11zu sagen, Nein, nur Sprachmodelle die wie gesagt
- 31:14rein subjektiv eigentlich nur unsere Projektionsmaschinen
- 31:17sind, ja die die die Kausalität, Dynamik und so weiter nicht
- 31:21kennen und die auch kein Grounding haben.
- 31:24Die werden, damit wird man schon ne ganz viel Prozesse und ganz
- 31:28viel kognitive Fähigkeiten durch Reasoning und so weiter ne.
- 31:30Also wir freuen uns ja alle darüber wird man damit
- 31:33mindestens gleich ziehen wie mit mit Menschlichen sozusagen
- 31:37Tätigkeiten, aber wenn man wirklich in Richtung AGI kommen
- 31:41will, dann braucht man genau diese Komponente der Weltmodelle
- 31:44und. Das wäre zum Beispiel auch so,
- 31:47so, so eine, der der Wetten, die ich hätte, dass genau dieses
- 31:51Thema zusammen mit agentenbasierten Workflows, die
- 31:55ja jetzt schon Mixed of Experts und ununterschiedliche Modelle
- 31:58ansprechen können, dass wir darüber in 2026 viel reden
- 32:01werden, weil da momentan die ganze Welt dran forscht.
- 32:05Ja, spannend. Dann können wir so ein
- 32:06Weltmodell können wir ja mal so eine Welt simulieren, wo es
- 32:09keine KI gibt, das finden bestimmt viele Absatz 2026
- 32:12spannend, die jetzt gerade reduziert werden in ihren
- 32:15Firmen. Vor allem dann immer noch
- 32:18häkelkurse hat und so einen Spaß.
- 32:20Ja gucken wir mal, hat Spaß gemacht jetzt mal absolut
- 32:23Schuster, insofern schön, dass ihr eingeschaltet habt und wir
- 32:27hören uns ganz bald wieder, ihr habt uns da gefunden, wo ihr uns
- 32:29gefunden habt und könnt es gerne teilen und wenn ihr glaubt, dass
- 32:32jemand bei uns mal reinhören sollte, freuen uns sehr alles
- 32:34klar, bis dann. Egal.