Latest / Forschungsimpuls – Der Wissenschaftspodcast / Mit Dr. Felix Schuster über Confidential Computing, sichere KI und die ePA
Transcript
- 0:24Herzlich willkommen zu einer neuen Episode Forschungsimpuls.
- 0:27Mein Name ist Nicolai Krüger und im Forschungsimpuls sprechen wir über wissenschaftliche Themen,
- 0:31meistens rund um das Thema digitales, künstliche Intelligenz und dessen Bedeutung für unsere Gesellschaft,
- 0:38Staat, Verwaltung und Wirtschaft.
- 0:40Mein heutiger Gast ist Dr. Felix Schuster, Gründer von Edgeless Systems und Begründer des Begriffes Confidential Computing.
- 0:49Wir möchten verstehen, was dieser Begriff in der Sicherheitsforschung bedeutet,
- 0:54welche Auswirkungen das auf unser aller Leben hat und wie diese Technologie möglicherweise
- 1:01für verschiedenste Bereiche in unserem Leben und in unserer Gesellschaft schon heute eine fundamentale Rolle spielt.
- 1:09Ich wünsche viel Spaß bei meinem Gespräch mit Felix Schuster.
- 1:14Herzlich willkommen Felix im Forschungsimpuls.
- 1:17Hallo, ich freue mich sehr da zu sein.
- 1:19Ich freue mich auch sehr, denn mit dem Gespräch, muss ich tatsächlich sagen,
- 1:25habe ich so ein bisschen auch eine ganz besondere Situation im Forschungsimpuls.
- 1:29Ich freue mich, dass du als Gründer, als Forscher, auch als wissenschaftlicher,
- 1:35ja wirklich Wegbereiter hier bist.
- 1:37Insofern ist meine Aufregung und auch Vorbereitung vielleicht ein bisschen speziell in dieser Folge.
- 1:44Und wir werden auch versuchen, die verschiedenen Ebenen hier zu bedienen.
- 1:48Also einmal wissenschaftlich, einmal auch das Thema Gründung zu beleuchten
- 1:51und natürlich die Technologie, die ihr geschaffen habt.
- 1:54Wir nähern uns dem an in den nächsten Minuten.
- 1:57Aber erstmal, um dich ein bisschen kennenzulernen, Felix,
- 2:00du hast promoviert in dem Thema IT-Security im weitesten Sinne,
- 2:04so würde ich das mal vorstellen, an der Ruhr-Uni Bochum.
- 2:07Würdest du dich so ein bisschen als mit Augenzwinkern, Frage am Einstieg,
- 2:11ich glaube, jeder aus Nordrhein-Westfalen weiß, was damit gemeint ist,
- 2:14warst du so der typische Ruhr-Uni-Bochum-Kryptonerd?
- 2:18Oder wie würdest du dich in deiner studentischen Zeit da beschreiben?
- 2:23Wie müssen wir uns dich vorstellen?
- 2:28Ja, also Nerd passt auf jeden Fall schon mal.
- 2:31Krypto nicht so sehr.
- 2:32Es gibt an der Ruhr-Uni verschiedene Strömungen unter den Studenten.
- 2:36Es gibt so die Kryptoleute.
- 2:37Es gibt so die Hardware-Leute.
- 2:40Und es gibt mehr so die Hacker.
- 2:43Ich fühlte mich immer mehr zu den Hackern hingezogen und dazugehörig.
- 2:47Okay, wie äußert sich das dann?
- 2:49Also wenn man so in deine Doktorarbeit reinschaut, ist sie ja schon ziemlich formellastig.
- 2:52Also vielleicht kurze Warnung für die Shownotes.
- 2:56Ja, die Doktorarbeit, freut mich, dass du reingeschaut hast.
- 3:00Ich glaube, das haben noch nicht so viele Leute gemacht.
- 3:03Ich habe sie aber nicht von vorne bis hinten gelesen.
- 3:05Also das dann auch noch nicht.
- 3:06Kann ich uneingeschränkt empfehlen.
- 3:07Aber also ja, tatsächlich findest du auch in meiner Doktorarbeit ein großes Kapitel dazu,
- 3:17wie man besonders effizient in Systeme eindringen kann.
- 3:21Natürlich mit dem Blick drauf, wie kann man das nachher wieder verhindern.
- 3:25Aber ja, an der Ruhr-Uni gab es damals eine sehr spannende Strömung in Richtung Entwicklung neuer Angriffsverfahren
- 3:33und entsprechender Defensivverfahren.
- 3:36Und wir hatten damals auch eine studentische Gruppe namens Flux Fingers, die habe ich mitgegründet.
- 3:44Da ging es darum, dass man kompetitiv gehackt hat gegen andere Unis, teilweise aus Deutschland,
- 3:52aber auch viel aus den USA und aus China.
- 3:54Und wir waren sehr gut.
- 3:56Also wir haben auch mal gegen die großen US-Unis gewonnen und waren im Finale vor Ort in Seoul und so weiter.
- 4:04Das war toll.
- 4:06Alles sehr spannend und da gibt es auch immer noch in der Ruhr-Uni eine sehr schöne Community.
- 4:11Ja, und da ist es ja auch wirklich extrem bekannt für.
- 4:15Ich habe mich gefragt, wäre dein Lebensweg so verlaufen, wenn du woanders studiert hättest?
- 4:20Was würdest du sagen, wie viel Impact hatte jetzt die Wahl deiner Alma Mater für dich?
- 4:24Hatte schon einen sehr großen Impact.
- 4:27Ja, das wäre deutlich anders verlaufen.
- 4:30Ich komme aus der Region Ruhrgebiet, also aus der Umgebung von Bochum.
- 4:36Ich war nach der Schule aber zwei Jahre in Berlin und hatte auch überlegt, dort in der Spieleentwicklung einfach direkt zu arbeiten und ohne Studium anzufangen.
- 4:53Habe das auch kurz gemacht, habe dann aber doch nochmal mich umentschieden und bin nach Bochum gezogen und habe dann in der IT-Security studiert,
- 4:59einfach weil mich das Thema damals schon sehr interessiert hat.
- 5:02Und ja, hätte ich das nicht gemacht, dann hätte ich wahrscheinlich dort...
- 5:06Ja, hätte ich auch nicht andere Karriere genommen, definitiv.
- 5:07Ja, interessant.
- 5:09Jetzt gehen wir mal so ein bisschen vielleicht in die Begriffe, die daraus auch entstanden sind.
- 5:14Du bist ja nach der Ruhr-Uni Bochum zu Microsoft Research gegangen.
- 5:19Und ich glaube, in dieser Zeit, in dieser Periode ist dann auch aus unter anderem deinen Beiträgen eben der Begriff Confidential Computing geprägt worden.
- 5:30Ich glaube, du darfst mit Fug und Recht behaupten, dass du den mindestens mitgeprägt hast.
- 5:34Oder ja, vielleicht sogar...
- 5:36Ja,
- 5:36vielleicht sogar. ...der Erfinder davon bist.
- 5:38Ihr habt mehrere Patente dazu auch, natürlich wissenschaftliche Veröffentlichungen.
- 5:42Und was ich bei dem Thema immer so spannend finde, es gibt diese Einsatzerklärungen, so Sesamstraßen-mäßig, Confidential Computing.
- 5:49Vielleicht gleich mal deine Möglichkeit, so diese Kurzerklärung einmal kurz zu pitchen, wie du das erklärst.
- 5:55Ich finde allerdings, und das ist die Herausforderung vielleicht für diesen Podcast, die Schwierigkeit ist dann die Ebene danach.
- 6:00Denn es wird dann ganz schnell sehr, sehr technisch oder sehr mathematisch.
- 6:04Und das heißt, was wir mal versuchen...
- 6:06Wir wollen es vielleicht so diese Ebene dazwischen sozusagen für ein breites, wissenschaftlich interessiertes Publikum da uns langsam vorzutasten heute.
- 6:13Aber ja, erst mal so von dir als Mitpräger, Präger dieses Begriffs Confidential Computing.
- 6:19Was ist das? Worum geht es da?
- 6:22Ja, also erst mal, es geht darum, ein wichtiges Problem zu lösen.
- 6:28Du kennst das oder die Hörer kennen das wahrscheinlich auch.
- 6:31Man hat Daten, vielleicht persönliche Daten, vielleicht Geschäftsdaten.
- 6:36Die möchte man verarbeiten.
- 6:40Entweder in der Cloud mit Microsoft 365 oder mit ChatGPT, auch Cloud-basiert.
- 6:48Und ich glaube, da weiß jeder, naja, da muss man vielleicht drüber nachdenken, wem man genau Zugriff auf welche Daten gibt.
- 6:58Weil wenn ich Microsoft oder OpenAI beauftrage, meine Daten zu verarbeiten,
- 7:04dann muss ich die in der Regel...
- 7:07diesen Firmen im Klartext überreichen, die Daten.
- 7:10Ich kann die zwar verschüsselt dahin schicken,
- 7:13aber wenn die dann mittels KI verarbeitet werden sollen oder in eine Excel-Tabelle eingetragen werden sollen,
- 7:19dann müssen in aller Regel die Daten dort im Klartext vorliegen.
- 7:21Das heißt, am Ende muss ich darauf vertrauen, dass der Dienstanbieter sorgsam mit den Daten umgeht.
- 7:29Und das Vertrauen kann ich nicht in allen Fällen haben oder darf ich nicht haben aus gesetzlicher Richtung.
- 7:36Und das ist das Problem, das Confidential Computing angeht.
- 7:41Nämlich einfach die Fragestellung, kann ich vielleicht doch irgendwie Cloud-basierte Dienste so gestalten,
- 7:49dass ich Microsoft, OpenAI etc. beauftragen kann, meine Daten zu verarbeiten,
- 7:55aber ich meine Daten nicht preisgeben muss.
- 7:58Man könnte sagen, das ist der heilige Gral des Cloud Computings.
- 8:02Nämlich Cloud Computing oder KI.
- 8:06Ohne Reue.
- 8:07Ich kann Dienste aus der Cloud, Dienste, die nicht bei mir lokal laufen, nutzen,
- 8:13ohne dass ich einen Datenpreis geben muss.
- 8:16Das ist so mal ganz grob, was dort erreicht werden soll.
- 8:20Und ja, dann gibt es die offensichtlich nächste Frage, wie funktioniert das denn?
- 8:24Da kommen wir noch zu.
- 8:25Genau.
- 8:26Da kommen wir noch zu.
- 8:27Ich möchte gerne da noch ein bisschen noch was rausarbeiten, wo du hier schon so schön sitzt.
- 8:32Und zwar ist, glaube ich, gar nicht unbedingt allen so richtig,
- 8:38gegenwärtig, warum das mit dem Cloud-Verarbeiten von Daten ein Problem ist.
- 8:43Es denken zwar immer sofort alle bei ChatGPT, wie du das auch ja gesagt hast,
- 8:47gerade daran, dass ich jetzt nicht meine Daten zum Beispiel zu dem Trainieren eines Modells bereitstellen will.
- 8:53Es gibt aber auch die zweite große Debatte, gerade in Deutschland,
- 8:56im Sinne von dürfen wir überhaupt in die Cloud?
- 8:59Also so eine Art schon fast religiös anmutende Frage.
- 9:01Dann das Thema Souveränität, das würde ich aber mal ganz hinten anstellen für unser Gespräch noch.
- 9:06Aber was sind denn überhaupt, und vielleicht sind wir da wieder so bei der Hacking-Historie deiner Doktorarbeit auch,
- 9:12was ist denn überhaupt das Risiko, was wir hier technisch auch lösen wollen bei dem Cloud-Anbieter?
- 9:18Das ist ja eben nicht nur, dass ich meine Daten vielleicht für eben dieses Training des Modelles
- 9:22oder dass ich Microsoft vertraue, sondern was ist das Risiko,
- 9:26wenn ich bei so einem Cloud-Anbieter technisch meine Daten hinterlege?
- 9:30Ja, das ist sehr vielschichtig.
- 9:34Natürlich.
- 9:36Man muss da verschiedenen Parteien vertrauen am Ende.
- 9:40Ich kann sagen, okay, ich vertraue der Firma Microsoft oder der Firma Google,
- 9:45dass sie meine Daten sorgsam behandelt.
- 9:46Und ich glaube, in den allermeisten Fällen ist dieses Vertrauen gerechtfertigt.
- 9:52Aber selbst wenn dort nach bestem Wissen und Stand der Technik gearbeitet wird,
- 9:58habe ich natürlich immer noch Restrisiken.
- 10:01Zum Beispiel eine Beschlagnahmung von Daten,
- 10:06grund ausländischer Gesetze.
- 10:08Damals, als ich bei Microsoft war, war ein großes Thema,
- 10:11dass Daten eines EU-Bürgers nach US-Recht beschlagnahmt werden sollten
- 10:17und dann auch herausgegeben werden mussten.
- 10:19Das heißt, US-Gesetz fordert die Herausgabe bestimmter Daten.
- 10:24EU-Recht verlangt die Geheimhaltung der Daten.
- 10:28Und dann sitzt die Firma quasi zwischen allen Stügeln.
- 10:31Und das war ein Dilemma, das innerhalb von Microsoft auch für viel zurückgeht.
- 10:36Und
- 10:36das ist natürlich auch ein Thema, die sich nicht mehr so viel Kopfzerbrechen gesorgt hat.
- 10:38Weil natürlich ist eine Firma verpflichtet,
- 10:40sich gesetzeskonform zu verhalten.
- 10:43Aber wenn es natürlich zwei unterschiedliche Gesetzgebungen gibt,
- 10:47die miteinander konkurrieren,
- 10:48dann gibt es kein richtiges Verhalten mehr.
- 10:50Sondern man muss am Ende irgendwo dem einen nachgeben
- 10:54und dem anderen widersprechen.
- 10:59Das ist die gesetzliche Thematik.
- 11:03Und dann hat man natürlich immer auch das Problem,
- 11:06dass selbst wenn der Anbieter alles richtig macht,
- 11:09auf organisatorischer Ebene,
- 11:11kann natürlich auch noch ein Angreifer sich Zugang verschaffen
- 11:15zu den Systemen des Anbieters.
- 11:17Also es könnte sich jemand in die Systeme meines Cloud-Anbieters hinein hacken
- 11:23und Daten abgreifen.
- 11:25Ich denke, wenn wir an OpenAI und ChatGPT denken
- 11:29oder uns das anschauen,
- 11:31dann gibt es wenig lukrativere Ziele,
- 11:36als sich an die große Schnittstelle dranzuhängen,
- 11:40wo die Prompts der ganzen Welt reinfließen.
- 11:44Das sind dann sehr exponierte Systeme.
- 11:46Und man kann sich vorstellen,
- 11:48dass sich bestimmt Leute dort Zugang verschaffen können.
- 11:52Auf digitaler Ebene, aber vielleicht auch auf physikalischer Ebene.
- 11:55Also wenn ich dort Zugriff aufs Rechenzentrum bekomme,
- 11:58ich kann dort vielleicht hineinspazieren,
- 12:00ich kann dort vielleicht Hardware ausbauen, austauschen etc.
- 12:05Dann habe ich auch einen Zugriff.
- 12:06Das ist dann auch eine gewisse Gefahr,
- 12:07dass meine Daten abfließen können.
- 12:09Also zusammengefasst,
- 12:10es gibt viele Gründe,
- 12:13warum man Cloud-Diensten vertrauen kann.
- 12:15Aber es gibt auch viele Wege,
- 12:17wie potenziell Daten abfließen können.
- 12:19Und das ist dann in manchen Szenarien das Hindernis.
- 12:25Und wie würdest du das,
- 12:27du hast jetzt schon gerade mal das Stichwort Bürgerdaten genannt, sehen?
- 12:30Ich mache mal noch ein Beispiel,
- 12:32was ich in der Vorbereitung so ein bisschen als Mühe,
- 12:36mögliches Szenario mir ausgedacht habe.
- 12:38Wir haben ja viele IT-Dienstleister für Kommunen,
- 12:41die immer so ein paar Kommunen zum Beispiel bündeln
- 12:44und dann so ein Rechenzentrum aufbauen.
- 12:46Also im Prinzip bieten die so eine Art quasi Inhouse-Cloud an
- 12:50für vielleicht so was wie zehn Städte oder so was.
- 12:53Jetzt haben die ja auch so ein Rechenzentrum.
- 12:55Sie sind auch Cloud-Anbieter.
- 12:58Da werden ja wahrscheinlich etliche von den Angriffsvektoren,
- 13:01die du gerade genannt hast, ja immer noch greifen.
- 13:04Also da könnte ja immer noch sich jemand,
- 13:06Zugriff zu dem Rechenzentrum verschaffen,
- 13:08im Zweifelsfall was raustragen oder weitere Szenarien,
- 13:13wo ich einfach dann doch,
- 13:14auch wenn ich gar nicht in den USA oder in irgendeinem anderen Land,
- 13:17wo ich die Juristikation nicht kenne oder nicht beherrschen kann,
- 13:21wo ich ja dann doch ein Risiko habe.
- 13:23Das trifft da auch zu, oder?
- 13:24Ja, auf jeden Fall.
- 13:25Also es ist ein Trade-off.
- 13:26Wenn du einen lokalen Anbieter hast,
- 13:29dann hast du natürlich nicht die Problematik
- 13:32von gegenläufigen Gesetzgebungen.
- 13:35Das kann man ausschließen.
- 13:37Aber man hat natürlich die Problematik,
- 13:40dass dort das Sicherheitsniveau physikalisch
- 13:43und auch auf der Softwareseite nicht so hoch ist,
- 13:47generell wie bei den großen Anbietern.
- 13:49Also wenn man sich rein die üblichen Angriffsvektoren anschaut,
- 13:55dann muss man sagen,
- 13:56die Daten sind im Allgemeinen am sichersten bei den großen Anbietern.
- 14:03Aber man hat natürlich
- 14:04auch die Frage, wie man
- 14:05die Daten dann in der Regel verwendet. Das ist natürlich die Problematik der Gesetzgebung.
- 14:10Und womöglich noch weitere Problematiken.
- 14:14Ich weiß nicht genau,
- 14:15wie vielleicht wofür die Daten intern nochmal verwendet werden oder so.
- 14:19Aber wenn es mir darum geht, die Hacker draußen zu halten,
- 14:24dann würde ich sagen,
- 14:26ist es immer eine gute Idee,
- 14:28zu einem großen Anbieter zu gehen.
- 14:30Das finde ich ein schönes Zitat.
- 14:32Ein ähnliches habe ich immer mitgebracht.
- 14:35Ich sage jetzt nicht woher,
- 14:36aber aus meiner Industriekarriere von damals.
- 14:38Da war es auch so ein bisschen der große Claim.
- 14:42Was glauben wir denn, wer wir sind?
- 14:44Dass wir die Sicherheit unserer eigenen Rechenzentren besser hinkriegen
- 14:47als AWS, Google und Co.
- 14:49Ich sehe dich nicken.
- 14:51Ja, das ist so ein bisschen das Phänomen dabei.
- 14:53Es ist wirklich Hightech, die man da beherrschen muss,
- 14:55auch mit den entsprechenden Leuten, die das eben können.
- 14:58Und dann im Übrigen ja auch 24-7.
- 15:01Und also da weiß ich,
- 15:02ich weiß nicht, ob das immer so der schlauste Weg ist.
- 15:04Trotzdem haben wir diese Debatte immer wieder in Deutschland.
- 15:07Nach dem Motto, das eigene Blech im Keller ist immer das Beste.
- 15:11Aber gut, jetzt schauen wir vielleicht mal eine Stufe weiter.
- 15:14Wir werden das ja wieder gleich streifen.
- 15:16Du hast vorhin gesagt, die Daten, die in der Verarbeitung sind.
- 15:19Ja, der Begriff dafür ist,
- 15:20wenn ich mich da jetzt richtig informiert habe,
- 15:23in diesem Deep Dive-Thema sehr schön, Data in Use.
- 15:26Wir haben so diese Abgrenzung,
- 15:27dass Daten in verschiedenen Bereichen
- 15:30sozusagen der Verarbeitung anfallen.
- 15:32Also ich habe vielleicht Daten abgelegt,
- 15:34Data in REST, die liegen irgendwo auf einer Festplatte.
- 15:36Wir haben Data in Transit,
- 15:38das, was wir vielleicht haben,
- 15:39wenn wir einfach Daten transferieren zwischen verschiedenen,
- 15:42erst mal Parteien ganz allgemein gesagt,
- 15:44aber auch auf der Hardware-Seite.
- 15:45Vielleicht ist das gleich nochmal ein wichtiges Thema für dich.
- 15:48Und dann natürlich auch einfach,
- 15:50so Browser-Kommunikation kennen wir das natürlich auch.
- 15:53Aber jetzt, wo, denke ich mal,
- 15:55deine Arbeit ganz entscheidend dann auch wegbereiter war,
- 15:59ist dieses Thema Data in Use.
- 16:01Also das, was sich während der Verarbeitung
- 16:03sonst eigentlich nicht schützen konnte bisher.
- 16:06Was war da jetzt quasi im Confidential Computing die Idee,
- 16:10diese Daten halt zu schützen?
- 16:14Ja, also genau, wie du gesagt hast,
- 16:17es ist einfach und macht da schon lange Daten
- 16:20während der Speicherung zu verschlüsseln.
- 16:22Auf der Festplatte ist es einfach,
- 16:24Daten während der Übertragung zu verschlüsseln.
- 16:27Man kennt das aus dem Browser, oben links das Schloss.
- 16:31Ich gehe auf sparkasse .de und die Verbindung ist verschlüsselt.
- 16:35Hoffentlich.
- 16:35Was fehlt, ist der Schutz der Daten
- 16:37dann während der Verarbeitung.
- 16:39Wenn ich dann Daten übertragen habe,
- 16:40der Browser hat das Schloss oben, alles super.
- 16:43Aber wenn ich dann die Daten übertragen habe,
- 16:44die werden dort verarbeitet, dann sind sie ungeschützt.
- 16:50Da diese Lücke schließt man mit,
- 16:53oder kann man mit Confidential Computing schließen.
- 16:56Und die grundlegende Idee,
- 16:58die auch damals Zeit war,
- 17:00als ich in meiner Doktorarbeit war,
- 17:03ist, die Firma Intel hat damals
- 17:07in bestimmten Laptop-Prozessoren
- 17:09ein neues Feature herausgebracht.
- 17:12Und dieses Feature, die Idee war ursprünglich,
- 17:17Konsumenten daran zu hindern, DVDs zu kopieren.
- 17:21Oder Computerspiele zu kopieren.
- 17:23Du kennst das vielleicht noch,
- 17:25es gab DVDs und es gab DVD-Brenner
- 17:28und Leute haben DVDs in das eine Fach reingelegt
- 17:32und dann kam eine Kopie aus dem anderen Fach raus sozusagen.
- 17:34Ich kenne das gerade noch.
- 17:35Mein Sohn kennt das übrigens schon nicht mehr.
- 17:37Dem müsste man das jetzt sehr umfassend erklären.
- 17:40Und die Firma Intel hatte immer schon sehr pfiffige und gute Ingenieure.
- 17:44Und ich glaube, die hatten damals auch
- 17:45ein paar sehr gute wirtschaftliche Jahre.
- 17:49Und die haben sich hingesetzt und haben sich überlegt,
- 17:50okay, wie können wir dieses Problem des Raubkopierens
- 17:53und verwandter Probleme, wie können wir dem begegnen?
- 17:57Und dann haben sie das.
- 17:57Und dann haben sie so um das Jahr 2012 herum
- 18:01ihre Prozessoren mit einem Feature ausgestattet,
- 18:04das die Daten auch während der Verarbeitung
- 18:07verschlüsselt halten kann.
- 18:10Das war bahnbrechend.
- 18:14Aber es war wirklich darauf fokussiert,
- 18:16wie können wir eine Datenverarbeitung
- 18:19auf Konsumenten-Laptops oder Konsumenten-PCs
- 18:24sicherer gestalten.
- 18:26Weil wir, naja, ich als DVD-Hersteller,
- 18:30ich vertraue dem Kundengerät nicht.
- 18:32Ich vertraue nicht, dass dort nicht meine Daten,
- 18:35meine DVD wird eingelegt,
- 18:36die sind vielleicht auf der DVD verschlüsselt, die Daten.
- 18:40Aber um dann den Film abzuspielen,
- 18:43müssen sie natürlich entschlüsselt werden
- 18:44auf dem Gerät des Konsumenten.
- 18:46Klar, dann können die Daten abgegriffen werden
- 18:49und auf eine neue DVD gebrannt werden.
- 18:52Du siehst schon, das Problem ist ähnlich gestaltet,
- 18:55wie das Cloud-Programm.
- 18:56Das ist ein Problem, das ich vorhin skizziert habe.
- 18:57Also ich habe einen, in dem Fall wollte der DVD-Hersteller
- 19:01nicht dem Konsumenten-PC vertrauen
- 19:04und hat nach einer Lösung gesucht,
- 19:06die Daten dort auch während der Verarbeitung
- 19:09zu schützen und verschlüsselt zu halten.
- 19:11Und die Firma Intel hat dann damals angefangen,
- 19:15ein neues Feature einzubauen.
- 19:17Und die Prozessoren konnten dann erstmals
- 19:22Daten durchgehend auch im Arbeitsspeicher,
- 19:24während der Verarbeitung,
- 19:26verschlüsselt halten.
- 19:27Also es gab nicht den Zeitpunkt,
- 19:29dass die Daten im Klartext zu sehen waren,
- 19:32selbst für jemanden,
- 19:33der sich tief in das System reingehackt hatte.
- 19:36Selbst wenn ich dann ein Abbild des Arbeitsspeichers
- 19:39während des Abspielens des Films gezogen habe,
- 19:42habe ich trotzdem nur verschlüsselte Daten gesehen.
- 19:45Und am Ende wurden dann und werden immer noch
- 19:50die Daten innerhalb des Prozessors im Klartext verarbeitet.
- 19:55Also es ist keine Mehrheit,
- 19:56sondern der Prozessor zieht die Daten
- 19:58in seine internen Strukturen,
- 20:00x Nanometer groß,
- 20:02in seinen internen Register.
- 20:04Dort sind sie von außen nicht zugreifbar,
- 20:07außer man wendet verschiedene physikalische
- 20:10oder andere Tricks an.
- 20:12Können wir gleich mal zu sprechen.
- 20:14Aber erst mal sind die von außen nicht zugreifbar.
- 20:16Das heißt, es sieht von außen so aus,
- 20:18als würde der Prozessor auf verschüsselten Daten arbeiten,
- 20:21wohingegen er intern immer noch auf Klartextdaten arbeitet.
- 20:25Und
- 20:25das ist dann auch so, dass
- 20:26man dann auch die Daten nicht mehr Und das ist quasi dann der Kniff.
- 20:30Ich habe eine sehr hohe,
- 20:32weiterhin eine sehr hohe Ausführungsgeschwindigkeit.
- 20:34Ich kann quasi den gesamten,
- 20:35die gesamte Power des Prozessors nutzen,
- 20:37aber die Daten bleiben verschlüsselt.
- 20:41Und du hast meine Doktorarbeit angesprochen.
- 20:43Was ich da gemacht habe und auch da bei Microsoft ist,
- 20:46dass wir gesagt haben, okay,
- 20:49das ist ja ein super Verfahren,
- 20:51aber das gehört ja eigentlich in die Cloud.
- 20:53Weil damals war die Cloud auch schon gerade sehr,
- 20:57sehr im Kommen.
- 20:58Und man hat sich bei Microsoft anderswo Gedanken gemacht,
- 21:01wie den Kunden den Firmen wirklich vertrauen können
- 21:06mit sensiblen Daten.
- 21:08Und wir haben dann die ersten Systeme entwickelt,
- 21:11die dieses Konsumenten-Kopierschutz-Feature
- 21:15in die Cloud gebracht haben,
- 21:17das skalierbare in die Cloud gebracht haben.
- 21:19Und dann so ähnlich wie der DVD-Hersteller muss sein,
- 21:23muss dem Laptop des Kunden nicht mehr vertrauen,
- 21:26dass das so gebaut haben,
- 21:30der Dateneigentümer muss der Cloud von Microsoft
- 21:33nicht mehr vertrauen.
- 21:37Wenn du mir hier folgen konntest.
- 21:39Wir haben ja in der IT so einen schönen Begriff,
- 21:42der nennt sich Zero Trust.
- 21:44Ich würde das jetzt mal so übersetzen.
- 21:45Eigentlich, was du gerade erklärt hast,
- 21:47ist das doch, dass wir einfach auch kein Vertrauen mehr haben.
- 21:52Oder also, das ist ein Thema,
- 21:53ein technisches Prinzip sozusagen.
- 21:55Ein Mindset sozusagen auch.
- 21:57Ein Prinzip, wo wir sagen,
- 21:59wir haben kein Vertrauen an den Anbieter.
- 22:01Man nennt das manchmal feindliches Territorium oder wie auch immer.
- 22:03Also es wäre potenziell angreifbar.
- 22:05Und das erstreckt sich jetzt mit deiner Idee
- 22:08eben auf die Cloud selber.
- 22:10Aber auch da eine Spur tiefer auf die Infrastruktur,
- 22:14die verschiedenen Komponenten.
- 22:15Also ganz klassisch,
- 22:16da ist jetzt irgendein Serverprozessor in der Cloud.
- 22:19Also damals war es vielleicht Intel SGX
- 22:20oder heute auch.
- 22:21Ganz wichtiges Thema dann,
- 22:22wenn wir über die H100 oder Blackwell GPUs sprechen,
- 22:27also die wir eben brauchen,
- 22:28um Large Language Modelle,
- 22:29andere KI Modelle abzuspulen.
- 22:32Wir vertrauen dieser Infrastruktur erstmal nicht,
- 22:34so würde ich das übersetzen.
- 22:35Ist im Prinzip darauf Zero Trust angewendet.
- 22:38Und ich glaube,
- 22:40dann ist der nächste Schritt,
- 22:41dass man sagt,
- 22:41was deine Technologie
- 22:43oder auch die Edgeless Systems Technologie nachher schafft,
- 22:45ist dieser Begriff der Enklaven.
- 22:47Dass ich so eine gesicherte Einheit schaffe
- 22:49zwischen den verschiedenen,
- 22:51hardware Komponenten,
- 22:53CPU, RAM, GPU,
- 22:55was da vielleicht gebraucht wird
- 22:57und jetzt sage,
- 22:58die sichere ich jetzt ab.
- 22:59Kann man das so sagen?
- 23:00Ja, du hast jetzt ein paar Schlagworte genannt.
- 23:03Also der Begriff Enklave passt erstmal gut
- 23:08und wird auch im technischen Kontext verwendet.
- 23:12Also Enklave ist ein extra territoriales Gebiet,
- 23:18vielleicht in Feindesland.
- 23:20Ich glaube, so ist die Definition.
- 23:21Und so ähnlich kann man sich das auch vorstellen.
- 23:24Man erstellt quasi auf einem nicht vertrauenswürdigen System
- 23:28eine vertrauenswürdige Umgebung.
- 23:32Und man kann am Ende dann Microsoft
- 23:37oder andere, Google,
- 23:41aus dem Vertrauen herausnehmen,
- 23:44weitestgehend und seine eigene vertrauenswürdige Ausführungsumgebung
- 23:49in diesen Cloud Umgebung erstellen.
- 23:53Das ist am Ende die dann vereinfacht gesagt die Idee.
- 23:59Wie weit geht das?
- 24:00Ich habe mich in der Vorbereitung gefragt,
- 24:02brauche ich jetzt eigentlich noch,
- 24:04wir sprechen jetzt als Nicht-Juristen davon,
- 24:06brauche ich da noch einen Auftragsdatenverarbeitungsvertrag?
- 24:08Weil letztlich hat ja dann der Cloud Anbieter,
- 24:11der dort meine Daten quasi,
- 24:14nur die Infrastruktur zur Verfügung stellt,
- 24:16aber er macht ja keine Datenverarbeitung mehr
- 24:18mit meinen Daten selber,
- 24:19sondern die sind ja
- 24:19dann, die haben sich ja eben jetzt hier gesichert verschlüsselt,
- 24:21wenn ich dir jetzt zugehört habe.
- 24:24Ja, also ich bin da auch kein absoluter Experte,
- 24:28aber das ist natürlich ein Thema,
- 24:29mit dem ich mich auseinandersetze.
- 24:32Normalerweise wollen unsere Kunden
- 24:35schon noch einen AVV haben.
- 24:38Und ich glaube, das ist auch sinnvoll,
- 24:39weil man natürlich auch in so einem AVV erstmal klären kann,
- 24:43dass die Technologie wirklich zum Einsatz kommt.
- 24:49Bräuchte man jetzt wirklich diesen Vertrag?
- 24:50Weiß ich nicht so genau,
- 24:52weil am Ende,
- 24:54und das ist auch toll an der Technologie,
- 24:55muss man dort gar nicht mehr vertrauen,
- 24:57dass wir die Laufzeitverschlüsselung wirklich aktiviert haben,
- 25:02weil es gibt noch ein zweites tolles Feature,
- 25:04das habe ich bisher gar nicht benannt,
- 25:06nämlich die sogenannte Remote Attestation
- 25:08oder Fernattestierung.
- 25:10Ich kann tatsächlich dann aus der Ferne überprüfen,
- 25:14dass dort wirklich meine Enklave oder die
- 25:17Anlage, die
- 25:17ich da jetzt hier drüben habe, oder vertrauenswürdige Ausführungsumgebung
- 25:19erstellt worden ist.
- 25:21Das musst du natürlich erklären.
- 25:23Also das habt ihr euch nicht nur ausgedacht,
- 25:25sondern ihr stellt dazu, glaube ich,
- 25:26eine ganz wichtige Technologie bereit,
- 25:28um das zu überprüfen.
- 25:29Aber es braucht hier auch wieder die Hardwarehersteller,
- 25:32nicht wahr?
- 25:33Korrekt.
- 25:35Also der confidential computing fähige Prozessor kann zwei Dinge.
- 25:40Wir haben gerade schon über die Laufzeitverschlüsselung gesprochen.
- 25:43Die Daten bleiben im Arbeitsspeicher verschlüsselt.
- 25:45Das zweite, was er kann, ist,
- 25:47er kann ein Zertifikat ausstellen,
- 25:50ein kryptografisches,
- 25:51darüber, was genau für eine Umgebung er erstellt hat
- 25:55und was dort drin läuft,
- 25:57an Software vereinfacht gesagt.
- 26:00Und anhand dieses Zertifikats kann ich als Nutzer
- 26:04aus der Ferne überprüfen,
- 26:06dass dort wirklich ein Prozessor der Generation,
- 26:10die ich erwarte, läuft.
- 26:13Und ich kann überprüfen, okay, laufst
- 26:15du da, die Laufzeitverschlüsselung ist aktiviert.
- 26:17Und vielleicht sogar noch wichtiger,
- 26:20ich kann genau Bit für Bit nachvollziehen,
- 26:24welche Software dort läuft.
- 26:26Das heißt, ich kann sehen, okay,
- 26:28da läuft genau die erwartete Software.
- 26:30Das ist vielleicht ein KI-Modell vom Typ XY.
- 26:36Und das ist so konfiguriert,
- 26:38dass es meine Daten nicht fürs Training verwenden kann,
- 26:40zum Beispiel.
- 26:41Und dass es nicht mit dem Internet sprechen kann.
- 26:43Das heißt, ich kann,
- 26:44ich kann sehr feingranular, wenn ich möchte,
- 26:47und sehr konkret die Eigenschaften dieser sicheren Umgebung
- 26:53aus der Ferne überprüfen.
- 26:54Und das ist sehr, sehr mächtig.
- 26:57Und das sind die beiden Pfeiler des Confidential Computing,
- 26:59die Laufzeitverschlüsselung und die Fernattestierung.
- 27:02Und wenn ich beides zusammennehme,
- 27:03kann ich sehr sichere und sehr leistungsfähige Systeme bauen.
- 27:07So, und ich glaube,
- 27:08damit ist uns jetzt das Kunststück gelungen
- 27:10von der Einsatzerklärung,
- 27:12die zugegebenermaßen auch ein paar Sätze mehr schon,
- 27:14die wir ja waren,
- 27:15weil es ein komplexes Thema ist,
- 27:16zu ein bisschen mehr Tiefe, glaube ich, hinzukommen.
- 27:19Erstmal danke dafür.
- 27:20Ich glaube,
- 27:20jetzt haben wir so ein bisschen Überblick
- 27:22über Confidential Computing.
- 27:23Wie ist aus dieser Idee denn jetzt Edgeless Systems geworden?
- 27:27Denn das muss man vielleicht auch sagen.
- 27:29Ihr seid jetzt nicht irgendwie eine Zwei-Mann-Bude,
- 27:32die da irgendwie was vor sich hin codet.
- 27:34Und das geht nicht nur mir,
- 27:36sondern glaube ich auch all meinen Studierenden
- 27:38aus dem öffentlichen Sektor so.
- 27:39Man wird auf LinkedIn zugedonnert mit irgendwelchen Sales-Angeboten,
- 27:43so nach dem Motto,
- 27:44wir haben die super sichere KI für dich, glaub uns bitte.
- 27:47Und dann schaut man da rein und fragt sich,
- 27:49ja, was ist denn da jetzt anders?
- 27:50Ihr habt gerade, das hast du jetzt so schön ausgeführt,
- 27:53eine wirkliche Schlüsseltechnologie, Deep Tech quasi, geschaffen,
- 27:56die an der Infrastrukturstelle erstmal was ändert.
- 27:59Und daraus ist dann Edgeless Systems geworden.
- 28:01Nimm uns doch mal ganz kurz mit.
- 28:03Wie war deine Gründungsgeschichte?
- 28:06Und was macht jetzt Edgeless Systems heute?
- 28:08Das gab es ja, glaube ich,
- 28:09auch so in verschiedenen Iterationsstufen
- 28:11bis zum heutigen Produktportfolio.
- 28:14Okay.
- 28:15Da könnte ich jetzt wahrscheinlich zwei Stunden zu
- 28:18erzählen. Glaube ich gerne.
- 28:19Ich versuche es möglichst konsensiert rüberzubringen.
- 28:25Ich hatte nach vier Jahren Microsoft Research den Eindruck,
- 28:29dass ich mehr in die Anwendung muss.
- 28:33Microsoft Research war damals zumindest noch sehr akademisch.
- 28:38Wir haben uns hauptsächlich um Patente und Paper gekümmert
- 28:41und haben ab und zu mal im
- 28:44Internet, Impulse in Richtung Redmond gegeben ins Produkt.
- 28:48Ich hatte den Eindruck, dass ich weniger griechische Buchstaben
- 28:50und mehr konkrete Themen bearbeiten sollte.
- 28:55Das hätte ich mit Sicherheit auch bei Microsoft gekonnt.
- 28:59Aber ich hatte nach vier Jahren in England auch wieder Lust aufs Ruhrgebiet.
- 29:02Und meine Frau und ich, wir hatten damals auch gerade zwei kleine Kinder.
- 29:09Und wir hatten den Eindruck, okay, vielleicht ist es gar nicht schlecht,
- 29:11manchmal wieder ins Ruhrgebiet zurückzukehren.
- 29:14Und dann kamen für mich diese Themen zusammen.
- 29:22Und ich wollte gerne weiter an confidential computing arbeiten.
- 29:26Und dann kam die Idee, okay, dann könnte ich das ja in einer eigenen Firma machen.
- 29:32Weil die Technologie ist spektakulär.
- 29:35Die Cloud und KI waren damals schon extrem starke Themen.
- 29:39Das Thema Sicherheit.
- 29:41Wie kann ich meine Daten in der Cloud und bei KI schützen?
- 29:46War ähnlich stark wie heute.
- 29:49Und dann habe ich mich auf die Suche gemacht nach zum einen Co-Gründer
- 29:54und zum anderen nach Finanzierung.
- 29:59Und beides lief nicht spektakulär erfolgreich,
- 30:04aber in einem gewissen Rahmen erfolgreich.
- 30:07Ich konnte einen guten Freund von der Uni überzeugen,
- 30:10den besten Entwickler, den ich
- 30:11kenne, den ich damals kannte, seinen Job zu kündigen.
- 30:14Der war damals bei GData Antivirus in Bochum beschäftigt.
- 30:17Der Thomas ist CTO bei uns seitdem.
- 30:23Und wir haben zusammen gegründet und haben uns dann entschieden,
- 30:28dass wir erstmal eine öffentliche Förderung nehmen.
- 30:30Wir hätten auch privates Geld nehmen können.
- 30:32Wäre vielleicht sogar schlauer gewesen im Nachhinein.
- 30:34Aber wir haben so etwas wie das Exist-Stipendium genommen.
- 30:39Das sagt dir und den Hörern,
- 30:41dass du das nicht machst. Das ist eine klassische Gründerförderung für Ausgründungen aus der Uni.
- 30:47In unserem Fall war das nochmal etwas Spezielles für Security.
- 30:52Es gab so ein spezielles Programm, ähnlich wie Exist, aber für Cybersecurity.
- 30:56Und wir haben uns dann nochmal an der Ruhr-Uni anstellen lassen.
- 30:58Tatsächlich genau dafür.
- 31:00Wir waren dann ein Jahr an der Ruhr-Uni und sind dann nach dem Jahr an der Ruhr-Uni
- 31:05auch weiter mit Förderung in die eigene Firma.
- 31:09Ja und dann haben wir...
- 31:11...sukzessive angefangen.
- 31:12Wir haben hauptsächlich Technologie entwickelt.
- 31:15Wir haben ganz viel Code geschrieben.
- 31:16Wenig Vertrieb und Marketing gemacht.
- 31:18Wir hatten eine sehr große Produktvision auf technischer Seite.
- 31:26Und haben die bearbeitet und uns dann im Nachhinein überlegt,
- 31:31wer kann das eigentlich brauchen.
- 31:33Und das ist vielleicht erstmal so die ersten ein, zwei Jahre.
- 31:39Stark.
- 31:41Und so, dann war Edgeless Systems da.
- 31:43Und ich glaube, es ist wichtig zu verstehen, das was ihr heute habt, ist im Prinzip...
- 31:49Ja, ich stelle mir das jetzt mal so ein bisschen plakativ hier für den Podcast so vor.
- 31:53Einen Haken, den ich setze, wenn ich bei einem Anbieter, bei einem Cloud-Anbieter Infrastruktur einkaufe.
- 32:00Also Processing Power, GPU, ein Modell direkt irgendwo reingeben will, wie auch immer.
- 32:05Dass ich da einen Haken mache.
- 32:06Ich hätte gerne Confidential Computing.
- 32:08Muss ich mir das ungefähr so vorstellen.
- 32:09In Kurzform sozusagen.
- 32:13Leider nein.
- 32:16Also...
- 32:17Es ist komplizierter.
- 32:18Es ist ein bisschen komplizierter.
- 32:20Wir hatten mal...
- 32:25Oder lass mich anders anfangen.
- 32:29Wir entwickeln zwei Arten von Software.
- 32:34Wir entwickeln eine Plattform.
- 32:41Die gewissermaßen beliebige Anwendungen mittels Confidential Computing schützen kann.
- 32:46Die kann man auf verschiedenen Infrastrukturen laufen lassen.
- 32:49Also du könntest dir Server in deinen eigenen Keller stellen.
- 32:54Darauf kannst du unsere Confidential Computing Umgebung laufen lassen.
- 32:59Oder du kannst dir Server bei verschiedenen Cloud-Anbietern mieten.
- 33:06Wir können nicht magisch Produkte ausbauen.
- 33:08Wir können nicht einfach die Anwendung von Cloud-Anbietern beliebig Confidential machen.
- 33:11Was wir machen können ist, wir können Kubernetes-Umgebungen, also Container-Umgebungen, die Art und Weise, wie man aktuell Anwendungen zum Laufen bringt in Cloud-Umgebungen.
- 33:27Das können wir absichern.
- 33:29Wir haben eine Plattform, mit der man moderne containerisierte Anwendungen Confidential in Anführungszeichen machen kann.
- 33:36Und die läuft auf verschiedenen Umgebungen.
- 33:40Das ist das erste Produkt.
- 33:41Und das zweite Produkt ist, wir nutzen unsere eigene Plattform, um einen besonders sicheren KI-Dienst bereitzustellen.
- 33:50Und der heißt Privatemode.
- 33:53Vielleicht ein ganz kurzer Zwischenruf.
- 33:55Wir haben natürlich das Thema Kubernetes und Containerisierung hier auch schon mal behandelt mit Leonard Kugler in der Folge über sichere Software-Lieferketten.
- 34:04Leonard Kugler vom ZenDiS.
- 34:06Und da könnte man nochmal reinhören, wenn man das Thema ein bisschen genauer
- 34:08sieht. Ich lasse das mal gerade so stehen, auch mit Blick auf die Uhr sozusagen.
- 34:13Natürlich ist das ein wirkliches Deep-Tech-Thema, wo man tief rein muss.
- 34:17Dazu gehört ja auch noch so vielerlei mehr, wenn man darüber nachdenkt, welche Art von Software bringt man denn überhaupt in die Cloud.
- 34:24Ich glaube, das können jetzt Datenbanksysteme sein.
- 34:26Das können einzelne Applikationen sein.
- 34:28Das können vielleicht einzelne Berechnungsschritte einfach sein, die ich absichern möchte.
- 34:33Aber ich glaube, da kann man auch nochmal reinschauen.
- 34:35Wir verlinken das mal.
- 34:36Aber Privatemode ist, glaube ich, so ein Produkt.
- 34:38Was man tatsächlich gerade nochmal würdigen muss im Sinne von verstehen, was ist da anders?
- 34:43Weil das ist mehr, als wenn ich in ChatGPT den Haken auf nutze meine Daten nicht für Training oder Inkognito-Modus mache.
- 34:50Vielleicht können wir da nochmal ganz kurz reinschauen, weil es hat auch für den Bereich, der ja hier auch ganz fleißig mithört, öffentlicher Sektor, natürlich auch eine ganz besondere Bewandtnis mit diesem Produkt.
- 35:02Nicht wahr?
- 35:02Ja, sehr gerne.
- 35:04Ich möchte aber ganz kurz das Stichwort ZenDiS aufgreifen.
- 35:07Oh.
- 35:08Wenn du erlaubst.
- 35:09Ja, klar.
- 35:10Und ich habe auch letztens den Herrn Kugler getroffen.
- 35:12Es gab mit dem ZenDiS tatsächlich ein sehr spannendes Projekt zwischen uns und dem ZenDiS.
- 35:17Wir haben den OpenDesk, den du wahrscheinlich kennst und auch in dem Podcast besprochen hast.
- 35:22Also die souveräne Alternative zu Microsoft 365.
- 35:26Da gab es ein sehr schönes Projekt.
- 35:28Das haben wir mit dem ZenDiS zusammen auf unserer Umgebung laufen lassen.
- 35:33Also eine sehr komplexe, kontinuierte Anwendung.
- 35:38Und das Ergebnis war sehr schön.
- 35:39Also es war eine Cloud-basierte Office-Umgebung, bei der die Daten auch während der Verarbeitung geschützt und verschlüsselt geblieben sind.
- 35:47Und das ist ja im Prinzip ein Betriebssystem oder sollte so den kompletten Verwaltungsarbeitsplatz darstellen.
- 35:52Jetzt muss ich nachfragen, wie hoch ist da die Performance-Einbuße, wenn ich das jetzt komplett confidential mache?
- 35:57Nicht hoch.
- 36:00Üblicherweise 5 Prozent vielleicht in der Latenz.
- 36:02Wir haben auch schon gehört, dass es sich schneller als vorher angefühlt hätte.
- 36:08Klar, solche Effekte gibt es auch mal.
- 36:10Aber man kann sagen, es ist im nicht merkbaren Bereich.
- 36:15Stark.
- 36:15Okay, so trifft sich hier technologisch das eine und das andere sehr stark.
- 36:19Okay, Privatemode.
- 36:21Ja, also Privatemode ist, wie du gesagt hast, ein besonders sicherer KI-Dienst.
- 36:31Am Ende ist es ein Dienst, der kompatibel ist zu OpenAI und Enthal
- 36:36-Dienst. Es ist nicht entropik, aber nichts mit den Diensten zu tun hat an sich, sondern eine Alternative zu diesen Diensten darstellt.
- 36:44Und bei Privatemode nehmen wir Open Source KI-Modelle.
- 36:51GLM, DeepSeek, Qwen, vielleicht sind das Namen, die schon der eine oder andere gehört hat.
- 36:57Viele von denen aus China, aber nicht alle.
- 37:00Es gibt auch gute Open Source Modelle aus den USA und manchmal auch aus Europa.
- 37:07Und diese Open Source Modelle verpacken wir in diese sichere Enklave, über die wir vorhin schon mal gesprochen haben.
- 37:18Und diese Enklave hat dann genau die Eigenschaften, die wir genannt haben, nämlich Laufzeitverschlüsselung der Daten und auch wieder die Fernattestierung.
- 37:29Also man kann aus der Fernüberprüfung, dass dort wirklich die Daten geschützt bleiben.
- 37:34Dass dort wirklich kein Trigger
- 37:36ist. Dass dort wirklich kein Training und keine Speicherung der Daten stattfindet.
- 37:39Man kann im Prinzip am Ende sämtliche Eigenschaften des Dienstes aus der Ferne überprüfen und bewerten.
- 37:48Und das Schöne ist, man kann diesen Dienst dann überall dort einsetzen, wo ich normalerweise OpenAI oder Anthropic einsetzen würde.
- 37:57Das heißt, ich bin vielleicht eine Behörde oder ich bin ein Unternehmen und ich habe ein internes KI-Tool.
- 38:05Da kann
- 38:06ich dann auch ein bisschen mehr mit dem Team arbeiten. Da kann man in der Regel konfigurieren, mit welchem Anbieter das im Hintergrund spricht.
- 38:11Und überall da, wo man Anthropic oder OpenAI eintragen kann in seiner Konfiguration, kann man stattdessen auch Privatemode eintragen.
- 38:18Und hat dann eine sehr ähnliche Qualität, aber eine deutlich höhere Sicherheit und Nachvollziehbarkeit.
- 38:27Und ich glaube, es ist auch wichtig zu verstehen, ich kann das jetzt eben in meinem eigenen Rechenzentrum nochmal zusätzlich oder in meinem geteilten Rechenzentrum viel mehr
- 38:36machen. Und das ist vielleicht, so städte - und gemeindebundmäßig, kann ich das vielleicht da drin nochmal absichern.
- 38:41So mit dem Blick nach Berlin.
- 38:43Ich möchte vielleicht, dass meine Daten von meiner Kommune geschützt sind gegen irgendwelche Blicke von einer anderen, die vielleicht gerade komprometiert wurde.
- 38:49Aber ich kann das damit eben auch in die Cloud hineingeben.
- 38:54Das ist wahrscheinlich auch so das, was man als Consumer kennt, wenn man sich Privatemode einfach mal runterlädt testweise.
- 38:58Denn wie stehst du dazu?
- 39:01Die große Diskussion ist ja, sollten jetzt alle H100 Chips kaufen?
- 39:05Also die Diskussion sollten jetzt
- 39:06alle H100 Chips kaufen. Also die Diskussion sollten jetzt alle quasi, die irgendwie auf sichere Umgebungen achten, ihre Rechenzentrum eben mit GPUs, die LLM-Fähigkeiten haben, aufrüsten.
- 39:16Und ich glaube, eure Technologie schafft hier ein Stück weit Abhilfe, weil das kann ich vielleicht gar nicht schaffen und kann somit aber dann doch in der Cloud unterwegs sein und es trotzdem eben nachweisbar absichern.
- 39:26Ist das so richtig?
- 39:28Korrekt.
- 39:28Also wir sehen Privatemode vor allem als Alternative zum Aufbau von On-Prem.
- 39:36Von eigenen Kapazitäten.
- 39:38Also wir haben oft den Fall, dass eine Behörde oder ein Unternehmen sagt, okay, wir haben entschieden, wir können cloudbasierte Dienste nicht nutzen.
- 39:47Deswegen kaufen wir uns eigene Hardware.
- 39:50Das heißt, wir kaufen uns Hardware von Nvidia.
- 39:52Du hast gerade schon H100 gesagt zum Beispiel.
- 39:55Die ist jetzt schon wieder ein bisschen alt.
- 39:56Ja, aber und dann hat man halt Hardware, die langsam altert und vielleicht auch nicht mehr die aktuellsten Modelle laufen lassen kann.
- 40:04Die aber viel Geld gekostet
- 40:06hat. Und die ich natürlich auch selbst betreiben muss.
- 40:08Und eventuell muss ich dann eine externe Beratung dafür bezahlen.
- 40:12Ich muss auch nochmal Software einkaufen.
- 40:13Das kann sehr schnell sehr teuer werden.
- 40:16Und ich habe jetzt auch schon mit, weil ich spreche häufig mit Unternehmen, die sagen, okay, wir haben uns im letzten Jahr zum Beispiel die H100 gekauft.
- 40:24Teilweise für sieben-, achtstelligen Beträge.
- 40:28Aber da laufen jetzt die aktuellen Modelle gar nicht mehr drauf.
- 40:30Wir sind jetzt quasi auf GPT-4 Niveau.
- 40:32Aber meine Mitarbeiter wollen ja eigentlich GPT-5, GPT-6.
- 40:36Und die wollen ja auch GPT-6 Niveau haben.
- 40:38Und naja, dann hat man ein Problem.
- 40:41Und da läuft man halt immer wieder rein, wenn man das selber betreibt.
- 40:45Zudem hat man auch natürlich eine nicht optimale Auslastung der Infrastruktur meistens.
- 40:49Weil, naja, ich muss halt, wenn ich eine Infrastruktur kaufe, muss ich das Spitzen mit einberechnen.
- 40:54Okay, ich habe vielleicht 1000 Mitarbeiter.
- 40:56Wenn die alle gleichzeitig ein Prompt absetzen, dann brauche ich vielleicht 10 Server.
- 41:02Jetzt mal eine zufällige Zahl.
- 41:06Aber natürlich machen die das nicht ständig, sondern die machen das nur mittwochs morgens und donnerstags nachmittags vielleicht.
- 41:12Und den Rest der Zeit ist meine Hardware dann nicht ausgelastet.
- 41:16Und ist vielleicht mit 10 % Last unterwegs und nachts vielleicht gar nicht.
- 41:21Das heißt, ich habe eine sehr schlechte Ressourcenauslastung.
- 41:24Und da sehen wir dann den Dienst wie Privatemode als eine super Alternative.
- 41:27Weil man bekommt das Beste aus beiden Welten.
- 41:30Man bekommt eine sehr hohe Sicherheit.
- 41:32Mit den Vorteilen der Ressourcenauslastung.
- 41:35Und dem On Demand von einem Cloud-Dienst.
- 41:40Es gab ja hier schon eine Folge mit Arne Schömann, wo wir über Public Sector AI gesprochen haben.
- 41:47Es ist sicher so, dass der Case NRV Genius ist, zu dem du ein bisschen was sagen kannst.
- 41:52Vielleicht inwieweit eure Technologie da auch wichtig ist.
- 41:55Aber auch ein anderer Fall ist schön dokumentiert die elektronische Patientenakte.
- 42:01Vielleicht wenn man das so ein bisschen nur zusammenfasst.
- 42:03Ja, welche Ressourcen
- 42:05sind da? Welche Rolle kann eure Technologie da spielen?
- 42:07Ich hatte nämlich eingangs gesagt, sie erreicht uns letztlich wahrscheinlich ein Stück weit alle.
- 42:11Also sehr, sehr viele Bürgerinnen und Bürger werden vielleicht ohne es zu wissen, schon damit irgendwie konfrontiert worden sein.
- 42:16Vielleicht das so ein bisschen auch im Sinne von Schlusskurve.
- 42:20Wie populär die Technologie schon ist, das würde mich nochmal interessieren.
- 42:24Ja, also populärer als man denkt wahrscheinlich.
- 42:26Du hast NRV Genius angesprochen.
- 42:29Es gab ein sehr schönes Projekt im letzten Jahr mit NRV Genius.
- 42:34Dort wurde dann Privatemode erprobt als KI-Dienst innerhalb dieser KI-Oberfläche für das Land NRW.
- 42:44Das lief sehr erfolgreich.
- 42:46Da findet man auch einen sehr schönen Vortrag von Arne Schömann bei YouTube.
- 42:51Hat für mich schon was, ja.
- 42:52Ja, und der Tenor dort ist okay.
- 42:56Confidential AI kann oder ist eine Alternative zum Aufbau von On-Prem.
- 43:02Weil, ja.
- 43:03Ja, hohes Schutzniveau und so weiter.
- 43:06Haben wir alles darüber gesprochen.
- 43:08Und das ist kein Einzelfall.
- 43:10Wir sind jetzt zum Beispiel, Stadt München ist neulich Kunde von Privatemode.
- 43:14Dort gibt es etwas ähnliches wie NRW Genius.
- 43:18Das heißt dort MOOC GPT.
- 43:19Das ist die interne KI-Oberfläche der Stadt München.
- 43:24Die sieht so ein bisschen aus wie Chat GPT am Ende.
- 43:27Sie ist aber konfigurierbar, wie ich eben schon gesagt habe.
- 43:29Dort kann man quasi beliebige KI-Dienste als Motor hintendran anschalten.
- 43:36Modellagnostisch.
- 43:37Genau, modellagnostisch.
- 43:38Wie es die meisten Dienste eigentlich sind am Ende.
- 43:41Und ja, dort wird dann Privatemode hinten reingeschaltet.
- 43:46Und die Mitarbeiter können das dann dort nutzen.
- 43:48Als Alternative zu den On-Prem-Modellen zum Beispiel.
- 43:51Die dann nicht die aktuellsten Features und Leistungsdaten haben.
- 43:58Und zu guter Letzt.
- 43:59Du hast die E-Patienten-Akte angesprochen.
- 44:01Das ist ein sehr schönes Stichwort.
- 44:03Die E-Patienten-Akte ist vielleicht die größte in Produktion laufende Anwendung, die Confidential Computing verwendet.
- 44:12Und ist auch wirklich ein schönes Beispiel für Innovation in Deutschland.
- 44:17Ich glaube, das hat so kein anderes Land.
- 44:19Die E-Patienten-Akte hat ja sehr sensible Daten.
- 44:21Wenn du gehst zum Arzt und dort werden Metadaten, bei welchem Arzt du warst und so weiter.
- 44:27Wie lange.
- 44:28Aber auch Arztnotizen gespeichert.
- 44:30Sehr sensible Daten.
- 44:31Und die werden zentral verarbeitet.
- 44:36Und die Gematik, die dort maßgebliche Bundesagentur, hat schon früh erkannt, dass Confidential Computing dort helfen kann.
- 44:47Und hat in ihren Spezifikationen als eine der ersten Organisationen dieser Art, Confidential Computing, aufgenommen.
- 44:57Und das heißt, wenn du jetzt eine E-Patienten-Akte herstellen möchtest, musst du viele hundert Seiten Spezifikationen erfüllen.
- 45:07Und da geht es sehr im Detail darum, wie wird die sichere Umgebung aufgebaut.
- 45:11Wie läuft die Remote Assistation?
- 45:13Wie läuft das mit der Laufzeitverschlüsselung?
- 45:16Und das sind alles Dinge, die unsere Plattform-Software erfüllt.
- 45:21Die Software, auf der zum Beispiel auch ZenDiS lief.
- 45:26Und ja, die E-Patienten-Akte, große Teile der E-Patienten-Akte laufen auf Software von uns.
- 45:32Und werden durch Confidential Computing während der Verarbeitung geschützt.
- 45:39Kann man, glaube ich, auch, pack ich auch was in die Shownotes rein.
- 45:42Ist, glaube ich, auch schön dokumentiert, denke ich.
- 45:46Schlussfrage, Felix.
- 45:47Was würdest du jemandem, der typischerweise, vielleicht auch an unserer Hochschule, der HSPV ist, aber völlig egal,
- 45:52wo irgendwas mit angewandter Informatik, Informatik-IT-Modelle,
- 45:55oder auch mit der IT-Modelle, die irgendwas studiert,
- 45:56und jetzt auch im Thema öffentlicher Sektor, Public Sector AI,
- 46:00ein bisschen was lernen möchte, was würdest du empfehlen?
- 46:03Was sollte man sich drauf schaffen, wenn man jetzt gerade in diese Richtung studiert
- 46:07und Staat, Verwaltung und solche sensiblen Daten vielleicht auch irgendwie handhabbar machen möchte
- 46:11und da jetzt gerade ins Berufsleben rein starten will?
- 46:16Da könnte ich auch wahrscheinlich einen längeren Vortrag zu halten.
- 46:20Machen wir eine extra Folge zu.
- 46:21Kurze Antwort.
- 46:22Ich glaube, ein guter Einstieg ist, sich anzuschauen, wie das bei der ePatienten-Akte läuft und warum das so läuft.
- 46:29Da gibt es viel schönes Material.
- 46:32Und dann kann ich wirklich empfehlen, Private Note auszuprobieren.
- 46:38Man kann sich da kostenlos anmelden.
- 46:39Das ist fast so wie ChatGPT.
- 46:41Man kann es aus der App heraus nutzen, aber ich kann es auch direkt per API aus meiner eigenen Anwendung nutzen.
- 46:48Also falls ich vielleicht gerade dabei bin, irgendwas zu bauen für meine Abteilung oder meine Behörde,
- 46:52man kann das sehr, sehr einfach auch ohne Anmeldung nutzen.
- 46:56Das sind so die beiden Pointer, die ich geben würde.
- 47:01Sehr stark.
- 47:02Felix, ich danke dir für deine Zeit.
- 47:04Ich hoffe, das Kunststück ist uns gelungen, Confidential Computing ein bisschen zu beleuchten,
- 47:09Edgeless Systems und euer Produktportfolio zu verstehen
- 47:12und auch die Auswirkungen auf den öffentlichen Sektor und viele Bereiche, in denen Confidential Computing erforderlich ist.
- 47:19Herzlichen Dank, Felix.
- 47:21Super.
- 47:22Vielen Dank.
- 47:23Soweit mein Gespräch mit Felix Schuster und ich glaube, es ist uns gelungen, Confidential Computing in seiner Breite einmal zu beleuchten mit den wichtigen Aspekten, die dazugehören, eben einmal die Infrastruktur abzusichern, diese Enklave zu bilden, der ich vertrauen kann und auf der zweiten Ebene dann eben auch zu attestieren, dass ich hier der Hardware zertifikatsbasiert vertrauen kann.
- 47:49Ich lege die Shownotes entsprechend mit wissenschaftlichen Quellen, mit YouTube-Beiträgen und auch den genannten Forschungsimpulsepisoden an, sodass man hier tiefer einsteigen kann, denn mich hat wirklich auch sehr interessiert und ich glaube, das ist in der Folge rausgekommen, wie sehr der öffentliche Sektor und ja mein Schwerpunktthema Public Sector AI auch von dieser Technologie abhängt oder ja welche Lösungsmöglichkeit darin verborgen ist.
- 48:17Und damit auch schon der Bedeutung.
- 48:19Und jetzt haben wir einen Blick auf die nächste Folge. Andrea Walter, ebenfalls Professorin an der HSPV und ich werde über unsere jeweiligen Drittmittelprojekte, die wir ganz frisch eingeworben haben, berichten und insofern bedanke ich mich für euer Interesse und sage bis zur nächsten Folge Forschungsimpuls.