Latest / M365.FM – Microsoft 365, Copilot & KI Podcast auf Deutsch / Copilot Studio vs. Azure AI Foundry: RAG, Governance & die richtige Enterprise-KI-Plattform (KI-Synchronfassung)
Transcript
- 0:00Ist Ihnen schon mal aufgefallen, dass Ihr toller KI-Board alles weiß, nur nicht das, was Ihr Team wirklich braucht?
- 0:04Das liegt daran, dass die meisten Co-Pilots wie Papageien mit Internetabschluss sind.
- 0:08Sicher, es sind leistungsstarke Modelle, aber ohne Bezugsquelle jagen Sie Trivialitäten nach, statt Ihre Geschäftsdaten zu.
- 0:12Was Sie wirklich brauchen, ist Retrieval Augmented Generation, kurz RAG und nicht etwa den Stoffhetzen-Look.
- 0:17RAG bedeutet Suche plus LLM.
- 0:19Das Modell verfasst Antworten erst, nachdem es indexierte Unternehmensinhalte wie SharePoint, Dataverse oder OneDrive durchsucht hat.
- 0:24Das ist der entscheidende Unterschied zwischen einer Demo, die schlau aussieht, und einem System, dem Sie wirklich vertrauen würden.
- 0:28Und es hebt mit dem Weg für den kommenden Schlagablauf.
- 0:30Co-Pilot Studio gegen Azure AI Foundry.
- 0:32Abonnieren Sie m355-Schauffein-Spickzettel-Dokument.
- 0:35Warum die meisten Bots nur schicke Papageien sind.
- 0:38Die meisten Bots wirken in einer Demo beeindruckend, aber fragen Sie sie etwas Reales, wie Firmenrichtlinien oder Projektstatus, und Sie scheitern.
- 0:44Hier liegt das Problem. Es sind einfach nur große Sprachmodelle ohne Anbindung an Ihre Mandantendaten.
- 0:48Sie sind Experten darin, Antworten zu erfinden, die offiziell klingen, aber Ihrem Unternehmen nichts nützen.
- 0:52Sie wollten die Urlaubsrichtlinie der Personalabteilung, aber er gab Ihnen einen generischen Text über Work-Life-Balance aus dem Internet.
- 0:59Er hat motiviert, aber einen produktiven Einsatz völlig nutzend.
- 1:01Die Ursache?
- 1:02Der Bot greift nicht auf die Inhalte zu, mit denen Ihr Team täglich arbeitet.
- 1:06Die wirkliche Lösung ist Retrieval Augmented Generation oder RAG.
- 1:09Klingt nach Wäsche waschen, aber stellen Sie es sicher als Kombinationsspiel vor.
- 1:12Suche plus ein großes Sprachmodell.
- 1:14Sie halten das Modell davon ab, frei zu improvisieren, füttern es stattdessen mit einer Suchpipeline.
- 1:18Er schreibt zwar weiterhin die Antwort, aber erst nachdem es Daten aus indexierten Quellen in Ihrer Umgebung abgerufen hat.
- 1:22SharePoint, OneDrive, Dataverse oder sogar diese Team-Site, die 2019 eigentlich archiviert werden sollte.
- 1:28Mit diesem Setup hört der Bot endlich auf zu improvisieren und verhält sich so, als gehöre er wirklich zu Ihrem Unternehmen.
- 1:33Ohne RAG häufen sich die Risiken schnell.
- 1:35Ein einfaches LM wird mit Internet breit trainiert.
- 1:37Fragen Sie es nach der Urlaubsrichtlinie.
- 1:39Gibt es Ihnen vielleicht eine Antwort, die korrekt klingt, aber völlig daneben liegt, manchmal sogar grob falsch?
- 1:43Das ist nicht nur peinlich, sondern gefährlich.
- 1:45Sie wollen nicht, dass ein schicker Chatbot falsche Compliance-Informationen an tausende Mitarbeiter ausspuckt, bevor die Personalabteilung überhaupt davon weiß.
- 1:50Microsoft Digital stieß genau auf dieses Risiko bei der Entwicklung von HR- und IT-Copilots.
- 1:56Ihre Lösung?
- 1:57Autoritative Quellenführung und Connector-Arbeit im Studio hinzufügen, um falsche Antworten zu reduzieren.
- 2:01Das ist die Vorgehensweise in der Praxis.
- 2:02RAG ist nicht nur Theorie, es ist der Unterschied zwischen einem Bot, den Sie ausrollen und einem, den Sie stillschweigend abschalten.
- 2:07Hier ist das andere Puzzleteil, die Zugriffskontrolle.
- 2:09Bei RAG geht es nicht nur um bessere Suche, sondern um sichere Suche.
- 2:12Denn sie ist sich wie ein Türsteher im Klub formt.
- 2:13Das System führt die Suche durch, aber bevor eine Information in die Antwort gelangt, prüft der Türsteher die Benutzer-ID.
- 2:17Die Finanzabteilung sieht Finanzdaten, der Vertrieb sieht Vertriebsmaterialien und niemand kann einen Blick auf Vorstandsprotokolle werfen, für die er keine Rechte hat.
- 2:24Richtiges RAG plus Zugriffskontrolle verhindert die meisten heiklen Mandantenübergreifenden Wechs, aber nur, wenn Berechtigungen und Indizierungen korrekt verknüpft sind.
- 2:30Dieser Vorbehalt ist entscheidend.
- 2:32Ohne ihn landen Sie direkt wieder bei einer Halluzinationsmaschine mit Firmenbranding.
- 2:35Um es konkret zu machen, stellen Sie sich zwei Mitarbeiter vor, einem im Finanzwesen.
- 2:38Beide nutzen denselben Bot, um nach Quartalszahlen zu fragen.
- 2:41Der Vertrieb sieht den bereinigten öffentlichen Bericht, die Finanzabteilung sieht die detaillierten Konten, die in ihrem sicheren Ordner liegen.
- 2:48Gleicher Index, gleicher Bot, völlig unterschiedliche Antworten wegen des Türstehers am Eingang.
- 2:52Diese identitätsbasierte Suche schließt die Vertrauenslücke für CIOs, die den Satz Bring your own AI hören.
- 2:58Und sofort sehen Sie Wirtschaftsprüfer vor Ihrem Büro Schlange stehen.
- 3:02Unter dem Strich ist der RAG das, was ein Papagei in einen echten Assistenten verwandt.
- 3:05Richtig umgesetzt erhalten Sie Antworten aus Ihrem Mandanten, gefiltert durch Ihre Berechtigungen und basierend auf tatsächlich vorhandenen Quellen.
- 3:11Schlampig umgesetzt hüten Sie nur eine weitere Halluzinationsmaschine mit schicker Benutzeroberfläche.
- 3:16Aber hier wird es interessant.
- 3:17Sowohl Copilot Studio als auch Azure AI Foundry nutzen RAG-Konzepte, aber die Art und Weise, wie Sie Berechtigungen und Suchpipelines anbinden, ist sehr unterschiedlich.
- 3:24Die eine setzt auf Geschwindigkeit und Einfachheit, die andere auf Kontrolle und Tiefe.
- 3:27Beginnen wir also mit der schnelleren Option.
- 3:29Diejenige, die schnelle Erfolge verspricht, ohne einzige Zelle kommt.
- 3:32Copilot Studio, schnelle Erfolge mit Schutzrädern.
- 3:33Copilot Studio ist der Ort, an dem Microsoft das Versprechen schneller Erfolge einlöst.
- 3:38Es ist Ihr Low-Code-Spielplatz für den Bau von Co-Piloten und ehrlich gesagt geht es erschreckend schnell, etwas zum Laufen zu bringen.
- 3:43Sie melden sich an, wählen eine Startvorlage und verbinden sie mit ihren Daten überein von über 1000 Konnektoren, SharePoint, Dynamics, ServiceNow, Excel, OneDrive und so weiter.
- 3:53Und plötzlich haben sie einen Chatbot der Fragen beantwortet, als wäre er schon seit Jahren im Unternehmen.
- 3:57Kein Code, keine Bildketten, kein Entwicklungsstaus, funktioniert einfach.
- 4:00Wenn man es das erste Mal ausprobiert, fühlt es sich verdächtig nach Magie an.
- 4:03Der eigentliche Anreiz ist hier die Zeit bis zur Wertschöpfung.
- 4:05Sie warten nicht ein halbes Jahr, um zu sehen, ob es funktioniert.
- 4:08Ich habe kleine IT-Teams gesehen, die Live-Help-Deskbots in unter zwei Wochen eingeführt haben, meist durch die Abbildung bestehender SharePoint-Seiten in Konversationsabläufe.
- 4:15Die Konnektoren erledigten die eigentliche Arbeit.
- 4:17Das Team hat den Bot nur auf die richtigen Inhalte verwiesen.
- 4:20Und die Endbenutzer?
- 4:21Sie haben entweder nicht gemerkt oder es hat sie nicht interessiert, dass am anderen Ende kein Mensch saß.
- 4:24Ein riesiges Kompliment, wenn man die Bearbeitungszeiten von IT-Postfächern kennt.
- 4:27Hat den ersten Test auf Anhieb bestanden, aber Schnelligkeit hat ihren Preis.
- 4:31Studio verbirgt absichtlich die meisten erweiterten Einstellungen.
- 4:34Man hat keinen Zugriff auf Temperaturregler, Top-P-Anpassungen, Promptversionierung oder Evaluierungsschwellen.
- 4:40Klartext, man kann die Kreativität nicht steuern, keine A-B-Tests für Prompts durchführen und keine Leitplanken gegen schleichende Qualitätsverluste festlegen.
- 4:47Microsoft hat dies bewusst so gemacht.
- 4:49Low-Code bedeutet, die Komplexität draußen zu halten.
- 4:51Dennoch fühlt es sich wie jemanden, der gewohnt ist, LPIs direkt anzusprechen.
- 4:55Ein wenig so an, als würde man ein Auto fahren, bei dem der Hersteller die Motorhaube zugeschweißt hat.
- 4:58Man kommt von Punkt A nach Punkt B, aber nach Turbo-Tuning darf man nicht fragen.
- 5:02Microsoft hat das System nun mit besserer Intelligenz unter der Haube aufgerüstet.
- 5:05Jüngste Updates haben GPT-5 in das Co-Pilot-Studio integriert, zusammen mit intelligentem Modellrouting,
- 5:10wodurch die Plattform je nach Frage automatisch zwischen schneller oder tiefer gehender Analyse umschalten kann.
- 5:15Ab Werk ist das eine gute Nachricht.
- 5:17Low-Code-Bots klingen plötzlich intelligenter, ganz ohne Konfiguration.
- 5:20Doch selbst mit GPT-5 unter der Haube kann man die freigegebenen Parameter weiterhin nicht anfassen.
- 5:23Es ist eine Designentscheidung.
- 5:25Zugänglich halten, nicht anpassbar.
- 5:27Das ist eine Metapher, die ich mag.
- 5:28Co-Pilot-Studio ist wie Ikea-Möbel.
- 5:31Man folgt einer Aufbauanleitung und erhält am Ende etwas, das gut aussieht und seinen Zweck erfüllt.
- 5:36Es ist brillant für den Preis und einfach aufzubauen.
- 5:38Aber wenn man es einmal verschiebt oder über den Prototypen hinaus skalieren will, zeigen sich schnell die Risse.
- 5:43Die Schrauben lockern sich, die Platten biegen sich und plötzlich lebt man mit einem Chatbot,
- 5:46den jeder nutzt, aber den niemand zu aktualisieren wagt.
- 5:48Man muss Microsoft zugutehalten, dass sie auch auf dieser Ebene Leitplanken hinzugefügt haben.
- 5:52Die Kennzeichnung als autoritative Quelle ist ein Lebensretter,
- 5:54denn ohne sie wirkt jede Antwort auf den durchschnittlichen Mitarbeiter gleichermaßen legitim.
- 5:58Dieses SharePoint FAQ von 2009 hat dasselbe Gewicht wie das offizielle HR-Handbuch, das heute Morgen aktualisiert wurde.
- 6:04Dank der integrierten Kennzeichnung kann man zumindest zeigen, das kommt von der Personalabteilung, ignoriert den Rest.
- 6:08Microsoft Digital setzte bei den eigenen HR- und IT-Bots stark darauf,
- 6:12denn ohne sie nahmen Mitarbeiter kreative Antworten der KI als unumstößliche Richtlinie
- 6:17und überfluteten dann echte Helpdesks mit Tickets zur Überprüfung.
- 6:20Die Grenzen werden deutlich, sobald man die Microsoft-Welt verlässt.
- 6:23Ja, es gibt mehr als tausend Konnektoren, aber sie sind nicht alle Plug-and-Play-Wunder.
- 6:28Möchten Sie Salesforce oder SuccessFactors anbinden?
- 6:30Machbar, aber nicht reibungslos.
- 6:31Microsoft selbst musste seine Service-Now und SuccessFactors-Connectoren bei internen Rollouts
- 6:35durch Metadaten-Erweiterungen und individuelle API-Anpassungen erweitern,
- 6:39da die Standardlösungen nicht unternehmenstauglich waren.
- 6:43Da kommt dieses Gefühl auf wie bei einem Klempner, der nachts um 2 Uhr mit Panzertape hantiert.
- 6:47Man glaubt, eine Lücke beschlossen zu haben, nur um drei weitere Licks zu entdecken.
- 6:50Ohne tiefgreifende Pipeline-Kontrolle fühlen sich die Flicken oft wie billige Hexer.
- 6:54Was uns zur offensichtlichen Wahrheit führt.
- 6:55Studio ist perfekt für einfache Anwendungsfälle.
- 6:57Interne IT- und HR-Bots, FAQs für Teams, einfache Gäste-Q&As oder alles,
- 7:02was ohne großen Aufwand in Teams und Outlook laufen soll, genau da glänzt es.
- 7:06Es ist ein fantastisches Testgelände, um der Führungsebene schnell einen funktionierenden Bot zu zeigen
- 7:10und das Interesse zu sichten.
- 7:11Verwechseln Sie es jedoch nicht mit einer Enterprise-Plattform.
- 7:13Sobald das Gespräch auf Compliance-Prüfungen, systemübergreifende Orgestrierung
- 7:16oder Governance auf Mandantenebene kommt, stößt Studio an seine Grenzen.
- 7:19Und dieselbe Geschwindigkeit, die am ersten Tag alle beeindruckt hat, wird zur Belastung,
- 7:22sobald Begriffe wie Sicherheitsüberprüfung oder Auditrail fallen.
- 7:25Kurz gesagt, Co-Pilot Studio bringt Sie schneller ins Spiel als jede andere Option,
- 7:29aber Sie fahren noch mit Stützrädern, Amen.
- 7:31Das ist Absicht.
- 7:32Microsoft hat es entwickelt, um KI für Geschäftsanwender zugänglich zu machen
- 7:35und Pilotprojekte abzukürzen.
- 7:37Aber wenn Ihr der Roadmap in regulierte Branchen, Private Data Lakes
- 7:39oder plattformübergreifende Compliance führt, brauchen Sie schnell etwas Robusteres.
- 7:44Und das führt uns zur anderen Seite des Spektrums, die Schwergewichtsoption,
- 7:47die nicht für Hobbyanwender, sondern für Unternehmen mit Bedarf an voller Kontrolle gebaut wurde.
- 7:50Azure AI Foundry, die KI-Fabrik für Unternehmen.
- 7:55Azure AI Foundry ist der Ort, an dem die Stützräder abkommen.
- 7:58Denken Sie weniger an ein Wochenendprojekt, sondern mehr an eine industrielle Fertigungshalle.
- 8:01Wenn Studio-IKEA-Möbel sind, dann ist Foundry die Maschinenbauwerkstatt,
- 8:04in der Sie nicht nur den Tisch bauen, sondern die Schrauben selbst gießen.
- 8:07Es ist eine Code-First-Umgebung und das ganz bewusst mit Zugriff auf einen riesigen Modellkatalog.
- 8:13Über 11.000 Modelle, die die GPT-5-Familie, Open-Source-Gewichte sowie Vision und Audio-Engines abdecken.
- 8:19Sie können auf große Namen wie Mistral Cohere, Meta-Hugging-Face und NVIDIA zurückgreifen.
- 8:23Es ist ein Buffet, aber anstatt per Drag-and-Drop zu arbeiten,
- 8:26verdrahten Sie alles in Daten-, Pipelines- und Governance-Ebenen, während Sie über YAML-Dateien fluchen.
- 8:30Foundry macht keinen Hehl aus seiner Zielgruppe.
- 8:32Es setzt voraus, dass Sie Python beherrschen, in GitHub zu Hause sind
- 8:35und bei dem Wort CICD-Pipeline nicht in Panik geraten.
- 8:38Im Gegenzug erhalten Sie die volle Kontrolle über den Lebens.
- 8:40Wählen Sie Modelle aus, optimieren Sie diese, testen Sie Prompts
- 8:43und befördern Sie sie mit korrektem MLOPS durch Entwicklungstest und Produktionsumgebung.
- 8:46Im Klartext, Sie können endlich aufhören, Flows mit Panzertape zusammenzuflicken
- 8:49und einen echten Release-Prozess inklusive Auditing, Rollbacks und allem drumherum aufbauen.
- 8:53Mit Kontrolle kommen Kosten für Zeit und Fachwissen.
- 8:55Hier wird kein Chatbot mal eben an einem langen Wochenende zusammengezogen.
- 8:58Foundry zwingt Sie, jede Ebene der Verkabelung zu durchdringen.
- 9:00Geld 3. Absolute Präzision. Jeder Parameter ist zugänglich.
- 9:04Sie können die Kreativität auf Null setzen, Tokens begrenzen und Halluzinationsraten messen,
- 9:08als würden Sie Labor-Tests statt lockerer Demos durchführen.
- 9:11Wenn die Governance anruft und Sie wissen, dass sie das wird, müssen Sie sich nicht mit Ausreden herausreißen.
- 9:15Sie haben Audit-Logs, Bewertungsberichte und nachvollziehbare Ergebnisse.
- 9:18Hier ist die kurze Liste, damit es ankommt.
- 9:20Was Foundry Ihnen bietet. Modellwahl und Feinabstimmung, Anbindung an Ihre Data-Lakes,
- 9:24MLOPS mit richtigen Pipelines, CICD für das Deployment sowie vollständige Telemetrie und Audit-Trades.
- 9:30Das hält die Compliance-Leute davon ab, Ihnen im Nacken zu sitzen,
- 9:33während Ihre Entwickler dennoch Raum für Innovationen haben.
- 9:35Und das ist der entscheidende Punkt.
- 9:37Wählen Sie Foundry, wenn Ihr Bot sensible Daten verarbeitet, wenn Sie Erklärbarkeit benötigen
- 9:40oder wenn er mehrere Unternehmenssysteme vernetzen muss.
- 9:44Wenn Souveränität und Vertrauen wichtig sind, ist dies die Plattform.
- 9:46Ich habe gesehen, wie Foundry-Fälle löste, an die sich Studie nicht herantraut.
- 9:49Ein Kunde musste sensible Forschungsdokumente zugänglich machen,
- 9:52aber genau nachverfolgen, welcher Mitarbeiter was bis auf den Absatz genau gesehen hat.
- 9:55In Foundry haben wir den privaten Data Lake indexiert, mit der Azure Cognitive Search verknüpft
- 9:59und jede Abfrage mit der Benutzeridentität und der Dokumenten-ID protokolliert.
- 10:03Die Compliance-Abteilung hat nicht nur genickt, sie hat gelächelt,
- 10:05weil sie endlich eine Transparenz hatte, die das Audit schwarz auf weiß bestand.
- 10:08Viel Glück beim Versuch, das mit den Standard-Konnektoren von Studie umzusetzen.
- 10:11Zeit für eine Metapher Foundry ist wie das Leasing einer Formel-1-Gerat.
- 10:14Jede Maschine, jeder Sensor, jedes Teil ist enthalten.
- 10:17Aber der Haken ist, Sie brauchen die Boxen-Crew, die weiß, wie man damit umgeht.
- 10:21Sie starten nicht einfach nur eine Instanz, Sie orchestrieren die Engines,
- 10:23verwalten die Telemetrie und optimieren die Bills für Leistung im großen Maßstab.
- 10:26Machen Sie es richtig und Sie überrunden die Konkurrenz.
- 10:28Machen Sie es falsch, stehen Sie neben einer Millionen-Dollar-Werkzeugkiste,
- 10:31während Ihr Auto noch aufgebockt ist.
- 10:32Der eigentliche Vorteil ist die Orchestrierung.
- 10:34Bei Foundry geht es nicht nur darum, Prompts an ein Modell zu senden,
- 10:36Sie verweben Agenten, APIs-Suche und Bewertungsebenen zu einem einzigen verwalteten Fluss.
- 10:40Es kann während eines Gesprächs Rest-Endpunkte ansteuern,
- 10:43sich auf strukturierte und unstrukturierte Quellen stützen
- 10:45und den gesamten Lebenszyklus mit Continuous Integration verwalten.
- 10:48Diese Flexibilität ist der Grund, warum Branchen wie Fertigung, Finanzen und Gesundheitswesen Foundry
- 10:52als die ernsthafte Option betrachten, als die ernsthafte Option betrachten.
- 10:55Es ist nicht ein reiner Microsoft-Connector in der Grund.
- 10:56Es ist für das chaotische, systemübergreifende Durcheinander gebaut,
- 10:59dass CEOs gerne als schnelle Integration abtun.
- 11:01Das gängige Einführungsmuster beweist diesen Punkt.
- 11:03Die meisten Unternehmen fangen hier nicht an.
- 11:05Sie experimentieren mit Studio, weil es schnell ein glänzendes Pilotprojekt liefert.
- 11:08Dann fragt jemand aus dem Bereich Risiko oder Compliance nach der Datenherkunft
- 11:11und plötzlich ringt das Team um eine Revisionssicherheit, die Studio nie versprochen hat.
- 11:15Genau dann eskaliert das Projekt zu Foundry.
- 11:17Entweder man migriert oder man stellt es ein.
- 11:19Ja, Foundry ist die Schwergewichtslösung.
- 11:21Langsamer im Aufbau, steilere Lernkurve, höherer Aufwand bei Zeit und Qualifikationen.
- 11:25Dafür erhält man jeden Regler und jede Sicherheitsvorkehrung, die in Studio verborgen bleibt.
- 11:28Und man muss sich nicht für das eine oder das andere entscheiden.
- 11:31Microsoft selbst propagiert ein Hybridmodell.
- 11:33Studio als einfache Benutzeroberfläche vorne, Foundry als Motor unter der Haube,
- 11:37verbunden durch das kommende Microsoft 365 Agent SDK.
- 11:40So erhalten sie Schnelligkeit, wo sie wichtig ist und Kontrolle, wo sie zählen.
- 11:44Das wirft die eigentliche Frage auf.
- 11:45Wenn man beide Tools zur Hand hat, wie entscheidet man dann,
- 11:47welches man wann nutzt, ohne sich in endlosen Debatten zu verlieren?
- 11:51Genau hierfür brauchen wir einen einfachen Rahmen,
- 11:53damit sie sich weniger auf Entscheidungslähmung konzentrieren
- 11:54und mehr auf Ergebnisse liefern können.
- 11:57Das Drei-Stufen-Modell erkunden, skalieren, steuern.
- 12:00Der einfachste Weg, Ordnung in die Debatte zwischen Studio und Foundry zu bringen,
- 12:03ist es nicht mehr als binäre Wahl zu betrachten.
- 12:05Microsoft Insider sehen es bereits als einen dreistufigen Lebenszyklus.
- 12:08Erkunden, skalieren, steuern.
- 12:12Betrachten sie es weniger als ein Tool wählen und hoffen,
- 12:14sondern eher als ein Prozess, bei dem jede Stufe vorgibt, wann man aufsteigen sollte, nicht ob.
- 12:18Erkunden ist immer der Ausgangspunkt und hier ist Co-Pilot Studio führend.
- 12:22Dies ist die Phase, in der man schnell Bots zusammenbaut,
- 12:24um zu sehen, ob eine Idee geschäftlichen wäre.
- 12:25HF-RQ-Bot, IT-Passwort-Reset-Helfer, diese lassen sich in unter zwei Wochen mit Konnektoren und ohne Code umsetzen.
- 12:32Es geht nicht um Perfektion, sondern um den Nachweis.
- 12:34Sie validieren, ob das Ding echte Probleme löst, ohne das Projektbudget zu sprengen.
- 12:38Die Checkliste von Research Tested ist einfach.
- 12:41Identifizieren Sie Ihre Top-3-Anwendungsfälle,
- 12:42Prototypen Sie diese in ein bis zwei Wochen ins Studio
- 12:44und messen Sie, ob die Leute den Bot tatsächlich nutzen.
- 12:47Zusatztipp, überwachen Sie den Tokenverbrauch,
- 12:49um zu erkennen, ob der Pilot vor der Skalierung ausufernde Kosten verursacht.
- 12:52Doch hier taucht Migrationsauslöser Nummer 1 auf.
- 12:55Wenn ein Bot plötzlich auf nicht M365 von 60 Systeme wie ERP, SAP oder Finanzdatenbanken zugreifen muss,
- 13:00reicht Studio allein nicht aus?
- 13:03Migrationsauslöser 2, wenn Halluzinationen nicht nur lustig, sondern riskant sind,
- 13:05etwa bei der Beantwortung von Compliance-Fragen und erfundenen Richtlinien, ist es Zeit zu skalieren.
- 13:10Die Skalierung ist der Punkt, an die meisten Teams oder ruckgeraten.
- 13:12Man erkennt, dass der Pilot zwar hilfreich ist, aber nun eine echte Infrastruktur benötigt.
- 13:16Stellen Sie sich vor, Sie versuchen, Ihren HR-Bot mit Low-Code-Connectoren an ServiceNow zu kleben.
- 13:20Man fährt im Grunde ein Auto, das mit Kleidband zusammengehalten wird.
- 13:22Hier kommt Azure AI Foundry ins Spiel.
- 13:24Foundry bietet Ihnen, was Studio verbirgt.
- 13:27Kontrollmöglichkeiten für Kreativität, Prüfmechanismen gegen Halluzinationen,
- 13:31Data Lake-Anbindungen und robuste Pipelines.
- 13:33Der Kompromiss dabei, Sie benötigen das Fachwissen und die Geduld, um alles miteinander zu kümmern.
- 13:37Die meisten Unternehmen verfolgen hier einen hybriden Ansatz.
- 13:39Sie nutzen Studio für schnelle Ergebnisse bei FAQs und einfachen Abläufen,
- 13:42verlagern aber komplexe Workloads auf Foundry, wo Sicherheit und Präzision zählen.
- 13:46Und dann kommt der große Punkt, Govern.
- 13:48Auf dieser Stufe ist die KI kein Spielzeug mehr.
- 13:50Sie ist in sensible Arbeitsabläufe oder sogar kundenorientierte Systeme eingebunden.
- 13:53Wenn Audits, SLAs oder regionale Datenkontrollen eine Rolle spielen,
- 13:56ist Foundry keine Option mehr, sondern Pflicht.
- 13:58Dies ist der dritte Migrationsauslöser.
- 14:00Wenn es um Datensouveränität, Erklärbarkeit oder Zugriffsprotokolle auf Datensatzebene geht,
- 14:04bleibt Ihnen keine Wahl, als das Projekt in Foundry zu verankern.
- 14:06Foundry unterstützt Sie mit Audit, Trails, Telemetrie, Pipeline-Gating und einer Datengovernance,
- 14:12für die Microsoft 365-Konnektoren nie ausgelegt waren.
- 14:15In dieser Phase spielt Studio schlichtweg keine Rolle mehr.
- 14:18Ein einfacher Vergleich?
- 14:19Explorer ist, wie auf einem leeren Parkplatz zu fahren, um zu sehen, ob das Auto überhaupt läuft.
- 14:23Geil ist das Auffahren auf die Autobahn zwischen anderen Fahrern, wo Fehler tatsächlich Konsequenzen haben.
- 14:27Govern ist die Abgasuntersuchung.
- 14:29Jeder Sensor wird angeschlossen, um die Verkehrssicherheit zu beweisen.
- 14:32Drei Phasen, jede mit ihrem eigenen Zweck, keine davon ist optional, wenn das Ergebnis außerhalb einer Demo bestehen soll.
- 14:37Als Beweis dafür, dass dieses Modell funktioniert, genügt ein Blick auf Microsofts eigene interne Playbooks.
- 14:41Das HR-Team erstellte einfache Bots ins Studio, um FAQs zu beantworten und Ticketwarteschlangen zu entlasten.
- 14:46Doch als dieselben Bots begannen, sensible, regionspezifische HR-Dateien abzurufen, schlug die Compliance-Alarm.
- 14:51Das hat Zwang die Migration zu Foundry, um strengere Zugriffskontrollen einzuführen, Audit-Protokolle zu garantieren
- 14:55und eine korrekte Datentrennung sicherzustellen.
- 14:58Nichts schlagen.
- 14:58Der Umfang wuchs lediglich über das hinaus, wofür Studio konzipiert wurde.
- 15:02Ein weiterer wichtiger Punkt ist die Brücke, die Microsoft gerade baut.
- 15:05Das kommende Microsoft 365 Agents SDK soll Studio und Foundry enger verbinden,
- 15:09damit sie leicht starten können, ohne befürchten zu müssen, in einer Sackgasse zu landen.
- 15:13Bauen Sie den Prototyp in Studio und erweitern Sie ihn mit Foundry um Modellrouting,
- 15:16Konnektoren und Governance, alles in einem Lebenszyklus.
- 15:19Es ist ein seltener Moment, in dem Microsoft anerkennt, dass Business-Anwender und Profi-Entwickler keine Gegner sind
- 15:23und eine Pipeline bereitstellt, in der sie tatsächlich zusammenarbeiten.
- 15:26Was ist das falsch?
- 15:26Zerbrechen Sie sich am ersten Tag nicht den Kopf darüber, welches Tool Sie wählen sollen.
- 15:30Konzentrieren Sie sich stattdessen darauf, in welcher Phase es ist.
- 15:32Nutzen Sie Studio für schnelle Validierungen in der Explor-Phase.
- 15:34Gale findet in Foundry statt, sobald Komplexität hinzukommt oder Daten außerhalb von M35-Möchchen rollen.
- 15:39Gabon läuft vollständig über Foundry für Compliance-Audits und Workflows auf Unternehmensniveau.
- 15:43Das Framework verhindert, dass Sie den ersten FAQ-Bot überdimensionieren
- 15:45und jene vernachlässigen, die in kundenseitigen Systeme landen.
- 15:49Natürlich bedeutet das nicht, dass die Plattformen perfekt sind.
- 15:51Die Frameworks sehen auf PowerPoint schick aus, aber in der Realität hat jede Ebene ihre eigenen blinden Flecken.
- 15:56Und genau da beginnen meist die Kopfschmerzen bei den Dingen,
- 15:59die das Microsoft-Marketing auf Ignite-Folien nicht fett hervorhebt und die Microsoft gerne überspielt.
- 16:04Lassen Sie uns über die Dinge sprechen, die Microsoft verschweigt,
- 16:06bis sie mitten im Rollout stecken, die versteckten Fallstricke.
- 16:10Auf der Demo-Bühne sieht alles glänzend aus.
- 16:12Drag-and-drop und voila, ein sofortiger Co-Pilot.
- 16:13Doch in der Produktion erwischen drei wiederkehrende Lücken die Teams eiskalt.
- 16:18Fallstrick Nummer 1. Co-Pilot Studio verbirgt alle Regler zur Modellsteuerung.
- 16:21Keine Temperatureinstellung, kein Top-P-Regler, keine Evaluierungsschleifen, kein Prompt-Versioning.
- 16:26Für die meisten IT-Leute, die einen FAQ-Pilot-Bot bauen, klingt das nach harmlosen Details.
- 16:31Doch diese Hebel entscheiden, ob ihr Agent konsistente Ergebnisse liefert
- 16:33oder sich verhält wie ein Glücks-Keks-Automat.
- 16:36Ohne diese Stellschrauben können Sie Zufälligkeit nicht reduzieren oder die Erklärbarkeit absichern.
- 16:40Abhilfe. Wenn Zuverlässigkeit zählt, lagern Sie diese kritischen Workloads auf Foundry aus.
- 16:44Dort können Sie die Temperature auf Null setzen, Prompts einfrieren und
- 16:47jeden Output durch eine Prüfung leiten, bevor er Nutzer erreicht, erreicht.
- 16:52Studio ist gut für einfache FAQs, aber machen Sie sich nichts vor.
- 16:55Es lässt sich nicht sauber auf HR oder Compliance-Workflows skalieren.
- 16:58Fallstrick Nummer 2. Sowohl Studio als auch Foundry nutzen verbrauchsbasierte Preise.
- 17:02Und hier verlieren viele Projekte still und heimliche Budget.
- 17:05Zahlen, was man nutzt, klingt harmlos, bis man tausende Anfragen verarbeitet
- 17:08und merkt, dass Tokenverbrauch und Modellmix die Rechnung bestimmen.
- 17:12In Studio überraschen Kostensteigerungen die Teams, wenn die Nutzung sprunghaft ansteigt
- 17:16und kein Budget für Governance oder Lizenzen eingeplant war.
- 17:19Foundry lässt Sie diesen Schmerz früher spüren, da Sie Entwicklungsstunden einplanen,
- 17:22aber die Skalierungskosten sind zumindest transparent.
- 17:25Die Lösung.
- 17:26Implementieren Sie Nutzungsmetriken vom ersten Tag an.
- 17:28Verfolgen Sie den Tokenverbrauch und leiten Sie hochvolumig oder einfache Anfragen
- 17:31an günstigere Modelle im Katalog.
- 17:32Und am wichtigsten vergessen Sie nicht die versteckten Rechnungsposten,
- 17:35Lizenzen, Governance-Tools und benutzerdefinierte Konnektoren.
- 17:38All das beeinflusst den ROE, sobald Sie die Skalierung planen.
- 17:41Budgetieren Sie dies frühzeitig, anstatt später Budgetüberschreitungen erklären.
- 17:44Fallstrick Nummer 3.
- 17:45Konnektoren.
- 17:46Ja, Studio wirbt mit über 1000 Konnektoren,
- 17:48aber das bedeutet nicht, dass Sie sofort unternehmensstauglich sind.
- 17:53Einige funktionieren für Prototypen wie SharePoint, OneDrive oder Dynamics gut,
- 17:56andere benötigen jedoch oft Metadatenanpassungen oder eigene Entwicklung.
- 17:59Der Rollout bei Microsoft Digital selbst hat dies bewiesen.
- 18:01Ihr Team erweiterte die ServiceNow und SuccessFactors-Konnektoren
- 18:04und fügte ein Kennzeichen für autovidative Quellen hinzu,
- 18:06damit Nutzer offizielle HR-Richtlinien von veralteten Inhalten in einem alten Wiki unterscheiden konnten.
- 18:11Es funktionierte aber nur, weil sich die Ingenieure voll reinhinken.
- 18:14Die Lösung ist, von vornherein Anpassungsarbeit einzuplanen.
- 18:16Betrachten Sie Studio-Konnektoren bei kritischen Systemen nicht als Plugin.
- 18:19Planen Sie Zeit und Ressourcen für deren Erweiterung ein
- 18:22oder verlagern Sie die Arbeitslast auf Foundry,
- 18:24wo benutzerdefinierte APIs und Pipelines Standards sind.
- 18:27Einfach gesagt, die echten Risiken liegen nicht in schicken Demos, sondern in Eskalierung.
- 18:29Studio verbirgt Steuerelemente, die Sie später brauchen,
- 18:32Preismodelle können schnell überraschen
- 18:33und Konnektoren, die im Einrichtungsassistenten gut aussehen,
- 18:36erfordern für Unternehmen oft tiefere Anbindungen.
- 18:39Keines dieser Probleme ist ein Hindernis, wenn man sie einkalkuliert.
- 18:42Die Einfachheit von Studio ist ideal für Prototypen und einfache Szenarien,
- 18:45während Foundries tiefe Compliance und Governance abdeckt.
- 18:48Deckt?
- 18:48Sie müssen jedoch die Schwachstellen erkennen und entscheiden,
- 18:51ob Sie diese selbst beheben oder eskalieren, bevor es vor den Nutzern scheitert.
- 18:55Hier ist das Fazit.
- 18:56Überprüfen Sie die Nutzung frühzeitig,
- 18:58schützen Sie sensible Abläufe mit der richtigen Plattform und der richtigen Plattform
- 19:00und budgetieren Sie nicht nur für Lizenzen, sondern auch für Governance und Connector ab.
- 19:03Studio bringt Ihnen Schnelligkeit, Foundry bringt Ihnen Kontrolle.
- 19:06Die Probleme treten aus verschiedenen Richtungen auf, je nachdem, was Sie ignorieren.
- 19:09Mit dieser Perspektive können wir einen Schritt zurücktreten
- 19:11und die entscheidende Frage stellen,
- 19:12wie nutzt man beide sinnvoll, ohne sich bei der Wahl zu verkopfen.
- 19:14Wählen Sie mit Bedacht, aber hier ist die Kurzfassung.
- 19:19Studio ist für schnelle Prototypen und die Microsoft 365 Reichweite gedacht.
- 19:22Perfekt, wenn Sie nur beweisen müssen, dass ein Botzeit spart.
- 19:25Foundry ist für Kontrolle, Modelle und Governance.
- 19:28Hier stimmen Sie das System ab und verhindern,
- 19:30dass Compliance-Teams Sie durch den Flur jagen.
- 19:32Der wahre Clou ist, beide zu kombinieren.
- 19:33Erkunden Sie in Studio, skalieren Sie in Foundry und steuern Sie dort, wenn die Prüfer kommen.
- 19:38Abonnieren Sie die M335 für das Cheatsheet
- 19:40und folgen Sie der LinkedIn-Seite der M335-65-Show für Livestreams mit MVPs,
- 19:43die dies bereits produktiv umgesetzt haben.
- 19:45Ein realistischer Plan.
- 19:47Klein anfangen, tatsächliches Risiko- und Tokenverbrauch messen
- 19:49und dann zu Foundry wechseln, wenn Compliance oder Komplexität es erfordern.
- 19:53Sie ersparen sich Kopfschmerzen mit dem Stack im Vorausplan.
- 19:55Noch eines, bitte abonnieren Sie den Podcast und hinterlassen Sie eine Bewertung.