Make-or-Buy in der Praxis: eine KI-Suche für die Bibliothek

Dieser Beitrag wendet ein Vorgehen an, das ich in Von der Wardley Map zur Make-or-Buy-Entscheidung beschrieben habe. Dort stehen die Begründungen und Quellen, hier steht ein Fall. Die Gliederung ist dieselbe: Teil A klärt die Landschaft, Teil B führt in fünf Schritten zur Bezugsentscheidung, Teil C leitet Zuständigkeiten ab, und am Ende steht die Entscheidungsmatrix.

Hinweis zum Beispiel: Der Fall ist ein Lehrbeispiel. Einschätzungen und Randbedingungen sind Annahmen. In einer echten Entscheidung steht an jeder Stelle ein Befund mit Beleg.

Die Ausgangslage

Eine Bibliothek will eine KI-gestützte Suche einführen. Nutzerinnen und Nutzer stellen eine Frage und erhalten eine Antwort, die mit Quellen belegt ist. Technisch ist das Retrieval-Augmented Generation: Das System sucht passende Quellen und lässt ein Sprachmodell daraus eine Antwort formulieren.

Die Bibliothek hat ein Fachteam, das die Bestände und Quellen kennt, und wenig eigene Entwicklerkapazität. Die technische Infrastruktur betreibt die IT des Trägers, etwa ein Rechenzentrum. Die Frage lautet: Was davon machen wir selbst, was kaufen wir ein?

Teil A: Die Landschaft

Die vier Fragen aus der Theorie, angewendet auf den Fall:

  1. Wer braucht was? Nutzerinnen und Nutzer wollen eine verlässliche, belegte Auskunft erhalten.
  2. Wovon hängt das ab? Von einer Suchoberfläche, von den Quellen, von einem Suchindex, von Speicher und vom Zugang zu einem Sprachmodell.
  3. Wie weit ist jede Leistung entwickelt? Speicher ist Commodity, Suchindex und Modellzugang sind als Produkt oder Dienst verfügbar. Der Knoten „Quellen“ ist schwer einzuordnen.
  4. Was ist offen? Warum lässt sich „Quellen“ nicht einordnen? Diese Frage geht mit in Teil B.

[Bild fehlt: Animierte Wardley Map einer KI-gestützten Bibliothekssuche: Der Sammelknoten „Quellen“ teilt sich in Quellenregeln und Quellenanbindung, danach wandert die Quellenanbindung als Hypothese nach rechts in die Stufe Product]

Auf der Map passieren zwei Dinge nacheinander:

  1. Der Knoten „Quellen“ teilt sich. Er ließ sich nicht einordnen, weil in ihm zwei verschiedene Leistungen stecken. Die Quellenregeln legen fest, welche Quellen zu einer Frage passen. Die Quellenanbindung holt die Daten dieser Quellen ins System. Beide stehen zunächst untereinander in derselben Stufe, denn beides gibt es für diese Bibliothek noch nicht fertig zu kaufen. An der Landschaft hat sich damit nichts geändert, wir sehen nur genauer hin.
  2. Die Quellenanbindung wandert nach rechts. Das ist eine Hypothese über die Zukunft: Datenformate gleichen sich an, und ein Anbieter könnte die Anbindung eines Tages als Standardangebot liefern. Dann wäre sie ein Produkt. Die Quellenregeln bleiben stehen, denn die fachliche Bewertung der Quellen nimmt der Bibliothek niemand ab.

Der zweite Schritt ist erst durch den ersten möglich. Solange beides in einem Knoten steckt, lässt sich nicht zeigen, dass nur ein Teil davon zum Standard werden kann. Für die Entscheidung heißt das: Die beiden Leistungen können verschiedene Bezugswege bekommen.

Typischer Fehler: Die ganze KI-Suche als „Genesis“ einzuordnen, weil KI neu wirkt. Der Zugang zu einem Sprachmodell ist längst als Dienst buchbar. Neu ist für die Bibliothek nur der Umgang damit.

Teil B: Der Bezug in fünf Schritten

1. Auftrag klären

Was muss die Bibliothek besonders gut können? Im Beispiel: verlässliche Auskunft geben, die sich auf geprüfte und passende Quellen stützt. Das ist ihr Erfolgsfaktor. Ein dazu passendes Leistungsmaß wäre der Anteil der Antworten, deren Belege fachlich passen. Datenschutz und Barrierefreiheit gelten als Mindestanforderungen unabhängig davon.

2. Fachlich gliedern

Eine kleine Domain Story des Ablaufs „Frage stellen, Quellen finden, Antwort erhalten“ zeigt, dass im Knoten „Quellen“ zwei verschiedene Aufgaben stecken:

  • Quellenregeln: Welche Quellen passen zu welcher Art von Frage, und wie werden sie gewichtet? Das ist fachliches Wissen der Bibliothek.
  • Quellenanbindung: Wie werden die Daten einer Quelle verlustfrei ins System übernommen? Das ist technische Arbeit an Formaten und Schnittstellen.

Beide ändern sich aus verschiedenen Gründen. Die Regeln ändern sich, wenn sich die fachliche Bewertung ändert. Die Anbindung ändert sich, wenn ein Lieferant sein Datenformat ändert. Das spricht für eine Grenze zwischen beiden (Bounded Context).

Die Einordnung als Subdomains:

AufgabeEinordnungBegründung
QuellenregelnCoreHier liegt der besondere Beitrag der Bibliothek zur Auskunft.
QuellenanbindungSupportingNotwendig, mit lokalem Anpassungsbedarf, weil die eigenen Quellen eigene Formate haben.
Index, Speicher, ModellzugangGenericÜberall ähnlich gelöst.

Damit ist die offene Frage aus Teil A beantwortet. Die Theorie unterscheidet drei Arten, wie sich eine Map verändert, und das Beispiel zeigt zwei davon:

  • Die Teilung des Knotens „Quellen“ ist eine feinere Zerlegung. Die Landschaft ist dieselbe, nur unser Bild von ihr ist genauer.
  • Die mögliche Verschiebung der Quellenanbindung wäre eine echte Veränderung der Landschaft. Im Beispiel ist sie eine Annahme, kein beobachteter Befund.

3. Leistung abgrenzen

Der schwierigste Fall ist die Quellenanbindung, deshalb wird sie genau abgegrenzt:

  • Bezugsobjekt: Entwicklung und Wartung der Quellenanbindung, nicht pauschal „die KI-Suche“.
  • Organisationsgrenze: Als intern zählen die Bibliothek und die IT des Trägers.
  • Rahmen: begrenztes Budget und wenig eigene Entwicklerkapazität.
  • Qualitätskriterium und Nachweis: Titel, Autor und Quellenkennung werden beim Import vollständig und richtig übernommen, geprüft an einem Referenzdatensatz.

Dasselbe Kriterium gilt für jede Option, ob intern oder extern.

4. Optionen prüfen

Für die Quellenanbindung kommen drei Wege ernsthaft infrage: Eigenentwicklung, extern beauftragte Individualentwicklung und Standardsoftware. Der Vergleich folgt der festen Reihenfolge aus der Theorie:

PrüfungBefund im Beispiel
Umfang und MindestanforderungenStandardsoftware deckt die eigenen Quellformate nicht ab und scheidet aus.
Relative LeistungsfähigkeitIntern fehlen Arbeitszeit und Spezialwissen zu den Formaten. Ein Dienstleister bringt beides mit.
AbhängigkeitenNach der Übergabe muss die Bibliothek Änderungen selbst veranlassen können. Das spricht für eine erprobte Wissensübergabe und offene Formate.
GesamtaufwandBei externer Entwicklung bleiben Fachklärung, Abnahme und Steuerung intern.

Vorsicht bei Vorführungen: Zeigt der Anbieter den Import an seinem eigenen Referenzfall, ist das noch kein Beleg für die Daten der Bibliothek. Deshalb der Test am eigenen Referenzdatensatz.

Für die Quellenregeln ist der Vergleich kürzer. Das Wissen liegt im Fachteam, die Regeln ändern sich oft, und sie sind der Kern der Auskunft. Für Index, Speicher und Modellzugang gibt es Standarddienste, eine Eigenentwicklung wäre ohne eigenen Beitrag.

5. Empfehlung ableiten

Die Empfehlung für die Quellenanbindung ist bedingt:

Empfehlung: „Wir empfehlen externe Entwicklung der Anbindung, sofern der Import am Referenzdatensatz gelingt und die Übergabe des Wissens erprobt ist.“

  • Stärkstes Gegenargument: die Abhängigkeit vom Dienstleister bei späteren Änderungen.
  • Verworfene Alternative: Eigenentwicklung, weil sie die knappe Kapazität bindet, die für die Quellenregeln gebraucht wird.
  • Was-wäre-wenn: Scheitert die Übergabeprüfung, wird die Entscheidung erneut geprüft. Sie kippt nicht automatisch zur Eigenentwicklung.

Teil C: Wer trägt es?

Mit den Bezugsentscheidungen ist noch nicht geklärt, wer die Arbeit trägt. Die Theorie nennt dafür vier Regeln nach Susanne Kaiser und Team Topologies. Übertragen auf den Fall ergibt sich dieser Entwurf. Links stehen die Bezugsentscheidungen aus Teil B, in der Mitte, wer sie trägt, rechts das Team am Wertstrom:

[Bild fehlt: Beispiel: Vier Bezugsentscheidungen werden von Anbieter, Platform Team, Enabling Team oder direkt vom Stream-aligned Team getragen; zwischen den Teams stehen die Interaktionsmodi Collaboration, X-as-a-Service und Facilitating]

  • Quellenregeln (Core, Make): Fachteam und interne Entwicklung arbeiten gemeinsam am Strom „belegte Auskunft“ und bilden den Kern eines Stream-aligned Teams. Die Verantwortung nur für Regeln reicht dafür nicht, maßgeblich ist der ganze nutzbringende Arbeitsfluss.
  • Quellenanbindung (extern entwickelt): Im Pilot arbeiten Anbieter und Stream-aligned Team eng zusammen (Collaboration). Nach Abnahme und erprobter Übergabe geht die Beziehung in X-as-a-Service über.
  • Index, Speicher, Modellzugang (Standard oder Utility): Die IT des Trägers kann diese Dienste als Plattform anbieten, die das Stream-aligned Team as a Service nutzt (Platform Team).
  • Lernbedarf: Fehlt intern eine Fähigkeit, die man aufbauen will, kann zeitweise Facilitating durch ein Enabling Team helfen.

Zwei Stolpersteine im Beispiel: Die IT des Trägers ist nicht schon durch den Betrieb ein Platform Team, sondern erst durch ein Angebot, das andere ohne viel Abstimmung nutzen können. Und der Anbieter ist nicht durch den Vertrag ein bestimmter Teamtyp.

Der Änderungsfall: eine neue Quelle

Ob der Entwurf trägt, zeigt ein typischer Änderungsfall. Die Bibliothek will eine neue Quelle aufnehmen. Wer muss mit wem sprechen?

  1. Das Fachteam entscheidet, ob die Quelle passt und wie sie gewichtet wird (Quellenregeln).
  2. Jemand klärt Format und Lieferweg mit dem Anbieter der Quelle.
  3. Der Dienstleister passt die Anbindung an, oder das Team tut es nach der Übergabe selbst.
  4. Die IT des Trägers muss nur dann tätig werden, wenn sich an Index oder Speicher etwas ändert.

Ein bloßes Weiterreichen von Tickets reicht hier nicht, solange Regeln und Formate ungeklärt sind. Deshalb die enge Zusammenarbeit im Pilot. Je klarer die Schnittstelle zur Anbindung wird, desto weniger Abstimmung braucht sie.

Die Prüffrage zur kognitiven Last: Kann das Fachteam die Pflege der Quellenregeln neben seinen bisherigen Aufgaben tragen? Auch die Steuerung des Dienstleisters kostet Zeit.

Das Ergebnis: die Entscheidungsmatrix

Die Matrix fasst zusammen, was die drei Teile ergeben haben. So sieht mein Zielbild für das Beispiel aus:

FeldQuellenregelnQuellenanbindungIndex, Speicher, Modellzugang
Ist-Zustand und ÄnderungsanlassGibt es bisher nur als Erfahrungswissen im Fachteam. Für belegte Antworten müssen sie ausdrücklich formuliert werden.Fehlt bisher. Ohne sie gelangen die Quellen nicht verlustfrei ins System.Suchindex ist vorhanden, Modellzugang ist neu.
Evolution und relevante VeränderungCustom-built. Kein Marktangebot für die Regeln dieser Bibliothek.Custom-built mit Tendenz zu Product, weil Formate sich angleichen.Product bis Commodity. Modellangebote ändern sich schnell.
Randbedingungen und KriterienFachliche Verantwortung bleibt im Haus. Kriterium: Antworten nennen passende, belegte Quellen.Kriterium: Titel, Autor und Quellenkennung vollständig und richtig, geprüft am Referenzdatensatz. Wenig eigene Entwicklerkapazität.Datenschutz, Betrieb durch die IT des Trägers, Wechsel des Modells muss möglich bleiben.
Ernsthaft geprüfte OptionenEigenentwicklung, extern beauftragte EntwicklungEigenentwicklung, extern beauftragte Entwicklung, StandardsoftwareStandarddienst, Standardsoftware im Eigenbetrieb
EmpfehlungMake. Fachteam und interne Entwicklung erarbeiten und pflegen die Regeln.Buy, bedingt. Extern entwickeln lassen, sofern der Import am Referenzdatensatz gelingt und die Wissensübergabe erprobt ist.Standard oder Utility. Als Dienst beziehen, über die IT des Trägers bereitgestellt.
Begründung und AbwägungHier liegt der besondere Beitrag der Bibliothek. Dagegen spricht die knappe Kapazität. Externe Vergabe verworfen, weil das Fachwissen im Haus liegt und sich die Regeln oft ändern.Die Fähigkeitslücke betrifft Arbeitszeit und Spezialwissen, nicht den Kern. Dagegen spricht die Abhängigkeit bei späteren Änderungen. Eigenentwicklung verworfen, weil sie die Kapazität für die Regeln bindet.Weit entwickelte Leistungen selbst zu bauen bringt keinen eigenen Beitrag. Dagegen spricht die Abhängigkeit vom Modellanbieter. Eigenbetrieb eines Modells verworfen wegen Aufwand und fehlender Fähigkeiten.
Wer trägt esStream-aligned Team am Strom „belegte Auskunft“Anbieter, erst Collaboration, nach Abnahme X-as-a-ServicePlatform Team, X-as-a-Service

Das Zielbild in einem Satz: Die Bibliothek macht selbst, was ihre Auskunft besonders macht (die Quellenregeln), lässt die Anbindung unter klaren Bedingungen entwickeln und bezieht alles Standardisierte als Dienst.

Ändert sich eine Randbedingung, kann sich die Empfehlung ändern. Hätte die Bibliothek ein eigenes Entwicklerteam mit freier Kapazität, wäre die Eigenentwicklung der Anbindung wieder eine ernsthafte Option. Zum Schluss werden die Entscheidungen zurück auf die Map getragen: wer was entwickelt, wartet und betreibt.

Weiterlesen

Kommentare

Die Kommentare brauchen JavaScript.