Die KI-Prüftoolsuite

Werkzeuge und Verfahren zur KI-Prüfung

Prüfungen sind ein wichtiger Baustein von Entwicklungsprozessen und der Qualitätskontrolle. Sie können freiwillig erfolgen, z.B. mit dem Ziel, eine starke und zuverlässige Marke zu schaffen, dienen aber auch häufig als Grundlage für die Zulassung und das Inverkehrbringen von Produkten, wenn dies durch Regulierungen und Standards gefordert ist. Gerade bei KI-Systemen gelten diese Motivationen in besonderem Maße, denn nicht nur Unternehmen, die Hochrisiko-KI-Anwendungen entwickeln oder einsetzen, müssen sich mit der Qualitätssicherung ihrer Anwendungen auseinandersetzen. Dafür entwickeln wir Prüfwerkzeuge und Verfahren, die KI-Anwendungen in Bezug auf ihre Verlässlichkeit, Fairness, Robustheit, Transparenz oder Datenschutz hin untersuchen und bewerten.

Unsere Prüf-Toolsuite ermöglicht eine umfangreiche Prüfung von KI-Anwendungen. Das Paket an Prüfwerkzeugen deckt eine große Bandbreite verschiedener Dimensionen der Vertrauenswürdigkeit ab – darunter Transparenz, Verlässlichkeit, Robustheit. Auf dieser Seite möchten wir Ihnen unsere Lösungen mittels einer Serie von Demonstratoren näher bringen.

Möchten Sie zunächst mehr über die allgemeinen Chancen und Risiken von KI erfahren und sich einen Überblick über die verschiedenen Tools verschaffen, bietet sich unsere interaktive Präsentation „Vertrauen ist gut, KI-Kontrolle ist besser“ an. Die Präsentation motiviert die Notwendigkeit von KI-Prüfungen und zeigt kompakte Informationen zu den Themenbereichen KI-Prüfdimensionen, Prüfkonzept, sowie unseren Prüftools.

Für einen detaillierteren Einstieg in die Thematik dienen unsere Unterseiten zu den einzelnen Demonstratoren, über welche es darüber hinaus möglich ist, die Demonstratoren selbst auszuprobieren.

Interaktive Präsentation

»Vertrauen ist gut, KI-Kontrolle ist besser«

Unsicherheitsbewertung

Wissen, wie viel man nicht weiß

Die Zuverlässigkeit von KI-Modellen ist insbesondere in sicherheitskritischen Anwendungen Voraussetzung für deren vertrauenswürdigen Einsatz. Daher ist es wichtig, die Unsicherheiten in den Vorhersagen eines Modells eingeschätzt werden. Anschließend können problematische Ausgaben erkannt und so fehlerhafte Vorhersagen vermieden werden, oder es können im Fehlerfall entsprechende Mitigationsstrategien ermöglicht werden.

Unsere Prüfplattform

Reproduzierbare KI-Testing-Pipelines leicht gemacht

Eingebettet sind die unterschiedlichen Werkzeuge in eine Prüftool-Plattform – eine Software-Umgebung, in welcher die Prüfwerkzeuge operieren können. So können die Tools einfacher in der Praxis eingesetzt werden: Sie sind dann nicht nur miteinander kompatibel, sondern auch mit einer großen Bandbreite verschiedener Daten- und Modellformate.  Die graphische Oberfläche der Prüfplattform bietet einen leicht verständlichen Zugang für ein breites Spektrum an Nutzer*innen.

Zugriff auf unsere Demonstratoren

Nutzung der AI4EU Plattform

Unsere Demonstratoren werden auf der AI4EU Plattform zur Verfügung gestellt und können darüber auch ausgeführt werden. Zur Nutzung wird ein AI4EU-Account benötigt. Die Erstellung eine Accounts sowie das Starten eines Demonstrator wird im Video erklärt.“