DeepDoubt

Weiterentwicklung von Unsicherheitsmaßen zur Erhöhung der Transparenz und Nachvollziehbarkeit im Deep Learning und deren Anwendung auf optische Systeme

Motivation

Förderung von Forschungsvorhaben zur Erklärbarkeit und Transparenz des Maschinellen Lernens und der Künstlichen Intelligenz

Mit der Bekanntmachung „Förderung von Projekten zum Thema Erklärbarkeit und Transparenz des Maschinellen Lernens und der Künstlichen Intelligenz“ sollen Forschungsvorhaben zur Erforschung und Entwicklung einer erklärbaren, transparenten und nachvollziehbaren Künstlichen Intelligenz (KI) gefördert werden. Die Fördermaßnahme ist Teil der Umsetzung der KI-Strategie der Bundesregierung und der Hightech-Strategie 2025. Durch die Fokussierung auf die Themen Nachvollziehbarkeit, Erklärbarkeit und Transparenz wird mit der Fördermaßnahme ein breiter und langfristiger Nutzen für die verschiedensten Anwender von KI ausgehen. Hierbei werden durch das BMBF insbesondere Verbundprojekte gefördert, die aus interdisziplinären Kooperationen zwischen der Informatik und angrenzenden Disziplinen wie Wahrnehmungspsychologie und Kognitionswissenschaften, Mathematik und Physik bestehen. Mit der Förderung von Forschungsvorhaben im Bereich KI schafft das BMBF die Grundlage für weitere Innovationen mit hohem gesamtwirtschaftlichem Potenzial und trägt damit zur Stärkung des Wirtschafts- und Wissenschaftsstandortes Deutschland bei.

Einschätzung der Unsicherheit von Entscheidungen bei Deep Learning Methoden

In allen Bereichen der Gesellschaft werden zunehmend KI-Methoden wie Deep Learning (DL) eingesetzt, so u. a. sehr erfolgreich in der Vorhersage von Ereignissen. Entscheidungen solcher Methoden sind allerdings schwer nachvollziehbar, wenn sie auf komplexe Eingangsdaten (z. B. Bilder) angewendet werden. Um die Nachvollziehbarkeit von Methoden und deren Resultaten zu erhöhen, können bereits heute spezielle Verfahren zur Darstellung genutzt werden. Dabei fehlt oft die Möglichkeit, die Modellgenauigkeit bei etablierten DL-Verfahren einzuschätzen, so dass Benutzer von KI-Systemen die Ergebnisse nicht richtig einordnen können. In der Praxis ist daher ein Mechanismus notwendig, mit dem man erkennt, wenn trainierte und somit bekannte Situationen verlassen werden und damit einschätzen kann, wie groß die Unsicherheit einer Vorhersage oder Entscheidung ist. Dies ist insbesondere im Hinblick auf die Nutzung von DL in kritischen und nicht komplett im Labor simulierbaren Anwendungen, wie dem autonomen Fahren, wichtig. Verfahren, die Unsicherheit modellieren können, waren bisher wegen zu hoher Anforderungen an die Rechenzeit nicht anwendbar. Neuere Näherungsansätze skalieren auch auf tiefe neuronale Netze und sollen hier eingesetzt werden.

Ziele und Vorgehen

Im Rahmen des Vorhabens werden Methoden für Transparenz, Nachvollziehbarkeit und Erklärbarkeit entwickelt. Das Hauptziel ist, die Modellgenauigkeit oder -unsicherheit im Rahmen von neuronalen Netzen zu quantifizieren und dem Nutzer über ein Werkzeug zur Verfügung zu stellen. Dem Nutzer wird nicht nur das Ergebnis sondern auch die Wahrscheinlichkeit dieses Ergebnisses mitgeteilt. Er erhält dann beispielsweise als Ergebnis einer Bilderkennung: dies ist zu 87% eine Katze. Diese zusätzliche Information über die Modellunsicherheit hilft dem Benutzer, das Ergebnis einzuordnen. Darüber hinaus soll am Beispiel optischer Systeme erforscht werden, wie eine transparente Entscheidungsfindung auch bei großen Datenmengen effizient zu modellieren ist. Die Nutzung von Unsicherheitsmaßen kann auch für andere Maschinelle Lernverfahren wie beispielsweis im Active-Learning angewendet werden, bei dem ein Lernalgorithmus mit dem Benutzer interagieren kann. Dafür ist über die reine Methodenentwicklung hinaus eine grafische Schnittstelle erforderlich, um diese Methoden für Anwender verfügbar zu machen. Dies ist insbesondere im Bereich der Qualitätssicherung, Produkthaftung sowie Nutzung von KI im medizinischen Umfeld wichtig, um Fehlentscheidungen effektiv zu verhindern.

Innovationen und Perspektiven

Die assoziierten Unternehmen Siemens Logistics GmbH, Katamaran-Rederei Bodensee GmbH & Co. KG und exorbyte GmbH erproben die entwickelten Methoden im Bereich der Oberflächeninspektion, um Produktionsfehler zu erkennen und die Umgebung zu erfassen. Die entwickelten Lösungen werden als quelloffene Erweiterungen für die KNIME Analytics Platform veröffentlicht und sind somit unmittelbar für Wirtschaft und Gesellschaft verfügbar.

Projektinformation

Projektleitung

Hochschule Konstanz Technik, Wirtschaft und Gestaltung
Alfred-Wachtel-Str. 8
78462 Konstanz

Volumen

2.186.112,00 €

Laufzeit

04/2020 – 03/2023

Projektpartnerinnen und -partner

  • Hochschule Konstanz Technik, Wirtschaft und Gestaltung
  • KNIME GmbH