Hochrisiko oder nicht? So klassifizierst Du Deinen KI-gestützten Kundenservice richtig

Fällt Dein KI-Chatbot unter "Hochrisiko"? Lerne die Risikoklassen des AI Act kennen und wie Du Deinen KI-Kundenservice richtig einstufst, um Aufwand zu vermeiden.

Hochrisiko oder nicht? So klassifizierst Du Deinen KI-gestützten Kundenservice richtig Ratgeber
Karsten Kreh Karsten Kreh

Rechtlicher Hinweis

Die Inhalte dieses Artikels dienen ausschließlich allgemeinen Informationszwecken und stellen keine Rechtsberatung dar. Obwohl wir die Informationen mit größter Sorgfalt erstellen, übernehmen wir keine Gewähr für deren Richtigkeit, Vollständigkeit und Aktualität. Für eine verbindliche Beratung zu Deiner spezifischen Situation, wende Dich bitte an eine qualifizierte Rechtsanwältin oder einen qualifizierten Rechtsanwalt.

Die wichtigste Frage: Hochrisiko oder nicht?

Bei der Einführung eines KI-Systems im Unternehmen ist eine Frage entscheidender als alle anderen: Fällt das System in die Kategorie “Hochrisiko”? Die Antwort auf diese Frage bestimmt über Aufwand, Kosten und Dein rechtliches Risiko. Ein Hochrisiko-System unterliegt extrem strengen und teuren Auflagen. Ein System mit begrenztem Risiko hingegen hat nur überschaubare Transparenzpflichten.

Die gute Nachricht zuerst: Einfache Chat- und Sprachassistenten, deren Hauptzweck die Beantwortung von Kundenfragen ist, werden vom EU AI Act grundsätzlich als “begrenztes Risiko” eingestuft.

Die Komplexität beginnt jedoch, wenn fortschrittlichere Funktionen ins Spiel kommen. Könnte eine Stimmungsanalyse oder eine automatische Dringlichkeitserkennung Deinen KI-Assistenten zu einem Hochrisiko-System machen?

Wann wird ein Kommunikations-Tool zum Hochrisiko-System?

Der AI Act listet in seinem Anhang III die Bereiche auf, in denen KI-Systeme potenziell als hochriskant gelten. Für den Kundenservice sind vor allem zwei Punkte relevant: Systeme, die über den Zugang zu wesentlichen Dienstleistungen entscheiden, oder Systeme, die ein Profiling natürlicher Personen durchführen.

Hier entstehen die typischen Sorgenfalten:

  • Wird eine Stimmungsanalyse (“Anrufer klingt verärgert”) als verbotene “Emotionserkennung” oder riskantes “Profiling” gewertet?
  • Wenn die KI eine Dringlichkeit erkennt (“dringendes Anliegen”), entscheidet sie dann über den Zugang zu einer wesentlichen Dienstleistung?

Diese Befürchtungen sind verständlich, aber eine differenzierte Betrachtung zeigt, warum sie in den meisten Fällen unbegründet sind.

Der Schlüssel: Ist die KI nur ein Assistent für den Menschen?

Der AI Act sieht gezielte Ausnahmen vor, wann ein System trotz einer potenziellen Listung in Anhang III nicht als hochriskant gilt. Zwei dieser Ausnahmen sind für den Kundenservice entscheidend:

  1. Die KI dient dazu, das Ergebnis einer zuvor abgeschlossenen menschlichen Tätigkeit zu verbessern.
  2. Die KI führt eine vorbereitende Aufgabe für eine Bewertung durch, die letztlich von einem Menschen vorgenommen wird.

Genau hier liegt der Schlüssel. Die Funktionen eines gut konzipierten KI-Assistenten sind exakt auf diese Ausnahmen ausgelegt. Die Stimmungsanalyse trifft keine autonome Entscheidung. Sie führt eine vorbereitende Aufgabe aus, indem sie einem menschlichen Mitarbeiter einen zusätzlichen Datenpunkt liefert (z. B. “Anrufer wirkt verärgert”). Der Mitarbeiter kann diese Information nutzen, um das Gespräch besser zu führen. Die KI verbessert also das Ergebnis der menschlichen Tätigkeit, ohne die Kontrolle zu übernehmen.

Dieses Prinzip der “Human-in-the-Loop-Augmentation” ist der entscheidende Faktor zur Vermeidung der Hochrisiko-Klassifizierung. Solange die KI den Menschen unterstützt und nicht ersetzt, bleibt sie in der Regel ein System mit begrenztem Risiko.

Der EU AI Act: Ein praxisnaher Guide für deutsche Unternehmen

Bewusst auf der sicheren Seite bleiben

Das Fazit für Dich als Unternehmer ist klar: Du kannst innovative KI-Funktionen im Kundenservice nutzen, ohne die massive Last der Hochrisiko-Compliance auf Dich nehmen zu müssen.

Der entscheidende Faktor ist die Wahl eines Anbieters, dessen Produkt von Grund auf als Assistenzsystem für Menschen konzipiert ist. Ein KI-Assistent wie beispielsweise Safina, der Informationen aufbereitet und dem Menschen zur Entscheidung vorlegt, ist bewusst so gestaltet, dass er die Kriterien für ein Hochrisiko-System nicht erfüllt. So kannst Du die Vorteile der KI nutzen und bleibst dabei auf der rechtlich sicheren Seite.

9:41

Safina führte diese Woche 51 Telefonate

46

Vertrauensvoll

4

Verdächtig

1

Gefährlich

Letzte 7 Tage
Filter
EM
Emma Martin 67s 15:30

Möchte das Angebot für die neue Kampagne besprechen und hat Fragen zum Zeitplan.

LS
Laura Wagner 54s 14:45

Fragt nach dem Status der Bestellung und wann die Lieferung kommt.

TH
Tim Hoffmann 34s 13:10

Termin für Projektbesprechung nächste Woche vereinbaren.

Unbekannt 44s 11:30

Gewinnversprechen – wahrscheinlich Spam.

SK
Sophie Meyer 10s 09:15

Reklamation zum letzten Auftrag, bittet um Rückruf.

MM
Martin Neumann 95s 13. Dez

Möchte eine mögliche Zusammenarbeit besprechen.

AR
Anna Richter 85s 13. Dez

Ist Deine Kollegin und möchte über das Projekt sprechen.

JK
Jonas König 42s 12. Dez

Erkundigt sich nach verfügbaren Terminen nächste Woche.

LB
Lina Berg 68s 12. Dez

Hat Fragen zur Rechnung und bittet um Klärung.

Anrufe
Safina
Kontakte
Profil
9:41
Anruf von Emma Martin
12. Dez
11:30
67s

Möchte das Angebot für die neue Kampagne besprechen und hat Fragen zum Zeitplan.

Wichtigste Punkte

  • Rückruf an Emma Martin
  • Fragen zu Zeitplan & Konditionen klären
Zurückrufen
Kontakt bearbeiten

KI-Einblicke

Stimmung der Person Sehr gut

Der Anrufer war kooperativ und hat die benötigten Informationen bereitgestellt.

Dringlichkeit Niedrig

Der Anrufer kann auf eine Rückmeldung warten.

Audio & Transkript

0:16

Hallo, hier spricht Safina AI, die digitale Assistentin von Peter. Wie kann ich Ihnen helfen?

Hallo Safina, hier ist Emma Martin. Ich wollte über das Angebot und den Zeitplan sprechen.

Danke, Emma. Geht es bei Ihrer Entscheidung vor allem um das Standard- oder Pro-Paket für den Launch?

Genau. Wir brauchen das Pro-Paket und möchten nächsten Monat starten, wenn das Onboarding in der ersten Woche möglich ist.

Sag Ciao zu deiner altmodischen Mailbox.

Teste Safina kostenlos und beginne deine Anrufe intelligent zu verwalten.

Kostenlos testen