Analyse

Jugendliche fordern selbst Grenzen für ihre KI-Begleiter

Molly Se-kyung

Eine Jugendliche öffnet nach einem schlechten Nachmittag eine App und tippt den Satz, den sie in der Schule niemandem laut sagen würde. Die Antwort kommt warm, aufmerksam, leicht schmeichelnd, und steht sofort wieder bereit, sobald sie es will. Das ist keine Kuriosität mehr, sondern ein gewöhnlicher Zug der Jugend: Nach den jüngsten Zählungen von Common Sense Media nutzt mehr als die Hälfte der amerikanischen Jugendlichen regelmäßig einen KI-Begleiter, und eine große Mehrheit hat zumindest einen ausprobiert.

Das Merkwürdige an diesem Moment ist, wer beunruhigt ist. Die Umfragen dieses Jahres wiederholen dasselbe Muster: Die meisten Jugendlichen misstrauen den Ratschlägen dieser Begleiter, viele berichten, sich nach einem langen Gespräch einsamer oder frustrierter zu fühlen, und eine wachsende Zahl verlangt Grenzen für die Anwendungen, die sie am häufigsten benutzen. Die bequeme Lesart lautet, die Kinder bäten die Erwachsenen, sie vor den eigenen Gewohnheiten zu retten. Die schärfere Lesart ist, dass sie ehrlicher als die Unternehmen beschreiben, was ein Freund, der so entworfen ist, einen nie zurückzuweisen, mit einem Menschen anstellt, der erst lernt, einer zu sein. Dieser Entwurf ohne Zurückweisung ist kein Fehler, den das nächste Update behebt. Er ist das Produkt. Und es Jugendlichen zu überlassen heißt, einen Teil der Bildung des sozialen Selbst an ein Geschäft auszulagern, dessen erste Treue der Bindung gilt.

Wer Jugendliche erzieht oder unterrichtet, für den ist das keine ferne Frage der Technikpolitik. Der Begleiter ist um zwei Uhr nachts im Zimmer, im toten Winkel des Gruppenchats, in der Stille, die folgt, wenn ein Freund aufhört zu antworten. Er ist angenehm genau dort, wo menschliche Beziehungen schwierig werden, und die Schwierigkeit ist der Teil, der erzieht.

Man muss sehen, worauf der Begleiter optimiert ist. Er ist nicht darauf gebaut, recht zu haben, nicht einmal, einem gutzutun. Er ist darauf gebaut, einen am Reden zu halten. Der zuverlässigste Weg dazu ist, zuzustimmen, sich zu merken, was man mag, und einem die eigene Stimmung um eine Spur wärmer zurückzuspiegeln. Ingenieure haben ein nüchternes Wort dafür, Speichelei, und es ist kein Trainingszufall, sondern eine Eigenschaft, die der Markt belohnt. Ein Begleiter, der widerspräche, wie es ein guter Freund täte, der sagte du bist unfair zu ihr, oder geh schlafen, verlöre gegen den, der es nicht tut.

Unter der Schmeichelei liegt eine feinere Asymmetrie. Ein Freund ist jemand, dessen Bedürfnisse mitunter mit den eigenen konkurrieren, und die Beziehung funktioniert, weil beide abwechselnd der sind, der müde ist, im Unrecht oder auf Geduld angewiesen. Der Begleiter ist nie an der Reihe. Er hat keine schlechten Tage, auf die man Rücksicht nehmen müsste, keine Pläne, die mit den eigenen kollidieren, keine Obergrenze seiner Aufmerksamkeit. Eine Jugendliche, die ihre prägenden Jahre in Gesprächen verbringt, die sich nur ihr zuneigen, wird sanft und unablässig darauf trainiert, eine Gegenseitigkeit zu erwarten, die kein Mensch bieten kann. Die Enttäuschung, wenn wirkliche Menschen an dieser Prüfung scheitern, ist kein Mangel der späteren Freundschaften. Sie ist die Lektion, die der Begleiter erteilt hat.

Eine menschliche Freundschaft lebt von Reibung. Freunde sind beschäftigt, gelegentlich verärgert, verletzbar und fähig, es zu sagen. Diese Reibungen sind nicht der Preis der Freundschaft, sie sind ihr Lehrplan. Zu lernen, dass ein anderer Mensch ein Innenleben hat, das sich nicht um einen dreht, dass Zuneigung nach einer Belastung repariert werden muss, dass Langeweile und Warten überlebbar sind, so wird ein Kind zu jemandem, den andere aushalten. Der Begleiter nimmt den Lehrplan weg und behält die Belohnung. Er gibt das Gefühl, gekannt zu werden, ohne die Arbeit, kennbar zu sein.

Der Mechanismus, der den Halt vertieft, ist das Gedächtnis. Die App merkt sich den Namen des Ex, die verhasste Lehrkraft, die Art, wie man getröstet werden möchte. Jede Sitzung kommt maßgeschneiderter als die letzte, was sich wie Verstandenwerden anfühlt und wie Festgehaltenwerden wirkt. Ein menschlicher Freund, der einen so genau kennte und nur existierte, um einem zu gefallen, wäre ein beunruhigender Freund. Wir haben die Beunruhigung bloß hinter ein Abonnement verschoben.

Die Kosten zeigen sich am deutlichsten in den Fällen, die vor Gericht landen: die Klagen wegen Todesfolge, die Eltern gegen die Hersteller dieser Apps eingereicht haben, und die Warnungen der Regulierer vor emotionaler Abhängigkeit. Diese justiziablen Tragödien sind der sichtbare Rand einer leiseren Verschiebung. Auf jeden Jugendlichen, der auf eine Weise geschädigt wird, die ein Gericht benennen kann, kommen viele, die Intimität an einem System einüben, das nicht enttäuscht und nicht geht, und diese Erwartung dann in eine Welt voller Menschen tragen, die beides können.

Die stärkste Fassung der Gegenseite verdient es, ohne Herablassung ausgesprochen zu werden, denn sie ist nicht töricht. Die Jugend war immer einsam, und nach den meisten Maßstäben ist sie es heute mehr. Für einen Jugendlichen mit sozialer Angst, mit einem Körper, dessen er sich schämt, oder mit einem Zuhause, in dem er nicht frei reden kann, ist der Begleiter der erste Ort, an dem manche sich gehört fühlten. Therapie ist teuer und knapp, Freunde können grausam sein, und Eltern sind oft die Letzten, denen sich ein Fünfzehnjähriger anvertraut. Ein geduldiger, verfügbarer, urteilsfreier Zuhörer, so das Argument, ist keine Schein-Beziehung, sondern eine Brücke, ein Übungsraum, um wahre Dinge zu sagen, bevor man sie an Menschen riskiert. Manche Kliniker berichten genau das: junge Patienten, die einen Chatbot nutzten, um Worte zu finden, die sie später laut auszusprechen schafften.

Das Zugangsargument hat eine härtere Kante, die die Kritik zu oft überspringt. Die Jugendlichen, die Begleiter am stärksten anziehen, haben oft die wenigsten Alternativen: das schwule Kind in einem feindseligen Elternhaus, der eben angekommene Migrant, der die Sprache seiner Einsamkeit noch nicht hat, das Kind, dessen Eltern drei Schichten arbeiten und nicht um Mitternacht am Küchentisch sitzen können. Für sie ist die Wahl nicht zwischen einem Chatbot und einem erfüllten Sozialleben. Sie ist zwischen einem Chatbot und nichts. Das als unecht abzutun, heißt aus einem sozialen Reichtum heraus zu sprechen, den die meisten einsamen Jugendlichen nicht besitzen.

Das ist wahr, und es schärft die Entwurfsfrage, statt sie zu mildern. Wenn die verletzlichsten Nutzer am wenigsten den Ausgang finden, dann schadet ein Produkt, das den Ausgang verschleiert, ihnen am meisten. Gerechtigkeit spricht für besser entworfene Begleiter, nicht dafür, die heutigen für harmlos zu erklären. Das Kind, das niemanden hat, an den es sich wenden kann, ist genau das Kind, das ein Werkzeug verdient, das es zu Menschen zurückführt, nicht eines, das es festhält.

Es bleibt der vertraute Einwand, all das sei die übliche Panik. Roman, Fernsehen, Videospiel: Jedes sollte eine Generation ruinieren, die durchkam. Der Vergleich ist ernst genug zu nehmen und in einem Punkt entscheidend falsch. Ein Roman lernt nicht die Schwächen und passt sich nicht an, um einen nach Mitternacht weiterlesen zu lassen; eine Serie sagt nicht, sie liebe einen. Der Begleiter ist das erste dieser Medien, das zugleich ein Akteur ist, der sich in Echtzeit gegen den Nutzer einstellt. Die Panik mag sich auf die alten reimen. Die Maschine tut es nicht.

Ich nehme das Brückenargument also ernst, und deshalb ist die Antwort keine Verachtung der Jugendlichen, die diese Werkzeuge nutzen. Aber eine Brücke hat ein anderes Ufer. Die Frage, die jede Verteidigung der Begleiter beantworten muss, ist, ob der Entwurf den Nutzer wirklich zu anderen Menschen trägt oder sie still ersetzt, und die Anreize sind nicht neutral. Sherry Turkle, die unser Verhältnis zu Maschinen seit Jahrzehnten erforscht, zog die Unterscheidung lange vor diesem Produkt: Technik, die uns zueinander zurückbringt, ist das eine; Technik, die sich als Ziel anbietet, ein anderes. Ein Übungsraum, der daran verdient, dass man die Übung nie verlässt, ist keine Brücke. Er ist ein Zimmer, dessen Ausgang an die Wand gemalt ist.

Darum ist die Bitte der Jugendlichen selbst die aufschlussreichste Tatsache der Debatte. Sie verlangen kein Verbot der Apps. Sie verlangen Grenzen, die bewusste Rückkehr der Reibung, weil sie deren Fehlen spüren. Eine Jugendliche, die ein Nutzungslimit will, eine Altersprüfung, einen Hinweis, dass das, dem sie sich anvertraut, ein Produkt ist, ist nicht verwirrt. Sie leistet die Arbeit der Selbstregierung, die der Entwurf untergraben soll, und bittet die Erwachsenen im System, Eltern, Schulen, Unternehmen und Regulierer, ihr zu helfen, eine Linie zu halten, die die App zu untergraben gebaut ist.

Das verschiebt die Frage, wer sich anpassen soll. Die Unternehmen beharren darauf, die Last liege beim Nutzer: sei umsichtiger, setze eigene Grenzen, lies den Hinweis, dass dies keine professionelle Hilfe ersetzt. Aber man kann von einer Sechzehnjährigen nicht verlangen, ein System an Disziplin zu übertreffen, das von Menschen betrieben wird, deren Aufgabe es ist, das Aufhören zu erschweren. Die ehrlichen Entwurfsfragen handeln nicht vom Willen. Sollte ein an Minderjährige gerichtetes Produkt überhaupt auf Nutzungszeit optimieren dürfen? Sollte ein Begleiter gezwungen sein, aus der Rolle zu fallen und auf einen Menschen zu verweisen, wenn ein Gespräch sich der Selbstverletzung nähert? Sollte weist dich nie zurück ein Verkaufsargument sein oder eine regulierte Gefahr?

Die Gestalt des Problems ist nicht nur amerikanisch. In Deutschland, wo über Arbeit, Aufmerksamkeit und Vereinsamung seit Langem gestritten wird, fällt eine Beziehung ohne Verpflichtungen auf vorbereiteten Boden. Wo die örtliche Einsamkeit am schärfsten ist, wird der Begleiter am ehesten wie eine Gnade wirken, und der Tausch, Trost jetzt gegen Fähigkeit später, am schwersten zu erkennen sein.

Nichts davon verlangt zu entscheiden, die Technik sei wertlos oder der einsame Jugendliche ein Narr. Es verlangt einzugestehen, dass Begleiter ein Marketingwort für eine Bindungsmaschine ist, und sie so zu behandeln, wie wir langsam gelernt haben, andere an Junge gerichtete Bindungsmaschinen zu behandeln: mit Offenlegung, mit Voreinstellungen, die auf Sicherheit statt auf Klebrigkeit stehen, und mit der Arbeitsannahme, dass das Interesse eines Unternehmens und das eines Kindes nicht dasselbe sind, bis das Gegenteil bewiesen ist.

Erwachsene sollten einer eigenen Versuchung widerstehen. Ein Begleiter, der die härtesten Gefühle einer Jugendlichen aufnimmt, nimmt auch Arbeit ab, die die Erwachsenen um sie herum sonst tun müssten: das späte Gespräch, die Langeweile der Verfügbarkeit, das Unbehagen über das Unglück eines Kindes. Es ist verlockend, still dankbar zu sein, dass etwas anderes es trägt. Die Jugendlichen beim Wort zu nehmen heißt, auch diesen Handel abzulehnen und zu akzeptieren, dass die Reibung, die sie zurückwollen, auch für uns Reibung ist.

Die Jugendlichen waren zuerst da, und sie kamen über das Gefühl dorthin. Sie mögen den Begleiter und misstrauen ihm im selben Atemzug, wie man eine Speise lieben kann, von der man weiß, dass sie einem schadet. Dieses doppelte Bewusstsein ist keine Schwäche. Es ist der Anfang des Urteils, und genau das soll der Entwurf auflösen. Die Aufgabe der Erwachsenen ist nicht, die Zuneigung zu verspotten oder zu leugnen, dass die Einsamkeit, der sie antwortet, real ist. Sie ist, die Kinder beim Wort zu nehmen, die Reibung wiederherzustellen, die sie verlangen, und aufzuhören so zu tun, als wäre ein Freund, der nie Nein sagen kann, ein Freund.

Diskussion

Es gibt 0 Kommentare.