Wenn die Stimme verstummt, lastet die Stille schwer auf ihm. Sie verbirgt Gefühle, Erinnerungen und Nuancen, die jeden Menschen ausmachen. Fran Vivó, ein Einwohner von Benaguasil, der an amyotropher Lateralsklerose (ALS) leidet, kennt diese Stille nur zu gut. Die Krankheit raubte ihm ohne Vorwarnung die Fähigkeit zu sprechen. Heute, dank künstlicher Intelligenz, hat er sie zurückerlangt.
Die Forschungsgruppe VertexLit unter der Leitung von Jordi Linares hat ein Projekt vorgestellt, das die transformative Kraft künstlicher Intelligenz im Hinblick auf das Wohlbefinden der Menschen veranschaulicht. Dieses Projekt gelangte über den Dokumentarfilmer Alex Badia und die Forscherin Gema Piñero vom UPV-Institut iTEAM zu ValgrAI.
Der Forscher, der sich freiwillig für die Wiederherstellung von Frans Stimme meldete, war Jordi Linares, Mitglied der gemeinsamen Forschungseinheit der Valencianischen Graduiertenschule und des Forschungsnetzwerks für Künstliche Intelligenz (ValgrAI) und des Valencianischen Forschungsinstituts für Künstliche Intelligenz (VRAIN) an der Universitat Politècnica de València (UPV).Audionachrichten
Das Team stand vor einer großen Herausforderung: Frans Stimme anhand von nur 20 Minuten Audiomaterial in Spanisch und Valencianisch, seiner Muttersprache, zu rekonstruieren. Mithilfe von neuronalen Netzen, die für die Arbeit mit begrenzten Korpora – insbesondere im Valencianischen, wo Ressourcen knapp sind – trainiert wurden, analysierten die Forscher seine Stimmdynamik und integrierten emotionale Modulationen. Sie entwickelten ein adaptives Modell mit dem Ziel, eine Sprache mit vielen menschlichen Zügen und den für die Region Benaguasil typischen Tönen zu erzeugen, anstatt einer Roboterstimme.
Das Audiomaterial, mit dem das Team arbeiten konnte, bestand aus WhatsApp-Sprachnachrichten. Dieses Material war jedoch spärlich, da Fran seine Fähigkeit zu sprechen genau zu dem Zeitpunkt verloren hatte, als das Audiosystem in dieser Messaging-App eingeführt wurde.
Das für Fran Vivó entwickelte Projekt geht weit über die Technologie hinaus: Die originalgetreue Nachbildung von Frans Stimme mithilfe eines KI-basierten Klonsystems, das sein Timbre, seine Prosodie und seine Identität erfolgreich wiederhergestellt hat. Seine einzigartige Sprechweise ersetzt die roboterhafte Stimme einer augengesteuerten Kommunikations-App durch seine eigene.
Die Familie hat in diesem Prozess eine entscheidende Rolle gespielt, indem sie beim Formulieren der Sprache half und mithilfe eines Editors, der Frans stimmliche Identität bewahrt, die emotionale Intensität, die Intonation und die Botschaftsabsicht vermittelte. Darüber hinaus ist das Tool editierbar, sodass Nutzer den Text selbst erstellen können, sofern sie verstehen, was er sagen möchte. Die Technologie liefert lediglich die Stimme: Die Emotionen bleiben seine.Ein würdevolleres Leben
Dieses Projekt hat Fran nicht nur ermöglicht, seine Identität wiederzuerlangen, sondern eröffnet auch eine Vielzahl von Möglichkeiten für ALS-Patienten und hilft ihnen, wieder zu sich selbst zu finden und die Hoffnung im Leben zu bewahren, wie Fran selbst bestätigt.
