TUM Logo

A Readiness Analysis of Audio to Video Deepfakes

A Readiness Analysis of Audio to Video Deepfakes

Supervisor(s): Nicolas Müller
Status: finished
Topic: Others
Author: Grygoriy Garyuk
Submission: 2021-09-15
Type of Thesis: Masterthesis
Thesis topic in co-operation with the Fraunhofer Institute for Applied and Integrated Security AISEC, Garching

Description

Abstract:

Deepfakes are now a familiar term to many people. In times of fake news, deepfakes have become a
threat to accelerate misinformation campaigns. But how difficult is it to create deepfake videos yourself?
This thesis presents recent methods and approaches to create deepfake videos from audio tracks.
Additionally, using one of the presented methods as an example, a pipeline is setup that on the one
hand improves the quality of the deepfakes and on the other hand automates their creation process.
The shown methods and modifications confirm that audio to video deepfakes are already available and
ready to use.


Zusammenfassung:

Deepfakes sind mittlerweile vielen Menschen ein Begriff. In Zeiten von fake news sind deepfakes eine
Bedrohung geworden Missinformationskampagnen zu beschleunigen. Aber wie schwierig ist es selbst
deepfake Videos zu erzeugen? In dieser Arbeit werden aktuelle Methoden und Ansätze vorgestellt aus
Audiospuren deepfake Videos zu erzeugen. Außerdem wird am Beispiel einer der vorgestellten Methoden
eine Pipeline aufgesetzt, die zum einen die Qualität der Deepfakes verbessert und andererseits
den Erzeugungsprozess automatisiert. Die präsentierten Methoden und Änderungen zeigen auf, dass
Audio zu Video Deepfakes bereits verfügbar und einsatzbereit sind.