„Jede hinreichend fortschrittliche Technologie ist von Magie nicht zu unterscheiden.“ ~Arthur C Clarke
"M&E-Erstellung mit Hilfe einer KI"
Wie wir alle ja wissen, ist die Materiallage bei Classic Doctor Who oft nicht gerade rosig. Viele der eigentlich nötigen Dinge, wie z. B. eine isolierte Musikspur oder die Effekte existieren heutzutage nur noch in wenigen Fällen.
Auf der Suche nach einer Lösung für dieses schwerwiegende Problem wandte sich Pandastorm Pictures nun an die Firma AudioShake., welche eine KI entwickelt haben, die eine beliebige Audioquelle wieder in einzelne Spuren aufteilen kann.
Alles anzeigenPandastorm Pictures hat AudioShake mit dem Mastering einer 1975 gedrehten Staffel der Originalserie beauftragt, um deren Synchronisation zu ermöglichen.
Die grenzenlose Natur des Internets hat zu einem explosionsartigen Anstieg des Interesses und der Beschäftigung mit mehrsprachigen Inhalten geführt. Streaming-Plattformen stellen regelmäßig beliebte internationale Fernsehsendungen vor, und die Verbraucher sehen mehr Unterhaltung in Fremdsprachen als je zuvor.
Filmproduktions- und Synchronisationsunternehmen nutzen verschiedene Arbeitsabläufe, um Inhalte in andere Sprachen zu synchronisieren. Die Bandbreite reicht von der schnellen Synchronisation durch KI-generierte Stimmen bis hin zur akribischen Wort-für-Wort-Arbeit durch menschliche Übersetzer und Synchronsprecher.
Das Wichtigste bei beiden Ansätzen ist die Fähigkeit, die ursprüngliche Dialogspur zu isolieren, damit sie entfernt und durch den übersetzten Dialog ersetzt werden kann. Was aber, wenn die Audiodateien des Inhalts nicht getrennt vorliegen? Wie kann man den Dialog in einer Sprache entfernen und durch eine andere ersetzen, wenn alle Audiodateien "miteinander vermischt" sind? Bei älteren oder alten Filmen und Fernsehsendungen kann die KI eine große Hilfe sein. Dies war der Fall, als das Produktionsstudio Pandastorm Pictures sich daran machte, die Originalserie Doctor Who ins Deutsche zu synchronisieren. Da die britische Serie ursprünglich in den 1970er-Jahren gedreht und produziert wurde, enthielt die einzige Audioquelle des Produktionsteams die englischen Dialoge, Musik und Soundeffekte, die alle übereinandergelegt waren.
"Als Label sind wir oft mit dem Problem fehlender Musik- und Effekttonspuren konfrontiert. Vor allem, wenn es sich um ältere Produktionen handelt. Im Jahr 2015 haben wir die Rechte für den BBC-Klassiker 'Doctor Who' erworben. Es war jedoch nur die englische Mischung verfügbar, sodass wir zwei Möglichkeiten hatten: entweder neue Musik zu komponieren und die Effekte zu erstellen - ein sehr kostspieliger und arbeitsintensiver Prozess - oder die englischen Dialoge herauszuschneiden und nur die fehlenden Abschnitte mit Musik und Effekten zu reproduzieren. Das würde aber nur bei Episoden mit einer einfachen Musik funktionieren." - Dennis vom Berg, Senior Produktmanager, Pandastorm Pictures
Glücklicherweise war Pandastorm in der Lage, die KI von AudioShake zu nutzen, die jede Audioquelle in einzelne Spuren aufteilen kann. Anhand des Tons einer Episode von Doctor Who konnte unsere Technologie die Dialogspur von der Hintergrundmusik und den Soundeffekten unterscheiden und trennen. Dadurch war Pandastorm in der Lage, die Originalspur neu zu mastern, den englischen Dialog zu entfernen und die neue deutsche Synchronfassung einzubauen.
"Als wir auf AudioShake AI stießen, schien dies eine mögliche Lösung zu sein... Ein Test mit der KI zeigte uns, dass wir die vorhandenen englischen Dialoge extrahieren konnten, sodass wir eine sehr gute Musik- und Effektspur erhielten. Unsere Techniker mussten zwar noch einiges nachbearbeiten, um die dabei auftretenden Tonstörungen zu überdecken, aber schließlich konnten wir die aufgenommenen deutschen Dialoge hinzufügen und die deutsche Tonspur für die Show vervollständigen." - Dennis vom Berg, Senior Produktmanager, Pandastorm Pictures
Nach ausgiebigen Tests von AudioShakes KI setzte Pandastorm Pictures nun erstmals diese KI ein, um den M&E für DIE ARCHE IM WELTRAUM zu erstellen, damit der Titel bei Metz-Neun Synchron ins Deutsche synchronisiert werden konnte. Das Team arbeitet derzeit an "GENESIS DER DALEKS", ebenfalls zusammen mit AudioShakes Unterstützung bei der M&E-Erstellung.