Suche AI Programm zur Übersetzung von Videos in andere Sprachen

[lula2]

Suche ein AI Programm zur Übersetzung von Videos in andere Sprachen.
Ohne Limit der Filmlänge.
Also es geht nicht um Mimik etc. sondern einfach nur die Übersetzung per Stimme und nicht zur Untertitel Herstellung.

Da mir kein konkreter Name vorliegt habe ich es hier anstatt in der Software Suche gepostet.

 

[Kyonne]

Kurz und Knapp: Adobe Firefly .

 

[PowerMoor]

TRANSKRIPTION PER KI
FFmpeg 8.0 bringt automatische Untertitel per Whisper-KI

Was kann Whisper?​

Whisper kann dazu genutzt werden, um aus allen möglichen Arten von Audio- und Videoaufnahmen gesprochene Worte zu verschriftlichen. So können zum Beispiel Untertitel für fremdsprachige Filme in Form von .SRT-Dateien generiert werden oder Vorträge und Podcasts als Text ausgegeben werden - auch live. Die Transkription erfolgt auch beschleunigt per GPU, falls eine passende Grafikkarte vorhanden ist.

Um Whisper in FFmpeg fest zu integrieren, muss https://github.com/ggml-org/whisper.cpp bereits auf dem PC vorhanden sein, um dann in FFmpeg mittels eines Flags ("--enable-whisper") einkompiliert zu werden. Normale User werden aber sehr wahrscheinlich - wie bisher schon - FFmpeg als vorkompilierte binäre Version (https://www.ffmpeg.org/download.html) für Windows, Linux oder MacOS herunterladen können - dann auch als spezielle Version inklusive Whisper.

Lokale Audio Transkription schon jetzt​

Wer schon jetzt auf dem eigenen PC Audioaufnahmen transkribieren will, kann das zum Beispiel mit dem Open Source Tool https://github.com/kaixxx/noScribe machen, das von Kai Dröge, einem Soziologe an der Universität Luzern zusammen mit einer kleinen ehrenamtlichen Community entwickelt wurde und ebenfalls auf Whisper aufsetzt. Es bietet eine eigene Oberfläche und läuft auch auf PCs ohne moderne Grafikkarte.