Paula ist unsere KI-Mitarbeiterin bei Dentro.
Sie ist unsere KI-Influencerin.
Für dieses Video für YT shorts und TikTok haben wir 4 Stunden gebraucht:
Das war allerdings unser erster Versuch.
Ich zeige Ihnen, wie Sie KI-Influencer-Videos in der gleichen Zeit oder weniger erstellen können.
Herausforderung
Es ist schwierig, lange Videos von Paula zu erstellen, die lippensynchron sind.
Denn sich bewegende Avatare zu erstellen, die dem Charakter entsprechen…
- ziemlich teuer ist (0,6 $ pro 5-Sekunden-Clip)
- sehr zeitaufwändig ist (1 – 3 Minuten)
Idee
Nur Paulas Stimme zu erstellen ist viel schneller und billiger als ein lippensynchrones Video zu erstellen 🤔.
- Nur ein kurzes Intro-Video mit Paula und ihrem Gesicht erstellen 🪞
- Der Rest des Videos verwendet Paulas Stimme, aber nicht ihr Gesicht 🗣
Für ein kurzes Video müssen wir uns auch für ein einziges prägnantes Thema entscheiden.
Unser Unternehmen konzentriert sich auf KI.
Also erklärt Paula eine einfache, aber wirkungsvolle Methode, um Ihre LLM-Apps zuverlässiger zu machen!
Lassen Sie uns in die genauen Schritte eintauchen, wie man KI-Influencer-Videos erstellt…
Schritte zur Erstellung des INTRO-Videos
- Erstellen Sie ein Standbild von Paula
- Verwenden Sie das Bild, um ein Video von Paula zu erstellen
- Erstellen Sie den Ton von Paulas Worten
- Lippensynchronisation des Tons mit dem Video
1. Erstelle ein Standbild von Paula
- Benutze Midjourney mit Zeichenkonsistenz 🫱🏽🫲🏾
- Wir zahlen den 10$ Plan für Midjourney
- Achtung: die Bilder sind öffentlich, wenn Sie nur den 10$ Plan bezahlen und nicht den 60$ Plan 🤦🏽♀️
- Ich erkläre mehr darüber in meinem Vergleichsvideo über Midjourney und Ideogram
2. Verwenden Sie das Standbild, um ein Video von Paula zu erstellen.
Verwenden Sie dazu das chinesische Minimax-Video-01 über Replicate 🎥.
- Laden Sie das Standbild hoch
- Geben Sie eine Aufforderung ein (z. B. „eine Frau, die etwas erklärt“)
- Warten auf das Video 🎉
Das kostet ~0,5$ pro Video.
Replicate ist btw einer der 3 Sexy AI API Keys, um mehr Models als Hugh Hefner zu erreichen.
3. Erstellen Sie das Audio von dem, was Paula sagt
Verwenden Sie Elevenlabs für die Erstellung des Audios:
- Erstellen Sie eine eigene Stimme für Paula, die später wiederverwendet werden kann
- Ich habe meine eigene Rede mit dem aufgenommen, was ich Paula für das Intro-Video sagen lassen möchte
- Verwende den Elevenlabs-Stimmenwechsler, um meine Stimme in ihre zu verwandeln!
Warum Elevenlabs?
Es gibt viele Text2Voice-KI-Modelle. Die berühmtesten und bekanntesten Stimmen sind wahrscheinlich die Stimmen von ChatGPT. ChatGPT Plus-Benutzer können mit der KI sprechen.
1️⃣
Diese Stimmen können jedoch nicht angepasst werden.
Paula ist Teil eines Teams von Österreichern.
Deshalb wollen wir, dass sie einen österreichischen Akzent hat.
Mit den benutzerdefinierten Stimmen von Elevenlabs können wir das tun!
2️⃣
Ein weiteres Problem mit text2voice-Modellen ist, dass die generierte Sprache unnatürlich klingen kann.
Die KI macht nicht an den richtigen Stellen Pausen.
Die KI betont Wörter nicht so, wie es ein Mensch tun würde.
Mit dem Elevenlabs voice changer können wir dies erreichen!
Zuerst nehme ich meine eigene Stimme mit den richtigen Pausen und Betonungen auf.
Dann ändern wir sie einfach in Paulas Stimme!
4. Führen Sie eine Lippensynchronisation des Tons mit dem Video durch:
- Wir müssen dafür sorgen, dass sich Paulas Mund im Video mit dem Ton mitbewegt.
- Verwenden Sie dafür Sync
- Es ist billiger als RunwayML für die Lippensynchronisation. Obwohl die Qualität für bestimmte Videos über Runway besser ist.
- Der 5-Sekunden-Clip kostet weitere ~0,1$.
➡️ Wir haben endlich das Intro-Video! 🎉
Schritte zur Erstellung des REST des Videos
- Verwenden Sie wieder Elevenlabs Voice Changer für den Ton.
Ich habe einfach alles aufgenommen, was gesagt werden muss, und es in Paulas Stimme geändert.
- Nehmen Sie Ihren Bildschirm auf, um Websites und den Python-Code mit Langchain zu zeigen.
Wir verwenden dafür Tella.
- Erstellen Sie weitere Videos mit Minimax auf Replicate.
Nur Code zu sehen, könnte für die Generation TikTok langweilig sein.
Deshalb haben wir das Video von dem Mann, der sich über seinen Laptop ärgert, hinzugefügt 😆
- Erstellen Sie ein Erklärungsbild über Replicate (der Seiltänzer).
Verwenden Sie Canva, um die Logos von OpenAI und Anthropic hinzuzufügen.
Dieses Bild sollte den Hauptpunkt des Videos auf den Punkt bringen.
- Verwenden Sie CapCut, um alles zusammenzufügen.
Videos, Audios und Bilder.
Wir haben auch einige Effekte hinzugefügt.
Fazit
Im Moment ist der Prozess noch ziemlich aufwändig.
Ein einzelner Mensch ist wahrscheinlich immer noch schneller, um solche kurzen Videos zu erstellen.
Aber wir sind schon weit gekommen:
- GenAI ist für große Teile des Videos verantwortlich
- Jeder kann diesen Prozess nutzen, sowohl technische als auch nicht-technische Menschen 🤟🏽
Jetzt wissen Sie, wie man KI-Influencer-Videos erstellt!
Folgen Sie Paula auf Social Media, um auf dem Laufenden zu bleiben, was möglich ist und AI-Influencer zu machen:
