วิธีใส่บทพูดและลิปซิงก์ให้วิดีโอ AI
เรียนรู้วิธีใส่บทพูดและลิปซิงก์ให้วิดีโอ AI ผ่านสามเส้นทาง: บทพูดที่สร้างมากับภาพ เสียงแยก หรือเสียงบรรยาย แล้วกำกับเสียงสังเคราะห์เหมือนกำกับนักแสดง
ในบทเรียนนี้ คุณจะได้เรียนรู้
- สามเส้นทางสำหรับบทพูดในวิดีโอ AI: แบบเนทีฟ เสียงแยก และเสียงบรรยาย
- วิธีเขียนบทพูดแบบเนทีฟในพรอมต์ พร้อมถ้อยคำ ภาษา และวิธีพูด
- วิธีนำไฟล์เสียงเข้า ScreenWeaver ด้วยปุ่ม Add Voice ของตัวละครและโหนดเสียง
- วิธีกำกับเสียงสังเคราะห์ด้วยโน้ตการแสดงที่เขียนไว้
- ทำไมเสียงบรรยายจึงมักเป็นเส้นทางที่ง่ายที่สุดและให้ความเป็นภาพยนตร์มากที่สุด
- กฎเรื่องความยินยอมในการโคลนเสียงของคนจริง
บทพูดคือจุดที่หนัง AI พังบ่อยที่สุด เสียงผิดคน จังหวะผิด ปากไม่ตรงกับเสียง บทเรียนนี้ครอบคลุมสามเส้นทางสำหรับบทพูดในวิดีโอ AI และเมื่อไรควรใช้แต่ละแบบ บทพูดแบบเนทีฟ (native) ถูกสร้างไปพร้อมกับภาพ โดยเสียง การขยับปาก และบรรยากาศอยู่ในเทคเดียวกัน แบบเดียวกับที่ใช้สร้างบทพูดของ Thomas ใน The Photo เสียงแยกที่สร้างก่อนด้วยโมเดลแปลงข้อความเป็นเสียง (text-to-speech) ให้คุณควบคุมการแสดงและจังหวะได้ และใน ScreenWeaver เสียงนี้จะอยู่ในโหนดเสียงที่ส่งต่อไปให้โมเดลวิดีโอที่รับเสียงได้ ส่วนเสียงบรรยาย (voice-over) ไม่ต้องลิปซิงก์เลย ซึ่งเป็นไอเดียที่ Lost Garden ใช้กับอัศวินที่ไม่มีใบหน้าและไม่มีปาก คุณจะได้เรียนวิธีกำกับเสียงสังเคราะห์ด้วยโน้ตการแสดง ทำให้ตัวละครแต่ละตัวมีเสียงเป็นคนเดิมตลอด และเคารพกฎเรื่องความยินยอมในการโคลนเสียง
ทรานสคริปต์ฉบับเต็ม
ทรานสคริปต์ของเสียงบรรยายภาษาอังกฤษ
0:04Spoken lines are where AI films break most often – the wrong voice, the wrong timing, lips that don't match. In this lecture you'll learn the three routes for dialogue, when to use each one and how to direct a synthetic voice like an actor.
0:19Route 1 – native dialogue, generated with the picture. Some video models produce the voice, the lip movement and the ambience in the same take. That's how Thomas' line in the photo was made. The words are in the prompt, in quotes, with the language and the delivery, softly. Keep native lines short, one or two sentences, and keep the speaker clearly in frame.
1:02Route 2 – a separate voice, then the picture. You generate the voice first, with a text -to -speech model, so you control the performance and the timing, then the voice drives the video. In Screenweaver, a character's story element has an Add Voice button. It creates an audio node, where you upload the voice file, and that audio can be sent as a reference to the video models that accept audio. Dedicated lip -sync tools exist, too, outside the app, for shots that need frame -perfect sync.
1:31Note that the app doesn't generate voices itself – you bring the audio file. For a short film, a text -to -speech service with voice design is usually enough. For recurring characters, save the voice settings of each one, so every scene sounds like the same person.
1:46Whichever read you choose, direct the voice like an actor. Write an acting note in words – calm, grounded, a little tired, a southern English accent. The narration of this course was generated exactly that way, from a single voice and a single acting note. Keep one voice per character for the whole film. Generate a full scene in one pass, so the time beholds, and listen for mispronounced names before you move on.
2:12For Thomas's line, the note could be quiet, almost a whisper, a man who has rehearsed this sentence for days and still isn't ready to say it. A few words of direction change everything about a line.
2:26Route 3 – voiceover, with no lips to sync at all. An inner monologue, an orator, a letter read over images. It's the easiest route, and often the most cinematic one. Lost Garden uses a version of this idea. Its nights have no faces and no mouths, so there is nothing to sync. Emotion comes from posture, light and voice.
2:54One rule with no exception – never clone a real person's voice without their written consent. And check the rules of the platform where your film will play – some require you to disclose synthetic voices.
3:09Your exercise? Pick one line of dialogue from your script and produce it two ways – native, inside the generated shot, and as a separate voice with an acting note. Compare them in the cut. In the next lecture, we'll build the full soundtrack, edit the film and export it.
คอร์สฉบับเต็ม
เพลย์ลิสต์ YouTubeส่วนที่ 1 · ยินดีต้อนรับสู่การทำหนังด้วย AI
ส่วนที่ 2 · เขียนบทสำหรับหนัง AI
ส่วนที่ 3 · ออกแบบหนังของคุณ
ส่วนที่ 4 · ช็อตลิสต์และสตอรี่บอร์ด
ส่วนที่ 5 · สร้างหนังด้วย AI
- 5.1เลือกโมเดลวิดีโอให้เหมาะกับแต่ละช็อต5:18
- 5.2เขียนพรอมต์แบบผู้กำกับ: กล้อง แอ็กชัน การแสดง5:55
- 5.3Reference to Video: ให้ตัวละครและฉากตรงตามแบบทุกช็อต5:13
- 5.4แก้ช็อตที่พัง: ซ่อม จัดเฟรมใหม่ สร้างใหม่4:53
- 5.5เวิร์กช็อป ตอนที่ 1: บทและสตอรี่บอร์ด ทีละขั้นตอน6:21
- 5.6เวิร์กช็อป ตอนที่ 2: โปรดักชัน ทีละขั้นตอน5:02