9 นวัตกรรมของโปรแกรมวิดีโอ AI ที่พลิกโฉมการสร้างคอนเทนต์และการตลาด

เราได้รวบรวมรายชื่อโปรแกรมที่ใช้ AI ที่มีประโยชน์และมีแนวโน้มมากที่สุด ซึ่งจะเป็นประโยชน์อย่างแน่นอนสำหรับผู้สร้างเนื้อหาและนักการตลาดออนไลน์ เราได้ทำการทดสอบหลายรายการแล้วและเราจะบอกคุณว่าสมควรได้รับความสนใจหรือไม่

1.Runway

Runway รวมเครื่องมือแก้ไขวิดีโอที่จำเป็นที่สุดที่ผู้ทำเงินมักต้องการ เครื่องมือรันเวย์นั้นใช้ AI และช่วยให้คุณแก้ไขวิดีโอได้อย่างง่ายดายและมีประสิทธิภาพในไม่กี่นาที บริการนี้มีอยู่ในเบราว์เซอร์และจำเป็นต้องลงทะเบียนเพื่อเริ่มต้นใช้งานเท่านั้น

คุณสามารถสร้าง 3 โปรเจ็กต์ได้ฟรีใน Runway; หลังจากนั้นคุณจะต้องสมัครสมาชิก การสมัครสมาชิก "Pro" มีค่าใช้จ่าย $ 12 ต่อเดือนสำหรับโครงการไม่จำกัดและความสามารถในการแก้ไขวิดีโอ 1080p และ 4k นอกจากนี้ยังมีการสมัครสมาชิกแบบทีมในราคา $28 ต่อเดือน ซึ่งสามารถใช้ได้หลายคน

นักพัฒนา Runway ในหน้าแรกของไซต์อ้างว่าเครื่องมือของพวกเขาช่วยให้คุณสามารถลบพื้นหลังออกจากวิดีโอ ลบส่วนที่เลือกออกจากวิดีโอ และติดตามวัตถุที่เคลื่อนไหวได้ สำหรับการทดสอบ เราใช้วิดีโอสุนัขง่ายๆ เพื่อทดสอบคุณสมบัติทั้งหมด:

ก่อนอื่น เราจะทดสอบฟังก์ชัน "หน้าจอสีเขียว" ซึ่งจะลบพื้นหลังออก กลไกการแก้ไขนั้นง่ายมาก: อัปโหลดวิดีโอเพื่อแก้ไขและรอให้ประมวลผล โดยปกติจะใช้เวลาประมาณ 3-5 นาที จากนั้นคลิกที่วัตถุเพื่อเลือกและเก็บไว้ในกรอบ

การเลือกไปไกลกว่าวัตถุ ดังนั้นเราจึงเปลี่ยนตัวเน้นข้อความจากโหมดรวม (รวม) เป็นโหมดแยก (ไม่รวม) ในแผงด้านขวา:

เลือกพื้นที่ที่อยู่นอกเหนือวัตถุและรับตัวเลือกที่สมบูรณ์แบบ:

จากนั้น บันทึกโปรเจ็กต์และดาวน์โหลดในหน้าหลักด้วยความละเอียดสูงสุดสำหรับเวอร์ชันฟรี 720p ส่งผลให้วิดีโอต่อไปนี้: 

ผลลัพธ์สามารถเรียกได้ว่าดีและที่สำคัญที่สุดคือบรรลุผลได้ง่าย นอกจากนี้ คุณยังไม่ต้องกังวลเกี่ยวกับคุณภาพของวิดีโอที่จะโดนเลย

ตอนนี้ มาลองลบวัตถุในวิดีโอโดยไม่สูญเสียความหมายโดยใช้ฟังก์ชัน "Inpainting" เราตัดสินใจที่จะถอดมือมนุษย์ออกและดูว่าภาพจะได้รับผลกระทบจากสิ่งนี้หรือไม่

เพื่อให้ง่ายที่สุด คุณต้องเลือกวัตถุหรือกลุ่มของวัตถุที่คุณต้องการนำออกและรอให้ประมวลผลวิดีโอ:

ในเวลาเดียวกัน เราได้ลบไอคอน TikTok และนี่คือสิ่งที่เกิดขึ้นในที่สุด: 

การเอามือออกทำให้รูปภาพเปื้อน และตอนนี้วิดีโอก็ดูแปลกๆ สามารถสรุปได้ดังนี้: ฟังก์ชันนี้จะใช้ได้ดีกับวิดีโอแบบคงที่หรือแบบเคลื่อนไหว แต่มีพื้นหลังทึบ สิ่งนี้มีประโยชน์เมื่อตัดต่อวิดีโอ โดยที่กล้องยังคงจับภาพกระบวนการสร้างบางอย่าง ในวิดีโอที่มีการเคลื่อนไหวที่ซับซ้อน จะไม่สามารถลบวัตถุขนาดใหญ่โดยไม่มีร่องรอยได้ อย่างไรก็ตาม ไอคอน TikTok กลับกลายเป็นว่าถูกลบออกไปโดยไม่รู้ตัว วิธีนี้จะเป็นประโยชน์เมื่ออัปโหลดวิดีโอของผู้อื่นอีกครั้ง คุณสามารถลบลายน้ำที่ไม่ต้องการได้อย่างง่ายดาย

2.DeOldify

หากคุณต้องการปรับสีวิดีโอหรือภาพถ่ายเก่าให้เป็นขาวดำ DeOldify AI นั้นสมบูรณ์แบบสำหรับสิ่งนี้ คุณสามารถลงสีได้เฉพาะวิดีโอสั้นๆ และถ้าวิดีโอนั้นยาว ก็ต้องแบ่งออกเป็นส่วนต่างๆ ต้องอัปโหลดวิดีโอไปยัง YouTube - การอัปโหลดจากคอมพิวเตอร์จะไม่ทำงาน แต่จะใช้ได้เฉพาะกับภาพถ่ายเท่านั้น

โปรแกรมพร้อมใช้งานออนไลน์ในเบราว์เซอร์ แต่คุณสามารถดาวน์โหลดรหัสโอเพ่นซอร์สได้ คุณสามารถแก้ไขรูปภาพในเวอร์ชันออนไลน์ได้ที่ลิงก์นี้ และวิดีโอที่นี่ ในการเริ่มต้น เราพยายามคืนค่าสีให้กับรูปภาพเก่ารูปหนึ่งที่มีเด็กและสุนัข และนี่คือสิ่งที่เกิดขึ้นหลังจากผ่านไปสองสามวินาที:

ผลลัพธ์ที่ได้นั้นวิเศษจริงๆ สีถูกเลือกอย่างแม่นยำ และทั้งหมดนี้ต้องขอบคุณ AI ที่ได้รับการฝึกฝน ในการประมวลผลภาพ คุณต้องเข้าสู่ระบบก่อน ซึ่งจำเป็นโดยเว็บไซต์ My Heritage การแก้ไขภาพนั้นฟรีและไม่จำกัด สามารถทำได้เช่นเดียวกันกับวิดีโอและผลลัพธ์จะมีคุณภาพเท่ากัน

นี่คือตัวอย่างของผู้ใช้ YouTube ที่ระบายสีวิดีโอเก่าของเที่ยวบินปี 1928 ของเรือเหาะ Graf Zeppelin ของเยอรมัน: 

3.CogVideo

ผู้เชี่ยวชาญชาวจีนได้สร้าง AI ที่สร้างวิดีโอสั้นตามคำขอข้อความ ที่เอาต์พุต โมเดลจะสร้าง GIF สี่วินาทีจำนวน 32 เฟรม นักพัฒนาสังเกตว่าการป้อนข้อความจริงสำหรับการสร้างวิดีโอเป็นภาษาจีน

ในขณะนี้ คุณสามารถใช้ AI ได้อย่างเต็มที่โดยการติดตั้งโปรแกรมจาก GitHub สิ่งนี้ต้องการความรู้ในการเขียนโปรแกรม มีการสาธิตออนไลน์ ฟังก์ชันมีจำกัด แต่คุณสามารถดูได้ว่า AI ทำงานอย่างไรในภาพรวม เราได้สร้างหลายตัวอย่างสำหรับข้อความค้นหาต่อไปนี้:

• ครอบครัว:

• ผู้หญิงโกรธในชุดสีแดง:

• คนขี่จักรยานในสภาพอากาศที่มีหิมะตก:

โปรแกรมนี้มีแนวโน้มดีและมีประโยชน์เมื่อคุณต้องการสร้าง GIF ที่สมบูรณ์แบบสำหรับข้อความ เราหวังว่า CogVideo จะพร้อมใช้งานออนไลน์อย่างสมบูรณ์สำหรับทุกคน

4.Dain App

เราได้พูดคุยเกี่ยวกับ Dain-App ในบทความล่าสุดเกี่ยวกับ AI แต่วันนี้เราจะเจาะลึกถึงหลักการทำงานและแสดงผลลัพธ์ Dain-App ทำงานบนพื้นฐานของปัญญาประดิษฐ์และสามารถเพิ่ม fps ในวิดีโอได้อย่างมาก ตัว AI เองจะกำหนดเส้นทางการเคลื่อนที่ของวัตถุและเติมเต็มเฟรมที่ขาดหายไปได้อย่างน่าเชื่อถือ Dain-App เป็นโปรแกรมฟรีสำหรับ NVIDIA คุณสามารถดาวน์โหลดได้ที่นี่

นี่คือผู้ใช้ YouTube ที่เพิ่ม fps ในวิดีโอจาก 10 เป็น 60 โดยใช้ Dain-App และดูมีคุณภาพสูงมาก 

ตอนนี้เรามาที่การตั้งค่าและพูดคุยเกี่ยวกับประเด็นที่สำคัญที่สุดในการทำงานใน Dain-App ควรเริ่มต้นด้วยข้อเท็จจริงที่ว่าก่อนทำงานคุณควรรีสตาร์ทคอมพิวเตอร์และอย่าเปิดสิ่งอื่นใดนอกจาก Dain-App

จากนั้นคุณต้องเปิดไฟล์นี้:

ถัดไป ในโปรแกรมเอง เลือกวิดีโอที่ต้องการ ตำแหน่งที่จะบันทึกไฟล์ และเริ่มกระบวนการ (โดยค่าเริ่มต้น FPS จะเพิ่มเป็นสองเท่า)

หากเกิดข้อผิดพลาดดังภาพหน้าจอด้านล่าง แสดงว่ามีหน่วยความจำวิดีโอไม่เพียงพอ

แก้ไขข้อผิดพลาดได้ง่ายๆ: ไปที่การตั้งค่าที่แสดงด้านล่างและลดความละเอียดของวิดีโอ ต้องทำก่อนเริ่มกระบวนการ:

ด้วยการกำหนดค่านี้ ความสูงของวิดีโอที่อนุญาตคือ 600 พิกเซล คู่มือนี้จะช่วยให้คุณเริ่มต้นใช้งาน Dain-App และเราหวังว่าคุณจะพบว่ามีประโยชน์ สรุปแล้ว Dain App เป็นโปรแกรมที่น่าทึ่งและมีประโยชน์มากสำหรับผู้ที่มีส่วนร่วมในการตัดต่อวิดีโอ

5.Unscreen

Unscreen เป็นบริการออนไลน์ที่ลบพื้นหลังออกจากวิดีโอได้ในไม่กี่คลิก Unscreen ขับเคลื่อนโดย AI (ปัญญาประดิษฐ์) ดังนั้นจึงจดจำวัตถุหลักและพื้นหลังได้ทันทีและแม่นยำ ทำให้น่าใช้และใช้งานง่าย ผู้ใช้ไม่จำเป็นต้องเลือกวัตถุซึ่งแตกต่างจากรันเวย์ - โปรแกรมทำทุกอย่างเอง

บริการนี้ไม่มีค่าใช้จ่ายและพร้อมใช้งานในเบราว์เซอร์ แต่ยังมีเวอร์ชัน "Pro" ในราคา 9 ยูโรต่อเดือน สำหรับเวอร์ชัน "Pro" ความละเอียดคือ Full HD ไม่มีข้อจำกัดเกี่ยวกับความยาวของวิดีโอ ไม่มีลายน้ำ และมีการรองรับเสียง สำหรับการทดสอบ เรานำคลิปจากวิดีโอ YouTube เกี่ยวกับการแต่งหน้าเพื่อดูว่า AI ตรวจจับบุคคลได้ดีเพียงใด:

หลังจากเลือกไฟล์แล้ว ปัญหาก็เริ่มขึ้น:

วิดีโอโหลดได้ถึง 50% จากนั้นไซต์แสดงข้อผิดพลาด:

ปัญหาเกี่ยวข้องกับ VPN การเปลี่ยนวิดีโอได้รับการประมวลผลโดยไม่มีปัญหาและโหลดได้ในไม่กี่วินาที นี่คือผลลัพธ์ที่เสร็จสมบูรณ์: 

6.Topaz Video Enhance AI

Topaz Video Enhance AI เป็นแอปพลิเคชันแบบชำระเงินสำหรับ Windows และ MacOS ที่ขยายความละเอียดวิดีโอสูงสุด 8K พร้อมการปรับปรุงคุณภาพ การทำงานนั้นง่ายและสะดวกสบายที่สุดเท่าที่จะเป็นไปได้และผลลัพธ์จะได้รับอย่างรวดเร็วและมีประสิทธิภาพ การปรับปรุงวิดีโอใช้เวลาเพียงสามขั้นตอน: เปิดวิดีโอ เลือกตัวเลือกที่คุณต้องการ และบันทึกวิดีโอ

ในส่วน "การประมวลผล" คุณสามารถเลือกหนึ่งในหกโมเดล AI ที่จะประมวลผลวิดีโอ "การตั้งค่า" รับผิดชอบต่อคุณภาพของวิดีโอที่ส่งออก คุณสามารถเลือกความละเอียดเป็นเปอร์เซ็นต์ ป้อนค่าของคุณเอง หรือเลือกค่าได้สูงสุด 8K

ในส่วน "รูปแบบ" คุณต้องเลือกรูปแบบไฟล์เอาต์พุตและเส้นทางการบันทึก นอกจากนี้ คุณสามารถตัดแต่งวิดีโอและเลือกการ์ดกราฟิกที่คุณจะใช้งานด้วย

แต่ทั้งหมดนี้เป็นเพียงในทางทฤษฎีและขึ้นอยู่กับสิ่งที่เขียนในโปรแกรม ในความเป็นจริงทุกอย่างซับซ้อนกว่าเนื่องจากผลลัพธ์ขึ้นอยู่กับพลังของคอมพิวเตอร์ แม้จะถ่ายจากวิดีโอสิบวินาที การสร้างผลงานชิ้นเอกใน 8K จะไม่ทำงานหากฮาร์ดแวร์อ่อนแอ บนคอมพิวเตอร์ที่มี Intel Core i7 และ RAM ขนาด 32 GB ไม่สามารถเพิ่มความละเอียดเป็น 1080p ได้ กระบวนการนี้ไม่ได้เริ่มต้นขึ้นเลยหรือดำเนินไปอย่างช้า ๆ

ผู้ใช้ YouTube ทดสอบ Topaz Video Enhance AI และสังเกตว่าเฟรมจากวิดีโอเปลี่ยนไปอย่างไร: หลังจากปรับปรุงแล้ว ใบหน้าเริ่มดูแปลกๆ เรียบและไม่เป็นธรรมชาติและพร่ามัว หากคุณดูรายละเอียดโดยรอบ พวกเขาเริ่มดูดีขึ้นอย่างแน่นอน

อาจเหมาะสมที่จะใช้โปรแกรมนี้เพื่อปรับปรุงวิดีโอด้วยธรรมชาติ เทคโนโลยี และทุกสิ่งยกเว้นใบหน้ามนุษย์ ดังที่ได้กล่าวไว้ก่อนหน้านี้ โปรแกรมจะได้รับการชำระเงินและโดยปกติจะมีราคา 299 ดอลลาร์ แต่ปัจจุบันมีโปรโมชันบนเว็บไซต์ทางการซึ่งมีให้ในราคา 159 ดอลลาร์

7.Instant NeRF

Instant NeRF เป็นเทคโนโลยี AI จากสตูดิโอ NVIDIA ที่เปลี่ยนภาพ 2 มิติเป็นวิดีโอ 3 มิติขนาดสั้น กล่าวอีกนัยหนึ่ง AI ทำให้ภาพมีชีวิตและแสดงวัตถุจากทุกด้าน ด้วยวิธีนี้ คุณสามารถสร้างวิดีโอของท้องถนนหรือจำลองการถ่ายทำจากโดรนได้ เหมือนกับที่ผู้ใช้ในวิดีโอด้านล่าง

ในการสร้างวิดีโอ 3 มิติ คุณต้องถ่ายภาพวัตถุจากมุมต่างๆ และป้อนภาพถ่ายไปยัง AI ด้วยความช่วยเหลือของ AI ทำให้ Instant NeRF เติมเต็มข้อมูลที่ขาดหายไปและฝึกโมเดล AI เพื่อสร้างฉาก 3 มิติขึ้นมาใหม่ NeRF แบบทันทีจะกำหนดทิศทางของแสงจากจุดใดๆ ในพื้นที่ 3 มิติ ซึ่งส่งผลให้ผลลัพธ์มีความสมจริงและเชื่อถือได้มากที่สุดเท่าที่จะเป็นไปได้

การใช้เทคโนโลยี AI ทางออนไลน์จะไม่ทำงาน แต่มีอยู่ในโดเมนสาธารณะในรูปแบบของรหัส นักพัฒนาได้สร้างคู่มือผู้ใช้เพื่อช่วยในการเริ่มต้น แน่นอน สำหรับสิ่งนี้ คุณต้องมีทักษะการเขียนโปรแกรมขั้นต่ำ หากไม่มีทักษะเหล่านี้ ก็จะไม่มีอะไรทำงาน

8.Stable Diffusion 

AI Stable Diffusion ไม่เพียงสร้างภาพเท่านั้น แต่ยังสร้างภาพเคลื่อนไหวได้อีกด้วย ฟีเจอร์นี้ปรากฏขึ้นค่อนข้างเร็ว แต่ให้ผลลัพธ์ที่น่าประทับใจซึ่งทำให้จินตนาการประหลาดใจ แอนิเมชันสร้างขึ้นจากคำอธิบายข้อความและประกอบด้วยลำดับของภาพที่สร้างขึ้นทีละภาพซึ่งสลับไปมาอย่างราบรื่น วิดีโอด้านล่างใช้เวลาประมาณ 30 นาทีในการสร้าง 

นอกจากนี้ ใน Stable Diffusion คุณสามารถปรับปรุงภาพและสร้างภาพเคลื่อนไหวที่ไร้รอยต่อจากภาพถ่ายสองภาพ 

โดยพื้นฐานแล้ว คุณลักษณะนี้คล้ายกับข้อเสนอของ Dain App และ Instant NeRF แต่ไม่จำเป็นต้องใช้โปรแกรมแยกต่างหาก คุณสามารถทำให้วิดีโอสั้น ๆ มีชีวิตขึ้นมาได้ จากเฟรมจำนวนมาก คุณสามารถสร้างวิดีโอที่ยาวและไร้รอยต่อคุณภาพสูงได้

คุณสามารถดาวน์โหลดโปรแกรมได้ฟรีบน GitHub โดยคลิกที่ลิงก์ในส่วนหัว และคุณสามารถดูคำแนะนำโดยละเอียดสำหรับการสร้างแอนิเมชันตรงนี่ Stable Diffusion เวอร์ชันที่ใหญ่ที่สุดและมีรายละเอียดมากที่สุดสำหรับแอนิเมชันคือ Deforum Stable Diffusion V0.4 ประกอบด้วยการตั้งค่าจำนวนมาก ซึ่งแต่ละการตั้งค่าจะช่วยให้ได้ผลลัพธ์ในอุดมคติเมื่อสร้าง

ปัญหาเดียวคือการทำความเข้าใจการตั้งค่าเหล่านี้อาจใช้เวลาและความพยายามมาก แม้ว่าคุณจะเข้าใจการตั้งค่าแล้วก็ตาม การคาดเดาผลลัพธ์สุดท้ายก็เป็นเรื่องยาก - การตั้งค่าจะทำงานแตกต่างกันเมื่อใช้งานร่วมกัน ในตอนแรกทุกอย่างจะดูวุ่นวายและซับซ้อนมาก แต่คุณไม่ต้องกลัวแล้วทุกอย่างจะออกมาดีอย่างแน่นอน

ที่นี่คือวิดีโอสอน ที่จะช่วยให้คุณเข้าใจการตั้งค่าStable Diffusionของ Defforum และจะมีประโยชน์เมื่อเริ่มต้นการเดินทาง

9.Phenaki by Google

Phenaki AI จาก Google สามารถสร้างวิดีโอตามคำขอแบบข้อความได้สูงสุดหลายนาที ซึ่งแตกต่างจาก CodVideo ในขณะเดียวกัน การเชื่อมต่อระหว่างเฟรมจะไม่ขาดหายไป และโดยทั่วไปแล้ว วิดีโอจะดูค่อนข้างเสถียร

ข้อเสียของ AI คือผลลัพธ์มีขนาดเล็กและมีคุณภาพต่ำเมื่อเทียบกับโปรแกรมอื่นที่คล้ายคลึงกัน

Phenaki ทำงานบนโมเดลการเรียนรู้เชิงลึกเพื่อแปลงโทเค็นข้อความ เช่น วลีหรือคำ เป็นโทเค็นวิดีโอ แบบจำลองใช้วิธี autoregressive ที่วิดีโอถูกสร้างขึ้นในช่วงเวลาหนึ่งเนื่องจากข้อความแต่ละใบสอดคล้องกับฉากในเรื่องราวของวิดีโอ วิธีนี้ช่วยให้คุณสร้างฉากที่เปลี่ยนแปลงแบบไดนามิก ซึ่งก่อนหน้านี้ AI ไม่สามารถสร้างวิดีโอได้ นั่นคือเหตุผลที่ Phenaki ถูกเรียกว่าเป็นความก้าวหน้าในด้าน AI

ในขณะนี้ AI กำลังได้รับการสรุปและสิ่งที่คุณทำได้คือดูตัวอย่างการสร้างสรรค์บนเว็บไซต์อย่างเป็นทางการ

บทสรุป

โปรแกรม AI เร่งความเร็วงานและปรับปรุงคุณภาพของผลลัพธ์ แต่น่าเสียดายที่มีปัญหาในการใช้โปรแกรมส่วนใหญ่ 5 จาก 7 โปรแกรมที่ตรวจสอบในการตรวจสอบวันนี้ต้องใช้ทักษะการเขียนโปรแกรมและพีซีที่ทรงพลังมาก นอกจากนี้ผลลัพธ์ไม่ได้เป็นไปตามที่เราต้องการเสมอไป

อย่างไรก็ตาม โปรแกรมและบริการเหล่านี้จำนวนมากไม่ซ้ำกัน ดังนั้นจึงมีประโยชน์สำหรับผู้ที่เกี่ยวข้องกับการตัดต่อวิดีโอ เราหวังว่าในอนาคต การใช้โปรแกรมเหล่านี้จะเข้าถึงได้ เข้าใจได้ และง่ายสำหรับผู้ใช้ทุกคน