Am compilat o listă cu cele mai utile și promițătoare programe bazate pe AI care cu siguranță vor fi folositoare pentru creatorii de conținut și marketerii online. Le-am testat pe multe dintre ele și îți vom spune dacă merită cu adevărat atenția.
1. Runway
Runway combină toate instrumentele de editare video necesare pe care le folosesc adesea creatorii de conținut. Instrumentele Runway se bazează pe AI și îți permit să editezi videoclipuri ușor și eficient în câteva minute. Serviciul este disponibil în browser, iar pentru a începe, este necesar doar să te înregistrezi.
Poți crea 3 proiecte gratuit în Runway; după aceea, va trebui să te abonezi. Abonamentul "Pro" costă 12 $ pe lună pentru proiecte nelimitate și posibilitatea de a edita videoclipuri la rezoluția 1080p și 4k. Există și un abonament "Echipă" de 28 $ pe lună, care poate fi folosit de mai multe persoane.
Dezvoltatorii Runway afirmă pe pagina de start a site-ului că instrumentele lor îți permit să înlături fundalul dintr-un videoclip, să înlături o selecție dintr-un videoclip și să urmărești un obiect în mișcare. Pentru test, am folosit un videoclip simplu cu un câine pentru a testa toate funcțiile:
În primul rând, vom testa funcția "Green Screen" care înlătură fundalul. Mecanismul de editare este simplu: încarci un videoclip pentru editare și aștepți să fie procesat. De obicei, durează aproximativ 3-5 minute. Apoi, dai click pe obiect pentru a-l selecta și a-l păstra în cadru.
Selecția a ieșit dincolo de obiect, așa că schimbăm markerul din modul de includere (including) în modul de excludere (excluding) în panoul din dreapta:
Selectăm zonele care au ieșit dincolo de obiect și obținem o selecție perfectă:
Apoi, salvezi proiectul și îl descarci pe pagina principală la rezoluție maximă pentru versiunea gratuită de 720p. Rezultatul a fost următorul videoclip:
Rezultatul poate fi considerat bun, și cel mai important, este ușor de obținut. În plus, nu va trebui să-ți faci griji că calitatea video va avea de suferit.
Acum să încercăm să înlăturăm obiectul din videoclip fără să îi pierdem sensul, folosind funcția "Inpainting". Am decis să înlăturăm mâna umană și să vedem dacă imaginea va avea de suferit.
Pentru a face lucrurile cât mai simple posibil, trebuie să selectezi obiectul sau grupul de obiecte pe care dorești să le înlături și să aștepți ca videoclipul să fie procesat:
În același timp, am înlăturat și iconița TikTok, și acesta este rezultatul final:
Înlăturarea mâinii a șters imaginea, iar acum videoclipul arată ciudat. Concluzia poate fi trasă în felul următor: funcția va fi bună pe un videoclip static sau pe unul în mișcare, dar cu un fundal solid. Aceasta este utilă în editarea videoclipurilor, unde camera surprinde în continuare procesul de creare a ceva. În videoclipurile complexe în mișcare, nu va fi posibil să înlături obiecte mari fără urme. Cu toate acestea, iconița TikTok a fost înlăturată imperceptibil. Aceasta va fi utilă atunci când reîncarci videoclipurile altora - poți înlătura cu ușurință marcajele nedorite.
2. DeOldify
Dacă ai nevoie să colorezi un videoclip sau o fotografie alb-negru veche, atunci AI-ul DeOldify este perfect pentru asta. Poți să colorezi doar videoclipuri scurte, iar dacă videoclipul este lung, trebuie să-l împarți în părți. Videoclipul trebuie încărcat pe YouTube - nu va funcționa să îl încarci de pe computer, este disponibil doar pentru fotografii.
Programul este disponibil online într-un browser, dar poți descărca și codul sursă deschis. Poți edita fotografiile în versiunea online la acest link, și videoclipurile aici. Pentru început, am încercat să redăm culoarea pe o fotografie veche cu copii și un câine, și acesta este rezultatul după câteva secunde:
Rezultatul este cu adevărat magic, culorile sunt alese foarte precis, și toate acestea se datorează unui AI instruit. Pentru a procesa o fotografie, trebuie mai întâi să te autentifici - asta este necesar de către site-ul My Heritage. Editarea fotografiilor este complet gratuită și nelimitată. La fel poți face și cu videoclipurile, iar rezultatul va fi de aceeași calitate.
Iată un exemplu de utilizator de YouTube care colorează un videoclip vechi al zborului dirijabilului german Graf Zeppelin din 1928:
3. CogVideo
Experții chinezi au creat un AI care generează videoclipuri scurte pe baza unei cereri textuale. La ieșire, modelul produce un GIF de patru secunde cu 32 de cadre. Dezvoltatorii au remarcat că intrarea textului pentru generarea videoclipurilor este în limba chineză.
În prezent, poți folosi complet AI-ul instalând programul de pe GitHub. Acest lucru necesită cunoștințe de programare. Există și o demonstrație disponibilă online. Funcțiile acolo sunt limitate, dar poți vedea cum funcționează AI-ul în ansamblu. Am generat câteva exemple pentru următoarele cereri:
Programul este promițător și va fi util atunci când ai nevoie să creezi un GIF perfect pentru un text. Sperăm ca CogVideo să fie disponibil complet online pentru toată lumea.
4. Dain App
Am vorbit despre Dain-App într-un articol recent despre AI, dar astăzi vom intra mai în detaliu în principiul de funcționare și vom arăta rezultatele. Dain-App lucrează pe baza inteligenței artificiale și este capabil să crească semnificativ fps într-un videoclip. AI-ul însuși determină traiectoria obiectului și completează cu precizie cadrele lipsă. Dain-App este un program complet gratuit, pentru NVIDIA îl poți descărca de aici.
Iată un utilizator de pe YouTube care a crescut fps-ul într-un videoclip de la 10 la 60 folosind Dain-App și arată de înaltă calitate.
Acum să trecem la setări și să vorbim despre cele mai importante aspecte ale lucrului în Dain-App. Merită să începi prin a reporni computerul înainte de a lucra cu programul și să nu deschizi nimic în afară de Dain-App.
Apoi trebuie să deschizi acest fișier:
Următorul pas, în programul în sine, este să selectezi videoclipul dorit, locul unde să salvezi fișierul și să începi procesul (în mod implicit, dublează FPS-ul).
Dacă apare o eroare, așa cum este prezentată în captura de ecran de mai jos, acest lucru indică că nu există suficientă memorie video.
Eroarea se rezolvă simplu: mergi la setările afișate mai jos și redu rezoluția videoclipului. Aceasta trebuie făcută înainte de a începe procesul:
Cu această configurare, înălțimea video permisă este de 600 de pixeli. Această ghidare ar trebui să te ajute să începi cu Dain-App și sperăm că ți-a fost de ajutor. În concluzie, Dain App este un program uimitor și foarte util pentru cei implicați în editarea video.
5. Unscreen
Unscreen este un serviciu online care îndepărtează fundalul dintr-un videoclip în câteva clicuri. Unscreen este alimentat de inteligența artificială (AI) și, prin urmare, recunoaște instantaneu și cu precizie subiectul principal și fundalul, ceea ce face utilizarea sa plăcută și ușoară. Spre deosebire de Runway, utilizatorul nu trebuie să selecteze niciun obiect - programul face totul de unul singur.
Serviciul este complet gratuit și disponibil într-un browser, dar există și o versiune "Pro" pentru 9 euro pe lună. Pentru versiunea "Pro", rezoluția este Full HD, nu există restricții privind lungimea videoclipului, nu există marcaj de apă și există suport pentru sunet. Pentru test, am luat un clip dintr-un videoclip YouTube despre aplicarea machiajului pentru a vedea cât de bine detectează AI o persoană:
După selectarea fișierului, au apărut probleme:
Videoclipul s-a încărcat până la 50%, iar apoi site-ul a afișat o eroare:
Problema era legată de VPN, după schimbarea acestuia, videoclipul a fost procesat fără probleme și s-a încărcat în câteva secunde. Iată rezultatul final:
Topaz Video Enhance AI este o aplicație plătită pentru Windows și MacOS care mărește rezoluția videoclipului până la 8K cu îmbunătățirea calității. Este foarte ușor și confortabil de lucrat cu ea, iar rezultatul se obține rapid și eficient. Sunt necesare doar trei pași pentru a îmbunătăți un videoclip: deschide videoclipul, selectează opțiunile dorite și salvează videoclipul.
În secțiunea "Procesare", poți selecta unul dintre cele șase modele AI care vor procesa videoclipul. "Setare" este responsabilă pentru calitatea videoclipului de ieșire. Poți alege o rezoluție ca procent, să introduci propria valoare sau să alegi valori până la 8K.
În secțiunea "Format", trebuie să selectezi formatul fișierului de ieșire și calea de salvare. În plus, poți tăia videoclipul și poți alege placa grafică cu care vei lucra.
Dar toate acestea sunt doar teoretice și se bazează pe ceea ce este scris în program. De fapt, totul este mai complicat, deoarece rezultatul depinde de puterea calculatorului. Chiar și dintr-un videoclip de zece secunde, nu vei putea crea o capodoperă în 8K dacă hardware-ul este slab. Pe un computer cu un procesor Intel Core i7 și 32 GB RAM, nu a fost posibil să se mărească rezoluția la 1080p. Procesul fie nu a început deloc, fie a fost foarte lent.
Un utilizator de pe YouTube a testat Topaz Video Enhance AI și a observat cum cadrul din videoclip s-a schimbat: După îmbunătățire, fața a început să arate ciudat și neobișnuit de netedă și neclară. Dacă te uiți la detaliile din jur, cu siguranță au început să arate mai bine.
Ar putea avea sens să folosești acest program pentru a îmbunătăți videoclipuri cu peisaje, tehnologie și orice altceva, dar nu fețele umane. Așa cum am menționat mai devreme, programul este plătit și costă de obicei 299 $, dar în prezent există o promoție pe site-ul oficial, unde este disponibil pentru 159 $.
7. Instant NeRF
Instant NeRF este o tehnologie AI de la studioul NVIDIA care transformă imagini 2D în videoclipuri 3D scurte. Cu alte cuvinte, AI-ul dă viață imaginii și arată obiectul din toate părțile. În acest fel, poți crea videoclipuri ale străzilor sau să simulezi filmări de pe o dronă, așa cum au făcut utilizatorii în videoclipul de mai jos:
Pentru a crea un videoclip 3D, trebuie să fotografiezi obiectul din diferite unghiuri și să furnizezi fotografiile AI-ului. Cu ajutorul AI-ului, Instant NeRF completează datele lipsă și antrenează modelul AI pentru a recrea scena 3D. Instant NeRF determină direcția luminii din orice punct în spațiul 3D, datorită căreia rezultatul este cât mai realist și credibil posibil.
Utilizarea online a tehnologiei AI nu va funcționa, dar este disponibilă în domeniul public sub formă de cod. Dezvoltatorii au creat chiar și un ghid pentru utilizatori pentru a-i ajuta să înceapă. Desigur, pentru asta, trebuie să ai cunoștințe minime de programare - fără ele, nimic nu va funcționa.
Stable Diffusion AI poate genera nu doar imagini, ci și animații. Această funcție a apărut relativ recent, dar deja produce rezultate impresionante care uimesc imaginația. Animația este creată pe baza unei descrieri textuale și constă dintr-o secvență de imagini generate individual, care se transformă în mod lin unul în altul. Videoclipul de mai jos a necesitat aproximativ 30 de minute pentru a fi generat.
De asemenea, în Stable Diffusion, poți îmbunătăți imagini și crea animații fără întreruperi din două fotografii.
Această caracteristică este în esență similară cu ceea ce oferă Dain App și Instant NeRF, dar nu necesită un program separat. Poți da viață nu doar unor videoclipuri scurte. Dintr-un număr mare de cadre, poți crea un videoclip lung și fără întreruperi, de înaltă calitate.
Poți descărca programul gratuit pe GitHub, făcând clic pe link-ul din antet, și poți vedea instrucțiuni detaliate pentru crearea animațiilor aici. Cea mai mare și detaliată versiune a Stable Diffusion pentru animații este Deforum Stable Diffusion V0.4. Aceasta conține o mare varietate de setări, fiecare dintre ele ajutând să se obțină rezultatul ideal la generarea animațiilor.
Singura problemă este că, pentru a înțelege aceste setări, poate fi nevoie de mult timp și efort. Chiar și dacă înțelegi setările, va fi dificil să previi rezultatul final - setările se comportă diferit în combinație unele cu altele. La început, totul va părea haotic și foarte complicat, dar nu trebuie să te temi, în final, totul cu siguranță va funcționa.
Iată un tutorial video care te va ajuta să înțelegi setările Deforum Stable Diffusion și va fi util la începutul călătoriei.
Phenaki AI de la Google poate genera videoclipuri pe baza unui text, de lungime de câteva minute, spre deosebire de CodVideo. În același timp, legătura dintre cadre nu este pierdută și, în general, videoclipul arată destul de stabil.
Dezavantajul AI-ului este că rezultatele sunt mici și de calitate scăzută în comparație cu alte programe similare.
Phenaki funcționează pe baza unui model de învățare profundă pentru a converti token-urile textuale, cum ar fi frazele sau cuvintele, în token-uri video. Modelul folosește o abordare autoregresivă în care videoclipul este construit în timp pe măsură ce fiecare indiciu textual corespunde unei scene din povestea videoclipului. Acest lucru permite crearea de scene în schimbare dinamică, lucru care nu era posibil anterior pentru nicio AI care să genereze video. De aceea, Phenaki este numită o avansare în domeniul AI.
În prezent, AI-ul este îmbunătățit și singurul lucru pe care îl poți face este să te uiți la exemplele de creații pe site-ul oficial.
Concluzie
Programele AI într-adevăr accelerează lucrul și îmbunătățesc calitatea rezultatului, dar, din păcate, există dificultăți în utilizarea majorității programelor. 5 din cele 7 programe prezentate în această recenzie necesită abilități de programare și un calculator foarte puternic. În plus, rezultatul nu este întotdeauna așa cum ne-am dori.
Cu toate acestea, multe dintre aceste programe și servicii sunt unice și, prin urmare, vor fi utile celor implicați în editarea video. Sperăm că în viitor utilizarea acestor programe va deveni accesibilă, ușor de înțeles și simplă pentru toți utilizatorii.
