Liela daļa jaunumu un produktu atjauninājumu, ko Adobe šonedēļ atteicās, nepārsteidzoši bija koncentrējas uz ģeneratīvo AI. Taču, lai gan šī gada lielākajā daļā ir vērojami milzīgi lēcieni attēlu un video veidošanā, Adobe koncentrējas uz savu AI piedāvājumu paaugstināšanu citā jomā: AI audio.
Divas jaunās funkcijas — skaņu celiņa un runas ģenerēšana — dara tieši to, ko liek domāt to nosaukumi. Varat izveidot fona mūziku un ierakstīt skriptus savam videoklipam. Taču katrai no tām ir praktiskas vadības ierīces, kas padara AI audio mazāk azartisku un vairāk noderīgu rīku visu prasmju līmeņu veidotājiem. Tie tagad ir pieejami beta versijā.
Adobe arī izlaiž sava jaunākā piektās paaudzes Firefly attēla modeļa beta versiju. Tas solās labāk radīt fotoreālistiskus attēlus, un tagad varat izmantot tūlītēju rediģēšanu. Ir arī jauns beta Firefly video redaktors, kas ir aprīkots ar vairāku celiņu laika skalu, kas ir paredzēts, lai palīdzētu jums apkopot AI ģenerētus klipus. Adobe arī paplašina partnerattiecības ar diviem jauniem AI uzņēmumiem ElevenLabs un Topaz Labs. Lai iegūtu vēl vairāk AI jaunumu, varat uzzināt par AI palīgiem, kas tiek piedāvāti Photoshop un Categorical.
Šis ir piemērs tam, kā jums tiek piedāvāts uzrakstīt savu AI mūzikas aprakstu.
Ģenerējiet mūziku un skaņu celiņus
Mūzikas licencēšana ir sarežģīta, īpaši komerciālai lietošanai. Tāpēc ļaujiet man sākt ar vissvarīgāko daļu: jebkurai mūzikai, kas ģenerēta, izmantojot Firefly ģenerēto skaņu celiņu, tiek piešķirta universāla licence, kas nozīmē, ka varat to izmantot jebkuram mērķim bezgalīgi. Adobe izveido savus AI rīkus, izmantojot saturu (šajā gadījumā audio), ko tai ir atļauts izmantot AI apmācībai. Tātad teorētiski jums nevajadzētu noņemt Firefly AI audio no YouTube vai citām platformām vai saņemt briesmīgu autortiesību brīdinājumu.
“Šis ir unikāls laiks pasaulē, kad mūzikas licencēšana visiem ir aktuāla, un radītāji ir vai nu neapmierināti, jo cenšas darīt labāko savam saturam, vai arī ir apmulsuši,” intervijā sacīja Adobe AI audio nodaļas vadītājs Džejs LeBūfs. “Tāpēc mēs tikai ceram novērst neskaidrības.”
Demonstrācijā Firefly noraidīja uzvedni ar mākslinieka vārdu, jo tā pārkāpa lietotāja vadlīnijas autortiesību bažu dēļ. Tā kā modele nav apmācīta, piemēram, Teilores Sviftas mūzikā, tā nevar radīt viņai līdzīgu mūziku.
Tagad jautrība: ģenerēt skaņu celiņu ir pirmais AI mūzikas rīks no Adobe, un tas ir izstrādāts, lai atvieglotu minējumus par to, ko vēlaties. Jūs augšupielādējat savu videoklipu, un AI to analizē. Pamatojoties uz savu novērtējumu, Firefly uzrakstīs uzvedni, kas, pēc tās domām, varētu būt piemērota jūsu videoklipam. Tā ir Mad Libs stila uzvedne, un jūs varat apmainīt deskriptorus pēc saviem ieskatiem. Uzvednei ir trīs daļas: apraksta vispārējo noskaņu, stilu (domāšanas žanrs) un mērķi (komerciāls, eksperimentāls utt.). Varat arī pielāgot tempu un enerģijas līmeni.
Kad esat apmierināts ar uzvedni, noklikšķiniet uz ģenerēt un mazāk nekā pēc divām minūtēm četri instrumentālie varianti būs gatavi atskaņošanai. Jūsu audio būs tikpat garš kā videoklips, taču varat to rediģēt pēc vajadzības. Varat augšupielādēt videoklipus, kuru garums nepārsniedz piecas minūtes.
Kā ģenerēt mūziku ar Firefly
Tagad varat izmēģināt savus spēkus, veidojot AI instrumentālo mūziku saviem videoklipiem. Gan skaņu celiņa, gan runas ģenerēšana ir pieejama, izmantojot Firefly, un tie ir beta versijā. Pārbaudiet, vai jūsu Adobe plānā ir iekļauta piekļuve Firefly, un, ja tā nav, varat iegūt plānu sākot no USD 10 mēnesī.
- Atveriet Firefly tīmeklī.
- Kreisās puses izvēlnē noklikšķiniet uz Ģenerēt.
- Zem tērzēšanas loga noklikšķiniet uz Izveidot skaņu celiņu no pieejamajām kartēm.
- Augšupielādējiet savu videoklipu, izmantojot kreisās puses izvēlni.
- Pēc tam Firefly analizēs jūsu videoklipu un kreisās puses izvēlnē uzrakstīs atbilstošu uzvedni.
- Ja jums nepatīk Firefly piedāvātais, varat noklikšķināt uz “X” un ierakstīt vēlamo uzvedni. Kreisās puses izvēlnē varat arī izvēlēties kādu no ieteiktajām vibrācijām, stiliem un mērķiem.
- Ritiniet uz leju un pēc vajadzības pielāgojiet enerģiju, tempu un ilgumu.
- Noklikšķiniet uz ģenerēt.
Kad jums ir skaņu celiņš, kas jums patīk, varat lejupielādēt visu videoklipu (vai tikai skaņu celiņu) savā datorā.
Šis ir četru mūzikas skaņu celiņu piemērs, ko Firefly izveidoja mākslīgā intelekta videoklipam, kurā daži cilvēki ballējas pludmalē.
Runas ģenerēšana
Runas ģenerēšana programmā Firefly ir vienkārša, un tajā ir iekļautas daudzas funkcijas, kas padarīs to noderīgu gandrīz jebkurā projektā. Tas ir vienkāršs logs, kurā varat ierakstīt vārdus, kurus vēlaties lasīt AI balsij. Varat arī augšupielādēt skriptu līdz 7500 rakstzīmēm — aptuveni 15–20 minūšu garu videoklipu. Pēc augšupielādes varat izvēlēties no 50 balsīm, katrai no kurām ir norādīts aptuvens vecums un dzimums, tostarp nebinārās opcijas. Varat ģenerēt runu 20 dažādās valodās. Wager jautrākais ir tas, ko varat darīt, lai precizētu savu uzvedni.
Runa ir vairāk nekā tikai vārdu lasīšana lapā. Kad mēs lasām garus fragmentus vai runājam ar citiem, mēs, protams, pievienojam savai runai uzsvaru, emocijas un ritmu. Ar jauno programmu jūs varat darīt to pašu, pievienojot pauzes vietās, kur vēlaties, lai AI atvilktu elpu, un izceļot sadaļas, kurās tonim vajadzētu mainīties.
Ja esat tāds pats kā es un neviens neizrunā jūsu vārdu pirmajā mēģinājumā, varat izmantot rīku “Labot izrunu”, lai pārliecinātos, ka nav nekādu izrunu. Atlasiet vārdu vai īpašvārdu un pēc tam pievienojiet fonētisko sadalījumu, un AI izmantos to, lai izlīdzinātu izrunu.
Šie rīki kopā ar praktisko iespēju pielāgot konkrētas sadaļas ir paredzēti, lai sniegtu jums lielāku kontroli, ko ne vienmēr piedāvā citas teksta pārvēršanas runas programmas.
“Tas ir veids, kā mēs varam sniegt reālistisku runu radītājiem, mazo uzņēmumu īpašniekiem, pedagogiem un ikvienam, kam patiešām ir tikai stāsts, un, iespējams, viņiem nav tik ērti, kā mēs vienkārši izvelkam mikrofonu un runājam,” sacīja LeBūfs.
Firefly audio ir pavisam jauns AI modelis. Wager tā nav jūsu vienīgā iespēja. Adobe šogad ir nepārtraukti papildinājis savu trešo pušu AI modeļu sarakstu gan AI video, gan attēlu jomā. Tas atkal paplašina šīs izvēles iespējas, iekļaujot ElevenLab daudzvalodu V2 modeli kā iespēju runas ģenerēšanai.
Lai uzzinātu vairāk, pārbaudiet kā darbojas Adobe Challenge Indigo kameras lietotne, tagad ar iPhone 17 atbalstu.
