Nenda moja kwa moja kwenye maudhui

Utenganishaji wa Vyanzo kwa AI wa Wakati Halisi na Stems

Utenganishaji wa Vyanzo kwa AI wa Wakati Halisi na Stems

Utenganishaji wa vyanzo kwa AI wa wakati halisi unabadilisha sauti ya moja kwa moja kwa kuruhusu wahandisi kutenga sauti, ngoma, besi, na vyombo vingine papo hapo. Teknolojia hii inawezesha ukumbushaji upya wa moja kwa moja, mchanganyiko maalum wa IEM, na utumiaji upya wa utangazaji, lakini inakuja na ubadilishanaji katika ucheleweshaji, ubora wa artifakti, na nguvu ya usindikaji. Wahandisi wa SSOUNDS wanatathmini mifumo hii ili kuiunganisha katika mtiririko wa kazi wa DSP wa baadaye, kuhakikisha utendaji wa kiwango cha kitaalamu.

Mambo muhimu ya kuzingatia

  • Utenganishaji wa vyanzo kwa AI wa wakati halisi hutumia mitandao ya neva kutenganisha sauti, ngoma, na vyombo vingine kutoka kwa mtiririko wa sauti uliochanganywa.
  • Matumizi makuu ni pamoja na ukumbushaji upya wa moja kwa moja, mchanganyiko wa kibinafsi wa IEM, na utumiaji upya wa utangazaji.
  • Ucheleweshaji (ms 5 hadi 20) na artifakti zinabaki kuwa changamoto kubwa kwa matumizi ya moja kwa moja, hasa katika ufuatiliaji.
  • Usindikaji unahitaji GPU maalum au maunzi ya kiongeza kasi cha AI, kuongeza gharama na utata.
  • Ujumuishaji wa baadaye na DSP ya PA unaweza kuwezesha uelekezaji wa stems na udhibiti wa kanda kutoka kwa milisho moja ya stereo.
  • SSOUNDS inachunguza modeli za AI za ucheleweshaji wa chini kwa majukwaa yake ya amplifier ili kuleta teknolojia hii kwa mifumo ya sauti ya kitaalamu.

Jinsi Utenganishaji wa Vyanzo kwa AI wa Wakati Halisi Unavyofanya Kazi

Kimsingi, utenganishaji wa vyanzo kwa AI wa wakati halisi hutumia mitandao ya neva ya kina iliyofunzwa kwenye seti kubwa za data za sauti zilizochanganywa na stems zake zilizotengwa. Modeli kama Demucs, Spleeter, au algoriti za umiliki huchanganua masafa, awamu, na mifumo ya muda ya mchanganyiko unaoingia ili kutabiri ni vipengele vipi vinavyomilikiwa na kila chanzo. Tofauti na uchujaji wa jadi, ambao hutegemea bendi za masafa zisizobadilika, modeli za AI hujifunza saini za kipekee za vyombo na sauti, kuziwezesha kutenganisha vyanzo vinavyopishana katika masafa.

Katika matumizi ya moja kwa moja, mtiririko wa sauti huhifadhiwa katika fremu fupi (kwa kawaida ms 10 hadi 50), kusindikwa na mtandao wa neva, na kutoa kama stems tofauti. Changamoto kuu ni kufikia hili kwa ucheleweshaji wa chini vya kutosha kwa foldback (IEM) au matumizi ya utangazaji, kwa kawaida chini ya ms 10 kwa ufuatiliaji. GPU za kisasa na viongeza kasi maalum vya AI (k.m., NVIDIA TensorRT, Apple Neural Engine) hufanya hili liwezekane, ingawa suluhisho za CPU bado zinapambana na ucheleweshaji wa juu.

Matumizi: Ukumbushaji Upya wa Moja kwa Moja na Udhibiti wa Ubunifu

Kwa wahandisi wa sauti ya moja kwa moja, utenganishaji wa stems wa wakati halisi hufungua uwezekano mpya wa ubunifu. Fikiria kutenga sauti kuu kutoka kwa wimbo wa nyuma ili kuongeza reverb au delay bila kuathiri bendi, au kutoa solo ya gitaa ili kuituma kwenye mnyororo tofauti wa athari. DJ na wanamuziki wa elektroniki wanaweza kukumbusha upya maonyesho ya moja kwa moja kwa kunyamazisha au kusolo stems papo hapo, kuunda mashup za kipekee au matoleo yaliyopanuliwa.

Katika mazingira ya tamasha na konsati, teknolojia hii inaweza pia kutumika kuzalisha milisho tofauti kwa utangazaji au utiririshaji. Kwa mfano, mchanganyaji wa utangazaji anaweza kuhitaji stem safi ya sauti kwa TV wakati mchanganyiko wa ukumbi unabaki bila kubadilika. SSOUNDS inaona hii kama nyongeza ya thamani inayowezekana kwa mfumo wake wa DSP, kuruhusu wahandisi kuelekeza stems zilizotenganishwa kwa matokeo tofauti bila maunzi ya ziada.

Mchanganyiko wa Kibinafsi wa IEM na Ufuatiliaji

Jambo lingine la kuzingatia ni ubora wa artifakti: ikiwa utenganishaji utaanzisha hitilafu zinazosikika, awamu, au 'bleed' kati ya stems, inaweza kuharibu mchanganyiko wa ufuatiliaji. Modeli za hali ya juu za sasa hufikia utenganishaji karibu usioonekana kwa nyenzo zilizorekodiwa vizuri, lakini mchanganyiko wenye changamoto (k.m., uharibifu mkubwa, sauti zinazopishana) bado hutoa artifakti. Wahandisi wanapaswa kupima faida ya unyumbufu dhidi ya uharibifu unaowezekana.

Mipaka ya Sasa: Ucheleweshaji, Artifakti, na Nguvu ya Usindikaji

Licha ya maendeleo ya haraka, utenganishaji wa vyanzo kwa AI wa wakati halisi bado sio suluhisho la plug-and-play kwa kila hali ya moja kwa moja. Kikomo kikuu ni ucheleweshaji: hata modeli za haraka zaidi kwenye GPU za hali ya juu huleta ucheleweshaji wa ms 5 hadi 20, ambao unaweza kuwa tatizo kwa ufuatiliaji au utangazaji unaozingatia muda. Kwa matumizi ya FOH (mbele ya ukumbi) ambapo ucheleweshaji sio muhimu sana, hii inakubalika, lakini kwa IEM, kila millisekunde inahesabika.

Artifakti ni jambo lingine la wasiwasi. Modeli za AI zinaweza kutoa 'kelele ya muziki', sauti hafifu, zisizo za asili zinazofanana na chanzo asili lakini zikiwa tofauti kidogo. Katika mchanganyiko wa moja kwa moja, artifakti hizi zinaweza kukusanyika katika stems nyingi, kuharibu ubora wa jumla wa sauti. SSOUNDS inapendekeza kutumia utenganishaji wa stems kimsingi kwa madhumuni ya ziada (k.m., milisho ya utangazaji, kurekodi) badala ya kama chanzo pekee cha mchanganyiko muhimu wa ufuatiliaji hadi teknolojia ikomaa.

Nguvu ya usindikaji pia ni kizuizi. Kuendesha mtandao wa neva kwa wakati halisi kunahitaji GPU au kiongeza kasi maalum, kuongeza gharama na utata kwa mfumo wa sauti. Suluhisho za wingu zinaleta ucheleweshaji mwingi mno, kwa hivyo usindikaji wote lazima uwe wa ndani. SSOUNDS inachunguza ujumuishaji na chips za DSP za kizazi kijacho zinazojumuisha cores za AI inference, ambazo zinaweza kufanya utenganishaji wa stems kuwa kipengele cha kawaida katika amplifier na vidhibiti vya spika vya baadaye.

Mustakabali: Ujumuishaji na Mifumo ya PA ya Kitaalamu

Kadiri viongeza kasi vya AI vinavyopungua gharama na kuwa na ufanisi zaidi, utenganishaji wa stems wa wakati halisi unaweza kuwa chombo cha kawaida katika sauti ya kitaalamu. SSOUNDS inaona mfumo ambapo processor ya PA haishughulikii tu crossover na EQ bali pia hufanya utenganishaji wa vyanzo, kuruhusu wahandisi kuelekeza stems kwa kanda tofauti za spika au kuunda uzoefu wa sauti wa kuzama.

Kwa mfano, mfumo wa line array unaweza kutuma stem ya sauti kwa kikundi maalum cha katikati wakati vyombo vimepangwa kushoto na kulia, kuboresha ufahamu na ufikiaji. Vivyo hivyo, subwoofer zinaweza kupokea stems za besi na ngoma ya kick pekee, kupunguza uchafu. Kiwango hiki cha udhibiti kwa sasa kinawezekana tu kwa kurekodi kwa multitrack, lakini utenganishaji wa AI unaweza kuifanya ifikiwe kutoka kwa mchanganyiko wa stereo.

SSOUNDS inatafiti kwa bidii modeli za ucheleweshaji wa chini ambazo zinaweza kuendeshwa kwenye majukwaa yetu ya amplifier ya umiliki, kwa lengo la kudumisha ubora wa sauti na uaminifu ambao wataalamu wanatarajia. Ingawa hatuko tayari kutangaza bidhaa bado, uwezekano wa mifumo ya PA inayoendeshwa na AI ni mkubwa, na tumejitolea kuongoza.

Maswali yanayoulizwa mara kwa mara

Je, utenganishaji wa stems kwa AI wa wakati halisi unaweza kutumika kwa mchanganyiko wa IEM bila matatizo ya ucheleweshaji?

Kwa sasa, modeli nyingi za wakati halisi huleta ucheleweshaji wa ms 5 hadi 20, jambo ambalo linaweza kuwa tatizo kwa IEM. Kwa matokeo bora, tumia modeli zilizoboreshwa kwa ucheleweshaji wa chini (chini ya ms 10) na maunzi ya hali ya juu. SSOUNDS inafanya kazi kwenye suluhisho zilizounganishwa na DSP ili kupunguza ucheleweshaji.

Je, utenganishaji wa AI unafanya kazi vizuri na aina zote za muziki?

Inafanya kazi vizuri zaidi na mchanganyiko safi uliorekodiwa vizuri. Uharibifu mkubwa, mipangilio minene, au masafa yanayopishana yanaweza kusababisha artifakti. Muziki wa pop, rock, na elektroniki kwa ujumla hutenganishwa vizuri; muziki tata wa okestra au metal unaweza kuhitaji urekebishaji wa mikono.

Nahitaji maunzi gani ili kuendesha utenganishaji wa stems wa wakati halisi?

GPU yenye nguvu (k.m., NVIDIA RTX series) au kiongeza kasi maalum cha AI (k.m., Apple M-series, Intel Movidius) inapendekezwa. Suluhisho za CPU pekee mara nyingi zina ucheleweshaji mkubwa mno kwa matumizi ya moja kwa moja. Huduma zingine za wingu zipo lakini zinaongeza ucheleweshaji wa mtandao.

Je, utenganishaji wa stems kwa AI utachukua nafasi ya kurekodi kwa multitrack ya jadi?

Hapana katika siku za usoni. Utenganishaji wa AI ni chombo rahisi kwa moja kwa moja na utangazaji, lakini hauwezi kufikia ubora na unyumbufu wa stems halisi za multitrack. Ni bora kutumika kama nyongeza, sio mbadala.

SSOUNDS inakabiliana vipi na ujumuishaji wa AI?

SSOUNDS inatafiti modeli za AI za ucheleweshaji wa chini ambazo zinaweza kuendeshwa kwenye majukwaa yetu ya DSP ya amplifier. Lengo letu ni kutoa uelekezaji na usindikaji wa stems bila maunzi ya nje, kudumisha uaminifu na ubora wa sauti ambao watumiaji wetu wanatarajia.

Unajenga au kuboresha mfumo?

SSOUNDS inaunda na kutengeneza PA za kitaalamu duniani kote, kuanzia chumba kimoja hadi uwanja wa stadiumi.

Zungumza na mhandisi
Ongea kwenye WhatsApp