- Gumagamit ang NVIDIA Broadcast ng AI para mabawasan ang ingay at echo, at pinapaganda ang video na may mga virtual na background at auto-framing.
- Gumagana ito tulad ng mga virtual na device: pipiliin mo ang bagong mikropono o camera sa anumang app.
- Nangangailangan ng NVIDIA RTX GPU na may Tensor Cores; hindi nilayon para sa GTX nang walang mga core na ito.
Kung nag-stream ka nang live, lumahok sa mga video call, o naglalaro ng mga laro ng koponan, malamang na pamilyar ka sa mga problemang tulad nito: maingay na pagta-type, ang huni ng mga fan, static na mikropono, o echo na umaalingawngaw sa paligid ng silid. Ang panukala ng NVIDIA ay naglalayong harapin ang mga ito gamit ang isang tool: isang application na gumagamit ng real-time na AI upang gawing mas maganda ang iyong boses at imahe at mas maganda ang hitsura, nang hindi ka nababalot ng mga teknikal na pagsasaayos.
Pag-uusapan natin Pag-broadcast ng NVIDIA, isang software na, ayon sa kumpanya mismo, ay may kakayahang gawing isang uri ng opisina sa bahay ang anumang silid at pahusayin ang kalidad ng iyong streaming, voice chat, at video call na may mga smart effect. Ang kagandahan ay ginagawa nito ito anuman ang program na iyong ginagamit, inaalis ang ingay at echo, pag-retouch sa background at pag-frame, at kahit na tinutulungan kang gawin itong parang Nakatingin ka sa camera kahit na sinusuri mo ang iyong mga tala..
Ano ang NVIDIA Broadcast at bakit ito nasa labi ng lahat?
Ang NVIDIA Broadcast ay isang libreng application para sa mga user na may RTX GPU na nalalapat mga modelo ng artificial intelligence para sa iyong audio at videoAng layunin nito ay payagan kang mag-broadcast nang live, dumalo sa mga pulong, o maglaro gamit ang voice chat nang hindi kinakailangang hanapin ang pinakatahimik na sulok ng bahay o mag-set up ng isang propesyonal na studio.
Praktikal ang diskarte ng tool: sa ilang pag-click lang, ina-activate mo ang mga filter na iyon Tinatanggal nila ang hindi gustong ingay at ingay ng silid.Pinapalitan nila ang background ng berdeng screen at inaayos ang pag-frame ng camera para panatilihin kang nakasentro. Ang lahat ng ito ay idinisenyo para sa mga streamer, kaswal na user, at mga propesyonal na nagtatrabaho o nakikipagtulungan nang malayuan.
Bilang karagdagan sa pag-aalok ng malinaw na mga teknikal na pagpapabuti, nais ng NVIDIA Broadcast na kalimutan mo ang karaniwang abala sa pag-configure ng maraming programa. Iyon ang dahilan kung bakit inilalantad ng app ang mga virtual na device na kinikilala ng iba na parang totoo ang mga ito. isang mikropono o isang webcam pluspag-iwas sa mga kumplikadong pagsasama at pagtatrabaho sa mga karaniwang tool.
Ang panukala ay umaangkop sa isang mas malawak na diskarte sa brand na nakatuon sa mga creator at streamer. Kabilang sa mga pangunahing teknolohiya sa diskarteng ito ang... NVENC hardware encoder, na nagbibigay-daan sa streaming habang kumokonsumo ng mas kaunting mga mapagkukunan, at ngayon ang mga AI effect na ito na tumutuon sa pag-polish ng audio at video nang walang mamahaling accessory o nakalaang espasyo.
Audio na pinapagana ng AI: pagbabawas ng ingay at pagkansela ng echo
Ang tampok na bituin sa tunog ay nagmula sa kilala natin bilang RTX Voice, a AI-based na teknolohiya sa pagkansela ng ingay na naging tanyag mula sa paunang beta nito. Kasama ng Broadcast ang mature na bersyon nito: mas matatag, mas sinanay, at may mga bagong opsyon na lumalawak sa kung ano ang nagawa na nito nang mahusay.
Isa sa mga kaugnay na pagbabago ay mayroon ito triple ang bilang ng mga sound profile na alam ng AI kung paano gamitin. Sa madaling salita, kinikilala at pinipigilan ng modelo ang isang mas malawak na iba't ibang mga ingay nang mas tumpak, mula sa mga tagahanga ng PC at mga pag-click sa keyboard hanggang sa mga paminsan-minsang katok o ang ingay ng isang abalang kalye.
Ang isa pang praktikal na bagong tampok ay ang kakayahang maglapat ng pag-filter hindi lamang sa iyong mikropono, kundi pati na rin sa signal ng boses na natatanggap mo mula sa ibang mga tao. Kung ikaw ay may kasamahan sa isang maingay na setup ng audioMaaari mong i-activate ang filter sa kanyang papasok na audio upang marinig siya nang malinaw nang hindi nagdurusa sa kanyang ingay sa background, na parang gumagamit din siya ng noise cancellation.
Kasama ng pagbabawas ng ingay, isinasama ng app ang pagkansela ng echo ng silid Upang labanan ang reverberation na tipikal ng mga silid na may matitigas na ibabaw. Hindi nito pinapalitan ang pisikal na acoustic treatment, ngunit nakakatulong ito nang malaki kapag hindi mo kayang gamutin ang espasyo at kailangan mo ang iyong boses na tumunog nang mas tuyo at mas malapit.
Ito ay nagkakahalaga ng pag-alala na, tulad ng anumang teknolohiya ng ganitong uri, maaaring may bahagyang epekto sa kalidad ng timbre o isang tiyak na pinaghihinalaang pagproseso sa boses. Kinikilala mismo ng brand na nababawasan ang epekto sa mga pag-optimize ng Broadcast, ngunit isa pa rin itong salik. pantulong na solusyon sa isang magandang mikropono at isang maayos na silid.
Sa mga tuntunin ng pagganap, inaangkin ng NVIDIA na ang mga optimization na ipinakilala ay nakakabawas sa gastos kumpara sa mga unang pagtatangka sa RTX Voice. Ang pangako ay a maliit na epekto sa GPUIto ay mahalaga kapag ikaw ay naglalaro at nagsi-stream nang sabay-sabay. Gayunpaman, ang eksaktong laki ng pagpapahusay na iyon ay nakadepende sa bawat device, laro, at configuration.
Video na pinapagana ng AI: virtual na background at auto-framing
Sa seksyon ng camera, nag-aalok ang Broadcast ng dalawang effect na idinisenyo para mapahusay ang presensya mo sa screen. Ang una ay ang virtual na background nang hindi nangangailangan ng chroma key, na sinasamantala ang RTX GPU AI acceleration para tumpak na paghiwalayin ang paksa mula sa kapaligiran at maglagay ng larawan o blur sa likod mo.
Kapaki-pakinabang ang pagpapalit ng background na ito kapag hindi mo makontrol ang iyong paligid o gusto mo ng mas propesyonal na hitsura nang hindi nagse-set up ng berdeng screen. Sa mga unang demo, ito ay gumagana nang nakakumbinsi, bagaman, tulad ng anumang tampok ng ganitong uri, Kailangan itong pinuhin sa ilalim ng iba't ibang kondisyon ng pag-iilaw at pag-frame., at itinuring ito ng kumpanya bilang isang feature na unang dumating sa beta.
Ang pangalawang epekto ay Auto Frame, isang sistema ng pagsubaybay sa mukha Pino-crop at inililipat nito ang frame para panatilihin kang nakasentro kahit na gumagalaw ka. Ito ay isang simple ngunit praktikal na function para sa pagdaragdag ng dynamism sa shot o pagpigil sa iyong lumitaw na nakatagilid kung sumandal ka sa isang tabi habang nag-uusap.
Kasama ng mga epektong ito, kasama sa app ang mga pagpapahusay na idinisenyo upang gawing mas natural ang hitsura ng iyong larawan sa mga online na pulong o klase. Kabilang dito ang intelligent na pagsasaayos ng ilaw at isang feature para tulungan kang lumitaw nang higit pa... Tumingin ka sa camera kahit nasa ibang lugar ang atensyon mo.Ginagawa nitong mas madaling mapanatili ang eye contact kapag nagre-review ng mga tala o dokumento.
Kapansin-pansin na, habang ang pagpapalit ng background na walang chroma keying ay umiiral na sa iba pang mga application, ang susi ay nakasalalay sa pagganap at kalidad na nakuha sa pamamagitan ng paggamit ng GPU. Kung tama ang algorithm, makamit ang isang mas malinis na gilid at mas kaunting mga artifact, na lumalapit sa resulta ng isang chroma key sa mga paborableng sitwasyon.
Compatibility: Aling mga graphics card ang gumagana
Ang pangunahing kinakailangan para sa paggamit ng NVIDIA Broadcast ay ang pagkakaroon ng NVIDIA GPU na may Tensor Cores, iyon ay, isang RTXAng mga nakalaang AI core na ito ang siyang nagpapabilis sa mga modelong ginagawang posible ang pagkansela ng ingay, pag-aalis ng echo, at mga video effect nang hindi na-overload ang computer.
Nangangahulugan ito na ang mga nakaraang serye na walang Tensor Cores, tulad ng Pascal (GTX 1000) at mga naunang modelo, ay hindi kasama. Hindi rin kasama ang mga GTX 16 batay sa TuringSa kabila ng pagbabahagi ng isang arkitektura, hindi nila kasama ang mga core na responsable para sa pagproseso ng AI na ginagamit ng application.
Sakop ng compatibility ang RTX 20 at RTX 30 na pamilya, at umaabot hanggang GeForce at mga laptop na may mga RTX GPUpati na rin ang mga propesyonal na solusyon sa Quadro RTX. Sa madaling salita, kung ang iyong graphics card ay RTX, ang Broadcast ay nasa loob ng nakaplanong hanay ng suporta nito.
Ang mga dating pinilit ang RTX Voice sa mga GTX GPU gamit ang mga patch ay dapat magkaroon ng kamalayan na ang trick na ito ay hindi ang opisyal na diskarte ng Broadcast. Sa kasong ito, nakatuon ang app sa paggamit ng RTX graphics card Tensor Cores at hindi, bilang isang pamantayan, ay nag-iisip ng pagpapatupad sa mga modelong wala ang mga ito.
Pagsasama sa iyong mga program at third-party na app
Isa sa mga praktikal na bentahe ng NVIDIA Broadcast ay hindi mo na kailangan ang iyong paboritong programa tulad ng OBS Studio Ito ay malinaw na inangkop. Lumilikha ang application virtual input device (halimbawa, isang bagong mikropono o camera) na maaari mong piliin sa anumang video calling, streaming, o recording software.
Sa ganitong paraan, ang daloy ng trabaho ay napaka-simple: i-activate mo ang mga epekto sa Broadcast, piliin ang virtual na device sa iyong program, at tapos ka na. Tinatanggal ng diskarteng ito ang paghihintay para sa mga ikatlong partido. pagsamahin ang mga partikular na API o bumuo ng mga add-on, na binabawasan ang teknikal na alitan para sa user.
Higit pa rito, maaaring isama ng mga kasosyo sa NVIDIA ang mga teknolohiya sa likod ng Broadcast nang direkta sa kanilang sariling mga application. Available ang mga package para sa layuning ito. opisyal na muling maipamahagi na, sa ilang mga kaso, kakailanganin mong i-download at i-install kung gagamit ka ng isang app na sinasamantala ang mga ito.
Mahalagang bigyang-diin na ang mga mapagkukunang ito na muling maipamahagi ay hindi independyente: Hindi sila nagtatrabaho sa kanilang sarili. at nangangailangan ng application na mayroon nang mga feature na ipinatupad. Kung kasama ang mga ito sa iyong ginustong tool, sasabihin at gagabayan ka ng installer sa proseso ng pagkuha ng lahat ng kailangan mo.
Pagganap, kalidad, at makatotohanang mga inaasahan
Noong inilabas ang RTX Voice beta, isa sa mga disbentaha ay ang pagkonsumo ng mapagkukunan at bahagyang pagbaba sa kalidad ng mikropono. Sa Broadcast, inaangkin ng NVIDIA ang mga pag-optimize na iyon Binabawasan nila ang epekto sa FPS o GPU load.Ito ay isang bagay na mapapahalagahan mo kung maglalaro ka at mag-stream nang sabay-sabay. Ang eksaktong pakinabang ay depende sa iyong laro, resolution, at mga setting.
Sa positibong panig, ang mga demonstrasyon sa pagbabawas ng ingay ay kapansin-pansin mula sa simula: mga kaso na may isang desktop fan o kahit mga suntok na halos mawala na habang ang boses ay nananatiling naiintindihan. Ito ay mga matinding sitwasyon na nagsisilbing ipakita ang potensyal ng pag-filter kapag hindi nakakatulong ang kapaligiran.
Gayunpaman, maging makatotohanan tayo: hindi pinapalitan ng pagkansela ng ingay ang isang de-kalidad na mikropono o isang kapaligirang ginagamot nang maayos. Kung ang problema ay nagmula sa mga sira na kagamitan o a puspos o distorted captureAng AI ay hindi makakagawa ng mga himala. Ang halaga nito ay nakasalalay sa pagpapakinis ng mga karaniwang di-kasakdalan at ginagawang mas komportable ang pakikinig.
Sa video, ang pagpapalit ng background na walang berdeng screen ay nag-aalok ng mga napakahusay na resulta, lalo na sa magandang liwanag at malinaw na mga kuha. Ang pagsubaybay sa mukha, samantala, Ginagawa nitong mas madaling mapanatili ang komposisyon ng eroplano. nang hindi gumagalaw mula sa iyong lugar o hinahawakan ang camera. Ito ay mga pagpapahusay na nagdaragdag, bagama't hindi nilalayong palitan ang isang propesyonal na pag-setup ng studio.
Ang pilosopiya ng brand sa Broadcast ay naaayon sa drive nito sa live na sektor: kasama ng NVENC, na nagpakita mataas na kahusayan sa muling pagpapadala Nang walang labis na pagpaparusa sa laro, ang mga epekto ng AI na ito ay naglalayong gawing mas kaakit-akit ang mga RTX GPU sa mga tagalikha ng nilalaman o sa mga nagtatrabaho nang malayuan.
Availability at kung paano makuha ang app
Inilagay ng NVIDIA ang paglulunsad ng Broadcast sa paligid kalagitnaan ng september, kasabay ng paglapag ng isang bagong henerasyon ng mga RTX GPUMula sa sandaling iyon, maaaring i-download ng sinumang user na may GeForce RTX card ang app nang libre at simulang subukan ito sa kanilang karaniwang mga programa.
Simple lang ang pag-install, at kapag nasa loob na, makikita mo ang mga opsyon sa audio at video na nakategorya ayon sa mga effect. I-activate ang mga ito, ayusin ang intensity, at suriin ang resulta gamit ang mga pagsubok na inaalok ng mismong app. Mula doon, kailangan mo lang pumili ng mga virtual na device sa iyong video calling o streaming tool upang maganap ang epekto.
Mga kaso ng paggamit: mula sa streaming hanggang sa mga pulong ng team
Kung live kang mag-stream, hinahayaan ka ng pagbabawas ng ingay na mag-type, maglipat ng mga bagay, o patakbuhin ang iyong PC nang buong kapasidad nang hindi maririnig ng iyong audience ang patuloy na ugong. Kasabay nito, nakakatulong ang virtual na background magbigay ng visual consistency sa iyong brand sa iyong streaming program upang itago ang isang silid na hindi mo gustong ipakita, at ang auto-framing ay nagdaragdag ng dynamic na walang karagdagang hardware.
Para sa mga nagtatrabaho sa malayo, ang Broadcast ay nagdudulot ng kalinawan sa mga pulong kahit na tumatawag ka sa isang maingay na kapaligiran. Salamat sa kakayahang maglapat ng pagkansela sa papasok na audio, magagawa mo mas maunawaan ang mga kasamahan na may katamtamang mikropono o na kumokonekta mula sa mga kumplikadong lokasyon, na binabawasan ang pagkapagod sa pakikinig.
Sa larangang pang-edukasyon, ang mga guro ay maaaring tumunog nang mas malinaw nang walang nakakagambalang mga dayandang, at ang mga mag-aaral ay maaaring magpakita ng isang mas malinis na imahe kahit na ang kanilang kapaligiran ay hindi perpekto. Nakakatulong ang eye contact sa camera na... mas mahusay na kumonekta sa madla kapag kailangan mong kumonsulta sa materyal sa panahon ng pagpapaliwanag.
Mayroon ding halaga para sa mga manlalaro na gumagamit ng voice chat sa mga mapagkumpitensyang pamagat. Ang kakayahang i-mute ang ingay ng keyboard o ingay ng fan ay nagpapadali sa pakikipag-ugnayan sa iyong team. At kung ang isang tao sa iyong grupo ay may problemang mikropono, ang pag-filter ng... Ang papasok na audio ay maaaring gumawa ng lahat ng pagkakaiba upang maunawaan ang mabilis na mga tawag sa mga kritikal na sandali.
Kahit na para sa mga kaswal na creator o sa mga kumukuha ng maiikling video, ang pagkakaroon ng background blur at isang frame na sumusunod sa iyo ay nakakatulong na makamit ang isang mas pinakintab na resulta nang hindi namumuhunan sa mga partikular na accessory. Hindi nito pinapalitan ang isang meticulously planned set, ngunit itinataas ang bar sa ilang pag-click kapag hindi paborable ang mga kondisyon.
Mga kalamangan, limitasyon, at kung ano ang maaari mong asahan
Kasama sa malinaw na mga bentahe ang kadalian ng paggamit, malaking pagpapabuti ng audio sa mga totoong kapaligiran, at pagiging tugma sa iyong mga umiiral nang tool nang walang kumplikadong mga configuration. Ang kumbinasyon ng pagbabawas ng ingay at echo Ito ay lalo na pinahahalagahan sa mga silid na may reverberation, at ang virtual na background ay nagdaragdag ng mga puntos kapag kailangan mo ng privacy o visual na pagkakapareho.
Sa harap ng mga limitasyon, hindi kasama ng RTX GPU na kinakailangan ang mga system na may mga GTX card na kulang sa Tensor Cores. Bukod pa rito, kung partikular kang sensitibo sa tunog ng mikropono, mapapansin mo ang pag-filter. Ito ay maaaring medyo nakakabawas sa pagiging natural Kung itulak mo ito sa maximum. Sa video, ang paghihiwalay sa pagitan ng paksa at background ay nakasalalay sa liwanag at contrast ng larawan.
Ang pinaka-makatwirang bagay na dapat gawin ay ituring itong isang kaalyado: hindi nito pinapalitan ang isang magandang mikropono, maingat na pag-iilaw, o acoustic treatment, ngunit nag-aalok ito ng mabilis at kapansin-pansing pagpapabuti kapag hindi mo makontrol ang lahat ng mga kadahilanang iyon. Para sa maraming mga gumagamit, ang paglukso na iyon ay ang kailangan nila upang maging mas propesyonal.
Ang ecosystem na nagbubukas sa muling maipamahagi na pagsasama ay kawili-wili din: dahil mas maraming application ang nagsasama ng mga teknolohiyang ito, Makikita mo ang magagamit na mga epekto ng AI nang hindi umaalis sa iyong mga paboritong programa. At kung mas gusto mong isentro ang lahat, ang Broadcast bilang isang app ay nananatiling direkta at simpleng paraan.
Gayunpaman, inilagay ng NVIDIA Broadcast ang sarili bilang isa pang piraso ng package ng halaga ng RTX GPU. Kabilang sa mga NVENC's push to relay At sa tulong ng AI na pakinisin ang audio at video, ang streaming at remote na karanasan sa pakikipagtulungan ay pinahusay para sa mga user na humihiling ng kalidad nang walang mga teknikal na komplikasyon.
Ngayon, pinagsasama ng application ang mga kapaki-pakinabang na tampok at solidong resulta sa kaginhawahan ng isang napakasimpleng daloy ng trabaho. Kung mayroon kang RTX GPU, sulit na i-enable ito at makita kung hanggang saan ito. Nai-save ka nito mula sa ingay, dayandang, at mapanghimasok na background. sa iyong pang-araw-araw na buhay, maging sa mga laro, pulong o online na mga klase.
