GLOBAL KNOWLEDGE ARK

Žinynas

Žinių pagrindai

Tyrinėkite sąvokas, dėsnius, lygtis ir metodus, jų taikymą ir šaltinius. Pasirinkite pažinimo sritį arba raskite konkretų žinyno įrašą.

Daugiau filtrų

Mokymasis ir išvados

Rodoma įrašų: 1–22 iš 22

InformacijaDiferencinis privatumas ir saugomas vienetas

Randomizuotas mechanizmas užtikrina (epsilon,delta)-diferencialųjį privatumą, jei kiekvienai gretimų duomenų rinkinių porai ir kiekvienam išvesties įvykiui galioja Pr[M(D) in S]≤exp(epsilon)Pr[M(D-prime) in S]+delta.

Apibrėžimas
InformacijaJautrumas, Laplaso triukšmas ir kompozicija

Vektorinei užklausai, kurios globalusis L1 jautrumas yra Delta-1, prie kiekvienos koordinatės pridėjus nepriklausomą Laplaso triukšmą, kurio mastelio parametras yra Delta-1/epsilon, užtikrinamas epsilon diferencinis privatumas pagal pasirinktą gretimumo sąryšį.

Metodas
InformacijaRényi privatumo apskaita ir konversija

Kai eilė alpha>1, RDP apriboja Rényi divergenciją tarp mechanizmo išvesčių kiekvienai gretimų duomenų rinkinių porai dydžiu epsilon-alpha.

Matematinis teiginys
InformacijaAtsparumui priešiškoms atakoms būtinas grėsmių modelis

Vertinant atsparumą priešiškoms atakoms su norma apribotais trikdžiais, klausiama, ar užpuolikas gali pakeisti modelio prognozę, naudodamas trikdžius iš nurodytos aibės aplink įvestį.

Metodas
InformacijaAtsitiktinis glodinimas: ribotas L2 sertifikatas

Gauso glodinimas apibrėžia klasifikatorių pagal labiausiai tikėtiną bazinio klasifikatoriaus prognozę, veikiant N(0,sigma²I) triukšmui.

Matematinis teiginys
InformacijaTransformer dėmesio mechanizmas ir jo modeliavimo tikslas

Skaliarinės sandaugos dėmesio mechanizmas su mastelio korekcija apskaičiuoja softmax(QK-transpose/sqrt(d-k))V, todėl teksto vienetų reprezentacijos gali apjungti kontekstą per išmoktas užklausų, raktų ir reikšmių projekcijas.

Modelis
InformacijaDifuzinis modeliavimas ir išmoktas atvirkštinis triukšmo šalinimas

DDPM prideda Gauso triukšmo tiesioginėje Markovo grandinėje ir išmoksta parametrizuotą atvirkštinį procesą imtims generuoti.

Modelis
InformacijaAutoregresinių ir difuzinių modelių palyginimas

Autoregresinis modelis išskaido sekos tikimybinį dėsnį į sąlyginius kito elemento skirstinius, o difuzinis modelis generuoja taikydamas išmoktą atvirkštinį triukšmo procesą.

Apibrėžimas
Informacija2025 duomenų užterštumo aptikimo tyrimas ir vertinimo ribos

Samuel, Zhou ir Zou COLING 2025 tyrime lyginami penki duomenų užterštumo aptikimo metodai, taikomi keturiems kalbos modeliams ir aštuoniems etaloniniams testams, įskaitant kontroliuojamą tiksliojo derinimo aplinką su orakulu.

Empirinis rezultatas
InformacijaPAC mokymasis: realizuojamojo ir agnostinio atvejų garantijos

PAC mokymasis, remdamasis nepriklausomomis ir vienodai pasiskirsčiusiomis imtimis, apriboja populiacijos riziką su bent 1−delta tikimybe.

Matematinis teiginys
InformacijaBaigtinės klasės tolygaus konvergavimo riba

Baigtinei hipotezių klasei H, nepriklausomiems ir vienodai pasiskirsčiusiems stebėjimams bei nuostoliams intervale [0,1], Hoeffding nelygybė ir sąjungos tikimybės riba rodo, kad tikimybė, jog bent viena empirinė rizika nuo populiacijos rizikos skirsis daugiau nei epsilon, yra ne didesnė kaip 2|H|exp(−2n epsilon²).

Matematinis teiginys
InformacijaVC dimensija ir išmokstamumas nepriklausomai nuo skirstinio

VC dimensija yra didžiausias taškų aibės dydis, kuriam dvejetainė hipotezių klasė gali realizuoti kiekvieną žymų priskyrimą.

Matematinis teiginys
InformacijaPosteriorinis vertinimas, priorai ir identifikuojamumas

Bayesinis vertinimas sujungia tikėtinumo funkciją ir priorinį skirstinį į posteriorinį skirstinį, sąlygotą stebėtų duomenų.

Apibrėžimas
InformacijaPopuliacijos rizika ir empiriniai mokymosi tikslai

Prognozuotojui h populiacijos rizika yra nuostolio matematinis vidurkis pagal nurodytą duomenų skirstinį; empirinė rizika yra imties nuostolio vidurkis.

Apibrėžimas
InformacijaReguliarizavimas ir optimizavimas yra atskiros valdymo priemonės

Reguliarizuotas empirinis minimizavimas prie imties nuostolio prideda sudėtingumo baudą, padaugintą iš lambda.

Metodas
InformacijaStochastinis gradientas ir konvergavimo prielaidos

Stochastinio gradiento metodas atnaujina parametrus pagal imtimi įvertintą gradientą arba subgradientą.

Metodas
InformacijaPagrindinės komponentės ir reprezentacijos prielaidos

PCA randa ortogonalią mažo rango poerdvio projekciją, minimizuojančią centruotų stebėjimų kvadratinę atkūrimo paklaidą.

Metodas
InformacijaValidavimas, testo nepriklausomumas ir informacijos nutekėjimas

Mokymas pritaiko parametrus, validavimas parenka modelius ir jų derinimą, o galutinis atskirtas testas įvertina pasirinktos procedūros veikimą populiacijoje, iš kurios imama jo imtis.

Metodas
InformacijaBayesiniai tinklai, d-atskyrimas ir vertinimas

Bayesinis tinklas naudoja orientuotą aciklinį grafą ir vietinius sąlyginius skirstinius jungtiniam skirstiniui faktorizuoti.

Apibrėžimas
InformacijaVariacinis vertinimas ir duomenų tikimybės logaritmo apatinė riba

Variacinis vertinimas aproksimuoja posteriorinį skirstinį, iš nurodytos šeimos parinkdamas q, kuris minimizuoja KL(q||posterior).

Metodas
InformacijaMCMC ir variacinis vertinimas: įrodymai ir kompromisai

MCMC sudaro Markovo grandinę su norimu stacionariu posterioriniu skirstiniu ir vertina integralus pagal koreliuotus generuotus stebėjimus; reikia tikrinti konvergavimą, maišymąsi ir efektyvųjį imties dydį.

Apibrėžimas
InformacijaPrognozavimas, priežastinė intervencija ir identifikuojamumas

Sąlygojimas pagal stebėjimą p(Y|X=x) ir intervencija p(Y|do(X=x)) apibūdina skirtingas operacijas.

Apibrėžimas