dirbtinis intelektasmašininis mokymasissocialinio pasirinkimo teorijanuspėjamasis modeliavimaskolektyvinis intelektasrekomendacijų sistemos
Pirmenybių agregavimas ir individualus prognozavimo modeliavimas
Pirmenybių agregavimas sujungia kelias individualias pirmenybes į kolektyvinius sprendimus, o individualus prognozavimo modeliavimas prognozuoja asmeninį elgesį naudodamas mašininį mokymąsi su vieno vartotojo duomenimis. Abu šie metodai atlieka skirtingas funkcijas dirbtinio intelekto sistemose – nuo rekomendacijų variklių iki demokratinių balsavimo platformų.
Akcentai
Pirmenybių agregavimas nagrinėja esmines neįmanomumo teoremas, kurių individuali prognozė visiškai išvengia.
Individualūs prognozavimo modeliai susiduria su unikaliomis šaltojo paleidimo problemomis, kurias kolektyviniai metodai apeina bendrai naudojamuose duomenyse
Susirūpinimas dėl teisingumo smarkiai skiriasi: procedūrinis grupės teisingumas ir individualus gydymo lygybė
Šiuolaikiniai ansamblių metodai įdomiai sujungia abi paradigmas, sujungdami daug individualių prognozių
Kas yra Pirmenybių agregavimas?
Sujungia kelias individualias nuostatas, kad būtų sukurtas kolektyvinis sprendimas arba reitingas.
Kondorseto paradoksas rodo, kad daugumos preferencijos gali cikliškai cikluoti, todėl agregavimas yra teoriškai sudėtingas.
Arrow neįmanomumo teorema įrodo, kad nėra tobulo agregavimo metodo, kuris vienu metu atitiktų visus teisingumo kriterijus.
Borda skaičiavimas, daugiskaitos balsavimas ir porinis palyginimas atspindi iš esmės skirtingas agregavimo filosofijas.
Šiuolaikinės dirbtinio intelekto programos apima bendradarbiavimo filtravimą ir ansamblio metodus, kurie apibendrina prognozes skirtinguose modeliuose.
Ekonomikos mechanizmų projektavimas naudoja preferencijų agregavimą, kad sukurtų su paskatomis suderinamas sistemas teisingam atskleidimui
Kas yra Individualus prognozavimo modeliavimas?
Naudoja mašininį mokymąsi, kad prognozuotų vieno asmens būsimą elgesį pagal jo istorinius duomenis.
Logistinė regresija ir gradiento didinimas vis dar plačiai naudojami individualaus lygio prognozėms pramonėje
Funkcijų inžinerija dažnai apima laiko modelius, demografinius signalus ir kontekstinius įterpimus.
Sąžiningumo problemos kyla, kai modeliai diskriminuoja dėl saugomų savybių, tokių kaip rasė ar lytis
Kalibravimas ir diskriminacija yra skirtingos prognozavimo savybės; modelis gali būti gerai kalibruotas, bet neteisingas
Kontrafaktinis samprotavimas padeda įvertinti, kas nutiktų, jei intervencijos pakeistų konkrečius kintamuosius tam asmeniui
Palyginimo lentelė
Funkcija
Pirmenybių agregavimas
Individualus prognozavimo modeliavimas
Pagrindinis tikslas
Susintetinti kolektyvinį pasirinkimą iš daugelio įvesčių
Numatykite vieno žmogaus būsimus veiksmus
Duomenų struktūra
Keli pageidavimų profiliai arba reitingai
Vieno vartotojo išilginiai elgesio pėdsakai
Pagrindinis teorinis pagrindas
Socialinio pasirinkimo teorija ir gerovės ekonomika
Statistinė mokymosi teorija ir priežastinis išvada
Sąžiningumo rūpestis
Procedūrinis teisingumas tarp rinkėjų ar dalyvių
Individualus lygmens teisingas elgesys ir nediskriminavimas
Išvesties formatas
Kolektyvinis reitingas, nugalėtojas arba tikimybių pasiskirstymas
Taškinis įvertis, tikimybė arba sprendimo rekomendacija
Mastelio keitimo iššūkis
Eksponentiškai daug preferencijų agregavimo skaičiavimo sudėtingumas
Reti duomenys ir šaltasis paleidimas naujiems vartotojams
Tipinis taikymas
Rekomendavimo sistemos, balsavimo platformos, dirbtinio intelekto ansamblis
Pirmenybių agregavimas iš esmės klausia, ko nori grupė, o individualias pirmenybes traktuoja kaip kolektyvinio sprendimo funkcijos įvestis. Filosofinės šaknys siekia Rousseau bendrą valią ir Benthamo utilitarinį skaičiavimą. Individualus prognozavimo modeliavimas, priešingai, asmenį traktuoja kaip analizės vienetą – ką šis konkretus individas darys toliau? Pirmasis pabrėžia demokratinį teisėtumą ir socialinę gerovę; antrasis optimizuoja prognozavimo tikslumą ir veiksmų skatinančią intervenciją.
Teoriniai pagrindai
Socialinio pasirinkimo teorija suteikia matematinį pagrindą preferencijų agregavimui, o Condorcet, Borda, Arrow ir Sen novatoriški rezultatai formuoja tai, kas, mūsų manymu, yra pasiekiama. Individualus prognozavimo modeliavimas remiasi statistine mokymosi teorija, kurioje Vapniko-Chervonenkio dimensija ir Rademacherio sudėtingumo riba grindžiama apibendrinimo paklaida. Įdomu tai, kad ansambliniai metodai, tokie kaip kaupimas ir stiprinimas, sukuria tiltą: jie sujungia daugelio silpnai besimokančiųjų prognozes, sujungdami abi paradigmas.
Sąžiningumas ir etika
Agregavimo teisingumas susijęs su tuo, ar procesas vienodai gerbia dalyvius – ar balsavimo taisyklė suteikia kam nors neproporcingai didelę įtaką? Individualaus prognozavimo teisingumas klausia, ar panašūs asmenys gauna panašias prognozes, dažnai įformintas demografine paritetu arba išlygintomis tikimybėmis. Šios teisingumo sąvokos gali prieštarauti viena kitai; agregavimo metodas, kuris puikiai atspindi daugumos pageidavimus, gali sistemingai diskriminuoti mažumų grupes.
Praktinis įgyvendinimas
Norint įdiegti preferencijų agregaciją dideliu mastu, reikia valdyti skaičiavimo sudėtingumą: optimali Kemeny agregacija yra NP sudėtingumo, ir net apytiksliai sprendimai reikalauja sudėtingų algoritmų. Atskiri prognozavimo modeliai susiduria su skirtingais iššūkiais – funkcijų inžinerija, skirta negausiems elgsenos duomenims, koncepcijos dreifo valdymas kintant vartotojų pageidavimams ir modelio naujumo išlaikymas be didelių perkvalifikavimo išlaidų. Abiem atvejais reikia atidžiai atkreipti dėmesį į duomenų infrastruktūrą, tačiau inžineriniai apribojimai labai skiriasi.
Vertinimo ir sėkmės rodikliai
Vertinant agregavimo kokybę atliekama aksiomatinė analizė – ar metodas tenkina nesvarbių alternatyvų nepriklausomumo, Pareto efektyvumo ar nediktatūros kriterijus? Empiriškai socialinės gerovės funkcijos matuoja, kiek naudingumo pasiekia kolektyvas. Individualūs prognozavimo modeliai naudoja nuspėjamuosius našumo rodiklius, tačiau jie gali klaidinti: idealiai sukalibruotas modelis vis tiek gali priimti žalingus sprendimus, jei jis naudojamas neatsižvelgiant į priešingas faktines pasekmes, kylančias veikiant pagal prognozes.
Privalumai ir trūkumai
Pirmenybių agregavimas
Privalumai
+Demokratinis sprendimų teisėtumas
+Atsparus vieno taško gedimams
+Įtraukia įvairias perspektyvas
+Teoriškai pagrįstos teisingumo savybės
Pasirinkta
−Arrow neįmanomumo apribojimai
−Skaičiavimo požiūriu brangu dideliu mastu
−Jautrūs strateginėms manipuliacijoms
−Gali slopinti mažumų pageidavimus
Individualus prognozavimo modeliavimas
Privalumai
+Labai suasmeninti rezultatai
+Veiksmingas intervencijos taikymas
+Greitas mastelio keitimas naudojant debesų kompiuteriją
+Nuolatinis tobulėjimas iš grįžtamojo ryšio ciklų
Pasirinkta
−Privatumo ir stebėjimo problemos
−Sustiprina istorinius išankstinius nusistatymus
−Reti duomenys naujiems vartotojams
−Neskaidrumas sudėtinguose modelio sprendimuose
Dažni klaidingi įsitikinimai
Mitas
Pirmenybių agregavimas visada sukuria variantą, kuriam dauguma žmonių teikia pirmenybę.
Realybė
Kondorseto paradoksas ir Arrow teorema atskleidžia, kad daugumos preferencijos gali cikliškai kintant intranzityviai, ir joks metodas netenkina visų intuityvių teisingumo kriterijų. Kandidatas, kuris porinėse porose įveiktų visus kitus, gali neegzistuoti, todėl tenka rinktis iš pageidaujamų savybių.
Mitas
Individualūs prognozavimo modeliai numato, ką žmonės iš tikrųjų darys.
Realybė
Šie modeliai prognozuoja elgesį, priklausantį nuo istorinių tendencijų, o ne nuo realių būsimų pasirinkimų. Žmonės keičiasi, kontekstai keičiasi, o prognozės tampa savaime žlugdančios, kai naudojamos intervenciškai – numatant, kad kažkas pasitrauks iš darbo, o tada siūlant išlaikymo paskatas, pakeičiamas pats prognozuojamas rezultatas.
Mitas
Agregavimo metodai yra neutralūs ir be šališkumo.
Realybė
Kiekviena agregavimo taisyklė koduoja vertybes apie tai, kieno pageidavimai yra svarbūs ir kaip sprendžiami konfliktai. Pliuralizmas yra palankesnis koncentruotoms mažumoms; „Borda“ skaičiavimas apdovanoja plačiu priimtinumu. Metodo pasirinkimas yra iš esmės politinis, o ne vien techninis.
Mitas
Daugiau duomenų visada pagerina individualias prognozes.
Realybė
Viršijus tam tikrą ribą, papildomos funkcijos sukelia triukšmą, skaičiavimo sąnaudas ir privatumo riziką. Nesvarbūs kintamieji sukelia perteklinį pritaikymą, o istoriniai duomenys iš pasikeitusių aplinkybių mažina modelio aktualumą. Dažnai svarbu pasirinkti, ką neįtraukti, kaip ir ką įtraukti.
Mitas
Šie du metodai praktikoje niekada nesutampa.
Realybė
Bendradarbiavimo filtravimas rekomendacijų sistemose aiškiai juos sujungia – agreguoja panašių vartotojų pageidavimus, kad būtų galima numatyti individualius pasirinkimus. Ansamblio metodai sujungia daug individualių modelių. Sudėtingose dirbtinio intelekto architektūrose ribos išblunka.
Mitas
Sąžiningas agregavimas reiškia, kad kiekvienas gauna tai, ko nori.
Realybė
Vienbalsiškumas yra nykstamai retas, o Pareto efektyvumas garantuoja tik tai, kad niekas negali tobulėti nepakenkdamas kitam. Tikrasis agregavimas apima pralaimėtojus ir kompromisus; teisingumas susijęs su procesu ir proporcingumu, o ne su visuotiniu pasitenkinimu.
Dažnai užduodami klausimai
Kas yra preferencijų agregavimas paprastais žodžiais?
Įsivaizduokite draugų grupę, bandančią išsirinkti restoraną. Visi susistemina savo pasirinkimus, ir kažkaip jums reikia sujungti tuos reitingus į vieną sprendimą. Pirmenybių agregavimas yra oficialus tyrimas, kaip tai daryti sąžiningai ir nuosekliai. Jis apima balsavimo sistemas, rekomendacijų variklius ir bet kokią situaciją, kai kolektyvinis pasirinkimas yra svarbus.
Kaip iš tikrųjų veikia individualus prognozavimo modeliavimas?
Šie modeliai mokosi iš istorinių duomenų apie tai, ką asmuo darė – kokius pirkinius atliko, kokias nuorodas spustelėjo, kokius mokėjimus praleido – ir ekstrapoliuoja į priekį. Įprasti metodai apima logistinę regresiją, atsitiktinius miškus ir neuroninius tinklus. Modelis nustato, kurios savybės prognozuoja dominantį rezultatą, o tada pritaiko šiuos išmoktus ryšius naujose situacijose.
Kodėl Arrow neįmanomumo teorema yra svarbi dirbtiniam intelektui?
Arrow įrodė, kad jokia nuostatų agregavimo sistema negali vienu metu patenkinti nedidelio, atrodytų, pagrįstų teisingumo sąlygų rinkinio. Dirbtinio intelekto sistemoms, kurios sujungia naudotojų nuostatas, pvz., paieškos rezultatų reitingavimą ar turinio rekomendavimą, tai reiškia, kad esminiai kompromisai yra neišvengiami. Dizaineriai turi aiškiai pasirinkti, kurioms teisingumo savybėms teikti pirmenybę.
Ar individualūs prognozavimo modeliai kada nors gali būti tikrai teisingi?
Sąžiningumas turi daug matematinių apibrėžimų, kurie dažnai prieštarauja vienas kitam. Modelis gali atitikti demografinę paritetą, tačiau pažeisti išlygintąsias tikimybes, arba atvirkščiai. Be to, prognozavimo sąžiningumas negarantuoja rezultatų sąžiningumo, kai sprendimus lemia prognozės. Iššūkis yra ir techninis, ir giliai kontekstualus.
Kas apsunkina lengvatų agregavimą skaičiavimo požiūriu?
Kai kurios optimalios agregavimo taisyklės, pavyzdžiui, Kemeny konsensuso reitingo nustatymas, reikalauja išnagrinėti eksponentiškai daug galimų eilių, augant alternatyvų skaičiui. Net ir naudojant aproksimacijos algoritmus, mastelio keitimas iki milijonų elementų ar rinkėjų kelia rimtų iššūkių, kurie skatina taikyti euristinius ir atsitiktinius metodus.
Kaip rekomendacijų sistemos naudoja abu metodus kartu?
Bendradarbiavimo filtravimas apjungia panašių naudotojų pageidavimus, kad numatytų, kas jums gali patikti. Turiniu pagrįstas filtravimas naudoja individualias prognozes, pagrįstas jūsų istorija. Hibridinės sistemos sujungia abu šiuos metodus, pasitelkdamos kolektyvinę išmintį, kai jūsų asmeninių duomenų trūksta, ir individualius modelius, kai turite didelę sąveikos istoriją.
Kokia yra šaltojo paleidimo problema individualioje prognozėje?
Kai prie platformos prisijungia naujas vartotojas arba pristatomas naujas produktas, nepakanka istorinių duomenų, kad būtų galima sudaryti tikslias prognozes. Tai individualių prognozių Achilo kulnas. Agregavimo metodai iš dalies tai išsprendžia, pasiskolindami informaciją iš panašių vartotojų ar elementų, todėl praktikoje vyrauja hibridiniai metodai.
Ar preferencijų agregavimas gali apdoroti žmones, kurie strategiškai neteisingai pateikia preferencijas?
Tai yra pagrindinis mechanizmų projektavimo klausimas. Kai kurios sistemos, pavyzdžiui, antros kainos aukcionai, teisingą atskleidimą daro suderinamą su paskatomis. Tačiau daugelis balsavimo sistemų yra manipuliuojamos – rinkėjai kartais gali pasiekti geresnių rezultatų iškreipdami savo pageidavimus. Strategijoms atsparios agregacijos kūrimas išlieka aktyvia tyrimų sritimi.
Kuo skiriasi šių dviejų metodų privatumo aspektai?
Individualiems prognozavimo modeliams dažnai reikalingi išsamūs asmens duomenys, todėl kyla susirūpinimas dėl stebėjimo ir sutikimo. Nuostatų agregavimas kartais gali būti naudojamas su nuasmenintais reitingais, nors abiem atvejais vis labiau reikalingi skirtingi privatumo metodai. Duomenų atskleidimo detalumas labai skiriasi.
Kokį vaidmenį kiekviename požiūryje atlieka paaiškinamumas?
Agregavimo metodai susiduria su paaiškinamumo iššūkiais, susijusiais su kolektyvinio pasirinkimo atsiradimo priežastimis – kas ką ir kaip paveikė. Individualios prognozės turi paaiškinti, kodėl konkretus asmuo gavo konkrečią prognozę, ypač tokiose didelės rizikos srityse kaip skolinimas ir baudžiamoji teisena. Abiejose srityse vis labiau reikalaujama skaidrumo, tačiau paaiškinimo objektai skiriasi.
Ar yra realių šių metodų trūkumų, apie kuriuos turėčiau žinoti?
2000 ir 2016 metų JAV prezidento rinkimai parodė, kaip daugumos agregacija gali išvesti nugalėtojus, kuriems priešinasi dauguma. Individualūs prognozavimo modeliai baudžiamojoje justicijoje parodė rasinį šališkumą prognozuojant recidyvizmą. Abu atvejai pabrėžia, kad techninis sudėtingumas negali pakeisti kruopštaus, vertėmis pagrįsto dizaino pasirinkimo.
Kaip šie metodai galėtų vystytis kartu su generatyvinio dirbtinio intelekto pažanga?
Dideli kalbos modeliai dabar gali imituoti individualius agregavimo eksperimentų pageidavimus, o tai gali pagerinti mechanizmų projektavimą. Jie taip pat leidžia atlikti sudėtingesnes individualias prognozes, naudojant išsamesnius požymių atvaizdavimus. Tačiau sintetinių duomenų rizika ir atsirandančios galimybės, kurios painioja tradicines teorines garantijas, kelia naujų iššūkių abiem paradigmoms.
Nuosprendis
Rinkitės preferencijų agregavimą, kai sprendimai daro įtaką grupėms, o teisėtumas reikalauja demokratiškai įtraukti įvairius požiūrius. Rinkitės individualų prognozavimo modeliavimą, kai intervencijas, produktus ar paslaugas pritaikote konkretiems žmonėms ir kai detali elgesio prognozė kuria vertę. Daugelyje realaus pasaulio sistemų, pradedant suasmenintomis rekomendacijomis ir baigiant dalyvaujamojo biudžeto sudarymo platformomis, apgalvotai derinami abu metodai.