Mācīšanās cilvēkos salīdzinājumā ar apmācību neironu tīklos
Šajā detalizētajā salīdzinājumā tiek pētītas dziļās atšķirības starp cilvēka bioloģisko mācīšanos, ko raksturo adaptīva sinaptiskā plastiskums, emocionāls konteksts un ātra vispārināšana, un mākslīgo neironu tīklu matemātisko apmācību, izmantojot atpakaļizplatīšanu un iteratīvu svara optimizāciju.
Iezīmes
Cilvēki mācās, fiziski pārveidojot bioloģiskās sinapses, savukārt mašīnas atjaunina skaitliskās matricas.
Persona var abstrahēt noteikumus no viena notikuma, savukārt neironu tīklam ir nepieciešama liela mēroga datu kopas iedarbība.
Mākslīgā apmācība rada katastrofālas aizmirstības risku, ko cilvēkiem mazina atmiņas konsolidācija miega laikā.
Cilvēka smadzenes darbojas ar daļēju enerģiju, salīdzinot ar milzīgajiem elektrotīkliem, kas nepieciešami mašīnmācībai.
Kas ir Mācīšanās cilvēkos?
Sarežģīts, daudzšķautņains bioloģisks process, kurā smadzenes iegūst zināšanas, uzvedību un prasmes, izmantojot pieredzi, mijiedarbību ar vidi un sinaptiskās modifikācijas.
Bioloģiskā mācīšanās balstās uz sinaptisko plastiskumu, ko galvenokārt veicina ilgstoša potenciācija un ilgstoša depresija miljardos neironu.
Cilvēki izmanto mācīšanos ar dažiem kadriem, kas ļauj viņiem aptvert pilnīgi jaunus jēdzienus vai atpazīt objektus tikai pēc vienas vai divām ekspozīcijām.
Neirotransmitera dopamīnam ir izšķiroša loma atlīdzības prognozēšanas atlīdzības sistēmās, pastiprinot veiksmīgas darbības un uzvedību.
Miegs ir vitāli svarīgs cilvēka kognitīvajai mācīšanās spējai, darbojoties kā galvenais logs atmiņas konsolidācijai un neironu ceļu atjaunošanai.
Emocijas, piemēram, zinātkāre, trauksme un uztraukums, dziļi modulē informācijas saglabāšanas ātrumu un noturību smadzenēs.
Kas ir Apmācība neironu tīklos?
Skaitļošanas optimizācijas process, kurā mākslīgs modelis pielāgo savus iekšējos matemātiskos svarus un novirzes, minimizējot tiešu kļūdu zuduma funkciju.
Apmācība lielā mērā balstās uz atpakaļizplatīšanas algoritmu, aprēķinot gradienta kritumus, lai pielāgotu skaitliskos savienojumus atpakaļ cauri slāņiem.
Mākslīgajiem modeļiem parasti ir nepieciešami tūkstošiem vai miljoniem dažādu apmācības datu punktu, lai panāktu uzticamu modeļu atpazīšanu.
Optimizācija balstās uz stingriem matemātiskiem mērķiem, pilnībā bez organiskiem emocionāliem stāvokļiem vai iekšējiem motivācijas virzītājspēkiem.
Neironu tīkli saskaras ar katastrofālu aizmirstību, kur jaunas informācijas apgūšana var pilnībā pārrakstīt un iznīcināt iepriekš apgūtos uzdevumus.
Apmācības fāze patērē milzīgu skaitļošanas enerģiju, un tai ir nepieciešamas augstas klases grafikas apstrādes vienības, kas darbojas ar specializētu matricu matemātiku.
Uz atlīdzību balstīta atgriezeniskā saite un lokalizēta neironu apšaudi
Atpakaļizplatīšanās un stohastiska gradienta nolaišanās
Datu apjoma efektivitāte
Ārkārtīgi augsts; apgūst koncepcijas no dažiem piemēriem
Ārkārtīgi zems; prasa plašus, marķētus datu kopumus
Enerģijas patēriņš
Augsta efektivitāte; darbojas ar aptuveni 20 vatiem bioloģiskās enerģijas
Masīvs; nepieciešami kilovati vai megavati elektroenerģijas
Secīgas mācīšanās spējas
Nevainojama pāreja; nepārtraukti balstās uz iepriekšējām prasmēm
Slikts; tieksme izdzēst vecās prasmes, kad tiek apgūtas jaunas
Kļūdas signāla avots
Dinamiskā vides atgriezeniskā saite un ķīmiskās izmaiņas
Stingrs izmaksu vai zaudējumu funkcijas matemātiskais aprēķins
Kontekstuālā pamatošana
Dziļi saistīts ar fizisko iemiesojumu, maņām un kultūru
Tīri statistisks, aplūkojot skaitļus bez fiziskas apziņas
Detalizēts salīdzinājums
Iekšējās adaptācijas mehānisms
Kad cilvēks mācās, fiziskas izmaiņas viļņojas caur smadzenēm, stiprinot vai vājinot faktiskās saiknes starp dzīvajām šūnām, pamatojoties uz fizisko pieredzi. Mākslīgie neironu tīkli simulē šo procesu tikai ar skaitļiem. Tie atjaunina abstraktas svaru matricas slāņotos aprēķinos, izmantojot globālu kļūdu labošanas rutīnu, ko sauc par atpakaļizplatīšanu, kurai trūkst cilvēka neironu decentralizētās, lokalizētās autonomijas.
Datu efektivitāte un vispārināšana
Iedodiet bērnam vienu attēlu grāmatu ar traktoru, un viņš varēs uzreiz atpazīt īstus traktorus fermā neatkarīgi no krāsas, izmēra vai leņķa. Mākslīgie tīkli nevar tik plūstoši vispārināt. Objektu atpazīšanas modelim ir nepieciešama tūkstošiem dažādu traktoru attēlu iedarbība dažādos laika apstākļos un apgaismojuma profilos, lai tas nesajauktu transportlīdzekli ar māju.
Nepārtrauktas attīstības izaicinājums
Cilvēki visu mūžu mācās secīgi, nemanāmi iekļaujot jaunus hobijus, valodas un profesionālās prasmes esošajā atmiņu tīklā, neaizmirstot, kā staigāt vai runāt. Neironu tīkli cieš no stingras ievainojamības, kas pazīstama kā katastrofāla aizmirstība. Ja ņemat modeli, kas apmācīts spēlēt šahu, un mēģināt to apmācīt spēlēt pokeru, tas bieži vien pilnībā pārrakstīs savus šaha parametrus, ja vien to nepārtraukti nepārtrenējat abās spēlēs vienlaikus.
Enerģijas profili un vides izmaksas
Bioloģiskās smadzenes ir evolucionāras efektivitātes brīnums, kas vienlaikus apstrādā sarežģītu valodu, abstraktu domāšanu un fizisku navigāciju, vienlaikus patērējot tikai aptuveni tikpat daudz enerģijas, cik blāva spuldzīte. Mūsdienīga dziļās mācīšanās modeļa apmācībai ir nepieciešami milzīgi skaitļošanas klasteri un serveru fermas, kas patērē milzīgu elektroenerģijas daudzumu un kurām ir nepieciešamas intensīvas dzesēšanas sistēmas, lai pārvaldītu matemātisko darba slodzi.
Priekšrocības un trūkumi
Mācīšanās cilvēkos
Iepriekšējumi
+Neticama datu ieguves efektivitāte
+Nepārtraukta prasmju integrācija mūža garumā
+Īpaši zemas vielmaiņas jaudas prasības
+Intuitīvi aptver cēloņsakarības un fiziskās attiecības
Ievietots
−Iegūšanas ātrumu ierobežo bioloģiskais laiks
−Neaizsargāts pret emocionālām un kognitīvām aizspriedumiem
−Nosliece uz dabisku sabrukšanu un atmiņas izbalēšanu
+Imūns pret subjektīvu fizisku vai emocionālu nogurumu
Ievietots
−Nepieciešama milzīga skaitļošanas infrastruktūra
−Nepieciešami milzīgi anotēti datu kopumi
−Atjaunināšanas laikā ir tendence dzēst vecās zināšanas
−Darbojas kā neinterpretējama matemātiska melnā kaste
Biežas maldības
Mīts
Mākslīgie neironu tīkli mācās tieši tāpat kā cilvēka smadzenes.
Realitāte
Lai gan pamatā esošie mehānismi ir brīvi iedvesmoti no bioloģijas, tie ir pilnīgi atšķirīgi. Mākslīgā apmācība balstās uz precīziem, globāli aprēķinātiem matemātiskiem gradientiem, savukārt bioloģiskās smadzenes izmanto ļoti sarežģītas ķīmiskas nobīdes un lokalizētas korekcijas, ko zinātne joprojām pilnībā neizprot.
Mīts
Mašīnas modelis turpina mācīties un pielāgoties no katras lietotāja mijiedarbības pēc tā izvietošanas.
Realitāte
Lielākā daļa komerciālo mākslīgā intelekta modeļu pēc apmācības tiek iesaldēti. Kad jūs ar tiem tērzējat, tie apstrādā jūsu tekstu, izmantojot fiksētu matemātisko arhitektūru, faktiski nemainot to pamatā esošos svarus, kas nozīmē, ka tie no mijiedarbības neatgriezeniski nemācās neko jaunu.
Mīts
Uzraudzīta mašīnmācīšanās atdarina to, kā cilvēku zīdaiņi apgūst savu pirmo valodu.
Realitāte
Zīdaiņi mācās, patstāvīgi atklājot, iesaistoties sabiedrībā un fiziski izpētot. Viņi nesēž miljonu mirgojošu, cilvēku apzīmētu kartīšu priekšā, lai iemācītos atšķirību starp ābolu un bumbu.
Mīts
Mākslīgā intelekta sistēmas nespēj apgūt abstraktus jēdzienus, jo tām trūkst cilvēcisku emociju.
Realitāte
Problēma ir pamatojuma, nevis emociju trūkums. Cilvēki apgūst jēdzienus, mijiedarbojoties ar fizisko pasauli caur tausti, redzi un sekām, turpretī uz tekstu balstīts neironu tīkls apgūst tikai statistiskās attiecības starp simboliem, nepamanot pamatā esošo fizisko realitāti.
Bieži uzdotie jautājumi
Kas ir atpakaļizplatīšana un kāpēc cilvēka smadzenes to neizmanto?
Atpakaļplatināšana ir matemātiska metode, kurā mākslīgais intelekts aprēķina katra atsevišķa savienojuma precīzu kļūdas devumu visā tīklā un atjaunina tos apgrieztā secībā. Cilvēka smadzenes, visticamāk, to neizmanto, jo bioloģiskie ceļi ir vienvirziena, kas nozīmē, ka signāli nevar šādā sistēmiskā veidā pārvietoties atpakaļ pa neironiem, lai izplatītu precīzas matemātiskas korekcijas.
Kā miegs palīdz cilvēku mācīšanās procesam, salīdzinot ar mašīnu optimizāciju?
Miega laikā cilvēka smadzenes atkārto dienas pieredzi, pārnesot trauslas īstermiņa atmiņas no hipokampa uz ilgtermiņa neokorteksu, vienlaikus atjaunojot vājus savienojumus. Neironu tīkliem nav miega cikla; tā vietā tie novērš datu degradāciju, sajaucot apmācības partijas vai izmantojot regularizējošas vienādojumus, lai stabilizētu savus matemātiskos parametrus.
Kāpēc mākslīgajiem neironu tīkliem ir nepieciešams tik daudz vairāk datu nekā cilvēkam?
Cilvēkiem jau pirms konkrētu uzdevumu apguves ir evolucionāra iepriekšēja programmēšana, sensorās sistēmas un iekšēja izpratne par fiziku, telpu un laiku. Mākslīgais neironu tīkls parasti sāk savu apmācības ceļojumu kā pilnīgi tukša nejaušu skaitļu lapa, kas nozīmē, ka tam ir jāapgūst katrs pamatstruktūras likums no nulles.
Vai mašīna apmācības laikā var izjust kaut ko līdzīgu cilvēka intuīcijai?
Tas, kas mašīnā izskatās pēc intuīcijas, patiesībā ir daudzdimensionāla modeļu saskaņošana. Kad tāds modelis kā AlphaGo veic izcilu, negaidītu gājienu, tas neseko intuīcijai; tas veic aprēķinu, kas noteica, ka konkrētam ceļam ir visaugstākā statistiskā veiksmes varbūtība, pamatojoties uz tā plašo apmācības vēsturi.
Kas ir katastrofāla aizmirstība un kā izstrādātāji cenšas to labot?
Katastrofāla aizmirstība rodas, ja neironu tīkls tiek apmācīts jaunam uzdevumam un pilnībā pārraksta skaitliskos svarus, ko tas izmantoja iepriekšējam uzdevumam. Lai ar to cīnītos, izstrādātāji izmanto tādas metodes kā pieredzes atkārtošana, kas apvieno vecos datus jaunajos apmācības ciklos, vai regularizētas arhitektūras, kas fiksē kritiskos parametrus.
Kā uz atalgojumu balstīta mācīšanās cilvēkiem salīdzināma ar pastiprinājuma mācīšanos mākslīgajā intelektā?
Abiem procesiem ir kopīgas konceptuālas saknes. Cilvēka smadzenes izmanto dopamīna pieplūdumu, lai apbalvotu uzvedību, kas noved pie drošības, pārtikas vai sociāliem panākumiem. Mākslīgā intelekta pastiprināšanas mācīšanās to atdarina, piešķirot aģentam skaitliskus punktus, kad tas sasniedz noteiktu mērķi, piespiežot algoritmu laika gaitā maksimāli palielināt šo rezultātu, izmantojot izmēģinājumu un kļūdu metodi.
Kāpēc apmācītiem modeļiem ir tik grūti pielietot savas zināšanas citā jomā?
Šis ierobežojums ir pazīstams kā pārneses mācīšanās sašaurinājums. Tā kā mākslīgais modelis apgūst tikai šaurās matemātiskās korelācijas, kas atrodas tā konkrētajā apmācības datu kopā, tam trūkst konceptuālas izpratnes par plašāku pasauli, kā rezultātā tas neizdodas, ja šie precīzie strukturālie modeļi mainās pat nedaudz.
Vai var apmācīt neironu tīklu, nepārprotami neapzīmējot visus datus?
Jā, šo pieeju sauc par pašapkalpošanās vai nepkalpošanās mācīšanos. Tā vietā, lai izmantotu cilvēku piešķirtas etiķetes, sistēma mācās, slēpjot no sevis datu daļas, piemēram, aizsedzot vārdus teikumā vai aizmiglojot attēla daļas, un apmācot savus svarus, mēģinot precīzi paredzēt šīs trūkstošās daļas.
Spriedums
Cilvēka mācīšanās spējas joprojām ir nepārspējamas plūstošas adaptācijas, radošas problēmu risināšanas un plaša pasaules uzskata veidošanas ziņā, balstoties uz minimālām reālās pasaules saskarsmēm. Mākslīgo neironu tīklu apmācība ir ideāla pieeja, ja ir jāatklāj slēpti modeļi miljonos sarežģītu datu punktu, jāpanāk vienota statistiskā konsekvence vai jāautomatizē ļoti atkārtoti aprēķini milzīgos mērogos.