Tehisintellekti arvutusheitmed vs traditsioonilised pilveheitmed
Tehisintellekti arvutuste heitkogused tulenevad energiamahukatest GPU-klastritest, mis treenivad suuri mudeleid, samas kui traditsioonilise pilve heitkogused pärinevad üldotstarbelistest andmekeskustest, mis käitavad igapäevaseid töökoormusi. Tehisintellekti töökoormused tarbivad ülesande kohta oluliselt rohkem energiat, kuid traditsiooniline pilveteenus töötab palju suuremas kogumahus.
Esiletused
Ühe suure mudeli treenimine tehisintellekti abil võib paisata sama palju CO2 kui 100+ autot aastas.
Tehisintellektiga riiulid tarbivad ühiku kohta 3–5 korda rohkem energiat kui traditsioonilised pilvepõhised riiulid.
Traditsiooniline pilvetehnoloogia saab kasu aastatepikkusest taastuvenergiasse tehtud investeeringutest, millele tehisintellekti infrastruktuur alles hakkab järele jõudma.
Järeldus, mitte ainult treenimine, juhib nüüd suuremat osa tehisintellekti käimasolevatest heitkogustest.
Mis on Tehisintellekti heitkoguste arvutamine?
Süsiniku jalajälg, mis tekib tehisintellekti mudelite treenimisel ja käitamisel spetsiaalsel riistvaral, näiteks graafikaprotsessoritel ja TPÜ-del.
Ühe suure keelemudeli, näiteks GPT-3, treenimine tekitas väidetavalt umbes 502 tonni CO2 ekvivalenti, mis on võrreldav 112 bensiinimootoriga auto aastas juhitava heitkogusega.
Tehisintellekti töökoormused sõltuvad suuresti NVIDIA H100 ja A100 graafikaprotsessoritest, mis tarbivad koormuse all kumbki 300–700 vatti.
Tehisintellektile pühendatud andmekeskused võivad racki kohta tarbida 10–20 korda rohkem energiat kui traditsioonilised pilveserverid.
Mastaabis järeldamine, mis tähendab iga kord, kui kasutaja tehisintellekti mudelile päringu esitab, moodustab nüüd suurema osa tehisintellekti eluaegsest emissioonist, mitte ainult treenimisest.
Tehisintellekti riistvara jahutamiseks on vaja oluliselt rohkem vett ja elektrit kui tavapäraste protsessorite jahutamiseks ning mõned asutused kasutavad vedelikimmersioonisüsteeme.
Mis on Traditsioonilised pilveheitmed?
Veebisaite, rakendusi, andmebaase ja ettevõtte tarkvara majutavate üldotstarbeliste andmekeskuste tekitatud süsinikdioksiidi heitkogused.
Traditsioonilised pilvepõhised töökoormused töötavad peamiselt protsessoritel, mis on optimeeritud mitmesuguste ülesannete jaoks, mitte spetsiaalsetel tehisintellekti kiirenditel.
Suured hüperskaleerijad nagu AWS, Microsoft Azure ja Google Cloud on lubanud süsinikuneutraalseid või neto-null eesmärke, mõned juba 2030. aastaks.
Andmekeskused moodustavad ülemaailmsest elektrienergia nõudlusest umbes 1–1,5 protsenti, millest suurema osa moodustab traditsiooniline pilveteenus.
Traditsiooniliste pilvekeskkondade serveri kasutusmäär jääb tavaliselt vahemikku 40–60 protsenti, mis on palju kõrgem kui paljudes tehisintellekti treeningklastrites.
Paljud traditsioonilised pilveteenuse pakkujad kasutavad nüüd 60–90 protsenti ulatuses taastuvenergiat sellistes piirkondades nagu Põhja-Euroopa ja Vaikse ookeani loodeosa.
Võrdlustabel
Funktsioon
Tehisintellekti heitkoguste arvutamine
Traditsioonilised pilveheitmed
Esmane riistvara
Graafikaprotsessorid ja TPÜ-d (tehisintellekti kiirendid)
Protsessorid ja üldotstarbelised serverid
Võimsus riiuli kohta
30 kuni 80 kW riiuli kohta
5 kuni 15 kW riiuli kohta
Energia ülesande kohta
Äärmiselt kõrge (mudeli treenimine = tonni CO2)
Mõõdukas (sõltub töökoormusest)
Jahutusvajadus
Väga kõrge, sageli vedelikjahutus
Õhujahutus on tavaliselt piisav
Töökoormuse tüüp
Mudelikoolitus ja järeldused
Veebimajutus, andmebaasid, SaaS-rakendused
Kasutusmäär
Sageli 30–50 protsenti
Tavaliselt 40–60 protsenti
Taastuvenergia kasutuselevõtt
Madalam protsent, kiire kasv
Suurem protsent, mõnes piirkonnas 60–90 protsenti
Kasvutrajektoor
Plahvatusohtlik, kahekordistub iga paari kuu tagant
Püsiv, umbes 10–20 protsenti aastas
Vee tarbimine
Kõrge (tehisintellekti kiipide jahutamine)
Mõõdukas (traditsiooniline jahutus)
Üksikasjalik võrdlus
Energiaintensiivsus ja riistvaranõuded
Tehisintellekti arvutused töötavad massiivselt paralleelsetel protsessoritel, mis on loodud maatriksmatemaatika jaoks, ja need kiibid tarbivad märkimisväärselt energiat. Üks NVIDIA H100 suudab täiskoormusel tarbida 700 vatti ja kaheksa sellisega täidetud riiulid võivad ulatuda 50 kW või rohkem. Traditsioonilised pilveserverid seevastu tarbivad energiat tagasihoidlikumalt, töötades sageli protsessoritel, mis on tõhusalt jõudeolekus ja saavad hakkama erinevate töökoormustega ilma pideva maksimaalse läbilaskevõime vajaduseta. Ainuüksi riistvaraline erinevus muudab tehisintellekti töökoormused tööühiku kohta mitu korda energianõudlikumaks.
Süsiniku jalajälg ülesande kohta
Kui teadlased mõõtsid suurte keelemudelite treeningheitmeid, olid numbrid hämmastavad. GPT-3 suuruse mudeli üks treeningkäivitus võib paisata sadu tonne CO2 ekvivalenti. Traditsioonilised pilveülesanded, näiteks veebilehe teenindamine või andmebaasipäringu käivitamine, toodavad sellest päringu kohta vaid murdosa. Traditsiooniline pilv töötab aga oluliselt suurema mahuga, seega on kumulatiivne jalajälg absoluutarvudes võrreldav, isegi kui ülesande kohta tekkivad heitkogused on väga erinevad.
Jahutus ja veetarve
Graafikaprotsessorid tekitavad intensiivset kuumust, mis tähendab, et tehisintellekti andmekeskused vajavad temperatuuri kontrolli all hoidmiseks sageli vedelikjahutust või isegi immersioonisüsteeme. See jahutusprotsess tarbib tohutul hulgal vett ja elektrit. Traditsioonilised pilverajatised tuginevad enamasti õhkjahutusele ja jahutitele, mis tarbivad vähem vett ja energiat. Põuaohtlikes piirkondades, nagu Arizona, on tehisintellekti andmekeskuste veevajadus juba tekitanud kogukonna vastuseisu ja regulatiivse kontrolli.
Taastuvenergia ja jätkusuutlikkuse lubadused
Traditsioonilised pilvegigandid nagu Google ja Microsoft on aastaid ostnud taastuvenergia lepinguid ja sõlminud elektrienergia ostulepinguid, et oma võrke rohelisemaks muuta. Tehisintellektile keskendunud operatsioonid, mis on sageli uuemad ja loodud spetsiaalselt hüperskaalal põhinevaks koolituseks, pole alati sama edumaad olnud. Sellest hoolimata paigutavad ettevõtted nagu CoreWeave ja Lambda Labs üha enam rajatisi odavate taastuvenergiaallikate, näiteks Vaikse ookeani loodeosas asuvate hüdroelektrijaamade lähedale, et kompenseerida oma tohutut energiatarbimist.
Kasvutrajektoor ja tulevikuväljavaated
Tehisintellekti arvutusvajadus kasvab tempos, millega traditsioonilise pilveteenuse kasv pole kunagi sammu pidanud. Mõned analüütikud hindavad, et tehisintellektiga seotud energiatarbimine võib 2030. aastaks kolmekordistuda, mida ajendavad suuremad mudelid ja laialdane järelduste kasutuselevõtt. Traditsioonilise pilveteenuse kasv, kuigi endiselt tugev, järgib prognoositavamat kõverat, mis on seotud ettevõtete IT-kulutustega. See tähendab, et tehisintellekti heitkogused võivad järgmise kümnendi jooksul teatud piirkondades traditsioonilise pilveteenuse heitkogused ületada, kui tõhususe parandamine ei sammu pida.
Plussid ja miinused
Tehisintellekti heitkoguste arvutamine
Eelised
+Edendab innovatsiooni
+Väga skaleeritav
+Spetsialiseeritud efektiivsus
+Kiire riistvara areng
Kinnitatud
−Äärmiselt energiamahukas
−Suur veekasutus
−Väiksem taastuvenergia segu
−Kiiresti kasvav jalajälg
Traditsioonilised pilveheitmed
Eelised
+Küpsed taastuvenergia programmid
+Paremad kasutusmäärad
+Kehtestatud efektiivsusstandardid
+Väiksem heitkogus ülesande kohta
Kinnitatud
−Massiivne kogumaht
−Vananev infrastruktuur kohati
−Ikka veel võrgust sõltuv
−Aeglasem innovatsioonitsükkel
Tavalised eksiarvamused
Müüt
Ainult tehisintellekti treenimine tekitab märkimisväärseid heitkoguseid, samas kui järeldamine on sisuliselt tasuta.
Tõelisus
Järeldamine moodustab tegelikult suurema osa tehisintellekti eluaegsest süsiniku jalajäljest, kuna see toimub miljardeid kordi päevas kõigis juurutatud mudelites. Üks ChatGPT päring kasutab umbes kümme korda rohkem energiat kui traditsiooniline Google'i otsing ja need päringud kuhjuvad kiiresti.
Müüt
Traditsioonilised pilveandmekeskused on juba süsinikuneutraalsed.
Tõelisus
Kuigi suuremad teenusepakkujad on lubanud saavutada netoheite nulli, tugineb enamik neist osaliselt siiski fossiilkütustele, eriti piirkondades, kus taastuvenergia infrastruktuur on piiratud. Süsinikneutraalsuse väited tuginevad sageli suuresti tasaarvestustele, mitte serverite tegelikule puhtale energiale.
Müüt
Tehisintellektiga seotud töökoormused on traditsioonilisest pilvest tõhusamad, kuna tegemist on uuema tehnoloogiaga.
Tõelisus
Uuem ei tähenda automaatselt keskkonnasõbralikumat. Tehisintellekti riistvara on kiibi kohta palju energianõudlikum ning treenimiseks ja järelduste tegemiseks vajaliku arvutusmahu tohutu ulatus muudab tehisintellekti töökoormuse ülesande kohta oluliselt süsinikumahukamaks kui enamik traditsioonilisi pilveoperatsioone.
Müüt
Pilve kolimine vähendab automaatselt ettevõtte heitkoguseid.
Tõelisus
Pilveteenustele üleminek aitab töökoormust konsolideerida ja energia kasutamist parandada, kuid see ei kõrvalda heitkoguseid. Elekter peab ikkagi kuskilt tulema ja kui pilvepiirkond töötab söe või gaasi peal, siis süsiniku jalajälg lihtsalt nihkub, mitte ei kahane.
Müüt
Kõik andmekeskused tarbivad umbes sama palju energiat, olenemata sellest, mida nad käitavad.
Tõelisus
Võimsustihedus varieerub suuresti. Tehisintellektil põhinev andmekeskus võib tarbida 30–80 kW racki kohta, samas kui traditsiooniline pilvekeskus võib tarbida vaid 5–15 kW racki kohta. See 5-kordne võimsustiheduse erinevus tähendab otseselt väga erinevaid jahutusvajadusi ja heitkoguste profiile.
Sageli küsitud küsimused
Kui palju CO2-d tehisintellekti mudeli treenimine tegelikult tekitab?
See sõltub suuresti mudeli suurusest, kuid uuringud näitavad, et suure keelemudeli, näiteks GPT-3, treenimine tekitas umbes 502 tonni CO2 ekvivalenti. Väiksemad mudelid toodavad palju vähem, kuid trend üha suuremate mudelite poole tähendab, et treenimise heitkogused kasvavad pidevalt. Ühe piirimudeli treenimisega saab võrrelda kümnete kodude aastast heitkogust.
Kas tehisintellekt on keskkonnale tõesti halvem kui traditsiooniline pilvandmetöötlus?
Jah, tehisintellekti töökoormused tarbivad ülesande kohta oluliselt rohkem energiat kui tavalised pilveülesanded, näiteks veebilehe teenindamine või andmebaasi käitamine. Traditsiooniline pilv töötab aga palju suuremas mahus, seega on absoluutsed heitkogused praegu võrreldavad. Tehisintellekt kasvab aga palju kiiremini, mis võib kümnendi jooksul tasakaalu nihutada.
Miks tehisintellekti andmekeskused nii palju vett kasutavad?
Graafikaprotsessorid ja TPÜ-d tekitavad intensiivset kuumust, mis nõuab agressiivset jahutamist. Paljud tehisintellekti asutused kasutavad veepõhiseid jahutussüsteeme ning kohapealne veetarbimine võib ulatuda miljonite galloniteni päevas. Traditsioonilised pilveandmekeskused kasutavad tavaliselt vähem agressiivset jahutust, tuginedes sageli välisõhule või jahutitele, mitte pidevale vee aurustumisele.
Kas tehisintellekti töökoormused saavad töötada taastuvenergia abil?
Jah, ja üha enam nad seda teevad. Ettevõtted nagu Google, Microsoft ja Amazon sõlmivad energia ostulepinguid, mis katavad spetsiaalselt tehisintellekti koolitusvõimalusi. Mõned tehisintellektile keskendunud pakkujad asuvad hüdroelektrijaamade lähedale või ehitavad spetsiaalseid päikese- ja tuuleparke. Väljakutse seisneb tohutu ja kasvava energianõudluse sobitamises puhta energiavarustusega.
Mis on tehisintellekti arvutustes suurim heitkoguste allikas?
Suurim allikas on GPU-de ja TPU-de endi toiteks kasutatav elekter, millele järgneb jahutamiseks vajalik energia. Kiipide tootmisel ja andmekeskuste ehitamisel tekkivad heitkogused on samuti olulised, kuid enamiku tehisintellekti süsteemide elutsükli jalajäljes domineerib tööks kuluv energia.
Kas traditsioonilised pilveteenuse pakkujad kasutavad tegelikult taastuvenergiat?
Paljud teevad seda, vähemalt osaliselt. Google on alates 2017. aastast katnud 100 protsenti oma aastasest elektritarbimisest taastuvenergia ostmisega, kuigi see ei tähenda, et iga andmekeskus töötab ööpäevaringselt taastuvenergial. AWS-il ja Microsoftil on sarnased eesmärgid erinevate ajakavadega ning tegelik taastuvenergia protsent on piirkonniti erinev.
Kuidas saavad ettevõtted vähendada tehisintellekti arvutustega seotud heitkoguseid?
Toimivad mitmed strateegiad: väiksemate ja tõhusamate mudelite valimine, treenimine puhaste võrkudega piirkondades, selliste tehnikate kasutamine nagu mudeli kärpimine ja kvantiseerimine ning tehisintellekti pakkujate valimine, kellel on tugevad jätkusuutlikkuse eesmärgid. Isegi nii lihtne asi nagu järeldamise käivitamine kasutajatele lähemal võib vähendada ülekandekadusid ja jahutuskulusid.
Kas tehisintellekti heitkogused kasvavad igavesti?
Mitte tingimata. Riistvara efektiivsus paraneb iga põlvkonnaga ning uued tehnikad, nagu ekspertide segu mudelid ja paremad treeningalgoritmid, võivad arvutusnõudeid dramaatiliselt vähendada. Nõudlus kasvab aga nii kiiresti, et efektiivsuse kasv neelab sageli tohutu ulatuse alla, mistõttu eksperdid suruvad algoritmiliste täiustuste kõrval peale võrgutasemel puhta energia lahendusi.
Kuidas võrdub tehisintellekti järeldus Google'i otsinguga heitkoguste osas?
Üks tehisintellekti järelpäring, näiteks ChatGPT-le küsimuse esitamine, kasutab umbes kümme korda rohkem energiat kui traditsiooniline Google'i otsing. See teeb iga tehisintellekti päringu kohta umbes 2,9–4,1 vatt-tundi, võrreldes tavalise otsingu 0,3 vatt-tunniga. Korrutage see miljardite päringute arvuga päevas ja vahe muutub tohutuks.
Kas tehisintellekti andmekeskuste heitkoguste kohta on olemas eeskirju?
Regulatsioonid on küll tekkimas, kuid endiselt ebaühtlased. ELi energiatõhususe direktiiv nõuab nüüd, et teatud künniseid ületavad andmekeskused annaksid aru energiatarbimisest ja heitkogustest. Mõned USA osariigid on kehtestanud andmekeskuste veekasutust käsitlevad õigusaktid ning mitmed riigid arutavad süsinikuheite aruandluse nõudeid just tehisintellekti taristu jaoks.
Otsus
Kui valida keskkonnamõju põhjal kahe variandi vahel, siis traditsiooniline pilveteenus on praegu ülesannete tõhususe ja taastuvenergia kasutuselevõtu poolest edukas, kuid tehisintellektil põhinev arvutus jõuab kiiresti järele, kuna pakkujad võistlevad oma GPU-parkide rohelisemaks muutmisega. Tehisintellekti juurutavate organisatsioonide jaoks võib puhta energiavõrguga piirkondade valimine ja tõhusate mudelite kasutamine jalajälge dramaatiliselt vähendada. Traditsiooniliste pilveteenuste kasutajate jaoks seisneb heitkoguste vähendamise tee pigem töökoormuse optimeerimises ja pakkujate valimises, kellel on tugevad jätkusuutlikkuse kohustused.