Comparthing Logo
tehisintellektpilvandmetöötlussüsinikuheitmedjätkusuutlikkusandmekeskusedGPU-arvutus

Tehisintellekti arvutusheitmed vs traditsioonilised pilveheitmed

Tehisintellekti arvutuste heitkogused tulenevad energiamahukatest GPU-klastritest, mis treenivad suuri mudeleid, samas kui traditsioonilise pilve heitkogused pärinevad üldotstarbelistest andmekeskustest, mis käitavad igapäevaseid töökoormusi. Tehisintellekti töökoormused tarbivad ülesande kohta oluliselt rohkem energiat, kuid traditsiooniline pilveteenus töötab palju suuremas kogumahus.

Esiletused

  • Ühe suure mudeli treenimine tehisintellekti abil võib paisata sama palju CO2 kui 100+ autot aastas.
  • Tehisintellektiga riiulid tarbivad ühiku kohta 3–5 korda rohkem energiat kui traditsioonilised pilvepõhised riiulid.
  • Traditsiooniline pilvetehnoloogia saab kasu aastatepikkusest taastuvenergiasse tehtud investeeringutest, millele tehisintellekti infrastruktuur alles hakkab järele jõudma.
  • Järeldus, mitte ainult treenimine, juhib nüüd suuremat osa tehisintellekti käimasolevatest heitkogustest.

Mis on Tehisintellekti heitkoguste arvutamine?

Süsiniku jalajälg, mis tekib tehisintellekti mudelite treenimisel ja käitamisel spetsiaalsel riistvaral, näiteks graafikaprotsessoritel ja TPÜ-del.

  • Ühe suure keelemudeli, näiteks GPT-3, treenimine tekitas väidetavalt umbes 502 tonni CO2 ekvivalenti, mis on võrreldav 112 bensiinimootoriga auto aastas juhitava heitkogusega.
  • Tehisintellekti töökoormused sõltuvad suuresti NVIDIA H100 ja A100 graafikaprotsessoritest, mis tarbivad koormuse all kumbki 300–700 vatti.
  • Tehisintellektile pühendatud andmekeskused võivad racki kohta tarbida 10–20 korda rohkem energiat kui traditsioonilised pilveserverid.
  • Mastaabis järeldamine, mis tähendab iga kord, kui kasutaja tehisintellekti mudelile päringu esitab, moodustab nüüd suurema osa tehisintellekti eluaegsest emissioonist, mitte ainult treenimisest.
  • Tehisintellekti riistvara jahutamiseks on vaja oluliselt rohkem vett ja elektrit kui tavapäraste protsessorite jahutamiseks ning mõned asutused kasutavad vedelikimmersioonisüsteeme.

Mis on Traditsioonilised pilveheitmed?

Veebisaite, rakendusi, andmebaase ja ettevõtte tarkvara majutavate üldotstarbeliste andmekeskuste tekitatud süsinikdioksiidi heitkogused.

  • Traditsioonilised pilvepõhised töökoormused töötavad peamiselt protsessoritel, mis on optimeeritud mitmesuguste ülesannete jaoks, mitte spetsiaalsetel tehisintellekti kiirenditel.
  • Suured hüperskaleerijad nagu AWS, Microsoft Azure ja Google Cloud on lubanud süsinikuneutraalseid või neto-null eesmärke, mõned juba 2030. aastaks.
  • Andmekeskused moodustavad ülemaailmsest elektrienergia nõudlusest umbes 1–1,5 protsenti, millest suurema osa moodustab traditsiooniline pilveteenus.
  • Traditsiooniliste pilvekeskkondade serveri kasutusmäär jääb tavaliselt vahemikku 40–60 protsenti, mis on palju kõrgem kui paljudes tehisintellekti treeningklastrites.
  • Paljud traditsioonilised pilveteenuse pakkujad kasutavad nüüd 60–90 protsenti ulatuses taastuvenergiat sellistes piirkondades nagu Põhja-Euroopa ja Vaikse ookeani loodeosa.

Võrdlustabel

Funktsioon Tehisintellekti heitkoguste arvutamine Traditsioonilised pilveheitmed
Esmane riistvara Graafikaprotsessorid ja TPÜ-d (tehisintellekti kiirendid) Protsessorid ja üldotstarbelised serverid
Võimsus riiuli kohta 30 kuni 80 kW riiuli kohta 5 kuni 15 kW riiuli kohta
Energia ülesande kohta Äärmiselt kõrge (mudeli treenimine = tonni CO2) Mõõdukas (sõltub töökoormusest)
Jahutusvajadus Väga kõrge, sageli vedelikjahutus Õhujahutus on tavaliselt piisav
Töökoormuse tüüp Mudelikoolitus ja järeldused Veebimajutus, andmebaasid, SaaS-rakendused
Kasutusmäär Sageli 30–50 protsenti Tavaliselt 40–60 protsenti
Taastuvenergia kasutuselevõtt Madalam protsent, kiire kasv Suurem protsent, mõnes piirkonnas 60–90 protsenti
Kasvutrajektoor Plahvatusohtlik, kahekordistub iga paari kuu tagant Püsiv, umbes 10–20 protsenti aastas
Vee tarbimine Kõrge (tehisintellekti kiipide jahutamine) Mõõdukas (traditsiooniline jahutus)

Üksikasjalik võrdlus

Energiaintensiivsus ja riistvaranõuded

Tehisintellekti arvutused töötavad massiivselt paralleelsetel protsessoritel, mis on loodud maatriksmatemaatika jaoks, ja need kiibid tarbivad märkimisväärselt energiat. Üks NVIDIA H100 suudab täiskoormusel tarbida 700 vatti ja kaheksa sellisega täidetud riiulid võivad ulatuda 50 kW või rohkem. Traditsioonilised pilveserverid seevastu tarbivad energiat tagasihoidlikumalt, töötades sageli protsessoritel, mis on tõhusalt jõudeolekus ja saavad hakkama erinevate töökoormustega ilma pideva maksimaalse läbilaskevõime vajaduseta. Ainuüksi riistvaraline erinevus muudab tehisintellekti töökoormused tööühiku kohta mitu korda energianõudlikumaks.

Süsiniku jalajälg ülesande kohta

Kui teadlased mõõtsid suurte keelemudelite treeningheitmeid, olid numbrid hämmastavad. GPT-3 suuruse mudeli üks treeningkäivitus võib paisata sadu tonne CO2 ekvivalenti. Traditsioonilised pilveülesanded, näiteks veebilehe teenindamine või andmebaasipäringu käivitamine, toodavad sellest päringu kohta vaid murdosa. Traditsiooniline pilv töötab aga oluliselt suurema mahuga, seega on kumulatiivne jalajälg absoluutarvudes võrreldav, isegi kui ülesande kohta tekkivad heitkogused on väga erinevad.

Jahutus ja veetarve

Graafikaprotsessorid tekitavad intensiivset kuumust, mis tähendab, et tehisintellekti andmekeskused vajavad temperatuuri kontrolli all hoidmiseks sageli vedelikjahutust või isegi immersioonisüsteeme. See jahutusprotsess tarbib tohutul hulgal vett ja elektrit. Traditsioonilised pilverajatised tuginevad enamasti õhkjahutusele ja jahutitele, mis tarbivad vähem vett ja energiat. Põuaohtlikes piirkondades, nagu Arizona, on tehisintellekti andmekeskuste veevajadus juba tekitanud kogukonna vastuseisu ja regulatiivse kontrolli.

Taastuvenergia ja jätkusuutlikkuse lubadused

Traditsioonilised pilvegigandid nagu Google ja Microsoft on aastaid ostnud taastuvenergia lepinguid ja sõlminud elektrienergia ostulepinguid, et oma võrke rohelisemaks muuta. Tehisintellektile keskendunud operatsioonid, mis on sageli uuemad ja loodud spetsiaalselt hüperskaalal põhinevaks koolituseks, pole alati sama edumaad olnud. Sellest hoolimata paigutavad ettevõtted nagu CoreWeave ja Lambda Labs üha enam rajatisi odavate taastuvenergiaallikate, näiteks Vaikse ookeani loodeosas asuvate hüdroelektrijaamade lähedale, et kompenseerida oma tohutut energiatarbimist.

Kasvutrajektoor ja tulevikuväljavaated

Tehisintellekti arvutusvajadus kasvab tempos, millega traditsioonilise pilveteenuse kasv pole kunagi sammu pidanud. Mõned analüütikud hindavad, et tehisintellektiga seotud energiatarbimine võib 2030. aastaks kolmekordistuda, mida ajendavad suuremad mudelid ja laialdane järelduste kasutuselevõtt. Traditsioonilise pilveteenuse kasv, kuigi endiselt tugev, järgib prognoositavamat kõverat, mis on seotud ettevõtete IT-kulutustega. See tähendab, et tehisintellekti heitkogused võivad järgmise kümnendi jooksul teatud piirkondades traditsioonilise pilveteenuse heitkogused ületada, kui tõhususe parandamine ei sammu pida.

Plussid ja miinused

Tehisintellekti heitkoguste arvutamine

Eelised

  • + Edendab innovatsiooni
  • + Väga skaleeritav
  • + Spetsialiseeritud efektiivsus
  • + Kiire riistvara areng

Kinnitatud

  • Äärmiselt energiamahukas
  • Suur veekasutus
  • Väiksem taastuvenergia segu
  • Kiiresti kasvav jalajälg

Traditsioonilised pilveheitmed

Eelised

  • + Küpsed taastuvenergia programmid
  • + Paremad kasutusmäärad
  • + Kehtestatud efektiivsusstandardid
  • + Väiksem heitkogus ülesande kohta

Kinnitatud

  • Massiivne kogumaht
  • Vananev infrastruktuur kohati
  • Ikka veel võrgust sõltuv
  • Aeglasem innovatsioonitsükkel

Tavalised eksiarvamused

Müüt

Ainult tehisintellekti treenimine tekitab märkimisväärseid heitkoguseid, samas kui järeldamine on sisuliselt tasuta.

Tõelisus

Järeldamine moodustab tegelikult suurema osa tehisintellekti eluaegsest süsiniku jalajäljest, kuna see toimub miljardeid kordi päevas kõigis juurutatud mudelites. Üks ChatGPT päring kasutab umbes kümme korda rohkem energiat kui traditsiooniline Google'i otsing ja need päringud kuhjuvad kiiresti.

Müüt

Traditsioonilised pilveandmekeskused on juba süsinikuneutraalsed.

Tõelisus

Kuigi suuremad teenusepakkujad on lubanud saavutada netoheite nulli, tugineb enamik neist osaliselt siiski fossiilkütustele, eriti piirkondades, kus taastuvenergia infrastruktuur on piiratud. Süsinikneutraalsuse väited tuginevad sageli suuresti tasaarvestustele, mitte serverite tegelikule puhtale energiale.

Müüt

Tehisintellektiga seotud töökoormused on traditsioonilisest pilvest tõhusamad, kuna tegemist on uuema tehnoloogiaga.

Tõelisus

Uuem ei tähenda automaatselt keskkonnasõbralikumat. Tehisintellekti riistvara on kiibi kohta palju energianõudlikum ning treenimiseks ja järelduste tegemiseks vajaliku arvutusmahu tohutu ulatus muudab tehisintellekti töökoormuse ülesande kohta oluliselt süsinikumahukamaks kui enamik traditsioonilisi pilveoperatsioone.

Müüt

Pilve kolimine vähendab automaatselt ettevõtte heitkoguseid.

Tõelisus

Pilveteenustele üleminek aitab töökoormust konsolideerida ja energia kasutamist parandada, kuid see ei kõrvalda heitkoguseid. Elekter peab ikkagi kuskilt tulema ja kui pilvepiirkond töötab söe või gaasi peal, siis süsiniku jalajälg lihtsalt nihkub, mitte ei kahane.

Müüt

Kõik andmekeskused tarbivad umbes sama palju energiat, olenemata sellest, mida nad käitavad.

Tõelisus

Võimsustihedus varieerub suuresti. Tehisintellektil põhinev andmekeskus võib tarbida 30–80 kW racki kohta, samas kui traditsiooniline pilvekeskus võib tarbida vaid 5–15 kW racki kohta. See 5-kordne võimsustiheduse erinevus tähendab otseselt väga erinevaid jahutusvajadusi ja heitkoguste profiile.

Sageli küsitud küsimused

Kui palju CO2-d tehisintellekti mudeli treenimine tegelikult tekitab?
See sõltub suuresti mudeli suurusest, kuid uuringud näitavad, et suure keelemudeli, näiteks GPT-3, treenimine tekitas umbes 502 tonni CO2 ekvivalenti. Väiksemad mudelid toodavad palju vähem, kuid trend üha suuremate mudelite poole tähendab, et treenimise heitkogused kasvavad pidevalt. Ühe piirimudeli treenimisega saab võrrelda kümnete kodude aastast heitkogust.
Kas tehisintellekt on keskkonnale tõesti halvem kui traditsiooniline pilvandmetöötlus?
Jah, tehisintellekti töökoormused tarbivad ülesande kohta oluliselt rohkem energiat kui tavalised pilveülesanded, näiteks veebilehe teenindamine või andmebaasi käitamine. Traditsiooniline pilv töötab aga palju suuremas mahus, seega on absoluutsed heitkogused praegu võrreldavad. Tehisintellekt kasvab aga palju kiiremini, mis võib kümnendi jooksul tasakaalu nihutada.
Miks tehisintellekti andmekeskused nii palju vett kasutavad?
Graafikaprotsessorid ja TPÜ-d tekitavad intensiivset kuumust, mis nõuab agressiivset jahutamist. Paljud tehisintellekti asutused kasutavad veepõhiseid jahutussüsteeme ning kohapealne veetarbimine võib ulatuda miljonite galloniteni päevas. Traditsioonilised pilveandmekeskused kasutavad tavaliselt vähem agressiivset jahutust, tuginedes sageli välisõhule või jahutitele, mitte pidevale vee aurustumisele.
Kas tehisintellekti töökoormused saavad töötada taastuvenergia abil?
Jah, ja üha enam nad seda teevad. Ettevõtted nagu Google, Microsoft ja Amazon sõlmivad energia ostulepinguid, mis katavad spetsiaalselt tehisintellekti koolitusvõimalusi. Mõned tehisintellektile keskendunud pakkujad asuvad hüdroelektrijaamade lähedale või ehitavad spetsiaalseid päikese- ja tuuleparke. Väljakutse seisneb tohutu ja kasvava energianõudluse sobitamises puhta energiavarustusega.
Mis on tehisintellekti arvutustes suurim heitkoguste allikas?
Suurim allikas on GPU-de ja TPU-de endi toiteks kasutatav elekter, millele järgneb jahutamiseks vajalik energia. Kiipide tootmisel ja andmekeskuste ehitamisel tekkivad heitkogused on samuti olulised, kuid enamiku tehisintellekti süsteemide elutsükli jalajäljes domineerib tööks kuluv energia.
Kas traditsioonilised pilveteenuse pakkujad kasutavad tegelikult taastuvenergiat?
Paljud teevad seda, vähemalt osaliselt. Google on alates 2017. aastast katnud 100 protsenti oma aastasest elektritarbimisest taastuvenergia ostmisega, kuigi see ei tähenda, et iga andmekeskus töötab ööpäevaringselt taastuvenergial. AWS-il ja Microsoftil on sarnased eesmärgid erinevate ajakavadega ning tegelik taastuvenergia protsent on piirkonniti erinev.
Kuidas saavad ettevõtted vähendada tehisintellekti arvutustega seotud heitkoguseid?
Toimivad mitmed strateegiad: väiksemate ja tõhusamate mudelite valimine, treenimine puhaste võrkudega piirkondades, selliste tehnikate kasutamine nagu mudeli kärpimine ja kvantiseerimine ning tehisintellekti pakkujate valimine, kellel on tugevad jätkusuutlikkuse eesmärgid. Isegi nii lihtne asi nagu järeldamise käivitamine kasutajatele lähemal võib vähendada ülekandekadusid ja jahutuskulusid.
Kas tehisintellekti heitkogused kasvavad igavesti?
Mitte tingimata. Riistvara efektiivsus paraneb iga põlvkonnaga ning uued tehnikad, nagu ekspertide segu mudelid ja paremad treeningalgoritmid, võivad arvutusnõudeid dramaatiliselt vähendada. Nõudlus kasvab aga nii kiiresti, et efektiivsuse kasv neelab sageli tohutu ulatuse alla, mistõttu eksperdid suruvad algoritmiliste täiustuste kõrval peale võrgutasemel puhta energia lahendusi.
Kuidas võrdub tehisintellekti järeldus Google'i otsinguga heitkoguste osas?
Üks tehisintellekti järelpäring, näiteks ChatGPT-le küsimuse esitamine, kasutab umbes kümme korda rohkem energiat kui traditsiooniline Google'i otsing. See teeb iga tehisintellekti päringu kohta umbes 2,9–4,1 vatt-tundi, võrreldes tavalise otsingu 0,3 vatt-tunniga. Korrutage see miljardite päringute arvuga päevas ja vahe muutub tohutuks.
Kas tehisintellekti andmekeskuste heitkoguste kohta on olemas eeskirju?
Regulatsioonid on küll tekkimas, kuid endiselt ebaühtlased. ELi energiatõhususe direktiiv nõuab nüüd, et teatud künniseid ületavad andmekeskused annaksid aru energiatarbimisest ja heitkogustest. Mõned USA osariigid on kehtestanud andmekeskuste veekasutust käsitlevad õigusaktid ning mitmed riigid arutavad süsinikuheite aruandluse nõudeid just tehisintellekti taristu jaoks.

Otsus

Kui valida keskkonnamõju põhjal kahe variandi vahel, siis traditsiooniline pilveteenus on praegu ülesannete tõhususe ja taastuvenergia kasutuselevõtu poolest edukas, kuid tehisintellektil põhinev arvutus jõuab kiiresti järele, kuna pakkujad võistlevad oma GPU-parkide rohelisemaks muutmisega. Tehisintellekti juurutavate organisatsioonide jaoks võib puhta energiavõrguga piirkondade valimine ja tõhusate mudelite kasutamine jalajälge dramaatiliselt vähendada. Traditsiooniliste pilveteenuste kasutajate jaoks seisneb heitkoguste vähendamise tee pigem töökoormuse optimeerimises ja pakkujate valimises, kellel on tugevad jätkusuutlikkuse kohustused.

Seotud võrdlused

A/B-testimine mudeli serveerimisel vs. ühe mudeli juurutamine

Mudeliteenuse A/B-testimine suunab liiklust konkureerivate mudeliversioonide vahel, et mõõta reaalset toimivust, samas kui ühe mudeli juurutamine saadab kõigile kasutajatele ühe mudeli. Meeskonnad valivad nende vahel riskitaluvuse, liiklusmahu ja statistilise valideerimise vajaduse alusel enne täielikku juurutamist.

A/B-testimine sisuväljaannetes vs ühekordsed sisuväljaanded

Sisuväljaannete A/B-testimine hõlmab variatsioonide levitamist erinevatele sihtrühmadele ja tulemuslikkuse mõõtmist, samas kui ühekordsed sisuväljaanded suunavad ühe versiooni korraga kõigile. Igal lähenemisviisil on erinevad eesmärgid, kusjuures A/B-testimine eelistab andmepõhist optimeerimist ja ühekordsed väljaanded seavad esikohale kiiruse ja lihtsuse.

Adaptiivne intelligentsus vs fikseeritud käitumissüsteemid

See detailne võrdlus uurib adaptiivsete intelligentsete mootorite arhitektuurilisi erinevusi, operatsioonilisi piiranguid ja reaalset jõudlust võrreldes fikseeritud käitumisega automatiseerimissüsteemidega. Vaatleme, kuidas süsteemid, mis pidevalt õpivad uutest keskkonnaandmetest, sobivad kokku jäikade ja ennustatavate reeglipõhiste raamistikega.

Adaptiivne otsing vs staatiline otsing

Adaptiivne otsing kohandab dünaamiliselt, kuidas ja millist teavet süsteem päringu põhjal hangib, samas kui staatilised otsingukanalid järgivad fikseeritud reegleid olenemata kontekstist. Mõlemad toetavad tänapäevaseid tehisintellekti rakendusi, kuid erinevad oluliselt paindlikkuse, maksumuse ja täpsuse poolest. Nende vahel valimine sõltub töökoormuse keerukusest ja eelarvest.

Agentide koolitus keskkondades vs. võrguühenduseta andmestiku koolitus

Agentide koolitamine keskkondades hõlmab õppimist reaalajas simuleeritud või füüsilise keskkonnaga suhtlemise kaudu, samas kui võrguühenduseta andmestiku koolitamine tugineb eelnevalt kogutud andmetele ilma täiendava keskkonnale juurdepääsuta. Mõlemad lähenemisviisid treenivad masinõppe mudeleid, kuid erinevad põhimõtteliselt selle poolest, kuidas agendid kogemusi koguvad ja jõudlust parandavad.