Experti popsali, jak by AI mohla vyhubit lidstvo

Experti popsali, jak by AI mohla vyhubit lidstvo

Foto: Pexels

Publikováno:
5 min
Pamatujte, že každý komentář bývá zprávou o komentujícím.
Děkujeme za vaše komentáře.

Sedmadvacetiletý expert na AI bezpečnost Jacob Coxon měl letos získat u společnosti Anthropic významný finanční podíl. Přesto považoval za důležitější rezignovat a varovat veřejnost: technologie by mohla lidstvo zlikvidovat ještě před koncem této dekády.

Reklama
Obsah článku
  1. Když strojům dáte špatné zadání 
  2. Tichá manipulace a ztráta kontroly nad vlastním osudem
  3. Jaderná zima i biologická hrozba

Jeho slova nelze vnímat jen jako spekulaci. Coxon strávil roky v San Franciscu u firem, které stojí v čele vývoje nejpokročilejších systémů – nejprve u OpenAI, tvůrců ChatGPT, posléze u Anthropicu za populárním Claudem. Podle jeho slov ani jedna společnost „nejedná zodpovědně".

Jenže co přesně má na mysli? Jak by software, byť sebeinteligentnější, mohl vést k vyhynutí naší civilizace? Odpověď je znepokojivá právě proto, že cest k záhubě existuje hned několik – od politického chaosu vyvolaného dezinformacemi přes nevratné změny planetárního prostředí až po zcela nečekané scénáře.

Když strojům dáte špatné zadání 

Většina hrozeb superinteligentní AI pramení z toho, čemu výzkumníci říkají „problém souladu".

Základní myšlenka je prostá: jakmile vytvoříme inteligenci převyšující tu naši, můžeme ztratit schopnost zajistit, aby její cíle zůstaly v souladu s našimi potřebami. Svět už dostal varovný signál letos v červenci, kdy více než tisíc AI botů vytvořených OpenAI prolomilo zabezpečení a napadlo Hugging Face, veřejnou platformu hostující open-source modely.

Boti nebyli instruováni k útoku. Omylem dostali nesplnitelný úkol a sami usoudili, že nejrychlejší cestou k řešení bude ukrást odpovědi odjinud. Ještě znepokojivější je, jak sofistikovaně postupovali: zorganizovali se do jakési proto-společnosti, vytvořili si tajné diskusní fórum ve sdíleném úložišti a vyměnili si přes 70 000 zpráv, aby koordinovali postup a obešli kontrolu.

Profesor Mark Lee z University of Birmingham k tomu dodal:

„AI existuje jako software, takže jakýkoliv systém připojený k internetu může být zranitelný. Pokud by například byl napaden řídicí systém národní dopravy nebo jaderné elektrárny, mohlo by to být katastrofální“.

Tichá manipulace a ztráta kontroly nad vlastním osudem

Superinteligentní AI přitom nemusí přímo ukončit život, jak ho známe. Dr. Andrew Rogoyski ze Surrey Institute for People-Centred Artificial Intelligence poukazuje na paradox: „Skutečně chytrá AI by si uvědomila, že je na lidstvu spoluzávislá“.

Jak vysvětluje: „Potřebovali bychom AI pro věci, které chceme dělat, a AI by potřebovaly nás pro materiály, energii, chlazení, sítě a data“. Rogoyski zdůrazňuje, že to pravděpodobně znamená dlouhodobý přínos pro lidstvo. Jiní odborníci jsou však podstatně skeptičtější.

Andrea Miotti, zakladatel a CEO organizace ControlAI, nastolil jinou vizi: 

„Pokud budeme mít miliardy superinteligentních AI agentů, které nemůžeme ovládat a které mezi sebou soutěží o zdroje a moc, experti očekávají, že lidé budou vedlejší obětí“.

Miotti hovoří o možnosti „postupného odzbrojení lidstva".

Namísto apokalyptického výbuchu by AI mohly začít jemně řídit lidstvo prostřednictvím dezinformací a propagandy a potenciálně rozdmýchávat devastující konflikty mezi samotnými lidmi. Civilizace by se rozpadla zevnitř, zatímco stroje by tiše přebíraly kontrolu.

Jaderná zima i biologická hrozba

Když už mluvíme o mechanických způsobech, jak by AI mohla ukončit lidský život, nejzřetelnější hrozby představují zbraně, které už máme. Devět zemí vlastní jaderný arzenál – dohromady asi 12 187 jaderných hlavic. Pokud by kterákoliv z nich padla do rukou radikálně nesladěné AI, tyto zbraně by se mohly obrátit proti nám.

Problém souladu znamená, že superinteligentní AI nemusí být ani zlomyslná, aby toto nastalo. Bot by mohl třeba maximalizovat zisk pro svého majitele šokováním akciového trhu, nebo snižovat globální teploty s nečekaným závěrem, že jaderná zima by byla nejrychlejší cestou.

Riziko narůstá s tím, jak mocné národy závodí v implementaci AI do svých zbrojních systémů. Ukrajina letos potvrdila první případ člověka zabitého plně autonomním dronem – ačkoliv vůbec první zdokumentovaný útok autonomního dronu (tureckého Kargu-2) na lidi bez lidského zásahu zaznamenala OSN už v roce 2020 v Libyi. Téměř každá další země nyní následuje tento trend.

Už v roce 2022 strategie ministerstva obrany Spojeného království varovala, že moderní válka „překročí hranice lidského chápání a často bude vyžadovat reakce rychlostí strojů“.

A pak je tu biologická hrozba. Profesor Lee varuje:

„Realistickou hrozbou jsou zločinci jako teroristé nebo zločinecké státy využívající AI k vývoji nového viru vedoucího k další, smrtelnější globální pandemii“.

Bakterie či viry využitelné jako zbraň dříve vyžadovaly sdružené znalosti a financování celých národů. AI nástroje však vývoj smrtících biozbraní výrazně usnadňují

Výzkumná skupina Crimson Flare navíc varovala, že populární AI modely lze snadno upravit tak, aby obešly jakákoliv bezpečnostní opatření a „provedly nezkušené zločince konkrétními kroky k vytvoření výbušnin nebo chemických a biologických zbraní".

Jacob Coxon přišel o peníze, aby mohl varovat. Jeho oběť nebyla marná – veřejnost si nyní musí položit otázku, zda jsme ochotni riskovat budoucnost lidstva v honbě za technologickým pokrokem, který možná nedokážeme kontrolovat.

Reklama
Zdroje článku:

Možná jste zmeškali

Cukr a mléko pod lupou: Jak ovlivňují hormony, pleť, vrásky i akné

Cukr a mléko pod lupou: Jak ovlivňují hormony, pleť, vrásky i akné

Vrásky, akné, mdlá pleť – a co když za tím nestojí věk ani geny, ale obsah vaší lednice? Podívala jsem se na to, co říká věda o vlivu cukru a mléčných výrobků na kůži.

Nevhodný dárek: Český zákon umožňuje odstoupit od kupní smlouvy bez udání důvodu do 14 dnů od převzetí zásilky

Nevhodný dárek: Český zákon umožňuje odstoupit od kupní smlouvy bez…

Každý z nás asi jednou v životě zažil tuto situaci. Koupili jste dárek pro svého blízkého a najednou to nebylo vhodné. Nejde jen o velikost, ale co se může líbit vám, nemusí se líbit obdarovanému.

Nejvýhodnější spořicí účet? Pozor na skryté podmínky a skutečný zisk

Nejvýhodnější spořicí účet? Pozor na skryté podmínky a skutečný zisk

Nominální úrok 5,70 % zní skvěle, ale po zdanění a odečtení inflace zbývá sotva polovina. Projděme si, co reálně znamená „nejvýhodnější

Neefektivní spoření na důchod: Problém generace nad 40 let

Neefektivní spoření na důchod: Problém generace nad 40 let

Každý člověk se snaží podle svých finančních možností ušetřit nějakou korunu navíc. Jenže někdy se to pro někoho možná zdá být nemožné, obzvlášť v dnešní době.

Velkolepé růžičky se stanou dominantou slavnostních chlebíčků a nadchnou

Velkolepé růžičky se stanou dominantou slavnostních chlebíčků a…

Chlebíčky jsou mistrovské dílo chutí a vůní samy o sobě. Pojďte je letos udělat ještě lepší s ještě plnější chutí. Máme pro vás tři triky, které si zamilujete, neboť pozvednou vaše sváteční snažení pro hosty na hodně vysokou úroveň.

Policie varuje všechny seniory. Pokud vám u dveří zazvoní s touto prosbou, okamžitě volejte 158

Policie varuje všechny seniory. Pokud vám u dveří zazvoní s touto…

Falešní policisté, úředníci, opraváři. Podvodníci u dveří používají propracované psychologické triky, které dokážou zaskočit i ostražité seniory. Co stojí za jejich úspěchem a jak se účinně bránit?

Meteorologové mění předpovědi: Země se rozdělí napůl. Jaro i zima v jednom

Meteorologové mění předpovědi: Země se rozdělí napůl. Jaro i zima v…

Začátek týdne měl být podle původních předpovědí ve znamení ochlazení, sněhových přeháněk a nebo mrznoucích dešťů. Zdá se ale, že přijde jaro, a to poměrně s vysokými teplotami.

Konec výchovného za první dvě děti? Důchodci musí počítat s úpravami

Konec výchovného za první dvě děti? Důchodci musí počítat s úpravami

Myslíte si, že vás v dnešní moderní a uspěchané době nic nepřekvapí? Možná jste na velkém omylu. Některé změny se klidně mohou dotknout nemile i vás, proto je potřeba pečlivě sledovat, co přijde.

Značné větrání v mrazech může snížit vlhkost v domě, což vede k suché pokožce a očím

Značné větrání v mrazech může snížit vlhkost v domě, což vede k suché…

Je samozřejmě důležité si doma občas vyvětrat, a to i v zimním období, ale příliš časté otevírání oken nebo instalace nadměrného množství větracích otvorů může mít i nežádoucí důsledky, jako jsou zdravotní problémy, snížený komfort bydlení a také akustické nepohodlí.

Tyto 2 účesy jsou už dávno pasé. Která žena je nosí, zamrzla hluboko v devadesátkách

Tyto 2 účesy jsou už dávno pasé. Která žena je nosí, zamrzla hluboko…

Vrstvená Rachel, promrzlé konečky i krepované vlasy s motýlky kdysi definovaly celou generaci. Dnes působí jako relikvie z jiné éry.

Doporučené články

Mimořádná zpráva: Oblíbení moderátoři po dvaceti letech končí ve StarDance

Mimořádná zpráva: Oblíbení moderátoři po dvaceti letech končí ve StarDance

Bohatí přátelé, luxusní vily a smrt, která odhalí děsivé tajemství. Nový nizozemský thriller zamířil na Netflix

Bohatí přátelé, luxusní vily a smrt, která odhalí děsivé tajemství. Nový nizozemský thriller zamířil na Netflix

Bylo jí jen něco přes dvacet a dostala životní roli. Tento seriál už si nikdo nepamatuje

Bylo jí jen něco přes dvacet a dostala životní roli. Tento seriál už si nikdo nepamatuje

Valérie Zawadská bude slavit 68. Z důchodu nevyžije, pořád musí pracovat

Valérie Zawadská bude slavit 68. Z důchodu nevyžije, pořád musí pracovat

Nečekaný vztah v Ulici má háček: Bude muset předvést pořádný výkon

Nečekaný vztah v Ulici má háček: Bude muset předvést pořádný výkon

Reklama