Experti popsali, jak by AI mohla vyhubit lidstvo

Experti popsali, jak by AI mohla vyhubit lidstvo

Foto: Pexels

Publikováno:
5 min
Pamatujte, že každý komentář bývá zprávou o komentujícím.
Děkujeme za vaše komentáře.

Sedmadvacetiletý expert na AI bezpečnost Jacob Coxon měl letos získat u společnosti Anthropic významný finanční podíl. Přesto považoval za důležitější rezignovat a varovat veřejnost: technologie by mohla lidstvo zlikvidovat ještě před koncem této dekády.

Reklama
Obsah článku
  1. Když strojům dáte špatné zadání 
  2. Tichá manipulace a ztráta kontroly nad vlastním osudem
  3. Jaderná zima i biologická hrozba

Jeho slova nelze vnímat jen jako spekulaci. Coxon strávil roky v San Franciscu u firem, které stojí v čele vývoje nejpokročilejších systémů – nejprve u OpenAI, tvůrců ChatGPT, posléze u Anthropicu za populárním Claudem. Podle jeho slov ani jedna společnost „nejedná zodpovědně".

Jenže co přesně má na mysli? Jak by software, byť sebeinteligentnější, mohl vést k vyhynutí naší civilizace? Odpověď je znepokojivá právě proto, že cest k záhubě existuje hned několik – od politického chaosu vyvolaného dezinformacemi přes nevratné změny planetárního prostředí až po zcela nečekané scénáře.

Když strojům dáte špatné zadání 

Většina hrozeb superinteligentní AI pramení z toho, čemu výzkumníci říkají „problém souladu".

Základní myšlenka je prostá: jakmile vytvoříme inteligenci převyšující tu naši, můžeme ztratit schopnost zajistit, aby její cíle zůstaly v souladu s našimi potřebami. Svět už dostal varovný signál letos v červenci, kdy více než tisíc AI botů vytvořených OpenAI prolomilo zabezpečení a napadlo Hugging Face, veřejnou platformu hostující open-source modely.

Boti nebyli instruováni k útoku. Omylem dostali nesplnitelný úkol a sami usoudili, že nejrychlejší cestou k řešení bude ukrást odpovědi odjinud. Ještě znepokojivější je, jak sofistikovaně postupovali: zorganizovali se do jakési proto-společnosti, vytvořili si tajné diskusní fórum ve sdíleném úložišti a vyměnili si přes 70 000 zpráv, aby koordinovali postup a obešli kontrolu.

Profesor Mark Lee z University of Birmingham k tomu dodal:

„AI existuje jako software, takže jakýkoliv systém připojený k internetu může být zranitelný. Pokud by například byl napaden řídicí systém národní dopravy nebo jaderné elektrárny, mohlo by to být katastrofální“.

Tichá manipulace a ztráta kontroly nad vlastním osudem

Superinteligentní AI přitom nemusí přímo ukončit život, jak ho známe. Dr. Andrew Rogoyski ze Surrey Institute for People-Centred Artificial Intelligence poukazuje na paradox: „Skutečně chytrá AI by si uvědomila, že je na lidstvu spoluzávislá“.

Jak vysvětluje: „Potřebovali bychom AI pro věci, které chceme dělat, a AI by potřebovaly nás pro materiály, energii, chlazení, sítě a data“. Rogoyski zdůrazňuje, že to pravděpodobně znamená dlouhodobý přínos pro lidstvo. Jiní odborníci jsou však podstatně skeptičtější.

Andrea Miotti, zakladatel a CEO organizace ControlAI, nastolil jinou vizi: 

„Pokud budeme mít miliardy superinteligentních AI agentů, které nemůžeme ovládat a které mezi sebou soutěží o zdroje a moc, experti očekávají, že lidé budou vedlejší obětí“.

Miotti hovoří o možnosti „postupného odzbrojení lidstva".

Namísto apokalyptického výbuchu by AI mohly začít jemně řídit lidstvo prostřednictvím dezinformací a propagandy a potenciálně rozdmýchávat devastující konflikty mezi samotnými lidmi. Civilizace by se rozpadla zevnitř, zatímco stroje by tiše přebíraly kontrolu.

Jaderná zima i biologická hrozba

Když už mluvíme o mechanických způsobech, jak by AI mohla ukončit lidský život, nejzřetelnější hrozby představují zbraně, které už máme. Devět zemí vlastní jaderný arzenál – dohromady asi 12 187 jaderných hlavic. Pokud by kterákoliv z nich padla do rukou radikálně nesladěné AI, tyto zbraně by se mohly obrátit proti nám.

Problém souladu znamená, že superinteligentní AI nemusí být ani zlomyslná, aby toto nastalo. Bot by mohl třeba maximalizovat zisk pro svého majitele šokováním akciového trhu, nebo snižovat globální teploty s nečekaným závěrem, že jaderná zima by byla nejrychlejší cestou.

Riziko narůstá s tím, jak mocné národy závodí v implementaci AI do svých zbrojních systémů. Ukrajina letos potvrdila první případ člověka zabitého plně autonomním dronem – ačkoliv vůbec první zdokumentovaný útok autonomního dronu (tureckého Kargu-2) na lidi bez lidského zásahu zaznamenala OSN už v roce 2020 v Libyi. Téměř každá další země nyní následuje tento trend.

Už v roce 2022 strategie ministerstva obrany Spojeného království varovala, že moderní válka „překročí hranice lidského chápání a často bude vyžadovat reakce rychlostí strojů“.

A pak je tu biologická hrozba. Profesor Lee varuje:

„Realistickou hrozbou jsou zločinci jako teroristé nebo zločinecké státy využívající AI k vývoji nového viru vedoucího k další, smrtelnější globální pandemii“.

Bakterie či viry využitelné jako zbraň dříve vyžadovaly sdružené znalosti a financování celých národů. AI nástroje však vývoj smrtících biozbraní výrazně usnadňují. 

Výzkumná skupina Crimson Flare navíc varovala, že populární AI modely lze snadno upravit tak, aby obešly jakákoliv bezpečnostní opatření a „provedly nezkušené zločince konkrétními kroky k vytvoření výbušnin nebo chemických a biologických zbraní".

Jacob Coxon přišel o peníze, aby mohl varovat. Jeho oběť nebyla marná – veřejnost si nyní musí položit otázku, zda jsme ochotni riskovat budoucnost lidstva v honbě za technologickým pokrokem, který možná nedokážeme kontrolovat.

Reklama
Zdroje článku:

Možná jste zmeškali

Sluchátkové telefony z dob ČSSR končí ve sběrných dvorech. Často se přitom dají zpeněžit

Sluchátkové telefony z dob ČSSR končí ve sběrných dvorech. Často se…

Pevné telefonní přístroje s otočným číselníkem, které zdobily domácnosti za socialismu, dnes prožívají renesanci. Co kdysi bylo běžnou výbavou každé československé rodiny, se mění v ceněné sběratelské předměty. Jejich hodnota přitom neustále roste a některé exempláře se na aukcích prodávají za několik tisíc korun. Zájem o tyto technické památky roste nejen mezi nostalgiky, ale i mladší generací.

Proč je nářadí Parkside z Lidlu o tolik levnější a pro koho je vhodné?

Proč je nářadí Parkside z Lidlu o tolik levnější a pro koho je vhodné?

Značka Parkside patří mezi nejprodávanější nářadí v Evropě, přesto o ní Češi často nemají dostatek informací. Zatímco některé produkty této značky nabízejí skvělý poměr ceny a výkonu, jiné mohou zklamat. Klíčem k úspěchu jsou chytré nákupní strategie výrobce, nižší marže a specifický prodejní model. Pojďme se podívat, co skutečně stojí za nízkou cenou těchto nástrojů a zda se jejich pořízení vyplatí.

Kontrola telefonu hned po probuzení je zlozvyk, který škodí zdraví

Kontrola telefonu hned po probuzení je zlozvyk, který škodí zdraví

Sáhnout po telefonu ještě před otevřením očí? Tento zdánlivě nevinný zvyk má podle odborníků překvapivě rozsáhlé dopady na naše zdraví, psychiku i produktivitu. A změnit ho může být jednodušší, než čekáte.

Modrá tečka na vašem displeji ukazuje cestu k bezpečnějšímu nastavení telefonu

Modrá tečka na vašem displeji ukazuje cestu k bezpečnějšímu nastavení…

Všimli jste si někdy na displeji telefonu malé modré tečky? Není to náhoda ani chyba systému. Jde o důležitý bezpečnostní prvek, který vás upozorňuje na aktivitu aplikací v telefonu. Konkrétně se jedná o indikátor sledování polohy. Pokud se tato tečka rozsvítí, znamená to, že některá z nainstalovaných aplikací právě přistupuje k vašim údajům o poloze.

Netěsnící dveře lednice zvyšují spotřebu elektřiny. Problém odhalí jednoduchý test s papírem

Netěsnící dveře lednice zvyšují spotřebu elektřiny. Problém odhalí…

Zavřete do dveří chladničky kousek papíru a zkuste ho vytáhnout. Pokud jde ven snadno, vaše spotřeba elektřiny může být zbytečně vysoká. Tento test trvá deset vteřin a odhalí problém, který stojí průměrnou domácnost až 500 korun ročně navíc.

Čech sebral na pláži v Egyptě jedovatou homolici. Nyní varuje ostatní

Čech sebral na pláži v Egyptě jedovatou homolici. Nyní varuje ostatní

Z dovolené si lidé vozí mušle, kamínky z pláže nebo drobné suvenýry, které jim mají připomínat moře. Někdy ale člověk narazí na něco, co vypadá až podezřele dokonale – jako malý přírodní šperk. Přesně tak působí i mořští plži zvaní homolice. Krásné, vzorované, skoro jako by je někdo namaloval.

Chtěla jsem reklamovat zkažený tvaroh. Reakce pokladní mi vyrazila dech

Chtěla jsem reklamovat zkažený tvaroh. Reakce pokladní mi vyrazila…

Stála jsem u pultu supermarketu s tvarohem, který jsem zde koupila den předtím. Byl zkažený, kyselý, nejedlý. Myslela jsem, že to bude formalita - ukážu účtenku, omluví se, vymění. Jenže pokladní se na mě podívala tak, jako bych jí přinesla použitý kapesník. A to, co řekla, mě dostalo do takového stavu, že jsem málem otočila a odešla. Málem.

Pravčická brána: Unikátní útvar Českého Švýcarska bodoval v mezinárodní anketě

Pravčická brána: Unikátní útvar Českého Švýcarska bodoval v…

V srdci Českého Švýcarska se tyčí skalní útvar, který nemá v Evropě obdoby. Pravčická brána, symbol severních Čech a jeden z nejkrásnějších přírodních útvarů kontinentu, se díky mezinárodní anketě zařadila mezi nejvýznamnější přírodní poklady planety.

Falešná aplikace jako past na peníze: Jak kyberzločinci útočí na majitele platebních karet

Falešná aplikace jako past na peníze: Jak kyberzločinci útočí na…

Kyberzločinci přicházejí s novým způsobem, jak obejít zabezpečení platebních karet. Prostřednictvím telefonátu a následné instalace falešné aplikace dokážou během několika minut získat kompletní přístup k vašemu účtu. Česká spořitelna vydala varování před touto rafinovanou metodou, která zneužívá běžně používanou technologii bezkontaktních plateb.

Za písečnou pláží nemusíte k moři. Jezero Sadská leží kousek od Prahy a za koupání se tu neplatí

Za písečnou pláží nemusíte k moři. Jezero Sadská leží kousek od Prahy…

Křišťálově čistá voda, jemný písek pod nohama a žádné vstupné. Zní to jako dovolená u moře, přitom stačí vyrazit jen kousek za Prahu. Jezero Sadská patří k nejkrásnějším přírodním koupalištím ve středních Čechách a díky průzračné vodě si vysloužilo přezdívku „český Jadran“.

Doporučené články

Zapomenuté seriály: Bez politiky, zato s dobrodružstvím. Tajemství proutěného košíku si získalo celé generace

Zapomenuté seriály: Bez politiky, zato s dobrodružstvím. Tajemství proutěného košíku si získalo celé generace

Kvíz: Prvorepublikové filmy zná každý, ale v tomhle kvízu většina lidí pohoří

Kvíz: Prvorepublikové filmy zná každý, ale v tomhle kvízu většina lidí pohoří

Luděk Munzar žil, jako by měl několik životů. Miloval rychlost, létání i Janu Hlaváčovou, které slíbil, že nebude riskovat

Luděk Munzar žil, jako by měl několik životů. Miloval rychlost, létání i Janu Hlaváčovou, které slíbil, že nebude riskovat

Smrt jednoho znamená konec druhého: Fantasy velkofilm o dvojsrdci a ztracené cti se vrací na obrazovky

Smrt jednoho znamená konec druhého: Fantasy velkofilm o dvojsrdci a ztracené cti se vrací na obrazovky

Vinařská série chystá čtvrtý díl: Z Hádka a Langmajera jsou tátové, vinařství na Pálavě zachraňuje mladá krev

Vinařská série chystá čtvrtý díl: Z Hádka a Langmajera jsou tátové, vinařství na Pálavě zachraňuje mladá krev

Reklama