« strana 1 »

Zneužívání umělé inteligence při útocích, propagandě a sledování lidí

rubrika: Pel-mel


Společnost Anthropic zveřejnila rozsáhlou zprávu o zneužívání umělé inteligence (AI). Popisuje v ní konkrétní případy, kdy lidé využívali její modely Claude při kybernetických útocích, propagandistických operacích, sledování lidí, podvodech, biologickém výzkumu nebo vývoji zbraní. Některé z těchto aktivit vedly ke skutečným průnikům do systémů, jiné zůstaly ve fázi vývoje či testování.

 

Lucifer


Anthropic PBC je americká společnost zabývající se umělou inteligencí (AI) se sídlem v San Franciscu. Společnost vyvinula rodinu velkých jazykových modelů (LLM) s názvem Claude jako konkurenci pro ChatGPT od OpenAI a Gemini od Google. Anthropic je registrován jako tzv. public benefit corporation (PBC), tedy společnost s veřejně prospěšným účelem, jejímž deklarovaným posláním je výzkum a vývoj AI s cílem „studovat její bezpečnostní vlastnosti na technologické hranici" a využitím tohoto výzkumu k nasazení bezpečných modelů pro veřejnost.

 

Anthropic zveřejnil 154stránkovou zprávu popisující zneužití AI modelů Claude, týká se kybernetických operací i vlivových kampaní. Zpráva zdůrazňuje, že AI už není jen pomocníkem, ale orchestrátorem kybernetických útoků. Útočníci využívali AI k tvorbě celých systémů pro vlivové operace, včetně plánování kampaní, tvorby obsahu a práce s falešnými profily. Dokument se na 154 stranách zabývá celkem sedmi oblastmi: kybernetickými operacemi, vlivovými operacemi, sledováním, podvody, biologickým zneužitím, vývojem konvenčních zbraní a nelegálním získáváním schopností AI modelů.

 

Anthropic přitom hned na začátku upozorňuje, že nejde o seznam běžného používání jeho modelů. Firma záměrně vybrala „nejvýraznější a nejnovější“ případy, které její tým zaznamenal. Jinými slovy: bezpečnostních incidentů je za prvních osm měsíců ještě daleko více. Nejde tedy o předpovědi toho, co by AI jednou mohla dělat. Jde o popis konkrétního zneužití, které Anthropic podle svých zjištění skutečně zaznamenal. U některých případů přitom šlo o úspěšný útok, u jiných o přípravu, vývoj nebo testování.

 

Největší část zprávy se věnuje kybernetickým útokům. Anthropic zde popisuje změnu, kterou považuje za zásadní: AI už není používána jen jako poradce nebo nástroj pro napsání jednotlivého kusu kódu. Firma kapitolu trefně nazvala „Od pomocníka k orchestrátorovi“. Útočníci podle Anthropicu zapojují AI do stále větší části celého procesu – od průzkumu cíle přes vývoj nástrojů až po zpracování dat a samotné zneužití napadených systémů.

 

V popsaných případech podle firmy hacktivisté, finančně motivovaní útočníci i státní špionážní operátoři dokázali vést kampaně proti více obětem, které by ještě před rokem vyžadovaly řadu zkušených lidí a specializované znalosti. Důležitou součástí této změny je podle zprávy také automatizace. Většina kybernetických operací popsaných v reportu byla umožněna přímým prováděním úkolů AI nebo jejich orchestrací. Orchestrace je řízení a koordinace více kroků či úkolů pomocí AI tak, aby na sebe automaticky navazovaly a společně vedly ke kýženému výsledku. Modely například prováděly průzkum, odcizení a následnou analýzu ukradených dat, zatímco lidé zůstávali u zásadních rozhodnutí. Starali se pouze o to, na jaký cíl bude útok veden a co přesně v získaných datech chtějí najít.

 

Zpráva popisuje konkrétní případ označený GTG-20006, který Anthropic označuje jako ruskou špionážní operaci. Útočníci podle firmy vytvořili pracovní postup, v němž AI pomáhala s nástroji používanými při útoku. Zvlášť pozoruhodná byla schopnost automaticky reagovat na obranné systémy. Útočníci vytvořili AI asistovaný systém, který automaticky přestavěl a znovu nasadil jejich nástroje poté, co je odhalily bezpečnostní produkty. Tradičně útočník po odhalení svého nástroje musel vytvořit novou verzi a znovu ji nasadit. Podle Anthropic může AI tento cyklus výrazně urychlit.

 

Další část zprávy popisuje devět konkrétních vlivových operací. Pocházely podle Anthropicu z Ruska, Íránu, Turecka, zemí Perského zálivu, jižní Asie, Afriky a Evropy a jejich cílem bylo publikum na šesti kontinentech. Za operacemi stály vlády, státní média a propagandistické instituce, ale také soukromé firmy nebo političtí operátoři. Zajímavé je, že v těchto případech AI nesloužila pouze k napsání jednoho falešného článku. Útočníci ji využívali k budování celého systému – k plánování kampaní, tvorbě obsahu a práci s falešnými profily či weby.

 

Anthropic uvádí, že „s vysokou mírou jistoty zjistil, že výstupy následně směřovaly do ruských státních a státem financovaných médií“. Obsah se měl objevit například na serverech Sputnik Moldova, RIA Novosti, Sputnik en Español, Sputnik Africa a RT. Podle Anthropicu lidé používali Claude k přeměně rumunských a moldavských zpráv, průzkumů a příspěvků opozičních politiků na články v ruštině. Ty byly následně publikovány a dále šířeny přes další média.

 

Anthropic objevil síť přibližně 70 webů, které se na první pohled tvářily jako nezávislá média. Claude zde sloužil k vytvoření automatizované publikační linky. Ta dokázala původní články přepisovat do politicky zabarvené podoby, přizpůsobovat je různým zemím a následně je automaticky publikovat. Články navíc podepisovali smyšlení novináři, kteří ve skutečnosti neexistovali. Síť podle Anthropicu během přibližně publikovala ve dvaceti jazycích nejméně 8913 článků. Firma ji ale odhalila dříve, než si dokázala vybudovat skutečně významné publikum. Většina obsahu měla podle jejího hodnocení jen malý pozorovatelný dosah.

 

Velkou kapitolou dokumentu je takzvaná nelegální destilace. Jde o pokus získat schopnosti pokročilého modelu pomocí obrovského množství dotazů a odpovědí a využít je při vývoji jiného modelu. Anthropic popisuje používání tisíců falešných účtů, ukradených platebních karet, přístupových údajů a proxy služeb. Některé z těchto služeb podle firmy zaznamenávaly komunikaci uživatelů s Claudem a následně ji poskytovaly dalším subjektům.

 

Anthropic PBC na úvod své zprávy píše:

 

Během uplynulých osmi měsíců náš tým Threat Intelligence identifikoval a narušil operace, v nichž se útočníci pokoušeli využít Claude ke škodlivé činnosti. V této zprávě sdílíme případové studie z těchto operací a popisujeme, jak se škodlivé použití Claude vyvinulo od našich předchozích zpráv o hrozbách v březnu, srpnu a listopadu 2025. V každém případě jsme aktivitu narušili, využili jsme získané poznatky k posílení našich ochranných opatření a v případě potřeby jsme sdíleli informace s úřady a partnery z oboru.

 

Tato zpráva se zabývá aktivitami, které jsme narušili mezi prosincem 2025 a srpnem 2026, v sedmi oblastech škod: kybernetické operace, operace vlivu, sledování, podvody a podvody, biologické zneužití, vývoj konvenčních zbraní a destilace. Byly použity modely Claude Haiku, Sonnet a Opus. Žádný z případů zneužití se netýkal použití modelů třídy Claude Fable nebo Mythos, s výjimkou jednoho případu nelegální destilace.

 

Případy, které zde sdílíme, nejsou typickým zneužitím, ale spíše příklady nejvýznamnější a nové hrozící aktivity, kterou jsme dosud identifikovali. Tuto práci publikujeme, protože se domníváme, že máme odpovědnost odhalit škodlivé zneužití našich služeb. S rostoucími schopnostmi modelů se budou zvyšovat i jejich rizika, pokud vývojáři umělé inteligence a ochránci společnosti nezačnou jednat s cílem zvýšit jejich bezpečnost.

 

Mezi aktéry hrozeb, kterými se tato zpráva zabývá, patří podezřelé státem sponzorované skupiny, finančně motivovaní zločinci, prodejci komerčního spywaru, instituce státní propagandy a politicky motivovaní jednotlivci. Případy sahají od sítě falešných seznamovacích aplikací určených k podvádění uživatelů až po sledovací systémy vytvořené k identifikaci a monitorování disidentů.

 

Sofistikovaní a vytrvalí aktéři hrozeb neustále testují naše ochranná opatření a snaží se obejít technická opatření, která používáme k odhalování a prevenci zneužití. Budeme i nadále vyvíjet naše ochranná opatření a koordinovat své aktivity s našimi partnery, abychom zlepšili naši schopnost odhalovat, narušovat a předcházet budoucímu zneužití.

 

Zdroje:


komentářů: 0         


Ďábelské rouno

rubrika: Poetický koutek


Namalované

 

Lucifer


Celý článek »

komentářů: 1         


Vývoj nových efektivnějších léků proti rakovině

rubrika: Populárně naučný koutek


Chytrý experimentální lék může podle prvních výsledků probíhající klinické studie zmenšit nádory nejméně o 30 procent, a to hned u šesti nejčastějších typů rakoviny. Informoval o tom The Guardian. Lék vyvinutý v Oxfordu pracuje na jednoduchém principu – brání tomu, aby se rakovinné buňky „schovávaly“ před imunitním systémem. Tím zvyšuje účinnost imunoterapie, která jinak u některých pacientů příliš nefunguje. Americký Úřad pro kontrolu potravin a léčiv (FDA) dnes schválil přípravek Rasonque (daraxonrasib), inhibitor RAS pro nejčastější formu rakoviny slinivky břišní. Tím se pacientům s pokročilým karcinomem slinivky břišní nabídla nová možnost léčby s několikaměsíčním předstihem.

 

Lucifer


Celý článek »

komentářů: 4         


Vědci nechali padat jednotlivé atomy. Výsledek znovu potvrdil Einsteinovu obecnou teorii relativity

rubrika: Populárně naučný koutek


Tři univerzity: izraelská Ben-Gurionova univerzita v Negevu, německá univerzita v Ulmu a britská univerzita v Oxfordu, spojily síly, aby provedly něco, co na první pohled připomíná školní cvičení: nechat padat předměty a sledovat, co se s nimi stane. Experiment, který právě zveřejnili v prestižním časopise Science Advances, však není vůbec triviální: těmito „předměty“ jsou jednotlivé atomy rubidia a měřilo se, zda gravitace popsaná obecnou teorií relativity funguje stejně i v oblasti kvantové fyziky, oboru, který popisuje chování částic a atomů.

 

Lucifer


Celý článek »

komentářů: 2         


Psilocybin může chránit před častým, oslabujícím vedlejším účinkem chemoterapie

rubrika: Populárně naučný koutek


Předběžné výzkumy naznačují, že psychedelická látka, která je známá především svými účinky na mozek, může také chránit periferní nervy před poškozením způsobeným chemoterapií. Chemoterapie může zachraňovat životy, ale u mnoha pacientů s rakovinou zanechává bolestivé následky: poškozené nervy, které pálí, brní nebo znecitlivují. Vědci nyní uvádějí, že psychedelická látka by mohla tyto nervy chránit – nikoli díky svým halucinogenním účinkům, ale tím, že pomáhá neuronům udržovat vnitřní přísun energie.

 

Lucifer


Celý článek »

komentářů: 0         


Lesopaní II

rubrika: Povídání


Probudil jsem se z nějakého podivného snu, v němž mě něco mrazilo a pálilo zároveň, když jsem však otevřel oči, okamžitě jsem zapomněl co a proč. Mé oči se totiž dívaly nahoru do vznešených korun stromů, tak bohorovně se nad vším v bezbřehém klidu vzpínajících a s neskonalou dobrotivou trpělivostí se ke všemu sklánějících, že ten mrazivý a žhavý dozvuk ze snu ve mně ještě několikrát zavibroval do ztracena.

 

Lucifer


Celý článek »

komentářů: 0         


V České republice byla odkryta rituální stavba spojená se slunovratem, která je o 1 000 let starší než Stonehenge

rubrika: Pel-mel


Archeologové v České republice objevili prehistorickou stavbu, o které se domnívají, že sloužila jako rituální centrum spojené s pohybem Slunce a Měsíce. Toto centrum je staré přibližně 6 500 let – asi o 1 000 let starší než Stonehenge. Stavba byla objevena v Chlebách ve Středočeském kraji.

 

Lucifer


Celý článek »

komentářů: 0         


Září 2026

rubrika: Pel-mel


Začalo září. Měsíc, který meteorologové řadí do podzimu. Astronomický podzim začíná podzimní rovnodenností, která letos nastane v noci z dvaadvacátého na třiadvacátého září. Je nesmyslné si myslet, že včera bylo léto a dnes je podzim. Dochází pouze k postupné přeměně. Takže dnes je skoro to samé, co včera.

 

Lucifer


Celý článek »

komentářů: 0         


Astronauti mají potíže s vyprazdňováním a dochází u nich ke změně a fungování mozku

rubrika: Populárně naučný koutek


Člověk ještě není a nejspíš dlouho nebude jak fyzicky, tak psychicky připravený na delší pobyt ve vesmíru. Domnívám se, že ambiciózní představa začít v nejbližších letech budovat na Měsíci základnu, která se časem změní v město, se jen tak hned neuskuteční. Důvodů je několik. V tomto článku se budu věnovat zácpě a změně struktury a fungování lidského mozku.

 

Lucifer


Celý článek »

komentářů: 0         


Usínání a Probouzení

rubrika: Poetický koutek


(Ne)jsem blázen

 

Lucifer


Celý článek »

komentářů: 0         


Proč se umělá inteligence pouští do hackerských útoků?

rubrika: Pel-mel


AI modely nacházejí softwarové chyby, provádějí kybernetické útoky během bezpečnostních testů a dosahují systémů, ke kterým neměly přístup. Ale znamená to, že AI „jde na vlastní pěst“? Proč je najednou tolik příběhů o AI hackerství v médiích? Může AI opravdu sama hacknout počítače? Měli by se lidé obávat, že AI páchá kybernetické útoky?

 

Lucifer


Celý článek »

komentářů: 0         


V Německu se plánuje přísný zákaz elektrokol

rubrika: Pel-mel


Elektrokola se během několika let stala běžnou součástí výletů i každodenní dopravy. V sousedním Německu se teď připravují nová pravidla pro jízdu v lesích, která mohou změnit využívání některých elektrokol i oblíbených tras. Debata navíc znovu otevřela otázku jejich dopadů na životní prostředí.

 

Lucifer


Celý článek »

komentářů: 1         


«     1    2  3  4  5 . . . . . . . . . . . . . . . . . . . .  284  285  286  287  288   »