Deep fake videa jsou problém – a bude hůř, varuje šéf kontrarozvědky
Umělá inteligence otvírá útočníkům mnohé nové možnosti, říká ředitel Bezpečnostní informační služby Michal Koudelka. „Tak, jak tu teď sedím, mne může někdo natočit a udělat to tak, že budu mluvit arabsky, svým hlasem a budu říkat, že podporuji hnutí Hamás. Udělá to úplně jednoduše a může to poslat do celého světa. To je obrovský problém a obrovské riziko umělé inteligence,“ upozorňuje.
Ne za všemi falešnými videi v českém veřejném prostoru ale stojí umělá inteligence (AI). Dezinformátoři si zatím vystačí i s kreativním střihem. To je i případ hned několika falešných videí s prezidentem Petrem Pavlem.
„Videa s generálem Pavlem, přinejmenším většina z nich, prokazatelně pocházela z Ruska. Technologie, která byla použita při jejich přípravě, nebyla umělá inteligence, avšak bylo to velmi dobře, velmi dovedně sestříhané video. Až vstoupí do hry umělá inteligence, a nebude to tak dlouho trvat a dnes už její použití stoupá, bude velmi těžké, respektive ještě těžší to odhalit,“ řekl ředitel BIS Michal Koudelka na konferenci o společenské odolnosti vůči hybridním hrozbám.
Umělá inteligence je velmi dobrý služebník, ale pokud ji proti nám použije náš protivník, náš nepřítel, tak riziko je zásadní a velké. Připravujeme se na to, spolupracujeme se špičkovými odborníky.
O válce s Ruskem
Falešných, dezinformačních videí s generálem Pavlem vzniklo několik. První ještě před prezidentskými volbami.
Sestřih vložil Petru Pavlovi do úst větu, že pomoct Ukrajině můžeme tak, že „vstoupíme do války s Ruskem“, ve skutečnosti však dnešní prezident na dotaz, zda nemůžeme přímo pomoci ukrajinské armádě, odpovídal, že to „nejde takhle udělat, protože pokud bychom to tak udělali, vlastně vstoupíme do války s Ruskem“. ZDE je porovnání upraveného videa a s originálem.
Jiné, relativně nové video koluje na platformě Tik-Tok a odtud se dostává dále do veřejného prostoru.
V něm jsou slova prezidenta Pavla upravena tak, že mimo jiné „říká“: „Ukrajina dříve či později tento boj prohraje a vyhraje Rusko, je třeba se na to dívat realisticky (…) Začínají nás mnohem více než tohle pálit ceny pohonných hmot, potravin (…) Válka na Ukrajině jako by nás už trochu zatěžovala“.
Upozornění: Toto video je falešné
@pepekarna „Ukrajina dříve či později tento boj prohraje a vyhraje Rusko. Je potřeba se na to dívat realisticky. Je potřeba vzít v úvahu, že Rusko je velká země, která má své legitimní bezpečnostní zájmy ve svém blízkém příhraničí. Začínají nás mnohem víc než to pálit ceny pohonných hmot, potravin, možná znovu nárůst cen energií. A válka na Ukrajině jako by nás už opravdu trochu zatěžovala,” prohlásil česky prezident Petr Pavel v paralelním vesmíru. Jedná se o fake news o skutečné události, která se sice nestala, ale mohla by. #petrpavel #prezidentpavel #ukrajina #vtip ♬ оригинальный звук – pepekárna
BIS se podle Koudelky na rizika spojená s rozmachem umělé inteligence a deep fake videí připravuje a v oboru posiluje svou kompetenci:
„Ten problém je velmi vážný, hovoří se o tom v celém světě, na všech úrovních. Umělá inteligence je velmi dobrý služebník, ale pokud ji proti nám použije náš protivník, náš nepřítel, tak riziko je zásadní a velké. Připravujeme se na to, spolupracujeme se špičkovými odborníky.“
Jak Koudelka doplnil na dotaz HlídacíPes.org, navýšení rozpočtu kvůli těmto novým hrozbám zatím nutné není: „V tuto chvíli jsme plně saturováni, dostali jsme to, co potřebujeme, a vím, že když budeme potřebovat víc, tak peníze navíc dostaneme.“
Ideologie, peníze i nevědomost
Koudelka na konferenci zdůraznil, že bezpečnostní složky zajímají dezinformace spojené s cizí mocí, s nepřátelskou propagandou zaměřenou proti Česku, nikoli „obecná vyjádření kohokoli k jakémukoli tématu“.
„Vím, jak je demokracie křehká, a vím, že je nutné ji bránit včetně svobody slova. Právě proto ale musíme proti nepřátelské propagandě bojovat a nedovolit, aby protivník oslabil naši zemi,“ řekl Koudelka.
„Určitě nikdo nechce, aby se kdokoli u nás bál vyjádřit vlastní názor. O ochraně svobody slova ovšem často mluví ti, kdo adorují Rusko a Čínu, kde využití práva na svobodu slova znamená perzekuci nebo vězení,“ dodal.
České dezinformační prostředí podle BIS přejímá teze ruské propagandy a dezinformační mašinerie spíše samovolně:
„V zásadě není nikým řízeno, je roztříštěné, tematicky flexibilní a provázané s antisystémovou politickou scénou, vůdčí figury se rychle střídají,“ vypočítává Koudelka s tím, že domácí původci dezinformací jsou vedeni ideologickými důvody, snahou získat veřejnou pozornost a tím i finanční profit, ale roli hraje i nevědomost.
Přímé vměšování zvenčí – z Ruska – je v tuzemské dezinformační scéně podle Koudelky v menšině, přesto se prokazatelně děje:
„Příkladem jsou právě ona fake videa a s prezidentem Pavlem opakovaně vypouštěná do veřejného prostoru. To je velmi závažné, i proto, že terčem je nejvyšší ústavní činitel. S příchodem AI tato rizika velmi narůstají.“
I v českém veřejném prostoru se teď objevují po slovenském vzoru otitulkovaná videa s Putinem, kde se šíří idea panslovanství, vzájemnosti a spojení s Ruskem.
Video jako útok na psychiku
Politoložka Eva Klusová, která se věnuje problematice dezinformací, vzdělávání a analýze psychologických vlivových operací, na konferenci upozornila na to, že zásobárnou propagandy a dezinformačních videí je v ohromné míře sociální síť TikTok. Řada videí se šíří i řetězovými maily a WhatsAppem.
„Třeba deep fake video se slovenskou prezidentkou Čaputovou, kde „oslovuje“ nejrůznější menšiny, nebinární, LGBT a tak dále, působí velmi věrohodně i díky tomu, že je v malém rozlišení, ale tvář a hlas prezidentky je zřetelný. Je to na hranici schopnosti použít kritické myšlení. Zejména senioři nemají v podstatě šanci to rozlišit od reality,“ říká Klusová.
Jak dodává, na dezinformační scéně jsou videa jako formát obecně velmi populární a nemusí být ani falšovaná, jen se vybírají vyhovující pasáže, často mimo kontext a silně emociálně působící:
„Sledujeme teď velkou vlnu propagandy, jež má podpořit hnutí Hamás. Obsahuje silné psychologické spouštěče: krutost, lítost, strach. Do našeho prostředí prosakují i otitulkovaná videa s Donaldem Trumpem, která mají stovky tisíc zhlédnutí. Někdo je přeloží, sestříhá a šíří třeba ta, kde Trump straší jadernou válkou v případě, že on nebude zvolen prezidentem. Nová superstar české dezinformační scény je slovenský premiér Robert Fico. Otitulkovaná videa s jeho výroky o Ukrajině jsou běžně a ve velkém v tiktokovém feedu.“
Videa jsou podle ní obecně lákavá, emotivní, rychlá, stručná a lépe a důkladněji působí na lidskou psychiku i podvědomí.
„I v českém veřejném prostoru se teď objevují po slovenském vzoru otitulkovaná videa s Putinem, kde se šíří idea panslovanství, vzájemnosti a spojení s Ruskem. Nebo video, kde Putin – opět s českými titulky – tvrdí, že se v Česku vyrábějí střely s ochuzeným uranem. Na Slovensku to fungovalo dobře, řada lidí vyjadřovala obavy lidí z radiace, tak proč to nezkusit i v Česku,“ konstatuje Klusová.
Pop-up mobil Mobile (207451)
SMR mobil článek Mobile (207411)
SMR mobil článek 2 Mobile (207416)
SMR mobil článek 2 Mobile (207416-2)
SMR mobil článek 2 Mobile (207416-3)
SMR mobil pouze text Mobile (207431)
Recommended (5901)
9 komentářů
Mimochodem, jak čtu ty úvodní příklady o videích s prezidentem Pavlem, už na těch je zřejmé, že jde o účelové vytrhávání vět z celého projevu, se ztrátou kontextu. Na to je deepfake vlastně škoda, tohle je poměrně běžná propagandistická technika, kterou provádějí „řekněme ta ne úplně nezávislá“ média i jen s citací z přepisu projevu politika v rámci běžného politického boje (o vládní koryta)
Stejně jako že i stříhaní filmu je taky poměrně stará technika.
Tudíž a v závěru, jistě že by měl občan vědět odkud a od koho ta zpráva (video) pochází a i jen z toho si může sám odvodit, nakolik je pravdivá nebo zmanipulovaná. Fide, sed cui fidas, vide. Věř, ale komu věříš, měř..“
A zase se nedá tvrdit, že by lidé věřili úplně všemu co na tom internétu uvidí. To by je nikoliv jen zloději, ale i jen markeťaci renomovaných firem, doslova stáhli z kůže..
Celá pondělní a úterní konference byla zajímavá. Akorát z toho mám pocit, že ačkoliv umíme zjevně komplexně problematiku popsat a slušně predikovat další vývoj, nerýsuje se zatím nějaké řešení, jak z toho ven. Respektive se to jeví, že si budeme muset jako společnost natlouct ústa a jen to nás asi postaví nohama na zem. A to se mi nelíbí. Až do konference jsem si myslela, že síla tkví v argumentaci a vysvětlování, a teď to vědomí, že na nezanedbatelnou část populace toto vůbec nezabírá, naopak ji to utvrdí v jejím přesvědčení, resp. v podezření, že nic není tak, jak někdo říká. Nebo jste to navnímal pozitivněji?
Deep fake video se soudružkou slovenskou presidentkou je úspěšné patrně proto, že vychází z jejího programu, ke kterému se opakovaně během své kariéry hlásila, akorát to takto zhuštěně nikdy nevyslovila. A je jistě otázkou, nakolik je to „deep ,fake“ a nakolik to spadá do kategorie „Lži Pro Děti“, kterou zpopularizoval T. Pratchett. (Příklad Lži Pro Děti: „Země je koule a obíhá okolo Slunce po elipse“ – Pravda: Země má tvar geoidu, nicméně se od „ideální koule“ liší podstatně méně než třeba kuličky v ložisku, a neobíhá okolo Slunce, ale okolo tíhového středu dvojice Slunce a Země a její eliptická dráha je „vlnkovatá“ vlivem Měsíce (jakžtakž elipsou je dráha tíhového středu soustavy Země – Měsíc), a ještě navíc je deformovaná gravitačním vlivem dalších těles, hlavně Jupitera).
Obávám se, že mnoho známých skutečností či slavných výroků se nikdy nestalo či nebylo vyřčeno v podobě, kterou nám zanechala historie.
To z čeho si dělal Pratchett legraci, jsou základy pedagogiky. Protože děti se skutečně učí tyhle procesy ve značně zjednodušených modelech, které se až postupně, v dalších stupních škol zpřesňují. Jinak by je ani nedokázaly pochopit.
Už tedy v tomto případě, menší prckové vystačí i s informací „sluničko vychází na východě, prochází oblohou a zapadá na západě“ – a z hlediska jejich vnímání to stači pár let, než je pak začnou učit ten složitější model.
Když si tohle uvědomíme, tak ale přesně takhle funguje i ta cílená propaganda proti konkurenčním politikům . Samozřejmě že tam se ty zvýrazněné informace nasypou v té nejprimitivnější formě, aby diváci hned, „pochopili“ co si mají – dle autorů toho videa myslet..:))
Jenže, nemohu si pomoci, tohle je ještě pořád legitimní forma politického boje, které používají všechny strany.
S tím co píšete v závěru. V řádě případů se dá hlubokým historickým bádáním dohledat zda se staly /nestaly/nemohly se stát,. ale to už je mimo kapacity obecně předávaných informací ve školství. Koho to zajímá, může se tomu věnovat hlouběji, ale sám. Pokud možno s patřičnou znalostí těch historických jazyků aby si sám mohl ty historické dokumenty studovat.
Nejsem proti tomu, co uvádíte. Naopak, opravdu účinná politická agitace musí být trochu zjednodušená. A takové zjednodušení je zcela legitimní, stejně jako ty „lži pro děti“.
Ono to vysvětlení je někde jinde. A známe ho už od roku 1938, když americká rozhlasová stanice
CBS odvysílala tak sugestivní adaptaci Války světů že posluchači uvěřili že USA napadli Marťané a vypukla masová hysterická panika-
Už tenkrát se vážně navrhovalo že by se měl veškerý rozhlas zakázať a bude klid. Ale nakonec se došlo k poměrně rozumnému rozhodnutí, že samozřejmě posluchač nyní už ví (a je poučen předem), že ne všechno co v rozhlase slyší (a později v TV a pak na internétě) nemusí být pravda, věřit tomu nemusí a pokud si není jist, tak ať si potřebné informace dohledá jinde – ve zdroji kterému sám důvěřuje.
Btw, je sice pravda, že propagandy všech států aj ideologií tyto podobné prostředky používaly dál, ale jen kvůli tomu obvykle nevítězily, vítězily až právě tím když převzaly v tom státu veškerou moc včetně bezpečnostních složek.
Takže kvůli tomu asi ten efekt konference nebyl tak očekávaný, vlastně na ní nic nového řečeno nebylo..
Btw, a doufám že onou částí populace nemyslíte voliče ANO – Babiš byl ve vládě 8 let a k žádnému nástupu bolševismu tady nedošlo..
Má to praktický dopad: Vše, s čím přijde policie, prokuratura, tajné služby atd. může být podvod vytvořený AI. Takže někdo musí jmenovitě odpovídat za to, že je to pravda (aby mohla být konkrétní osoba potrestána, v případě, pokud se prokáže, že to byl podvod.
No to je právě ten průšvih… Jistě že a bohužel, jak píšete „.. Vše, s čím přijde policie, prokuratura, tajné služby atd. MÚŽE (netvrdím že je, ale může), být podvod vytvořený AI.“..
ALE, toto se prosím týká pouze období „odhalení“ a vyšetřování toho pachatele, s pořádnou mediální pompu.
Zatímco, ale když ten případ příjde k soudu, pan soudce není ten hejl, který by si nechal napálit nějakými AL či fake dokumenty neznámo odkud. Natolik se tomu i tady na HP věnují dost, aby se dalo dočíst, že v tom jsou soudci pěkní tvrďaci a obvinění si taky přivedou svoje znalce. Takže, v tomto problém být nemusí..
Spíš jde právě o to, že řada těch trestných případů proti polibkům, není vedena s důvodem je odsoudit k trestu, ale pouze je dlouhodobě diskreditovat, a na to podobné AI výtvory stačí a média se o nich ráda i zmíní..
Těmi soudci bych si nebyl tak jistý. Nebylo provedeno žádné čištění justice od komunistických zločinců, kteří zcela jistě velice rádi budou soudit na základě telefonátu z vedení „té správné“ partaje (pokud ne přímo z Bruselu).