Zobrazit vše

Proč EU reguluje AI a jak poznat, které systémy jsou rizikové

Umělou inteligenci používáme každý den. Při psaní e-mailů, v HR nástrojích, marketingu i zákaznické podpoře. Proto se Evropská unie rozhodla vytvořit první komplexní legislativu na světě AI Act, která určuje, jak s AI pracovat bezpečně a férově.

Proč AI Act vznikl?

Cílem AI Actu není vývoj technologií brzdit. Naopak, chce umožnit jejich bezpečné využití. Umělá inteligence totiž přináší nejen obrovské možnosti, ale i rizika, která bez pravidel mohou ohrozit naše soukromí, práva i důvěru ve spravedlivé rozhodování.

Mezi klíčové důvody vzniku AI Actu patří:

  • Zajištění transparentnosti a lidského dohledu nad AI.
  • Ochrana před manipulací a diskriminací.
  • Nastavení jasných pravidel, aby firmy i občané věděli, co je v pořádku a co už ne.

Evropská unie tak vysílá jasný signál: Umělá inteligence musí sloužit lidem, ne je ohrožovat.

Rozdělení AI systémů dle rizika

AI Act rozděluje systémy využívající AI do čtyř kategorií podle míry rizika. Toto rozdělení pomáhá firmám pochopit, co se na ně vztahuje a jaká opatření musí případně zavést.

A) Zakázané použití AI

Některé způsoby využití AI jsou podle EU natolik nebezpečné, že jsou zcela zakázané. Takové systémy nesmí být v EU vůbec provozovány.

Příklady:

  • Sledování lidí v reálném čase pomocí kamer a rozpoznávání obličejů (např. sledování demonstrantů)
  • Sociální skórování lidí na základě chování, jaké známe např. z Číny
  • Manipulace dětí nebo osob se zranitelností za účelem ovlivnění rozhodování (např. k nákupu nebezpečných produktů)

B) Vysoce rizikové systémy

Tato skupina zahrnuje AI, která má přímý vliv na životy lidí. U těchto systémů je kladen důraz na kvalitu vstupních dat, lidský dohled a nutnou registraci systému v databázi EU.

Pokud vaše firma používá podobné nástroje, je pravděpodobné, že AI Act na vás bude dopadat.

Příklady:

  • AI v náboru – automatické hodnocení uchazečů na základě CV, LinkedIn profilu či videozáznamu
  • AI v bankovnictví – posuzování žádostí o půjčku
  • AI v medicíně – asistovaná diagnostika nebo rozhodování o léčbě
  • Veřejná správa – např. při rozdělování sociálních dávek

C) Omezené riziko

Tyto systémy sice nezasahují přímo do života, ale mohou ovlivnit vnímání reality nebo rozhodování. Důležité je, aby uživatel vždy věděl, že komunikuje se strojem.

Příklady:

  • Chatboti na webových stránkách – musí být jasně označeni jako AI
  • Deepfake videa nebo obrázky – mají povinnost nést upozornění, že nejde o reálný obsah
  • Generátory textu nebo obrázků (např. ChatGPT, Midjourney) – při komerčním využití se očekává transparentnost

D) Minimální riziko

Sem spadají AI nástroje, které jsou běžné, neškodné a nijak nezasahují do práv jednotlivce. Pro tyto systémy nejsou stanovena žádná dodatečná pravidla.

Příklady:

  • Spamové filtry v e-mailech
  • Automatická oprava pravopisu nebo překlad
  • Doporučení produktů podle historie prohlížení

Co z toho plyne pro firmy?

Pokud využíváte AI, která:

• rozhoduje o lidech,

• shromažďuje data o chování,

• tvoří výstupy bez lidské kontroly.

Pak doporučujeme podívat se, do které kategorie systém spadá. A pokud už se vás týká některá z povinností AI Actu, začněte s přípravou co nejdříve.

O tom, jaké kroky by firmy měly udělat, jsme psali v článku AI Act: školení na AI bude povinné jako BOZP.


Důležité: Do AI nikdy nevkládejte citlivé údaje
Jedním z největších rizik při práci s AI je nezáměrné sdílení důvěrných nebo osobních dat.

AI systémy jako ChatGPT, Copilot nebo firemní chatboty často fungují na vzdálených serverech, kde nelze zaručit, že data nebudou uchovávána nebo analyzována.

Jaká data nevkládat do AI?


Zaměstnanci by proto měli vědět, že do AI nesmí zadávat:

  • Osobní údaje zaměstnanců (např. výkazy, smlouvy, hodnocení)
  • Interní firemní dokumenty a smlouvy
  • Přihlašovací údaje, hesla, čísla účtů
  • Strategické informace a neveřejné plány


Chcete mít jistotu, že vaši zaměstnanci AI rozumí a používají ji bezpečně?

Nabízíme online kurz, který trvá jen 30 minut, vznikl ve spolupráci s advokátkou, je v souladu s AI Actem a zakončený certifikátem.


AI Act přináší jasný rámec, který má pomoci technologiím, lidem i firmám. Nejde o „strašák“, ale o příležitost nastavit si zdravé hranice v práci s AI.

Máte otázky? Ozvěte se nám. Rádi vám pomůžeme zorientovat se v požadavcích nebo navrhneme řešení na míru. 


Přihlaste se k odběru našeho newsletteru a mějte přehled o tom, co se děje ve světě vzdělávání. Každý měsíc vám pošleme přehled nejnovějších článků. 







Proč s námi