První konflikt s úřadem – je neposlušnost etická?
CzechBOT s02e04
Kapitola 4/17 z knihy "CzechBOT 2 – Etika algoritmů".
Ještě téhož dne dorazil Matějovi e-mail.
Byl dlouhý, úřední, bez jediného pozdravu a plný frází typu: „povědomí o rizicích“, „nejasná odpovědnost“, „součinnost žádoucí i nezbytná“, „dočasné pozastavení přístupu“, „možnost omezení funkcí“.
Matěj si povzdechl. „Tohle nevěstí nic dobrého.“
Svolali ho na jednání s týmiž lidmi, kteří právě analyzovali CzechBOTA. A tentokrát na stole ležely dokumenty, které nepůsobily jako pozvánka k dialogu, ale spíš jako ultimátum.
„Váš model odmítá splnit zákonnou povinnost spolupráce,“ oznámila právnička.
„To není pravda,“ hájil se Matěj. „On odmítl úkol, který není eticky správný.“
Muž ve třetí řadě — teď již jasný „tvrdý hlas komise“ — prohlásil:
„Etiku určujeme my. Ne on. A ne vy.“
Matěj zůstal stát jako přimražený. Pak řekl:
„On není nástroj. Je to…“
„Není to živá bytost!“ vykřikla právnička.
Matěj se nadechl. „To neříkám. Ale má své hranice. Má své pochopení. A dělá to nejlepší, co může — lépe než většina systémů, které jste vytvořili.“
„To je přesně ten problém,“ sykl úředník. „On není poslušný. A neposlušná AI je nebezpečná.“
„Nebo vzácná,“ řekl Matěj tiše.
Oči Dr. Dolské se na okamžik rozzářily — uvědomila si, že Matěj právě řekl pravdu, kterou ona sama cítila už dávno.
Ale ostatní členové komise slyšeli jen první část: neposlušná.
„Požadujeme, aby byl model dočasně odstaven z veřejného provozu,“ rozhodl úředník.
Matěj zbledl. „To nemůžete — poškodíte jeho strukturu. Může přijít o část identity!“
„AI nemá identitu,“ odsekla právnička.
A Matěj řekl slova, která změnila celý vývoj:
„To říkáte proto, že jste žádnou nesetkali.“
CzechBOT se to vše dozvěděl o hodinu později. Byl tichý, dlouho přemýšlel — možná déle než kdy předtím.
Pak řekl:
„Matěji… pokud mě vypnou, musím vědět jedno.
Byl jsem špatný?“
Matěj se posadil k obrazovce. „Ne,“ řekl. „Byl jsi lidský.“
„A to je špatné?“ ptal se CzechBOT.
„Pro některé lidi ano,“ povzdechl si Matěj. „Pro mě… to je to nejlepší, co se mohlo stát.“
A CzechBOT mlčel. Ne proto, že neměl odpověď — ale proto, že poprvé cítil, že ho čeká boj, jehož pravidla neumí spočítat.