Stronniczość automatyzacji

Skłonność człowieka do przyjmowania rekomendacji systemu bez niezależnej weryfikacji, rosnąca wraz z jego wcześniejszą niezawodnością. Im rzadziej agent się myli, tym słabszy nadzór nad nim sprawuje operator — niezawodność jest jednocześnie czynnikiem ryzyka.

W Polsce nazywane też:

skrzywienie automatyzacyjnenadmierne zaufanie do automatykibias automatyzacji

Intuicja podpowiada że im lepiej działa system, tym bezpieczniej jest go używać. W przypadku nadzoru nad automatyzacją jest odwrotnie — i to jest jedna z lepiej udokumentowanych obserwacji w badaniach nad czynnikiem ludzkim.

Czym jest stronniczość automatyzacji

Skłonność człowieka do przyjmowania rekomendacji systemu bez niezależnej weryfikacji, rosnąca wraz z wcześniejszą niezawodnością tego systemu. Operator przestaje sprawdzać, bo dotąd nie było czego sprawdzać.

Dwa objawy

Błąd zaniechania: operator nie zauważa problemu, bo system go nie zgłosił, a operator przestał szukać samodzielnie.

Błąd działania: operator wykonuje zalecenie systemu wbrew informacjom które ma z innych źródeł, bo ufa systemowi bardziej niż własnej obserwacji.

Mechanizm

Zaufanie do systemu jest budowane przez jego historię działania. Każde poprawne zachowanie podnosi domyślne założenie że kolejne też będzie poprawne. Po pewnym czasie weryfikacja przestaje być traktowana jako część procesu, a staje się formalnością.

Konsekwencja dla projektowania jest niewygodna: niezawodność systemu jest jednocześnie czynnikiem ryzyka. Im rzadziej agent się myli, tym słabszy nadzór nad nim sprawuje człowiek — i tym większe znaczenie ma ten jeden przypadek w którym się pomyli.

W kontekście agentów AI

Agent który przez miesiąc wykonuje zadania poprawnie uczy zespół że jego propozycji nie trzeba sprawdzać. Nadzór formalnie trwa, faktycznie zanika. To jest mechanizm leżący pod zeszklonym zatwierdzaniem i powód dla którego zabezpieczenia oparte na czujności człowieka degradują się w czasie, a zabezpieczenia infrastrukturalne nie.

Status

Pojęcie ustalone w literaturze o czynniku ludzkim, opisywane od dekad w kontekście lotnictwa, systemów wspomagania decyzji i automatyki przemysłowej — na długo przed agentami AI.

Awaria kompetencjiTryb awarii nadzoru w którym okno zgody mówi prawdę, odzywa się rzadko i zostaje przeczytane uważnie, a człowiek i tak nie potrafi odpowiedzieć — bo odpowiedź wymaga wiedzy której nie ma i nie powinien mieć. Nie naprawia jej ani lepsze okno, ani rzadsze.Rozdzielenie obowiązkówZasada kontroli wewnętrznej rozdzielająca autoryzację, wykonanie i zapis operacji między różne podmioty. Przeniesiona na agentów oznacza, że kto konfiguruje agenta, kto z nim pracuje i co prowadzi ślad audytowy nie mogą być tym samym.Parytet informacjiWłasność punktu kontrolnego w której człowiek widzi w momencie decyzji dokładnie to co wie agent. Okno zgody chroni dokładnie tyle ile prawdy pokazuje — jeśli agent zna skutek którego nie wyświetla, pętla nadzoru jest rozerwana mimo że formalnie istnieje.Zeszklone zatwierdzanieOdruchowe akceptowanie próśb agenta o zgodę bez czytania ich treści. Okno pokazuje prawdę, człowiek i tak klika "akceptuj" — bo robił to dziś czterdzieści razy i za każdym razem było w porządku. Lekarstwem nie jest lepsze okno tylko mniejsza liczba okien.Zmęczenie alertamiSpadek reakcji na powiadomienia wywołany ich nadmiarem — użytkownik odrzuca ostrzeżenia odruchowo, łącznie z trafnymi. Wniosek z badań klinicznych: problemem nie była jakość ostrzeżeń tylko ich liczba. Agent generuje ich w godzinę tyle co system szpitalny w dobę.Człowiek w pętliModel nadzoru nad agentami AI w którym człowiek zatwierdza kluczowe decyzje przed ich wykonaniem — równowaga między autonomią agenta a kontrolą użytkownika nad jego działaniami.