Art. 9 dla AI w infrastrukturze krytycznej: system zarządzania ryzykiem
Jak art. 9 (system zarządzania ryzykiem) stosuje się do AI w infrastrukturze krytycznej: punkt zaczepienia w załączniku III pkt 2, elementy związane z bezpieczeństwem, role dostawcy i podmiotu wdrażającego, terminy, kary i to, co rozporządzenie pozostawia otwarte.
Dostawcy systemów AI wysokiego ryzyka dla infrastruktury krytycznej muszą ustanowić, wdrożyć, udokumentować i utrzymywać system zarządzania ryzykiem (art. 9).
To systemy AI przeznaczone do wykorzystywania jako elementy związane z bezpieczeństwem według załącznika III pkt 2. Obowiązek stosuje się od 2 grudnia 2027, chyba że zachodzi wyjątek z art. 6 ust. 3. Kary mogą sięgać do 15 mln EUR lub, dla przedsiębiorstwa, do 3 % światowego obrotu rocznego. Stosuje się kwotę wyższą (art. 99 ust. 4). Następny krok: ustalić, czy system jest elementem związanym z bezpieczeństwem w obszarze z pkt 2.
Art. 9 wymaga procesu zarządzania ryzykiem, a nie stałej listy ryzyk
Art. 9 nakłada obowiązki na dostawcę. Nie ustanawia listy ryzyk, wartości wskaźników ani progów dla infrastruktury krytycznej ani dla żadnego innego sektora.
- art. 9(1)Ustanowić, wdrożyć, udokumentować i obsługiwać
Dla systemów AI wysokiego ryzyka należy ustanowić, wdrożyć, udokumentować i obsługiwać system zarządzania ryzykiem.
- art. 9(2)Ciągły proces przez cały cykl życia
System jest ciągłym, iteracyjnym procesem planowanym i realizowanym przez cały cykl życia, z regularnym systematycznym przeglądem i aktualizacją. Obejmuje cztery etapy. Po pierwsze: identyfikacja i analiza znanego i dającego się racjonalnie przewidzieć ryzyka dla zdrowia, bezpieczeństwa lub praw podstawowych, gdy system jest stosowany zgodnie z przeznaczeniem. Po drugie: oszacowanie i ocena ryzyka przy wykorzystaniu zgodnym z przeznaczeniem i w warunkach dającego się racjonalnie przewidzieć niewłaściwego wykorzystania. Po trzecie: ocena innego ryzyka na podstawie danych z monitorowania po wprowadzeniu do obrotu (art. 72). Po czwarte: przyjęcie odpowiednich i ukierunkowanych środków zarządzania ryzykiem.
- art. 9(3)Tylko ryzyko, któremu mogą zaradzić projekt lub informacje
Dotyczy to ryzyka, które można stosownie ograniczyć lub wyeliminować poprzez rozwój lub zaprojektowanie systemu albo poprzez zapewnienie odpowiednich informacji technicznych.
- art. 9(5)Ryzyko szczątkowe musi być oceniane jako dopuszczalne
Odpowiednie ryzyko szczątkowe związane z każdym zagrożeniem oraz ogólne ryzyko szczątkowe muszą być oceniane jako dopuszczalne. Ryzyko eliminuje się lub ogranicza poprzez projekt i rozwój w zakresie, w jakim jest to technicznie wykonalne. W stosownych przypadkach ryzyka, którego nie można wyeliminować, dotyczą odpowiednie środki ograniczające i kontrolne. Podmioty wdrażające otrzymują informacje wymagane na podstawie art. 13 oraz, w stosownych przypadkach, przeszkolenie.
- art. 9(6)–(8)Testy względem wskaźników określonych z góry
Systemy AI wysokiego ryzyka testuje się, aby określić najodpowiedniejsze środki zarządzania ryzykiem. Testy mają zapewnić, że systemy działają konsekwentnie zgodnie z przeznaczeniem i spełniają wymogi sekcji 2. Przeprowadza się je, w stosownych przypadkach, w trakcie rozwoju, a w każdym przypadku przed wprowadzeniem systemu do obrotu lub oddaniem do użytku. Testy przeprowadza się w odniesieniu do uprzednio określonych wskaźników i progów probabilistycznych, stosownych ze względu na przeznaczenie. Procedury testowe mogą obejmować testy w warunkach rzeczywistych (art. 60).
- art. 9(9)Osoby poniżej 18 roku życia i inne grupy szczególnie wrażliwe
Dostawcy muszą rozważyć, czy w świetle przeznaczenia system może mieć niekorzystny wpływ na osoby poniżej 18 roku życia oraz, w stosownych przypadkach, na inne grupy szczególnie wrażliwe.
Które systemy AI dla infrastruktury krytycznej muszą spełniać art. 9
Art. 9 dotyczy wyłącznie systemów AI wysokiego ryzyka. Poniższe wiersze pokazują, kiedy AI dla infrastruktury krytycznej staje się systemem wysokiego ryzyka.
Infrastruktura krytyczna to obszar załącznika III, a nie reżim sektorowy
Rozporządzenie nie zawiera sektorowego reżimu dla infrastruktury krytycznej wobec dostawców ani podmiotów wdrażających. Załącznik III pkt 2 to obszar wysokiego ryzyka zatytułowany „Infrastruktura krytyczna”. Ta strona używa tych słów dla AI, która podlega rozporządzeniu przez ten punkt. Pkt 2 obejmuje systemy AI przeznaczone do wykorzystywania jako związane z bezpieczeństwem elementy procesów zarządzania krytyczną infrastrukturą cyfrową i ruchem drogowym oraz procesów ich działania lub zaopatrzenia w wodę, gaz, ciepło lub energię elektryczną. Art. 3 pkt 62 definiuje „infrastrukturę krytyczną” przez odesłanie do art. 2 pkt 4 dyrektywy (UE) 2022/2557. Rozporządzenie nie definiuje odrębnie „krytycznej infrastruktury cyfrowej”. Pkt 2 nie wymienia transportu kolejowego, lotniczego ani morskiego, portów ani lotnisk. System dla któregokolwiek z tych obszarów jest systemem wysokiego ryzyka tylko wtedy, gdy obejmuje go inny punkt załącznika III lub załącznik I.
Objęte są tylko elementy związane z bezpieczeństwem
Element związany z bezpieczeństwem to element produktu lub systemu AI, który spełnia funkcję bezpieczeństwa w przypadku tego produktu lub systemu AI lub którego awaria bądź nieprawidłowe działanie zagrażają zdrowiu i bezpieczeństwu osób lub mienia. Element spełnia funkcję bezpieczeństwa, gdy jego przeznaczeniem jest zapobieganie ryzyku dla zdrowia i bezpieczeństwa osób lub mienia albo jego ograniczanie (art. 3 pkt 14). Systemy AI, które są wykorzystywane wyłącznie do niezwiązanych z bezpieczeństwem aspektów pomocy użytkownikom, optymalizacji skuteczności działania, efektywności usług, automatyzacji lub udogodnień czy kontroli jakości, nie kwalifikują się jako elementy związane z bezpieczeństwem (art. 6 ust. 1a). Systemy AI, których awaria lub nieprawidłowe działanie zagrażałyby zdrowiu i bezpieczeństwu, kwalifikują się jako takie elementy (art. 6 ust. 1b). Art. 6 ust. 5 zobowiązywał Komisję do przedstawienia, nie później niż do 2 lutego 2026 r., wytycznych z wyczerpującym wykazem praktycznych przykładów przypadków wykorzystania systemów AI, które są i które nie są systemami wysokiego ryzyka. Motyw 55 tekstu z 2024 r. opisuje elementy związane z bezpieczeństwem w infrastrukturze krytycznej jako systemy wykorzystywane do bezpośredniej ochrony integralności fizycznej infrastruktury krytycznej lub zdrowia i bezpieczeństwa osób i mienia, które nie są jednak niezbędne do funkcjonowania systemu. Stwierdza, że elementy przeznaczone do wykorzystywania wyłącznie do celów cyberbezpieczeństwa nie powinny kwalifikować się jako takie elementy. Motyw nie jest wiążącą regułą. To, czy dane narzędzie prognostyczne, optymalizacyjne lub do utrzymania ruchu jest elementem związanym z bezpieczeństwem, jest pytaniem do prawnika.
Art. 6 ust. 3 może wyłączyć system z załącznika III
System objęty pkt 2 jest systemem wysokiego ryzyka na podstawie art. 6 ust. 2. Zgodnie z art. 6 ust. 3 nie jest nim, jeżeli nie stwarza znaczącego ryzyka szkody dla zdrowia, bezpieczeństwa lub praw podstawowych. Obejmuje to brak znaczącego wpływu na wynik procesu decyzyjnego. Wyjątek ten stosuje się, gdy spełniony jest którykolwiek z następujących warunków (art. 6 ust. 3 lit. a)–d)). System jest przeznaczony do wykonywania wąsko określonego zadania proceduralnego. Albo jest przeznaczony do poprawienia wyniku zakończonej uprzednio czynności wykonywanej przez człowieka. Albo jest przeznaczony do wykrywania wzorców podejmowania decyzji lub odstępstw od wzorców podjętych uprzednio decyzji. Nie ma on na celu zastąpienia ani wywarcia wpływu na zakończoną uprzednio ocenę dokonaną przez człowieka bez odpowiedniej weryfikacji przez człowieka. Albo jest przeznaczony do wykonywania zadań przygotowawczych w kontekście oceny istotnej z punktu widzenia przypadków wykorzystania wymienionych w załączniku III. To, jak te warunki łączą się z testem znaczącego ryzyka, jest pytaniem do prawnika. System zawsze jest systemem wysokiego ryzyka, jeżeli dokonuje profilowania osób fizycznych. Profilowanie definiuje art. 4 pkt 4 RODO (art. 3 pkt 52). Dostawca, który powołuje się na wyjątek, dokumentuje swoją ocenę przed wprowadzeniem systemu do obrotu lub oddaniem go do użytku. Musi też zarejestrować system (art. 6 ust. 4, art. 49 ust. 2).
Produkty z załącznika I to odrębna ścieżka
System AI może być też systemem wysokiego ryzyka na podstawie art. 6 ust. 1. Wymaga to, aby był elementem związanym z bezpieczeństwem produktu albo sam był produktem objętym unijnym prawodawstwem harmonizacyjnym wymienionym w załączniku I, gdy produkt podlega ocenie zgodności przeprowadzanej przez stronę trzecią. Sekcja A załącznika I wymienia na przykład urządzenia ciśnieniowe (pkt 7) i urządzenia spalające paliwa gazowe (pkt 10). Wymogi dla tych systemów stosuje się od 2 sierpnia 2028 (art. 113 lit. c) ppkt (ii)). Sekcja B wymienia na przykład system kolei (pkt 17, dyrektywa (UE) 2016/797). Do systemów wysokiego ryzyka związanych z produktami z sekcji B stosuje się tylko art. 6 ust. 1, art. 60a oraz art. 102–112. Art. 57, 58 i 59 stosuje się tylko w zakresie, w jakim wymogi dotyczące systemów AI wysokiego ryzyka zostały włączone do tego prawodawstwa (art. 2 ust. 2). Art. 9–15 nie należą do stosowanych przepisów.
Dostawca i podmiot wdrażający
Dostawca rozwija system AI lub zleca jego rozwój i wprowadza go do obrotu lub oddaje do użytku pod własną nazwą lub znakiem towarowym (art. 3 pkt 3). Oddanie do użytku obejmuje dostarczenie systemu do użytku własnego dostawcy (art. 3 pkt 11). Przedsiębiorstwo sieciowe, gmina lub zarząd dróg, które rozwijają system i oddają go do użytku pod własną nazwą, są więc dostawcą. Kto wykorzystuje system, nad którym sprawuje kontrolę, jest podmiotem wdrażającym (w rozporządzeniu: podmiot stosujący; art. 3 pkt 4). Podmiot wdrażający staje się dostawcą w trzech przypadkach. Umieszcza swoją nazwę lub znak towarowy na systemie wysokiego ryzyka już wprowadzonym do obrotu, bez uszczerbku dla ustaleń umownych przewidujących, że podział obowiązków następuje w inny sposób. Wprowadza istotną zmianę w takim systemie, po której pozostaje on systemem wysokiego ryzyka. Albo zmienia przeznaczenie systemu niebędącego systemem wysokiego ryzyka tak, że staje się on takim systemem (art. 25 ust. 1). Dostawcy, który pierwotnie wprowadził system do obrotu lub oddał go do użytku, nie uznaje się wtedy już za dostawcę tego konkretnego systemu i musi on ściśle współpracować z nowym dostawcą (art. 25 ust. 2). Nie dotyczy to sytuacji, gdy pierwotny dostawca wyraźnie określił, że jego system nie może zostać zmieniony w system AI wysokiego ryzyka.
Dostawcy objęci zarządzaniem ryzykiem na podstawie innego prawa
Niektórzy dostawcy podlegają wymogom dotyczącym wewnętrznych procesów zarządzania ryzykiem na podstawie innych odpowiednich przepisów prawa Unii. W ich przypadku aspekty z art. 9 ust. 1–9 mogą stanowić część procedur zarządzania ryzykiem ustanowionych na podstawie tego prawa lub być z nimi połączone (art. 9 ust. 10). Rozporządzenie nie wskazuje takiego prawa. To, czy dane prawo się liczy, jest pytaniem do prawnika.
Terminy
Wymogi dla tych zastosowań z załącznika III stosuje się od 2 grudnia 2027 (art. 113 lit. c) ppkt (i)). System wprowadzony do obrotu lub oddany do użytku przed tą datą jest objęty rozporządzeniem tylko wtedy, gdy po niej jego projekt ulegnie istotnym zmianom. W każdym razie dostawcy i podmioty wdrażające systemy AI wysokiego ryzyka przeznaczone do wykorzystywania przez organy publiczne muszą podjąć niezbędne kroki, aby spełnić wymogi do 2 sierpnia 2030 (art. 111 ust. 2). Art. 43 i 49 (rozdział III sekcja 5) oraz art. 72 i 73 (rozdział IX) nie mieszczą się w art. 113 lit. c). Art. 113 nie podaje dla nich odrębnej daty, więc według zasady ogólnej stosuje się je od 2 sierpnia 2026. To, jak to się łączy z powyższym terminem, jest pytaniem do prawnika.
Kary pieniężne
Dostawcy muszą zapewnić, aby ich systemy AI wysokiego ryzyka spełniały wymogi sekcji 2 rozdziału III, która obejmuje art. 9–15 (art. 16 lit. a)). Naruszenie obowiązków dostawców z art. 16 lub obowiązków podmiotów wdrażających z art. 26 może skutkować karą pieniężną. Kara wynosi do 15 mln EUR lub, w przypadku przedsiębiorstwa, do 3 % jego całkowitego światowego obrotu rocznego z poprzedniego roku obrotowego, zależnie od tego, która kwota jest wyższa (art. 99 ust. 4 lit. a) i e)). Dla MŚP, w tym przedsiębiorstw typu start-up, każda kara jest ograniczona do niższej z tych kwot (art. 99 ust. 6). To samo dotyczy małych spółek o średniej kapitalizacji (art. 3 pkt 14b, art. 99 ust. 6a). Każde państwo członkowskie ustanawia przepisy dotyczące określenia, w jakim zakresie na organy i podmioty publiczne ustanowione w tym państwie członkowskim można nakładać administracyjne kary pieniężne (art. 99 ust. 8).
Zakres rozporządzenia i jego granice
Rozporządzenie stosuje się do dostawców i podmiotów wdrażających, którzy mają siedzibę lub znajdują się w państwie trzecim, w przypadku gdy wyniki wytworzone przez system AI są wykorzystywane w Unii (art. 2 ust. 1 lit. c)). Nie stosuje się go do obszarów wykraczających poza zakres stosowania prawa Unii i nie wpływa ono na kompetencje państw członkowskich w zakresie bezpieczeństwa narodowego (art. 2 ust. 3). Nie dotyczy ono systemów AI, jeżeli i o ile są wprowadzane do obrotu, oddawane do użytku lub wykorzystywane, ze zmianami lub bez nich, wyłącznie do celów wojskowych, obronnych lub bezpieczeństwa narodowego (art. 2 ust. 3). Nie dotyczy ono obowiązków podmiotów wdrażających będących osobami fizycznymi, które korzystają z systemów AI w ramach czysto osobistej działalności pozazawodowej (art. 2 ust. 10). Rozporządzenia nie stosuje się do systemów AI lub modeli AI, w tym ich wyników, specjalnie rozwiniętych i oddanych do użytku wyłącznie do celów badań naukowych i rozwojowych (art. 2 ust. 6). Nie stosuje się go do działalności badawczej, testowej ani rozwojowej przed wprowadzeniem systemu do obrotu lub oddaniem go do użytku. Wyłączenie to nie obejmuje testów w warunkach rzeczywistych (art. 2 ust. 8). Systemy AI udostępniane na podstawie bezpłatnych licencji otwartego oprogramowania są poza zakresem rozporządzenia. Wyłączenie to nie ma zastosowania, jeżeli są one wprowadzane do obrotu lub oddawane do użytku jako systemy AI wysokiego ryzyka albo objęte art. 5 lub 50 (art. 2 ust. 12).
Co rozporządzenie pozostawia otwarte dla infrastruktury krytycznej
Brak listy ryzyk i wartości testowych dla elementów związanych z bezpieczeństwem w infrastrukturze
Art. 9 nie wskazuje ryzyk, wskaźników ani wartości progowych dla elementów związanych z bezpieczeństwem w infrastrukturze. Dostawca identyfikuje ryzyka własnego systemu i ustala wskaźniki i progi stosowne ze względu na przeznaczenie (art. 9 ust. 2 i 8). Samo rozporządzenie nie wskazuje żadnej normy zharmonizowanej. Dla systemów AI wysokiego ryzyka zgodnych z normami zharmonizowanymi, do których odniesienia opublikowano w Dzienniku Urzędowym, domniemuje się zgodność z wymogami sekcji 2 w zakresie, w jakim normy te je obejmują (art. 40 ust. 1). Komisja ma opracować wytyczne dotyczące praktycznego stosowania wymogów i obowiązków z art. 8–15, 25 i 26 (art. 96 ust. 1 lit. a)).
Przykład: awaria czujnika w funkcji uzdatniania wody
Przykład, a nie wymóg rozporządzenia: dostawca elementu związanego z bezpieczeństwem dla oczyszczalni lub stacji uzdatniania wody mógłby wpisać na listę ryzyko, że awaria czujnika zostanie odczytana jako wartość prawidłowa. Mógłby przetestować tę awarię względem wskaźnika ustalonego przed testem i zapisać wynik.
Przykład: zapisanie oceny ryzyka resztkowego
Przykład, a nie wymóg rozporządzenia: dostawca mógłby zapisać dla każdego zidentyfikowanego zagrożenia przyjęty środek oraz powód, dla którego uznał ryzyko resztkowe za dopuszczalne (art. 9 ust. 5).
Pytania o art. 9 w infrastrukturze krytycznej
Czy art. 9 dotyczy AI, która prognozuje zapotrzebowanie lub planuje konserwację?
Tylko jeżeli system jest systemem wysokiego ryzyka. Załącznik III pkt 2 obejmuje systemy AI przeznaczone do wykorzystywania jako elementy związane z bezpieczeństwem. Systemy wykorzystywane wyłącznie do optymalizacji skuteczności działania lub efektywności usług nie kwalifikują się jako takie elementy (art. 6 ust. 1a), ale kwalifikują się systemy, których awaria zagrażałaby zdrowiu i bezpieczeństwu (art. 6 ust. 1b). To, po której stronie leży dane narzędzie, jest pytaniem do prawnika.
Czy art. 9 ustala progi testowe dla elementów związanych z bezpieczeństwem w infrastrukturze?
Nie. Art. 9 ust. 8 wymaga testów względem uprzednio określonych wskaźników i progów probabilistycznych stosownych ze względu na przeznaczenie. Ustala je dostawca; rozporządzenie nie podaje żadnych wartości.
Czy dostawca może ponownie wykorzystać proces ryzyka wymagany przez inne prawo?
W przypadku dostawców podlegających wymogom dotyczącym wewnętrznych procesów zarządzania ryzykiem na podstawie innych odpowiednich przepisów prawa Unii aspekty z art. 9 ust. 1–9 mogą stanowić część procedur wynikających z tego prawa lub być z nimi połączone (art. 9 ust. 10). Rozporządzenie nie wskazuje takiego prawa.
Powiązane strony
Artykuł 9: system zarządzania ryzykiem dla AI wysokiego ryzyka
Art. 9 dla wszystkich sektorów: wymogi, terminy i kary.
Rozporządzenie AI infrastruktura krytyczna
Przegląd infrastruktury krytycznej: jak rozporządzenie obejmuje AI z elementami związanymi z bezpieczeństwem.
Art. 10 dla AI w infrastrukturze krytycznej: dane i zarządzanie danymi
AI dla infrastruktury krytycznej a art. 10: zbiory danych, badanie pod kątem uprzedzeń i szczególne kategorie danych osobowych.
Art. 72: monitorowanie po wprowadzeniu do obrotu
Monitorowanie po wprowadzeniu do obrotu, którego dane zasilają analizę ryzyka z art. 9 ust. 2 lit. c).
Scanara przygotowuje dowody na podstawie Państwa repozytoriów
Scanara odczytuje połączone repozytoria GitHub i uruchamia skany oparte na regułach pod kątem typowych wzorców AI i uczenia maszynowego. Może pominąć kod niestandardowy. Osobno generuje projekty dokumentacji na podstawie szablonów i Państwa odpowiedzi w ocenach, jako dowody dla Państwa pracy nad zgodnością. Klasyfikację ustalają Państwo.