Cena to nie wszystko. Jak ustawić kryteria oceny ofert na system AI

Zamawiający publiczni nie mogą stosować ceny jako jedynego kryterium ani dawać jej wagi wyższej niż 60 procent, chyba że w opisie przedmiotu zamówienia określą wymagania jakościowe co najmniej dla głównych elementów zamówienia (art. 246 Prawa zamówień publicznych). Dlatego tak często spotykamy proporcję 60 do 40. Pytanie brzmi: co wpisać w te 40 procent, gdy kupujemy AI

Przykład z maja

Okręgowy Szpital Kolejowy w Katowicach zawarł umowę za 1 277 625 zł na wdrożenie rozwiązań AI i integrację z Platformą Usług Inteligentnych. Cena miała wagę 60 procent, a okres wsparcia 40 procent. Przedmiot obejmował także dostawę systemu PACS z integracją z systemem szpitalnym, a opis nie wymieniał funkcji AI poza tytułem. Okres wsparcia to sensowne kryterium, ale nic nie mówi o tym, jak dobrze system będzie działał

Jakość odpowiedzi to ryzyko prawne

Raport Watchdog Polska opisuje trzy gminy, Wyryki, Jarocin i Pysznicę, które wydały decyzje odmowne z prawdopodobnie zmyślonymi przepisami i niewypełnionymi znacznikami. Gminy zaprzeczyły, że korzystają z AI, i nie miały zasad jej używania. Niezależnie od tego, jak powstały te decyzje, pokazują, że błąd w tekście urzędowym trafia prosto do obywatela

Samorządy zawodowe zaczynają to regulować. Zasady etyki doradców podatkowych wymagają przy korzystaniu z AI zachowania poufności danych klienta i sprawdzenia każdego wyniku przed jego użyciem

Co wpisać w kryteria jakościowe

Kryterium musi być mierzalne, jawne i związane z przedmiotem zamówienia. W zakupach AI sprawdzają się:

• test na próbce Państwa dokumentów, z jawnym zestawem pytań i punktacją opisaną w dokumentach zamówienia
• poprawność wskazywania źródeł w odpowiedziach, sprawdzana na tych samych pytaniach u każdego wykonawcy
• koszt całkowity w 36 miesiącach, łącznie z kosztem użycia modeli, a nie sama cena licencji
• czas wdrożenia i okres wsparcia
• możliwość zmiany modelu bez wymiany całego systemu

Test na własnych danych wymaga przygotowania, ale najlepiej chroni przed ofertą, która dobrze wygląda na prezentacji, a słabo sprawdza się w codziennej pracy

Andrzej Albera

Od ponad 30 lat w projektach IT, także o znaczeniu krytycznym dla państwa. Doradza zarządom i zamawiającym, jak mądrze kupować, wdrażać i rozwijać AI