DI Šališkumas: Kur Jis Prasideda ir Kaip Jį Atpažinti
Paaiškina šališkumo šaltinius dirbtinio intelekto sistemose — nuo duomenų parinkimo iki modelio architektūros sprendimų.
Skaityti daugiauMetodai ir įrankiai, padedantys išanalizuoti, ar jūsų DI sistema veikia šališkiai ar ne.
Dirbtinio intelekto sistemos priima sprendimus, kurie veikia žmonių gyvenimus. Nuo paskolos patvirtinimo iki paramos programos priskyrimo — DI algoritmai formuoja mūsų kasdienes realybes. Bet čia slypi problema: jei sistema mokyta šališkų duomenų, ji tęs tą šališkumą toliau.
Šališkumo auditas yra tiesiog sistematingas procesas, kuris padeda suprasti, kur jūsų DI sistema gali būti problemiška. Tai nėra apie puikybę — tai apie atsakingumą. Organizacijos, kurios rimtai žiūri į šališkumą, ne tik išvengia teisinių problemų, bet ir pasitiki savimi daugiau. Žmonės nori žinoti, kad sistema, kuri juos vertina, tai daro sąžiningai.
Bet koks auditas prasideda nuo to paties klausimo: iš kur atėjo duomenys? Jei jūsų mokymo duomenys jau šališki, sistema bus šališka iš karto. Tai kaip statyti namą ant sulaužyto pamatų.
Pirmas žingsnis — susigrupuoti visus duomenis, kuriuos naudojote mokyti DI modelį. Pamatyti šališkumą reiškia skaičius: kiek procentų mokymo aibėje yra kiekvienos grupės? Jei bandžius prognozuoti patvirtintinas paskolos iš duomenų, kuriuose 85% patvirtintų paskolų buvo vyrams, modelis tiesiog kopijuos tą modelį. Tai negraudu, bet greita realybė.
Geriau pradėti iš konkrečių skaičių. Suskaičiuoti klasės disbalanso santykį — tai yra, ar jūs turite vienodai mokymo pavyzdžių iš kiekvienos reikšmingos grupės. Jei nėra, tada žinote, iš kur prasideda problemos.
Šis straipsnis yra informacinis išteklius, skirtas padėti suprasti šališkumo auditų koncepcijas ir praktikas. Jis nėra konkretus techninis vadovas ir neturėtų pakeisti specialistų konsultacijos. Kiekvienos organizacijos DI sistema yra unikali, ir šališkumo auditai turėtų būti pritaikyti jūsų konkrečiems poreikiams ir kontekstui. Jei ieškote pagalbos diegiant šališkumo auditą, rekomenduojame pasikonsultuoti su DI etikos specialistais ir duomenų mokslo profesionalais.
Čia ir pradedamos tikros problemos. Jei jūs turite modelį, reikia sužinoti, kaip jis veikia žmonėms iš skirtingų grupių. Dažniausiai naudojamos tokios metrikos: tikslumas, precizija ir atšaukimas. Bet šios metrikos gali paslėpti problemą.
Pavyzdžiui, jūsų modelis gali turėti 92% tikslumą keturiems žmonėms iš dešimties — tai skamba nuostabiai, kol sužinosite, kad jam pavyko 99% teisingai atpažinti vieną grupę, bet tik 40% kitą grupę. Tokios situacijos būna dažnai, ir jos nuslėpia pastarąją skaičiumi „vidutinis tikslumas".
Todėl geriau analizuoti metrikos atskirai kiekvienai grupei. Pamatysite skirtumą. Ir tada žinosite, kur darbas dar nėra baigtas.
Nebūtina sugalvoti rato iš naujo. Yra nemažai atvirojo kodo įrankių, kurie padeda audituoti DI sistemų šališkumą. Populiariausi iš jų:
Šie įrankiai nėra pilnas sprendimas, bet jie duoda gerą pradžią. Daugelis jų nemokštas, o tai reiškia, kad galite juos naudoti net jei jūsų biudžetas mažas.
Paaiškina šališkumo šaltinius dirbtinio intelekto sistemose — nuo duomenų parinkimo iki modelio architektūros sprendimų.
Skaityti daugiau
Konkretūs žingsniai, kaip sukurti dirbtinio intelekto sistemas, kurios nereprodukuoja ir nestiprina šališkumo.
Skaityti daugiau
Apžvalga ES teisės aktų, susijusių su atsakingu DI naudojimu ir duomenų apsauga.
Skaityti daugiauJei turite DI sistemą, šališkumo auditas nėra pasirinkimas — tai būtinybė. Ir tai geriau daryti savarankiškai nei laukti, kol kažkas grieš jus prie teismo. Pradėkite nuo mažo: identifikuokite, kokias grupes turi jūsų sistema, o tada analizuokite jos veikimą kiekvienai grupei.
Jei nežinote, nuo ko pradėti, pasinaudokite vienu iš atvirojo kodo įrankių. Jie nemokami, dokumentuoti ir naudojami daugelyje organizacijų. Tai nėra savybę — tai darbas. Bet darbas, kuris padeda sukurti sistemą, kuri yra teisingesnė visiems.
Redakcinė Komanda
Parengta Etinio Sprendimo redakcinės komandos, skirtos suprantamiems ir praktiškoems gidams apie dirbtinio intelekto etiką.