Tankeledare

AI-transparens och behovet av öppen källkod

mm
Lägg till Unite.AI bland dina föredragna källor på Google

För att skydda människor från de potentiella skadorna av AI förespråkar vissa regulatorer i USA och Europeiska unionen alltmer kontroller och kontrollmekanismer för den makt som öppen källkod-AI-modeller har. Detta är delvis motiverat av önskan hos stora företag att kontrollera AI-utvecklingen och forma AI-utvecklingen på ett sätt som gynnar dem. Regulatorerna är också oroliga för takten i AI-utvecklingen, eftersom de är rädda för att AI utvecklas för snabbt och att det inte finns tillräckligt med tid att införa skyddsåtgärder för att förhindra att det används för skadliga ändamål.

AI-rättighetsförklaringen och NIST AI-riskhanteringsramverket i USA, tillsammans med EU:s AI-lag, stöder olika principer som tillförlitlighet, säkerhet, icke-diskriminering, säkerhet, transparens, ansvar, förklarbarhet, tolkningsbarhet och dataskydd. Dessutom förväntar sig både EU och USA att standardiseringsorganisationer, antingen statliga eller internationella enheter, kommer att spela en avgörande roll i att fastställa riktlinjer för AI.

I ljuset av denna situation är det av yttersta vikt att sträva efter en framtid som omfamnar transparens och möjligheten att inspektera och övervaka AI-system. Detta skulle möjliggöra för utvecklare över hela världen att noggrant undersöka, analysera och förbättra AI, särskilt med fokus på utbildningsdata och processer.

För att framgångsrikt bringa transparens till AI måste vi förstå de beslutsalgoritmer som ligger till grund för det, och därmed avslöja AI:s “svarta låda”-tillvägagångssätt. Öppen källkod och inspekterbara modeller spelar en integrerad roll i att uppnå detta mål, eftersom de ger tillgång till den underliggande koden, systemarkitekturen och utbildningsdata för granskning och revision. Denna öppenhet främjar samarbete, driver innovation och skyddar mot monopolisering.

För att bevittna förverkligandet av denna vision är det nödvändigt att underlätta politiska förändringar, gräsrotsinitiativ och uppmuntra aktivt deltagande från alla intressenter, inklusive utvecklare, företag, regeringar och allmänheten.

Nuvarande tillstånd för AI: Koncentration och kontroll

För närvarande är AI-utvecklingen, särskilt när det gäller stora språkmodeller (LLM), i huvudsak centraliserad och kontrollerad av stora företag. Denna koncentration av makt väcker farhågor om missbruk och väcker frågor om rättvis tillgång och rättvis fördelning av fördelar från framsteg inom AI.

I synnerhet saknar populära modeller som LLM öppen källkod under utbildningsprocessen på grund av de omfattande beräkningsresurser som krävs, som vanligtvis endast är tillgängliga för stora företag. Trots detta är det viktigt att säkerställa transparens när det gäller utbildningsdata och processer för att möjliggöra granskning och ansvar.

OpenAIs nyliga införande av ett licenssystem för vissa AI-typer har väckt oro och farhågor om regleringsinfångning, eftersom det kan påverka inte bara AI:s utveckling, utan också bredare sociala, ekonomiska och politiska aspekter.

Behovet av transparent AI

Tänk dig att förlita dig på en teknik som fattar betydande beslut om mänskligt/personligt liv, men lämnar inga spår, ingen förståelse för resonemanget bakom dessa slutsatser. Det är här transparens blir oumbärlig.

Först och främst är transparens avgörande och bygger förtroende. När AI-modeller blir observerbara, skapar de förtroende för deras tillförlitlighet och precision. Dessutom gör en sådan transparens utvecklare och organisationer mer ansvariga för resultaten av deras algoritmer.

En annan kritisk aspekt av transparens är identifiering och mildring av algoritmisk bias. Bias kan injiceras i AI-modeller på flera sätt.

  • Mänskligt element: Dataforskare är sårbara för att förmedla sina egna bias till modeller.
  • Maskinlärning: Även om forskare skapade rent objektiv AI, är modellerna fortfarande mycket känsliga för bias. Maskinlärning börjar med en definierad dataset, men släpps sedan fri för att absorbera ny data och skapa nya lärandevägar och nya slutsatser. Dessa resultat kan vara oavsiktliga, fördomsfulla eller felaktiga, eftersom modellen försöker utvecklas på egen hand i vad som kallas “data-drift”.

Det är viktigt att vara medveten om dessa potentiella källor till bias så att de kan identifieras och mildras. Ett sätt att identifiera bias är att granska data som används för att träna modellen. Detta inkluderar att leta efter mönster som kan indikera diskriminering eller orättvisa. Ett annat sätt att mildra bias är att använda debias-tekniker. Dessa tekniker kan hjälpa till att ta bort eller minska bias från modellen. Genom att vara transparenta om möjligheten till bias och vidta åtgärder för att mildra den kan vi hjälpa till att säkerställa att AI används på ett rättvist och ansvarsfullt sätt.

Transparenta AI-modeller möjliggör för forskare och användare att undersöka utbildningsdata, identifiera bias och vidta korrigerande åtgärder för att hantera dem. Genom att göra beslutsprocessen synlig, hjälper transparens oss att sträva efter rättvisa och förhindra spridning av diskriminerande metoder. Dessutom behövs transparens under hela modellens livscykel, som nämnts ovan, för att förhindra data-drift, bias och AI-hallucinationer som producerar felaktig information. Dessa hallucinationer är särskilt vanliga i stora språkmodeller, men förekommer också i alla former av AI-produkter. AI-observerbarhet spelar också viktiga roller för att säkerställa modellernas prestanda och precision, vilket skapar säkrare, mer tillförlitlig AI som är mindre benägen att fel eller oavsiktliga konsekvenser.

Men att uppnå transparens i AI är inte utan utmaningar. Det krävs en balans för att hantera problem som dataskydd, säkerhet och immateriella rättigheter. Detta innebär att implementera teknik för dataskydd, anonymisera känsliga data och etablera branschstandarder och regler som främjar ansvarsfulla transparenspraxis.

Att göra transparent AI till verklighet

Att utveckla verktyg och tekniker som kan möjliggöra inspekterbarhet i AI är avgörande för att främja transparens och ansvar i AI-modeller.

Utöver att utveckla verktyg och tekniker som möjliggör inspekterbarhet i AI, kan teknikutveckling också främja transparens genom att skapa en kultur av det runt AI. Att uppmuntra företag och organisationer att vara transparenta om sin användning av AI kan också hjälpa till att bygga förtroende och förtroende. Genom att göra det lättare att inspektera AI-modeller och skapa en kultur av transparens runt AI, kan teknikutveckling hjälpa till att säkerställa att AI används på ett rättvist och ansvarsfullt sätt.

Men teknikutveckling kan också ha den motsatta effekten. Till exempel, om techföretag utvecklar proprietära algoritmer som inte är öppna för offentlig granskning, kan det göra det svårare att förstå hur dessa algoritmer fungerar och att identifiera eventuella bias eller risker. Att säkerställa att AI gynnar samhället som helhet, snarare än ett fåtal utvalda, kräver en hög grad av samarbete.

Forskare, politiker och dataforskare kan etablera regler och standarder som balanserar öppenhet, dataskydd och säkerhet utan att kväva innovation. Dessa regler kan skapa ramverk som uppmuntrar kunskapsdelning samtidigt som de hanterar potentiella risker och definierar förväntningar för transparens och förklarbarhet i kritiska system.

Alla parter som är relaterade till AI-utveckling och distribution bör prioritera transparens genom att dokumentera sina beslutsprocesser, göra källkod tillgänglig och omfamna transparens som en kärnprincip i AI-systemutveckling. Detta ger alla möjlighet att spela en viktig roll i att utforska metoder för att göra AI-algoritmer mer tolkningsbara och utveckla tekniker som underlättar förståelse och förklaring av komplexa modeller.

Slutligen är allmän engagemang avgörande i denna process. Genom att öka medvetenheten och främja offentliga diskussioner runt AI-transparens, kan vi säkerställa att samhällets värderingar återspeglas i utveckling och distribution av AI-system.

Slutsats

När AI blir alltmer integrerat i olika aspekter av våra liv, blir AI-transparens och användningen av öppen källkod avgörande överväganden. Att omfamna inspekterbar AI säkerställer inte bara rättvisa och ansvar, utan stimulerar också innovation, förhindrar koncentration av makt och främjar rättvis tillgång till AI-framsteg.

Genom att prioritera transparens, möjliggöra granskning av AI-modeller och främja samarbete, kan vi kollektivt forma en AI-framtid som gynnar alla, samtidigt som vi hanterar de etiska, sociala och tekniska utmaningarna som är förknippade med denna transformerande teknik.

Liran Hason är medgrundare och VD för Aporia, den ledande AI-kontrollplattformen, som används av Fortune 500-företag och branschledare världen över för att säkerställa tillit till GenAI. Aporia har också erkänts som en teknisk pionjär av Världsekonomiskt forum. Innan han grundade Aporia var Liran ML-arkitekt på Adallom (förvärvat av Microsoft) och senare investerare på Vertex Ventures. Liran grundade Aporia efter att ha sett effekterna av AI utan skyddsmekanismer på nära håll. 2022 utsåg Forbes Aporia till "Nästa miljardföretag"