Er Meta Llama virkelig open source?

Softwareindustrien omfavner i stigende grad open-source-teknologier. Ifølge 2023 State of Open Source Report har 80% af virksomhederne øget deres brug af open-source-software.

Som en stor spiller i tech-industrien har Metas software-foretagender betydelig indflydelse. Meta Llama-projektet er en væsentlig bidrag til den open-source store sprogmodel-økosystem. Men ved nærmere eksamen af dets open-source-krav kan vi observere nogle uregelmæssigheder.

Lad os undersøge Meta Llama nærmere for at vurdere dets licens, udfordringer og større implikationer i open-source-samfundet.

Hvad udgør open source?

At forstå essensen af open source er afgørende for at vurdere Meta Llama. Open source betyder ikke kun adgang til kildekoden, men også en forpligtelse til samarbejde, gennemsigtighed og community-dreven udvikling. I sammenligning med proprietær software er open-source-software typisk licensfri og kan kopieres, ændres eller deles af alle uden forfatterens udtrykkelige tilladelse.

Metas Llama kræver skærpet opmærksomhed i forhold til overholdelse af disse kriterier. En vurdering af Metas forpligtelse til gennemsigtighed, samarbejdende udvikling og kodeadgang vil afsløre, hvor meget det er i overensstemmelse med open-source-principperne.

Overblik over Meta Llama-projektet

Overblik over Llama 2 pre-training og fine-tuning proces

Som et væsentligt værktøj inden for Metas økosystem har Llama langtrækkende implikationer. Dets robuste naturlige sprogkapaciteter giver udviklere mulighed for at opbygge og finjustere kraftfulde chatbots, sprogoversættelsessystemer og indholdsgenererings-systemer. Llama sigter mod at muliggøre mere nuanceret sprogforståelse og -generering med sin tilpasningsevne og fleksibilitet.

Væsentligt for Llamas drift er de retningslinjer, der er indkapslet i Metas brugsregler. Disse principper fremmer en sikker og retfærdig brug af platformen og fastlægger de etiske grænser for dets ansvarlige brug.

Anvendelser og effekter

Metas Llama sammenlignes med andre fremtrædende LLM’er, såsom BERT og GPT-3. Det er blevet fundet, at det overgår dem på mange eksterne benchmarks, såsom QA-datasets som Natural Questions og QuAC.

Her er nogle anvendelseseksempler, der fremhæver Llamas effekt på udviklere og den bredere tech-økosystem:

• Kraftfulde bots: Llama giver udviklere mulighed for at opbygge mere avancerede naturlige sproginteraktioner med brugere i chatbots og virtuelle assistenter.
• Forbedret sentimentanalyse: Llama kan hjælpe virksomheder og forskere med bedre at forstå kundesentiment ved at analysere store mængder tekstdata.
• Privatkontrol: Llamas tilpasningsevne og fleksibilitet gør det potentielt disruptivt i forhold til nuværende ledere i LLM, såsom OpenAI og Google. Dets evne til at være selvhostet og modificeret giver mere kontrol over data og modeller for privatfokuserede anvendelser.

Metas påstande om open source

Meta påstår, at Llama er open source, og placerer det inden for den samarbejdende sfære. Derfor bliver det afgørende at undersøge Metas påstande for at fastslå, om det er tale om praksis eller retorik.

Ud over den politiske korrekthed af open source er det fordelagtigt at gøre Llama tilgængeligt. Nogle forventede fordele inkluderer forbedret community-engagement med Meta, accelereret innovation, gennemsigtighed og bredere nytte. Men sandheden i disse påstande kræver omhyggelig undersøgelse.

Metas Llama-licens

Llama‘s licensmodel har nogle unikke karakteristika, der adskiller det fra traditionelle open-source-licenser. Llama-licensen, selv om den er mere tilladt end licenser knyttet til mange kommercielle modeller, har bestemte begrænsninger. Her er nogle nøglepunkter:

1. Brugerdefineret licens

Meta bruger en brugerdefineret, delvis åben licens til Llama, der giver brugerne en ikke-eksklusiv, verdensomspændende, ikke-overførbar og royaltyfri begrænset licens under Metas immaterielle rettigheder.

2. Brug og afledninger

Brugere kan bruge, reproducere, distribuere, kopiere, oprette afledninger af og modificere Llama-materialet uden at overføre licensen.

3. Kommercielle vilkår

Virksomheder med over 700 millioner månedlige aktive brugere skal erhverve en kommerciel licens fra Meta AI. Dette krav adskiller Llama fra traditionelle open-source-licenser, der typisk ikke pålægger sådanne begrænsninger.

4. Partnerskaber

Llama 2-modellen er tilgængelig via AWS og Hugging Face. Meta har også samarbejdet med Microsoft (MSFT ) om at bringe Llama 2 til Azure-modelbiblioteket, hvilket giver udviklere mulighed for at bygge applikationer med det uden at betale en licensgebyr.

Udfordringer og kontroverser omkring Llamas åbenhed

Brugeroplevelsen inden for Meta Llama-økosystemet har sine udfordringer, med bestemte tilfælde, der afslører begrænsninger på Llama-modeller og afledninger.

• Labyrinten af licensbegrænsninger komplicerer landskabet og påvirker, hvordan brugere interagerer med og udnytter disse avancerede modeller.
• Selektive adgangshindringer opstår, hvilket kaster en skygge over brugerdeltagelsens inklusivitet.
• Dokumentationsuklarheder tilføjer en ekstra lag af kompleksitet, hvilket kræver, at brugere navigerer i uklare retningslinjer.

I en seneste evaluering udført af Radboud Universitet blev flere instruktions-tuned tekstgenereringsmodeller, herunder Llama 2, underkastet en skærpet undersøgelse i forhold til deres open-source-krav. Studiet vurderede omfattende tilgængelighed, dokumentationskvalitet og adgangsmetoder, med det formål at rangere disse modeller efter deres åbenhed. Llama 2 opnåede den næstlaveste rangering blandt de vurderede modeller, med en samlet åbenhedsscore marginalt højere end ChatGPT.

Radboud Universitets vurdering af Llama 2’s open-source-krav, blandt andre tekstgenereringsmodeller, pr. juni 2023 (Fuld tabel tilgængelig her)

Udviklerfællesskabet har også rejst flere kritikker og bekymringer om Llama:

1. Manglende gennemsigtighed i Metas håndtering af modellen.
2. Begrænsninger på brug og afledninger.
3. De kommercielle vilkår, der pålægges store virksomheder.

Metas svar

Metas Llama er blevet debatteret i forhold til dets sande åbenhed. Mens Meta har beskrevet Llama 2 som open source og gratis for forskning og kommerciel brug, argumenterer kritikere for, at det ikke er fuldt open source. De vigtigste stridspunkter er tilgængeligheden af træningsdata og koden, der bruges til at træne modellen.

Meta har gjort modellens vægte, evalueringkode og dokumentation tilgængelige, hvilket er et væsentligt aspekt af en open-source-model. Men Llama 2 anses for at være noget lukket i forhold til andre open-source-LLM’er. Modellens træningsdata og koden, der bruges til at træne den, deles ikke, hvilket begrænser muligheden for aspirerende udviklere og forskere at analysere modellen fuldt ud.

Bevarelse af open-source-integritet

At acceptere delvist open-source-projekter som open source kan være skadeligt for troværdigheden af open-source-praksis i branchen. Nogle potentielle implikationer inkluderer:

• Discouraged Collaborative Synergy: Misbranding af ikke-open-source-projekter kan afholde potentielle samarbejdspartnere, hvilket kan hindre den livlige udveksling af ideer og fælles problemløsning, der kendetegner open source.
• Inhibited Innovation Spectrum: Accept af lukkede projekter som open source kan kvæle innovation ved at føre udviklere ned ad veje, der mangler den fælles, ubegrænsede kreativitet, der er afgørende for gennembrud.
• Confusion and Adoption Hitch: Misidentificering af lukket kilde som open source kan forvirre brugere og udviklere, hvilket kan føre til tøven ved at acceptere ægte open-initiativer på grund af skepsis eller uklare forskelle.
• Legal Labyrinth: Accept af ikke-overensstemmende projekter kan rejse juridiske spørgsmål, hvilket kan tilføje kompleksitet og potentielle ansvarligheder og forstyrre fællesskabets etos af gennemsigtighed og samarbejde.

For at adressere disse potentielle konsekvenser må open-source-fællesskabet fastholde den sande ånd af open source. Klart at definere og kommunikere open-source-principper og -værdier kan hjælpe med at forebygge forvirring og sikre, at projekter, der accepteres som open source, er i overensstemmelse med disse principper.

For de seneste indsighter i teknologi og AI, besøg Unite AI. Bliv informeret og forbliv foran med os!