Чи дійсно Meta Llama є відкритим джерелом?

Індустрія програмного забезпечення все більше приймає відкриті технології. Вражаючі 80% підприємств tăng використання відкритого програмного забезпечення, згідно з звітом про стан відкритого джерела 2023 року.

Як значний гравець у галузі технологій, програмні підприємства Meta мають значний вплив. Проект Meta Llama є помітним внеском у відкритий екосистему великих мовних моделей. Однак при ближньому розгляді заяв про відкритий джерел, ми можемо спостерігати деякі порушення.

Давайте розглянемо Meta Llama ближче, щоб оцінити його ліцензування, виклики та більші наслідки в спільноті відкритого джерела.

Що складає відкритий джерел?

Поняття сутності відкритого джерела є важливим для оцінки Meta Llama. Відкритий джерел означає не тільки доступ до джерельного коду, але й зобов’язання щодо співробітництва, прозорості та спільного розвитку. У порівнянні з пропріетарним програмним забезпеченням, відкрите програмне забезпечення зазвичай є безкоштовним і може бути скопійованим, зміненим або поділеним будь-ким без явної дозволу автора.

Мета Llama заслуговує уваги щодо його дотримання цих критеріїв. Оцінка зобов’язань Meta щодо прозорості, спільного розвитку та доступності коду покаже, наскільки він відповідає принципам відкритого джерела.

Огляд проекту Meta Llama

Огляд процесу попереднього навчання та тонкого налаштування Llama 2

Як важливий інструмент у екосистемі Meta, Llama має далекосяжні наслідки. Його потужні природні мовні можливості дозволяють розробникам створювати та налаштовувати потужні чат-боти, системи перекладу мови та генерації контенту. Llama спрямований на забезпечення більш тонкого розуміння мови та генерації мови завдяки своїй адаптивності та гнучкості.

Вирішальними для роботи Llama є керівні принципи, викладені у політиці використання Meta. Ці принципи сприяють безпечному та справедливому використанню платформи та окреслюють етичні межі, що регулюють її відповідальне використання.

Застосування та вплив

Meta Llama порівнюється з іншими відомими LLM, такими як BERT та GPT-3. Було виявлено, що він перевершує їх на багатьох зовнішніх бенчмарках, таких як набори даних QA, як Natural Questions і QuAC.

Ось деякі випадки використання, які підкреслюють вплив Llama на розробників та ширшу технологічну екосистему:

• Потужні боти: Llama дозволяє розробникам створювати більш просунуті природні мовні взаємодії з користувачами у чат-ботах та віртуальних помічниках.
• Покращений аналіз настрою: Llama може допомогти підприємствам та дослідникам краще зрозуміти настрій клієнтів шляхом аналізу великих обсягів текстових даних.
• Контроль приватності: Адаптивність та гнучкість Llama роблять його потенційно деструктивним щодо поточних лідерів у галузі LLM, таких як OpenAI та Google. Його можливість бути самохостованим та модифікованим забезпечує більший контроль над даними та моделями для випадків використання, орієнтованих на приватність.

Заяви Meta про відкритий джерел

Meta стверджує, що Llama є відкритим джерелом, позиціонуючи його у сфері співробітництва. Тому вивчення заяв Meta стає важливим для визначення практики від риторики.

Поза політичною коректністю відкритого джерела, вигідно зробити Llama доступним. Деякі очікувані вигоди включають підвищення взаємодії спільноти з Meta, прискорення інновацій, прозорість та ширшу корисність. Однак правдивість цих заяв вимагає ретельного дослідження.

Ліцензування Meta Llama

Llama має унікальні характеристики ліцензійної моделі, які відрізняють його від традиційних відкритих ліцензій. Ліцензія Llama, хоча й більш пермісивна, ніж ліцензії, прикріплені до багатьох комерційних моделей, має певні обмеження. Ось деякі ключові моменти:

1. Позначена ліцензія

Meta використовує позначену, часткову відкриту ліцензію для Llama, яка надає користувачам неексклюзивну, світову, непередавану та безкоштовну обмежену ліцензію згідно з правами інтелектуальної власності Meta.

2. Використання та похідні роботи

Користувачі можуть використовувати, відтворювати, поширювати, копіювати, створювати похідні роботи з Llama матеріалів без передачі ліцензії.

3. Комерційні терміни

Компанії з більш ніж 700 мільйонами активних користувачів на місяць повинні отримати комерційну ліцензію від Meta AI. Це вимога відрізняє Llama від традиційних відкритих ліцензій, які зазвичай не накладають таких обмежень.

4. Партнерства

Модель Llama 2 доступна через AWS та Hugging Face. Meta також уклала партнерство з Microsoft, щоб надати Llama 2 до бібліотеки моделей Azure, що дозволяє розробникам створювати програми без оплати ліцензійного збору.

Виклики та суперечності навколо відкритості Llama

Досвід користувача у екосистемі Meta Llama має свої особливості, з певними випадками, які розкривають обмеження на моделі Llama та похідні роботи.

• Лабіринт обмежень ліцензій ускладнює ландшафт, впливаючи на те, як користувачі взаємодіють з цими моделями та використовують їх.
• Поява вибіркових бар’єрів для доступу, що відкидає тінь на інклюзивність участі користувачів.
• Незрозумілість документації додає додатковий шар складності, вимагаючи від користувачів навігації по нечітким керівництвам.

У недавньому оцінюванні, проведеному Університетом Радбауд, кілька інструктивно налаштованих текстових генераторів, включаючи Llama 2, піддалися перевірці щодо заяв про відкритий джерел. Дослідження комплексно оцінило доступність, якість документації та методи доступу, спрямовані на ранжування цих моделей за відкритістю. Llama 2 зайняв друге місце за відкритістю серед оцінених моделей, з загальним балом відкритості трохи вище, ніж у ChatGPT.

Оцінка університету Радбауд щодо заяв про відкритий джерел Llama 2, серед інших текстових генераторів, станом на червень 2023 року (Повна таблиця доступна тут)

Спільнота розробників також висунула кілька критичних зауважень та проблем щодо Llama:

1. Відсутність прозорості у xửленні моделі Meta.
2. Обмеження на використання та похідні роботи.
3. Комерційні терміни, накладені на великі компанії.

Відповідь Meta

Meta Llama був обговорений щодо його справжньої відкритості. Хоча Meta описав Llama 2 як відкритий джерел та безкоштовний для досліджень та комерційного використання, критики стверджують, що він не повністю відкритий джерел. Головними пунктами суперечок є доступність навчальних даних та коду, використаного для навчання моделі.

Meta зробила вагомий внесок у відкритий джерел, надавши доступ до вагів моделі, коду оцінки та документації, що є важливим аспектом відкритого джерела. Однак Llama 2 вважається частково закритим порівняно з іншими відкритими LLM. Навчальні дані та код, використаний для навчання моделі, не поширені, обмежуючи можливість розробників та дослідників повністю проаналізувати модель.

Збереження цілісності відкритого джерела

Прийняття частково відкритих проектів як відкритих джерел може бути шкідливим для авторитету відкритих практик у галузі. Деякі потенційні наслідки включають:

• Відмову від співробітництва: Помилкова маркування не відкритих проектів може відтермінувати потенційних співробітників, перешкоджаючи живому обміну ідеями та колективному вирішенню проблем, які визначають відкритий джерел.
• Обмеження інноваційного спектру: Прийняття закритих проектів як відкритих джерел може загальмувати інновації, спрямовуючи розробників по шляхах, які позбавлені спільної, необмеженої творчості, необхідної для проривів.
• Замішання та затримка прийняття: Помилкова ідентифікація закритого джерела як відкритого джерела може запутати користувачів та розробників, що призведе до вагань у прийнятті справжніх відкритих ініціатив через скептицизм або невизначені відмінності.
• Юридична лабіринт: Прийняття не відповідних проектів може викликати юридичні проблеми, додаючи складності та потенційні зобов’язання, що порушують етос спільноти щодо прозорості та співробітництва.

Для вирішення цих потенційних наслідків спільнота відкритого джерела повинна підтримувати справжній дух відкритого джерела. Чітке визначення та спілкування принципів та цінностей відкритого джерела можуть допомогти запобігти плутані та забезпечити, що проекти, прийняті як відкриті джерела, відповідають цим принципам.

Для отримання останнієї інформації про технології та штучний інтелект відвідайте Unite AI. Залишайтеся в курсі та залишайтеся попереду з нами!