Industria dezvoltării de software este un domeniu care se bazează adesea pe consultare și intuiție, caracterizat prin strategii de luare a deciziilor complexe. Mai mult, dezvoltarea, întreținerea și operarea software-ului necesită o abordare disciplinată și metodică. Este obișnuit ca dezvoltatorii de software să ia decizii pe baza intuiției, mai degrabă decât a consultării, în funcție de complexitatea problemei. În încercarea de a îmbunătăți eficiența ingineriei software, inclusiv eficacitatea software-ului și reducerea costurilor de dezvoltare, oamenii de știință explorează utilizarea cadrelor bazate pe învățare profundă pentru a aborda diverse sarcini din procesul de dezvoltare a software-ului. Cu dezvoltările și progresele recente în domeniul învățării profunde și al inteligenței artificiale, dezvoltatorii caută modalități de a transforma procesele și practicile de dezvoltare a software-ului, utilizând proiecte sofisticate implementate în diferite etape ale procesului de dezvoltare a software-ului.

Astăzi, vom discuta despre ChatDev, o abordare inovatoare bazată pe modele de limbaj mare (LLM), care își propune să revoluționeze domeniul dezvoltării de software. Acest paradigmă își propune să elimine nevoia de modele specializate în fiecare etapă a procesului de dezvoltare. Cadrelul ChatDev utilizează capacitățile cadrelor LLM, utilizând comunicarea în limbaj natural pentru a unifica și a simplifica procesele cheie de dezvoltare a software-ului.

În acest articol, vom explora ChatDev, o companie virtuală specializată în dezvoltarea de software. ChatDev adoptă modelul cascade și împarte procesul de dezvoltare a software-ului în patru etape principale.

1. Proiectarea.
2. Codificarea.
3. Testarea.
4. Documentația.

Fiecare dintre aceste etape utilizează o echipă de agenți virtuali, cum ar fi programatori de cod sau testatori, care colaborează între ei utilizând dialoguri care rezultă într-un flux de lucru fără întreruperi. Lanțul de conversații funcționează ca un facilitator și împarte fiecare etapă a procesului de dezvoltare în sarcini subatomice, permițând astfel roluri duale, propuneri și validări de soluții utilizând comunicări conștiente de context care permit dezvoltatorilor să rezolve eficient sarcinile subatomice specificate.

Analiza instrumentală a ChatDev demonstrează că nu numai că cadrelul ChatDev este extrem de eficient în finalizarea procesului de dezvoltare a software-ului, dar este și extrem de eficient din punct de vedere al costurilor, deoarece finalizează întregul proces de dezvoltare a software-ului la un cost de sub un dolar. Mai mult, cadrelul nu numai că identifică, dar și elimină vulnerabilitățile potențiale, corectează halucinațiile potențiale, menținând în același timp o eficiență ridicată și eficiență din punct de vedere al costurilor.

ChatDev : O Introducere în Dezvoltarea de Software Bazată pe LLM

În mod tradițional, industria dezvoltării de software este una care se bazează pe fundamentele unei abordări disciplinate și metodice, nu numai pentru dezvoltarea aplicațiilor, ci și pentru întreținerea și operarea lor. În mod tradițional, un proces de dezvoltare a software-ului este un proces complex și lung, cu cicluri de dezvoltare lungi, deoarece sunt implicate multiple roluri în procesul de dezvoltare, inclusiv coordonarea în cadrul organizației, alocarea sarcinilor, scrierea codului, testarea și, în final, documentația.

În ultimii ani, cu ajutorul modelelor de limbaj mare (LLM), comunitatea de inteligență artificială a realizat progrese semnificative în domeniile viziunii computerizate și prelucrării limbajului natural, și, după antrenarea pe paradigme de “următoarea previziune a cuvântului”, modelele de limbaj mare au demonstrat capacitatea de a returna performanțe eficiente într-o gamă largă de sarcini în aval, cum ar fi traducerea mașinilor, răspunsurile la întrebări și generarea de cod.

Deși modelele de limbaj mare pot scrie cod pentru întregul software, ele au un mare dezavantaj: halucinațiile de cod, care sunt similare cu halucinațiile întâmpinate de cadrele de prelucrare a limbajului natural. Halucinațiile de cod pot include probleme precum bug-uri nedescoperite, dependențe lipsă și implementări incomplete de funcții. Există două cauze majore de halucinații de cod.

• Lipsa specificațiilor sarcinii: Când se generează codul software într-un singur pas, lipsa specificațiilor sarcinii confundă modelele LLM, deoarece sarcinile din procesul de dezvoltare a software-ului, cum ar fi analiza cerințelor utilizatorilor sau selectarea limbajului de programare preferat, oferă gândire ghidată, ceva care lipsește din sarcinile de nivel înalt gestionate de aceste modele LLM.
• Lipsa examinării încrucișate: Riscuri semnificative apar atunci când nu se efectuează o examinare încrucișată, în special în timpul proceselor de luare a deciziilor.

ChatDev își propune să rezolve aceste probleme și să faciliteze modelelor LLM puterea de a crea aplicații software de ultimă generație și eficiente, prin crearea unei companii virtuale pentru dezvoltarea de software care stabilește modelul cascade și împarte procesul de dezvoltare a software-ului în patru etape principale,

1. Proiectarea.
2. Codificarea.
3. Testarea.
4. Documentația.

Fiecare dintre aceste etape utilizează o echipă de agenți virtuali, cum ar fi programatori de cod sau testatori, care colaborează între ei utilizând dialoguri care rezultă într-un flux de lucru fără întreruperi. Mai mult, ChatDev utilizează un lanț de conversații care funcționează ca un facilitator și împarte fiecare etapă a procesului de dezvoltare în sarcini subatomice, permițând astfel roluri duale, propuneri și validări de soluții utilizând comunicări conștiente de context care permit dezvoltatorilor să rezolve eficient sarcinile subatomice specificate.

În această abordare, cadrelul ChatDev analizează mai întâi cerințele clientului, generează idei creative, proiectează și implementează sisteme de prototip, identifică și abordează problemele potențiale, creează grafică atractivă, explică informațiile de depanare și generează manualele utilizatorului. În final, cadrelul ChatDev livrează software-ul utilizatorului, împreună cu codul sursă, manualele utilizatorului și specificațiile mediului de dependență.

ChatDev : Arhitectură și Funcționare

Acum că am prezentat o introducere în ChatDev, să aruncăm o privire asupra arhitecturii și funcționării cadrelului ChatDev, începând cu lanțul de conversații.

Lanțul de Conversații

Așa cum am menționat în secțiunea anterioară, cadrelul ChatDev utilizează o metodă cascade pentru dezvoltarea de software care împarte procesul de dezvoltare a software-ului în patru faze, incluzând proiectarea, codificarea, testarea și documentația. Fiecare dintre aceste faze are un rol unic în procesul de dezvoltare și există o nevoie de comunicare eficientă între ele, iar există provocări potențiale atunci când se identifică indivizi pentru a se implica și se determină secvența interacțiunilor.

Pentru a aborda această problemă, cadrelul ChatDev utilizează lanțul de conversații, o arhitectură generalizată care împarte fiecare fază în sarcini subatomice de conversație, cu fiecare dintre aceste faze axate pe roluri orientate spre sarcini care implică roluri duale. Rezultatul dorit pentru conversație reprezintă o componentă vitală pentru software-ul țintă și este obținut ca urmare a colaborării și a schimbului de instrucțiuni între agenții care participă la procesul de dezvoltare. Paradigma lanțului de conversații pentru rezolvarea sarcinilor intermediare este ilustrată în imaginea de mai jos.

Pentru fiecare conversație individuală, un instructor inițializează instrucțiunile și apoi conduce dialogul spre finalizarea sarcinii, iar în același timp, asistenții urmează instrucțiunile stabilite de instructor, oferă soluții ideale și se implică în discuții despre fezabilitatea soluției. Instructorul și agentul se implică apoi în dialoguri multi-turn până când ajung la un consens și consideră sarcina ca fiind finalizată cu succes. Lanțul de conversații oferă utilizatorilor o vedere transparentă asupra procesului de dezvoltare, aruncă lumină asupra drumului de luare a deciziilor și oferă oportunități de depanare a erorilor atunci când apar, ceea ce permite utilizatorilor finali să analizeze și să diagnostice erorile, să inspecteze ieșirile intermediare și să intervină în proces dacă este necesar. Prin încorporarea unui lanț de conversații, cadrelul ChatDev poate se concentreze pe fiecare sarcină subatomică la scară granulară, ceea ce nu numai că facilitează o colaborare eficientă între agenți, dar rezultă și în obținerea rapidă a ieșirilor necesare.

Proiectarea

În faza de proiectare, cadrelul ChatDev necesită o idee inițială ca intrare de la clientul uman, iar există trei roluri predefinite în această etapă.

1. CEO sau Director General.
2. CPO sau Director de Produs.
3. CTO sau Director Tehnic.

Lanțul de conversații intră apoi în joc, împărțind faza de proiectare în sarcini subatomice de conversație, care includ limbajul de programare (CTO și CEO) și modalitatea software-ului țintă (CPO și CEO). Faza de proiectare implică trei mecanisme cheie: atribuirea rolului, fluxul de memorie și auto-reflexia.

Atribuirea Rolului

Fiecare agent din cadrelul ChatDev este atribuit un rol utilizând mesaje speciale sau prompturi speciale în timpul procesului de atribuire a rolului. În contrast cu alte modele de limbaj conversațional, cadrelul ChatDev se limitează la inițierea scenariilor de atribuire a rolului între agenți. Aceste prompturi sunt utilizate pentru a atribui roluri agenților înainte de dialoguri.

Inițial, instructorul preia responsabilitățile CEO și se implică în planificarea interactivă, în timp ce responsabilitățile CPO sunt gestionate de agentul care execută sarcinile și oferă răspunsurile necesare. Cadrelul utilizează “promptarea de inițiere” pentru specializarea rolului, ceea ce permite agenților să își îndeplinească rolurile în mod eficient. Prompturile instructorului și ale agentului conțin detalii vitale referitoare la rolurile și sarcinile desemnate, criteriile de terminare, protocoalele de comunicare și numeroase constrângeri care vizează prevenirea comportamentelor nedorite, cum ar fi bucle infinite, răspunsuri neinformative și redundanța instrucțiunilor.

Fluxul de Memorare

Fluxul de memorare este un mecanism utilizat de cadrelul ChatDev care menține o înregistrare conversațională cuprinzătoare a dialogurilor anterioare ale unui agent și asistă în procesul de luare a deciziilor care urmează într-un mod conștient de enunțuri. Cadrelul ChatDev utilizează prompturi pentru a stabili protocoalele de comunicare necesare. De exemplu, atunci când părțile implicate ajung la un consens, un mesaj de final care îndeplinește un anumit format de cerință (cum ar fi (<MODALITATE>: Aplicație Desktop)). Pentru a asigura conformitatea cu formatul desemnat, cadrelul monitorizează continuu și, în final, permite dialogului curent să ajungă la o concluzie.

Auto-Reflexia

Dezvoltatorii cadrelului ChatDev au observat situații în care ambele părți implicate au ajuns la un consens, dar protocoalele de comunicare predefinite nu au fost declanșate. Pentru a aborda aceste probleme, cadrelul ChatDev introduce un mecanism de auto-reflexie care ajută la recuperarea și extragerea amintirilor. Pentru a implementa mecanismul de auto-reflexie, cadrelul ChatDev inițializează o nouă conversație prin înscrierea “pseudo-sine” ca o nouă întrebare. “Pseudo-sine” analizează dialogurile și înregistrările istorice anterioare și informează asistentul curent, după care solicită un rezumat al informațiilor concludente și demne de acțiune, așa cum se demonstrează în figura de mai jos.

Cu ajutorul mecanismului de auto-ajutor, asistentul ChatDev este încurajat să reflecteze și să analizeze deciziile pe care le-a propus.

Codificarea

Există trei roluri predefinite în faza de codificare, și anume CTO, programator și designer grafic. Ca de obicei, lanțul de conversații divide faza de codificare în sarcini subatomice, cum ar fi generarea codului (programator și CTO) sau proiectarea unei interfețe grafice cu utilizatorul (programator și designer). CTO instruiește programatorul să utilizeze formatul markdown pentru a implementa un sistem software, după care designerul grafic propune o interfață grafică cu utilizatorul prietenoasă și interactivă care utilizează icoane grafice pentru a interacționa cu utilizatorii, mai degrabă decât a se baza pe comenzi textuale tradiționale.

Managementul Codului

Cadrelul ChatDev utilizează limbaje de programare orientate pe obiecte, cum ar fi Python, Java și C++, pentru a gestiona sisteme software complexe, deoarece modularitatea acestor limbaje de programare permite utilizarea obiectelor autonome care nu numai că ajută la depanare, dar și la dezvoltarea colaborativă și, de asemenea, ajută la eliminarea redundanțelor prin reutilizarea obiectelor prin conceptul de moștenire.

Instrucțiunile Gândirii

Metodele tradiționale de răspuns la întrebări pot duce la informații irelevante sau inexacte, în special atunci când se generează cod, deoarece furnizarea de instrucțiuni naive poate duce la halucinații LLM și poate deveni o problemă dificilă. Pentru a aborda această problemă, cadrelul ChatDev introduce mecanismul “instrucțiunilor gândirii” care se inspiră din prompturile lanțului de gândire. Mecanismul “instrucțiunilor gândirii” abordează în mod explicit gândurile individuale de rezolvare a problemelor incluse în instrucțiuni, asemănător cu rezolvarea sarcinilor într-o manieră secvențială și organizată.

Testarea

Scrierea unui cod fără erori la prima încercare este o provocare nu numai pentru modelele LLM, ci și pentru programatorii umani, și, mai degrabă decât a se renunța complet la codul incorect, programatorii analizează codul lor pentru a identifica erorile și a le corecta. Faza de testare din cadrelul ChatDev este împărțită în trei roluri: programator, testator și revizor. Procesul de testare este ulterior împărțit în două sarcini subatomice secvențiale: Revizuirea sau Debugarea Statică (Revizor și Programator), și Testarea Sistemului sau Debugarea Dinamică (Programator și Testator). Debugarea statică sau revizuirea analizează codul sursă pentru a identifica erorile, în timp ce debugarea dinamică sau testarea sistemului verifică execuția software-ului prin diverse teste care sunt efectuate utilizând un interpretor de către programator. Debugarea dinamică se concentrează în primul rând pe testarea cutiei negre pentru a evalua aplicațiile.

Documentația

După ce cadrelul ChatDev finalizează fazele de proiectare, codificare și testare, el utilizează patru agenți, și anume CEO, CTO, CPO și Programator, pentru a genera documentația pentru proiectul software. Cadrelul ChatDev utilizează modele LLM pentru a valorifica prompturile cu exemple în context pentru a genera documentele. CTO instruiește programatorul să furnizeze instrucțiunile pentru configurarea dependențelor de mediu și să creeze un document precum “cerințe de dependență.txt”. În același timp, cerințele și proiectarea sistemului sunt comunicate CPO de către CEO pentru a genera manualul utilizatorului pentru produs.

Rezultate

Statistici Software

Pentru a analiza performanța cadrelului ChatDev, echipa de dezvoltatori a efectuat o analiză statistică a aplicațiilor software generate de cadru pe baza unor metrici cheie, incluzând tokeni consumați, număr total de dialoguri, active grafice, fișiere software, actualizări de versiune și multe altele, iar rezultatele sunt prezentate în tabelul de mai jos.

Analiză Durată

Pentru a examina timpul de producție al ChatDev pentru software în funcție de diverse prompturi de solicitare, dezvoltatorii au efectuat, de asemenea, o analiză a duratei, iar diferența în timpul de dezvoltare pentru diverse prompturi reflectă claritatea și complexitatea variabilă a sarcinilor atribuite, iar rezultatele sunt prezentate în figura de mai jos.

Studiu de Caz

Figura de mai jos demonstrează ChatDev dezvoltând un joc de cinci în rând sau Gomoku.

Figura din stânga demonstrează software-ul de bază creat de cadru fără a utiliza o interfață grafică cu utilizatorul. Așa cum se poate vedea clar, aplicația fără o interfață grafică cu utilizatorul oferă o interactivitate limitată, iar utilizatorii pot juca acest joc doar prin terminalul de comandă. Următoarea figură demonstrează un joc mai atractiv creat cu ajutorul unei interfețe grafice cu utilizatorul, oferind o experiență de utilizator mai bună și o interactivitate îmbunătățită pentru un mediu de joc captivant care poate fi savurat mult mai mult de către utilizatori. Agentul designer creează apoi grafică suplimentară pentru a îmbunătăți și mai mult utilitatea și estetica jocului fără a afecta funcționalitatea software-ului în niciun fel. Cu toate acestea, dacă utilizatorii umani nu sunt mulțumiți de imaginea generată de designer, ei pot înlocui imaginile după ce cadrelul ChatDev a finalizat software-ul. Flexibilitatea oferită de cadrelul ChatDev de a înlocui manual imaginile permite utilizatorilor să personalizeze aplicațiile în funcție de preferințele lor pentru o interactivitate și o experiență de utilizator îmbunătățită, fără a afecta funcționalitatea software-ului în niciun fel.

Gânduri Finale

În acest articol, am discutat despre ChatDev, o paradigmă inovatoare bazată pe LLM, care își propune să revoluționeze domeniul dezvoltării de software prin eliminarea necesității de modele specializate în fiecare etapă a procesului de dezvoltare. Cadrelul ChatDev își propune să valorifice capacitățile cadrelor LLM, utilizând comunicarea în limbaj natural pentru a unifica și a simplifica procesele cheie de dezvoltare a software-ului. Cadrelul ChatDev utilizează lanțul de conversații pentru a împărți procesul de dezvoltare a software-ului în sarcini subatomice, permițând astfel o focalizare granulară și promovând ieșiri dorite pentru fiecare sarcină subatomică.