ဆောင်းပါးတို AIOS- LLM အေးဂျင့်များအတွက် လည်ပတ်မှုစနစ် - Unite.AI
ကြှနျုပျတို့နှငျ့အတူချိတ်ဆက်ပါ

ဉာဏ်ရည်တု

AIOS- LLM အေးဂျင့်များအတွက် လည်ပတ်မှုစနစ်

mm

Published

 on

AIOS- LLM အေးဂျင့်များအတွက် လည်ပတ်မှုစနစ်

လွန်ခဲ့သည့်ဆယ်စုနှစ်ခြောက်ခုအတွင်း၊ လည်ပတ်မှုစနစ်များသည် အခြေခံစနစ်များမှ ယနေ့ခေတ်စက်ပစ္စည်းများကို စွမ်းအားပေးသည့် ရှုပ်ထွေးပြီး အပြန်အလှန်အကျိုးပြုသည့် လည်ပတ်မှုစနစ်များအထိ တဖြည်းဖြည်း တိုးတက်ပြောင်းလဲလာခဲ့သည်။ အစပိုင်းတွင်၊ လည်ပတ်မှုစနစ်များသည် ဂိတ်ထိန်းချုပ်မှုနှင့် အသုံးပြုသူအဆင့် လုပ်ဆောင်ချက်များကဲ့သို့သော ကွန်ပျူတာ ဟာ့ဒ်ဝဲ၏ ဒွိဟ့ဒ်ဝဲများ၏ လုပ်ဆောင်နိုင်စွမ်းများကြားတွင် တံတားတစ်ခုအဖြစ် ဆောင်ရွက်ခဲ့သည်။ သို့သော် နှစ်များတစ်လျှောက်တွင်၊ ၎င်းတို့သည် ရိုးရှင်းသော အစုလိုက်အလုပ် စီမံဆောင်ရွက်သည့်စနစ်များမှ အလုပ်များစွာလုပ်ဆောင်ခြင်းနှင့် အချိန်ခွဲဝေခြင်းအပါအဝင် ပိုမိုခေတ်မီဆန်းပြားသော လုပ်ငန်းစဉ်စီမံခန့်ခွဲမှုနည်းပညာများအထိ ဖွံ့ဖြိုးတိုးတက်လာခဲ့သည်။ ဤတိုးတက်မှုများသည် ရှုပ်ထွေးများပြားလှသော အလုပ်များကို စီမံခန့်ခွဲရန် ခေတ်မီလည်ပတ်မှုစနစ်များကို လုပ်ဆောင်နိုင်စေခဲ့သည်။ Windows နှင့် MacOS ကဲ့သို့သော ဂရပ်ဖစ်အသုံးပြုသူ အင်တာဖေ့စ်များ (GUI) များကို မိတ်ဆက်ခြင်းသည် ခေတ်မီလည်ပတ်မှုစနစ်များကို ပိုမိုအသုံးပြုရလွယ်ကူစေပြီး အပြန်အလှန်အကျိုးသက်ရောက်စေကာ OS ဂေဟစနစ်ကိုလည်း runtime libraries များနှင့် ပြည့်စုံသော developer ကိရိယာအစုံအလင်ဖြင့် OS ဂေဟစနစ်ကို ချဲ့ထွင်စေသည်။

မကြာသေးမီက တီထွင်ဆန်းသစ်မှုများတွင် ပေါင်းစည်းမှုနှင့် အသုံးချမှုတို့ ပါဝင်သည်။ ကြီးမားသောဘာသာစကားမော်ဒယ်များ ဖြစ်နိုင်ခြေအသစ်များကိုသော့ဖွင့်ခြင်းဖြင့်အမျိုးမျိုးသောစက်မှုလုပ်ငန်းကိုတော်လှန်ခဲ့သော (LLMs)။ မကြာသေးမီက၊ LLM အခြေပြု ဉာဏ်ရည်ထက်မြက်သော အေးဂျင့်များသည် အလုပ်များစွာတွင် လူသားနှင့်တူသော စွမ်းဆောင်ရည်ကို ရရှိပြီး ထူးထူးခြားခြား စွမ်းဆောင်ရည်များကို ပြသခဲ့ကြသည်။ သို့သော်လည်း ဤအေးဂျင့်များသည် ဖွံ့ဖြိုးတိုးတက်မှု၏အစောပိုင်းအဆင့်တွင်ရှိနေဆဲဖြစ်ပြီး လက်ရှိနည်းပညာများသည် ၎င်းတို့၏စွမ်းဆောင်ရည်နှင့် ထိရောက်မှုကို ထိခိုက်စေသည့် စိန်ခေါ်မှုများစွာကို ရင်ဆိုင်နေကြရသည်။ ဘုံပြဿနာများတွင် ကြီးမားသောဘာသာစကားမော်ဒယ်အတွက် အေးဂျင့်တောင်းဆိုမှုများကို အကောင်းဆုံးအချိန်ဇယားဆွဲခြင်း၊ မတူညီသော အထူးပြုမှုများဖြင့် အေးဂျင့်များကို ပေါင်းစပ်ရာတွင် ရှုပ်ထွေးမှုများ၊ LLM နှင့် အေးဂျင့်ကြား အပြန်အလှန်ဆက်သွယ်မှုများအတွင်း အကြောင်းအရာကို ထိန်းသိမ်းခြင်းတို့ ပါဝင်ပါသည်။ LLM အခြေပြု အေးဂျင့်များ၏ လျင်မြန်စွာ ဖွံ့ဖြိုးတိုးတက်မှုနှင့် ရှုပ်ထွေးမှုများ တိုးလာခြင်းသည် ပိတ်ဆို့မှုများနှင့် အကောင်းဆုံး အရင်းအမြစ်ခွဲများကို အသုံးပြုခြင်းဆီသို့ ဦးတည်သွားလေ့ရှိသည်။

အဆိုပါစိန်ခေါ်မှုများကိုဖြေရှင်းရန်၊ ဤဆောင်းပါးတွင်၊ လည်ပတ်မှုစနစ်၏ 'ဦးနှောက်' အဖြစ် ကြီးမားသောဘာသာစကားမော်ဒယ်များကို ပေါင်းစပ်ရန် ဒီဇိုင်းထုတ်ထားသည့် LLM အေးဂျင့်လည်ပတ်မှုစနစ် AIOS ကို ထိရောက်စွာ 'ဝိညာဉ်' ပေးစွမ်းရန် ဆွေးနွေးပါမည်။ အထူးသဖြင့် AIOS မူဘောင်သည် အေးဂျင့်များတစ်လျှောက် ဆက်စပ်ပြောင်းလဲမှုကို လွယ်ကူချောမွေ့စေရန် ရည်ရွယ်သည်၊ အရင်းအမြစ်ခွဲဝေမှုကို ပိုကောင်းအောင်ပြုလုပ်ရန်၊ အေးဂျင့်များအတွက် ကိရိယာဝန်ဆောင်မှုများ ပေးဆောင်ရန်၊ ဝင်ရောက်ထိန်းချုပ်မှုကို ထိန်းသိမ်းရန်နှင့် အေးဂျင့်များ၏ တစ်ပြိုင်နက်လုပ်ဆောင်မှုကို လုပ်ဆောင်နိုင်စေရန် ရည်ရွယ်သည်။ ကျွန်ုပ်တို့သည် ၎င်း၏ယန္တရားများ၊ နည်းစနစ်များနှင့် ဗိသုကာပညာများကို ရှာဖွေကာ AIOS မူဘောင်ကို နက်ရှိုင်းစွာ နက်ရှိုင်းစွာ စူးစမ်းလေ့လာပြီး ခေတ်မီသော မူဘောင်များနှင့် နှိုင်းယှဉ်ပါမည်။ ငုပ်ကြစို့။

ကြီးမားသောဘာသာစကားမော်ဒယ်များတွင် ထူးထူးခြားခြားအောင်မြင်မှုရရှိပြီးနောက်၊ AI နှင့် ML လုပ်ငန်း၏နောက်ထပ်အာရုံစိုက်မှုသည် လွတ်လပ်စွာလုပ်ဆောင်နိုင်သည်၊ ၎င်းတို့ကိုယ်တိုင်ဆုံးဖြတ်ချက်များချနိုင်သော၊ လူသား၏ဝင်ရောက်စွက်ဖက်မှုအနည်းငယ်ဖြင့် လုပ်ဆောင်နိုင်သော ကိုယ်ပိုင်အုပ်ချုပ်ခွင့်ရ AI အေးဂျင့်များကို တီထွင်ရန်ဖြစ်သည်။ ဤ AI-based intelligent agents များသည် လူသားလမ်းညွှန်ချက်များကို နားလည်ရန်၊ လုပ်ဆောင်ရန်၊ အချက်အလက်များကို ချမှတ်ရန်၊ ဆုံးဖြတ်ချက်များချရန်နှင့် ကိုယ်ပိုင်အုပ်ချုပ်ခွင့်ရပြည်နယ်တစ်ခုရရှိရန် သင့်လျော်သောလုပ်ဆောင်ချက်များကို လုပ်ဆောင်ရန် ဒီဇိုင်းထုတ်ထားပြီး ကြီးမားသောဘာသာစကားပုံစံများ ပေါ်ပေါက်လာခြင်းနှင့် ဖွံ့ဖြိုးတိုးတက်မှုသည် ဤကိုယ်ပိုင်အုပ်ချုပ်ခွင့်ရအေးဂျင့်များ၏ ဖွံ့ဖြိုးတိုးတက်မှုအတွက် ဖြစ်နိုင်ခြေအသစ်များကို ယူဆောင်လာစေရန် ဒီဇိုင်းထုတ်ထားပါသည်။ DALL-E၊ GPT နှင့် အခြားအရာများ အပါအဝင် လက်ရှိ LLM မူဘောင်များသည် လူ့ညွှန်ကြားချက်များ၊ ကျိုးကြောင်းဆင်ခြင်ခြင်းနှင့် ပြဿနာဖြေရှင်းခြင်းစွမ်းရည်များကို နားလည်ရန်နှင့် ပြင်ပပတ်ဝန်းကျင်များနှင့်အတူ လူသားအသုံးပြုသူများနှင့် အပြန်အလှန်ဆက်ဆံခြင်းတို့ကို သိသာထင်ရှားသောစွမ်းရည်ပြသထားသည်။ ဤအစွမ်းထက်ပြီး စွမ်းဆောင်နိုင်သော ကြီးမားသောဘာသာစကားမော်ဒယ်များပေါ်တွင် တည်ဆောက်ထားသည့် LLM-based အေးဂျင့်များသည် virtual assistant မှသည် ပြဿနာဖြေရှင်းခြင်း၊ ကျိုးကြောင်းဆင်ခြင်ခြင်း၊ စီစဉ်ခြင်းနှင့် အကောင်အထည်ဖော်ခြင်းဆိုင်ရာ ပိုမိုရှုပ်ထွေးပြီး ရှုပ်ထွေးသောစနစ်များအထိ ကွဲပြားသောပတ်ဝန်းကျင်များတွင် ပြင်းထန်သောလုပ်ငန်းတာဝန်များကို ဖြည့်ဆည်းပေးနိုင်စွမ်းရှိသည်။ 

အထက်ဖော်ပြပါပုံသည် LLM အခြေပြု ကိုယ်ပိုင်အုပ်ချုပ်ခွင့်ရအေးဂျင့်သည် လက်တွေ့ကမ္ဘာ၏လုပ်ဆောင်စရာများကို ဖြေရှင်းနိုင်ပုံ၏ ဆွဲဆောင်မှုရှိသော ဥပမာတစ်ခုပေးသည်။ အသုံးပြုသူသည် ခရီးစဉ်အချက်အလက်တစ်ခုအတွက် စနစ်ကို တောင်းဆိုပြီး ခရီးသွားအေးဂျင့်မှ လုပ်ဆောင်စရာကို အကောင်အထည်ဖော်နိုင်သော အဆင့်များအဖြစ် ပိုင်းခြားထားသည်။ ထို့နောက် အေးဂျင့်သည် အဆင့်များကို ဆင့်ကဲလုပ်ဆောင်သည်၊ လေယာဉ်ခရီးစဉ်များ ကြိုတင်မှာယူမှု၊ ဟိုတယ်များကို ကြိုတင်မှာယူမှု၊ ငွေပေးချေမှုများ လုပ်ဆောင်ခြင်းနှင့် အခြားအရာများကို လုပ်ဆောင်သည်။ အဆင့်များကို လုပ်ဆောင်နေစဉ်၊ သမားရိုးကျ ဆော့ဖ်ဝဲလ်အပလီကေးရှင်းများမှ ဤအေးဂျင့်များကို ခွဲခြားသတ်မှတ်ပေးသည့်အရာမှာ အေးဂျင့်များ၏ ဆုံးဖြတ်ချက်ချနိုင်စွမ်းကို ပြသရန်နှင့် အဆင့်များကို အကောင်အထည်ဖော်ရာတွင် ကျိုးကြောင်းဆင်ခြင်မှုကို ပေါင်းစပ်ထည့်သွင်းခြင်းဖြစ်သည်။ ဤအရည်အသွေးများတွင် ကိန်းဂဏန်းကြီးထွားမှုနှင့်အတူ၊ ကိုယ်ပိုင်အုပ်ချုပ်ခွင့်ရအေးဂျင့်များကြီးမားသော ဘာသာစကားမော်ဒယ်များ၏ လုပ်ဆောင်နိုင်စွမ်းများနှင့် လည်ပတ်မှုစနစ်များတွင် တင်းမာမှု တိုးလာသည်ကို မြင်တွေ့ရပြီး အလားတူ ဥပမာတစ်ခုမှာ ကန့်သတ်ကြီးမားသော ဘာသာစကားမော်ဒယ်များတွင် ကိုယ်စားလှယ်တောင်းဆိုမှုများကို ဦးစားပေးခြင်းနှင့် အချိန်ဇယားဆွဲခြင်းသည် သိသာထင်ရှားသော စိန်ခေါ်မှုတစ်ခုဖြစ်သည်။ ထို့အပြင်၊ ကြီးမားသောဘာသာစကားမော်ဒယ်များ၏ မျိုးဆက်လုပ်ငန်းစဉ်သည် ရှည်လျားသောအကြောင်းအရာများကို ကိုင်တွယ်ဖြေရှင်းရာတွင် အချိန်ကုန်ရမည့်တာဝန်ဖြစ်လာသောကြောင့်၊ အစီအစဉ်ဆွဲသူသည် ရလဒ်မျိုးဆက်ကို ဆိုင်းငံ့ထားနိုင်ပြီး ဘာသာစကားမော်ဒယ်၏ လက်ရှိမျိုးဆက်ရလဒ်ကို လျှပ်တစ်ပြက်ရိုက်ယူရန် ယန္တရားတစ်ခုဖန်တီးရန် ပြဿနာကို ပေါ်ပေါက်စေသည်။ . ၎င်းကြောင့် ကြီးမားသောဘာသာစကားမော်ဒယ်သည် လက်ရှိတောင်းဆိုချက်အတွက် တုံ့ပြန်မှုမျိုးဆက်ကို အပြီးသတ်မပြီးသောအခါတွင် ခေတ္တရပ်/ပြန်စသည့် အပြုအမူကို ဖွင့်ထားသည်။ 

အထက်တွင်ဖော်ပြထားသောစိန်ခေါ်မှုများကိုဖြေရှင်းရန်အတွက် AIOS၊ ကြီးမားသောဘာသာစကားမော်ဒယ်လည်ပတ်မှုစနစ်သည် LLM နှင့် OS လုပ်ဆောင်နိုင်စွမ်းများကို စုစည်းမှုနှင့် module များကို သီးခြားခွဲထုတ်ပေးပါသည်။ AIOS မူဘောင်သည် ကြီးမားသောဘာသာစကားမော်ဒယ်နှင့် မသက်ဆိုင်သော လုပ်ဆောင်စရာများကြားတွင် ဖြစ်ပေါ်လာနိုင်သည့် ပဋိပက္ခများကို ရှောင်ရှားရန် ကြိုးပမ်းရာတွင် LLM သီးသန့် kernel ဒီဇိုင်းကို အဆိုပြုပါသည်။ အဆိုပြုထားသော kernel သည် အထူးသဖြင့် LLM အေးဂျင့်များ၊ ဖွံ့ဖြိုးတိုးတက်ရေးကိရိယာကိရိယာများနှင့် ၎င်းတို့၏သက်ဆိုင်ရာအရင်းအမြစ်များကို ကြီးကြပ်သည့်တာဝန်များကဲ့သို့သော လုပ်ငန်းဆောင်ရွက်မှုစနစ်အား ခွဲခြားထားသည်။ ဤခွဲခြားမှု၏ရလဒ်အနေဖြင့် LLM kernel သည် LLMs များနှင့်ဆက်စပ်သောလုပ်ဆောင်မှုများ၏ညှိနှိုင်းမှုနှင့်စီမံခန့်ခွဲမှုကိုတိုးမြှင့်ရန်ကြိုးပမ်းသည်။ 

AIOS - နည်းစနစ်နှင့် ဗိသုကာပညာ

သင်သတိပြုနိုင်သကဲ့သို့ AIOS မူဘောင်၏လုပ်ဆောင်မှုတွင်ပါ ၀ င်သည့်အဓိကယန္တရားခြောက်ခုရှိသည်။ 

  • အေးဂျင့်စီစဉ်သူ: အေးဂျင့်အချိန်ဇယားဆွဲသူထံ တာဝန်ပေးအပ်သည့်တာဝန်မှာ ကြီးမားသောဘာသာစကားပုံစံကို အသုံးချမှုအား အကောင်းဆုံးဖြစ်အောင် ကြိုးပမ်းရာတွင် အေးဂျင့်တောင်းဆိုမှုများကို အချိန်ဇယားဆွဲရန်နှင့် ဦးစားပေးလုပ်ဆောင်ရန်ဖြစ်သည်။ 
  • ဆက်စပ်မန်နေဂျာ− ဆက်စပ်မန်နေဂျာအား တာဝန်ပေးအပ်သည့်တာဝန်မှာ ကြီးမားသောဘာသာစကားမော်ဒယ်ရှိ အလယ်အလတ်မျိုးဆက်အခြေအနေအား ပြန်လည်ရယူခြင်းနှင့်အတူ လျှပ်တစ်ပြက်ရိုက်ချက်များကို ပံ့ပိုးပေးရန်ဖြစ်ပြီး ကြီးမားသောဘာသာစကားမော်ဒယ်၏ ဆက်စပ်ဝင်းဒိုးစီမံခန့်ခွဲမှုကို လုပ်ဆောင်ရန်ဖြစ်သည်။ 
  • Memory Manager- မန်မိုရီမန်နေဂျာ၏ အဓိကတာဝန်မှာ အေးဂျင့်တစ်ခုစီအတွက် အပြန်အလှန်တုံ့ပြန်မှုမှတ်တမ်းအတွက် အချိန်တိုမှတ်ဉာဏ်ကို ပံ့ပိုးပေးရန်ဖြစ်သည်။ 
  • သိုလှောင်မှုမန်နေဂျာ: သိုလှောင်မှုမန်နေဂျာသည် အေးဂျင့်များ၏ အပြန်အလှန်တုံ့ပြန်မှုမှတ်တမ်းများကို အနာဂတ်ပြန်လည်ရယူရန်အတွက် ရေရှည်သိုလှောင်မှုဆီသို့ ဆက်လက်ထားရှိရန် တာဝန်ရှိသည်။ 
  • ကိရိယာမန်နေဂျာ: ကိရိယာမန်နေဂျာယန္တရားသည် အေးဂျင့်များ၏ခေါ်ဆိုမှုကို ပြင်ပ API ကိရိယာများသို့ စီမံခန့်ခွဲသည်။ 
  • Access Manager: ဝင်သုံးခွင့်မန်နေဂျာသည် အေးဂျင့်များအကြား ကိုယ်ရေးကိုယ်တာနှင့် ဝင်ရောက်ထိန်းချုပ်မှုဆိုင်ရာ မူဝါဒများကို ကျင့်သုံးသည်။ 

အထက်ဖော်ပြပါ ယန္တရားများအပြင် AIOS မူဘောင်တွင် အလွှာလိုက်တည်ဆောက်မှုပုံစံတစ်ခုပါ၀င်ပြီး အက်ပလီကေးရှင်းအလွှာ၊ ကာနယ်အလွှာနှင့် ဟာ့ဒ်ဝဲအလွှာတို့ကို အလွှာသုံးမျိုးခွဲထားသည်။ AIOS မူဘောင်မှ အကောင်အထည်ဖော်သည့် အလွှာလိုက်ဗိသုကာသည် တာဝန်များကို စနစ်တဝှမ်းတွင် အညီအမျှ ခွဲဝေပေးကြောင်း သေချာစေပြီး ၎င်းတို့အောက်ရှိ အလွှာများ၏ ရှုပ်ထွေးမှုများကို ထင်ရှားစေပြီး တိကျသော modules သို့မဟုတ် အင်တာဖေ့စ်များကို အသုံးပြု၍ အပြန်အလှန်ဆက်သွယ်မှုများ ပြုလုပ်နိုင်စေကာ၊ မော်ဂျူလာစွမ်းရည်ကို မြှင့်တင်ပေးပြီး စနစ်အချင်းချင်း အပြန်အလှန်တုံ့ပြန်မှုများကို ရိုးရှင်းစေသည်။ အလွှာများ။ 

အပလီကေးရှင်းအလွှာမှအစပြု၍ ဤအလွှာကို သင်္ချာ သို့မဟုတ် ခရီးသွားအေးဂျင့်များကဲ့သို့ အပလီကေးရှင်းအေးဂျင့်များ ဖော်ဆောင်ခြင်းနှင့် အသုံးချခြင်းအတွက် အသုံးပြုပါသည်။ အပလီကေးရှင်းအလွှာတွင်၊ AIOS မူဘောင်သည် AIOS ဆော့ဖ်ဝဲလ်ဖွံ့ဖြိုးတိုးတက်ရေးကိရိယာအစုံ (AIOS SDK) ကို အေးဂျင့်ဆော့ဖ်ဝဲရေးဆွဲသူများအတွက် ဖွံ့ဖြိုးတိုးတက်မှုလုပ်ငန်းစဉ်ကို ရိုးရှင်းလွယ်ကူစေမည့် စနစ်ခေါ်ဆိုမှုများ၏ မြင့်မားသော စိတ်ကူးစိတ်သန်းများကို ပံ့ပိုးပေးပါသည်။ AIOS မှ ပေးဆောင်သော ဆော့ဖ်ဝဲလ်ဖွံ့ဖြိုးတိုးတက်ရေးကိရိယာအစုံသည် အေးဂျင့်အပလီကေးရှင်းများ၏ ဖွံ့ဖြိုးတိုးတက်မှုကို လွယ်ကူချောမွေ့စေရန် ပြည့်စုံသောကိရိယာအစုံအလင်ဖြင့် ပံ့ပိုးပေးထားပြီး၊ ဆော့ဖ်ဝဲအင်ဂျင်နီယာများသည် ၎င်းတို့၏လုပ်ဆောင်နိုင်စွမ်းများနှင့် မရှိမဖြစ်လိုအပ်သော ယုတ္တိဗေဒများကို အာရုံစိုက်စေကာ ပိုမိုထိရောက်သော ဖွံ့ဖြိုးတိုးတက်မှုကို ဖြစ်ပေါ်စေသည်။ လုပ်ငန်းစဉ်။ 

ဆက်လက်၍ kernel အလွှာကို LLM kernel နှင့် OS kernel ဟူ၍ အစိတ်အပိုင်းနှစ်ခုအဖြစ် ထပ်မံခွဲခြားထားသည်။ OS kernel နှင့် LLM kernel နှစ်ခုစလုံးသည် LLM-specific နှင့် non LLM operations များ၏ ထူးခြားချက်အနေဖြင့် LLM kernel အား ကိုယ်စားလှယ်အချိန်ဇယားဆွဲခြင်းနှင့် အကြောင်းအရာစီမံခန့်ခွဲမှုအပါအဝင် ကြီးမားသောဘာသာစကားပုံစံအလိုက် လုပ်ဆောင်ချက်များကို အာရုံစိုက်လုပ်ဆောင်နိုင်စေခြင်း၊ လုပ်ဆောင်ချက်များကို ကိုင်တွယ်ရန်အတွက် မရှိမဖြစ်လိုအပ်သော လှုပ်ရှားမှုများ၊ ကြီးမားသောဘာသာစကားမော်ဒယ်များနှင့်ဆက်စပ်။ AIOS framework သည် ရှိပြီးသား OS kernel ၏ဖွဲ့စည်းပုံကို သိသိသာသာ ပြောင်းလဲခြင်းမရှိဘဲ ကြီးမားသောဘာသာစကားမော်ဒယ် kernel ကို မြှင့်တင်ရန် အဓိကအာရုံစိုက်ပါသည်။ LLM kernel တွင် အေးဂျင့်အချိန်ဇယားဆွဲသူ၊ မှတ်ဉာဏ်မန်နေဂျာ၊ ဆက်စပ်မန်နေဂျာ၊ သိုလှောင်မှုမန်နေဂျာ၊ ဝင်ရောက်ခွင့်မန်နေဂျာ၊ တူးလ်မန်နေဂျာနှင့် LLM စနစ်ခေါ်ဆိုမှု အင်တာဖေ့စ်တို့အပါအဝင် အဓိက module များစွာ တပ်ဆင်ထားပါသည်။ kernel အလွှာအတွင်းရှိ အစိတ်အပိုင်းများသည် ကွဲပြားသော လုပ်ဆောင်ချက်လိုအပ်ချက်များကို ဖြေရှင်းရန် ကြိုးပမ်းမှုတွင် ဒီဇိုင်းထုတ်ထားသည်။ အေးဂျင့်အက်ပလီကေးရှင်းများ၏ AIOS မူဘောင်အတွင်း ထိရောက်သော စီမံဆောင်ရွက်မှုနှင့် စီမံခန့်ခွဲမှုတို့ကို သေချာစေပါသည်။ 

နောက်ဆုံးတွင်၊ GPU၊ CPU၊ peripheral devices၊ disk နှင့် memory တို့အပါအဝင် စနစ်၏ ရုပ်ပိုင်းဆိုင်ရာ အစိတ်အပိုင်းများပါ၀င်သည့် ဟာ့ဒ်ဝဲအလွှာရှိသည်။ LLM kernels ၏ စနစ်သည် ဟာ့ဒ်ဝဲနှင့် တိုက်ရိုက် အပြန်အလှန် သက်ရောက်မှု မရှိနိုင်သည်ကို နားလည်ရန် လိုအပ်ပြီး အဆိုပါ ခေါ်ဆိုမှုများသည် ဟာ့ဒ်ဝဲ အရင်းအမြစ်များကို စီမံခန့်ခွဲသည့် လည်ပတ်မှုစနစ်၏ စနစ်ခေါ်ဆိုမှုများနှင့် ချိတ်ဆက်မှု ပြုလုပ်ရန် လိုအပ်ပါသည်။ LLM karnel ၏စနစ်နှင့် ဟာ့ဒ်ဝဲရင်းမြစ်များကြား သွယ်ဝိုက်သောအပြန်အလှန်ဆက်သွယ်မှုသည် လုံခြုံရေးနှင့် စိတ်ကူးယဉ်အလွှာတစ်ခုကို ဖန်တီးပေးသည်၊၊ LLM kernel သည် ဟာ့ဒ်ဝဲအရင်းအမြစ်များကို တိုက်ရိုက်စီမံခန့်ခွဲရန်မလိုအပ်ဘဲ၊ စနစ်၏ခိုင်မာမှုနှင့် ထိရောက်မှုတို့ကို ပြုပြင်ထိန်းသိမ်းရန် လွယ်ကူချောမွေ့စေပါသည်။ . 

အကောင်အထည်ဖော်ရေး

အထက်တွင်ဖော်ပြခဲ့သည့်အတိုင်း AIOS မူဘောင်ကိုလုပ်ဆောင်ရာတွင် အဓိကယန္တရားခြောက်ခုရှိသည်။ အေးဂျင့်အချိန်ဇယားဆွဲသူသည် အေးဂျင့်တောင်းဆိုမှုများကို ထိရောက်စွာစီမံခန့်ခွဲနိုင်သည့်နည်းလမ်းဖြင့် ဒီဇိုင်းထုတ်ထားပြီး၊ အေးဂျင့်သည် လုပ်ဆောင်စရာများကို တူညီသောအဆင့်များဖြင့် တူညီသောအဆင့်များဖြင့် လုပ်ဆောင်သည့် အစဉ်အလာအတိုင်း ဆက်တိုက်လုပ်ဆောင်မှုဆိုင်ရာ စံနှုန်းတစ်ခုနှင့် ဆန့်ကျင်သည့် လုပ်ဆောင်မှုအဆင့်များစွာရှိသည်။ အေးဂျင့်သည် နောက်အေးဂျင့်သို့ မပြောင်းမီ ပထမဦးစွာ စီမံဆောင်ရွက်နေသည်၊ ရလဒ်အနေဖြင့် လုပ်ဆောင်မှုအပိုင်းတွင် နောက်ပိုင်းတွင် လုပ်ဆောင်စရာများ စောင့်ဆိုင်းရမည့်အချိန်များ တိုးလာပါသည်။ အေးဂျင့်အချိန်ဇယားဆွဲသူသည် Round Robin၊ First In First Out နှင့် လုပ်ငန်းစဉ်ကို အကောင်းဆုံးဖြစ်အောင်လုပ်ဆောင်ရန် အခြားအချိန်ဇယားဆွဲသည့် အယ်လဂိုရီသမ်များကဲ့သို့ ဗျူဟာများကို အသုံးပြုထားသည်။ 

ဆက်စပ်မန်နေဂျာသည် ကြီးမားသောဘာသာစကားပုံစံအတွက် ပံ့ပိုးပေးထားသည့် ဆက်စပ်အကြောင်းအရာကို စီမံခန့်ခွဲရန် တာဝန်ရှိသည့်နည်းလမ်းဖြင့် ဒီဇိုင်းထုတ်ထားပြီး အချို့သောအကြောင်းအရာများကို ပေးဆောင်သည့် မျိုးဆက်လုပ်ငန်းစဉ်။ ဆက်စပ်မန်နေဂျာတွင် အရေးကြီးသော အစိတ်အပိုင်းနှစ်ခုပါဝင်သည်- ဆက်စပ်လျှပ်တစ်ပြက်ရိုက်ချက်နှင့် ပြန်လည်ထူထောင်ရေးနှင့် ဆက်စပ်ဝင်းဒိုးစီမံခန့်ခွဲမှု။ AIOS မူဘောင်မှ ပေးဆောင်ထားသော ဆက်စပ်လျှပ်တစ်ပြက်ပုံနှင့် ပြန်လည်ထူထောင်ရေးယန္တရားသည် အောက်ပါပုံတွင်ပြထားသည့်အတိုင်း အေးဂျင့်တောင်းဆိုမှုများကို အချိန်ဇယားရေးဆွဲသူမှ ဆိုင်းငံ့ထားသည့် အခြေအနေများကို လျော့ပါးသက်သာစေရန် ကူညီပေးပါသည်။ 

အောက်ဖော်ပြပါပုံတွင် သရုပ်ပြထားသည့်အတိုင်း၊ အေးဂျင့်၏ဘဝစက်ဝန်းအတွင်း ရေတိုမှတ်ဉာဏ်ကို စီမံခန့်ခွဲရန် မန်မိုရီမန်နေဂျာ၏ တာဝန်ဖြစ်ပြီး ၎င်းသည် လုပ်ဆောင်နေချိန်အတွင်း သို့မဟုတ် အေးဂျင့်က စောင့်ဆိုင်းနေချိန်တွင် ဒေတာကို သိမ်းဆည်းပြီး ဝင်ရောက်နိုင်သည်ကို သေချာစေသည် ကွပ်မျက်ခြင်းအတွက်။ 

အခြားတစ်ဖက်တွင်၊ သိုလှောင်မှုမန်နေဂျာသည် ဒေတာကိုရေရှည်ထိန်းသိမ်းရန် တာဝန်ရှိသည်၊ ၎င်းသည် အေးဂျင့်တစ်ဦးချင်းစီ၏ လုပ်ဆောင်မှုသက်တမ်းထက် အချိန်အကန့်အသတ်မရှိ အချိန်ကာလတစ်ခုအထိ ထိန်းသိမ်းထားရန်လိုအပ်သည့် အချက်အလက်သိုလှောင်မှုကို ကြီးကြပ်သည်။ AISO မူဘောင်သည် cloud-based ဖြေရှင်းချက်များ၊ ဒေတာဘေ့စ်များနှင့် ဒေသဆိုင်ရာဖိုင်များ အပါအဝင် တာရှည်ခံမီဒီယာမျိုးစုံကို အသုံးပြု၍ ဒေတာရရှိနိုင်မှုနှင့် ခိုင်မာမှုကို သေချာစေသည်။ ထို့အပြင် AISO မူဘောင်တွင်၊ ၎င်းသည် ကြီးမားသောဘာသာစကားမော်ဒယ်များ၏ လုပ်ဆောင်နိုင်စွမ်းကို မြှင့်တင်ပေးသည့် ကွဲပြားသော API ကိရိယာများကို စီမံခန့်ခွဲသည့် ကိရိယာမန်နေဂျာဖြစ်ပြီး၊ အောက်ပါဇယားသည် ကိရိယာမန်နေဂျာသည် အသုံးများသော အရင်းအမြစ်များစွာမှ အမျိုးမျိုးသော ကိရိယာများကို ပေါင်းစပ်ပြီး ၎င်းတို့ကို အမျိုးအစားခွဲပုံတို့ကို အကျဉ်းချုံ့ထားသည်။ ကွဲပြားခြားနားသောအမျိုးအစားများထဲသို့။ 

ဝင်သုံးခွင့်မန်နေဂျာသည် ကွဲပြားစွာအတွင်း ဝင်ရောက်ထိန်းချုပ်မှုဆိုင်ရာ လုပ်ဆောင်ချက်များကို စီစဉ်ပေးသည်။ အေးဂျင့်များ အေးဂျင့်တစ်ခုစီအတွက် အထူးအခွင့်အရေးအုပ်စုတစ်ခုကို စီမံခန့်ခွဲခြင်းဖြင့်၊ အေးဂျင့်၏အခွင့်ထူးအုပ်စုမှ ဖယ်ထုတ်ခံရပါက ၎င်း၏အရင်းအမြစ်များသို့ အေးဂျင့်ဝင်ရောက်ခွင့်ကို ငြင်းပယ်ပါ။ ထို့အပြင်၊ စနစ်၏ပွင့်လင်းမြင်သာမှုကို ပိုမိုတိုးတက်ကောင်းမွန်လာစေမည့် စာရင်းစစ်မှတ်တမ်းများကို စုစည်းထိန်းသိမ်းရန်လည်း တာဝန်ရှိပါသည်။ 

AIOS - စမ်းသပ်မှုများနှင့် ရလဒ်များ

AIOS မူဘောင်၏ အကဲဖြတ်ခြင်းကို သုတေသနမေးခွန်းနှစ်ခုဖြင့် လမ်းညွှန်သည်- ပထမ၊ လက်ကျန်စောင့်ဆိုင်းချိန်နှင့် အလှည့်အပြောင်းအချိန်ကို တိုးတက်ကောင်းမွန်စေရာတွင် AIOS ၏ စွမ်းဆောင်ရည်ကို မည်သို့အချိန်ဇယားဆွဲထားသနည်း၊ ဒုတိယအနေနှင့်၊ အေးဂျင့်တောင်းဆိုချက်များကို ရပ်ဆိုင်းပြီးနောက် LLM ၏တုံ့ပြန်မှုသည် တသမတ်တည်းရှိမရှိ၊

လိုက်လျောညီထွေရှိသောမေးခွန်းများကိုဖြေဆိုရန် developer များသည် အေးဂျင့်သုံးမျိုးမှ တစ်ခုစီကို လုပ်ဆောင်ကြပြီး နောက်ပိုင်းတွင်၊ ဤအေးဂျင့်များကို အပြိုင်လုပ်ဆောင်ကာ အဆင့်တစ်ခုစီအတွင်း ၎င်းတို့၏ရလဒ်များကို ဖမ်းယူရန် ကြိုးစားကြသည်။ အောက်ဖော်ပြပါဇယားတွင် သရုပ်ပြထားသည့်အတိုင်း BERT နှင့် BLEU ရမှတ်များသည် 1.0 ၏တန်ဖိုးကိုရရှိပြီး single-agent နှင့် multi-agent configurations များတွင် ထုတ်လုပ်ထားသော outputs များကြား ပြီးပြည့်စုံသော ချိန်ညှိမှုကို ညွှန်ပြပါသည်။ 

ထိရောက်မှုရှိသောမေးခွန်းများကိုဖြေဆိုရန်အတွက် developer များသည် AIOS မူဘောင်ကို FIFO သို့မဟုတ် First In First Out အစီအစဉ်ဆွဲခြင်းနှင့် အေးဂျင့်များတစ်ပြိုင်တည်းလုပ်ဆောင်သည့် AIOS မူဘောင်အကြား နှိုင်းယှဉ်ခွဲခြမ်းစိတ်ဖြာမှုပြုလုပ်သည်။ အချိန်ဇယားမရှိသော ဆက်တင်တွင်၊ အေးဂျင့်များကို ကြိုတင်သတ်မှတ်ထားသော ဆင့်ကဲအစီအစဥ်ဖြင့် လုပ်ဆောင်သည်- သင်္ချာအေးဂျင့်၊ ဇာတ်ကြောင်းပြသည့် အေးဂျင့်နှင့် rec အေးဂျင့်။ ယာယီထိရောက်မှုကို အကဲဖြတ်ရန်၊ AIOS မူဘောင်တွင် စောင့်ဆိုင်းချိန်၊ နှင့် အလှည့်ကျအချိန်တို့ကို အသုံးပြုထားပြီး၊ အေးဂျင့်များသည် ကြီးမားသောဘာသာစကားပုံစံသို့ တောင်းဆိုချက်များစွာကို ပေးပို့သောကြောင့်၊ အေးဂျင့်တစ်ဦးချင်းစီအတွက် စောင့်ဆိုင်းချိန်နှင့် လှည့်ပြန်ချိန်ကို ပျမ်းမျှအဖြစ် တွက်ချက်သည်။ တောင်းဆိုချက်အားလုံးအတွက် စောင့်ဆိုင်းချိန်နှင့် အလှည့်အပြောင်းအချိန်။ အောက်ဖော်ပြပါဇယားတွင် သရုပ်ပြထားသည့်အတိုင်း၊ အချိန်ဇယားမဆွဲထားသော ချဉ်းကပ်မှုသည် စီးရီး၏အစောပိုင်း အေးဂျင့်များအတွက် ကျေနပ်ဖွယ်စွမ်းဆောင်ရည်ကို ပြသသည်၊ သို့သော် ဆက်တိုက်နောက်ပိုင်းတွင် အေးဂျင့်များအတွက် စောင့်ဆိုင်းချိန်နှင့် လှည့်ပတ်မှုအချိန်များကို ကြာမြင့်နေပါသည်။ အခြားတစ်ဖက်တွင်၊ AIOS မူဘောင်မှ အကောင်အထည်ဖော်သည့် အချိန်ဇယားဆွဲချဉ်းကပ်မှုသည် စောင့်ဆိုင်းချိန်နှင့် အလှည့်အပြောင်းအချိန်များကို ထိရောက်စွာ ထိန်းညှိပေးသည်။ 

နောက်ဆုံးထင်မြင်ချက်များ

ဤဆောင်းပါးတွင် ကျွန်ုပ်တို့သည် OS ၏ ဦးနှောက်အဖြစ် OS ထဲသို့ ကြီးမားသောဘာသာစကားမော်ဒယ်များကို ထည့်သွင်းရန် ကြိုးပမ်းမှုတွင် ဒီဇိုင်းထုတ်ထားသည့် LLM အေးဂျင့်လည်ပတ်မှုစနစ် AIOS အကြောင်း ဆွေးနွေးခဲ့ပြီးဖြစ်သည်။ ပိုမိုတိကျစေရန်အတွက် AIOS မူဘောင်သည် အေးဂျင့်များတစ်လျှောက် ဆက်စပ်ပြောင်းလဲမှုကို လွယ်ကူချောမွေ့စေရန် ရည်ရွယ်ချက်ဖြင့် ဒီဇိုင်းထုတ်ထားခြင်းဖြစ်ပြီး အရင်းအမြစ်ခွဲဝေမှုကို အကောင်းဆုံးဖြစ်အောင်၊ အေးဂျင့်များအတွက် ကိရိယာတန်ဆာပလာဝန်ဆောင်မှုပေးခြင်း၊ အေးဂျင့်များအတွက် ဝင်ရောက်ထိန်းချုပ်နိုင်စေရန်နှင့် အေးဂျင့်များ၏ တစ်ပြိုင်နက်လုပ်ဆောင်မှုကို လုပ်ဆောင်နိုင်စေရန် ရည်ရွယ်ချက်ဖြင့် ဒီဇိုင်းရေးဆွဲထားသည်။ AISO ဗိသုကာလက်ရာသည် ဖွံ့ဖြိုးတိုးတက်မှုနှင့် အသုံးချမှုကို လွယ်ကူချောမွေ့စေရန် အလားအလာများကို သရုပ်ပြသည်။ ကိုယ်ပိုင်အုပ်ချုပ်ခွင့်ရ အေးဂျင့်များကို အခြေခံထားသော ကြီးမားသော ဘာသာစကားပုံစံပိုမိုထိရောက်မှု၊ စည်းလုံးမှုနှင့် ထိရောက်သော AIOS-Agent ဂေဟစနစ်ကို ဖြစ်ပေါ်စေသည်။ 

"အသက်မွေးဝမ်းကြောင်းပြုသော အင်ဂျင်နီယာ၊ နှလုံးသားဖြင့် စာရေးဆရာ"။ Kunal သည် AI နှင့် ML တို့ကို နက်နက်ရှိုင်းရှိုင်း ချစ်မြတ်နိုးပြီး နားလည်မှုရှိသော နည်းပညာစာရေးဆရာတစ်ဦးဖြစ်ပြီး ဤနယ်ပယ်များရှိ ရှုပ်ထွေးသောအယူအဆများကို ရိုးရှင်းလွယ်ကူစေရန် ရည်ရွယ်၍ ၎င်း၏ပါဝင်ပတ်သက်မှုနှင့် သတင်းအချက်အလက်ဆိုင်ရာ စာရွက်စာတမ်းများမှတစ်ဆင့် သိရသည်။