Sean Mullaney, technologický riaditeľ spoločnosti Algolia – Séria rozhovorov

Sean Mullaney je technologický riaditeľ spoločnosti Algolia, komplexná platforma na vyhľadávanie a objavovanie poháňaná umelou inteligenciou.

Sean je bývalý výkonný riaditeľ spoločností Stripe a Google, ktorý má skúsenosti so škálovaním inžinierskych organizácií, vývojom nástrojov na vyhľadávanie a zisťovanie poháňaných umelou inteligenciou a globálnym rastom riešení s prvým rozhraním API. V spoločnosti Algolia dohliada na technológiu druhého najväčšieho vyhľadávacieho nástroja po Google, ktorý sa každoročne používa na viac ako 1.5 bilióna vyhľadávaní. Najnovšie viedol spustenie spoločnosti AlgoliaNeuralSearch – najrýchlejšie, hyper-škálovateľné a nákladovo efektívne rozhranie API na vyhľadávanie vektorov a kľúčových slov na svete.

Čo ťa na začiatku zaujalo na informatike?

Keď som mal 10 rokov, moji rodičia kúpili náš prvý počítač do domácnosti. Úplne prvá vec, ktorú som chcel urobiť, bolo zistiť, ako napísať textovú adventúru, ktorú som skopíroval z knihy. O niekoľko rokov neskôr som sa začal učiť C++, ale navrhovanie a zostavovanie počítačových hier zostalo mojou veľkou vášňou, keď som ako tínedžer len začínal objavovať informatiku.

Strávili ste viac ako 7 rokov v spoločnosti Google, kde ste pomáhali budovať a viesť tímy pracujúce na stratégii, operáciách, veľkých dátach a strojovom učení. Aký bol váš obľúbený projekt a čo ste sa z tejto skúsenosti naučili?

Prišli sme na to, ako využiť všetky veľké dáta, ktoré máme o tom, ako inzerenti používali naše produkty, aby sme pomohli predajným tímom. Napísali sme vyvinuté vlastné pravidlá (neskôr zložitejšie neurónové siete), aby sme predpovedali, ktorých zákazníkov by sme mali osloviť s akými produktmi a v ktorých časoch, aby sme maximalizovali pravdepodobnosť, že čas predajcu povedie k zvýšeniu výnosov. S viac ako 1 miliónom inzerentov na Googli tento nástroj výrazne pomohol predajným tímom nájsť ihly v kope sena.

V nedávnom závere DevBit ste opísali účel Algolie ako umožniť používateľom indexovať svet a uviesť obsah do pohybu. Mohli by ste upresniť, čo toto vyhlásenie znamená?

V konečnom dôsledku chceme našim zákazníkom pomôcť získať hodnotu z ich údajov. Internet vytvoril takú obrovskú explóziu obsahu a produktov elektronického obchodu, a hoci je tento vývoj určite významným míľnikom, obrovské množstvo informácií, ktoré sú teraz k dispozícii, znamená, že je tiež ťažšie ako kedykoľvek predtým – a čoraz ťažšie – nájsť to, čo v skutočnosti hľadáte ako používateľa. Keď je však vyhľadávanie a objavovanie poháňané umelou inteligenciou, k rastúcemu zoznamu obsahu možno inteligentne pristupovať a uviesť ho do pohybu, aby používateľom skutočne pomohol, nielen ich zahltil.

V septembri 2022 spoločnosť Algolia odkúpila Search.io a jej vlastný vlajkový produkt NeuralSearch™, môžete prediskutovať, čo konkrétne je táto vyhľadávacia technológia?

Stručne povedané, Algolia NeuralSearch integruje zhodu kľúčových slov s vektorovým spracovaním prirodzeného jazyka, poháňaným LLM, v jedinom API – ako prvé v odvetví. Riešenie zahŕňa našu vlastnú a prvú svojho druhu neurónovú hašovaciu techniku, vďaka ktorej je použitie vektorov škálovateľné a o 90 % efektívnejšie z hľadiska nákladov – s problémom, ktorému čelia iné spoločnosti s umelou inteligenciou vrátane ChatGPT. Na tomto prelomovom produkte je skutočne vzrušujúce to, že umožňuje škálovateľné skutočné vyhľadávanie AI pre organizácie na podnikovej úrovni.

Nová technológia tiež umožňuje zákazníkom, ako sú maloobchodníci, porozumieť a poskytnúť obsah, ktorý zodpovedá dopytom, ktoré sú zvyčajne príliš konverzačné na to, aby poskytli presné alebo akékoľvek výsledky (považované za dlhodobé). Tie tvoria 55 % aktuálnych vyhľadávaní na stránke. NeuralSearch ako jediné komplexné riešenie na vyhľadávanie AI, ktoré aplikuje AI na pochopenie dopytov, ich vyhľadávanie a hodnotenie, skutočne rozumie týmto dopytom a premení premeškané príležitosti na výnosy.

Aké ďalšie metódy strojového učenia sa okrem Neuralsearch™ používajú?

Začlenili sme AI do troch základných funkcií – porozumenie dotazom, vyhľadávanie dotazov a hodnotenie výsledkov. My v Algolii to nazývame sendvič vyhľadávania AI:

• Pochopenie dopytu: Pokročilé porozumenie prirodzeného jazyka (NLU) od spoločnosti Algolia a vektorové vyhľadávanie riadené AI poskytujú porozumenie výrazov voľnej formy v prirodzenom jazyku a kategorizáciu dopytov poháňanú AI, ktorá pripraví a štruktúruje dopyt na analýzu. Adaptívne učenie založené na spätnej väzbe používateľov navyše dolaďuje pochopenie zámeru.
• Získavanie: Potom sa získajú najrelevantnejšie výsledky a zoradia sa od najviac po najmenej relevantné. Proces vyhľadávania spája výsledky neurálneho hašovania paralelne s kľúčovými slovami pomocou rovnakého indexu pre jednoduché vyhľadávanie a hodnotenie. Tento prístup rieši problém „nulových výsledkov“ a výrazne zlepšuje pozície kliknutí a miery prekliknutia. Žiadna iná vyhľadávacia platforma v priestore vyhľadávania a objavovania neponúka túto výkonnú schopnosť.
• poradie: Nakoniec, najlepšie výsledky sú posunuté na vrchol vďaka prehodnoteniu Algolia založenému na AI, ktoré zohľadňuje mnohé signály spojené s vyhľadávacím dopytom (vrátane presného skóre zhody kľúčových slov, profilu kontextovej personalizácie, sledovanej popularity položiek , skóre sémantickej zhody atď.) a naučí sa dosiahnuť maximálnu relevantnosť.

Okrem toho, keď sa index mení, pridávajú sa nové produkty, nahráva sa nový obsah alebo ako výrazy nadobúdajú nový význam, produkt Algolia NeuralSearch s podporou AI sa automaticky naučí a prispôsobí. Nevyžaduje žiadny ďalší počet zamestnancov ani manuálne operácie. Automaticky priradí kľúčové slová alebo koncepty – prípadne kombináciu oboch – v závislosti od dopytu alebo hľadanej frázy. To skutočne dáva vyhľadávanie na autopilota.

Spoločnosť Algolia nedávno zvýšila svoj bezplatný plán z ponúkania 10000 1 záznamov a zvýšila ho na XNUMX milión záznamov. Aký bol spôsob myslenia a ako na to reagoval trh?

Špecificky sme sa rozhodli vyvinúť ceny a balenie spoločnosti Algolia tak, aby boli ešte priateľskejšie pre vývojárov zavedením dvoch nových plánov zameraných na vývojárov: plánu „vybudovania“, ktorý je bezplatný, a plánu „rastu“, ktorý ponúka jednoduchú škálovateľnosť za dostupné ceny. Nový plán Build zvyšuje počet bezplatných záznamov, ktoré môže vývojár uložiť v Algolii, z 10,000 1 na súčasných 100 milión záznamov. To predstavuje 50-násobný nárast v počte bezplatných záznamov, ktoré môžu vývojári teraz indexovať v Algolii. Okrem toho spoločnosť Algolia znížila náklady na žiadosti o vyhľadávanie vo svojom pláne rastu o 60 % a záznamy o XNUMX %.

Myšlienkou nášho aktualizovaného cenového plánu „Build“ je poskytnúť vývojárom bezplatný prístup k celému súboru funkcií v platforme Search and Discovery poháňanej AI. Plán „Grow“, keď je vývojár pripravený škálovať svoju aplikáciu, umožňuje vývojárom vytvárať ceny pre živé výrobné nastavenia, ktoré sú pre vývojárov vhodnejšie.

Jednou z dôležitých poznámok je, že každý dizajnér, tvorca alebo staviteľ – či už ide o príležitostného alebo plne angažovaného softvérového inžiniera – môže rýchlo a jednoducho pristupovať ku všetkým nástrojom, dokumentácii, vzorovému kódu, vzdelávaciemu obsahu a možnostiam integrácie medzi platformami potrebnými na začnite so správou svojich údajov, budovaním rozhrania vyhľadávania, konfiguráciou analytiky a ďalšími – všetko zadarmo. Okrem toho budú mať okamžitý prístup k rastúcej komunite vývojárov s viac ako 5 miliónmi staviteľov.

Môžete prediskutovať ponúkané nástroje na prispôsobenie vyhľadávania?

Spoločnosť Algolia ponúka spoločnostiam niekoľko nástrojov na prispôsobenie vyhľadávania na využitie údajov na lepšie zlepšenie odporúčaní vrátane rôznych druhov odporúčaní a jedinečných spôsobov, ako využiť údaje na skutočné riadenie týchto odporúčaní.

Niekoľko príkladov:

• trendy: Navrhnite ďalšie položky, ktoré sú populárne v trende a súvisia s vyhľadávaniami, ktoré vykonal váš zákazník.
• Na základe hodnotení: Ľudia chcú kupovať produkty s najlepšími hodnoteniami.
• Personalizované: Na základe toho, čo ste si naposledy zakúpili, histórie prehliadania, polohy alebo iných faktorov, odporúčame tieto ďalšie produkty.

Tieto metódy založené na údajoch môžu pomôcť rýchlo vylepšiť a zlepšiť výsledky na základe toho, ako zákazníci interagujú s produktmi, takže je pravdepodobnejšie, že odporučíte produkty, ktoré skutočne konvertujú najlepšie.

Algoliu ste opísali ako najškálovateľnejší hybridný vyhľadávač AI na svete. Ako bola Algolia navrhnutá tak, aby sa škálovala tak efektívne?

Všetko sa to vracia k Neural Hashing. Toto špičkové riešenie komprimuje a výrazne zrýchľuje každý jeden dotaz. Je oveľa rýchlejšie vypočítať hašovanú podobnosť ako štandardné podobnosti vektorov a vráti výsledky v milisekundách.

Neurónové hašovanie predstavuje prelom v zavádzaní získavania AI do produkcie pre veľké množstvo rôznych prípadov použitia. V kombinácii so spracovaním a prehodnotením dopytov poháňaným umelou inteligenciou sľubuje uvoľnenie plnej sily vyhľadávania AI na mieste. Pred patentovaným prielomom spoločnosti Algolia bolo vyhľadávanie založené na vektoroch príliš výpočtovo nákladné na spustenie vo výrobe.

Časť sendviča, na ktorú by som sa chcel zamerať najviac, je mäso: získavanie. Dôvod, prečo hovoríme, že sme jediný skutočný komplexný vyhľadávací nástroj AI, je ten, že v zákulisí vyhľadávacieho priemyslu prebieha neustály boj o pridanie AI do vyhľadávania. Vyhľadávanie informácií je neuveriteľne zložitý proces a ešte zložitejšie je zvládnuť vysokovýkonné a nákladovo efektívne vyhľadávanie AI vo veľkom rozsahu. Zvládli sme to pomocou našej prelomovej techniky Neural Hashing. Tým sme v podstate vyhrali hľadanie Svätého grálu AI vyhľadávania.

Je ešte niečo, o čo by ste sa chceli podeliť o Algolii?

Je vzrušujúci čas pracovať v spoločnosti Algolia a vždy sa snažíme začať rozhovory s talentovanými, zanietenými ľuďmi, ktorí sa k nám chcú pripojiť na našej ceste budovania najlepšej technológie vyhľadávania na svete. Ak sa vám to páči, pozývam vás, aby ste sa pozreli na naše aktuálne otváracie hodiny na adrese https://www.algolia.com/careers/.