阿尔戈利亚首席技术官肖恩·马伦尼 – 采访系列

肖恩·马伦尼是阿尔戈利亚（Algolia）的首席技术官，阿尔戈利亚是一家端到端的AI驱动的搜索和发现平台。

肖恩曾是Stripe和Google的高管，具有丰富的经验，包括扩展工程组织、开发AI驱动的搜索和发现工具以及全球API第一解决方案。他在阿尔戈利亚负责技术，阿尔戈利亚的搜索引擎是世界上第二大搜索引擎，每年处理超过1.5万亿次搜索。最近，他领导了公司推出阿尔戈利亚神经搜索（AlgoliaNeuralSearch）- 世界上最快、最具扩展性和最具成本效益的向量和关键词搜索API。

是什么最初吸引你学习计算机科学？

当我10岁时，我的父母给我买了第一台电脑，第一件事我想做的是弄清楚如何编写一个文本冒险游戏，我当时正在从一本书中复制它。几年后，我开始学习C++，设计和构建计算机游戏仍然是我青少年时期对计算机科学的热情。

您在谷歌工作了7年多，期间您帮助建立和领导了多个团队，负责战略、运营、大数据和机器学习。您最喜欢的项目是什么，您从这段经历中学到了什么？

我们找到了如何利用大数据来帮助销售团队，开发了自定义规则（后来更复杂的神经网络）来预测哪些客户应该接近哪些产品，在什么时间，以最大化销售人员时间的收益。对于谷歌的100万广告商来说，这个工具显著帮助了销售团队找到“金针”。

在最近的DevBit总结中，您将阿尔戈利亚的目的描述为使用户能够索引世界并使内容动起来。您能解释一下这句话的含义吗？

最终，我们希望帮助客户从他们的数据中获得价值。互联网已经创造了如此多的内容和电子商务产品的爆发，虽然这是一个重要的里程碑，但现在信息的数量太多了，找到你真正想要的东西变得比以往任何时候都更加困难。然而，当搜索和发现由AI驱动时，内容可以被智能地访问和动态地提供给用户，而不是让他们感到不知所措。

2022年9月，Search.io及其专有旗舰产品NeuralSearch™被阿尔戈利亚收购，您能讨论一下这项搜索技术吗？

简而言之，阿尔戈利亚神经搜索将关键词匹配与基于向量的自然语言处理相结合，使用LLM，所有这些都在一个API中 – 这是业界首次实现。该解决方案采用了我们专有的、首创的神经哈希技术，使向量的使用变得可扩展且比其他AI公司（包括ChatGPT）使用的方法节省了90%的成本。这个突破性的产品真正使AI搜索对企业级组织可扩展。

新技术还允许客户（如零售商）了解和提供与查询相匹配的内容，这些查询通常太具对话性，无法提供准确或任何结果（被认为是长尾）。这些查询占当前网站搜索的55%。作为唯一一个在查询理解、检索和结果排名中应用AI的端到端AI搜索解决方案，NeuralSearch真正理解这些查询，并将错失的机会转化为收入。

除了神经搜索外，还使用了哪些机器学习方法？

我们将AI应用于三个主要功能 – 查询理解、检索和结果排名。我们称之为AI搜索三明治：

• 查询理解：阿尔戈利亚的高级自然语言理解（NLU）和AI驱动的向量搜索提供了自由形式的自然语言表达式理解和AI驱动的查询分类，以便于分析。此外，基于用户反馈的自适应学习可以细化意图理解。
• 检索：然后从最相关到最不相关的顺序检索和排名结果。检索过程同时使用神经哈希结果和关键词使用相同的索引进行容易的检索和排名。这种方法解决了“空结果”问题，并显著提高了点击位置和点击率。其他搜索平台在搜索和发现领域没有提供这种强大的功能。
• 排名：最后，通过阿尔戈利亚的AI驱动重新排名，将搜索查询附加的多个信号（包括精确关键词匹配分数、上下文个人化配置文件、项目的观察到的流行度、语义匹配分数等）考虑在内，并学习以达到最大相关性。

此外，随着索引的变化，新产品的添加，新内容的上传或术语的新含义，AI驱动的阿尔戈利亚神经搜索产品将自动学习和调整。它不需要任何额外的员工或手动操作。它将自动匹配关键词或概念 – 可能是两者的混合 – 根据查询或搜索短语。这真正使搜索自动化。

阿尔戈利亚最近将免费计划从10,000条记录增加到1百万条记录，背后的想法是什么，市场如何反应？

我们专门修改了阿尔戈利亚的定价和套餐，以使其更加适合开发者，推出了两个新的面向开发者的计划：一个免费的“构建”计划和一个具有可扩展性和价格合理的“增长”计划。新的“构建”计划将开发者可以在阿尔戈利亚中存储的免费记录数量从10,000增加到现在的1百万记录。这代表着开发者可以在阿尔戈利亚中索引的免费记录数量增加了100倍。另外，阿尔戈利亚在其“增长”计划中将搜索请求的成本降低了50%，将记录的成本降低了60%。

更新的“构建”定价计划背后的想法是为开发者提供对其AI驱动的搜索和发现平台的全部功能的免费访问。对于准备扩展其应用程序的开发者，“增长”计划提供了更为开发者友好的基于使用的定价。任何设计师、创作者或构建者 – 无论他们是偶尔的还是完全致力的软件工程师 – 都可以快速轻松地访问所有必要的工具、文档、示例代码、教育内容和跨平台集成功能 – 所有这些都可以免费使用。此外，他们将立即获得一个拥有超过500万构建者的开发者社区的访问权限。

您能讨论一下提供的搜索个性化工具吗？

阿尔戈利亚为公司提供了多种搜索个性化工具，以利用数据来改善推荐，包括不同类型的推荐和利用数据来驱动这些推荐的独特方法。

一些例子包括：

• 趋势：建议其他与客户搜索相关且流行的项目。
• 基于评分：人们希望购买具有最佳评分的产品。
• 个性化：根据您上次购买的内容、浏览历史、位置或其他因素，我们推荐这些其他产品。

这些数据驱动的方法可以快速提高结果的质量，根据客户如何与产品交互，推荐最有可能转化的产品。

您将阿尔戈利亚描述为世界上最可扩展的混合AI搜索引擎。阿尔戈利亚如何被设计为如此高效地扩展？

一切都归结于神经哈希。这个开创性的解决方案压缩和大大加快了每个查询。计算哈希相似性比标准向量相似性快得多，并在毫秒内返回结果。

神经哈希代表了将AI检索投入生产的突破，对于将AI投入现场搜索具有巨大的潜力。结合AI驱动的查询处理和重新排名，它承诺释放AI搜索的全部力量。在阿尔戈利亚的突破之前，基于向量的搜索在生产中运行过于计算密集。

我想强调的“三明治”部分是“肉”——检索。我们说我们是唯一真正的端到端AI搜索引擎，因为在搜索行业中，人们一直在努力将AI添加到检索中。信息检索是一个非常复杂的过程，更复杂的是要掌握高性能、成本有效的AI检索。我们通过突破性的神经哈希技术实现了这一点。通过这样做，我们基本上获得了AI搜索的“圣杯”。

您还想分享关于阿尔戈利亚的其他信息吗？

在阿尔戈利亚工作是一个令人兴奋的时期，我们总是希望与有才华、充满热情的人们开始对话，他们希望加入我们，共同打造世界上最好的搜索技术。如果您感兴趣，我邀请您查看我们的当前职位空缺：https://www.algolia.com/careers/。