AI Şirketi Diffbot Tüm Kamu İnternetini Okur ve Gerçek Tabanlı Metin Oluşturma İşiyle Uğraşır

Son zamanlarda OpenAI tarafından GPT-2 ve GPT-3 dil modelleri aracılığıyla gerçekleştirilen doğal dil işleme ve metin oluşturma alanındaki ilerlemeler etkileyici olmuştur. Bu modeller, gerçekten bir insan tarafından yazılmış gibi görünen metinler oluşturabiliyorlar. Ne yazık ki, bu modeller doğal dilde yazılmış metinler oluşturma konusunda başarılı olsalar da, oluşturdukları metinlerin gerçekliğini kontrol etmede başarısızlar. Gelişmiş dil modelleri, oluşturdukları metinlerin içindeki iddiaların gerçekliğini dikkate almadan, yalnızca cümleleri anlamlı bir şekilde bir araya getirmeye odaklanırlar. MIT teknoloji incelemesinde bildirildiği gibi, Diffbot adlı bir startup, internetten mümkün olduğunca çok gerçeklik elde ederek bu sorunu çözmeyi amaçlıyor.

Diffbot, pratik metin oluşturma görevleri gibi özerk olarak elektronik tabloları doldurmak ve cümleleri veya kodları otomatik olarak tamamlamak için AI’yi daha faydalı hale getirmeyi uman bir startup. AI tarafından oluşturulan metinlerin güvenilir olması için, AI’nin kendisi de güvenilir olmalı ve gerçek ile kurgu ifadeleri arasında bir fark olması gerekir. Diffbot, metin oluşturma programına gerçek ifadeler oluşturma yeteneği kazandırmak için, neredeyse tüm kamu internetinden büyük miktarda metin topluyor. Diffbot, çok dilli metinleri ayrıştırır ve metni, konuları birbirine bağlayan gerçek tabanlı üçlü setlere ayırır. Örneğin, Bill Gates ve Microsoft (MSFT ) hakkında gerçekleri aşağıdaki gibi temsil edebilir:

Bill Gates, Microsoft’un kurucusudur. Microsoft, bir bilgisayar teknolojisi şirketidir.

Diffbot, bu kısa gerçekleri bir araya getirerek bir bilgi grafiği oluşturur. Bilgi grafikleri, kavramlar arasındaki ilişkiler ağını oluşturur ve genellikle bu ilişkiler temelinde yeni sonuçlar çıkarmaya yardımcı olan bir akıl yürütme mekanizması içerir. Başka bir deyişle, bilgi grafikleri veri bağlantısını kullanır ve makine öğrenimi algoritmalarının bilgi alanlarını modellemesine yardımcı olabilir. Bilgi grafikleri aslında on yıllardır var ve birçok erken AI araştırmacısı, AI’nin insan dünyasını anlamasına olanak tanıyan önemli araçlar olarak görüyordu. Ancak, bilgi grafikleri genellikle elle oluşturuluyor ve bu da zor ve zahmetli bir iş. Bilgi grafiklerinin otomatik oluşturulması, AI’nin kavramlar hakkında çok daha büyük ve bağlamsal bir anlayış kazanmasına ve gerçek tabanlı metinler oluşturmasına olanak tanıyabilir.

Google (GOOGL ), birkaç yıl önce, aranan popüler konular hakkında bilgi özetlerini sağlamak için bilgi grafiklerini kullanmaya başladı. Bilgi grafiği, en ilgili gerçekleri çekmek ve bunları bir özet olarak temsil etmek için kullanılır. Diffbot, bunu yalnızca en popüler konular için değil, her konu için yapmak istiyor. Bu, neredeyse tüm kamu internetini taramak ve devasa bir bilgi grafiği oluşturmak gerekiyor, bu da yalnızca Google ve Microsoft tarafından yapılır. Diffbot, tüm interneti tarayarak bilgi grafiğini her dört veya beş günde bir günceller ve bir ayda yaklaşık 100 milyon ile 150 milyon arasında girişi ekler.

Diffbot, normal web tarama araçlarının yaptığı gibi web sitesinin metnini okumaz, bunun yerine bilgisayar görüntüsü algoritmalarını kullanarak bir web sayfasının ham piksellerini çıkarır ve video, resim, makale ve tartışma verilerini sayfadan alır. Web sayfasının ana öğelerini tanımlar ve ardından gerçekleri çeşitli dillerde, üç parçalı gerçeklik şemasına uygun olarak çıkarır.

Şu anda, Diffbot bilgi grafiğine hem ücretli hem de ücretsiz erişim sunuyor. Araştırmacılar grafiğe ücretsiz olarak erişebilirken, DuckDuckGo ve Snapchat gibi şirketler metinleri özetlemek ve trend olan haber parçalarını çıkarmak için kullanıyor. Nike ve Adidas gibi şirketler ise platformu, sahte ürünlerin satıldığı siteleri bulmak için kullanıyor, bu da Diffbot’un gerçekten ayakkabı satan siteleri, yalnızca onları tartışan sitelerden ayırt edebilmesiyle mümkün oluyor.

Gelecekte, Diffbot yeteneklerini genişletmeyi ve platforma, neredeyse her soruya cevap verebilecek ve cevaplarını kaynaklarla destekleyebilecek bir doğal dil arayüzü eklemeyi planlıyor. İdeal olarak, Diffbot’un yetenekleri, GPT-3 gibi güçlü bir dil sentez modeli ile birleştirilecektir.