Daudzus no iespaidīgākajiem sasniegumiem dabiskās valodas apstrādē un AI tērzēšanas robotos virza atkārtoti neironu tīkli (RNN) un ilgtermiņa īstermiņa atmiņas (LSTM) tīkli.