Connect with us

Το Όριο Μνήμης του ChatGPT Είναι Ενοχλητικό — Το Μυαλό Δείχνει Ένα Καλύτερο Τρόπο

Γνώμη

Το Όριο Μνήμης του ChatGPT Είναι Ενοχλητικό — Το Μυαλό Δείχνει Ένα Καλύτερο Τρόπο

mm

Εάν είστε ένας χρήστης του ChatGPT, μπορεί να έχετε συναντήσει πρόσφατα την απεχθής οθόνη “Η μνήμη είναι πλήρης”. Αυτό το μήνυμα εμφανίζεται όταν φτάσετε το όριο των αποθηκευμένων μνημών του ChatGPT και μπορεί να είναι ένα σημαντικό εμπόδιο κατά τη διάρκεια μακροχρόνιων έργων. Η μνήμη είναι υποτιθέμενο να είναι μια βασική λειτουργία για σύνθετα, συνεχιζόμενα έργα – θέλετε το AI σας να μεταφέρει γνώσεις από προηγούμενες συνεδρίες σε μελλοντικές εξόδους. Το να βλέπετε μια προειδοποίηση πλήρους μνήμης στη μέση ενός χρόνο-ευαίσθητου έργου (για παράδειγμα, ενώ διόρθωνα συνεχιζόμενα λάθη διακομιστή HTTP 502 σε ένα από τα αδελφικά μας sites) μπορεί να είναι εξαιρετικά ενοχλητικό και διαταρακτικό.

Η Ενοχλή με το Όριο Μνήμης του ChatGPT

Το βασικό ζήτημα δεν είναι ότι υπάρχει όριο μνήμης – ακόμη και οι πληρώνοντας χρήστες του ChatGPT Plus μπορούν να κατανοήσουν ότι μπορεί να υπάρχουν πρακτικά όρια στο πόσο μπορεί να αποθηκευτεί. Το πραγματικό πρόβλημα είναι πώς πρέπει να διαχειριστείτε τις παλιές μνήμες όταν φτάσετε το όριο. Η τρέχουσα διεπαφή για διαχείριση μνήμης είναι χρονοβόρα και κοπιαστική. Όταν το ChatGPT σας ειδοποιεί ότι η μνήμη σας είναι 100% πλήρης, έχετε δύο επιλογές: να διαγράψετε τις μνήμες μια-μια, ή να τις σβήσετε όλες μαζί. Δεν υπάρχει ενδιάμεση λύση ή εργαλείο επιλογής για να κάνετε αποτελεσματική διαχείριση των αποθηκευμένων πληροφοριών.

Η διαγραφή μιας μνήμης κάθε φορά, ιδιαίτερα αν πρέπει να το κάνετε κάθε λίγες μέρες, feels σαν ένα χόμπι που δεν είναι ευνοϊκό για μακροχρόνια χρήση.毕竟, οι περισσότερες αποθηκευμένες μνήμες διατηρούνται για ένα λόγο – περιέχουν πολύτινο контекст που έχετε παρέχει στο ChatGPT σχετικά με τις ανάγκες σας ή την επιχείρησή σας. Φυσικά, θα προτιμούσατε να διαγράψετε το ελάχιστο αριθμό αντικειμένων που είναι απαραίτητα για να απελευθερώσετε χώρο, ώστε να μην αναπηδήσετε την κατανόηση του AI για την ιστορία σας. Ωστόσο, η σχεδίαση της διαχείρισης μνήμης επιβάλλει μια προσέγγιση all-or-nothing ή μια αργή χειροκίνητη επιμέλεια. Έχω προσωπικά παρατηρήσει ότι κάθε διαγραμμένη μνήμη απελευθερώνει μόνο περίπου 1% του χώρου μνήμης, υποδεικνύοντας ότι το σύστημα επιτρέπει μόνο γύρω στα 100 μνήμες συνολικά πριν γεμίσει (100% χρήση). Αυτό το σκληρό όριο feels αυθαίρετο δεδομένης της κλίμακας των σύγχρονων συστημάτων AI και υπονόμευε την υπόσχεση ότι το ChatGPT θα γίνει ένας γνώστης βοηθός που εξελίσσεται μαζί σας με το χρόνο.

Τι Πρέπει να Συμβαίνει

Λαμβάνοντας υπόψη ότι το ChatGPT και η υποδομή πίσω του έχουν πρόσβαση σε σχεδόν απεριόριστες υπολογιστικές πόρους, είναι εκπληκτικό ότι η λύση για τη μακροχρόνια μνήμη είναι τόσο πρωτόγονη. Ιδανικά, η μακροχρόνια μνήμη AI πρέπει να μιμείται καλύτερα τον τρόπο με τον οποίο λειτουργεί και χειρίζεται πληροφορίες ο ανθρώπινος εγκέφαλος με το χρόνο. Οι ανθρώπινοι εγκέφαλοι έχουν εξελιχθεί αποτελεσματικές στρατηγικές για τη διαχείριση μνημών – δεν καταγράφουμε κάθε γεγονός λέξη-προς-λέξη και δεν τις αποθηκεύουμε ατελείωτα. Αντίθετα, ο εγκέφαλος σχεδιάζεται για αποτελεσματικότητα: κρατάμε λεπτομερείς πληροφορίες στο βραχυχρόνιο, και στη συνέχεια σταδιακά συντηρούμε και συμπιέζουμε αυτές τις λεπτομέρειες σε μακροχρόνια μνήμη.

Στην νευροεπιστήμη, η συντήρηση μνήμης αναφέρεται στη διαδικασία με την οποία ασταθείς βραχυχρόνιες μνήμες μετατρέπονται σε σταθερές, μακροχρόνιες. Σύμφωνα με το τυπικό μοντέλο της συντήρησης, νέες εμπειρίες αρχικά κωδικοποιούνται από τον ιππόκαμπο, μια περιοχή του εγκεφάλου που είναι κρίσιμη για τη διαμόρφωση επεισοδιακών μνημών, και με το χρόνο η γνώση “εκπαιδεύεται” στον κortex για μόνιμη αποθήκευση. Αυτή η διαδικασία δεν συμβαίνει αμέσως – απαιτεί τη διέλευση του χρόνου και συχνά συμβαίνει κατά τη διάρκεια περιόδων ανάπαυσης ή ύπνου. Ο ιππόκαμπος λειτουργεί ουσιαστικά ως γρήγορη-μάθηση буφέ, ενώ ο κortex σταδιακά ενσωματώνει τις πληροφορίες σε μια πιο ανθεκτική μορφή σε διάσπαρτα νευρωνικά δίκτυα. Με άλλα λόγια, η “βραχυχρόνια μνήμη” του εγκεφάλου (εργασιακή μνήμη και πρόσφατες εμπειρίες) μεταφέρεται συστηματικά και αναδιοργανώνεται σε μια κατανεμημένη μακροχρόνια αποθήκη μνήμης. Αυτή η πολλαπλή μεταφορά καθιστά τη μνήμη πιο ανθεκτική σε παρέμβαση ή λήθη, παρόμοια με τη σταθεροποίηση μιας εγγραφής ώστε να μην γράφεται εύκολα.

Κρίσιμο, ο ανθρώπινος εγκέφαλος δεν σπαταλά πόρους αποθηκεύοντας κάθε λεπτομέρεια λέξη-προς-λέξη. Αντίθετα, τείνει να φιλτράρει τις ασήμαντες λεπτομέρειες και να διατηρεί ό,τι είναι πιο σημαντικό από τις εμπειρίες μας. Οι ψυχολόγοι έχουν παρατηρήσει ότι όταν θυμόμαστε ένα παρελθόν γεγονός ή μάθαμε πληροφορίες, συνήθως θυμόμαστε την ουσιαστική rather than μια τέλεια, λέξη-προς-λέξη περιγραφή. Για παράδειγμα, μετά τη διάβασή ενός βιβλίου ή την προβολή μιας ταινίας, θα θυμόμαστε τους κύριους πλοκούς και θέματα, αλλά όχι κάθε γραμμή διαλόγου. Με το χρόνο, η ακριβής λέξη και οι λεπτομέρειες της εμπειρίας εξαφανίζονται, αφήνοντας πίσω μια πιο αφηρημένη περίληψη του τι συνέβη. Στην πραγματικότητα, η έρευνα δείχνει ότι η λεκτική μνήμη μας (ακρίβειες λεπτομέρειες) εξαφανίζεται γρηγορότερα από την ουσιαστική μνήμη μας (γενική σημασία) καθώς ο χρόνος περνά. Αυτό είναι ένας αποτελεσματικός τρόπος για την αποθήκευση γνώσεων: απορρίπτοντας τις περιττές λεπτομέρειες, ο εγκέφαλος “συμπιέζει” τις πληροφορίες, διατηρώντας τα απαραίτητα μέρη που είναι πιθανό να είναι χρήσιμα στο μέλλον.

Αυτή η νευρωνική συμπίεση μπορεί να比θεί με τον τρόπο που οι υπολογιστές συμπιέζουν αρχεία, και στην πραγματικότητα οι επιστήμονες έχουν παρατηρήσει ανалогικές διαδικασίες στον εγκέφαλο. Όταν επανελάμβανουμε μια μνήμη ή φανταζόμαστε ένα μελλοντικό σενάριο, η νευρωνική αναπαράσταση είναι αποτελεσματικά επιταχύνεται και αποστριπώνεται από κάποιες λεπτομέρειες – είναι μια συμπιεσμένη εκδοχή της πραγματικής εμπειρίας. Νευροεπιστήμονες στο UT Austin ανακάλυψαν einen μηχανισμό εγκεφαλικών κυμάτων που μας επιτρέπει να θυμόμαστε μια ολόκληρη ακολουθία γεγονότων (π.χ. ένα απόγευμα στο siêuμάρκετ) σε δευτερόλεπτα χρησιμοποιώντας einen ταχύτερο εγκεφαλικό ρυθμό που κωδικοποιεί λιγότερο λεπτομερείς, υψηλού επιπέδου πληροφορίες. Ουσιαστικά, ο εγκέφαλος μας può fast-forward через μνήμες, διατηρώντας την περίληψη και τα κρίσιμα σημεία ενώ παραλείπει τις πλούσιες λεπτομέρειες, οι οποίες θα ήταν άχρηστες ή πολύ βολικές για να αναπαραχθούν ολόκληρες. Η συνέπεια είναι ότι οι φαντασμένες σχέδια και οι θυμόμενες εμπειρίες αποθηκεύονται σε μια συμπιεσμένη μορφή – ακόμη χρήσιμες και κατανοητές, αλλά πολύ πιο χώρο-και χρόνο-αποτελεσματικές από την αρχική εμπειρία.

Ένας άλλος σημαντικός аспект της διαχείρισης μνήμης του ανθρώπινου εγκεφάλου είναι η προτεραιότητα. Όχι όλα τα οποία εισέρχονται στη βραχυχρόνια μνήμη αθανατίζονται στη μακροχρόνια αποθήκευση. Ο εγκέφαλος μας υποσυνείδητα αποφασίζει τι αξίζει να θυμόμαστε και τι όχι, με βάση τη σημασία ή την συναισθηματική σαφήνεια. Μια πρόσφατη μελέτη στο Rockefeller University απέδειξε这一 αρχή χρησιμοποιώντας ποντίκια: τα ποντίκια εκτέθηκαν σε πολλά αποτελέσματα σε ένα λαβύρινθο (μερικά υψηλά ανταμοιβικά, μερικά ήπια ανταμοιβικά, μερικά αρνητικά). Αρχικά, τα ποντίκια έμαθαν όλες τις συσχετίσεις, αλλά όταν ελέγχθηκαν ένα μήνα αργότερα, μόνο η πιο σαφής υψηλή ανταμοιβική μνήμη διατηρήθηκε ενώ οι λιγότερο σημαντικές λεπτομέρειες είχαν εξαφανιστεί.

Με άλλα λόγια, ο εγκέφαλος φιλτράρει τον θόρυβο και διατηρεί τη μνήμη που έχει τη μεγαλύτερη σημασία για τους στόχους του ζώου. Οι ερευνητές ακόμη και αναγνώρισαν μια εγκεφαλική περιοχή, τον ανterior thalamus, που λειτουργεί ως ένας είδος διαμεσολαβητή μεταξύ του ιππόκαμπου και του κortex κατά τη διάρκεια της συντήρησης, στέλνοντας συνεχείς ενισχύσεις για τις πολύτιμες μνήμες – ουσιαστικά λέγοντας στον κortex “διατηρήστε αυτή” μέχρι η μνήμη να είναι πλήρως κωδικοποιημένη – ενώ επιτρέπει στις λιγότερο σημαντικές μνήμες να εξαφανιστούν. Αυτή η ανακάλυψη υπογραμμίζει ότι η λήθη δεν είναι απλά μια αποτυχία της μνήμης, αλλά μια ενεργό χαρακτηριστικό του συστήματος: απορρίπτοντας τις ασήμαντες ή περιττές πληροφορίες, ο εγκέφαλος αποτρέπει την αποθήκευση μνήμης από το να είναι ακατάστατη και εξασφαλίζει ότι οι πιο χρήσιμες γνώσεις είναι εύκολα προσβάσιμες.

Επανασκέψιμο της Μνήμης AI με Ανθρώπινες Αρχές

Ο τρόπος με τον οποίο ο ανθρώπινος εγκέφαλος χειρίζεται τη μνήμη προσφέρει ένα σαφές σχέδιο για το πώς το ChatGPT και παρόμοια συστήματα AI πρέπει να διαχειρίζονται τη μακροχρόνια πληροφορία. Αντί να αντιμετωπίζουν κάθε αποθηκευμένη μνήμη ως一個 απομονωμένο σημείο δεδομένων που πρέπει είτε να διατηρηθεί για πάντα είτε να διαγραφεί χειροκίνητα, ένα AI θα μπορούσε να συντηρήσει και να συνθέσει παλαιότερες μνήμες στο παρασκήνιο. Για παράδειγμα, εάν έχετε δέκα συναφείς συνομιλίες ή γεγονότα αποθηκευμένα σχετικά με το συνεχιζόμενο έργο σας, το AI μπορεί να συνδυάσει αυτές τις μνήμες αυτόματα σε μια περιληπτική περίληψη ή σε ένα σύνολο κλειδών συμπερασμάτων – αποτελεσματικά συμπιέζοντας τη μνήμη ενώ διατηρεί την ουσιαστική της. Αυτό θα απελευθερώσει χώρο για νέες πληροφορίες χωρίς να “ξεχάσει” πραγματικά τι ήταν σημαντικό για τις παλιές αλληλεπιδράσεις. Πράγματι, η τεκμηρίωση της OpenAI υποδηλώνει ότι τα μοντέλα του ChatGPT μπορούν ήδη να κάνουν κάποια αυτόματη ενημέρωση και συνδυασμό αποθηκευμένων λεπτομερειών, αλλά η τρέχουσα εμπειρία χρήστη δείχνει ότι δεν είναι ακόμη ομαλή ή επαρκής.

Μια άλλη ανθρώπινα-εμπνευσμένη βελτίωση θα ήταν η προτεραιότητα της διατήρησης μνήμης. Αντί για ένα σκληρό όριο 100 αντικειμένων, το AI θα μπορούσε να ζυγίσει ποίες μνήμες έχουν sido πιο συχνά σχετικές ή πιο κρίσιμες για τις ανάγκες του χρήστη και να απορρίψει (ή να υποδείξει) μόνο εκείνες που φαίνονται λιγότερο σημαντικές. Στην πράξη, αυτό θα μπορούσε να σημαίνει ότι το ChatGPT αναγνωρίζει ότι某些 γεγονότα (π.χ. οι βασικοί στόχοι της εταιρείας σας, οι προδιαγραφές του συνεχιζόμενου έργου, οι προσωπικές προτιμήσεις) είναι υψηλά σαφείς και πρέπει πάντα να διατηρούνται, ενώ μια φορά κομμάτια τριβής από μήνες πριν θα μπορούσαν να αρχειοθετηθούν ή να απορριφθούν πρώτα. Αυτή η δυναμική προσέγγιση παραλληλίζει τον τρόπο με τον οποίο ο εγκέφαλος συνεχώς κλαδεύει τις μη χρησιμοποιούμενες συνδέσεις και ενισχύει τις συχνά χρησιμοποιούμενες για να βελτιώσει την γνωστική αποτελεσματικότητα.

Το τελικό είναι ότι ένα σύστημα μακροχρόνιας μνήμης για AI πρέπει να εξελίσσεται, όχι απλά να γεμίζει και να σταματά. Η ανθρώπινη μνήμη είναι εξαιρετικά προσαρμοστική – μετατρέπεται και αναδιοργανώνεται με το χρόνο και δεν απαιτεί έναν εξωτερικό χρήστη να διαχειρίζεται κάθε θέση μνήμης. Εάν η μνήμη του ChatGPT λειτουργούσε περισσότερο σαν η δική μας, οι χρήστες δεν θα αντιμετώπιζαν ένα απότομο τοίχο στα 100 εγγραφές, ούτε την οδυνηρή επιλογή μεταξύ της διαγραφής όλων ή της κλικ σε εκατό αντικειμένων ένα-ένα. Αντίθετα, οι παλιές μνήμες συνομιλίας θα μετατρέπονταν σταδιακά σε μια αποσταγμένη βάση γνώσεων που το AI μπορεί να βασιστεί, και μόνο οι πραγματικά απαρχαιωμένες ή ασήμαντες λεπτομέρειες θα εξαφανίζονταν. Η κοινότητα AI, η οποία είναι ο στόχος εδώ, μπορεί να εκτιμήσει ότι η υλοποίηση ενός τέτοιου συστήματος μπορεί να περιλαμβάνει τεχνικές όπως η περίληψη контекστ, βασικές βάσεις δεδομένων για ανάκτηση γνώσεων, ή ιεραρχικές στρώσεις μνήμης σε νευρωνικά δίκτυα – όλα ενεργά πεδία έρευνας. Πράγματι, η δωρεά στο AI μιας μορφής “επεειδικής μνήμης” που συμπιέζεται με το χρόνο είναι μια γνωστή πρόκληση, και η επίλυση της θα ήταν ένα άλμα προς το AI που μαθαίνει συνεχώς και κλιμακώνει τη βάση γνώσεων του με βιωσιμότητα.

Συμπέρασμα

Το τρέχον όριο μνήμης του ChatGPT feels σαν μια προσωρινή λύση που δεν αξιοποιεί πλήρως τη δύναμη του AI. Μαθαίνοντας από την ανθρώπινη γνωστική, βλέπουμε ότι η αποτελεσματική μακροχρόνια μνήμη δεν είναι για την αποθήκευση απεριόριστων raw δεδομένων – είναι για την έξυπνη συμπίεση, συντήρηση και λήθη των σωστών πραγμάτων. Η ικανότητα του ανθρώπινου εγκεφάλου να κρατάει ό,τι έχει σημασία ενώ οικονομεί στην αποθήκευση είναι ακριβώς αυτό που κάνει τη μακροχρόνια μνήμη μας τόσο μεγάλη και χρήσιμη. Για το AI να γίνει ένας αληθινός μακροχρόνιος συνεργάτης, πρέπει να υιοθετήσει μια παρόμοια στρατηγική: να αποσταγμένα τις παλιές αλληλεπιδράσεις σε μακροχρόνιες γνώσεις, αντί να βάζει αυτό το βάρος στον χρήστη. Η ενοχλή της πρόσβασης σε ένα “πλήρες μνήμης” τοίχο θα μπορούσε να αντικατασταθεί από ένα σύστημα που εξελίσσεται με τη χρήση, μαθαίνει και θυμάται με einen ευέλικτο, ανθρώπινο τρόπο. Η υιοθέτηση αυτών των αρχών δεν θα λύσει μόνο το πρόβλημα της εμπειρίας χρήστη, αλλά θα ξεκλειδώσει επίσης μια πιο ισχυρή και προσωποποιημένη εμπειρία AI για όλη την κοινότητα χρηστών και αναπτυξιακών που βασίζονται σε αυτά τα εργαλεία.

Ο Antoine είναι ένας οραματιστής ηγέτης και συνιδρυτής του Unite.AI, οδηγείται από μια αμετάβλητη страсть για το σχήμα και την προώθηση του μέλλοντος του AI και της ρομποτικής. Ένας σειριακός επιχειρηματίας, πιστεύει ότι το AI θα είναι τόσο διαταρακτικό για την κοινωνία όσο η ηλεκτρική ενέργεια, και συχνά πιάνεται να μιλάει για το δυναμικό των διαταρακτικών τεχνολογιών και του AGI.

Ως futurist, είναι αφοσιωμένος στο να εξερευνήσει πώς αυτές οι καινοτομίες θα σχήματίσουν τον κόσμο μας. Επιπλέον, είναι ο ιδρυτής του Securities.io, μια πλατφόρμα που επικεντρώνεται στις επενδύσεις σε τεχνολογίες που αναedefinουν το μέλλον και ανασχήματίσουν ολόκληρους τομείς.