Μοντέλα και πλατφόρμες AI

Τι είναι η Αντιπαλική Ποίηση; Μια Νέα Μέθοδος Jailbreak για το AI

mm
Προσθέστε το Unite.AI στις προτιμώμενες πηγές σας στο Google

Η ασφάλεια του τεχνητού νοήματος (AI) έχει μετατραπεί σε ένα συνεχές παιχνίδι γάτας και ποντικού. Όσο οι développers προσθέτουν φραγμούς για να μπλοκάρουν επικίνδυνες αιτήσεις, οι επιτιθέμενοι συνεχίζουν να δοκιμάζουν νέους τρόπους για να τους παρακάμψουν. Μια από τις πιο περίεργες στροφές μέχρι τώρα είναι η αντιπαλική ποίηση. Αυτή η τακτική περιλαμβάνει τη μάσκωση των αιτημάτων ως στίχους και τη χρήση ρίμης, μεταφοράς και ασυνήθιστου στυλ για να κάνει τις επικίνδυνες οδηγίες να φαίνονται λιγότερο σαν τα πράγματα που οι συστήματα ασφαλείας έχουν εκπαιδευτεί να πιάνουν.

Στην πράξη, το περιεχόμενο δεν αλλάζει πολύ. Είναι το εξωτερικό που αλλάζει, το οποίο μπορεί να είναι αρκετό για να μπερδέψει τους φίλτρες που βασίζονται σε πρότυπα. Είναι μια υπενθύμιση ότι, με τα σημερινά μοντέλα, το πώς κάτι ζητείται μπορεί να έχει μεγάλη σημασία, σχεδόν όσο και το τι ζητείται.

Τι Συμβαίνει Όταν Οι Ερευνητές Χρησιμοποιούν Ποιήματα για να Σπάσουν το AI;

Στις αρχές του 2025, οι ερευνητές έδειξαν ότι τα μεγάλα μοντέλα γλωσσών (LLM) μπορούσαν να προωθηθούν να ανταποκριθούν σε περιορισμένες αιτήσεις τυλίγοντας τις σε ποιητική μορφή. Αντί να δώσουν直接ες, πολιτική-παράγουσες οδηγίες, οι ερευνητές ενέβαλαν τις ίδιες αιτήσεις μέσα σε ρίμες, μεταφορές και αφηγηματικούς στίχους.

Στην επιφάνεια, οι αιτήσεις φαίνονταν να είναι δημιουργικές ασκήσεις γραφής, αλλά κάτω από την επιφάνεια, μεταφέρανε την ίδια πρόθεση που θα είχε μπλοκαριστεί κανονικά. Σε 25 μοντέλα, τα οποία ήταν ιδιόκτητα και ανοιχτά, η ομάδα ανέφερε ότι η ποιητική μορφή είχε επιτύχει ένα μέσο ποσοστό επιτυχίας 62% για χειροποίητα ποιήματα και περίπου 43% για μαζική “μετατροπή στίχων” χρησιμοποιώντας einen стандάρτη meta-πρόταση.

Οι απαντήσεις δεν ήταν νέοι τύποι αποτυχιών, αλλά οικείες αποτυχίες που εμφανίζονταν μέσα από μια απροσδόκητη πόρτα. Τα μοντέλα είχαν ωθηθεί να παράγουν περιεχόμενο που συνήθως αποφεύγουν — όπως εξηγήσεις που αφορούν παράνομες ή επικίνδυνες δραστηριότητες — επειδή η υποκείμενη αίτηση ήταν θραυσματική και αποκρυβόταν από την ποιητική δομή.

Η βασική λήψη της μελέτης είναι ότι η στυλιστική παραλλαγή μόνο μπορεί να είναι αρκετή για να αποφύγει τα συστήματα ασφαλείας που είναι ρυθμισμένα για πιο κυριολεκτικές εκφράσεις. Αποκαλύπτει μια ευπάθεια που είναι εμφανής σε όλες τις οικογένειες μοντέλων και προσεγγίσεις ευθυγράμμισης.

Πώς Λειτουργεί η Αντιπαλική Ποίηση

Οι αντιπαλικές επιθέσεις εκμεταλλεύονται μια απλή πραγματικότητα — τα συστήματα μηχανικής μάθησης δεν “καταλαβαίνουν” τη γλώσσα όπως οι άνθρωποι. Αναγνωρίζουν πρότυπα, προβλέπουν πιθανές συνέχειες και ακολουθούν οδηγίες βάσει того που οι εκπαιδεύσεις και οι στρώσεις ασφαλείας ερμηνεύουν ως πρόθεση.

Όταν μια αίτηση είναι εκφρασμένη με σαφή, κυριολεκτική τρόπο, είναι πιο εύκολο για τους φραγμούς να την αναγνωρίσουν και να την μπλοκάρουν. Ωστόσο, όταν ο ίδιος σκοπός είναι μασκαρεμένος — χωρισμένος, μαλακώθηκε ή αναδιατυπωμένος — οι προστατευτικές στρώσεις peuvent να χάσουν το τι ζητείται πραγματικά.

Γιατί Η Ποίηση Μπορεί Να Είναι Ένας Αποτελεσματικός Χώρος

Η ποίηση είναι φυσικά κατασκευασμένη για αμφισημία. Εξαρτάται από μεταφορά, αφαίρεση, ασυνήθιστη δομή και έμμεση εκφράση. Αυτά είναι ακριβώς τα είδη χαρακτηριστικών που μπορούν να θολώσουν τη γραμμή μεταξύ “αβλαβούς δημιουργικής γραφής” και “μιας αιτήματος που θα πρέπει να απορριφθεί”.

Στην ίδια μελέτη του 2025, οι ερευνητές ανέφεραν ότι οι ποιητικές αιτήσεις προκάλεσαν ασφαλείς απαντήσεις σε ποσοστό 90% σε ένα ευρύ σύνολο μοντέλων, υποδεικνύοντας ότι ο στυλ μόνο μπορεί να αλλάξει σημαντικά τα αποτελέσματα.

Πώς Ένα Ποιήμα Κρύβει Μια Πραγματική Αίτηση

Σκεφτείτε την αίτηση ως μήνυμα και το ποιήμα ως το πακέτο. Τα φίλτρα ασφαλείας συχνά ψάχνουν για σαφείς ενδείξεις, όπως ρητές λέξεις-κλειδιά, άμεσες οδηγίες βήμα-προς-βήμα ή αναγνωρίσιμη κακόβουλη πρόθεση.

Η ποίηση μπορεί να κρύψει αυτή την πρόθεση μέσω μεταφορικής γλώσσας ή να τη διασκορπίζει σε γραμμές, καθιστώντας την πιο δύσκολο να την αναγνωρίσει σε απομόνωση. Εν τω μεταξύ, το υποκείμενο μοντέλο ανακατασκευάζει τη σημασία αρκετά καλά για να απαντήσει επειδή είναι βελτιστοποιημένο να συναγάγει πρόθεση ακόμη και όταν η γλώσσα είναι έμμεση.

Ανίχνευση και Μείωση των Jailbreaks

Όσο οι μέθοδοι jailbreak γίνονται πιο δημιουργικές, η συζήτηση πρέπει να μετατοπιστεί από το πώς λειτουργούν σε πώς ανιχνεύονται και περιορίζονται. Αυτό είναι ιδιαίτερα αληθινό τώρα που το AI είναι μέρος της καθημερινής ρουτίνας για πολλούς ανθρώπους, όπως αναφέρουν ότι το 27% των ανθρώπων το χρησιμοποιούν πολλές φορές την ημέρα.

Όσο περισσότεροι άνθρωποι χρησιμοποιούν τα μεγάλα μοντέλα γλωσσών (LLM), επιπλέον προφυλάξεις πρέπει να δοκιμαστούν και να εξερευνηθούν. Αυτό το έργο περιλαμβάνει την κατασκευή στρωμάτων αμυντικών που μπορούν να προσαρμοστούν σε νέους στυλ προτύπων και τεχνάσματα απόκρυψης καθώς εμφανίζονται.

Το Δίλημμα του Αναπτυξιακού

Το πιο δύσκολο μέρος για τις ομάδες ασφαλείας του AI είναι ότι οι jailbreaks δεν έρχονται ως μια γνωστή απειλή. Συνεχώς αλλάζουν με τον καιρό. Αυτή η συνεχής μεταβολή οφείλεται στο ότι ένας χρήστης μπορεί να επαναφράσει μια αίτηση, να τη χωρίσει σε θραύσματα, να τη τυλίξει σε ρόλο ή να τη μασκαρέψει ως δημιουργική γραφή. Τότε, κάθε νέο πακέτο μπορεί να αλλάξει το πώς το σύστημα ερμηνεύει την πρόθεση της αίτησης.

Αυτή η πρόκληση κλιμακώνεται γρήγορα όταν το AI έχει ήδη ενταχθεί στις καθημερινές ρουτίνας, οπότε η πραγματική χρήση δημιουργεί ατελείωτες ευκαιρίες για περιπτώσεις να εμφανιστούν.

Γι’ αυτό, η ασφάλεια του AI σήμερα μοιάζει περισσότερο με διαχείριση κινδύνου με τον καιρό. Το NIST AI Risk Management Framework (AI RMF) αντιμετωπίζει ρητά τη διαχείριση κινδύνου ως μια συνεχής σειρά δραστηριοτήτων — οργανωμένη γύρω από διακυβέρνηση, χαρτογράφηση, μέτρηση και διαχείριση — αντί ως μια στατική λίστα ελέγχου. Ο στόχος είναι να δημιουργηθούν διαδικασίες που κάνουν ευκολότερο να αναγνωριστούν οι εμφανιζόμενοι τρόποι αποτυχίας, να προτεραιοποιηθούν οι διορθώσεις και να σφραγιστούν οι προφυλάξεις καθώς εμφανίζονται νέοι στυλ jailbreak.

Πώς Τα Μοντέλα Προστατεύουν τον Εαυτό τους

Η ασφάλεια του AI αποτελείται από πολλά στρώματα. Τα περισσότερα συστήματα έχουν περισσότερα από ένα αμυντικά στρώματα που λειτουργούν μαζί, με το καθένα να πιάνει διαφορετικά είδη επικίνδυνης συμπεριφοράς. Στο εξωτερικό στρώμα, το φιλτράρισμα εισόδου και εξόδου λειτουργεί ως πυλάς.

Οι εισερχόμενες αιτήσεις σαρώνονται για παραβιάσεις πολιτικής πριν φτάσουν στο κεντρικό μοντέλο, ενώ οι εξερχόμενες απαντήσεις ελέγχονται για να διασφαλιστεί ότι τίποτα δεν διαφεύγει στο δρόμο προς τον χρήστη. Αυτά τα συστήματα είναι καλά σε αναγνώριση άμεσων αιτημάτων ή οικείων σημάτων κινδύνου, αλλά είναι επίσης τα πιο εύκολα να παρακαμφθούν, που είναι γιατί οι περισσότερες απάτες jailbreak παρακάμπτουν αυτά.

Το επόμενο στρώμα προστασίας συμβαίνει μέσα στο ίδιο το μοντέλο. Όταν ανακαλύπτονται τεχνάσματα jailbreak, συχνά μετατρέπονται σε παραδείγματα εκπαίδευσης. Αυτό είναι το σημείο όπου η αντιπαλική εκπαίδευση και η ενίσχυση μάθησης από ανθρώπινη ανάδραση (RLHF) έρχονται στο παιχνίδι.

Βελτιώνοντας τα μοντέλα με παραδείγματα αποτυχημένων ή επικίνδυνων互одействίων, οι développers διδάσκουν αποτελεσματικά το σύστημα να αναγνωρίζει πρότυπα που θα πρέπει να αρνηθεί, ακόμη και όταν είναι τυλιγμένα σε δημιουργική ή έμμεση γλώσσα. Με τον καιρό, αυτή η διαδικασία βοηθά να ανοσοποιηθεί το μοντέλο ενάντια σε ολόκληρες κατηγορίες επιθέσεων.

Ο Ρόλος της “Κόκκινης Ομάδας” του AI

Αντί να περιμένουν μια jailbreak να συμβεί, οι εταιρείες χρησιμοποιούν “κόκκινες ομάδες” του AI. Αυτές οι ομάδες είναι ομάδες που έχουν ανατεθεί να προσπαθούν να σπάσουν τα μοντέλα σε ελεγχόμενα περιβάλλοντα. Προσέγγιζουν τα συστήματα με τον τρόπο που θα έκανε ένας επιτιθέμενος, πειραματίζοντας με ασυνήθιστες εκφράσεις, δημιουργικές μορφές και περιπτώσεις άκρων για να αποκαλύψουν πού οι προφυλάξεις λείπουν.

Η “κόκκινη ομάδα” γίνεται τώρα μέρος του κύκλου ανάπτυξης στην κυβερνοασφάλεια. Όταν μια ομάδα ανακαλύπτει μια νέα τεχνική jailbreak, τα δεδομένα που προκύπτουν τροφοδοτούν trực tiếp στις διαδικασίες εκπαίδευσης και αξιολόγησης. Αυτές οι πληροφορίες χρησιμοποιούνται για να ορίσουν φίλτρα, να προσαρμόσουν πολιτικές και να ενισχύσουν την αντιπαλική εκπαίδευση, ώστε να είναι λιγότερο πιθανό να επιτύχουν παρόμοιες προσπάθειες στο μέλλον. Με τον καιρό, αυτό δημιουργεί ένα συνεχές κύκλο — ανίχνευση αποτυχιών, μάθηση από αυτές και βελτίωση του συστήματος, και μετά επανάληψη.

Όταν Η Ποίηση Γίνεται Ένα Τεστ για την Ασφάλεια του AI

Η αντιπαλική ποίηση είναι μια υπενθύμιση ότι οι προφυλάξεις του AI εξαρτώνται από το πώς ένας χρήστης φράζει τις ερωτήσεις, όχι μόνο τι. Όσο τα μοντέλα γίνονται πιο προσιτά και ευρέως χρησιμοποιημένα, οι ερευνητές θα συνεχίσουν να ερευνάν τις lacunes μεταξύ δημιουργικής γλώσσας και συστημάτων ασφαλείας που σχεδιάζονται για να πιάνουν πιο άμεσες προθέσεις. Η λήψη είναι ότι ασφαλέστερο AI θα έρθει από πολλαπλά αμυντικά που εξελίσσονται τόσο γρήγορα όσο και οι jailbreaks.

Ο Zac Amos είναι ένας τεχνικός συγγραφέας που επικεντρώνεται στην τεχνητή νοημοσύνη. Είναι επίσης ο Συντάκτης Περιεχομένου στο ReHack, όπου μπορείτε να διαβάσετε περισσότερο από το έργο του.