Adam Gross, Συνιδρυτής και Διευθύνων Σύμβουλος της HarmonEyes – Σειρά Συνεντεύξεων

Adam Gross, Συνιδρυτής και Διευθύνων Σύμβουλος της HarmonEyes, είναι ένας σειριακός επιχειρηματίας με σχεδόν τρεις δεκαετίες εμπειρίας στην κατασκευή και κλιμάκωση επιχειρήσεων τεχνολογικού προσανατολισμού σε τομείς υγείας, χρηματοοικονομικών υπηρεσιών και ανάλυσης δεδομένων. Συνέστησε τη RightEye το 2013, αναπτύσσοντας μια πλατφόρμα τεχνολογίας παρακολούθησης κίνησης ματιού που χρησιμοποιείται στην υγεία, στον επαγγελματικό αθλητισμό και σε στρατιωτικές εφαρμογές απόδοσης, πριν συνιδρύσει τη HarmonEyes με Dr. Melissa Hunfalvay το 2024 για να επεκτείνει αυτή την τεχνογνωσία σε τεχνητή νοημοσύνη που κατανοεί την ανθρώπινη κατάσταση. Στα πρώτα στάδια της καριέρας του, ο Gross συνέθεσε την εταιρεία περιορισμού κόστους υγειονομικής περίθαλψης KeyClaims, η οποία εξαγοράστηκε από τη Stratose/Zelis Healthcare το 2012, και την πλατφόρμα χρηματοοικονομικής ανάλυσης Trending123.com, η οποία εξαγοράστηκε από την InvestorPlace Media το 2007. Ίδρυσε επίσης την εταιρεία χρηματοοικονομικής τεχνολογίας KeepMore και συνέθεσε την Eastern ATM, η οποία λειτουργούσε ένα ιδιωτικό δίκτυο ΑΤΜ κατά μήκος της ανατολικής ακτής των Η.Π.Α. πριν εξαγοραστεί το 1998.

HarmonEyes αναπτύσσει το Theia, ένα μοντέλο τεχνητής νοημοσύνης που έχει σχεδιαστεί για να εξάγει πτυχές της γνωστικής, συναισθηματικής και σωματικής κατάστασης ενός ατόμου από τις κινήσεις των ματιών σε πραγματικό χρόνο. Η τεχνολογία μπορεί να μετρήσει σήματα όπως το γνωστικό φορτίο, η προσοχή, η ψυχική ετοιμότητα, η κόπωση, το στρες, η απόσπαση, η ναυτία κίνησης και η ταυτοποίηση χρήστη, με πιθανές εφαρμογές που καλύπτουν βοηθούς AI, αυτοκινητοβιομηχανίες, επαυξημένη πραγματικότητα, άμυνα, υγειονομική περίθαλψη, εκπαίδευση, βιομηχανική ασφάλεια, gaming και έρευνα αγοράς. Το Theia έχει σχεδιαστεί να λειτουργεί στο άκρο (edge) σε συσκευές εξοπλισμένες με κοινές κάμερες, χωρίς να απαιτεί εξειδικευμένο υλικό παρακολούθησης ματιού, ενώ η HarmonEyes δηλώνει ότι το βίντεο και τα προσωπικά δεδομένα δεν αποθηκεύονται. Η εταιρεία εντοπίζει την τεχνολογία της πίσω από τη RightEye και αναφέρει ότι τα μοντέλα της βασίζονται σε πάνω από 585 δισεκατομμύρια σημεία δεδομένων κίνησης ματιού σε 16,3 εκατομμύρια εγγραφές, παρέχοντας ένα μεγάλο ιδιόκτητο σύνολο δεδομένων για την εκπαίδευση και τη βελτίωση της τεχνολογίας ανθρώπινης κατάστασης.

Συνίδρυσες τη RightEye το 2013 και πέρασες πάνω από μια δεκαετία αναπτύσσοντας τεχνολογία παρακολούθησης κίνησης ματιού για υγειονομική περίθαλψη, αθλητισμό και στρατιωτικές εφαρμογές πριν λανσάρεις τη HarmonEyes το 2024. Τι σε έπεισε ότι αυτή η υποκείμενη τεχνολογία και το σύνολο δεδομένων θα μπορούσαν να υποστηρίξουν ένα ευρύτερο μοντέλο βάσης για την ανθρώπινη κατάσταση, και γιατί η HarmonEyes ήταν το κατάλληλο όχημα για αυτό το όραμα;

Με πάνω από μια δεκαετία εμπειρίας στην ανάπτυξη προϊόντων παρακολούθησης κίνησης ματιού για διάφορους τομείς, υπήρχαν τρεις αλλαγές που ενέπνευσαν το όραμά μας για τη HarmonEyes να φέρει την ανθρώπινη κατάσταση σε δισεκατομμύρια συσκευές:

1. Κατά τη διάρκεια της τελευταίας δεκαετίας αποκτήσαμε τη μεγαλύτερη επικυρωμένη και επισημασμένη βάση δεδομένων παρακολούθησης κίνησης ματιού, η οποία περιλαμβάνει πάνω από 130 σύνολα δεδομένων που καλύπτουν δημογραφικά (π.χ., ηλικία, φύλο), απόδοση, προσοχή, συναίσθημα, όραση και καταστάσεις υγείας, κ.λπ.
2. Με την εξάπλωση της τεχνητής νοημοσύνης, οι τεχνικές εκπαίδευσης μοντέλων σε πραγματικό χρόνο ήρθαν ξαφνικά διαθέσιμες σε εμάς – και είχαμε τα δεδομένα για να τα εκπαιδεύσουμε.
3. Τα σήματα παρακολούθησης κίνησης ματιού καταγράφονται από κάμερες. Πρόσφατα, και για πρώτη φορά, οι καταναλωτικές κάμερες έγιναν καλύτερες, ταχύτερες, φθηνότερες και αρκετά ισχυρές ώστε να εξάγουν αυτά τα σήματα. Μέσα από τις καινοτομίες της ομάδας μας, μπορούμε τώρα να αναπτύξουμε μοντέλα παρακολούθησης κίνησης ματιού σε οποιαδήποτε συσκευή με κάμερα, συμπεριλαμβανομένων φορητών υπολογιστών, τηλεφώνων, tablet, αυτοκινήτων κ.λπ.

Η Ofcom έχει διακρίνει την συμπεριφορική εκτίμηση ηλικίας, η οποία απαιτεί την παρατήρηση του τρόπου χρήσης μιας πλατφόρμας, από ελέγχους ηλικίας που μπορούν να λειτουργήσουν πριν δοθεί πρόσβαση. Πώς διαφέρει η εκτίμηση ηλικίας από την κίνηση των ματιών τεχνικά και ηθικά από την ανάλυση ιστορικού περιήγησης, προτιμήσεων περιεχομένου, γλώσσας ή άλλων συμπεριφορικών σημάτων;

Η τεχνολογία μας απαιτεί μόνο ένα μικρό δείγμα κινήσεων ματιού από ένα άτομο για να το τοποθετήσει σε μια ηλικιακή ομάδα ή για να επιβεβαιώσει ότι κάποιος είναι νεότερος/παλαιότερος από μια συγκεκριμένη ηλικία. Μπορούμε να συλλέγουμε δεδομένα κίνησης ματιού παθητικά, συνεχώς και μη επεμβατικά, χωρίς να αποθηκεύουμε ή να συλλέγουμε προσωπικά αναγνωρίσιμες πληροφορίες. Επιπλέον, όλα τα δεδομένα παρακολούθησης ματιού καταστρέφονται μόλις παραδοθούν τα αποτελέσματα. Διαθέτουμε επίσης τη δυνατότητα να πραγματοποιούμε ανίχνευση ζωντάνιας και προστασία από πλαστογραφίες, εξασφαλίζοντας ότι οι άνθρωποι δεν μπορούν να εξαπατήσουν το σύστημα.

Ηθικά, αυτό σημαίνει ότι δεν δημιουργούμε προφίλ της συμπεριφοράς, των συνηθειών, των αποφάσεων ή των προτιμήσεων ενός ατόμου — σε αντίθεση με τη συμπεριφορική εκτίμηση, η οποία από τη φύση της δημιουργεί μια εικόνα κάποιου από το πώς ενεργεί με την πάροδο του χρόνου. Παρέχουμε διασφάλιση ηλικίας χωρίς να συλλέγουμε ή να διατηρούμε τέτοιου είδους προσωπικές πληροφορίες, ώστε οι χρήστες και οι γονείς να είναι σίγουροι ότι προστατεύονται αντί να παρακολουθούνται ή να δημιουργούνται προφίλ.

Η δημοσιευμένη έρευνα της HarmonEyes ανέλυσε κινήσεις ματιού από 45.696 άτομα και ανέφερε 94,67% ακρίβεια ταξινόμησης σε 12 ηλικιακές ομάδες. Τι ακριβώς μετρά αυτό το ποσοστό ακρίβειας και πόση πρόσθετη επικύρωση απαιτείται πριν το μοντέλο μπορεί αξιόπιστα να καθορίσει αν κάποιος είναι πάνω ή κάτω από ένα συγκεκριμένο όριο, όπως η ηλικία των 16 ετών;

Η ακρίβεια μετρά τα δεδομένα οποιουδήποτε ατόμου που προστίθενται στο σύνολο δεδομένων και το 94,67% των περιπτώσεων οι κινήσεις ματιού του ατόμου θα ταξινομήσουν σωστά την ηλικιακή ομάδα στην οποία ανήκει (από 12 ομάδες). Η δυνατότητα μέτρησης πάνω ή κάτω από 16 ετών είναι λιγότερο απαιτητική από την ταυτοποίηση μιας συγκεκριμένης ηλικιακής περιοχής. Ωστόσο, τα δεδομένα που χρησιμοποιήθηκαν για τη μελέτη εξαιρούσαν άτομα με προβλήματα όρασης ή νευρολογικές καταστάσεις, έτσι η πρόσθετη επικύρωση πρέπει να περιλαμβάνει άτομα με ορισμένες μη λειτουργικές κινήσεις ματιού.

Μπορείτε να μας περιγράψετε τεχνικά τι συμβαίνει όταν ένας προγραμματιστής καλεί τη δυνατότητα εκτίμησης ηλικίας του Theia, από τη σύλληψη της κίνησης των ματιών μέσω μιας κοινής κάμερας μέχρι την επιστροφή ενός αποτελέσματος ηλικιακής περιοχής, και να εξηγήσετε ποια στάδια πραγματοποιούνται εξ ολοκλήρου στη συσκευή του χρήστη;

Η κάμερα πρώτα υπολογίζει τα διανύσματα βλέμματος, τα οποία βοηθούν στον προσδιορισμό του σημείου που κοιτάζει ο χρήστης. Αυτά τα διανύσματα βλέμματος επεξεργάζονται στη συνέχεια μέσω του SDK μας, όπου μετατρέπονται σε χαρακτηριστικά παρακολούθησης ματιού, όπως η ταχύτητα (πόσο γρήγορα κινούνται τα μάτια) και οι σταθεροί σημειώσεις (πού εστιάζουν τα μάτια).

Μόλις δημιουργηθούν αυτά τα χαρακτηριστικά, τροφοδοτούνται στους αλγόριθμους ML και AI μας για να καθορίσουν την ηλικιακή περιοχή του χρήστη.

Όλη αυτή η επεξεργασία είναι βασισμένη στο edge και μπορεί να εκτελεστεί άμεσα στη συσκευή του χρήστη ή, ανάλογα με τη στρατηγική ανάπτυξης, στο cloud. Δεν διατηρούνται ακατέργαστα δεδομένα παρακολούθησης ματιού· καταστρέφονται αμέσως μετά τη δημιουργία κάθε αποτελέσματος.

Τα συστήματα εκτίμησης ηλικίας μπορούν να αποδίδουν διαφορετικά ανάλογα με το φωτισμό, την ποιότητα της κάμερας, τα γυαλιά, τις επαφές, τις καταστάσεις των ματιών, την αναπηρία, την εθνικότητα και την απόσταση του χρήστη από τη συσκευή. Πώς δοκιμάζετε το Theia με βάση αυτές τις μεταβλητές και ποια αποδεικτικά στοιχεία θα λάβουν οι προγραμματιστές σχετικά με την ακρίβεια για διαφορετικούς πληθυσμούς και περιβάλλοντα;

Είναι αλήθεια ότι η ακρίβεια εκτίμησης ηλικίας διαφέρει ανάλογα με τις συνθήκες. Για να παρέχουμε μοντέλα διασφάλισης ηλικίας στον γενικό πληθυσμό, η HarmonEyes δοκιμάζει, επικυρώνει και αναφέρει τα αποτελέσματα με διαφάνεια ώστε το Theia να χρησιμοποιείται υπεύθυνα. Αυτό περιλαμβάνει την επέκταση και τη γενίκευση των μοντέλων μας χρησιμοποιώντας μεγαλύτερα και πιο διαφοροποιημένα σύνολα δεδομένων.

• Παρέχουμε οδηγίες σχετικά με τα ποσοστά ακρίβειας και, για παράδειγμα, εάν οι χαμηλοί ρυθμοί δειγματοληψίας δεδομένων επηρεάζουν την καθυστέρηση εξόδου της διασφάλισης ηλικίας.
• Λαμβάνουμε υπόψη και παρακολουθούμε σε πραγματικό χρόνο πολλές πτυχές της ποιότητας των δεδομένων.

Πώς θα αντιμετωπίσει το Theia τις προσπάθειες παράκαμψης, όπως προεγγραφόμενα βίντεο, φωτογραφίες, συνθετικά πρόσωπα, ένας μεγαλύτερος αδερφός που ολοκληρώνει τον έλεγχο, ή ένας χρήστης που αλλάζει εσκεμμένα το βλέμμα του, και θα ενσωματωθεί η ανίχνευση ζωντάνιας απευθείας στο SDK;

Όλα τα μοντέλα διασφάλισης ηλικίας της HarmonEyes θα περιλαμβάνουν ανίχνευση ζωντάνιας και ελέγχους πλαστογραφίας. Οι κινήσεις των ματιών είναι μοναδικές για κάθε άτομο και η HarmonEyes μπορεί να καθορίσει εάν η κίνηση ματιού για έναν λογαριασμό ταιριάζει με το άτομο που δημιούργησε το λογαριασμό, ή είναι διαφορετικό άτομο, π.χ. ένας μεγαλύτερος αδερφός.

Κανένα μοντέλο εκτίμησης ηλικίας δεν θα είναι τέλεια ακριβές, ιδιαίτερα για χρήστες κοντά σε νομικό όριο. Πώς πρέπει οι προγραμματιστές να διαχειρίζονται αβέβαια αποτελέσματα και φαντάζεστε το Theia να χρησιμοποιείται ως κύριος έλεγχος, σήμα κινδύνου ή μέρος μιας πολυεπίπεδης διαδικασίας που προωθεί ορισμένους χρήστες σε άλλη μέθοδο επαλήθευσης;

Κανένα μοντέλο εκτίμησης ηλικίας δεν είναι τέλειο. Παρέχουμε ένα επίπεδο εμπιστοσύνης με κάθε αποτέλεσμα. Αυτό το επίπεδο ακρίβειας και εμπιστοσύνης μπορεί να είναι επαρκές για την επιβεβαίωση της διασφάλισης ηλικίας. Ωστόσο, εάν, για παράδειγμα, το επίπεδο εμπιστοσύνης για μια συγκεκριμένη μέτρηση είναι κάτω από ένα ορισμένο όριο, μπορεί να χρησιμοποιηθεί ως τρόπος ενεργοποίησης δευτεροβάθμιας επαλήθευσης. Το μοντέλο διασφάλισης ηλικίας μας μπορεί να χρησιμοποιηθεί ως μία από τις πολλές μεθόδους επαλήθευσης της ηλικίας ενός ατόμου, όπου πρέπει να περάσουν πολλαπλές μέθοδοι. Τέλος, η ανοχή στον κίνδυνο και το αν η περίπτωση χρήσης απαιτεί συγκεκριμένη ηλικία, αντί για ηλικιακή περιοχή, ή ακόμη και ένα όριο ηλικίας (π.χ. 16 ή μικρότερη) θα καθορίσει αν η λύση είναι κύριος έλεγχος ή πολυεπίπεδη διαδικασία.

Η HarmonEyes δηλώνει ότι το Theia επεξεργάζεται πληροφορίες στο edge και καταστρέφει τα δεδομένα παρακολούθησης ματιού μόλις παραδοθεί ένα αποτέλεσμα. Πώς μπορούν οι προγραμματιστές, οι ελεγκτές ή οι ρυθμιστές να επαληθεύσουν ανεξάρτητα αυτήν την αρχιτεκτονική, και πώς θα βελτιώσει η εταιρεία τα μοντέλα της χωρίς να συλλέγει ακατέργαστα δεδομένα παρακολούθησης ματιού από τις εφαρμογές που έχουν αναπτυχθεί;

Η διαδικασία ανάπτυξης του μοντέλου μας, καθώς και η επακόλουθη βελτίωση του μοντέλου, εκτελούνται εντός του ιδιόκτητου pipeline παρακολούθησης ματιού. Δεν χρησιμοποιούμε δεδομένα πελατών γι’ αυτό· χρησιμοποιούμε υπάρχοντα (και αυξανόμενα) επικυρωμένα δεδομένα.

Αυτό μας επιτρέπει να παρέχουμε τις λύσεις μας στο edge (χωρίς cloud), εάν το επιθυμούμε. Σε αυτά τα περιβάλλοντα βασισμένα στο edge, η υπολογιστική ισχύς και η αποθήκευση είναι συνήθως περιορισμένες και δεν υπάρχει δυνατότητα αποθήκευσης δεδομένων στη συσκευή. Παρέχουμε τα αποτελέσματα διασφάλισης ηλικίας κάθε δευτερόλεπτο· η πολιτική μας είναι να καταστρέφουμε τα δεδομένα παρακολούθησης ματιού κάθε δευτερόλεπτο (μετά από κάθε παραγόμενο αποτέλεσμα).

Αναγνωρίζουμε ότι οι ισχυρισμοί σχετικά με την αρχιτεκτονική είναι αξιόπιστοι μόνο όσο η δυνατότητα επαλήθευσής τους εξωτερικά. Επιχειρούμε την απόκτηση πιστοποιήσεων τρίτων και βεβαιώσεων που σχεδιάζονται ώστε να επιτρέπουν σε προγραμματιστές, ελεγκτές και ρυθμιστές να επαληθεύουν ότι τα δεδομένα παρακολούθησης ματιού δεν συλλέγονται ή διατηρούνται σε εφαρμογές που έχουν αναπτυχθεί.

Το Ηνωμένο Βασίλειο αναπτύσσει κριτήρια για εξαιρετικά αποτελεσματικούς ελέγχους, ενώ η Ευρωπαϊκή Ένωση δίνει έμφαση σε ανώνυμα συστήματα απόδειξης ηλικίας που αποκαλύπτουν όσο το δυνατόν λιγότερες προσωπικές πληροφορίες. Πώς θα αποδείξει η HarmonEyes ότι η φυσιολογική εκτίμηση ηλικίας πληροί αυτές τις νέες απαιτήσεις, αντί να εισάγει απλώς μια διαφορετική μορφή βιομετρικής παρακολούθησης;

Κάθε μοντέλο που αποστέλλουμε συνοδεύεται από λευκό έγγραφο που τεκμηριώνει τη μεθοδολογία ανάπτυξης, την ακρίβεια του μοντέλου και τις γνωστές περιορισμούς, και καθιστούμε το Theia διαθέσιμο για ζωντανή, απομακρυσμένη δοκιμή ώστε οι ρυθμιστές ή οι ελεγκτές να αξιολογούν άμεσα την απόδοση σε πραγματικές συνθήκες.

Καθώς η διασφάλιση ηλικίας μεταβαίνει από μεμονωμένες κοινωνικές πλατφόρμες προς λειτουργικά συστήματα, καταστήματα εφαρμογών και υποδομές σε επίπεδο συσκευής, πού πιστεύετε ότι θα πρέπει να τοποθετηθεί το Theia σε αυτή τη στοίβα τεχνολογίας και πώς θα έμοιαζε η υπεύθυνη υιοθέτηση σε καταναλωτικές εφαρμογές, gaming, κοινωνικά δίκτυα και άλλες υπηρεσίες με περιορισμούς ηλικίας;

Επιδιώκουμε πολλές μορφές ενσωματώσεων για τη δυνατότητα διασφάλισης ηλικίας. Οραματιζόμαστε το Theia να λειτουργεί εντός του ιδιωτικού τεχνολογικού στοίβας μιας εταιρείας, όπως μια πλατφόρμα κοινωνικών μέσων· εντός υποδομής συσκευής, όπως ένα λειτουργικό σύστημα· εντός εμπορικής υποδομής, όπως ένα δίκτυο πληρωμών· ή άμεσα σε επίπεδο εφαρμογής.

Για εμάς, η υπεύθυνη υιοθέτηση σημαίνει παροχή ακριβούς δυνατότητας διασφάλισης ηλικίας με διαφάνεια των διαδικασιών επικύρωσης, ποικιλία δεδομένων εντός του μοντέλου, και παροχή αυτής με τρόπο ιδιωτικό και οικονομικά αποδοτικό στην υλοποίηση.

Σας ευχαριστούμε για τη σπουδαία συνέντευξη, οι αναγνώστες που θέλουν να μάθουν περισσότερα θα πρέπει να επισκεφθούν το HarmonEyes.