Τα αυτόνομα συστήματα ζουν και πεθαίνουν από ένα ερώτημα:τι συμβαίνει στη συνέχεια;
Οι αισθητήρες λένε σε ένα αυτόνομο όχημα πώς φαίνεται ο κόσμος αυτή τη στιγμή — καρέ κάμερας, νέφη σημείων lidar, αντανακλάσεις ραντάρ, μετρήσεις GPS και IMU. Αλλά η ασφαλής οδήγηση είναι η προσμονή: η πρόβλεψη του πώς μπορεί να κινηθούν οι πεζοί, αν ένας ποδηλάτης θα μπει σε μια λωρίδα κυκλοφορίας, πώς ένα αυτοκίνητο μπορεί να παρεκκλίνει από τη γραμμή κυκλοφορίας και τι μπορεί να αποκαλύψει μια κλειστή διασταύρωση.
Εκεί γεννήθηκε η ιδέα ενόςπαγκόσμιο μοντέλοΈνα παγκόσμιο μοντέλο είναι μια μαθημένη αναπαράσταση του «πώς λειτουργεί ο κόσμος» που μπορεί να κυληθεί προς τα εμπρός στο χρόνο: δεδομένης της τρέχουσας σκηνής και μιας δράσης, μπορεί να δημιουργήσει εύλογες μελλοντικές σκηνές. Στη ρομποτική και την αυτονομία, το όνειρο είναι να έχουμε ένα μοντέλο που μπορεί να προσομοιώνει την πραγματικότητα αρκετά καλά ώστε να εκπαιδεύει και να επικυρώνει πολιτικές πριν καν φτάσουν σε δημόσιους δρόμους.
Αναφορές ότι η Waymo αξιοποιεί έναΤζίνι 3Η προσέγγιση τύπου – για τη δημιουργία ενός παγκόσμιου μοντέλου οδήγησης είναι μεγάλη υπόθεση — όχι επειδή λύνει μαγικά το ζήτημα της αυτονομίας, αλλά επειδή σηματοδοτεί μια μετατόπιση σε αυτό που η βιομηχανία θεωρεί ως το σημείο συμφόρησης.
Η αυτονομία οδήγησης είναι δύο προβλήματα: η αντίληψη και η πρόβλεψη
Οι πρώτες συζητήσεις σχετικά με την αυτόνομη οδήγηση επικεντρώνονταν στην αντίληψη: «Μπορεί το αυτοκίνητο να δει;» Αυτό περιλαμβάνει την ανίχνευση αντικειμένων, την ταξινόμησή τους, την εκτίμηση της θέσης και της ταχύτητάς τους και την παρακολούθησή τους με την πάροδο του χρόνου.
Σήμερα, το κύριο ζήτημα είναι ολοένα και περισσότερο η πρόβλεψη και ο σχεδιασμός:
- Προφητεία: πρόβλεψη των μελλοντικών τροχιών άλλων παραγόντων (αυτοκίνητα, ποδήλατα, πεζοί).
- Σχεδίαση: επιλογή της τροχιάς του οχήματος ώστε να είναι ασφαλής, νόμιμη και άνετη.
Τα σφάλματα αντίληψης εξακολουθούν να είναι σημαντικά, αλλά ακόμη και η τέλεια αντίληψη δεν σας δίνει βεβαιότητα για την πρόθεση. Ένας πεζός σε ένα πεζοδρόμιο μπορεί να βγει έξω. Ένας οδηγός μπορεί να παραβιάσει το κόκκινο φανάρι. Ένας ποδηλάτης μπορεί να ταλαντευτεί.
Ένα παγκόσμιο μοντέλο στοχεύει στην κωδικοποίηση αυτών των αβεβαιοτήτων, ώστε ο σχεδιαστής να μπορεί να τις κρίνει.
Τι είναι ένα «παγκόσμιο μοντέλο» με όρους Μηχανικής Μάθησης;
Στη μηχανική μάθηση, ένα παγκόσμιο μοντέλο είναι συνήθως ένα γενετικό μοντέλο που έχει εκπαιδευτεί σε μεγάλους όγκους εμπειρίας. Μπορεί:
- Αντιπροσωπεύουν την λανθάνουσα κατάσταση του περιβάλλοντος.
- Προβλέψτε πώς θα εξελιχθεί το κράτος.
- Δημιουργήστε παρατηρήσεις που συνάδουν με αυτήν την εξέλιξη.
Για την οδήγηση, οι παρατηρήσεις είναι πολυτροπικές: εικόνες, lidar, χάρτες και σημασιολογικές ετικέτες.
Η βασική αξία είναι ότι, αφού εκπαιδευτείτε, μπορείτεδείγματα συμβολαίων μελλοντικής εκπλήρωσηςκαι αποφάσεις σε stress-tests. Αντί να ρωτήσετε «ποια είναι η μία προβλεπόμενη πορεία», ρωτάτε «ποιες είναι οι πιθανές διαδρομές και ποιες είναι επικίνδυνες;»
Γιατί η προσομοίωση είναι κεντρικής σημασίας (και γιατί είναι τόσο δύσκολη)
Η Waymo και άλλοι βασίζονται ήδη σε μεγάλο βαθμό στην προσομοίωση. Το πρόβλημα είναι η πιστότητα.
Οι παραδοσιακοί προσομοιωτές κατασκευάζονται από:
- Χειρόγραφη φυσική και δυναμική οχημάτων.
- Στοιχεία σκηνής (δρόμοι, κτίρια, φανάρια).
- Σεναριογραφικά καθορισμένοι «ηθοποιοί» που ακολουθούν κανόνες.
Αυτά είναι εξαιρετικά για πολλές δοκιμές, αλλά η μακρά ουρά της πραγματικότητας είναι βάναυση: περίεργη συμπεριφορά πεζών, ασυνήθιστος φωτισμός, ζώνες κατασκευής, σπάνια σήμανση, τοπικές κουλτούρες οδήγησης, περιπτώσεις ακραίων καιρικών συνθηκών, δυσλειτουργίες αισθητήρων και ένα εκατομμύριο ανεπαίσθητες αλληλεπιδράσεις που δεν εμφανίζονται ποτέ σε ένα τακτοποιημένο σύνολο κανόνων.
Ένα μοντέλο βασισμένο σε γνώσεις κόσμου είναι ελκυστικό επειδή μπορεί να καταγράψει ακατάστατες κατανομές απευθείας από δεδομένα. Εάν έχετε αρκετά αρχεία καταγραφής πραγματικής οδήγησης, μπορείτε να εκπαιδεύσετε ένα μοντέλο ώστε να δημιουργεί σκηνές που «μοιάζουν» με τον δρόμο — συμπεριλαμβανομένης της παραδοξότητας.
Αλλά το να «νιώθεις ότι είσαι πραγματικός» δεν αρκεί για την ασφάλεια. Η οδήγηση είναι αντιφατική: αν το μοντέλο σας χάσει έστω και ένα μικρό σύνολο σπάνιων αλλά θανατηφόρων σεναρίων, το σύστημα μπορεί και πάλι να αποτύχει.
Τι υποδηλώνει μια προσέγγιση τύπου Τζίνι
Ένα σύστημα τύπου Genie (όπως αναφέρθηκε) υπονοεί ένα μοντέλο που μπορεί να δημιουργήσει εύλογα μελλοντικά πλαίσια που εξαρτώνται από ενέργειες και συμφραζόμενα.
Εάν η Waymo μπορεί να δημιουργήσει «επόμενα καρέ» υψηλής πιστότητας για σύνθετες αστικές σκηνές, μπορεί ενδεχομένως να:
- Δημιουργώαντιπαραδείγματα: «Τι θα γινόταν αν είχαμε επιβραδύνει νωρίτερα;» «Τι θα γινόταν αν παίρναμε την αριστερή διαφορά;»
- Αύξησηκάλυψη σπάνιων γεγονότων: υπερδειγματοληψία ασυνήθιστων καταστάσεων για εκπαίδευση.
- Βελτιώεκπαίδευση κλειστού βρόχου: εκπαίδευση πολιτικής εντός του προσομοιωμένου κόσμου, όχι μόνο σε καταγεγραμμένα δεδομένα.
Αυτό είναι ένα βήμα πέρα από την «αναπαραγωγή καταγεγραμμένων αρχείων καταγραφής». Είναι σαν να περνάμε από την παρακολούθηση βίντεο οδήγησης σε ένα sandbox όπου το ίδιο το sandbox συμπεριφέρεται σαν πόλη.
Το αλίευμα ασφαλείας: σύνθετα σφάλματα μοντέλου
Υπάρχει λόγος για τον οποίο οι ομάδες ασφαλείας είναι επιφυλακτικές σχετικά με τους μαθησιακούς προσομοιωτές: τα μικρά σφάλματα συσσωρεύονται με την πάροδο του χρόνου.
Αν ένα παγκόσμιο μοντέλο είναι ελαφρώς λανθασμένο ως προς:
- Πώς επιταχύνουν οι πεζοί,
- Πώς αντιδρούν τα αυτοκίνητα στο φρενάρισμα,
- Πώς συμπεριφέρονται οι αισθητήρες υπό το φως του ήλιου,
τότε μια προσομοιωμένη ανάπτυξη μπορεί να αποκλίνει από την πραγματικότητα μετά από λίγα δευτερόλεπτα. Αυτό μπορεί να παράγει σήματα εκπαίδευσης που βελτιστοποιούνται για τις ιδιορρυθμίες του προσομοιωτή και όχι για τον πραγματικό κόσμο — ένα πρόβλημα που μερικές φορές ονομάζεταικενό προσομοίωσης προς πραγματικό.
Οι σύγχρονες προσεγγίσεις μετριάζουν αυτό το φαινόμενο με:
- Βραχυπρόθεσμες εφαρμογές σε συνδυασμό με πραγματικά αρχεία καταγραφής.
- Τυχαιοποίηση τομέων (προσθήκη θορύβου και παραλλαγής).
- Επικύρωση έναντι αναβαλλόμενων πραγματικών σεναρίων.
- Περιορισμοί ασφαλείας που δεν βασίζονται αποκλειστικά σε μαθημένες προβλέψεις.
Ένα παγκόσμιο μοντέλο μπορεί να είναι απίστευτα χρήσιμο ακόμα κι αν δεν είναι «τέλεια πραγματικότητα», αρκεί να γνωρίζετε πού είναι αξιόπιστο και πού όχι.
Παγκόσμια μοντέλα και χάρτες: η δομή κάτω από τα pixel
Ένα αυτόνομο αυτοκίνητο δεν αντιδρά μόνο στις εικόνες. Βασίζεται επίσης στη δομή:
- Χάρτες HD (γεωμετρία λωρίδων κυκλοφορίας, συσκευές ελέγχου κυκλοφορίας).
- Τοπική αναγνώριση (πού βρίσκομαι στον χάρτη;).
- Στοιχεία τύπου SLAM σε ορισμένα συστήματα (ειδικά εκτός χαρτογραφημένων περιοχών).
Ένα ισχυρό παγκόσμιο μοντέλο πρέπει να ενσωματώσει αυτή τη δομή. Διαφορετικά, μετατρέπεται σε μια φανταχτερή γεννήτρια βίντεο που δεν μπορεί να διατηρήσει συνεπή γεωμετρία.
Αυτός είναι ο λόγος για τον οποίο τα μοντέλα αυτονομίας στον κόσμο συχνά συνδυάζονται:
- Χαρακτηριστικά της μαθημένης αντίληψης,
- Σαφείς γεωμετρικοί περιορισμοί,
- Προηγούμενοι Χάρτες,
- Αναπαραστάσεις που βασίζονται σε πράκτορες (άλλοι χρήστες του οδικού δικτύου ως οντότητες με προθέσεις).
Τα καλύτερα συστήματα είναι τα υβριδικά: χρησιμοποιούν μάθηση όπου τα δεδομένα είναι πλούσια και κανόνες όπου οι περιορισμοί είναι αυστηροί.
Τι αλλαγές για την ανάπτυξη προϊόντων
Η πιο πρακτική επίδραση ενός καλού παγκόσμιου μοντέλου είναιμηχανική ταχύτητα.
Σήμερα, η βελτίωση ενός συστήματος αυτόνομης οδήγησης απαιτεί συχνά:
- Εύρεση πραγματικών αποτυχιών (αποσυνδέσεις, παραλίγο ατυχήματα).
- Προσθήκη δεδομένων και ετικετών.
- Πρόβλεψη/σχεδιασμός συντονισμού.
- Επανεπικύρωση σε τεράστιες σουίτες σεναρίων.
Εάν ένα παγκόσμιο μοντέλο μπορεί να δημιουργήσει ρεαλιστικές παραλλαγές της βλάβης, οι μηχανικοί μπορούν να επαναλάβουν την εργασία πιο γρήγορα. Μπορεί επίσης να βοηθήσει στην απάντηση ερωτήσεων όπως:
- «Είναι ασφαλής αυτή η συμπεριφορά σε μια διανομή ή ήταν τυχερή σε ένα αρχείο καταγραφής;»
- «Πόσο ευαίσθητο είναι το σύστημα στον δισταγμό των πεζών;»
- «Ποιο είναι το χειρότερο σενάριο αν ένας άλλος οδηγός συμπεριφερθεί επιθετικά;»
Η ταχύτερη επανάληψη δεν αποτελεί εγγύηση ασφάλειας — αλλά μπορεί να βελτιώσει τον βρόχο ανατροφοδότησης.
Τα μεγάλα ανοιχτά ερωτήματα
Ακόμα κι αν το παγκόσμιο μοντέλο είναι εξαιρετικό, υπάρχουν αυστηρά όρια:
- ΕυθύνηΜπορείτε να εξηγήσετε γιατί το σύστημα προέβλεψε ένα δεδομένο μέλλον;
- ΝομιμοποίησηΠώς πιστοποιείτε έναν εκπαιδευμένο προσομοιωτή ως αντιπρόσωπο;
- Περιπτώσεις ακμήςΠώς διασφαλίζετε ότι καλύπτονται σπάνια αλλά κρίσιμα σενάρια;
- Ευστάθεια πολιτικήςΣυμπεριφέρεται με ασφάλεια στην πραγματικότητα μια πολιτική που έχει εκπαιδευτεί στο μοντέλο;
Εδώ ακριβώς έρχονται στο προσκήνιο οι ρυθμιστικές αρχές και οι υποθέσεις ασφαλείας. Τα αυτόνομα οχήματα θα χρειαστούν επιχειρήματα που να συνδέουν τις μεθόδους εκπαίδευσης και δοκιμών με τον πραγματικό κίνδυνο.
Συμπέρασμα
Ένα μοντέλο κόσμου υψηλής πιστότητας είναι ένα ισχυρό εργαλείο για την αυτονομία, επειδή μετατρέπει την οδήγηση από το «μάθημα μόνο από ό,τι συνέβη» σε «μάθημα από ό,τι θα μπορούσε να συμβεί». Εάν η Waymo μπορεί να χρησιμοποιήσει ένα σύστημα τύπου Genie 3 για να δημιουργήσει ρεαλιστικές μελλοντικές οδικές σκηνές, θα μπορούσε να επιταχύνει την εκπαίδευση, τις δοκιμές σεναρίων και την αξιολόγηση ασφάλειας - αλλά το δύσκολο κομμάτι παραμένει να αποδειχθεί ότι ο προσομοιωμένος κόσμος είναι αρκετά πιστός ώστε οι βελτιώσεις να μεταφερθούν και σε πραγματικούς δρόμους.