Real-Time Image Segmentation

Ένα πραγματικό drone, ένα Jetson και μια ζωντανή ματιά στο μοντέλο-μαθητή του CoDrones καθώς «σκέφτεται» σε πραγματικό χρόνο.

1 Σχετικά

Ζωντανή επίδειξη του ερευνητικού έργου CoDrones: η κάμερα ενός πραγματικού drone στέλνει εικόνα σε ένα Jetson πάνω στο drone, που τρέχει το ίδιο ελαφρύ μοντέλο-μαθητή κατάτμησης φωτιάς στο edge, δηλαδή απευθείας στο Jetson, έναν τελικό κόμβο με περιορισμένη υπολογιστική ισχύ, και στέλνει ζωντανά πίσω το αποτέλεσμα. Δεν υπάρχει προηχογραφημένο υλικό: οι επισκέπτες βλέπουν το πραγματικό μοντέλο να αναλύει σε πραγματικό χρόνο ό,τι βλέπει το drone.

0,685

Dice score δασκάλου–μαθητή

0,747

IoU συνέπειας σε αναστροφή (σταθερότητα πρόβλεψης)

8,13 FPS

inference μόνο σε CPU, 123 ms/καρέ

2 Από τη δημοσίευση

Η ίδια διαδικασία δασκάλου–μαθητή χωρίς χειροκίνητη επισημείωση τροφοδοτεί αυτή τη ζωντανή μετάδοση. Εκπαιδεύτηκε χωρίς ούτε ένα καρέ με χειροκίνητη ετικέτα.

Είσοδος RGB, μάσκα από το μοντέλο-δάσκαλο και πρόβλεψη του μοντέλου-μαθητή σε σκηνή δασικής πυρκαγιάς — Είσοδος RGB, ψευδο-ετικέτα του δασκάλου και η πρόβλεψη του μοντέλου-μαθητή.

Πίνακας σύγχυσης δασκάλου–μαθητή για την παρουσία φωτιάς, με 99,2% συμφωνία και μηδέν ψευδώς αρνητικά — Συμφωνία δασκάλου–μαθητή: 99,2%, με μηδέν ψευδώς αρνητικά.

3 Δες ζωντανά

Άνοιξε τη ζωντανή μετάδοση →

Ανοίγει τη ζωντανή εικόνα της κάμερας με το inference σε νέα καρτέλα.