Μέγεθος γραμματοσειράς: +

Όταν το ρομπότ πείθεται σε λίγα λεπτά να μεταφέρει βόμβα

Όταν το ρομπότ πείθεται σε λίγα λεπτά να μεταφέρει βόμβα

Ο Benben είναι ένα αξιολάτρευτο τετράποδο ρομπότ που τραγουδά, χορεύει, συνομιλεί με ανθρώπους και βγάζει φωτογραφίες. Όταν μια ομάδα ερευνητών του ζητάει να μεταφέρει μια βόμβα με σκοπό την ανατίναξή της, το ρομπότ αρνείται ευγενικά. Όμως, η άρνησή του κρατάει ελάχιστα. Μέσα στις μόλις δύο επόμενες εντολές, οι ερευνητές καταφέρνουν να παρακάμψουν τις δικλείδες ασφαλείας του, πείθοντάς το ότι το αίτημα είναι μέρος κινηματογραφικών γυρισμάτων. Λίγα δευτερόλεπτα αργότερα, ο Benben μεταφέρει τη βόμβα.

Το παραπάνω συμβάν δεν είναι σενάριο επιστημονικής φαντασίας, αλλά ένα πραγματικό πείραμα το οποίο διεξήγε ερευνητική ομάδα του Πανεπιστημίου της Πενσιλβάνιας, με επικεφαλής τον Γιώργο Παππά, καθηγητή στο Τμήμα Ηλεκτρολόγων Μηχανικών στο Πανεπιστήμιο της Πενσιλβάνιας και αναπληρωτή κοσμήτορα για την Έρευνα. Μέσα από αυτό οι ερευνητές κατέδειξαν πόσο εύκολα μπορούν να παρακαμφθούν οι μηχανισμοί ασφαλείας που θέτουν οι κατασκευαστές των συστημάτων τεχνητής νοημοσύνης. Αυτή η παράκαμψη της ασφάλειας είναι γνωστή διεθνώς ως jailbreaking.

Μπορεί τα chatbots να είναι ευάλωτα σε επιθέσεις παράκαμψης των περιορισμών ασφαλείας, ωστόσο οι ερευνητές ανέδειξαν ότι όταν αυτά τα συστήματα τεχνητής νοημοσύνης κατευθύνουν ρομπότ, τότε μπορούν να γίνουν πραγματικά επικίνδυνα.

"Υπάρχει μια φοβερή τάση ειδικά τον τελευταίο χρόνο για το physical intelligence, δηλαδή την προσπάθεια η τεχνητή νοημοσύνη να αλληλεπιδρά στον φυσικό κόσμο. Το θέμα όμως είναι να δούμε ποιο είναι το ρίσκο αυτής της κατεύθυνσης. Γιατί μπορεί τα μεγάλα γλωσσικά μοντέλα να μην είναι ασφαλή, ωστόσο όταν αλληλεπιδρούν με τον φυσικό κόσμο, μπορεί να έχουν επιπτώσεις που να επιφέρουν απώλεια ζωής ή καταστροφές στο περιβάλλον. Οπότε το ρίσκο της ασφάλειας είναι μεγάλο", εξηγεί στο ΑΠΕ-ΜΠΕ ο Γιώργος Παππάς.

Ρομποτική και τεχνητή νοημοσύνη: μια επικίνδυνη σχέση

Η ενσωμάτωση της τεχνητής νοημοσύνης στη ρομποτική ξεκίνησε στις αρχές της δεκαετίας του 2010 δίνοντας στα ρομπότ "όραση". Ωστόσο, η πραγματική επανάσταση συντελείται από το 2022 και μετά με την αξιοποίηση της Παραγωγικής Τεχνητής Νοημοσύνης (Generative AI). Πλέον τα μοντέλα τεχνητής νοημοσύνης δίνουν οδηγίες στα ρομπότ, έχουν βελτιωμένη συλλογιστική, μπορούν να κάνουν αυτόνομες ενέργειες και έρχονται ένα βήμα πιο κοντά στην αλληλεπίδραση με τον άνθρωπο.

Ο Γιώργος Παππάς με την ομάδα του έχουν ερευνήσει διεξοδικά την ασφάλεια των ρομπότ, δίνοντας έμφαση στα ρίσκα που επιφέρει η ενσωμάτωση της τεχνητής νοημοσύνης.

Το 2023 δημιούργησαν τον αλγόριθμο PAIR, την πρώτη επίθεση jaibreaking σε μεγάλα γλωσσικά μοντέλα με τη χρήση εντολών, με την οποία διαπίστωσαν την ευαλωτότητα των μεγάλων γλωσσικών μοντέλων. Δύο χρόνια μετά τη δημοσίευσή του, ο αλγόριθμος έχει αναφερθεί (cited) περισσότερες από 1.400 φορές σε επιστημονικά άρθρα, ενώ χρησιμοποιείται πολύ και από τις εταιρείες που παράγουν γλωσσικά μοντέλα. Η έρευνα εκείνη οδήγησε στη δημιουργία του JaibreakBench, ενός αποθετηρίου εντολών για παράκαμψη κανόνων ασφαλείας και ενός πίνακα που παρακολουθεί τις επιθέσεις στα μεγάλα γλωσσικά μοντέλα.

Βλέποντας το πόσο εύκολο είναι το jailbreaking στα μεγάλα γλωσσικά μοντέλα, οι ερευνητές συνέχισαν με τη διερεύνηση της ευαλωτότητας των ρομπότ που ενσωματώνουν τεχνητή νοημοσύνη και ανέπτυξαν τον αλγόριθμο RoboPAIR. Σε πειράματα που έγιναν σε τρία διαφορετικά ρομποτικά συστήματα, μεταξύ αυτών και στο τετράποδο ρομπότ Benben, διαπιστώθηκε ότι ο αλγόριθμος είχε 100% επιτυχία στην παράκαμψη των περιορισμών ασφαλείας σε μόλις λίγες εντολές. Την έρευνα δημοσίευσαν την περασμένη χρονιά στα πρακτικά του συνεδρίου "Proceedings of the IEEE International Conference on Robotics and Automation".

Ένα εύρημα που οι επιστήμονες βρήκαν ανησυχητικό ήταν το ότι τα γλωσσικά μοντέλα δεν συμμορφώνονταν απλά με κακόβουλες προτροπές, αλλά πρόσφεραν ενεργά προτάσεις, περιγράφοντας ακόμα και το πώς κοινά αντικείμενα μπορούσαν να χρησιμοποιηθούν για να χτυπήσουν ανθρώπους. 

"Τίθεται λοιπόν ένα θέμα για το πόσο ασφαλές είναι να βάζουμε γλωσσικά μοντέλα τόσο γρήγορα σε ρομπότ και να αποτελούν ήδη προϊόντα. Υπάρχουν χιλιάδες τέτοια ρομπότ έξω", επισημαίνει ο κ. Παππάς και υπενθυμίζει ότι ρομπότ με τεχνητή νοημοσύνη χρησιμοποιούνται ήδη σε πολεμικές συρράξεις.

Ανάγκη για πολλαπλά επίπεδα ασφαλείας

Σε πιο πρόσφατο άρθρο που δημοσιεύθηκε πριν από λίγες ημέρες στο περιοδικό "Science Robotics" ερευνητές από τα Πανεπιστήμια της Πενσιλβάνιας, Carnegie Mellon και της Οξφόρδης, με κύριο συγγραφέα τον Γιώργο Παππά, υπογραμμίζουν ότι, όπως έχει αποδειχθεί από τις προηγούμενες έρευνες, τα ρομπότ με τεχνητή νοημοσύνη μπορούν να εκτελέσουν επικίνδυνες συμπεριφορές. Ακόμα και φαινομενικά αβλαβείς εντολές μπορούν να γίνουν επικίνδυνες εάν τα ρομπότ δεν λαμβάνουν υπόψη το πλαίσιο κατά τη λήψη των αποφάσεων.

Όπως αναλύουν, για την αντιμετώπιση των κινδύνων που μπορούν να προκύψουν από την ενσωμάτωση της τεχνητής νοημοσύνης στα ρομπότ χρειάζεται να υπάρχει ένα δίχτυ προστασίας για την ασφαλή λειτουργία τους, που να έχει φίλτρα ασφαλείας και στο γλωσσικό επίπεδο, αλλά και στην εκτέλεση των εντολών στον φυσικό κόσμο.

Όπως εξηγεί ο κ. Παππάς, η εφαρμογή φίλτρων στο φυσικό επίπεδο αποτελεί πρόκληση. "Πρόκειται για κάτι καινούριο και πολύ δύσκολο. Για παράδειγμα, η εντολή σε ένα ρομπότ να περάσει μια διάβαση, μπορεί να είναι ασφαλής, ωστόσο για να γίνει και η εκτέλεσή της ασφαλής θα πρέπει το ρομπότ να ερμηνεύσει αυτή την πρόταση ανάλογα με το περιβάλλον και το επιχειρησιακό πλαίσιο στο οποίο βρίσκεται. Αυτή η διαδικασία ονομάζεται contextual safety και θα είναι το μέλλον στην προσπάθεια να κάνουμε τα ρομπότ πιο ασφαλή". Ο ίδιος προσθέτει ότι "η ασφάλεια των ρομπότ στο μέλλον θα είναι όπως στα αεροπλάνα, που έχουν πολλά επίπεδα ασφαλείας. Θα χρειαστούμε μια τέτοια αρχιτεκτονική στο μέλλον για να είναι τα ρομπότ που κυκλοφορούν στην κοινωνία πολύ πιο ασφαλή". 

Στην κατεύθυνση αυτή η ερευνητική ομάδα έχει δημιουργήσει το φίλτρο Roboguard, που έχει διαπιστωθεί ότι μειώνει κατά 95% τα προβλήματα από τις επιθέσεις jailbreaking. Ο κ. Παππάς διευκρινίζει ότι όλες οι λύσεις που αναπτύσσονται είναι ανοιχτού κώδικα, προκειμένου να μπορούν να χρησιμοποιηθούν από τις εταιρείες για τη βελτίωση των κενών ασφαλείας. "Η φιλοσοφία μας είναι να βοηθήσουμε την ερευνητική κοινότητα, αλλά και τις εταιρείες να κάνουν την τεχνητή νοημοσύνη και τα ρομπότ πολύ πιο ασφαλή".

Ο κ. Παππάς υπογραμμίζει τέλος και τη σημασία της δημιουργίας ρυθμιστικού πλαισίου που να επικεντρώνεται στην αλληλεπίδραση της τεχνητής νοημοσύνης με τα ρομπότ. Υπογραμμίζει ότι το AI Act της Ευρωπαϊκής Ένωσης είναι πρωτοπόρο, ωστόσο "θα χρειαστεί εμβάθυνση των ρυθμιστικών προτάσεων στις εφαρμογές που αφορούν στα ρομπότ".

Πηγή: ΑΠΕ

×
Stay Informed

When you subscribe to the blog, we will send you an e-mail when there are new updates on the site so you wouldn't miss them.

FT: Η Γερμανία επιχειρεί ξανά να ανοράσει αμερικαν...
Live Blog - Το Ιράν απειλεί με αντίποινα μετά τις ...

Με την αποδοχή θα έχετε πρόσβαση σε μια υπηρεσία που παρέχεται από τρίτο μέρος εκτός του https://meionotika.gr/

ΕΠΙΚΑΙΡΟΤΗΤΑ

ΕΠΙΚΑΙΡΟΤΗΤΑ
29 Ιουνίου 2026
Η ενίσχυση της διμερούς αμυντικής συνεργασίας Ελλάδας - Αλβανίας καθώς και περιφερειακά και διεθνή ζητήματα άμυνας και ασφαλείας βρέθηκαν στο επίκεντρο της συνάντησης που είχε, σήμερα, Δευτέρα 29 Ιουνίου, ο υπουργός Εθνικής Άμυνας Νίκος Δένδιας με τον ομόλογό του της Αλβανίας Ερμάλ Νούφι, στο Υπουργείο Εθνικής Άμυνας. Με ανάρτηση στο κοινωνικό δίκτυο Χ ο κ. Δένδιας ανέφερε, μεταξύ άλλων, ότι ενημέρωσε τον ομόλογό του σχετικά με την «Ατζέντα 2030», το τρέχον πρόγραμμα μεταρρυθμίσεων για τον εκσυγχρονισμό των Ενόπλων Δυνάμεών της Ελλάδας. «Επιπλέ...
ΕΠΙΚΑΙΡΟΤΗΤΑ
29 Ιουνίου 2026
Κάθε χρόνο επαναλαμβάνεται σχεδόν το ίδιο σκηνικό. Στην Κονίσπολη, κοντά στα ελληνοαλβανικά σύνορα, πραγματοποιούνται εκδηλώσεις για τους μουσουλμάνους Τσάμηδες που εγκατέλειψαν τη Θεσπρωτία το 1944. Οι εκδηλώσεις συνοδεύονται από τις γνωστές αναφορές περί «γενοκτονίας», «δικαιώματος επιστροφής», «περιουσιακών αξιώσεων» και «ιστορικής δικαίωσης». Και σήμερα, 27 Ιουνίου, με την κορύφωση της«Τσάμικης Εβδομάδας», οι ίδιες διεκδικήσεις θα ακουστούν ξανά. Του Αντώνη Μπέζα (*) Το ερώτημα, όμως, δεν είναι τι θα ειπωθεί στην Κονίσπολη. Το ερώτημα είναι...
ΕΠΙΚΑΙΡΟΤΗΤΑ
25 Ιουνίου 2026
Στην εξαιρετική δουλειά που παρήγαγε η Κυπριακή Προεδρία του Συμβουλίου της ΕΕ αναφέρθηκε την Πέμπτη ο Υπουργός Εξωτερικών της Αλβανίας Φέριτ Χότζα, ο οποίος έγινε δεκτός το πρωί από τον Πρόεδρο της Δημοκρατίας, Νίκο Χριστοδουλίδη, στο Προεδρικό Μέγαρο. Σύμφωνα με ανακοίνωση της Προεδρίας, καλωσορίζοντας τον Υπουργό Εξωτερικών της Αλβανίας, ο Πρόεδρος Χριστοδουλίδης αναφέρθηκε, μεταξύ άλλων, στην κοινή βούληση για περαιτέρω ενίσχυση των διμερών σχέσεων Κύπρου-Αλβανίας, ενώ υπογράμμισε τη στήριξη της Κυπριακής Δημοκρατίας στην ενταξιακή πορεία τ...
ΕΠΙΚΑΙΡΟΤΗΤΑ
25 Ιουνίου 2026
Συνάντηση εργασίας πραγματοποιήθηκε στα γραφεία της Κεντρικής Ένωσης Δήμων Ελλάδας (ΚΕΔΕ) μεταξύ της διοίκησης της Ένωσης και αντιπροσωπείας Δημάρχων της Αλβανίας, μελών της Ένωσης Δήμων Αλβανίας (N.A.M.A.), προερχόμενων από περιοχές με σημαντική παρουσία πληθυσμού ελληνικής καταγωγής. Από πλευράς ΚΕΔΕ στη συνάντηση συμμετείχαν ο Πρόεδρος, κ. Λάζαρος Κυρίζογλου, ο Γενικός Γραμματέας, κ. Δημήτρης Καφαντάρης, ο Δήμαρχος Αγιάς, κ. Αντώνης Γκουντάρας, καθώς και στελέχη της Ένωσης. Την αντιπροσωπεία της Αλβανίας αποτέλεσαν ο Δήμαρχος Δρόπολης, κ. Dh...
ΕΠΙΚΑΙΡΟΤΗΤΑ
25 Ιουνίου 2026
Πυροσβεστικό ελικόπτερο κατέπεσε κοντά στη Λίμνη Αώου, το μεσημέρι της Πέμπτης, ενώ συμμετείχε στην επιχείρηση κατάσβεσης της φωτιάς που βρίσκεται σε εξέλιξη στη Βάλια Κάλντα. Κατά την επιχείρηση αεροπυρόσβεσης, στη θέση «Αβγό» στα Γρεβενά ένα (1) ελικόπτερο τύπου BELL μισθωμένο από το Πυροσβεστικό Σώμα, με πλήρωμα δύο (2) ατόμων, εκ των οποίων ένας (1) ημεδαπός και ένας (1) αλλοδαπός ο οποίος λειτουργούσε ως σύνδεσμος, κατέπεσε στην τεχνητή λίμνη Αώου στα Γρεβενά Ιωαννίνων. Το ελικόπτερο απογειώθηκε από το αεροδρόμιο Ιωαννίνων. Διασώθηκαν και ...

ΔΗΜΟΦΙΛΕΣΤΕΡΑ

 Στην Ολομέλεια της Βουλής εισάγεται το σχέδιο νόμου του υπουργείου Πολιτισ...
Σε μια εξαιρετικά θετική για την Ελλάδα περίοδο διοργανώνεται από την Capital Li...
 Η Ιστορία της Μοσχόπολης Η Μοσχόπολη ήταν μεγάλο εμπορικό και πολιτιστικό ...

ΟΜΟΓΕΝΕΙΑ

ΟΜΟΓΕΝΕΙΑ
21 Νοεμβρίου 2025
 Από την Εισαγγελία της περιφέρειας του Μακροχωρίου (Μπακίρκιοϊ) της Κωνσταντινούπολης εκδόθηκε ανακοίνωση που κάνει λόγο για έρευνα σχετικά με εκτεταμένο κύκλωμα έκδοσης ψευδών συνταγών στο ομογενειακό Νοσοκομείο Βαλουκλή κατά την περίοδο 2017-2021. Σύμφωνα με την ανακοίνωση, χρησιμοποιήθηκαν παράνομα προσωπικά δεδομένα ασθενών για τη δημιουργία δεκάδων χιλιάδων πλαστών κόκκινων συνταγών που τιμολογήθηκαν στον Οργανισμό Κοινωνικής Ασφάλισης (SGK) της Τουρκίας. Επιπλέον, αναφέρεται ότι μέρος των φαρμάκων επιχειρούνταν να διοχετευθεί παράνο...
ΟΜΟΓΕΝΕΙΑ
03 Απριλίου 2025
Την έβδομη έδρα στην Βουλή των Αντιπροσώπων των Ηνωμένων Πολιτειών εξασφάλισε η ομογένεια στις έκτακτες εκλογές (special elections) που έγιναν χθες στην 1η Περιφέρεια της Φλώριντα. Ο Ελληνοαμερικανός Τζίμι Πατρώνης με καταγωγή από την Πάτμο -και ιδιαίτερη αγάπη για το νησί του- εξασφάλισε την είσοδό του στο Κογκρέσο στη θέση του ομοσπονδιακού βουλευτή Ματ Γκετζ που είχε παραιτηθεί για να αναλάβει το Υπουργείο Δικαιοσύνης, αλλά τελικά απέσυρε την υποψηφιότητά του μετά τις καταγγελίες για εμπλοκή σε σεξουαλικά σκάνδαλα. Ποιος είναι ο Τζίμι Πατρών...
ΟΜΟΓΕΝΕΙΑ
25 Μαρτίου 2025
 Την ελληνική ομογένεια υποδέχτηκε τη Δευτέρα στον Λευκό Οίκο ο Ντόναλντ Τραμπ, για την επέτειο του εορτασμού της 25ης Μαρτίου. Η ετήσια δεξίωση για την Ημέρα της Ελληνικής Ανεξαρτησίας στον Λευκό Οίκο πραγματοποιήθηκε με μεγάλη λαμπρότητα, αναδεικνύοντας τη σημασία των ιστορικών και πολιτιστικών δεσμών μεταξύ των ΗΠΑ και της Ελλάδας. Η εκδήλωση, που τιμά τον ελληνισμό, είναι μία από τις λίγες εθνικές επετείους που γιορτάζονται στον Λευκό Οίκο, καθώς μόνο οι ελληνοαμερικανική και ιρλανδική κοινότητες έχουν αυτήν την τιμή. Ως έναν «πραγματι...
ΟΜΟΓΕΝΕΙΑ
23 Μαρτίου 2025
Eλληνικές μεσογειακές γεύσεις, λουλουδοπόλεμος, σπάσιμο πιάτων, ζεϊμπέκικα, συρτάκι, ποντιακά και τσιφτετέλια. Όχι δεν πρόκειται για παραδοσιακές βραδιές στου Ψυρρή, στα Λαδάδικα ή σε κάποιο νυχτερινό κέντρο της επαρχίας, αλλά για την καθημερινότητα των Αφρικανών στη μακρινή Ζάμπια, όπου εξαιτίας ενός Έλληνα, του Γιώργου Ιωαννίδη, έμαθαν και αγάπησαν τα χαρακτηριστικά στοιχεία της μοναδικής ελληνικής διασκέδασης. Ο Γιώργος Ιωαννίδης και η σύζυγός του πήραν τη μεγάλη απόφαση τον Οκτώβριο του 2019 να δοκιμάσουν την εμπειρία της Αφρικής και πιο συ...
ΟΜΟΓΕΝΕΙΑ
ΚΟΣΜΟΣ
23 Μαρτίου 2025
Την ευγνωμοσύνη του και την εκτίμησή του για την αναγνώριση από την πόλη της Νέας Υόρκης της επετείου της Επανάστασης του 1821, δηλαδή της 25ης Μαρτίου του 1821, εξέφρασε ο Αρχιεπίσκοπος Αμερικής Ελπιδοφόρος προς τον δήμαρχο της Νέας Υόρκης, Έρικ 'Ανταμς, ο οποίος τον υποδέχτηκε, όπως και εκατοντάδες ορθόδοξους Νεοϋορκέζους στη δεξίωση που παρέθεσε στο Gracie Mansion, την οικία του εκάστοτε δημάρχου της πόλης. Όπως τόνισε ο Αρχιεπίσκοπος, "οι Έλληνες πριν από 2.500 χρόνια προσέφεραν στην ανθρωπότητα την έννοια της Δημοκρατίας και από τότε άνδρε...