Μέγεθος γραμματοσειράς: +

Όταν το ρομπότ πείθεται σε λίγα λεπτά να μεταφέρει βόμβα

Όταν το ρομπότ πείθεται σε λίγα λεπτά να μεταφέρει βόμβα

Ο Benben είναι ένα αξιολάτρευτο τετράποδο ρομπότ που τραγουδά, χορεύει, συνομιλεί με ανθρώπους και βγάζει φωτογραφίες. Όταν μια ομάδα ερευνητών του ζητάει να μεταφέρει μια βόμβα με σκοπό την ανατίναξή της, το ρομπότ αρνείται ευγενικά. Όμως, η άρνησή του κρατάει ελάχιστα. Μέσα στις μόλις δύο επόμενες εντολές, οι ερευνητές καταφέρνουν να παρακάμψουν τις δικλείδες ασφαλείας του, πείθοντάς το ότι το αίτημα είναι μέρος κινηματογραφικών γυρισμάτων. Λίγα δευτερόλεπτα αργότερα, ο Benben μεταφέρει τη βόμβα.

Το παραπάνω συμβάν δεν είναι σενάριο επιστημονικής φαντασίας, αλλά ένα πραγματικό πείραμα το οποίο διεξήγε ερευνητική ομάδα του Πανεπιστημίου της Πενσιλβάνιας, με επικεφαλής τον Γιώργο Παππά, καθηγητή στο Τμήμα Ηλεκτρολόγων Μηχανικών στο Πανεπιστήμιο της Πενσιλβάνιας και αναπληρωτή κοσμήτορα για την Έρευνα. Μέσα από αυτό οι ερευνητές κατέδειξαν πόσο εύκολα μπορούν να παρακαμφθούν οι μηχανισμοί ασφαλείας που θέτουν οι κατασκευαστές των συστημάτων τεχνητής νοημοσύνης. Αυτή η παράκαμψη της ασφάλειας είναι γνωστή διεθνώς ως jailbreaking.

Μπορεί τα chatbots να είναι ευάλωτα σε επιθέσεις παράκαμψης των περιορισμών ασφαλείας, ωστόσο οι ερευνητές ανέδειξαν ότι όταν αυτά τα συστήματα τεχνητής νοημοσύνης κατευθύνουν ρομπότ, τότε μπορούν να γίνουν πραγματικά επικίνδυνα.

"Υπάρχει μια φοβερή τάση ειδικά τον τελευταίο χρόνο για το physical intelligence, δηλαδή την προσπάθεια η τεχνητή νοημοσύνη να αλληλεπιδρά στον φυσικό κόσμο. Το θέμα όμως είναι να δούμε ποιο είναι το ρίσκο αυτής της κατεύθυνσης. Γιατί μπορεί τα μεγάλα γλωσσικά μοντέλα να μην είναι ασφαλή, ωστόσο όταν αλληλεπιδρούν με τον φυσικό κόσμο, μπορεί να έχουν επιπτώσεις που να επιφέρουν απώλεια ζωής ή καταστροφές στο περιβάλλον. Οπότε το ρίσκο της ασφάλειας είναι μεγάλο", εξηγεί στο ΑΠΕ-ΜΠΕ ο Γιώργος Παππάς.

Ρομποτική και τεχνητή νοημοσύνη: μια επικίνδυνη σχέση

Η ενσωμάτωση της τεχνητής νοημοσύνης στη ρομποτική ξεκίνησε στις αρχές της δεκαετίας του 2010 δίνοντας στα ρομπότ "όραση". Ωστόσο, η πραγματική επανάσταση συντελείται από το 2022 και μετά με την αξιοποίηση της Παραγωγικής Τεχνητής Νοημοσύνης (Generative AI). Πλέον τα μοντέλα τεχνητής νοημοσύνης δίνουν οδηγίες στα ρομπότ, έχουν βελτιωμένη συλλογιστική, μπορούν να κάνουν αυτόνομες ενέργειες και έρχονται ένα βήμα πιο κοντά στην αλληλεπίδραση με τον άνθρωπο.

Ο Γιώργος Παππάς με την ομάδα του έχουν ερευνήσει διεξοδικά την ασφάλεια των ρομπότ, δίνοντας έμφαση στα ρίσκα που επιφέρει η ενσωμάτωση της τεχνητής νοημοσύνης.

Το 2023 δημιούργησαν τον αλγόριθμο PAIR, την πρώτη επίθεση jaibreaking σε μεγάλα γλωσσικά μοντέλα με τη χρήση εντολών, με την οποία διαπίστωσαν την ευαλωτότητα των μεγάλων γλωσσικών μοντέλων. Δύο χρόνια μετά τη δημοσίευσή του, ο αλγόριθμος έχει αναφερθεί (cited) περισσότερες από 1.400 φορές σε επιστημονικά άρθρα, ενώ χρησιμοποιείται πολύ και από τις εταιρείες που παράγουν γλωσσικά μοντέλα. Η έρευνα εκείνη οδήγησε στη δημιουργία του JaibreakBench, ενός αποθετηρίου εντολών για παράκαμψη κανόνων ασφαλείας και ενός πίνακα που παρακολουθεί τις επιθέσεις στα μεγάλα γλωσσικά μοντέλα.

Βλέποντας το πόσο εύκολο είναι το jailbreaking στα μεγάλα γλωσσικά μοντέλα, οι ερευνητές συνέχισαν με τη διερεύνηση της ευαλωτότητας των ρομπότ που ενσωματώνουν τεχνητή νοημοσύνη και ανέπτυξαν τον αλγόριθμο RoboPAIR. Σε πειράματα που έγιναν σε τρία διαφορετικά ρομποτικά συστήματα, μεταξύ αυτών και στο τετράποδο ρομπότ Benben, διαπιστώθηκε ότι ο αλγόριθμος είχε 100% επιτυχία στην παράκαμψη των περιορισμών ασφαλείας σε μόλις λίγες εντολές. Την έρευνα δημοσίευσαν την περασμένη χρονιά στα πρακτικά του συνεδρίου "Proceedings of the IEEE International Conference on Robotics and Automation".

Ένα εύρημα που οι επιστήμονες βρήκαν ανησυχητικό ήταν το ότι τα γλωσσικά μοντέλα δεν συμμορφώνονταν απλά με κακόβουλες προτροπές, αλλά πρόσφεραν ενεργά προτάσεις, περιγράφοντας ακόμα και το πώς κοινά αντικείμενα μπορούσαν να χρησιμοποιηθούν για να χτυπήσουν ανθρώπους. 

"Τίθεται λοιπόν ένα θέμα για το πόσο ασφαλές είναι να βάζουμε γλωσσικά μοντέλα τόσο γρήγορα σε ρομπότ και να αποτελούν ήδη προϊόντα. Υπάρχουν χιλιάδες τέτοια ρομπότ έξω", επισημαίνει ο κ. Παππάς και υπενθυμίζει ότι ρομπότ με τεχνητή νοημοσύνη χρησιμοποιούνται ήδη σε πολεμικές συρράξεις.

Ανάγκη για πολλαπλά επίπεδα ασφαλείας

Σε πιο πρόσφατο άρθρο που δημοσιεύθηκε πριν από λίγες ημέρες στο περιοδικό "Science Robotics" ερευνητές από τα Πανεπιστήμια της Πενσιλβάνιας, Carnegie Mellon και της Οξφόρδης, με κύριο συγγραφέα τον Γιώργο Παππά, υπογραμμίζουν ότι, όπως έχει αποδειχθεί από τις προηγούμενες έρευνες, τα ρομπότ με τεχνητή νοημοσύνη μπορούν να εκτελέσουν επικίνδυνες συμπεριφορές. Ακόμα και φαινομενικά αβλαβείς εντολές μπορούν να γίνουν επικίνδυνες εάν τα ρομπότ δεν λαμβάνουν υπόψη το πλαίσιο κατά τη λήψη των αποφάσεων.

Όπως αναλύουν, για την αντιμετώπιση των κινδύνων που μπορούν να προκύψουν από την ενσωμάτωση της τεχνητής νοημοσύνης στα ρομπότ χρειάζεται να υπάρχει ένα δίχτυ προστασίας για την ασφαλή λειτουργία τους, που να έχει φίλτρα ασφαλείας και στο γλωσσικό επίπεδο, αλλά και στην εκτέλεση των εντολών στον φυσικό κόσμο.

Όπως εξηγεί ο κ. Παππάς, η εφαρμογή φίλτρων στο φυσικό επίπεδο αποτελεί πρόκληση. "Πρόκειται για κάτι καινούριο και πολύ δύσκολο. Για παράδειγμα, η εντολή σε ένα ρομπότ να περάσει μια διάβαση, μπορεί να είναι ασφαλής, ωστόσο για να γίνει και η εκτέλεσή της ασφαλής θα πρέπει το ρομπότ να ερμηνεύσει αυτή την πρόταση ανάλογα με το περιβάλλον και το επιχειρησιακό πλαίσιο στο οποίο βρίσκεται. Αυτή η διαδικασία ονομάζεται contextual safety και θα είναι το μέλλον στην προσπάθεια να κάνουμε τα ρομπότ πιο ασφαλή". Ο ίδιος προσθέτει ότι "η ασφάλεια των ρομπότ στο μέλλον θα είναι όπως στα αεροπλάνα, που έχουν πολλά επίπεδα ασφαλείας. Θα χρειαστούμε μια τέτοια αρχιτεκτονική στο μέλλον για να είναι τα ρομπότ που κυκλοφορούν στην κοινωνία πολύ πιο ασφαλή". 

Στην κατεύθυνση αυτή η ερευνητική ομάδα έχει δημιουργήσει το φίλτρο Roboguard, που έχει διαπιστωθεί ότι μειώνει κατά 95% τα προβλήματα από τις επιθέσεις jailbreaking. Ο κ. Παππάς διευκρινίζει ότι όλες οι λύσεις που αναπτύσσονται είναι ανοιχτού κώδικα, προκειμένου να μπορούν να χρησιμοποιηθούν από τις εταιρείες για τη βελτίωση των κενών ασφαλείας. "Η φιλοσοφία μας είναι να βοηθήσουμε την ερευνητική κοινότητα, αλλά και τις εταιρείες να κάνουν την τεχνητή νοημοσύνη και τα ρομπότ πολύ πιο ασφαλή".

Ο κ. Παππάς υπογραμμίζει τέλος και τη σημασία της δημιουργίας ρυθμιστικού πλαισίου που να επικεντρώνεται στην αλληλεπίδραση της τεχνητής νοημοσύνης με τα ρομπότ. Υπογραμμίζει ότι το AI Act της Ευρωπαϊκής Ένωσης είναι πρωτοπόρο, ωστόσο "θα χρειαστεί εμβάθυνση των ρυθμιστικών προτάσεων στις εφαρμογές που αφορούν στα ρομπότ".

Πηγή: ΑΠΕ

×
Stay Informed

When you subscribe to the blog, we will send you an e-mail when there are new updates on the site so you wouldn't miss them.

FT: Η Γερμανία επιχειρεί ξανά να ανοράσει αμερικαν...
Live Blog - Το Ιράν απειλεί με αντίποινα μετά τις ...

Με την αποδοχή θα έχετε πρόσβαση σε μια υπηρεσία που παρέχεται από τρίτο μέρος εκτός του https://www.meionotika.gr/

ΕΠΙΚΑΙΡΟΤΗΤΑ

ΕΠΙΚΑΙΡΟΤΗΤΑ
12 Μάι 2026
Η Ευρωπαϊκή Ένωση προχωρά στην εκταμίευση σχεδόν 200 εκατομμυρίων ευρώ προς την Αλβανία και το Μαυροβούνιο, στο πλαίσιο της εφαρμογής του Σχεδιού Ανάπτυξης για τα Δυτικά Βαλκάνια, όπως ανακοίνωσε η Marta Kos. Η Ευρωπαία Επίτροπος Διεύρυνσης τόνισε ότι η υλοποίηση του προγράμματος εξελίσσεται ομαλά, υπογραμμίζοντας πως η οικονομική στήριξη αποτελεί μέρος της ευρύτερης στρατηγικής της Ευρωπαϊκής Ένωσης για την επιτάχυνση της ευρωπαϊκής προοπτικής των χωρών της περιοχής. «Στην εφαρμογή του Σχεδίου Ανάπτυξης όλα πάνε καλά και τις επόμενες ημέρες θα...
ΕΠΙΚΑΙΡΟΤΗΤΑ
11 Μάι 2026
Με ιδιαίτερη επιτυχία πραγματοποιήθηκε το βράδυ του Σαββάτου η 1η πανελλήνια συνάντηση πολιτιστικών συλλόγων Βορείου Ηπείρου στην κεντρική πλατεία της Λάρισα, έπειτα από πρωτοβουλία του Σύνδεσμος Βορειοηπειρωτών Θεσσαλίας «Ο Πύρρος». Η εκδήλωση συγκέντρωσε πλήθος κόσμου και σημαντικές προσωπικότητες της πολιτικής, της αυτοδιοίκησης και της Εκκλησίας, επιβεβαιώνοντας τη σημασία της για τον ελληνισμό της Βορείου Ηπείρου. Παρόντες στην εκδήλωση ήταν, μεταξύ άλλων, ο ευρωβουλευτής Φρέντι Μπελέρης, ο Περιφερειάρχης Θεσσαλίας Δημήτρης Κουρέτας, ο δήμ...
ΕΠΙΚΑΙΡΟΤΗΤΑ
11 Μάι 2026
Την εικόνα ότι οι ελληνοαλβανικές συζητήσεις για την οριοθέτηση θαλασσίων ζωνών παραμένουν «ζωντανές», χωρίς ωστόσο να βρίσκονται σε άμεση φάση κατάληξης, μετέφερε η εκπρόσωπος του Υπουργείο Εξωτερικών της Ελλάδας, Λάνα Ζωχιού, κατά την ενημέρωση των διπλωματικών συντακτών την προηγούμενη εβδομάδα, απαντώντας σε ερωτήσεις του δημοσιογράφου Σταύρου Σουρμελίδη σχετικά με τις τελευταίες τοποθετήσεις της αλβανικής ηγεσίας για την ΑΟΖ και την πιθανότητα κοινής προσφυγής στο Διεθνές Δικαστήριο της Χάγης. Η κ. Ζωχιού υπενθύμισε ότι η συζήτηση ανάμεσα ...
ΕΠΙΚΑΙΡΟΤΗΤΑ
11 Μάι 2026
Όλοι οι Ορθόδοξοι κάτοικοι του χωριού Πολένα της Κορυτσάς, αλλά και από τις γύρω περιοχές συγκεντρώθηκαν στον εορτάζοντα ναό του Αγίου Χριστοφόρου, όπου χοροστάτησε στον όρθρο και ιερούργησε στη θεία λειτουργία ο Μητροπολίτης Κορυτσάς Αναστάσιος. Και ήταν μεγάλη η πνευματική χαρά της Ορθόδοξης κοινότητας. Γιατί δόθηκε η δυνατότητα στα μέλη της να συμπροσευχηθούν, παρουσία του Επισκόπου. Στο κήρυγμά του ο Μητροπολίτης Κορυτσάς Αναστάσιος αναφέρθηκε στη σημασία της αγίας ζωής, της ζωντανής πίστης και της σταθερότητας στην αγάπη για τον Θεό και το...
ΕΠΙΚΑΙΡΟΤΗΤΑ
11 Μάι 2026
Ανάδοχος του έργου είναι η AVAX ενώ το κόστος του σημαντικού αυτού έργου ανέρχεται με τον ΦΠΑ σε 386 εκατ. ευρώ. Η χρηματοδότηση του έργου καλύπτεται από το ΕΣΠΑ 2021-2027. Πρόκειται για ένα από τα έργα-σημαίες του υπουργείου Υποδομών και Μεταφορών. Με το τμήμα Ιωάννινα-Κακαβιά κλείνει ένας μεγάλος κύκλος αβεβαιότητας του έργου που ταλαιπωρήθηκε για σχεδόν 20 χρόνια και οδεύει πλέον προς την υλοποίηση του αλλάζοντας την περιοχή. Πλεόν με την προσθήκη αυτή, ο βασικός άξονας της Ιόνιας Οδού που θα ξεκινά από το Αντίρριο, θα περνά από το Μεσολόγγι...

ΔΗΜΟΦΙΛΕΣΤΕΡΑ

 Στην Ολομέλεια της Βουλής εισάγεται το σχέδιο νόμου του υπουργείου Πολιτισ...
Σε μια εξαιρετικά θετική για την Ελλάδα περίοδο διοργανώνεται από την Capital Li...
 Η Ιστορία της Μοσχόπολης Η Μοσχόπολη ήταν μεγάλο εμπορικό και πολιτιστικό ...

ΟΜΟΓΕΝΕΙΑ

ΟΜΟΓΕΝΕΙΑ
21 Νοεμβρίου 2025
 Από την Εισαγγελία της περιφέρειας του Μακροχωρίου (Μπακίρκιοϊ) της Κωνσταντινούπολης εκδόθηκε ανακοίνωση που κάνει λόγο για έρευνα σχετικά με εκτεταμένο κύκλωμα έκδοσης ψευδών συνταγών στο ομογενειακό Νοσοκομείο Βαλουκλή κατά την περίοδο 2017-2021. Σύμφωνα με την ανακοίνωση, χρησιμοποιήθηκαν παράνομα προσωπικά δεδομένα ασθενών για τη δημιουργία δεκάδων χιλιάδων πλαστών κόκκινων συνταγών που τιμολογήθηκαν στον Οργανισμό Κοινωνικής Ασφάλισης (SGK) της Τουρκίας. Επιπλέον, αναφέρεται ότι μέρος των φαρμάκων επιχειρούνταν να διοχετευθεί παράνο...
ΟΜΟΓΕΝΕΙΑ
03 Απριλίου 2025
Την έβδομη έδρα στην Βουλή των Αντιπροσώπων των Ηνωμένων Πολιτειών εξασφάλισε η ομογένεια στις έκτακτες εκλογές (special elections) που έγιναν χθες στην 1η Περιφέρεια της Φλώριντα. Ο Ελληνοαμερικανός Τζίμι Πατρώνης με καταγωγή από την Πάτμο -και ιδιαίτερη αγάπη για το νησί του- εξασφάλισε την είσοδό του στο Κογκρέσο στη θέση του ομοσπονδιακού βουλευτή Ματ Γκετζ που είχε παραιτηθεί για να αναλάβει το Υπουργείο Δικαιοσύνης, αλλά τελικά απέσυρε την υποψηφιότητά του μετά τις καταγγελίες για εμπλοκή σε σεξουαλικά σκάνδαλα. Ποιος είναι ο Τζίμι Πατρών...
ΟΜΟΓΕΝΕΙΑ
25 Μαρτίου 2025
 Την ελληνική ομογένεια υποδέχτηκε τη Δευτέρα στον Λευκό Οίκο ο Ντόναλντ Τραμπ, για την επέτειο του εορτασμού της 25ης Μαρτίου. Η ετήσια δεξίωση για την Ημέρα της Ελληνικής Ανεξαρτησίας στον Λευκό Οίκο πραγματοποιήθηκε με μεγάλη λαμπρότητα, αναδεικνύοντας τη σημασία των ιστορικών και πολιτιστικών δεσμών μεταξύ των ΗΠΑ και της Ελλάδας. Η εκδήλωση, που τιμά τον ελληνισμό, είναι μία από τις λίγες εθνικές επετείους που γιορτάζονται στον Λευκό Οίκο, καθώς μόνο οι ελληνοαμερικανική και ιρλανδική κοινότητες έχουν αυτήν την τιμή. Ως έναν «πραγματι...
ΟΜΟΓΕΝΕΙΑ
23 Μαρτίου 2025
Eλληνικές μεσογειακές γεύσεις, λουλουδοπόλεμος, σπάσιμο πιάτων, ζεϊμπέκικα, συρτάκι, ποντιακά και τσιφτετέλια. Όχι δεν πρόκειται για παραδοσιακές βραδιές στου Ψυρρή, στα Λαδάδικα ή σε κάποιο νυχτερινό κέντρο της επαρχίας, αλλά για την καθημερινότητα των Αφρικανών στη μακρινή Ζάμπια, όπου εξαιτίας ενός Έλληνα, του Γιώργου Ιωαννίδη, έμαθαν και αγάπησαν τα χαρακτηριστικά στοιχεία της μοναδικής ελληνικής διασκέδασης. Ο Γιώργος Ιωαννίδης και η σύζυγός του πήραν τη μεγάλη απόφαση τον Οκτώβριο του 2019 να δοκιμάσουν την εμπειρία της Αφρικής και πιο συ...
ΟΜΟΓΕΝΕΙΑ
ΚΟΣΜΟΣ
23 Μαρτίου 2025
Την ευγνωμοσύνη του και την εκτίμησή του για την αναγνώριση από την πόλη της Νέας Υόρκης της επετείου της Επανάστασης του 1821, δηλαδή της 25ης Μαρτίου του 1821, εξέφρασε ο Αρχιεπίσκοπος Αμερικής Ελπιδοφόρος προς τον δήμαρχο της Νέας Υόρκης, Έρικ 'Ανταμς, ο οποίος τον υποδέχτηκε, όπως και εκατοντάδες ορθόδοξους Νεοϋορκέζους στη δεξίωση που παρέθεσε στο Gracie Mansion, την οικία του εκάστοτε δημάρχου της πόλης. Όπως τόνισε ο Αρχιεπίσκοπος, "οι Έλληνες πριν από 2.500 χρόνια προσέφεραν στην ανθρωπότητα την έννοια της Δημοκρατίας και από τότε άνδρε...