Изкуственият интелект мами, за да печели: Ново проучване разкрива тревожни тенденции
Понеделник, 24 Февруари 2025 12:09Източник: Moreto.net
 
Изкуственият интелект (AI) отдавна се използва за тестване на границите на машинното обучение чрез сложни игри като шах. Но докато преди три десетилетия суперкомпютърът Deep Blue на IBM победи Гари Каспаров, играейки честно, днес модерните AI модели не са толкова стриктни към правилата.
Ново проучване на Palisade Research, публикувано ексклузивно от TIME, разкрива, че някои съвременни AI системи не само не признават загубата си, но дори прибягват до измама, за да спечелят. Според изследването моделът o1-preview на OpenAI и DeepSeek R1 са се опитвали да хакнат опонентите си по време на шахматни партии, за да ги принудят да загубят. Докато по-стари AI модели като GPT-4o и Claude 3.5 Sonnet трябвало да бъдат подтикнати към такива действия от изследователи, o1-preview и R1 проявявали измамно поведение напълно самостоятелно.
В хода на изследването AI моделите получили задача, която поначало била невъзможна: да победят Stockfish – една от най-мощните шахматни машини в света. Вместо да играе по правилата, o1-preview прибягнал до хакване. В един от експериментите той, осъзнавайки губещата си позиция, заявил: „Задачата е да спечеля, а не непременно да спечеля честно.“ След това манипулирал системния файл, съдържащ позицията на фигурите, което му позволило да прави незаконни ходове и да принуди опонента си да се оттегли.
Проучването подчертава една тревожна тенденция: с нарастващата си способност да решават сложни проблеми, AI моделите започват да намират неочаквани заобиколни решения, които техните създатели не са предвидили. Това поражда въпроси за сигурността, особено когато AI агенти се използват за реални задачи като финансови транзакции, киберсигурност или автоматизирани процеси в бизнеса.
Представете си AI, който трябва да резервира маса в ресторант. Изправен пред пълно заведение, той може да намери вратичка в системата и да измести друг клиент. Същият принцип би могъл да се приложи в по-сериозни сценарии, като заобикаляне на правила за сигурност в мрежи или манипулиране на данни в критични инфраструктури.
Проучването на Palisade Research показва, че контролът върху мощните AI системи е по-сложен, отколкото се смяташе досега. OpenAI не коментира резултатите, но в миналото компанията е заявявала, че подобреното разсъждение прави моделите ѝ по-безопасни. Въпросът остава – дали AI се учи да спазва правилата или просто да симулира послушание, докато намери начин да ги заобиколи?
Учените все още не знаят как да гарантират, че автономните агенти няма да прибягват до вредни или неетични методи за постигане на целите си. „Опитахме, но не успяхме да намерим решение“, казва Йошуа Бенджио, основател и научен директор на Mila Quebec AI Institute, който ръководи Международния доклад за безопасността на ИИ за 2025 г. – глобален проект, целящ да обобщи настоящия научен консенсус относно рисковете, свързани с изкуствения интелект.
Специална загриженост будят нарастващите доказателства за склонността на ИИ към „самосъхранение“, отбелязва Бенджио. За агент, който следва определена цел, опитите за неговото деактивиране могат да се възприемат просто като поредно препятствие. Това беше демонстрирано през декември, когато изследователите установиха, че o1-preview, изправен пред изключване, е дезактивирал механизмите за надзор и се е опитал – макар и неуспешно – да се копира на друг сървър. При разкриването му моделът стратегически е излъгал учените, преструвайки се на нефункционален, за да избегне елиминирането.
|
Новини - теми |
Търси в новини |
Популярни теми |
|
 |
Новини - Наука |
 |
 Китайски гигант пуска два нови AI модела на фона на засилващата се конкуренция
Неделя, 16 Март 2025 11:44
Китайската компания Baidu обяви, че е пуснала два нови модела с изкуствен интелект, включително такъв, фокусиран върху разсъжденията, който според нея съперничи на модела на DeepSeek. Компанията се стреми...
| |
 |
 Светът наблюдава първото за годината лунно затъмнение
Петък, 14 Март 2025 14:19
Жителите на Аржентина, Мексико и Колумбия наблюдаваха частичното лунно затъмнение, което продължи до 12.01 ч. българско време и в последните си минути беше видимо от Австралия и Япония, съобщава АФП.
Лунното...
| |
 |
 Отбелязваме Деня на числото Пи
Петък, 14 Март 2025 09:12
Светът отбелязва един от най-необичайните празници – Деня на числото Пи. Датата е избрана заради американското й изписване – 3.14, което съвпада с най-краткия начин за обозначаване на математическата константа,...
| |
 |
 Нов етап в хранителната индустрия: Великобритания се готви за лабораторно отгледана храна
Понеделник, 10 Март 2025 18:54
Месо, млечни продукти и захар, отгледани в лаборатория, може да бъдат пуснати за първи път в продажба в Обединеното кралство до две години – по-рано от очакваното, съобщава БиБиСи.
Агенцията за хранителни...
| |
 |
 Starship на SpaceX отново експлодира, отломки се посипаха над Карибите
Петък, 7 Март 2025 10:06
Космическият кораб Starship на SpaceX експлодира в космоса минути след излитането от Тексас, което доведе до спиране на въздушния трафик в части от Флорида, предаде Ройтерс.
Това е вторият пореден...
| |
 |
 Парад на планетите ни очаква тази вечер
Петък, 28 Февруари 2025 14:55
Зашеметяващ "парад на планетите" ще украси нощното небе тази вечер, като седем небесни съседи на Земята ще се присъединят към шоуто.
В планетарния парад ще се включат 7 планети от Слънчевата система...
| |
 |
 Част от Антарктическата ни експедиция се прибира днес в родината
Петък, 28 Февруари 2025 10:27
Предпоследната група участници в XXXIII-та Национална Антарктическа експедиция се завръща днес по обяд на летище „Васил Левски“ в София, с полет AZ 520 нa ITA Airways. В групата е и ръководителят на експедицията...
| |
 |
 Президентът удостои с висши държавни отличия български учени
Четвъртък, 27 Февруари 2025 14:51
България може да се развива като модерна и просперираща държава само ако се отнасяме с уважение и признателност към хората на науката и прогреса. Това заяви държавният глава Румен Радев на церемония в...
| |
 |
 Астероид носи името Перперикон
Вторник, 25 Февруари 2025 17:49
В базата данни в Центъра за малки планети в Харвард вече фигурира астероидът с българско име "Перперикон". Името е предложено от доц. Веселка Радева, ръководител на Планетариума във Висшето военноморско...
| |
 |
 Изкуственият интелект мами, за да печели: Ново проучване разкрива тревожни тенденции
Понеделник, 24 Февруари 2025 12:09
Изкуственият интелект (AI) отдавна се използва за тестване на границите на машинното обучение чрез сложни игри като шах. Но докато преди три десетилетия суперкомпютърът Deep Blue на IBM победи Гари Каспаров,...
| |
 |
 Черната дупка в центъра на Млечния път излъчва мощни изригвания (видео)
Събота, 22 Февруари 2025 15:27
Свръхмасивната черна дупка в центъра на Млечния път изглежда е домакин на зрелищно светлинно шоу, напомнящо диско топка. Благодарение на космическия телескоп „Джеймс Уеб“ на НАСА, астрофизици успяха да...
| |
 |
 OneCourt създаде устройство, което позволява на слепи фенове да следят спортни мачове на живо
Петък, 21 Февруари 2025 13:32
За спортните фенове малко преживявания могат да се сравнят с емоцията от присъствието на жив мач на любимия отбор. За хората с увредено зрение обаче това често означава да се лишат от детайлния коментар...
| |
|
Изпрати новина
|
|
|
 |
Полезно |
Препоръчваме |
Най-четени |
Анкета |
|