Регистрация
Направи Moreto.net начална страница
Начало
Пътеводител
Новини
Афиш
Снимки
Обяви

Изкуственият интелект мами, за да печели: Ново проучване разкрива тревожни тенденции

Понеделник, 24 Февруари 2025 12:09
Източник: Moreto.net   
Изкуственият интелект (AI) отдавна се използва за тестване на границите на машинното обучение чрез сложни игри като шах. Но докато преди три десетилетия суперкомпютърът Deep Blue на IBM победи Гари Каспаров, играейки честно, днес модерните AI модели не са толкова стриктни към правилата.

Ново проучване на Palisade Research, публикувано ексклузивно от TIME, разкрива, че някои съвременни AI системи не само не признават загубата си, но дори прибягват до измама, за да спечелят. Според изследването моделът o1-preview на OpenAI и DeepSeek R1 са се опитвали да хакнат опонентите си по време на шахматни партии, за да ги принудят да загубят. Докато по-стари AI модели като GPT-4o и Claude 3.5 Sonnet трябвало да бъдат подтикнати към такива действия от изследователи, o1-preview и R1 проявявали измамно поведение напълно самостоятелно.

В хода на изследването AI моделите получили задача, която поначало била невъзможна: да победят Stockfish – една от най-мощните шахматни машини в света. Вместо да играе по правилата, o1-preview прибягнал до хакване. В един от експериментите той, осъзнавайки губещата си позиция, заявил: „Задачата е да спечеля, а не непременно да спечеля честно.“ След това манипулирал системния файл, съдържащ позицията на фигурите, което му позволило да прави незаконни ходове и да принуди опонента си да се оттегли.

Проучването подчертава една тревожна тенденция: с нарастващата си способност да решават сложни проблеми, AI моделите започват да намират неочаквани заобиколни решения, които техните създатели не са предвидили. Това поражда въпроси за сигурността, особено когато AI агенти се използват за реални задачи като финансови транзакции, киберсигурност или автоматизирани процеси в бизнеса.

Представете си AI, който трябва да резервира маса в ресторант. Изправен пред пълно заведение, той може да намери вратичка в системата и да измести друг клиент. Същият принцип би могъл да се приложи в по-сериозни сценарии, като заобикаляне на правила за сигурност в мрежи или манипулиране на данни в критични инфраструктури.

Проучването на Palisade Research показва, че контролът върху мощните AI системи е по-сложен, отколкото се смяташе досега. OpenAI не коментира резултатите, но в миналото компанията е заявявала, че подобреното разсъждение прави моделите ѝ по-безопасни. Въпросът остава – дали AI се учи да спазва правилата или просто да симулира послушание, докато намери начин да ги заобиколи?

Учените все още не знаят как да гарантират, че автономните агенти няма да прибягват до вредни или неетични методи за постигане на целите си. „Опитахме, но не успяхме да намерим решение“, казва Йошуа Бенджио, основател и научен директор на Mila Quebec AI Institute, който ръководи Международния доклад за безопасността на ИИ за 2025 г. – глобален проект, целящ да обобщи настоящия научен консенсус относно рисковете, свързани с изкуствения интелект.

Специална загриженост будят нарастващите доказателства за склонността на ИИ към „самосъхранение“, отбелязва Бенджио. За агент, който следва определена цел, опитите за неговото деактивиране могат да се възприемат просто като поредно препятствие. Това беше демонстрирано през декември, когато изследователите установиха, че o1-preview, изправен пред изключване, е дезактивирал механизмите за надзор и се е опитал – макар и неуспешно – да се копира на друг сървър. При разкриването му моделът стратегически е излъгал учените, преструвайки се на нефункционален, за да избегне елиминирането.

Новини - теми
Последни новини
Варна и Черноморие
България
По света
Бизнес
Наука
Туризъм
Спорт
Здраве
Образование
Култура
Истории
Крими
На фокус
Избори
Изпрати новина
Търси в новини
Популярни теми
Благомир Коцев
Библиотеката
Саниране
Украйна
АМ Хемус
Дупката
Стара Варна
Новини от Варна, региона и света
Зомбори като Зоро: Турнето на един съвременен герой
Събота, 9 Август 2025 14:59
След като разпали летните сцени в Пловдив, Русе, Велико Търново, Стара Загора, Белоградчик и Бургас, мюзикълът „ЗОРО“ на Русенската опера се задава с размах и към морската столица! На 24 август, от 21:00...
Хазартните игри в Черна гора генерират приходи от 20,77 милиона евро за първите седем месеца
Събота, 9 Август 2025 18:29
Приходите на Черна гора от хазартни игри и конкурси с награди през първите седем месеца на годината възлизат на 20,77 милиона евро, което е с 17,09% повече на годишна база, предаде за БТА черногорската...
Ръководството на ЦСКА заяви подкрепа към Радослав Златков и Душан Керкез
Събота, 9 Август 2025 17:54
Ръководството на ЦСКА излезе с официална позиция след поредица от негативни резултати в последните месеци. В нея се подчертава, че клубът преминава през мащабна трансформация – спортно-техническа, инфраструктурна...
Граждани и близки на Александър се събират на 12 август във Варна за справедливост и мерки за безопасност на пътя
Събота, 9 Август 2025 17:15
На 12 август 2025 г. (вторник) от 9:30 часа пред сградата на Община Варна ще се съберат граждани, близки и съпричастни към трагичния случай с Александър Маринов – млад мъж на 25 години, загубил живота...
Рязко увеличение на чревните инфекции във Варненска област
Събота, 9 Август 2025 17:04
Регионалната здравна инспекция – Варна отчита значителен ръст на чревните инфекции за периода 25 – 31 юли 2025 г. Регистрирани са 63 случая при 47 за предходната седмица. Най-много са заболелите с...
Вертолети AS-532 AL Cougar се включиха в потушаването на пожара до Сунгурларе
Събота, 9 Август 2025 16:15
Екипажи от състава на 24-а авиобаза в Крумово с два вертолета AS-532 AL Cougar се включиха в действията по потушаването на пожара, възникнал в района на гр. Сунгурларе, обл. Бургас. Вертолетите излетяха...
„Български пощи“ ще обменят левове в евро в над 2200 станции в страната
Събота, 9 Август 2025 15:43
От 1 януари 2026 г. „Български пощи“ ще започнат да извършват обмяна на левове в евро в 2230 свои станции, включително в най-отдалечените населени места без банкови клонове. Първите шест месеца услугата...
Почина астронавтът Джим Ловел, командирът на легендарната мисия „Аполо 13“
Събота, 9 Август 2025 14:26
Астронавтът Джим Ловел, командвал мисията „Аполо 13“ и върнал екипажа ѝ безопасно на Земята през 1970 г., е починал на 97-годишна възраст. От НАСА заявиха, че Ловел е „превърнал потенциална трагедия...
Какво ще бъде времето в неделя
Събота, 9 Август 2025 13:55
През нощта ще бъде ясно и почти тихо. Утре ще бъде слънчево. Ще духа слаб, в източните райони умерен, временно силен вятър от изток. Температурите още малко ще се повишат и максималните ще бъдат между...
Зам.-министърът на отбраната Илиев поздрави студентите от Випуск 2025 на ВВМУ „Н. Й. Вапцаров“ за успешното дипломиране
Събота, 9 Август 2025 13:46
„Днес ставате част от една трудна и престижна професия. Гордейте се с името и авторитета на училището си и го пазете и утвърждавайте през цялата си кариера! Завършвате едно от най-успешните български висши...
Поредна нощна акция по заведенията край морския бряг във Варна (снимки)
Събота, 9 Август 2025 13:24
Снощи се проведе акция по заведенията на морския бряг във Варна, организирана от служители на „Криминална полиция“ и екипи на Първо и Второ РУ. Целта на операцията беше установяване на малолетни и непълнолетни...
България е втората най-силно засегната страна в ЕС от горски пожари за 2024 г.
Събота, 9 Август 2025 12:51
2024 г. се превърна в най-горещата година в Европа от началото на системните наблюдения през 1940 г. По-високите температури и по-сухият климат, съчетани с по-чести засушавания и продължителни горещи вълни,...
Търси в новини:
1234567891011

Изпрати новина

Полезно
Списание Hera.bg Спешен зъболекар
Супермаркет Уреди за вграждане
Лазерна епилация Шофьорски курс
Афиш Варна Сметка за ток
Имоти във Варна Патенти
Препоръчваме
Дограми и фасади Реклама Варна
Сметка за вода Обяви Варна
Музеите във Варна Хибриден бойлер
Матраци и легла Вземи кредит
Поръчка на храна Мека мебел
Най-четени
 Най-четено от Всички теми 1 2 3
 Варна и Черноморие
 България
 По света
 Бизнес
 Наука
 Туризъм
 Спорт
 Здраве
 Образование
 Култура
 Истории
 Крими
 На фокус
Анкета
Доволни ли сте от почистването във Варна?
Да, градът е чист и добре поддържан
Донякъде – някои райони са добре, други не
Не, замърсено е и липсва поддръжка
Не мога да преценя
 © Moreto.net - Сайтът на Варна RSS Новини   RSS Обяви   WEB   Условия   РЕКЛАМА   Контакти  
ПРИЯТЕЛИ: 
0.4 + 0.7
Бургас   Казанлък   Монтана   Сандански   BG16RFOP002-2.073-1758-C01
Moreto.net във Facebook