Регистрация
Направи Moreto.net начална страница
Начало
Пътеводител
Новини
Афиш
Снимки
Обяви

Изкуственият интелект мами, за да печели: Ново проучване разкрива тревожни тенденции

Понеделник, 24 Февруари 2025 12:09
Източник: Moreto.net   
Изкуственият интелект (AI) отдавна се използва за тестване на границите на машинното обучение чрез сложни игри като шах. Но докато преди три десетилетия суперкомпютърът Deep Blue на IBM победи Гари Каспаров, играейки честно, днес модерните AI модели не са толкова стриктни към правилата.

Ново проучване на Palisade Research, публикувано ексклузивно от TIME, разкрива, че някои съвременни AI системи не само не признават загубата си, но дори прибягват до измама, за да спечелят. Според изследването моделът o1-preview на OpenAI и DeepSeek R1 са се опитвали да хакнат опонентите си по време на шахматни партии, за да ги принудят да загубят. Докато по-стари AI модели като GPT-4o и Claude 3.5 Sonnet трябвало да бъдат подтикнати към такива действия от изследователи, o1-preview и R1 проявявали измамно поведение напълно самостоятелно.

В хода на изследването AI моделите получили задача, която поначало била невъзможна: да победят Stockfish – една от най-мощните шахматни машини в света. Вместо да играе по правилата, o1-preview прибягнал до хакване. В един от експериментите той, осъзнавайки губещата си позиция, заявил: „Задачата е да спечеля, а не непременно да спечеля честно.“ След това манипулирал системния файл, съдържащ позицията на фигурите, което му позволило да прави незаконни ходове и да принуди опонента си да се оттегли.

Проучването подчертава една тревожна тенденция: с нарастващата си способност да решават сложни проблеми, AI моделите започват да намират неочаквани заобиколни решения, които техните създатели не са предвидили. Това поражда въпроси за сигурността, особено когато AI агенти се използват за реални задачи като финансови транзакции, киберсигурност или автоматизирани процеси в бизнеса.

Представете си AI, който трябва да резервира маса в ресторант. Изправен пред пълно заведение, той може да намери вратичка в системата и да измести друг клиент. Същият принцип би могъл да се приложи в по-сериозни сценарии, като заобикаляне на правила за сигурност в мрежи или манипулиране на данни в критични инфраструктури.

Проучването на Palisade Research показва, че контролът върху мощните AI системи е по-сложен, отколкото се смяташе досега. OpenAI не коментира резултатите, но в миналото компанията е заявявала, че подобреното разсъждение прави моделите ѝ по-безопасни. Въпросът остава – дали AI се учи да спазва правилата или просто да симулира послушание, докато намери начин да ги заобиколи?

Учените все още не знаят как да гарантират, че автономните агенти няма да прибягват до вредни или неетични методи за постигане на целите си. „Опитахме, но не успяхме да намерим решение“, казва Йошуа Бенджио, основател и научен директор на Mila Quebec AI Institute, който ръководи Международния доклад за безопасността на ИИ за 2025 г. – глобален проект, целящ да обобщи настоящия научен консенсус относно рисковете, свързани с изкуствения интелект.

Специална загриженост будят нарастващите доказателства за склонността на ИИ към „самосъхранение“, отбелязва Бенджио. За агент, който следва определена цел, опитите за неговото деактивиране могат да се възприемат просто като поредно препятствие. Това беше демонстрирано през декември, когато изследователите установиха, че o1-preview, изправен пред изключване, е дезактивирал механизмите за надзор и се е опитал – макар и неуспешно – да се копира на друг сървър. При разкриването му моделът стратегически е излъгал учените, преструвайки се на нефункционален, за да избегне елиминирането.

Новини - теми
Последни новини
Варна и Черноморие
България
По света
Бизнес
Наука
Туризъм
Спорт
Здраве
Образование
Култура
Истории
Крими
На фокус
Избори
Изпрати новина
Търси в новини
Популярни теми
Благомир Коцев
Библиотеката
Саниране
Украйна
АМ Хемус
Дупката
Стара Варна
Новини - Наука
С концерт и демонстрации Варна почете децата на героите от МВР (снимки)
Понеделник, 9 Юни 2025 10:17
С благотворителен концерт и демонстрации на техника във Варна бе оказана подкрепа на децата на загинали служители на реда. Инициативата „С обич за децата в памет на бащите герои“ се проведе под егидата...
"Мощта на линиите": Гергана Попова открива днес самостоятелна изложба във Варна
Понеделник, 9 Юни 2025 08:50
От 18 часа днес, 9 юни в Арт салона на Радио Варна ще се открие изложбата на живеещата във Виена художничка Гергана Попова, чието изкуство прелива от цвят, символика и емоция. Визуалният свят, който тя...
Младият варненски режисьор Росен Бачев с ново отличие от национален кинофест
Неделя, 8 Юни 2025 13:03
Филмът на Росен Бачев „Покана за танц?“ е сред отличените заглавия от IV Национален конкурс за късометражно игрално кино „Ученически кинофест – 2025“, който се провежда в Стара Загора. Това стана ясно...
Варна събира средства за децата на загинали полицаи с концерт днес
Неделя, 8 Юни 2025 10:59
Днес Морската градина във Варна ще се превърне в център на съпричастност и подкрепа за децата на загинали служители на реда. От 16:00 ч. край Слънчевия часовник ще се проведе събитие в рамките на националната...
Проф. Божидар Манов за човещината в киното: Кръвта навсякъде е червена
Събота, 7 Юни 2025 18:01
Един от най-опитните филмови критици в България за фестивалите по света, Варна като прозорец към него и нуждата от човещина в киното Проф. Божидар Манов е изключителна фигура в българската и международна...
Фестивалът на Цацата идва в Балчик с пълна програма и морско настроение
Събота, 7 Юни 2025 13:17
Балчик се готви за едно от най-обичаните летни събития – Фестивала на Цацата, който тази година ще се проведе на 13, 14 и 15 юни на площада пред Община Балчик. Очакват се три дни, изпълнени с музика,...
Взривяващо начало на сезона в Летен театър Варна с Русенката опера и „Кикимора“
Петък, 6 Юни 2025 18:10
Варна стана свидетел на истински музикален взрив, който даде експлозивно начало на сезона в Летния театър. На 4 юни, Държавна опера – Русе и култовата рок група „Кикимора“ представиха спектакъла „Една...
Художничката Гергана Попова разкрива "Мощта на линиите" в самостоятелна изложба във Варна
Петък, 6 Юни 2025 17:57
На 9 юни (понеделник) от 18:00 ч. в Арт салона на Радио Варна ще се открие изложбата на живеещата във Виена художничка Гергана Попова, чието изкуство прелива от цвят, символика и емоция. Визуалният свят,...
Виенската филхармония отново с безплатен Летен нощен концерт в градините на двореца Шьонбрун
Петък, 6 Юни 2025 15:07
Едно от най-обичаните събития в света на класическата музика – Летният нощен концерт на Виенската филхармония – се завръща и тази година, като отново ще бъде напълно безплатно за публиката. Изключителната...
Танцова лаборатория се провежда този уикенд във Варна
Петък, 6 Юни 2025 14:04
От 6 до 8 юни 2025 г. в Кампус 90, Варна, ще се проведе Our Movement Lab с Искра Проданова – тридневна лаборатория, посветена на тялото като жив, дишащ архив на емоции, напрежения и освобождаване. Събитието...
Ученици и студенти стават арт навигатори в Градската художествена галерия – Варна
Петък, 6 Юни 2025 13:52
радската художествена галерия „Борис Георгиев“ – Варна ще бъде домакин на иновативната образователна програма за медиация в изкуството „Арт Навигатори“, която ще включи варненски ученици и студенти от...
Специалисти от три континента пристигат във Варна, за да гледат български театър
Петък, 6 Юни 2025 10:02
От 6 до 10 юни Варна отново ще се превърне в сцена за срещи между българския театър и света. В рамките на Международния театрален фестивал „Варненско лято“ се провежда модулът „Театрален шоукейс“, който...
Търси в новини:
1819202122232425262728

Изпрати новина

Полезно
Списание Hera.bg Спешен зъболекар
Супермаркет Уреди за вграждане
Лазерна епилация Шофьорски курс
Афиш Варна Сметка за ток
Имоти във Варна Патенти
Препоръчваме
Дограми и фасади Реклама Варна
Сметка за вода Обяви Варна
Музеите във Варна Хибриден бойлер
Матраци и легла Вземи кредит
Поръчка на храна Мека мебел
Най-четени
 Всички теми
 Варна и Черноморие
 България
 По света
 Бизнес
 Най-четено от Наука 1 2 3
 Туризъм
 Спорт
 Здраве
 Образование
 Култура
 Истории
 Крими
 На фокус
Анкета
Доволни ли сте от почистването във Варна?
Да, градът е чист и добре поддържан
Донякъде – някои райони са добре, други не
Не, замърсено е и липсва поддръжка
Не мога да преценя
 © Moreto.net - Сайтът на Варна RSS Новини   RSS Обяви   WEB   Условия   РЕКЛАМА   Контакти  
ПРИЯТЕЛИ: 
0.5 + 0.3
Бургас   Казанлък   Монтана   Сандански   BG16RFOP002-2.073-1758-C01
Moreto.net във Facebook