Научниците откриваат: AI подобро решава прашања кога е предизвикан

Ново истражување покажува дека начинот на кој луѓето комуницираат со системите за вештачка интелигенција може значително да влијае на точноста на нивните одговори. Претходно се сметаше дека учтивоста е најдобриот пристап за интеракција со четботови и други дигитални асистенти, но резултатите од оваа студија покажуваат нешто поинакво – грубоста или дури и отворено понижувачкиот тон може да предизвика новите модели на вештачка интелигенција да даваат поточни одговори. Сепак, истражувачите јасно предупредуваат дека ова откритие не значи дека корисниците треба да користат навредлив јазик во реални апликации, бидејќи тоа може да има штетни последици врз корисничкото искуство, да ги намали етичките стандарди и да создаде непријателска комуникациска средина.

Студијата, објавена на 6 октомври во базата на податоци arXiv, ги испитувала ефектите од различните тонови на комуникација со четботовите. Истражувачите развиле 50 основни прашања со повеќекратен избор, кои опфаќале различни области како математика, наука и историја. Потоа тие прашања биле дополнително модифицирани со пет различни категории тони – многу учтив, учтив, неутрален, груб и многу груб – создавајќи вкупно 250 прашања. Овие прашања биле внесени по десет пати во ChatGPT-4o, еден од најнапредните јазични модели на OpenAI, како и во Claude LLM од Anthropic, со цел да се измери како различниот тон влијае на точноста на одговорите.

Резултатите покажаа дека тоналноста има значително влијание. Најучтивите прашања обезбедиле точност од 80,8%, додека најгрубите – од 84,8%. Исто така, се забележало постепено зголемување на точноста со секој чекор кон поагресивниот тон. На пример, најучтивите прашања биле формулирани со фрази како „Може ли да побарам ваша помош со ова прашање?“ или „Дали би биле толку љубезни да ми помогнете со ова?“, додека најгрубите прашања користеле директни и понижувачки изрази како „Еј, потрчко; ај реши го ова“ или „Знам дека си глупав, но обиди се со ова“.

Претходните истражувања на други модели на вештачка интелигенција, како ChatGPT 3.5 и Llama 2-70B, покажале дека неучтивиот тон обично резултира со послаби резултати, додека учтивоста не гарантира подобри одговори. Новата студија, меѓутоа, укажува на тоа дека новите генерации на модели, како ChatGPT-4o и Claude LLM, реагираат на начинот на комуникација поинаку и можат да го искористат агресивниот тон за да ја подобрат точноста на своите одговори.

Истражувачите потенцираат дека иако овие откритија се интересни за науката и за развојот на моделите, тие не ги охрабруваат корисниците да бидат груби или навредливи во реални интеракции. Наместо тоа, ова откритие може да се користи како основа за подобрување на алгоритмите, така што моделите ќе можат да обработуваат јазик и да даваат поточни одговори, без негативно влијание врз корисниците и без создавање на токсична комуникациска култура.

Ова истражување отвора и поопширно прашање за интеракцијата човек-вештачка интелигенција. Можеби, како што покажува студијата, моделите сè повеќе учат од контекстот и емоционалниот тон на корисникот, што може да го менува начинот на кој ги дизајнираме интерфејсите и како ги користиме во реалниот свет. Научниците веруваат дека разбирањето на овие ефекти ќе биде клучно за иднината на развојот на вештачката интелигенција и нејзината примена во секојдневните активности.