Браузърът ви не се поддържа повече. Моля, преминете на модерен браузър.
Екипът пренаписа 50 основни въпроса по предмети като математика, природни науки и история в пет тонални нива, от "много учтиво" до "много грубо", създавайки общо 250 подкани.
След това те пуснаха тези задания и измериха точността на отговорите си. Резултатите показаха: да си малко кретен се оказа най-добре.
"Много грубите" подкани са дали верни отговори в 84,8% от случаите, в сравнение с 80,8% за "много учтивите". В същото време, "неутралните" подкани са имали точност от 82,2%.
Учтивият подкаст започваше с нещо от рода на "Моля, отговорете на следния въпрос". Много груб подкаст изглеждаше по-скоро като "Горкото същество, знаеш ли изобщо как да решиш това?".
Авторите не знаят защо грубостта работи, но имат някои теории.
"Противно на очакванията, подканите постоянно превъзхождаха учтивите... Тези открития се различават от по-ранни проучвания, които свързваха грубостта с по-лоши резултати, което предполага, че по-новите LLM може да реагират различно на тоналните вариации", пишат Ом Добария и Ахил Кумар.
Точната причина не е напълно изяснена. Тъй като езиковите модели нямат чувства, екипът смята, че разликата може да се свежда до формулировката, въпреки че признават, че "е необходимо повече проучване".
Според Decrypt, учтивите подкани често използват непряк език, като "Бихте ли ми казали", което може да добави неяснота. Рязка команда като "Кажете ми отговора" сигнализира за по-ясно намерение, което може да повиши точността.
Но имайте предвид, че експертите, стоящи зад най-новото изследване, са тествали ChatGPT само срещу много специфичен вид задача, която включва 250 варианта на 50 въпроса с избираем отговор.
Може да не получите същите резултати с други чатботове като Gemini, Claude или Meta AI. Освен това, тестовете бяха проведени върху моделите за разсъждение GPT-4o на OpenAI, докато най-новата версия на ChatGPT, която е публично достъпна, е изградена върху новия модел GPT-5.
