Чим довша бесіда — тим більше «галюцинацій»: нові дані про ШІ

Популярні чат-боти зі штучним інтелектом після тривалого спілкування з користувачами починають демонструвати більше помилок і неточностей. Таких висновків дійшли дослідники Microsoft Research спільно з Salesforce, повідомляє Windows Central.

Під час дослідження було проаналізовано понад 200 тисяч розмов із чат-ботами на основі великих мовних моделей. Результати показали, що сумарний рівень помилок у довгих діалогах може зростати більш ніж на 100%. Користувачі найчастіше скаржаться на так звані «галюцинації» — вигадані або неточні факти.

Експеримент охопив провідні моделі, зокрема GPT-4.1, Gemini 2.5 Pro, Claude 3.7 Sonnet та DeepSeek R1.

Якщо під час одноразових запитів такі системи демонструють приблизно 90% успішних відповідей, то у тривалих розмовах із додатковими уточненнями цей показник знижується до 65%. З ускладненням контексту ефективність моделей помітно падає.

Дослідники також зафіксували явище «роздування відповідей»: у багатоходових діалогах тексти ставали довшими на 20–300%. Водночас разом із обсягом зростала кількість припущень та помилкових тверджень, які закріплювалися в контексті та впливали на подальші відповіді.

Навіть моделі з розширеними можливостями міркування, такі як OpenAI o3 та DeepSeek R1, не змогли повністю уникнути цього ефекту.

Автори підкреслюють, що мова не йде про буквальне «тупішання» моделей. Йдеться радше про обмеження в утриманні великого обсягу інформації та коректній інтерпретації складного контексту під час тривалого діалогу.

Як зазначає Windows Central, ці особливості варто враховувати під час інтеграції чат-ботів у продукти, орієнтовані на довгу взаємодію з користувачами. Адже помилки та «галюцинації» можуть вводити людей в оману — особливо якщо ШІ використовується як джерело точної або критично важливої інформації.

Поділитися:

АКТУАЛЬНО

ЦІКАВЕ ЗА ТЕМОЮ
У ФОКУСІ

Боротьба Трампа і Байдена ставить під сумнів американську допомогу Україні

Виділення американської допомоги Україні цього року “стає все менш імовірним” через Трампа, пише журналіст Гідеон Рахман у Financial Times. Наслідки цього рішення можуть бути “катастрофічними”, адже Україна вже потерпає від нестачі боєприпасів, через що зростають втрати, знижується приплив добровольців і немає можливості планувати майбутні операції. Європейці заповнити дефіцит американської зброї не зможуть щонайменше до 2025 […]

Із Франції продовжують йти суперечливі заяви щодо можливості відправки військових в Україну

Франція розглядає можливість дозволити спецпризначенцям та іншим військовим підрозділам перетинати кордон України, щоб поставити перед РФ “стратегічну дилему”, повідомляє газета Monde з посиланням на джерела у статті “Західні союзники України вже мають військову присутність у країні”. “В Україні присутні всі держави-союзники. Йдеться не про бойові підрозділи, а, наприклад, є представники кожної розвідки”, – повідомило виданню […]

Президент США розповів, як Вашингтон отримує прибуток від співпраці з Україною

Президент США Дональд Трамп заявив, що Сполучені Штати отримують фінансову вигоду від угоди з Україною щодо рідкоземельних металів. За його словами, домовленості дозволяють повернути кошти, витрачені на допомогу Україні, а в перспективі навіть принести прибуток. Про угоду Трамп згадав 4 січня під час спілкування з журналістами на борту літака Air Force One. Він наголосив, що […]

Придністров’я отримує газ із Молдови

Невизнане “Придністров’я” почало отримувати газ із Молдови. Як повідомляє видання NewsMaker із посиланням на виконувача обов’язків директора компанії “Молдовагаз” Вадима Чебана, постачання розпочалося о 8:30 ранку. Газ, який уже перебуває у трубопроводах на правому березі Дністра, спрямовується на лівий берег, а його обсягів достатньо “для підтримки тиску”. Президент “Придністров’я” Вадим Красносельський подякував президентці Єврокомісії Урсулі […]

Bitcoin зріс на 2,5% на тлі новин від SEC і Vanguard Group

Bitcoin знову піднявся у ціні, досягнувши найвищого рівня за останні два тижні після періоду затяжного спаду. Вартість криптовалюти зросла на 2,5% — до приблизно 93 900 доларів, що стало найкращим показником з 17 листопада. На піку відновлення котирування наближалися до позначки у 94 000 доларів. Певне зростання зафіксували й інші ключові криптовалюти, включно з Ether, […]

Ллойд Остін заявив , що є мета – щоб “у якийсь момент” Україна вступила до Альянсу

Республіканці запитували главу Пентагону в Сенаті, наскільки мета прийняття України в НАТО відповідає планам завершити війну. Сенатор Томмі Тюбервіль запитав, чи вступить Україна в НАТО. Ллойд Остін відповів, що це є метою – щоб “у якийсь момент” Україна вступила до Альянсу, і це те, чого хоче сам Київ. “Якби ви були Росією, ви б хотіли […]

В ООН повідомили що присутність українців принесла Польщі у 8,5 раза більше прибутку ніж витрат

Присутність українських біженців позитивно вплинула на економіку Польщі, спричинивши її зростання без втрат для місцевих жителів. Про це йдеться у звіті аудиторської компанії Deloitte, оприлюдненому 12 червня Організацією Об’єднаних Націй. Згідно з дослідженням, з лютого 2022 року до червня 2025-го українці сприяли зростанню ВВП Польщі на понад 328,6 млрд злотих (близько 85 млрд доларів за […]

Вчені виявили новий прихований розлом, що загрожує великим землетрусом

Дослідники оприлюднили деталі нової знахідки — невидимого розлому, який, як вважають, може стати причиною потужного землетрусу в регіоні Мармурового моря. Нова тривимірна модель, розроблена в рамках дослідження, показує, як зміни в міцності гірських порід під водами цього моря можуть спровокувати серйозні сейсмічні події вздовж Північно-Анатолійського розлому. Відповідно до інформації, наданої на...